CN106575230A - 用于可变触觉输出的语义框架 - Google Patents

用于可变触觉输出的语义框架 Download PDF

Info

Publication number
CN106575230A
CN106575230A CN201580044092.6A CN201580044092A CN106575230A CN 106575230 A CN106575230 A CN 106575230A CN 201580044092 A CN201580044092 A CN 201580044092A CN 106575230 A CN106575230 A CN 106575230A
Authority
CN
China
Prior art keywords
tactile
output
warning
event
methods according
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580044092.6A
Other languages
English (en)
Inventor
C·茂塞特
G·布彻
H·弗维杰
J·伊夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN202211185555.9A priority Critical patent/CN115756151A/zh
Priority to CN202211196129.5A priority patent/CN115756154A/zh
Priority to CN202211185564.8A priority patent/CN115700434A/zh
Priority to CN202211185573.7A priority patent/CN115963922A/zh
Publication of CN106575230A publication Critical patent/CN106575230A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B3/00Focusing arrangements of general interest for cameras, projectors or printers
    • G03B3/10Power-operated focusing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0745Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in an input/output transactions management context
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751Error or fault detection not based on redundancy
    • G06F11/0763Error or fault detection not based on redundancy by bit configuration check, e.g. of formats or tags
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B3/00Audible signalling systems; Audible personal calling systems
    • G08B3/10Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21Monitoring or handling of messages
    • H04L51/224Monitoring or handling of messages providing notification on incoming messages, e.g. pushed notifications of received messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M19/00Current supply arrangements for telephone systems
    • H04M19/02Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/014Force feedback applied to GUI
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources

Abstract

本发明提供了将多个触觉输出变型组织成紧密结合的语义框架的方法和装置,该语义框架使用有关警示条件和触发、应用程序情境和其他条件的各种信息提供在相关事件之间共享特征的触觉输出系统。在一些实施方案中,事件种类或应用程序种类提供用于对应触觉输出的基础。在一些实施方案中,是否打开警示突出性设置为将增大的突出性触觉输出添加到针对警示的标准触觉输出的基础。在一些实施方案中,一致的触觉提供相关联的应用程序种类、应用程序和/或情境的品牌化。

Description

用于可变触觉输出的语义框架
技术领域
本公开一般涉及用于提供触觉反馈的方法和装置,并且更具体地涉及对应于与设备或应用程序相关联的条件的触觉反馈的语义框架的方法和装置。
背景技术
触觉反馈系统为用户提供通过触摸或接触与子系统交互的能力。触觉系统通过使用致动器、传感器或这两者而有助于这些触觉交互。
发明内容
本文的实施方案公开了将多个触觉输出变型组织成紧密结合的语义框架的触觉反馈方法和装置,该语义框架使用有关警示条件和触发、应用程序情境和其他条件的各种信息提供在相关事件之间共享特征的触觉输出系统。本公开涉及在各种条件下提供触觉响应的系统和方法。所公开的触觉响应方法可使用任何适当的软件、硬件或这两者来实现。
在一些实施方案中,在和与应用程序相关联的检测到的警示条件相关联的时间,与应用程序相关联的状态提供用于提供对应触觉输出的基础。例如,响应于检测到警示条件,确定在与警示条件相关联的时间与应用程序相关联的状态。如果在与警示条件相关联的时间应用程序处在活动状态,则提供代表警示条件出现的第一触觉输出以及如果在与警示条件相关联的时间应用程序处在不活动状态,则提供代表警示条件的出现并且不同于第一触觉输出的第二触觉输出。
在一些实施方案中,是否手动或自动触发检测到的警示条件提供用于提供对应触觉输出的基础。例如,响应于检测到警示条件,确定是否由手动发起事件触发警示条件。如果警示条件由手动发起事件触发,则提供对应于手动发起事件通知的第一触觉输出。如果警示条件由自动发起事件触发,则提供对应于自动发起事件通知的第二触觉输出并且第二触觉输出不同于第一触觉输出。
在一些实施方案中,检测到的警示条件与用户输入或者预先确定的系统事件相关联提供用于提供对应触觉输出的基础。例如,响应于检测到与接收对应用程序的用户输入相关联的第一警示,提供对应于用户输入的第一触觉输出。在第一触觉输出之后,响应于检测到与应用程序中的接收预先确定的系统事件相关联的第二警示条件,提供对应于预先确定的系统事件的比第一触觉输出更大强度的第二触觉输出。
在一些实施方案中,检测到的警示条件是否为多部分操作中的一部分提供用于提供对应触觉输出的基础。例如,响应于接收到对应于多部分操作中的第一部分的输入,发起正在进行的触觉输出序列。在发起之后以及响应于接收到对应于多部分操作中的第二部分的输入,终止正在进行的触觉输出序列。
在一些实施方案中,检测到的执行操作的请求是否为另一操作中的子组提供用于提供对应触觉输出的基础。例如,响应于检测到对应于执行第一操作的请求的第一输入,提供包括触觉分量的第一输出并且执行第一操作。在执行第一操作之后,以及响应于检测到对应于执行包括第一操作和辅助操作的第二操作的请求的第二输入,提供包括触觉分量的第二输出并且第二输出包括第一输出以及对应于辅助操作的辅助输出,并且执行第二操作。
在一些实施方案中,两个检测到的警示条件是否为相同或不同种类的警示条件或应用程序提供用于提供对应触觉输出的基础。例如,响应于检测到第一警示条件的出现,提供包括第一触觉分量和第一非触觉分量的第一输出。在提供第一输出之后,以及响应于检测到第二警示条件的出现,提供包括第二触觉分量和第二非触觉分量的第二输出。如果第一警示条件和第二警示条件为相同种类的警示条件中的不同警示条件,则第一输出和第二输出共享一个或多个相同分量并且具有一个或多个不同分量,但如果第一警示条件和第二警示条件为不同种类的警示条件中的不同警示条件,则第一触觉分量不同于第二触觉分量并且第一非触觉分量不同于第二非触觉分量。在另一示例中,
在一些实施方案中,
注意,本文描述的方法的各种实施方案可与本文所述的其他实施方案相结合。在说明书中描述的特征和优势并非包括全部,并且具体地,在阅览附图、说明书和权利要求书时许多另外特征和优势对于本领域技术人员来说将是明显的。而且,应当指出,出于可读性和指导性目的,在原则上选择了本说明书中使用的语言,并且可以不这样选择以描绘或界定本发明的主题。
附图说明
图1A为示出根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B为示出根据一些实施方案的用于事件处理的示例性部件的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3为根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的便携式多功能设备上的应用程序菜单的示例性用户界面。
图4B示出了根据一些实施方案的具有触敏表面的多功能设备的独立于显示器的示例性用户界面。
图5示出了根据一些实施方案的各种触觉波形形态的示例。
图6示出了根据一些实施方案的各种音频波形形态的示例。
图7为根据一些实施方案的检测与应用程序相关联的第一警示条件以及提供对应触觉输出的方法的流程图。
图8示出了根据一些实施方案的电子邮件应用程序的示例性用户界面。
图9为根据一些实施方案的检测与应用程序相关联的第一警示条件以及取决于该条件是否由手动或自动发起事件触发而提供触觉输出的方法的流程图。
图10为根据一些实施方案的从用户输入检测第一警示条件和从与应用程序相关联的预先确定的事件检测第二警示条件以及提供对应触觉输出的方法的流程图。
图11为根据一些实施方案的检测与多部分操作相关联的第一警示条件以及提供对应触觉输出的方法的流程图。
图12为根据一些实施方案的检测执行第一和第二操作的第一和第二输入,执行操作以及提供对应输出的方法的流程图。
图13为根据一些实施方案的检测第一和第二警示条件以及提供对应输出的方法的流程图。
图14为根据一些实施方案的电子设备的功能框图。
图15为根据一些实施方案的电子设备的功能框图。
图16为根据一些实施方案的电子设备的功能框图。
图17为根据一些实施方案的电子设备的功能框图。
图18为根据一些实施方案的电子设备的功能框图。
图19为根据一些实施方案的电子设备的功能框图。
图20示出了根据一些实施方案的包括第一声学端口的设备外壳。
图21A示出了根据一些实施方案的对应于自电容触摸像素电极和感测电路的触摸传感器电路。
图21B示出了根据一些实施方案的自电容触摸传感器。
图22A示出了根据一些实施方案的触觉致动器。
图22A示出了根据一些实施方案的触觉致动器。
图23A为一些实施方案的可穿戴设备。
图23B示出了根据一些实施方案的用户佩戴可穿戴设备以及第二电子设备在其口袋中。
图24示出了根据一些实施方案的可穿戴电子设备的示意图。
图25为根据一些实施方案的根据种类提供各种触觉和其他反馈警示的方法的流程图。
图26为根据一些实施方案的为各种触觉提供选择性的突出性增大的方法的流程图。
图27示出了根据一些实施方案的在设备上用于警示-突出性设置的示例性用户界面。
图28为根据一些实施方案的电子设备的功能框图。
图29为根据一些实施方案的电子设备的功能框图。
图30为根据一些实施方案的检测第一条件和第二条件以及生成包括触觉和音频输出的对应警示的方法的流程图。
图31示出了根据一些实施方案的波形的各种实例。
图32为根据一些实施方案的检测第一和第二情境下的第一条件以及生成包括触觉和音频输出的对应警示的方法的流程图。
图33a示出了根据一些实施方案的在时间上分别以及同时出现的各种触觉和音频波形。
图33b示出了根据一些实施方案的在时间上重叠的各种触觉和音频波形。
图33c示出了根据一些实施方案的在时间上重叠的各种触觉和音频波形。
图34为根据一些实施方案的电子设备的功能框图。
图35为根据一些实施方案的电子设备的功能框图。
具体实施方式
本文的实施方案公开了将多个触觉输出变型组织成紧密结合的语义框架的触觉反馈方法和装置,该语义框架使用有关警示条件和触发、应用程序情境和对应于触觉输出的其他条件的各种信息提供在相关事件之间共享特征的触觉输出系统。
在一些实施方案中,在和与应用程序相关联的检测到的警示条件相关联的时间,与应用程序相关联的状态提供用于提供对应触觉输出的基础。在一些实施方案中,是否手动或自动触发检测到的警示条件提供用于提供对应触觉输出的基础。在一些实施方案中,检测到的警示条件与用户输入或者预先确定的系统事件相关联提供用于提供对应触觉输出的基础。
在一些实施方案中,检测到的警示条件是否为多部分操作中的一部分提供用于提供对应触觉输出的基础。在一些实施方案中,检测到的执行操作的请求是否为另一操作中的子组提供用于提供对应触觉输出的基础。在一些实施方案中,两个检测到的警示条件是否为相同或不同种类的警示条件提供用于提供对应触觉输出的基础。
示例性设备
现在将详细地参考实施方案,这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。然而,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路、和网络,从而不会不必要地使实施方案的方面晦涩难懂。
还将理解的是,虽然术语“第一”、“第二”等在本文中在一些实例中用来描述各种元件,但这些元件不应受到这些术语限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一接触可以被命名为第二接触,并且类似地,第二接触可以被命名为第一接触,而不背离各种所描述的实施方案的范围。第一接触和第二接触两者都是接触,但它们不是同一接触。
在本文中对各种所描述的实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”(“a”,“an”)和“该”旨在也包括复数形式,除非情境另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”(“includes”,“including”,“comprises”和/或“comprising”)在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
如本文中所使用,根据情境,术语“如果”任选地被解释为意思是“当……时”或“在……时”或“响应于确定”或“响应于检测”。类似地,根据情境,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为意思是“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关联的过程的实施方案。在一些实施方案中,该设备是还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自Apple Inc.(Cupertino,California)的iPod设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型计算机或平板计算机。还应当理解,在一些实施方案中,设备不是便携式通信设备,而是具有触敏表面(例如触摸屏显示器和/或触摸板)的台式计算机。
在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。
所述设备通常支持各种应用程序,诸如以下中的一者或多者:绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、邮件应用程序、即时消息应用程序、健身支持应用程序、照片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
在设备上运行的各种应用程序任选地使用至少一个共用的物理用户界面设备诸如触敏表面。触敏表面的一种或多种功能以及显示在设备上的对应信息任选地从一种应用程序调整和/或变化至下一种应用程序和/或在相应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在关注具有触敏显示器的便携式设备的实施方案。图1A为示出根据一些实施方案的具有触敏显示器112的便携式多功能设备100的框图。触敏显示器112有时为了方便而被叫做“触摸屏”,并且有时可被称为或被叫做“触敏显示系统”。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备116和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100上的接触的强度的一个或多个强度传感器165(例如,触敏表面,诸如设备100的触敏显示系统112)。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面,诸如设备100的触敏显示系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如在本说明书和权利要求书中所使用,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量被合并(例如,加权平均数)以确定估计的接触力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触面积的大小和/或其变化、邻近接触的触敏表面的电容和/或其变化、和/或邻近接触的触敏表面的电阻和/或其变化任选地用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已超过强度阈值(例如,强度阈值是以与替代物测量对应的单位来描述的)。在一些具体实施中,接触力或压力的替代物测量值被转换成估计的力或压力,并且估计的力或压力用于确定是否已经超过强度阈值(例如,强度阈值是以压力的单位测量的压力阈值)。使用接触的强度作为用户输入的属性,从而允许用户访问用户在实地面积有限的尺寸更小的设备上本来不可访问的附加设备功能,该尺寸更小的设备用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件,诸如旋钮或按钮)。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感与设备或设备的部件的物理特征的所感知的变化对应。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。作为另一示例,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释为或感测为触敏表面的“粗糙度”。虽然由用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但存在触摸的许多感官知觉是大多数用户共有的。因此,当触觉输出被描述为与用户的特定感官知觉(例如,“松开点击”、“按下点击”、“粗糙度”)对应时,除非另外陈述,否则所生成的触觉输出与设备或其部件的物理位移对应,该物理位移将会生成典型(或普通)用户的所描述的感官知觉。
应当理解,设备100仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或这两者的组合来实现,包括一个或多个信号处理和/或专用集成电路。
存储器102任选地包括高速随机存取存储器,并且任选地还包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用来将设备的输入和输出外围设备耦接到CPU 120和存储器102。一个或多个处理器120运行或执行存储在存储器102中的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施方案中,外围设备接口118、CPU 120、和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些实施方案中,它们任选地被实现在独立的芯片上。
RF(射频)电路108接收和发送也被叫做电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号来与通信网络以及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信与网络以及其他设备进行通信,该网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。无线通信任选地使用多个通信标准、协议和技术中的任何一个,包括但不限于全球移动通信系统(GSM)、增强数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、仅数据(EV-DO)、HSPA、HSPA+、双小区HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11b、IEEE 802.1lg和/或IEEE 802.11n),音频电路110、扬声器111和麦克风113提供了用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听的声波。音频电路110还接收由麦克风113根据声波转换的电信号。音频电路110将电信号转换为音频数据,并将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口,该可移除的音频输入/输出外围设备诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116耦接到外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其他输入控制设备116接收电信号/发送电信号到其他输入控制设备116。其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等等。在一些另选的实施方案中,输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者):键盘、红外线端口、USB端口以及指针设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的向上/向下按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。
触敏显示器112提供设备与用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送至触摸屏112。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任意组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部的视觉输出对应于用户界面对象。
触摸屏112具有基于触觉和/或触觉接触从用户接受输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与显示在触摸屏112上的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在一个示例性实施方案中,触摸屏112和用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但在其他实施方案中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在示例性实施方案中,使用投射式互电容感测技术,诸如来自Apple Inc.(Cupertino,California)的iPod 中发现的技术。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等等,与触摸屏112接触。在一些实施方案中,用户界面被设计用于主要与基于手指的接触和手势工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入翻译为精确的指针/光标位置或命令,以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触摸板(未示出)。在一些实施方案中,触摸板是设备的触敏区域,该触敏区域与触摸屏不同,其不显示视觉输出。触摸板任选地是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器(例如,发光二极管(LED))和任何其他与便携式设备中电力的生成、管理和分配相关联的部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为代表图像的数据。结合成像模块143(也叫做相机模块),光学传感器164任选地捕获静态图像或视频。在一些实施方案中,光学传感器位于设备100的后部上,与设备前部上的触摸屏显示器112相背对,使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,另一光学传感器位于设备的前部上,使得用户在触摸屏显示器上观看其他视频会议参与者的同时,任选地获得该用户的图像以用于视频会议。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变计、电容式力传感器、电力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示系统112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于设备100的与位于设备100的前部上的触摸屏显示器112相背对的后部上。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接到外围设备接口118的接近传感器166。另选地,接近传感器166耦接到I/O子系统106中的输入控制器160。在一些实施方案中,当多功能设备被置于用户耳朵附近时(例如,用户正在打电话时),接近传感器关闭并禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子系统106中触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件;和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如,用于将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面之内/之外)或侧向地(例如,在与设备100的表面相同的平面中前后地)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的与位于设备100的前部上的触摸屏显示器112相背对的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到外围设备接口118的加速度计168。另选地,加速度计168任选地耦接到I/O子系统106中的输入控制器160。在一些实施方案中,基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图显示信息。设备100任选地除了加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息,如在2008年1月4日提交的美国专利申请11/969,800中所述,其全文以引用方式并入本文。
在一些实施方案中,被存储在存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外,在一些实施方案中,存储器102存储设备/全局内部状态157,如图1A和图3中所示。设备/全局内部状态157包括以下各项中的一者或多者:活动应用程序状态,该活动应用程序状态用于指示哪些应用程序(如果有的话)当前是活动的;显示状态,该显示状态用于指示什么应用程序、视图或其他信息占据触摸屏显示器112的各个区域;传感器状态,该传感器状态包括从设备的各个传感器和输入控制设备116获得的信息;和关于设备位置和/或姿态的位置信息。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件部件和/或驱动器,并且有利于各种硬件和软件部件之间的通信。
通信模块128促进通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或者间接地通过网络(例如,互联网、无线LAN等)进行耦接。在一些实施方案中,外部端口是与iPod(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如,30针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与接触检测相关的各种操作,诸如确定是否已发生接触(例如,检测手指按下事件)、确定接触的强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪在触敏表面上的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已停止(例如,检测手指抬起事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),该接触点的移动由一系列接触数据来代表。这些操作任选地被应用于单个接触(例如,一个手指接触)或多个同时接触(例如,“多触摸”/多个手指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触摸板上的接触。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子组(例如,强度阈值不是由特定物理致动器的激活阈值来确定的,并且可在不改变设备100的物理硬件的情况下被调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
如说明书和权利要求书中所使用的,接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬起之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如,0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者:接触强度的最大值、接触强度的均值、接触强度的平均值、接触强度的前10%处的值、接触强度的半最大值、接触强度的90%最大值等。在一些实施方案中,在确定特征强度时使用接触的持续时间(例如,在特征强度是接触的强度在时间上的平均值时)。在一些实施方案中,将特征强度与一组一个或多个强度阈值进行比较,以确定用户是否已执行操作。例如,该组一个或多个强度阈值可包括第一强度阈值和第二强度阈值。在该示例中,特征强度未超过第一阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,并且特征强度超过第三阈值的接触导致第三操作。在一些实施方案中,使用特征强度和一个或多个阈值之间的比较来确定是否要执行一个或多个操作(例如,是否执行相应选项或放弃执行相应操作),而不是用于确定执行第一操作还是第二操作。
在一些实施方案中,识别手势的一部分以用于确定特征强度。例如,触敏表面可接收连续的轻扫接触,该连续的轻扫接触从起始位置过渡并到达结束位置,在该结束位置处,接触的强度增加。在该示例中,接触在结束位置处的特征强度可仅基于连续轻扫接触的一部分,而不是整个轻扫接触(例如,仅结束位置处的轻扫接触的一部分)。在一些实施方案中,可在确定接触的特征强度之前向轻扫接触的强度应用平滑化算法。例如,该平滑化算法任选地包括以下各项中的一者或多者:不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法和/或指数平滑化算法。在一些情况下,这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷,以实现确定特征强度的目的。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触图案(例如,所检测到的接触的不同运动、定时和/或强度)。因此,任选地通过检测具体接触图案来检测手势。例如,检测手指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,检测触敏表面上的手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知的软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉特征)的部件。如本文所用,术语“图形”包括可以被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软按键的用户界面对象)、数字图像、视频、动画等等。
在一些实施方案中,图形模块132存储待使用的用于代表图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,该指令由触觉输出发生器167使用,以便响应于用户与设备100的交互而在设备100上的一个或多个位置处生成触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置并提供了在各种应用程序中使用的这种信息(例如,提供至用于基于位置的拨号的电话138;提供至相机143作为图片/视频元数据;以及提供至提供基于位置的服务诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时叫做通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下中的一者或多者:天气桌面小程序149-1、股票桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5和由用户获得的其他桌面小程序,以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,其任选地由视频播放器模块和音乐播放器模块构成;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,联系人模块137任选地被用于管理通讯录或联系人列表(例如,被存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包括:将姓名添加到通讯录;从通讯录删除姓名;使电话号码、电子邮件地址、物理地址或其他信息与姓名相关联;使图像与姓名相关联;对姓名归类和分类;提供电话号码或电子邮件地址以发起和/或促进通过电话138、视频会议139、电子邮件140、或IM 141进行通信等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电话模块138任选地用于输入对应于电话号码的字符序列、访问通讯录137中的一个或多个电话号码、修改已经输入的电话号码、拨打对应的电话号码、进行会话以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于输入与即时消息对应的字符序列、修改先前输入的字符、发送相应即时消息(例如,使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、或IMPS)、接收即时消息以及查看所接收的即时消息的可执行指令。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS传输的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、或IMPS传输的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154、和音乐播放器模块146,健身支持模块142包括用于以下操作的可执行指令:创建健身(例如具有时间、距离、和/或卡路里燃烧目标);与健身传感器(运动设备)进行通信;接收健身传感器数据;校准用于监测健身的传感器;选择健身音乐并进行播放;以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包括用于捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征、或从存储器102删除静态图像或视频的可执行指令。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操控、加标签、删除、呈现(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包括根据用户指令浏览互联网(包括搜索、链接到、接收和显示网页或其部分以及链接到网页的附件和其他文件)的可执行指令。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括指令,该指令允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中,即时消息模块141而不是电子邮件客户端模块140用于发送至特定在线视频的链接。
上面标识的模块和应用程序中的每一者均可与用于执行上述一个或多个功能和方法的可执行指令集相对应。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程序149-1、股票桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)或由用户创建的微型应用程序(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建者模块150任选地被用户用来创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括根据用户指令来搜索匹配一个或多个搜索条件(例如,一个或多个用户指定的搜索词)的存储器102中的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及显示、呈现或以其他方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器,诸如iPod(Apple Inc.的商标)的功能性。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾驶方向;与特定位置处或附近的商店及其他兴趣点有关的数据;以及其他基于位置的数据)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括指令,该指令允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中,即时消息模块141而不是电子邮件客户端模块140用于发送至特定在线视频的链接。
上述所识别的每个模块和应用程序对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即指令集)不必被实现为独立的软件程序、过程或模块,因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子集。此外,存储器102任选地存储上面未描述的另外的模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于设备100的操作的主要输入控制设备,任选地减少设备100上的物理输入控制设备(诸如下压按钮、拨号盘等等)的数量。
唯一地通过触摸屏和/或触摸板执行的该预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中,当用户触摸触摸板时,将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中,使用触摸板来实现“菜单按钮”。在一些实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B为示出根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中,存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序137-13、155、380-390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在运行时被显示在触敏显示器112上的当前应用程序视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用于确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用于确定要将事件信息递送到的应用程序视图191。
在一些实施方案中,应用程序内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用程序136-1恢复执行时将被使用的恢复信息、指示正被应用程序136-1显示的信息或准备好用于被应用程序136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列、以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,触敏显示器112上的用户触摸,作为多点触摸手势的一部分)的信息。外围设备接口118传输其从I/O子系统106或传感器(诸如接近传感器166)、加速度计168和/或麦克风113(通过音频电路110)所接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被认为是正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有在分级结构中组织的多个视图时,命中视图确定模块172将命中视图识别为应对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并且因此确定所有活跃参与的视图应接收特定子事件序列。在一些实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,但分级结构中的更高的视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。然而,在一些实施方案中,事件分类器170是独立的模块,或者是被存储在存储器102中的另一模块(诸如接触/运动模块130)的一部分。
在一些实施方案中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括多个事件识别器180。在一些实施方案中,事件识别器180中的一个或多个应用程序视图是独立模块的一部分,该独立模块诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的更高水平的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170所接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件传递指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件的信息,例如触摸或触摸移动。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件、或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他事件。在一些实施方案中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中,事件1(187-1)的定义是在被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬起(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)以及预先确定时长的第二次抬起(触摸结束)。在另一示例中,事件2(187-2)的定义是在被显示对象上的拖动。例如,拖动包括在被显示对象上的预定时长的触摸(或接触)、该触摸在触敏显示器112上的移动、以及该触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义187包括用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在触摸显示器112上显示三个用户界面对象的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件串不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪和处理正在进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有用于指示事件递送系统应该如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标记和/或列表。在一些实施方案中,元数据183包括指示子事件是否被递送到视图或程序化分级结构中的变化的水平的可配置属性、标记和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与该事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义的过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件串相关联的事件处理程序或者递送到活跃参与的视图。与子事件串或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频播放器模块145中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建和更新在应用程序136-1中使用的对象。例如,对象更新器176创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息并将其发送至图形模块132以用于显示在触敏显示器上。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在一些实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述讨论还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,而非所有用户输入都是在触摸屏上发起的。例如,任选地利用鼠标移动和鼠标按钮按压,任选结合单次或多次键盘按压或保持;触摸板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;检测到的眼睛运动;生物测定输入;和/或它们的任意组合来作为对应于子事件的输入,定义要识别的事件。
图2示出了根据一些实施方案的具有触摸屏112的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施方案中以及在下文中描述的其他实施方案中,用户能够通过例如利用一个或多个手指202(在附图中没有按比例绘制)或者利用一个或多个触笔203(在附图中没有按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用程序图标上方扫动的轻扫手势任选地不会选择对应应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“home”按钮或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。在一些实施方案中,菜单按钮204包括识别菜单按钮204上的指纹的指纹传感器。指纹传感器任选地用来确定菜单按钮204上的指纹是否具有与用来解锁设备100的指纹匹配的指纹。另选地,在一些实施方案中,菜单按钮被实现为被显示在触摸屏112上的GUI中的软键。
在一个实施方案中,设备100包括触摸屏112、菜单按钮204、用于使设备通电/断电和锁定设备的下压按钮206、音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206被任选地用于:通过按下按钮并使按钮在下压状态保持预先确定的时间间隔来使设备通电/断电;通过按下按钮并在经过预先确定的时间间隔之前释放按钮来锁定设备;和/或对设备进行解锁或发起解锁过程。在另选的实施方案中,设备100还通过麦克风113来接受用于激活或去激活一些功能的语音输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165,和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3为根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型计算机、台式计算机、平板计算机、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于将这些部件互联的一根或多根通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触摸板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备,并且任选地包括非易失性存储器诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构或它们的子集。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块、和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每一个元件任选地存储在一个或多个先前提到的存储器设备中。上述所识别的模块的每一个模块对应于用于执行上述功能的一组指令。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,并且因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子集。此外,存储器370任选地存储上面未描述的另外的模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施方案。
图4A示出了根据一些实施方案的便携式多功能设备100上的应用程序菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元素或者其子集或超集:
用于无线通信诸如蜂窝和Wi-Fi信号的信号强度指示符402;时间404;蓝牙指示符405;电池状态指示符406;具有经常使用的应用程序的图标的托盘408,诸如:用于电话模块138的标记为“电话”的图标416,任选地包括未接呼叫或语音信箱消息的数量的指示符414;用于电子邮件客户端模块140的标记为“邮件”的图标418,任选地包括未读电子邮件数量的指示符410;用于浏览器模块147的标记为“浏览器”的图标420;以及用于视频和音乐播放器模块152也称为iPod(Apple Inc.的商标)模块152标记为“iPod”的图标422;以及用于其他应用程序的图标,诸如:用于IM模块141的标记为“文本”的图标424;用于日历模块148的标记为“日历”的图标426;用于图像管理模块144的标记为“照片”的图标428;用于相机模块143的标记为“相机”的图标430;用于在线视频模块155的标记为“在线视频”的图标432;用于股票桌面小程序149-2的标记为“股票”的图标434;用于地图模块154的标记为“地图”的图标436;用于天气桌面小程序149-1的标记为“天气”的图标438;用于闹钟桌面小程序149-4的标记为“时钟”的图标440;用于健身支持模块142的标记为“健身支持”的图标442;用于记事本模块153的标记为“记事本”的图标444;以及用于设置应用程序或模块的为设备100及其各种应用程序136的设置提供访问的图标446。
应当指出的是,图4A中示出的图标标签仅仅为示例性的。例如,视频和音乐播放器模块152的图标422被标记为“音乐”或“音乐播放器”。其他标签任选地用于各种应用程序图标。在一些实施方案中,相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,图3中的平板或触摸板355)的设备(例如,图3中的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如,传感器357中的一个或多个传感器),和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的示例中的一些示例,但在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴线(例如,图4B中的453)对应的主轴线(例如,图4B中的452)。根据一些实施方案,设备检测与显示器上相应位置对应的位置处的与触敏表面451的接触(例如,图4B中的460和462)(例如,在图4B中,460对应于468并且462对应于470)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(例如图4B中的450)分开时,由设备在触敏表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、手指轻击手势、手指轻扫手势)来给出下面的示例,但应当理解的是,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替代。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)来替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,而不是对接触的检测,之后是终止检测接触)来替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个计算机鼠标任选地被同时使用,或一个鼠标和多个手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触摸板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调节。在包括能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示系统112或图4A中的触摸屏112)的一些具体实施中,触摸屏上的所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,由接触进行的按压输入)时,该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一按钮);在这些具体实施中,焦点选择器根据用户界面的不同区域之间的焦点移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便传送与用户界面的用户预期的交互(例如,通过向设备指示用户期望与其进行交互的用户界面的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
触觉输出和相关联的过程
现在将注意力转到可在电子设备,诸如设备300或便携式多功能设备100上实现的触觉输出和相关联的过程的实施方案。尽管以下描述相对于设备100,但本文的实施方案可并入设备300中。
图5示出了根据一些实施方案的各种触觉波形形态的示例。各种触觉类型起到原子触觉分量的作用,原子触觉分量用于各种组合来产生具有不同含义的各种触觉波形。描述以下示例来创建在本文触觉输出类型之间区分的词汇表。本文所述的触觉输出类型并非意为穷尽性的,也可以使用其他触觉波形。
波形505根据一些实施方案代表具有相对大幅度的示例性触觉波形或“轻击”型触觉输出,输出该触觉的用户可容易察觉(例如,明显高于给定触觉设备的触觉可察觉性的绝对阈值)“轻击”型触觉输出,即使只是单一轻击。如通过各种轻击触觉输出505a-e所见,波形在幅度、持续时间和频率上变化。典型地,人可察觉从5Hz到29Hz以及取决于kHz下的0N到1.0N(宋,等同于~0-40dBA)的频率。人可听到幅度的听力为在1-4kHz下最敏感。
波形510根据一些实施方案代表与波形505相比具有相对较小幅度(例如,另选地,较短持续时间)的触觉波形的示例,或者“微轻击”型触觉输出,输出触觉的设备的用户不太容易察觉到(例如,接近对于给定触觉设备的触摸可察觉性的低阈值)“微轻击”型触觉输出以检测作为单一微轻击,但如果多个微轻击连续输出则容易察觉到。微轻击波形510a-c在幅度、持续时间和频率上不同。
波形515代表在轻击之后两次微轻击的示例性组合触觉。由于微轻击不太容易单独察觉,所以在微轻击之前具有轻击的波形可通过用轻击引起其注意而“启动”用户,使得用户更容易察觉该微轻击。
波形520代表“淡入淡出”型波形的示例,具有较长持续时间的幅度随时间减小的波形。波形520a为始于较大轻击级幅度并且结束于微轻击级幅度的“轻击-淡入淡出”,而波形520b为始于较小微轻击级幅度并且结束于较低幅度的微轻击-淡入淡出。
波形525代表典型总体持续较长持续时间(例如,0.5秒到1秒)的连续高频的示例性“嗡嗡声”型波形。嗡嗡声根据各种实施方案可具有较高或较低幅度,并且对于用户可察觉为一致的振动。
各种音频波形任选地与各种触觉波形同步,从而在音域上对应于触觉输出的频率、幅度和持续时间特征或者与其不同。各种原子触觉分量,诸如上述那些触觉分量,用于各种结合来产生对应于音频波形的各种触觉波形。原子触觉分量由不同参数调制(例如,幅度、计数/重复、定时偏移量)来生成直接来自于触觉设备自身的不同音频模式,使得音频波形对应于触觉波形。另外,根据一些实施方案,触觉致动器产生的一些波形(例如,触觉输出发生器167)产生类似机器声的可听输出诸如“滴答声”。另选地,在一些实施方案中,独立音频信号发生器和输出设备(例如,音频发生器和扬声器)可用来同步具有与触觉波形不同波形的输出音频波形。
图6示出了根据一些实施方案的各种音频波形形态的示例。波形605代表各种幅度、持续时间和频率的音频波形的示例。有时,创建特定波形来模仿与音频要与其配对的活动相关联的共同声音。波形610为特定波形的示例。波形610a为模仿对讲机声音的波形,而波形610b为模仿心跳声的波形。
在一些实施方案中,当触觉和音频波形具有对应形态时,例如,如果触觉波形和音频波形在类似时间具有波峰以及类似的持续时间从而两个波形看上去彼此相似,它们同步输出。波形615(触觉;虚线)和620(音频;实线)独立示出,并且那么在时间上对准并同步。在该示例中,时间对准使得具有一系列轻击的触觉波形与心跳探测音频波形同步,从而产生联合声和心跳感觉,例如,结合心跳监视器使用。
在一些实施方案中,音频分量共享属性,但仍然不同,例如,使用在不同音阶或者使用不同乐器演奏的相同铃声或音调(相同幅度、频率和持续时间)。在相同触觉输出上覆盖不同音频(例如,高音阶对低音阶,金属演奏的相同音频对玻璃对陶瓷音调等)产生不同语义分量。这些示例并非意在穷尽性的,也可以使用其他音频波形。
例如,相应触觉输出可伴随对应音频输出,其中相应音频输出的至少一部分与相应触觉输出的至少一部分同时发生,或者相应音频输出与相应触觉输出在时间上靠近地发生,使得相应触觉输出和相应音频输出在感知上是并发或同时的。触觉和音频波形无需完美对准,设备可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。伴随的音频部分的变化可在包括音频输出的实施方案之间不同。例如,与第一输出相关联的音频分量的幅度、与第一输出相关联的音频分量的持续时间,和与第一输出相关联的音频分量相关联的一个或多个音乐质量(例如,音阶、音调等)中的每一个可能在某些情况下不同。
基于应用程序状态的触觉输出
根据一些实施方案,在与应用程序的检测到的警示条件相关联的时间,与应用程序相关联的一个或多个状态提供用于提供对应触觉输出的基础。提供与应用程序的状态相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图7为根据一些实施方案的检测与应用程序相关联的警示条件以及提供对应触觉输出的方法700的流程图。注意,在一些实施方案中,可执行图7中所示那些之外的不同步骤。
根据一些实施方案,方法开始于设备100检测705与在计算设备100上运行的应用程序相关联的警示条件。根据各种实施方案,对于在计算设备100上运行的应用程序,警示条件采取各种形式。警示条件为任何事件、通知、或涉及设备用户的其他警示。一种类型的警示条件对应于由应用程序自动触发或者从应用程序内触发的事件。例如,应用程序触发的警示条件包括预先确定或预定的警示,诸如提醒、预定的通知、或应用程序生成的闹钟。第二类型的警示条件为由应用程序从设备外部来源接收的自动发起的事件通知。例如,系统生成的电子邮件或消息、诸如大量电子邮件、垃圾邮件、系统生成的涉及邮寄列表的电子邮件,或任何其他系统生成的通信。第三类型的警示条件为由应用程序从操作设备的用户之外的人类用户接收的手动发起的事件通知。例如,从已知电子邮件地址或用户联系人列表上的电话号码的传入消息或呼叫。各种警示条件可被检测,例如,当在设备的显示器上显示电子邮件或即时消息应用程序的用户界面时检测电子邮件或文本消息的接收。
根据一些实施方案,响应于警示条件,设备100确定710在与警示条件相关联的时间与应用程序相关联的状态。在一个示例中,与警示条件相关联的时间为接收到警示的时间。在第二示例中,与警示条件相关联的时间为检测到警示的时间。
在一些实施方案中,确定710在与警示条件相关联的时间与应用程序相关联的状态包括确定在警示条件的时间或周围在设备上是否显示应用程序的用户界面。在一些情况下,为警示条件的时间,以及在其他情况下,所讨论的时间段包括与警示条件相关联的时间周围的特定时间间隔,例如在跨越与警示条件相关联的时间之前和/或之后的间隔的预定义时间窗期间。
根据一些实施方案,可通过基于应用程序是否在与警示条件相关联的时间在计算设备上运行确定710状态,其中基于应用程序运行在前台确定应用程序处于活动状态。例如,在应用程序正运行时在设备显示器上可见的用户界面元素。在该情况下,基于应用程序未在计算设备上运行或在后台运行,确定应用程序处于不活动状态。例如,设备未在主动使用中,或未在应用程序指导下执行计算,或者未显示指示应用程序的活动状态的用户界面元素。用户界面显示器的状态和应用程序的活动状态两者的组合任选地用于确定710中。
参考图8,根据一些实施方案,示出了在设备100上的前台主动运行以及用户界面可见的电子邮件应用程序800的示例。在该示例中,电子邮件应用程序800处于活动状态。相反,在图4A中示出了在设备100上的不活动电子邮件应用程序的示例,其中由于在设备100上不可见,所以电子邮件应用程序800或者未运行或者在后台运行。
再次参考图7,在该示例中,基于在与警示条件相关联的时间对应于应用程序的相应用户界面窗口是否显示在多应用程序窗口用户界面的前台中确定710在与警示条件相关联的时间与应用程序相关联的状态。例如,如果多个应用程序窗口显示在叠层中,则在z层中最前面位置的应用程序被认为活动应用程序。如本领域已知,相应用户界面窗口为可接收、和/或配置为接收用户输入或用户交互的应用程序窗口,有时称为有焦点的窗口。
根据一些实施方案,在与警示条件相关联的时间,一个或多个其他用户界面窗口同时显示在设备上的多应用程序窗口用户界面上,在该情况下,确定710在与警示条件相关联的时间与应用程序相关联的状态包括确定在与警示条件相关联的时间对应于应用程序的相应用户界面窗口是否显示在多应用程序窗口用户界面中。
根据一些实施方案,另一种方式确定710在与警示条件相关联的时间与应用程序相关联的状态包括在与警示条件相关联的时间是否检测到对应用程序的用户输入,其中用户交互不同于警示条件。例如,在各种情况下的用户输入包括用户触摸输入、语音输入、或基于视觉/目光的输入、或接收对应用程序的用户输入的任何方式。在一些情况下,与警示相关联的时间为警示条件的时间,以及在其他情况下,包括与警示条件相关联的时间周围的特定时间,例如在跨越与警示条件相关联的时间之前和/或之后的间隔的预定义时间窗期间。
在一些实施方案中,其中确定710在与警示条件相关联的时间基于检测到的用户交互应用程序处于活动状态,设备100还确定在与警示条件相关联的时间与用户交互相关联的用户参与的水平。在一些情况下用户参与为与应用程序可能的用户交互的范围,从最低水平的参与诸如单独眼睛注视,到中级水平参与诸如单独语音或触摸,直到较高水平参与诸如组合聚焦在应用程序上的触摸、语音以及眼睛注视(例如,预先确定时间段上的当前参与水平、历史参与水平或这两者的组合)。
在一些实施方案中,确定710在与警示条件相关联的时间与应用程序相关联的状态包括确定在与警示条件相关联的时间计算设备的状态。在该示例中,确定应用程序是否处于活动状态包括确定在与警示条件的相关联的时间计算设备是活动的。例如,根据一些实施方案,活动设备包括加电(例如,显示器接通)和/或主动使用的设备。同样地,确定应用程序是否处于不活动状态包括确定在与警示条件相关联的时间计算设备在某个方式是不活动的。例如,在各种情况下,断电设备、处于睡眠或休眠模式的设备、未处于活动使用中的设备、显示器关闭的设备每一个都对应于不活动设备。
根据一些实施方案,根据确定应用程序在与警示条件相关联的时间处于活动状态,设备100提供715具有第一组输出特征的第一触觉输出。
第一触觉输出的第一组特征包括以下中的一个或多个:幅度、持续时间、规律性、重复频率、或第一触觉输出的原子触觉特征的变化。在一些情况下,第一触觉输出伴随第一音频输出。例如,相应触觉输出可伴随对应音频输出,其中相应音频输出的至少一部分与相应触觉输出的至少一部分同时发生,或者相应音频输出与相应触觉输出在时间上靠近地发生,使得相应触觉输出和相应音频输出在感知上是并发或同时的。触觉和音频波形无需完美对准,设备100可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。伴随的音频部分的变化可在包括音频输出的实施方案之间不同。例如,与第一输出相关联的音频分量的幅度、与第一输出相关联的音频分量的持续时间,和与第一输出相关联的音频分量相关联的一个或多个音乐质量(例如,音阶、音调等)中的每一个可能在某些情况下不同。
根据一些实施方案,第一和第二组特征对应于计算设备的设备类型。例如,对于相同事件,设备100基于设备类型(例如,相机对手表对膝上型计算机或其他手持式设备)任选地提供不同触觉输出。然而,在一些实施方案中,保持第一输出的触觉分量和第二输出的触觉分量之间的差异而不考虑输出正在其上执行的设备。在该情况下,在所有设备类型上提供触觉输出的相同模式,但触觉输出幅度的不同基于输出正在其上执行的设备。
根据不同实施方案,设备自身的变化以及由此触觉输出的细节不同。例如,在一些情况下,设备具有触敏显示器。在一些实施方案中,第一触觉输出和第二触觉输出经由计算设备上的触敏显示器提供。在该示例中,设备100可经由触敏显示器接收用户触摸输入以及经由相同触敏显示器提供触觉输出两者。根据一些实施方案,此双向触摸敏感性允许设备100基于接收的用户输入提供反馈。
如上所提及,设备100任选地确定在与警示条件相关联的时间与用户交互相关联的用户参与水平。在这些情况下,设备100还基于确定的参与水平确定第一触觉输出的第一组输出特征中的一个或多个。在一些实施方案中,音频的幅度、持续时间、重复频率和/或触觉分量可随与应用程序的用户交互/参与的测量反变化。因此,对于用户交互的较高程度,选择第一组输出特征从而使得第一输出具有较低强度,从而更微妙并且不易察觉。因此,当用户已经具有与应用程序的较高程度的参与或交互时,不向用户暴露过度强信号。根据一些实施方案,如果用户较少参与,则将较高强度信号提供给用户以对设备或应用程序额外注意。例如,如果检测到的用户交互包括反映高水平用户交互/参与的触摸输入或触摸姿态(和/或用户目光),则为用户提供较弱或不太明显的输出,这是因为用户凭借与应用程序的更多参与(通过视线或触摸与应用程序交互)可能意识到警示条件。如果检测到的用户交互包括语音输入但没有反映与应用程序参与较低水平或测量的伴随的触摸或目光,则任选地提供较强或更明显的输出来额外注意警示条件。
根据确定应用程序在与警示条件相关联的时间处于不活动状态,设备100任选地提供720代表警示条件的出现的第二触觉输出,第二触觉输出具有第二组输出特征,其中第二触觉输出不同于第一触觉输出。
根据一些实施方案,第二触觉输出不同于第一触觉输出并且具有比第一触觉输出更大的强度。例如,信号幅度任选地比第一触觉输出更大,频率更高,和/或持续时间更长。在一些情况下,第二触觉输出具有比第一触觉输出更大强度。在一些实施方案中,第一输出的触觉分量具有第一组参数(例如,较低幅度、较小周期/规律性、较低重复频率或事件计数、较短输出持续时间、不太打扰/察觉/明显),由第一组触觉特征或在设备的活动状态期间比第二状态期间的第二组参数不太明显(例如,微轻击)的原子触觉分量组成。类似地,如果伴随有相应音频分量,则第一输出的音频分量在活动状态期间具有第一组参数(例如,较低幅度、较短输出持续时间、不太打扰/察觉/强烈音频音调)以及在不活动期间的第二组参数。根据一些实施方案,较高强度输出的目的在于当应用程序处于不活动状态时引起用户对警示条件注意力提高。
如上所述,设备100状态任选地用来确定触觉输出的调制或输出特征。例如,根据一些实施方案,当设备处于电力节省状态(例如,因为设备电池寿命下降低于预定义阈值,诸如5%、10%、15%或20%)时,使用节省电力的触觉输出(例如,具有较低幅度、较短持续时间和/或较低频率的触觉输出),即使那些触觉输出不太可能由用户注意到。当设备未处于电力节省状态时,在一些情况下使用默认触觉输出,即使那些触觉输出不节省电力(例如,相对于节省电力的触觉输出具有相对较高幅度、较长持续时间和/或较高频率的触觉输出)。在一些实施方案中,因为设备处于电力节省状态,即使在使用电力节省触觉输出时,也保持第一输出的触觉分量和第二输出的触觉分量之间的差别。
对于第一触觉输出,第二触觉输出任选地伴随有音频输出,第二触觉输出的波形基于镜像生成并且与伴随的音频输出的波形同步。在一些实施方案中,触觉分量的波形从相应音频分量的波形生成以及与相应音频分量的波形匹配、模拟、镜像相应音频分量的波形,或者与相应音频分量的波形同步,如结合图6所述。
触觉和音频的各种组合可由设备输出来为用户提供不同语义信息。作为第一示例,第一触觉输出未伴随音频输出,但第二触觉输出伴随音频输出。作为第二示例,第一触觉输出伴随第一音频输出并且第二触觉输出伴随不同于第一音频输出的第二音频输出。
当伴随不同音频波形时,给定触觉波形可生成不同感知以及由此产生语义信息。例如,与具有低频音频音调的相同触觉分量输出相比,具有高频音频音调的触觉分量输出产生不同可感知单元,并且因此产生语义信息。可使用高频音调引起用户对触觉输出代表的事件种类中明显出现的注意力提高,而可使用低频音调指示事件种类的状态变化。例如,给定触觉输出可用来指示收到文本消息,以及伴随或者用于紧急消息(或来自指定发送人的消息)的高频音调或者用于非紧急消息或者从非指定发送人接收的消息的低频音调。此外,两个相关警示(例如,对应于接收文本消息的警示以及对应于接收电子邮件消息的警示)具有相同节奏的不同对应音频分量并且因此使用相同触觉分量(例如,共享触觉分量提供两个警示对应于消息接收警示的信息,而不同音频分量提供接收消息类型的信息)。
在一些实施方案中,第一触觉输出与第二触觉输出类似、相同或大体上相同。作为一个示例,第一触觉输出伴随音频输出并且第二触觉输出伴随相同音频输出,在该示例中,第一触觉输出不同于第二触觉输出。回想起图8的活动电子邮件应用程序800和图4A的不活动的电子邮件应用程序的以上示例。下文为示出用于电子邮件应用程序800的示例性警示条件信息和对应于各种条件、状态、模式和条件的输出。
表1:电子邮件
表1示出基于接收的电子邮件的单一警示条件的变化的各种可能的输出。根据接收电子邮件时应用程序可能所在的各种模式,前七行示出了处于活动状态无新消息的应用程序:其中应用程序显示邮箱屏幕,显示收件箱,显示选择的消息,显示发送消息箱,显示进行中的草稿,电子邮件搜索字段,以及示出了应用程序在后台执行时的应用程序。由于在前八行未接收新消息,所以不呈现输出(触觉或其他方式)。
然而,最后八行示出接收的新消息的条件和对应输出。如图所示,对于大多数活动模式,触觉输出为微轻击并且音频输出为默认接收电子邮件音频。然而,对于应用程序处于不活动的最后一行以及应用程序处于活动但在后台执行的倒数第二行,触觉输出为淡入淡出轻击并且音频输出保持默认接收的电子邮件。因此,无论应用程序是否是活动的都保持音频输出,但在应用程序不活动或者在后台执行时触觉输出具有较高强度(淡入淡出轻击对微轻击)。根据一些实施方案,表1提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用警示、状态、模式、条件和输出的其他组合。
作为一个示例,在第一时间点,在应用程序处于活动状态时,设备100检测705与应用程序相关联的第一警示条件并且响应于检测到在第一应用程序处于活动状态时的第一警示条件,提供715代表第一警示条件的第一输出。在第二时间点,在应用程序处于不活动状态时,设备100检测第二警示条件并且响应于检测到在应用程序处于不活动状态时的第二警示条件,提供720代表第二警示条件的第二触觉输出,第二触觉输出不同于第一触觉输出。
应当理解,对图7中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法900、1000、1100、1200、1300、2500、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图7描述的方法700。例如,参考方法700上述的输入、警示条件、应用程序、状态和触觉输出任选地具有参考本文所述的其他方法(例如,方法900、1000、1100、1200、1300、2500、2600、3000和3200)在本文所述的输入、警示条件、应用程序、状态和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
基于警示条件触发的触觉输出
警示条件可手动或自动触发。根据一些实施方案,是否手动或自动触发检测到的警示条件提供用于提供对应触觉输出的基础。提供与是否手动或自动触发警示条件相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图9为根据一些实施方案的检测与应用程序相关联的第一警示条件以及取决于该条件是否由手动发起或自动发起事件触发提供触觉输出的方法900的流程图。注意,在一些实施方案中,可执行图9中所示那些之外的不同步骤。
方法开始于设备100检测905与应用程序相关联的警示条件。根据各种实施方案,对于在计算设备100上运行的应用程序,警示条件采取各种形式。警示条件为任何事件、通知、或涉及设备用户的其他警示。一种类型的警示条件对应于手动发起事件触发的事件,而第二类型的警示条件对应于自动发起事件触发的事件。在一些情况下,设备100具有触敏显示器。
响应于检测到警示条件,设备100确定910警示条件是否由手动发起事件触发。该步骤包括确定警示条件是否对应于人类用户发起的事件。各种情况可对设备100所做确定事件是否由人类用户发起做出贡献,如结合表2进一步所述。
在一些实施方案中,确定910警示条件特征指示警示条件由手动发起事件触发包括确定警示条件是否对应于计算设备的用户之外的人类用户发起的事件。如下所述,在表2中示出了用于该确定的一些示例性条件。
在一些实施方案中,确定警示条件由手动发起事件触发包括确定警示条件是否对应于从人类用户接收的输入,识别计算设备的用户以及包括来自人类用户来针对输入警示计算设备的用户的指示。在一些实施方案中,从人类用户接收的输入来自设备100的用户,然而,在一些实施方案中,输入从另一设备上的另一用户接收(例如,个人消息从其他用户到设备用户的发送人)。
表2示出几个示例性情况,其中设备100具有用来确定910警示信息是否由手动发起的事件触发,是否由人类用户发起以及该用户是否为不同于设备100的用户的不同用户的信息。表2中示出的应用程序包括消息、电子邮件、电话、日历、定时器、活动监视器和社交网络,但可为向作出该确定的设备100提供类似信息的任何其他应用程序。
表2:手动/自动
对于所示示例,人类/自动列示出特定警示、条件和应用程序是否对应于可手动(人类)发起,自动发起的警示,或者是否可由人类或自动方式发起。例如,第二、第四、第六和第七行每一行都指示人类用户的手动动作。在这些示例中,动作已被设备的用户专门采用(用户列),诸如用户输入到设备上的应用程序(例如,消息、电子邮件、或电话应用程序),使得设备100可容易确定用户为人类用户,并且更具体地设备用户。然而,在其他情况下,一些警示条件为设备100已知的类型,能由人类用户手动或自动生成。例如,第一、第三和第五行具有此类别的警示条件。具体地,在消息应用程序中接收的新消息典型地为手动(人类发起)事件,例如,不同设备用户发送的文本或其他消息。然而,消息还可为系统自动生成,诸如垃圾邮件或广告文本消息。类似地,新电子邮件消息可由人类用户或者系统自动发起,比如可由机器生成的大量电子邮件,垃圾电子邮件,或者订阅邮件列表服务电子邮件。在最后示例中,电话应用程序中的传入呼叫典型地为人类发起事件,但也可为系统自动拨打呼叫者列表的自动发起呼叫,例如征集捐款或作为政治运动的一部分。在这些情况中的每一个下,需要有关警示条件来源的额外信息以能够做出更结论性确定事件手动或自动发起。
例如,对于电子邮件或消息,设备100可确定警示条件是否对应于来自管理、创建、控制或以另外方式与用户相关联的联系人列表中的发件人的个人通信。在一些情况下,最简单的示例为真实联系人文件,诸如具有电子邮件地址或电话号码的联系人卡片,但其他联系人列表也包括用户先前通信的电子邮件地址或电话号码。这些示例仅在于,存在许多其他方式,设备100可借助此方式确认通信是否可能由人类用户手动发起。
在表2的倒数第二行中示出另一示例。在该示例中,社交网络应用程序发送通知用户已在帖子中被标注。在通信自身来自社交网络服务器时,通知的内容指示帖子由连接到社交网络应用程序中的设备用户的人类用户手动发起。
根据一些实施方案,根据确定警示条件由手动发起事件触发,设备100提供915对应于手动发起事件通知的第一触觉输出。
一旦设备100确定警示条件由手动事件发起,则提供对应于警示条件的触觉输出。根据一些实施方案,经由计算设备的触敏显示器提供第一触觉输出。在一些实施方案中,确定还包括确定与手动发起事件相关联的紧急情况的测量以及基于对紧急情况的测量调制912第一触觉输出的强度。例如,设备100分析来自另一最终用户的传入消息的内容来确定消息的紧急程度。因此,在一些实施方案中,设备100检查电子邮件中的日期信息或消息的主题/内容,在主题或消息中使用的关键字(例如,“紧急”)或检查包括在消息中的元数据,诸如“重要”标记。根据一些实施方案,设备100确定消息的发送人或接收人是否包括由用户标记为重要人物或具有一些其他特别指示的个人。设备100随后提供915强度(例如,幅度、持续时间、频率)与和传入消息的内容相关联的紧急程序成比例的触觉和/或音频输出。根据一些实施方案,通常,期望或较不紧急的通知/输出具有一组输出特征以及不期望的通知具有更强烈的第二组输出特征,从而尝试引起用户提高的注意力。
在一些情况下,设备100确定与手动发起事件相关联的一个或多个情境属性以及在此基础上调制912触觉输出的强度。例如,考虑各种因素来评估与传入手动通知相关联的情境属性以及将要提供的触觉或音频通知的强度。情境属性包括发送消息的接收人的身份、包含消息的其他接收人及其标识、接收消息的定时、接收通知时用户的位置、接收通知时用户正执行的活动、用于传送消息的媒介等,此表不是穷尽性的。
根据一些实施方案,其中对应于手动发起事件通知的第一触觉输出比对应于自动发起事件通知的第二触觉输出更强烈。例如,更强烈的输出更有可能引起用户对手动发起事件的注意力提高。在一些情况下,凭借更个人化、目标性以及与设备的用户直接相关的较高可能性,手动发起警示的触觉有助于引起用户对系统确定为更需要用户立即关注的事件的立即关注。
根据一些实施方案,例如,第一触觉输出通过第一组特征来表征,包括第一触觉输出的幅度、第一触觉输出的持续时间、与第一触觉输出相关联的规律性、在第一触觉输出中触觉特征的重复频率以及组成第一触觉输出的触觉特征的选择中的一个或多个。第二触觉输出通过第二组特征来表征,包括第二触觉输出的幅度、第二触觉输出的持续时间、与第二触觉输出相关联的规律性、在第二触觉输出中触觉特征的重复频率以及组成第二触觉输出的触觉特征的选择中的一个或多个。
在一些情况下,两个手动发起事件可在一行中被接收。第一警示条件可被检测出对应于来自第一人类发送人的传入电子邮件消息并且响应于确定传入电子邮件消息对应于手动发起事件,设备100提供第一触觉输出。第二警示条件被检测出对应于来自第二人类发送人的传入文本消息并且响应于确定传入文本消息对应于手动发起事件,设备100提供第一触觉输出。根据一些实施方案,许多其他变型是可能的。
响应于检测到与应用程序相关联的警示条件,根据确定警示条件由自动发起事件触发,设备100提供920对应于自动发起事件通知的第二触觉输出,其中第二触觉输出不同于第一触觉输出。
许多示例存在自动发起事件触发的警示条件。再次参考表2,用于日历、定时器和活动监视器应用程序的警示条件每一个都自动变化并且由应用程序自身生成。在稍微不同的示例中,最后一行示出了作为采用电子邮件形式用于社交网络的活动概要的警示条件。在该示例中,警示条件为预定的定期发生。因此,即使概要可包括有关用户发起动作的一些事件信息(例如,由另一用户在帖子中标注的以上示例),在一天或一周时间内来自社交网络概要活动的包括特定帖子的电子邮件,但电子邮件不被认为是手动发起事件,因为不是由来自人类用户的请求或指示触发的(仅包括该信息)。根据一些实施方案,经由计算设备的触敏显示器提供第二触觉输出。
根据一些实施方案,设备100确定警示条件由应用程序自动触发(例如,预先确定或预定警示,诸如应用程序生成的提醒通知或自动闹钟),或由应用程序从设备外部来源接收到的自动发起事件通知(例如,自动/系统生成电子邮件或消息)。例如,noreply@domain.com的发送人电子邮件地址暗示电子邮件通过自动方式发送,因为响应于该电子邮件没有真实人类发送人回复。
根据一些实施方案,根据确定自动发起事件对应于设备100外部发生的事件,设备100提供第二触觉输出的第一变型,对应于外部发生的自动发起事件的通知。同样地,根据确定自动发起事件对应于设备内部发起的事件,设备100提供第二触觉输出的第二变型,对应于内部生成的自动发起事件的通知。因此,根据一些实施方案,取决于事件是否由传入消息生成,为相同应用程序提供不同通知。
根据一些实施方案,设备100确定警示条件在预先确定时间出现或者对满足预先确定的触发条件的报告指示警示条件具有自动触发。例如,对一些预先确定的触发条件的满足(例如,你当天的活动目标已满足,你已离开地理围栏区域等)为自动类型触发。
对于手动发起警示触发,设备100分析与警示条件相关联的特征以确定与自动发起事件相关联的一个或多个情境属性以及基于一个或多个情境属性调制912第二输出的强度。根据各种情况,当评估与自动通知相关联的情境属性以及将要提供的触觉或音频通知的强度时考虑各种因素。例如,通知类型(例如,一次事件对重复事件,诸如周期性/重复闹钟),在事件发生时用户的位置,外部触发或内部触发的通知,在接收通知时用户正执行的活动,以及对于外部通知,用来传送消息的媒介。
对于手动触发事件,针对自动发起事件,设备100确定与自动发起事件相关联的紧急情况的时间变化测量以及在特定时间窗上调制912指示紧急情况的时间变化测量的第二触觉输出的强度。例如,对于自动发起(例如,内部,预先安排的)的触发,基于与通知相关联的事件的紧急程度或定时调制912该组触觉参数。根据一些实施方案,例如,对于相机应用程序,设备100提供构成所拍照片的一系列微轻击输出,随着拍照片的时间邻近时微轻击之间的间隔渐进式减小,提供形成紧急程度的感觉或者有助于定时参数的用户理解的时间变化输出。
在一些实施方案中,第一触觉输出的第一组特征不同于第二触觉输出的第二组特征。类似地,如果伴随有相应音频分量,则第一输出的音频分量比自动发起事件通知具有手动发起事件通知的第一组参数(较高幅度、较长输出持续时间、更加打扰/可察觉/明显的音频音符)。
特定示例包括检测与应用程序相关联的警示条件以及相应地确定警示条件是否对应于来自与用户相关联的联系人列表中的发送人的个人通信,其中提供对应于个人警示通知的第一触觉输出,或者警示条件是否不对应于来自与用户相关联的联系人列表中的发送人的个人通信,其中提供对应于自动警示通知的第二触觉输出,其中第一触觉输出具有比第二触觉输出更大的强度。
触觉输出任选地伴随对应音频输出,其中相应音频输出的至少一部分与相应触觉输出的至少一部分同时发生,或者相应音频输出与相应触觉输出在时间上靠近地发生,使得触觉输出和相应音频输出在感知上是并发或同时的。触觉和音频波形无需完美对准,并且设备100可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。伴随的音频部分的变化可在包括音频输出的实施方案之间不同。例如,与第一输出相关联的音频分量的幅度、与第一输出相关联的音频分量的持续时间,和与第一输出相关联的音频分量相关联的一个或多个音乐质量(例如,音阶、音调等)中的每一个可能在某些情况下不同。
根据一些实施方案,对于第一触觉输出,第二触觉输出伴随有音频输出,第二触觉输出的波形基于镜像生成并且与伴随的音频输出的波形同步。在一些实施方案中,触觉分量的波形从相应音频分量的波形生成以及与相应音频分量的波形匹配、模拟、镜像相应音频分量的波形,或者与相应音频分量的波形同步,如结合图6所述。
根据一些实施方案,输出触觉和音频波形的各种组合。根据一些实施方案,第一触觉输出未伴随音频输出,但第二触觉输出伴随音频输出。在一个示例中,第一触觉输出伴随第一音频输出并且第二触觉输出伴随第二音频输出,在该情况下,第一触觉输出与第二触觉输出相同并且第一音频输出不同于第二音频输出。在一些实施方案中,在伴随不同音频波形时,相同触觉波形生成不同感受。例如,如果以高音阶对低音阶演奏音频(铃声)音调,并且伴随相同触觉分量(或者典型用户将无法区分的大体类似的触觉分量),则尽管相同的触觉但触觉分量的感受不同。较高音阶或尖锐版本的铃声可用于第二输出以引起用户注意力提高。在一些实施方案中,第一触觉输出与第二触觉输出类似、相同或大体上相同。
在另一示例中,第一触觉输出伴随音频输出并且第二触觉输出伴随相同音频输出,在该示例中,第一触觉输出不同于第二触觉输出。
应当理解,对图9中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、1000、1100、1200、1300、2500、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图9描述的方法900。例如,参考方法900上述的输入、警示条件、事件、应用程序、状态和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、1000、1100、1200、1300、2500、2600、3000和3200)在本文所述的输入、警示条件、事件、应用程序、状态和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
反馈对基于通知的触觉输出
警示条件可由用户输入或预先确定的系统事件(例如,提醒、通知)触发。根据一些实施方案,检测到的警示条件是否与用户输入或者预先确定的系统事件相关联提供用于提供对应触觉输出的基础。提供与警示条件的类型相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图10为根据一些实施方案的从用户输入检测第一警示条件和从与应用程序相关联的预先确定的事件检测第二警示条件以及提供对应触觉输出的方法1000。注意,在一些实施方案中,可执行图10中所示那些之外的不同步骤。
方法开始于检测1005计算设备100上与接收到对应用程序的用户输入相关联的第一警示条件。根据一些实施方案,第一警示条件可为本文其他地方所述的各种警示条件中的任一个,并且应用程序可为在设备100上执行的任何应用程序。根据一些实施方案,计算设备100包括用于接收用户输入的触敏显示器。
根据一些实施方案,响应于检测到第一警示条件,设备100提供1010具有第一强度以及对应于对应用程序的用户输入的第一触觉输出。在直接响应于用户输入以及作为用户输入的结果任选地反馈提供第一触觉输出。根据一些实施方案,针对未响应于用户输入的不期望警示比直接响应于用户输入的反馈使用的那些触觉使用更强烈触觉(例如,较高幅度或较长触觉)。在一些实施方案中,不期望的警示为发生在用户注意力指向设备的情境之外的警示(例如,在用户未主动使用设备时或在用户未翻看设备时发生的警示)。例如,设备用户佩戴设备但未翻看设备以及未与即时消息应用程序交互时由设备生成的电子消息警示为未期望的警示,而在用户翻看设备和/或打开设备上的即时消息应用程序时接收的相同警示将为期望的警示。类似地,用户期望特定用户输入的反馈(当用户在地图上放置图钉时的“点击”),因为用户积极参与设备并且因此有很大可能注意到不太强烈的触觉警示。根据一些实施方案,经由计算设备100上的触敏显示器提供第一触觉输出。第一强度可为触觉波形幅度、频率和/或持续时间的预先确定或可调整组合,如在本文其他地方所述。
设备100还检测1015与在应用程序中接收预先确定的系统事件相关联的第二警示条件。例如,第二警示条件对应于由应用程序自动触发或者从应用程序内触发的事件。根据各种实施方案,此事件包括在预先确定的时间出现或对满足预先确定的准则的报告的警示,应用程序生成的提醒通知或闹钟、应用程序接收的自动发起事件通知(例如,自动/系统生成的电子邮件或消息,诸如系统生成的大量邮件、垃圾邮件、指向邮寄列表的系统生成电子邮件等)或应用程序接收的手动发起事件通知(例如,人类用户发起的事件-诸如来自用户联系人列表上的已知电子邮件地址或电话号码的传入消息或呼叫)。
响应于检测到第二警示条件,设备100提供1020具有第二强度并且对应于预先确定的系统事件的第二触觉输出,其中第二强度大于第一强度。第二强度在幅度、频率和/或持续时间中的一个或多个方面大于第一强度。当计算设备100包括触敏显示器时,经由计算设备上的触敏显示器提供第二触觉输出。
如此设计第二触觉输出的较大第二强度来引起对未源自用户输入的警示条件的用户关注力提高。例如,相比较未用手指触摸设备的用户,使用应用程序时的用户反馈-其中手指可能已经触摸设备100-需要较小触觉输出由用户注意到。在触摸设备时的反馈由用户期望,并且由此任选地比未期望的输出更弱并且更细微。根据一些实施方案,直接操控将造成简短、即刻的触觉反馈(<100毫秒)。触觉反馈在响应于用户输入时不太干扰(例如,具有较低幅度、较小触觉特征、更长周期性/重复性、较短持续时间、较弱触觉特征等)。在另一方面,通知通常为未期望输出,并且因此需要更强从而在一些情况下引起增大的用户注意力。因此,通知任选地较长(~1.5秒)并且更干扰一些。
例如,设备100检测1005对应于显示在与第一应用程序相关联的应用程序用户界面上的用户界面元素的用户选择的第一警示条件,并且响应于第一警示条件,提供1010代表用户界面元素的用户选择的相应第一触觉输出,根据一些实施方案,相应第一触觉输出包括具有第一强度和第一持续时间的第一触觉特征的第一触觉分量。根据一些实施方案,在提供相应第一触觉输出之后,设备100检测1015对应于第一应用程序接收的警示条件的第二警示条件,并且响应于第二警示条件,提供1020代表对警示通知的接收的相应第二触觉输出,相应第二触觉输出包括第二触觉分量:(1)第二触觉分量包括第二强度和第二持续时间的第二触觉特征,以及(2)基于第二触觉特征比第一触觉特征更明显,第二强度大于第一强度,或者第二持续时间长于第一持续时间,第二触觉分量与相应第一输出不同并且更明显。例如,传入电话呼叫可能比在电话应用程序上接听或挂断呼叫具有更强烈触觉输出。
表3:电话
表3示出了对应于三个不同警示条件:传入呼叫、接听呼叫和挂断呼叫的电话应用程序和输出。在该示例中,用户接听或挂断呼叫为由采取动作的用户期望的动作,并且由此伴随该动作的对应触觉输出被认为对用户的反馈。对于这两个警示条件,触觉输出不太强烈(例如,微轻击)。相比之下,传入呼叫为更不期望类型的警示条件,并且实际上一个传入呼叫存在有限时间段,并且因此具有较大强度的触觉意在获得用户的注意(例如,嗡嗡声-嗡嗡声)。根据一些实施方案,针对未响应于用户输入的不期望警示比直接响应于用户输入的反馈使用的那些触觉使用更强烈触觉(例如,较高幅度或较长触觉)。
根据一些实施方案,表3提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用警示、状态、模式、条件和输出的其他组合。
在一些情况下,触觉输出可基于它们源自特定用户输入与否而变化。在一些实施方案中,设备100首先检测与第一应用程序相关联的第一警示条件,第一警示条件源自相应用户输入。例如,用户提供触摸输入来在电子邮件应用程序中键入电子邮件消息。根据一些实施方案,设备100提供代表第一警示条件的相应第一触觉输出。继续以上示例,设备为每个用户接触输入提供低强度、短间隔嗡嗡声。在提供相应第一触觉输出之后,设备100检测与第一应用程序相关联的第二警示条件,第二警示条件并非源自接收用户输入。在电子邮件应用程序情境中,该警示条件任选地为电子邮件应用程序中的传入电子邮件。根据一些实施方案,设备100随后提供代表第二警示条件的相应第二触觉输出,相应第二触觉输出与相应第一输出不同并且具有更大强度。例如,第二触觉输出任选地具有更大强度和/或延长的轻击来通知设备的用户传入消息。
根据一些实施方案,第一和第二触觉输出可具有影响其强度和能力来引起用户注意的各种特征。例如,第一触觉输出具有包括以下中的一个或多个的第一组特征:第一触觉输出的幅度、第一触觉输出的持续时间、与第一触觉输出相关联的规律性、第一触觉输出中触觉特征的重复频率、构成第一触觉输出的触觉特征的选择并且第二触觉输出具有包括以下中的一个或多个的第二组特征:第二触觉输出的幅度、与第二触觉输出相关联的触觉分量的持续时间、与第二触觉输出相关联的规律性、第二触觉输出中触觉特征的重复频率、构成第二触觉输出的触觉特征的选择。根据各种实施方案,任何特征在第一和第二触觉之间可能不同,或者它们中的所有可能都不同。
根据一些实施方案,输出触觉和音频的各种组合。根据一些实施方案,第一触觉输出未伴随音频输出,但第二触觉输出伴随音频输出。在一个示例中,第一触觉输出伴随第一音频输出并且第二触觉输出伴随第二音频输出,在该情况下,第一触觉输出与第二触觉输出相同并且第一音频输出不同于第二音频输出。在一些实施方案中,在伴随不同音频波形时,相同触觉波形生成不同感受。例如,如果以高音阶对低音阶演奏音频(铃声)音调,并且伴随相同触觉分量(或者典型用户将无法区分的大体类似的触觉分量),则尽管相同的触觉但触觉分量的感受不同。较高音阶或尖锐版本的铃声可用于第二输出以引起用户注意力提高。在一些实施方案中,第一触觉输出与第二触觉输出类似、相同或大体上相同。
根据一些实施方案,任何触觉输出可伴随有音频输出,其中第二触觉输出的波形基于镜像生成并且与伴随的音频输出的波形同步。在一些实施方案中,触觉分量的波形从相应音频分量的波形生成以及与相应音频分量的波形匹配、模拟、镜像相应音频分量的波形,或者与相应音频分量的波形同步,如结合图6所述。触觉和音频波形无需完美对准,设备100可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。伴随的音频部分的变化可在包括音频输出的实施方案之间不同。例如,与第一输出相关联的音频分量的幅度、与第一输出相关联的音频分量的持续时间,和与第一输出相关联的音频分量相关联的一个或多个音乐质量(例如,音阶、音调等)中的每一个可能在某些情况下不同。
在一些实施方案中,存在触觉强度和设备音量之间的协调。例如,第一触觉输出的第一强度和第二触觉输出的第二强度与设备上音量设置相反的关系调整,使得如果音频信道关闭或降低音量,触觉输出任选地被加强,或者独立地或者超过并且在默认/预先确定的强度设置之上。
在一些实施方案中,在提供第一触觉输出之前,设备100确定1025是否存在基于输入的调制条件,并且响应于确定存在基于输入的调制条件,在提供第一触觉输出之前,设备100修改1030第一触觉输出。
例如,一个基于输入的调制条件为用户参与。在该情况下,设备100检测相应警示条件并且确定相应警示条件源自在计算设备上接收的相应用户输入。根据一些实施方案,随后设备100识别与检测到的用户输入相关联的用户参与的测量并且基于用户参与的测量调制第一触觉输出的第一信号强度。例如,在一些实施方案中,音频的强度(例如,幅度、持续时间、重复频率)和/或触觉分量随与应用程序/设备的用户输入交互/参与的测量相反变化。对于用户交互/参与(诸如触摸或直接操控)的较高程度/测量,选择输出特征从而使得第一输出更细微或不太干扰/可察觉的。因此,当用户已经具有与应用程序/设备较高程度的参与或交互时,用户不会受到过度强反馈信号轰炸。例如,为触摸/直接操控提供最弱输出,例如,如果用户在提供输入时接触设备,则用户不会受到过度强触觉反馈的轰炸。另一方面,如果用户较少参与,则为用户提供较强信号来吸引额外注意。
表4:参与/触觉反馈水平
表4示出了用户焦点和所得到的触觉输出水平的变化的警示条件的各个水平的用户参与。所示触觉输出水平可被看作鉴于主要和次要用户焦点获得用户注意所需要的触觉强度水平的滑动标度。例如,当警示条件为反馈形式时,最高水平用户参与为对生成警示条件的应用程序的直接操控。例如,如果用户将信息输入到应用程序中,应用程序已经为用户主要焦点,所以需要较小触觉来引起用户注意,并且因此可输出最低水平的触觉,“水平1”。这可能是最小触觉可能,例如单次微轻击。
跳到第三行,如果用户正触摸设备但输入到不同应用程序,则用户聚焦在设备上,并且因此具有某个参与水平,但由于用户正使用与提供警示的应用程序不同的应用程序,所以用户具有比正输入到提供警示的应用程序较低的参与。在该情况下,适当输出为“水平2”触觉输出。例如,水平2输出可能是一行中的两次微轻击。
跳到倒数第二行,用户可能使得发出警示的应用程序为活动的,但运行在后台,并且可能在警示条件时未触摸设备。结果,在该情况下,可能采取更大触觉从而引起用户的关注。因此,“水平3”触觉输出可能是恰当的,例如,启动轻击随后微轻击或一系列微轻击。
最后,最后一行示出用户,其中发出警示的应用程序处于不活动状态。在一些情况下,应用程序甚至未在后台执行,或者设备在睡眠。在该实例中,最大触觉,“水平4”适合引起用户注意。在一些情况下,例如,嗡嗡声-嗡嗡声触觉输出可能是恰当的。根据一些实施方案,针对未响应于用户输入的不期望警示比直接响应于用户输入的反馈使用的那些触觉使用更强烈触觉(例如,较高幅度或较长触觉)。
这仅仅是一个示例,使用有限数量的情况以及触觉输出示例,并且假定所有应用程序和警示看成相同,在其他情况下可能不是这种情况。此外,特定水平的触觉输出可能是“默认”输出,例如,水平2,并且随后取决于用户的焦点,设备可向上或向下调节触觉输出的强度。根据一些实施方案,表4提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用警示、状态、焦点、条件和输出的其他组合。
在一些实施方案中,基于用户输入的位置修改触觉输出。在该示例中,设备100检测相应警示条件并且确定相应警示条件源自在设备上接收触觉用户输入。通过减小第一触觉输出的触觉能量的幅度使得在设备上接收触觉用户输入的位置是可察觉的,设备100调制第一触觉输出的空间触觉能量分布。根据一些实施方案,减小的触觉能量的幅度可使得在远离用户手指/触觉输入位置的位置不可察觉。例如,低幅度可由接触点处的手指而不是手和/或腕部其他部位察觉到。类似地,在一些实施方案中,设备100检测相应警示条件以及确定相应警示条件源自在设备上接收触觉用户输入,但随后特别标识设备上接收触觉用户输入的位置以及通过在设备上接收触觉用户输入的位置的特定半径阈值内提供比第一触觉输出的特定比例触觉能量更大的触觉能量来调制第一触觉输出的空间触觉能量分布。根据一些实施方案,在设备上接收触觉用户输入的位置随时间变化,并且因此对应于接收触觉用户输入的时间变化位置的空间触觉能量也随时间变化。
根据一些实施方案,触觉输出的形态学特征模拟触觉输入。例如,设备100检测相应警示条件,确定相应警示条件源自接收触觉用户输入,以及随后标识触觉用户输入的时间变化形态学属性。根据各种实施方案,触觉输入的时间变化形态学属性包括检测在触敏表面上的接触,监视接触是否保持在表面以及移动多远以及移动方向,确定置于接触点上的压力量。随后,设备100随时间修改第一触觉输出的形态学特征来模拟触觉用户输入的时间变化形态学属性。例如,第一触觉输出模拟的形态学特征包括改变反映触觉输入的触觉输出的幅度、持续时间、频率等。
在一些实施方案中,触觉分量的波形无需与用户触觉输入完美对准,以及设备100可考虑以下事实,触觉输出将由用户与触觉输入并发或同时察觉到,尽管它们在时间上存在稍微偏差(例如,因为触觉输出比用户可将其察觉作为延迟响应更快地加以处理,从而使得用户察觉到触觉输出并发或同时发生)。在一些实施方案中,选择可用的预先确定的一组触觉特征的特定触觉特征来构成第一输出的触觉分量,该选择基于哪些特征最佳模拟用户输入。一些示例包括用于简单触摸的微轻击、较长/较深触摸的笔点击式轻击、轻扫的嗡嗡声、用于最后手指抬起的轻扫的最后声音提高的嗡嗡声。根据一些实施方案,例如,时间变化形态属性包括触觉用户输入与计算设备的触敏表面之间基于时间的接触压力分布,以及修改包括随时间调制第一触觉输出的能量分布来反映触觉用户输入与计算设备的触敏表面之间的基于时间的接触压力分布。
根据一些实施方案,触觉输出可模拟持续用户输入、手势、机械调整或用户的其他设备操控的时间段。例如,设备100首先检测相应警示条件并且确定相应警示条件源自持续用户输入。根据一些实施方案,持续用户输入包括在计算设备上的触敏显示器上的触觉用户输入、旋转旋钮、按压按钮、或者具有可检测的开始/结束时间的设备操控的其他用户输入。在一些实施方案中,设备可确定警示条件源自手势、机械调整等。响应于确定,设备100在持续用户输入的发起时间发起第一触觉输出,检测持续用户输入的终止,并且随后在持续用户输入的终止时间终止第一触觉输出(例如,模仿用户输入)。在一些实施方案中,触觉输出在用户输入的开始时间时发起并且在用户输入结束时间终止。因此,触觉反馈/输出大体贯穿用户输入的持续时间延伸。触觉输出可在用户输入的位置提供,不限于触敏表面。例如,如果手表侧边上的旋转旋钮被拨动,则感觉像点击的触觉可在用户拨动旋钮时提供持续反馈。
在一些实施方案中,在提供第二触觉输出之前,设备100确定1035是否存在基于环境条件的调制条件,并且响应于确定存在基于环境条件的调制条件以及在提供第二触觉输出之前,设备修改1040第二触觉输出。
例如,设备100确定是否存在环境条件作为对触觉输出的用户感受的潜在阻碍。在该示例中,设备100确定是否存在针对设备的一个或多个环境条件在相应警示条件的出现时作为对触觉输出的潜在干扰。根据一些实施方案,环境条件包括:噪声(可包括测量的环境噪声以及识别出用户在图书馆、博物馆、电影院、医院或通常已知为安静的其他地方)、影响用户对触觉感受的物理接受性的移动/振动、与设备的参与水平(例如,如上所述:浏览、触摸、交谈)、用户与设备的接近程度(例如,用户本人身上的设备对位于大于距设备的指定接近度阈值等)。
表5:环境条件/触觉反馈
环境条件 主要应用程序状态 触觉修改
噪声(低) 活动的
噪声(低) 不活动的
噪声(高) 活动的 增加1
噪声(高) 不活动的 增加2
振动(低) 活动的
振动(低) 不活动的 增加1
振动(高) 活动的 增加1
振动(高) 不活动的 增加3;延迟
距设备的距离(短) 活动的
距设备的距离(短) 不活动的
距设备的距离(长) 活动的 增加1
距设备的距离(长) 不活动的 增加3;延迟
参与水平(高) 活动的 降低1
参与水平(低) 活动的
表5示出了根据一些实施方案的可在警示条件期间存在的以及用于各种应用程序状态的各种环境条件,以及对那些条件提供的触觉输出的可能修改。所示的环境条件包括低和高噪声水平、低和高振动水平、与设备的短和长距离以及高和低用户参与水平,与以上部分和表4相关联。借助各种环境条件的示例以及针对给定应用程序状态(活动的或不活动的),如何可以修改触觉输出针对环境条件进行调整来设置该表。表5仅示出对触觉输出的修改,但可对非触觉输出,诸如音频做出类似修改。触觉修改列列出可能的无修改(针对警示保持默认触觉),增加1、2、或3以及降低1,当然许多变型是可能的,这些仅仅是示例。对于一些条件,诸如高噪声、低振动(不活动的)、高振动(活动的)以及距设备的长距离(第3、4、6、7和11行),设备可通过在可能引起用户某个分心水平的这些环境条件下增加一个或两个步骤,例如微轻击到轻击或两次微轻击等,来修改默认触觉。对于其他条件,诸如高振动(不活动的)或距设备的长距离(第8和12行),设备可通过在可能引起用户较大分心水平的这些环境条件下增加更大数量,例如微轻击到嗡嗡声等,来修改默认触觉。在一些情况下,作为修改的一部分触觉可伴随音频输出。另选地或除了修改触觉的强度之外,设备可延迟触觉输出直到环境条件变得更有利于用户接收触觉输出,例如,用于标记为增加3的环境条件。在该示例中,设备可周期性地确定环境条件来确保干扰的环境条件是否已经下降并且因此触觉可被输出。在其他情况下,未应用延迟。这些示例是非常有限的,使用有限数量的情况以及触觉输出示例,并且假定所有应用程序和警示看成相同,在其他情况下可能不是这种情况。
在一些实施方案中,不需要修改,因为环境条件并未引起用户太多任何分心(例如,在修改列中“无”的行)。最后,在一些环境条件下,设备可减小与警示条件相关联的默认触觉,例如,对于高参与水平,在该情况下自用户参与时开始就需要较少输出。根据一些实施方案,表5提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用环境条件、警示、状态和输出的其他组合。
根据一些实施方案,设备100延迟触觉输出。首先,设备100做出确定对于设备不存在干扰的环境条件。在该示例中,设备100基于用户的接受性的状态提供相应第二触觉输出,并且根据确定针对设备存在一个或多个环境条件作为对触觉输出的潜在干扰,设备100延迟将相应第二输出提供给用户。例如,延迟可继续直到其中没有干扰的环境条件存在的随后实例(例如,设备100在稍后时间点再次确定干扰的环境条件是否存在)。例如,如果用户在接收通知时是非常活动的(例如,跑步或在健身中),并且因此不能察觉到触觉感受,则设备可延迟触觉输出直到活动完成,诸如等到用户完成活动,并且随后将提供对应于该通知的触觉输出。在其他情况下,警示足够紧急设备不会将其延迟,不管环境条件如何。在这些示例中,环境条件的确定起到代理的作用用于估计用户对触觉感受的物理接受性,例如,基于用户当前周围的属性。
根据一些实施方案,设备100提供触觉输出的变型,诸如结合表5所述的修改。在该示例中,设备100检测与相应应用程序相关联的相应警示条件并且确定相应警示条件不是源自接收到用户输入。响应于确定相应警示条件不是源自接收到用户输入,设备100确定在相应警示条件出现时针对设备是否存在一个或多个环境条件作为对触觉输出的潜在干扰,并且根据确定针对设备不存在干扰的环境条件,则设备100将第二触觉输出的第一变型提供给用户,第二触觉输出的第一变型具有第一组输出特征。根据一些实施方案,例如,变型可为较软、较短持续时间,包括更细微触觉特征(例如,微轻击)的触觉输出。根据确定针对设备存在一个或多个环境条件作为对触觉输出的潜在干扰,设备100将第二触觉输出的第二变型提供给用户,第二触觉输出的第二变型具有第二组输出特征,第二组特征不同于第一组特征,并且第二触觉输出的第二变型比第二触觉输出的第一变型具有更大强度。
在一些实施方案中,设备100可修改触觉输出来“启动”用户。例如,设备100首先检测与相应应用程序相关联的相应警示条件并且随后确定相应警示条件不是源自接收到用户输入。根据一些实施方案,响应于确定相应警示条件不是源自接收到用户输入,设备提供启动触觉输出作为对第二触觉输出的前导,启动触觉输出设计为将操作设备的用户的参与水平增大到第二触觉输出,其中启动触觉输出的至少一部分比第二触觉输出更明显。设备100任选地在提供启动触觉输出的指定时间间隔内以及之后提供第二触觉输出。
根据一些实施方案,设备100可提供启动的变型。在一个示例中,启动触觉输出包括具有通过触觉分量随时间渐进式增大强度来表征的时间变化波形形态的启动触觉分量。在一些实施方案中,启动触觉输出包括强度逐渐增大的触觉波形从而潜意识地为用户准备通知。根据一些实施方案,在启动之后,音频音量的大量增加伴随触觉分量出现。在另一示例中,启动触觉输出任选地包括具有通过加强的触觉特征以及随后的触觉分量逐渐减小的强度来表征的时间变化波形形态的启动触觉分量。根据一些实施方案,另选地,设备100可通过首先提供较强的启动触觉(以及任选地音频)输出特别启动用户的敏感性并且一旦启动用户感受时随后提供较温和输出。根据一些实施方案,响应于源自接收到用户输入的相应警示条件,第二触觉输出之前是启动触觉输出并且直接提供第一触觉输出,而不存在对应的先前的启动触觉输出。在各种实施方案中,基于与警示条件相关联的紧急性或情境选择启动触觉输出的特征,输出的强度反映警示的紧急性。
应当理解,对图10中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1100、1200、1300、2500、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图10描述的方法1000。例如,参考方法1000上述的输入、警示条件、应用程序、和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1100、1200、1300、2500、2600、3000和3200)在本文所述的输入、警示条件、应用程序、和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
用于多部分操作的触觉输出
根据一些实施方案,检测到的警示条件是否为多部分操作中的一部分提供用于提供对应触觉输出的基础。提供与警示条件是否为多部分操作的一部分相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图11为根据一些实施方案的检测与多部分操作相关联的第一警示条件以及提供对应触觉输出的方法1100的流程图。注意,在一些实施方案中,可执行图11中所示那些之外的不同步骤。
方法开始于接收1105对应于由计算设备100上运行的应用程序所执行的多部分操作的第一部分的输入。在一些实施方案中,在设备100的触敏表面上检测对应于多部分操作的第一部分的输入。
响应于接收到对应于多部分操作的第一部分的输入,设备100发起1110正在进行的触觉输出序列。根据各种实施方案,输出的触觉序列可正在进行,感觉在一段时间内是持续的、恒定的、变化但连续的,或者间断的,只要在接收到第二输入之前继续即可。在一些实施方案中,响应于接收到对应于多部分操作的第一部分的输入,设备还发起伴随正在进行的触觉输出的正在进行的音频输出序列。
根据一些实施方案,设备100具有触敏表面,并且经由触敏表面提供触觉输出序列。例如,触觉输出包括以对正触摸触敏表面的设备的用户可察觉的预先确定的模式触敏表面的触觉振动。
在一些实施方案中,除了正在进行的触觉输出序列之外,设备100还提供1115响应于接收到对应于多部分操作的第一部分的输入的第一触觉反馈。在一些情况下,第一触觉反馈基于事件以及指示对事件的发起来选择,并且不同于正在进行的触觉输出序列。根据一些实施方案,例如,第一触觉反馈比正在进行的触觉输出序列具有较强强度触觉输出。
根据一些实施方案,在发起正在进行的触觉输出序列之后,设备100接收1120对应于多部分操作的第二部分的输入。对于具有触敏表面的设备100,在触敏表面上检测对应于多部分操作的第二部分的输入。
在一些实施方案中,包含两个设备。因此,在一些实施方案中,设备100检测对应于多部分操作的第一部分和多部分操作的第二部分两者的输入。然而,在一些实施方案中,设备100检测到对应于多部分操作的第一部分的输入并且第二设备检测到对应于多部分操作的第二部分的输入。
根据一些实施方案,设备100可接收另外用户输入。根据一些实施方案,例如,在响应于多部分操作的第一部分发起1110正在进行的触觉输出序列之后,以及在接收1120对应于多部分操作的第二部分的输入之前,设备100接收1125不同于对应于多部分操作的第二部分的输入的一个或多个另外用户输入。根据一些实施方案,在这些情况下,设备继续提供正在进行的触觉输出而不管另外的用户输入,直到接收到对应于多部分操作的第二部分的输入为止。
根据一些实施方案,响应于接收到对应于多部分操作的第二部分的输入,设备100终止1130正在进行的触觉输出序列。在一些实施方案中,响应于检测到对应于多部分操作的第二部分的输入,设备100还终止任何正在进行的音频输出序列。
根据一些实施方案,对应于多部分操作的第二部分的输入在对应于多部分操作的第一部分的输入之后并且在时间上与对应于多部分操作的第一部分的输入间隔开对应于事件的持续时间的指定时间间隔。而且,在一些情况下,正在进行的触觉输出序列贯穿事件的持续时间提供并且指示事件的出现。
根据一些实施方案,设备还响应于接收到对应于多部分操作的第二部分的输入提供1135第二触觉反馈,第二触觉反馈不同于正在进行的触觉输出序列。在一些情况下,第二触觉反馈指示事件的终止,并且不同于正在进行的触觉输出序列。根据一些实施方案,例如,第二触觉反馈比正在进行的触觉输出序列具有较强强度触觉输出。
根据不同实施方案,多部分操作可采取各种形式。根据一些实施方案,多部分操作为安全事务处理,其中多部分操作的第一部分包括装备设备以授权安全事务处理。在该示例中,响应于用户提供凭据,诸如密码或生物识别认证诸如指纹,设备进入付款模式,其中付款信息可经由近场通信(NFC)子系统提供给付款终端。因此,设备的装备为第一部分,并且将发起对应的正在进行的触觉输出。此外,根据该示例,多部分操作的第二部分包括授权安全事务处理。根据一些实施方案,授权由此为第二步骤并且例如包括在NFC子系统从第一步骤装备时进入付款系统的NFC场的范围内时将付款信息提供给付款终端。
在NFC多部分安全事务处理的一些实施方案中,多部分操作的第一部分包括确定请求用户认证来完成安全事务处理。例如,响应于NFC子系统进入付款终端的NFC场的范围内,提示用户提供凭据诸如密码或生物识别认证诸如指纹来授权安全事务处理。在该示例中,多部分的操作的第二部分包括接收用于安全事务处理的用户认证。例如,提供触觉输出来提醒用户需要在付款过程可前进之前提供用户认证信息,用户认证信息任选地包括基于密码或基于生物识别的认证。在一些实施方案中,在当确定需要用户认证时以及在接收到用户认证时之间(例如,在请求用户认证以及接收用户认证之间)由设备提供第一触觉输出模式以提醒用户提供用户认证信息,以及在当接收到用户认证信息时以及安全事务处理得到授权之间(例如,在接收到用户认证以及将付款信息提供给付款终端之间)由设备提供第二触觉输出模式。根据一些实施方案,在该示例中,第二触觉输出模式不同于第一触觉输出模式来提醒用户将NFC子系统置于付款终端附近。
根据其他付款实施方案,输入对应于不使用NFC的安全事务处理。在该示例中,多部分操作的第一部分为对发起事务处理的第一用户界面元素的选择。对于财务事务处理诸如在线购买,对对应于激活在线付款的元素的选择允许用户进入用户界面用于输入安全或保密信息。作为另一示例,用户请求登录到安全位置,诸如安全电子邮件账户或在线零售商。继续以上示例,多部分操作包括一个或多个输入用于输入处理该事务处理所需要的信息。例如,贯穿信息输入的持续时间,提供授权财务事务处理所必须的信用卡信息和其他验证信息以及对应的正在进行的触觉输出序列的输入。类似地,输入可为输入登录到安全网络账户的用户名和密码。在一些实施方案中,事件对应于填充接收处理事务处理所需要的信息的一个或多个数据条目字段以及对应于多部分操作的第二部分的输入为对授权完成事务处理的用户界面元素的选择,例如,授权付款用户界面元素。
根据一些实施方案,多部分操作的第一部分包括关闭文档的草稿而多部分操作的第二部分包括返回到文档的草稿。根据各种实施方案,关闭文档的示例包括关闭电子邮件或文本消息的草稿来切换到另一任务或者打开设备上的另一应用程序以及返回到文档包括从其他任务或其他应用程序切换回到电子邮件或文本消息的草稿。
在一些实施方案中,输入为时间上相邻出现的单独输入。根据一些实施方案,例如,对应于多部分操作的第一部分的输入为与在设备上运行的应用程序交互的第一用户输入而对应于多部分操作的第二部分的输入为与应用程序交互的第二用户输入,其中第二用户输入不同于第一用户输入。例如,对应用程序的第一用户输入可为第一轻击和抬起,而第二用户输入可为在相同应用程序中的第二轻击和抬起。
在一些情况下,多部分操作为多部分手势。根据一些实施方案,例如,操作包括首先检测对应于多部分操作的第一部分的输入作为在设备100的触敏表面上的接触以及检测对应于多部分操作的第二部分的输入包括检测在触敏表面上的接触的移动。在轻扫手势的示例中,第一部分为用户触摸触敏表面,第二部分为用户在触敏表面上移动该接触的同时保持与表面的接触。在另一示例中,操作包括首先检测对应于多部分操作的第一部分的输入作为在触敏表面上的接触的移动以及在检测到接触从触敏表面抬起时检测对应于多部分操作的第二部分的输入。
根据一些实施方案,对应于多部分操作的第一和第二部分的输入包括单个手势,其中对应于多部分操作的第一部分的输入为手势的初始部分(例如,用手指接触触摸并保持)而对应于多部分操作的第二部分的输入为手势的随后部分(例如,手指接触的抬起)。例如,在文本编辑或浏览应用程序中,将手指按在字词上首先加亮该字词并且随后继续将手指按在加亮的字词上调用剪切-复制-粘贴菜单。在该示例中,接触的抬起将代表对显示方面对应于该触摸的选择并且保持。
在一些实施方案中,手势在触敏表面上对应于在设备100的显示器上显示的用户界面中的第一位置的部分上发起并且在触敏表面上对应于用户界面中不同于第一位置的第二位置的第二部分上终止。根据一些实施方案,例如,触摸-轻扫-抬起序列可用来执行拖放,或者在相机取景器中重新定位焦点区域。
根据一些实施方案,对应于多部分操作的第一部分的输入发起与相应应用程序相关联的事件,持续该事件直到接收到对应于多部分操作的第二部分的输入为止,此时对应于多部分操作的第二部分的输入终止与相应应用程序相关联的事件。根据一些实施方案,例如,第一输入为对发起与应用程序相关联的事件的用户界面元素(例如,在应用程序的应用程序用户界面上提供)的选择而第二输入为对终止与应用程序相关联的事件的不同用户界面元素(例如,在相同应用程序的应用程序用户界面上)的选择。
根据一些实施方案,应用程序为文本编辑应用程序,以及对应于多部分操作的第一部分的输入为对启用文本编辑应用程序的文本键入模式的第一用户界面元素的选择。在该示例中,多部分操作包括用于文本输入到文本编辑应用程序中的一个或多个输入,事件对应于响应于文本键入的输入在文本编辑文档中的文本操控,对应于多部分操作的第二部分的输入为对禁用文本编辑应用程序的文本键入模式的用户界面元素的选择。根据一些实施方案,文本编辑应用程序为通信应用程序诸如允许设备用户与其他用户通信的电子邮件或即时消息应用程序。根据一些实施方案,文本编辑应用程序为非通信文本编辑应用程序,诸如文字处理应用程序、记事本或粘滞便笺应用程序,或者允许文本键入但不提供独立通信功能的其他应用程序。
根据一些实施方案,正在进行的触觉输出序列的特征基于对应于多部分操作的第一部分的输入发起的事件来选择的。例如,将呼叫置于保持伴随比财务事务交易事件或安全登录较低强度的(例如,较低能量、较小打扰、较小可察觉性)触觉输出序列,用户为其提供保密或安全信息,并且由此为将获得另外注意的事务处理。在该示例中,贯穿多部分操作的持续时间(例如,在输入保密信息之后但在事务处理完成之前),用户由此被提醒先前的键入使得他或她快速完成事务处理从而避免折中正在输入的信息的保密性。在一些情况下,使用超时功能使得保密信息不再可用。另外,不同触觉输出模式任选地为用户提供针对他们正在完成那些任务中的信息。
根据一些实施方案,对应于多部分操作的第一部分的输入暂停与应用程序相关联的正在进行的事件,而对应于多部分操作的第二部分的输入恢复与应用程序相关联的正在进行的事件。例如,在一些情况下,第一部分在正在进行的事件中发起暂停。在一些实施方案中,第一输入对应于对暂停某一动作,诸如多媒体文件、视频剪辑、歌曲的播放或进行中的电话呼叫的用户界面元素的选择,而第二输入为对恢复该动作的不同用户界面元素的选择。
根据一些实施方案,正在进行的触觉输出序列的强度随时间增大直到接收到对应于多部分操作的随后输入为止。例如,正在进行的触觉输出序列的触觉能量(例如,幅度、频率、触觉特征)随时间被调制(例如,经由增大强度或触觉能量)以提醒用户增大的紧急性来提供对应于多部分操作的另外输入。根据各种实施方案,此类增大的输出可对应于终止由多部分输入的第一部分启动的事件,或者恢复由多部分输入的第一部分暂停的事件的提醒。
在一些实施方案中,触觉输出序列的时间变化触觉能量分布模拟音频输出序列的时间变化声学能量分布。根据一些实施方案,如结合图6所述,触觉和音频序列的时间变化波形形态彼此模拟、镜像、对准和/或同步。
根据一些实施方案,输出包括取决于多部分操作的第一部分是否发起新事件或暂停正在进行的事件的音频输出。根据一些实施方案,响应于确定对应于多部分操作的第一部分的输入未暂停正在进行的事件,但发起与相应应用程序相关联的事件,设备100提供触觉输出序列而无伴随的音频输出序列,并且响应于确定对应于多部分操作的第一部分的输入暂停与相应应用程序相关联的正在进行的事件,设备100提供伴随正在进行的触觉输出序列的正在进行的音频输出序列。在一些实施方案中,音频输出序列仅在多部分操作的第一部分暂停或中断正在进行的事件或动作时伴随触觉输出序列。在暂停期间,用户大概没有参与设备和/或应用程序。例如,用户可能被动地等待待传输的呼叫,并且因此可容忍与音频输出相关联的另外激励。然而,在一些实施方案中,如果真实事件由多部分操作的第一部分发起,诸如用户主动键入电子邮件消息或者输入安全财务或登录信息,根据一些实施方案,音频序列未伴随触觉序列。
根据一些实施方案,应用程序为语音通信应用程序。例如,根据一些实施方案,应用程序可为常规电话应用程序、语音互联网应用程序诸如Skype、或嵌入在电子邮件应用程序中的语音通信应用程序诸如Gchat。根据一些实施方案,事件为在接收对应于多部分操作的第一部分的输入时发生的正在进行的语音通信而对应于多部分操作的第一部分的输入为对语音通信应用程序的第一用户界面元素的选择,该选择暂停正在进行的语音通信。例如,由于呼叫转移或呼叫保持请求暂停语音呼叫。根据一些实施方案,对应于多部分操作的第二部分的输入为对恢复语音通信的第二用户界面元素的选择。
应当理解,对图11中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1200、1300、2500、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图11描述的方法1100。例如,参考方法1100上述的输入、操作、应用程序、和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1200、1300、2500、2600、3000和3200)在本文所述的输入、操作、应用程序、和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
用于子组操作的触觉输出
根据一些实施方案,检测到的执行操作的请求是否与作为另一操作的子组的操作相关提供用于提供对应触觉输出的基础。提供与执行操作的请求是否关于作为另一操作的子组的操作相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图12为根据一些实施方案的检测执行第一和第二操作的第一和第二输入,执行操作以及提供对应输出的方法1200的示例性方法流程图。注意,在一些实施方案中,可执行图12中所示那些之外的不同步骤。
方法开始于检测1205对应于执行第一操作的请求的第一输入。根据一些实施方案,计算设备100包括触敏显示器,以及根据一些实施方案,通过触敏显示器接收第一输入。
根据一些实施方案,响应于检测到第一输入,设备100提供1210包括触觉分量的第一输出。根据一些实施方案,如果设备包括触敏显示器,则经由触敏显示器提供第一输出的触觉分量。
同样根据一些实施方案,响应于检测到第一输入,设备100执行1215第一操作。第一操作可为响应于输入由设备100执行的任何操作。根据各种实施方案,如下所述的示例包括用相机捕获图像,用于使得设备能授权安全事务处理的支持事务处理的操作,用于在现有文件中保存内容的保存操作,和用于发送对消息收件箱中的消息的答复的发送操作,但该列表不意味着穷尽性的,在遵循方法的步骤时设想到设备100的其他操作。
根据一些实施方案,在执行第一操作之后,设备100检测1220对应于请求执行第二操作的第二输入,第二操作包括第一操作和辅助操作。根据一些实施方案,如果计算设备100包括触敏显示器,则通过触敏显示器接收第二输入。
根据一些实施方案,响应于检测到第二输入,设备100提供1225包括触觉分量的第二输出,其中第二输出包括第一输出以及提供对应于辅助操作的辅助输出。根据一些实施方案,如果设备包括触敏显示器,则经由触敏显示器提供第二输出的触觉分量。
在一些实施方案中,对应于第二输出的触觉分量包括对应于第一输出的第一触觉分量以及对应于辅助输出的第二触觉分量,并且第二触觉分量不同于第一触觉分量。根据一些实施方案,例如,第二触觉分量比第一触觉分量具有更高强度(例如,幅度、持续时间、频率)。
根据一些实施方案,辅助输出包括非触觉分量。根据各种实施方案,非触觉分量可为任何音频或视觉分量(例如,图形、文本)。在一些实施方案中,辅助输出包括音频分量但第一输出不包括音频分量。例如,在相机应用程序测量对图像捕获倒计时的指定时间间隔时的间隔期间提供音频输出,但在捕获图像自身的操作不伴随音频声。
对于包括音频输出的辅助输出,根据一些实施方案,触觉输出伴随对应的音频输出,以及根据一些实施方案,当音频输出的至少一部分与触觉输出的至少一部分并发时音频和触觉部分对准,或者音频输出的出现在时间上靠近触觉输出。触觉和音频波形无需完美对准,设备100可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。伴随的音频部分的变化可在包括音频输出的实施方案之间不同。例如,与第一输出相关联的音频分量的幅度、与第一输出相关联的音频分量的持续时间,和与第一输出相关联的音频分量相关联的一个或多个音乐质量(例如,音阶、音调等)中的每一个可能在某些情况下不同。
在一些实施方案中,在伴随不同音频波形时,相同触觉波形生成不同感受。例如,如果以高音阶对低音阶演奏音频(铃声)音调,并且伴随相同触觉分量(或者典型用户将无法区分的大体类似的触觉分量),则尽管相同的触觉但触觉分量的感受不同。较高音阶或尖锐版本的铃声可用于第二输出以引起用户注意力提高。在一些实施方案中,第一触觉输出与第二触觉输出类似、相同或大体上相同。
根据一些实施方案,第二输出包括将辅助操作标识为不同于第一操作的文本分量。例如,文本分量可描述辅助信息。例如,对应于发送和归档操作的输出提供指示消息已被归档的文本信息。作为另一示例,对应于付款成功消息的输出指示安全信息已得到验证。
根据一些实施方案,辅助操作具有可变值以及辅助输出基于可变属性的值。例如,根据一些实施方案,在相机拍摄照片之前的时间间隔可为5秒、10秒、15秒等。根据一些实施方案,对于10秒相机定时器,辅助输出因此相应地保持10秒。
根据一些实施方案,设备100随后执行1230第二操作。第一和第二操作的执行的定时可相应地变化。根据一些实施方案,与提供第一输出并发地执行第一操作以及与提供辅助输出并发地执行辅助操作。例如,对于快门自拍,当定时器倒计时时提供对应于第一操作的第一输出,以及当快门拍摄照片时提供对应于辅助操作的辅助输出。
根据一些实施方案,可在执行辅助操作之前执行第一操作以及在提供辅助输出之前提供第一输出。例如,对于对应于发送消息(例如,电子邮件)功能的第一操作,第二操作为发送和归档操作,在作为归档部分的辅助操作之前执行发送操作。
根据一些实施方案,与辅助操作的一部分并发地执行第一操作的至少一部分以及与辅助输出的一部分并发地提供第一输出的至少一部分。
以下是有助于描述方法1200的步骤的一些示例。在第一示例中,第一操作对应于用相机捕获图像。根据各种实施方案,相机集成到设备100中或者远离设备但由设备远程控制。在该示例中的第二操作对应于在指定时间间隔之后捕获图像。根据一些实施方案,具体地,该示例的方法开始于检测对应于请求用相机捕获第一图像的第一输入,以及响应于检测到第一输入,提供包括触觉分量的第一输出。同样响应于检测到第一输入,设备100捕获第一图像。根据一些实施方案,在捕获第一图像之后,设备100检测对应于在指定时间间隔之后请求捕获第二图像的第二输入,以及响应于检测到第二输入,提供包括触觉分量的第二输出。在该示例中,第二输出包括第一输出以及提供对应于测量指定的时间间隔的到期的辅助输出以及在指定时间间隔之后捕获第二图像。
根据一些实施方案,在另一示例中,第一操作对应于使得设备能授权安全事务处理的支持事务处理的操作而第二操作对应于使得设备能授权安全事务处理以及授权安全事务处理。例如,在其中需要信用卡信息的在线付款情境下,启动操作准备NFC子系统在付款终端或其他销售点提供付款凭据,或者需要用户凭据和密码的用户登录请求。具体地,根据该示例,方法开始于检测对应于请求执行使得设备能授权安全事务处理的支持事务处理的操作的第一输入,并且响应于检测到第一输入,提供包括触觉分量的第一输出。同样响应于检测到第一输入,使得设备能授权安全事务处理。在执行支持事务处理的操作之后,检测对应于请求授权安全事务处理的第二输入,以及响应于检测到第二输入,提供包括触觉分量的第二输出,其中第二输出包括第一输出以及提供对应于授权辅助操作的安全事务处理的辅助输出。同样响应于检测到第二输入,授权安全事务处理。
根据一些实施方案,第一操作对应于用于在现有文件中保存内容的保存操作,而第二操作对应于将现有文件中的内容保存为新文件的另存操作。在该示例中,检测对应于请求执行保存操作的第一输入,以及响应于检测到第一输入,提供包括触觉分量的第一输出。同样响应于检测到第一输入,执行用于在现有文件中保存内容的保存操作。根据一些实施方案,在执行保存操作之后,检测对应于请求执行将现有文件中的内容保存为新文件的另存操作的第二输入,以及响应于检测到第二输入,提供包括触觉分量的第二输出,其中第二输出包括第一输出以及提供对应于创建新文件的辅助输出。同样响应于检测到第二输入,执行另存操作。
根据一些实施方案,第一操作对应于用于发送对消息收件箱中的消息的答复的发送操作而第二操作对应于用于发送对消息收件箱中的消息的答复以及从消息收件箱中删除该消息的发送和归档操作。
应当理解,对图12中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1100、1300、2500、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图12描述的方法1200。例如,参考方法1200上述的输入、操作、应用程序、分量和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1100、1300、2500、2600、3000和3200)在本文所述的输入、操作、应用程序、分量和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
与警示条件种类相关联的触觉输出
根据一些实施方案,两个检测到的警示条件是否为相同或不同种类的警示条件提供用于提供对应触觉输出的基础。提供与警示条件是否为相同或不同种类的警示条件相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图13为根据一些实施方案的检测第一和第二警示条件以及提供对应输出的方法1300的示例性方法流程图。注意,在一些实施方案中,可执行图13中所示那些之外的不同步骤。
根据一些实施方案,方法开始于检测1305第一警示条件的出现。第一警示条件可为本文其他地方描述的各种警示条件中的任何一个。
根据一些实施方案,响应于检测到第一警示条件出现提供1310包括第一触觉分量以及第一非触觉分量的第一输出。根据各种实施方案,非触觉分量可为任何音频或视觉分量(例如,图形、文本)。根据一些实施方案,当包括音频分量时,音频和触觉分量对准。触觉和音频波形无需完美对准,设备100可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。根据一些实施方案,非触觉分量包括文本分量。
根据一些实施方案,在提供第一输出之后,设备100检测1315第二警示条件的出现,以及响应于检测到第二警示条件的出现,提供1320包括第二触觉分量和第二非触觉分量的第二输出。根据一些实施方案,当第一警示条件和第二警示条件为相同种类的警示条件的不同警示条件时,第一输出和第二输出共享一个或多个相同分量以及具有一个或多个不同分量。另选地,当第一警示条件和第二警示条件为相同种类的警示条件时,第一和第二输出共同具有一个或多个分量。根据一些实施方案,当第一警示条件和第二警示条件为不同种类的警示条件的不同警示条件时,第一触觉分量不同于第二触觉分量并且第一非触觉分量不同于第二非触觉分量。另选地,当第一警示条件和第二警示条件为不同种类的警示条件时,第一和第二输出不具有共同分量。
根据一些实施方案,警示条件的种类包括消息、活动提示、媒体回放提示、视觉协助提示、系统提示、调度提醒和互联网浏览器更新。
根据一些实施方案,当第一警示条件和第二警示条件对应于相同警示条件的独立实例时,第一输出与第二输出相同。如果计算设备100具有触敏显示器,则经由计算设备上的触敏显示器提供第一输出的第一触觉分量和第二输出的第二触觉分量。
在一些实施方案中,第一和第二非触觉分量为音频输出。对于包括音频输出的非触觉输出,根据一些实施方案,触觉输出伴随对应的音频输出,以及根据一些实施方案,当音频输出的至少一部分与触觉输出的至少一部分并发时音频和触觉部分对准,或者音频输出的出现在时间上靠近触觉输出。触觉和音频波形无需完美对准,设备100可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。伴随的音频部分的变化可在包括音频输出的实施方案之间不同。例如,与第一输出相关联的音频分量的幅度、与第一输出相关联的音频分量的持续时间,和与第一输出相关联的音频分量相关联的一个或多个音乐质量(例如,音阶、音调等)中的每一个可能在某些情况下不同。
在一些实施方案中,在伴随不同音频波形时,相同触觉波形生成不同感受。例如,如果以高音阶对低音阶演奏音频(铃声)音调,并且伴随相同触觉分量(或者典型用户将无法区分的大体类似的触觉分量),则尽管相同的触觉但触觉分量的感受不同。较高音阶或尖锐版本的铃声可用于第二输出以引起用户注意力提高。在一些实施方案中,第一触觉输出与第二触觉输出类似、相同或大体上相同。
在一些实施方案中,第一和第二非触觉分量为视觉输出,诸如文本、图形或元数据输出。
根据一些实施方案,第一警示条件和第二警示条件为相同种类的警示条件,其中种类与应用程序的警示条件相关联。在该示例中,来自相应应用程序的所有警示落在共同种类中,并且种类由应用程序区分。例如,所有视觉协助事件另选地具有含不同音频分量的相同触觉分量。在其他示例中,传入和输出消息具有含不同音频的相同触觉输出,相同触觉输出另选地基于与共同即时消息应用程序相关联。共同分量(在该示例中,触觉分量)标识应用程序。在另一示例中,包括确认、取消和调用事件的个人自动助理的事件另选地全部具有相同音频,但不同触觉输出。
表6:消息
表6示出了根据一些实施方案的用于即时消息应用程序的接收消息和发送消息警示条件。在该示例中,为活动的应用程序状态列出各种模式。在接收新消息的情况下,如在第五、六和七行所示,输出轻击型触觉以及输出接收默认音频的消息。在发送新消息的情况下,如在最后一行所示,输出轻击型触觉以及输出发送默认音频的消息。因为接收的消息(第一警示条件)和发送的消息(第二警示条件)为相同种类的警示条件,其中种类与应用程序(即时消息)相关联,所以用于两种警示条件的触觉输出相同,但音频输出不同。根据一些实施方案,表6提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用警示、状态、模式、条件和输出的其他组合。
根据一些实施方案,第一警示条件和第二警示条件为相同种类的警示条件,并且种类与应用程序的类别相关联。根据一些实施方案,例如,应用程序的种类包括即时消息应用程序、游戏应用程序、健康/健身应用程序、生产力应用程序或社交网络应用程序。在一些实施方案中,具有或执行共同或类似的功能的应用程序任选地属于共同种类的应用程序。应用程序的种类的示例包括,基于文本的通信应用程序(即时消息、电子邮件、社交媒体)、基于语音的通信应用程序(电话、语音互联网)、多媒体应用程序(照片浏览应用程序、相机应用程序、音乐播放器、视频播放器)、文本编辑应用程序(Word、记事本)、预定应用程序(日历、闹钟)和因特网浏览器应用程序(Chrome、Safari)。根据一些实施方案,种类因此由跨应用程序的功能来区分。根据一些实施方案,作为一个示例,凭借与属于相同种类的应用程序(基于文本的通信应用程序两者)的应用程序相关联,尽管属于不同应用程序(电子邮件和即时消息)的电子邮件消息和文本消息具有相同触觉输出和不同音频输出。
根据一些实施方案,第一警示条件和第二警示条件为相同种类的警示条件,以及种类对应于预定义的功能种类的功能。例如,报告在活动监测应用程序中完成活动目标(例如,目标接近、在目标后、获得的目标,实现10%的目标,50%的目标等)的警示任选地落在相同种类的警示内。根据一些实施方案,相同预定应用程序内的各种闹钟或提醒可针对不同预定义时间实例设定,或者对满足各种不同预定义准则的报告。
表7:活动目标
图7示出了根据一些实施方案的与各种活动相关的目标。在该示例中,示出属于相同警示条件种类的三个不同警示条件:固定结束定时器、50%活动目标和达到活动目标。所示的警示条件的种类对应于对在活动监测应用程序中实现活动目标进行报告的预定义种类的警示功能中的功能。对于表格中的每个事件,触觉输出为轻击型输出,当然对于每个不同类型的音频输出不同(例如,默认活动钟声、无音频、强烈活动钟声)。根据一些实施方案,表7提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用警示、状态、模式、条件和输出的其他组合。
根据一些实施方案,第一警示条件和第二警示条件与两个不同应用程序相关联,其中第一警示条件和第二警示条件在相同种类的警示条件中,种类对应于在两个不同应用程序中的预定义种类的功能中的功能。根据一些实施方案,预定义种类的功能的示例包括:对来自跨应用程序的另一用户的传入文本通信(传入电子邮件、传入即时消息、传入社交媒体消息)报告的警示落入相同种类,对来自跨所有应用程序(电话、语音互联网、电子邮件应用程序中的语音呼叫)的另一用户的传入语音通信报告的警示落入共同种类,对所有应用程序的应用程序软件升级报告的警示落入共同种类,报告各种设备状态(Wi-Fi连接/不可用,GPS打开/关闭,电池寿命指示符、设备打开/关闭)的系统警示。
表8:软件升级
表8包括针对四种不同应用程序类型:日历、消息、社交网络和游戏的各种软件升级可用警示条件。这些警示条件每一个与不同应用程序相关联,但在对应于预定义种类的功能中的功能的相同种类的警示条件中,在该情况下,应用程序软件为所有应用程序升级。对于每个警示条件,输出嗡嗡声-轻击的触觉。警示条件中的一些还具有非触觉输出。在社交网络或游戏应用程序的情况下,触觉输出补充有弹出型通知。根据一些实施方案,表8提供条件和对应输出,但仅仅为示例性的,根据不同实施方案使用警示、状态、模式、条件和输出的其他组合。
根据一些实施方案,当第一警示条件和第二警示条件为相同种类的警示条件的不同警示条件时,第一输出的第一触觉分量与第二输出的第二触觉分量相同(或大体上相同),第一输出的第一非触觉分量(例如,音频或视觉)不同于第二输出的第二非触觉分量。上面表4、5和6的示例中的每一个落入该类别,因为它们每一个共享共同触觉分量和不同非触觉分量。在一些实施方案中,“相同”触觉分量为基于输送到触觉输出发生器的相同触觉输出指令生成的触觉分量,即使触觉输出发生器(有时为模拟分量)生成略不相同的触觉输出(即使在对典型用户来说大体感受上相同时)。在一些实施方案中,音频分量可共享属性,但仍然不同。例如,相同铃声或音符在不同音阶或使用不同乐器播放。在相同触觉输出上覆盖不同音频(例如,高音阶对低音阶,金属演奏的相同音频对玻璃对陶瓷音调)产生不同感受。在一些实施方案中,不同触觉分量为基于输送到触觉输出发生器的不同触觉输出指令生成的触觉分量从而产生由典型用户感受不同的触觉输出。
根据一些实施方案,反相关应用于触觉对非触觉相似性以及在其相应输出之间的差异。当第一警示条件和第二警示条件为相同种类的警示条件的不同警示条件时,第一输出的第一非触觉分量与第二输出的第二非触觉分量相同(或大体上相同),第一输出的第一触觉分量不同于第二输出的第二触觉分量。
根据一些实施方案,当第一警示条件和第二警示条件对应于相同警示条件时,第一输出伴随不同于伴随第二输出的第二额外分量的第一额外分量。例如,第一和第二传入即时消息两者均为传入即时消息,因此为相同警示条件。根据一些实施方案,在该示例中,第一额外分量为触发第一警示条件的第一事件专有,并且第二额外分量为触发第二警示条件的第二事件专有,例如,第一传入即时消息的额外分量包括第一即时消息(例如,发送人姓名、发送人联系信息、消息的正文/内容)专有的视觉分量(文本、元数据、图形)。同样地,第二传入即时消息的额外分量包括第二即时消息(例如,发送人姓名、发送人联系信息、消息的正文/内容)专有的视觉分量(文本、元数据、图形)。根据一些实施方案,伴随第一输出的第一额外分量任选地提供描述触发第一警示(例如,一段消息或自动协助应答的文本版本)的第一事件的信息(例如,文本信息),以及伴随第二输出的第二额外分量提供描述触发第二警示的第二事件的信息(例如,文本信息)。
根据一些实施方案,在提供1320第二输出之后,设备100检测1325第三警示条件的出现,以及响应于检测到第三警示条件的出现,提供1330包括第三触觉分量和第三非触觉分量的第三输出。当第一警示条件、第二警示条件和第三警示条件为相同种类的警示条件的不同警示条件时,第一输出、第二输出和第三输出另选地共享一个或多个相同分量以及具有一个或多个不同分量。当第三警示条件为不同于第一警示条件和第二警示条件的种类的警示条件时,第三触觉分量任选地不同于第一触觉分量和第二触觉分量两者以及第三非触觉分量任选地不同于第一非触觉分量和第二非触觉分量两者。根据一些实施方案,另选地,当第一警示条件、第二警示条件和第三警示条件为相同种类的警示条件中的不同警示条件以及第一、第二和第三输出具有共同的一个或多个分量(例如,触觉、非触觉)时以及当第三警示条件为不同于第一警示条件和第二警示条件的种类的警示条件时,第三触觉输出与第一输出和第二输出不具有共同的分量。
应当理解,对图13中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、2500、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图13描述的方法1300。例如,参考方法1300上述的输入、警示条件、应用程序、和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、2500、2600、3000和3200)在本文所述的输入、警示条件、应用程序、和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
以上参考图7、图9至图13所述的操作任选地由图1A至图1B或图14至图19中所描绘的部件来实施。例如,接收输入、检测警示条件、确定状态、确定警示条件触发、提供触觉和音频输出以及执行操作任选地由事件分类器170、事件识别器180和事件处理子程序190实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用程序136-1。应用程序136-1的相应的事件识别器180将事件信息与相应的事件定义186进行比较,并且确定触敏表面上的第一位置处的第一触点是否对应于预定义的事件或子事件,诸如选择用户界面上的对象。当检测到相应的预定义的事件或子事件时,事件识别器180激活与该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施方案中,事件处理程序190访问相应GUI更新器178,以更新由应用程序显示的内容。类似地,本领域技术人员会清楚地知道基于在图1A至图1B和图14至图19中所描绘的部件可如何实现其他过程。
如上所述,参考图7、图9至图13所述的操作任选地由图14至图19中所描绘的部件来实施。图14示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图14中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图14中所示,设备100包括被配置为显示应用程序的显示单元1401;被配置为接收用户接触的触敏表面单元1403;以及与显示单元1401和触敏表面单元1403耦接的处理单元1405。在一些实施方案中,处理单元1405包括检测单元1410、状态确定单元1415、触觉提供单元1420、参与确定单元1425和输出确定单元1430。
处理单元1405配置为检测与计算设备上运行的应用程序相关联的警示条件(例如,借助检测单元1410)。处理单元1405还配置为响应于检测到警示条件在与警示条件相关联的时间确定与应用程序相关联的状态(例如,借助状态确定单元1415)。根据确定应用程序在与警示条件相关联的时间处于活动状态,处理单元1405提供代表警示条件出现的第一触觉输出(例如,借助触觉提供单元1420),第一触觉输出具有第一组输出特征以及根据确定应用程序在与警示条件相关联的时间处于不活动状态,提供代表警示条件出现的第二触觉输出(例如,借助触觉提供单元1420),第二触觉输出具有第二组输出特征,其中第二触觉输出不同于第一触觉输出。
以下段落[0335]-[0347]描述了可由图14所示的设备100单独或以任何组合形式实施的不同实施方案。
处理单元1405通过确定在与警示条件相关联的时间在设备的触摸屏上是否显示应用程序的用户界面来确定在与警示条件相关联的时间与应用程序相关联的状态(例如,借助状态确定单元1415)。
处理单元1405通过确定应用程序的用户输入是否触发警示条件确定在与警示条件相关联的时间与应用程序相关联的状态(例如,借助状态确定单元1415),其中用户交互不同于警示条件。
如果应用程序处于不活动状态,则基于与警示条件相关联的时间检测到的用户交互,处理单元1405确定在与警示条件相关联的时间确定与用户交互相关联的用户参与水平(例如,借助参与确定单元1425)以及基于确定的参与水平确定第一触觉输出的第一组输出特征中的一个或多个(例如,借助输出确定单元)。
处理单元1405确定应用程序是否处于活动状态包括确定在与警示条件的相关联的时间应用程序在计算设备上的前台运行。处理单元1405确定应用程序是否处于不活动状态包括确定在与警示条件的相关联的时间应用程序未在计算设备上运行或者在计算设备上的后台运行。
显示单元1401在设备上的多应用程序窗口用户界面上与一个或多个其他用户界面窗口并发地显示对应于应用程序的相应用户界面窗口。处理单元1405确定在与警示条件相关联的时间在多应用程序窗口用户界面的前台是否显示对应于应用程序的相应用户界面窗口(例如,借助状态确定单元1415)。
在与警示条件相关联的时间,显示单元1401在设备上与多应用程序窗口用户界面并发地显示一个或多个其他用户界面窗口以及处理单元1405确定在与警示条件相关联的时间与应用程序相关联的状态(例如,借助状态确定单元1415)包括确定在与警示条件相关联的时间对应于应用程序的相应用户界面窗口是否显示在多应用程序窗口用户界面中。
在一些实施方案中,警示条件对应于由应用程序自动触发的事件,由应用程序从设备外部来源接收到的自动发起事件通知,或由应用程序从操作设备的用户之外的人类用户接收到的手动发起事件通知。
处理单元1405提供包括伴随有第一音频输出的第一触觉输出和伴随有第二音频输出的第二触觉输出的输出(例如,借助输出确定单元1430),第一触觉输出与第二触觉输出相同并且第一音频输出不同于第二音频输出。另选地,处理单元1405提供包括伴随有音频输出的第一触觉输出和伴随有相同音频输出的第二触觉输出的输出(例如,借助输出确定单元1430),第一触觉输出不同于第二触觉输出。
处理单元1405将第二触觉输出伴随有音频输出,第二触觉输出的波形基于伴随音频输出的波形镜像生成,镜像并且与伴随的音频输出的波形同步。处理单元1405提供包括未伴随有音频输出的第一触觉输出以及伴随有音频输出的第二触觉输出的输出(例如,借助输出确定单元1430)。在一些实施方案中,第一触觉输出与第二触觉输出类似。在一些实施方案中,第二触觉输出具有比第一触觉输出更大的强度。
触觉输出的第一组特征包括以下中的一个或多个(例如,由输出确定单元1430提供):幅度、持续时间、规律性、重复频率、或对第一触觉输出的触觉特征的选择。在一些实施方案中,第二触觉输出不同于第一触觉输出并且具有比第一触觉输出更大的强度。
处理单元1405通过确定在与警示条件相关联的时间计算设备为活动的来确定在与警示条件相关联的时间计算设备的状态(例如,借助状态确定单元),以及确定应用程序处于不活动状态包括确定在与警示条件相关联的时间计算设备为不活动的。根据一些实施方案,第一和第二组特征对应于计算设备的设备类型。
在一些实施方案中,在第一时间点,在应用程序处于活动状态时,处理单元1405检测与应用程序相关联的第一警示条件(例如,借助检测单元1410)并且响应于检测到在第一应用程序处于活动状态时的第一警示条件,处理单元1404提供(例如,借助输出确定单元1430)代表第一警示条件的第一输出。在第二时间点,在应用程序处于不活动状态时,处理单元1405检测第二警示条件以及响应于检测到在应用程序处于不活动状态时的第二警示条件,处理单元1405提供代表第二警示条件的第二触觉输出(例如,借助输出确定单元1440),第二触觉输出不同于第一触觉输出。
在一些实施方案中,设备具有触敏显示器(例如,由触敏表面单元1403提供)以及第一触觉输出和第二触觉输出经由计算设备上的触敏显示器提供(例如,借助输出确定单元1430)。如上所述,参考图7和图9至图13所述的操作任选地由图14至图19所描绘的部件来实施。图14示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图14中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如上所述,参考图7、图9至图13所述的操作任选地由图14至图19中所描绘的部件来实施。图15示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图15中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图15中所示,设备100包括被配置为显示应用程序的显示单元1501;被配置为接收用户接触的触敏表面单元1503;以及与显示单元1501和触敏表面单元1503耦接的处理单元1505。在一些实施方案中,处理单元1505包括检测单元1510、触发确定单元1515、触觉提供单元1520、外部事件确定单元1525、输出变型提供单元1530、紧急性确定单元1535、情境确定单元1540、调制单元1545和个人通信确定单元1550。
处理单元1505配置为检测与应用程序相关联的警示条件的出现(例如,借助检测单元1510),以及响应于检测到警示条件的出现,确定警示条件是否由手动发起事件触发(例如,借助触发检测单元1515)。根据确定警示条件由手动发起事件触发,处理单元1505提供对应于手动发起事件通知的第一触觉输出(例如,借助触觉提供单元1520),根据确定警示条件由自动发起事件触发,处理单元1505提供对应于自动发起事件通知的第二触觉输出(例如,借助触觉提供单元1520),其中第二触觉输出不同于第一触觉输出。
以下段落[0353]-[0364]描述了可由图15所示的设备100单独或以任何组合形式实施的不同实施方案。
根据一些实施方案,处理单元1505通过确定警示条件是否对应于由人类用户发起的事件来确定警示条件由手动发起事件触发(例如,借助触发确定单元1515)。在一些实施方案中,处理单元1505通过确定警示条件是否对应于由计算设备的用户之外的人类用户发起的事件来确定警示条件由手动发起事件触发(例如,借助触发确定单元1515)。
根据一些实施方案,处理单元1505通过确定警示条件是否对应于从人类用户接收的输入来确定警示条件由手动发起事件触发(例如,借助触发确定单元1515),输入识别计算设备的用户以及输入包括来自人类用户来针对输入警示计算设备的用户的指示。
根据一些实施方案,处理单元1505确定警示条件由应用程序自动触发或者为由应用程序从设备的外部来源接收的自动发起事件通知(例如,借助触发确定单元1515)。另选地,处理单元1505通过确定警示条件出现在预先确定的时间或者对满足预先确定的触发条件的报告来确定警示条件由自动发起事件触发(例如,借助触发确定单元1515)。
根据一些实施方案,根据确定警示条件由自动发起事件触发,处理单元1505确定自动发起事件是否对应于在设备外部发生的自动发起事件(例如,借助外部事件确定单元1525)。根据一些实施方案,根据确定自动发起事件对应于设备外部发生的事件,处理单元1505提供第二触觉输出的第一变型(例如,借助输出变型提供单元1530),该第一变型对应于外部发生的自动发起事件的通知。根据确定自动发起事件对应于设备内部发起的事件,处理单元1505提供第二触觉输出的对应于内部生成的自动发起事件的通知的第二变型(例如,借助输出变型提供单元1530)。
根据一些实施方案,根据确定警示条件由手动发起事件触发,处理单元1505确定与手动发起事件相关联的紧急性的测量(例如,借助紧急性确定单元1535)并且基于对紧急性的测量调制第一触觉输出的强度(例如,借助调制单元1545)。根据一些实施方案,根据确定警示条件由手动发起事件触发,处理单元1505确定与手动发起事件相关联的一个或多个情境属性(例如,借助情境确定单元1540)并且基于一个或多个情境属性调制第一触觉输出的强度(例如,借助调制单元1545)。
根据一些实施方案,根据确定警示条件由自动发起事件触发,处理单元1505分析与警示条件相关联的特征来确定与自动发起事件相关联的一个或多个情境属性(例如,借助情境确定单元1540)并且基于一个或多个情境属性调制第二触觉输出的强度(例如,借助调制单元1545)。
根据一些实施方案,根据确定警示条件由自动发起事件触发,处理单元1505确定与自动发起事件相关联的紧急性的时间变化测量(例如,借助紧急性确定单元1535)并且在指定时间窗调制指示对紧急性的时间变化测量的第二触觉输出的强度(例如,借助调制单元154)。
在一些实施方案中,第一触觉输出伴随第一音频输出并且第二触觉输出伴随第二音频输出,第一触觉输出与第二触觉输出相同并且第一音频输出不同于第二音频输出。在一些实施方案中,第一触觉输出伴随第一音频输出并且第二触觉输出伴随第二音频输出,第一音频输出类似于第二音频输出并且第一触觉输出不同于第二触觉输出。在一些实施方案中,第一触觉输出伴随有第一音频输出,而第二触觉输出未伴随音频输出。第一触觉输出任选地与第二触觉输出类似。
根据一些实施方案,对应于手动发起事件通知的第一触觉输出比对应于自动发起事件通知的第二触觉输出更强烈。在一些情况下,第一触觉输出由包括以下中的一个或多个的第一组特征表征:第一触觉输出的幅度、第一触觉输出的持续时间、与第一触觉输出相关联的规律性、第一触觉输出中触觉特征的重复频率、以及对构成第一触觉输出的触觉特征的选择并且第二触觉输出由包括以下中的一个或多个的第二组特征表征:第二触觉输出的幅度、第二触觉输出的持续时间、与第二触觉输出相关联的规律性、第二触觉输出中触觉特征的重复频率、以及对构成第二触觉输出的触觉特征的选择。
根据一些实施方案,处理单元1505检测对应于来自第一人类发送人的传入电子邮件消息的第一警示条件(例如,借助检测单元1510)。响应于确定传入电子邮件消息对应于手动发起事件,处理单元1505提供第一触觉输出(例如,借助触觉提供单元1520)。处理单元1505检测对应于来自第二人类发送人的传入文本消息的第二警示条件(例如,借助检测单元1510)以及响应于确定传入文本消息对应于手动发起事件,提供第一触觉输出(例如,借助触觉提供单元1520)。
在一些实施方案中,设备具有触敏显示器(例如,由触敏表面单元1503提供)以及第一触觉输出和第二触觉输出经由计算设备上的触敏显示器提供(例如,借助触觉提供单元1520)。
根据一些实施方案,处理单元1505检测与应用程序相关联的警示条件的出现(例如,借助检测单元1510),以及响应于检测到警示条件的出现,确定警示条件是否对应于来自与用户相关联的联系人列表中的发送人的个人通信(例如,借助个人通信确定单元1550)。根据确定警示条件对应于来自与用户相关联的联系人列表中的发送人的个人通信,处理单元1505提供对应于个人警示通知的第一触觉输出(例如,借助触觉提供单元1520),以及根据确定警示条件不对应于来自与用户相关联的联系人列表中的发送人的个人通信,处理单元1505提供对应于自动警示通知的第二触觉输出(例如,借助触觉提供单元1520),其中第一触觉输出的幅度比第二触觉输出更大。
如上所述,参考图7、图9至图13所述的操作任选地由图14至图19中所描绘的部件来实施。图16示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图16中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图16中所示,设备100包括被配置为显示应用程序的显示单元1601;被配置为接收用户接触的触敏表面单元1603;以及与显示单元1601和触敏表面单元1603耦接的处理单元1605。在一些实施方案中,处理单元1605包括检测单元1610、输出提供单元1615、调制条件确定单元1620、输出修改单元1625、参与测量单元1630、触觉输入确定单元1635、输出终止单元1640、环境条件确定单元1645、输出延迟单元1650和启动提供单元1655。
处理单元1605被配置为检测计算设备上与接收应用程序的用户输入相关联的第一警示条件(例如,借助检测单元1610),以及响应于检测到第一警示条件,提供具有第一强度并且对应于应用程序的用户输入的第一触觉输出(例如,借助输出单元1615)。在提供第一触觉输出之后,处理单元1605检测与在应用程序中接收预先确定的系统事件相关联的第二警示条件(例如,借助检测单元1610),以及响应于检测到第二警示条件,提供具有第二强度以及对应于预先确定的系统事件的第二触觉输出(例如,借助输出提供单元1615),其中第二强度大于第一强度。
以下段落[039]-[0386]描述了可由图16所示的设备100单独或以任何组合形式实施的不同实施方案。
在一些实施方案中,直接响应于用户输入以及作为用户输入的结果反馈提供第一触觉输出。根据一些实施方案,第二警示条件对应于应用程序自动触发的事件、应用程序接收的自动发起事件通知、或者应用程序接收的手动发起事件通知。
根据一些实施方案,处理单元1605确定是否存在基于输入的调制条件(例如,借助调制条件确定单元1620),以及响应于确定基于输入的调制条件存在,在提供第一触觉输出之前,处理单元1605修改第一触觉输出(例如,借助输出修改单元1625)。
在一些实施方案中,在检测到相应警示条件之后,处理单元1605确定相应警示条件源自在计算设备上接收的相应用户输入以及标识与检测到的用户输入相关联的用户参与的测量(例如,借助参与测量单元1630)。处理单元1605基于对用户参与的测量调制第一触觉输出的第一信号强度(例如,借助输出修改单元1625)。
在一些实施方案中,在检测到相应警示条件之后,处理单元1605确定相应警示条件源自在设备上接收的触觉用户输入(例如,借助触觉输入确定单元1635)并且在设备上标识接收触觉用户输入的位置。通过在设备上接收触觉用户输入的位置的指定半径阈值内提供大于第一触觉输出的触觉能量的指定比例,处理单元1605调制第一触觉输出的空间触觉能量分布(例如,借助输出修改单元1625)。
在一些实施方案中,在检测到相应警示条件之后,处理单元1605确定相应警示条件源自在设备上接收到触觉用户输入(例如,借助触觉输入确定单元1635),以及通过减小第一触觉输出的触觉能量的幅度使得它在设备上接收触觉用户输入的位置可察觉,调制第一触觉输出的空间触觉能量分布(例如,借助输出修改单元1625)。在设备上接收触觉用户输入的位置会随时间变化,并且因此对应于接收触觉用户输入的时间变化位置的空间触觉能量也会随时间变化。
在一些实施方案中,在检测到相应警示条件之后,处理单元1605确定相应警示条件源自接收到触觉用户输入,以及标识触觉用户输入的时间变化形态属性(例如,借助触觉输入确定单元1635)。处理单元1605随时间修改第一触觉输出的形态学特征来模拟触觉用户输入的时间变化形态学属性(例如,借助输出修改单元1625)。根据一些实施方案,时间变化形态属性包括触觉用户输入与计算设备的触敏表面之间基于时间的接触压力分布,以及修改包括随时间调制第一触觉输出的能量分布来反映触觉用户输入与计算设备的触敏表面之间的基于时间的接触压力分布(例如,借助输出修改单元1625)。
在一些实施方案中,在检测到相应警示条件之后,处理单元1605确定相应警示条件源自持续用户输入(例如,借助触觉输入确定单元1635)以及响应于确定,在持续用户输入的发起时间发起第一触觉输出(例如,借助输出提供单元1615)。处理单元1605检测持续用户输入的终止,并且在持续用户输入的终止时间终止第一触觉输出(例如,借助输出终止单元1640)。
处理单元1605确定是否存在基于环境条件的调制条件(例如,借助环境条件确定单元1645),以及响应于确定基于环境条件的调制条件存在,在提供第二触觉输出之前,修改第二触觉输出(例如,借助输出修改单元1625)。
在一些实施方案中,在检测到与相应应用程序相关联的相应警示条件之后,处理单元1605确定相应警示条件未源自接收用户输入,以及响应于确定相应警示条件未源自接收用户输入,处理单元1605确定在出现相应警示条件时是否存在针对设备的一个或多个环境条件作为对触觉输出的潜在干扰(例如,借助环境条件确定单元1645)。根据确定不存在针对设备的干扰环境条件,处理单元1605基于用户接收状态提供相应第二触觉输出(例如,借助输出提供单元1615)。根据确定存在针对设备的一个或多个环境条件作为对触觉输出的潜在干扰,处理单元1605延迟将相应第二输出提供给用户(例如,借助输出延迟单元1650)。
在一些实施方案中,在检测到与相应应用程序相关联的相应警示条件之后,处理单元1605确定相应警示条件未源自接收用户输入,以及响应于确定相应警示条件未源自接收用户输入,处理单元1605确定在出现相应警示条件时是否存在针对设备的一个或多个环境条件作为对触觉输出的潜在干扰(例如,借助环境条件确定单元1645)。根据确定不存在针对设备的干扰环境条件,处理单元1605将第二触觉输出的第一变型提供给用户(例如,借助输出修改单元1625),第二触觉输出的第一变型具有第一组输出特征。根据确定存在针对设备的一个或多个环境条件作为对触觉输出的潜在干扰,处理单元1605将第二触觉输出的第二变型提供给用户(例如,借助输出修改单元1625),第二触觉输出的第二变型具有第二组输出特征,第二组特征不同于第一组特征,第二触觉输出的第二变型比第二触觉输出的第一变型具有更大强度。
在一些实施方案中,在检测到与相应应用程序相关联的相应警示条件之后,处理单元1605确定相应警示条件未源自接收到用户输入,以及响应于确定相应警示条件未源自接收到用户输入,处理单元1605提供启动触觉输出作为第二触觉输出的前导(例如,借助启动提供单元1655),启动触觉输出将操作设备的用户的参与水平增大到第二触觉输出,其中启动触觉输出的至少一部分比第二触觉输出更明显。此外,处理单元1605在提供启动触觉输出的指定时间间隔之后以及指定时间间隔内提供第二触觉输出(例如,借助输出提供单元1615)。在一些实施方案中,启动触觉输出包括具有通过触觉分量随时间渐进式增大强度来表征的时间变化波形形态的启动触觉分量。在一些实施方案中,启动触觉输出包括具有通过加强的触觉特征随后触觉分量逐渐减小的强度来表征的时间变化波形形态的启动触觉分量。
在一些实施方案中,响应于源自接收到用户输入的对应警示条件,第二触觉输出之前是启动触觉输出并且直接提供第一触觉输出,而不存在对应的先前的启动触觉输出。在一些实施方案中,基于与警示条件相关联的紧急性或情境选择启动触觉输出的特征。
在一些实施方案中,处理单元1605检测对应于在与第一应用程序相关联的应用程序用户界面上显示的用户界面元素的用户选择的第一警示条件(例如,借助检测单元1610)。响应于第一警示条件,处理单元1605提供代表对用户界面元素的用户选择的相应第一触觉输出(例如,借助输出提供单元1615),相应第一触觉输出包括具有第一强度和第一持续时间的第一触觉特征的第一触觉分量。在提供相应第一触觉输出之后,处理单元1605检测对应于第一应用程序接收的警示通知的第二警示条件(例如,借助检测单元1610),以及响应于第二警示条件,处理单元1605提供代表接收到警示通知的相应第二触觉输出(例如,借助输出提供单元1615),相应第二触觉输出包括具有第二强度和第二持续时间的第二触觉特征的第二触觉分量,基于第二触觉特征比第一触觉特征更明显,第二强度大于第一强度,或者第二持续时间长于第一持续时间,相应第二触觉输出不同于相应第一输出并且比相应第一输出更明显。
在一些实施方案中,处理单元1605检测与第一应用程序相关联的第一警示条件,第一警示条件源自相应用户输入(例如,借助检测单元1610),并且提供代表第一警示条件的相应第一触觉输出(例如,借助输出提供单元1615)。在提供相应第一触觉输出之后,处理单元1605检测与第一应用程序相关联的第二警示条件(例如,借助检测单元1610),第二警示条件未源自接收到用户输入,以及提供代表第二警示条件的相应第二触觉输出(例如,借助输出提供单元1615),相应的第二触觉输出不同于相应第一输出并且具有比相应第一输出更大的强度。
在一些实施方案中,第一触觉输出具有包括以下中的一个或多个的第一组特征:第一触觉输出的幅度、第一触觉输出的持续时间、与第一触觉输出相关联的规律性、第一触觉输出中触觉特征的重复频率、对构成第一触觉输出的触觉特征的选择并且第二触觉输出具有包括以下中的一个或多个的第二组特征:第二触觉输出的幅度、与第二触觉输出相关联的触觉分量的持续时间、与第二触觉输出相关联的规律性、第二触觉输出中触觉特征的重复频率、对构成第二触觉输出的触觉特征的选择。
在一些实施方案中,第一触觉输出伴随第一音频输出并且第二触觉输出伴随第二音频输出,第一触觉输出与第二触觉输出相同并且第一音频输出不同于第二音频输出。在一些实施方案中,第一触觉输出伴随第一音频输出并且第二触觉输出伴随第二音频输出,第一音频输出类似于第二音频输出并且第一触觉输出不同于第二触觉输出。
在一些实施方案中,与设备上音量设置相反进一步调整第一触觉输出的第一强度和第二触觉输出的第二强度。根据一些实施方案,第二触觉输出伴随有音频输出,而第一触觉输出未伴随音频输出。
在一些实施方案中,计算设备包括用于接收用户输入的触敏显示器(例如,借助触敏表面单元1603)以及第一触觉输出和第二触觉输出经由计算设备上的触敏显示器提供(例如,借助输出提供单元1615)。
如上所述,参考图7、图9至图13所述的操作任选地由图14至图19中所描绘的部件来实施。图17示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图17中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图17中所示,设备100包括被配置为显示应用程序的显示单元1701;被配置为接收用户接触的触敏表面单元1703;以及与显示单元1701和触敏表面单元1703耦接的处理单元1705。在一些实施方案中,处理单元1705包括输入接收单元1710、正在进行的输出发起单元1715、正在进行的输出终止单元1720、反馈提供单元1725和额外输入接收单元1730。
处理单元1705被配置为接收对应于由在计算设备上运行的应用程序所执行的多部分操作的第一部分的输入(例如,借助输入接收单元1710),以及响应于接收到对应于多部分操作的第一部分的输入,发起正在进行的触觉输出序列(例如,借助正在进行的输出发起单元1715)。在发起正在进行的触觉输出序列之后,处理单元1705接收对应于多部分操作的第二部分的输入(例如,借助输入接收单元1710),以及响应于接收到对应于多部分操作的第二部分的输入,终止正在进行的触觉输出序列(例如,借助正在进行的输出终止单元1720)。
以下段落[0391]-[0406]描述了可由图17所示的设备100单独或以任何组合形式实施的不同实施方案。
在一些实施方案中,在设备的触敏表面上检测对应于多部分操作的第一部分的输入(例如,借助触敏表面单元1703)以及在设备的触敏表面上检测对应于多部分操作的第二部分的输入(例如,借助输入接收单元1710)。根据一些实施方案,经由触敏表面提供触觉输出序列(例如,借助正在进行的输出发起单元1715)。
在一些实施方案中,设备检测到对应于多部分操作的第一部分的输入(例如,借助输入接收单元1710)并且第二设备检测到对应于多部分操作的第二部分的输入。在一些实施方案中,设备检测对应于多部分操作的第一部分的输入以及对应于多部分操作的第二部分的输入(例如,借助输入接收单元1710)。
根据一些实施方案,多部分操作为安全事务处理,多部分操作的第一部分包括装备设备以授权安全事务处理,而多操作部分的第二部分包括授权安全事务处理。根据一些实施方案,多部分操作为安全事务处理,多部分操作的第一部分包括确定需要用户认证来完成安全事务处理,而多操作部分的第二部分包括接收用户安全事务处理的用户认证。
在一些实施方案中,多部分操作的第一部分包括关闭文档的草稿而多部分操作的第二部分包括返回到文档的草稿。在一些实施方案中,对应于多部分操作的第一部分的输入为与在设备上运行的应用程序交互的第一用户输入而对应于多部分操作的第二部分的输入为与应用程序交互的第二用户输入,第二用户输入不同于第一用户输入。
根据一些实施方案,检测对应于多部分操作的第一部分的输入包括检测在触敏表面上的接触(例如,借助输入接收单元1710)以及检测对应于多部分操作的第二部分的输入包括检测接触在触敏表面上的移动(例如,借助输入接收单元1710)。在一些实施方案中,检测对应于多部分操作的第一部分的输入包括检测接触在触敏表面上的移动(例如,借助输入接收单元1710)以及检测对应于多部分操作的第二部分的输入包括检测接触从触敏表面上抬起(例如,借助输入接收单元1710)。
在一些实施方案中,对应于多部分操作的第一和第二部分的输入包括单个手势,其中对应于多部分操作的第一部分的输入为手势的初始部分而对应于多部分操作的第二部分的输入为手势的随后部分。根据一些实施方案,手势在触敏表面上对应于在设备的显示器上显示的用户界面中的第一位置的部分上发起并且在触敏表面上对应于用户界面中不同于第一位置的第二位置的第二部分上终止(例如,借助触敏表面单元1703)。
在一些实施方案中,对应于多部分操作的第一部分的输入发起与相应应用程序相关联的事件,持续该事件直到接收到对应于多部分操作的第二部分的输入为止,以及对应于多部分操作的第二部分的输入终止与相应应用程序相关联的事件(例如,借助正在进行的输出终止单元1720)。
根据一些实施方案,应用程序为文本编辑应用程序,以及对应于多部分操作的第一部分的输入为对启用文本编辑应用程序的文本键入模式的第一用户界面元素的选择。根据一些实施方案,多部分操作包括针对文本编辑应用程序的文本输入的一个或多个输入以及事件对应于响应于针对文本输入的输入在文本编辑文档中的文本操控。对应于多部分操作的第二部分的输入为对禁用文本编辑应用程序的文本输入模式的用户界面元素的选择。
在一些实施方案中,对应于多部分操作的第一部分的输入为对发起事务处理的第一用户界面的选择,而多部分操作包括针对处理事务处理所需的输入信息的一个或多个输入。在一些实施方案中,事件对应于填充接收处理事务处理所需要的信息的一个或多个数据条目字段以及对应于多部分操作的第二部分的输入为对授权完成事务处理的用户界面元素的选择。
在一些实施方案中,对应于多部分操作的第二部分的输入在对应于多部分操作的第一部分的输入之后并且在时间上与对应于多部分操作的第一部分的输入间隔开对应于事件的持续时间的指定时间间隔,以及正在进行的触觉输出序列贯穿事件的持续时间提供并且指示事件的出现。正在进行的触觉输出序列的特征任选地基于对应于多部分操作的第一部分的输入发起的事件来选择。
在一些实施方案中,处理单元1705响应于接收到对应于多部分操作的第一部分的输入提供第一触觉反馈(例如,借助反馈提供单元1725),第一触觉反馈基于事件选择并且指示事件的发起,第一触觉反馈不同于正在进行的触觉输出序列。处理单元1705还响应于接收到对应于多部分操作的第二部分的输入提供第二触觉反馈(例如,借助反馈提供单元1725),第二触觉反馈不同于正在进行的触觉输出序列。
根据一些实施方案,对应于多部分操作的第一部分的输入暂停与应用程序相关联的正在进行的事件,而对应于多部分操作的第二部分的输入恢复与应用程序相关联的正在进行的事件。
在一些实施方案中,应用程序为语音通信应用程序,事件为在接收到对应于多部分操作的第一部分的输入时出现的正在进行的语音通信。在一些实施方案中,对应于多部分操作的第一部分的输入为对语音通信应用程序的第一用户界面元素的选择,该选择暂停正在进行的语音通信,以及对应于多部分操作的第二部分的输入为对恢复语音通信的第二用户界面元素的选择。
在一些实施方案中,在响应于多部分操作的第一部分发起正在进行的触觉输出序列之后以及在接收到对应于多部分操作的第二部分的输入之前,处理单元1705接收不同于对应于多部分操作的第二部分的输入的一个或多个额外用户输入(例如,借助额外输入接收单元1730)。处理单元1705继续提供正在进行的触觉输出而不管额外用户输入(例如,借助正在进行的输出发起单元1715),直到接收到对应于多部分操作的第二部分的输入为止。在一些实施方案中,正在进行的触觉输出序列的强度随时间增大直到接收到对应于多部分操作的随后输入为止。
根据一些实施方案,响应于检测到对应于多部分操作的第一部分的输入(例如,借助输入接收单元1710),处理单元1705发起正在进行的音频输出序列来伴随正在进行的触觉序列(例如,借助正在进行的输出发起单元1715),以及响应于检测到对应于多部分操作的第二部分的输入(例如,借助输入接收单元1710),终止正在进行的音频输出序列(例如,借助正在进行的输出终止单元1720)。
在一些实施方案中,触觉输出序列的时间变化触觉能量分布模拟音频输出序列的时间变化声学能量分布。在一些情况下,响应于确定对应于多部分操作的第一部分的输入未暂停正在进行的事件,但发起与相应应用程序相关联的事件,处理单元1705提供触觉输出序列而无伴随的音频输出序列(例如,借助正在进行的输出发起单元1715),并且响应于确定对应于多部分操作的第一部分的输入暂停与相应应用程序相关联的正在进行的事件,处理单元1705提供伴随正在进行的触觉输出序列的正在进行的音频输出序列(例如,借助正在进行的输出发起单元1715)。
如上所述,参考图7、图9至图13所述的操作任选地由图14至图19中所描绘的部件来实施。图18示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图18中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图18中所示,设备100包括被配置为显示应用程序的显示单元1801;被配置为接收用户接触的触敏表面单元1803;以及与显示单元1801和触敏表面单元1803耦接的处理单元1805。在一些实施方案中,处理单元1805包括输入检测单元1810、输出提供单元1815、操作执行单元1820、图像捕获单元1825、安全事务处理授权单元1830和保存操作执行单元1835。
处理单元1805被配置为检测对应于请求执行第一操作的第一输入(例如,借助输入检测单元1810)以及响应于检测到第一输入,提供包括触觉分量的第一输出(例如,借助输出提供单元1815)。同样响应于检测到第一输入,处理单元1805被配置为执行第一操作(例如,借助操作执行单元1820)。在执行第一操作之后,处理单元1805被配置为检测对应于请求执行包括第一操作和辅助操作的第二操作的第二输入(例如,借助输入检测单元1810),以及响应于检测到第二输入,提供包括触觉分量的第二输出(例如,借助输出提供单元1815),其中第二输出包括第一输出以及提供对应于辅助操作的辅助输出。同样响应于检测到第二输入,处理单元1805被配置为执行第二操作(例如,借助操作执行单元1820)。
以下段落[0411]-[0420]描述了可由图18所示的设备100单独或以任何组合形式实施的不同实施方案。
在一些实施方案中,响应于检测到第二输入,处理单元1805执行第一操作且同时提供第一输出,并且执行辅助操作且同时提供辅助输出(例如,借助操作执行单元1820和输出提供单元1815)。
在一些实施方案中,响应于检测到第二输入,处理单元1805在执行辅助操作之前执行第一操作(例如,借助操作执行单元1820),以及在提供辅助输出之前提供第一输出(例如,借助输出提供单元1815)。在一些实施方案中,响应于检测到第二输入,处理单元1805在执行辅助操作之后执行第一操作(例如,借助操作执行单元1820),以及在提供辅助输出之后提供第一输出(例如,借助输出提供单元1815)。
在一些实施方案中,响应于检测到第二输入,处理单元1805与辅助操作的一部分并发地执行第一操作的至少一部分(例如,借助操作执行单元1820),以及与辅助输出的一部分并发地提供第一输出的至少一部分(例如,借助输出提供单元1815)。
在一些实施方案中,第一操作对应于借助相机捕获图像,而第二操作对应于在指定时间间隔之后捕获图像。在一些实施方案中,第一操作对应于使得设备能授权安全事务处理的支持事务处理的操作而第二操作对应于使得设备能授权安全事务处理以及授权安全事务处理。
根据一些实施方案,第一操作对应于用于在现有文件中保存内容的保存操作,而第二操作对应于将现有文件中的内容保存为新文件的另存操作。根据一些实施方案,第一操作对应于用于发送对消息收件箱中的消息的答复的发送操作而第二操作对应于用于发送对消息收件箱中的消息的答复以及从消息收件箱中删除该消息的发送和归档操作。在一些实施方案中,辅助操作具有可变值以及辅助输出基于可变属性的值。
在一些实施方案中,对应于第二输出的触觉分量包括对应于第一输出的第一触觉分量以及对应于辅助输出的第二触觉分量,第二触觉分量不同于第一触觉分量。在一些情况下,辅助输出包括非触觉分量。在一些实施方案中,第二输出包括将辅助操作标识为不同于第一操作的文本分量。并且在一些情况下,辅助输出包括音频分量而第一输出不包括音频分量。
根据一些实施方案,计算设备包括触敏显示器以及通过触敏显示器接收第一和第二输入(例如,借助触敏表面单元1803)。在一些实施方案中,第一输出的触觉分量和第二输出的触觉分量经由触敏显示器提供(例如,借助输出提供单元1815)。
在一些实施方案中,处理单元1805检测对应于请求借助相机捕获第一图像的第一输入(例如,借助输入检测单元1810)以及响应于检测到第一输入,处理单元1805提供包括触觉分量的第一输出(例如,借助输出提供单元1815)。同样响应于检测到第一输入,处理单元1805捕获第一图像(例如,借助图像捕获单元1825),以及在捕获第一图像之后,检测对应于请求在指定时间间隔之后捕获第二图像的第二输入(例如,借助输入检测单元1810)。响应于检测到第二输入,处理单元1805提供包括触觉分量的第二输出(例如,借助输出提供单元1815),其中第二输出包括第一输出以及提供对应于测量指定时间间隔到期的辅助输出,以及处理单元1805在指定时间间隔之后捕获第二图像(例如,借助图像捕获单元1825)。
在一些实施方案中,处理单元1805检测对应于请求执行使得设备能授权安全事务处理的支持事务处理操作的第一输入(例如,借助输入检测单元1810)以及响应于检测到第一输入,提供包括触觉分量的第一输出(例如,借助输出提供单元1815)。同样响应于检测到第一输入,处理单元1805使得设备能授权安全事务处理(例如,借助安全事务处理授权单元1830)。在执行支持事务处理操作之后,处理单元1805检测对应于请求授权安全事务处理的第二输入(例如,借助输入检测单元1810),以及响应于检测到第二输入,提供包括触觉分量的第二输出(例如,借助输出提供单元1815),其中第二输出包括第一输出以及提供对应于授权安全事务处理的辅助输出。同样响应于检测到第二输入,处理单元1805授权安全事务处理(例如,借助安全事务处理授权单元1830)。
在一些实施方案中,处理单元1805检测对应于请求执行保存操作的第一输入(例如,借助输入检测单元1810)以及响应于检测到第一输入,提供包括触觉分量的第一输出(例如,借助输出提供单元1815)。同样响应于检测到第一输入,处理单元1805执行用于将内容保存在现有文件中的保存操作(例如,借助保存操作执行单元1835),以及在执行保存操作之后,处理单元1805检测对应于请求执行将现有文件中的内容保存到新文件的另存为操作的第二输入(例如,借助输入检测单元1810),以及响应于检测到第二输入,提供包括触觉分量的第二输出(例如,借助输出提供单元1815),其中第二输出包括第一输出以及提供对应于创建新文件的辅助输出。同样响应于检测到第二输入,处理单元1805执行另存为操作(例如,借助保存操作执行单元1835)。
如上所述,参考图7、图9至图13所述的操作任选地由图14至图19中所描绘的部件来实施。图19示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图19中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图19中所示,设备100包括被配置为显示应用程序的显示单元1901;被配置为接收用户接触的触敏表面单元1903;以及与显示单元1901和触敏表面单元1903耦接的处理单元1905。在一些实施方案中,处理单元1905包括警示条件检测单元1910和输出提供单元1915。
处理单元1905被配置为检测第一警示条件的出现(例如,借助警示条件检测单元1910),以及响应于检测到第一警示条件的出现,提供包括第一触觉分量和第一非触觉分量的第一输出(例如,借助输出提供单元1915)。在提供第一输出之后,处理单元1905被配置为检测第二警示条件的出现(例如,借助警示条件检测单元1910),以及响应于检测到第二警示条件的出现,提供包括第二触觉分量和第二非触觉分量的第二输出(例如,借助输出提供单元1915)。如果第一警示条件和第二警示条件为相同种类的警示条件的不同警示条件,则第一输出和第二输出共享一个或多个相同分量并且具有一个或多个不同分量,以及如果第一警示条件和第二警示条件为不同种类的警示条件的不同警示条件,则第一触觉分量不同于第二触觉分量并且第一非触觉分量不同于第二非触觉分量。
以下段落[0425]-[0431]描述了可由图19所示的设备100单独或以任何组合形式实施的不同实施方案。
在一些实施方案中,第一警示条件和第二警示条件为相同种类的警示条件,其中种类与应用程序的警示条件相关联。在一些实施方案中,第一警示条件和第二警示条件为相同种类的警示条件,种类与应用程序的类别相关联。在一些实施方案中,第一警示条件和第二警示条件与两个不同应用程序相关联,其中第一警示条件和第二警示条件在相同种类的警示条件中,种类对应于在两个不同应用程序中的预定义种类的功能中的功能。根据一些实施方案,第一警示条件和第二警示条件与共同应用程序相关联,其中第一警示条件和第二警示条件在相同种类的警示条件中,种类对应于在预定义种类的功能中的功能。
在一些实施方案中,警示条件的种类包括消息、活动提示、媒体回放提示、视觉协助提示、系统提示、调度提醒和互联网浏览器更新。在一些实施方案中,第一警示条件和第二警示条件对应于相同警示条件的独立实例,第一输出与第二输出相同。根据一些实施方案,第一和第二非触觉分量为音频输出。根据一些实施方案,第一和第二非触觉分量为视觉输出。
在一些实施方案中,当第一警示条件和第二警示条件为相同种类的警示条件的不同警示条件时,第一输出的第一触觉分量与第二输出的第二触觉分量相同,并且第一输出的第一非触觉分量不同于第二输出的第二非触觉分量。在一些实施方案中,当第一警示条件和第二警示条件为相同种类的警示条件的不同警示条件时,第一输出的第一非触觉分量与第二输出的第二非触觉分量相同,并且第一输出的第一触觉分量不同于第二输出的第二触觉分量。
根据一些实施方案,第一警示条件和第二警示条件对应于相同警示条件,以及第一输出伴随不同于伴随第二输出的第二额外分量的第一额外分量。
在一些实施方案中,伴随第一输出的第一额外分量提供描述触发第一警示的第一事件的信息,而伴随第二输出的第二额外分量提供描述触发第二警示的第二事件的信息。
在一些实施方案中,在提供第二输出之后,处理单元1905检测第三警示条件的出现(例如,借助警示条件检测单元1910),以及响应于检测到第三警示条件的出现,提供包括第三触觉分量和第三非触觉分量的第三输出(例如,借助输出提供单元1915),其中当第一警示条件、第二警示条件和第三警示条件为相同种类警示条件的不同警示条件时,第一输出、第二输出和第三输出共享一个或多个相同分量以及具有一个或多个不同分量,并且其中第三警示条件在不同于第一警示条件和第二警示条件的种类的警示条件中时,第三触觉分量不同于第一触觉分量和第二触觉分量两者以及第三非触觉分量不同于第一非触觉分量和第二非触觉分量两者。
在一些实施方案中,计算设备具有触敏显示器(例如,借助触敏表面单元)以及第一输出的第一触觉分量和第二输出的第二触觉分量经由计算设备上的触敏显示器提供(例如,借助输出提供单元1915)。
硬件规范
在某些实施方案中,设备100可包括以简化示意图形式示出的用于发送和接收声能的一个或多个声学模块2006。声学模块2006可为电子设备的扬声器或麦克风,作为非限制示例。
如图20所示,设备外壳包括耦接到声学模块2006的第一声学端口2020。在一些实例中,声学模块2006被配置为起到设备100的麦克风或者扬声器元件的作用。然而,出于以下描述的目的,声学模块2006被描述为扬声器元件或模块。声学端口2020包括有助于将可听信号从声学模块2006传输到用户耳朵的孔2031、2032。在该示例中,孔延伸通过外壳101并且将声学模块的内部元件与外部环境声学相连。在其他示例中,单个声学端口可包括多个孔或单个孔。在一些实施方案中,声学端口2020还可包括外壳结构2021(“伞”)、筛网2015或配置为防止液体或其他异物进入的其他保护性元件。
伞结构2021一般防止水或流体2001直接影响声学模块2006。在一个示例中,声学端口2001包括相对于模块的声学腔偏移的一个或多个孔或开口2031、2032(例如,伞2021和网2015之间以及包括孔2031、2032的间隔)。伞结构可形成壳体或外壳101的外表面。例如,伞结构2021可由位于相对于声学腔偏移的两个或更多个孔或开口2031、2032之间的材料形成。
而且,某些实施方案可使得声学腔成型以减小水在腔或孔的其他部分中积累的可能性。筛网2015可将声学腔2011与外部环境分隔开并且可阻止液体或其他异物从外部环境进入到声学腔2011中。例如,孔2031、2032的侧壁可大体上延伸到筛网2015的表面从而减小水在孔或腔中的表面张力。同样地,孔的外侧可形成倒角以减小邻近孔的液体的表面张力并且因此有助于液体移除。
在图20中所示的当前示例中,声学模块2006为扬声器模块。如图20所示,扬声器声学模块包括用于产生和传输声音的各种部件,包括隔膜2010、音圈2009、中心磁体2008和侧磁体/线圈2007。在典型具体实施中,隔膜2010被配置为响应于在音圈2009中的激励信号产生声波或声学信号。即,音圈2009中的调制激励信号引起隔膜2010的移动。隔膜2010的移动产生声波,传播穿过声学模块2006的声学腔2011并最终从端口2020出去到达外部环境。在一些情况下,声学腔106起到声学谐振器的作用,该声学谐振器具有一定形状和尺寸,被配置为放大和/或衰减隔膜2010的移动产生的声波。
在某些实施方案中,声学模块2006还包括结构支撑元件,诸如端壁2013和底座2014。这些元件可为扬声器元件提供物理支撑,各种支架、连接器等也可提供此类支撑。某些实施方案可包括衬垫2016来密封设备的内部与环境隔离。应当理解,本文所述的结构意在作为示例而非限制。例如,在另选的实施方案中,声学腔可由额外部件形成或者可由单个部件形成。
图20中所示的声学模块2006提供作为某种类型的扬声器声学模块的一个示例,一些实施方案可使用不同类型的扬声器、麦克风等。而且,尽管在扬声器的情境下描述,但前文同样适用于麦克风并且许多实施方案可类似地集成麦克风。
本文所述的实施方案可包括用于检测触摸位置的一个或多个传感器。具体地,触摸传感器可相对于可穿戴电子设备的显示器布置来形成触敏表面。以下说明针对可用于确定触摸的位置的各个触摸传感器提供。
在一个实施方案中,设备可包括自电容触摸传感器,可由自电容像素或电极阵列形成。图21A示出了对应于自电容触摸像素电极和感测电路的示例性触摸传感器电路。触摸传感器电路2109可具有触摸像素电极2102,该触摸像素电极具有接地的与其相关联的固有自电容,以及当物体诸如手指2112接近或触摸触摸像素电极2102时可形成的接地的额外自电容。触摸像素电极2102接地的总自电容可示为电容2104。触摸像素电极2102可耦接至感测电路2114。尽管可采用其他配置,但感测电路2114可包括运算放大器2108、反馈电阻器2116、反馈电容器2110和输入电压源2106。例如,反馈电阻器2116可由开关电容电阻器代替。触摸像素电极2102可耦接至运算放大器2108的反相输入端。AC电压源2106可耦接至运算放大器2108的同相输入端。触摸传感器电路2109可被配置为感测由手指2112触摸或接近触摸传感器面板所引起的触摸像素电极2102的总自电容2104的变化。处理器可使用输出2120来确定接近事件或触摸事件的存在,或者输出可被输入到离散逻辑网络中来确定触摸事件或接近事件的存在。
图21B描述示例性自电容触摸传感器2130。触摸传感器2130可包括置于表面以及耦接到触摸控制器2106中的感测信道的多个触摸像素电极2102,可由通过驱动/感测界面2125来自感测信道的激励信号驱动,以及也可通过驱动/感测界面2125由感测信道感测到。在触摸控制器2106确定在每个触摸像素电极2102处检测的触摸量之后,可将触摸屏模板中发生触摸的触摸像素的图案视为触摸的“图像”(例如,触摸或接近触摸屏的物体的图案)。图21B中触摸像素电极2102的布置提供作为一个示例,然而,触摸像素电极的布置和/或几何形状可根据实施方案而变化。
某些实施方案可采用不同触摸感测机制。例如,某些实施方案可使用互电容传感器阵列来感测触摸。一些实施方案可使用电阻式触摸传感器、光学触摸传感器或本文所述的任何触摸感测技术的任一组合。因此,尽管详细描述了自电容触摸感测,但应当理解,本文对触摸感测等的参考意在涵盖对触摸的检测,无论在任何给定实施方案中使用的触摸传感器的特定类型。
在某些实施方案中,电子设备可包括用于为用户提供触觉反馈的一个或多个触觉模块。本文所述的是实施方案可涉及或采取适合提供可察觉的触觉反馈的一个或多个触觉致动器的形式。此类致动器可包括电磁线圈、永磁体或其他磁场源。磁场可在线圈通电时通过在质量块上施加洛伦兹力来在触觉致动器的质量块中引起运动。电流通过线圈的方向确定质量块的运动方向,而磁场强度确定质量块的速度以及由此触觉输出的幅度。
通常,在一些实施方案中实施的触觉致动器可被配置为在给定电子设备的极紧凑形状因素情况下最大化或增强所得到的机械能量。
在一个实施方案中以及如图22A至图22B所示,触觉致动器2450可在质量块处于休息状态时使得质量块至少部分置于线圈2200内。该质量块可包括实施为附接在框2260中的磁体阵列的相反极性的两个磁体2211、2212,框2260可为质量块提供多余重量并且因此可生成较强触觉输出。中心块2270可将磁体分开,尽管这是任选的。轴2250可延伸通过质量块使得质量块可在轴上自由滑动。
磁体阵列(由磁体2211、2212和中心块2270形成)可生成在线圈由电流通电时与线圈2200的磁场交互的径向磁场(参见图22B)。源自磁场交互的洛伦兹力使得质量块在第一方向沿轴2250移动。流过线圈2200的反向电流使得洛伦兹力反向。结果,磁体2211、2212上的磁场或力也被反向以及质量块可在第二方向移动。因此,质量块可取决于流过线圈的电流方向沿轴在两个方向移动。通过线圈2200传递交流电可使得中心磁体阵列沿轴来回移动。该移动可引起致动器的外壳2220的移动,反过来可引起电子设备的外壳的移动。
为了避免中心磁体阵列被吸引到轴2250,这会增加两者之间的摩擦力并且因此增加移动中心磁体阵列和框2260所需的力,轴可由非铁素体材料诸如钨、钛、不锈钢等形成,并且质量块可在轴承上沿轴滑动。
致动器还可具有为质量块提供恢复力的结构。例如,弹簧2210可置于轴的任一端。在质量块碰撞弹簧时,弹簧压缩并且存储动能。可释放该动能来沿轴2250返回质量块,从而将其送至或靠近其初始开始位置。弹簧中的动能可与线圈协作来以此类方式移动。
尽管本文描述线性致动器,但应当理解可在不同实施方案使用其他类型的致动器。例如,一些实施方案可采用旋转致动器、压电致动器或任何其他适合线性或非线性致动器。同样地,某些实施方案可采用一起工作的多个致动器。
本文所述的实施方案可采取适合的电子设备的形式、结合到适合的电子设备或操作适合的电子设备。此类设备的一个示例在图23A中示出并且采取可穿戴机构的形式。如图所示,该机构可佩带在用户手腕上并且由带子固定。该机构可具有各种功能,包括但不限于:计时;监测用户生理信号并基于那些信号提供健康相关的信息;与其他电子设备通信(有线或无线方式),其他电子设备可为具有不同功能的不同类型的设备;为用户提供可包括音频、触觉、视觉和/或其他感测输出的警示,警示中的任何一个或所有可彼此同步;在显示器上视觉地描述数据;从可用来发起、控制或修改设备的操作的一个或多个传感器采集数据;确定触摸在设备表面上的位置和/或施加在设备上的力的量以及使用任一个或两者作为输入;接受语音输入来控制一个或多个功能;接受触觉输入来控制一个或多个功能等。
适合的电子设备的另选的实施方案包括电话、平板计算设备、便携式媒体播放器或图4A所示的其他便携式多功能设备100。其他适合电子设备可包括膝上型/笔记本计算机、个人数字助理、触摸屏、输入敏感触板或表面等。
图24示出可穿戴电子设备的示例性示意图。如图24所示,设备100包括配置为访问其上存储指令的存储器2410的一个或多个处理单元2405。指令或计算机程序可配置为执行针对设备100描述的操作或功能中的一个或多个。例如,指令可配置为控制或协调设备的各种部件的操作。此类部件包括但不限于:显示器2415、一个或多个输入/输出部件2420、一个或多个通信信道2425、一个或多个传感器2430、2435、扬声器2440、麦克风2445和/或一个或多个触觉反馈设备2450。在一些实施方案中,扬声器和麦克风可组合成单个单元和/或可通过设备的外壳共享共同端口。一些实施方案还包括电池2455或无线电力2460。如在图24中所述的设备100的部件中的每一个可替代地为另一附图中具有对应名称或功能的部件。
图24的处理单元2405可被实现为能够处理、接收或发送数据或指令的任何电子设备。例如,处理单元2405可包括以下中的一个或多个:微处理器、中央处理单元(CPU)、专用集成电路(ASIC)、数字信号处理器(DSP)或此类设备的组合。如本文所述,术语“处理器”意在涵盖单个处理器或处理单元、多个处理器、多个处理单元或其他适当配置的计算元件。
在一些实施方案中,电子设备可容纳各种带子、背带或其他保持机构(统称为“带子”)。这些带子可借助凸耳移可除地连接到电子设备,该凸耳可容纳在设备内的凹口或其他孔中并且锁定其中。凸耳可为带子的一部分或者可与带子分隔开(和/或分开)。通常,凸耳可锁定到电子设备的凹口中并且由此保持带子和设备之间的连接。用户可释放锁定机构从而允许凸耳滑动或以另外方式从凹口移出。在一些实施方案中,凹口可形成在带子中并且凸耳可附接或并入设备。
用户可改变带子和电子设备的组合,从而允许两种类别的混合和匹配。应当理解,具有其他形式和/或功能的设备可包括类似凹口并且可与凸耳和/或结合凸耳的带子可释放地配对。以此方式,可设想到带子和设备的生态系统,它们中的每一个相互可兼容。可使用单个带子连接到设备,作为另外一个示例,在此类实施方案中,带子可包括允许两个设备将信号传输到彼此并且由此彼此交互的电子互联结构。
在许多实施方案中,电子设备可保持和显示时间,除其他事项外,主要起到腕表的功能。根据设备、其设置和(在一些情况下)用户偏好,可采用模拟或数字格式显示时间。典型地,在形成设备外部的一部分的数字显示叠层上显示时间。
显示叠层可包括盖元件,诸如覆盖显示器的盖玻璃。盖玻璃不需要由玻璃形成,但这是一种选项,可由蓝宝石、氧化锆、氧化铝、化学强化玻璃、硬化塑料等形成。同样地,显示器可为液晶显示器、有机发光二极管显示器或任何其他适合显示技术。在一些实施方案中,在其他元件中,显示叠层可包括背光。
设备还可包括一个或多个触摸传感器来确定触摸在盖玻璃上的位置。触摸传感器可并入显示叠层中或上从而确定触摸的位置。在某些实施方案中,触摸传感器可为自电容的,在其他实施方案中为互电容的,或这两者的组合。
类似地,设备可包括力传感器来确定施加到盖玻璃的力的量。力传感器在一些实施方案中可为电容传感器以及在一些实施方案中为应变传感器。在任一实施方案中,力传感器通常为透明的并且由透明材料制成,或者位于显示器下方或远离显示器从而不干扰显示器的视野。力传感器例如可采取由硅树脂或另一可变形材料分开的两个电容板的形式。在电容板在外力作用下更靠近移动时,电容的变化可得到测量以及为与电容变化相关联的外力的值。而且,通过比较来自力传感器上多个点,或多个力传感器的相对电容变化,可确定施加力的位置。在一个实施方案中,力传感器可采用在显示器外围下方延伸的衬垫的形式。衬垫可取决于实施方案为分段或一体的。
电子设备还可为用户提供警示。可响应于以下条件生成警示:设备的状态变化(一个示例为电力变低);设备接收到信息(诸如接收消息);设备与另一机构/设备之间的通信(诸如第二类型的设备通知设备有消息等待或者通信在进行中);应用程序(诸如,游戏的一部分,或者当日历约会即将来临时)或操作系统(诸如当设备通电或关闭时)的运行状态等等。警示的触发数量和类型有多种并且范围广泛。
警示可为听觉、视觉、触觉或它们的组合。触觉致动器可容纳在设备中或者可直线移动以生成触觉输出(当然在另选的实施方案中,触觉致动器可以是旋转的或任何其他类型)。扬声器可提供警示的听觉分量以及前述显示器可提供视觉警示分量。在一些实施方案中,可使用专用光、显示器或其他视觉输出分量作为警示的一部分。
警示的听觉、触觉和/或视觉分量可同步来为用户提供整体体验。一个或多个分量可相对于其他分量延迟从而在它们之间产生理想的同步。可将分量同步使得它们被察觉大体上同步,作为一个示例,触觉分量可在听觉输出之前一点发起,因为触觉输出可能比音频花费更长时间察觉到。作为另一示例,触觉输出(或其一部分)可大体上在听觉输出之前但在微弱或甚至潜意识水平发起,从而启动佩戴者接收听觉输出。
示例性电子设备可通过有线连接或无线连接与其他电子设备通信。数据可在设备之间传递,允许一个设备将信息中继到另一,控制另一,利用另一设备的传感器、输出和/或输入等。图23B示出佩戴样本电子设备100的用户2310,其中第二电子设备2320在其口袋中。第二设备任选地具有本文所述的用于设备100和300的性能中的任何一个。数据可在电子设备100、2320之间无线传输,从而允许用户210借助第一电子设备100从第二设备2320接收、浏览数据以及与数据交互。因此,用户2310可通过第一电子设备100访问第二设备的功能的部分或所有,而无需真正与第二设备直接交互。
而且,电子设备100、2320可协作不仅共享数据而且共享功能。例如,两个设备中的一个可结合另一设备缺少的传感器、应用程序或功能。缺少此类性能的电子设备可从另一设备请求,另一设备可与请求设备无线共享。因此,多个设备可一起操作来提供两者之间扩展功能、软件、访问等并且最终提供给用户。作为一个非限制示例,电子设备100可能在第二设备2320可以能够拨打或接听电话呼叫时无法拨打或接听电话呼叫。然而,用户可通过第一设备100拨打和/或接听呼叫,第一设备实际上可采用第二设备2320拨打或接听呼叫。
作为另一非限制示例,电子设备100可与附近的销售终端无线通信,从而允许用户快速而有效地进行事务处理,诸如出售、购买或退回商品。电子设备可使用近场通信技术来执行这些或其他功能。
如上所述,带子可连接到两个电子设备并且可起到两个设备之间有线通信路径的作用。作为另一示例,设备可无线通信,从而允许一个设备将来自第二个的信息中继给用户。这后一示例在第二设备不可访问时尤其有用。
某些实施方案可结合一个或多个生物识别传感器来测量用户的某些生理特征。设备例如可包括心律传感器来确定用户心率或血氧水平。设备还可或者相反包括电极来测量用户的身体阻抗,这可允许设备估计身体脂肪百分比,身体电活动、身体阻抗等。还包括血压、紫外线曝光等。取决于并入或与电子设备相关联的传感器,各种用户特征可被测量和/或估计,从而允许不同健康信息提供给用户。
某些实施方案可无线充电。例如,感应式充电底座可将电力传输到设备中的感应式接收器从而为设备的电池充电。而且,通过改变设备与底座之间感应场,数据可在两者之间传输。作为一个简单非限制示例,可用来在设备置于底座上时将底座从低电量睡眠状态唤醒到活动充电状态。还可以使用其他无线充电系统(例如,近场磁共振和射频)。另选地,设备还可采用通过电极的有线充电。
在某些实施方案中,设备可包括旋转输入,可采取带杆的冠形式。冠和杆可旋转来提供旋转输入。可以光学、电子、磁性或机械方式感测杆和/或冠的旋转。而且,在一些实施方案中,冠和杆还可横向移动,从而为设备提供第二类型的输入。
电子设备可类似地包括一个或多个按钮。按钮可被按下来为设备提供另一输入。在各种实施方案中,按钮可为弹片开关、摇臂开关、电触点、磁开关等。在一些实施方案中,按钮可为防水的或者以另外方式密封隔绝环境。
各种实施方案可包括或者以另外方式结合一个或多个运动传感器。运动传感器可检测设备的运动并提供、修改、停止或以另外方式基于运动影响设备或相关联应用程序的状态、输出或输入。作为非限制示例,运动可用来使得设备静音或确认设备生成的警示。简单的运动传感器包括加速度计、陀螺传感器、磁力仪、GPS传感器、距离传感器等。一些实施方案可使用GPS传感器以有助于或实现位置和/或导航协助。
如图24所示,设备100还可包括一个或多个声学元件,包括扬声器2440和/或麦克风2445。扬声器2440可包括驱动电子装置或电路并且可配置为响应于命令或输入产生可听声或声学信号。类似地,麦克风2445还可包括驱动电子装置或电路并且配置为响应于命令或输入接收可听声或声学信号。扬声器2440和麦克风2445可声学耦合到底座中的端口或开口,允许声能通过,但可以阻止液体或其他杂质进入。
某些实施方案可结合环境光传感器。环境光传感器可允许设备感测其环境的亮度并且相应地调节某些可操作参数。例如,电子设备可响应于感测到的环境光修改显示器的亮度。作为另一示例,如果感测到一段时间内很少或没有光,则电子设备可关闭显示器。
在阅读说明书整体时,电子设备的这些或其他功能、操作和能力将是明显的。
基于警示种类的触觉输出
根据一些实施方案,可以许多不同方式触发警示条件。例如,一些警示可通过来自另一人的通信触发,诸如接收到电子邮件,接收语音信箱消息以及接收文本消息。其他警示由用户设定通知触发,诸如日历警示或提醒。另外警示由系统基于通知触发,诸如基于应用程序或基于设备的警示,诸如财务事务处理事件或设备配对事件。一些警示由第三方应用程序触发,而其他警示从应用程序或设备本地的其他方面触发。根据一些实施方案,哪种触发造成警示提供用于提供对应触觉输出的基础。
根据一些实施方案,对应触觉与警示种类相关联,允许用户随时间逐渐认识到触觉反馈作为具有特定触觉以及与特定警示种类相关联的其他输出的语言。提供与各种警示种类相关联的触觉输出产生更有效人机界面,从而减小用户理解警示和执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图25为根据一些实施方案的提供各种触觉和其他反馈警示的方法2500的流程图,每个警示对应于不同警示种类。注意,在一些实施方案中,可执行图25中所示那些之外的不同步骤。
方法开始于设备100检测2505事件。根据各种实施方案,对于在具有触觉输出发生器的计算设备100上运行的应用程序,事件采取各种形式。事件为任何通知、警示或导向到设备用户的其他事件。在一些情况下,设备100具有触敏显示器。
根据一些实施方案,不同类型的警示事件对应于不同事件种类。根据确定落入特定种类的事件类型,提供对应于事件种类的警示。例如,根据确定事件为第一事件种类中的事件类型,提供2515包括触觉输出发生器生成的第一触觉分量的第一警示。类似地,根据确定事件为包括多个不同事件类型的第二事件种类中的事件类型,提供2520包括触觉输出发生器生成的不同于第一触觉分量的第二触觉分量的第二警示。同样地,根据确定事件为包括多个不同事件类型的第三事件种类中的事件类型,提供2525包括触觉输出发生器生成的不同于第一触觉分量以及第二触觉分量的第三触觉分量的第三警示。因此,根据一些实施方案,触觉输出取决于事件所属的事件种类。
根据一些实施方案,基于触觉输出之间的间隔、触觉输出数量和触觉分量期间触觉输出的幅度随时间的变化中的一个或多个,第一触觉分量不同于第二触觉分量和第三触觉分量。
在一些实施方案中,触觉分量设计为大体上不同从而使得用户在不同警示种类之间容易区分警示的可听分量是否由设备提供,如上文参考图25所述。例如,设备可具有对应于不同事件的多个唯一警示,以及第一事件种类、第二事件种类和第三事件种类对应于典型地比对应于唯一警示的事件更频繁发生的事件类型。
在一些情况下,事件种类对应于基于不同因素生成的事件。例如,根据一些实施方案,第一种类的事件包括基于来自其他用户的通信生成的事件,第二种类的事件包括基于设备的用户输入的预定义准则生成的事件,而第三种类的事件包括基于满足设备监测准则生成的事件。
根据一些实施方案,事件种类对应于各种事件,如下文参考表9进一步所述。根据一些实施方案,例如,第一类型的事件为个人事件种类,第二类型的事件为用户设定事件种类,而第三类型的事件为系统事件种类。个人事件种类可包括诸如传入消息、传入电子邮件、传入语音信箱等的事件。用户设定事件种类可包括诸如日历通知、提醒通知、定时器/闹钟事件等的事件。系统事件种类可包括诸如配对事件、财务事务处理事件或电池水平事件等的事件。根据一些实施方案,对应于每个种类的警示预先配置为该种类,使得种类共享触觉输出的一个或多个属性。根据一些实施方案,对应于种类的触觉可由设备100的用户配置。
根据一些实施方案,响应于检测到2506事件,以及根据确定事件为包括多个不同事件类型的第四事件种类中的事件类型,提供2530包括触觉输出发生器生成的不同于第一触觉分量、第二触觉分量以及第三触觉分量的第四触觉分量的第四警示。根据一些实施方案,第四事件种类对应于第三方应用程序生成的事件,可包括各种第二方或第三方事件,例如提供社交网络消息的社交网络或者提供游戏通知的游戏应用程序。
根据一些实施方案,第四触觉分量由不包括在第一触觉分量、第二触觉分量或第三触觉分量中的触觉输出元素与第一触觉分量、第二触觉分量以及第三触觉分量区分开。例如,在第四事件种类对应于第三方应用程序生成的事件的情况下,第四触觉分量可包括第三方事件专有的(例如,特定振动模式)并且不包括在对应于其他种类提供的触觉输出中的触觉分量,使得用户可容易识别出警示来自第三方应用程序而非来自设备提供的本地应用程序或特征中的任一个。在该示例中,第一、第二和第三事件种类对应于直接从设备或者从设备本地应用程序发起的事件。然而,在一些实施方案中,对应于给定种类的触觉分量可为该种类唯一并且不包括在对应于其他种类提供的触觉输出中,使得用户可容易从触觉输出识别出警示来自特定事件种类,因为不同于其他种类。
在一些实施方案中,如果触觉输出伴随相应音频分量输出,则音频分量也反映事件种类。例如,对于某种类的音频分量可为该种类唯一(例如,特定类型的声音)并且不包括在对应于其他种类提供的音频输出中,使得用户可容易从音频输出识别出警示来自特定事件种类,因为不同于其他种类。
表9示出一些示例性情况,其中设备100具有用于确定检测到的事件是否为已知事件种类的信息。所示示例代表四个事件种类:个人、用户设定、系统或第三方,但可为任何事件种类。表9中示出的事件类型包括电子邮件消息、文本消息和语音信箱消息(个人),日历和提醒通知、定时器和闹钟(用户设定),设备配对、财务事务处理和电池水平指示(系统),以及第三方消息和通知(第三方),但可为为设备100提供类似信息用于做出此类确定的任何其他事件。
表9:多事件种类触觉
对于所示示例,事件种类列示出事件落入四个种类中哪一个:个人、用户设定、系统或第三方。在每个种类中,每个事件类型列列出各种事件类型。几个示例针对每个事件种类列出,但该列表并非意在穷尽其他事件类型。在一些实施方案中,个人事件为个人,典型地由另一用户发送到设备用户的那些事件,诸如电子邮件、文本或语音信箱。根据一些实施方案,用户设定事件如名字所暗示为设备用户设置的事件,诸如日历通知、提醒、定时器结束、闹钟停止等。在一些实施方案中,系统事件为设备或系统自身生成的事件,诸如设备配对或电池水平指示。根据一些实施方案,第三方事件可变化巨大,但通常对应于在设备上运行的第三方应用程序触发的事件。第三方事件的示例包括对应于社交网络应用程序的消息或通知、对应于游戏应用程序的通知或提醒、对应于健身应用程序的活动警示等等。
注意,在所示示例中,无论事件类型如何,对应于给定事件种类的每个事件具有相同触觉和音频输出。根据一些实施方案,所有个人事件种类事件产生包括首先快速双击、随后具有长时间淡入淡出的叮叮声音频分量的触觉分量的输出。在该示例中,输出由用户察觉为轻击-轻击-叮叮声(淡入淡出)。根据一些实施方案,所有用户设定事件种类事件产生包括首先慢速双击、随后铃声音频分量的触觉分量的输出。在该示例中,输出由用户察觉为轻击-轻击-铃声。
根据一些实施方案,所有系统事件种类事件产生触觉隆隆声的输出,在隆隆声的结束重叠有较安静的“短音”音频分量,随后在隆隆声完成之后开始具有短时间淡入淡出的叮叮声音频分量。在该示例中,输出由用户察觉为隆隆声...(短音)...-叮叮声(淡入淡出)。根据一些实施方案,所有第三方事件种类事件产生对应于第三方应用程序的一致触觉分量的输出,包括快速双击以及嗡嗡声淡入淡出,其中嗡嗡声淡入淡出部分与音频分量重叠,可随事件类型或与第三方应用程序相关联的条件变化。在该示例中,输出由用户察觉为轻击-轻击-叮叮声(升高或下降...(嗡嗡声(淡入淡出))...。
注意,在这些示例中,触觉和音频分量两者都唯一对应给定种类,使得用户可容易从输出识别警示来自特定事件种类,因为不同于其他种类。在第三方应用程序种类的示例中,触觉相同而音频为该种类的特征但取决于事件类型或条件变化。此外,仅仅触觉输出部分也唯一对应于这些示例中的给定种类,使得用户可仅从触觉输出识别出警示来自特定事件种类,即使用户在其设备上关掉声音。为了给用户提供一致并且容易理解的警示语言,不同种类的警示每一个都对应于多个不同事件,以及在警示为用户任选(或用户可修改)的实施方案中,用户任选地提供有选项用于改变与事件种类相关联的声音或触觉输出,但改变该声音或触觉输出将使得声音或触觉输出针对于警示种类相关联的所有事件改变。此外,在一些实施方案中,用户提供有选项来将事件分配不同事件种类。该可定制性使得用户能定制其设备提供的警示同时仍保持增强警示的效率和有效性的一致警示语言。
应当理解,对图25中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2600、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图25描述的方法2500。例如,参考方法2500上述的输入、警示条件、事件、应用程序、状态和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2600、3000和3200)在本文所述的输入、警示条件、事件、应用程序、状态和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
用于触觉输出的选择性警示突出性
根据一些实施方案,警示条件选择性地经历触觉输出的突出性的增大。在一些实施方案中,设备100可修改触觉输出的突出性来“启动”用户,有助于引起对警示的更大关注。例如,设备100可提供启动触觉输出作为另一触觉输出的前导,启动触觉输出设计为提高操作设备100的用户对其他触觉输出的注意力。在一些实施方案中,突出性针对一些触觉而非其他触觉增大。这对于感觉损伤的用户尤其重要(例如,无法听到可听警示或者具有对振动警示的减小的敏感度的用户)。
图26为根据一些实施方案的为各种触觉提供选择性的突出性增大的方法2600的流程图。注意,在一些实施方案中,可执行图26中所示那些之外的不同步骤。
方法2600开始于检测2605在具有触觉输出发生器的计算设备处第一事件的发生。事件可为任何类型,包括上面结合图25所述的事件类型。响应于检测到第一事件的发生,不同类型的事件可产生具有不同突出性的不同警示。例如,根据确定第一事件为第一类型事件,借助触觉输出发生器提供2610包括第一触觉分量的第一警示,以及至少部分基于设备的警示突出性设置选择触觉分量。根据确定第一事件为第二类型事件,借助触觉输出发生器提供2630包括第二触觉分量的第二警示,第二触觉分量无需考虑设备的警示突出性设置选择。
根据一些实施方案,设备的警示突出性设置具有两个值,其中一个值对应于增大警示的突出性而第二个值对应于不增大警示的突出性。图27示出了根据一些实施方案的在设备100上用于警示-突出性设置的示例性用户界面。如图所示,增大的突出性警示选择器2710允许用户打开或关闭增大的突出性的使用,使得“打开”指示某些警示将具有增大的突出性,“关闭”指示没有警示将具有增大的突出性。如本文所述,一些警示将在该设置打开时具有增大的突出性而一些将不考虑该设置。根据一些实施方案,例如,使用结合图25所述的示例性种类,当警示突出性设置打开时,个人和用户设定事件种类中的事件将产生具有增大的突出性的触觉输出,而系统和第三方事件种类中的事件尽管警示突出性设置打开仍将保持不变。
根据一些实施方案,当事件类型为一组二元相关事件的一部分时,两个事件中的一个可被设计为接收增大的突出性触觉。例如,在尝试时,伙伴配对仅具有两个结果:成功的伙伴配对或失败的伙伴配对。对于成功的伙伴配对,增大的突出性可能不需要,因为这是期望的结果。然而,配对失败可能是未期望的,并且由此经由增大的突出性触觉引起用户的注意从而更容易获得用户的注意。因此,根据一些实施方案,对于对于二元选项的伙伴配对事件失败结果,增大的突出性触觉将产生,而对于伙伴配对成功,将提供标准触觉输出。
在一些实施方案中,当增大的突出性设置打开时警示是否具有增大的突出性基于触发警示的事件的重要性。例如,在一些实施方案中,事件可包括对应于事件的重要性或紧急性的信息(例如,以元数据的形式),诸如在电子邮件上的紧急性或重要的标记、从VIP联系人接收的消息、或指示以某一方式的事件比其他事件更重要的其他类似信息。在一些实施方案中,事件的内容可针对指示重要性诸如“紧急的”、“高重要性”等的关键字来检查。在一些实施方案中,针对具有多于一个增大的突出性指示符的事件可添加较高程度的突出性。例如,当接收到消息以及增大的突出性关闭时,消息触发针对个人事件种类的标准触觉。然而,当从VIP联系人接收到相同消息以及突出性设置关闭时,突出性的某种增大仍将应用于在其他消息联系人之间区分VIP联系人。而且当增大的突出性打开时,接收到的消息增大了突出性。因此,根据一些实施方案,从一个触发(例如,针对个人增大的突出性设置)的增大可与从另一触发(例如,消息来自VIP联系人)的增大结合来产生“额外突出性”输出。例如,额外突出性输出可为事件种类的标准触觉之前三个单独启动触觉分量。
根据一些实施方案,一些事件类型借助事件的性质被认为更重要。例如,在一些实例中事件触发的财务事务处理被认为比其他事件更重要,无论财务事务处理落在哪个事件种类。因此,被认为更敏感的事件的特定类别,在财务事务处理的示例中,这些事件可包括与银行或股票交易应用程序相关联的任何活动,或者与金钱有关和/或更容易经历诈骗活动的其他事件。另一示例为经历增大的突出性事件种类中的事件(例如,个人的),这些事件也为可能直接从操作设备的用户以外的人类用户接收的消息事件类型。例如,从已知电子邮件地址或用户联系人列表上的电话号码的传入消息或呼叫。为了进一步讨论有可能从操作设备的用户之外的人类用户接收的事件类型,参见表2。在该示例中,所有可能从人类用户接收的消息事件类型具有增大的突出性触觉(例如,邮件、消息和语音信箱),但该种类中的其他事件类型并非如此(例如,照片流活动)。
根据一些实施方案,某些事件类型可从增大的触觉输出突出性中排除,即使当事件种类中的其他事件类型提供对应于增大的突出性设置的增大的突出性输出。例如,在增大的突出性打开的事件种类(例如,个人的)中,对UI交互的应答触发的事件(例如,滚动、在项目中进行导航、按下UI按钮或其他用户输入)即使设置打开也没有增大的突出性警示。在一些实例中,用户输入为与应用程序或设备的用户参与的高水平的特征,并且因此为不需要增大的突出性的事件。因此,当用户已经具有与应用程序/设备较高程度的参与或交互时,用户不会受到过度强反馈信号轰炸。
即使事件种类中的其他事件类型提供对应于增大的突出性设置的增大的突出性输出时,某些事件类型可从增大的触觉输出突出性中排除的另一条件是当提供警示的应用程序处于活动状态时(例如,正由设备用户使用)。例如,接收到的消息事件类型为个人事件种类,并且因此典型地将在设置打开时经历增大的突出性警示。然而,在设备的用户在接收到消息时正使用即时消息应用程序的事件中,将不提供增大的突出性触觉。在另一方面,如果在接收到消息时用户未使用即时消息应用程序,则相同接收的消息事件将触发增大的突出性。
在以上示例中,其中第一事件类型引起包括至少基于警示突出性设置选择的触觉分量的警示并且第二事件类型选择触觉分量而不考虑警示突出性设置,当设置值对应于警示的增大突出性时,第一警示将具有增大的突出性而第二警示将不具备。因此,尽管警示突出性设置具有对应于警示的增大的突出性的值,但并非所有警示都将具有增大的突出性。继续上文的示例,如果第一类型的事件为对应于个人事件种类事件类型的传入消息事件,而第二类型的事件为对应于系统事件种类事件类型的付款事件,以及设置值对应于警示的增大突出性,消息(个人种类)事件将具有增大的突出性而付款(系统种类)事件将不具备,因为第二类型不考虑设置。根据一些实施方案,个人和用户设定事件种类在警示突出性打开时针对警示具有增大的突出性触觉,而系统和第三方事件种类将具有标准触觉警示无论警示突出性设置值如何。
根据一些实施方案,第一警示不同于第二警示。例如,第一警示可包括不同于第二警示的触觉分量,或者第一警示可包括不同于第二警示的音频分量,或者第一警示可包括不同的触觉分量和不同的音频分量两者。
然而,在一些实施方案中,设备放弃额外触觉分量并且在警示突出性设置具有第二值时仅为响应于第一多个事件种类中的事件触发的警示提供2625标准触觉分量。继续有关种类的以上示例,在警示突出性设置具有第二值(关闭)时,标准触觉分量将源自响应于个人或用户设定事件种类事件触发的警示。同样地,在一些实施方案中,设备放弃提供额外触觉分量并且仅为响应于第二多个事件种类中的事件触发的警示提供2625标准触觉分量,而不考虑警示突出性设置具有第一值或第二值。继续有关种类的以上示例,标准触觉分量也将源自响应于系统或第三方事件种类事件触发的警示,无论警示突出性设置值如何。在一些情况下,第二多个事件种类不同于第一多个事件种类。因此,在一些示例中,仅在传入事件为设备增大警示突出性以及警示突出性值被设定为增大警示的突出性的事件种类两者时提供额外触觉分量。例如,当警示突出性设置“打开”时个人或用户设定事件种类中的事件。
根据一些实施方案,用于为各种触觉提供选择性的突出性增大的方法包括首先确定2615警示突出性设置的值。根据确定警示突出性设置具有第一值,第一警示包括2620第一触觉分量和第二触觉分量,而根据确定警示突出性设置具有不同于第一值的第二值,第一警示包括2625第一触觉分量但不包括第二触觉分量。例如,第一值可为“增大警示突出性”值而第二值可为“不增大警示突出性”值。继续以上示例,对于个人或用户设定事件种类中的事件,以及“增大警示突出性”(打开)的警示突出性设置,根据一些实施方案,警示将包括第一触觉分量-用于对应事件种类的标准触觉分量-以及第二触觉分量以增大与警示相关联的触觉输出的突出性。对于系统或第三方事件种类中的事件,具有“增大警示突出性”(打开)的警示突出性设置的事件,根据一些实施方案,警示将仅包括对于对应种类的事件的第一标准触觉分量。根据一些实施方案,方法还包括,根据确定第一事件为第三类型事件,提供包括至少部分基于设备的警示突出性设置选择的触觉分量的第三警示。在该示例中,提供包括至少部分基于设备的警示突出性设置选择的触觉分量的第三警示包括确定警示突出性设置的值(例如,类似于上面的步骤2615)。根据一些实施方案,再次参考事件种类示例,如果个人事件种类为第一类型,则用户设定事件种类为该示例的第三类型。
根据一些实施方案,根据确定警示突出性设置具有第一值,第三警示包括第三触觉分量和第四触觉分量,而根据确定警示突出性设置具有不同于第一值的第二值,第三警示包括第三触觉分量但不包括第四触觉分量。根据一些实施方案,对于先前示例,第一值为增大警示突出性值而第二值为不增大突出性值。例如,第三触发分量-对于对应事件种类的标准触觉分量-将与第四触觉分量配对,以增大与警示相关联的触觉输出的突出性。此外,在一些实施方案中,第四触觉分量与第二触觉分量相同。例如,第一触觉分量和第二触觉分量两者为增大突出性触觉,或者用于通知用户警示即将临近的启动分量。在一些实施方案中,设备在提供启动触觉输出的指定时间间隔内以及之后提供第二触觉输出。继续事件种类示例,对应于用户设定事件种类中的事件的事件警示的增大突出性的第四触觉与对应于个人事件种类中的事件的事件警示的增大突出性的第二触觉相同,两者的触觉分量都为针对每个种类的标准触觉之前的启动触觉。
根据一些实施方案,方法还包括,当设备的警示突出性设置具有第一值时检测到第一警示时,响应于第一事件提供的第一警示包括第一触觉分量和第二触觉分量而响应于第一事件提供的第二警示包括第二警示触觉分量。在一些实施方案中,该方法在设备的警示突出性设置具有第一值时继续接收请求将设备的警示突出性设置改变成第二值,以及响应于接收到请求改变警示突出性设置,将警示突出性设置改变为第二值。例如,如果对于个人事件种类事件,由于警示突出性设置打开提供第一和第二触觉分量,则该请求为关闭警示突出性设置的请求。类似地,在一些实施方案中,该方法包括,在设备的警示突出性设置具有第二值时,检测第二事件的发生,以及根据确定第二事件为第一类型事件提供第三警示,第三警示包括第一触觉分量并且不包括第二触觉分量。例如,第三触觉分量仅为用户设定事件种类事件提供,因为警示突出性设置关闭。同样地,根据确定第二事件为第二类型事件,该方法继续提供包括第二警示触觉分量的第二警示。在一些实施方案中,第二警示不包括第二触觉分量(例如,第二警示不受映射突出性设置影响并且不包括第二“额外突出性”触觉分量,无论警示突出性设置被设定为“增大警示突出性”、“不增大警示突出性”)。例如,第二类型的事件为系统事件种类事件,而第二触觉分量不包括在输出中无论警示突出性设置如何。
根据一些实施方案,基于触觉输出之间的间隔、触觉输出数量和触觉分量期间触觉输出的幅度随时间的变化中的一个或多个,第一触觉分量不同于第二触觉分量和第三触觉分量。
在一些实施方案中,触觉分量设计为大体上不同从而使得用户在不同警示种类之间容易区分警示的可听分量是否由设备提供,如上文参考图25所述。例如,设备可具有对应于不同事件的多个唯一警示,以及第一事件种类、第二事件种类和第三事件种类对应于典型地比对应于唯一警示的事件更频繁发生的事件类型。由于有关种类,针对第一事件种类中的事件的警示的触觉分量可由用户与针对第二事件种类中的事件的警示的触觉分量区分开,两者都可由用户与针对第三事件种类中的事件的警示的触觉分量区分开。在一些情况下,典型地更频繁发生的事件为从统计上说比其他事件更频繁发生的事件。如上文结合表9所述,在一些实施方案中,更频繁发生的事件一起被分组为事件种类并且提供有一致警示使得用户可学会区分频繁发生的不同类型的事件。
在一些实施方案中,与事件相关联的事件种类影响是否结合触发警示提供额外触觉分量。根据一些实施方案,当警示突出性设置具有第一值时,针对响应于在第一多个事件种类中的事件(例如,个人的)触发的事件提供2620额外触觉分量。例如,除了与第一事件种类相关联的触觉之外,也提供额外触觉。在一些实施方案中,额外触觉为启动触觉。例如,在一些情况下,第二触觉分量在第一触觉分量之前。
在一些情况下,事件种类对应于基于不同因素生成的事件。例如,根据一些实施方案,第一种类的事件包括基于来自其他用户的通信生成的事件,第二种类的事件包括基于设备的用户输入的预定义准则生成的事件,而第三种类的事件包括基于满足设备监测准则生成的事件。根据一些实施方案,事件种类由事件信息表征为属于某一种类,类似于结合图25所述的事件种类:个人、用户设定、系统和第三方。
在一些实施方案中,事件种类是可配置的使得设备能使得用户选择哪种类型的事件落入事件种类中。然而,在一些实施方案中,落入事件种类中的事件的类型是预定义的,并且设备不能使得设备的用户选择哪些事件类别落入特定事件种类。
类似地,根据一些实施方案,警示突出性设置为用户可配置的,使得用户可选择特定事件种类或者甚至用户可能在触觉输出中想要增大突出性的单独事件类型。允许用户定制与用户认为更重要的事件相关联的触觉输出产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。
表10示出几个示例性情况,其中设备100基于警示突出性设置具有选择性增大突出性的信息。所示的示例代表如上在表9中所示的相同四个事件种类:个人、用户设定、系统和第三方,但可为任何事件种类。
表10:选择性触觉突出性
对于所示示例,事件种类列示出事件落入四个种类中哪一个:个人、用户设定、系统或第三方。在每个种类中,每个事件类型列列出各种事件类型。几个示例针对每个事件种类列出,但该列表并非意在穷尽其他事件类型。对于先前表格,无论事件类型如何,对应于给定事件种类的每个事件都具有相同标准触觉以及该种类的音频输出特征,并且每个种类对于对应于事件种类的任何事件也共享相同的增大的突出性输出。在第三方应用程序种类的示例中,触觉相同而伴随的音频分量为第三方应用程序的特征,即使音频随事件类型或条件变化。
表10包括对应于警示突出性设置的多余列。注意,当警示突出性设置关闭时,指示不应当使用增大的突出性,示出了对应于表9中的示例的标准触觉和音频输出。这保持触觉和音频分量两者都唯一对应给定种类的目标,使得用户可容易从输出识别警示来自特定事件种类,因为不同于其他种类。
对于事件种类中的两个,个人和用户设定来说,当警示突出性打开时,指示将使用增大的突出性,针对该种类将突出性嗡嗡声触觉添加到标准输出。根据一些实施方案,额外触觉被添加到警示的开始使得它在标准输出之前。在该示例中,添加作为较长持续时间和高频的一系列轻击的突出性嗡嗡声触觉分量,使得用户感觉恒定的振动或“嗡嗡声”。根据一些实施方案,突出性嗡嗡声的持续时间为0.5秒或更多,强度从嗡嗡声的开始到结束升高,有助于在标准输出之前得到用户注意。同样注意,即使在警示突出性设置打开时,事件种类中的两个,系统和第三方,示出输出的突出性未增大,即,使用标准输出,而不管设置如何。
表11:额外警示类型和种类
在如上所示的表11中,示出了对应于不同事件的不同音频输出和触觉输出。事件被划分为通知、反馈和警示。具有相同名称的音频输出对应于相同(或大体上相同)的音频输出(音频波形)。具有不同名称的音频输出对应于不同(或在实质上/可察觉不同)的音频输出(音频波形)。具有相同名称的触觉输出对应于相同(或大体上相同)的触觉输出(触觉波形)。具有不同名称的触觉输出对应于不同(或在实质上/可察觉不同)的触觉输出(触觉波形)。括号()中包含的触觉/音频输出名称任选地被忽略以及替换为不带音频输出或触觉输出。
在一些实施方案中,除了上述通知种类之外,触觉/音频输出被分组为多个类型和或种类。通知通常对应于设计为在用户没有对设备加以关注时得到用户关注的触觉/音频输出(例如,当接收到新消息时或日历事件要发生时)。警示通常对应于设计为在用户正关注设备时警示用户在设备处正执行的操作(或设备的条件)的触觉/音频输出(例如,当用户正走路或驾车时的导航指示、设备解锁失败/成功等)。反馈通常对应于设计为给出设备检测到来自用户的输入的用户反馈(例如,滚动输入、按钮选择输入、发送的消息等),或指示输入使得设备达到某个阈值(例如,滚动限制、缩放限制、显示另选菜单的力/压力阈值)的触觉/音频输出。在一些实施方案中,当增大的突出性设置“打开”时,为通知但不是为反馈(例如,因为用户已经在注意并且与设备主动交互)提供增大的突出性触觉/音频输出,通知设计为在用户没注意时引起用户的关注。在一些实施方案中,为应用程序关闭时与应用程序相关联的一些通知(例如,消息通知)而不是为在应用程序打开时与应用程序相关联的反馈(例如,在即时消息应用程序打开时发送和接收的消息警示)提供增大的突出性触觉/音频输出。例如在表11中,消息通知基于增大的突出性设置使用不同触觉输出(例如,当增大的突出性设置关闭时为触觉输出H001而当增大的突出性设置打开时为触觉输出H066)而发送消息时的消息反馈使用相同触觉输出而不考虑增大的突出性设置(例如,增大的突出性设置是否打开或关闭都使用触觉输出H023)。
在一些实施方案中,警示突出性设置改变触觉输出的突出性,而不改变对应音频输出的突出性。例如,如上文在表11中所示,无论增大的突出性设置打开与否消息通知使用相同音频输出(A001),但取决于增大的突出性设置使用不同触觉输出(例如,当关闭增大的突出性设置时使用触觉输出H001而当打开增大的突出性设置时使用触觉输出H066)。
应当理解,对图26中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2500、3000和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图26描述的方法2600。例如,参考方法2600上述的输入、警示条件、事件、应用程序、状态和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2500、3000和3200)在本文所述的输入、警示条件、事件、应用程序、状态和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
参考图25至图27所述的操作任选地由图28至图29中所描绘的部件来实施。图28示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图28中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图28中所示,设备100包括被配置为显示应用程序的显示单元2801;被配置为接收用户接触的触敏表面单元2803;以及与显示单元2801和触敏表面单元2803耦接的处理单元2805。在一些实施方案中,处理单元2805包括检测单元2810和警示提供单元2815。
以下段落[0524]-[0527]描述了可由图28所示的设备100单独或以任何组合形式实施的不同实施方案。
处理单元2805配置为检测具有触觉输出发生器的设备处的事件(例如,借助检测单元2810),以及响应于检测到事件,根据确定该事件为包括多个不同事件类型的第一事件种类中的事件类型,提供包括由触觉输出发生器生成的第一触觉分量的第一警示(例如,借助警示提供单元2815)。
根据确定事件为包括多个不同事件类型的第二事件种类中的事件类型,处理单元2805配置为提供包括触觉输出发生器生成的不同于第一触觉分量的第二触觉分量的第二警示(例如,借助警示提供单元2815)。根据确定事件为包括多个不同事件类型的第三事件种类中的事件类型,处理单元2805配置为提供包括触觉输出发生器生成的不同于第一触觉分量和第二触觉分量的第三触觉分量的第三警示(例如,借助警示提供单元2815)。
根据一些实施方案,第一种类的事件包括基于来自其他用户的通信生成的事件,第二种类的事件包括基于设备的用户输入的预定义准则生成的事件,而第三种类的事件包括基于满足设备监测准则生成的事件。根据一些实施方案,基于触觉输出之间的间距、触觉输出数量和触觉分量期间触觉输出非幅度随时间的变化中的至少一个(例如,警示提供单元2815提供的输出),第一触觉分量不同于第二触觉分量和第三触觉分量。
根据一些实施方案,设备具有对应于不同事件的多个唯一警示(例如,警示提供单元2815提供),以及第一事件种类、第二事件种类和第三事件种类对应于典型地比对应于唯一警示的事件更频繁发生的事件类型。
响应于检测到事件,根据确定事件为包括多个不同事件类型的第四事件种类中的事件类型,处理单元2805配置为提供包括触觉输出发生器生成的不同于第一触觉分量、第二触觉分量和第三触觉分量的第四触觉分量的第四警示(例如,借助警示提供单元2815)。根据一些实施方案,第四事件种类对应于第三方应用程序生成的事件。根据一些实施方案,第四触觉分量由不包括在第一触觉分量、第二触觉分量或第三触觉分量中的触觉输出元素与第一触觉分量、第二触觉分量以及第三触觉分量区分开。
如上所述,参考图25至图27所述的操作任选地由图28至图29中所描绘的部件来实施。图29示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图29中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图29中所示,设备100包括被配置为显示应用程序的显示单元2901;被配置为接收用户接触的触敏表面单元2903;以及与显示单元2901和触敏表面单元2903耦接的处理单元2905。在一些实施方案中,处理单元2905包括检测单元2910、警示提供单元2915、警示突出性确定单元2920和设置变化单元2925。
以下段落[0532]-[0540]描述了可由图29所示的设备100单独或以任何组合形式实施的不同实施方案。
处理单元2905配置为检测在具有触觉输出发生器的计算设备处第一事件的发生(例如,借助检测单元2910),以及根据确定第一事件为第一类型事件,借助触觉输出发生器提供包括至少基于设备的警示突出性设置选择的第一触觉分量的第一警示(例如,借助警示提供单元2915)。根据确定第一事件为第二类型事件,处理单元2905配置为借助触觉输出发生器提供包括不考虑设备的警示突出性设置而选择的第二触觉分量的第二警示(例如,借助警示提供单元2915)。根据一些实施方案,第一警示不同于第二警示。
根据一些实施方案,提供包括至少部分基于设备的警示突出性设置选择的触觉分量的第一警示包括确定警示突出性设置的值(例如,借助警示突出性确定单元2920)。根据一些实施方案,根据确定警示突出性设置具有第一值,第一警示(例如,警示提供单元2915提供)包括第一触觉分量和第二触觉分量。根据一些实施方案,根据确定警示突出性设置具有不同于第一值的第二值,第一警示(例如,警示提供单元2915提供)包括第一触觉分量但不包括第二触觉分量。根据一些实施方案,警示突出性设置的第一值打开而警示突出性设置的第二值关闭。根据一些实施方案,第二触觉分量在第一触觉分量之前。
根据确定第一事件为第三类型事件,处理单元2905配置为提供包括至少部分基于设备的警示突出性设置而选择的触觉分量的第三警示(例如,由警示提供单元2915提供)。根据一些实施方案,处理单元2905提供包括至少部分基于设备的警示突出性设置选择的触觉分量的第三警示包括处理单元2905被配置为确定警示突出性设置的值(例如,借助警示突出性确定单元2920)。
根据一些实施方案,根据确定警示突出性设置具有第一值,第三警示包括第三触觉分量和第四触觉分量。根据一些实施方案,根据确定警示突出性设置具有不同于第一值的第二值,第三警示包括第三触觉分量但不包括第四触觉分量。根据一些实施方案,第四触觉分量与第二触觉分量相同。
根据一些实施方案,当设备的警示突出性设置具有第一值时检测到第一警示时,响应于第一事件提供的第一警示包括第一触觉分量和第二触觉分量而响应于第一事件提供的第二警示包括第二警示触觉分量(例如,警示由警示提供单元2915提供)。根据一些实施方案,在设备的警示突出性设置具有第一值时,处理单元2905配置为接收将设备的警示突出性设置改变为第二值的请求(例如,借助设置变化单元2925)。同样,根据一些实施方案,响应于接收到将警示突出性设置改变为第二值的请求,处理单元2905配置为将警示突出性设置改变为第二值(例如,借助设置变化单元2925)。
根据一些实施方案,当设备的警示突出性设置具有第二值时,处理单元2905配置为检测第二事件的出现(例如,借助检测单元2910)以及响应于检测到第二事件的出现,根据确定第二事件为第一类型事件,处理单元2905配置为提供包括第一触觉分量而不包括第二触觉分量的第三警示(例如,借助警示提供单元2915)。根据一些实施方案,根据确定第二事件为第二类型事件,处理单元2905配置为提供包括第二警示触觉分量的第二警示(例如,借助警示提供单元2915)。
根据一些实施方案,处理单元2905配置为在警示突出性设置具有第一值时为响应于第一多个事件种类中的事件触发的警示提供额外触觉分量(例如,借助警示提供单元2915)。根据一些实施方案,处理单元2905配置为在警示突出性设置具有第二值时放弃为响应于第一多个事件种类中的事件触发的警示提供额外触觉分量(例如,借助警示提供单元2915)。根据一些实施方案,处理单元2905配置为放弃为响应于不同于第一多个事件种类的第二多个事件种类中的事件触发的警示提供额外触觉分量,而不考虑警示突出性设置具有第一值或第二值(例如,借助警示提供单元2915)。
根据一些实施方案,第一种类的事件包括基于来自其他用户的通信生成的事件,第二种类的事件包括基于设备的用户输入的预定义准则生成的事件,而第三种类的事件包括基于满足设备监测准则生成的事件。根据一些实施方案,基于触觉输出之间的间隔、触觉输出数量和触觉分量期间触觉输出的幅度随时间的变化中的至少一个(例如,警示提供单元2915提供的输出),第一触觉分量不同于第二触觉分量和第三触觉分量。
根据一些实施方案,设备具有对应于不同事件的多个唯一警示(例如,警示提供单元2915提供),以及第一事件种类、第二事件种类和第三事件种类对应于典型地比对应于唯一警示的事件更频繁发生的事件类型。
专用触觉/音频输出
警示条件可在各种不同应用程序种类(例如,第一方应用程序、第三方应用程序)中被触发,由各种应用程序触发(例如,电子邮件、日历、文本消息、付款应用程序、定时器应用程序等)以及在许多不同情境下触发(例如,动作成功、动作失败等)。根据一些实施方案,哪个应用程序种类、哪个应用程序和/或在何种情境下检测的条件被检测到提供用于生成对应输出的基础。提供与应用程序种类、应用程序和/或情境相关联的触觉和/或音频输出允许针对输出品牌化的触觉和音频的一致性,并且因此产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。
表12提供了作为使用触觉和音频输出两者的输出品牌一致性的示例的各种应用程序种类、应用程序和情境的概述。
表12:输出语义总览
表12的前两行示出了第一应用程序种类、第一方应用程序、以及第二应用程序种类、第三方应用程序。对于每个种类内的应用程序,警示为对应于应用程序的种类的与包括该应用程序种类特定的波形变型的音频输出分量结合的触觉输出分量,例如,第一方应用程序警示包括第一触觉分量和第一种类波形的变型,而第三方应用程序警示包括第二触觉分量和第二种类波形的变型。这保持与每个应用程序种类相关联的一致触觉。然而,第一方应用程序每一个典型地具有其自身触觉,而所有第三方应用程序典型地共享单一触觉。下文结合表13讨论更特定示例。
表12的第三和第四行示出了基于任何触发条件在单一种类内的两个不同应用程序(第一方应用程序)。两个应用程序引起对应于第一方应用程序种类的相同(第一)触觉输出,但每一个具有对应于针对与特定应用程序相关联的波形的波形变型的不同音频输出。例如,第一应用程序将第一触觉输出与和第一应用程序相关联的波形变型配对,其中不同变型针对第一应用程序中的不同条件。类似地,第二应用程序将第一触觉输出与和第二应用程序相关联的波形变型配对,其中不同变型针对第二应用程序中的不同条件。这保持与每个应用程序相关联的一致触觉。下文结合表14讨论更特定示例。
表12的最后四行示出了两个不同条件(成功、失败),其中触觉输出跨条件保持一致而音频输出基于特定情境变化。例如,成功条件提供与成功相关联的一致的第一触觉,而情境1提供与情境1相关联的第一组波形,以及情境2提供与情境2相关联的第二组波形。同样地,失败条件提供与失败相关联的一致的第一触觉,而情境1提供与情境1相关联的第一组波形,以及情境2提供与情境2相关联的第二组波形。这保持与每个条件(成功、失败)相关联的一致触觉。下文结合表15讨论更特定示例。
根据一些实施方案,警示条件在哪个应用程序种类中触发提供用于生成对应输出的基础。图30为根据一些实施方案的检测第一条件和第二条件以及生成包括触觉和音频输出的对应警示的方法3000的流程图。注意,在一些实施方案中,可执行图30中所示那些之外的不同步骤。
方法开始于在具有一个或多个触觉输出设备和一个或多个音频输出设备的电子设备处检测3005设备处第一条件的出现。根据一些实施方案,第一条件可为本文其他地方所述的各种警示条件中的任一个,并且应用程序可为在设备100上执行的任何应用程序。例如,在一些实施方案中,条件的出现包括接收通信(例如,来自外部源的消息)、检测到来自用户的输入(例如,触摸、语音或与反馈相关联的机械输入)、或检测到满足触发准则(例如,闹钟到期,健身结束等)等等中的一个或多个。根据一些实施方案,计算设备100包括用于接收用户输入的触敏显示器。
响应于检测到第一条件的出现,设备100生成3010对应于第一种类的应用程序中的相应应用程序的第一警示。在该示例中,第一警示包括经由一个或多个触觉输出设备输出的第一触觉分量3012和经由一个或多个音频输出设备输出的第一音频分量3014。在该实例中,音频分量由指定用于第一种类的应用程序中的相应应用程序的音频波形构成。在一些实施方案中,第一种类的应用程序包括第一方应用程序而音频分量为用来将相应应用程序的警示与其他应用程序的警示区分开的唯一音频样本。根据一些实施方案,经由计算设备100上的触敏显示器提供第一触觉输出。
设备100还检测3015设备100处第二条件的出现,任选的在稍后时间。响应于检测到第二条件的出现,设备生成3020对应于不同于第一种类的应用程序的第二种类的应用程序中的相应应用程序的第二警示,第二警示包括经由一个或多个触觉输出设备输出的第二触觉分量3022和经由一个或多个音频输出设备输出的第二音频分量3024。在该实例中,音频分量由指定用于第二种类的应用程序中的应用程序的音频波形构成。在一些实施方案中,第二种类的应用程序包括第三方应用程序而音频分量为用来将第三方应用程序的警示与第一方应用程序的警示区分开的音频样本。根据一些实施方案,经由计算设备100上的触敏显示器提供第一触觉输出。
表13示出了对应于各种应用程序种类的警示的示例性触觉和音频输出。表的前三行示出对应于第一应用程序种类,例如第一方应用程序的警示。对于第一方电子邮件、日历和文本消息应用程序的每一个,输出包括对应于第一应用程序种类(第一方应用程序)的第一触觉和包括对应于第一应用程序种类(第一方应用程序)的波形实例的音频输出。下文结合图31更详细讨论波形变型。通过提供与应用程序种类相关联的触觉和音频输出,在与应用程序种类相关联的输出的品牌化方面为用户提供一致性。上面表9和表10也提供第一方和第三方警示两者的示例。
类似地,表的最后三行示出对应于第二应用程序种类,例如第三方应用程序的警示。对于第三方消息、通知和警示的每一个,输出包括对应于第二应用程序种类(第三方应用程序)的第二触觉以及包括对应于第二应用程序种类(第三方应用程序)的波形实例的音频输出,并且第二触觉不同于对应于根据一些实施方案的第一方应用程序的第一触觉。通过提供与应用程序种类相关联的触觉和音频输出,在与应用程序种类相关联的输出的品牌化方面为用户提供一致性。
表13:应用程序种类输出
此外,尽管第三方应用程序具有唯一一组触觉警示,但它们也可共享相同触觉反馈中的一些。例如,模拟物理反馈的警示,诸如触觉/音频点击或提供结合用户界面元素提供的模拟反弹(像橡皮筋)效果(诸如可滚动列表视图在到达显示器末端时弹回)的触觉可能可用,无论使用中的应用程序的种类。如果应用程序包括可滚动列表,则在该动作时输出可用于该应用程序内,无论应用程序种类如何。
根据一些实施方案,方法的第一警示的生成3010根据确定警示对应于第一种类的应用程序中的相应应用程序,并且第二警示的生成3020根据确定警示对应于不同于第一种类的应用程序的第二种类的应用程序中的相应应用程序。
根据一些实施方案,第一触觉分量和第二触觉分量由可用于第一种类的应用程序和第二种类的应用程序两者的一个或多个触觉波形构成。例如,本文所述的各种波形中的任一个,例如,微小轻击、微轻击、轻击、正弦波等。上述图5描述了各种触觉波形形态的示例。
根据一些实施方案,设备100被配置为生成3010、3020不同警示。不同警示包括具有可用于第一种类的应用程序以及不可用于第二种类的应用程序的音频分量的两个或更多警示的第一子组。例如,某些音频分量可指定用于第一方应用程序,并且不可用于第三方应用程序。不同警示还包括具有可用于第二种类的应用程序以及由指定用于第二种类的应用程序的音频波形构成的音频分量的两个或更多警示的第二子组。例如,特定音频波形可专用于第三方应用程序,并且因此提供第三方应用程序的一致音频特性。上述图6描述了各种音频波形形态的示例。
根据一些实施方案,警示的第二子组包括通过对与第二种类的应用程序相关联的相同的相应音频样本(例如,借助麦克风记录声音的自然音频样本或数字生成的合成音频样本)应用不同变换生成的两个警示。在一些实施方案中,两个警示包括具有通过向与第二种类的应用程序相关联的相应音频样本应用第一变换生成的音频分量的警示。在一些实施方案中,该警示可用于第二种类的应用程序中的多个应用程序。两个警示还任选地包括具有通过向与第二种类的应用程序相关联的相应音频样本应用第二变换生成的音频分量的不同警示,其中第一变换不同于第二变换。在一些实施方案中,该不同警示可用于第二种类的应用程序中的多个应用程序。应用于波形的变换例如包括改变音频样本的幅度、持续时间、音阶、或重复次数。
同样地,根据一些实施方案,警示的第一分组包括通过向与第一种类的应用程序中的第一应用程序相关联的(相同)相应音频样本应用不同变换生成的两个警示。在一些实施方案中,两个警示包括具有通过向与第一种类的应用程序中的第一应用程序相关联的相应音频样本应用第一变换生成的音频分量的警示(例如,通过改变音频样本的幅度、持续时间、音阶、或重复次数)。在一些实施方案中,该警示可用于第一种类的应用程序中的多个应用程序。在一些实施方案中,该警示可仅用于第一种类的应用程序中的第一应用程序。两个警示还任选地包括具有通过向与第一种类的应用程序中的第一应用程序相关联的相应音频样本应用第二变换生成的音频分量的不同警示,其中第一变换不同于第二变换。在一些实施方案中,该不同警示可用于第一种类的应用程序中的多个应用程序。在一些实施方案中,该不同警示可仅用于第一种类的应用程序中的第一应用程序。
类似地,根据一些实施方案,警示的第一子组包括通过向与第一种类的应用程序中的第二应用程序相关联的相同的相应音频样本应用不同变换生成的两个警示,其中与第二应用程序相关联的相应音频样本不同于与第一应用程序相关联的相应音频样本。例如,第一应用程序和第二应用程序每个具有起到该应用程序的“品牌”的特征声音,例如,付款应用程序使用借助付款应用程序唯一的声音样本生成的警示使得针对付款应用程序的付款成功、付款失败和账户激活具有可识别的类似声音。通过对比,虚拟协助应用程序使用借助虚拟协助应用程序唯一的声音样本生成的警示,使得虚拟协助成功、虚拟协助失败和虚拟协助准备好都具有不同于针对付款应用程序的警示的可识别类似声音的可识别的类似声音。在一些实施方案中,两个警示包括具有通过向与第一种类的应用程序中的第二应用程序相关联的相应音频样本应用第一变换生成的音频分量的警示(例如,通过改变音频样本的幅度、持续时间、音阶、或重复次数)。在一些实施方案中,该警示可用于第一种类的应用程序中的多个应用程序。在一些实施方案中,该警示可仅用于第一种类的应用程序中的第二应用程序。两个警示还任选地包括具有通过向与第一种类的应用程序中的第二应用程序相关联的相应音频样本应用第二变换生成的音频分量的不同警示,其中第一变换不同于第二变换。在一些实施方案中,该不同警示可用于第一种类的应用程序中的多个应用程序。在一些实施方案中,该不同警示可仅用于第一种类的应用程序中的第二应用程序。
根据一些实施方案,警示条件在哪个应用程序中触发提供用于生成对应输出的基础。表14示出了对应于用于单个应用程序种类(第一方应用程序)中的两个不同应用程序(电子邮件、付款)的警示的示例性触觉和音频输出。表的前三行示出对应于第一应用程序,例如电子邮件的警示。对于接收的电子邮件、发送的电子邮件和删除的电子邮件的电子邮件条件中的每一个,输出包括对应于第一应用程序种类(第一方应用程序)的第一触觉和包括对应于电子邮件应用程序的波形实例的音频输出。每个电子邮件应用程序条件具有电子邮件波形的波形变型:第一应用程序波形1、2、3。下文结合图31更详细讨论波形变型。通过提供与电子邮件应用程序相关联的音频输出,在与电子邮件应用程序相关联的输出的品牌化方面为用户提供一致性。
表的最后三行示出对应于第二应用程序,例如付款的警示。对于付款成功、付款失败、账户激活的付款条件中的每一个,输出包括对应于第一应用程序种类(第一方应用程序)的第一触觉和包括对应于付款应用程序的波形实例的音频输出。每个付款应用程序条件具有付款波形的波形变型:第二应用程序波形1、2、3。通过提供与付款应用程序相关联的音频输出,在与付款应用程序相关联的输出的品牌化方面为用户提供一致性。
表14:用于共享触觉的专用音频
应用程序种类 应用程序 条件 触觉输出 音频输出
第一方 电子邮件 接收到的电子邮件 第一触觉 第一应用程序波形1
第一方 电子邮件 发送的电子邮件 第一触觉 第一应用程序波形2
第一方 电子邮件 删除的电子邮件 第一触觉 第一应用程序波形3
第一方 付款 付款成功 第一触觉 第二应用程序波形1
第一方 付款 付款失败 第一触觉 第二应用程序波形2
第一方 付款 账户激活 第一触觉 第二应用程序波形3
根据一些实施方案,警示的第二子组不可用于第一种类的应用程序。例如,第一方应用程序不允许使用第三方应用程序警示声音,以及任选地反之亦然。根据一些实施方案,警示的第一和第二子组两者包括可用于第一种类的应用程序和第二种类的应用程序的触觉分量,使得第三方应用程序两者允许使用共享的触觉分量。
根据一些实施方案,不同警示包括具有可用于第二种类的应用程序和第一种类的应用程序的音频分量的两个或更多个警示的第三子组,例如,它们指定用于共享使用。例如,模拟物理反馈的警示,诸如触觉/音频点击或提供结合用户界面元素提供的模拟反弹(像橡皮筋)效果(诸如可滚动列表视图在到达显示器末端时弹回)的触觉可能可用,无论使用中的应用程序的种类。如果应用程序包括可滚动列表,则在该动作时输出可用于该应用程序内,无论应用程序种类如何。因此,尽管第三方应用程序具有唯一一组触觉警示,如上面结合表13所指出,但它们也可共享相同触觉反馈中的一些。
根据一些实施方案,经由一个或多个音频输出设备输出的第一音频分量由指定用于第一种类的应用程序(例如,第一方应用程序)中的第一应用程序(例如,付款应用程序)的音频波形构成。例如,音频分量任选地是唯一音频样本,用于将第一应用程序的警示与其他应用程序的警示区分开。根据一些实施方案,经由一个或多个音频输出设备输出的第一音频分量由指定用于第一种类的应用程序(例如,第一方应用程序)中的第二应用程序(例如,虚拟协助应用程序)的音频波形构成。例如,音频分量任选地是唯一音频样本,用于将第二应用程序的警示与其他应用程序的警示区分开。
根据一些实施方案,经由一个或多个音频输出设备输出的第二音频分量由指定在警示对应于第二种类的应用程序(例如,第一方应用程序)中的第三应用程序(例如,付款应用程序)时用于第二种类的应用程序中的应用程序的音频波形构成。例如,音频分量任选地是唯一音频样本,用于将第一应用程序的警示与其他应用程序的警示区分开。
根据一些实施方案,经由一个或多个音频输出设备输出的第一音频分量由指定在警示对应于第二种类的应用程序(例如,第一方应用程序)中的第二应用程序(例如,虚拟协助应用程序)时用于第二种类的应用程序中的应用程序的音频波形构成。例如,音频分量是唯一音频样本,用于将第一应用程序的警示与其他应用程序的警示区分开。
应当理解,对图30中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2500、2600和3200)描述的其他过程的细节同样以类似的方式适用于上文参考图30描述的方法3000。例如,参考方法3000上述的输入、警示条件、事件、应用程序、状态和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2500、2600和3200)在本文所述的输入、警示条件、事件、应用程序、状态和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
图31示出了根据一些实施方案的波形的各种实例。波形可为触觉或音频。如上所述,波形3105具有与其特征相关联的某些幅度3110、以及整体持续时间3115和波形特征之间的频率3120。波形3125为具有应用了不影响幅度3110但引起较长整体持续时间3130和波形特征之间较低频率3135的变换的波形3105。波形3140为具有应用了影响幅度314而且引起较短整体持续时间3150和波形特征之间较高频率3155的变换的波形3105。
与上述讨论的这些变换的波形相关联,波形3105指定用于某个应用程序种类或应用程序。根据一些实施方案,例如,付款应用程序与音频波形3105相关联。在该示例中,警示借助付款应用程序唯一的声音样本生成使得波形实例3125指示付款成功,波形实例3140指示付款失败以及波形实例3105指示付款应用程序的账户激活。因为每个波形实例3105、3125、3140基于波形3105的相同声音样本,所以所有这三实例都具有用户将与付款应用程序相关联的可识别的类似声音。
根据一些实施方案,警示条件在哪个情境中触发提供用于生成对应输出的基础。提供与情境相关联的触觉和/或音频输出允许针对输出品牌化的触觉和音频的一致性,并且因此产生更有效人机界面,从而减小用户执行操作所花时间量,因此减小能量使用并且提高电池供电设备的电池寿命。图32为根据一些实施方案的检测第一和第二情境下的第一条件以及生成包括触觉和音频输出的对应警示的方法3200的流程图。注意,在一些实施方案中,可执行图32中所示那些之外的不同步骤。
方法开始于在具有一个或多个触觉输出设备和一个或多个音频输出设备的电子设备100处检测3205设备处第一条件在第一情境中的出现。例如,条件为失败条件而失败事件的情境为发生在第一应用程序中的情境。根据一些实施方案,条件的出现包括接收通信(例如,来自外部源的消息)、检测到来自用户的输入(例如,触摸、语音或与反馈相关联的机械输入)、以及检测到满足触发准则(例如,闹钟到期,健身结束等)等等中的一个或多个。根据一些实施方案,计算设备100包括用于接收用户输入的触敏显示器。
响应于检测到第一条件在第一情境中的出现,设备100生成3210对应于第一条件的包括指示出现的条件的类型(例如,发生的失败事件)的第一触觉分量3212以及指示第一情境(例如,在特定应用程序中)中出现的第一条件的第一音频分量3214的第一警示。根据一些实施方案,经由计算设备100上的触敏显示器提供第一触觉输出。
设备100还检测3215第一条件在不同于第一情境的第二情境中的出现(例如,在不同于第一应用程序的第二应用程序中)。响应于检测到第一条件在第二情境中的出现,设备100生成3220对应于第一条件的包括指示发生的第一条件的第一触觉分量3212(例如,对应于第二应用程序情境中的失败的相同触觉分量)以及指示发生在不同于第一情境的第二情境中的第一条件的不同于第一音频分量的第二音频分量3222的第二警示。例如,发生在不同于第一应用程序的第二应用程序中的失败事件,或者失败事件包括用户针对失败的操作的性能提交另一请求的选项,以及因此输出的音频部分不同于第一情境中相同条件(失败)的音频部分。
根据一些实施方案,方法的第一警示的生成3210根据确定警示对应于在第一情境中发生的第一条件,并且第二警示的生成3220根据确定第一条件发生在第二情境。
通过保持针对条件(例如,失败)的一致触觉,触觉波形具有语义含义。类似地,与条件相关联的触觉含义独立于音频分量的语音含义。根据一些实施方案,例如,音频警示为触觉警示提供情境,因为针对音频的动态范围大于触觉。
根据一些实施方案,方法还包括检测3230在不同于第一和第二情境的第三情境中在设备处的第一条件(例如,失败)的出现。响应于检测到在第三情境中在设备处第一条件的出现,设备100生成3240对应于第三情境中的第一条件的包括指示发生的条件的类型的第一触觉分量3212(例如,指示发生失败事件的相同触觉分量)以及指示发生在第三情境中的第一条件的不同于第一音频分量和第二音频分量的第三音频分量3242的第三警示。根据一些实施方案,方法的第三警示的生成3240根据确定该警示对应于在第三情境中发生的第一条件。
根据一些实施方案,警示条件触发的情境提供用于生成对应输出的基础。表13示出了对应于用于两个不同条件(成功、失败)的、在不同情境中以及跨两个不同于应用程序种类的警示的示例性触觉和音频输出。表的前二行示出对应于第一条件(成功)的警示。对于成功的每个情境(付款应用程序、电子邮件应用程序),输出包括对应于该条件(成功)的第一触觉以及包括对应于成功的情境(付款、发送的消息)的波形实例的音频输出。
表的第三和第四行示出对应于第二条件(失败)的警示。对于失败的每个情境(付款应用程序、电子邮件应用程序),输出包括对应于该条件(失败)的第二触觉以及包括对应于成功的情境(付款、发送的消息)的波形实例的音频输出。
前四行还对应于第一应用程序种类,第一方应用程序。表的最后两行示出了对应于第二种类的应用程序,例如第三方应用程序的情境下成功和失败条件的警示。在该示例中,应用程序相同,但音频输出变化,因为提供的音频使用应用程序种类作为情境以及提供第二种类波形1、2以及针对该条件(成功失败)的对应触觉。通过提供与条件(成功、失败)一致相关联的触觉输出而不管情境如何,在针对与条件相关联的输出品牌化方面为用户提供一致性,以及音频警示为触觉警示提供情境,因为音频可用的动态范围比触觉的大。
表13:用于共享触觉的情境专用音频
根据一些实施方案,第一触觉分量指示用户请求的操作没有发生,第一音频分量指示第一应用程序中的操作没有发生(例如,使用第一方付款应用程序没有付款成功),而第二音频分量指示第二应用程序中的操作没有发生(例如,在第三方即时消息应用程序中没有发送消息)。因此,基于出现失败的应用程序,触觉分量共享而音频分量变化。
根据一些实施方案,第一触觉分量指示用户请求的操作成功发生,第一音频分量指示第一应用程序中的操作发生(例如,使用第一方付款应用程序付款成功),而第二音频分量指示第二应用程序中的操作发生。(例如,在第三方即时消息应用程序中成功发送消息)因此,基于成功发生的应用程序,触觉分量共享而音频分量变化。根据一些实施方案,第一音频分量基于指定用于第一应用程序的音频波形生成。在一些实施方案中,指定用于第一应用程序的音频波形还用于生成对应于第一应用程序的警示的其他音频分量,例如,结合图30上文更具体所述。第二音频分量基于指定用于不同于第一应用程序的第二应用程序的音频波形生成。在一些实施方案中,指定用于第二应用程序的音频波形还用于生成对应于第二应用程序的警示的其他音频分量,例如,结合图30上文更具体所述。
根据一些实施方案,第一音频分量基于指定用于第一种类的应用程序中的应用程序的音频波形生成。在一些实施方案中,指定用于第一方应用程序的音频波形还用于生成对应于第一方应用程序的警示的其他音频分量,例如,结合图30上文更具体所述。第二音频分量基于指定用于不同于第一种类的应用程序的第二种类的应用程序中的应用程序的音频波形生成。在一些实施方案中,指定用于第三方应用程序的音频波形还用于生成对应于第三方应用程序的警示的其他音频分量,例如,结合图30上文更具体所述。
根据一些实施方案,设备配置为响应于多个不同条件和多个不同情境提供包括触觉分量和音频分量的警示。例如,第一条件由第一触觉分量表示,而不同于第一条件的第二条件由不同于第一触觉分量的第二触觉分量表示。在一些实施方案中,第一触觉分量和第二触觉分量不同,因为它们具有不同持续时间、幅度或波形。在一些实施方案中,第一音频分量和第二音频分量不同,因为它们包括不同数量的顺序触觉输出。根据一些实施方案,第一情境由第一音频分量表示,而不同于第一情境的第二情境由不同于第一音频分量的第二音频分量表示。在一些实施方案中,第一音频分量和第二音频分量不同,因为它们基于不同音频样本。在一些实施方案中,第一音频分量和第二音频分量不同,因为它们包括不同数量的顺序音调。
根据一些实施方案,第一条件指示请求操作的成功而第一触觉分量包括与第一音频分量中的特征对准的一系列触觉输出。例如,对准可意味着触觉和音频输出之间的特征同步、彼此模拟、和/或彼此镜像,例如,生成对应于音频分量中的顺序音调的触觉分量中的独立触觉输出。例如,根据一些实施方案,恰好在音频分量中的顺序音调之前或期间提供触觉输出。根据一些实施方案,第一条件指示请求操作的失败而第一触觉分量未与音频分量中的特征对准,例如,生成未对应于音频分量中的顺序音调的触觉分量中的触觉输出。例如,提供延伸跨过音频分量中的多个顺序音调的连续触觉输出。
根据一些实施方案,第一条件指示请求操作的成功而第一触觉分量包括与第二音频分量中的特征对准的一系列触觉输出,例如,生成对应于音频分量中的顺序音调的触觉分量中的独立触觉输出。例如,根据一些实施方案,恰好在音频分量中的顺序音调之前或期间提供触觉输出。根据一些实施方案,第一条件指示请求操作的失败,而第一触觉分量未与第二音频分量中的特征对准,例如,生成未对应于音频分量中的顺序音调的触觉分量中的触觉输出。例如,根据一些实施方案,提供延伸跨过音频分量中的多个顺序音调的连续触觉输出。
如结合图6所述,相应触觉输出可伴随对应音频输出,其中相应音频输出的至少一部分与相应触觉输出的至少一部分同时发生,或者相应音频输出与相应触觉输出在时间上靠近地发生,使得相应触觉输出和相应音频输出在感知上是并发或同时的。触觉和音频波形无需完美对准,设备可考虑以下事实,对于某些种类的触觉和音频输出,触觉和音频输出即使在时间上存在稍微偏移也被用户察觉为并发或同步(例如,因为音频输出比触觉输出更快地处理,从而在提供音频输出之前提供触觉输出在一些情况下将使得用户察觉到音频和触觉输出并发或同步发生)。
应当理解,对图32中已经进行描述的操作的具体次序仅仅为示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2500、2600和3000)描述的其他过程的细节同样以类似的方式适用于上文参考图32描述的方法3000。例如,参考方法3000上述的输入、警示条件、事件、应用程序、状态和触觉输出任选地具有参考本文所述的其他方法(例如,方法700、900、1000、1100、1200、1300、2500、2600和3000)在本文所述的输入、警示条件、事件、应用程序、状态和触觉输出的特征中的一个或多个。为了简明起见,这里不再赘述这些细节。
图33a示出了根据一些实施方案的在时间上分别以及同时出现的各种触觉和音频波形。触觉波形3305和音频波形3310例如可一起用作警示的输出。如结合输出3315所示,触觉波形3305和音频波形3310未对准并且将被用户察觉为触觉-音频-触觉-音频。然而,触觉波形3305和音频波形3320在如所示一起使用作为组合输出3325时对准,使得音频输出被用户察觉为与触觉输出同时,尽管对准并不完美。
图33b示出了根据一些实施方案的在时间上重叠的各种触觉和音频波形。根据一些实施方案,触觉波形3330例如为针对失败事件的触觉波形。根据一些实施方案,失败触觉3330为持续的嗡嗡声。当失败触觉3330结合不同音频输出使用时,发出不同类型的失败和/或不同情境中的失败的信号通知,如结合图32所述。音频波形3335代表第三方音频波形,在该示例中,听起来像叮叮当的失败音频样本。如结合输出3340所示,触觉波形3330和音频波形3335对准。音频波形3345代表不同的第三方音频波形,在该示例中,听起来像当当当的重试音频样本。这是失败音频波形3335的类似音频样本作为第三方音频波形的变型,但具有三个类似特征而非一个特征和不同的第三特征的两个特征。当与失败触觉3330结合时,产生组合波形3350。组合波形3350共享失败触觉3330,但在情境中不同并且因此从音频波形3335输出的音频不同。
图33c示出了根据一些实施方案的在时间上重叠的各种触觉和音频波形。根据一些实施方案,触觉波形3330例如为针对如图33b的失败事件的相同触觉波形。失败触觉3330与两个不同第一方音频波形(3355、3365)结合使用来产生两个不同但涉及第一方警示。音频波形3355代表听起来像嘀嗒、嘀嗒的付款失败音频样本的第一方音频波形。组合输出3360示出对准的触觉波形3330和音频波形3335。音频波形3365代表不同的第一方音频波形,在该示例中,听起来像嘀嗒、嘀嗒、嘀嗒的密码输入失败样本。当与失败触觉3330结合时,产生组合波形3370。组合波形3370共享失败触觉3330,但在情境中不同并且因此从音频波形3355输出的音频不同。
以上参考图30和图32所述的操作任选地由图1A至图1B或图34至图35中所描绘的部件来实施。图34示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图34中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图34中所示,设备100包括被配置为显示应用程序的显示单元3401;被配置为接收用户接触的触敏表面单元3403;以及与显示单元3401和触敏表面单元3403耦接的处理单元3405。在一些实施方案中,处理单元3405包括检测单元3410和警示生成单元3415。
以下段落[0594]-[0602]描述了可由图34所示的设备100单独或以任何组合形式实施的不同实施方案。
处理单元3405配置为检测在具有一个或多个触觉输出设备的电子设备处第一条件在设备处的出现(例如,借助检测单元3410),以及响应于检测到该出现,任选地根据确定警示对应于第一种类的应用程序中的相应应用程序,生成对应于第一种类的应用程序中的相应应用程序的第一警示(例如,借助警示生成单元3415)。处理单元3405还配置为检测第二条件在设备处的出现(例如,借助检测单元3410)以及作为响应,生成对应于不同于第一种类的应用程序的第二种类的应用程序中的相应应用程序的第二警示,第二警示包括经由一个或多个触觉输出设备输出的第二触觉分量和经由一个或多个音频输出设备输出的第二音频分量,该第二音频分量由指定用于第二种类的应用程序中的应用程序的音频波形组成(例如,借助警示生成单元3415)。
根据一些实施方案,第一触觉分量和第二触觉分量由可用于第一种类的应用程序和第二种类的应用程序两者的一个或多个触觉波形构成。
根据一些实施方案,设备100配置为生成多个不同警示(例如,借助警示生成单元3415)。多个不同警示包括具有可用于第一种类的应用程序但不可用于第二种类的应用程序的音频分量的两个或更多个警示的第一子组以及多个不同警示包括具有可用于第二种类的应用程序并且由指定用于第二种类的应用程序的音频波形构成的音频分量的两个或更多个警示的第二子组。
根据一些实施方案,警示的第二子组包括通过向与第二种类的应用程序相关联的相应音频样本应用不同变换生成的两个警示(例如,借助警示生成单元3415)。根据一些实施方案,警示的第一子组包括通过向与第一种类的应用程序中的第一应用程序相关联的相应音频样本应用不同变换生成的两个警示(例如,借助警示生成单元3415)。
根据一些实施方案,警示的第一子组包括通过向与第一种类的应用程序中的第二应用程序相关联的相应音频样本应用不同变换生成的两个警示(例如,借助警示生成单元3415),其中与第二应用程序相关联的相应音频样本不同于与第一应用程序相关联的相应音频样本。根据一些实施方案,警示的第二子组不可用于第一种类的应用程序。
根据一些实施方案,两个或更多个警示的第一子组(例如由警示生成单元3415生成)包括可用于第一种类的应用程序和第二种类的应用程序的触觉分量以及两个或更多个警示的第二子组包括可用于第二种类的应用程序和第一种类的应用程序的触觉分量。
根据一些实施方案,多个不同警示(例如由警示生成单元3415生成)包括具有可用于第二种类的应用程序和第一种类的应用程序的音频分量的两个或更多个警示的第三子组。
根据一些实施方案,经由一个或多个音频输出设备输出的第一音频分量(例如,借助警示生成单元3415)由指定用于第一种类的应用程序中的第一应用程序的音频波形构成以及经由一个或多个音频输出设备输出的第一音频分量由指定用于第一种类的应用程序中的第二应用程序的音频波形构成。
根据一些实施方案,经由一个或多个音频输出设备输出的第二音频分量(例如,借助警示生成单元3415)由当警示对应于第二种类的应用程序中的第三应用程序时指定用于第二种类的应用程序中的应用程序的音频波形构成以及经由一个或多个音频输出设备输出的第一音频分量由当警示对应于第二种类的应用程序中的第二应用程序时指定用于第二种类的应用程序中的应用程序的音频波形构成。
图35示出了根据各种所述实施方案的原理进行配置的设备100的示例性功能框图。本领域的技术人员应当理解,图35中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图35中所示,设备100包括被配置为显示应用程序的显示单元3501;被配置为接收用户接触的触敏表面单元3503;以及与显示单元3501和触敏表面单元3503耦接的处理单元3505。在一些实施方案中,处理单元3505包括检测单元3510和警示生成单元3515。
以下段落[0606]-[0615]描述了可由图35所示的设备100单独或以任何组合形式实施的不同实施方案。
处理单元3505配置为检测在具有一个或多个触觉输出设备的电子设备处第一条件在第一情境中的出现(例如,借助检测单元3510),以及响应于检测到该出现,生成对应于第一条件的包括指示出现的条件的类型的第一触觉分量和指示在第一情境中出现的第一条件的第一音频分量的第一警示(例如,借助警示生成单元3515)。
处理单元3505还配置为在设备处检测在不同于第一情境的第二情境中第一条件的出现(例如,借助检测单元3510),以及响应于检测到该出现,生成对应于第一条件的包括指示出现的第一条件的第一触觉分量和指示在不同于第一情境的第二情境中出现的第一条件的不同于第一音频分量的第二音频分量的第二警示(例如,借助警示生成单元3515)。
处理单元3505还配置为在设备处检测在不同于第一情境和第二情境的第三情境中第一条件的出现(例如,借助检测单元3510),以及响应于检测到在设备处第三情境中第一条件的出现,生成对应于第三情境中的第一条件的包括指示出现的条件的类型第一触觉分量和指示在第二第三情境中出现的第一条件的不同于第一音频分量和第二音频分量的第三音频分量的第三警示(例如,借助警示生成单元3515)。
根据一些实施方案,第一触觉分量指示用户请求的操作没有发生,第一音频分量指示第一应用程序中的操作没有发生,而第二音频分量指示第二应用程序中的操作没有发生。
根据一些实施方案,第一触觉分量指示用户请求的操作成功发生,第一音频分量指示第一应用程序中的操作发生,而第二音频分量指示第二应用程序中的操作发生。
根据一些实施方案,基于指定用于第一应用程序的音频波形生成第一音频分量以及基于指定用于不同于第一应用程序的第二应用程序的音频波形生成第二音频分量。
根据一些实施方案,基于指定用于第一种类的应用程序中的应用程序的音频波形生成第一音频分量以及基于指定用于不同于第一种类的应用程序的第二种类的应用程序中的应用程序的音频波形生成第二音频分量。
根据一些实施方案,设备配置为响应于多个不同条件和多个不同情境提供包括触觉分量和音频分量的警示(例如,借助警示生成单元3515),第二条件由第一触觉分量表示,不同于第一条件的第二条件由不同于第一触觉分量的第二触觉分量表示,第一情境由第一音频分量表示,并且不同于第一情境的第二情境由不同于第一音频分量的第二音频分量表示。
根据一些实施方案,第一条件指示请求操作的成功以及第一触觉分量包括与第一音频分量中的特征对准的一系列触觉输出而第一条件指示请求操作的失败以及第一触觉分量未与第一音频分量中的特征对准(例如,由警示生成单元3515生成)。
根据一些实施方案,第一条件指示请求操作的成功以及第一触觉分量包括与第二音频分量中的特征对准的一系列触觉输出而第一条件指示请求操作的失败以及第一触觉分量未与第二音频分量中的特征对准。
出于解释的目的,前面的描述是通过参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。
本文所述的步骤、操作或过程中的任一个可与一个或多个硬件或软件模块、或单独或与其他设备结合执行或实现。在一个实施方案中,软件模块由计算机程序产品实现,该计算机程序产品包括包含计算机程序代码的计算机可读介质,计算机程序代码可由计算机处理器执行用于执行所述步骤、操作或过程中的任一个或所有。
本发明的实施方案还可涉及用于执行本文操作的装置。该装置可专门构造用于所需的目的,和/或可包括由存储在计算机中的计算机程序选择性地激活或重新配置的通用计算设备。此计算机程序可存储在有形计算机可读存储介质或适合用于存储电子指令的任何类型的介质,并且耦接到计算机系统总线。而且,在本说明书中提及的任何计算系统可包括单个处理器或者可为采用设计用于提高计算能力的多个处理器的架构。
本发明的实施方案还可涉及以载波实施的计算机数据信号,其中计算机数据信号包括计算机程序产品或本文所述的其他数据组合的任何实施方案。计算机数据信号为在有形介质或载波中呈现以及在有形的并且根据任何适合传输方法传输的载波中调制或以另外方式编码的产品。
最后,出于可读性和指导性目的,在原则上选择了本说明书中使用的语言,并且可以不这样选择以描绘或界定本发明的主题。因此,本发明的范围并非意在由此详细说明来限定,而是由基于此详细说明在申请中颁布的任何权利要求书来限定。因此,本发明的实施方案的公开意在对本发明的范围为示例性的,而非限制性的,本发明的范围由所附权利要求书来设定。

Claims (196)

1.一种在计算设备上执行的处理器实现的方法,所述方法包括:
检测与在所述计算设备上执行的应用程序相关联的警示条件;以及
响应于检测到所述警示条件:
确定在与所述警示条件相关联的时间与所述应用程序相关联的状态;
根据确定所述应用程序在与所述警示条件相关联的时间处于活动状态,提供代表所述警示条件的出现的第一触觉输出,所述第一触觉输出具有第一组输出特征;以及
根据确定所述应用程序在与所述警示条件相关联的时间处于不活动状态,提供代表所述警示条件的出现的第二触觉输出,所述第二触觉输出具有第二组输出特征,其中所述第二触觉输出不同于所述第一触觉输出。
2.根据权利要求1所述的方法,其中确定在与所述警示条件相关联的时间与所述应用程序相关联的状态包括确定在与所述警示条件相关联的时间在所述设备的触摸屏上是否显示所述应用程序的用户界面。
3.根据权利要求1所述的方法,其中确定在所述警示条件的时间与所述应用程序相关联的状态包括确定是否存在对所述应用程序警示条件的用户输入,所述用户交互不同于所述警示条件。
4.根据权利要求3所述的方法,还包括:
基于在所述警示条件的时间检测到的用户交互确定所述应用程序处于活动状态;
确定在所述警示条件的时间与所述用户交互相关联的用户参与的水平;以及
基于所确定的参与水平确定所述第一触觉输出的第一组输出特征中的一个或多个。
5.根据权利要求1或2所述的方法,其中:
确定在与所述警示条件相关联的时间与所述应用程序相关联的状态包括确定在与所述警示条件相关联的时间所述应用程序是否在所述触摸屏计算设备上执行,其中:
确定所述应用程序处于活动状态包括确定在与所述警示条件相关联的时间所述应用程序在所述触摸屏计算设备上的前台执行;并且
确定所述应用程序处于不活动状态包括确定在与所述警示条件相关联的时间所述应用程序未在所述触摸屏计算设备上执行或者在所述触摸屏计算设备上的后台执行。
6.根据权利要求1-5中任一项所述的方法,其中:
对应于所述应用程序的相应用户界面窗口与一个或多个其他用户界面窗口同时显示在所述设备上的多应用程序窗口用户界面上;并且
确定在与所述警示条件相关联的时间与所述应用程序相关联的状态包括在与所述警示条件相关联的时间对应于所述应用程序的相应用户界面窗口是否显示在所述多应用程序窗口用户界面的前台中。
7.根据权利要求1-5中任一项所述的方法,其中:
在与所述警示条件相关联的时间,一个或多个其他用户界面窗口同时显示在所述设备上的多应用程序窗口用户界面上;并且
确定在与所述警示条件相关联的时间与所述应用程序相关联的状态包括在与所述警示条件相关联的时间对应于所述应用程序的相应用户界面窗口是否显示在所述多应用程序窗口用户界面中。
8.根据权利要求1-7中任一项所述的方法,其中所述警示条件对应于由所述应用程序自动触发的事件、由所述应用程序从所述设备外部资源接收到的自动发起事件通知、或由所述应用程序从操作所述设备的用户之外的人类用户接收到的手动发起事件通知。
9.根据权利要求1-8中任一项所述的方法,其中:
所述第一触觉输出伴随第一音频输出;
所述第二触觉输出伴随第二音频输出;
所述第一触觉输出与所述第二触觉输出相同;并且
所述第一音频输出不同于所述第二音频输出。
10.根据权利要求1-8中任一项所述的方法,其中:
所述第一触觉输出伴随音频输出;
所述第二触觉输出伴随所述音频输出;并且
所述第一触觉输出不同于所述第二触觉输出。
11.根据权利要求1-8中任一项所述的方法,其中:
所述第二触觉输出伴随音频输出,所述第二触觉输出的波形基于伴随的音频输出的波形镜像生成并且与所述伴随的音频输出的波形同步。
12.根据权利要求1-8中任一项所述的方法,其中:
所述第一触觉输出未伴随音频输出;并且
所述第二触觉输出伴随音频输出。
13.根据权利要求12所述的方法,其中所述第一触觉输出类似于所述第二触觉输出。
14.根据权利要求1-8、12或13中任一项所述的方法,其中所述第二触觉输出具有比所述第一触觉输出更大的强度。
15.根据权利要求1-8、12或13中任一项所述的方法,其中所述第一组特征包括幅度、持续时间、规律性、重复频率、或对所述第一触觉输出的触觉特征的选择中的一个或多个。
16.根据权利要求1-8、12或13中任一项所述的方法,其中所述第二触觉输出不同于所述第一触觉输出并且具有比所述第一触觉输出更大的强烈强度。
17.根据权利要求1所述的方法,其中
确定在与所述警示条件相关联的时间与所述应用程序相关联的状态包括确定在与所述警示条件相关联的时间所述触摸屏计算设备的状态,其中:
确定所述应用程序处于活动状态包括确定在与所述警示条件相关联的时间所述触摸屏计算设备是活动的;并且
确定所述应用程序处于不活动状态包括确定在与所述警示条件相关联的时间所述触摸屏计算设备是不活动的。
18.根据权利要求1或17所述的方法,其中所述第一组特征和所述第二组特征对应于所述触摸屏计算设备的设备类型。
19.根据权利要求1-8、12、13、17或18中任一项所述的方法,还包括:
在第一时间点,在所述应用程序处于活动状态时,检测与所述应用程序相关联的第一警示条件;
响应于在所述第一应用程序处于活动状态时检测到所述第一警示条件,提供代表所述第一警示条件的第一输出;
在第二时间点,在所述第一应用程序处于不活动状态时,检测第二警示条件;
响应于在所述应用程序处于不活动状态时检测到所述第二警示条件,提供代表所述第二警示条件的所述第二触觉输出,所述第二触觉输出不同于所述第一触觉输出。
20.根据权利要求1-8、12、13、17、18或19中任一项所述的方法,其中:
所述设备具有触敏显示器;并且
所述第一触觉输出和所述第二触觉输出经由所述计算设备上的触敏显示器提供。
21.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求1-21中的一项所述的步骤。
22.一种,包括:
显示器;
触敏表面;和
用于执行权利要求1-21中的任一项的装置。
23.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求1-21中的任一项的装置。
24.一种在计算设备上执行的处理器实现的方法,所述方法包括:
检测与应用程序相关联的警示条件的出现;以及
响应于检测到所述警示条件的出现:
确定所述警示条件是否由手动发起事件触发;
根据确定所述警示条件由手动发起事件触发,提供对应于手动发起事件通知的第一触觉输出;以及
根据确定所述警示条件由自动发起事件触发,提供对应于自动发起事件通知的第二触觉输出,其中所述第二触觉输出不同于所述第一触觉输出。
25.根据权利要求24所述的方法,其中确定所述警示条件由手动发起事件触发包括确定所述警示条件是否对应于人类用户发起的事件。
26.根据权利要求24或25所述的方法,其中确定所述警示条件特征指示所述警示条件由手动发起事件触发包括确定所述警示条件是否对应于所述计算设备的用户之外的人类用户发起的事件。
27.根据权利要求24或25所述的方法,其中确定所述警示条件由手动发起事件触发包括确定所述警示条件是否对应于从人类用户接收到的输入、识别所述计算设备的用户的输入以及包括来自人类用户来针对所述输入警示所述计算设备的用户的指示的输入。
28.根据权利要求24所述的方法,其中确定所述警示条件由自动发起事件触发包括确定所述警示条件由所述应用程序自动触发或者为由所述应用程序从所述设备外部资源接收到的自动发起事件通知。
29.根据权利要求24或28所述的方法,其中确定所述警示条件由自动发起事件触发包括确定所述警示条件出现在预先确定的时间或者对满足预先确定的触发条件的报告。
30.根据权利要求24或29所述的方法,其中根据确定所述警示条件由自动发起事件触发:
确定所述自动发起事件是否对应于在所述设备外部发生的自动发起事件;
根据确定所述自动发起事件对应于在所述设备外部发生的事件,提供所述第二触觉输出对应于外部发生的自动发起事件的通知的第一变型;以及
根据确定所述自动发起事件对应于在所述设备内发起的事件,提供所述第二触觉输出对应于内部生成的自动发起事件的通知的第二变型。
31.根据权利要求24-27中任一项所述的方法,其中所述确定还包括根据确定所述警示条件由手动发起事件触发:
确定与所述手动发起事件相关联的紧急性的测量值;以及
基于所述紧急性的测量值调节所述第一触觉输出的强度。
32.根据权利要求24-27中任一项所述的方法,还包括根据确定所述警示条件由手动发起事件触发:
确定与所述手动发起事件相关联的一个或多个情境属性;以及
基于所述一个或多个情境属性调节所述第一触觉输出的强度。
33.根据权利要求24、28-30中任一项所述的方法,还包括根据确定所述警示条件由自动发起事件触发:
分析与所述警示条件相关联的特征以确定与所述自动发起事件相关联的一个或多个情境属性;以及
基于所述一个或多个情境属性调节所述第二输出的强度。
34.根据权利要求24、28-30中任一项所述的方法,还包括根据确定所述警示条件由自动发起事件触发:
确定与所述自动发起事件相关联的紧急性的时间变化测量值;以及
在指定时间窗上调节所述第二触觉输出的强度以指示所述紧急性的时间变化测量值。
35.根据权利要求24-34中任一项所述的方法,其中:
所述第一触觉输出伴随第一音频输出;
所述第二触觉输出伴随第二音频输出;
所述第一触觉输出类似于所述第二触觉输出;并且
所述第一音频输出不同于所述第二音频输出。
36.根据权利要求24-34中任一项所述的方法,其中:
所述第一触觉输出伴随第一音频输出;
所述第二触觉输出伴随第二音频输出;
所述第一音频输出类似于所述第二音频输出;并且
所述第一触觉输出不同于所述第二触觉输出。
37.根据权利要求24-34中任一项所述的方法,其中:
所述第一触觉输出伴随第一音频输出;并且
所述第二触觉输出未伴随音频输出。
38.根据权利要求37所述的方法,其中所述第一触觉输出类似于所述第二触觉输出。
39.根据权利要求24-34中任一项所述的方法,其中对应于所述手动发起事件通知的所述第一触觉输出比对应于所述自动发起事件通知的所述第二触觉输出更强烈。
40.根据权利要求24-39中任一项所述的方法,其中:
所述第一触觉输出通过第一组特征来表征,所述第一组特征包括所述第一触觉输出的幅度、所述第一触觉输出的持续时间、与所述第一触觉输出相关联的规律性、在所述第一触觉输出中触觉特征的重复频率以及对组成所述第一触觉输出的触觉特征的选择中的一个或多个;并且
所述第二触觉输出通过第二组特征来表征,所述第二组特征包括所述第二触觉输出的幅度、所述第二触觉输出的持续时间、与所述第二触觉输出相关联的规律性、在所述第二触觉输出中触觉特征的重复频率以及对组成所述第二触觉输出的触觉特征的选择中的一个或多个。
41.根据权利要求24所述的方法,还包括:
检测对应于来自第一人类发送者的传入电子邮件消息的第一警示条件;
响应于确定所述传入电子邮件消息对应于手动发起事件,提供所述第一触觉输出;
检测对应于来自第二人类发送者的传入文本消息的第二警示条件;以及
响应于确定所述传入文本消息对应于手动发起事件,提供所述第一触觉输出。
42.根据权利要求24-41中任一项所述的方法,其中:
所述设备具有触敏显示器;并且
所述第一触觉输出和所述第二触觉输出经由所述计算设备上的触敏显示器提供。
43.一种在计算设备上执行的处理器实现的方法,所述方法包括:
检测与应用程序相关联的警示条件的出现;以及
响应于检测到所述警示条件的出现:
确定所述警示条件是否对应于来自与所述用户相关联的联系人列表中的发送者的个人通信;
根据确定所述警示条件对应于来自与所述用户相关联的联系人列表中的发送者的个人通信,提供对应于个人警示通知的第一触觉输出;以及
根据确定所述警示条件不对应于来自与所述用户相关联的联系人列表中的发送者的个人通信,提供对应于自动警示通知的第二触觉输出,其中所述第一触觉输出的幅度比所述第二触觉输出大。
44.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求24-43中的一项所述的步骤。
45.一种,包括:
显示器;
触敏表面;和
用于执行权利要求24-43中的任一项的装置。
46.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求24-43中的任一项的装置。
47.一种在计算设备上执行的处理器实现的方法,所述方法包括:
检测在所述计算设备上与接收到对应用程序的用户输入相关联的第一警示条件;以及
响应于检测到所述第一警示条件,提供具有第一强度并且对应于对所述应用程序的用户输入的第一触觉输出;
在提供所述第一触觉输出之后,检测与在所述应用程序中接收预先确定的系统事件相关联的第二警示条件;以及
响应于检测到所述第二警示条件,提供具有第二强度并且对应于所述预先确定的系统事件的第二触觉输出,其中所述第二强度大于所述第一强度。
48.根据权利要求47所述的方法,其中直接响应于所述用户输入以及作为所述用户输入的结果反馈提供所述第一触觉输出。
49.根据权利要求47或48所述的方法,其中所述第二警示条件对应于由所述应用程序自动触发的事件、由所述应用程序接收到的自动发起事件通知、或由所述应用程序接收到的手动发起事件通知。
50.根据权利要求47-49中任一项所述的方法,还包括:
确定是否存在基于输入的调节条件;以及
响应于确定存在基于输入的调节条件,在提供所述第一触觉输出之前,修改所述第一触觉输出。
51.根据权利要求47-49中任一项所述的方法,还包括:
检测相应警示条件;
确定所述相应警示条件源自在所述计算设备上接收到的相应用户输入;
识别与所检测的用户输入相关联的用户参与的测量值;以及
基于所述用户参与的测量值调节所述第一触觉输出的所述第一信号强度。
52.根据权利要求47-49中任一项所述的方法,还包括:
检测相应警示条件;
确定所述相应警示条件源自在所述设备上接收到触觉用户输入;
识别在所述设备上接收所述触觉用户输入的位置;以及
通过在所述设备上接收所述触觉用户输入的位置的指定半径阈值内提供大于所述第一触觉输出的触觉能量的指定比例,调节所述第一触觉输出的空间触觉能量分布。
53.根据权利要求47-49中任一项所述的方法,还包括:
检测相应警示条件;
确定所述相应警示条件源自在所述设备上接收到触觉用户输入;以及
通过减小所述第一触觉输出的触觉能量的幅度使得在所述设备上接收所述触觉用户输入的位置是可察觉的,调节所述第一触觉输出的空间触觉能量分布。
54.根据权利要求53所述的方法,其中:
在所述设备上接收所述触觉用户输入的位置随时间变化;并且
所述空间触觉能量相对于接收所述触觉用户输入的时间变化位置随时间变化。
55.根据权利要求47-49中任一项所述的方法,还包括:
检测相应警示条件;
确定所述相应警示条件源自接收到触觉用户输入;
识别所述触觉用户输入的时间变化形态学属性;以及
随时间修改所述第一触觉输出的形态学特征以模拟所述触觉用户输入的时间变化形态学属性。
56.根据权利要求55所述的方法,其中:
所述时间变化形态学属性包括在所述触觉用户输入与所述计算设备的触敏表面之间的时间相关的接触压力分布;并且
所述修改包括随时间调节所述第一触觉输出的能量分布以镜像所述触觉用户输入与所述计算设备的触敏表面之间的所述时间相关的接触压力分布。
57.根据权利要求47-49中任一项所述的方法,还包括:
检测相应警示条件;
确定所述相应警示条件源自持续的用户输入;
响应于所述确定,在所述持续的用户输入的发起时间发起所述第一触觉输出;
检测所述持续的用户输入的终止;以及
在所述持续的用户输入的终止时间终止所述第一触觉输出。
58.根据权利要求47-57中任一项所述的方法,还包括:
确定是否存在基于环境条件的调节条件;以及
响应于确定存在基于环境条件的调节条件,在提供所述第二触觉输出之前,修改所述第二触觉输出。
59.根据权利要求47、49或50中任一项所述的方法,还包括:
检测与相应应用程序相关联的相应警示条件;
确定所述相应警示条件并非源自接收到用户输入;以及
响应于确定所述相应警示条件并非源自接收到用户输入:
确定是否存在针对所述设备的一个或多个环境条件在所述相应警示条件的出现时作为对触觉输出的潜在干扰;
根据确定不存在针对所述设备的干扰环境条件,基于所述用户的接收状态提供相应第二触觉输出,以及
根据确定存在针对所述设备的一个或多个环境条件作为对触觉输出的潜在干扰,延迟将所述相应第二输出提供给所述用户。
60.根据权利要求47、49或50中任一项所述的方法,还包括:
检测与相应应用程序相关联的相应警示条件;
确定所述相应警示条件并非源自接收到用户输入;以及
响应于确定所述相应警示条件并非源自接收到用户输入:
确定是否存在针对所述设备的一个或多个环境条件在所述相应警示条件的出现时作为对触觉输出的潜在干扰,
根据确定不存在针对设备的干扰环境条件,将所述第二触觉输出的第一变型提供给所述用户,所述第二触觉输出的所述第一变型具有第一组输出特征,以及
根据确定存在针对所述设备的一个或多个环境条件作为对触觉输出的潜在干扰,将所述第二触觉输出的第二变型提供给所述用户,所述第二触觉输出的所述第二变型具有第二组输出特征,所述第二组特征不同于所述第一组特征,所述第二触觉输出的所述第二变型具有比所述第二触觉输出的所述第一变型更大的强度。
61.根据权利要求47、49或50中任一项所述的方法,还包括:
检测与相应应用程序相关联的相应警示条件;
确定所述相应警示条件并非源自接收到用户输入;以及
响应于确定所述相应警示条件并非源自接收到用户输入:
提供启动触觉输出作为对所述第二触觉输出的前导,所述启动触觉输出将操作所述设备的用户的参与水平增大到所述第二触觉输出,其中所述启动触觉输出的至少一部分比所述第二触觉输出更明显;以及
在提供所述启动触觉输出的指定时间间隔内以及之后提供所述第二触觉输出。
62.根据权利要求61所述的方法,其中所述启动触觉输出包括具有通过所述触觉分量随时间逐渐增大的强度来表征的时间变化波形形态的启动触觉分量。
63.根据权利要求61所述的方法,其中所述启动触觉输出包括具有通过加强的触觉特征随后所述触觉分量逐渐减小的强度来表征的时间变化波形形态的启动触觉分量。
64.根据权利要求61所述的方法,其中:
所述第二触觉输出之前是所述启动触觉输出;并且
响应于源自接收到用户输入的对应警示条件,直接提供所述第一触觉输出,而不存在对应的先前的启动触觉输出。
65.根据权利要求61所述的方法,其中基于与所述警示条件相关联的紧急性或情境选择所述启动触觉输出的特征。
66.根据权利要求47所述的方法,还包括:
检测对应于在与第一应用程序相关联的应用程序用户界面上显示的用户界面元素的用户选择的第一警示条件;
响应于所述第一警示条件,提供代表对用户界面元素的用户选择的相应第一触觉输出,所述相应第一触觉输出包括具有第一强度和第一持续时间的第一触觉特征的第一触觉分量;
在提供所述相应第一触觉输出之后,检测对应于所述第一应用程序接收到的警示通知的第二警示条件;以及
响应于所述第二警示条件,提供代表接收到所述警示通知的相应第二触觉输出,所述相应第二触觉输出包括具有第二强度和第二持续时间的第二触觉特征的第二触觉分量,基于所述第二触觉特征比所述第一触觉特征更明显,所述第二强度大于所述第一强度,或者所述第二持续时间长于所述第一持续时间,所述相应第二触觉输出不同于所述相应第一输出并且比所述相应第一输出更明显。
67.根据权利要求47所述的方法,还包括:
检测与第一应用程序相关联的第一警示条件,所述第一警示条件源自相应用户输入;
提供代表所述第一警示条件的相应第一触觉输出;
在提供所述相应第一触觉输出之后,检测与所述第一应用程序相关联的第二警示条件,所述第二警示条件并非源自接收到用户输入;以及
提供代表所述第二警示条件的相应第二触觉输出,所述相应第二触觉输出不同于所述相应第一输出并且具有比所述相应第一输出更大的强度。
68.根据权利要求47-49、50-53或55 1中任一项所述的方法,其中:
所述第一触觉输出具有第一组特征,所述第一组特征包括所述第一触觉输出的幅度、所述第一触觉输出的持续时间、与所述第一触觉输出相关联的规律性、在所述第一触觉输出中触觉特征的重复频率、对组成所述第一触觉输出的触觉特征的选择中的一个或多个;并且
所述第二触觉输出具有第二组特征,所述第二组特征包括所述第二触觉输出的幅度、与所述第二触觉输出相关联的触觉分量的持续时间、与所述第二触觉输出相关联的规律性、在所述第二触觉输出中触觉特征的重复频率、对组成所述第二触觉输出的触觉特征的选择中的一个或多个。
69.根据权利要求47-68中任一项所述的方法,其中:
所述第一触觉输出伴随第一音频输出;
所述第二触觉输出伴随第二音频输出;
所述第一触觉输出类似于所述第二触觉输出;并且
所述第一音频输出不同于所述第二音频输出。
70.根据权利要求47-68中任一项所述的方法,其中:
所述第一触觉输出伴随第一音频输出;
所述第二触觉输出伴随第二音频输出;
所述第一音频输出类似于所述第二音频输出;并且
所述第一触觉输出不同于所述第二触觉输出。
71.根据权利要求70所述的方法,其中与所述设备上音量设置相反进一步调整所述第一触觉输出的所述第一强度和所述第二触觉输出的所述第二强度。
72.根据权利要求47-68中任一项所述的方法,其中:
所述第二触觉输出伴随音频输出;并且
所述第一触觉输出未伴随音频输出。
73.根据权利要求47-72中任一项所述的方法,其中:
所述计算设备包括用于接收所述用户输入的触敏显示器;并且
所述第一触觉输出和所述第二触觉输出经由所述计算设备上的触敏显示器提供。
74.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求47-73中的一项所述的步骤。
75.一种,包括:
显示器;
触敏表面;和
用于执行权利要求47-73中的任一项的装置。
76.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求47-73中的任一项的装置。
77.一种在计算设备上执行的处理器实现的方法,所述方法包括:
接收对应于由所述计算设备上执行的应用程序所执行的多部分操作的第一部分的输入;
响应于接收到对应于所述多部分操作的第一部分的输入,发起正在进行的触觉输出序列;
在发起所述正在进行的触觉输出序列之后,接收对应于所述多部分操作的第二部分的输入;以及
响应于接收到对应于所述多部分操作的第二部分的输入,终止所述正在进行的触觉输出序列。
78.根据权利要求77所述的方法,其中:
在所述设备的触敏表面上检测对应于所述多部分操作的第一部分的输入;
在所述设备的触敏表面上检测对应于所述多部分操作的第二部分的输入;并且
经由所述触敏表面提供所述触觉输出序列。
79.根据权利要求77或78所述的方法,其中:
所述设备检测对应于所述多部分操作的第一部分的输入;并且
第二设备检测对应于所述多部分操作的第二部分的输入。
80.根据权利要求77或78所述的方法,其中:
所述设备检测对应于所述多部分操作的第一部分的输入;并且
所述设备检测对应于所述多部分操作的第二部分的输入。
81.根据权利要求77-80中任一项所述的方法,其中:
所述多部分操作为安全事务处理;
所述多部分操作的第一部分包括装备所述设备以授权所述安全事务处理;并且
所述多部分操作的第二部分包括授权所述安全事务处理。
82.根据权利要求77-80中任一项所述的方法,其中:
所述多部分操作为安全事务处理;
所述多部分操作的第一部分包括确定需要用户认证以完成所述安全事务处理;并且
所述多部分操作的第二部分包括接收用于所述安全事务处理的用户认证。
83.根据权利要求77-80中任一项所述的方法,其中:
所述多部分操作的第一部分包括关闭文档的草稿;并且
所述多部分操作的第二部分包括返回到所述文档的草稿。
84.根据权利要求77或78所述的方法,其中:
对应于所述多部分操作的第一部分的输入为与在所述设备上执行的应用程序交互的第一用户输入;并且
对应于所述多部分操作的第二部分的输入为与所述应用程序交互的第二用户输入,所述第二用户输入不同于所述第一用户输入。
85.根据权利要求77或78所述的方法,其中:
检测对应于所述多部分操作的第一部分的输入包括检测在所述触敏表面上的接触;并且
检测对应于所述多部分操作的第二部分的输入包括检测在所述触敏表面上的接触的移动。
86.根据权利要求77或78 1所述的方法,其中:
检测对应于所述多部分操作的第一部分的输入包括检测在所述触敏表面上的接触的移动;并且
检测对应于所述多部分操作的第二部分的输入包括检测所述接触从所述触敏表面上的抬起。
87.根据权利要求77或78所述的方法,其中:
对应于所述多部分操作的第一部分和第二部分的输入包括单个手势;
其中对应于所述多部分操作的第一部分的输入为所述手势的初始部分;并且
对应于所述多部分操作的第二部分的输入为所述手势的随后部分。
88.根据权利要求87所述的方法,其中所述手势在所述触敏表面上对应于在所述设备的显示器上显示的用户界面中的第一位置的部分上发起并且在所述触敏表面上对应于所述用户界面中不同于所述第一位置的第二位置的第二部分上终止。
89.根据权利要求77-88中任一项所述的方法,其中:
对应于所述多部分操作的第一部分的输入发起与所述相应应用程序相关联的事件;
持续所述事件,直到接收到对应于所述多部分操作的第二部分的输入;并且
对应于所述多部分操作的第二部分的输入终止与所述相应应用程序相关联的事件。
90.根据权利要求89所述的方法,其中:
所述应用程序是文本编辑应用程序;
对应于所述多部分操作的第一部分的输入为对启用所述文本编辑应用程序的文本输入模式的第一用户界面元素的选择;
所述多部分操作包括针对向所述文本编辑应用程序的文本输入的一个或多个输入;
响应于针对文本输入的所述输入所述事件对应于所述文本编辑文档中的文本操控;并且
对应于所述多部分操作的第二部分的输入为对禁用所述文本编辑应用程序的文本输入模式的用户界面元素的选择。
91.根据权利要求89所述的方法,其中:
对应于所述多部分操作的第一部分的输入为对发起事务处理的第一用户界面元素的选择;
所述多部分操作包括一个或多个输入以用于输入处理所述事务处理所需要的信息;
所述事件对应于接收处理所述事务处理所需要的信息的一个或多个数据输入字段的总数;并且
对应于所述多部分操作的第二部分的输入为对授权完成所述事务处理的用户界面元素的选择。
92.根据权利要求89所述的方法,其中:
对应于所述多部分操作的第二部分的输入在对应于所述多部分操作的第一部分的输入之后并且在时间上与对应于所述多部分操作的第一部分的输入间隔开对应于所述事件的持续时间的指定时间间隔;并且
所述正在进行的触觉输出序列贯穿所述事件的持续时间提供并且指示所述事件的出现。
93.根据权利要求89所述的方法,其中所述正在进行的触觉输出序列的特征基于对应于所述多部分操作的第一部分的输入发起的所述事件来选择。
94.根据权利要求89所述的方法,还包括响应于接收到对应于所述多部分操作的第一部分的输入提供第一触觉反馈,所述第一触觉反馈基于所述事件选择并且指示所述事件的发起,所述第一触觉反馈不同于所述正在进行的触觉输出序列。
95.根据权利要求194所述的方法,还包括响应于接收到对应于所述多部分操作的第二部分的输入提供第二触觉反馈,所述第二触觉反馈不同于所述正在进行的触觉输出序列。
96.根据权利要求77-80中任一项所述的方法,其中:
对应于所述多部分操作的第一部分的输入中止与所述应用程序相关联的正在进行的事件;并且
对应于所述多部分操作的第二部分的输入恢复与所述应用程序相关联的正在进行的事件。
97.根据权利要求89所述的方法,其中:
所述应用程序是语音通信应用程序;
所述事件为在接收到对应于所述多部分操作的第一部分的输入时出现的正在进行的语音通信;
对应于所述多部分操作的第一部分的输入为对所述语音通信应用程序的第一用户界面元素的选择,所述选择中止所述正在进行的语音通信;
对应于所述多部分操作的第二部分的输入为对恢复所述语音通信的第二用户界面元素的选择。
98.根据权利要求77-80中任一项所述的方法,还包括在响应于多部分操作的第一部分发起正在进行的触觉输出序列之后以及在接收到对应于所述多部分操作的第二部分的输入之前:
接收不同于对应于所述多部分操作的第二部分的输入的一个或多个另外用户输入;以及
继续提供所述正在进行的触觉输出而不管所述另外的用户输入,直到接收到对应于所述多部分操作的第二部分的输入。
99.根据权利要求77-98中任一项所述的方法,其中所述正在进行的触觉输出序列的强度随时间增大直到接收到对应于所述多部分操作的随后输入。
100.根据权利要求77-98中任一项所述的方法,还包括:
响应于检测到对应于所述多部分操作的第一部分的输入,发起伴随所述正在进行的触觉序列的正在进行的音频输出序列;以及
响应于检测到对应于所述多部分操作的第二部分的输入,终止所述正在进行的音频输出序列。
101.根据权利要求100所述的方法,其中所述触觉输出序列的时间变化触觉能量分布模拟所述音频输出序列的时间变化声学能量分布。
102.根据权利要求77-80中任一项所述的方法,还包括:
响应于确定对应于所述多部分操作的第一部分的输入未暂停正在进行的事件,但是发起与所述相应应用程序相关联的事件,提供所述触觉输出序列而没有伴随的音频输出序列;以及
响应于确定对应于所述多部分操作的第一部分的输入暂停与所述相应应用程序相关联的正在进行的事件,提供伴随所述正在进行的触觉输出序列的正在进行的音频输出序列。
103.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求77-102中的一项所述的步骤。
104.一种,包括:
显示器;
触敏表面;和
用于执行权利要求77-102中的任一项的装置。
105.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求77-102中的任一项的装置。
106.一种在计算设备上执行的处理器实现的方法,包括:
检测对应于请求执行第一操作的第一输入;
响应于检测到所述第一输入:
提供包括触觉分量的第一输出;以及
执行所述第一操作;
在执行所述第一操作之后,检测对应于请求执行第二操作的第二输入,所述第二操作包括所述第一操作和辅助操作;以及
响应于检测到所述第二输入:
提供包括触觉分量的第二输出,其中所述第二输出包括所述第一输出以及提供对应于所述辅助操作的辅助输出;以及
执行所述第二操作。
107.根据权利要求106所述的方法,还包括:
响应于检测到所述第二输入:
执行所述第一操作并且同时提供所述第一输出;以及
执行所述辅助操作并且同时提供所述辅助输出。
108.根据权利要求106所述的方法,还包括:
响应于检测到所述第二输入:
在执行所述辅助操作之前执行所述第一操作;以及
在提供所述辅助输出之前提供所述第一输出。
109.根据权利要求106所述的方法,还包括:
响应于检测到所述第二输入:
在执行所述辅助操作之后执行所述第一操作;以及
在提供所述辅助输出之后提供所述第一输出。
110.根据权利要求106所述的方法,还包括:
响应于检测到所述第二输入:
与所述辅助操作的一部分同时执行所述第一操作的至少一部分;以及
与所述辅助输出的一部分同时提供所述第一输出的至少一部分。
111.根据权利要求106-110中任一项所述的方法,其中:
所述第一操作对应于用相机捕获图像;并且
所述第二操作对应于在指定时间间隔之后捕获图像。
112.根据权利要求106-110中任一项所述的方法,其中:
所述第一操作对应于用于启用所述设备授权安全事务处理的支持事务处理的操作;并且
所述第二操作对应于启用所述设备授权安全事务处理以及授权所述安全事务处理。
113.根据权利要求106-110中任一项所述的方法,其中:
所述第一操作对应于用于将内容保存在现有文件中的保存操作;并且
所述第二操作对应于用于将现有文件中的内容保存到新文件的另存为操作。
114.根据权利要求106-110中任一项所述的方法,其中:
所述第一操作对应于用于发送对在消息收件箱中的消息的答复的发送操作;并且
所述第二操作对应于用于发送对在所述消息收件箱中的消息的答复以及从所述消息收件箱中将所述答复移除的发送和归档操作。
115.根据权利要求106-114中任一项所述的方法,其中:
所述辅助操作具有可变值;并且
所述辅助输出基于所述可变属性的所述值。
116.根据权利要求106-115中任一项所述的方法,其中对应于所述第二输出的触觉分量包括对应于所述第一输出的第一触觉分量以及对应于所述辅助输出的第二触觉分量,所述第二触觉分量不同于所述第一触觉分量。
117.根据权利要求106、110-116中任一项所述的方法,其中所述辅助输出包括非触觉分量。
118.根据权利要求106、110-116中任一项所述的方法,其中所述第二输出包括将所述辅助操作标识为不同于所述第一操作的文本分量。
119.根据权利要求106、110-116中任一项所述的方法,其中:
所述辅助输出包括音频分量;并且
所述第一输出不包括音频分量。
120.根据权利要求206-120中任一项所述的方法,其中:
所述计算设备包括触敏显示器;
通过所述触敏显示器接收所述第一输入和所述第二输入;并且
经由所述触敏显示器提供所述第一输出的触觉分量和所述第二输出的触觉分量。
121.一种处理器实现的方法,包括:
检测对应于请求用相机捕获第一图像的第一输入;
响应于检测到所述第一输入:
提供包括触觉分量的第一输出;以及
捕获所述第一图像;
在捕获所述第一图像之后,在指定时间间隔之后检测对应于请求捕获第二图像的第二输入;以及
响应于检测到所述第二输入:
提供包括触觉分量的第二输出,其中所述第二输出包括所述第一输出以及提供对应于测量所述指定时间间隔的流逝的辅助输出;以及
在所述指定时间间隔之后捕获所述第二图像。
122.一种处理器实现的方法,包括:
检测对应于请求执行用于启用所述设备授权安全事务处理的支持事务处理的操作的第一输入;
响应于检测到所述第一输入:
提供包括触觉分量的第一输出;以及
启用所述设备授权安全事务处理;
在执行所述支持事务处理的操作之后,检测对应于请求授权安全事务处理的第二输入;以及
响应于检测到所述第二输入:
提供包括触觉分量的第二输出,其中所述第二输出包括所述第一输出以及提供对应于授权所述安全事务处理的辅助输出;以及
授权所述安全事务处理。
123.一种处理器实现的方法,包括:
检测对应于请求执行保存操作的第一输入;
响应于检测到所述第一输入:
提供包括触觉分量的第一输出;以及
执行用于将内容保存在现有文件中的保存操作;
在执行所述保存操作之后,检测对应于请求执行将现有文件中的内容保存到新文件的另存为操作的第二输入;以及
响应于检测到所述第二输入:
提供包括触觉分量的第二输出,其中所述第二输出包括所述第一输出以及提供对应于创建所述新文件的辅助输出;以及
执行所述另存为操作。
124.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求106-123中的一项所述的步骤。
125.一种,包括:
显示器;
触敏表面;和
用于执行权利要求106-123中的任一项的装置。
126.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求106-123中的任一项的装置。
127.一种在计算设备上执行的处理器实现的方法,所述方法包括:
检测第一警示条件的出现;
响应于检测到所述第一警示条件的出现,提供包括第一触觉分量和第一非触觉分量的第一输出;
在提供所述第一输出之后,检测第二警示条件的出现;以及
响应于检测到所述第二警示条件的出现:
提供包括第二触觉分量和第二非触觉分量的第二输出,其中:
当所述第一警示条件和所述第二警示条件为相同种类警示条件中的不同警示条件时,所述第一输出和所述第二输出共享一个或多个相同分量并且具有一个或多个不同分量;并且
当所述第一警示条件和所述第二警示条件为不同种类警示条件中的不同警示条件时,所述第一触觉分量不同于所述第二触觉分量并且所述第一非触觉分量不同于所述第二非触觉分量。
128.根据权利要求127所述的方法,其中所述第一警示条件和所述第二警示条件为相同种类警示条件,其中所述种类与应用程序的警示条件相关联。
129.根据权利要求127所述的方法,其中所述第一警示条件和所述第二警示条件为相同种类警示条件,所述种类与应用程序的类别相关联。
130.根据权利要求127所述的方法,其中所述第一警示条件和所述第二警示条件与两个不同应用程序相关联,其中所述第一警示条件和所述第二警示条件在相同种类警示条件中,所述种类对应于在所述两个不同应用程序中的预定义种类功能中的功能。
131.根据权利要求127所述的方法,其中所述第一警示条件和所述第二警示条件与共同应用程序相关联,其中所述第一警示条件和所述第二警示条件在相同种类警示条件中,所述种类对应于在预定义种类功能中的功能。
132.根据权利要求127-131中任一项所述的方法,其中警示条件的种类包括消息、活动提示、媒体回放提示、视觉协助提示、系统提示、调度提醒和互联网浏览器更新。
133.根据权利要求127-132中任一项所述的方法,其中当所述第一警示条件和所述第二警示条件对应于相同警示条件的独立实例时,所述第一输出与所述第二输出相同。
134.根据权利要求127-133中任一项所述的方法,其中所述第一非触觉分量和所述第二非触觉分量为音频输出。
135.根据权利要求127-133中任一项所述的方法,其中所述第一非触觉分量和所述第二非触觉分量为视觉输出。
136.根据权利要求127-133中任一项所述的方法,其中当所述第一警示条件和所述第二警示条件为相同种类警示条件中的不同警示条件时:
所述第一输出的第一触觉分量与所述第二输出的第二触觉分量相同;并且
所述第一输出的第一非触觉分量不同于所述第二输出的第二非触觉分量。
137.根据权利要求127-133中任一项所述的方法,其中当所述第一警示条件和所述第二警示条件为相同种类警示条件中的不同警示条件时:
所述第一输出的第一非触觉分量与所述第二输出的第二非触觉分量相同;并且
所述第一输出的第一触觉分量不同于所述第二输出的第二触觉分量。
138.根据权利要求127-137中任一项所述的方法,其中:
所述第一警示条件和所述第二警示条件对应于相同警示条件;并且
所述第一输出伴随第一额外分量,所述第一额外分量不同于伴随所述第二输出的第二额外分量。
139.根据权利要求138所述的方法,其中:
伴随所述第一输出的所述第一额外分量提供描述触发所述第一警示的第一事件的信息;并且
伴随所述第二输出的所述第二额外分量提供描述触发所述第二警示的第二事件的信息。
140.根据权利要求127-133中任一项所述的方法,还包括:
在提供所述第二输出之后,检测第三警示条件的出现;以及
响应于检测到所述第三警示条件的出现:
提供包括第三触觉分量和第三非触觉分量的第三输出,其中:
当所述第一警示条件、所述第二警示条件和所述第三警示条件为相同种类警示条件中的不同警示条件时,所述第一输出、所述第二输出和所述第三输出共享一个或多个相同分量并且具有一个或多个不同分量;并且
当所述第三警示条件为不同于所述第一警示条件和所述第二警示条件的种类警示条件时,所述第三触觉分量不同于所述第一触觉分量和所述第二触觉分量两者并且所述第三非触觉分量不同于所述第一非触觉分量和所述第二非触觉分量两者。
141.根据权利要求127-141中任一项所述的方法,其中:
所述计算设备具有触敏显示器;
经由所述计算设备上的触敏显示器提供所述第一输出的第一触觉分量和所述第二输出的第二触觉分量。
142.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求127-141中的一项所述的步骤。
143.一种,包括:
显示器;
触敏表面;和
用于执行权利要求127-141中的任一项的装置。
144.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求127-141中的任一项的装置。
145.一种方法,包括:
在具有触觉输出发生器的计算设备处:
检测第一事件的出现;以及
响应于检测到所述第一事件的出现:
根据确定所述第一事件为第一类型事件,借助所述触觉输出发生器提供包括至少部分基于所述设备的警示突出性设置选择的第一触觉分量的第一警示;以及
根据确定所述第一事件为第二类型事件,借助所述触觉输出发生器提供包括无需考虑所述设备的警示突出性设置选择的第二触觉分量的第二警示。
146.根据权利要求145所述的方法,其中所述第一警示不同于所述第二警示。
147.根据权利要求145或146所述的方法,其中提供包括至少部分基于所述设备的警示突出性设置选择的触觉分量的所述第一警示包括:
确定所述警示突出性设置的值;
根据确定所述警示突出性设置具有第一值,所述第一警示包括第一触觉分量和第二触觉分量;以及
根据确定所述警示突出性设置具有不同于所述第一值的第二值,所述第一警示包括所述第一触觉分量但不包括所述第二触觉分量。
148.根据权利要求147所述的方法,其中所述第二触觉分量在所述第一触觉分量之前。
149.根据权利要求147-148中任一项所述的方法,包括根据确定所述第一事件为第三类型事件,提供包括至少部分基于所述设备的警示突出性设置选择的触觉分量的第三警示,其中提供包括至少部分基于所述设备的警示突出性设置选择的触觉分量的所述第三警示包括:
确定所述警示突出性设置的值;
根据确定所述警示突出性设置具有所述第一值,所述第三警示包括第三触觉分量和第四触觉分量;以及
根据确定所述警示突出性设置具有不同于所述第一值的所述第二值,所述第三警示包括所述第三触觉分量但不包括所述第四触觉分量。
150.根据权利要求149所述的方法,其中所述第四触觉分量与所述第二触觉分量相同。
151.根据权利要求147-150中任一项所述的方法,其中:
在所述设备的警示突出性设置具有所述第一值时检测所述第一警示;
响应于所述第一事件提供的所述第一警示包括所述第一触觉分量和所述第二触觉分量;并且
响应于所述第一事件提供的所述第二警示包括第二警示触觉分量;并且
所述方法包括:
在所述设备的警示突出性设置具有所述第一值时,接收将所述设备的警示突出性设置改成所述第二值的请求;以及
响应于接收到将所述警示突出性设置改成所述第二值的请求,将所述警示突出性设置改成所述第二值;
在所述设备的警示突出性设置具有所述第二值时:
检测第二事件的出现;以及
响应于检测到所述第二事件的出现:
根据确定所述第二事件为第一类型事件,提供包括所述第一触觉分量且并不包括所述第二触觉分量的第三警示;以及
根据确定所述第二事件为第二类型事件,提供包括所述第二警示触觉分量的所述第二警示。
152.根据权利要求147-151中任一项所述的方法,其中所述警示突出性设置的第一值打开并且所述警示突出性设置的第二值关闭。
153.根据权利要求145-152中任一项所述的方法,还包括:
在所述警示突出性设置具有第一值时,针对响应于在第一多个事件种类中的事件而触发的警示提供额外触觉分量;
在所述警示突出性设置具有所述第二值时,针对响应于在所述第一多个事件种类中的事件而触发的警示放弃提供所述额外触觉分量;以及
放弃针对响应于不同于所述第一多个事件种类的第二多个事件种类中的事件而触发的警示提供所述额外触觉分量,而不考虑所述警示突出性设置具有所述第一值或所述第二值。
154.根据权利要求145-153中任一项所述的方法,其中:
所述设备具有触敏显示器;并且
经由所述计算设备上的触敏显示器提供所述触觉分量。
155.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求145-154中的一项所述的步骤。
156.一种,包括:
显示器;
触敏表面;和
用于执行权利要求145-154中的任一项的装置。
157.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求145-154中的任一项的装置。
158.一种方法,包括:
在具有触觉输出发生器的设备处:
检测事件;以及
响应于检测到所述事件:
根据确定所述事件为包括多个不同事件类型的第一事件种类中的事件类型,提供包括所述触觉输出发生器生成的第一触觉分量的第一警示;以及
根据确定所述事件为包括多个不同事件类型的第二事件种类中的事件类型,提供包括所述触觉输出发生器生成的不同于所述第一触觉分量的第二触觉分量的第二警示;以及
根据确定所述事件为包括多个不同事件类型的第三事件种类中的事件类型,提供包括所述触觉输出发生器生成的不同于所述第一触觉分量和所述第二触觉分量的第三触觉分量的第三警示。
159.根据权利要求158所述的方法,包括响应于检测到所述事件,根据确定所述事件为包括多个不同事件类型的第四事件种类中的事件类型,提供包括所述触觉输出发生器生成的不同于所述第一触觉分量、所述第二触觉分量和所述第三触觉分量的第四触觉分量的第四警示。
160.根据权利要求159所述的方法,其中所述第四事件种类对应于第三方应用程序生成的事件。
161.根据权利要求159所述的方法,其中所述第四触觉分量由不包括在所述第一触觉分量、所述第二触觉分量或所述第三触觉分量中的触觉输出元素与所述第一触觉分量、所述第二触觉分量和所述第三触觉分量区分开。
162.根据权利要求158所述的方法,其中基于触觉输出之间的间隔、触觉输出数量和所述触觉分量期间触觉输出的幅度随时间的变化中的一个或多个,所述第一触觉分量不同于所述第二触觉分量和所述第三触觉分量。
163.根据权利要求158或159所述的方法,其中:
所述第一种类事件包括基于与其他用户的通信生成的事件;
所述第二种类事件包括基于由所述设备的用户输入的预定义的准则生成的事件;并且
所述第三种类事件包括基于满足设备监测的准则生成的事件。
164.根据权利要求158-163中任一项所述的方法,其中所述设备具有对应于不同事件的多个唯一警示,并且所述第一事件种类、所述第二事件种类和所述第三事件种类对应于典型地比对应于唯一警示的事件更频繁发生的事件类型。
165.根据权利要求158-164中任一项所述的方法,其中:
所述设备具有触敏显示器;并且
经由所述计算设备上的触敏显示器提供所述触觉分量。
166.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求158-164中的一项所述的步骤。
167.一种,包括:
显示器;
触敏表面;和
用于执行权利要求158-164中的任一项的装置。
168.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求158-164中的任一项的装置。
169.一种计算机实现的方法,包括:
在具有一个或多个触觉输出设备和一个或多个音频输出设备的电子设备处:
检测在所述设备处第一条件的出现;以及
响应于检测到所述第一条件的出现,生成对应于第一种类应用程序中的相应应用程序的第一警示,所述第一警示包括:
经由所述一个或多个触觉输出设备输出的第一触觉分量;以及
经由所述一个或多个音频输出设备输出的、由指定用于所述第一种类应用程序中的所述相应应用程序的音频波形构成的第一音频分量;以及
检测在所述设备处第二条件的出现;以及
响应于检测到所述第二条件的出现,生成对应于不同于所述第一种类应用程序的第二种类应用程序中的相应应用程序的第二警示,所述第二警示包括:
经由所述一个或多个触觉输出设备输出的第二触觉分量;以及
经由所述一个或多个音频输出设备输出的、由指定用于所述第二种类应用程序中的应用程序的音频波形构成的第二音频分量。
170.根据权利要求169所述的方法,其中所述第一触觉分量和所述第二触觉分量由可用于所述第一种类应用程序和所述第二种类应用程序两者的一个或多个触觉波形构成。
171.根据权利要求169或170所述的方法,其中:
所述设备被配置为生成多个不同警示;
所述多个不同警示包括具有可用于所述第一种类应用程序以及不可用于所述第二种类应用程序的音频分量的两个或更多个警示的第一子组;并且
所述多个不同警示包括具有可用于所述第二种类应用程序以及由指定用于所述第二种类应用程序的音频波形构成的音频分量的两个或更多个警示的第二子组。
172.根据权利要求171所述的方法,其中警示的第二子组包括通过向与所述第二种类应用程序相关联的相应音频样本应用不同变换生成的两个警示。
173.根据权利要求171所述的方法,其中警示的第一子组包括通过向与所述第一种类应用程序中的第一应用程序相关联的相应音频样本应用不同变换生成的两个警示。
174.根据权利要求173所述的方法,其中警示的第一子组包括通过向与所述第一种类应用程序中的第二应用程序相关联的相应音频样本应用不同变换生成的两个警示,其中与所述第二应用程序相关联的所述相应音频样本不同于与所述第一应用程序相关联的所述相应音频样本。
175.根据权利要求171-174中任一项所述的方法,其中警示的第二子组不可用于所述第一种类应用程序。
176.根据权利要求171-174中任一项所述的方法,其中:
两个或更多个警示的第一子组包括可用于所述第一种类应用程序以及所述第二种类应用程序的触觉分量;并且
两个或更多个警示的第二子组包括可用于所述第二种类应用程序以及所述第一种类应用程序的触觉分量。
177.根据权利要求171-176中任一项所述的方法,其中所述多个不同警示包括具有可用于所述第二种类应用程序和所述第一种类应用程序的音频分量的两个或更多个警示的第三子组。
178.根据权利要求169或177所述的方法,其中:
经由所述一个或多个音频输出设备输出的所述第一音频分量由指定用于所述第一种类应用程序中的第一应用程序的音频波形构成;并且
经由所述一个或多个音频输出设备输出的所述第一音频分量由指定用于所述第一种类应用程序中的第二应用程序的音频波形构成。
179.根据权利要求169或177所述的方法,其中:
经由所述一个或多个音频输出设备输出的所述第二音频分量由指定用于所述第二种类应用程序中的应用程序的音频波形构成,所述警示对应于所述第二种类应用程序中的第三应用程序;并且
经由所述一个或多个音频输出设备输出的所述第一音频分量由指定用于所述第二种类应用程序中的应用程序的音频波形构成,所述警示对应于所述第二种类应用程序中的第二应用程序。
180.根据权利要求169-179中任一项所述的方法,其中:
所述设备具有触敏显示器;并且
所述第一触觉分量和所述第二触觉分量经由所述计算设备上的触敏显示器提供。
181.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求169-180中的一项所述的步骤。
182.一种,包括:
显示器;
触敏表面;和
用于执行权利要求169-180中的任一项的装置。
183.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求169-180中的任一项的装置。
184.一种方法,包括:
在具有一个或多个触觉输出设备和一个或多个音频输出设备的电子设备处:
检测在所述设备处第一情境下第一条件的出现;以及
响应于检测到所述第一情境下第一条件的出现,生成对应于所述第一条件的第一警示,所述第一警示包括:
指示出现条件的类型的第一触觉分量;以及
指示在所述第一情境下出现的第一条件的第一音频分量;
检测在所述设备处、不同于所述第一情境的第二情境下第一条件的出现;以及
响应于检测到所述第二情境下第一条件的出现,生成对应于所述第一条件的第二警示,所述第二警示包括:
指示出现所述第一条件的第一触觉分量;以及
不同于所述第一音频分量、指示在不同于所述第一情境的第二情境下出现的第一条件的第二音频分量。
185.根据权利要求184所述的方法,还包括:
检测在所述设备处、不同于所述第一情境和所述第二情境的第三情境下第一条件的出现;
响应于检测到在所述设备处、所述第三情境下第一条件的出现,生成对应于所述第三情境下第一条件的第三警示,所述第三警示包括:
指示出现条件的类型的第一触觉分量;以及
不同于所述第一音频分量和所述第二音频分量、指示在所述第三情境下出现的第一条件的第三音频分量。
186.根据权利要求184或185所述的方法,其中:
所述第一触觉分量指示所述用户请求的操作没有发生;
所述第一音频分量指示所述操作没有在第一应用程序中发生;并且
所述第二音频分量指示所述操作没有在第二应用程序中发生。
187.根据权利要求184或185所述的方法,其中:
所述第一触觉分量指示所述用户请求的操作成功地发生;
所述第一音频分量指示所述操作在第一应用程序中发生;并且
所述第二音频分量指示所述操作在第二应用程序中发生。
188.根据权利要求184-187中任一项所述的方法,其中:
所述第一音频分量基于指定用于第一应用程序的音频波形生成;并且
所述第二音频分量基于指定用于不同于所述第一应用程序的第二应用程序的音频波形生成。
189.根据权利要求184-187中任一项所述的方法,其中:
所述第一音频分量基于指定用于第一种类应用程序中的应用程序的音频波形生成;并且
所述第二音频分量基于指定用于不同于所述第一种类应用程序的第二种类应用程序中的应用程序的音频波形生成。
190.根据权利要求184-189中任一项所述的方法,其中:
所述设备被配置为响应于多个不同条件和多个不同情境提供包括触觉分量和音频分量的警示;
所述第一条件由所述第一触觉分量表示;
不同于所述第一条件的所述第二条件由不同于所述第一触觉分量的所述第二触觉分量表示;
所述第一情境由所述第一音频分量表示;并且
不同于所述第一情境的所述第二情境由不同于所述第一音频分量的所述第二音频分量表示。
191.根据权利要求190所述的方法,其中:
所述第一条件指示请求操作的成功并且所述第一触觉分量包括与所述第一音频分量中的特征对准的一系列触觉输出;并且
所述第一条件指示请求操作的失败并且所述第一触觉分量未与所述第一音频分量中的特征对准。
192.根据权利要求190所述的方法,其中:
所述第一条件指示请求操作的成功并且所述第一触觉分量包括与所述第二音频分量中的特征对准的一系列触觉输出;并且
所述第一条件指示请求操作的失败,所述第一触觉分量未与所述第二音频分量中的特征对准。
193.根据权利要求184-192中任一项所述的方法,其中:
所述设备具有触敏显示器;并且
所述第一触觉分量和所述第二触觉分量经由所述计算设备上的触敏显示器提供。
194.一种包括存储可执行代码的非暂态计算机可读存储介质的计算机程序产品,所述代码在被执行时使得处理器执行权利要求184-193中的一项所述的步骤。
195.一种,包括:
显示器;
触敏表面;和
用于执行权利要求184-193中的任一项的装置。
196.一种用于在具有显示器和触敏表面的电子设备中使用的信息处理装置,包括:
用于执行权利要求184-193中的任一项的装置。
CN201580044092.6A 2014-09-02 2015-07-23 用于可变触觉输出的语义框架 Pending CN106575230A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202211185555.9A CN115756151A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211196129.5A CN115756154A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185564.8A CN115700434A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185573.7A CN115963922A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201462044870P 2014-09-02 2014-09-02
US62/044,870 2014-09-02
US201562129905P 2015-03-08 2015-03-08
US62/129,905 2015-03-08
US201562172122P 2015-06-07 2015-06-07
US62/172,122 2015-06-07
PCT/US2015/041858 WO2016036447A2 (en) 2014-09-02 2015-07-23 Semantic framework for variable haptic output

Related Child Applications (4)

Application Number Title Priority Date Filing Date
CN202211196129.5A Division CN115756154A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185573.7A Division CN115963922A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185564.8A Division CN115700434A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185555.9A Division CN115756151A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架

Publications (1)

Publication Number Publication Date
CN106575230A true CN106575230A (zh) 2017-04-19

Family

ID=53794510

Family Applications (5)

Application Number Title Priority Date Filing Date
CN202211185564.8A Pending CN115700434A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185573.7A Pending CN115963922A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185555.9A Pending CN115756151A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN201580044092.6A Pending CN106575230A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211196129.5A Pending CN115756154A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN202211185564.8A Pending CN115700434A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185573.7A Pending CN115963922A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架
CN202211185555.9A Pending CN115756151A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202211196129.5A Pending CN115756154A (zh) 2014-09-02 2015-07-23 用于可变触觉输出的语义框架

Country Status (8)

Country Link
US (10) US9542820B2 (zh)
EP (2) EP3964931A1 (zh)
JP (4) JP6538825B2 (zh)
KR (8) KR102373337B1 (zh)
CN (5) CN115700434A (zh)
AU (5) AU2015312344B2 (zh)
TW (2) TWI621011B (zh)
WO (1) WO2016036447A2 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107479816A (zh) * 2017-07-28 2017-12-15 广东欧珀移动通信有限公司 黑屏手势的识别方法、装置、存储介质及移动终端
CN108446007A (zh) * 2018-02-02 2018-08-24 华东师范大学 一种基于手势事件频率学习的手机浏览器功耗节约方法
CN109963205A (zh) * 2017-12-25 2019-07-02 上海全土豆文化传播有限公司 多媒体剪辑方法及装置
CN110231869A (zh) * 2019-06-11 2019-09-13 Oppo广东移动通信有限公司 一种触摸电极的控制方法、装置、存储介质及电子设备
CN110869879A (zh) * 2017-06-30 2020-03-06 雷蛇(亚太)私人有限公司 利用力传感器和触觉致动器的可调节触觉反馈
CN111356969A (zh) * 2017-09-21 2020-06-30 贝宝公司 在屏幕上提供触觉反馈
CN112136127A (zh) * 2018-05-18 2020-12-25 谷歌有限责任公司 用于搜索操作输出元素的动作指示符
CN113323515A (zh) * 2021-06-07 2021-08-31 北京京东方技术开发有限公司 基于触觉反馈的密码输出装置、身份认证装置及其方法
CN113678090A (zh) * 2019-04-09 2021-11-19 苹果公司 具有用于无线充电和触觉输出的线圈的电子设备
CN114077337A (zh) * 2020-08-18 2022-02-22 联咏科技股份有限公司 力感测方法、能够促进力感测的电子模块和运算设备
CN115079915A (zh) * 2022-07-19 2022-09-20 荣耀终端有限公司 日历视图的显示方法、电子设备及可读存储介质

Families Citing this family (169)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
EP2847659B1 (en) 2012-05-09 2019-09-04 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to a gesture
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
KR101806350B1 (ko) 2012-05-09 2017-12-07 애플 인크. 사용자 인터페이스 객체를 선택하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
AU2013259613B2 (en) 2012-05-09 2016-07-21 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
CN109298789B (zh) 2012-05-09 2021-12-31 苹果公司 用于针对激活状态提供反馈的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2014105274A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for navigating user interface hierarchies
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
AU2013368441B2 (en) 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
US10275117B2 (en) 2012-12-29 2019-04-30 Apple Inc. User interface object manipulations in a user interface
WO2014105276A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for transitioning between touch input to display output relationships
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
US10691230B2 (en) 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
USD738889S1 (en) * 2013-06-09 2015-09-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US10001817B2 (en) 2013-09-03 2018-06-19 Apple Inc. User interface for manipulating user interface objects with magnetic properties
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
US10503388B2 (en) * 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
EP3047359B1 (en) 2013-09-03 2020-01-01 Apple Inc. User interface for manipulating user interface objects
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
US9330547B2 (en) * 2014-05-20 2016-05-03 Immersion Corporation Haptic effect authoring tool based on a haptification model
US10523622B2 (en) * 2014-05-21 2019-12-31 Match Group, Llc System and method for user communication in a network
US9588586B2 (en) * 2014-06-09 2017-03-07 Immersion Corporation Programmable haptic devices and methods for modifying haptic strength based on perspective and/or proximity
US9607507B1 (en) * 2014-06-25 2017-03-28 Amazon Technologies, Inc. User activity-based actions
EP3584671B1 (en) 2014-06-27 2022-04-27 Apple Inc. Manipulation of calendar application in device with touch screen
CN111210891B (zh) 2014-09-02 2023-08-25 苹果公司 身体活动和健身监视器
USD763285S1 (en) 2014-09-02 2016-08-09 Apple Inc. Display screen or portion thereof with graphical user interface
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
KR102373337B1 (ko) 2014-09-02 2022-03-11 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
WO2016036416A1 (en) 2014-09-02 2016-03-10 Apple Inc. Button functionality
US20160062571A1 (en) 2014-09-02 2016-03-03 Apple Inc. Reduced size user interface
WO2016036509A1 (en) 2014-09-02 2016-03-10 Apple Inc. Electronic mail user interface
US20160217681A1 (en) * 2015-01-23 2016-07-28 Honeywell International Inc. Method to invoke backup input operation
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
USD765098S1 (en) * 2015-03-06 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
JP6222186B2 (ja) * 2015-08-11 2017-11-01 コニカミノルタ株式会社 操作パネル、およびそれを備えた画像形成装置
EP4321088A2 (en) 2015-08-20 2024-02-14 Apple Inc. Exercise-based watch face
US20170091753A1 (en) * 2015-09-28 2017-03-30 Paypal, Inc. Sensory feedback payment system
US10331873B1 (en) * 2015-10-09 2019-06-25 United Services Automobile Association (“USAA”) Graphical event-based password system
US10088906B2 (en) * 2015-11-10 2018-10-02 Joyhaptics Oy Method and apparatus for recognizing swipe operation of a user on a user interface
US9880627B2 (en) * 2015-12-15 2018-01-30 Immersion Corporation Automated haptic setting generation
US10164849B2 (en) * 2015-12-18 2018-12-25 Facebook, Inc. Techniques to detect foreground processes
US10061385B2 (en) * 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
USD801388S1 (en) * 2016-02-11 2017-10-31 Sears Brands, L.L.C. Display screen or portion thereof with icon
US11076419B2 (en) * 2016-03-14 2021-07-27 Lg Electronics Inc. Method for transmitting uplink data in wireless communication system and apparatus therefor
US9679547B1 (en) * 2016-04-04 2017-06-13 Disney Enterprises, Inc. Augmented reality music composition
US11416212B2 (en) * 2016-05-17 2022-08-16 Microsoft Technology Licensing, Llc Context-based user agent
JP6691434B2 (ja) * 2016-06-07 2020-04-28 株式会社Nttドコモ コンテンツ提示装置
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
DK180122B1 (en) 2016-06-12 2020-05-19 Apple Inc. Devices, methods and graphical user interfaces for providing haptic feedback
DK179823B1 (en) * 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
US10346825B2 (en) * 2016-06-27 2019-07-09 Paypal, Inc. Pressure sensitive device casings to enable device functionality
EP3270262A1 (en) * 2016-07-12 2018-01-17 Vestel Elektronik Sanayi ve Ticaret A.S. Touch-screen control device with haptic feedback
JP2018030107A (ja) * 2016-08-26 2018-03-01 レノボ・シンガポール・プライベート・リミテッド 触覚フィードバック・システム、電子機器および触覚フィードバックの生成方法
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179082B1 (en) * 2016-09-06 2017-10-16 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
DK179278B1 (en) * 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
EP3291054B8 (en) * 2016-09-06 2019-07-24 Apple Inc. Devices, methods, and graphical user interfaces for haptic mixing
US10469971B2 (en) * 2016-09-19 2019-11-05 Apple Inc. Augmented performance synchronization
DK179978B1 (en) * 2016-09-23 2019-11-27 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
US10073548B2 (en) * 2016-11-08 2018-09-11 Wacom Co., Ltd. Stylus having variable transmit signal strength, and sensor for detecting such stylus
US10599823B2 (en) * 2016-11-18 2020-03-24 Invensense, Inc. Systems and methods for coordinating applications with a user interface
JP2018097706A (ja) * 2016-12-15 2018-06-21 株式会社東海理化電機製作所 触聴覚呈示装置
US10733054B2 (en) * 2016-12-30 2020-08-04 Dropbox, Inc. User engagement aware auto-restart
US10732954B2 (en) 2016-12-30 2020-08-04 Dropbox, Inc. User engagement aware auto-updater
DE112018000310T5 (de) 2017-01-04 2019-10-02 Joyson Safety Systems Acquisition Llc Schalterbaugruppe mit kraftabhängiger variabler Scroll-Geschwindigkeit und Verwendungsverfahren
JP6868397B2 (ja) * 2017-01-12 2021-05-12 任天堂株式会社 振動制御システム、振動制御装置、振動制御プログラムおよび振動制御方法
US11112869B2 (en) 2017-01-27 2021-09-07 Northwestern University Epidermal virtual reality devices
US10423276B2 (en) * 2017-01-30 2019-09-24 Atmel Corporation Applying a signal to a touch sensor
US10721363B2 (en) * 2017-02-09 2020-07-21 Sony Corporation System and method for controlling notifications in an electronic device according to user status
US20200019291A1 (en) 2017-03-09 2020-01-16 Google Llc Graphical user interafaces with content based notification badging
US10373474B2 (en) * 2017-03-09 2019-08-06 Keithley Instruments, Llc Auto setting of alarm limits
US10938767B2 (en) * 2017-03-14 2021-03-02 Google Llc Outputting reengagement alerts by a computing device
US20180287987A1 (en) * 2017-03-29 2018-10-04 NURO Secure Messaging Ltd. System and method thereof for contextual customization of notifications
DE112017007223T5 (de) * 2017-04-10 2019-12-05 Mitsubishi Electric Corporation Benutzerschnittstellenvorrichtung
US11651336B1 (en) * 2017-04-27 2023-05-16 United Services Automobile Association (Usaa) Time-varying haptic alerts for computing devices
US10464569B2 (en) * 2017-04-28 2019-11-05 Nxp B.V. Vibration sensor
US10396272B2 (en) * 2017-05-04 2019-08-27 International Business Machines Corporation Display distortion for alignment with a user gaze direction
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
US20190027000A1 (en) * 2017-07-19 2019-01-24 Kovacorp Interactive Alert Notification System
RU173988U1 (ru) * 2017-07-28 2017-09-25 Открытое акционерное общество "Исток-Аудио Интернэшнл" (ОАО "Исток-Аудио Интернэшнл") Приемник универсальный для системы оповещения
CN107589698B (zh) * 2017-09-20 2021-05-25 友达光电股份有限公司 应用于物联网中的感测装置及控制方法
US10564741B2 (en) * 2017-10-19 2020-02-18 Microsoft Technology Licensing, Llc Active stylus pairing with a digitizer
KR102440291B1 (ko) 2017-11-15 2022-09-07 삼성디스플레이 주식회사 전자장치 및 전자장치 제어방법
US10204336B1 (en) 2018-01-12 2019-02-12 Capital One Services, Llc Generating a sensory indication
CN108388403B (zh) * 2018-02-07 2020-05-12 维沃移动通信有限公司 一种处理消息的方法及终端
US10216231B1 (en) * 2018-02-20 2019-02-26 Nvf Tech Ltd Moving magnet actuator for haptic alerts
CN111801145A (zh) * 2018-03-29 2020-10-20 科乐美数码娱乐株式会社 信息处理装置以及在其中记录有用于信息处理装置的程序的记录介质
US11317833B2 (en) * 2018-05-07 2022-05-03 Apple Inc. Displaying user interfaces associated with physical activities
US11030921B2 (en) * 2018-06-08 2021-06-08 Wells Fargo Bank, N.A. Change data driven tactile response
US10345910B1 (en) * 2018-06-15 2019-07-09 Immersion Corporation Haptic actuator assembly with a spring pre-load device
US10917180B2 (en) * 2018-07-24 2021-02-09 Comcast Cable Communications, Llc Controlling vibration output from a computing device
US11016587B2 (en) 2018-09-11 2021-05-25 Apple Inc. Watch crown haptic support to provide detent-like operation
US11478193B2 (en) * 2018-09-11 2022-10-25 Apple Inc. Contact detection for physiological sensor
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
DK179888B1 (en) 2018-09-11 2019-08-27 Apple Inc. CONTENT-BASED TACTICAL OUTPUTS
US10719130B1 (en) * 2018-12-27 2020-07-21 Apple Inc. Haptic actuator including overmolded field member and related methods
EP3677996B1 (en) * 2019-01-07 2022-03-23 Goodix Technology (HK) Company Limited Audio-haptic signal generator
US11086431B2 (en) * 2019-01-30 2021-08-10 Samsung Display Co., Ltd. Display device and method for providing haptic feedback by display device
US10921892B2 (en) * 2019-02-04 2021-02-16 Subpac, Inc. Personalized tactile output
EP3956228A1 (en) * 2019-04-15 2022-02-23 Safetyn Alerting system for a light aircraft
DK201970532A1 (en) 2019-05-06 2021-05-03 Apple Inc Activity trends and workouts
CN112015308B (zh) * 2019-05-31 2022-07-15 北京小米移动软件有限公司 内容展示方法及装置
US10996761B2 (en) 2019-06-01 2021-05-04 Apple Inc. User interfaces for non-visual output of time
KR20200144785A (ko) * 2019-06-19 2020-12-30 삼성전자주식회사 사용자 입력에 대응되는 피드백의 속성을 조정하는 전자 장치 및 방법
US11637921B2 (en) * 2019-09-09 2023-04-25 Motorola Mobility Llc Enabling vibration notification based on environmental noise
US11662820B2 (en) 2020-01-08 2023-05-30 Dell Products, Lp System for a solid-state keyboard and touchpad providing haptic feedback
US11646020B2 (en) * 2020-01-24 2023-05-09 International Business Machines Corporation Communication notification management
US11093048B1 (en) 2020-01-31 2021-08-17 Dell Products, Lp System for modified key actions and haptic feedback for smart typing assist with a solid-state keyboard and touchpad
US11079816B1 (en) 2020-01-31 2021-08-03 Dell Products, Lp System and method for vapor chamber directional heat dissipation for a piezoelectric keyboard assembly
US11106772B2 (en) 2020-01-31 2021-08-31 Dell Products, Lp System and method for continuous user identification via piezo haptic keyboard and touchpad dynamics
US11301053B2 (en) 2020-01-31 2022-04-12 Dell Products, Lp System for providing haptic feedback across full palm rest in fixed position of information handling system
US11079849B1 (en) 2020-01-31 2021-08-03 Dell Products, Lp System for extended key actions and haptic feedback and optimized key layout for a solid-state keyboard and touchpad
US11294469B2 (en) 2020-01-31 2022-04-05 Dell Products, Lp System and method for processing user input via a reconfigurable haptic interface assembly for displaying a modified keyboard configuration
US10860112B1 (en) 2020-01-31 2020-12-08 Dell Products, Lp System for a solid-state keyboard and touchpad with a single sheet cover for providing haptic feedback
US11106286B2 (en) 2020-01-31 2021-08-31 Dell Products, Lp System and method for mood detection via piezo haptic keyboard dynamics
US11175745B2 (en) 2020-01-31 2021-11-16 Dell Products, Lp System and method for application of piezo electric haptic keyboard personal typing profile
US11067269B1 (en) 2020-01-31 2021-07-20 Dell Products, Lp System and method for backlight integration with electrical contact foil in piezoelectric haptic keyboard
US11579695B2 (en) 2020-01-31 2023-02-14 Dell Products, Lp System and method for generating sound effects on fingertips with piezoelectric actuators of a haptic keyboard
US10936073B1 (en) 2020-01-31 2021-03-02 Dell Products, Lp System and method for generating high-frequency and mid-frequency audible sound via piezoelectric actuators of a haptic keyboard
DK202070612A1 (en) 2020-02-14 2021-10-26 Apple Inc User interfaces for workout content
US11209929B2 (en) * 2020-02-17 2021-12-28 Robert Bosch Gmbh Faulty pressure sensor determination of a portable communication device touch display
US20210337000A1 (en) * 2020-04-24 2021-10-28 Mitel Cloud Services, Inc. Cloud-based communication system for autonomously providing collaborative communication events
US11343460B2 (en) * 2020-09-10 2022-05-24 Atlassian Pty Ltd. Participation management system for videoconferencing
CN116171440A (zh) * 2020-09-22 2023-05-26 谷歌有限责任公司 经由用户反馈引导指纹感测
US11334166B2 (en) 2020-09-30 2022-05-17 International Business Machines Corporation Multi-sensory notifications
FI130484B (en) 2021-02-26 2023-09-29 Amer Sports Digital Services Oy Delivery of content and/or functional features to wearable devices
US11775084B2 (en) * 2021-04-20 2023-10-03 Microsoft Technology Licensing, Llc Stylus haptic component arming and power consumption
WO2022240310A1 (ru) * 2021-05-13 2022-11-17 Евгений Уралович ХАФИЗОВ Система управления тестированием программного обеспечения
EP4323992A1 (en) 2021-05-15 2024-02-21 Apple Inc. User interfaces for group workouts
US11915805B2 (en) 2021-06-06 2024-02-27 Apple Inc. User interfaces for shared health-related data
US11531398B1 (en) * 2021-08-20 2022-12-20 Apple Inc. Gyroscopic precession engine for wearable devices
US11645871B1 (en) 2021-11-18 2023-05-09 International Business Machines Corporation Engagement based contextual feedback for devices
US11954256B2 (en) 2021-12-17 2024-04-09 Google Llc Haptic interface for computing devices
US20230237287A1 (en) * 2022-01-25 2023-07-27 Apple Inc. Managing information on a computer system
WO2023163490A1 (ko) * 2022-02-25 2023-08-31 삼성전자주식회사 터치 인식을 위한 인식 감도를 조정하는 방법 및 이를 수행하는 전자 장치
US11809630B1 (en) 2022-04-21 2023-11-07 Meta Platforms Technologies, Llc Using a haptic effects library to determine whether to provide predefined or parametrically-defined haptic responses, and systems and methods of use thereof
US20230390627A1 (en) 2022-06-05 2023-12-07 Apple Inc. User interfaces for physical activity information
US20240061505A1 (en) * 2022-08-19 2024-02-22 Qualcomm Incorporated Adjusting haptic rendering based on contextual awareness

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101375582A (zh) * 2006-01-19 2009-02-25 高通股份有限公司 将已分类源地址群组与振动模式相关联的方法
CN102420906A (zh) * 2011-12-01 2012-04-18 华为终端有限公司 提示方法和用户终端
CN102484664A (zh) * 2009-08-31 2012-05-30 高通股份有限公司 用于通过使移动装置振动或移动而进行通信的方法和设备
WO2013089294A1 (ko) * 2011-12-15 2013-06-20 엘지전자 주식회사 햅틱 전송 방법 및 그 이동 단말기
US20130316744A1 (en) * 2012-05-27 2013-11-28 Qualcomm Incorporated Notification based on user context

Family Cites Families (456)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6433771B1 (en) 1992-12-02 2002-08-13 Cybernet Haptic Systems Corporation Haptic device attribute control
AU2591995A (en) 1994-05-16 1995-12-05 Apple Computer, Inc. A system and method for customizing appearance and behavior of graphical user interfaces
US20030040361A1 (en) 1994-09-21 2003-02-27 Craig Thorner Method and apparatus for generating tactile feedback via relatively low-burden and/or zero burden telemetry
US6219032B1 (en) 1995-12-01 2001-04-17 Immersion Corporation Method for providing force feedback to a user of an interface device based on interactions of a controlled cursor with graphical elements in a graphical user interface
US5990869A (en) 1996-08-20 1999-11-23 Alliance Technologies Corp. Force feedback mouse
JP3655438B2 (ja) 1997-07-17 2005-06-02 任天堂株式会社 ビデオゲームシステム
JP3138666B2 (ja) 1997-08-21 2001-02-26 日本電気通信システム株式会社 携帯電話機
US6211861B1 (en) * 1998-06-23 2001-04-03 Immersion Corporation Tactile mouse device
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
JP2000209311A (ja) * 1999-01-13 2000-07-28 Yazaki Corp 車両用呼出応対方法
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US7561142B2 (en) 1999-07-01 2009-07-14 Immersion Corporation Vibrotactile haptic feedback devices
WO2001024158A1 (en) 1999-09-28 2001-04-05 Immersion Corporation Controlling haptic sensations for vibrotactile feedback interface devices
US6424251B1 (en) 1999-11-10 2002-07-23 Matthew T. Byrne Personal electronic device notification system
US6560165B1 (en) * 2000-03-28 2003-05-06 Diane K. Barker Medical information appliance
CN1193570C (zh) 2000-06-21 2005-03-16 精工爱普生株式会社 协同处理呼入的移动电话和无线电通信装置
EP1330811B1 (en) 2000-09-28 2012-08-22 Immersion Corporation Directional tactile feedback for haptic feedback interface devices
US6791536B2 (en) 2000-11-10 2004-09-14 Microsoft Corporation Simulating gestures of a pointing device using a stylus and providing feedback thereto
GB0029622D0 (en) 2000-12-05 2001-01-17 Nokia Networks Oy Improved user interface
JP4327369B2 (ja) 2001-02-23 2009-09-09 ヤマハ株式会社 携帯端末、着信通知制御プログラム及び着信通知制御プログラムを記録した記録媒体
US6703550B2 (en) 2001-10-10 2004-03-09 Immersion Corporation Sound data output and manipulation using haptic feedback
CN1582465B (zh) 2001-11-01 2013-07-24 伊梅森公司 输入设备以及包含该输入设备的移动电话
JP3954028B2 (ja) * 2001-11-27 2007-08-08 松下電器産業株式会社 装着型情報告知装置
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
JP2003288158A (ja) 2002-01-28 2003-10-10 Sony Corp タクタイル・フィードバック機能を持つ携帯型機器
JP2004064117A (ja) * 2002-07-24 2004-02-26 Kenwood Corp 移動体通信端末、着信報知方法及びプログラム
EP1406150A1 (en) 2002-10-01 2004-04-07 Sony Ericsson Mobile Communications AB Tactile feedback method and device and portable device incorporating same
US20040095311A1 (en) 2002-11-19 2004-05-20 Motorola, Inc. Body-centric virtual interactive apparatus and method
GB2413416B8 (en) * 2002-12-08 2006-09-07 Immersion Corp Haptic massaging in handheld communication devices
US8165640B2 (en) 2003-03-14 2012-04-24 Jeffrey D Mullen Systems and methods for providing remote incoming call notification for cellular phones
US7886236B2 (en) 2003-03-28 2011-02-08 Microsoft Corporation Dynamic feedback for gestures
US7454009B2 (en) 2003-04-25 2008-11-18 International Business Machines Corporation Ring-tone identification of urgent phone calls
JP4240293B2 (ja) 2003-05-27 2009-03-18 株式会社ソニー・コンピュータエンタテインメント マルチメディア再生装置およびマルチメディア再生方法
JP2004363999A (ja) * 2003-06-05 2004-12-24 Hitachi Ltd 携帯電話機、携帯電話基地局サーバ及びip電話装置と電子メールシステム
US7130664B1 (en) 2003-06-12 2006-10-31 Williams Daniel P User-based signal indicator for telecommunications device and method of remotely notifying a user of an incoming communications signal incorporating the same
US7669177B2 (en) * 2003-10-24 2010-02-23 Microsoft Corporation System and method for preference application installation and execution
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
JP2005276089A (ja) * 2004-03-26 2005-10-06 Seiko Epson Corp 入力装置、画像表示装置及びプロジェクタ
US20050231489A1 (en) 2004-04-15 2005-10-20 Research In Motion Limited System and method for providing dynamic tactile feedback on hand-held electronic devices
US7305257B2 (en) 2004-04-16 2007-12-04 Research In Motion Limited Portable alerter for wireless device
JP2006011646A (ja) 2004-06-23 2006-01-12 Pioneer Electronic Corp 触覚表示装置及び触覚表示機能付タッチパネル装置
US7308253B2 (en) 2004-06-30 2007-12-11 Avaya Technology Corp. Log-based ringtone service
US8867724B2 (en) 2004-08-31 2014-10-21 At&T Intellectual Property I, L.P. Distinctive ring tones prompted by call urgency and context
JP4860625B2 (ja) 2004-10-08 2012-01-25 イマージョン コーポレーション タッチ式入力装置におけるボタンおよびスクロール動作シミュレーション用の触覚フィードバック
US9591345B2 (en) 2004-10-21 2017-03-07 Core Wireless Licensing S.A.R.L. Group editing of media content stored on wireless portable devices
US7720213B2 (en) 2004-12-30 2010-05-18 Alcatel Lucent Parameter dependent ring tones
US8768838B1 (en) 2005-02-02 2014-07-01 Nexus Payments, LLC Financial transactions using a rule-module nexus and a user account registry
DE602006016763D1 (de) 2005-04-18 2010-10-21 Research In Motion Ltd Verfahren und system zur zentralisierten benutzerbenachrichtigung und anwendungsausführungssteuerung
US20060248183A1 (en) * 2005-04-28 2006-11-02 Microsoft Corporation Programmable notifications for a mobile device
US7911983B2 (en) * 2005-07-29 2011-03-22 Cisco Technology, Inc. Selective mute/unmute control over applications running on a PC
KR100714725B1 (ko) 2005-08-29 2007-05-07 삼성전자주식회사 입력 정보의 노출을 방지하기 위한 입력 장치 및 입력 방법
US9166823B2 (en) 2005-09-21 2015-10-20 U Owe Me, Inc. Generation of a context-enriched message including a message component and a contextual attribute
US20070088560A1 (en) 2005-10-14 2007-04-19 Motorola, Inc. Method and system for conveying context information in a personal and family security environment
US20070106457A1 (en) 2005-11-09 2007-05-10 Outland Research Portable computing with geospatial haptic compass
US20070132789A1 (en) 2005-12-08 2007-06-14 Bas Ording List scrolling in response to moving contact over list of index symbols
US7958456B2 (en) 2005-12-23 2011-06-07 Apple Inc. Scrolling list with floating adjacent index symbols
US7710958B2 (en) 2006-01-20 2010-05-04 Iona Technologies Limited Method for recoverable message exchange independent of network protocols
JP5129478B2 (ja) 2006-03-24 2013-01-30 株式会社デンソーアイティーラボラトリ 画面表示装置
US8144125B2 (en) 2006-03-30 2012-03-27 Cypress Semiconductor Corporation Apparatus and method for reducing average scan rate to detect a conductive object on a sensing device
US7751542B2 (en) * 2006-05-04 2010-07-06 Avaya Inc. Feeble ring tones
US20070283239A1 (en) 2006-05-30 2007-12-06 Robert Paul Morris Methods, systems, and computer program products for providing a user interaction model for use by a device
JP2008033739A (ja) 2006-07-31 2008-02-14 Sony Corp 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7809406B2 (en) 2006-09-15 2010-10-05 Sony Ericsson Mobile Communications Ab Continued transfer or streaming of a data file after loss of a local connection
US7890863B2 (en) * 2006-10-04 2011-02-15 Immersion Corporation Haptic effects with proximity sensing
DE102006048833A1 (de) 2006-10-16 2008-04-17 Universität Rostock Behandlung von Osteoporose
WO2008075082A1 (en) 2006-12-21 2008-06-26 Symbian Software Limited Mobile device and method of operation thereof
US8583189B2 (en) 2006-12-28 2013-11-12 Motorola Mobility Llc Method and apparatus for the selective use of imperceptible invites
US7844915B2 (en) 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
CN101232665B (zh) 2007-01-24 2012-02-22 北京三星通信技术研究有限公司 用于移动通信终端的回电设定及自动提示的方法
JP2008181365A (ja) * 2007-01-25 2008-08-07 Mitsubishi Electric Corp 携帯機器
US8098234B2 (en) 2007-02-20 2012-01-17 Immersion Corporation Haptic feedback system with stored effects
KR100835297B1 (ko) 2007-03-02 2008-06-05 광주과학기술원 촉감 정보 표현을 위한 노드 구조 및 이를 이용한 촉감정보 전송 방법과 시스템
US7801569B1 (en) 2007-03-22 2010-09-21 At&T Intellectual Property I, L.P. Mobile communications device with distinctive vibration modes
TWI351638B (en) 2007-04-27 2011-11-01 Htc Corp Touch-based tab navigation method and related devi
US8144126B2 (en) 2007-05-07 2012-03-27 Cypress Semiconductor Corporation Reducing sleep current in a capacitance sensing system
JP4803105B2 (ja) * 2007-05-09 2011-10-26 ソニー株式会社 電子機器
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8258986B2 (en) 2007-07-03 2012-09-04 Cypress Semiconductor Corporation Capacitive-matrix keyboard with multiple touch detection
US8026814B1 (en) * 2007-07-25 2011-09-27 Pinpoint Technologies Inc. Wireless mesh network for an asset tracking system
US8331268B2 (en) 2007-08-31 2012-12-11 At&T Intellectual Property I, L.P. Methods, systems, and computer-readable media for providing an event alert
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US8509854B2 (en) 2007-09-18 2013-08-13 Lg Electronics Inc. Mobile terminal and method of controlling operation of the same
US8098235B2 (en) 2007-09-28 2012-01-17 Immersion Corporation Multi-touch device having dynamic haptic effects
US7768838B2 (en) 2007-10-30 2010-08-03 Micron Technology, Inc. Operating memory cells
US20090128581A1 (en) 2007-11-20 2009-05-21 Microsoft Corporation Custom transition framework for application state transitions
US20090135142A1 (en) 2007-11-27 2009-05-28 Motorola, Inc. Data entry device and method
US9509829B2 (en) 2007-12-28 2016-11-29 Apple, Inc. Urgent communications
US9857872B2 (en) 2007-12-31 2018-01-02 Apple Inc. Multi-touch display screen with localized tactile feedback
US8138896B2 (en) 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
US8577423B2 (en) 2008-02-27 2013-11-05 Palm, Inc. Vibration tone differentiation
US20090219252A1 (en) 2008-02-28 2009-09-03 Nokia Corporation Apparatus, method and computer program product for moving controls on a touchscreen
US10015158B2 (en) * 2008-02-29 2018-07-03 Blackberry Limited Methods and apparatus for use in enabling a mobile communication device with a digital certificate
US8205157B2 (en) 2008-03-04 2012-06-19 Apple Inc. Methods and graphical user interfaces for conducting searches on a portable multifunction device
BRPI0804355A2 (pt) * 2008-03-10 2009-11-03 Lg Electronics Inc terminal e método de controle do mesmo
US9513704B2 (en) 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
JP2009265818A (ja) 2008-04-23 2009-11-12 Denso Corp ドライバ覚醒装置
EP2112579B1 (en) * 2008-04-25 2013-05-22 Research In Motion Limited Electronic device comprising touch-sensitive input surface and method of determining user-selected input
JP2009278294A (ja) * 2008-05-13 2009-11-26 Sony Ericsson Mobilecommunications Japan Inc 情報処理装置、情報処理方法、情報処理プログラム、及び携帯端末装置
KR101456001B1 (ko) 2008-05-23 2014-11-03 엘지전자 주식회사 단말기 및 그 제어 방법
US8266550B1 (en) 2008-05-28 2012-09-11 Google Inc. Parallax panning of mobile device desktop
US9357052B2 (en) 2008-06-09 2016-05-31 Immersion Corporation Developing a notification framework for electronic device events
US8203444B2 (en) * 2008-06-10 2012-06-19 Silent Call Corporation Alerting device with supervision
KR101498622B1 (ko) 2008-06-25 2015-03-04 엘지전자 주식회사 촉각 효과를 제공하는 휴대 단말기 및 그 제어방법
KR101556522B1 (ko) 2008-06-27 2015-10-01 엘지전자 주식회사 촉각 효과를 제공하는 휴대 단말기 및 그 제어방법
US8306576B2 (en) 2008-06-27 2012-11-06 Lg Electronics Inc. Mobile terminal capable of providing haptic effect and method of controlling the mobile terminal
KR101443341B1 (ko) 2008-06-30 2014-11-03 엘지전자 주식회사 휴대 단말기 및 그 동작제어 방법
KR101474963B1 (ko) * 2008-07-01 2014-12-19 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US9600175B2 (en) 2008-07-14 2017-03-21 Sony Corporation Method and system for classification sign display
US8638301B2 (en) 2008-07-15 2014-01-28 Immersion Corporation Systems and methods for transmitting haptic messages
GB2462465B (en) 2008-08-08 2013-02-13 Hiwave Technologies Uk Ltd Touch sensitive device
US8604364B2 (en) 2008-08-15 2013-12-10 Lester F. Ludwig Sensors, algorithms and applications for a high dimensional touchpad
US8402381B2 (en) 2008-09-23 2013-03-19 International Business Machines Corporation Automatically arranging widgets of a model within a canvas using iterative region based widget relative adjustments
GB2464117B (en) * 2008-10-03 2015-01-28 Hiwave Technologies Uk Ltd Touch sensitive device
EP3654141A1 (en) 2008-10-06 2020-05-20 Samsung Electronics Co., Ltd. Method and apparatus for displaying graphical user interface depending on a user's contact pattern
KR101529502B1 (ko) 2008-10-16 2015-06-17 엘지전자 주식회사 인스턴트 메시지 제어방법과 이를 이용한 이동 단말기
KR101569176B1 (ko) 2008-10-30 2015-11-20 삼성전자주식회사 오브젝트 실행 방법 및 장치
JP5003655B2 (ja) * 2008-11-07 2012-08-15 富士通株式会社 携帯端末装置
EP2187290A1 (en) * 2008-11-18 2010-05-19 Studer Professional Audio GmbH Input device and method of detecting a user input with an input device
JP5227769B2 (ja) * 2008-12-05 2013-07-03 ソニーモバイルコミュニケーションズ, エービー 携帯端末およびコンピュータプログラム
JP5181093B2 (ja) 2008-12-08 2013-04-10 韓國電子通信研究院 タッチスクリーン及びその動作方法
US8886252B2 (en) 2008-12-22 2014-11-11 Htc Corporation Method and apparatus for automatically changing operating modes in a mobile device
US8686952B2 (en) 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
JP4746085B2 (ja) 2008-12-25 2011-08-10 京セラ株式会社 入力装置
US8378979B2 (en) * 2009-01-27 2013-02-19 Amazon Technologies, Inc. Electronic device with haptic feedback
CN102318325B (zh) 2009-02-11 2015-02-04 Nxp股份有限公司 使音频设备的行为适配当前声学环境条件的控制
GB2480418B (en) * 2009-02-20 2013-11-13 Solocem Systems Oy Short-range communication-enabled mobile device, method and related server arrangement
US9746923B2 (en) 2009-03-12 2017-08-29 Immersion Corporation Systems and methods for providing features in a friction display wherein a haptic effect is configured to vary the coefficient of friction
US8572513B2 (en) 2009-03-16 2013-10-29 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
KR101553842B1 (ko) 2009-04-21 2015-09-17 엘지전자 주식회사 멀티 햅틱 효과를 제공하는 휴대 단말기 및 그 제어방법
US9658760B2 (en) 2009-05-07 2017-05-23 Creative Technology Ltd. Methods for searching digital files on a user interface
JP2010268086A (ja) * 2009-05-13 2010-11-25 Nec Saitama Ltd 携帯端末装置およびその着信報知出力制御方法
US8279194B2 (en) 2009-05-22 2012-10-02 Elo Touch Solutions, Inc. Electrode configurations for projected capacitive touch screen
KR101597553B1 (ko) 2009-05-25 2016-02-25 엘지전자 주식회사 기능 실행 방법 및 그 장치
US20100302042A1 (en) 2009-05-28 2010-12-02 David Barnett Sensor-based independent living assistant
US8271898B1 (en) 2009-06-04 2012-09-18 Mellmo Inc. Predictive scrolling
US8254957B2 (en) 2009-06-16 2012-08-28 Intel Corporation Context-based limitation of mobile device operation
KR20100136156A (ko) 2009-06-18 2010-12-28 삼성전자주식회사 터치스크린을 구비하는 휴대 단말기의 화면 스크롤 방법 및 장치
US8310458B2 (en) 2009-07-06 2012-11-13 Research In Motion Limited Electronic device including a moveable touch-sensitive input and method of controlling same
WO2011011025A1 (en) 2009-07-24 2011-01-27 Research In Motion Limited Method and apparatus for a touch-sensitive display
US20110017828A1 (en) * 2009-07-24 2011-01-27 Jadak, Llc Handheld optical imaging device and method
US8477106B2 (en) 2009-07-29 2013-07-02 Elo Touch Solutions, Inc. System and method for a projected capacitive touchscreen having weight based coordinate determination
US20110055753A1 (en) 2009-08-31 2011-03-03 Horodezky Samuel J User interface methods providing searching functionality
US9176962B2 (en) 2009-09-07 2015-11-03 Apple Inc. Digital media asset browsing with audio cues
US20110074695A1 (en) 2009-09-25 2011-03-31 Peter William Rapp Device, Method, and Graphical User Interface Using Mid-Drag Gestures
US8679014B2 (en) 2009-09-28 2014-03-25 James D. Bennett Network supporting intravaginal monitoring device
US8131848B1 (en) 2009-09-29 2012-03-06 Jason Adam Denise Image analysis and communication device control technology
US8487759B2 (en) 2009-09-30 2013-07-16 Apple Inc. Self adapting haptic device
US9338274B2 (en) 2009-10-02 2016-05-10 Blackberry Limited Method of interacting with electronic devices in a locked state and handheld electronic device configured to permit interaction when in a locked state
US8279052B2 (en) 2009-11-04 2012-10-02 Immersion Corporation Systems and methods for haptic confirmation of commands
US9152318B2 (en) 2009-11-25 2015-10-06 Yahoo! Inc. Gallery application for content viewing
EP2328063B1 (en) 2009-11-30 2018-01-10 BlackBerry Limited Portable electronic device and method of controlling same to provide tactile feedback
US8204548B1 (en) 2009-12-01 2012-06-19 Sprint Communications Company L.P. System and method for mobile device application pre-emption
US8347238B2 (en) 2009-12-16 2013-01-01 Apple Inc. Device, method, and graphical user interface for managing user interface content and user interface elements by dynamic snapping of user interface elements to alignment guides
US20110148608A1 (en) 2009-12-18 2011-06-23 Research In Motion Limited Portable electronic device and method of control
JP5437786B2 (ja) 2009-12-21 2014-03-12 京セラ株式会社 触感呈示装置
US8386965B2 (en) 2010-01-15 2013-02-26 Apple Inc. Techniques and systems for enhancing touch screen device accessibility through virtual containers and virtually enlarged boundaries
US20110202843A1 (en) 2010-02-15 2011-08-18 Robert Paul Morris Methods, systems, and computer program products for delaying presentation of an update to a user interface
US8548418B1 (en) 2010-01-25 2013-10-01 Sprint Spectrum L.P. Methods and devices for distributing ringtone
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
JP5360499B2 (ja) * 2010-02-01 2013-12-04 国立大学法人東北大学 力覚提示方法および力覚提示装置
TW201205910A (en) 2010-02-03 2012-02-01 Bayer Materialscience Ag An electroactive polymer actuator haptic grip assembly
US9361018B2 (en) 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
US8957981B2 (en) 2010-03-03 2015-02-17 Intellectual Ventures Fund 83 Llc Imaging device for capturing self-portrait images
US8423911B2 (en) 2010-04-07 2013-04-16 Apple Inc. Device, method, and graphical user interface for managing folders
KR101657543B1 (ko) 2010-06-14 2016-09-22 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
EP2378406B1 (en) 2010-04-13 2018-08-22 LG Electronics Inc. Mobile terminal and method of controlling operation of the mobile terminal
US8698766B2 (en) 2010-04-22 2014-04-15 Maxim Integrated Products, Inc. System integration of tactile feedback and touchscreen controller for near-zero latency haptics playout
US9678569B2 (en) 2010-04-23 2017-06-13 Immersion Corporation Systems and methods for providing haptic effects
US8671504B2 (en) 2010-04-28 2014-03-18 Denso Corporation Cover of vehicle optical sensor and vehicle optical sensor device
US20110271181A1 (en) 2010-04-28 2011-11-03 Acer Incorporated Screen unlocking method and electronic apparatus thereof
US20110267294A1 (en) 2010-04-29 2011-11-03 Nokia Corporation Apparatus and method for providing tactile feedback for user
US20110267181A1 (en) 2010-04-29 2011-11-03 Nokia Corporation Apparatus and method for providing tactile feedback for user
US20110270358A1 (en) 2010-04-30 2011-11-03 Medtronic, Inc. Implantable medical device programming using gesture-based control
US8451255B2 (en) 2010-05-14 2013-05-28 Arnett Ryan Weber Method of providing tactile feedback and electronic device
EP2386935B1 (en) 2010-05-14 2015-02-11 BlackBerry Limited Method of providing tactile feedback and electronic device
US8466889B2 (en) 2010-05-14 2013-06-18 Research In Motion Limited Method of providing tactile feedback and electronic device
US20120327006A1 (en) 2010-05-21 2012-12-27 Disney Enterprises, Inc. Using tactile feedback to provide spatial awareness
US9749176B2 (en) 2010-06-29 2017-08-29 Nokia Technologies Oy Systems, methods, and apparatuses for providing adaptive user notifications
US8798534B2 (en) 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
US20120016879A1 (en) 2010-07-16 2012-01-19 Research In Motion Limited Systems and methods of user interface for image display
JP2012027875A (ja) 2010-07-28 2012-02-09 Sony Corp 電子機器、処理方法及びプログラム
US8766984B2 (en) 2010-08-20 2014-07-01 Qualcomm Incorporated Graphics rendering methods for satisfying minimum frame rate requirements
US9069760B2 (en) 2010-08-24 2015-06-30 Lg Electronics Inc. Mobile terminal and controlling method thereof
JP5656511B2 (ja) 2010-08-26 2015-01-21 京セラ株式会社 表示装置
US8676274B2 (en) 2010-08-27 2014-03-18 At&T Intellectual Property I, L.P. Devices, systems, and methods for notification of events on a wireless communication device
FR2964761B1 (fr) 2010-09-14 2012-08-31 Thales Sa Dispositif d'interaction haptique et procede de generation d'effets haptiques et sonores
EP2434387B1 (en) 2010-09-24 2020-01-08 2236008 Ontario Inc. Portable electronic device and method therefor
DE102010048745A1 (de) 2010-10-16 2012-04-19 Volkswagen Ag Benutzerschnittstelle und Verfahren zum Bedienen einer Benutzerschnittstelle
US20120105367A1 (en) 2010-11-01 2012-05-03 Impress Inc. Methods of using tactile force sensing for intuitive user interface
US8914743B2 (en) 2010-11-12 2014-12-16 Apple Inc. Device, method, and graphical user interface for navigating a list of identifiers
JPWO2012081182A1 (ja) 2010-12-13 2014-05-22 パナソニック株式会社 電子機器
US9223471B2 (en) 2010-12-28 2015-12-29 Microsoft Technology Licensing, Llc Touch screen control
US9052758B2 (en) 2010-12-31 2015-06-09 Blackberry Limited System and method for detecting accidental peripheral device disconnection
KR101785323B1 (ko) 2011-01-05 2017-10-17 삼성전자주식회사 휴대 단말기의 사용자 인터페이스 제공 방법 및 장치
CN102609078B (zh) 2011-01-20 2014-12-31 宏达国际电子股份有限公司 具有触觉反馈的电子装置及提供触觉反馈的方法
US8615511B2 (en) 2011-01-22 2013-12-24 Operational Transparency LLC Data visualization interface
WO2012108203A1 (ja) 2011-02-10 2012-08-16 京セラ株式会社 電子機器及び電子機器の制御方法
WO2012111058A1 (ja) 2011-02-15 2012-08-23 Necカシオモバイルコミュニケーションズ株式会社 携帯端末装置およびその画面表示方法
CN102651920A (zh) 2011-02-24 2012-08-29 腾讯科技(深圳)有限公司 基于移动通信终端的操作提示方法及移动通信终端
US8749349B2 (en) * 2011-03-11 2014-06-10 Nokia Corporation Method apparatus and computer program
WO2012135373A2 (en) 2011-04-01 2012-10-04 Analog Devices, Inc. A dedicated user interface controller for feedback responses
JPWO2012137946A1 (ja) 2011-04-06 2014-07-28 京セラ株式会社 電子機器、操作制御方法および操作制御プログラム
US9448713B2 (en) 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
US9218727B2 (en) 2011-05-12 2015-12-22 Apple Inc. Vibration in portable devices
US8717151B2 (en) 2011-05-13 2014-05-06 Qualcomm Incorporated Devices and methods for presenting information to a user on a tactile output surface of a mobile device
US20120306790A1 (en) 2011-06-02 2012-12-06 Electronics And Telecommunications Research Institute Film type apparatus for providing haptic feedback and touch screen including the same
US9383820B2 (en) 2011-06-03 2016-07-05 Apple Inc. Custom vibration patterns
US9083821B2 (en) 2011-06-03 2015-07-14 Apple Inc. Converting audio to haptic feedback in an electronic device
KR102023801B1 (ko) * 2011-06-05 2019-09-20 애플 인크. 다수의 애플리케이션들로부터 수신된 통지들을 디스플레이하기 위한 시스템들 및 방법들
EP2535134B1 (de) 2011-06-16 2018-01-24 Klingelnberg AG Verfahren zum Vorverzahnen mehrerer unterschiedlicher Kegelräder
CN102330123A (zh) 2011-07-27 2012-01-25 太仓市金鹿电镀有限公司 一种连续镀金工艺
US20130031507A1 (en) 2011-07-28 2013-01-31 Moses George Systems and methods for scrolling a document by providing visual feedback of a transition between portions of the document
US9880640B2 (en) 2011-10-06 2018-01-30 Amazon Technologies, Inc. Multi-dimensional interface
GB2495486A (en) 2011-10-07 2013-04-17 Hiwave Technologies Uk Ltd Contextual haptic feedback in response to touch input
JP5899845B2 (ja) 2011-11-15 2016-04-06 セイコーエプソン株式会社 画像記録装置
US9223472B2 (en) 2011-12-22 2015-12-29 Microsoft Technology Licensing, Llc Closing applications
KR101919617B1 (ko) 2011-12-27 2018-11-16 엘지전자 주식회사 어포던스와 인터랙션이 강화된 사용자 인터페이스
US9032385B2 (en) 2011-12-28 2015-05-12 Lg Electronics Inc. Mobile terminal and control method thereof
US8812994B2 (en) * 2011-12-29 2014-08-19 Apple Inc. Device, method, and graphical user interface for configuring restricted interaction with a user interface
US9092953B1 (en) 2012-01-24 2015-07-28 Bruce J. P. Mortimer System and method for providing a remote haptic stimulus
JP5590345B2 (ja) * 2012-02-01 2014-09-17 シャープ株式会社 入出力装置、入出力方法、及び入出力プログラム
US9411423B2 (en) 2012-02-08 2016-08-09 Immersion Corporation Method and apparatus for haptic flex gesturing
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
US9898119B2 (en) 2012-02-20 2018-02-20 Sony Mobile Communications Inc. Touch screen interface with feedback
CN102622175B (zh) 2012-02-24 2019-03-12 中兴通讯股份有限公司 一种在触摸屏设备上新建文件夹的方法及终端
US20130222224A1 (en) * 2012-02-24 2013-08-29 Marcus Eriksson Device, System and Method for Generating Display Data
US20130225300A1 (en) 2012-02-28 2013-08-29 Timothy J. Brinlee Apparatus for personalized gaming environment
US20130234929A1 (en) 2012-03-07 2013-09-12 Evernote Corporation Adapting mobile user interface to unfavorable usage conditions
US9247525B2 (en) 2012-03-16 2016-01-26 Qualcomm Incorporated Systems and methods for providing notifications
US9934713B2 (en) 2012-03-28 2018-04-03 Qualcomm Incorporated Multifunction wristband
US8881269B2 (en) 2012-03-31 2014-11-04 Apple Inc. Device, method, and graphical user interface for integrating recognition of handwriting gestures with a screen reader
EP2839366A4 (en) 2012-04-18 2016-05-11 Nokia Technologies Oy DISPLAY DEVICE WITH HAPTIC RETURN
JP5987443B2 (ja) 2012-04-19 2016-09-07 富士通株式会社 操作動作検出装置、操作動作検出方法、及びプログラム
WO2013161163A1 (ja) 2012-04-27 2013-10-31 パナソニック株式会社 触感呈示装置、触感呈示方法、駆動信号生成装置および駆動信号生成方法
US20130290442A1 (en) 2012-04-30 2013-10-31 Emoze Ltd. Downloaded attachments flow
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
EP2847659B1 (en) 2012-05-09 2019-09-04 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to a gesture
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN109298789B (zh) 2012-05-09 2021-12-31 苹果公司 用于针对激活状态提供反馈的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
AU2013259613B2 (en) 2012-05-09 2016-07-21 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
KR101806350B1 (ko) 2012-05-09 2017-12-07 애플 인크. 사용자 인터페이스 객체를 선택하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
US9459781B2 (en) 2012-05-09 2016-10-04 Apple Inc. Context-specific user interfaces for displaying animated sequences
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169305A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Haptic feedback with improved ouput response
US10097496B2 (en) 2012-05-09 2018-10-09 Apple Inc. Electronic mail user interface
US20130300684A1 (en) 2012-05-11 2013-11-14 Samsung Electronics Co. Ltd. Apparatus and method for executing multi applications
US8570296B2 (en) 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US9891709B2 (en) 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
JP6023879B2 (ja) 2012-05-18 2016-11-09 アップル インコーポレイテッド 指紋センサ入力に基づくユーザインタフェースを操作するための機器、方法、及びグラフィカルユーザインタ−フェース
US20130318437A1 (en) 2012-05-22 2013-11-28 Samsung Electronics Co., Ltd. Method for providing ui and portable apparatus applying the same
US9348607B2 (en) 2012-06-07 2016-05-24 Apple Inc. Quiet hours for notifications
KR101305735B1 (ko) 2012-06-15 2013-09-06 성균관대학교산학협력단 촉각 효과의 제공 방법 및 장치
US8712383B1 (en) * 2012-06-21 2014-04-29 Google Inc. Tactile output device for computing device notifications
US8886576B1 (en) * 2012-06-22 2014-11-11 Google Inc. Automatic label suggestions for albums based on machine learning
US9641239B2 (en) 2012-06-22 2017-05-02 Fitbit, Inc. Adaptive data transfer using bluetooth
DE102012211163A1 (de) 2012-06-28 2014-06-26 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Empfangen einer Eingabe auf einem berührungsempfindlichen Feld
US20140002376A1 (en) 2012-06-29 2014-01-02 Immersion Corporation Method and apparatus for providing shortcut touch gestures with haptic feedback
US20140007005A1 (en) 2012-06-29 2014-01-02 Evernote Corporation Scrollable calendar with combined date and time controls
US9110562B1 (en) 2012-07-26 2015-08-18 Google Inc. Snapping a pointing-indicator to a scene boundary of a video
WO2014021602A2 (ko) 2012-07-31 2014-02-06 인텔렉추얼디스커버리 주식회사 착용형 전자 장치 및 그의 제어 방법
US9256366B2 (en) 2012-08-14 2016-02-09 Google Technology Holdings LLC Systems and methods for touch-based two-stage text input
CN102843681A (zh) 2012-08-15 2012-12-26 腾讯科技(深圳)有限公司 信息交互方法和装置
US9280206B2 (en) 2012-08-20 2016-03-08 Samsung Electronics Co., Ltd. System and method for perceiving images with multimodal feedback
US8896524B2 (en) * 2012-08-24 2014-11-25 Immersion Corporation Context-dependent haptic confirmation system
EP2703947B1 (de) 2012-08-27 2019-02-27 Siemens Aktiengesellschaft Bedieneinrichtung für ein technisches System
KR102008916B1 (ko) 2012-09-07 2019-08-08 삼성전자주식회사 미확인 콘텐츠 표시 방법 및 그 전자 장치
US10042603B2 (en) 2012-09-20 2018-08-07 Samsung Electronics Co., Ltd. Context aware service provision method and apparatus of user device
US10671165B2 (en) 2012-09-25 2020-06-02 Nokia Technologies Oy Method and display device with tactile feedback
US20150234464A1 (en) 2012-09-28 2015-08-20 Nokia Technologies Oy Apparatus displaying animated image combined with tactile output
US9178509B2 (en) 2012-09-28 2015-11-03 Apple Inc. Ultra low travel keyboard
US8743072B2 (en) 2012-09-28 2014-06-03 Lg Electronics Inc. Display device and control method thereof
US9196134B2 (en) 2012-10-31 2015-11-24 Immersion Corporation Method and apparatus for simulating surface features on a user interface with haptic effects
CN103809884B (zh) 2012-11-07 2019-02-05 联想(北京)有限公司 一种触控反馈方法、触控反馈屏及电子设备
IN2015DN03804A (zh) 2012-11-20 2015-10-02 Jolla Oy
US9836150B2 (en) * 2012-11-20 2017-12-05 Immersion Corporation System and method for feedforward and feedback with haptic effects
WO2014083751A1 (ja) 2012-11-30 2014-06-05 パナソニック株式会社 触感呈示装置および触感呈示方法
CN103843842A (zh) 2012-12-03 2014-06-11 青岛艾华隆生物科技有限公司 一种高效无毒农药及其制备方法
KR102091077B1 (ko) 2012-12-14 2020-04-14 삼성전자주식회사 입력 유닛의 피드백을 제어하는 휴대 단말 및 방법과, 이를 제공하는 상기 입력 유닛 및 방법
JP6094198B2 (ja) 2012-12-17 2017-03-15 カシオ計算機株式会社 携帯型電子装置、通信システム、報知動作制御方法、及び、プログラム
CN103869960B (zh) 2012-12-18 2018-02-23 富泰华工业(深圳)有限公司 触感反馈系统及其提供触感反馈的方法
US9202350B2 (en) 2012-12-19 2015-12-01 Nokia Technologies Oy User interfaces and associated methods
US9223403B2 (en) 2012-12-19 2015-12-29 Panasonic Intellectual Property Management Co., Ltd. Tactile input and output device
US9128523B2 (en) 2012-12-20 2015-09-08 Amazon Technologies, Inc. Dynamically generating haptic effects from audio data
US9213478B2 (en) 2012-12-21 2015-12-15 Business Objects Software Visualization interaction design for cross-platform utilization
US9432323B2 (en) 2012-12-21 2016-08-30 Blackberry Limited Method, system and apparatus for providing notifications for different workspaces
US9323327B2 (en) 2012-12-22 2016-04-26 Intel Corporation System and method for providing tactile feedback
US9285880B2 (en) 2012-12-26 2016-03-15 Panasonic Intellectual Property Management Co., Ltd. Touch panel device and method of controlling a touch panel device
AU2013368441B2 (en) * 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
WO2014104452A1 (ko) 2012-12-31 2014-07-03 엘지전자 주식회사 진동 발생 장치 및 방법
US9417740B2 (en) 2013-01-03 2016-08-16 Nokia Technologies Oy Capacitive sensing apparatus with a shield electrode
KR20140090318A (ko) 2013-01-07 2014-07-17 삼성전자주식회사 햅틱 기반 카메라 운용 지원 방법 및 이를 지원하는 단말기
US9098991B2 (en) 2013-01-15 2015-08-04 Fitbit, Inc. Portable monitoring devices and methods of operating the same
US9088668B1 (en) 2013-01-24 2015-07-21 Amazon Technologies, Inc. Configuring notification intensity level using device sensors
US9699130B2 (en) 2013-01-24 2017-07-04 International Business Machines Corporation User interface with recipient status indication
KR20140095712A (ko) 2013-01-25 2014-08-04 삼성전자주식회사 알림 제어 방법 및 그 전자 장치
KR20140098384A (ko) * 2013-01-31 2014-08-08 삼성전자주식회사 복수의 터치스크린을 가지는 휴대 장치 및 복수의 터치스크린을 가지는 휴대 장치의 사운드 출력방법
KR102087005B1 (ko) 2013-01-31 2020-03-11 삼성전자 주식회사 페이지 검색 방법 및 이를 지원하는 단말기
US10775888B2 (en) 2013-02-15 2020-09-15 Facebook, Inc. Method and system for integrating haptic feedback into portable electronic devices
US20140232679A1 (en) 2013-02-17 2014-08-21 Microsoft Corporation Systems and methods to protect against inadvertant actuation of virtual buttons on touch surfaces
WO2014128021A1 (en) 2013-02-19 2014-08-28 Thomson Licensing Method and apparatus for notifying missed events
US10504339B2 (en) 2013-02-21 2019-12-10 Immersion Corporation Mobile device with instinctive alerts
KR102104910B1 (ko) 2013-02-28 2020-04-27 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
US8754757B1 (en) 2013-03-05 2014-06-17 Immersion Corporation Automatic fitting of haptic effects
US9854084B2 (en) 2013-03-06 2017-12-26 Google Llc Contextual alarm and notification management
US10795528B2 (en) 2013-03-06 2020-10-06 Nuance Communications, Inc. Task assistant having multiple visual displays
US9632986B2 (en) 2013-03-14 2017-04-25 Aol Inc. Systems and methods for horizontally paginating HTML content
US9436282B2 (en) 2013-03-14 2016-09-06 Immersion Corporation Contactor-based haptic feedback generation
US9189098B2 (en) 2013-03-14 2015-11-17 Immersion Corporation Systems and methods for syncing haptic feedback calls
US20140267076A1 (en) 2013-03-15 2014-09-18 Immersion Corporation Systems and Methods for Parameter Modification of Haptic Effects
US9471200B2 (en) 2013-03-15 2016-10-18 Apple Inc. Device, method, and graphical user interface for organizing and presenting a collection of media items
US20160063496A1 (en) 2013-03-15 2016-03-03 Vijay Kumar Royyuru Remote Secure Transactions
KR101666393B1 (ko) 2013-03-27 2016-10-14 한국전자통신연구원 음향효과를 이용한 촉각효과 재생 장치 및 방법
US20140292668A1 (en) 2013-04-01 2014-10-02 Lenovo (Singapore) Pte. Ltd. Touch input device haptic feedback
KR102115397B1 (ko) 2013-04-01 2020-05-26 삼성전자주식회사 휴대 장치 및 휴대 장치의 재생목록 표시 방법
US20140292706A1 (en) 2013-04-01 2014-10-02 Lenovo (Singapore) Pte. Ltd. Non-visual touch input targeting
US9507495B2 (en) 2013-04-03 2016-11-29 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9997032B2 (en) 2013-04-09 2018-06-12 Immersion Corporation Offline haptic conversion system
US9075435B1 (en) 2013-04-22 2015-07-07 Amazon Technologies, Inc. Context-aware notifications
JP6131091B2 (ja) 2013-04-22 2017-05-17 シャープ株式会社 情報処理装置および制御プログラム
JP6297787B2 (ja) 2013-04-25 2018-03-20 京セラ株式会社 携帯電子機器
US9405369B2 (en) 2013-04-26 2016-08-02 Immersion Corporation, Inc. Simulation of tangible user interface interactions and gestures using array of haptic cells
US9939900B2 (en) 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US20140329567A1 (en) 2013-05-01 2014-11-06 Elwha Llc Mobile device with automatic volume control
US20140331162A1 (en) 2013-05-06 2014-11-06 Sap Ag Quick time-related data entry
US20140340316A1 (en) 2013-05-14 2014-11-20 Microsoft Corporation Feedback for Gestures
JP6157215B2 (ja) 2013-05-23 2017-07-05 キヤノン株式会社 表示制御装置及びその制御方法
US9274603B2 (en) 2013-05-24 2016-03-01 Immersion Corporation Method and apparatus to provide haptic feedback based on media content and one or more external parameters
KR102161230B1 (ko) 2013-05-28 2020-09-29 삼성전자주식회사 멀티미디어 콘텐츠 검색을 위한 사용자 인터페이스 방법 및 장치
US20140358709A1 (en) 2013-05-31 2014-12-04 Mastercard Asia Pacific Pte. Ltd. Card Present Transaction Authentication by Short Messaging Service
DE102013210522A1 (de) 2013-06-06 2014-12-11 Aktiebolaget Skf Wälzlager
US9103681B2 (en) * 2013-06-08 2015-08-11 Apple Inc. Navigation application with several navigation modes
JP6093659B2 (ja) 2013-06-24 2017-03-08 シャープ株式会社 情報処理装置、および情報処理プログラム
US9804675B2 (en) 2013-06-27 2017-10-31 Elwha Llc Tactile feedback generated by non-linear interaction of surface acoustic waves
US9729730B2 (en) 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
JP2015015600A (ja) 2013-07-04 2015-01-22 シャープ株式会社 携帯端末、制御方法
US10359857B2 (en) 2013-07-18 2019-07-23 Immersion Corporation Usable hidden controls with haptic feedback
US10037081B2 (en) 2013-08-12 2018-07-31 Immersion Corporation Systems and methods for haptic fiddling
KR101375613B1 (ko) 2013-08-14 2014-03-20 건국대학교 산학협력단 레이저를 이용하여 촉감을 제공하는 전자 장치 및 이를 이용한 방법
US9124720B2 (en) 2013-08-19 2015-09-01 Lisa Marie West Driving cannot text noncontrolling cell phone app system and method
US20150054727A1 (en) * 2013-08-23 2015-02-26 Immersion Corporation Haptically enabled viewing of sporting events
US9898085B2 (en) 2013-09-06 2018-02-20 Immersion Corporation Haptic conversion system using segmenting and combining
US9652945B2 (en) 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9401079B2 (en) 2013-09-06 2016-07-26 Immersion Corporation Method and apparatus of converting control tracks for providing haptic feedback
US9514620B2 (en) 2013-09-06 2016-12-06 Immersion Corporation Spatialized haptic feedback based on dynamically scaled values
US9558637B2 (en) 2013-09-10 2017-01-31 Immersion Corporation Systems and methods for performing haptic conversion
JP6127853B2 (ja) 2013-09-13 2017-05-17 富士通株式会社 情報処理装置、方法及びプログラム
US20150078586A1 (en) 2013-09-16 2015-03-19 Amazon Technologies, Inc. User input with fingerprint sensor
US9892200B2 (en) 2013-09-18 2018-02-13 Ebay Inc. Location-based and alter-ego queries
US9553872B2 (en) 2013-09-20 2017-01-24 Verizon Patent And Licensing Inc. Method and system for providing zero sign on user authentication
US9213408B2 (en) * 2013-10-08 2015-12-15 Immersion Corporation Generating haptic effects while minimizing cascading
US20150103015A1 (en) * 2013-10-10 2015-04-16 Blackberry Limited Devices and methods for generating tactile feedback
US9430796B1 (en) 2013-10-16 2016-08-30 Google Inc. Direct purchase from user-received advertisement
GB2519558A (en) 2013-10-24 2015-04-29 Ibm Touchscreen device with motion sensor
CN104599121B (zh) 2013-10-30 2017-04-12 腾讯科技(深圳)有限公司 一种信息传输方法、装置和系统
US9189932B2 (en) 2013-11-06 2015-11-17 Andrew Kerdemelidis Haptic notification apparatus and method
KR101504237B1 (ko) 2013-11-15 2015-03-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9639158B2 (en) 2013-11-26 2017-05-02 Immersion Corporation Systems and methods for generating friction and vibrotactile effects
US9671826B2 (en) 2013-11-27 2017-06-06 Immersion Corporation Method and apparatus of body-mediated digital content transfer and haptic feedback
US9411422B1 (en) 2013-12-13 2016-08-09 Audible, Inc. User interaction with content markers
GB2521225A (en) 2013-12-16 2015-06-17 Vicast Ltd A method and apparatus for cataloguing data items
KR102225031B1 (ko) 2014-01-14 2021-03-09 엘지전자 주식회사 단말기 및 그 동작 방법
US9766852B2 (en) 2014-01-15 2017-09-19 Lenovo (Singapore) Pte. Ltd. Non-audio notification of audible events
WO2015116056A1 (en) 2014-01-29 2015-08-06 Hewlett-Packard Development Company, L.P. Force feedback
US10726018B2 (en) 2014-02-10 2020-07-28 Microsoft Technology Licensing, Llc Semantic matching and annotation of attributes
EP2908236A1 (en) 2014-02-13 2015-08-19 Samsung Electronics Co., Ltd Electronic device and index display method thereof
US9836123B2 (en) 2014-02-13 2017-12-05 Mide Technology Corporation Bussed haptic actuator system and method
KR102302439B1 (ko) 2014-02-21 2021-09-15 삼성전자주식회사 전자 장치
KR102102647B1 (ko) 2014-02-21 2020-04-21 엘지전자 주식회사 무선 리시버 및 그 제어 방법
JP2015166890A (ja) 2014-03-03 2015-09-24 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
KR102335217B1 (ko) 2014-03-05 2021-12-03 삼성전자 주식회사 전류 또는 전력 소모량을 이용한 애플리케이션 프로세서의 구동 방법 및 모바일 장치
US10417570B2 (en) 2014-03-06 2019-09-17 Verizon Patent And Licensing Inc. Systems and methods for probabilistic semantic sensing in a sensory network
JP2015170173A (ja) 2014-03-07 2015-09-28 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP6381240B2 (ja) 2014-03-14 2018-08-29 キヤノン株式会社 電子機器、触感制御方法及びプログラム
US9639231B2 (en) 2014-03-17 2017-05-02 Google Inc. Adjusting information depth based on user's attention
CN111399646A (zh) 2014-03-21 2020-07-10 意美森公司 用于基于力的对象操纵和触觉检测的系统、方法和计算机可读介质
CN104932681B (zh) 2014-03-21 2019-09-20 意美森公司 触觉效果的自动调整
JP2015185137A (ja) 2014-03-26 2015-10-22 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR102243680B1 (ko) 2014-04-07 2021-04-23 엘지전자 주식회사 투명 플렉서블 디스플레이 장치 및 그 장치의 제어 방법
KR20150118813A (ko) 2014-04-15 2015-10-23 삼성전자주식회사 햅틱 정보 운용 방법 및 이를 지원하는 전자 장치
US10162505B2 (en) * 2014-04-17 2018-12-25 Blackberry Limited System and method for enabling customized notifications on an electronic device
JP6322830B2 (ja) 2014-05-09 2018-05-16 任天堂株式会社 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法
US9507420B2 (en) 2014-05-13 2016-11-29 Qualcomm Incorporated System and method for providing haptic feedback to assist in capturing images
CN110009315A (zh) 2014-05-15 2019-07-12 阿里巴巴集团控股有限公司 一种支付方法、支付页面的展示方法及装置
KR102204554B1 (ko) 2014-05-27 2021-01-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US11343335B2 (en) * 2014-05-29 2022-05-24 Apple Inc. Message processing by subscriber app prior to message forwarding
US9733880B2 (en) 2014-05-30 2017-08-15 Immersion Corporation Haptic notification manager
US9898162B2 (en) 2014-05-30 2018-02-20 Apple Inc. Swiping functions for messaging applications
US9990129B2 (en) 2014-05-30 2018-06-05 Apple Inc. Continuity of application across devices
US9971500B2 (en) 2014-06-01 2018-05-15 Apple Inc. Displaying options, assigning notification, ignoring messages, and simultaneous user interface displays in a messaging application
US9588586B2 (en) 2014-06-09 2017-03-07 Immersion Corporation Programmable haptic devices and methods for modifying haptic strength based on perspective and/or proximity
US9648062B2 (en) 2014-06-12 2017-05-09 Apple Inc. Systems and methods for multitasking on an electronic device with a touch-sensitive display
US20140320402A1 (en) 2014-07-14 2014-10-30 Immersion Corporation Self calibration for haptic devices
US9710063B2 (en) 2014-07-21 2017-07-18 Immersion Corporation Systems and methods for determining haptic effects for multi-touch input
WO2016017978A1 (en) 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Device and method for performing functions
US20160036996A1 (en) 2014-08-02 2016-02-04 Sony Corporation Electronic device with static electric field sensor and related method
DE202015005999U1 (de) 2014-08-26 2015-11-26 Apple Inc. Benutzerschnittstelle zum Einschränken von Meldungen und Alarmen
KR102373337B1 (ko) 2014-09-02 2022-03-11 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
US9659482B2 (en) 2014-09-02 2017-05-23 Apple Inc. Context-based alerts for an electronic device
KR102143310B1 (ko) 2014-09-02 2020-08-28 애플 인크. 햅틱 통지
WO2016036509A1 (en) 2014-09-02 2016-03-10 Apple Inc. Electronic mail user interface
US9612722B2 (en) 2014-10-31 2017-04-04 Microsoft Technology Licensing, Llc Facilitating interaction between users and their environments using sounds
GB2532766A (en) 2014-11-27 2016-06-01 Ibm Interaction with a graph for device control
KR101666532B1 (ko) 2014-12-01 2016-10-14 김정훈 실시간 진동 피드백을 제공하는 진동 마우스
US10764424B2 (en) 2014-12-05 2020-09-01 Microsoft Technology Licensing, Llc Intelligent digital assistant alarm system for application collaboration with notification presentation
KR102230523B1 (ko) * 2014-12-08 2021-03-19 신상현 이동 단말기
CN104536643B (zh) 2014-12-10 2018-05-29 广东欧珀移动通信有限公司 一种图标拖动方法及终端
US9665960B1 (en) 2014-12-22 2017-05-30 Amazon Technologies, Inc. Image-based item location identification
GB2533572A (en) 2014-12-22 2016-06-29 Nokia Technologies Oy Haptic output methods and devices
US9466188B2 (en) * 2014-12-24 2016-10-11 Immersion Corporation Systems and methods for haptically-enabled alarms
US9851805B2 (en) 2014-12-24 2017-12-26 Immersion Corporation Systems and methods for haptically-enabled holders
DE102015200036A1 (de) 2015-01-05 2016-07-07 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung in einem Kraftfahrzeug zur Eingabe von Daten mit zwei Eingabearten und haptischer Rückkopplung
US9794402B2 (en) 2015-01-12 2017-10-17 Apple Inc. Updating device behavior based on user behavior
US9619034B2 (en) 2015-02-25 2017-04-11 Immersion Corporation Overlaying of haptic effects
US9600094B2 (en) 2015-03-04 2017-03-21 Lenovo (Singapore) Pte. Ltd. Apparatus, method, and program product for directing motion of a writing device
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9542037B2 (en) 2015-03-08 2017-01-10 Apple Inc. Device, method, and user interface for processing intensity of touch contacts
US9788138B2 (en) 2015-04-03 2017-10-10 Snaptrack, Inc. Methods and systems of allocating application functions to motion-correlated devices
US10466861B2 (en) 2015-04-21 2019-11-05 Apple Inc. Adaptive user interfaces
WO2016171848A1 (en) 2015-04-23 2016-10-27 Thomson Licensing Vibration signatures for intelligent alerts
KR102307303B1 (ko) 2015-05-20 2021-09-30 엘지전자 주식회사 이동단말기 및 그 제어방법
US9844984B2 (en) * 2015-05-22 2017-12-19 General Motors Llc Vehicle tire gauge systems
KR102423184B1 (ko) 2015-05-29 2022-07-21 삼성전자주식회사 화면 출력 방법 및 이를 지원하는 전자 장치
US20160357354A1 (en) * 2015-06-04 2016-12-08 Apple Inc. Condition-based activation of a user interface
US9529500B1 (en) 2015-06-05 2016-12-27 Apple Inc. Application recommendation based on detected triggering events
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10275116B2 (en) * 2015-06-07 2019-04-30 Apple Inc. Browser with docked tabs
US9658704B2 (en) 2015-06-10 2017-05-23 Apple Inc. Devices and methods for manipulating user interfaces with a stylus
US10055048B2 (en) 2015-07-31 2018-08-21 Apple Inc. Noise adaptive force touch
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10034129B1 (en) 2015-08-24 2018-07-24 Groupon, Inc. Mobile proximity based messages
US11099650B1 (en) 2015-09-07 2021-08-24 Oliver Markus Haynold Camera with improved shutter button
US9928029B2 (en) 2015-09-08 2018-03-27 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback
UA118951U (uk) 2015-09-17 2017-09-11 Микола Сергійович Лещенко Спосіб представлення контенту користувачу
US20170083096A1 (en) 2015-09-22 2017-03-23 Immersion Corporation Pressure-based haptics
KR101708319B1 (ko) 2015-10-12 2017-02-20 엘지전자 주식회사 와치 타입 단말기
US20170185729A1 (en) 2015-11-18 2017-06-29 Srinidhi Boray Methods and systems of a hyperbolic-dirac-net-based bioingine platform and ensemble of applications
KR102521214B1 (ko) 2016-01-19 2023-04-13 삼성전자주식회사 사용자 인터페이스를 표시하는 방법 및 이를 지원하는 전자 장치
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK180122B1 (en) 2016-06-12 2020-05-19 Apple Inc. Devices, methods and graphical user interfaces for providing haptic feedback
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
US11036387B2 (en) 2017-05-16 2021-06-15 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
US10365719B2 (en) 2017-07-26 2019-07-30 Google Llc Haptic feedback of user interface scrolling with synchronized visual animation components
DK179888B1 (en) * 2018-09-11 2019-08-27 Apple Inc. CONTENT-BASED TACTICAL OUTPUTS
US10645294B1 (en) 2019-05-06 2020-05-05 Apple Inc. User interfaces for capturing and managing visual media

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101375582A (zh) * 2006-01-19 2009-02-25 高通股份有限公司 将已分类源地址群组与振动模式相关联的方法
CN102484664A (zh) * 2009-08-31 2012-05-30 高通股份有限公司 用于通过使移动装置振动或移动而进行通信的方法和设备
CN102420906A (zh) * 2011-12-01 2012-04-18 华为终端有限公司 提示方法和用户终端
WO2013089294A1 (ko) * 2011-12-15 2013-06-20 엘지전자 주식회사 햅틱 전송 방법 및 그 이동 단말기
US20130316744A1 (en) * 2012-05-27 2013-11-28 Qualcomm Incorporated Notification based on user context

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110869879A (zh) * 2017-06-30 2020-03-06 雷蛇(亚太)私人有限公司 利用力传感器和触觉致动器的可调节触觉反馈
US10901608B2 (en) 2017-07-28 2021-01-26 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for recognizing a screen-off gesture, and storage medium and terminal thereof
WO2019020107A1 (en) * 2017-07-28 2019-01-31 Guangdong Oppo Mobile Telecommunications Corp., Ltd. METHOD FOR RECOGNIZING SCREEN EXTINGUISHING GESTURE, AND ASSOCIATED STORAGE MEDIUM AND TERMINAL
CN107479816A (zh) * 2017-07-28 2017-12-15 广东欧珀移动通信有限公司 黑屏手势的识别方法、装置、存储介质及移动终端
CN107479816B (zh) * 2017-07-28 2019-09-24 Oppo广东移动通信有限公司 黑屏手势的识别方法、装置、存储介质及移动终端
CN111356969A (zh) * 2017-09-21 2020-06-30 贝宝公司 在屏幕上提供触觉反馈
CN109963205A (zh) * 2017-12-25 2019-07-02 上海全土豆文化传播有限公司 多媒体剪辑方法及装置
CN108446007A (zh) * 2018-02-02 2018-08-24 华东师范大学 一种基于手势事件频率学习的手机浏览器功耗节约方法
CN108446007B (zh) * 2018-02-02 2020-11-20 华东师范大学 一种基于手势事件频率学习的手机浏览器功耗节约方法
CN112136127A (zh) * 2018-05-18 2020-12-25 谷歌有限责任公司 用于搜索操作输出元素的动作指示符
CN113678090A (zh) * 2019-04-09 2021-11-19 苹果公司 具有用于无线充电和触觉输出的线圈的电子设备
US11670962B2 (en) * 2019-04-09 2023-06-06 Apple Inc. Electronic device with coil for wireless charging and haptic outputs
CN110231869A (zh) * 2019-06-11 2019-09-13 Oppo广东移动通信有限公司 一种触摸电极的控制方法、装置、存储介质及电子设备
CN114077337A (zh) * 2020-08-18 2022-02-22 联咏科技股份有限公司 力感测方法、能够促进力感测的电子模块和运算设备
CN113323515A (zh) * 2021-06-07 2021-08-31 北京京东方技术开发有限公司 基于触觉反馈的密码输出装置、身份认证装置及其方法
CN113323515B (zh) * 2021-06-07 2022-07-22 北京京东方技术开发有限公司 基于触觉反馈的密码输出装置、身份认证装置及其方法
CN115079915A (zh) * 2022-07-19 2022-09-20 荣耀终端有限公司 日历视图的显示方法、电子设备及可读存储介质

Also Published As

Publication number Publication date
US20160062464A1 (en) 2016-03-03
KR102056298B1 (ko) 2019-12-16
JP2021101350A (ja) 2021-07-08
CN115700434A (zh) 2023-02-07
AU2020202916B9 (en) 2021-07-08
CN115756151A (zh) 2023-03-07
US20160063825A1 (en) 2016-03-03
US20210192904A1 (en) 2021-06-24
JP6538825B2 (ja) 2019-07-03
CN115756154A (zh) 2023-03-07
AU2018202796B2 (en) 2020-03-05
KR20170037664A (ko) 2017-04-04
CN115963922A (zh) 2023-04-14
JP2017531850A (ja) 2017-10-26
KR20220032655A (ko) 2022-03-15
US10417879B2 (en) 2019-09-17
US9928699B2 (en) 2018-03-27
US9830784B2 (en) 2017-11-28
KR102174122B1 (ko) 2020-11-04
US9542820B2 (en) 2017-01-10
WO2016036447A2 (en) 2016-03-10
AU2020202916B2 (en) 2021-07-01
TWI621011B (zh) 2018-04-11
US20160062465A1 (en) 2016-03-03
US20160062466A1 (en) 2016-03-03
AU2021203205B2 (en) 2023-04-13
KR102521953B1 (ko) 2023-04-14
JP2023040093A (ja) 2023-03-22
US20200111334A1 (en) 2020-04-09
JP6849722B2 (ja) 2021-03-24
AU2021203205A1 (en) 2021-06-10
TW201629762A (zh) 2016-08-16
AU2018202796A1 (en) 2018-05-10
US20180082552A1 (en) 2018-03-22
KR20190140095A (ko) 2019-12-18
KR102096146B1 (ko) 2020-04-28
US11790739B2 (en) 2023-10-17
KR20220166376A (ko) 2022-12-16
KR102275700B1 (ko) 2021-07-09
JP7203135B2 (ja) 2023-01-12
US10089840B2 (en) 2018-10-02
AU2015312344A1 (en) 2017-03-09
KR102475306B1 (ko) 2022-12-08
KR102497720B1 (ko) 2023-02-10
TW201712539A (zh) 2017-04-01
EP3964931A1 (en) 2022-03-09
TWI604302B (zh) 2017-11-01
AU2023204608A1 (en) 2023-08-03
KR20230025717A (ko) 2023-02-22
US20160063827A1 (en) 2016-03-03
WO2016036447A4 (en) 2016-07-28
US10504340B2 (en) 2019-12-10
KR20190004845A (ko) 2019-01-14
WO2016036447A3 (en) 2016-06-09
AU2020202916A1 (en) 2020-05-21
US20230351869A1 (en) 2023-11-02
US10977911B2 (en) 2021-04-13
KR20200124779A (ko) 2020-11-03
KR20210087571A (ko) 2021-07-12
US20160063828A1 (en) 2016-03-03
JP2019133693A (ja) 2019-08-08
KR102373337B1 (ko) 2022-03-11
EP3189395A2 (en) 2017-07-12
AU2015312344B2 (en) 2018-04-19

Similar Documents

Publication Publication Date Title
CN106575230A (zh) 用于可变触觉输出的语义框架
CN108762605B (zh) 设备配置用户界面
CN108351750B (zh) 用于处理与触摸输入相关联的强度信息的设备、方法、以及图形用户界面
CN106416210B (zh) 设备之间电话呼叫路由的方法、电子设备和计算机可读存储介质
CN105379234B (zh) 用于提供针对受限的注意力分散情景和非受限的注意力分散情景的不同用户界面的应用网关
CN105183442B (zh) 用于媒体和位置内容的捕获和传输的消息用户界面
CN107430488A (zh) 基于活动的阈值和反馈
CN109690445A (zh) 特殊锁定模式用户界面
CN107636568A (zh) 个性化预测对即时消息的响应
CN108769373A (zh) 用于提供通知并与通知进行交互的设备、方法和图形用户界面
CN108369574A (zh) 智能设备识别
CN107924277A (zh) 用于通过物理手势操纵用户界面的设备、方法和图形用户界面
CN109313748A (zh) 用于更改日历事件时间的设备、方法和图形用户界面
CN109314735A (zh) 用于发起电话呼叫的用户界面
CN110457093A (zh) 用于主动管理通知的设备、方法和图形用户界面
CN110456935A (zh) 用于调整通知的提供的设备和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1236639

Country of ref document: HK