CN111356969A - 在屏幕上提供触觉反馈 - Google Patents

在屏幕上提供触觉反馈 Download PDF

Info

Publication number
CN111356969A
CN111356969A CN201880074686.5A CN201880074686A CN111356969A CN 111356969 A CN111356969 A CN 111356969A CN 201880074686 A CN201880074686 A CN 201880074686A CN 111356969 A CN111356969 A CN 111356969A
Authority
CN
China
Prior art keywords
user activity
computing device
haptic feedback
application
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880074686.5A
Other languages
English (en)
Inventor
吉里·梅德伦
布拉登·克里斯托弗·埃里克森
高塔姆·马丹
阿努什·维什瓦纳特
迈克尔·查尔斯·图巴斯科
田诚
提图斯·沃
卡梅伦·温特·麦克莱斯
大卫·弗莱马特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
PayPal Inc
Original Assignee
PayPal Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by PayPal Inc filed Critical PayPal Inc
Publication of CN111356969A publication Critical patent/CN111356969A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/535—Tracking the activity of the user

Abstract

计算机系统将一个或多个触觉反馈与一个或多个用户活动相关联。计算机系统监视计算设备上的当前用户活动以确定当前用户活动是否对应于一个或多个用户活动中的至少一个用户活动。响应于确定当前用户活动对应于一个或多个用户活动中的第一用户活动，计算机系统使得在计算设备上提供一个或多个触觉反馈中的第一触觉反馈，其中，第一触觉反馈与第一用户活动相关联。

Description

在屏幕上提供触觉反馈
相关申请的交叉引用
本申请是于2017年9月21日递交的美国专利申请No.15/711,094的继续并要求其优先权，该美国专利申请通过引用以其整体合并于此。
技术领域
本公开一般地涉及提供触觉反馈，并且更具体地涉及在电子屏幕上提供触觉反馈。
背景技术
在当今时代，用户在其计算设备和移动设备上拥有越来越多的应用。随着计算设备或移动设备上存在大量应用，企业越来越希望使他们的应用脱颖而出。企业尝试脱颖而出的一些方法是通过创建有趣或独特的徽标、或易记的名称。然而，随着计算设备和移动设备的日益成熟，对于企业而言，识别出能够将其应用与大众应用区分开的其他技术方式可能是有益的。
附图说明
图1示出了根据实施例的触觉反馈系统。
图2是示出根据实施例的图1的触摸程序在识别与一个或多个应用相关联的触觉反馈并且基于与一个或多个应用的联络(engagement)来提供适当触觉反馈时的操作的流程图。
图3是示出根据实施例的图1的触摸程序在识别与用户活动相关联的触觉反馈并且基于识别用户活动来提供适当触觉反馈时的操作的流程图。
图4示出了根据实施例的图1的触觉反馈系统的替代实施例。
图5是根据实施例的基于检测到的与应用的联络而提供的与应用相关联的触觉反馈的图示。
图6是根据实施例的基于检测用户活动而提供的与用户活动相关联的触觉反馈的图示。
图7是示出根据实施例的图1的触觉反馈系统的硬件组件的框图。
具体实施方式
本公开的实施例提供了一种系统、方法和程序产品。计算机系统将一个或多个触觉反馈与一个或多个用户活动相关联。计算机系统监视计算设备上的当前用户活动以确定当前用户活动是否对应于一个或多个用户活动中的至少一个用户活动。响应于确定当前用户活动对应于一个或多个用户活动中的第一用户活动，计算机系统使得在计算设备上提供一个或多个触觉反馈中的第一触觉反馈，其中，第一触觉反馈与第一用户活动相关联。
在示例实施例中，本公开描述了针对以下问题的解决方案：为企业提供将触觉反馈与应用相关联的选项。该解决方案允许用户设备上的应用具有附加表达水平，而不仅仅是应用在用户显示器上的外观。在示例实施例中，本公开描述了包括识别与应用相关联的触觉反馈的解决方案。本公开进一步描述了监视用户活动并且确定用户活动是否在计算设备的显示器上的应用的阈值距离之内。响应于确定所监视的用户活动在计算设备的显示器上的应用的阈值距离之内，本公开进一步描述了向用户提供所识别的触觉反馈。
在示例实施例中，本公开描述了将一个或多个触觉反馈与特定用户活动相关联的解决方案。该解决方案可以被用来提供触觉反馈，例如，阻力(resistance)，这帮助用户避免进行不是他/她最感兴趣的购买，以将用户引导到特定支付选项，或者基于与用户相关联的信息对特定功能进行个性化。在示例实施例中，本公开描述了包括监视用户活动并且确定所监视的用户活动是否对应于一个或多个触觉反馈的解决方案。响应于确定所监视的用户活动不对应于一个或多个触觉反馈，本公开描述了继续监视用户活动的解决方案。响应于确定所监视的用户活动对应于一个或多个触觉反馈，本公开描述了向用户提供所确定的一个或多个触觉反馈的解决方案。
现在将参考附图详细描述本公开的实施例。
图1示出了根据实施例的触觉反馈系统100。在示例实施例中，触觉反馈系统100包括计算设备110，该计算设备110可以经由网络连接到其他计算设备。
在示例实施例中，计算设备110包括触摸程序112、数据库114、应用116、应用118和应用120。
在示例实施例中，应用116、应用118和应用120分别是诸如社交媒体应用、金融应用、web浏览器、或另一类型的应用之类的应用。在示例实施例中，应用116、应用118和应用120分别是不同类型的应用，然而，在其他实施例中，它们可以是相关的应用。
数据库114包括电子内容/信息，其详细描述与一个或多个相应应用相关联的一个或多个触觉反馈。另外，在示例实施例中，数据库114可以包括与一个或多个用户活动相关联的一个或多个触觉反馈。另外，在示例实施例中，数据库114可以包括计算设备110的用户的用户信息，包括与应用116、应用118和应用120中的每个应用相对应的使用信息。针对图2和图3更详细地描述了数据库114。
在示例实施例中，触摸程序112是能够识别与位于计算设备110上的一个或多个应用相关联的一个或多个触觉反馈的程序。在一个或多个实施例中，触摸程序112能够将一个或多个触觉反馈与位于计算设备110上的一个或多个应用相关联。此外，触摸程序112能够监视计算设备110上的用户活动，并且确定用户活动是否在与一个或多个触觉反馈相关联的应用的阈值距离之内。触摸程序112还能够响应于确定用户活动在与一个或多个触觉反馈相关联的应用的阈值距离之内，来向计算设备110的用户提供相关联的一个或多个触觉反馈。
此外，触摸程序112能够识别与用户活动相关联的一个或多个触觉反馈。在一个或多个实施例中，触摸程序112能够将一个或多个触觉反馈与用户活动相关联。另外，触摸程序112能够监视用户活动，并且确定所监视的用户活动是否对应于一个或多个触觉反馈。触摸程序112还能够响应于确定所监视的用户活动对应于一个或多个触觉反馈，来向计算设备110的用户提供相关联的一个或多个触觉反馈。
图2是示出根据实施例的触摸程序112在识别与一个或多个应用相关联的触觉反馈并且基于与一个或多个应用的联络来提供适当触觉反馈时的操作的流程图。
在示例实施例中，触摸程序112识别触觉反馈以与一个或多个应用中的每个应用相关联(步骤202)。在示例实施例中，触摸程序112可以从计算设备110的用户接收输入，该输入详细描述触觉反馈以与一个或多个应用(应用116、应用118和应用120)中的每个应用相关联。在其他实施例中，触摸程序112可以与对应于一个或多个应用中的每个应用的应用服务器进行通信，并且基于由相应应用服务器提供的信息来确定触觉反馈以与每个相应应用相关联。例如，触摸程序112可以从与应用116相关联的应用服务器接收信息，该信息可以传达模拟心跳的振动反馈应当与应用116相关联。触摸程序112然后可以在数据库114中将振动反馈与应用116相关联。
触摸程序112可以监视计算设备110的用户的用户活动(步骤204)。在示例实施例中，监视用户活动可以包括：触摸程序112与计算设备110的操作系统进行通信，以识别显示内容中与计算设备110的用户正在交互的部分。
在示例实施例中，触摸程序112可以确定计算设备110的用户的当前用户活动是否包括位于与触觉反馈相关联的应用的阈值距离之内的活动(决策206)。在示例实施例中，计算设备110的用户的“当前用户活动”可以包括当前正在发生、或在当前时间的阈值时间段内已经发生的用户活动。例如，“当前用户活动”可以包括在过去2秒钟内已经发生的用户活动。此外，在示例实施例中，确定当前用户活动包括位于与触觉反馈相关联的应用的阈值距离之内的活动可以包括：确定计算设备110的用户(例如，通过使用光标)正在悬停在显示内容中与应用相对应的部分(应用图标)上；确定用户正在使用他/她的手指与应用图标进行交互；确定用户正在使用光标或指针在应用图标的阈值距离之内进行导航等等。例如，基于与计算设备110的操作系统的通信，触摸程序112可以通过以下方式来确定计算设备110的用户正在与在计算设备110上显示的内容中与应用116(该应用116对应于第一类型的触觉反馈)相对应的部分进行交互：确定计算设备110的用户已经利用他/她的手指与显示屏中与应用图标相对应的部分进行接触。
在示例实施例中，触摸程序112可以通过将所监视的用户活动与数据库114进行交叉引用，来连续地识别所监视的当前用户活动是否对应于触觉反馈，该数据库114在示例实施例中包括描述一个或多个应用和一个或多个相应触觉反馈的信息。在其他实施例中，触摸程序112可以首先识别与一个或多个相应触觉反馈相关联的应用，并且然后监视用户活动以确定所监视的当前用户活动是否在所识别的应用的阈值距离之内发生。此外，在示例实施例中，每个应用具有相同的相关联阈值距离，而在其他实施例中，每个应用或一些应用可以具有不同的相关联阈值距离，其可以附加地与相应应用相关联地存储在数据库114中。
如果触摸程序112确定计算设备110的当前用户活动不包括位于与触觉反馈相关联的应用的阈值距离之内的活动(决策206，“否”分支)，则触摸程序112如上所述继续监视计算设备110上的用户活动。
如果触摸程序112确定计算设备110的当前用户活动包括位于与触觉反馈相关联的应用的阈值距离之内的活动(决策206，“是”分支)，则触摸程序112提供与相关应用相关联的触觉反馈(步骤208)。在示例实施例中，触摸程序112通过以下方式来提供与相关应用相关联的触觉反馈：利用静电/电振动技术来增加或减小显示屏的部分上的物理阻力，或如下所述提供另一种类型的触觉感知。在示例实施例中，触摸程序112可以改变利用静电技术来改变当用户的手指在计算设备110的显示屏上滑动时遇到的摩擦，该摩擦可以被用来增加或减少由计算设备110的用户感受到的物理阻力。
在一个示例中，诸如应用116之类的应用可以与模拟心跳的触觉反馈相关联。触摸程序112可以利用例如微振动马达来提供触觉反馈，从而在触摸程序112检测到计算设备110的用户已经与计算设备110的显示屏中与应用116的应用图标相对应的部分接触时提供跳动触觉感知。在另一示例中，触摸程序112可以利用静电技术来提供(一个或多个)摩擦点，并且然后以足够高的速度去除(一个或多个)摩擦点，这模拟心跳。在又一示例中，触摸程序112可以利用静电技术，结合提供摩擦点(和去除摩擦点)，从而模拟心跳(或模拟另一种感知)。在该示例中，跳动触觉感知将在计算设备110的显示屏中与应用116的应用图标相对应的部分中向计算设备110的用户提供，而在其他实施例中，跳动触觉感知可以在显示屏内的不同位置或整个计算设备中提供。在另一实施例中，触摸程序112可以利用一个或多个传感器来识别计算设备110的用户的心率，并且进一步利用上述技术来提供模仿计算设备110的用户的心跳的触觉感知。
在另一示例中，诸如应用118之类的应用可以与对应于温度变化的触觉反馈相关联。触摸程序112可以通过例如对计算设备110的某些组件进行超频使得显示屏的某个部分比其他部分更热来提供触觉反馈，从而在触摸程序112检测到计算设备110的用户已经与计算设备110的显示屏中与应用118的应用图标相对应的部分接触时提供温暖温度感知。在该示例中，温暖温度触觉感知将在计算设备110的显示屏中与应用118的应用图标相对应的部分中向计算设备110的用户提供，然而，在其他实施例中，温暖温度触觉感知可以在显示屏内的不同位置或整个计算设备中提供。在该示例中，应用116、应用118和应用120中的每个应用可以具有与其相关联的不同温度，并且因此可以为应用图标提供另一水平的唯一性。
在另一示例中，诸如应用120之类的应用可以与对应于盲文感知的触觉反馈相关联，其中可以将诸如应用名称之类的信息以盲文形式提供给计算设备110的用户。在示例实施例中，触摸程序112可以利用静电技术来提供触觉反馈，以便以如下方式改变在显示屏上遇到的摩擦：模拟当人手指在真实凸起(bump)上滑动时由人手指感觉到的摩擦力。人们会感觉到凸起(真实凸起)，主要是因为横向摩擦力会拉伸并压缩滑动手指上的皮肤。因此，基于该原理，触摸程序112可以利用如上所述的静电技术来在显示屏上创建摩擦点，该摩擦点可以用于以如下方式来提供摩擦：模拟用户的手指在遇到与盲文单词或词组相对应的(一个或多个)实际凸起时会感觉到的摩擦。在一个示例中，在创建(一个或多个)摩擦点时，触摸程序112可以计算期望被渲染的虚拟表面(即，具有盲文凸起的表面)的梯度，确定虚拟表面的梯度与滑动手指的速度的点积，并且使用施加到显示器上的电压与摩擦力的主观强度之间的确定的心理物理关系，来将点积映射到电压。在其他实施例中，触摸程序112可以利用本领域技术人员已知的其他方法。
触摸程序112可以在由触摸程序112检测到计算设备110的用户已经与计算设备110的显示屏中与应用118的应用图标相对应的部分接触时，实现所描述的技术。在该示例中，摩擦点将在计算设备110的显示屏中与应用118的应用图标相对应的部分中向计算设备110的用户提供，然而，在其他实施例中，摩擦点(用于模拟盲文凸起)可以在显示屏内的不同位置或整个显示屏上提供。此外，在其他实施例中，可以响应于在计算设备110上切换“盲文选项”而向计算设备110的用户提供摩擦点。虽然在示例实施例中，触摸程序112利用摩擦点来模拟计算设备110的显示屏上的盲文凸起，但是在其他实施例中，触摸程序112可以利用摩擦点来模拟计算设备110的显示屏上的其他类型的凸起。
上面的示例不是可以通过利用上述技术或技术的组合来提供的触觉感知的详尽列表，并且在一个或多个实施例中，可以通过触摸程序112向计算设备110的用户提供本领域技术人员已知的其他触觉感知。
图3是示出根据实施例的触摸程序112在识别与用户活动相关联的触觉反馈并且基于识别用户活动来提供适当触觉反馈时的操作的流程图。
在示例实施例中，触摸程序112识别触觉反馈以与一个或多个用户活动中的每个用户活动相关联(步骤302)。在示例实施例中，触摸程序112可以从计算设备110的用户接收输入，该输入详细描述触觉反馈以与一个或多个用户活动中的每个用户活动相关联。在其他实施例中，触摸程序112可以基于预定义的规则集合来确定触觉反馈以与用户活动相关联。例如，如果基于分析与计算设备110的用户相关联的金融信息(例如通过与金融应用服务器通信)，触摸程序112确定计算设备110的用户经常在主银行账户中具有低于阈值水平的银行账户余额，则触摸程序112可以将阻力反馈与以下任意用户活动相关联：该任意用户活动与高于一定金额的购买(或替代地，特定类型的购买)相关联。例如，特定类型的购买可以包括在一天内的特定时间(例如，在午夜)进行的购买、对特定物品的购买、从特定商店/商人的购买等。在一个示例中，如果触摸程序112确定(通过与银行服务器或应用服务器进行通信)具体购买将使得用于执行交易的银行帐户中的资金不足(例如，产生透支的帐户)，则触摸程序112可以将附加滑动阻力的触觉反馈(例如，在数据库114中)(通过如上所述的附加阻力)与在显示屏上滑动以进行购买认证的用户活动相关联。类似地，如果触摸程序112确定已经达到信用卡限额，则触摸程序112可以将附加滑动阻力的触觉反馈与在显示屏上滑动以进行购买认证的用户活动相关联。在示例实施例中，触摸程序112确定显示屏中与购买认证图标或界面元素相对应的部分，并且例如通过静电装置将附加滑动阻力添加到计算设备110的显示屏的相应部分。
在另一示例中，触摸程序112可以确定第一支付选项是优选支付选项(通过用户输入或基于监视用户支付习惯)，并且基于确定第一支付选项是优选支付选项，触摸程序112可以将附加滑动阻力的触觉反馈与以下用户活动相关联，该用户活动为在显示屏中与表示对除了第一支付选项之外的支付选项的选择或认证的界面元素相对应的部分上进行滑动。此外，触摸程序112可以针对以下用户活动来减小滑动阻力(如上所述利用静电技术来减小摩擦)，该用户活动为在显示屏中与表示对第一支付选项(优选支付选项)的选择或认证的界面元素相对应的部分上进行滑动。
在进一步实施例中，触摸程序112可以与对应于一个或多个应用(例如，应用116、118和120)的应用服务器进行通信，并且基于由应用服务器提供的信息来确定触觉反馈以与每个相应应用内的一个或多个用户活动相关联。例如，触摸程序112可以从与应用116相关联的应用服务器接收信息，该信息可以传达附加滑动阻力的触觉反馈应当与以下用户活动相关联，该用户活动对应于在(计算设备110的)显示屏中与表示对应用116中的支付的选择或认证的界面元素相对应的部分上进行滑动，因为应用116确定计算设备110的用户的信用过低，或者因为应用116内的未结算余额(outstanding balance)超过特定限额。然后，触摸程序112可以在数据库114中将滑动阻力反馈与在应用116内执行购买的特定用户活动相关联。此外，在替代实施例中，例如基于触摸程序112确定应用116内的未结算余额超过特定限额，触摸程序112可以确定将滑动阻力反馈与在应用116内执行购买的特定活动相关联。
触摸程序112可以监视计算设备110的用户的用户活动(步骤304)。在示例实施例中，监视用户活动可以包括：触摸程序112与计算设备110的操作系统进行通信，以识别显示内容中与计算设备110的用户正在交互的部分。
在示例实施例中，触摸程序112可以确定计算设备110的用户的当前用户活动是否包括与触觉反馈相关联的活动(决策306)。在示例实施例中，如上所述，计算设备110的用户的“当前用户活动”可以包括当前正在发生、或在当前时间的阈值时间段内已经发生的用户活动。例如，“当前用户活动”可以包括在过去2秒钟内已经发生的用户活动。
此外，在示例中，如果触摸程序112将在显示屏中与用于购买认证的界面元素相对应的部分上进行滑动的用户活动与附加滑动阻力的触觉反馈相关联，则触摸程序112可以监视用户活动，其可以包括：确定计算设备110的用户(例如，通过使用光标)正在悬停在显示内容中与界面元素相对应的部分上；确定用户正在使用他/她的手指与界面元素进行交互；确定用户正在使用光标或指针在界面元素的阈值距离之内进行导航等等。参考该示例，基于与计算设备110的操作系统的通信，如果触摸程序112确定计算设备110的用户正在利用他/她的手指与计算设备110上的显示屏中与用于购买元素的界面元素相对应的部分进行交互(或进行滑动)，则触摸程序112可以确定所监视的用户活动对应于与触觉反馈相关联的用户活动。
在示例实施例中，触摸程序112可以通过将所监视的用户活动与数据库114进行交叉引用，来连续地识别所监视的当前用户活动是否对应于触觉反馈，该数据库114在示例实施例中包括描述一个或多个用户活动和一个或多个相应触觉反馈的信息。在其他实施例中，触摸程序112可以首先识别与一个或多个相应触觉反馈相关联的一个或多个用户活动，并且然后监视用户活动以确定是否发生以下所监视的当前用户活动，该所监视的当前用户活动包括一个或多个用户活动中的至少一个用户活动。
如果触摸程序112确定计算设备110的当前用户活动不包括与触觉反馈相关联的活动(决策306，“否”分支)，则触摸程序112如上所述继续监视计算设备110上的用户活动。
如果触摸程序112确定计算设备110的当前用户活动包括与触觉反馈相关联的活动(决策306，“是”分支)，则触摸程序112提供与用户活动相关联的触觉反馈(步骤308)。在示例实施例中，触摸程序112通过以下方式来提供与相关应用相关联的触觉反馈：利用静电技术来增加或减小显示屏的部分上的物理阻力，或如上所述提供另一种类型的触觉感知，并且在下面进一步描述。
例如，参考上述示例(其中触摸程序112将在显示屏中与用于购买认证的界面元素相对应的部分上进行滑动的用户活动与附加滑动阻力的触觉反馈相关联)，如果触摸程序112确定计算设备110的用户正在利用他/她的手指与计算设备110上的显示屏中与用于购买元素的界面元素相对应的部分进行交互(或进行滑动)，则触摸程序112可以确定所监视的用户活动对应于与触觉反馈相关联的用户活动，并且进一步向用户提供相关联的触觉反馈(即，附加滑动阻力，其可以使得用户更难以进行购买)。
在另一示例中，触摸程序112可以将在计算设备110的显示屏上呈现的非优选支付选项的阈值距离之内进行悬停或导航的用户活动与附加导航阻力相关联。因此，在该示例中，如果触摸程序112确定计算设备110上的当前用户活动包括用户例如利用指针来导航至非优选支付选项，则触摸程序112可以向显示屏中与非优选支付选项的界面元素和/或该界面元素周围的区域相对应的部分提供附加阻力的触觉反馈。附加阻力可以使得计算设备110的用户更加难以导航至非优选支付选项。此外，触摸程序112可以在指示器周围提供附加阻力，以帮助将用户引导到显示屏中与优选支付选项的界面元素相对应的区域。例如，当试图在不会通向优选支付选项的界面元素的所有其他方向上导航时，用户可能会遇到阻力。另外，在该示例中，可以仅在触摸程序112检测到已经填写了与显示内容相对应的所有所需信息时提供阻力。换句话说，对于结帐页面的示例，除了选择支付选项之外，可能还需要地址和姓名。在该示例中，触摸程序112可以在确定用户已经完成地址和姓名信息时提供附加阻力。
在进一步示例中，触摸程序112可以识别与计算设备110的用户相对应的感兴趣区域，例如，通过参考社交媒体信息、个人信息等。然后，触摸程序112可以将在感兴趣区域(例如，感兴趣内容或感兴趣主题)的阈值距离之内的用户活动与触觉反馈相关联，该触觉反馈提供引导用户到感兴趣区域的阻力。此外，如果触摸程序112确定当前用户活动在感兴趣区域(例如，与用户的感兴趣主题相对应的显示内容)的阈值距离之内，则触摸程序112可以对计算设备110的显示器的某些部分提供阻力，以便将用户(或用户的光标)引导向感兴趣区域。
在另一示例中，触摸程序112可以附加地能够检测用户相对于计算设备110的观看方向，并且还能够分析计算设备110的用户的眼睛运动模式以确定用户是否当前正在读取计算设备110上的显示内容的特定部分。因此，在该示例中，如果触摸程序112确定计算设备110的用户正在读取或观看如果用户向下滚动则可能不显示的内容的特定部分，则触摸程序112可以向计算设备110的滚动功能添加附加阻力。换句话说，在一个示例中，计算设备110的用户可能意外地向下滚动页面(例如，通过利用他/她的手指或光标)，这可能使得视图内容的一部分移出显示器。所描述的本解决方案可以基于触摸程序112确定显示内容的特定部分正在被观看而增加附加阻力，以防止计算设备110的用户意外地滚动离开正在被观看的内容。此外，基于确定内容的特定部分正在被计算设备110的用户观看，触摸程序112可以计算能够被允许的滚动量，例如，触摸程序112可以允许不会将正在被观看的内容的特定部分推离显示器的滚动量。超出所确定的量，触摸程序112可以提供附加阻力以防止意外地滚动超过所允许的量。
在另一示例中，响应于确定正在执行对计算设备110的用户的认证，触摸程序112可以附加地提供附加阻力。例如，如果在计算设备110的显示屏上存在一个或多个指纹传感器，则触摸程序112可以提供附加阻力以帮助将计算设备110的用户引导到显示屏中包含指纹传感器的区域。此外，显示屏中包含指纹传感器的区域可以附加地表示为(一个或多个)摩擦点，其通过触摸程序112利用如上所述的静电技术来模拟一个或多个凸起。
在另一示例中，触摸程序112可以利用静电技术来向不同的界面元素提供不同水平的阻力或摩擦点。例如，用户界面中的“确定”按钮或“下一步”按钮可以与特定类型的感觉相关联，而“结帐”按钮可以与不同类型的感觉相关联。因此，触摸程序112可以利用静电技术来针对与“确定”按钮相对应的界面元素创建模拟具有第一类型的感觉的凸起的(一个或多个)摩擦点，并且可以进一步针对与“结帐”按钮相对应的界面元素创建模拟具有第二类型的感觉的凸起的(一个或多个)摩擦点。此外，触摸程序112可以利用所描述的技术，使得与优选支付选项相对应的界面元素和与非优选支付选项相对应的界面元素相比具有不同的感觉。此外，相比于计算设备110的用户在滑动与非优选支付选项相对应的界面元素时所经历的阻力的量，触摸程序112可以利用静电技术来减轻计算设备110的用户在滑动与优选支付选项相对应的界面元素时所经历的阻力的量。
此外，响应于确定正在执行认证(例如，
Figure BDA0002497465900000121
(Captcha是卡内基梅隆大学的商标)类型的认证)，触摸程序112可以附加地提供附加阻力。例如，触摸程序112可以提示计算设备110的用户定位并按下计算设备110的显示屏的(一个或多个)特定部分，而不是提供用户必须输入的Captcha认证。触摸程序112可以提供附加阻力以帮助将计算设备110的用户引导到显示屏的特定部分，并且还可以将该特定部分表示为如上所述的模拟一个或多个凸起的(一个或多个)摩擦点。
图4示出了根据实施例的触觉反馈系统(即，触觉反馈系统400)的替代实施例。在示例实施例中，触觉反馈系统400包括全部经由网络430互连的计算设备110、服务器440、服务器450和服务器460。
在示例实施例中，网络430是互联网，表示网络和网关的全球集合，以支持连接到互联网的设备之间的通信。网络430可以包括例如有线、无线或光纤连接。在其他实施例中，网络430可以被实现为内部网、局域网(LAN)或广域网(WAN)。通常，网络430可以是支持计算设备110、服务器440、服务器450和服务器460之间通信的连接和协议的任何组合。
服务器440包括应用446和数据库444。在示例实施例中，服务器440可以是台式计算机、膝上型计算机、平板计算机、移动设备、手持设备、精简客户端、或能够经由网络430从其他计算设备(例如，计算设备110)接收数据以及向其他计算设备发送数据的任何其他电子设备或计算系统。虽然未示出，但是可选地，服务器440可以包括执行相同软件以共同处理由前端服务器和负载均衡器分发的请求的服务器集群。在示例实施例中，服务器440是支持应用446的服务器，该应用446是应用116(客户端应用)的服务器端应用。参考图7更详细地描述了服务器440。
在示例实施例中，数据库444可以包括以下电子内容/信息：详细描述关于应用116的与计算设备110的用户相关联的一个或多个触觉反馈的电子内容/信息。例如，数据库444可以包括包含与应用116相关联的触觉反馈的信息，并且此外，可以包括与应用446的一个或多个其他客户端应用相关联的一个或多个触觉反馈。另外，在示例实施例中，数据库444可以包括用户信息，包括与应用446的一个或多个客户端应用相对应的使用信息，例如，与应用116相对应的用户信息。
服务器450包括应用456和数据库454。在示例实施例中，服务器450可以是台式计算机、膝上型计算机、平板计算机、移动设备、手持设备、精简客户端、或能够经由网络430从其他计算设备(例如，计算设备110)接收数据以及向其他计算设备发送数据的任何其他电子设备或计算系统。虽然未示出，但是可选地，服务器450可以包括执行相同软件以共同处理由前端服务器和负载均衡器分发的请求的服务器集群。在示例实施例中，服务器450是支持应用456的服务器，该应用456是应用118(客户端应用)的服务器端应用。参考图7更详细地描述了服务器450。
在示例实施例中，数据库454可以包括以下电子内容/信息：详细描述关于应用118的与计算设备110的用户相关联的一个或多个触觉反馈的电子内容/信息。例如，数据库454可以包括包含与应用118相关联的触觉反馈的信息，并且此外，可以包括与应用456的一个或多个其他客户端应用相关联的一个或多个触觉反馈。另外，在示例实施例中，数据库454可以包括用户信息，包括与应用456的一个或多个客户端应用相对应的使用信息，例如，与应用118相对应的用户信息。
服务器460包括应用466和数据库464。在示例实施例中，服务器460可以是台式计算机、膝上型计算机、平板计算机、移动设备、手持设备、精简客户端、或能够经由网络430从其他计算设备(例如，计算设备110)接收数据以及向其他计算设备发送数据的任何其他电子设备或计算系统。虽然未示出，但是可选地，服务器460可以包括执行相同软件以共同处理由前端服务器和负载均衡器分发的请求的服务器集群。在示例实施例中，服务器460是支持应用466的服务器，该应用466是应用120(客户端应用)的服务器端应用。参考图7更详细地描述了服务器460。
在示例实施例中，数据库464可以包括以下电子内容/信息：详细描述关于应用120的与计算设备110的用户相关联的一个或多个触觉反馈的电子内容/信息。例如，数据库464可以包括包含与应用120相关联的触觉反馈的信息，并且此外，可以包括与应用466的一个或多个其他客户端应用相关联的一个或多个触觉反馈。另外，在示例实施例中，数据库464可以包括用户信息，包括与应用466的一个或多个客户端应用相对应的使用信息，例如与应用120相对应的用户信息。
在该替代实施例(触觉反馈系统400)中，触摸程序112可以与服务器440、服务器450和服务器460进行通信，以便基于检测到的当前用户活动在与触觉反馈相关联的应用的阈值距离之内，或基于对与触觉反馈相关联的当前用户活动的检测，来确定一个或多个触觉反馈以提供给计算设备110的用户。
在其他实施例中，应用446可以利用触摸程序来监视与应用116相关的计算设备110上的当前用户活动。基于检测到计算设备110上的当前用户活动在应用116的特定阈值距离之内和/或基于检测到计算设备110上的当前用户活动(例如，在应用116内)对应于一个或多个触觉反馈，应用446可以向触摸程序112发送信号，从而以与上述相同的方式向计算设备的用户提供适当触觉反馈。此外，应用456和应用466可以执行类似的功能以向计算设备110的用户提供一个或多个触觉反馈。
图5是设备500的图示，并且进一步描绘了根据实施例的基于检测到的与应用的联络而提供的与应用相关联的触觉反馈。在示例实施例中，导航点502是被用来与对应于应用的特定界面元素进行联络的用户的手指、光标或指示笔的图示。此外，在示例实施例中，应用与触觉反馈相关联，该触觉反馈然后被提供给用户。
图6是根据实施例的设备600的图示，并且进一步描绘了基于检测到用户活动而提供的与用户活动相关联的触觉反馈。在示例实施例中，导航点602是被用来与对应于购买认证的特定界面元素进行联络的用户的手指、光标或指示笔的图示。此外，在示例实施例中，与对应于购买认证的界面元素进行联络的用户活动与触觉反馈相关联，该触觉反馈然后被提供给用户。
为了说明和描述的目的，已经给出了本公开的各种实施例的前述描述。这既不旨在是穷举的，也不旨在将本公开限制于所公开的精确形式。许多修改和变化是可能的。对于本公开领域的技术人员可能是明显的这些修改和变化旨在被包括在如所附权利要求所限定的本公开的范围之内。
图7描绘了根据实施例的包括在图1的触觉反馈系统100和图4中的触觉反馈系统400中的计算设备的组件的框图。应当理解，图7仅提供了一种实现方式的图示，并且不暗示关于可以实现不同实施例的环境的任何限制。可以对所描绘的环境进行许多修改。
计算设备可以包括一个或多个处理器702、一个或多个计算机可读RAM 704、一个或多个计算机可读ROM 706、一个或多个计算机可读存储介质708、设备驱动器712、读/写驱动器或接口714、网络适配器或接口716，它们全部通过通信结构718互连。通信结构718可以通过被设计用于在处理器(例如，微处理器、通信和网络处理器等)、系统存储器、外围设备、以及系统中的任何其他硬件组件之间传递数据和/或控制信息的任何架构来实现。
一个或多个操作系统710和一个或多个应用程序711(例如，触摸程序112)被存储在一个或多个计算机可读存储介质708上，以用于由一个或多个处理器702并通过利用一个或多个相应的RAM 704(通常包括缓存存储器)执行。在所示实施例中，每个计算机可读存储介质708可以是内部硬盘驱动器的磁盘存储设备、CD-ROM、DVD、存储棒、磁带、磁盘、光盘、半导体存储设备(例如，RAM、ROM、EPROM)、闪存、或可以存储计算机程序和数字信息的任何其他计算机可读有形存储设备。
计算设备还可以包括R/W驱动器或接口714，以从一个或多个便携式计算机可读存储介质726读取以及对其写入。计算设备上的应用程序711可以被存储在一个或多个便携式计算机可读存储介质726上，经由相应的R/W驱动器或接口714读取，并被加载到相应计算机可读存储介质708中。
计算设备还可以包括网络适配器或接口716，例如，TCP/IP适配器卡或无线通信适配器(例如，使用OFDMA技术的4G无线通信适配器)。可以经由网络(例如，互联网、局域网、或其他广域网或无线网)和网络适配器或接口716从外部计算机或外部存储设备将计算设备上的应用程序711下载到计算设备。程序可以从网络适配器或接口716加载到计算机可读存储介质708上。网络可以包括铜线、光纤、无线传输、路由器、防火墙、交换机、网关计算机、和/或边缘服务器。
计算设备还可以包括显示屏720和外部设备722，外部设备722可以包括例如键盘、计算机鼠标、和/或触摸板。设备驱动器712连接到用于成像的显示屏720、外部设备722、和/或用于压力感测字母数字字符输入和用户选择的显示屏720。设备驱动器712、R/W驱动器或接口714、以及网络适配器或接口716可以包括硬件和软件(存储在计算机可读存储介质708和/或ROM 706上)。
本文描述的程序基于在特定实施例中实现这些程序的应用来标识。然而，应理解，本文中任何特定程序术语的使用仅是为了方便，因此，本公开不应限于仅在由此类术语所标识和/或暗示的任何特定应用中使用。
基于前述内容，已经公开了一种计算机系统、方法和计算机程序产品。然而，在不脱离本公开的范围的情况下，可以进行多种修改和替换。因此，通过示例而非限制的方式公开了各种实施例。
本公开的各种实施例可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括在其上具有计算机可读程序指令的(一个或多个)计算机可读存储介质，这些计算机可读程序指令用于使处理器执行本公开的各方面。
计算机可读存储介质可以是有形设备，该有形设备可以保留和存储供指令执行设备使用的指令。计算机可读存储介质可以是例如但不限于电子存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备、或前述项的任何合适的组合。计算机可读存储介质的更具体示例的非详尽列表包括下列项：便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式光盘只读存储器(CD-ROM)、数字多功能磁盘(DVD)、记忆棒、软盘、机械编码设备(例如，打孔卡或凹槽中的凸起结构，上面记录有指令)、以及前述项的任何合适的组合。如本文所使用的，计算机可读存储介质不应被理解为瞬态信号本身，例如，无线电波或其他自由传播的电磁波、通过波导或其他传输介质传播的电磁波(例如，传输通过光纤电缆的光脉冲)、或传输通过电线的电信号。
本文描述的计算机可读程序指令可以经由网络(例如，互联网、局域网、广域网和/或无线网)从计算机可读存储介质下载到相应的计算/处理设备，或者下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光传输光纤、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配器卡或网络接口从网络接收计算机可读程序指令，并转发计算机可读程序指令以存储在相应的计算/处理设备内的计算机可读存储介质中。
用于执行本公开的操作的计算机可读程序指令可以是汇编程序指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、用于集成电路的配置数据、或以一种或多种编程语言(包括面向对象编程语言(如Smalltalk、C++等)和过程编程语言(如“C”编程语言或类似编程语言)的任何组合编写的源代码或目标代码。计算机可读程序指令可以完全在用户的计算机上、部分地在用户的计算机上、作为独立软件包、部分地在用户的计算机上并且部分地在远程计算机上、或完全在远程计算机或服务器上执行。在后一种情况下，远程计算机可以通过任何类型的网络(包括局域网(LAN)或广域网(WAN))连接到用户的计算机，或者可以与外部计算机建立连接(例如，通过使用互联网服务提供商的互联网)。在一些实施例中，包括例如可编程逻辑电路、现场可编程门阵列(FPGA)、或可编程逻辑阵列(PLA)的电子电路可以通过利用计算机可读程序指令的状态信息而个性化电子电路来执行计算机可读程序指令，以便执行本公开的各方面。
本文参考根据本公开的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各方面。应理解，流程图和/或框图的每个框、以及流程图和/或框图中的框的组合可以由计算机可读程序指令来实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机、或其他可编程数据处理装置的处理器以产生机器，从而使得经由计算机或其他可编程数据处理装置的处理器执行的指令创建用于实现流程图和/或框图的一个或多个框中指定的功能/动作的装置。这些计算机可读程序指令也可以存储在计算机可读存储介质中，该计算机可读存储介质可以引导计算机、可编程数据处理装置、和/或其他设备以特定方式起作用，从而使得在其中存储有指令的计算机可读存储介质包括制品，该制品包括实现在流程图和/或框图的一个或多个框中指定的功能/动作的各方面的指令。
计算机可读程序指令还可以加载到计算机、其他可编程数据处理装置或其他设备上，以使一系列操作步骤在计算机、其他可编程装置或其他设备上执行以产生计算机实现的过程，使得在计算机、其他可编程装置或其他设备上执行的指令实现在流程图和/或框图的一个或多个框中指定的功能/动作。
附图中的流程图和框图示出了根据本公开的各种实施例的系统、方法和计算机程序产品的可能的实现方式的架构、功能和操作。在这方面，流程图或框图中的每个框可以表示指令的模块、片段或部分，其包括用于实现(一个或多个)指定的逻辑功能的一个或多个可执行指令。在一些替代实现方式中，框中指出的功能可以不按附图中指出的顺序发生。例如，取决于所涉及的功能，连续示出的两个框实际上可以基本上同时执行，或者这些框有时可以以相反的顺序执行。还应注意，框图和/或流程图的每个框、以及框图和/或流程图中的框的组合可以由执行指定功能或动作、或执行专用硬件和计算机指令的组合的专用的基于硬件的系统来实现。

Claims (20)

1.一种系统，包括：
一个或多个计算机可读存储器，存储有程序指令；以及
一个或多个处理器，被配置为执行所述程序指令以使得所述系统执行包括以下各项的操作：
将一个或多个触觉反馈与一个或多个用户活动相关联；
监视计算设备上的当前用户活动以确定所述当前用户活动是否对应于所述一个或多个用户活动中的至少一个用户活动；以及
响应于确定所述当前用户活动对应于所述一个或多个用户活动中的第一用户活动，使得在所述计算设备上提供所述一个或多个触觉反馈中的第一触觉反馈，其中，所述第一触觉反馈与所述第一用户活动相关联。
2.根据权利要求1所述的系统，其中，将一个或多个触觉反馈与一个或多个用户活动相关联还包括：将所述一个或多个触觉反馈与所述一个或多个用户活动相关联地存储在数据库中。
3.根据权利要求2所述的系统，其中，监视所述计算设备上的当前用户活动以确定当前活动是否对应于所述一个或多个用户活动中的至少一个用户活动还包括：将所述当前用户活动与存储在所述数据库中的一个或多个活动进行交叉引用。
4.根据权利要求1所述的系统，其中，使得在所述计算设备上提供所述第一触觉反馈包括：使得在所述计算设备的显示屏的至少一部分上提供附加阻力。
5.根据权利要求4所述的系统，其中，利用一种或多种静电技术在所述计算设备的显示屏的至少一部分上提供所述附加阻力。
6.根据权利要求1所述的系统，其中，所述第一用户活动包括尝试使用第一支付账户来执行对物品的购买，其中，对所述物品的购买将使得所述第一支付账户被透支。
7.根据权利要求1所述的系统，其中，所述第一用户活动包括尝试使用不是优选支付选项的第一支付选项来执行对物品的购买。
8.一种方法，包括：
将一个或多个触觉反馈与一个或多个应用相关联；
监视计算设备上的当前用户活动以确定所述当前用户活动是否与所述一个或多个应用中的第一应用相关联；以及
响应于确定所述当前用户活动与所述一个或多个应用中的第一应用相关联，使得在所述计算设备上提供所述一个或多个触觉反馈中的第一触觉反馈，其中，所述第一触觉反馈与所述一个或多个应用中的第一应用相关联。
9.根据权利要求8所述的方法，其中，确定所述当前用户活动与所述第一应用相关联包括：确定所述当前用户活动在所述计算设备的显示屏中与所述第一应用的应用图标相对应的部分的阈值距离之内。
10.根据权利要求8所述的方法，其中，确定所述当前用户活动与所述第一应用相关联包括：确定所述当前用户活动是在所述第一应用内发生的用户活动。
11.根据权利要求8所述的方法，其中，所述当前用户活动包括在当前时间的阈值时间段内已经发生的用户活动。
12.根据权利要求8所述的方法，其中，使得在所述计算设备上提供所述第一触觉反馈包括：使得在所述计算设备的显示屏的至少一部分上提供附加阻力。
13.根据权利要求12所述的方法，其中，利用一种或多种静电技术在所述计算设备的显示屏的至少一部分上提供所述附加阻力。
14.根据权利要求8所述的方法，其中，确定所述当前用户活动与所述第一应用相关联包括：确定显示屏中与所述第一应用的应用图标相对应的部分已经被联络。
15.根据权利要求14所述的方法，其中，确定所述显示屏中与所述第一应用的应用图标相对应的部分已经被联络包括：确定光标在所述显示屏的所述部分内，或确定所述应用图标已经被选择。
16.一种非暂态计算机可读介质，存储有计算机可执行指令，所述计算机可执行指令响应于被一个或多个硬件处理器执行，使得所述一个或多个硬件处理器执行包括以下各项的操作：
将一个或多个触觉反馈与一个或多个用户活动相关联；
监视计算设备上的当前用户活动以确定所述当前用户活动是否对应于所述一个或多个用户活动中的至少一个用户活动；以及
响应于确定所述当前用户活动对应于所述一个或多个用户活动中的第一用户活动，使得在所述计算设备上提供第一触觉反馈，其中，所述第一触觉反馈与所述第一用户活动相关联。
17.根据权利要求16所述的非暂态计算机可读介质，其中，所述当前用户活动包括在当前时间的阈值时间段内已经发生的用户活动。
18.根据权利要求17所述的非暂态计算机可读介质，其中，使得在所述计算设备上提供所述第一触觉反馈包括：使得在所述计算设备的显示屏的至少一部分上提供附加阻力。
19.根据权利要求18所述的非暂态计算机可读介质，其中，利用一种或多种静电技术在所述计算设备的显示屏的至少一部分上提供所述附加阻力。
20.根据权利要求16所述的非暂态计算机可读介质，其中，所述第一用户活动包括尝试使用不是优选支付选项的第一支付选项来执行对物品的购买。
CN201880074686.5A 2017-09-21 2018-09-20 在屏幕上提供触觉反馈 Pending CN111356969A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/711,094 US10509473B2 (en) 2017-09-21 2017-09-21 Providing haptic feedback on a screen
US15/711,094 2017-09-21
PCT/US2018/052068 WO2019060625A1 (en) 2017-09-21 2018-09-20 PROVIDING HAPTIC FEEDBACK ON A SCREEN

Publications (1)

Publication Number Publication Date
CN111356969A true CN111356969A (zh) 2020-06-30

Family

ID=65719369

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880074686.5A Pending CN111356969A (zh) 2017-09-21 2018-09-20 在屏幕上提供触觉反馈

Country Status (5)

Country Link
US (2) US10509473B2 (zh)
EP (1) EP3685249A4 (zh)
CN (1) CN111356969A (zh)
AU (1) AU2018338105A1 (zh)
WO (1) WO2019060625A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10509473B2 (en) * 2017-09-21 2019-12-17 Paypal, Inc. Providing haptic feedback on a screen
US11928259B2 (en) 2020-03-12 2024-03-12 Google Llc Controlling haptic feedback based on proximity of contact to sensor
WO2023179879A1 (en) * 2022-03-25 2023-09-28 Telefonaktiebolaget Lm Ericsson (Publ) Haptic profiles for electronic devices

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020003469A1 (en) * 2000-05-23 2002-01-10 Hewlett -Packard Company Internet browser facility and method for the visually impaired
US20100055651A1 (en) * 2008-08-30 2010-03-04 Jussi Rantala Tactile feedback
CN101910978A (zh) * 2007-12-31 2010-12-08 苹果公司 电子设备中的触觉反馈
US20140118127A1 (en) * 2012-10-31 2014-05-01 Immersion Corporation Method and apparatus for simulating surface features on a user interface with haptic effects
US20140139452A1 (en) * 2012-11-20 2014-05-22 Immersion Corporation System and Method For Feedforward and Feedback With Haptic Effects
US20140281950A1 (en) * 2013-03-15 2014-09-18 Apple Inc Device, Method, and Graphical User Interface for Generating Haptic Feedback for User Interface Elements
CN105247449A (zh) * 2013-05-14 2016-01-13 微软技术许可有限责任公司 对手势的反馈
CN106233314A (zh) * 2014-05-29 2016-12-14 苹果公司 响应于机械输入检测启用访问支付信息的用户设备
CN106255942A (zh) * 2014-05-06 2016-12-21 高通股份有限公司 用于优化触觉反馈的系统和方法
CN106575230A (zh) * 2014-09-02 2017-04-19 苹果公司 用于可变触觉输出的语义框架

Family Cites Families (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6411276B1 (en) * 1996-11-13 2002-06-25 Immersion Corporation Hybrid control of haptic feedback for host computer and interface device
JP4115198B2 (ja) * 2002-08-02 2008-07-09 株式会社日立製作所 タッチパネルを備えた表示装置
US7657849B2 (en) * 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US8867234B2 (en) * 2007-07-19 2014-10-21 Qwest Communications International Inc. Protective telecommunications enclosure systems and methods
US20090219252A1 (en) * 2008-02-28 2009-09-03 Nokia Corporation Apparatus, method and computer program product for moving controls on a touchscreen
US8009022B2 (en) * 2009-05-29 2011-08-30 Microsoft Corporation Systems and methods for immersive interaction with virtual objects
JP4949447B2 (ja) * 2009-09-02 2012-06-06 東芝テック株式会社 商品販売データ処理装置、及びその制御プログラム
US9417695B2 (en) * 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
US20120146890A1 (en) * 2010-12-08 2012-06-14 International Business Machines Corporation Haptic rocker button for visually impaired operators
US20120256848A1 (en) * 2011-04-08 2012-10-11 Research In Motion Limited Tactile feedback method and apparatus
US8538827B1 (en) * 2011-04-29 2013-09-17 Intuit Inc. Real-time alert during on-line transaction
US8717151B2 (en) * 2011-05-13 2014-05-06 Qualcomm Incorporated Devices and methods for presenting information to a user on a tactile output surface of a mobile device
US20120299853A1 (en) * 2011-05-26 2012-11-29 Sumit Dagar Haptic interface
KR101861318B1 (ko) * 2011-06-09 2018-05-28 삼성전자주식회사 터치 스크린을 구비한 기기의 인터페이스 제공 장치 및 방법
US10621410B2 (en) * 2011-06-20 2020-04-14 Benjamin Zimchoni Method and system for operating a keyboard with multi functional keys, using fingerprints recognition
US9098126B2 (en) * 2011-10-24 2015-08-04 Nokia Technologies Oy User interface
US9204211B2 (en) * 2011-12-16 2015-12-01 Avnera Corporation Pad-type device case providing enhanced audio functionality and output
US9013426B2 (en) * 2012-01-12 2015-04-21 International Business Machines Corporation Providing a sense of touch in a mobile device using vibration
WO2013169304A1 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Determining characteristics of user input to input and output devices
US9791896B2 (en) * 2012-07-13 2017-10-17 Symbol Technologies, Llc Device and method for performing a functionality
ITTV20120138A1 (it) * 2012-07-25 2014-01-26 Isis S R L Metodo per il controllo e l'attivazione di una interfaccia utente e dispositivo e impianto con tale metodo e interfaccia
US9733739B1 (en) * 2012-09-11 2017-08-15 Amazon Technologies, Inc. Reducing inadvertent actions on a computing device
US8732077B2 (en) * 2012-09-14 2014-05-20 Bank Of America Corporation Notification of alternative payment channel
US9330544B2 (en) 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US9335822B2 (en) * 2012-12-12 2016-05-10 Immersion Corporation Method and system for providing haptic effects based on haptic context information
US9547366B2 (en) * 2013-03-14 2017-01-17 Immersion Corporation Systems and methods for haptic and gesture-driven paper simulation
US11205209B2 (en) * 2013-03-15 2021-12-21 Fashion For Globe Llc Methods for searching and obtaining clothing designs while discouraging copying
KR20160003031A (ko) * 2013-04-26 2016-01-08 임머숀 코퍼레이션 햅틱 셀들의 어레이를 이용한 유형의 사용자 인터페이스 상호작용들 및 제스처들의 시뮬레이션
US10394410B2 (en) * 2013-05-09 2019-08-27 Amazon Technologies, Inc. Mobile device interfaces
KR101459552B1 (ko) * 2013-06-19 2014-11-07 주식회사 케이티 디바이스의 레이아웃 영역에 객체를 표시하는 방법 및 디바이스
DE102013012394A1 (de) * 2013-07-26 2015-01-29 Daimler Ag Verfahren und Vorrichtung zur Fernsteuerung einer Funktion eines Fahrzeugs
CA2866598A1 (en) * 2013-10-09 2015-04-09 Lauren Van Heerden Systems and methods for providing enhanced point-of-sale services involving multiple financial entities
US10157380B2 (en) * 2013-12-19 2018-12-18 Opentable, Inc. Mobile payments integrated with a booking system
US9501147B2 (en) * 2013-12-29 2016-11-22 Immersion Corporation Haptic device incorporating stretch characteristics
US10528250B2 (en) * 2014-02-21 2020-01-07 Groupon, Inc. Method and system for facilitating consumer interactions with promotions
JP2017513165A (ja) * 2014-03-21 2017-05-25 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 力ベースのオブジェクト操作及び触覚的感覚のためのシステム及び方法
US9947003B2 (en) * 2014-03-24 2018-04-17 Mastercard International Incorporated Systems and methods for using gestures in financial transactions on mobile devices
US10482461B2 (en) * 2014-05-29 2019-11-19 Apple Inc. User interface for payments
US9648062B2 (en) * 2014-06-12 2017-05-09 Apple Inc. Systems and methods for multitasking on an electronic device with a touch-sensitive display
US9897669B2 (en) * 2014-07-17 2018-02-20 Elwha Llc Electronically controllable groups of artificially structured unit cells providing localized B1 magnetic fields for MRI and NMR devices
US9658693B2 (en) 2014-12-19 2017-05-23 Immersion Corporation Systems and methods for haptically-enabled interactions with objects
US9600076B2 (en) * 2014-12-19 2017-03-21 Immersion Corporation Systems and methods for object manipulation with haptic feedback
US9466188B2 (en) * 2014-12-24 2016-10-11 Immersion Corporation Systems and methods for haptically-enabled alarms
US9940637B2 (en) 2015-06-05 2018-04-10 Apple Inc. User interface for loyalty accounts and private label accounts
KR102342267B1 (ko) * 2015-06-22 2021-12-22 삼성전자주식회사 휴대 장치 및 휴대 장치의 화면 변경방법
KR101650099B1 (ko) * 2015-07-23 2016-08-23 린츠 주식회사 시각장애인용 착용형 햅틱 패턴 디스플레이 장치
WO2017029678A1 (en) * 2015-08-14 2017-02-23 Vats Nitin Laptop computer with user interface for blind, and method for using the same
US20170091753A1 (en) * 2015-09-28 2017-03-30 Paypal, Inc. Sensory feedback payment system
KR20170046912A (ko) * 2015-10-22 2017-05-04 삼성전자주식회사 정보 제공 방법 및 이를 지원하는 전자 장치
US10248207B2 (en) * 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
JP6711649B2 (ja) * 2016-03-01 2020-06-17 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
US10614512B1 (en) * 2016-09-23 2020-04-07 Amazon Technologies, Inc. Interactive user interface
US20180182025A1 (en) * 2016-12-22 2018-06-28 Capital One Services, Llc Systems and methods for visualizing in-budget products and services
US10796294B2 (en) * 2017-05-16 2020-10-06 Apple Inc. User interfaces for peer-to-peer transfers
US11221744B2 (en) * 2017-05-16 2022-01-11 Apple Inc. User interfaces for peer-to-peer transfers
US20180349956A1 (en) * 2017-06-05 2018-12-06 Mastercard International Incorporated Method and system for providing notifications to a mobile device located in a zoned area
US10275083B2 (en) * 2017-09-20 2019-04-30 Alex Hamid Mani Assistive device with a refreshable haptic feedback interface
US10281983B2 (en) * 2017-09-20 2019-05-07 Alex Hamid Mani Haptic feedback device and method for providing haptic sensation based on video
US10503310B2 (en) * 2017-09-20 2019-12-10 Alex Hamid Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US10509473B2 (en) * 2017-09-21 2019-12-17 Paypal, Inc. Providing haptic feedback on a screen
US10614616B1 (en) * 2017-09-26 2020-04-07 Amazon Technologies, Inc. Virtual reality user interface generation
US10878302B1 (en) * 2020-01-09 2020-12-29 Capital One Services, Llc Deafblind-friendly transaction card

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020003469A1 (en) * 2000-05-23 2002-01-10 Hewlett -Packard Company Internet browser facility and method for the visually impaired
CN101910978A (zh) * 2007-12-31 2010-12-08 苹果公司 电子设备中的触觉反馈
US20100055651A1 (en) * 2008-08-30 2010-03-04 Jussi Rantala Tactile feedback
US20140118127A1 (en) * 2012-10-31 2014-05-01 Immersion Corporation Method and apparatus for simulating surface features on a user interface with haptic effects
US20140139452A1 (en) * 2012-11-20 2014-05-22 Immersion Corporation System and Method For Feedforward and Feedback With Haptic Effects
CN103838424A (zh) * 2012-11-20 2014-06-04 伊梅森公司 用于带有触觉效果的前馈和反馈的系统和方法
US20140281950A1 (en) * 2013-03-15 2014-09-18 Apple Inc Device, Method, and Graphical User Interface for Generating Haptic Feedback for User Interface Elements
CN105247449A (zh) * 2013-05-14 2016-01-13 微软技术许可有限责任公司 对手势的反馈
CN106255942A (zh) * 2014-05-06 2016-12-21 高通股份有限公司 用于优化触觉反馈的系统和方法
CN106233314A (zh) * 2014-05-29 2016-12-14 苹果公司 响应于机械输入检测启用访问支付信息的用户设备
CN106575230A (zh) * 2014-09-02 2017-04-19 苹果公司 用于可变触觉输出的语义框架

Also Published As

Publication number Publication date
US10509473B2 (en) 2019-12-17
EP3685249A4 (en) 2021-06-30
WO2019060625A1 (en) 2019-03-28
AU2018338105A1 (en) 2020-05-07
EP3685249A1 (en) 2020-07-29
US11106281B2 (en) 2021-08-31
US20190087003A1 (en) 2019-03-21
US20200159329A1 (en) 2020-05-21

Similar Documents

Publication Publication Date Title
US11842806B2 (en) Health application user interfaces
US11829720B2 (en) Analysis and validation of language models
US20200379610A1 (en) Increasing the relevance of new available information
US20140049462A1 (en) User interface element focus based on user's gaze
US11106281B2 (en) Providing haptic feedback on a screen
US10831346B2 (en) Ergonomic and sensor analysis based user experience design
US11601419B2 (en) User interfaces for accessing an account
Menges et al. Improving user experience of eye tracking-based interaction: Introspecting and adapting interfaces
US20130339884A1 (en) Augmenting user interface elements with information
US10739984B1 (en) System for detection of input device
JP2015191551A (ja) 電子機器
Jeong et al. Computational Modeling of Finger Swipe Gestures on Touchscreen: Application of Fitts’ Law in 3D Space
CN110908568B (zh) 一种虚拟对象的控制方法和装置
US11829573B2 (en) Dynamic user interface pagination operation
Liu et al. Tilt-scrolling: A comparative study of scrolling techniques for mobile devices
US11023033B2 (en) Adapting a display of interface elements on a touch-based device to improve visibility
CN109844692B (zh) 基于客户端压力配置呈现网络页面的网络服务器
US20160188168A1 (en) Method and system for apportioned content redacting interface and operation thereof
Ren et al. Stepper, Swipe, Tilt, Force: Comparative Evaluation of Four Number Pickers for Smartwatches
US20160203111A1 (en) E-reading content item information aggregation and interface for presentation thereof
CN105807899B (zh) 一种电子设备及信息处理方法
Türkcan et al. Entry and selection methods for specifying dates in mobile context
US11880698B1 (en) Systems and methods for enhanced graphical user interface information tracking
Arias et al. Web accessibility for people with reduced mobility: a case study using eye tracking
US20230084751A1 (en) User interfaces for managing passwords

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination