CN109478354B - 触觉引导系统 - Google Patents

触觉引导系统 Download PDF

Info

Publication number
CN109478354B
CN109478354B CN201780045547.5A CN201780045547A CN109478354B CN 109478354 B CN109478354 B CN 109478354B CN 201780045547 A CN201780045547 A CN 201780045547A CN 109478354 B CN109478354 B CN 109478354B
Authority
CN
China
Prior art keywords
hand
haptic output
haptic
target
output devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780045547.5A
Other languages
English (en)
Other versions
CN109478354A (zh
Inventor
J.弗比克
A.布朗热
S.马蒂
D.迪森索
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harman International Industries Inc
Original Assignee
Harman International Industries Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harman International Industries Inc filed Critical Harman International Industries Inc
Publication of CN109478354A publication Critical patent/CN109478354A/zh
Application granted granted Critical
Publication of CN109478354B publication Critical patent/CN109478354B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • B60K35/10
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/3004Arrangements for executing specific machine instructions to perform operations on memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/46Special adaptations for use as contact microphones, e.g. on musical instrument, on stethoscope
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B60W2555/20Ambient conditions, e.g. wind or rain
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/014Force feedback applied to GUI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/13Hearing devices using bone conduction transducers

Abstract

一种用于将用户引导到目标的系统。所述系统包括一个或多个触觉输出装置,以及任选地一个或多个传感器。所述系统还包括处理器,所述处理器被配置成:确定手靠近目标;以及响应于确定所述手靠近所述目标,将控制信号发射到一个或多个触觉输出装置,其中所述一个或多个触觉输出装置在所述手上生成触觉感觉以将所述手引导到所述目标。

Description

触觉引导系统
相关申请的交叉引用
本申请要求2016年7月22日提交的第62/365,960号美国临时专利申请的权益,所述美国临时专利申请特此以引用的方式并入本文中。
技术领域
各种实施方案大体上涉及人机界面,并且更具体地说,涉及触觉引导系统。
背景技术
计算机在例如汽车、摩托车、船和飞机等车辆中的集成已经显著地增加了车辆功能。现代车辆通常包括众多控制单元,例如发动机控制单元、动力系控制单元、车载信息娱乐系统、门控制单元,所有这些都包括人机界面。明确地说,各种类型的控制单元允许用户通过调整与控制单元相关联的一个或多个输入元件来修改车辆参数。举例来说,用户可以经由音量旋钮修改车载信息娱乐系统的音频系统音量。另外,用户可以经由车辆内的触摸屏上显示的按钮来修改音频音量。
常规上,为了使用户经由输入元件调整车辆参数,用户必须在视觉上和/或触觉上定位输入元件。举例来说,为使用户定位输入元件以控制车载信息娱乐系统的音频音量,用户必须将视线离开道路、在视觉上定位输入元件,和/或沿着车辆内部移动其手以便感觉输入元件。类似地,当输入元件显示在触摸屏上时,用户必须将其目光转向触摸屏以便定位正确的输入元件。另外,当用户试图定位物理对象(例如,车辆内的门隔间或杯架)时,用户必须看向物理对象和/或使用其触觉以便定位对象。
上述方法的一个缺点是,当用户正在驾驶时,将视线离开道路以便与输入元件或另一类型的物理对象交互可以转移驾驶员的注意力。举例来说,管理车载电子装置和/或去够到车辆内的物理对象可能显著增加驾驶员的认知工作负荷,并且可能需要驾驶员在驾驶时将视线离开道路。
如前所述,用于使得驾驶员能够更有效地与车辆内的对象交互的技术将是有用的。
发明内容
本公开的实施方案阐述了一种用于经由触觉感觉将用户引导到目标的方法。所述方法包括:确定手靠近目标;以及响应于确定手靠近目标,将控制信号发射到一个或多个触觉输出装置,其中所述一个或多个触觉输出装置在手、手指、手腕、手臂、脚或其它身体部位上生成触觉感觉。
其它实施方案尤其提供了一种被配置成实现上述技术的系统和非暂时性计算机可读存储介质。
本文描述的技术的至少一个优点是可以将手引向目标而无需用户看向目标。因此,用户能够调整输入元件并且定位车辆内的物理对象,而无需将其目光从道路转移。此外,触觉感觉可以实施为用于与用户通信的替代手段,从而防止用户被额外信息淹没。结果,本文描述的技术通过使得驾驶员能够更容易地定位车辆内的一个或多个目标来减小驾驶员的认知负荷。
附图说明
为使得可以详细地理解上述一个或多个实施方案的所述特征的方式,可能已通过参考某些特定实施方案对上文简要概述的一个或多个实施方案进行了更具体的描述,其中一些实施方案在附图中说明。然而,应注意,附图仅说明了典型的实施方案,并且因此不应被视为以任何方式限制其范围,因为各种实施方案的范围也涵盖其它实施方案。
图1说明了根据各种实施方案的被配置成实施各种实施方案的一个或多个方面的计算装置的概念框图;
图2说明了根据各种实施方案的用于经由触觉感觉将手引向输入元件的技术;
图3说明了根据各种实施方案的用于经由触觉感觉将手引向物理对象的技术;
图4说明了根据各种实施方案的用于经由刻痕触觉感觉引导手朝向输入元件的技术;
图5A至5C说明了根据各种实施方案的用于生成触觉感觉的触觉输出装置的不同布置;
图6说明了根据各种实施方案的用于将手引向触摸屏上的输入元件的触觉输出装置的各种配置;以及
图7说明了根据各种实施方案的用于经由触觉输出提供到目标的引导的方法步骤的流程图。
具体实施方式
图1说明了根据各种实施方案的被配置成实施本发明的一个或多个方面的计算装置100的概念框图。如图所示,计算装置100包括但不限于处理单元110、输入/输出(I/O)装置120和存储器装置130。存储器装置130包括被配置成与数据库134交互的空间引导应用程序132。
处理单元110可以包括中央处理单元(CPU)、数字信号处理单元(DSP)、传感器处理单元、控制器单元等。在各种实施方案中,处理单元110被配置成分析由一个或多个传感器获取的传感器数据,以确定用户身体的各个部位(包括手、手指、手腕、手臂、脚,等)的位置和/或定向,和/或确定目标的位置和/或定向。在各种实施方案中,目标可以包括但不限于周围环境内的物理对象、人机界面(HMI)的输入装置、触摸屏显示器的输入元件、增强现实(AR)对象、声音对象,等。在一些实施方案中,处理单元110还被配置成确定目标相对于手的位置和/或定向的位置和/或定向。举例来说但不限于,处理单元110可以执行空间引导应用程序132以分析传感器数据、确定目标具有特定的定向和位置,并且将与手相关联的一个或多个参数(包括手的位置和/或定向)存储在数据库134中。另外,处理单元110可以在手和/或目标的位置和/或定向改变时处理传感器数据。
I/O装置120可以包括输入装置、输出装置和能够接收输入和提供输出的装置。举例来说但不限于,I/O装置120可以包括一个或多个传感器,例如RGB成像器、图案化或无图案IR成像器、结构光相机、飞行时间相机、基于雷达的传感器、基于微波的传感器、电容传感器、基于超声的传感器和/或
Figure BDA0001953614900000031
传感器。另外,I/O装置120可以包括一个或多个触觉输出装置,例如超声换能器和空气输出装置(例如,空气涡流生成器、气动装置、气囊等)。I/O装置120还可以包括有线和/或无线通信装置,所述有线和/或无线通信装置将数据发送到传感器、触觉输出装置、车辆控制单元等和/或从其接收数据。
存储器单元130可以包括存储器模块或存储器模块的集合。存储器单元130包括空间引导应用程序132和数据库134。空间引导应用程序132可以访问和/或执行I/O装置120、处理单元110和数据库134的一个或多个元件,由此实施计算装置100的一些或所有功能。
数据库134可以存储数字信号处理算法、对象识别数据、输入数据、用户偏好数据和其它上下文参数,例如应打开/关闭触觉输出装置的条件。另外,数据库134可以存储用户偏好,例如应实施特定触觉感觉以向用户提供引导的当日时间、车辆内应生成触觉感觉以向用户提供引导的一个或多个位置,和/或用户与车辆内的特定目标交互的时间和/或频率。
计算装置100整体可以是微处理器、专用集成电路(ASIC)、片上系统(SoC)、信息娱乐系统、移动计算装置(例如,平板计算机或蜂窝电话)、可穿戴装置(例如,智能手表或头戴式显示器)、VR/AR装置(例如,视频护目镜)、即插即用系统等。通常,计算装置100可以被配置成协调一个或多个触觉输出装置的整体操作,例如超声换能器阵列、空气涡流生成器等。在其它实施方案中,计算装置100可以耦合到但分离于一个或多个触觉输出装置。在此种实施方案中,触觉输出装置可以包括专用处理器,所述专用处理器从计算装置100接收数据(例如,手和目标的位置和/或定向),并且将数据(例如,触觉输出事件数据)发射到计算装置100。专用处理器可以包括在车载信息娱乐系统中,和/或可以由用户物理地带入环境中并且物理地或无线地连接到计算装置100。举例来说,专用处理器可以包括在用户的消费电子装置,例如智能电话、个人计算机、可穿戴装置等。
本文公开的各种实施方案被描述为在车辆环境中实施。通常,车辆可以包括任何类型的运输装置,包括但不限于汽车、卡车、摩托车、船、潜水艇、个人船只、雪地机动车、飞机、航天器等。然而,本文公开的实施方案设想被配置成在任何类型的环境中实施触觉输出装置的功能的任何技术上可行的系统。举例来说但不限于,本文描述的技术可以用远程车辆控制系统实施,例如控制汽车或无人机的系统。
另外,尽管各种技术被描述为对用户的手执行,但本文公开的任何技术可用于在用户的任何部位上生成触觉输出,包括用户的手、手臂、脚、脚踝、手指、指尖等等。此外,尽管某些技术被描述为由某些类型的触觉输出装置(例如,超声换能器)执行,但本文公开的每种技术可以实施任何类型的触觉输出装置以在用户身上生成触觉感觉。明确地说,可以在本文公开的任何实施方案中实施在不与用户进行直接物理接触的情况下在用户身上生成触觉感觉的触觉输出装置。
如上所述,常规方法可能需要用户将其注意力引导到在视觉上定位目标。结果,可能需要用户花费额外的认知资源以便与车辆的某些方面进行交互。此外,如果用户想要在不看向目标的情况下确定特定目标的位置和/或身份,则常规方法通常需要用户与目标进行物理接触,例如通过触摸目标。因此,用户可能需要花费认知资源来试图辨别其正在触摸什么和/或可能意外地修改目标,例如,通过意外地修改由用户正在触摸的输入元件控制的参数。
本文描述的各种实施方案克服了用于通过生成指示目标的位置和/或到目标的方向的触觉感觉来定位目标的常规方法的这些和其它缺陷。在操作中,一个或多个传感器任选地确定手是否在交互区域中。接着,空间引导应用程序132使触觉输出装置在手上生成触觉感觉,所述触觉感觉指示目标的位置和/或手应移动以到达目标的方向。空间引导应用程序132可以进一步基于手的位置和/或定向来调整触觉输出的方向性和/或强度。举例来说,如果手移近目标,则空间引导应用程序132可以增大由触觉输出装置生成的触觉感觉的强度,以便向用户指示手越来越接近目标。下面结合图2至4、5A至5C、6和7更详细地描述此种技术的示例。
图2说明了根据各种实施方案的用于经由触觉感觉将手引向输入元件230的技术。如图所示,系统环境200包括一个或多个传感器210、触觉输出装置220和输入元件230。尽管各种实施方案被描述为在用户的手上生成触觉感觉,但在本文描述的任何实施方案中,触觉感觉可以在用户身体的任何部位上生成。
在各种实施方案中,实施一个或多个传感器210以监视输入元件230周围的区域。接着,当经由传感器210检测到手的存在时,空间引导应用程序132激活一个或多个触觉输出装置220,以在手上生成触觉输出250。举例来说,空间引导应用程序132可以从一个或多个传感器210接收数据,并且接着基于所述数据确定手存在于与特定目标相关联的交互区域中。在各种实施方案中,交互区域可以被限定为距传感器210或输入元件230特定距离和/或围绕传感器210或输入元件230的特定区域或空间体积。此外,空间引导应用程序132可以从一个或多个传感器210接收数据,并且接着基于所述数据检测与手相关联的各种参数( ,位置、定向、倾斜等),以确定手正在靠近输入元件230。
在各种实施方案中,一种或多种类型的传感器可以彼此结合使用。举例来说,红外传感器可以用于检测手的存在。接着,一旦检测到手,就可以使用具有更高功率要求的更精确的传感器(例如,基于雷达的传感器)来检测手的特定位置和/或定向,以使得空间引导应用程序132能够有效地引导手朝向目标。通过使用这种两阶段方法,可以减小功率要求,同时仍然向空间引导应用程序132提供关于手的位置和/或定向的精确信息。
通常,目标可以指用户与之交互的任何元件、对象、位置等。举例来说,目标可以包括输入元件(例如,屏幕上的旋钮或按钮)、增强现实(AR)对象(例如,由头戴式AR显示器生成的AR对象)、声音对象或物理对象(例如,车辆乘坐室或杯架)。举例来说,目标可以包括对应于在三维空间(例如,车辆乘坐室)内生成的特定声音事件(例如,警报、电话呼叫、语音等)的声音对象,并且可以生成触觉感觉以向驾驶员指示声音对象在三维空间内的特定位置。因此,当其手靠近空间声音对象时,用户将能够接收触觉反馈,从而使得用户能够更有效地与声音对象交互(例如,通过手势)。
在一些实施方案中,空间引导应用程序132可以使触觉输出装置220生成靠近一个或多个预定目标的触觉输出,例如由车辆制造商限定的一个或多个输入元件230和/或物理对象。因此,与此种预定目标相关联的数据,例如目标的位置、将在每个目标附近生成的触觉输出的类型等,可以存储在数据库134中。此外,在一些实施方案中,空间引导应用程序132可以通过分析从一个或多个传感器210接收的数据来确定应将输入元件或物理对象指定为目标。举例来说,空间引导应用程序132可以确定用户在给定时间段内(例如,以特定频率)已经与输入元件230或对象交互阈值次数,并且作为响应,将输入元件230或对象指定为目标。接着,空间引导应用程序132可以使一个或多个触觉输出装置220生成靠近目标的触觉输出,从而使得用户能够在将来更容易地定位目标。
在各种实施方案中,I/O装置120可以包括系统环境200中的各种类型的触觉输出装置,例如触觉输出装置220。如本文所述,触觉输出装置220可以包括超声换能器、空气输出装置,和/或其它类型的触觉输出装置。在一些实施方案中,一个或多个超声换能器阵列可以用于在用户的手上生成触觉感觉。空间引导应用程序132可以确定由触觉输出装置220生成的触觉输出250的一个或多个参数,以便控制在用户的手上生成的触觉感觉的各种特性。举例来说,空间引导应用程序132可以确定触觉输出装置220应在其上生成触觉感觉的手的强度和/或部位。接着,空间引导应用程序132可以控制发射到触觉输出装置220的信号的类型,以便在用户的手上生成所述类型的触觉感觉。
举例来说,由两个或更多个触觉输出装置生成的触觉输出可以在特定时间占据空间中的特定位置,从而使得每个触觉输出装置的触觉输出能够与一个或多个其它触觉输出装置的触觉输出相长和/或相消地干涉。接着,由不同触觉输出装置生成的触觉输出之间的相长和/或相消干涉可以在触觉输出相长干涉的位置处产生触觉感觉。因此,在各种实施方案中,空间引导应用程序132可以使来自触觉输出装置的触觉输出干涉一个或多个其它触觉输出装置的触觉输出,以便生成作为特定位置的触觉感觉。
此外,在各种实施方案中,空间引导应用程序132可以修改由每个触觉输出装置生成的触觉输出的强度和/或相位,以便进一步控制由触觉输出生成的强度模式。使用此种技术,空间引导应用程序132可以使强度峰值的位置移位,可以增大或减少强度峰值的数量,和/或可以调整一个或多个强度峰值的形状和/或量值。结果,空间引导应用程序132可以定位和/或修改在用户的手上生成的触觉感觉的各种特性。举例来说,空间引导应用程序132可以使用此种技术来改变在用户的手上生成的触觉感觉的强度、大小、位置和/或形状。
另外,空气输出装置(例如,空气涡流生成器)可以用于在用户的手上生成触觉感觉。在各种实施方案中,空间引导应用程序132可以使用包括空气输出装置的触觉输出装置220来实施本文描述的任何技术。
在各种实施方案中,基于传感器数据和/或用户偏好数据,空间引导应用程序132确定要生成的触觉感觉的适当类型。在一些实施方案中,触觉输出250可以由一个或多个触觉输出装置以灯标和/或刻痕形式生成。在此种实施方案中,触觉输出装置可以与目标( ,输入元件或位置)基本上共同定位,以使得用户感觉触觉输出是从目标的位置发出的。当触觉输出装置220以灯标的形式生成触觉输出250时,在用户身上(例如,在用户的手上)生成触觉感觉以使得用户能够将其手移向感觉,并且因此移向特定目标。类似地,当在用户身体的另一部位上生成感觉时,用户可以将其身体和/或肢体朝向所述感觉移动,由此在朝向目标的方向上移动。
在一些实施方案中,灯标可以被感知为实心或管状。管状灯标可以包括生成触觉输出的圆柱形区域、柱状区域等,其中所述区域围封内部区域,在所述内部区域中用户感知不到触觉感觉。灯标形式的触觉输出可以具有变化的横截面大小。小的触觉感觉,例如毫米大小的灯标,直径可以是大约1至20毫米,而大的触觉感觉,例如厘米大小的灯标,直径可以是大约2至10厘米。
在一些实施方案中,触觉输出250可以按触觉刻痕的形式生成,所述触觉刻痕限定一个或多个边界,手应沿着所述边界行进以到达特定目标。在此种实施方案中,触觉输出装置可以位于目标的一侧或多侧上,使得用户在通向目标的路径之外的位置处感知触觉感觉。举例来说,在此种实施方案中,可以在通向目标的路径周围或沿着路径生成触觉感觉。可以在目标的交互区域附近生成刻痕。当生成触觉刻痕时,如果手偏离朝向目标的路径,则用户可能在其手上感觉到触觉感觉。举例来说,触觉刻痕可以警告用户,如果用户继续在给定方向上移动其手,则手将错过特定目标和/或将移出与目标相关联的交互区域。
在一些实施方案中,触觉输出250可以按触觉屏障的形式生成,所述触觉屏障引导用户的手离开特定位置。举例来说,触觉屏障可以警告用户其手正在进入应避开的车辆区域和/或其手将要与不应使用的输入元件交互(例如,已撤销激活的输入元件)。
另外,半方向性触觉输出可以与空间引导应用程序132一起使用。举例来说,半方向性触觉输出装置可以沿着一个或多个不同角度生成触觉输出,例如相对于车辆的特定表面成90度的角度。因此,半方向性触觉输出装置可以沿着用户在朝向目标移动时可能遍历的各种不同靠近路径生成触觉输出。
如图2所示,触觉输出装置220在用户的手上生成触觉感觉。如上所述,空间引导应用程序132可以确定由触觉输出装置220生成的输出的各种属性,例如输出的强度、生成感觉的手的部分,和/或触觉感觉具有恒定还是可变的位置、强度、宽度等。当触觉输出装置220生成具有恒定强度的触觉感觉时,当手在目标的特定范围内时,用户感知的触觉感觉的强度基本相同。举例来说,空间引导应用程序132可以改变触觉输出的强度,以便确保当用户将其手朝向或远离目标移动时触觉感觉的强度是恒定的。触觉输出装置220还可以生成具有可变强度的触觉感觉,其中触觉感觉的强度随着一个或多个参数(例如,位置和时间)而变化。
空间引导应用程序132可以使目标与一个或多个上下文参数相关联。上下文参数可以包括时间、车辆的方向(例如,罗盘航向)、车辆的位置、照射到车辆中的阳光量等。举例来说,空间引导应用程序132可以在一天中的特定时间、当车辆处于特定位置时和/或当车辆面向特定方向(例如朝向夕阳)指定车辆乘坐室(例如,含有一副太阳镜的乘坐室)或其它类型的对象或输入元件作为目标。另外或替代地,当一定量的太阳光进入车辆时,空间引导应用程序132可以将对象或输入元件指定为目标。接着,空间引导应用程序132可以使一个或多个触觉输出装置220生成靠近所述对象或输入元件的触觉感觉,从而使得用户能够更准确地定位对象或输入元件。
空间引导应用程序132还可以通过分析从传感器210接收的传感器数据、使目标与一个或多个驾驶员相关联。举例来说,第一驾驶员可能经常使用位于特定车辆乘坐室中的车库门打开器以在车辆进入车道时打开车库门,而第二驾驶员可能改为停放在车道中而不打开车库门。因此,当车辆位置靠近车道时,空间引导应用程序132可以确定车辆乘坐室是第一驾驶员的目标,而不是第二驾驶员的目标。结果,空间引导应用程序132可以为第一驾驶员而不是第二驾驶员生成靠近车辆乘坐室的触觉输出。
图3说明了根据各种实施方案的用于经由触觉感觉将手引向物理位置的技术。如图所示,系统环境300包括传感器310、触觉输出装置320和对象330。
在各种实施方案中,传感器310检测对象330的交互区域内的手。空间引导应用程序132可以确定手的各种参数,例如位置、定向和/或距对象330的距离。在一些实施方案中,接着,空间引导应用程序132可以确定适当类型的触觉输出350以指向手。接着,空间引导应用程序132将控制信号发射到触觉输出装置320以生成触觉输出350。
在一些实施方案中,触觉输出装置320可以位于对象330的周围。举例来说,如图3所示,触觉输出350可以按直径与对象330的直径类似的灯标的形式生成。结果,用户感知到具有与对象330的横截面大小类似的横截面的触觉感觉。用户可以感知到对象330已经垂直地延伸到其手。在此种实施方案中,用户可能能够感测对象330的近似大小和/或形状,以便在手靠近对象330时避免敲击对象330。
当用户相对于对象330移动其手时,可以实施一个或多个传感器310以检测手的一个或多个参数,例如手的位置和/或定向。接着,空间引导应用程序132可以基于手的参数来修改触觉输出350的一个或多个参数。用于在用户的手的位置改变时调整触觉输出350的一个或多个参数的此种技术可以使得空间引导应用程序132能够经由触觉感觉更有效地引导用户的手朝向对象330。
在一些实施方案中,空间引导应用程序132可以确定对象330的各种参数,例如对象330的位置和/或定向。举例来说,当对象330是一杯热咖啡时,空间引导应用程序132可以使用触觉感觉来辅助用户定位和定向其手,以便确保用户可以抓住咖啡杯而不会溢出。另外,在系统环境300中,触觉输出350可以包括被用户感知为空心的管状灯标。举例来说,触觉输出装置320可以生成在手上产生感觉的触觉输出350,其中触觉输出350描绘对象330的轮廓,并且围封触觉输出装置320不生成触觉输出的区域。
图4说明了根据各种实施方案的用于经由刻痕触觉感觉引导手朝向输入元件430的技术。如图所示,系统环境400包含传感器410、触觉输出装置420、输入元件430和触觉输出450。
在各种实施方案中,传感器410可以被实施为检测靠近输入元件430的手。接着,空间引导应用程序132可以分析从传感器410接收的数据以确定手的一个或多个参数。举例来说,空间引导应用程序132可以确定手相对于输入元件430和/或触觉输出装置420的位置和/或定向。空间引导应用程序132接着将控制信号发射到触觉输出装置420以便在手上生成触觉感觉。
如图4所示,触觉输出装置420以触觉刻痕的形式生成触觉输出450。在一些实施方案中,可以实施超声换能器阵列、空气输出装置和/或其它类型的触觉输出装置以生成触觉刻痕。如上所述,刻痕是一种触觉输出,其可以限定边界,用户应沿着所述边界移动其手以定位目标。在一些实施方案中,触觉输出450可以形成触觉限界框(或任何其它形状),其限定将用户的手引向目标的路径的一个或多个边界。举例来说,在系统环境400中,触觉输出装置420可以在输入元件430上方和下方生成触觉输出450,以便限定路径的两个边界,用户可以沿着所述路径移动其手以便定位输入元件430。
另外,触觉输出装置420可以按触觉屏障的形式生成触觉输出,以便将用户引导离开位置。举例来说,触觉屏障可以用于向用户指示其应避开已经撤销激活的输入元件。在操作中,当用户进入应避开的车辆区域时,触觉输出装置220输出触觉屏障以在用户身上生成触觉感觉。在此种实施方案中,触觉屏障可以使用户感知屏障妨碍其与目标交互的能力。举例来说,在系统环境400中,如果空间引导应用程序132确定用户应避开输入元件430(例如,输入元件430被撤销激活),则当手靠近输入元件430时,触觉输出装置420可以按触觉屏障的形式并且在使用户感觉到触觉感觉的方向上生成触觉输出450。
在一些实施方案中,当空间引导应用程序132确定用户正试图与特定区域中的若干目标交互时,空间引导应用程序132可以将控制信号发送到触觉输出装置420以生成刻痕形式的触觉输出450。在此种实施方案中,触觉输出装置420可以生成围封特定横截面大小的区域的触觉限界框。举例来说,如果空间引导应用程序132将用户引向含有若干输入元件的车辆区域,则空间引导应用程序132可以确定由触觉限界框围封的横截面区域的大小应与由输入元件跨越的区域的大小类似。在一些实施方案中,多个空气输出装置(例如,空气涡流生成器)可以输出空气以形成具有特定横截面大小的触觉限界框。举例来说,每个空气输出装置可以将空气涡流发出到多个区域,例如通过实施平移-倾斜致动以在不同方向上发出空气涡流。
图5A至5C说明了根据各种实施方案的用于生成触觉感觉的触觉输出装置的不同布置。如图所示,系统环境500含有输入元件510和触觉输出装置520。
在各种实施方案中,一个或多个传感器可以检测输入元件510的交互区域内的手。空间引导应用程序132可以确定手的各种参数,例如手的位置、定向和距输入元件510的距离。在一些实施方案中,空间引导应用程序132可以确定要在手上生成的触觉输出的适当类型。接着,空间引导应用程序132将控制信号发送到触觉输出装置520,以在用户身上(例如,用户的手上)生成感觉。
如图5A中所示,触觉输出装置520可以布置成靠近输入元件510的阵列。举例来说,触觉输出装置520可以按5乘2阵列布置。在各种实施方案中,可以实施其它尺寸和/或形状的阵列。举例来说,超声换能器阵列可以按4乘4阵列、8乘8阵列、16乘16阵列等布置。此外,尽管触觉输出装置520被说明为相对于输入元件510处于特定位置,但在其它实施方案中,触觉输出装置520可以位于靠近输入元件510的任何位置。
在图5B中,触觉输出装置520围绕输入元件510的圆周布置。尽管图5B中所示的实施方案实施触觉输出装置520的圆形配置,但可以在各种实施方案中实施任何其它形状( ,椭圆形、矩形、多边形、自由形状等)。此外,可以实施触觉输出装置520的任何布置以生成具有任何形状的触觉感觉,包括但不限于具有椭圆形、矩形、多边形和自由形状的触觉感觉。
在图5C中,触觉输出装置520偶尔围绕输入元件510布置。举例来说,触觉输出装置520可以机会性地位于输入元件510周围,以便在靠近输入元件510的一个或多个位置处生成特定类型的触觉输出。在一些实施方案中,触觉输出装置520可以位于具有可用空间的车辆的各个区域中(例如,在车辆的没有输入元件、对象或其它障碍物的表面上,例如显示器)。接着,给定靠近输入元件510的触觉输出装置520的特定布置,空间引导应用程序132可以确定应从触觉输出装置520中的每一者发出的触觉输出的强度,以便在用户身上生成特定的触觉感觉。
图6说明了根据各种实施方案的用于将手引向触摸屏上的输入元件650的触觉输出装置620的各种配置。如图所示,系统环境600包括传感器610、触觉输出装置620和在触摸屏640上的输入元件650。
在各种实施方案中,一个或多个传感器610可以任选地检测触摸屏640的交互区域内的手。在一些实施方案中,交互区域可以被限定为具有与触摸屏640的周边基本对准的边界的体积,其中所述体积从触摸屏640的表面延伸指定距离(例如,1至10厘米)。此外,在此种实施方案中,仅在空间引导应用程序132确定用户的手在触摸屏的周边内并且还在距触摸屏640的表面的指定距离内时,才可以由触觉输出装置620中的一者或多者生成触觉输出。在一些实施方案中,交互区域可以被限定为边界与特定输入元件(例如,触摸屏按钮)的周边基本对准的体积,其中所述体积从触摸屏640的表面延伸指定距离。
如系统环境600中所示,触觉输出装置620可以位于触摸屏640的圆周周围。然而,触觉输出装置620的其它布置在本发明构思内。如系统环境600中所示,触觉输出装置620可以包括一个或多个超声换能器阵列。然而,可以在各种实施方案中实施任何其它类型的触觉输出装置,例如一个或多个空气输出装置。
在各种实施方案中,空间引导应用程序132可以接收一个或多个特定输入元件650的位置。举例来说,空间引导应用程序132可以从一个或多个控制单元(例如,车载信息娱乐系统)接收输入元件650的位置,并且接着确定应生成的触觉输出的一个或多个参数(例如,触觉输出的位置和/或方向性),以便将用户的手引导到触摸屏640上的输入元件650。此外,如果用户选择特定输入元件650,则触摸屏640上的一个或多个输入元件650的位置可以改变。因此,空间引导应用程序132接着可以接收新位置并且将控制信号输出到一个或多个触觉输出装置620以生成靠近新位置的触觉感觉,以便引导用户的手朝向输入元件650的新位置。另外,在一些实施方案中,如果触摸屏640上的输入元件被禁用,则空间引导应用程序132可以接收被禁用的输入元件的位置。接着,当用户的手靠近被禁用的输入元件时,空间引导应用程序132可以生成触觉屏障。
在各种实施方案中,空间引导应用程序132可以从一个或多个控制单元接收增强现实(AR)对象(例如,由头戴式装置显示的AR对象)的位置。当空间引导应用程序132接收增强现实(AR)对象的位置时,空间引导应用程序132可以经由触觉输出装置620在用户的手上生成触觉感觉,以便将用户的手引导到手可以与AR对象交互的位置,例如三维环境(例如,车辆乘坐室)内的特定位置。
另外,当用户与空间声音对象(例如,上述声音对象)交互时,空间引导应用程序132可以接收一个或多个声音对象的新位置。接着,空间引导应用程序132可以使一个或多个触觉输出装置生成触觉感觉,所述触觉感觉将用户的手指向新位置。举例来说,空间引导应用程序132可以生成触觉限界框,所述触觉限界框围封具有与特定声音对象的横截面区域类似的大小的横截面区域。
图7说明了根据各种实施方案的用于经由触觉输出提供到目标的引导的方法步骤的流程图。尽管结合图1至4、5A至5C和6的系统描述了所述方法步骤,但本领域技术人员将理解,被配置成以任何次序执行方法步骤的任何系统都属于本发明的范围内。
如图7所示,方法700开始于步骤710,其中空间引导应用程序132确定目标(例如输入元件或对象)的位置。在一些实施方案中,在步骤710,空间引导应用程序132还可以确定目标的其它参数(例如,目标的定向和/或大小)。接着,在步骤720,空间引导应用程序132分析从一个或多个传感器接收的传感器数据,以确定与用户相关联的一个或多个参数。举例来说,空间引导应用程序132可以分析传感器数据以确定用户的手的位置和/或定向。
在一些实施方案中,在步骤710,空间引导应用程序132可以通过从车辆中所包括的一个或多个控制单元接收位置来确定目标的位置。空间引导应用程序132还可以从控制单元接收目标的大小和/或定向。此外,如上所述,空间引导应用程序132可以通过分析传感器数据来确定目标的位置,并且基于传感器数据,确定用户的手经常访问车辆中的特定输入元件或对象。空间引导应用程序132可以进一步分析传感器数据以确定目标的一个或多个参数,例如目标的大小。另外,空间引导应用程序132可以基于当日时间、车辆的位置、车辆的定向等来确定目标的位置。
接下来,在步骤730,空间引导应用程序132基于传感器数据确定用户的手是否靠近目标,例如,手是否在目标的交互区域内。举例来说,位于车辆仪表板上的目标的交互区域可以包括车辆仪表板上方和前方的体积,而对应于存储隔间的目标的交互区域可以包括隔间中的体积。
如果在步骤730,空间引导应用程序132确定用户的手不靠近目标,则方法700返回到步骤720,其中空间引导应用程序132继续分析传感器数据。然而,如果空间引导应用程序132确定用户的手靠近目标,则方法700继续进行到步骤740,其中空间引导应用程序132在用户的手上生成触觉感觉,例如,通过将信号输出到一个或多个触觉输出装置。在各种实施方案中,触觉输出装置在用户身上生成触觉感觉,而不与用户进行任何类型的直接物理接触。
接下来,在步骤750,空间引导应用程序132确定目标是否已经改变。如果在步骤750,空间引导应用程序132确定目标改变,则方法700返回到步骤710,其中空间引导应用程序132确定目标的新位置。另一方面,如果目标没有改变,则方法700返回到步骤720,其中空间引导应用程序132继续分析传感器数据。
总之,空间引导应用程序任选地经由一个或多个传感器检测手靠近目标,例如输入元件、物理位置或对象。接着,空间引导应用程序任选地确定生成触觉感觉的位置。接下来,空间引导应用程序将控制信号输出到触觉输出装置,以便使触觉输出装置生成触觉感觉,所述触觉感觉引导用户的手朝向特定目标。
本文描述的技术的至少一个优点是可以将手引向目标而无需用户看向目标。因此,用户能够调整输入元件并且定位车辆内的物理对象,而无需将其目光从道路转移。此外,触觉感觉可以实施为用于与用户通信的替代手段,从而防止用户被额外信息淹没。结果,本文描述的技术通过使得驾驶员能够更容易地在车辆内定位一个或多个目标来减少驾驶员的认知工作负荷。
已经出于说明的目的呈现了各种实施方案的描述,但其并不旨在为穷尽性的或限于所公开的实施方案。在不脱离所描述的实施方案的范围和精神的情况下,许多修改和变化对于本领域普通技术人员来说是显而易见的。
本发明实施方案的各方面可以体现为系统、方法或计算机程序产品。因此,本公开的各方面可以采取完全硬件实施方案、完全软件实施方案(包括固件、常驻软件、微码等)或者组合软件与硬件方面的实施方案(其通常可以全部被称为“电路”、“模块”或“系统”)的形式。此外,本公开的各方面可以采取体现在一个或多个计算机可读介质中的计算机程序产品的形式,所述计算机可读介质具有体现在其上的计算机可读程序代码。
可以利用一个或多个计算机可读介质的任何组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于电子、磁、光、电磁、红外或半导体系统、设备或装置,或者前述各者的任何合适组合。计算机可读存储介质的更具体示例(非详尽列表)将包括以下内容:具有一条或多条电线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、光纤、便携式光盘只读存储器(CD-ROM)、光学存储装置、磁存储装置或前述各者的任何合适组合。在本文件的上下文中,计算机可读存储介质可以是任何有形介质,其可以含有或存储由指令执行系统、设备或装置使用或与其结合使用的程序。
以上参考根据本公开的实施方案的方法、设备(系统)和计算机程序产品的流程图和/或框图描述了本公开的各方面。应理解,流程图和/或框图的每个框以及流程图和/或框图中的框的组合可以由计算机程序指令实施。这些计算机程序指令可以被提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器以产生机器,使得指令经由计算机的处理器或其它可编程数据处理设备执行,使得能够实施流程图和/或框图的框中指定的功能/动作。这些处理器可以是但不限于通用处理器、特殊用途处理器、专用处理器或现场可编程处理器或门阵列。
附图中的流程图和框图说明了根据本公开的各种实施方案的系统、方法和计算机程序产品的可能实施方式的架构、功能和操作。在这方面,流程图或框图中的每个框可以表示代码的模块、片段或部分,其包括用于实施指定的逻辑功能的一个或多个可执行指令。还应注意,在一些替代实施方式中,框中提到的功能可以不按图中所示的次序发生。举例来说,连续示出的两个框实际上可以基本上同时执行,或所述框有时可以按相反的次序执行,这取决于所涉及的功能。还应注意,框图和/或流程图中的每个框以及框图和/或流程图中的框的组合可以由执行特定功能或动作的基于专用硬件的系统或专用硬件与计算机指令的组合来实施。
尽管前述内容是针对本公开的实施方案,但可以在不脱离本公开的基本范围的情况下设计本公开的其它和进一步的实施方案,并且本公开的范围由所附权利要求确定。

Claims (20)

1.一种用于经由触觉输出来提供到目标位置的引导的系统,所述系统包括:
一个或多个触觉输出装置,所述触觉输出装置被配置成响应于一个或多个控制信号而生成触觉输出;以及
处理器,所述处理器被配置成:
经由第一传感器确定手靠近所述目标位置;以及
响应于经由第一传感器确定所述手靠近所述目标位置,经由第二传感器检测所述手的当前位置并且将所述一个或多个控制信号发射到所述一个或多个触觉输出装置,其中所述一个或多个触觉输出装置在所述手上生成所述触觉输出以将所述手从所述手的当前位置引导到所述目标位置。
2.如权利要求1所述的系统,所述系统还包括被配置成获取传感器数据的一个或多个传感器,其中所述处理器被配置成基于所述传感器数据确定所述手靠近所述目标位置。
3.如权利要求1所述的系统,其中所述一个或多个触觉输出装置包括超声换能器阵列和空气输出装置中的至少一者。
4.如权利要求1所述的系统,其中所述一个或多个触觉输出装置与所述目标位置基本上共同定位,并且所述触觉输出限定朝向所述目标位置的路径。
5.如权利要求4所述的系统,其中所述一个或多个触觉输出装置沿着所述目标位置的周边定位。
6.如权利要求1所述的系统,其中所述一个或多个触觉输出装置被配置成在通向所述目标位置的路径之外的一个或多个区域中生成所述触觉输出,并且所述一个或多个区域限定所述路径的一个或多个边界。
7.如权利要求1所述的系统,其中目标包括车辆中所包括的输入元件。
8.如权利要求1所述的系统,其中目标包括触摸屏元件。
9.如权利要求8所述的系统,其中生成所述触觉输出包括:经由所述一个或多个触觉输出装置中所包括的第一触觉输出装置来生成第一触觉输出,以及经由所述一个或多个触觉输出装置中所包括的第二触觉输出装置来生成第二触觉输出,其中所述第一触觉输出与靠近所述触摸屏元件的所述第二触觉输出相长干涉。
10.如权利要求1所述的系统,其中所述处理器还被配置成:
确定所述手不再靠近所述目标位置;以及
响应于确定所述手不再靠近所述目标位置,终止所述一个或多个控制信号到所述一个或多个触觉输出装置的发射。
11.如权利要求10所述的系统,其中所述处理器还被配置成:
确定所述手靠近第二目标位置;以及
响应于确定所述手靠近所述第二目标位置,将第二控制信号发射到第二组一个或多个触觉输出装置,其中所述第二组一个或多个触觉输出装置基于所述第二控制信号而在所述手上生成第二触觉输出。
12.如权利要求1所述的系统,其中所述目标包括车辆乘坐室。
13.一种用于经由触觉输出来提供到目标位置的引导的方法,所述方法包括:
经由第一传感器确定手靠近目标位置;
经由第二传感器检测所述手的当前位置;以及
将一个或多个控制信号发射到一个或多个触觉输出装置,其中所述一个或多个触觉输出装置基于所述一个或多个控制信号而在所述手上生成所述触觉输出以用于将所述手从所述手的当前位置引导到所述目标位置。
14.如权利要求13所述的方法,其中确定所述手靠近所述目标位置是基于经由一个或多个传感器获取的传感器数据而执行。
15.如权利要求13所述的方法,其中目标包括车辆输入元件和车辆乘坐室中的至少一者。
16.如权利要求13所述的方法,其中所述一个或多个触觉输出装置与所述目标位置基本上共同定位,并且所述触觉输出限定朝向所述目标位置的路径。
17.如权利要求13所述的方法,其中所述一个或多个触觉输出装置包括超声换能器阵列和空气涡流装置中的至少一者。
18.如权利要求13所述的方法,其中所述一个或多个触觉输出装置在通向所述目标位置的路径之外的一个或多个区域中生成所述触觉输出,并且所述一个或多个区域限定所述路径的一个或多个边界。
19.如权利要求13所述的方法,其中所述目标包括触摸屏元件,并且所述一个或多个触觉输出装置通过以下操作生成所述触觉输出:
经由所述一个或多个触觉输出装置中所包括的第一触觉输出装置来生成第一触觉输出;以及
经由所述一个或多个触觉输出装置中所包括的第二触觉输出装置来生成第二触觉输出,其中所述第一触觉输出与靠近所述触摸屏元件的所述第二触觉输出相长干涉。
20.一种非暂时性计算机可读存储介质,所述非暂时性计算机可读存储介质包括指令,所述指令在由处理器执行时将所述处理器配置成通过执行以下步骤而经由触觉输出提供到目标位置的引导:
经由第一传感器确定手靠近车辆输入元件;
经由第二传感器检测所述手的当前位置;以及
将一个或多个控制信号发射到一个或多个触觉输出装置,其中所述一个或多个触觉输出装置基于所述一个或多个控制信号在所述手上生成所述触觉输出以用于将所述手从所述手的当前位置引导到所述目标位置。
CN201780045547.5A 2016-07-22 2017-06-15 触觉引导系统 Active CN109478354B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662365960P 2016-07-22 2016-07-22
US62/365,960 2016-07-22
PCT/US2017/037593 WO2018017210A1 (en) 2016-07-22 2017-06-15 Haptic guidance system

Publications (2)

Publication Number Publication Date
CN109478354A CN109478354A (zh) 2019-03-15
CN109478354B true CN109478354B (zh) 2022-02-08

Family

ID=60992731

Family Applications (6)

Application Number Title Priority Date Filing Date
CN201780045443.4A Active CN109475079B (zh) 2016-07-22 2017-06-15 触觉驾驶引导系统
CN201780045547.5A Active CN109478354B (zh) 2016-07-22 2017-06-15 触觉引导系统
CN201780045457.6A Pending CN109477721A (zh) 2016-07-22 2017-07-21 利用触觉换能器设备的回声定位
CN201780045385.5A Active CN109476318B (zh) 2016-07-22 2017-07-21 用于车辆的触觉通知系统
CN201780045392.5A Active CN109478102B (zh) 2016-07-22 2017-07-21 用于向用户递送音频内容的触觉系统
CN201780045442.XA Active CN109564464B (zh) 2016-07-22 2017-07-21 用于致动材料的触觉系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201780045443.4A Active CN109475079B (zh) 2016-07-22 2017-06-15 触觉驾驶引导系统

Family Applications After (4)

Application Number Title Priority Date Filing Date
CN201780045457.6A Pending CN109477721A (zh) 2016-07-22 2017-07-21 利用触觉换能器设备的回声定位
CN201780045385.5A Active CN109476318B (zh) 2016-07-22 2017-07-21 用于车辆的触觉通知系统
CN201780045392.5A Active CN109478102B (zh) 2016-07-22 2017-07-21 用于向用户递送音频内容的触觉系统
CN201780045442.XA Active CN109564464B (zh) 2016-07-22 2017-07-21 用于致动材料的触觉系统

Country Status (5)

Country Link
US (6) US10671170B2 (zh)
EP (6) EP3488427B1 (zh)
JP (7) JP7248568B2 (zh)
CN (6) CN109475079B (zh)
WO (6) WO2018017212A1 (zh)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11059495B2 (en) * 2016-09-12 2021-07-13 Sony Corporation Information presentation apparatus, steering apparatus, and information presentation method
DK179978B1 (en) * 2016-09-23 2019-11-27 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
US10503310B2 (en) * 2017-09-20 2019-12-10 Alex Hamid Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US10275083B2 (en) 2017-09-20 2019-04-30 Alex Hamid Mani Assistive device with a refreshable haptic feedback interface
US10281983B2 (en) 2017-09-20 2019-05-07 Alex Hamid Mani Haptic feedback device and method for providing haptic sensation based on video
US11513627B2 (en) 2017-09-20 2022-11-29 Niki Mani Assistive device with a refreshable haptic feedback interface
US11726571B2 (en) 2017-09-20 2023-08-15 Niki Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US11561619B2 (en) 2017-09-20 2023-01-24 Niki Mani Haptic feedback device and method for providing haptic sensation based on video
US11455382B2 (en) * 2018-03-26 2022-09-27 Sony Corporation Methods and apparatuses for proximity detection
US11009954B2 (en) 2018-06-02 2021-05-18 Harman International Industries, Incorporated Haptics device for producing directional sound and haptic sensations
CN108919277B (zh) * 2018-07-02 2022-11-22 深圳米唐科技有限公司 基于亚超声波的室内外环境识别方法、系统及存储介质
CN109254652A (zh) * 2018-08-13 2019-01-22 瑞声科技(新加坡)有限公司 车辆触摸显示屏的触觉反馈方法、系统及控制装置
CN109254658A (zh) * 2018-08-29 2019-01-22 上海天马微电子有限公司 触觉反馈方法、触觉反馈装置及触摸显示装置
US11760377B2 (en) * 2019-02-26 2023-09-19 Harman International Industries, Incorporated Shape-shifting control surface for an autonomous vehicle
JP7333185B2 (ja) * 2019-03-27 2023-08-24 株式会社Subaru 車両の接近警報装置
US11067687B2 (en) 2019-04-25 2021-07-20 Elwha, Llc Multipath acoustic holography and virtual haptics
CN110347249B (zh) * 2019-06-25 2020-08-28 燕山大学 基于振型叠加触觉反馈方法
US10916107B1 (en) * 2019-07-29 2021-02-09 Elwha Llc Time-domain and frequency-domain enhancements for acoustic haptography
US11100801B2 (en) 2019-08-12 2021-08-24 Toyota Motor North America, Inc. Utilizing sensors to detect hazard from other vehicle while driving
US10962562B2 (en) * 2019-08-22 2021-03-30 Bayerische Motoren Werke Aktiengesellschaft Vehicle velocity indicator
JP7406328B2 (ja) 2019-09-10 2023-12-27 株式会社東海理化電機製作所 制御装置、制御方法、およびプログラム
JP7282639B2 (ja) * 2019-09-10 2023-05-29 株式会社東海理化電機製作所 制御装置、制御方法、およびプログラム
US11282281B2 (en) * 2019-11-13 2022-03-22 At&T Intellectual Property I, L.P. Activation of extended reality actuators based on content analysis
CN111158465A (zh) * 2019-12-09 2020-05-15 瑞声科技(新加坡)有限公司 一种力触觉振动反馈方法及系统
CN110972020B (zh) * 2019-12-19 2021-06-01 东莞市逸音电子科技有限公司 一种新型智能触摸手感蓝牙耳机
CN111338468B (zh) * 2020-02-05 2022-01-28 吉林大学 一种基于交叉范式的移动终端触觉目标操作系统和方法
KR20210112633A (ko) * 2020-03-05 2021-09-15 현대자동차주식회사 퍼스널 모빌리티 및 그 제어 방법
US11535260B2 (en) * 2020-03-05 2022-12-27 Harman International Industries, Incorporated Attention-based notifications
US11703881B2 (en) * 2020-03-19 2023-07-18 Logistics And Supply Chain Multi Tech R&D Centre Limited Method of controlling a guide machine and a navigation system
US20210319656A1 (en) * 2020-04-10 2021-10-14 Igt Real-time analytics and feedback for electronic gaming machines
JP7072744B2 (ja) * 2020-05-13 2022-05-20 三菱電機株式会社 空中ハプティクス制御装置、空中ハプティクスシステム及び空中ハプティクス制御方法
KR102591674B1 (ko) * 2020-07-10 2023-10-23 한국전자통신연구원 음향 및 촉각 재생 장치
GB2597492B (en) * 2020-07-23 2022-08-03 Nissan Motor Mfg Uk Ltd Gesture recognition system
DE102020131513B3 (de) * 2020-11-27 2022-01-27 JENETRIC GmbH Vorrichtung und Verfahren zur berührungslosen optischen Abbildung eines ausgewählten Oberflächenbereiches einer Hand
US20220212691A1 (en) * 2021-01-05 2022-07-07 Ford Global Technologies, Llc Systems and methods for providing haptic feedback to drivers when aligning electrified vehicles to charging equipment
CN113335182A (zh) * 2021-07-21 2021-09-03 业成科技(成都)有限公司 车内安全系统及其操作方法
US20230128104A1 (en) * 2021-10-25 2023-04-27 Motional Ad Llc Accessibility system for assisting a user in interacting with a vehicle
JP7326505B2 (ja) * 2022-01-06 2023-08-15 本田技研工業株式会社 車両用警告装置
US20230311733A1 (en) * 2022-03-30 2023-10-05 Ghsp, Inc. Vehicle signal system having a plurality of force generators for producing a user-experienced feedback

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101539834A (zh) * 2008-03-20 2009-09-23 Lg电子株式会社 能够感测近距离触摸的便携式终端以及利用该终端控制屏幕的方法
CN204215357U (zh) * 2014-11-11 2015-03-18 深圳市视晶无线技术有限公司 操作器突出显示系统
FR3014571A1 (fr) * 2013-12-11 2015-06-12 Dav Dispositif de commande a retour sensoriel

Family Cites Families (140)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4982434A (en) 1989-05-30 1991-01-01 Center For Innovative Technology Supersonic bone conduction hearing aid and method
US5282858A (en) 1991-06-17 1994-02-01 American Cyanamid Company Hermetically sealed implantable transducer
US6856876B2 (en) 1998-06-09 2005-02-15 Automotive Technologies International, Inc. Methods for controlling a system in a vehicle using a transmitting/receiving transducer and/or while compensating for thermal gradients
US6377693B1 (en) * 1994-06-23 2002-04-23 Hearing Innovations Incorporated Tinnitus masking using ultrasonic signals
JP3184058B2 (ja) 1994-12-16 2001-07-09 カルソニックカンセイ株式会社 車両用障害物検知方法およびその装置
US20060284839A1 (en) 1999-12-15 2006-12-21 Automotive Technologies International, Inc. Vehicular Steering Wheel with Input Device
US6139488A (en) 1997-09-25 2000-10-31 Symphonix Devices, Inc. Biasing device for implantable hearing devices
US6338028B1 (en) 1998-06-11 2002-01-08 Trw Inc. Ultrasonic sensor system and method having input capture for echo processing
US6643378B2 (en) * 2001-03-02 2003-11-04 Daniel R. Schumaier Bone conduction hearing aid
US7623114B2 (en) 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
US6904823B2 (en) * 2002-04-03 2005-06-14 Immersion Corporation Haptic shifting devices
US20040049323A1 (en) 2002-09-05 2004-03-11 Ford Global Technologies, Inc. Haptic seat notification system
JP3875178B2 (ja) * 2002-11-05 2007-01-31 日本電信電話株式会社 ヘッドホン装置
JP4365158B2 (ja) 2003-07-23 2009-11-18 アロカ株式会社 2次元アレイ超音波探触子
JP4020036B2 (ja) 2003-07-31 2007-12-12 日産自動車株式会社 コマンド入力装置
JP2005080227A (ja) * 2003-09-03 2005-03-24 Seiko Epson Corp 音声情報提供方法及び指向型音声情報提供装置
GB0322489D0 (en) 2003-09-25 2003-10-29 British Telecomm Haptics transmission systems
JP4254501B2 (ja) 2003-11-20 2009-04-15 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
JP2006199094A (ja) * 2005-01-19 2006-08-03 Hitachi Ltd 車両用情報呈示装置
CA2826925C (en) * 2005-02-22 2017-01-24 Mako Surgical Corp. Haptic guidance system and method
CN101180584B (zh) 2005-05-26 2011-04-13 思考方案有限公司 可配戴和可改变位置的振动节拍器
JP2007065798A (ja) 2005-08-29 2007-03-15 Seiko Epson Corp タッチパネル装置
US8780053B2 (en) 2007-03-21 2014-07-15 Northwestern University Vibrating substrate for haptic interface
US8405618B2 (en) 2006-03-24 2013-03-26 Northwestern University Haptic device with indirect haptic feedback
JP2008039497A (ja) * 2006-08-03 2008-02-21 Matsushita Electric Works Ltd 障害物検出装置
KR20090057268A (ko) 2006-08-24 2009-06-04 코닌클리케 필립스 일렉트로닉스 엔.브이. 햅틱 여기를 발생하기 위해 오디오 신호 및/또는 비디오 신호를 처리하기 위한 디바이스 및 방법
JP4945303B2 (ja) * 2006-12-15 2012-06-06 本田技研工業株式会社 車両状態伝達装置
US7692552B2 (en) 2007-01-23 2010-04-06 International Business Machines Corporation Method and system for improving driver safety and situational awareness
JP4333883B2 (ja) * 2007-01-24 2009-09-16 ヤマハ株式会社 モーションセンサ及びその製造方法
KR100889726B1 (ko) 2007-02-02 2009-03-24 한국전자통신연구원 촉각 자극 장치 및 이를 응용한 장치
EP1956466B1 (fr) 2007-02-12 2013-08-07 Universite Des Sciences Et Technologies De Lille Interface tactile vibrante
JP5056185B2 (ja) 2007-06-12 2012-10-24 日産自動車株式会社 車両のシフト案内装置
US20090073112A1 (en) 2007-09-14 2009-03-19 International Business Machines Corporation Method and system for dynamically configurable tactile feedback for navigational support
US7788032B2 (en) 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
JP5448320B2 (ja) 2007-10-04 2014-03-19 キヤノン株式会社 圧電アクチュエータ及びそれを用いた液体吐出ヘッド
US9557915B2 (en) 2008-01-04 2017-01-31 Tactus Technology, Inc. Dynamic tactile interface
US20090219252A1 (en) * 2008-02-28 2009-09-03 Nokia Corporation Apparatus, method and computer program product for moving controls on a touchscreen
US9829977B2 (en) 2008-04-02 2017-11-28 Immersion Corporation Method and apparatus for providing multi-point haptic feedback texture systems
DE102008064645A1 (de) 2008-04-11 2010-04-08 Knorr-Bremse Systeme für Nutzfahrzeuge GmbH Fahrerassistenzanlage für Kraftfahrzeuge und Verfahren zum haptischen Warnen eines Fahrers eines Kraftfahrzeuges
US20100013613A1 (en) 2008-07-08 2010-01-21 Jonathan Samuel Weston Haptic feedback projection system
JP2010066640A (ja) 2008-09-12 2010-03-25 Yamaha Corp 楽器
WO2010043001A1 (en) 2008-10-14 2010-04-22 Cochlear Limited Implantable microphone system and calibration process
JP2010118877A (ja) 2008-11-12 2010-05-27 Sumida Corporation 体内埋込型スピーカ
US8362882B2 (en) * 2008-12-10 2013-01-29 Immersion Corporation Method and apparatus for providing Haptic feedback from Haptic textile
US20100198458A1 (en) 2009-02-02 2010-08-05 Ford Global Technologies, Llc Navigation system with haptic assist
EP2406699A1 (en) * 2009-03-10 2012-01-18 Bayer MaterialScience AG Electroactive polymer transducers for tactile feedback devices
CN102349041B (zh) 2009-03-12 2015-11-25 意美森公司 用于摩擦显示和附加触觉效果的系统和方法
US9696803B2 (en) 2009-03-12 2017-07-04 Immersion Corporation Systems and methods for friction displays and additional haptic effects
KR101796888B1 (ko) * 2009-03-12 2017-11-10 임머숀 코퍼레이션 표면-기반 햅틱 효과를 특징으로 하는 인터페이스에 대한 시스템 및 방법, 및 유형의 컴퓨터 판독가능 매체
KR101032635B1 (ko) * 2009-04-16 2011-05-09 한국과학기술원 자동차 네비게이션 시스템, 자동차 네비게이션용 스티어링 휠 및 커버, 이를 포함하는 자동차 및 이를 이용한 자동차 주행안내방법
CN201440697U (zh) * 2009-04-20 2010-04-21 康佳集团股份有限公司 一种显示按键功能设备
KR100971220B1 (ko) * 2009-08-17 2010-07-20 주식회사 에프티랩 Lc공진주파수 변이를 이용한 정전용량방식 터치스크린패널의 검사방법
US8610549B2 (en) * 2009-10-16 2013-12-17 Immersion Corporation Systems and methods for providing haptic feedback at multiple resonance frequencies
JP5668076B2 (ja) 2009-11-17 2015-02-12 イマージョン コーポレーションImmersion Corporation 電子デバイスにおける触覚帯域を増加するためのシステム及び方法
JP2013519961A (ja) * 2010-02-16 2013-05-30 バイエル・インテレクチュアル・プロパティ・ゲゼルシャフト・ミット・ベシュレンクテル・ハフツング 触覚装置およびその能力を定量化する技術
US20110267294A1 (en) * 2010-04-29 2011-11-03 Nokia Corporation Apparatus and method for providing tactile feedback for user
US8519982B2 (en) 2010-06-21 2013-08-27 Sony Corporation Active acoustic touch location for electronic devices
CN102971689B (zh) 2010-06-28 2015-10-07 诺基亚公司 触觉表面压缩
JP5343946B2 (ja) 2010-08-25 2013-11-13 株式会社デンソー 触覚提示装置
US8405522B2 (en) * 2010-09-30 2013-03-26 Ford Global Technologies, Llc Lane departure haptic warning with compensation for road-caused vibration
US8547215B2 (en) 2010-11-24 2013-10-01 Denso Corporation Information presentation apparatus and system
US8845110B1 (en) 2010-12-23 2014-09-30 Rawles Llc Powered augmented reality projection accessory display device
JP5924802B2 (ja) 2011-01-26 2016-05-25 日本電気株式会社 入力装置
US9417696B2 (en) * 2011-01-27 2016-08-16 Blackberry Limited Portable electronic device and method therefor
US10039672B2 (en) 2011-03-23 2018-08-07 Ali Mohammad Aghamohammadi Vibro-electro tactile ultrasound hearing device
US8581714B2 (en) 2011-05-20 2013-11-12 Ford Global Technologies, Llc Method and apparatus for generating vehicle vibration to alert vehicle user of warning
US9083821B2 (en) 2011-06-03 2015-07-14 Apple Inc. Converting audio to haptic feedback in an electronic device
DE102011111543A1 (de) * 2011-08-17 2013-02-21 Continental Automotive Gmbh Bedieneinrichtung
JP2013053867A (ja) 2011-09-01 2013-03-21 Sharp Corp 距離検出システム
KR101852549B1 (ko) * 2011-11-18 2018-04-27 센톤스 아이엔씨. 국소형 햅틱 피드백
DE102011088309A1 (de) * 2011-12-12 2013-06-13 Robert Bosch Gmbh Verfahren und Steuergerät zum Steuern von vorhersehbaren haptisch wahrnehmbaren Signalen in einem Fahrpedal eines Kraftfahrzeugs
US20140309921A1 (en) 2013-04-15 2014-10-16 Flextronics Ap, Llc Travel route alteration based on user profile and business
WO2013161163A1 (ja) 2012-04-27 2013-10-31 パナソニック株式会社 触感呈示装置、触感呈示方法、駆動信号生成装置および駆動信号生成方法
US9785236B2 (en) * 2012-05-25 2017-10-10 Immerz, Inc. Haptic interface for portable electronic device
US9153108B2 (en) 2012-06-22 2015-10-06 GM Global Technology Operations LLC Alert systems and methods for a vehicle
US8970358B2 (en) 2012-06-22 2015-03-03 GM Global Technology Operations LLC Alert systems and methods for a vehicle
US9545879B2 (en) 2012-06-22 2017-01-17 GM Global Technology Operations LLC Vehicle seat back haptic alert systems and methods
US9198714B2 (en) * 2012-06-29 2015-12-01 Ethicon Endo-Surgery, Inc. Haptic feedback devices for surgical robot
US20140056461A1 (en) * 2012-08-21 2014-02-27 Immerz, Inc. Systems and methods for a vibrating input device
DE102012215350A1 (de) 2012-08-29 2014-03-06 Continental Automotive Gmbh Multisensuelle Aufmerksamkeitslenkung
US8945328B2 (en) 2012-09-11 2015-02-03 L.I.F.E. Corporation S.A. Methods of making garments having stretchable and conductive ink
CN104756173B (zh) * 2012-09-17 2018-02-06 沃尔沃拉斯特瓦格纳公司 用于将基于背景的指导消息提供给汽车驾驶员的方法
FI20120340A (fi) * 2012-10-08 2014-04-09 Canatu Oy Kosketusrajapintalaite ja rakenne
US9002020B1 (en) 2012-10-22 2015-04-07 Google Inc. Bone-conduction transducer array for spatial audio
WO2014083751A1 (ja) * 2012-11-30 2014-06-05 パナソニック株式会社 触感呈示装置および触感呈示方法
KR102184288B1 (ko) * 2013-01-17 2020-11-30 삼성전자주식회사 입력 유닛에 햅틱 효과를 제공하는 휴대 단말 및 방법
US9081651B2 (en) 2013-03-13 2015-07-14 Ford Global Technologies, Llc Route navigation with optimal speed profile
KR20140115836A (ko) * 2013-03-22 2014-10-01 삼성전자주식회사 햅틱 효과를 제공하는 휴대 단말 및 방법
US9367136B2 (en) * 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
US20140350640A1 (en) 2013-05-22 2014-11-27 Jim Patrick Implantable Medical Device and Tool Sensors
US9596534B2 (en) 2013-06-11 2017-03-14 Dsp Group Ltd. Equalization and power control of bone conduction elements
US20150018660A1 (en) * 2013-07-11 2015-01-15 Alivecor, Inc. Apparatus for Coupling to Computing Devices and Measuring Physiological Data
US10359857B2 (en) * 2013-07-18 2019-07-23 Immersion Corporation Usable hidden controls with haptic feedback
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9711014B2 (en) * 2013-09-06 2017-07-18 Immersion Corporation Systems and methods for generating haptic effects associated with transitions in audio signals
US10162416B2 (en) * 2013-09-06 2018-12-25 Immersion Corporation Dynamic haptic conversion system
US9213408B2 (en) 2013-10-08 2015-12-15 Immersion Corporation Generating haptic effects while minimizing cascading
JP6056729B2 (ja) 2013-10-15 2017-01-11 株式会社デンソー 触覚提示装置
WO2015054789A1 (en) * 2013-10-18 2015-04-23 Hagedorn Douglas Systems and methods for non-visual spatial interfacing with a computer
US9248840B2 (en) 2013-12-20 2016-02-02 Immersion Corporation Gesture based input system in a vehicle with haptic feedback
US9623907B2 (en) * 2014-01-13 2017-04-18 Harman International Industries, Inc. Haptic language through a steering mechanism
US20150199950A1 (en) 2014-01-13 2015-07-16 DSP Group Use of microphones with vsensors for wearable devices
EP2902864B1 (en) * 2014-01-30 2017-05-31 Volvo Car Corporation Control arrangement for autonomously driven vehicle
WO2015127143A1 (en) 2014-02-24 2015-08-27 Sony Corporation Smart wearable devices and methods for customized haptic feedback
US10067566B2 (en) * 2014-03-19 2018-09-04 Immersion Corporation Systems and methods for a shared haptic experience
KR20150110356A (ko) 2014-03-21 2015-10-02 임머숀 코퍼레이션 센서의 데이터를 햅틱 효과들로 변환하는 시스템들 및 방법들
JP2015186072A (ja) * 2014-03-25 2015-10-22 オンキヨー株式会社 音声信号出力装置
KR20150118813A (ko) 2014-04-15 2015-10-23 삼성전자주식회사 햅틱 정보 운용 방법 및 이를 지원하는 전자 장치
US10232113B2 (en) 2014-04-24 2019-03-19 Medtronic Minimed, Inc. Infusion devices and related methods and systems for regulating insulin on board
DE102014207807A1 (de) 2014-04-25 2015-10-29 Bayerische Motoren Werke Aktiengesellschaft Personenbezogene Fahrerunterstützung
US9283847B2 (en) 2014-05-05 2016-03-15 State Farm Mutual Automobile Insurance Company System and method to monitor and alert vehicle operator of impairment
US9656606B1 (en) 2014-05-30 2017-05-23 State Farm Mutual Automobile Insurance Company Systems and methods for alerting a driver to vehicle collision risks
FR3022726A1 (fr) 2014-06-18 2015-12-25 Sebastien Andre Rene Descamps Dispositif d'amplification autonome pour instrument de musique
US9696806B2 (en) 2014-07-02 2017-07-04 Immersion Corporation Systems and methods for multi-output electrostatic haptic effects
US9262924B2 (en) 2014-07-09 2016-02-16 Toyota Motor Engineering & Manufacturing North America, Inc. Adapting a warning output based on a driver's view
US20140320402A1 (en) 2014-07-14 2014-10-30 Immersion Corporation Self calibration for haptic devices
US9830782B2 (en) * 2014-09-02 2017-11-28 Apple Inc. Haptic notifications
JP2016078602A (ja) * 2014-10-15 2016-05-16 ヤンマー株式会社 作業車両
US9827904B2 (en) * 2014-10-20 2017-11-28 Immersion Corporation Systems and methods for enhanced continuous awareness in vehicles using haptic feedback
US9290174B1 (en) 2014-10-23 2016-03-22 GM Global Technology Operations LLC Method and system for mitigating the effects of an impaired driver
US9658693B2 (en) * 2014-12-19 2017-05-23 Immersion Corporation Systems and methods for haptically-enabled interactions with objects
US9600076B2 (en) * 2014-12-19 2017-03-21 Immersion Corporation Systems and methods for object manipulation with haptic feedback
US9836124B2 (en) * 2014-12-31 2017-12-05 Harman International Industries, Incorporated Techniques for dynamically changing tactile surfaces of a haptic controller to convey interactive system information
GB2534164B (en) * 2015-01-14 2018-11-14 Jaguar Land Rover Ltd Vehicle interface device
KR102301621B1 (ko) * 2015-01-16 2021-09-14 삼성전자주식회사 스타일러스 펜, 터치 패널 및 이들을 구비한 좌표 측정 시스템
US10099608B2 (en) 2015-01-16 2018-10-16 Ford Global Technologies, Llc Haptic vehicle alert based on wearable device
US9595250B2 (en) 2015-01-22 2017-03-14 Paul Ierymenko Handheld vibration control device for musical instruments
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
US10275029B2 (en) 2015-06-22 2019-04-30 Accenture Global Solutions Limited Directional and awareness guidance device
US20170021762A1 (en) 2015-07-22 2017-01-26 Denso International America, Inc. Haptic System And Method Of Controlling A Haptic System
US10664053B2 (en) * 2015-09-30 2020-05-26 Apple Inc. Multi-transducer tactile user interface for electronic devices
JP6576225B2 (ja) 2015-11-27 2019-09-18 クラリオン株式会社 車両用報知装置および車両用報知方法
US10235848B2 (en) 2015-12-09 2019-03-19 Immersion Corporation Public network transmission of haptic effect signals
DE102016200897A1 (de) 2016-01-22 2017-07-27 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zum zumindest teilweise automatisierten Fahren
US10013858B2 (en) 2016-02-26 2018-07-03 At&T Intellectual Property I, L.P. Notification system with haptic feedback garment and methods for use therewith
FR3048544B1 (fr) 2016-03-01 2021-04-02 Valeo Comfort & Driving Assistance Dispositif et methode de surveillance d'un conducteur d'un vehicule automobile
US9983775B2 (en) 2016-03-10 2018-05-29 Vignet Incorporated Dynamic user interfaces based on multiple data sources
US10026309B1 (en) 2016-04-11 2018-07-17 State Farm Mutual Automobile Insurance Company Networked vehicle control systems to facilitate situational awareness of vehicles
US20170336903A1 (en) * 2016-05-19 2017-11-23 Ciena Corporation Touch and pressure sensitive surface with haptic methods for blind probe alignment
US9827811B1 (en) 2016-07-14 2017-11-28 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicular haptic feedback system and method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101539834A (zh) * 2008-03-20 2009-09-23 Lg电子株式会社 能够感测近距离触摸的便携式终端以及利用该终端控制屏幕的方法
FR3014571A1 (fr) * 2013-12-11 2015-06-12 Dav Dispositif de commande a retour sensoriel
CN204215357U (zh) * 2014-11-11 2015-03-18 深圳市视晶无线技术有限公司 操作器突出显示系统

Also Published As

Publication number Publication date
JP2019523497A (ja) 2019-08-22
EP3488326A4 (en) 2020-01-01
EP3488427A4 (en) 2019-12-25
EP3488325A4 (en) 2020-01-08
EP3487739B1 (en) 2022-03-23
JP2019527431A (ja) 2019-09-26
JP6954989B2 (ja) 2021-10-27
CN109478102B (zh) 2022-09-23
JP2019523498A (ja) 2019-08-22
CN109478354A (zh) 2019-03-15
JP6992045B2 (ja) 2022-01-13
US20190268693A1 (en) 2019-08-29
JP6949938B2 (ja) 2021-10-13
EP3488326A1 (en) 2019-05-29
EP3488184A4 (en) 2019-12-25
EP3487739A1 (en) 2019-05-29
EP3487280A1 (en) 2019-05-29
US11126263B2 (en) 2021-09-21
CN109477721A (zh) 2019-03-15
WO2018017934A1 (en) 2018-01-25
CN109478102A (zh) 2019-03-15
JP2019527430A (ja) 2019-09-26
JP6944513B2 (ja) 2021-10-06
CN109564464A (zh) 2019-04-02
EP3488184B1 (en) 2023-03-22
US20190227631A1 (en) 2019-07-25
CN109476318A (zh) 2019-03-15
WO2018018003A1 (en) 2018-01-25
JP2019527432A (ja) 2019-09-26
US20190235630A1 (en) 2019-08-01
US10671170B2 (en) 2020-06-02
WO2018017933A1 (en) 2018-01-25
JP7248568B2 (ja) 2023-03-29
WO2018017932A1 (en) 2018-01-25
EP3488184A1 (en) 2019-05-29
EP3487280A4 (en) 2019-12-25
US20190276051A1 (en) 2019-09-12
WO2018017210A1 (en) 2018-01-25
EP3487739A4 (en) 2019-12-25
EP3488325B1 (en) 2023-04-19
US11275442B2 (en) 2022-03-15
US10915175B2 (en) 2021-02-09
CN109475079B (zh) 2023-03-14
US11392201B2 (en) 2022-07-19
US10890975B2 (en) 2021-01-12
US20190243450A1 (en) 2019-08-08
JP2019530049A (ja) 2019-10-17
CN109476318B (zh) 2022-06-24
CN109475079A (zh) 2019-03-15
JP2022075801A (ja) 2022-05-18
EP3487280B1 (en) 2022-03-30
JP7144400B2 (ja) 2022-09-29
US20190283780A1 (en) 2019-09-19
EP3488427B1 (en) 2023-04-05
WO2018017212A1 (en) 2018-01-25
EP3488427A1 (en) 2019-05-29
CN109564464B (zh) 2024-01-09
EP3488325A1 (en) 2019-05-29
EP3488326B1 (en) 2024-01-03

Similar Documents

Publication Publication Date Title
CN109478354B (zh) 触觉引导系统
EP2933130B1 (en) Vehicle control apparatus and method thereof
US10229595B2 (en) Vehicle interface device
US20130204457A1 (en) Interacting with vehicle controls through gesture recognition
US20160132126A1 (en) System for information transmission in a motor vehicle
EP3051784A1 (en) Operating a vehicle and a wearable device
CN110740896B (zh) 用于运输工具的用户界面以及具有用户界面的运输工具
US20160090103A1 (en) Vehicle interface input receiving method
US11181909B2 (en) Remote vehicle control device, remote vehicle control system, and remote vehicle control method
KR20180091732A (ko) 사용자 인터페이스, 운송 수단 및 사용자 구별을 위한 방법
GB2534163A (en) Vehicle interface device
US20130187845A1 (en) Adaptive interface system
GB2534165A (en) Vehicle interface device
CN114340975B (zh) 信息提示装置、信息提示方法以及计算机能读取的记录介质
GB2534164A (en) Vehicle interface device
KR20230157614A (ko) 차량용 제스처 인식 시스템 및 그 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant