CN105786172A - 使用相关联的感觉反馈进行跟踪的系统和方法 - Google Patents

使用相关联的感觉反馈进行跟踪的系统和方法 Download PDF

Info

Publication number
CN105786172A
CN105786172A CN201511005157.4A CN201511005157A CN105786172A CN 105786172 A CN105786172 A CN 105786172A CN 201511005157 A CN201511005157 A CN 201511005157A CN 105786172 A CN105786172 A CN 105786172A
Authority
CN
China
Prior art keywords
parts
sensory feedback
user
equipment
tracking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201511005157.4A
Other languages
English (en)
Inventor
S·梅雷
T·C·温格罗夫
P·O·莫里斯
K·恩特斯敏格尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Visteon Global Technologies Inc
Original Assignee
Visteon Global Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visteon Global Technologies Inc filed Critical Visteon Global Technologies Inc
Publication of CN105786172A publication Critical patent/CN105786172A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/25—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using haptic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60C—VEHICLE TYRES; TYRE INFLATION; TYRE CHANGING; CONNECTING VALVES TO INFLATABLE ELASTIC BODIES IN GENERAL; DEVICES OR ARRANGEMENTS RELATED TO TYRES
    • B60C9/00—Reinforcements or ply arrangement of pneumatic tyres
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/111—Instrument graphical user interfaces or menu aspects for controlling multiple devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/113—Scrolling through menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/115—Selection of menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q3/00—Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors
    • B60Q3/80—Circuits; Control arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • User Interface Of Digital Computer (AREA)
  • Electromagnetism (AREA)
  • Acoustics & Sound (AREA)

Abstract

本公开内容的方面提供具有相关联的感觉反馈的跟踪系统，以及用于使用该跟踪系统在车辆内激活部件和调整部件的操作模式的方法。可基于由跟踪系统检测到的用户的凝视或输入—和/或响应于部件的操作模式的改变来提供感觉反馈。所述系统和方法还可以包括通过基于手势的控制来控制和调整部件的能力。

Description

使用相关联的感觉反馈进行跟踪的系统和方法
相关申请的交叉引用
本专利申请要求现在未决的美国临时申请号62/098,126的优先权，该申请提交于2014年12月30日，标题为“使用相关联的感觉反馈进行跟踪的系统和方法”。本专利申请包含美国临时专利申请号62/098,126的全部内容。
发明背景
车辆内的不同部件由具体功能、开关、按钮、触摸屏、手势控制系统或头部跟踪系统来控制和调整。例如，一些输入和系统要求用户滚动通过多个图形界面来选择具体部件并调整该部件。一些车辆具有并不响应于选择用于调整的部件以及在调整该部件后提供相关联的交互反馈的输入和系统。其他输入和系统可以在屏幕上或者在与部件被调整的位置分隔开的区域中提供用户反馈。或者，输入和系统也可在相当长的一段时间已经过去之后提供用户反馈，以使得用户不能够确定是否已有效地调整部件或不能够确定他们是否在调整部件时犯错。换句话说，部件的输入和系统与任何反馈分离或隔开，以使得每个输入/系统和反馈并不一起无缝地运行。
因此，提供对部件和/或操作模式的容易调整，并提供与所调整的部件相关联的反馈以警告用户关于选择、操作模式改变、或者错误的系统和方法是期望的。
发明内容
在本文中提供了一种用于使用安装在车辆中的跟踪设备来提供感觉反馈的系统。所述系统包括：跟踪模块，所述跟踪模块被配置为跟踪用户运动，所述用户运动独立于用户与用于控制所述车辆的部件的输入进行物理接触；以及感觉反馈模块，所述感觉反馈模块被配置为响应于跟踪模块跟踪用户与车辆部件的接合而提供感觉反馈。
在另一个示例中，所述跟踪模块还包括：眼睛凝视跟踪装置，并且响应于所述眼睛凝视跟踪装置检测到所述用户的眼睛定向未朝向所述部件，促使所述感觉反馈模块提供感觉反馈。
在另一个示例中，所述感觉反馈被定义为触觉响应。
在另一个示例中，所述感觉反馈被定义为声音响应。
在另一个示例中，所述感觉反馈被定义为视觉响应。
在另一个示例中，所述视觉响应是围绕所述部件的发光元件。
在另一个示例中，所述车辆包括另外提供给所述部件的多个部件，并且所述感觉反馈模块还被配置为响应于跟踪模块检测到注意力从第一部件到第二部件的改变而提供感觉反馈。
本文中还描述了一个部件接口。所述部件接口位于车辆中，所述部件接口耦合到具有跟踪设备的电子控制单元(ECU)。所述部件接口包括电子控制部，所述电子控制部与所述ECU电耦合，其中，所述ECU被配置为从接口设备直接控制所述部件；以及感觉反馈设备，所述感觉反馈设备被配置为响应于所述跟踪设备检测到与所述部件的用户接合而提供感觉反馈，所述用户接合独立于与所述部件的物理接触。
在另一个示例中，所述部件接口安装在所述车辆的仪表板中。
在另一个示例中，所述部件接口是通信系统、全球定位卫星设备、娱乐显示器、以及高压空调单元的其中之一。
在另一个示例中，所述接口设备是电子显示器。
在另一个示例中，所述感觉反馈被定义为触觉响应。
在另一个示例中，所述感觉反馈被定义为声音响应。
在另一个示例中，在表面上提供发光面板，其中，所述部件接口是用户可见的，并且所述感觉反馈被定义为在所述发光面板上所提供的视觉响应。
本文中还描述了提供于车辆中的电子显示器设备。电子显示器包括接口设备，所述接口设备被配置为控制所述车辆中的部件；耦合逻辑电路，所述耦合逻辑电路被配置为使所述电子显示器与跟踪设备和所述部件电耦合，并且响应于所述跟踪设备表示用户正在以非物理方式与所述部件接合，所述接口设备被指示为仅与所述部件电接合。
附图说明
由于当结合附图考虑时通过参考以下具体实施方式将变得更能理解本公开内容的其他优点，因此将容易认识到本公开内容的其他优点，在附图中：
图1是根据本公开内容的用于激活部件和调整部件的操作模式的具有相关联的感觉反馈的跟踪系统的框图；
图2是根据本公开内容的车辆驾驶舱的例示，该车辆驾驶舱具有用于激活部件和调整部件的操作模式的具有相关联的感觉反馈的跟踪系统；
图3是根据本公开内容的一个方面的通过跟踪系统所选择的部件的示例的例示；
图4是根据本公开内容的一个方面的通过具有相关联的感觉反馈的跟踪系统所选择的部件的示例的例示；以及
图5是根据本公开内容的通过具有相关联的感觉反馈的跟踪系统来激活部件和调整部件的操作模式的方法的流程图。
具体实施方式
本文中提供了本公开内容的详细示例；然而，应理解所公开的示例仅是示例性的并且可以以各种形式和替代的形式来体现。并不意味着这些示例例示并描述了本公开内容的所有可能的形式。相反，本说明书中使用的词语是描述的词语，而不是限制的词语，并且应理解在不脱离本公开内容的精神和范围的情况下可以做出各种变化。如本领域的普通技术人员将理解的，如参照附图中的任何附图所例示和描述的本公开内容的各个部件可以与在一个或多个其他附图中所例示的部件组合，以产生未明确例示出的或者描述的本公开内容的示例。所例示的部件的组合为典型应用提供了代表性的示例。然而，对于特定的应用或实施方式，可以期望与本公开内容的教导相一致的对部件的各种组合和修改。
具体实施方式
本文中提供了本公开内容的详细示例；然而，应理解所公开的示例仅是示例性的并且可以以各种形式和替代的形式来体现。并不意味着这些示例例示并描述了本公开内容的所有可能的形式。相反，本说明书中使用的词语是描述的词语，而不是限的制词语，并且应理解在不脱离本公开内容的精神和范围的情况下可以做出各种变化。如本领域的普通技术人员将理解的，如参照附图中的任何附图所例示和描述的本公开内容的各个部件可以与在一个或多个其他附图中所例示的部件组合，以产生未明确例示出的或者描述的本公开内容的示例。所例示的部件的组合为典型应用提供了代表性的示例。然而，对于特定的应用或实施方式，可以期望与本公开内容的教导相一致的对部件的各种组合和修改。
本公开内容的方面提供了具有相关联的感觉反馈的跟踪系统，以及用于通过具有相关联的感觉反馈的跟踪系统来激活部件以及调整或改变部件的操作模式的方法。跟踪系统可以包括跟踪模块、感觉反馈模块、手势控制模块、以及部件模块。跟踪系统可以被配置为跟踪用户的眼睛在三维空间中的位置并选择或激活用户关注的部件。随后，用户可以通过使用手势控制模块进行手势检测来控制以及改变或调整部件的操作模式。跟踪系统还可以被配置为响应于所选择或所激活的部件而向用户提供感觉反馈。跟踪系统还可以响应于对部件的操作模式的改变，或者响应于对部件的操作模式的尝试的或未成功的改变而向用户提供感觉反馈。
跟踪系统具有各种优点。首先，跟踪系统允许将三维凝视跟踪检测与基于手势的控制结合在相同系统中。跟踪系统还允许用户以容易的方式来改变或更改部件的操作模式。跟踪系统还响应于用户眼睛的方向、部件的操作模式的改变、或者对改变部件的操作模式的未成功尝试而提供用户反馈。
图1是根据本公开内容的用于激活部件和调整部件操作模式的具有相关联的感觉反馈的跟踪系统10的框图。跟踪系统10可以被配置为检测用户关注的部件，以响应于用户的凝视而激活部件，并且被配置为向用户提供与所激活的部件相关联的感觉反馈。感觉反馈可以是视觉的、声音的、或者触觉的。感觉反馈也可以是关于部件状况的响应。跟踪系统10也可以被配置为采用基于手势的控制来改变或调整部件的操作模式，并且可以提供与操作模式的改变相关联的感觉反馈。
跟踪系统10可以包括跟踪模块12，跟踪模块被配置为检测用户的凝视，并且还被配置为使一个或多个区域与一个或多个部件相关联以辅助检测用户的凝视。用户的凝视可通过在三维空间中的用户的眼睛的位置、视线、头部位置、或它们的组合来确定。换句话说，用户的凝视可以被检测到XYZ平面，以选择或激活部件。例如，如果用户关注位于第一区域中的HVAC通风口，则跟踪模块12可以考虑相对于XYZ平面或区域的用户的眼睛的位置、视线、或头部位置，以确定用户凝视于HVAC单元。跟踪模块12可以包括跟踪设备，例如用于检测用户的凝视的一个或多个摄像头和传感器。例如，摄像头可以是被配置为检测用户的眼睛、视线、或头部位置的任何摄像头。在替代方案中，传感器可以是被配置为检测用户的眼睛、视线、或头部位置的红外传感器或任何位置传感器。
在另一方面中，跟踪模块12可以包括用于检测用户凝视的一个或多个摄像头和传感器的组合。跟踪设备12可以设置在车辆的方向盘内、在邻近方向盘的面板内、或者方向盘上方。跟踪设备12还可以被配置为能够自动调整的，或可以响应于在车辆驾驶舱的任何区域内检测到用户凝视而旋转。跟踪模块12可以与车辆跟踪块相互作用，后者转而可与车辆的电子控制单元通信。在替代方案中，跟踪模块12可以包括发射机，该发射机被配置为向车辆块发送表示用户的眼睛或头部位置的数据，该车辆块可接收和处理该数据，并可激活通过用户的凝视所选择的部件以控制和调整部件的操作模式。
跟踪系统10还可以包括手势控制模块16、感觉反馈模块18、以及部件模块20。每个模块可彼此通信并也可与跟踪模块12通信。每个模块还可与对应的车辆块(例如手势控制块、感觉反馈块、以及部件块)相互作用，或者可通过一个或多个发射机和接收机而直接与电子控制单元相互作用。
手势控制模块16可以被配置为检测用户的执行手势以控制和/或调整部件的操作模式。手势控制模块16可包括手势检测设备，例如一个或多个摄像头、传感器、或它们的组合。手势可以由制造商或用户预编或设置。另外，具体手势可与某些特征相关联。例如，用户可以转动他们的手，类似于他们在转动旋钮以调整车辆内的温度。手势控制模块16可以采用并存储查找表来将手势与用于一个或多个部件的具体操作模式相关联。
感觉反馈模块18可以被配置为响应于通过用户的凝视所选择或所激活的部件而向用户提供感觉反馈。感觉反馈模块18还可以响应于部件的操作模式的改变，或响应于部件的操作模式的未成功的改变而向用户提供感觉反馈。未成功的改变可以是手势控制模块16未识别的手势、用户没有正确执行的手势，或用户错误/误差。感觉反馈可以包括但不限于环境光线的颜色强度改变、触觉反馈、语音响应、声音、钟声、音乐、或其他视觉反馈，例如显示文本或图形的改变。例如，如图4中所示，围绕HVAC单元的区域可以响应于在HVAC单元处检测到的用户凝视而照亮。感觉反馈模块还可以通过查找表将某些部件与感觉反馈的类型相关联。
部件模块20可以包括一个或多个部件，该一个或多个部件可由跟踪模块12来选择和激活并可由手势控制模块16控制。该部件可包括但不限于HVAC显示器和单元、娱乐显示器、全球定位系统(GPS)显示器、窗口控制系统、镜控制系统、以及雨刷系统。该部件还可以与一个或多个区域相关联以辅助凝视检测。
在操作中，跟踪系统10可以与车辆驾驶舱的电子控制单元相互作用来控制和调整部件。跟踪设备可以采用三维的凝视检测来确定具有区域的用户的眼睛的位置、视线、或者头部位置。具体来说，跟踪设备可以检测朝向与部件相关联的三维区域的用户的凝视。跟踪设备向车辆的电子控制单元发送指示用户的凝视的信号，以通过部件模块来激活部件。可以响应于部件的激活而向用户提供感觉反馈。感觉反馈可以是通常与部件相关联的反馈。例如，当在第二区域中的显示器处检测到用户凝视时，该显示器可以变得更亮。用户随后可以执行手势来调整或改变部件的操作状况。具体的手势可以与部件相关联。例如，如果用户期望调整收音机上的音量，则用户可以使他们的手向上或向下运动，以增大或降低收音机音量。还可以提供感觉反馈来警告用户已经存在部件的操作模式的改变。
图2是根据本公开内容的车辆驾驶舱30的例示，该车辆驾驶舱具有用于激活部件和调整部件的操作模式的具有相关联的感觉反馈的跟踪系统10。车辆驾驶舱30可以具有使用用户的凝视来激活并可以使用用户的手势来控制和调整的一个或多个部件32。部件模块20可以包括一个或多个部件，例如但不限于用于提供热量和空调的HVAC显示器和单元38、用于向用户提供媒体内容的娱乐显示器36、用于向用户提供车辆的位置相关服务的GPS显示器、用于控制车窗的窗户控制系统40、用于控制与车辆相关联的一个或多个镜子的镜控制系统、天气系统42和用于操作雨刷的雨刷系统44。部件32还可以与车辆驾驶舱30中的区域相关联。例如，第一部件(例如HVAC单元38)可与第一区域相关联，并且第二部件(例如窗户控制单元)可与第二区域相关联。区域由虚线“A”来表示。该区域可辅助检测用户的凝视并可以是三维空间。具体来说，用户的凝视可以被检测到XYZ平面，以选择或激活部件。
图2还示出了具有跟踪设备34的跟踪模块12，其用于在相关联的区域“A”内检测用户的凝视以激活部件32。跟踪设备34可设置在邻近于方向盘的区域中用于跟踪用户的凝视。跟踪设备34可包括一个或多个摄像头、传感器、或它们的组合。当部件32被激活时，可以向用户提供感觉反馈，以警告用户所激活的部件32，并警告用户他们可调整所激活的部件32。
系统10还可以包括手势控制模块18。手势控制模块18可包括手势检测设备46，例如一个或多个摄像头、传感器、或它们的组合。手势控制模块18还可以包括用于允许对部件进行物理调整的输入设备48。输入设备48可包括一个或多个开关、触发器、按钮、键盘、或触摸屏。输入设备50可以位于车辆驾驶舱30的中控台50内。输入设备48也可以位于车辆驾驶舱30的其他区域中。例如，输入设备48可位于方向盘上。手势检测设备46也可以位于中控台50内，并也可以邻近输入设备48。另外，手势控制模块18可以被配置经为由手势检测设备46来检测由用户执行的手势。手势可用于调整或改变所选择的部件32的操作模式。手势可以由制造商预编或可以由用户预选。
可以响应于操作模式的改变来提供感觉反馈，或者提供感觉反馈来指示用户做出的错误。例如，如果用户做出了与HVAC温度的改变相关联的手势，则围绕HVAC显示器38的红光的强度可随着温度提高而增加，或围绕HVAC显示器38的蓝光的强度可随着温度降低而增加。在另一个示例中，用户可以接收响应于手势控制模块18不识别的手势的语音响应。语音响应可以是关于部件的状况或操作模式的响应。例如，语音响应可以在用户进入车辆后说“brrrr”，并用于警告用户车辆是冷的并且他们应调整车辆温度。
图3是根据本公开内容的一方面的通过跟踪系统10所选择的部件32的示例的例示。部件32可以包括图形显示器60。图形显示器60可以被划分为包括多个部件显示器62，例如娱乐显示器36、GPS显示器37、HVAC单元38、以及通信系统64。当跟踪设备检测到用户52关注部件显示器62的其中之一(例如娱乐显示器36)时，图形显示器60可以显示用于控制具体部件的控制界面，或可以显示所选择的部件显示器62(即，娱乐显示器36)的展开图。用户52随后可以通过一个或多个手势(未示出)或通过输入设备(未示出)来控制和调整所选择的部件显示器62的操作模式。
参考图4，根据本公开内容的一方面示出了通过具有相关联的感觉反馈的跟踪系统10所选择的部件32的示例的例示。具体来说，图4示出了跟踪设备34检测到HVAC显示器和单元38(并且具体来说HVAC通风口54)上的用户52的凝视。响应于用户的凝视，围绕HVAC通风口54的区域56照亮，如标记为“B”。
图5是根据本公开内容的用于通过具有相关联的感觉反馈的跟踪系统来激活部件和调整部件的操作模式的方法的流程图。如图1中所描述的，跟踪系统可以包括的跟踪模块、手势控制模块、感觉反馈模块、以及部件模块。跟踪模块可经由跟踪设备100来在三维区域内检测用户对部件的凝视以激活该部件。该方法还可以包括从跟踪模块向车辆块发送指示部件上的凝视检测的信号102，并可通过用户的凝视来激活104。可以提供感觉反馈来警告用户部件已通过感觉反馈模块来激活106。一旦部件被激活104，则可检测指示部件的操作模式的改变或调整的手势108。部件随后可以被调整为将操作模式从第一操作模式改变成第二操作模式110。可以提供感觉反馈来指示操作模式的改变或未成功的改变112。跟踪设备随后可以检测用户对第二部件的凝视114，等等。或者，可以在激活部件之前向用户提供感觉反馈以警告用户应调整部件。
所示的设备中的某些设备包括计算系统。计算系统包括处理器(CPU)和使各个系统部件耦合到处理器的系统总线，系统部件包括系统存储器，例如只读存储器(ROM)和随机存取存储器(RAM)。也可以使用其他系统存储器。计算系统可以包括联网在一起以提供较大计算能力的多于一个的处理器或一组计算系统或计算系统集群。系统总线可以是若干类型总线结构中的任何总线结构，包括使用多种总线架构中的任何总线架构的存储器总线或存储器控制器、外围总线、以及本地总线。储存在ROM等中的基本输入/输出系统(BIOS)可提供基本例程，该基本例程有助于在计算系统内的元件之间传递信息，例如在启动期间。计算系统还包括数据储存装置，其根据公知的数据库管理系统来维持数据库。数据储存装置可以以许多形式来体现，例如硬盘驱动器、磁盘驱动器、光盘驱动器、磁带驱动器、或可储存可由处理器存取的数据的另一类型的计算机可读介质，例如盒式磁带、闪存卡、数字多功能盘、匣式磁带、随机存取存储器(RAM)和只读存储器(ROM)。数据储存装置可通过驱动器接口来连接到系统总线。数据储存装置提供对计算机可读指令、数据结构、程序模块和用于计算系统的其他数据的非易失性储存。
为了实现人类(并且在某些实例中，机器)用户交互，计算系统可包括输入设备，例如用于语音和音频的麦克风、用于手势输入或图形输入的触敏屏、键盘、鼠标、运动输入等。输出设备可以包括多个输出机构中的一个或多个输出机构。在某些实例中，多模式系统使用户能够提供多种类型的输入来与计算系统进行通信。通信接口通常使计算设备系统能够使用各种通信协议和网络协议来与一个或多个其他计算设备通信。
前面的公开内容提到多个流程图和伴随的描述以说明图6和图7中呈现的实施例。所公开的设备、部件、以及系统考虑了使用或实施用于执行这些附图中例示出的步骤的任何适当的技术。因此，图6和图7仅用于例示的目的，并且所描述的步骤或类似的步骤可在任何合适的时间执行，包括同时执行、单独执行或组合执行。另外，这些流程图中的步骤中的许多步骤可以同时发生和/或以与所示出的和所描述的顺序不同的顺序发生。此外，所公开的系统可以使用具有另外的、较少的和/或不同的步骤的过程和方法。
可以在数字电子电路中，或在计算机软件、固件或硬件中实现本文所公开的实施例，包括在本文中公开的结构和它们的等同方式。一些实施例可以被实现为一个或多个计算机程序，即计算机程序指令的一个或多个模块，其被编码在有形的计算机储存介质上以便由一个或多个处理器执行。计算机储存介质可以是计算机可读储存设备、计算机可读储存基板或随机存取存储器或串行存取存储器，或可以包括在它们之中。计算机储存介质还可以是一个或多个单独的有形部件或介质(例如多张CD、盘片、或其他储存设备)，或可以包括在它们之中。计算机储存介质不包括暂时的信号。
如本文中所使用的，术语处理器包括用于处理数据的所有种类的装置、设备、以及机器，举例来说，包括可编程处理器、计算机、片上系统，或多个前述装置、设备、以及机器，或前述装置、设备、以及机器的组合。处理器可以包括专用逻辑电路，例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。除硬件之外，处理器还可以包括为所运行的计算机程序创建执行环境的代码，例如构成以下的代码：处理器固件、协议堆栈、数据库管理系统、操作系统、跨平台运行时环境、虚拟机，或它们中的一个或多个的组合。
计算机程序(还被称为程序、模块、引擎、软件、软件应用程序、脚本、或代码)可以以任何编程语言形式(包括汇编语言或解释语言、说明性语言或过程语言)来编写，并且程序可以以任何形式来部署，包括作为独立程序或作为模块、部件、子例程、对象、或适合于在计算环境中使用的其他单元。计算机程序可以但不需要对应于文件系统中的文件。程序可储存在保存其他程序或数据的文件的一部分(例如，存储在标记语言文档中的一个或多个脚本)中、储存在专用于所运行的程序的单一文件中、或储存在多个协同文件(例如，储存一个或多个模块、子程序、或代码的部分的文件)中。计算机程序可被部署为在一台计算机上或在多台计算机(其位于一个地点或分布跨越多个地点并通过通信网络互连)上执行。
为了提供与个人的交互，可使用交互式显示(例如图形用户界面(GUI))来实现本文中所公开的实施例。此类GUI可以包括交互式特征，例如弹出菜单或列表或者下拉菜单或列表、选择标签、可扫描的特征、以及可接收人类输入的其他特征。
本文中所公开的计算系统可包括客户端和服务器。客户端和服务器通常彼此远离并且通常通过通信网络进行交互。客户端与服务器的关系借助于在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序而产生。在一些实施例中，服务器将数据(例如，HTML页面)发送到客户端设备(例如，为了向与客户端设备交互的用户显示数据以及从该用户接收用户输入的目的)。可在服务器处从客户端设备接收在客户端设备处产生的数据(例如，用户交互的结果)。
对于本领域技术人员将显而易见的是，可在不脱离本发明的精神或范围的情况下在本发明中做出各种修改和变化。因此，旨在本发明涵盖本发明的修改和变型，只要这些修改和变型落在所附权利要求和其等同方式的范围内。

Claims (15)

1.一种用于使用安装在车辆中的跟踪设备来提供感觉反馈的系统，包括：
跟踪模块，所述跟踪模块被配置为跟踪用户运动，所述用户运动独立于所述用户与用于控制所述车辆的部件的输入进行物理接触；以及
感觉反馈模块，所述感觉反馈模块被配置为响应于所述跟踪模块跟踪所述用户与所述车辆的部件的接合而提供感觉反馈。
2.根据权利要求1所述的系统，其中，所述跟踪模块还包括眼睛凝视跟踪装置或头部跟踪装置，并且响应于所述眼睛凝视跟踪装置检测到所述用户的眼睛定向为朝向所述部件或者所述头部跟踪装置检测到所述用户的头部的移动，促使所述感觉反馈模块提供感觉反馈。
3.根据权利要求2所述的系统，其中，所述感觉反馈被定义为触觉响应。
4.根据权利要求2所述的系统，其中，所述感觉反馈被定义为声音响应。
5.根据权利要求2所述的系统，其中，所述感觉反馈被定义为视觉响应。
6.根据权利要求5所述的系统，其中，所述视觉响应是围绕所述部件的发光元件。
7.根据权利要求1所述的系统，其中，所述车辆包括另外提供给所述部件的多个部件，并且所述感觉反馈模块还被配置为响应于跟踪模块检测到注意力从第一部件到第二部件的改变而提供感觉反馈。
8.一种部件接口，所述部件接口被提供在车辆中，所述部件耦合到具有跟踪设备的电子控制单元(ECU)，所述部件接口包括：
电子控制部，所述电子控制部与所述ECU电耦合，其中，所述ECU被配置为从接口设备直接控制所述部件；以及
感觉反馈设备，所述感觉反馈设备被配置为响应于所述跟踪设备检测到与所述部件的用户接合而提供感觉反馈，所述用户接合独立于与所述部件的物理接触。
9.根据权利要求8所述的部件接口，其中，所述部件接口安装在所述车辆的仪表板中。
10.根据权利要求8所述的部件接口，其中，所述部件接口是通信系统、全球定位卫星设备、娱乐显示器、以及高压空调单元的其中之一。
11.根据权利要求8所述的部件接口，其中，所述接口设备是电子显示器。
12.根据权利要求8所述的部件接口，其中，所述感觉反馈被定义为触觉响应。
13.根据权利要求8所述的部件接口，其中，所述感觉反馈被定义为声音响应。
14.根据权利要求8所述的部件接口，还包括提供于表面上的发光面板，其中所述部件接口是用户可见的，并且，所述感觉反馈被定义为在所述发光面板上所提供的视觉响应。
15.一种提供于车辆中的电子显示器设备，包括：
接口设备，所述接口设备被配置为控制所述车辆中的部件；
耦合逻辑电路，所述耦合逻辑电路被配置为使所述电子显示器与跟踪设备和所述部件电耦合，并且
响应于所述跟踪设备表示用户正在以非物理方式与所述部件接合，所述接口设备被指示为仅与所述部件电接合。
CN201511005157.4A 2014-12-30 2015-12-29 使用相关联的感觉反馈进行跟踪的系统和方法 Pending CN105786172A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201462098126P 2014-12-30 2014-12-30
US62/098,126 2014-12-30
US14/955,834 US9744853B2 (en) 2014-12-30 2015-12-01 System and method of tracking with associated sensory feedback
US14/955,834 2015-12-01

Publications (1)

Publication Number Publication Date
CN105786172A true CN105786172A (zh) 2016-07-20

Family

ID=56116854

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511005157.4A Pending CN105786172A (zh) 2014-12-30 2015-12-29 使用相关联的感觉反馈进行跟踪的系统和方法

Country Status (4)

Country Link
US (1) US9744853B2 (zh)
JP (1) JP2016126791A (zh)
CN (1) CN105786172A (zh)
DE (1) DE102015122489A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105739680A (zh) * 2014-12-29 2016-07-06 意美森公司 用于基于眼睛跟踪生成触觉效果的系统和方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11269403B2 (en) * 2015-05-04 2022-03-08 Disney Enterprises, Inc. Adaptive multi-window configuration based upon gaze tracking
CN104834446B (zh) * 2015-05-04 2018-10-26 惠州Tcl移动通信有限公司 一种基于眼球追踪技术的显示屏多屏控制方法及系统
FR3054050B1 (fr) * 2016-07-13 2018-07-20 Peugeot Citroen Automobiles Sa Dispositif de controle de fonction(s) assuree(s) par un vehicule, par detection de la direction d'observation
US10025383B2 (en) * 2016-07-20 2018-07-17 Toyota Motor Engineering & Manufacturing North America, Inc. Automatic pause and resume of media content during automated driving based on driver's gaze
CN107015637B (zh) * 2016-10-27 2020-05-05 阿里巴巴集团控股有限公司 虚拟现实场景下的输入方法和装置
DE102016014993B4 (de) * 2016-12-16 2020-12-03 Frank Brunzendorf Verfahren, Anwendung und System zur akustischen Produktprägung
EP3361352B1 (en) * 2017-02-08 2019-06-05 Alpine Electronics, Inc. Graphical user interface system and method, particularly for use in a vehicle
US11853469B2 (en) 2017-06-21 2023-12-26 SMR Patents S.à.r.l. Optimize power consumption of display and projection devices by tracing passenger's trajectory in car cabin
DE102017113763B4 (de) * 2017-06-21 2022-03-17 SMR Patents S.à.r.l. Verfahren zum Betreiben einer Anzeigevorrichtung für ein Kraftfahrzeug sowie Kraftfahrzeug
JP7280072B2 (ja) * 2019-03-18 2023-05-23 本田技研工業株式会社 報知制御装置、および、報知制御方法
DE102019002794A1 (de) * 2019-04-16 2020-10-22 Daimler Ag Verfahren zum Steuern einer Beleuchtung
US11277277B2 (en) * 2019-06-03 2022-03-15 International Business Machines Corporation Indoor environment personalization preferences
KR20220000536A (ko) * 2020-06-26 2022-01-04 현대자동차주식회사 차량 주행 제어 장치 및 방법

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6397137B1 (en) 2001-03-02 2002-05-28 International Business Machines Corporation System and method for selection of vehicular sideview mirrors via eye gaze
JP2006134166A (ja) * 2004-11-08 2006-05-25 Alpine Electronics Inc タッチパネルを用いた入力システム
JP2006268209A (ja) * 2005-03-23 2006-10-05 Akinori Yoshino ユーザの身体動作による遠隔命令入力装置
US7987030B2 (en) * 2005-05-25 2011-07-26 GM Global Technology Operations LLC Vehicle illumination system and method
EP1943583B1 (en) 2005-10-28 2019-04-10 Tobii AB Eye tracker with visual feedback
JP4757091B2 (ja) * 2006-04-28 2011-08-24 本田技研工業株式会社 車両搭載機器の操作装置
JP2008058409A (ja) * 2006-08-29 2008-03-13 Aisin Aw Co Ltd 音声認識方法及び音声認識装置
JP2010009484A (ja) * 2008-06-30 2010-01-14 Denso It Laboratory Inc 車載機器制御装置および車載機器制御方法
US20120169582A1 (en) * 2011-01-05 2012-07-05 Visteon Global Technologies System ready switch for eye tracking human machine interaction control system
JP2013168762A (ja) * 2012-02-15 2013-08-29 Panasonic Corp 情報入力装置および情報入力方法
JP5813562B2 (ja) * 2012-04-16 2015-11-17 株式会社豊田中央研究所 操作支援装置、操作システム、操作支援方法、及びプログラム
US9626072B2 (en) 2012-11-07 2017-04-18 Honda Motor Co., Ltd. Eye gaze control system
JP6202810B2 (ja) * 2012-12-04 2017-09-27 アルパイン株式会社 ジェスチャ認識装置および方法ならびにプログラム
US9833697B2 (en) 2013-03-11 2017-12-05 Immersion Corporation Haptic sensations as a function of eye gaze
US9244527B2 (en) 2013-03-26 2016-01-26 Volkswagen Ag System, components and methodologies for gaze dependent gesture input control
US20140350942A1 (en) * 2013-05-23 2014-11-27 Delphi Technologies, Inc. Vehicle human machine interface with gaze direction and voice recognition
US10914951B2 (en) * 2013-08-19 2021-02-09 Qualcomm Incorporated Visual, audible, and/or haptic feedback for optical see-through head mounted display with user interaction tracking
US20150185834A1 (en) * 2013-12-26 2015-07-02 Theodore Charles Wingrove System and method for gaze tracking
US9618611B2 (en) * 2014-09-24 2017-04-11 Nxp B.V. Personal radar assistance

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105739680A (zh) * 2014-12-29 2016-07-06 意美森公司 用于基于眼睛跟踪生成触觉效果的系统和方法

Also Published As

Publication number Publication date
DE102015122489A1 (de) 2016-06-30
JP2016126791A (ja) 2016-07-11
US9744853B2 (en) 2017-08-29
US20160185220A1 (en) 2016-06-30

Similar Documents

Publication Publication Date Title
CN105786172A (zh) 使用相关联的感觉反馈进行跟踪的系统和方法
US11573638B2 (en) Facilitating interaction with a vehicle touchscreen using haptic feedback
EP3299208B1 (en) Human machine interface (hmi) control unit for multiple vehicle display devices
US9043042B2 (en) Method to map gaze position to information display in vehicle
CN112241204B (zh) 一种车载ar-hud的手势交互方法和系统
US20170243389A1 (en) Device and method for signalling a successful gesture input
US9244527B2 (en) System, components and methodologies for gaze dependent gesture input control
US20170364148A1 (en) Control device for vehicle and control method thereof
JP2018150043A (ja) 自動車における情報伝送のためのシステム
WO2016189390A2 (en) Gesture control system and method for smart home
JP6386618B2 (ja) ジェスチャ用のインテリジェントなチュートリアル
US20190288916A1 (en) System and method for a vehicle zone-determined reconfigurable display
TW201708881A (zh) 擴增實境互動系統及其動態資訊互動顯示方法
KR20210129575A (ko) 위젯을 이용한 차량용 인포테인먼트 장치와 그의 동작 방법
CN105739681A (zh) 改变触觉控制器的触觉表面来传达交互式系统信息的技术
US20150241990A1 (en) Method and Device for Operating an Input Device
US20230049900A1 (en) Displaced haptic feedback
JP2017197015A (ja) 車載用情報処理システム
CN111124236A (zh) 一种数据处理方法、装置和机器可读介质
US10899229B2 (en) Operating system with three-dimensional display for a vehicle
JP2020126282A (ja) 入力システム、入力方法
US20150091876A1 (en) Curved display apparatus with safety button
JP2020050000A (ja) 表示装置
KR20200068089A (ko) 차량용 증강현실 디스플레이를 위한 직관적 상호작용 방법 및 시스템
CN118220121A (zh) 基于方向盘的泊车方法、装置及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160720

WD01 Invention patent application deemed withdrawn after publication