CN107193365A - 用于车内环境的不依赖于方向的空中手势检测服务 - Google Patents

用于车内环境的不依赖于方向的空中手势检测服务 Download PDF

Info

Publication number
CN107193365A
CN107193365A CN201710154077.8A CN201710154077A CN107193365A CN 107193365 A CN107193365 A CN 107193365A CN 201710154077 A CN201710154077 A CN 201710154077A CN 107193365 A CN107193365 A CN 107193365A
Authority
CN
China
Prior art keywords
gesture
vehicle
aerial gesture
aerial
order
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710154077.8A
Other languages
English (en)
Other versions
CN107193365B (zh
Inventor
斯蒂芬·罗纳德·图凯斯
皮埃特·布托罗
詹姆斯·斯特沃特·兰金二世
斯图亚特·C·索尔特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of CN107193365A publication Critical patent/CN107193365A/zh
Application granted granted Critical
Publication of CN107193365B publication Critical patent/CN107193365B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及用于车内环境的不依赖于方向的空中手势检测服务。车辆传感器可指示航向角。多个座椅区域可分别包括指示座椅角度的方向传感器。位于所述座椅区域的一个座椅区域中的组件可提供描述适用于所述一个座椅区域的命令和相关的空中手势的界面信息,并响应于个人装置检测到对应的空中手势考虑所述航向角和座椅角度,执行所述命令中的一个。来自个人装置的手势输入可被调整,以使用所述装置的方向、相对于磁场北极的车辆航向以及针对所述装置所在的座椅区域的方向角来创建所述座椅区域中的车内组件的参考系中的加速度数据。当所述加速度数据与空中手势库中的空中手势匹配时,可向所述车内组件发送与匹配的空中手势对应的命令。

Description

用于车内环境的不依赖于方向的空中手势检测服务
技术领域
说明性的实施例总体上涉及用于在车内环境中使用的不依赖于方向的空中手势检测服务。
背景技术
空中手势是指通过用户在空中做出动作而执行的装置控制功能。实现空中手势的一个挑战是建立适当的相对于用户的参考系。尽管装置(诸如电话或可穿戴装置)能够确定磁场北极的位置和重力的方向,但是确定装置用户正面对什么方向以正确地解释空中手势是更困难的。针对这个原因,当前的手势检测实施方式可能要求装置处于特定方向或者在每个会话之前执行校准,以准确地检测空中手势。
发明内容
在第一说明性实施例中,一种系统包括:车辆传感器,指示航向角;多个座椅区域,分别包括指示座椅角度的方向传感器;位于所述座椅区域中的一个座椅区域内的组件,所述组件被配置为:提供描述适用于所述一个座椅区域的命令和相关的空中手势的界面信息。所述组件还被配置为:响应于个人装置检测到对应的空中手势,考虑所述航向角和所述座椅角度,执行所述命令中的一个。
在第二说明性实施例中,一种方法包括:调整来自个人装置的手势输入,以使用所述个人装置的方向、相对于磁场北极的车辆航向以及针对所述个人装置所在的座椅区域的方向角来创建所述座椅区域中的车内组件的参考系中的加速度数据。当所述加速度数据与空中手势库中的空中手势匹配时,所述方法包括:向所述组件发送与匹配的空中手势对应的命令。
在第三说明性实施例中,一种系统包括:处理器、加速度传感器、方向传感器、无线收发器、以及存储手势检测服务的存储器。所述手势检测服务包括当被所述处理器执行时使得所述处理器执行以下操作的指令:根据来自所述加速度传感器和所述方向传感器的数据来检测车辆的乘员执行的空中手势。一种应用包括当被所述处理器执行时使得所述处理器执行以下操作的指令:使用所述无线收发器从车辆组件接收描述命令和针对所述命令的对应的空中手势的界面信息;利用所述手势检测服务来确定所述空中手势何时被执行;响应于所述手势检测服务确定针对所述命令中的一个命令的对应的空中手势被执行,使用无线收发器向所述车辆组件发送所述命令中的所述一个命令。
附图说明
图1A示出了包括具有车内组件的网格(mesh)的车辆的示例系统,所述车内组件的网格被配置为定位用户及用户的个人装置并与用户及用户的个人装置进行交互;
图1B示出了配备有无线收发器的示例车内组件,所述无线收发器被配置为便于检测个人装置并识别个人装置的接近;
图1C示出了从车辆的其它车内组件请求信号强度的示例车内组件;
图2A至图2C示出了具有不同的座椅布置的车辆的示例;
图3示出了用于收集手势数据并将所述数据归一化到用户方向参考系的示例处理;
图4示出了来自个人装置的X、Y和Z加速度数据的示例轨迹;
图5A和图5B示出了存储的空中手势的示例库;
图6示出了执行的空中手势与空中手势库的k-均值匹配的示例;
图7示出了用于通过手势检测服务检测空中手势的示例处理。
具体实施方式
根据需要,在此公开本发明的详细实施例;然而,将理解的是,所公开的实施例仅是本发明的示例,其中,本发明可以以各种可替代形式来实现。附图无需按比例绘制;一些特征可被夸大或最小化以示出特定组件的细节。因此,在此公开的具体结构和功能细节不应被解释为具有限制性,而仅作为用于教导本领域技术人员以多种形式利用本发明的代表性基础。
空中手势是指通过用户在空中做出动作而执行的装置控制功能。许多手势输入系统使用固定在与重力和磁场北极相关的位置的传感器,使得一旦在会话中向北和向下校准,则校准不需要进一步调整。然而,固定的初始校准可能需要调整以用于在车辆环境中使用。在示例中,车辆的航向可随着车辆移动而改变,或者用户的方向可随着车辆座椅沿着相对于车辆的方向旋转而改变。为了在这种环境中捕获手势,手势检测器可执行调整,所述调整用于相对于初始校准适当地对手势重新定向(reoient)。
手势检测器可被配置为检测由车辆乘员使用他们的电话(或其它个人装置)执行的用于控制车辆功能的空中手势。可使用关于重力和磁北的坐标来识别空中手势,并随后由手势检测器将空中手势相对于车辆和车辆内的用户的座椅的方向进行归一化。因此,手势检测器可随着车辆移动或者随着车辆座椅沿着车辆的方向旋转来捕获空中手势,并可执行调整以适当地对手势重新定向。本公开的进一步的方面在以下详细描述。
图1A示出了包括具有车内组件106的网格的车辆102的示例系统100-A,所述车内组件106的网格被配置为定位用户及用户的个人装置104并与用户及用户的个人装置104进行交互。系统100-A可被配置为允许用户(诸如车辆乘员)与车辆102中的车内组件106进行无缝交互或者与任何其它启用架构的车辆102进行无缝交互。此外,该交互可在不需要个人装置104已经与车辆102的主机单元或其它集中式计算平台配对或通信的情况下被执行。
车辆102可包括各种类型的机动车,诸如跨界多用途车辆(CUV)、运动型多用途车辆(SUV)、卡车、休旅车(RV)、船、飞机或用于运输人或货物的其它移动机器。在许多情况下,车辆102可由内燃发动机来驱动。作为另一种可能性,车辆102可以是由内燃发动机和一个或更多个电动马达两者来驱动的混合动力电动车辆(HEV),诸如串联式混合动力电动车辆(SHEV)、并联式混合动力电动车辆(PHEV)或并联/串联式混合动力电动车辆(PSHEV)。由于车辆102的类型和配置可能有所不同,所以车辆102的功能可能相应地有所不同。作为一些其它可能性,车辆102可针对载客量、牵引能力和容量以及储存容量而具有不同的性能。
个人装置104-A、104-B和104-C(统称为104)可包括用户的移动装置和/或用户的可穿戴装置。移动装置可以是任何不同类型的便携式计算装置,诸如蜂窝电话、平板计算机、智能手表、膝上型计算机、便携式音乐播放器或能够与其它移动装置联网通信的其它装置。作为一些非限制性示例,可穿戴装置可包括智能手表、智能眼镜、健身手环、控制环或被设计为被穿戴并与用户的移动装置进行通信的其它个人移动装置或附属装置。
车内组件106-A至106-N(统称为106)可包括具有用户可配置的设置的车辆102的各种元件。作为一些示例,这些车内组件106可包括顶灯车内组件106-A至106-D、气候控制车内组件106-E和106-F、座椅控制车内组件106-G至106-J以及扬声器车内组件106-K至106-N。车内组件106的其它示例(诸如,后排座椅娱乐屏幕或自动车窗遮光件)也是可能的。在许多情况下,车内组件106可提供(expose)可被用户使用以配置车内组件106的特定设置的控制件(诸如按钮、滑块和触摸屏)。作为一些可能性,车内组件106的控制件可允许用户设置灯光控制件的照明度、设置气候控制件的温度、设置扬声器的音量和音频源以及设置座椅的位置。
车辆102的内部可被划分为多个区域108,其中,每个区域108可与车辆102内部中的座椅位置进行关联。例如,示出的车辆102的前排可包括与驾驶员座椅位置关联的第一区域108-A以及与前排乘客座椅位置关联的第二区域108-B。示出的车辆102的第二排可包括与驾驶员侧的后排座椅位置关联的第三区域108-C以及与乘客侧的后排座椅位置关联的第四区域108-D。在区域108的数量和布置上进行变型是可能的。例如,另一种第二排可包括第二排中间座椅位置的额外的第五区域108(未示出)。四个乘员被示出为正位于示例车辆102的内部,其中的三个人正在使用个人装置104。位于区域108-A中的驾驶员乘员没有在使用个人装置104。位于区域108-B中的前排乘客乘员正在使用个人装置104-A。位于区域108-C中的后排驾驶员侧的乘客乘员正在使用个人装置104-B。位于区域108-D中的后排乘客侧的乘客乘员正在使用个人装置104-C。
存在于车辆102内部中的每个不同的车内组件106可与一个或更多个区域108关联。作为一些示例,车内组件106可与各个车内组件106所在的区域108关联和/或与各个车内组件106所控制的一个(或更多个)区域108关联。例如,可供前排乘客使用的灯光车内组件106-C可与第二区域108-B关联,而可供后排乘客侧的乘员使用的灯光车内组件106-D可与第四区域108-D关联。应注意的是,在图1A中示出的车辆102的一部分仅是示例,并且可使用更多、更少和/或位于不同位置的车内组件106和区域108。
参照图1B,每个车内组件106可配备有无线收发器110,无线收发器110被配置为便于检测个人装置104和识别个人装置104的接近。在示例中,无线收发器110可包括用于确定个人装置104的接近的无线装置,诸如被配置为启用低功耗蓝牙信号强度作为定位器的蓝牙低功耗收发器。在示例中,通过无线收发器110检测个人装置104的接近可使得检测到的个人装置104的车辆组件界面应用118被激活。
在许多示例中,个人装置104可包括被配置为与其它可兼容的装置进行通信的无线收发器112(例如,蓝牙模块、ZIGBEE收发器、Wi-Fi收发器、IrDA收发器、RFID收发器等)。在示例中,个人装置104的无线收发器112可通过无线连接114与车内组件106的无线收发器110进行数据通信。在另一示例中,可穿戴的个人装置104的无线收发器112可通过无线连接114与移动个人装置104的无线收发器112进行数据通信。无线连接114可以是蓝牙低功耗(BLE)连接,但也可以利用诸如Wi-Fi或Zigbee的其它类型的局域无线连接114。
个人装置104还可包括被配置为便于个人装置104通过通信网络与其它装置进行通信的装置调制解调器。通信网络可向连接至通信网络的装置提供诸如分组交换网络服务(例如,互联网接入、VoIP通信服务)的通信服务。通信网络的示例可包括蜂窝电话网络。为了便于通过通信网络进行通信,可将个人装置104与唯一装置标识符(例如,移动装置号码(MDN)、互联网协议(IP)地址、装置调制解调器的标识符等)关联,以识别个人装置104通过通信网络的通信。这些个人装置104的标识符还可被车内组件106使用以识别个人装置104。
车辆组件界面应用118可以是安装至个人装置104的应用。车辆组件界面应用118可被配置为便于车辆乘员经由无线收发器110访问被开放给网络配置的车内组件106的功能。在一些情况下,车辆组件界面应用118可被配置为:识别可用的车内组件106,识别所识别的车内组件106的可用功能和当前设置,并且确定可用的车内组件106中的哪一个在车辆乘员的附近(例如,在与个人装置104的位置相同的区域108中)。车辆组件界面应用118还可被配置为:显示描述可用功能的用户界面,接收用户输入,并且基于用户输入提供命令以允许用户控制车内组件106的功能。因此,系统100-B可被配置为:在不需要个人装置104已经与车辆102的主机单元配对或与车辆102的主机单元进行通信的情况下,允许车辆乘员与车辆102中的车内组件106进行无缝交互。
每个车内组件106还可配备有通知装置120,通知装置120被配置为便于车辆102的乘员识别车内组件106在车辆102中的物理位置。在示例中,通知装置120可以是车内组件106的背光灯。在另一示例中,通知装置120可利用车内组件106的控制件集合中的控制件的其它功能(诸如车内组件106的现有的灯光元件)来执行通知。在进一步的示例中,通知装置120可利用从车内组件106发出的鸣响或其它声音来帮助定位车内组件106。在进一步的示例中,通知装置120可利用触觉反馈装置或触感反馈装置来向用户(例如,向用户的手)提供车内组件106的特定位置的物理指示。还应注意,这些方式可被组合,并且通知装置120可执行比上述通知或其它通知中的一个更多的通知。
系统100-B可使用一种或更多种装置位置追踪技术来识别个人装置104所在的区域108。位置追踪技术可根据估计是基于接近度(proximity)、角度(angulation)还是最小二乘法(lateration)来分类。接近度方法是“粗略的”,并可提供关于目标是否在预定义范围内的信息,但这样的方法不提供目标的精确位置。角度方法根据目标和参考位置之间的角度来估计目标的位置。最小二乘法提供对目标位置的估计,对目标位置的估计从目标和参考位置之间的可用距离开始。目标与参考位置之间的距离可从车内组件106的无线收发器110和个人装置104的无线收发器112之间的无线连接114上的信号强度116的测量值获得,或者从到达时间(TOA)或到达时间差(TDOA)的时间测量值获得。
使用信号强度116的最小二乘法的优点之一在于:最小二乘法可利用现有的可用于许多通信协议的接收信号强度指示(received signal strength indication,RSSI)的信号强度116的信息。例如,iBeacon使用可用于蓝牙低功耗(BLE)协议的RSSI信号强度116的信息来推断信标与个人装置104(即,目标)之间的距离,使得特定的事件可在个人装置104接近信标时被触发。其它实施方式在该构思上扩展,所述其它实施方式利用多个参考位置来估计目标的位置。当与三个参考信标之间的距离是已知时,可通过下面的公式来全面(三边测量)估计位置:
在示例中,如图1C中的示例100-C所示出的,车内组件106-B可向车辆102的其它车内组件106-A和106-C广播对信号强度116的请求或者以其它方式向车辆102的其它车内组件106-A和106-C发送对信号强度116的请求。该请求可使得其它车内组件106-A和106-C返回由其各自的无线收发器110针对它们检测到的任何装置而识别的无线信号强度116的数据(例如,由无线收发器110-A识别的个人装置104的信号强度116-A,由无线收发器110-C识别的个人装置104的信号强度116-C)。通过使用这些信号强度116-A和116-C以及由车内组件106-B使用其无线收发器110-B确定的信号强度116-B,车内组件106-B可使用公式(1)来执行三边测量并定位个人装置104。作为另一种可能性,车内组件106可按照如下公式将在车内组件106处具有最高信号强度116的个人装置104识别为在区域108内的个人装置104:
因此,车内组件106的网格和个人装置104可相应地被用于允许车内组件106识别每个个人装置104位于哪个区域108。
作为在车辆102中定位个人装置104的另一种可能性,个人装置104对特定区域108的每个车内组件106的信号强度116可被用于确定个人装置104是否位于该区域108内。作为在车辆102中定位个人装置104的另一种可能性,可利用具有对称车辆102车厢的车内组件106的对称集合来估计个人装置104的位置。
不论使用的特定方法如何,车内组件106的网格以及个人装置104可被用于允许车内组件106识别每个个人装置104位于哪个区域108内。由于每个车内组件106还与区域108关联,所以车内组件106可相应地将要被通知的个人装置104识别为与车内组件106关联的相同区域108关联的个人装置104。
作为一种可能性,车内组件106可利用从车辆102中的个人装置104接收的信号强度116的数据来识别哪个个人装置104被乘员用于与座椅控制车内组件106-H物理交互。例如,识别在车内组件106处具有最高的信号强度116的个人装置104将可能识别正确的个人装置104,例如,按照如下公式识别正确的个人装置104:
返回参照图1A和图1B,可实现手势检测以允许检测车辆乘员使用他们的个人装置104执行的空中手势。用户执行的空中手势可用于支持车内组件106的功能的控制。在一些示例中,空中手势的识别可通过手势检测服务122来执行。手势检测服务122可从加速度传感器126(例如,三轴加速度传感器)接收加速度数据124,处理加速度数据(如以下详细讨论的),并将经处理的加速度数据124与空中手势的库128进行比较。如果加速度数据124与库128中的空中手势匹配,则手势检测服务122提供指示被执行的所识别的空中手势的信息。这可允许检测的手势信息被发送回车辆组件界面应用118或其它调用应用以用于处理。
为了使手势能够集成到现有的界面中,手势检测服务122可作为个人装置104的后台处理来被执行。这种手势检测服务122可作为黑盒来被执行,并可通过车辆组件界面应用118和/或安装在个人装置104上的第三方应用来被实现。例如,这可通过引用(reference)后台服务(例如,安卓/苹果OS)中的意图(intent)或通过引用(例如,Windows OS)附带的库中的功能来被实现。
一旦实体化,手势检测服务122可向第三方开发者提供调试输出(该调试输出可按照需要被启用/禁用)以根据需要来适当地集成和测试他们的手势。在与手势服务交互时,用户可接收个人装置104准备好接受空中手势的指示。在示例中,手势检测服务122可通过经由个人装置104的扬声器播放声音和/或驱动个人装置104的触觉反馈装置来提供手势检测服务122的就绪状态的指示,以向用户传达已经准备好识别空中手势。尽管这里的示例按照手势检测服务122来描述,但是应注意的是,在其它示例中,车辆组件界面应用118或其它应用可实现如描述的手势检测服务122执行的处理的一些或全部。
实现用于空中手势的手势检测服务122的挑战是建立合适的相对于用户的用于空中手势检测的参考系。如图1B所示,个人装置104可包括方向传感器130(例如,三轴磁力计传感器、陀螺仪传感器)以确定相对于个人装置104的磁场北极134的方向和重力的方向。然而,个人装置104在确定持有个人装置104的用户面向什么方向时可能具有更大困难。因此,手势检测可能需要个人装置104处于特定方向,或者需要在每个会话之前执行校准,以正确地检测空中手势。
在示例中,坐在车辆102的第二排的乘客可能希望滑动设置在前排座椅的背部上的屏幕车内组件106上显示的不同的图片。手势检测服务122可相应地被配置为识别从左向右空中手势动作和从右向左空中手势动作以通过幻灯片放映前进或回溯。此外,手势检测服务122可被配置为将向前滑动空中手势和向后滑动空中手势识别为与从左向右空中手势动作和从右向左空中手势动作不同的手势。
返回参照图1A,车辆航向132可相对于磁场北极134变化。随着车辆102沿着路线前进,车辆航向132相对于磁场北极134的定位角度(alignment angle)θ可改变。在示例中,在左转之后,车辆102相对于磁场北极134的定位角度θ可被调整90度。车辆可包括车辆罗盘传感器136(例如,三轴磁力计传感器)以提供关于当前车辆102相对于磁场北极134的定位角度θ的信息。如果在转弯之前执行磁场北极134的初始校准,如果不对校准进行调整,则在转弯之后做出的从左向右的空中手势动作可能被不正确地映射为向前的空中手势动作。
图2A至图2C示出了具有不同的座椅布置200的车辆102的示例。通常,车辆102中的座椅布置相对于车辆航向132在座椅区域108方向上可具有可变性。一些车辆102(诸如在图2A中示出的)具有可包括在面朝车辆102的中心的侧部的乘客排的座椅区域108。如果手势检测服务122假定每个车辆102乘员为了手势检测的目的而面朝前方,则相对于属于车辆102的右侧的乘客的个人装置104的空中手势检测可相对于由属于车辆102的左侧的乘客的个人装置104估计的空中手势解释为相反的动作,其中,两者均与属于驾驶员的个人装置104的动作估计正交(orthogonal)。其它车辆102(诸如在图2C中示出的)可具有面向车辆102后部的座椅。其它车辆102还可包括具有可调节方向的座椅区域108。例如,车辆102可具有可从面向前方(如图2B所示)旋转到面向后方(如图2C所示)的座椅区域108。
为了建立合适的相对于用户的参考系,每个座椅区域108可包括提供与座椅区域108的方向相关的局部方向的方向模块202。方向模块202可被实现为各自的座椅区域108内的车内组件106以能够确定哪个个人装置104位于车辆102的哪个乘坐区域108中。在示例中,方向模块202可包括被配置为提供座椅区域108的方向相对于车辆102的航向的偏移的角度或其它指示的传感器。从方向模块202接收的关于座椅区域108的方向的信息可被称作座椅相对方向参数αseat
更详细地参照图2A,示例的座椅布置200-A包括六个座椅区域108。这些座椅区域108包括与前排驾驶员座椅位置关联的第一区域108-A、与前排乘客座椅位置关联的第二区域108-B、与第二排驾驶员侧座椅位置关联的第三区域108-C、与第二排乘客侧座椅位置关联的第四区域108-D、与第三排驾驶员侧座椅位置关联的第五区域108-E以及与第三排乘客侧座椅位置关联的第六区域108-F。每个座椅区域108包括方向模块202,用户的个人装置104可从该方向模块202中获得各自的座椅区域108的方向偏移。例如,座椅区域108-A中的方向模块202-A和座椅区域108-B中的方向模块202-B均可指示各自的区域108与车辆航向132没有偏移的αseat;座椅区域108-C中的方向模块202-C和座椅区域108-E中的方向模块202-E均可指示各自的区域108与车辆航向132的顺时针方向的90度的αseat,座椅区域108-D中的方向模块202-D和座椅区域108-F中的方向模块202-F均可指示各自的区域108与车辆航向132的逆时针方向的90度的αseat
更详细地参照图2B,示例的座椅布置200-B包括四个座椅区域108。这些座椅区域108包括与前排驾驶员座椅位置关联的第一区域108-A、与前排乘客座椅位置关联的第二区域108-B、与第二排驾驶员侧座椅位置关联的第三区域108-C以及与第二排乘客侧座椅位置关联的第四区域108-D。如所示出的,座椅区域108-A中的方向模块202-A、座椅区域108-B中的方向模块202-B、座椅区域108-C中的方向模块202-C以及座椅区域108-D中的方向模块202-D均可指示各自的区域108与车辆航向132没有偏移的αseat
更详细地参照图2C,在示例的座椅布置200-C中,座椅区域108-A和108-B的方向已经从它们在示例的座椅布置200-B中的放置位置旋转。因此,座椅区域108-A中的方向模块202-A和座椅区域108-B中的方向模块202-B均可指示各自的区域108与车辆航向132偏离180度的αseat,而座椅区域108-C中的方向模块202-C和座椅区域108-D中的方向模块202-D可继续指示各自的区域108与车辆航向132没有偏移的αseat
通过使用来自用户的当前座椅区域108的方向模块202的αseat数据以及来自车辆罗盘传感器136的车辆定位角度θ,手势检测服务122可调整从加速度传感器126和方向传感器130接收的数据,以考虑当前车辆102的航向和乘坐区域108相对于车辆航向132的方向。因此,通过用户移动个人装置104接收的空中手势输入可被调整为相对于车辆102的车厢保持一致。
图3示出了用于收集手势数据并将所述数据归一化到用户方向参考系的示例处理300。通常,来自加速度传感器126和方向传感器130的数据被组合以建立个人装置104相对于重力和地球磁北134的方向。(一些个人装置104可利用除了加速度传感器126和方向传感器130以外的传感器的不同组合,但针对本公开的目的,个人装置104能够提供个人装置104的方向的当前估计)。所述方向可以以方向矩阵的形式提供。因此,初始参考系可根据具有指向磁北134的Y轴、向下指向重力方向的Z轴以及指向从Y-轴起顺时针绕Z轴90度的X轴的方向矩阵数据来被建立。车辆罗盘传感器136可用于确定乘员座椅区域108相对于磁场北极134的方向(例如,假定乘员座椅面向车辆102的前方)。使用这种与方向矩阵相结合的角度偏移,手势识别器可(通过使用角度矩阵公式)操纵传感器数据,以从用户视角提供真实方向和大小。通过使用方向矩阵来对接收的传感器数据执行调整,用户可使用他们的个人装置104执行空中手势动作,该个人装置104不依赖于车辆102的方向、座椅区域108的方向和个人装置104的方向。因此,车辆102的乘客用户可针对特定的任务以自然且容易使用的方向与个人装置104交互。
在操作302,个人装置104从个人装置104收集旋转向量信息。在示例中,手势检测服务122从个人装置104的方向传感器130获得信息。所述信息可包括例如关于个人装置104的方向的X角度、Y角度和Z角度。所述信息可允许个人装置104识别例如个人装置104是以纵向方向握持还是以横向方向握持。
在操作304,个人装置104将旋转向量转换为旋转矩阵。在示例中,手势检测服务122利用在操作302获得的X角度、Y角度和Z角度以及基本旋转矩阵来构建包含个人装置104的X角度、Y角度和Z角度的旋转矩阵=R[3x3]。
在操作306,个人装置104收集加速度数据124。在示例中,手势检测服务122从个人装置104的加速度传感器126获得指示正被施加到个人装置104上的当前加速力的加速度数据124。当前加速度数据124可用于填充(populate)加速度数据=A[3x1]。
在操作308,个人装置104使用加速度数据124调整旋转矩阵。在示例中,手势检测服务122按照如下公式将旋转矩阵乘以加速度数据124:(R[3x3]x A[3x1])=N[3x1]。因此,手势检测服务122将来自个人装置104的参考系的加速度数据124变换到由Y-磁场北极和Z-重力定义的世界参考系中。应注意,在一些示例中,Z-轴可被定向为与重力场的方向相反。
在操作310,个人装置104对调整后的旋转矩阵进行归一化,以去除重力的影响。在示例中,手势检测服务122将x值计算为N[1,1]/g;将y值计算为N[2,1]/g;将z值计算为((N[3,1]–g)/g),从而产生了力元组F=[x,y,z]。
在操作312,个人装置104获得针对车辆102的磁场北极角度θ。在示例中,手势检测服务122从车辆102的车辆罗盘传感器136获得角度θ。作为一种可能性,可从车辆罗盘传感器136无线访问车辆罗盘传感器136的数据。作为另一种可能性,车辆罗盘传感器136可经由个人装置104的座椅区域内的车内组件106(例如,通过与车辆罗盘传感器136通信的方向模块202)被用于手势检测服务122。
在操作314,个人装置104获得针对个人装置104的当前座椅区域108的偏移αseat。在示例中,手势检测服务122从个人装置104的座椅区域内的方向模块202获得αseat值。手势检测服务122还可执行对磁场北极角度θ与αseat值的求和以创建针对个人装置104的座椅区域108的总角度偏移At。
在操作316,个人装置104计算个人装置104相对于世界参考系的不依赖于方向的定位数据(OI)。在示例中,手势检测服务122按照以下等式计算OI:OI(x)=F[0]*cos(At)+F[1]*sin(At);OI(y)=-F[0]*sin(At)+F[1]*cos(At);OI(z)=F[2]。
在操作318,个人装置104保存OI向量以用于处理空中手势输入。OI向量相应地表示个人装置104在与个人装置104所在的座椅区域108的乘员对齐的参考系中的加速度。因此,不论个人装置104的方向(例如,个人装置104的屏幕以横向模式面对用户,屏幕以45度的角度朝下等)、车辆102的方向和座椅配置如何,当用户将移动装置104从左向右移动时,手势检测服务122可将加速度识别为在X-轴上。相应地,当用户向用户的前方移动移动装置104并随后朝着用户返回时,手势检测服务122可将加速度识别为在Y-轴上。当用户将个人装置104举到用户的头部以上并随后向用户的腰部向下放回,手势检测服务122可将加速度识别为在Z-轴上。在操作318之后,处理300结束。
个人装置104可在接收到空中手势的持续时间内保存OI向量。例如,处理300可在检测到加速度数据124从零到至少某一阈值量时初始化,并且OI向量可被保存直到检测到加速度数据124返回到阈值量以下为止。
图4示出了来自个人装置104的X、Y和Z加速度数据124的示例轨迹400。在示出的示例中,加速度数据124与个人装置104的运动相关,该个人装置104以45度角面向下被握持且与真北偏离229度,并从左向右移动。示例轨迹400示出了为补偿用户的校准而归一化的处理300的示例。旋转向量数据和加速计数据被个人装置104以足够高的刷新率(在示出的示例轨迹400中,为50Hz)解析以收集足够数量的样本来识别在加速度数据124中执行的空中手势。
示例轨迹400还示出了用于空中手势的分析的进入准则和退出准则的满足。空中手势可被识别为当满足进入准则时(诸如当三个轴(例如X、Y或Z)中的任意一个上的加速度超过预定阈值量时)开始。预定阈值量可沿着任意方向被设置为最小加速度量,低于该最小加速度量的来自个人装置104的数据被认为是噪声且不是手势。在示例轨迹400中示出了无手势检测范围402,无手势检测范围402指示落在预定阈值量内的加速度值,其中,低于预定阈值量的动作被忽略。
如示出的,X加速度数据124在开始时间索引404满足进入准则。当满足退出准则时,空中手势可被识别为结束。作为示例,用于执行空中手势的退出准则可被定义为在无手势检测范围402内的指定数量的加速度样本(例如,X、Y和Z必须是“空闲的”)(即,用户已经停止移动他们的个人装置104)。如示出的,X加速度数据124在退出时间索引406满足退出准则。一旦满足进入准则(例如,阈值已经被正向或负向地超过),可对加速度数据124样本执行处理300,直到满足指示空中手势已经完成的退出准则(例如,加速度减少到阈值内)。开始时间索引404和退出时间索引406之间的数据(例如,时间窗口408内的加速度数据124)可被手势检测服务122使用用于识别执行的空中手势。
应注意的是,针对将要检测的手势而将要检测的最小加速度以便检测的手势可以是可配置的。例如,使用手势检测服务122的应用可配置服务的预定阈值量的进入准则(例如,当加速度超过15m/s2时开始记录手势)。作为另一示例,使用手势检测服务122的应用可配置空闲样本的退出准则数,以便空中手势被视为完成(例如,空闲样本数=10(~.25秒))。
图5A和图5B示出了空中手势的示例库128。库128可包括表示可被手势检测服务122识别的不同的空中手势的数据。如示出的,示例库128包括多个模型手势502-A至502-H(统称为502)。每个模型手势502可包括可通过使用个人装置104执行的空中手势的定义。
作为示例,模型手势502-A指示从左向右的空中手势,如通过示出的沿着X-轴的运动可看到的。类似地,模型手势502-B指示从右向左的空中手势,如通过示出的沿着X-轴的反向运动可看到的。模型手势502-C指示从上向下的运动,如沿着Z-轴的数据示出的,模型手势502-D类似地指示从下向上的运动。作为一些附加示例,模型手势502-E指示从左向右再向左的空中手势,模型手势502-F指示从右向左再向右的空中手势,模型手势502-G指示从上向下再向上的运动,模型手势502-H指示从下向上再向下的运动。
应注意的是,这些仅为示例,并且库128中可包括更多、更少或不同的模型手势502。例如,手势可包括在不同轴上的运动,诸如向上再向左的运动,或向下运动再向右运动。在一些示例中,库128可包括默认手势(例如,构建到手势检测服务122中的默认手势)以及可由用户添加到库128的用户定义手势。例如,库维护应用可用于允许用户执行空中手势,其中,执行的手势随后可被添加至库128,以用于以后检测和使用。作为另一示例,使用手势检测服务122的应用的开发者可创建将被加载至手势检测服务122的库128中,以供开发的应用使用。
用户可移动个人装置104以执行空中手势。一旦用户完成空中手势(例如,如通过满足进入准则并随后满足退出准则所确定的),则从时间窗口408中的开始时间索引404到退出时间索引406收集的加速度样本可通过隐马尔可夫模型(HMM)来被处理。该模型将空中手势转换为用于与存储手势的库128进行比较的序列。
图6示出了执行的空中手势与手势库128的k-均值匹配的示例600。库128的存储的手势可被预处理为k-均值簇602,每个k-均值簇602具有定义的质心。如示出的,示例600包括用于从左向右的模型手势502-A的k-均值簇602-A、用于从右向左的模型手势502-B的k-均值簇602-B、用于从上向下的模型手势502-C的k-均值簇602-C以及用于从下向下上的模型手势502-D的k-均值簇602-D。
为了识别用户执行的空中手势,将执行的空中手势与每个k-均值簇602进行比较,使得在执行的空中手势位置和每个k-均值簇602的质心之间计算笛卡尔距离606。可执行所述计算以找到从HMM点604到k-均值簇602的质心的最小笛卡尔距离606,并验证HMM点604是否在k-均值簇的半径内。在手势已经被识别具有最小笛卡尔距离606并且已经在k-均值簇602的半径内之后,空中手势可被识别。如果空中手势落在任意k-均值簇602的半径之外,则空中手势未被识别的并且可被忽略。
应注意的是,针对将被识别的手势的最小概率可以是可配置的。例如,应用可配置手势检测服务122,使得与k-均值质心602相比较的HMM点604在将被识别的空中手势的95%概率内。
图7示出了用于通过手势检测服务122检测空中手势的示例处理700。尽管处理700被描述为提供空中手势检测以供车辆组件界面应用118使用,但是应当注意,手势检测服务122对于安装在个人装置104上的其它应用可能也是有用的。
在操作702,个人装置104获取车内组件106的界面信息。该信息可指定车内组件106的可用功能。在示例中,个人装置104可从车内组件106收集广告数据信息,以识别位于乘客的座椅区域108内的是什么车内组件106,以及提供了什么功能。广告数据可包括指示车内组件106的功能的信息、指示车内组件106的座椅区域108的位置的信息。该信息还可指示空中手势是否可用于车内组件106的控制。如果可用,则信息还可指示哪些空中手势可被用于执行什么命令。
在操作704,个人装置104使用车内组件106的网格来识别个人装置104位于哪个座椅区域108内。在示例中,车辆组件界面应用118可通过BLE三角测量确定个人装置104位于车辆102的座椅区域108中的一个。
在操作706,个人装置104确定是否选择车内组件106以用于空中手势控制。多种方法可用于将内部功能预先选择为手势控制的目标。在示例中,用户可按下用户的乘坐区域108内的车内组件106的开关或其它控制件以激活手势检测。
作为另一示例,车辆组件界面应用118可通过BLE三角测量确定个人装置104正朝着用户的座椅区域108的车内组件106移动。或者,表示功能的图标可被置于车内组件106上或车内组件106附近,并且当用户将其个人装置104朝着图标移动时,BLE三角测量可用于确定用户意图以与特定车内组件106进行交互。
作为另一示例,车辆组件界面应用118或手势检测服务122可确定朝着座椅区域108的预定义区域的个人装置104的运动指示启动空中手势(例如,向上、向下或向侧面等)的请求。例如,座椅区域108中的预定义区域可被分配特定功能。例如,向上伸出可自动选择控制灯光车内组件106,并且在选择车内组件106之后执行的空中手势可被执行以控制灯光车内组件106。作为另一示例,倾斜地向上伸出可选择敞开式天窗车内组件106(如果可用)。作为进一步的示例,向下伸出可选择座椅车内组件106,伸向侧窗可选择控制车窗车内组件106,远离车窗朝着车辆102的中心伸出可选择控制扬声器车内组件106。
在操作708,个人装置104追踪被归一化到车辆102的参考系的个人装置104的传感器输入。例如,如以上关于处理300详细解释的,来自个人装置104的传感器(诸如加速度传感器126和方向传感器130)的数据可使用方向矩阵来被调整,所述方向矩阵考虑了个人装置104的方向、车辆102的磁场北极角度θ和个人装置104的当前座椅区域108的αseat。所得到的归一化数据可被称作加速度数据124。在一些示例中,在操作708的开始,手势检测服务122可通过经由个人装置104的扬声器播放声音和/或驱动个人装置104的触觉反馈装置来提供手势检测服务122的就绪状态的指示,以向用户传达已经准备好识别空中手势。
在操作710,个人装置104确定是否检测到有效的空中手势。在示例中,手势检测服务122将加速度数据122与库128中的模型空中手势502进行比较。如果发现匹配,则控制转到操作712。
在操作712,个人装置104执行与检测的手势关联的命令。在示例中,车内组件106可以是用户的座椅区域108内的屏幕车内组件106,该屏幕车内组件106被配置为响应于检测到使用个人装置104执行的从右向左的空中手势而前进至下一个图像,以及响应于检测到使用个人装置104执行的从左向右的空中手势而移回至上一个图像。在另一示例中,车内组件106可以是扬声器车内组件106,扬声器车内组件106被配置为响应于检测到从下向上的空中手势而增大音量或者响应于检测到从上向下的空中手势而减小音量。应注意的是,这些仅为示例,不同的命令可被映射为不同的空中手势,并且可通过空中手势控制不同的车内组件106。
在操作714,个人装置104确定对手势的检测是否结束。例如,车辆组件界面应用118可从手势检测服务122接收指示关闭手势检测模式的手势已经被执行的指示。作为另一示例,车辆组件界面应用118可确定(或者可从手势检测服务122接收指示)已超时,随后空中手势被确定为完成。如果已超时,则控制转到操作704。否则,控制返回到操作708以继续追踪空中手势。
在此描述的计算装置(诸如,个人装置104和车内组件106)通常包括计算机可执行指令,其中,所述指令可由一个或更多个计算装置(诸如,以上列出的那些计算装置)来执行。可从使用各种编程语言和/或技术(包括但不限于JavaTM、C、C++、C#、Visual Basic、JavaScript、Perl等中的一种或其组合)创建的计算机程序中编译或解释计算机可执行指令(诸如车辆组件界面应用118和/或手势检测服务122中的那些指令)。通常,处理器(例如,微处理器)例如从存储器、计算机可读介质等接收指令,并且执行这些指令,从而执行一个或更多个处理(包括在此描述的处理中的一个或更多个)。这种指令和其它数据可使用各种计算机可读介质来存储和传输。
关于在此描述的处理、系统、方法、启示等,应理解的是,尽管这种处理的步骤等已被描述为根据特定的有序顺序发生,但是这种处理可利用以与在此描述的顺序不同的顺序执行的所述步骤来实施。还应理解的是,可同时执行特定的步骤,可添加其它步骤,或者可省略在此描述的特定的步骤。换句话说,处理的描述是为了示出特定的实施例的目的而在此被提供,并且不应以任何方式被解释为限制权利要求。
虽然以上描述了示例性实施例,但是这些实施例并不意在描述本发明的所有可能形式。更确切地说,说明书中使用的词语是描述性词语而非限制性词语,并且应理解的是,可在不脱离本发明的精神和范围的情况下做出各种改变。此外,可将各种实现的实施例的特征进行组合以形成本发明的进一步的实施例。

Claims (19)

1.一种系统,包括:
车辆传感器,指示航向角;
多个座椅区域,每个座椅区域包括指示座椅角度的方向传感器;
位于所述多个座椅区域中的一个座椅区域内的组件,被配置为:
提供描述适用于所述一个座椅区域的命令和相关的空中手势的界面信息;
响应于个人装置检测到相应的空中手势,考虑所述航向角和所述座椅角度,执行所述命令中的一个。
2.如权利要求1所述的系统,其中,所述方向传感器被配置为:将所述座椅角度指示为相对于所述航向角的偏移。
3.如权利要求1所述的系统,其中,所述车辆传感器被配置为:将所述航向角指示为相对于磁场北极的偏移。
4.如权利要求1所述的系统,其中,所述组件是显示屏幕,其中:如果所述空中手势是从右向左的运动,则所述命令是移向下一个的命令;如果所述空中手势是从左向右的运动,则所述命令是移向上一个的命令。
5.如权利要求1所述的系统,其中,所述组件是扬声器,其中:如果所述空中手势是从下向上的运动,则所述命令是增大音量的命令;如果所述空中手势是从上向下的运动,则所述命令是减小音量的命令。
6.如权利要求1所述的系统,其中,所述组件还被配置为:接收用户选择,以调用针对所述命令的所述空中手势的接受。
7.如权利要求6所述的系统,其中,所述用户选择包括以下项中的一个或更多个:选择所述组件的控制件;确定来自所述个人装置的增强的信号强度指示所述个人装置接近所述组件。
8.一种方法,包括:
使用个人装置的方向、相对于磁场北极的车辆航向以及针对所述个人装置所在的座椅区域的方向角,调整来自个人装置的手势输入,以创建所述座椅区域中的车内组件的参考系中的加速度数据;
当所述加速度数据与空中手势库中的空中手势匹配时,向所述组件发送与匹配的空中手势对应的命令。
9.如权利要求8所述的方法,还包括:根据嵌入所述座椅区域的座椅中的方向模块来确定所述车辆的所述座椅区域的方向角,其中,所述方向模块提供关于所述座椅区域相对于车辆航向的偏移的方向角的数据。
10.如权利要求8所述的方法,还包括:从所述车内组件接收描述命令和针对所述命令的相应的空中手势的界面信息。
11.如权利要求8所述的方法,还包括:
将所述库中的空中手势预处理成簇,其中,每个簇具有定义的质心;
利用隐马尔可夫模型来确定所述加速度数据的点;
将所述空中手势匹配为所述库中的在所述点和所述定义的质心之间具有最小笛卡尔距离的空中手势。
12.如权利要求11所述的方法,还包括:确保所述点在所述定义的质心的半径内,以确认对所述空中手势的识别。
13.如权利要求8所述的方法,还包括:
从所述车辆的罗盘获得磁场北极;
从所述车辆的座椅区域中的方向传感器获得所述方向角。
14.如权利要求8所述的方法,还包括:对所述加速度数据进行归一化,以去除重力影响。
15.如权利要求8所述的方法,还包括:为了传达已准备好识别空中手势,启动以下操作中的一个或更多个:播放声音、驱动触觉反馈装置。
16.一种装置,包括:
处理器;
加速度传感器;
方向传感器;
无线收发器;
存储器,存储手势检测服务和应用;
其中,所述手势检测服务包括当被所述处理器执行时使得所述处理器执行以下操作的指令:根据来自所述加速度传感器和所述方向传感器的数据来检测车辆的乘员执行的空中手势;所述应用包括当被所述处理器执行时使得所述处理器执行以下操作的指令:使用所述无线收发器从车辆组件接收描述命令和针对所述命令的相应的空中手势的界面信息,利用所述手势检测服务来确定所述空中手势何时被执行,并响应于所述手势检测服务确定针对所述命令中的一个命令的相应的空中手势被执行,使用所述无线收发器向所述车辆组件发送所述命令中的所述一个命令。
17.如权利要求16所述的装置,其中,所述手势检测服务还被配置为:在根据所述装置的方向、车辆的航向角以及车辆中的所述装置所在的座椅区域的方向角定义的参考系中创建加速度数据,从而所述加速度数据考虑了所述航向角、所述方向角和所述装置的方向。
18.如权利要求17所述的装置,其中,所述手势检测服务包括当被所述处理器执行时使得所述处理器执行以下操作的指令:
将空中手势库中的空中手势预处理成簇,其中,每个簇具有定义的质心;
利用隐马尔可夫模型来确定所述加速度数据的点;
将所述空中手势匹配为所述库中的在所述点和所述定义的质心之间具有最小笛卡尔距离的空中手势。
19.如权利要求18所述的装置,其中,所述手势检测服务包括当被所述处理器执行时使得所述处理器执行以下操作的指令:确保所述点在所述定义的质心的半径内,以确认对所述空中手势的识别。
CN201710154077.8A 2016-03-15 2017-03-15 用于车内环境的不依赖于方向的空中手势检测服务 Active CN107193365B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/070,129 2016-03-15
US15/070,129 US10082877B2 (en) 2016-03-15 2016-03-15 Orientation-independent air gesture detection service for in-vehicle environments

Publications (2)

Publication Number Publication Date
CN107193365A true CN107193365A (zh) 2017-09-22
CN107193365B CN107193365B (zh) 2022-03-01

Family

ID=59751499

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710154077.8A Active CN107193365B (zh) 2016-03-15 2017-03-15 用于车内环境的不依赖于方向的空中手势检测服务

Country Status (3)

Country Link
US (1) US10082877B2 (zh)
CN (1) CN107193365B (zh)
DE (1) DE102017104403A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108860025A (zh) * 2018-06-12 2018-11-23 重庆延锋安道拓汽车部件系统有限公司 基于手势识别的座椅调节装置及调节方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6897082B2 (ja) * 2016-12-13 2021-06-30 富士通株式会社 顔向き推定用コンピュータプログラム、顔向き推定装置及び顔向き推定方法
US10430566B2 (en) * 2016-12-27 2019-10-01 Paypal, Inc. Vehicle based electronic authentication and device management
US20190136816A1 (en) * 2017-11-07 2019-05-09 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Vehicle ignition on a schedule
US10479305B1 (en) * 2018-06-01 2019-11-19 The Boeing Company System and method of determining a seat back status of a passenger seat in a vehicle
US11029837B2 (en) * 2018-08-30 2021-06-08 Rovi Guides, Inc. System and method to alter a user interface of a self-driving vehicle in cases of perceived emergency based on accelerations of a wearable user device
US11899448B2 (en) * 2019-02-21 2024-02-13 GM Global Technology Operations LLC Autonomous vehicle that is configured to identify a travel characteristic based upon a gesture
US11099635B2 (en) 2019-09-27 2021-08-24 Apple Inc. Blow event detection and mode switching with an electronic device
US20210253135A1 (en) * 2020-02-18 2021-08-19 Toyota Motor North America, Inc. Determining transport operation level for gesture control
US11873000B2 (en) 2020-02-18 2024-01-16 Toyota Motor North America, Inc. Gesture detection for transport control

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5043646A (en) * 1990-05-01 1991-08-27 Smith Engineering Remote control direction selecting system
US20100171696A1 (en) * 2009-01-06 2010-07-08 Chi Kong Wu Motion actuation system and related motion database
US20120151421A1 (en) * 2008-07-24 2012-06-14 Qualcomm Incorporated Enhanced detection of circular engagement gesture
CN103226398A (zh) * 2013-03-25 2013-07-31 上海交通大学 基于微惯性传感器网络技术的数据手套
US20130283202A1 (en) * 2010-12-30 2013-10-24 Wei Zhou User interface, apparatus and method for gesture recognition
US20140309879A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Control of vehicle features based on user recognition and identification
CN104411530A (zh) * 2012-04-02 2015-03-11 谷歌公司 基于姿势的汽车控制
CN104677353A (zh) * 2015-03-17 2015-06-03 上海华测导航技术股份有限公司 基于mems传感器实现机械车体航向角检测的方法
CN104914986A (zh) * 2014-03-11 2015-09-16 现代自动车株式会社 终端设备、具有终端设备的车辆及控制终端设备的方法
US20150269797A1 (en) * 2014-03-18 2015-09-24 Google Inc. Proximity-initiated physical mobile device gestures
US9164588B1 (en) * 2013-02-05 2015-10-20 Google Inc. Wearable computing device with gesture recognition
CN104995664A (zh) * 2013-03-15 2015-10-21 英特尔公司 实时的连续交互学习及检测
CN105182803A (zh) * 2014-04-10 2015-12-23 Lg电子株式会社 车辆控制装置及其方法

Family Cites Families (203)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4721954A (en) 1985-12-18 1988-01-26 Marlee Electronics Corporation Keypad security system
US5697844A (en) 1986-03-10 1997-12-16 Response Reward Systems, L.C. System and method for playing games and rewarding successful players
US4792783A (en) 1986-05-07 1988-12-20 Electro-Mechanical Products Vehicular function controller having alterable function designators
JPH02127117A (ja) 1988-11-04 1990-05-15 Diesel Kiki Co Ltd 車両用空調制御装置
JPH0328034A (ja) 1989-06-26 1991-02-06 Nissan Motor Co Ltd 車室内照明装置
JP2935871B2 (ja) 1990-04-18 1999-08-16 タカタ株式会社 シートベルト装置の照明バックル
US5255442A (en) * 1991-12-20 1993-10-26 Donnelly Corporation Vehicle compass with electronic sensor
US5543591A (en) 1992-06-08 1996-08-06 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
IT1272833B (it) 1993-10-21 1997-06-30 Audiovox Corp Sistema di allarme per veicoli
JPH09507962A (ja) 1994-11-11 1997-08-12 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ 昼光レベルの増加によって人工照明を最適化するシステム
US5650929A (en) 1995-04-28 1997-07-22 Prince Corporation Modular electronic display and accessory mounting system for a vehicle
US7973773B2 (en) 1995-06-29 2011-07-05 Pryor Timothy R Multipoint, virtual control, and force based touch screen applications
US5796179A (en) 1995-09-30 1998-08-18 Suzuki Motor Corporation Vehicle anti-theft device with low voltage compensation and a rolling code
US6028537A (en) 1996-06-14 2000-02-22 Prince Corporation Vehicle communication and remote control system
US5757268A (en) 1996-09-26 1998-05-26 United Technologies Automotive, Inc. Prioritization of vehicle display features
US5848634A (en) 1996-12-27 1998-12-15 Latron Electronics Co. Inc. Motorized window shade system
US7015896B2 (en) 1998-01-23 2006-03-21 Digit Wireless, Llc Keyboards with both individual and combination key output
US6377860B1 (en) 1998-07-31 2002-04-23 Sun Microsystems, Inc. Networked vehicle implementing plug and play with javabeans
US6397249B1 (en) 1998-11-24 2002-05-28 International Business Machines Corporation Data processing system and method for determining a physical location of a client computer system
DE10006943A1 (de) 2000-02-17 2001-08-23 Volkswagen Ag Innenraumbeleuchtungssystem eines Kraftfahrzeuges sowie Verfahren zur Steuerung eines solchen
US6536928B1 (en) 2000-03-03 2003-03-25 Lear Corporation Multi-colored vehicle interior lighting
DE10021068A1 (de) 2000-04-28 2001-10-31 Bosch Gmbh Robert Vorrichtung und Verfahren zur benutzerspezifischen Einstellung eines Gerätes, insbesondere eines Kraftfahrzeuges
US20020092019A1 (en) 2000-09-08 2002-07-11 Dwight Marcus Method and apparatus for creation, distribution, assembly and verification of media
US6449541B1 (en) 2000-10-17 2002-09-10 Microsoft Corporation Application-to-component communications helper in a vehicle computer system
US6615123B2 (en) 2000-12-01 2003-09-02 Hewlett-Packard Development Company, L.P. Personality module for configuring a vehicle
US20020087423A1 (en) 2001-01-02 2002-07-04 Carbrey Palango Joan L. System builder for building electronics systems
US6473038B2 (en) 2001-01-05 2002-10-29 Motorola, Inc. Method and apparatus for location estimation
US6663010B2 (en) 2001-01-22 2003-12-16 Meritor Heavy Vehicle Technology, Llc Individualized vehicle settings
MXPA03009011A (es) 2001-04-03 2004-02-17 At & T Wireless Services Inc Metodos y aparatos para estimar la posicion de una estacion movil.
US7114178B2 (en) 2001-05-22 2006-09-26 Ericsson Inc. Security system
US20020197976A1 (en) 2001-06-22 2002-12-26 Jonathan Liu Vehicle customized feature activation system
US6775603B2 (en) 2001-10-18 2004-08-10 Ford Motor Company Method and system for maintaining personalization of user adjustable features
US7342325B2 (en) 2001-11-05 2008-03-11 Michael Rhodes Universal fleet electrical system
US8611919B2 (en) 2002-05-23 2013-12-17 Wounder Gmbh., Llc System, method, and computer program product for providing location based services and mobile e-commerce
US9205744B2 (en) 2002-06-21 2015-12-08 Intel Corporation PC-based automobile owner's manual, diagnostics, and auto care
US7034655B2 (en) 2002-08-06 2006-04-25 Tri/Mark Corporation Keypad module and method for electronic access security and keyless entry of a vehicle
US20040034455A1 (en) 2002-08-15 2004-02-19 Craig Simonds Vehicle system and method of communicating between host platform and human machine interface
US7275983B2 (en) 2002-09-27 2007-10-02 Denso Corporation System for limiting an increase in the inside air temperature of passenger compartment of vehicle
KR100575906B1 (ko) * 2002-10-25 2006-05-02 미츠비시 후소 트럭 앤드 버스 코포레이션 핸드 패턴 스위치 장치
WO2004077091A1 (en) 2003-02-25 2004-09-10 All Set Marine Security Ab Method and system for monitoring relative movement of maritime containers and other cargo
US20050044906A1 (en) 2003-07-25 2005-03-03 Spielman Timothy G. Method and system for setting entry codes via a communications network for access to moveable enclosures
US7015791B2 (en) 2003-08-19 2006-03-21 General Motors Corporation Keyless entry module and method
US7751829B2 (en) 2003-09-22 2010-07-06 Fujitsu Limited Method and apparatus for location determination using mini-beacons
US7230545B2 (en) 2003-11-07 2007-06-12 Nattel Group, Inc. Automobile communication and registry system
EP1561640A3 (de) 2004-02-06 2010-06-30 Goodrich Lighting Systems GmbH Farblicht für die Passagiere eines Personentransportmittels, insbesondere für die Kabine eines Flugzeuges
US7170400B2 (en) 2004-05-20 2007-01-30 Lear Corporation System for customizing settings and sounds for vehicle
US7031809B2 (en) 2004-05-21 2006-04-18 Jens Erik Sorensen Remote control of automobile component arrangements
US20060155429A1 (en) 2004-06-18 2006-07-13 Applied Digital, Inc. Vehicle entertainment and accessory control system
US7050795B2 (en) 2004-06-24 2006-05-23 Denso International America, Inc. System for programming customizable vehicle features
US7009504B1 (en) 2004-08-10 2006-03-07 Lear Corporation Reconfigurable vehicle accessory control panel
US20060075934A1 (en) 2004-09-28 2006-04-13 Pranil Ram Passenger keyboard and display apparatus, and a system and method for delivering content to users of such apparatus
US7319924B2 (en) 2004-10-22 2008-01-15 General Motors Corporation Method and system for managing personalized settings in a mobile vehicle
WO2006066097A2 (en) 2004-12-17 2006-06-22 Stoneridge Control Devices, Inc. Touch sensor system and method
US20060155547A1 (en) 2005-01-07 2006-07-13 Browne Alan L Voice activated lighting of control interfaces
US20070262140A1 (en) 2005-02-03 2007-11-15 Long Kenneth W Sr Apparatus, System, and Method for Delivering Products or Services
US7778651B2 (en) 2005-02-16 2010-08-17 Harris Corporation Wireless network range estimation and associated methods
WO2006096416A2 (en) 2005-03-04 2006-09-14 Skyhook Wireless, Inc. Encoding and compression of a location beacon database
US20060205456A1 (en) 2005-03-14 2006-09-14 Bentz William G Video games and add-on features
WO2006122087A2 (en) 2005-05-09 2006-11-16 Safetystream Mobile Limited Method for using a table of data to control access and a locking mechanism using same
US20060258377A1 (en) 2005-05-11 2006-11-16 General Motors Corporation Method and sysem for customizing vehicle services
US7987030B2 (en) 2005-05-25 2011-07-26 GM Global Technology Operations LLC Vehicle illumination system and method
US20070021885A1 (en) 2005-07-25 2007-01-25 Honeywell International Inc. System and method for personalizing motor vehicle ride or handling characteristics
US20070140187A1 (en) 2005-12-15 2007-06-21 Rokusek Daniel S System and method for handling simultaneous interaction of multiple wireless devices in a vehicle
US7706740B2 (en) 2006-01-06 2010-04-27 Qualcomm Incorporated Apparatus and methods of selective collection and selective presentation of content
US7581244B2 (en) 2006-01-25 2009-08-25 Seiko Epson Corporation IMX session control and authentication
US20070198472A1 (en) 2006-02-17 2007-08-23 Ford Motor Company Multimedia system for a vehicle
JP4812089B2 (ja) 2006-02-24 2011-11-09 キヤノン株式会社 印刷装置及びその接続方法
ATE465911T1 (de) 2006-10-06 2010-05-15 Harman Becker Automotive Sys Infotainmentsystem
US7810969B2 (en) 2006-11-02 2010-10-12 Ford Global Technologies, Llc Ambient lighting for vehicle interior floor console
US8408766B2 (en) 2006-11-07 2013-04-02 International Automotive Components Group North America, Inc Luminous interior trim material
US7800483B2 (en) 2006-11-10 2010-09-21 Federal-Mogul World Wide, Inc. Transitional lighting system for vehicle interior
US8073589B2 (en) 2006-12-01 2011-12-06 Ford Global Technologies, Llc User interface system for a vehicle
KR20080052997A (ko) 2006-12-08 2008-06-12 현대자동차주식회사 인간과 자동차 간의 인터페이스 시스템
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
US7595718B2 (en) 2007-01-30 2009-09-29 Tse Hsing Chen Antitheft system with clip-on wireless keypad
US20080288406A1 (en) 2007-05-16 2008-11-20 The Marketing Store Worldwide Llc System and method for telematic marketing
DE102007052008A1 (de) 2007-10-26 2009-04-30 Andreas Steinhauser Single- oder multitouchfähiger Touchscreen oder Touchpad bestehend aus einem Array von Drucksensoren sowie Herstellung solcher Sensoren
EP2229576B1 (en) 2007-12-05 2016-04-13 Visteon Global Technologies, Inc. Vehicle user interface systems and methods
US8065169B1 (en) 2008-02-15 2011-11-22 Allstate Insurance Company Real-time insurance estimate based on non-personal identifying information
EP2105759A1 (en) 2008-03-28 2009-09-30 Identec Solutions AG Method and systems for carrying out a two way ranging procedure
US20090249081A1 (en) 2008-03-31 2009-10-01 Kabushiki Kaisha Toshiba-1 Shibaura 1-Chomominatoku Storage device encryption and method
FR2933212B1 (fr) 2008-06-27 2013-07-05 Movea Sa Pointeur a capture de mouvement resolue par fusion de donnees
US8465161B2 (en) 2008-10-14 2013-06-18 Magna Mirrors Of America, Inc. Interior rearview mirror assembly with button module
US20110187496A1 (en) 2008-10-30 2011-08-04 Denison William D Electronic Access Control Device and Management System
US8941466B2 (en) 2009-01-05 2015-01-27 Polytechnic Institute Of New York University User authentication for devices with touch sensitive elements, such as touch sensitive display screens
US8854180B2 (en) 2009-01-10 2014-10-07 Pro Tech Systems Of Maryland, Inc. Access control system
US8421589B2 (en) 2009-01-27 2013-04-16 Delphi Technologies, Inc. Dual purpose wireless device, wherein vehicle controls depend on device location
US20100197359A1 (en) 2009-01-30 2010-08-05 Harris Technology, Llc Automatic Detection of Wireless Phone
DE102009008041A1 (de) 2009-02-09 2010-08-12 Volkswagen Ag Verfahren zum Betrieb eines Kraftfahrzeuges mit einem Touchscreen
JP2010199716A (ja) 2009-02-23 2010-09-09 Fujitsu Ten Ltd 車載装置及び通信制御方法
US8825222B2 (en) 2009-02-27 2014-09-02 Toyota Motor Engineering & Manufacturing North America, Inc. Remote management of vehicle settings
US20100235045A1 (en) 2009-03-10 2010-09-16 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Virtual feature management for vehicle information and entertainment systems
US20100233957A1 (en) 2009-03-11 2010-09-16 Delphi Technologies, Inc. Vehicle Personalization Using A Near Field Communications Transponder
JP4767332B2 (ja) 2009-03-13 2011-09-07 シャープ株式会社 情報処理システム及び画像形成システム
US20100280711A1 (en) 2009-04-29 2010-11-04 Gm Global Technology Operations, Inc. System and method of using a portable device to recognize a frequent driver
DE102009024656A1 (de) 2009-06-12 2011-03-24 Volkswagen Ag Verfahren zum Steuern einer grafischen Benutzerschnittstelle und Bedienvorrichtung für eine grafische Benutzerschnittstelle
WO2011011544A1 (en) 2009-07-21 2011-01-27 Scott Ferrill Tibbitts Method and system for controlling a mobile communication device in a moving vehicle
US8482430B2 (en) 2009-10-13 2013-07-09 GM Global Technology Operations LLC Method and apparatus for communicatively changing interior illumination color in a vehicle
US8983534B2 (en) 2009-10-14 2015-03-17 Dipam Patel Mobile telephone for remote operation
US8344850B2 (en) 2009-10-30 2013-01-01 Lear Corporation System and method for authorizing a remote device
US8315617B2 (en) 2009-10-31 2012-11-20 Btpatent Llc Controlling mobile device functions
US8514069B2 (en) 2009-11-12 2013-08-20 MTN Satellite Communications Tracking passengers on cruise ships
US8706349B2 (en) 2009-12-07 2014-04-22 At&T Mobility Ii Llc Devices, systems and methods for controlling permitted settings on a vehicle
US8633916B2 (en) 2009-12-10 2014-01-21 Apple, Inc. Touch pad with force sensors and actuator feedback
JP5005758B2 (ja) 2009-12-25 2012-08-22 株式会社ホンダアクセス 自動車における車載機器の操作装置
US8655965B2 (en) 2010-03-05 2014-02-18 Qualcomm Incorporated Automated messaging response in wireless communication systems
US9417691B2 (en) 2010-03-26 2016-08-16 Nokia Technologies Oy Method and apparatus for ad-hoc peer-to-peer augmented reality environment
CN107102721A (zh) 2010-04-23 2017-08-29 意美森公司 用于提供触觉效果的系统和方法
US20120006610A1 (en) 2010-07-09 2012-01-12 Erik Wallace Telematics enhanced mobile device safety interlock
US20120136802A1 (en) 2010-11-30 2012-05-31 Zonar Systems, Inc. System and method for vehicle maintenance including remote diagnosis and reverse auction for identified repairs
EP2437163A1 (en) 2010-09-09 2012-04-04 Harman Becker Automotive Systems GmbH User interface for a vehicle system
FR2965434B1 (fr) 2010-09-28 2015-12-11 Valeo Securite Habitacle Procede d'appairage d'un telephone mobile avec un vehicule automobile et ensemble de verrouillage/deverrouillage
CN102445954B (zh) 2010-09-30 2014-03-19 福建捷联电子有限公司 采用电脑一体机的车载电脑
EP2442600B1 (en) 2010-10-14 2013-03-06 Research In Motion Limited Near-field communication (NFC) system providing nfc tag geographic position authentication and related methods
WO2012054031A1 (en) 2010-10-20 2012-04-26 Empire Technology Development Llc Encoded optical lock
US9286265B2 (en) 2010-10-28 2016-03-15 Innovation Gap Inc. Device and method for managing an electronic control unit of a vehicle
US8527143B2 (en) 2010-10-29 2013-09-03 Nissan North America, Inc. Vehicle user interface system and method having location specific feature availability
US20120214463A1 (en) 2010-11-05 2012-08-23 Smith Michael J Detecting use of a mobile device by a driver of a vehicle, such as an automobile
JP5685073B2 (ja) 2010-12-17 2015-03-18 株式会社東海理化電機製作所 電子キーシステム
US8543833B2 (en) 2010-12-29 2013-09-24 Microsoft Corporation User identification with biokinematic input
US8863256B1 (en) 2011-01-14 2014-10-14 Cisco Technology, Inc. System and method for enabling secure transactions using flexible identity management in a vehicular environment
US10306422B2 (en) 2011-01-21 2019-05-28 Visteon Global Technologies, Inc. In-vehicle electronic device usage blocker
US9350809B2 (en) 2011-01-31 2016-05-24 Nokia Technologies Oy Method and apparatus for automatically determining communities of interest, for use over an ad-hoc mesh network, based on context information
US8947203B2 (en) 2011-03-07 2015-02-03 John Clinton Kolar Aftermarket sound activated wireless vehicle door unlocker
US8476832B2 (en) 2011-03-15 2013-07-02 Ford Global Technologies, Llc Vehicle interior lighting system with welcome and farewell stages
US8880100B2 (en) 2011-03-23 2014-11-04 Radium, Inc. Proximity based social networking
US20120254809A1 (en) 2011-03-31 2012-10-04 Nokia Corporation Method and apparatus for motion gesture recognition
US8873841B2 (en) 2011-04-21 2014-10-28 Nokia Corporation Methods and apparatuses for facilitating gesture recognition
US20120268242A1 (en) 2011-04-21 2012-10-25 Delphi Technologies, Inc. Vehicle security system and method of operation based on a nomadic device location
US8994492B2 (en) 2011-04-21 2015-03-31 Fariborz M Farhan Disablement of user device functionality
US9104537B1 (en) 2011-04-22 2015-08-11 Angel A. Penilla Methods and systems for generating setting recommendation to user accounts for registered vehicles via cloud systems and remotely applying settings
US9348492B1 (en) 2011-04-22 2016-05-24 Angel A. Penilla Methods and systems for providing access to specific vehicle controls, functions, environment and applications to guests/passengers via personal mobile devices
US9288270B1 (en) 2011-04-22 2016-03-15 Angel A. Penilla Systems for learning user preferences and generating recommendations to make settings at connected vehicles and interfacing with cloud systems
US9285944B1 (en) 2011-04-22 2016-03-15 Angel A. Penilla Methods and systems for defining custom vehicle user interface configurations and cloud services for managing applications for the user interface and learned setting functions
US20120280789A1 (en) 2011-05-02 2012-11-08 Apigy Inc. Systems and methods for controlling a locking mechanism using a portable electronic device
JP5658103B2 (ja) 2011-07-12 2015-01-21 株式会社東海理化電機製作所 給電プラグのロック装置
US8873147B1 (en) 2011-07-20 2014-10-28 Google Inc. Chord authentication via a multi-touch interface
US20130037252A1 (en) 2011-08-12 2013-02-14 GM Global Technology Operations LLC Smart hvac system having occupant detection capability
US20130079951A1 (en) 2011-09-22 2013-03-28 Alcatel-Lucent Usa Inc. Vehicle Device
WO2013052043A1 (en) 2011-10-05 2013-04-11 Celadon Applications, Llc Electronic communications and control module
US8947202B2 (en) 2011-10-20 2015-02-03 Apple Inc. Accessing a vehicle using portable devices
JP2013102373A (ja) 2011-11-09 2013-05-23 Denso Corp ハンズフリー装置
US20130227647A1 (en) 2012-02-28 2013-08-29 Apple Inc. Shared network access via a peer-to-peer link
DE102012203535A1 (de) 2012-03-06 2013-09-12 Bayerische Motoren Werke Aktiengesellschaft Tastenloser Fahrzeugschlüssel mit Gestikerkennung
WO2014172369A2 (en) 2013-04-15 2014-10-23 Flextronics Ap, Llc Intelligent vehicle for assisting vehicle occupants and incorporating vehicle crate for blade processors
US9516492B2 (en) 2012-04-30 2016-12-06 Ford Global Technologies, Llc Apparatus and method for detecting a personal communication device in a vehicle
US9182473B2 (en) 2012-05-10 2015-11-10 Lear Corporation System, method and product for locating vehicle key using neural networks
CN104379413B (zh) 2012-05-22 2017-09-01 Trw汽车美国有限责任公司 无需用手开启门的方法和装置
US8768565B2 (en) 2012-05-23 2014-07-01 Enterprise Holdings, Inc. Rental/car-share vehicle access and management system and method
US9361771B2 (en) 2012-05-23 2016-06-07 Schlage Lock Company Llc Door lock sensor and alarm
US9434300B2 (en) 2012-05-29 2016-09-06 Mohammad A. Pasdar Multi-color in-dash lighting system for changing vehicle backlighting
US20130329111A1 (en) 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Contextual help guide
US20130342379A1 (en) 2012-06-25 2013-12-26 Lear Corporation Vehicle Remote Function System and Method
CN104508508A (zh) 2012-07-06 2015-04-08 丰田自动车株式会社 位置确定系统以及方法
US8750832B2 (en) 2012-07-30 2014-06-10 GM Global Technology Operations LLC Connecting a personal mobile device to a vehicle communication unit
US8810383B2 (en) 2012-08-13 2014-08-19 Ford Global Technologies, Llc System and method for controlling adaptive cruise control based on driver status
US20140068713A1 (en) 2012-08-31 2014-03-06 Tweddle Group, Inc. Systems, methods and articles for providing communications and services involving automobile head units and user preferences
US9656690B2 (en) 2012-10-30 2017-05-23 Robert Bosch Gmbh System and method for using gestures in autonomous parking
US8880240B2 (en) 2012-11-19 2014-11-04 GM Global Technology Operations LLC Methods of controlling vehicle interfaces using device motion and near field communications
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
JP5974876B2 (ja) 2012-12-07 2016-08-23 株式会社オートネットワーク技術研究所 車輌錠制御装置
US20140163771A1 (en) 2012-12-10 2014-06-12 Ford Global Technologies, Llc Occupant interaction with vehicle system using brought-in devices
US9224289B2 (en) 2012-12-10 2015-12-29 Ford Global Technologies, Llc System and method of determining occupant location using connected devices
US9008917B2 (en) 2012-12-27 2015-04-14 GM Global Technology Operations LLC Method and system for detecting proximity of an end device to a vehicle based on signal strength information received over a bluetooth low energy (BLE) advertising channel
EP2763077B1 (en) 2013-01-30 2023-11-15 Nokia Technologies Oy Method and apparatus for sensor aided extraction of spatio-temporal features
US20140215120A1 (en) 2013-01-30 2014-07-31 Inmar, Inc. System, method and computer program product for generating chronologically ordered globally unique identifiers
US8866604B2 (en) 2013-02-14 2014-10-21 Ford Global Technologies, Llc System and method for a human machine interface
US8972730B2 (en) 2013-03-08 2015-03-03 Honeywell International Inc. System and method of using a signed GUID
US9241235B2 (en) 2013-03-14 2016-01-19 Voxx International Corporation Passive entry cell phone and method and system therefor
US9123244B2 (en) 2013-03-15 2015-09-01 Denso International America, Inc. Vehicle tracking of personal devices with response system
WO2014146186A1 (en) 2013-03-22 2014-09-25 Keyfree Technologies Inc. Managing access to a restricted area
FI124600B (en) 2013-04-30 2014-10-31 Bluegiga Technologies Oy Method and technical apparatus for short - distance communication
US8930045B2 (en) 2013-05-01 2015-01-06 Delphi Technologies, Inc. Relay attack prevention for passive entry passive start (PEPS) vehicle security systems
WO2014182971A2 (en) 2013-05-08 2014-11-13 Obdedge, Llc Driver identification and data collection systems for use with mobile communication devices in vehicles
US9844018B2 (en) 2013-06-20 2017-12-12 Google Technology Holdings LLC Vehicle detection
US9053516B2 (en) 2013-07-15 2015-06-09 Jeffrey Stempora Risk assessment using portable devices
US9424047B2 (en) 2013-08-05 2016-08-23 Harman International Industries, Incorporated System and methods for an in-vehicle computing system
US20150048927A1 (en) 2013-08-13 2015-02-19 Directed, Llc Smartphone based passive keyless entry system
JP6241177B2 (ja) 2013-09-27 2017-12-06 富士通株式会社 場所モデル更新装置、位置推定方法及びプログラム
US9227595B2 (en) 2013-10-31 2016-01-05 GM Global Technology Operations LLC Methods, systems and apparatus for providing notification that a vehicle has been accessed
US20150123762A1 (en) 2013-11-05 2015-05-07 Hyundai Motor Company Method and system of opening and closing door of vehicle
CN105830470A (zh) 2013-11-22 2016-08-03 高通股份有限公司 用于基于用车辆内的多个移动计算设备提供的偏好来配置车辆的内部的系统和方法
US10078811B2 (en) 2013-11-29 2018-09-18 Fedex Corporate Services, Inc. Determining node location based on context data in a wireless node network
US9398437B2 (en) 2013-12-16 2016-07-19 Nokia Technologies Oy Method, apparatus, and computer program product for service discovery in wireless short-range communication
DE112015000342T5 (de) 2014-01-06 2016-10-13 Ford Global Technologies, Llc Vorrichtung und Verfahren zur Lokalisierung einer mobilen Vorrichtung im Fahrzeug
US9357475B2 (en) 2014-01-31 2016-05-31 General Motors Llc Vehicle telematics scan rate control
US9537989B2 (en) 2014-03-04 2017-01-03 Qualcomm Incorporated Managing features associated with a user equipment based on a location of the user equipment within a vehicle
US9569263B2 (en) 2014-03-11 2017-02-14 Sas Institute Inc. Techniques for generating instructions to control database processing
US10059175B2 (en) 2014-03-13 2018-08-28 Ford Global Technologies, Llc Autonomous vehicle with automatic window shade
KR20150111221A (ko) 2014-03-25 2015-10-05 삼성전자주식회사 페이지 구성 방법 및 이를 지원하는 전자장치
US20150283914A1 (en) 2014-04-04 2015-10-08 Ford Global Technologies, Llc Method and system for vehicle battery environment control
US20150294518A1 (en) 2014-04-10 2015-10-15 Ford Global Technologies, Llc Remotely programmed keyless vehicle entry system
CN103942963A (zh) 2014-05-12 2014-07-23 李三多 客运车辆身份移动手机验证系统
US20150352953A1 (en) 2014-06-04 2015-12-10 Magna Electronics Inc. Vehicle control system with mobile device interface
US20150356797A1 (en) 2014-06-05 2015-12-10 International Business Machines Corporation Virtual key fob with transferable user data profile
US9467825B2 (en) 2014-06-25 2016-10-11 Verizon Patent And Licensing Inc. Alerts based on vehicle and device telematics
KR101588190B1 (ko) 2014-10-22 2016-01-25 현대자동차주식회사 차량, 그 제어 방법 및 차량에 포함되는 멀티미디어 장치
CN107108035B (zh) 2014-11-14 2019-11-19 庞巴迪公司 车辆部件的车辆内位置检测和配置
US10384643B2 (en) 2015-01-14 2019-08-20 GM Global Technology Operations LLC Virtual keyfob for vehicle sharing
US10173642B2 (en) 2015-01-23 2019-01-08 Continental Automotive Systems, Inc. Telematics system with PIN-controlled external SIM to prevent vehicle piracy
US9357054B1 (en) * 2015-03-11 2016-05-31 Amazon Technologies, Inc. Determining user's seating position in vehicle using barometer and motion sensors
US9616773B2 (en) 2015-05-11 2017-04-11 Uber Technologies, Inc. Detecting objects within a vehicle in connection with a service
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5043646A (en) * 1990-05-01 1991-08-27 Smith Engineering Remote control direction selecting system
US20120151421A1 (en) * 2008-07-24 2012-06-14 Qualcomm Incorporated Enhanced detection of circular engagement gesture
US20100171696A1 (en) * 2009-01-06 2010-07-08 Chi Kong Wu Motion actuation system and related motion database
US20130283202A1 (en) * 2010-12-30 2013-10-24 Wei Zhou User interface, apparatus and method for gesture recognition
CN104411530A (zh) * 2012-04-02 2015-03-11 谷歌公司 基于姿势的汽车控制
US9164588B1 (en) * 2013-02-05 2015-10-20 Google Inc. Wearable computing device with gesture recognition
CN104995664A (zh) * 2013-03-15 2015-10-21 英特尔公司 实时的连续交互学习及检测
CN103226398A (zh) * 2013-03-25 2013-07-31 上海交通大学 基于微惯性传感器网络技术的数据手套
US20140309879A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Control of vehicle features based on user recognition and identification
CN104914986A (zh) * 2014-03-11 2015-09-16 现代自动车株式会社 终端设备、具有终端设备的车辆及控制终端设备的方法
US20150269797A1 (en) * 2014-03-18 2015-09-24 Google Inc. Proximity-initiated physical mobile device gestures
CN105182803A (zh) * 2014-04-10 2015-12-23 Lg电子株式会社 车辆控制装置及其方法
CN104677353A (zh) * 2015-03-17 2015-06-03 上海华测导航技术股份有限公司 基于mems传感器实现机械车体航向角检测的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SHENG XIA等: ""Design of gesture measuring system for tow-wheel self-balanced vehicle"", 《PROCEEDINGS OF THE 30TH CHINESE CONTROL CONFERENCE》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108860025A (zh) * 2018-06-12 2018-11-23 重庆延锋安道拓汽车部件系统有限公司 基于手势识别的座椅调节装置及调节方法
CN108860025B (zh) * 2018-06-12 2024-05-14 安道拓(重庆)汽车部件有限公司 基于手势识别的座椅调节装置及调节方法

Also Published As

Publication number Publication date
US10082877B2 (en) 2018-09-25
CN107193365B (zh) 2022-03-01
DE102017104403A1 (de) 2017-09-21
US20170269695A1 (en) 2017-09-21

Similar Documents

Publication Publication Date Title
CN107193365A (zh) 用于车内环境的不依赖于方向的空中手势检测服务
CN106461397B (zh) 车辆停车和位置的自动检测
US20200047687A1 (en) Exterior speech interface for vehicle
CN107021033A (zh) 车内组件控制用户界面
US11275447B2 (en) System and method for gesture-based point of interest search
CN103843314B (zh) 检测移动装置正与交通工具一起乘行
CN107027170A (zh) 移动装置驻留的车辆区域的跟踪
US20130046505A1 (en) Methods and apparatuses for use in classifying a motion state of a mobile device
CN103460722B (zh) 用于使用对以时间为基准的特征的时间定标进行活动分类的方法、设备和装置
CN103460221B (zh) 用于在移动装置中使用似然函数值的组合对用户活动进行分类的系统、方法和设备
CN103299253B (zh) 用于基于运动方向来选择移动设备显示模式的方法和装置
US10533857B2 (en) User terminal and control method thereof
JP5214100B2 (ja) 携帯型地図表示装置、その方法、およびプログラム
US10040372B2 (en) Identifying and localizing a vehicle occupant by correlating hand gesture and seatbelt motion
CN106030445A (zh) 检测身体活动之间的转换
CN105938338A (zh) 车载组件用户界面
CN107664994A (zh) 用于自主驾驶合并管理的系统和方法
US11084379B2 (en) In-vehicle function control apparatus using detachable knob and method of controlling the same
CN106488404A (zh) 个人装置位置的有效追踪
US9212916B2 (en) Systems and methods for indoor navigation
WO2013191967A1 (en) Routability graph with predetermined number of weighted edges for estimating a trajectory of a mobile device
US20170024103A1 (en) Information processing apparatus, information processing method, and a computer program product
CN106536320A (zh) 对交通系统的连通性建模
US11218837B2 (en) Method for determining position in vehicle using vehicle movement and apparatus therefor
US20140256258A1 (en) Parked vehicle locating smartphone application

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant