CN106960486A - 通过手势识别和语音命令进行功能特性激活的系统和方法 - Google Patents

通过手势识别和语音命令进行功能特性激活的系统和方法 Download PDF

Info

Publication number
CN106960486A
CN106960486A CN201710001636.1A CN201710001636A CN106960486A CN 106960486 A CN106960486 A CN 106960486A CN 201710001636 A CN201710001636 A CN 201710001636A CN 106960486 A CN106960486 A CN 106960486A
Authority
CN
China
Prior art keywords
vehicle
control system
characteristic
activation
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710001636.1A
Other languages
English (en)
Other versions
CN106960486B (zh
Inventor
布兰登·博韦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of CN106960486A publication Critical patent/CN106960486A/zh
Application granted granted Critical
Publication of CN106960486B publication Critical patent/CN106960486B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/10—Interpretation of driver requests or demands
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20—Means to switch the anti-theft system on or off
    • B60R25/2045—Means to switch the anti-theft system on or off by hand gestures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20—Means to switch the anti-theft system on or off
    • B60R25/25—Means to switch the anti-theft system on or off using biometry
    • B60R25/257—Voice recognition
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/06—Automatic manoeuvring for parking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D15/00—Steering not otherwise provided for
    • B62D15/02—Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027—Parking aids, e.g. instruction means
    • B62D15/0285—Parking performed automatically
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062—Adapting control system settings
    • B60W2050/0063—Manual parameter input, manual setting means, manual initialising or calibrating means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54—Audio sensitive means, e.g. ultrasound
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/043—Identity of occupants
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/21—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/215—Selection or confirmation of options
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G07C2009/00365—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks in combination with a wake-up circuit
    • G07C2009/00373—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks in combination with a wake-up circuit whereby the wake-up circuit is situated in the lock
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G07C2009/00507—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function
    • G07C2009/00515—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function opening and locking of all locks at the same time
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G07C2009/00507—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function
    • G07C2009/00523—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function opening of different locks separately

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Lock And Its Accessories (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明的各种实施例提供一种用于通过授权用户的手势识别和语音命令来激活车辆功能特性的系统和方法。通常，本发明的车辆控制系统从授权用户获取手势命令和语音命令，并且与车身控制模块通信以完成车辆功能特性。更具体地，在某些实施例中，车辆控制系统的处理器被配置为启动车辆控制系统的功能特性激活模式、认证授权用户、接收手势命令和语音命令、确定与所接收到的手势命令和语音命令相关联的车辆功能特性、并且响应于所识别的手势命令和语音命令而激活所确定的功能特性。

Description

通过手势识别和语音命令进行功能特性激活的系统和方法
技术领域
本申请总体上涉及车辆的远程闩锁释放。更具体地，本申请涉及闩锁的触发释放，从而当车辆用户接近车辆时解锁车门或释放行李箱。
背景技术
车辆包括用来使用户通过来自车辆内的用户的命令来控制各种车辆功能的各种系统。许多车辆包括远程无钥匙系统(RKS)，该远程无钥匙系统用于实现各种车辆功能的控制，比如锁定和解锁车门并且释放行李箱，而不使用传统的钥匙或其它机械装置，或以其他方式与车辆进行物理接触。通常，远程无钥匙系统包括远程控制装置，该远程控制装置包含用于实现车辆功能的控制的按钮或开关。远程控制装置可以是与车辆的点火钥匙分离的独立钥匙扣或内置在点火钥匙把手中的钥匙扣的形式。
然而，对于其它车辆控制系统(比如自停车(self-parking)或取消停车(unparking))，用户可能希望激活这些功能特性而不需进入车辆。此外，用户可能发现某些功能特性更方便从车辆外部操作。因此，在本领域中仍然需要一种由授权用户从车辆外部控制某些车辆功能特性的系统和方法。
某些功能特性可以更方便从车辆外部(视线)打开/关闭。这种配置使用户能够激活车辆的某些功能特性而不需进入车辆。
发明内容
本发明的各种实施例提供一种用于通过授权用户的手势识别和语音命令来激活车辆功能特性的系统和方法。通常，本发明的车辆控制系统从授权用户获取手势命令和语音命令，并且与车身控制模块通信以完成车辆功能特性。更具体地，在某些实施例中，车辆控制系统的处理器被配置为启动车辆控制系统的功能特性激活模式、认证授权用户、接收手势命令和语音命令、确定与所接收到的手势命令和语音命令相关联的车辆功能特性、且响应于所识别的手势命令和语音命令而激活所确定的功能特性。
应当理解的是，本发明由所附权利要求限定。该说明书概括了实施例的方面并且不应该用来限制权利要求。根据本文所描述的技术可预期其它实施方式，如对于本领域的普通技术人员一经检查下面的附图和具体实施方式将是显而易见的，并且这样的实施方式旨在本申请的范围内。
附图说明
为了更好地理解本发明，可以参照以下附图中所示的实施例。附图中的部件不一定按比例绘制，并且相关的元件可以被省略，或者在某些情况下比例可以被夸大，以便强调且清楚地示出本文所描述的新颖特征。另外，如本领域中已知的，系统部件可以不同地设置。此外，在附图中，贯穿若干视图，相同的附图标记表示相应的部件。
图1是本发明的功能特性激活系统和方法的一个示例实施例的流程图；
图2是根据某些实施例包括在本发明的系统的一个或多个部件中的示例计算装置的框图；
图3是根据某些实施例本发明的示例车辆控制系统的框图。
具体实施方式
尽管本发明可以以各种形式体现，但是在附图中示出了并且在下文中将描述一些示例性且非限制性实施例，应当理解的是，本公开被认为是本发明的例示，并且不旨在将本发明限制为所示的具体实施例。
在本申请中，反意连接词的使用旨在包括连接词。定冠词或不定冠词的使用并不旨在表示基数。特别地，对“该”对象或“一”和“一个”对象的引用也旨在表示可能的多个这样的对象中的一个。
本发明的各种实施例提供一种用于通过授权用户的手势识别和语音命令来激活车辆功能特性的系统和方法。通常，本发明的车辆控制系统从授权用户获取手势命令和语音命令，并且与车身控制模块通信以完成车辆功能特性。更具体地，在某些实施例中，车辆控制系统的处理器被配置为启动车辆控制系统的功能特性激活模式、认证授权用户、接收手势命令和语音命令、确定与所接收的手势命令和语音命令相关联的车辆功能特性、且响应于所识别的手势命令和语音命令而激活所确定的功能特性。
本发明的车辆控制系统的部件(下面详细描述的)可以包括在车辆上、车辆内或以其它方式与车辆集成。车辆控制系统的部件中的一个或多个可以与现有车辆系统的一个或多个部件共享。
车辆控制系统可以包括在任何合适的车辆中或以其他方式可用于任何合适的车辆，比如(但不限于)：(1)非商业客运车辆，比如轿车或卡车、(2)商用车辆，比如牵引式拖车、或(3)非民用车辆，比如由执法机构、政府机构、应急响应机构(例如，火灾响应机构)或医疗响应机构(例如，医院)使用的车辆。该列表不是穷尽的，并且被提供仅仅是为了示例性的目的。
在此所描述的关于车辆控制系统的能力的特征、过程和方法可以通过在基于摄像机的车辆控制系统上运行的车辆控制工具来实施。车辆控制工具可以是程序、应用程序和/或结合在包含车辆控制系统的部件中的一个或多个上的软件和硬件的组合。下面更详细地描述车辆控制工具和车辆控制系统(并且为了简洁，统称为车辆控制系统)。
尽管对应于本文所描述的车辆控制系统的车辆和特征在下文中在车辆移动的情况下进行了描述，但是当车辆处于静止状态(例如，停放、在红灯处停止或在交通中停止)时同样的特征可以应用也在本发明的范围内。
图1是操作本发明的车辆控制系统的示例过程或方法100的流程图。在各种实施例中，过程100通过存储在一个或多个存储器中且通过一个或多个处理器(比如下面结合图3所描述的那些)执行的一组指令来表示。尽管参照图1所示的流程图描述了过程100，但是可以采用执行与所示的过程100相关联的动作的许多其它过程。例如，可以改变某些所示的框和/或菱形框的顺序、某些所示的框和/或菱形框可以是可选的、和/或可以不采用某些所示的框和/或菱形框。
在该实施例的操作中，过程100包括在车辆控制系统内启动功能特性激活模式，如步骤102所示。更具体地，在该示例性实施例中，车辆控制系统必须处在车辆控制系统的功能特性激活模式下，以通过用户的手势识别和语音命令激活某些车辆功能特性。如下面更详细描述的，在功能特性激活模式下，车辆控制系统命令车辆摄像机检测来自授权用户的命令。
本发明的各种实施例包括启动车辆控制系统的功能特性激活模式的多种方式。在某些实施例中，车辆总是处在功能特性激活模式下。更具体地，在一个实施例中，车辆控制系统连续地轮询由摄像机识别的新功能特性。在另一个实施例中，车辆控制系统使用户能够从车辆内部激活功能特性激活模式。
在供选择的实施例中，过程100包括通过钥匙扣装置启动车辆控制系统的功能特性激活模式。更具体地，在一个示例性实施例中，车辆钥匙扣装置(在本文中也被称为“钥匙扣”)被配置为向用户提供车辆的各种操作或功能的远程无钥匙控制，包括但不限于，锁定和解锁车辆、打开和/或关闭车窗、车门或车辆的行李箱、打开无线电或加热或空调系统、启动自动取消停车功能等。应当理解的是，其它车辆功能可以通过钥匙扣控制，并且本发明旨在覆盖任何和所有这样的钥匙扣操作。
在某些实施例中，当用户致动钥匙扣上的输入装置时，车辆控制系统接收信号以激活功能特性激活模式。例如，在一个实施例中，钥匙扣包括各种输入装置，包括但不限于，按键或按钮、滑块、开关、旋钮、拨号盘和/或可以由用户操作以控制车辆的各种功能的触摸输入装置。在该示例性实施例中，钥匙扣包括被配置为一经致动就启动车辆控制系统的功能特性激活模式的输入装置。
在另一个实施例中，车辆控制系统通过检测钥匙扣接近来启动功能特性激活模式。更具体地，在一个示例实施例中，钥匙扣与车辆直接通信，以当用户接近车辆时启动功能特性激活模式。在该示例性实施例中，如下面更详细地描述的，用户的命令被传送到车身控制模块404(如图3所示)，以开始扫描钥匙扣。车身控制模块在距车辆仅有几米的范围内用车辆上的低功率天线扫描钥匙扣。当用户进入天线扫描的范围时，车辆检测钥匙扣、认证钥匙扣、并且如果被认证，则启动功能特性激活模式。
在车辆控制系统接收来自用户的输入以启动功能特性激活模式之后，车辆控制系统认证用户，如框104所示。更具体地，在功能特性激活模式通过钥匙扣启动的某些实施例中，如果天线检测来自钥匙扣的信号，则天线通过验证所检测到的钥匙扣与车辆相关联来认证钥匙扣。在车辆控制系统连续地处在功能特性激活模式下或者在用户从车辆内部启用功能特性激活模式之后的其它实施例中，车辆控制系统在搜索手势命令之前认证用户。
一旦在功能特性激活模式下，则车辆控制系统被配置为等待来自用户的信号，以通过用户手势命令和语音命令启动一些车辆控制功能特性。更具体地，一旦在功能特性激活模式下，则车辆控制系统等待授权用户的手势命令。例如，在一个实施例中，用户希望启动车辆的自停车功能特性并且将车辆停放在车库的右侧。在该示例性实施例中，用户从车辆内部启动车辆控制系统的功能特性激活模式。一旦在功能特性激活模式下，则车辆控制系统等待来自用户的命令。
在该示例性实施例中，在启动车辆控制系统的功能特性激活模式之后，过程100包括识别手势命令，如步骤106所示。在一个实施例中，车辆控制系统被配置为用车辆内的各种摄像机操作以用于功能特性命令识别。也就是说，摄像机识别来自脚、图片或像手语形式的手势的手势。例如，摄像机可以识别手势，包括但不限于，竖起大拇指、拍手、在特定方向上或以特定角度升高的手臂。
车辆控制系统通过车辆摄像机系统获取手势命令。更具体地，车辆控制系统通过车辆上、集成到车辆中、或以其他方式与车辆相关联的一个或多个合适的摄像机(或其它成像装置，比如自主车辆的激光雷达(LIDAR)或雷达(RADAR)系统或其它形式的拓扑处理系统)获取图像信息(比如数字静止图像、流式视频和/或数字视频)。摄像机中的至少一个被定向为获取车辆附近的用户图像信息。在某些实施例中(并且如下面详细描述的)，一个或多个摄像机与车辆控制系统的处理器通信并且被配置为将所获取的图像信息传送到车辆控制系统的处理器，以使处理器能够分析图像信息。在其它实施例中(并且如下面详细描述的)，一个或多个摄像机与存储装置通信并且被配置为将所获取的图像信息传送到存储装置，该存储装置随后存储图像信息。处理器可以通过访问存储器装置来查看图像信息。
在某些实施例中，摄像机系统等待命令持续指定的时间段。如果指定的时间段已经过去，并且摄像机系统未接收手势命令，则车辆控制系统将超时(即，终止功能特性激活模式)。更具体地，在某些实施例中，摄像机系统必须接收预定最小量的运动以防止超时。例如，如果车辆用户打开功能特性激活模式并离开车辆，则如果摄像机系统在预定时间段内接收一些最小运动，则用户可以激活该功能特性(即，自停车)。在该实施例中，如果摄像机系统在预定时间段内接收运动，则车辆控制系统保持在功能特性激活模式下。如果摄像机在预定时间段内未接收运动的指示，则车辆控制系统将超时。这样的配置使用户能够启动功能特性激活模式、离开车辆以将某物移出车辆的路径、并且执行手势以激活自停车功能特性，而没有车辆控制系统超时。
应当理解的是，在某些实施例中，指定的时间段是预定的。在其它供选择的实施例中，用户将指定的时间段修改为期望的时间段。这种配置防止摄像机连续地搜索手势命令。
继续上述示例，希望激活车辆的自停车功能特性并使车辆停放在车库右侧的用户将执行手势以激活自停车功能特性。在该示例性实施例中，用户向车辆摄像机示出竖起大拇指手势。
在摄像机获取用户的手势命令之后，车辆控制系统来自摄像机的所识别的手势信息接收到车辆控制系统内的处理器，以确定对应于所识别的手势的车辆功能特性，如步骤108所示。车辆控制系统内的处理器分析手势数据以确定手势与哪个车辆功能特性相关联。更具体地，在某些实施例中，处理器通过搜索车辆控制系统内的存储器确定相关联的车辆功能特性，其中在该存储器中，用户手势命令和相关联的车辆功能特性被存储。应当理解的是，在某些实施例中，手势命令和相关联的车辆功能特性由工厂预配置。在其它实施例中，车辆控制系统使用户能够定制用于某些车辆功能特性的某些手势命令。
应当理解的是，为了捕获手势命令，在某些实施例中，车辆摄像机系统包括在车辆内部上的摄像机。在一个这样的实施例中，车辆内部的显示系统显示用户的手势，以使用户可以验证摄像机正在准确捕获手势命令。在其它实施例中，车辆摄像机系统包括位于车辆外部的摄像机。在一个这样的实施例中，用户可以使用与车辆控制系统通信的移动装置来显示捕获的手势命令。在其它实施例中，车辆包括各种工厂建议手势，用户可以从中选择哪个手势与哪个功能特性相关联并且验证它。
在供选择的实施例中，用户可以使用与用户的移动装置的蓝牙连接以记录手势并且通过保持用户的移动装置并进行必要的动作来激活手势。这将具有允许用户具有用于语音交互的更长距离的附加益处。在某些实施例中，该移动手势命令可以由移动装置上的应用程序直接激活。在其它实施例中，该移动手势命令可以通过后台运行来激活，同时蓝牙(或其它通信方法)在车辆的范围内。
返回到上述示例，车辆控制系统接收所识别的手势信息。更具体地，车辆控制系统内的处理器接收车辆摄像机所识别的授权用户“竖起大拇指”手势的信息。车辆控制系统的处理器确定对于该车辆和该用户而言，竖起大拇指手势与车辆自停车功能特性相关联。
在该示例性实施例中，在确定所识别的手势命令所关联的车辆功能特性之后，过程100包括等待进一步的语音命令以完成激活的车辆功能特性，如框110所示。语音命令与手势命令相结合向车辆控制系统通知要激活的功能特性以及执行该功能特性的方式。更具体地，在上述示例性实施例中，在接收到竖起大拇指手势命令并且确定竖起大拇指与自停车功能特性相关联之后，车辆控制系统等待语音命令以用在哪里自停车的信息引导车辆。在该示例中，用户可以说出语音命令(比如“向右”)以指示车辆控制系统使车辆自停放在车库的右侧。
在分析手势命令和语音命令之后，车辆控制系统将用户的命令中继到车身控制模块，以激活与用户的命令相关联的车辆功能特性，如步骤112所示。车身控制模块控制车辆功能特性。更具体地，当用户提供手势命令和语音命令时，车身控制模块执行由手势命令激活的功能特性。这种配置使用户能够通过手势命令和语音命令来控制某些车辆功能特性。
应当理解的是，这样的配置使用户能够从车辆的外部激活和控制某些车辆功能特性。在某些情况下，某些功能特性更方便从车辆外部启动。例如，在一个实施例中，用户在停车场接近用户的车辆，其中车辆被停放在紧凑的停车位。用户可以使用钥匙扣唤醒车辆并且认证用户是批准的用户。然后，用户执行必要的手势来激活功能特性。在该示例实施例中，手势可以是对侧视摄像机的一系列手势。一经激活“取消停车”功能特性，用户就可以使用语音命令从外部引导车辆。例如，用户可以通过语音命令指示用户在驶出紧凑的停车位之后用户希望车辆面向哪个方向。然后，车辆可以在用户不需进入车辆的情况下被取消停放。
转到图2，图2示出了用于处理数据或与本发明的系统相关联的其他输入的示例计算装置200，其用于容纳且执行用来促进本发明的车辆控制系统400(如图3所示)的软件和根据实施例的过程100。计算装置200的一个或多个示例可以用来实施本发明的功能特性激活系统和方法中的任何一个、一些或全部部件。在一些实施例中，本发明的功能特性激活系统和方法的部分以软件实施为可执行程序，并且由一个或多个专用或通用数字计算机执行，该计算机比如大型计算机、个人计算机(台式机、笔记本电脑、平板型电脑)、个人数字助理、工作站、微型计算机、计算机网络、虚拟网络、因特网云计算设施、移动电话或智能电话、平板电脑或其他手持式计算装置。在这种情况下，计算装置200可以代表系统驻留或部分驻留的任何计算机。
作为示例，计算装置200可以表示包括在钥匙扣中用于接收车辆命令输入并且与车辆通信的计算机。在一个实施例中，钥匙扣包括麦克风，其接收对钥匙扣的语音命令输入，以将车辆控制向车辆通信。同样地，计算装置200可以表示包括在车辆控制系统400中用于存储、执行指令并且与钥匙扣通信以及接收、处理和执行从其接收的车辆命令的计算机。
如图2所示，计算装置200通常包括处理器202、存储器204和通过本地接口208通信耦合的一个或多个输入和/或输出(I/O)装置206(或外围装置)。处理器202是硬件装置，并且可以是任何定制或商业可用的处理器、中央处理单元(CPU)、与计算机200相关联的若干处理器中的辅助处理器、基于微处理器的半导体(以微芯片或芯片组的形式)、另一类型的微处理器或通常用于执行软件指令的任何装置。当计算装置200处在操作下时，处理器202可以被配置为执行存储在存储器204中的软件，以将数据传送到存储器204并且从存储器204传送数据，并且通常根据软件控制计算装置200的操作。软件——整体或部分，但通常是后者——可以通过处理器202读取、在处理器202内缓冲、并且然后执行。
存储器204可以包括计算机可读介质，该介质用于存储实施本发明的功能特性激活系统和方法和/或其部件的软件并且用于实施特定系统交互。例如，存储器204可以被配置为存储一个或多个单独的程序(例如，源程序、可执行程序(目标代码)、或脚本)，该程序包含用于实施与本发明的系统和方法相关联的逻辑功能的可执行指令的有序列表。此外，软件可以被编写为(a)面向对象编程语言，其具有数据和方法的类别，或(b)过程编程语言，其具有例程、子例程和/或功能，例如但不限于C、C++、C#、Pascal、Basic、Fortran、Cobol、Perl、Java、Ada、Python和Lua。本发明的功能特性激活系统和方法的部件还可以以被开发来与这些已知语言交互的专有语言编写。在本文献的上下文中，“计算机可读介质”可以是能够存储、传送、传播或传输供无线系统使用或与无线系统结合的数据对象的任何装置，并且甚至可以包括具有在其上打印的编程指令的纸。
在某些情况下，存储器204中的软件包括与本发明的功能特性激活系统相关联的一个或多个应用程序210。作为示例，车辆控制系统400的存储器204(下面更详细地描述)可以用来实施一个或多个数据库，例如车辆数据库214，该车辆数据库214被配置为存储与车辆相关联的信息，该信息包括例如，与某些车辆功能特性相关联的手势命令和语音命令信息、从TCU 408接收的诊断信息、从GPS(全球定位系统)卫星接收并且与车辆相关联的GPS信息等等。
在实施例中，存储器204包括易失性存储器元件(例如，随机存取存储器(RAM，比如动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、同步动态随机存取存储器(SDRAM)等)和非易失性存储器元件(例如，只读存储器(ROM)、硬盘驱动器、磁带、只读光盘(CDROM)等)中的任意一个或结合。此外，存储器204可以包含电子、磁性、光学和/或其他类型的存储介质。在某些情况下，存储器204可以具有分布式结构，其中各种部件位于彼此远离，但仍然通过处理器202访问。
如本领域中已知的，本地接口208可以是例如但不限于一个或多个总线或其他有线或无线连接。本地接口208可以具有为了简化而省略的附加元件，比如控制器、缓冲器(高速缓存)、驱动器，中继器和接收器，以实现通信。此外，本地接口208可以包括地址、控制和/或数据连接以实现其它计算机部件之间的适当通信。
I/O装置206可以包括在计算装置200内部、或外部并且无线连接或通过连接缆线和/或I/O端口连接的交互式硬件。输入装置216可以包括使车辆的驾驶员或乘客能够输入本文所描述的车辆控制系统400所引用的信息的修改或更新的任何合适的输入装置。输入装置216可以包括例如控制旋钮、仪表板、键盘、扫描仪、用于图像捕获和/或视觉命令识别的数字摄像机、触摸屏、音频输入装置(例如，车舱麦克风)、按钮、鼠标或触摸板、用于可编程逻辑控制器(PLC)的输入模块、射频设备读取器。此外，I/O装置206还可以包括输出装置218，例如但不限于，用于PLC的输出模块、显示器、触觉装置(例如，致动器)、灯(例如，LED(发光二极管)，例如，输出装置117)、音频输出装置(例如，扬声器)等。
I/O装置206进一步包含与输入和输出两者通信的装置，包括但不限于，无线通信模块220。无线通信模块220包括一个或多个天线222，其被配置为将信号无线发送到本发明的功能特性激活系统和方法的至少其它部件，和/或从本发明的功能特性激活系统和方法的至少其它部件接收信号。无线通信模块220进一步包括一个或多个接收器、发射机、和/或收发器(未示出)，该接收器、发射机、和/或收发器通信地连接到一个或多个天线222，用于处理接收到的信号、提供传送的信号、或以其他方式促进与本发明的功能特性激活系统和方法的其它部件无线通信。无线通信模块220还可以包括调制器/解调器(调制解调器；用于访问另一装置、系统或网络，例如本发明的功能特性激活系统和方法内的另一部件)、桥接器和/或路由器。
包括在无线通信模块220中的无线通信技术的确切类型可以根据计算装置200而变化，并且可以包括短距离无线通信技术(例如射频(RF)、蓝牙、红外和/或NFC(近场通信)技术)和更长距离或宽带无线通信技术(例如，WiFi(无线保真)、WiMax(全球微波互联接入)、其他无线以太网、蜂窝，GPS和/或卫星技术)中的至少一个。在某些情况下，无线通信模块220可以包括多个天线和相应的收发器，以便通过不同的无线网络进行通信。
在某些情况下，计算装置200还可以包括用于实施本文所描述的技术的一个或多个方面的硬件。在这种情况下，硬件利用本领域中众所周知的以下技术中的任意一个或其组合：具有用于对数据信号实施逻辑功能的逻辑门的离散逻辑电路，具有适当的组合逻辑门、可编程门阵列(PGA)、现场可编程门阵列(FPGA)等的专用集成电路(ASIC)。
现在参照图3，图3示出了根据实施例可以包括在车辆中的示例性车辆控制系统(VCS)400。VCS 400包括负责监测且控制车辆的电气系统或子系统的各种电子控制单元(ECU)，如下面更详细描述的。在实施例中，VCS 400的ECU 414通过车辆总线402(例如，控制器局域网(CAN)总线)互连，用于将数据传递到各个ECU 414以及其它车辆和/或与VCS 400通信的辅助部件并且从各个ECU 414以及其它车辆和/或与VCS 400通信的辅助部件传递数据。每个ECU 414可以包括例如用于收集、接收和/或传送数据的一个或多个输入和输出、用于存储数据的存储器、以及用于处理数据和/或基于此生成新信息的处理器。
在所示的实施例中，VCS 400包括用于获取用户手势命令的摄像机。摄像机416与VCS(在图3中未示出)内的计算装置200的处理器202和存储器204通信。摄像机416通过本地接口208与VCS 400的计算装置200的处理器202和存储器204通信。
在所示的实施例中，VCS 400包括用于控制且监测车辆的车身中的各种电子附件的车身控制模块(BCM)404。在实施例中，BCM 404是控制车辆的门的ECU，包括锁定、解锁、打开和/或关闭所述门。在一些实施例中，BCM 404还控制车辆的电动窗、电动车顶(例如，天窗、折合式敞蓬车顶等)和内部照明。BCM还可以用于车辆功能特性，比如自停车和取消停车功能特性。BCM 404还可以控制车辆的车身中的其它电动部件，例如空调单元、电动后视镜和电动座椅。BCM 404可以被配置为实施通过来自用户的与由BCM 404控制的门、窗或其他车身部件相关的手势命令和语音命令来接收的用户车辆命令。
如图3所示，VCS 400可以进一步包括用于控制且监测车辆的发动机和变速器的动力传动系控制模块(PCM)406。在一些实施例中，PCM 406可以被分成两个单独的ECU，具体地，发动机控制单元和变速器控制单元。在任一情况下，PCM 406可以被配置为控制车辆的发动机的启动和停止，包括从来自用户的手势命令和语音命令接收启动发动机的命令。
如图3所示，VCS 400进一步包括远程信息处理控制单元(TCU)408，其是用于使车辆能够连接到各种无线网络的ECU，无线网络包括例如GPS、WiFi、蜂窝、蓝牙、NFC、RFID(射频识别)、卫星和/或红外。在实施例中，TCU 408(也被称为“车辆远程信息处理单元”)包括无线通信模块410，该模块410包含一个或多个用于连接到各种无线网络的天线、调制解调器、接收器和/或发射器(未示出)。例如，无线通信模块410可以包括用于通过蜂窝网络(例如，GSM(全球移动通信系统)、GPRS(通用分组无线业务)、LTE(长期演进)、3G(第三代移动通信)、4G(第四代移动通信)、CDMA(码分多址)等)、802.11网络(例如，WiFi)、WiMax网络和/或卫星网络无线通信的移动通信单元(未示出)。TCU 408还可以被配置为使用从GPS卫星获取的纬度和经度值来控制车辆的追踪。
在实施例中，TCU 408通过无线通信模块410接收外部数据，包括车辆命令，并且将外部数据提供给VCS 400的适当的ECU。例如，如果TCU 408接收锁门命令，则TCU 408通过车辆总线402将命令发送到BCM 404。同样地，如果TCU 408接收启动发动机命令，则TCU 408通过车辆总线402将命令发送到PCM 406。在一些实施例中，TCU 408还接收来自VCS 400的其它ECU或VCS 400的处理器(未示出)的内部数据，其具有将内部数据传送到远程服务器或无线系统的另一部件的指令。
无线通信模块410能够通过两个或更多个网络进行无线通信，以确保网络接入的连续性，例如，在网络故障或超出范围的一种情况下。此外，根据用来传送命令的无线通信技术，车辆命令可以在无线通信模块410的不同接收器处接收。例如，由钥匙扣传送到车辆的命令和/或数据可以在无线通信模块410的蓝牙接收器(未示出)处接收。同样地，可以使用包括在无线通信模块410中的蓝牙发射器(未示出)将数据从TCU 408传送到钥匙扣，并且可以使用包括在无线通信模块410中的蜂窝或WiFi发射器(未示出)将数据从TCU 408传送到远程服务器。
VCS 400可以进一步包括用于控制且监测钥匙扣和车辆之间的远程无钥匙交互的远程无钥匙系统(RKS)单元412。RKS单元412可以包括远程无钥匙进入系统，并且在某些情况下包括远程无钥匙点火系统。在后一种情况下，RKS单元412也可以被称为“被动进入被动启动(passive entry passive start，(PEPS))系统”。在一些实施例中，RKS单元412是通过车辆总线402互连到BCM 404、PCM 406、TCU 408和车辆的其它ECU 414以便实施RKS/PEPS操作的单独、独立ECU。例如，RKS单元412可以通过TCU 408接收来自钥匙扣的车辆命令、处理命令以识别用于实施命令的适当的ECU、将命令发送到识别的ECU、并且确认命令的执行。在其它实施例中，RKS单元412可以包含并入到VCS 400的各种ECU(例如，BCM 404、PCM 406和/或TCU 408)中的多个段，以处理每个ECU处接收的RKS/PEPS命令。在又一实施例中，RKS单元412可以包括在一个ECU中，例如TCU 408，以便在由TCU 408的无线通信模块410接收RKS/PEPS命令时办理或处理RKS/PEPS命令。
附图中的任何过程描述或框应当被理解为表示包括用于实施过程中的特定逻辑功能或步骤的一个或多个可执行指令的模块、段、或代码的一部分，并且供选择的实施方式被包括在本文所描述的实施例的范围，其中如本领域普通技术人员应当理解的是，根据所涉及的功能，功能可以以不同于示出或讨论的顺序执行，包括大体上同时发生或以相反的顺序。
应当强调的是，上述实施例，特别是任何“优选”实施例是实施方式的可能示例，仅仅阐述用于清楚理解本发明的原理。在大体上不脱离本文所描述的技术的精神和原理的前提下，可以对上述实施例进行许多变化和修改。所有这些修改旨在包括在本发明的范围内并且由下面的权利要求来保护。
应当强调的是，上述实施例，特别是任何“优选”实施例是实施方式的可能示例，仅仅阐述用于清楚理解本发明的原理。在大体上不脱离本文所描述的技术的精神和原理的前提下，可以对上述实施例进行许多变化和修改。所有这些修改旨在包括在本发明的范围内并且由下面的权利要求来保护。

Claims (20)

1.一种车辆功能特性激活系统，包含：
摄像机和麦克风，所述摄像机和所述麦克风用来从用户分别获取手势命令和语音命令，以激活车辆功能特性；
车辆控制系统，所述车辆控制系统被配置为：
分别从所述摄像机和所述麦克风接收所述手势命令和所述语音命令；
确定与所述手势命令和所述语音命令相关联的所述车辆功能特性；以及
激活所述确定的相关联的车辆功能特性。
2.根据权利要求1所述的车辆功能特性激活系统，其中所述车辆控制系统启动功能特性激活模式以接收从所述摄像机获取的手势命令信息。
3.根据权利要求2所述的车辆功能特性激活系统，其中所述车辆控制系统通过检测靠近所述车辆的钥匙扣来启动所述功能特性激活模式。
4.根据权利要求2所述的车辆功能特性激活系统，其中用户从所述车辆内启动所述车辆控制系统的所述功能特性激活模式。
5.根据权利要求1所述的车辆功能特性激活系统，其中所述手势命令包括来自用户的手、脚、图片和手语中的一个或多个的命令。
6.根据权利要求1所述的车辆功能特性激活系统，其中所述相关联的车辆功能包括自停车。
7.根据权利要求6所述的车辆功能特性激活系统，其中所述语音命令引导所述激活的自停车功能特性。
8.根据权利要求1所述的车辆功能特性激活系统，其中所述车辆控制系统在激活与所述获取的手势命令和语音命令相关联的所述功能特性之前验证所述用户是授权用户。
9.根据权利要求1所述的车辆功能特性激活系统，其中所述车辆控制系统进一步包含车身控制模块。
10.根据权利要求9所述的车辆功能特性激活系统，其中所述车身控制模块激活与所述获取的手势命令和语音命令相关联的所述车辆功能特性。
11.一种操作车辆功能特性激活系统的方法，包含：
从用户获取来自摄像机的手势命令和来自麦克风的语音命令以激活车辆功能特性；
通过车辆控制系统分别从所述摄像机和所述麦克风接收所述手势命令和所述语音命令；
确定与所述手势命令和所述语音命令相关联的所述车辆功能特性；以及
激活所述确定的相关联的车辆功能特性。
12.根据权利要求11所述的方法，其中所述车辆控制系统启动功能特性激活模式以接收从所述摄像机获取的手势命令信息。
13.根据权利要求12所述的方法，其中所述车辆控制系统通过检测靠近所述车辆的钥匙扣来启动所述功能特性激活模式。
14.根据权利要求12所述的方法，其中用户从所述车辆内启动所述车辆控制系统的所述功能特性激活模式。
15.根据权利要求11所述的方法，其中所述手势命令包括来自用户的手、脚、图片和手语中的一个或多个的命令。
16.根据权利要求11所述的方法，其中所述相关联的车辆功能包括自停车。
17.根据权利要求16所述的方法，其中所述语音命令引导所述激活的自停车功能特性。
18.根据权利要求11所述的方法，其中所述车辆控制系统在激活与所述获取的手势命令和语音命令相关联的所述功能特性之前验证所述用户是授权用户。
19.根据权利要求11所述的方法，其中所述车辆控制系统进一步包含车身控制模块。
20.根据权利要求19所述的方法，其中所述车身控制模块激活与所述获取的手势命令和语音命令相关联的所述车辆功能特性。
CN201710001636.1A 2016-01-08 2017-01-03 通过手势识别和语音命令进行功能特性激活的系统和方法 Expired - Fee Related CN106960486B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/991,523 US10166995B2 (en) 2016-01-08 2016-01-08 System and method for feature activation via gesture recognition and voice command
US14/991,523 2016-01-08

Publications (2)

Publication Number Publication Date
CN106960486A true CN106960486A (zh) 2017-07-18
CN106960486B CN106960486B (zh) 2021-08-31

Family

ID=58463834

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710001636.1A Expired - Fee Related CN106960486B (zh) 2016-01-08 2017-01-03 通过手势识别和语音命令进行功能特性激活的系统和方法

Country Status (6)

Country Link
US (1) US10166995B2 (zh)
CN (1) CN106960486B (zh)
DE (1) DE102016125280A1 (zh)
GB (1) GB2547980A (zh)
MX (1) MX2017000356A (zh)
RU (1) RU2016150852A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107685712A (zh) * 2017-07-31 2018-02-13 芜湖市振华戎科智能科技有限公司 电动汽车人车互联自动锁门系统
CN109109857A (zh) * 2018-09-05 2019-01-01 深圳普思英察科技有限公司 一种无人驾驶售货车及其停车方法与装置
CN109785655A (zh) * 2018-12-11 2019-05-21 北京百度网讯科技有限公司 车辆控制方法、装置、设备、无人驾驶车辆及存储介质
CN110281887A (zh) * 2018-03-19 2019-09-27 丰田自动车株式会社 驻车辅助装置
CN110517687A (zh) * 2018-08-10 2019-11-29 重庆金康新能源汽车有限公司 使用机动交通工具外部的语音命令控制其功能的系统
CN110794819A (zh) * 2019-11-13 2020-02-14 深圳市路畅智能科技有限公司 一种手势按键融合的智能汽车无线驾驶控制系统
CN110816470A (zh) * 2019-11-18 2020-02-21 上海擎感智能科技有限公司 基于车载终端的用户授权添加方法、系统、介质及车载终端
CN110871792A (zh) * 2019-12-20 2020-03-10 奇瑞汽车股份有限公司 一种自动泊车控制系统及方法
CN111731293A (zh) * 2019-03-19 2020-10-02 本田技研工业株式会社 车辆控制系统、车辆控制方法及存储介质
CN111936836A (zh) * 2018-02-14 2020-11-13 魁普有限公司 车辆安全系统及方法
CN113119955A (zh) * 2020-08-31 2021-07-16 长城汽车股份有限公司 用于车辆的泊车方法和车辆
CN114013431A (zh) * 2022-01-06 2022-02-08 宁波均联智行科技股份有限公司 基于用户意向的自动泊车控制方法及系统
CN115158295A (zh) * 2022-06-29 2022-10-11 重庆长安汽车股份有限公司 车辆的泊车控制方法及装置
CN116279435A (zh) * 2023-05-17 2023-06-23 常州星宇车灯股份有限公司 一种新型停车辅助系统
WO2024124387A1 (zh) * 2022-12-13 2024-06-20 华为技术有限公司 一种服务调用方法、通信装置、服务调用系统以及车辆

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3050421B1 (fr) * 2016-04-21 2018-04-27 Valeo Systemes D'essuyage Dispositif de nettoyage d’un capteur d’un systeme de detection optique de vehicule automobile
US10950229B2 (en) * 2016-08-26 2021-03-16 Harman International Industries, Incorporated Configurable speech interface for vehicle infotainment systems
US10071730B2 (en) * 2016-08-30 2018-09-11 GM Global Technology Operations LLC Vehicle parking control
US10934764B2 (en) 2016-09-08 2021-03-02 Magna Closures Inc. Radar detection system for non-contact human activation of powered closure member
US11067667B2 (en) 2016-09-08 2021-07-20 Magna Closures Inc. Radar detection system for non-contact human activation of powered closure member
DE102016221564A1 (de) * 2016-10-13 2018-04-19 Bayerische Motoren Werke Aktiengesellschaft Multimodaler Dialog in einem Kraftfahrzeug
US10102856B2 (en) * 2017-01-20 2018-10-16 Essential Products, Inc. Assistant device with active and passive experience modes
US11316865B2 (en) 2017-08-10 2022-04-26 Nuance Communications, Inc. Ambient cooperative intelligence system and method
US10546655B2 (en) 2017-08-10 2020-01-28 Nuance Communications, Inc. Automated clinical documentation system and method
US10647332B2 (en) * 2017-09-12 2020-05-12 Harman International Industries, Incorporated System and method for natural-language vehicle control
US20190126889A1 (en) * 2017-11-02 2019-05-02 Aptiv Technologies Limited Hands-free access method
DE102018200138A1 (de) * 2018-01-08 2019-07-11 Audi Ag Verfahren zum Durchführen einer Interaktion
US10296102B1 (en) 2018-01-31 2019-05-21 Piccolo Labs Inc. Gesture and motion recognition using skeleton tracking
US10241588B1 (en) 2018-01-31 2019-03-26 Piccolo Labs Inc. System for localizing devices in a room
EP3762929A4 (en) 2018-03-05 2022-01-12 Nuance Communications, Inc. SYSTEM AND PROCEDURE FOR REVIEWING AUTOMATED CLINICAL DOCUMENTATION
US11250382B2 (en) 2018-03-05 2022-02-15 Nuance Communications, Inc. Automated clinical documentation system and method
EP3762921A4 (en) 2018-03-05 2022-05-04 Nuance Communications, Inc. AUTOMATED CLINICAL DOCUMENTATION SYSTEM AND PROCESS
US20190299849A1 (en) * 2018-03-30 2019-10-03 Jewel L. Dohan Voice-recognition/voice-activated vehicle signal system
DE102018215293A1 (de) * 2018-09-07 2020-03-12 Bayerische Motoren Werke Aktiengesellschaft Multimodale Kommunikation mit einem Fahrzeug
CN110920563A (zh) * 2018-09-18 2020-03-27 阿里巴巴集团控股有限公司 车辆解锁方法、装置及电子设备
CN109542219B (zh) * 2018-10-22 2021-07-30 广东精标科技股份有限公司 一种应用于智能教室的手势交互系统及方法
CN110065502A (zh) * 2019-04-02 2019-07-30 北京长城华冠汽车科技股份有限公司 车辆及其控制方法和装置
US11216480B2 (en) 2019-06-14 2022-01-04 Nuance Communications, Inc. System and method for querying data points from graph data structures
US11227679B2 (en) 2019-06-14 2022-01-18 Nuance Communications, Inc. Ambient clinical intelligence system and method
CN112109729B (zh) * 2019-06-19 2023-06-06 宝马股份公司 用于车载系统的人机交互方法、装置和系统
US11531807B2 (en) 2019-06-28 2022-12-20 Nuance Communications, Inc. System and method for customized text macros
DE102019210144A1 (de) * 2019-07-10 2021-01-14 Zf Friedrichshafen Ag Kombination von Sensorsystemen im Fahrzeug zum Verbessern des Erkennens von Nutzerbefehlen
US10820174B1 (en) * 2019-08-06 2020-10-27 Ford Global Technologies, Llc Identification of a vehicle based on gestures of a potential occupant of the vehicle
CN110727346B (zh) * 2019-09-24 2022-09-23 中国第一汽车股份有限公司 一种人机交互方法、装置、车辆及存储介质
US11670408B2 (en) 2019-09-30 2023-06-06 Nuance Communications, Inc. System and method for review of automated clinical documentation
JP7287258B2 (ja) * 2019-12-10 2023-06-06 トヨタ自動車株式会社 エージェント管理装置、プログラムおよびエージェント管理方法
US11567492B2 (en) 2020-01-17 2023-01-31 Zimeno, Inc. Vehicle control by a remote operator
FR3106328A1 (fr) * 2020-01-17 2021-07-23 Psa Automobiles Sa Procédé et système pour gérer une manœuvre d’un véhicule automobile en regard d’un emplacement de stationnement par force appliquée
US20210237715A1 (en) * 2020-01-30 2021-08-05 Ford Global Technologies, Llc Continuous input brain machine interface for automated driving features
US11657661B2 (en) * 2020-04-01 2023-05-23 Toyota Motor North America, Inc. Transport features based on driving characteristics
CN112158165B (zh) * 2020-09-30 2023-03-28 重庆长安汽车股份有限公司 车辆解闭锁与快速启动方法、系统、车辆及存储介质
JP7314898B2 (ja) * 2020-10-09 2023-07-26 トヨタ自動車株式会社 エージェント装置、エージェント方法及びエージェントプログラム
US11222103B1 (en) * 2020-10-29 2022-01-11 Nuance Communications, Inc. Ambient cooperative intelligence system and method
US11835008B1 (en) * 2023-01-12 2023-12-05 Ford Global Technologies, Llc Engine and engine exhaust control system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096956A (zh) * 2010-11-15 2011-06-15 王翔 汽车无钥匙远程控制系统及其数据处理方法
CN104008635A (zh) * 2014-04-18 2014-08-27 小米科技有限责任公司 设备控制方法及装置
US20140309885A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Control of Vehicle Features Based on Weather and Location Data
CN104412068A (zh) * 2012-07-06 2015-03-11 奥迪股份公司 用于运行机动车的方法和控制系统
US20150077235A1 (en) * 2013-09-17 2015-03-19 Toyota Motor Engineering & Manufacturing North America, Inc. Interactive vehicle window display system with user identification and image recording
CN104968532A (zh) * 2012-12-10 2015-10-07 伟创力汽车有限公司 基于图像识别和射频的车辆机电系统触发
US20150291157A1 (en) * 2013-07-31 2015-10-15 Here Global B.V. Method and apparatus for causing an adjustment in parking position for vehicles

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2648072A (en) 1951-03-30 1953-08-11 Blieux John D De Bed cushion for automobiles
US9513744B2 (en) * 1994-08-15 2016-12-06 Apple Inc. Control systems employing novel physical controls and touch screens
US7489303B1 (en) * 2001-02-22 2009-02-10 Pryor Timothy R Reconfigurable instrument panels
US7527288B2 (en) * 1995-06-07 2009-05-05 Automotive Technologies International, Inc. Vehicle with crash sensor coupled to data bus
US6614422B1 (en) * 1999-11-04 2003-09-02 Canesta, Inc. Method and apparatus for entering data using a virtual input device
US6545670B1 (en) * 1999-05-11 2003-04-08 Timothy R. Pryor Methods and apparatus for man machine interfaces and related activity
US6710770B2 (en) * 2000-02-11 2004-03-23 Canesta, Inc. Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device
US7920102B2 (en) * 1999-12-15 2011-04-05 Automotive Technologies International, Inc. Vehicular heads-up display system
US6498970B2 (en) * 2001-04-17 2002-12-24 Koninklijke Phillips Electronics N.V. Automatic access to an automobile via biometrics
JP4311190B2 (ja) * 2003-12-17 2009-08-12 株式会社デンソー 車載機器用インターフェース
JP2006015436A (ja) * 2004-06-30 2006-01-19 Honda Motor Co Ltd 監視ロボット
DE102006006362A1 (de) 2006-02-11 2007-05-24 Daimlerchrysler Ag Pneumatische Beinauflage für ein Kraftfahrzeug
JP4793118B2 (ja) * 2006-06-20 2011-10-12 トヨタ自動車株式会社 スマートエントリーシステム
JP4755556B2 (ja) * 2006-09-04 2011-08-24 クラリオン株式会社 車載装置
US7937667B2 (en) * 2006-09-27 2011-05-03 Donnelly Corporation Multimedia mirror assembly for vehicle
US7845718B1 (en) 2007-07-09 2010-12-07 Gerald Bosstick Bed formed from face to face chairs
CN102132227B (zh) * 2008-03-26 2017-02-22 微芯科技德国有限责任公司 用于对姿势的多维评估的系统和方法
US20100085147A1 (en) 2008-10-08 2010-04-08 Gm Global Technology Operations, Inc. Keyless entry using hand signals
US20100185341A1 (en) 2009-01-16 2010-07-22 Gm Global Technology Operations, Inc. Vehicle mode activation by gesture recognition
US20140058584A1 (en) * 2009-03-18 2014-02-27 Robert Bosch Gmbh System And Method For Multimodal Interaction With Reduced Distraction In Operating Vehicles
US10705794B2 (en) * 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8296151B2 (en) * 2010-06-18 2012-10-23 Microsoft Corporation Compound gesture-speech commands
US9092394B2 (en) * 2012-06-15 2015-07-28 Honda Motor Co., Ltd. Depth based context identification
DE102012216174A1 (de) 2012-09-12 2014-05-28 Bayerische Motoren Werke Aktiengesellschaft Steuerung einer Kraftfahrzeugbewegung von außen
US9656690B2 (en) * 2012-10-30 2017-05-23 Robert Bosch Gmbh System and method for using gestures in autonomous parking
GB2510849B (en) 2013-02-14 2015-04-29 Lunar Caravans Ltd Camper vehicle with inflatable mattress
US20140258880A1 (en) * 2013-03-07 2014-09-11 Nokia Corporation Method and apparatus for gesture-based interaction with devices and transferring of contents
KR101499101B1 (ko) * 2013-07-08 2015-03-06 체이시로보틱스(주) 차량의 자동주차 장치
US9340155B2 (en) 2013-09-17 2016-05-17 Toyota Motor Sales, U.S.A., Inc. Interactive vehicle window display system with user identification
US20170176207A1 (en) * 2015-12-17 2017-06-22 Jaguar Land Rover Limited In vehicle system and method for providing information regarding points of interest

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096956A (zh) * 2010-11-15 2011-06-15 王翔 汽车无钥匙远程控制系统及其数据处理方法
CN104412068A (zh) * 2012-07-06 2015-03-11 奥迪股份公司 用于运行机动车的方法和控制系统
CN104968532A (zh) * 2012-12-10 2015-10-07 伟创力汽车有限公司 基于图像识别和射频的车辆机电系统触发
US20140309885A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Control of Vehicle Features Based on Weather and Location Data
US20150291157A1 (en) * 2013-07-31 2015-10-15 Here Global B.V. Method and apparatus for causing an adjustment in parking position for vehicles
US20150077235A1 (en) * 2013-09-17 2015-03-19 Toyota Motor Engineering & Manufacturing North America, Inc. Interactive vehicle window display system with user identification and image recording
CN104008635A (zh) * 2014-04-18 2014-08-27 小米科技有限责任公司 设备控制方法及装置

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107685712A (zh) * 2017-07-31 2018-02-13 芜湖市振华戎科智能科技有限公司 电动汽车人车互联自动锁门系统
CN111936836A (zh) * 2018-02-14 2020-11-13 魁普有限公司 车辆安全系统及方法
CN110281887A (zh) * 2018-03-19 2019-09-27 丰田自动车株式会社 驻车辅助装置
CN110281887B (zh) * 2018-03-19 2022-03-08 丰田自动车株式会社 驻车辅助装置
US11173895B2 (en) 2018-03-19 2021-11-16 Toyota Jidosha Kabushiki Kaisha Parking support apparatus
CN110517687A (zh) * 2018-08-10 2019-11-29 重庆金康新能源汽车有限公司 使用机动交通工具外部的语音命令控制其功能的系统
CN109109857A (zh) * 2018-09-05 2019-01-01 深圳普思英察科技有限公司 一种无人驾驶售货车及其停车方法与装置
CN109785655A (zh) * 2018-12-11 2019-05-21 北京百度网讯科技有限公司 车辆控制方法、装置、设备、无人驾驶车辆及存储介质
CN111731293A (zh) * 2019-03-19 2020-10-02 本田技研工业株式会社 车辆控制系统、车辆控制方法及存储介质
CN110794819A (zh) * 2019-11-13 2020-02-14 深圳市路畅智能科技有限公司 一种手势按键融合的智能汽车无线驾驶控制系统
CN110816470A (zh) * 2019-11-18 2020-02-21 上海擎感智能科技有限公司 基于车载终端的用户授权添加方法、系统、介质及车载终端
CN110816470B (zh) * 2019-11-18 2022-03-08 上海擎感智能科技有限公司 基于车载终端的用户授权添加方法、系统、介质及车载终端
CN110871792A (zh) * 2019-12-20 2020-03-10 奇瑞汽车股份有限公司 一种自动泊车控制系统及方法
CN113119955A (zh) * 2020-08-31 2021-07-16 长城汽车股份有限公司 用于车辆的泊车方法和车辆
CN114013431A (zh) * 2022-01-06 2022-02-08 宁波均联智行科技股份有限公司 基于用户意向的自动泊车控制方法及系统
CN115158295A (zh) * 2022-06-29 2022-10-11 重庆长安汽车股份有限公司 车辆的泊车控制方法及装置
WO2024124387A1 (zh) * 2022-12-13 2024-06-20 华为技术有限公司 一种服务调用方法、通信装置、服务调用系统以及车辆
CN116279435A (zh) * 2023-05-17 2023-06-23 常州星宇车灯股份有限公司 一种新型停车辅助系统
CN116279435B (zh) * 2023-05-17 2023-08-25 常州星宇车灯股份有限公司 一种新型停车辅助系统

Also Published As

Publication number Publication date
RU2016150852A (ru) 2018-06-25
CN106960486B (zh) 2021-08-31
DE102016125280A1 (de) 2017-07-13
GB201700264D0 (en) 2017-02-22
GB2547980A (en) 2017-09-06
MX2017000356A (es) 2017-08-09
US20170197636A1 (en) 2017-07-13
US10166995B2 (en) 2019-01-01

Similar Documents

Publication Publication Date Title
CN106960486A (zh) 通过手势识别和语音命令进行功能特性激活的系统和方法
US9842447B2 (en) System and method for range-boosted key fob
CN107107869B (zh) 借助移动终端设备对车辆功能的远程控制
RU2729661C2 (ru) Системы и способы расширения области применения телефона в качестве ключа
CN105593080B (zh) 无源进入移动电话及其方法和系统
CN110517687A (zh) 使用机动交通工具外部的语音命令控制其功能的系统
US10434982B2 (en) System and method for on-demand passive entry disable
US9858735B2 (en) User proximity detection for activating vehicle convenience functions
US9542834B2 (en) Wireless trainable transceiver device with integrated interface and GPS modules
US20170120867A1 (en) System and method for triggered latch release
WO2016152061A1 (ja) ユーザ識別システム、車両用携帯機
CN113103992A (zh) 基于存在性的举升门操作
KR102459537B1 (ko) 차량의 도어 개방 장치 및 그 방법
US20220180679A1 (en) Vehicle control system
CN106184121A (zh) 无钥匙切换控制
CN108737090A (zh) 用于动态车辆密匙生成和处理的方法和设备
EP3536564B1 (en) In-vehicle system and getting-on-and-off authentication system
US11829133B2 (en) Distance based vehicle remote control systems and methods for using same
JP5129179B2 (ja) 電子キーシステムの施解錠機能停止装置
US20230219526A1 (en) Vehicle control system
US20230043228A1 (en) Vehicle control system
JP2005120787A (ja) 車載機器制御装置
KR20220096327A (ko) 원격 주차 제어 공유 방법 및 원격 주차 제어 공유 시스템
WO2023168512A1 (en) Multiuser authenticating system and method for keyless entry and starting a vehicle
CN117831159A (zh) 一种解锁方法及车辆

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210831