CN1499344A - 手势开关装置 - Google Patents

手势开关装置 Download PDF

Info

Publication number
CN1499344A
CN1499344A CNA200310102916XA CN200310102916A CN1499344A CN 1499344 A CN1499344 A CN 1499344A CN A200310102916X A CNA200310102916X A CN A200310102916XA CN 200310102916 A CN200310102916 A CN 200310102916A CN 1499344 A CN1499344 A CN 1499344A
Authority
CN
China
Prior art keywords
hand
shape
controlling object
gesture
displacement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA200310102916XA
Other languages
English (en)
Other versions
CN1253776C (zh
Inventor
ɽ��һ��
山本惠一
佐藤广充
斋藤英雄
小泽慎治
Ҳ
五十岚弘也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MITSUBISHI FOSON COACH (PASSENGER) CO Ltd
Keio University
Original Assignee
MITSUBISHI FOSON COACH (PASSENGER) CO Ltd
Keio University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2002311290A external-priority patent/JP3742951B2/ja
Priority claimed from JP2002311289A external-priority patent/JP2004142656A/ja
Application filed by MITSUBISHI FOSON COACH (PASSENGER) CO Ltd, Keio University filed Critical MITSUBISHI FOSON COACH (PASSENGER) CO Ltd
Publication of CN1499344A publication Critical patent/CN1499344A/zh
Application granted granted Critical
Publication of CN1253776C publication Critical patent/CN1253776C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种手势开关装置，从放置于摄像区域内的手的图像中识别手形，并检测该手的移动，根据识别的手的形状及/或手的移动从多个控制对象从选择1个，根据该选择的控制对象，对手的移动确定的操作信息的检测形态进行变更。移动距离检测形态中，对摄像区域内的手的移动距离进行检测，以此作为操作信息，停止时间检测形态中，对摄像区域内的移动了规定距离以上的手的停止位置的停止时间进行检测并以此作为操作信息。摄像区域，比如设定在方向盘侧方且驾驶员在维持其驾驶姿势的状态下能伸展手臂的区域。采用本发明，能对车辆的驾驶员等操作者不施加额外负担、就能借助手势开关装置而将操作信息输入给控制对象。

Description

手势开关装置
技术领域
本发明涉及用于将操作员对控制对象的操作信息进行输入的手势开关装置，尤其是涉及适用于驾驶员不用触摸该车辆搭载设备的操作面板、或不妨碍车辆驾驶就能简单地对空调设备和音响设备等车辆搭载设备的动作进行操作的手势开关装置。
背景技术
作为不用触摸该车辆搭载设备的操作面板就能对空调设备和音响设备等车辆搭载设备的动作进行操作的技术，已有利用照摄像机对驾驶员的身体的一部分(比如左手)进行摄像，对其画像图形进行辨认得到对上述车辆搭载设备的操作信息方面的提案(比如日本专利特开平11-134090号公报)。
另外，也有对驾驶员的表示为手指形状和移动的手势进行检测以得到对车辆搭载设备的操作信息的提案(比如日本专利特开2001-216069号公报)。
这里，从对诸如手掌、手、手指等摄像得到的图像中对其形状进行辨认的图案识别处理、通过跟踪识别到的手掌、手、手指等的位置变化来检测其移动的移动检测处理等来实现上述目的的装置称为手势开关装置。以下如无特别说明，将手掌、手、手指等简单地统称为手来说明。
但是，在车辆中搭载有上述音响设备和空调设备等各种辅助设备，而且各辅助设备的调节功能多种多样。比如搭载在车辆上的音响设备中有广播、磁带播放器、CD播放器等，其调节功能有音量、频道选择、播放、停止等功能。另外，对于空调设备也有温度、风量、风向等的调节功能。
但是，在上述两个传统例子中，都是以1个手形作为1个控制对象，操作量也是以某个手形来确定的，故驾驶员需要记忆极多的手形，有可能对驾驶带来障碍。
另一方面，从手势开关装置可输入的开关操作信息，一般来说仅是唯一地给予与手形的不同和手的移动方法等对应的信息，也存在着难以将各种控制对象分别合理地进行调节的问题。
即，在各种控制对象中，有像广播的频道选择或风量调节那样最好连续、或阶梯式进行大调节(变更)，或温度和音量等那样最好连续进行微调节。
因此，作为可从手势开关装置输入的开关操作信息，最好能比如根据驾驶员的喜好和控制对象进行变更，以提高其操作性。
而且，利用此类手势开关装置对车辆搭载设备的动作进行操作的场合，对借助手势开关装置来输入操作信息的驾驶员不带来妨碍驾驶操作的额外负担也是非常重要的。当然，根据控制对象的车辆搭载设备，最好能简单且合适地将该操作信息进行输入。
本发明内容
有鉴于此，本发明的目的在于，提供一种手势开关装置，能使驾驶员等操作人员借助手势开关装置，将用来对各种车辆搭载设备等的控制对象的动作进行控制的操作信息简单而合适地输入到控制对象，尤其是该手势开关装置具有适用于将对应于控制对象的合适的操作信息进行输入的良好的操作性。
而且，本发明的目的在于，提供一种手势开关装置，能对车辆的驾驶员等操作者不施加额外负担、就能借助手势开关装置而将操作信息输入给控制对象。
采用本发明，能提供一种具有对放置在规定摄像区域内的手进行摄像的摄像装置、从该摄像得到的图像中对手的形状进行识别并检测该手的移动，从而得到对控制对象的操作信息的手势开关装置。
本发明的一种实施例的手势开关装置，其特征在于，具有根据识别到的手的形状及/或手的移动而从多个控制对象中选择1个的控制对象设定装置、根据该选择的控制对象而对由所述手的移动带来的操作信息的检测形态进行变更的检测形态变更装置。
控制对象设定装置，也可是每当检测预先设定好的手的移动图案、从多个控制对象中循环地选择1个的装置。另外，检测形态变更装置也可包括：对摄像区域内的手的移动距离进行检测而作为操作信息的移动距离检测形态；对在摄像区域内移动了规定距离以上的手的停止位置的停止时间进行检测而作为操作信息的停止时间检测形态；对移动距离检测形态及停止时间检测形态中的至少1种进行设定的检测形态设定装置。移动距离检测形态，最好是将手的移动距离的检测，以规定移动距离为检测单位多步地进行。
采用上述手势开关装置，可根据控制对象和操作员比如驾驶员的喜好和习惯，能合适地设定给予各种控制对象的操作信息的检测形态。因此，操作员负担少，简单地进行操作就能对控制对象诸如各种车辆搭载设备的调节对象进行有效的操作等，在实用上起到极大的效果。尤其是可根据控制对象变更操作信息的检测形态，故即使是希望将较大的操作量分步地赋予的场合，相反地连续给予较小的操作量来调节的场合，也可获得根据控制对象而适当地给予操作信息等的效果。
采用本发明的其他实施例，也可提供车辆用手势开关装置，该装置特征在于，将摄像区域作成在车辆的方向盘侧方且操作该方向盘的驾驶员在维持其驾驶姿势的状态下伸展手臂就能涉及的区域。
摄像区域，可以设定在离开方向盘的外周部至少50mm的位置，并可设定在具有在驾驶员伸展的手的手指方向上大致600mm、手的宽度方向上大致350mm大小的呈长方形的区域内。另外，摄像区域内的手的移动的检测，也可将从图像中求得的手的重心位置朝手指方向的10～70mm的位移作为控制对象选择及/或控制对象的操作量进行检测。
采用上述车辆用手势开关装置，可不受驾驶员的驾驶操作所产生的手和手臂的移动，而能确切地检测手的形状及其移动带来的操作指示。而且，根据该检测结果，可获得对规定的车辆搭载设备能合适地赋予操作信息等在实用上极大的效果。尤其是，能可靠地对将胳膊放在扶手上的驾驶员在假想操作时获得实际感觉的手的移动进行检测，从而具有减轻驾驶员的操作负担等的效果。
本发明的又一实施例的车辆用手势开关装置，其特征在于，将摄像装置设置在如下的位置：对操作该方向盘的驾驶员在维持其驾驶姿势的状态下能伸展手臂的区域进行摄像的位置。摄像装置可设置在车辆的顶部。
采用上述的车辆用手势开关装置，驾驶员可以没有负担地向上述车辆用手势开关装置中的控制对象输入操作信息。
本发明的又一实施例的手势开关装置，其特征在于，具有通过重复预先设定的手的移动图形、从多个控制对象中循环地选择1个的控制对象选择装置、根据所述手的移动而将该选择的控制对象的操作量进行变更的操作量变更装置。
手势开关装置也可以具有当检测出识别到的手形是预先设定的第1手形时、对该装置的动作开始予以识别的操作开始识别装置，控制对象选择装置，在同动作开始识别后，手的移动-其识别到的手形形成预先设定的第2手形-以此选择控制对象。操作开始识别装置也可以具有：对形成第1手形的手没有把持或没有触摸特定的东西进行识别、并决定手势开关装置的动作开始的确认装置。第1手形，可以是持有东西时的形状，第2手形可以是用食指指东西时的形状。另外，手势开关装置可以具有：在控制对象选择后，识别的手形形成预先设定的第3手形，当检测到摄像区域内的手的检测位置在规定时间没有位移时，促进操作量变更装置起动的起动促进装置。
采用上述手势开关装置，驾驶员等操作员，比如通过重复与用食指按压按钮开关的按压操作相对应的手的移动图形而可循环地对控制对象进行选择，另外，比如通过用第1手形进行与用手移动变速杆的操作相对应的手的移动，而可改变变速杆的操作量。这一点，在上述日本专利特开平11-134090号公报及特开2001-216069号公报中记载的技术中，用1个手指形状决定1个控制对象，对操作量的确定也是由手指形状对应分配的，因此，驾驶员需要记忆大量的手指形状，有妨碍驾驶之虞。
附图的简单说明
图1是表示本发明的实施例的手势开关装置的概要结构的示图。
图2是表示图1所示的手势开关装置的手指的摄像区域的示图。
图3是表示手势开关装置的开关操作信息的指示输入动作的概要顺序的示图。
图4A是表示用于将开关操作指示赋予手势开关装置的手指形状的例子的图。
图4B是表示手指形状的其他例子的图。
图4C是表示手指形状的又一例子的图。
图5是表示伴随手指的按压操作的控制对象的选择例子的图。
图6是表示与控制对象对应的输入模式的设定画面的例子的图。
图7是表示手势开关装置的开关操作信息输入用的大致处理顺序的一部分的流程图。
图8是表示接在图7所示的处理顺序后面的处理顺序的流程图。
图9是表示距离模式中的开关操作信息的检测顺序的流程图。
图10是表示时间模式中的开关操作信息的检测顺序的流程图。
图11是表示距离·时间模式中的开关操作信息的检测顺序的流程图。
图12A是表示带有实感地进行按压按钮开关的假想的开关操作频度与手指移动量的关系的图。
图12B是表示带有实感地进行杠杆开关的假想的开关操作频度与手指移动量的关系的图。
图12C是表示带有实感地进行假想的开关操作停止频度与停止时间的关系的图。
具体实施方式
以下参照附图对本发明的实施例的手势开关装置进行说明。以下如无特别说明，则将手掌、手、手指等统称为手进行说明。
图1是表示实施例装置的主要部分的概要结构的示图，表示卡车的驾驶座的样子及通过微机(ECU)等实现的装置的功能。在驾驶座设有驾驶员操纵的方向盘1和组合开关(未图示)等，另外，在其控制盘上设有成为控制对象的音响设备和空调设备等的操作部2。在如此驾驶座上方的车顶上设有摄像机3，该摄像机3将方向盘1的侧方作为摄像区域，对将手臂朝该摄像区域伸展的驾驶员的手指进行摄像。该摄像机3由CCD摄像机等的小型摄像机构成。
上述摄像机3的摄像区域3a如图2所示，设定在方向盘1的侧方、离方向盘1的外周部至少50mm的位置，最好是离开100mm左右的位置。另外，该摄像区域3a，设定为具有将手臂向方向盘1的侧方伸展的驾驶员手的手指方向上大致600mm、手的宽度方向上大致350mm大小的呈长方形的区域。
如此设定后的摄像区域3a，是对把握在方向盘1上或对设置在方向盘1的立柱轴上的组合开关(未图示)进行操作的驾驶员的手不进行摄像的区域，而且设定为驾驶员不需很大地移动手臂就能移动手指的区域。尤其是驾驶员保持将手臂放置在设置于驾驶座侧部的扶手5上，不用改变其驾驶姿势手臂就能伸展胳膊的位置，是手无法触摸音响设备等的操作部2的位置。
由此，可防止将伴随驾驶操作的手的移动误作为开关操作信息进行检测。另外，也可设定成不会对直接操作音响设备等的操作部2的手进行检测。
在如此设定的摄像区域3a配置或邻接有操作变速机的齿轮变速手柄(未图示)的场合，比如可事先在齿轮变速手柄上设置感压传感器，借助该感压传感器来检测驾驶员对齿轮变速手柄的把持。只要事先考虑周到，就能很容易地辨别延伸到摄像区域3a内的手是操作齿轮变速手柄还是操作手势开关装置的状态，能可靠地防止将驾驶操作误当作开关操作信息进行检测。另外，也可利用立体摄像机作为摄像机3检测手的高度位置(与摄像机3的距离)，由此可辨别延伸至摄像区域3a内的手是操作齿轮变速手柄还是位于齿轮变速手柄的上方空间。
但是，如上所述的摄像区域3a，设定成驾驶员不必较大地移动手臂、而可使手指移动的区域，而且将假想操作开关时驾驶员能实感到的手指的移动(位移)为基准进行设定。即，对组装在音响设备等内的各种开关进行实际的按压操作的场合，作为其反作用力能实际感觉到开关操作。但是，在规定的空间内进行假想的开关操作的场合，没有伴随手的移动的反作用力，故无法直接感受到开关操作，反而是感觉到进行开关操作的自己的手指和手臂的移动。
为此，本发明者等，在假想1次次按压操作按钮开关时，另外多步地移动操作变速机的齿轮变速手柄时等，要进行多大程度的移动才能感觉到进行了开关操作作了实验。
另外，假想开关操作后使该手停止的动作，手要停止多长时间才能感觉到该操作已结束作了实验。
该实验是以具有大型汽车执照的多位具有驾驶经验的人员为对象而重复进行上述操作的，对其位移量和停止时间分别进行了实测。
图12A～图12C分别表示其实验结果。具体地说，图12A是将1次次按压操作按钮开关时手的移动量(位移量)为参数，对其操作频度进行了图示。其结果确认到，对于1次次按压操作按钮开关时手的移动量(位移量)，尽管有30～70mm的误差，但50mm的位移作为开关操作能感觉到的频度最高，平均为45mm。
另外，在将齿轮变速手柄分级前后进行变速操作的场合，如图12B所示，作为1级的操作有实感地进行移动的手的移动量(位移量)为10～40mm，30mm的位移作为1级的操作能感觉到的频度最高，另外，平均为23mm。而且，将手位移规定量后，将其移动停止，在完成1个动作的场合，作为其停止时间，如图12C所示，320m秒的频度最高。不过，该停止时间的测量是以80m秒为单位进行的。
从这些实验结果可以确认，驾驶员保持将其手臂搁在扶手上以自然的状态进行假想的开关操作的场合，操作开关时能有实感的(节度感)手的移动量(位移量)，在1次开关按压操作的场合为50mm左右，而在分级操作齿轮变速手柄的场合，每1级的位移量为30mm左右。在带有停止动作的场合，可确认为该动作停止期间是300米秒左右。
上述摄像机3的摄像区域3a的位置及其大小是，根据上述实验结果，比如后述那样设想对多步的开关操作(换档操作)前后方向分成5级进行，另外，考虑到驾驶员的体形和驾驶姿势等，延伸至方向盘1的侧方的手指的基准位置会发生变化来确定的。另外，考虑到手的大小一般从手腕至指尖的长度为200mm左右，手的宽度为120mm左右，因此定为上述那样的比如长为600mm、宽为350mm的大致矩形区域。
采用如此设定的摄像区域3a，不对随着驾驶操作产生的手的移动进行检测，在离开方向盘1的手无不舒服感且自然移动的状态下，能对该手进行可靠的摄像。而且，即使随着开关操作使手指的位置发生移动，其移动能在上述摄像区域3a内可靠地进行捕捉，利用比较简易的图像处理能容易地进行手的形状识别和其移动量的检测。
另外，从驾驶员的角度来看，不必改变其驾驶姿势，只要将手臂伸展至方向盘1的侧方即可，不必直接触摸音响设备等的操作部2，事先将设定了的手形做成样板，只要将手移动就可进行所需的开关操作。
因此，可减轻驾驶员的操作负担。另外，具有不会将伴随驾驶操作产生的手和手臂的移动作为开关操作指示进行检测，不必意识手势开关装置而可集中于驾驶操作，具有只要根据需要而将手移动至摄像区域3a内、就可方便地给予开关操作指示等的优点。
手势开关装置，基本上将由上述摄像机3摄像得到的驾驶员的手形和移动用微机(ECU)进行识别处理，根据其识别结果得到对控制对象的音响设备和空调设备的操作信息(开关操作信息)。而且，由该开关操作信息代替上述操作部2的操作，对这些音响设备和空调设备等进行操作。
具体来说，手势开关装置主要如图1所示，由摄像装置的摄像机3、从该摄像机3摄像得到的图像获得开关操作信息的微机(ECU)等构成。
ECU包括：双值化处理部11，其从摄像机3向微机(ECU)输入的输入图像(以下简称为输入图像)最终进行双值化处理，去除其背景图像成分，仅将手的图像抽出；从由双值化处理抽出的图像中识别手形的形状识别部12；从识别的手的形状求出其重心位置的重心检测部13；根据上述形状识别部12得到的识别结果、及重心检测部13检测到的手的重心位置，对驾驶员的手的形状和其移动所表示的开关操作信息进行识别的操作指示识别部14。
该操作指示识别部14，大致包括：边参照事先记录在存储器15内的手的形状图案边对该手的形状进行判断·识别的形状判断部16；跟踪手的重心位置的移动，对手的位移进行检测的位移量检测部17；对手的移动进行随时间的监视的定时器18。在重心位置检测及手的时间经过监视时，最好使用手掌部分。
操作指示识别部14，根据这些判断·监视结果，求出由驾驶员的手形和其移动所特定的规定的开关操作信息，将该开关操作信息向上述音响设备和空调设备等输出。
操作指示识别部14的形状判断部16，设有根据上述判断结果等向驾驶员进行规定的语音提示的引导部19。该语音提示比如对音响设备和空调设备(控制对象设备)、还有对音量·频道设定、风量·温度等(控制对象功能)进行特定的语音信息、和表示该开关操作的“吡”和“吡-”等的确认音通过喇叭20向驾驶员进行告知。
上述结构的手势开关装置中，其发明的特征之一是，如图3的开关操作动作的流程所示，根据选择了的控制对象，而将给予该控制对象的开关操作信息的输入模式有选择地进行切换这一点上。尤其是，作为开关操作信息的输入模式，这里准备了“距离模式”、“时间模式”、“距离·时间模式”3种，可根据控制对象(车辆搭载设备)进行选择。
下面对该开关操作进行说明。
该手势开关装置中，使用作为指定开关操作的手形、比如图4A～图4C所示的手指图形。具体地说，使用如图4A所示的握拳形状的图形(手形1)、图4B所示的竖起食指的食指指示形状的图形(手形2)、图4C所示的竖起大拇指的图案(手形3)。
食指指示形状的图形(手形2)是表示按压操作按钮那样开关的含义。另外，握拳形状的图形(手形1)是表示将手把持在对自动变速机的变速级进行切换的换档手柄那样的杆状开关上、进行前后换档操作的含义。而竖起大拇指的图案(手形3)是表示待机指示的含义。如此的手形图案，表示其形状特征的数据记录在上述存储器15内。通过对从输入图像中识别的手形与记录在上述存储器15内的图案的一致度(类似度)进行计算，能用于对手形的判断。
在驾驶员手握方向盘1操纵车辆的场合，图3的动作状态A1所示的驾驶员的手离开了摄像区域3a。此时的输入图像作为车室内的背景，仅是被排除处理的图像成分，故手势开关装置不会进行动作。对此，一旦驾驶员的手离开方向盘1进入动作状态A2所示的摄像区域3a内，则开始对手进行识别处理。在此场合，比如最好通过将手做成握拳形状(手形1)，指示开始开关操作信息的输入。
然后，对手的形状是否变换为按压操作开关的食指指示形状的图案(手形2)进行判断。当检测出食指指示形状的图案(手形2)的场合，如动作状态A3所示，重复按压操作(按压)选择开关，选择指定规定的功能·设备，进行其移动的检测。具体来说，对食指指示形状的手指的前后移动通过对其手掌的重心位置的变化(移动)进行检测，从而检测出其按压操作。
在此场合，每检测出1次按压动作，比如如图5所示那样，事先将其控制法进行设定，以将其控制对象作为“音量”、“频道(ch)”、“温度”、“风量”等循环地进行选择指定。
尤其是此时，每当检测出1次按压动作，就输出“吡”等的操作确认声、或用语音信息告知所选择的控制对象也是有用的。通过这样的语音提示，驾驶员不必用眼确认其操作状态就能明白，故可专心于驾驶操作。
选择所需的控制对象时，变更为与刚才不同的图形，比如动作状态A4所示的竖起大拇指的图案(手形3)，对指示功能选择操作的结束和开关操作量的输入开始进行指示。在此场合，其确认音最好能发出与上述的确认音不同的“吡-”等的声音。
然后，变更为动作状态A5所示的手握拳形状(手形1)，通过该手形1的前后移动，进行输入开关操作信息。此时，通过该手掌的重心位置的位移量等对该手形1的移动进行检测，并输出与该移动对应的开关操作信息。
具体地说，在该开关操作信息的输入中，根据由上述按压操作选择指定的控制对象，对应该检测的信息内容进行更改。
即，控制对象，有的需要将其控制量(开关操作信息)用大的变化量进行多步变更，有的需要用小的变化量进行连续细小地变更。
因此，根据所选择的控制对象，对比如将手的移动量作为开关操作信息的距离模式(动作状态A6a)、从位移了规定距离的手的停止时间求出其开关操作信息的时间模式(动作状态A6b)、另外将这些模式并用的距离·时间模式(动作状态A6c)进行选择性的设定。
这里，上述距离模式，是根据手掌距基准位置的移动量分级式地将开关操作信息进行输出的模式，适用于广播的频道选择和空调设备的风量·风向的选择设定的场合。
另外，时间模式，是将与从基准位置进行位移后的手的停止时间对应的开关操作信息进行输出的模式，适用于音响设备的音量和空调设备的温度等的调节的场合等。
而上述距离·时间模式，是当手的微小的移动时输出与其移动量对应的开关操作信息，而当至停止位置移动了规定距离以上的场合，输出与其停止位置处的手的停止时间相对应的开关操作信息的模式。
该距离·时间模式适合于对控制对象进行粗调节、微调节的场合等。
上述操作指示识别部14，如上所述，根据由控制对象选择性地设定的输入模式(距离模式/时间模式/距离·时间模式)，跟踪手掌在上述摄像区域3a内的移动，对手掌的移动量(位移量及其位移方向)和移动停止后的手掌的停止时间进行测量。然后将与这些测量结果对应的开关操作信息输出。
而且，对各种开关控制对象与上述各模式的对应关系、作为开关操作量检测出的内容(检测距离和时间)等也可事先固定地进行设定。但是，这些对应关系、检测距离、时间等，使用具有上述操作指示识别部14的比如图6所示的控制画面14a，也可事先按开关操作者(驾驶员)的喜好等进行合适地变更。
具体地说，对于多个控制对象，也可选择性地指定用何种输入模式将开关操作信息进行输入，并事先将成为其检测单位的手掌的位移量(移动距离)和测量时间等可分别作可变的设定。
(流程图)
①初期判断
图7～图11是表示实现上述处理功能的操作指示识别部14的概要的处理顺序。
现对该处理顺序进行说明。随着手势开关装置的起动，首先进行包括由摄像机3对摄像区域(识别区域)的设定和双值化处理中阈值的设定等在内的系统的初期设定(步骤S1)。
然后，清除用于计测手形的识别和手的移动的参数值等，并将控制图设定为“0”，对开关信息检测实行初始化(步骤S2)。
进行了以上初始化处理后，对输入图像中的手形进行识别(步骤S3)。
判断该手形是上述(手形1)、(手形2)、(手形3)中的哪一种(步骤S4)。
当手形是食指指示形的(手形2)的场合，判断上一次检测出的手形是哪一种(步骤S5)。
若上次的手形不是食指指示形(手形2)，则这次检测到的(手形2)的功能选择的模式被设定，将此时检测到的手掌的重心位置作为基准位置A进行记录(步骤S6)。
将表示上次检测到的手的位移量、且用于手的移动距离管理的参数B′设定为“0”(步骤S7)。
然后，将上次的手形更新为(手形2)(步骤S8)。
然后，重复执行自上述(步骤S3)开始的处理。
而在(步骤S5)中，在判断上次的手形为食指指示形的(手形2)的场合，接着求出此时检测到的手掌的重心位置相对于上述基准位置A的位移量B(步骤S9)。
然后判断是否满足参数B′不到阈值H1且这次检测到的位移量B超过了规定的判断阈值H1这样2个条件(步骤S10)。
当上述条件得到满足时，作为以(手形2)的状态进行了用于上述功能选择的按压操作，对控制对象进行1级变更(步骤S11)。
然后，将上次的手形更新为(手形2)，重复执行自(步骤S8)开始的步骤S3开始的处理。
而在(步骤S10)中，当没有满足上述位移量B不超过规定的判断阈值H1等条件时，将上述位移量B设作为上述的参数B′(步骤S12)。
然后，将上次的手形更新为(手形2)(步骤S8)。
然后重复执行自上述(步骤S3)开始的处理。
通过该(步骤S3)至(步骤S8)的处理，在仅以(手形2)的规定的移动量进行按压操作时，上述功能选择被执行，控制对象被选择性地设定。
另一方面，在上述(步骤S4)中，当检测出手形为(手形1)或(手形3)时，如以下图8所示，判断该手形是否是(手形1)或是(手形3)(步骤S13)。
如是(手形3)，则判断上述动作是指定待机状态，将此时检测到的手掌的重心位置作为基准位置C进行记录(步骤S14)。
同时将在后述的移动距离测量中使用的控制参数D′设定为“0”(步骤S15)。
然后，将上次的手形更新为(手形3)后(步骤S16)，重复执行自上述(步骤S3)开始的处理。
而当在(步骤S13)中，手形被判断为(手形1)时，接着判断上次检测得到的手形是哪一种(步骤S17)。
若上次的手形是(手形3)，则作为操作信息的输入模式已被设定，将控制图设定为“1”，并将移动距离的测量参数n和停止时间的测量参数t分别设定为“0”(步骤S18)。
另外，若上次的手形是握拳形的(手形1)，则通过判断控制图是否是“1”，来检查操作信息的输入模式是否已经设定(步骤S19)。
在控制图已是“1”的场合，检测此时检测到的手掌的重心位置与上述基准位置C之间的距离D(步骤S20)。
根据先前已功能选择的控制对象，判断上述3种输入模式中用哪种模式对开关操作信息进行检测(步骤S21)。
根据判断后的输入模式，进行开关操作信息的检测处理。
而在上次的手形不是(手形1)或(手形3)的场合(步骤S17)，或控制图不是“1”的场合(步骤S19)，重复执行从上述(步骤S2)所示的初期设定开始的处理顺序。
通过该处理，即可得到上述动作状态A2所示的开关操作信息的输入开始的指示。
②距离模式
对于利用距离模式的开关操作信息的检测处理，如图9所例示的那样，将上述离开基准位置C的距离D与控制参数D′的值进行比较，根据其大小关系判断手掌是前进还是后退(步骤S22)。
当使手掌前进移动时，判断从上次周期至这次周期为止的移动距离是否超过规定的测量单位距离。即，判断后述的条件1是否成立(步骤S23)。
超过规定的测量单位距离时，增加控制参数n(步骤S24)。
然后，将该设定(开关操作信息)增加1级(步骤S25)。
相反，在手后退的场合，判断从上次周期至这次周期为止的移动距离是否超过规定的测量单位距离。即，判断后述的条件2是否成立(步骤S26)。
移动距离超过规定的测量单位距离时，减少控制参数n(步骤S27)。
并且，将该设定(开关操作信息)减少1级(步骤S28)。
另外，只要距离D与距离C之差(移动量)超过通过控制参数n而可变设定的规定步数的移动距离，且控制参数D′的值与距离C的差(移动量)不到通过控制参数n而可变设定的规定步数的移动距离，则上述条件1成立。
即，条件1，是判断上次周期至这次周期为止、手是否移动了大于由规定步数所确定的规定的测量单位距离的条件。而条件2，是手的移动方向向相反方向(后退)的场合的同样的判断条件。
如上所述，若得到了与手的移动距离对应的开关操作信息，则将距离D作为上述控制参数D′进行记录，然后更新其判断基准(步骤S29)。
并将(手形1)作为上次的手形进行记录(步骤S30)。
然后，回归到从上述(步骤S3)开始的处理。
通过将该处理重复执行，即可多步地输出与手掌的移动量对应的开关操作信息。
③时间模式
另一方面，在设定了时间模式的场合，则按图10所示的顺序进行其检测处理。在此场合，首先判断移动距离D是否超过第3阈值H3(步骤S31)。
如没到第3阈值的场合，将时间参数t设定为“0”(步骤S32)。
并将(手形1)作为上次的手形进行记录(步骤S33)。
然后，回归到从上述(步骤S3)开始的处理。
而在(步骤S31)中，当判断移动距离D超过了第3阈值H3时，将时间参数t往上计数(步骤S34)。
并且判断往上计数后的时间参数t是否达到基准时间T1(步骤S35)。
当判断为时间参数t在T1以上时，将其设定(开关操作信息)增加1级(步骤S36)。
并将时间参数t复位至“0”。(步骤S37)。
并将(手形1)作为上次的手形进行记录(步骤S33)。
然后，回归到上述从(步骤S3)开始的处理。
而在(步骤S31)中，当判断移动距离D朝相反方向超过了第3阈值H3时，将时间参数t往上计数(步骤S38)。
并判断往上计数后的时间参数t是否达到基准时间T1(步骤S39)。
当判断为时间参数t在T1以上时，将其设定(开关操作信息)减少1级(步骤S40)。
并将时间参数t复位至“0”。(步骤S41)。
并将(手形1)作为上次的手形进行记录(步骤S33)。
然后，回归到上述从(步骤S3)开始的处理。
通过如此一系列的处理，在手掌移动规定的距离后停止时，输出与其停止时间对应的开关操作信息。
④距离·时间模式
距离·时间模式是将上述距离模式和时间模式的处理根据手的移动距离分开使用。
具体如图11所示，判断上述控制参数n的值(步骤S42)。
根据参数n是在“-2”至“2”的范围内，还是在“3”以上或不到“-3”，而可分别实行从(步骤S22a)至(步骤S33a)所示的距离模式、或(步骤S24a)至(步骤S41a)所示的时间模式的处理。
而(步骤S22a)至(步骤S33a)所示的处理，是与上述(步骤S22)至(步骤S33)所示的处理相当。另外，(步骤S24a)至(步骤S41a)所示的处理，是与上述(步骤S24)至(步骤S41)所示的处理相当。
具有上述功能的手势开关装置，能简单有效地选择作为控制对象的设备，有选择性地设定与该控制对象对应的输入模式，将开关操作信息进行输入。
因此，如控制对象像风量和风向那样，即使在最好边给予较大的位移量边进行设定的场合，或相反如音量和温度那样最好边给予小的位移量边进行微调节的场合，都能简单地输入与该控制对象对应的开关操作量。
尤其是只要事先将该输入模式根据控制对象进行设定，就能简单地将符合操作意图的合适的开关操作信息进行输入等，在实用上具有极大的效果。
而且，如上所述，只要构成可对检测单位距离和检测单位时间等作可变设定，就能进行与开关操作者(驾驶员)的体形和喜好、甚至习惯相对应的设定。
另外也可进行与控制对象的设备特性对应的设定。因此，可实现操作负担小、使用容易的手势开关装置。
具有上述结构的手势开关装置，可简单地、有效地、不受伴随驾驶操作的手的移动的影响地、可靠地对手的形状及其移动所表现的开关操作指示进行检测。而且可根据该检测结果，将开关操作信息合适地给予规定的车辆搭载设备。尤其是对指示开关操作的手进行摄像的区域(摄像区域3a)，是在方向盘1的侧方的位置，可设定为驾驶员不必改变其驾驶姿势，自然地伸展手臂就能到达的范围，故不会对驾驶员增加操作负担。因此，在维持对音响设备等的操作部2直接进行操作的感觉的同时，可容易借助手势开关装置而指示输入开关操作信息等，在实用上具有极大的效果。
而且，本发明并不局限于上述实施例。实施例中是以右方向盘车为前提进行了说明，当然对左方向盘车的场合也同样适用。另外，并不局限于卡车等大型车，同样也适用于普通的轿车等。
对于其控制对象，当然也可扩展至导向装置的操作、刮水器的开·关和其动作间隔的调节、侧镜的开闭等。
另外，对于摄像区域A的大小，比如利用摄像机3的变焦距功能，也可事先做成能进行可变设定，另外，对于摄像区域A的位置，也可考虑驾驶员的习惯等做成可微调。在此场合，只要使摄像机3的安装角度可以调节。
此外，对于开关操作信息的输入模式，并不特定于上述3种模式，比如也可设置将手的形状本身作为开关操作信息进行读取的模式。另外，这里将其控制对象作为“音量”、“频道”、“温度”、“风量”直接进行选择，但也可将控制对象设备特定为“广播”、“磁带”、“CD”、“空调”等，在此基础上再特定“音量”、“频道”、“温度”、“播放”、“停止”等的控制对象，和特定“风量”、“风向”、“温度”等的控制对象。
在此场合，也只要根据最终特定的控制对象，将开关操作信息的检测形态进行变更设定即可。
另外，只要在本发明的宗旨范围内，可进行各种变形。

Claims (14)

1.一种手势开关装置，具有对放置在规定摄像区域内的手进行摄像的摄像装置，从其摄像得到的图像中对手的形状进行识别的同时检测该手的移动，从而得到对控制对象的操作信息，其特征在于，
该手势开关装置包括：
根据识别到的手的形状及/或手的移动而从多个控制对象中选择1个的控制对象设定装置；
根据该选择的控制对象而对由所述手的移动所带来的所述操作信息的检测形态进行变更的检测形态变更装置。
2.如权利要求1所述的手势开关装置，其特征在于，所述控制对象设定装置，是每次检测预先设定好的手的移动图案、从多个控制对象中循环地选择1个的装置。
3.如权利要求1所述的手势开关装置，其特征在于，
所述检测形态变更装置包括：
对所述摄像区域内的手的移动距离进行检测并作为所述操作信息的移动距离检测形态；
对所述摄像区域内移动了规定距离以上的手的停止位置的停止时间进行检测并作为所述操作信息的停止时间检测形态；
对所述移动距离检测形态及停止时间检测形态中的至少1种进行设定的检测形态设定装置。
4.如权利要求3所述的手势开关装置，其特征在于，所述移动距离检测形态，是将对手的移动距离的检测，以规定移动距离为检测单位多步地进行的形态。
5.一种车辆用手势开关装置，具有对放置在规定摄像区域内的手进行摄像的摄像装置，从其摄像得到的图像中对手的形状进行识别的同时检测该手的移动，从而得到对控制对象的操作信息，其特征在于，
将所述摄像区域设定在所述车辆的方向盘侧方、且操作该方向盘的驾驶员在维持其驾驶姿势的状态下能伸展手臂的区域。
6.如权利要求5所述的车辆用手势开关装置，其特征在于，所述摄像区域，设定在离开所述方向盘的外周部至少50mm的位置，并设定在具有驾驶员伸展的手的手指方向上大致600mm、手的宽度方向上大致350mm大小的大致呈长方形的区域。
7.如权利要求5所述的车辆用手势开关装置，其特征在于，对所述摄像区域内的手的移动的检测，是将从图像中求得的手的重心位置朝手指方向的10～70mm的位移作为控制对象选择及/或控制对象的操作量进行检测。
8.一种车辆用手势开关装置，具有对放置在规定摄像区域内的手进行摄像的摄像装置，从其摄像得到的图像中对手的形状进行识别的同时检测该手的移动，从而得到对控制对象的操作信息，其特征在于，
所述摄像装置，设置在能对驾驶所述车辆的方向盘的驾驶员在维持其驾驶姿势的状态下能伸展手臂的区域进行摄像的位置。
9.如权利要求8所述的车辆用手势开关装置，其特征在于，所述摄像装置设置在所述车辆的顶部。
10.一种手势开关装置，具有对放置在规定摄像区域内的手进行摄像的摄像装置，从其摄像得到的图像中对手的形状进行识别的同时检测该手的移动，从而得到对控制对象的操作信息，其特征在于，
该手势开关装置包括：
通过重复预先设定的手的移动图形，从多个控制对象中循环地选择1个的控制对象选择装置；
根据所述手的移动而将该选择后的控制对象的操作量进行变更的操作量变更装置。
11.如权利要求10所述的手势开关装置，其特征在于，
所述手势开关装置具有当检测出识别到的手形是预先设定的第1手形时、对该装置的动作开始进行识别的操作开始识别装置，
所述控制对象选择装置，在该动作开始识别后，手的移动-其识别到的手形为预先设定的第2手形-以此选择控制对象。
12.如权利要求11所述的手势开关装置，其特征在于，
所述操作开始识别装置具有对成为所述第1手形的手没有把持或接触特定的东西进行确认、并决定手势开关装置的动作开始的确认装置。
13.如权利要求11所述的手势开关装置，其特征在于，所述第1手形是把持东西时的形状，所述第2手形是用食指指东西时的形状。
14.如权利要求11所述的手势开关装置，其特征在于，
所述手势开关装置具有起动促进装置，其选择了控制对象后，识别的手形为预先设定的第3手形，当检测到所述摄像区域内的手的检测位置在规定时间没有位移时，催促所述操作量变更装置起动。
CNB200310102916XA 2002-10-25 2003-10-24 手势开关装置 Expired - Fee Related CN1253776C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2002311290 2002-10-25
JP2002311289 2002-10-25
JP2002311290A JP3742951B2 (ja) 2002-10-25 2002-10-25 ハンドパターンスイッチ装置
JP2002311289A JP2004142656A (ja) 2002-10-25 2002-10-25 ハンドパターンスイッチ装置

Publications (2)

Publication Number Publication Date
CN1499344A true CN1499344A (zh) 2004-05-26
CN1253776C CN1253776C (zh) 2006-04-26

Family

ID=32109507

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB200310102916XA Expired - Fee Related CN1253776C (zh) 2002-10-25 2003-10-24 手势开关装置

Country Status (4)

Country Link
US (1) US7289645B2 (zh)
KR (1) KR100575906B1 (zh)
CN (1) CN1253776C (zh)
DE (1) DE10349568A1 (zh)

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1315024C (zh) * 2005-03-11 2007-05-09 西北工业大学 一种视频识别输入系统的输入方法
CN100353380C (zh) * 2004-10-08 2007-12-05 富士通株式会社 生物认证系统登记方法、生物认证系统及其程序
CN102067067A (zh) * 2008-06-24 2011-05-18 韩国电子通信研究院 参考姿势数据的注册方法、移动终端的驱动方法及其移动终端
CN102103457A (zh) * 2009-12-18 2011-06-22 深圳富泰宏精密工业有限公司 简报操作系统及方法
CN102193632A (zh) * 2011-05-11 2011-09-21 苏州佳世达电通有限公司 电子装置及其手势操作方法
CN102915111A (zh) * 2012-04-06 2013-02-06 寇传阳 一种腕上手势操控系统和方法
CN102981604A (zh) * 2011-06-07 2013-03-20 索尼公司 图像处理设备、图像处理方法和程序
CN103809738A (zh) * 2012-11-13 2014-05-21 联想(北京)有限公司 一种信息采集方法及电子设备
CN103870802A (zh) * 2012-12-18 2014-06-18 现代自动车株式会社 使用指谷操作车辆内的用户界面的系统和方法
CN103906646A (zh) * 2011-09-03 2014-07-02 大众汽车有限公司 用于尤其在机动车内提供图形用户界面的方法和装置
CN104603720A (zh) * 2012-09-12 2015-05-06 大陆汽车有限责任公司 用于借助手势操作机动车组件的方法和装置
CN104627094A (zh) * 2013-11-08 2015-05-20 现代自动车株式会社 识别用户手势的车辆和用于控制该车辆的方法
CN104679404A (zh) * 2013-11-29 2015-06-03 现代摩比斯株式会社 车辆的集成多媒体装置
CN105799613A (zh) * 2014-09-25 2016-07-27 现代自动车株式会社 手势识别装置及其控制方法以及具有该装置的车辆
CN106030462A (zh) * 2014-02-17 2016-10-12 大众汽车有限公司 用户接口和用于从用户接口的第一操作模式变换成3d手势模式的方法
US9694764B2 (en) 2011-12-09 2017-07-04 Flextronics Automotive, Inc. Vehicle electromechanical systems triggering based on image recognition and radio frequency
US9704350B1 (en) 2013-03-14 2017-07-11 Harmonix Music Systems, Inc. Musical combat game
CN106945636A (zh) * 2017-04-11 2017-07-14 北京新能源汽车股份有限公司 一种车辆的控制装置、方法和汽车
CN104968532B (zh) * 2012-12-10 2017-10-27 伟创力汽车有限公司 基于图像识别和射频的车辆机电系统触发
CN107428253A (zh) * 2015-03-26 2017-12-01 法国大陆汽车公司 包括通过光的发射‑接收进行通信的装置的车辆方向盘组件
CN108536291A (zh) * 2018-03-29 2018-09-14 努比亚技术有限公司 一种应用操作方法、可穿戴设备及存储介质
CN108791119A (zh) * 2017-05-04 2018-11-13 奥迪股份公司 车辆控制系统及方法
CN109305169A (zh) * 2017-07-27 2019-02-05 大陆汽车有限公司 运行有手动变速器和自动离合器的机动车的方法和机动车
CN110520915A (zh) * 2017-04-24 2019-11-29 三菱电机株式会社 通知控制装置及通知控制方法
EP3868192A1 (de) * 2020-02-18 2021-08-25 CLAAS E-Systems GmbH Landwirtschaftliche arbeitsmaschine
TWI798001B (zh) * 2022-02-23 2023-04-01 神達數位股份有限公司 手勢控制行車紀錄器的方法及系統

Families Citing this family (149)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100575906B1 (ko) 2002-10-25 2006-05-02 미츠비시 후소 트럭 앤드 버스 코포레이션 핸드 패턴 스위치 장치
JP3752246B2 (ja) * 2003-08-11 2006-03-08 学校法人慶應義塾 ハンドパターンスイッチ装置
JP2005242694A (ja) 2004-02-26 2005-09-08 Mitsubishi Fuso Truck & Bus Corp ハンドパターンスイッチ装置
KR20060070280A (ko) * 2004-12-20 2006-06-23 한국전자통신연구원 손 제스처 인식을 이용한 사용자 인터페이스 장치 및 그방법
GB2423808B (en) * 2005-03-04 2010-02-17 Ford Global Tech Llc Motor vehicle control system for controlling one or more vehicle devices
JP4389855B2 (ja) * 2005-09-05 2009-12-24 トヨタ自動車株式会社 車両用操作装置
WO2007121977A2 (de) * 2006-04-22 2007-11-01 Ident Technology Ag Steuersystem für ein fahrzeugcockpit
JP5030580B2 (ja) 2006-12-27 2012-09-19 タカタ株式会社 車両用作動システム、車両
US8094189B2 (en) * 2007-01-30 2012-01-10 Toyota Jidosha Kabushiki Kaisha Operating device
TW200910147A (en) * 2007-08-24 2009-03-01 Univ Nat Chiao Tung Control apparatus and method
CN101482772B (zh) * 2008-01-07 2011-02-09 纬创资通股份有限公司 电子装置及其操作方法
US8933876B2 (en) 2010-12-13 2015-01-13 Apple Inc. Three dimensional user interface session control
US9035876B2 (en) 2008-01-14 2015-05-19 Apple Inc. Three-dimensional user interface session control
US20110102570A1 (en) * 2008-04-14 2011-05-05 Saar Wilf Vision based pointing device emulation
KR101503017B1 (ko) * 2008-04-23 2015-03-19 엠텍비젼 주식회사 모션 검출 방법 및 장치
KR100977443B1 (ko) * 2008-10-01 2010-08-24 숭실대학교산학협력단 제스쳐 기반의 가전기기 제어장치 및 방법
US20100295782A1 (en) 2009-05-21 2010-11-25 Yehuda Binder System and method for control based on face ore hand gesture detection
US9417700B2 (en) 2009-05-21 2016-08-16 Edge3 Technologies Gesture recognition systems and related methods
EP2273353A1 (en) 2009-07-07 2011-01-12 Ford Global Technologies Inc. Improved human machine interface
JP5648207B2 (ja) * 2009-09-04 2015-01-07 現代自動車株式会社 車両用操作装置
US20110063425A1 (en) * 2009-09-15 2011-03-17 Delphi Technologies, Inc. Vehicle Operator Control Input Assistance
WO2011062477A1 (en) * 2009-11-18 2011-05-26 Elmiro Business Development B.V. Control system and method for controlling a plurality of computer devices
DE102009058145A1 (de) * 2009-12-12 2011-06-16 Volkswagen Ag Bedienverfahren für eine Anzeigevorrichtung eines Fahrzeugs
JP5005758B2 (ja) * 2009-12-25 2012-08-22 株式会社ホンダアクセス 自動車における車載機器の操作装置
DE102010018105B4 (de) * 2010-04-24 2021-06-24 Volkswagen Ag Fahrzeugcockpit mit einer Bedieneinrichtung zum Erfassen von Nutzereingaben und Verfahren zum Betreiben einer solchen
US20110268365A1 (en) * 2010-04-30 2011-11-03 Acer Incorporated 3d hand posture recognition system and vision based hand posture recognition method thereof
US8396252B2 (en) * 2010-05-20 2013-03-12 Edge 3 Technologies Systems and related methods for three dimensional gesture recognition in vehicles
US8456329B1 (en) 2010-06-03 2013-06-04 The United States Of America As Represented By The Secretary Of The Navy Wand controller for aircraft marshaling
US8582866B2 (en) 2011-02-10 2013-11-12 Edge 3 Technologies, Inc. Method and apparatus for disparity computation in stereo images
US8655093B2 (en) 2010-09-02 2014-02-18 Edge 3 Technologies, Inc. Method and apparatus for performing segmentation of an image
WO2012030872A1 (en) 2010-09-02 2012-03-08 Edge3 Technologies Inc. Method and apparatus for confusion learning
US8666144B2 (en) 2010-09-02 2014-03-04 Edge 3 Technologies, Inc. Method and apparatus for determining disparity of texture
US8730157B2 (en) * 2010-11-15 2014-05-20 Hewlett-Packard Development Company, L.P. Hand pose recognition
US8872762B2 (en) 2010-12-08 2014-10-28 Primesense Ltd. Three dimensional user interface cursor control
US9171264B2 (en) 2010-12-15 2015-10-27 Microsoft Technology Licensing, Llc Parallel processing machine learning decision tree training
US8488888B2 (en) 2010-12-28 2013-07-16 Microsoft Corporation Classification of posture states
US8970589B2 (en) 2011-02-10 2015-03-03 Edge 3 Technologies, Inc. Near-touch interaction with a stereo camera grid structured tessellations
US10671841B2 (en) 2011-05-02 2020-06-02 Microsoft Technology Licensing, Llc Attribute state classification
US8881051B2 (en) 2011-07-05 2014-11-04 Primesense Ltd Zoom-based gesture user interface
US9459758B2 (en) 2011-07-05 2016-10-04 Apple Inc. Gesture-based interface with enhanced features
US9377865B2 (en) 2011-07-05 2016-06-28 Apple Inc. Zoom-based gesture user interface
US8886407B2 (en) * 2011-07-22 2014-11-11 American Megatrends, Inc. Steering wheel input device having gesture recognition and angle compensation capabilities
US9292112B2 (en) * 2011-07-28 2016-03-22 Hewlett-Packard Development Company, L.P. Multimodal interface
US9030498B2 (en) 2011-08-15 2015-05-12 Apple Inc. Combining explicit select gestures and timeclick in a non-tactile three dimensional user interface
US9218063B2 (en) * 2011-08-24 2015-12-22 Apple Inc. Sessionless pointing user interface
DE102011054848B4 (de) 2011-10-27 2014-06-26 Deutsches Zentrum für Luft- und Raumfahrt e.V. Steuer- und Überwachungseinrichtung für Fahrzeuge
US9672609B1 (en) 2011-11-11 2017-06-06 Edge 3 Technologies, Inc. Method and apparatus for improved depth-map estimation
DE112012004781T5 (de) * 2011-11-16 2014-08-07 Flextronics Ap, Llc Versicherungsverfolgung
US20130201316A1 (en) 2012-01-09 2013-08-08 May Patents Ltd. System and method for server based control
WO2013104376A1 (de) * 2012-01-09 2013-07-18 Audi Ag Verfahren zum verschieben von mindestens einem anzeigeinhalt
US9229534B2 (en) 2012-02-28 2016-01-05 Apple Inc. Asymmetric mapping for tactile and non-tactile user interfaces
US20140309873A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Positional based movements and accessibility of features associated with a vehicle
US8938124B2 (en) 2012-05-10 2015-01-20 Pointgrab Ltd. Computer vision based tracking of a hand
DE102012018685B4 (de) * 2012-05-22 2017-08-03 Audi Ag System und Verfahren zur Steuerung von zumindest einem Fahrzeugsystem mittels von einem Fahrer durchgeführter Gesten
US9092394B2 (en) * 2012-06-15 2015-07-28 Honda Motor Co., Ltd. Depth based context identification
DE102012020607B4 (de) * 2012-10-19 2015-06-11 Audi Ag Kraftwagen mit einer Gestensteuerungseinrichtung sowie Verfahren zum Steuern eines Auswahlelements
DE102012021220A1 (de) * 2012-10-27 2014-04-30 Volkswagen Aktiengesellschaft Bedienanordnung für ein Kraftfahrzeug
JP6202810B2 (ja) * 2012-12-04 2017-09-27 アルパイン株式会社 ジェスチャ認識装置および方法ならびにプログラム
KR101490908B1 (ko) * 2012-12-05 2015-02-06 현대자동차 주식회사 차량 내 손모양 궤적 인식을 이용한 사용자 인터페이스 조작 시스템 및 방법
JP6030430B2 (ja) * 2012-12-14 2016-11-24 クラリオン株式会社 制御装置、車両及び携帯端末
DE102013000068A1 (de) * 2013-01-08 2014-07-10 Audi Ag Verfahren zum Synchronisieren von Anzeigeeinrichtungen eines Kraftfahrzeugs
DE102013001330A1 (de) * 2013-01-26 2014-07-31 Audi Ag Verfahren zum Betreiben einer Lüftereinrichtung eines Kraftwagens sowie Kraftwagen
US9477315B2 (en) 2013-03-13 2016-10-25 Honda Motor Co., Ltd. Information query by pointing
US8818716B1 (en) 2013-03-15 2014-08-26 Honda Motor Co., Ltd. System and method for gesture-based point of interest search
US8886399B2 (en) * 2013-03-15 2014-11-11 Honda Motor Co., Ltd. System and method for controlling a vehicle user interface based on gesture angle
US10721448B2 (en) 2013-03-15 2020-07-21 Edge 3 Technologies, Inc. Method and apparatus for adaptive exposure bracketing, segmentation and scene organization
KR20140114580A (ko) * 2013-03-19 2014-09-29 한라비스테온공조 주식회사 터치모션 입력에 따른 공조제어장치
US11372936B2 (en) 2013-04-15 2022-06-28 Autoconnect Holdings Llc System and method for adapting a control function based on a user profile
WO2014172904A1 (zh) * 2013-04-27 2014-10-30 Rong Weihua 手势识别装置、手势识别方法及相关车载装置
DE102013009567B4 (de) 2013-06-07 2015-06-18 Audi Ag Verfahren zum Betreiben einer Gestenerkennungseinrichtung sowie Kraftfahrzeug mit räumlich beschränkter Gestenerkennung
DE102013010932B4 (de) 2013-06-29 2015-02-12 Audi Ag Verfahren zum Betreiben einer Bedienschnittstelle, Bedienschnittstelle sowie Kraftfahrzeug mit einer Bedienschnittstelle
DE102013010982A1 (de) 2013-07-01 2015-01-08 Audi Ag Verfahren zum Betreiben einer Bedieneinrichtung eines Kraftwagens und Steuerungssystem für einen Kraftwagen
DE102013214326A1 (de) * 2013-07-23 2015-01-29 Robert Bosch Gmbh Verfahren zum Betreiben einer Eingabevorrichtung, Eingabevorrichtung
DE102013012466B4 (de) 2013-07-26 2019-11-07 Audi Ag Bediensystem und Verfahren zum Bedienen einer fahrzeugseitigen Vorrichtung
CN104375627B (zh) * 2013-08-15 2018-02-27 联想(北京)有限公司 一种调节音量的方法及装置
US20160239002A1 (en) * 2013-09-25 2016-08-18 Schneider Electric Buildings Llc Method and device for adjusting a set point
DE102013219511B4 (de) * 2013-09-27 2020-07-16 Robert Bosch Gmbh Verfahren und Vorrichtung zum Betreiben einer Eingabevorrichtung eines Bediensystems, Kraftfahrzeug, Computerprogramm, Computer-Programmprodukt
DE102013016490A1 (de) * 2013-10-02 2015-04-02 Audi Ag Kraftfahrzeug mit berührungslos aktivierbarem Handschrifterkenner
US20150116200A1 (en) * 2013-10-25 2015-04-30 Honda Motor Co., Ltd. System and method for gestural control of vehicle systems
DE102013019197A1 (de) * 2013-11-15 2015-05-21 Audi Ag Kraftfahrzeug-Klimatisierung mit adaptivem Luftausströmer
KR102206053B1 (ko) * 2013-11-18 2021-01-21 삼성전자주식회사 입력 도구에 따라 입력 모드를 변경하는 전자 장치 및 방법
KR101556520B1 (ko) * 2013-12-11 2015-10-02 현대자동차주식회사 단말기, 그를 가지는 차량 및 그 제어 방법
DE102013020795A1 (de) 2013-12-12 2015-06-18 Man Truck & Bus Ag Verfahren und Anordnung zum Steuern von Funktionen eines Kraftfahrzeugs
CN103699224A (zh) * 2013-12-16 2014-04-02 苏州佳世达光电有限公司 一种手势感应的方法和系统
US10007329B1 (en) 2014-02-11 2018-06-26 Leap Motion, Inc. Drift cancelation for portable object detection and tracking
DE102014202834A1 (de) * 2014-02-17 2015-09-03 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zum berührungslosen Bedienen eines in Hardware ausgestalteten Bedienelementes in einem 3D-Gestenmodus
KR101575650B1 (ko) 2014-03-11 2015-12-08 현대자동차주식회사 단말기, 그를 가지는 차량 및 그 제어 방법
US9754167B1 (en) 2014-04-17 2017-09-05 Leap Motion, Inc. Safety for wearable virtual reality devices via object detection and tracking
US9868449B1 (en) 2014-05-30 2018-01-16 Leap Motion, Inc. Recognizing in-air gestures of a control object to control a vehicular control system
US10936050B2 (en) 2014-06-16 2021-03-02 Honda Motor Co., Ltd. Systems and methods for user indication recognition
US10007350B1 (en) 2014-06-26 2018-06-26 Leap Motion, Inc. Integrated gestural interaction and multi-user collaboration in immersive virtual reality environments
JP3194297U (ja) 2014-08-15 2014-11-13 リープ モーション, インコーポレーテッドLeap Motion, Inc. 自動車用及び産業用のモーション感知制御装置
DE102014224598A1 (de) * 2014-12-02 2016-06-02 Robert Bosch Gmbh Verfahren und Vorrichtung zum Betreiben einer Eingabevorrichtung
EP3035180B1 (de) * 2014-12-17 2018-08-08 Volkswagen Aktiengesellschaft Vorrichtung für eine klimasteuerung, fahrzeug, verfahren und computerprogramm zur bereitstellung eines video- und steuersignals
GB2534152B (en) 2015-01-14 2017-12-20 Jaguar Land Rover Ltd Apparatus and method for controlling operation of a component
JP6426025B2 (ja) * 2015-02-20 2018-11-21 クラリオン株式会社 情報処理装置
US20160257198A1 (en) 2015-03-02 2016-09-08 Ford Global Technologies, Inc. In-vehicle component user interface
US9539988B2 (en) 2015-03-16 2017-01-10 Thunder Power Hong Kong Ltd. Vehicle camera cleaning system
US10703211B2 (en) 2015-03-16 2020-07-07 Thunder Power New Energy Vehicle Development Company Limited Battery pack, battery charging station, and charging method
US9550406B2 (en) 2015-03-16 2017-01-24 Thunder Power Hong Kong Ltd. Thermal dissipation system of an electric vehicle
US9866163B2 (en) 2015-03-16 2018-01-09 Thunder Power New Energy Vehicle Development Company Limited Method for controlling operating speed and torque of electric motor
US10173687B2 (en) 2015-03-16 2019-01-08 Wellen Sham Method for recognizing vehicle driver and determining whether driver can start vehicle
US9547373B2 (en) 2015-03-16 2017-01-17 Thunder Power Hong Kong Ltd. Vehicle operating system using motion capture
US9954260B2 (en) 2015-03-16 2018-04-24 Thunder Power New Energy Vehicle Development Company Limited Battery system with heat exchange device
US9586618B2 (en) 2015-03-16 2017-03-07 Thunder Power Hong Kong Ltd. Vehicle control system for controlling steering of vehicle
DE102015205931A1 (de) * 2015-04-01 2016-10-06 Zf Friedrichshafen Ag Bedienvorrichtung und Verfahren zum Bedienen zumindest einer Funktion eines Fahrzeugs
TWI552892B (zh) * 2015-04-14 2016-10-11 鴻海精密工業股份有限公司 車輛控制系統及其操作方法
US9967717B2 (en) 2015-09-01 2018-05-08 Ford Global Technologies, Llc Efficient tracking of personal device locations
US9914418B2 (en) 2015-09-01 2018-03-13 Ford Global Technologies, Llc In-vehicle control location
US9757985B2 (en) 2015-09-25 2017-09-12 Honda Motor Co., Ltd. System and method for providing a gear selection indication for a vehicle
US10692126B2 (en) 2015-11-17 2020-06-23 Nio Usa, Inc. Network-based system for selling and servicing cars
US10046637B2 (en) 2015-12-11 2018-08-14 Ford Global Technologies, Llc In-vehicle component control user interface
DE102016201981A1 (de) 2016-02-10 2017-08-10 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Auswählen, Aktivieren oder Deaktivieren einer Funktion in einem Kraftfahrzeug mithilfe einer Bedieneinrichtung und ein Bediensystem
US10082877B2 (en) * 2016-03-15 2018-09-25 Ford Global Technologies, Llc Orientation-independent air gesture detection service for in-vehicle environments
US9914415B2 (en) 2016-04-25 2018-03-13 Ford Global Technologies, Llc Connectionless communication with interior vehicle components
US20180012196A1 (en) 2016-07-07 2018-01-11 NextEv USA, Inc. Vehicle maintenance manager
US9928734B2 (en) 2016-08-02 2018-03-27 Nio Usa, Inc. Vehicle-to-pedestrian communication systems
US9963106B1 (en) 2016-11-07 2018-05-08 Nio Usa, Inc. Method and system for authentication in autonomous vehicles
US10410064B2 (en) 2016-11-11 2019-09-10 Nio Usa, Inc. System for tracking and identifying vehicles and pedestrians
US10708547B2 (en) 2016-11-11 2020-07-07 Nio Usa, Inc. Using vehicle sensor data to monitor environmental and geologic conditions
US10694357B2 (en) 2016-11-11 2020-06-23 Nio Usa, Inc. Using vehicle sensor data to monitor pedestrian health
DE102016222656A1 (de) * 2016-11-17 2018-05-17 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zur situationsbedingten Steuerung von Funktionalitäten eines Fahrzeugs
US10699305B2 (en) 2016-11-21 2020-06-30 Nio Usa, Inc. Smart refill assistant for electric vehicles
US10249104B2 (en) 2016-12-06 2019-04-02 Nio Usa, Inc. Lease observation and event recording
US10074223B2 (en) 2017-01-13 2018-09-11 Nio Usa, Inc. Secured vehicle for user use only
US10031521B1 (en) 2017-01-16 2018-07-24 Nio Usa, Inc. Method and system for using weather information in operation of autonomous vehicles
US9984572B1 (en) 2017-01-16 2018-05-29 Nio Usa, Inc. Method and system for sharing parking space availability among autonomous vehicles
US10471829B2 (en) 2017-01-16 2019-11-12 Nio Usa, Inc. Self-destruct zone and autonomous vehicle navigation
US10464530B2 (en) 2017-01-17 2019-11-05 Nio Usa, Inc. Voice biometric pre-purchase enrollment for autonomous vehicles
US10286915B2 (en) 2017-01-17 2019-05-14 Nio Usa, Inc. Machine learning for personalized driving
US10897469B2 (en) 2017-02-02 2021-01-19 Nio Usa, Inc. System and method for firewalls between vehicle networks
DE102017205277A1 (de) * 2017-03-29 2018-10-04 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Interaktion zwischen einem Fortbewegungsmittel und einem Insassen, Fahrerassistenzsystem und Fortbewegungsmittel
US10234302B2 (en) 2017-06-27 2019-03-19 Nio Usa, Inc. Adaptive route and motion planning based on learned external and internal vehicle environment
US10369974B2 (en) 2017-07-14 2019-08-06 Nio Usa, Inc. Control and coordination of driverless fuel replenishment for autonomous vehicles
US10710633B2 (en) 2017-07-14 2020-07-14 Nio Usa, Inc. Control of complex parking maneuvers and autonomous fuel replenishment of driverless vehicles
US10837790B2 (en) 2017-08-01 2020-11-17 Nio Usa, Inc. Productive and accident-free driving modes for a vehicle
CN107589850A (zh) * 2017-09-26 2018-01-16 深圳睛灵科技有限公司 一种手势移动方向的识别方法及系统
US10635109B2 (en) 2017-10-17 2020-04-28 Nio Usa, Inc. Vehicle path-planner monitor and controller
DE102017219154A1 (de) * 2017-10-25 2019-04-25 Bayerische Motoren Werke Aktiengesellschaft Verfahren, Anwenderschnittstelle und Fortbewegungsmittel zur Funktionsbelegung von Eingabezielen mittels Spracheingabe
US10935978B2 (en) 2017-10-30 2021-03-02 Nio Usa, Inc. Vehicle self-localization using particle filters and visual odometry
US10606274B2 (en) 2017-10-30 2020-03-31 Nio Usa, Inc. Visual place recognition based self-localization for autonomous vehicles
US10717412B2 (en) 2017-11-13 2020-07-21 Nio Usa, Inc. System and method for controlling a vehicle using secondary access methods
GB2570629B (en) * 2017-11-17 2020-08-26 Jaguar Land Rover Ltd Vehicle controller
WO2019134888A1 (en) * 2018-01-03 2019-07-11 Sony Semiconductor Solutions Corporation Gesture recognition using a mobile device
US10369966B1 (en) 2018-05-23 2019-08-06 Nio Usa, Inc. Controlling access to a vehicle using wireless access devices
CN109635665A (zh) * 2018-11-16 2019-04-16 惠州拓邦电气技术有限公司 一种电器手势控制方法、装置及厨房电器
US11507194B2 (en) * 2020-12-02 2022-11-22 Huawei Technologies Co., Ltd. Methods and devices for hand-on-wheel gesture interaction for controls
CN113147669B (zh) * 2021-04-02 2022-08-02 淮南联合大学 一种基于毫米波雷达的手势运动探测系统
US11654922B2 (en) * 2021-08-09 2023-05-23 Ford Global Technologies, Llc Driver attention and hand placement systems and methods

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3836555A1 (de) 1988-10-27 1990-05-10 Bayerische Motoren Werke Ag Multifunktions-bedieneinrichtung
US5203704A (en) 1990-12-21 1993-04-20 Mccloud Seth R Method of communication using pointing vector gestures and mnemonic devices to assist in learning point vector gestures
US5454043A (en) 1993-07-30 1995-09-26 Mitsubishi Electric Research Laboratories, Inc. Dynamic and static hand gesture recognition through low-level image analysis
US5594469A (en) * 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
US6088468A (en) 1995-05-17 2000-07-11 Hitachi Denshi Kabushiki Kaisha Method and apparatus for sensing object located within visual field of imaging device
JPH09206473A (ja) 1996-02-02 1997-08-12 Ricoh Elemex Corp 遊戯対戦装置
US5815147A (en) * 1996-06-07 1998-09-29 The Trustees Of The University Of Pennsylvania Virtual play environment for disabled children
DE19654944A1 (de) 1996-12-13 1998-06-25 Andreas Bohn Systemsteuerung
EP0849697B1 (en) * 1996-12-20 2003-02-12 Hitachi Europe Limited A hand gesture recognition system and method
JP3968477B2 (ja) 1997-07-07 2007-08-29 ソニー株式会社 情報入力装置及び情報入力方法
US20020036617A1 (en) 1998-08-21 2002-03-28 Timothy R. Pryor Novel man machine interfaces and applications
JP3795647B2 (ja) * 1997-10-29 2006-07-12 株式会社竹中工務店 ハンドポインティング装置
JPH11134090A (ja) 1997-10-30 1999-05-21 Tokai Rika Co Ltd 操作信号出力装置
US6950534B2 (en) * 1998-08-10 2005-09-27 Cybernet Systems Corporation Gesture-controlled interfaces for self-service machines and other applications
DE19845030A1 (de) * 1998-09-30 2000-04-20 Siemens Ag Bildsystem
US6501515B1 (en) 1998-10-13 2002-12-31 Sony Corporation Remote control system
JP2000293666A (ja) 1999-04-05 2000-10-20 Kubota Corp 疵検出方法及び疵検出装置並びに記録媒体
US6571081B1 (en) * 1999-05-04 2003-05-27 Hughes Electronics Corporation Hybridized space/ground beam forming
JP4332649B2 (ja) * 1999-06-08 2009-09-16 独立行政法人情報通信研究機構 手の形状と姿勢の認識装置および手の形状と姿勢の認識方法並びに当該方法を実施するプログラムを記録した記録媒体
US6766036B1 (en) * 1999-07-08 2004-07-20 Timothy R. Pryor Camera based man machine interfaces
US7050606B2 (en) 1999-08-10 2006-05-23 Cybernet Systems Corporation Tracking and gesture recognition system particularly suited to vehicular control applications
JP2001216069A (ja) 2000-02-01 2001-08-10 Toshiba Corp 操作入力装置および方向検出方法
US20010031623A1 (en) * 2000-03-03 2001-10-18 Lee Masoian Channel booster amplifier
US6662018B1 (en) * 2000-06-28 2003-12-09 Northrop Grumman Corporation Analog power control system for a multi-carrier transmitter
DE10039432C1 (de) 2000-08-11 2001-12-06 Siemens Ag Bedieneinrichtung
US6804396B2 (en) * 2001-03-28 2004-10-12 Honda Giken Kogyo Kabushiki Kaisha Gesture recognition system
US6564144B1 (en) * 2002-01-10 2003-05-13 Navigation Technologies Corporation Method and system using a hand-gesture responsive device for collecting data for a geographic database
JP3837505B2 (ja) * 2002-05-20 2006-10-25 独立行政法人産業技術総合研究所 ジェスチャ認識による制御装置のジェスチャの登録方法
KR100575906B1 (ko) 2002-10-25 2006-05-02 미츠비시 후소 트럭 앤드 버스 코포레이션 핸드 패턴 스위치 장치
KR100547736B1 (ko) * 2003-06-26 2006-01-31 삼성전자주식회사 다중-채널의 동적 선택을 위한 스위칭 필터 모듈
JP3752246B2 (ja) 2003-08-11 2006-03-08 学校法人慶應義塾 ハンドパターンスイッチ装置

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100353380C (zh) * 2004-10-08 2007-12-05 富士通株式会社 生物认证系统登记方法、生物认证系统及其程序
CN1315024C (zh) * 2005-03-11 2007-05-09 西北工业大学 一种视频识别输入系统的输入方法
CN102067067A (zh) * 2008-06-24 2011-05-18 韩国电子通信研究院 参考姿势数据的注册方法、移动终端的驱动方法及其移动终端
CN102103457B (zh) * 2009-12-18 2013-11-20 深圳富泰宏精密工业有限公司 简报操作系统及方法
CN102103457A (zh) * 2009-12-18 2011-06-22 深圳富泰宏精密工业有限公司 简报操作系统及方法
CN102193632A (zh) * 2011-05-11 2011-09-21 苏州佳世达电通有限公司 电子装置及其手势操作方法
US9916012B2 (en) 2011-06-07 2018-03-13 Sony Corporation Image processing apparatus, image processing method, and program
CN102981604A (zh) * 2011-06-07 2013-03-20 索尼公司 图像处理设备、图像处理方法和程序
US9785245B2 (en) 2011-06-07 2017-10-10 Sony Corporation Image processing apparatus, image processing method, and program for recognizing a gesture
CN102981604B (zh) * 2011-06-07 2016-12-14 索尼公司 图像处理设备和图像处理方法
CN103906646A (zh) * 2011-09-03 2014-07-02 大众汽车有限公司 用于尤其在机动车内提供图形用户界面的方法和装置
US9694764B2 (en) 2011-12-09 2017-07-04 Flextronics Automotive, Inc. Vehicle electromechanical systems triggering based on image recognition and radio frequency
CN102915111A (zh) * 2012-04-06 2013-02-06 寇传阳 一种腕上手势操控系统和方法
CN104603720A (zh) * 2012-09-12 2015-05-06 大陆汽车有限责任公司 用于借助手势操作机动车组件的方法和装置
CN104603720B (zh) * 2012-09-12 2018-03-02 大陆汽车有限责任公司 用于借助手势操作机动车组件的方法和装置
CN103809738A (zh) * 2012-11-13 2014-05-21 联想(北京)有限公司 一种信息采集方法及电子设备
CN103809738B (zh) * 2012-11-13 2017-03-29 联想(北京)有限公司 一种信息采集方法及电子设备
CN104968532B (zh) * 2012-12-10 2017-10-27 伟创力汽车有限公司 基于图像识别和射频的车辆机电系统触发
CN103870802A (zh) * 2012-12-18 2014-06-18 现代自动车株式会社 使用指谷操作车辆内的用户界面的系统和方法
CN103870802B (zh) * 2012-12-18 2018-09-14 现代自动车株式会社 使用指谷操作车辆内的用户界面的系统和方法
US9704350B1 (en) 2013-03-14 2017-07-11 Harmonix Music Systems, Inc. Musical combat game
CN104627094A (zh) * 2013-11-08 2015-05-20 现代自动车株式会社 识别用户手势的车辆和用于控制该车辆的方法
CN104627094B (zh) * 2013-11-08 2018-10-09 现代自动车株式会社 识别用户手势的车辆和用于控制该车辆的方法
CN104679404A (zh) * 2013-11-29 2015-06-03 现代摩比斯株式会社 车辆的集成多媒体装置
CN106030462A (zh) * 2014-02-17 2016-10-12 大众汽车有限公司 用户接口和用于从用户接口的第一操作模式变换成3d手势模式的方法
CN105799613A (zh) * 2014-09-25 2016-07-27 现代自动车株式会社 手势识别装置及其控制方法以及具有该装置的车辆
CN107428253A (zh) * 2015-03-26 2017-12-01 法国大陆汽车公司 包括通过光的发射‑接收进行通信的装置的车辆方向盘组件
US10589781B2 (en) 2015-03-26 2020-03-17 Continental Automotive France Vehicle steering-wheel assembly including means for communicating by emitting and receiving light
CN107428253B (zh) * 2015-03-26 2020-02-21 法国大陆汽车公司 包括通过光的发射-接收进行通信的装置的车辆方向盘组件
CN106945636A (zh) * 2017-04-11 2017-07-14 北京新能源汽车股份有限公司 一种车辆的控制装置、方法和汽车
CN110520915A (zh) * 2017-04-24 2019-11-29 三菱电机株式会社 通知控制装置及通知控制方法
CN110520915B (zh) * 2017-04-24 2022-03-01 三菱电机株式会社 通知控制装置及通知控制方法
CN108791119A (zh) * 2017-05-04 2018-11-13 奥迪股份公司 车辆控制系统及方法
CN109305169A (zh) * 2017-07-27 2019-02-05 大陆汽车有限公司 运行有手动变速器和自动离合器的机动车的方法和机动车
CN109305169B (zh) * 2017-07-27 2021-11-16 大陆汽车有限公司 运行有手动变速器和自动离合器的机动车的方法和机动车
CN108536291A (zh) * 2018-03-29 2018-09-14 努比亚技术有限公司 一种应用操作方法、可穿戴设备及存储介质
EP3868192A1 (de) * 2020-02-18 2021-08-25 CLAAS E-Systems GmbH Landwirtschaftliche arbeitsmaschine
TWI798001B (zh) * 2022-02-23 2023-04-01 神達數位股份有限公司 手勢控制行車紀錄器的方法及系統

Also Published As

Publication number Publication date
CN1253776C (zh) 2006-04-26
DE10349568A1 (de) 2004-05-13
KR100575906B1 (ko) 2006-05-02
KR20040036593A (ko) 2004-04-30
US20040141634A1 (en) 2004-07-22
US7289645B2 (en) 2007-10-30

Similar Documents

Publication Publication Date Title
CN1253776C (zh) 手势开关装置
CN1324433C (zh) 操作指示设备和操作指示方法
CN1177634C (zh) 控制器和电子装置
CN1923325A (zh) 游戏系统和其上存储有游戏程序的存储介质
CN1280068C (zh) 机器人教示装置,使用它的机器人和机器人的操作方法
CN1919396A (zh) 游戏操作装置
CN1919395A (zh) 游戏操作装置
CN1919390A (zh) 游戏控制器和游戏系统
CN1204739C (zh) 摄像机控制装置和方法
CN103973986B (zh) 一种基于移动终端照相机的调焦及其镜头切换方法
CN1199701C (zh) 游戏装置
CN1336841A (zh) 手动控制器
US20160361637A1 (en) Connectable Hand-Held Controllers for Virtual-Reality Systems
CN101042300A (zh) 画面显示装置、画面显示方法及其控制程序
KR20050019036A (ko) 핸드 패턴 스위치 장치
CN1956680A (zh) 生物信息检测装置
CN1318454A (zh) 机器人装置及机器人装置动作决定方法
CN1700159A (zh) 自行车计算机显示设备
CN1542731A (zh) 自动演奏键盘乐器
CN1812495A (zh) 图像拾取设备、向导框显示控制方法及计算机程序
WO2007032135A1 (ja) ゲームプログラム、ゲーム装置及びゲーム方法
CN1461229A (zh) 游戏机和控制图像显示操作的方法
CN1722065A (zh) 接收用户输入的系统和方法以及控制机构
CN1450926A (zh) 对于游戏机的传输优化
JP2004145722A (ja) ハンドパターンスイッチ装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20060426

Termination date: 20091124