JP2014518422A - オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置及び方法 - Google Patents

オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置及び方法 Download PDF

Info

Publication number
JP2014518422A
JP2014518422A JP2014517750A JP2014517750A JP2014518422A JP 2014518422 A JP2014518422 A JP 2014518422A JP 2014517750 A JP2014517750 A JP 2014517750A JP 2014517750 A JP2014517750 A JP 2014517750A JP 2014518422 A JP2014518422 A JP 2014518422A
Authority
JP
Japan
Prior art keywords
display unit
vehicle
unit
light detection
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014517750A
Other languages
English (en)
Inventor
フランク シュリエプ、
オリバー キルシュ、
ヤンニン チャオ、
Original Assignee
ジョンソン・コントロールズ・ゲー・エム・ベー・ハー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ジョンソン・コントロールズ・ゲー・エム・ベー・ハー filed Critical ジョンソン・コントロールズ・ゲー・エム・ベー・ハー
Publication of JP2014518422A publication Critical patent/JP2014518422A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/333—Lasers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/774—Instrument locations other than the dashboard on or in the centre console
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本発明は、オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置（１）に関する。本発明によれば、装置（１）は、車両室内（２）に配置され、少なくとも１つの照明ユニット（５）、ディスプレイユニット（２０）及び光検出ユニット（３）を備え、照明ユニット（５）は、少なくとも１つの赤外線レーザから形成される。また、本発明は、オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する方法にも関する。

Description

本発明は、請求項１のプリアンブルに記載のオブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置に関する。本発明は、請求項９のプリアンブルに記載のオブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する方法に関する。
一般的には、自動車の室内は車両乗員が制御可能な多数の機能を含むことが知られている。このような機能は、空調システム、娯楽電子機器、例えば、携帯電話及びインターネットアプリケーション等の通信媒体、及びナビゲーションシステムを含む。
こうした機能を制御及び表示するために、先行技術から様々な入力及び出力装置が知られている。この場合、特に、タッチセンサ式ディスプレイユニット（タッチスクリーン）又は前方にタッチセンサ式入力及び／又は出力装置（タッチパネル）が取り付けられたディスプレイユニットとして設計される入力及び出力装置が使用される。こうしたディスプレイユニット、又は入力及び／又は出力装置は、例えば、抵抗性又は容量性の設計を有し得る。
容量性の設計を有するタッチセンサ式ディスプレイユニット又は容量性の設計を有するタッチセンサ式入力及び／又は出力装置を用いることで、容量性近接法（「近接感知」としても知られている）が更に可能である。これによって、例えば、窓及び／又はドアを閉じるときに車両乗員のアンチトラップ保護、特に、車両乗員の、例えば、運転者と乗客との間の区別を実現することができる。例えば、後者は、ナビゲーションデバイスを拡大するためにディスプレイユニットのキーを使用することを含む場合があり、このキーは乗客による操作が使用不能にされている。
特に、上記の運転者とディスプレイユニットとの間の相互作用はますます複雑になってきており、その結果、知的及び／又は直感的な操作概念が要求される。
更に、先行技術は、車両座席に配置されたセンサによって車両座席に着座している車両乗員を検出する座席の占有を識別するためのシステムを開示する。
ＤＥ １０ ２００７ ０２８ ６４５ Ａ１は、デバイスユニットを制御する構成及び方法を記載しており、センサユニットによって、オブジェクトのジェスチャがキャプチャ及び解釈され、解釈されたジェスチャは、デバイスユニットを制御するための制御信号に変換される。
本発明によって対処される課題は、オブジェクト及び／又は人物及び／又はそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式で検出するための、先行技術と比較して改良された装置及び改良された方法を特定することである。
オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置に関して、請求項１で特定される特長によって課題が解決される。
オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する方法に関して、請求項９で特定される特長によって課題が解決される。
従属請求項は、本発明の有利な発展形に関する。
オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置において、本発明によれば、装置は、車両室内に配置され、少なくとも１つの照明ユニット、ディスプレイユニット及び光検出ユニットを含み、照明ユニットは、少なくとも１つの赤外線レーザ、特に、赤外線レーザダイオードから形成される。有利な点として、オブジェクト及び／又は人物及び／又はこの人物によって行われ及び／又は実行されるジェスチャ及び／又は操作手順が、光検出ユニットによって３次元的に検出され得る。従って、例えば、車両運転者の手又は指の動きが３次元的に検出され、この動きは、例えば、車両内のディスプレイユニットの仮想的な作動に対応する。これは、例えば、指の往復運動又はスワイプ動作又は拡大動作として手を広げること等のジェスチャを用いる動作手順の検出を含み得る。
従来は、照明ユニットとして複数の発光ダイオードが使用されている。これと比較して、本発明によって使用される赤外線レーザダイオードは、改善したコヒーレンス及び高出力スペクトル密度を有するので、より高い変調帯域幅及びより効果的な光学フィルタリングがもたらされる。光検出ユニットの著しく改善した分解能が有利に可能になるので、結果として、車両乗員のより複雑なジェスチャが検出され得る。
検出ユニットは検出されたジェスチャ又は動作を対応する電気信号に変換して、これを例えば、電気信号に含まれている情報に従って所望の動作手順を実行する従来のディスプレイユニットの制御器に伝達する。
このようなディスプレイユニットは、少なくとも１つのディスプレイパネル及び制御ユニットを備える。従って、タッチセンサ式ディスプレイユニットは、上記装置によってエミュレートすることができ、例えば、ディスプレイユニットが運転者又は乗客によって操作されるのかどうかを区別するために、容量性近接法のエミュレーションを可能にする。更に、動作手順の３次元的検出は、ディスプレイユニットにおけるメモリ空間を節約することを可能にする。これにより、ディスプレイユニットの製造費用及び複雑さを減らすことが可能になる。
更に、タッチセンサ式入力及び／又は出力装置（タッチパネル）が、タッチセンサ式ディスプレイユニットを製造するために、可能な例示的な実施形態を構成する画面に費用集約的に結び付けられる必要がない。
更に、後者は背面照明を部分的に反射する複数の層を通常は構成するので、照明状態に関するディスプレイユニットの出力品質がタッチセンサ式ディスプレイユニットと比較して改善される。
好ましくは、光検出ユニットは少なくとも１つの光学センサを備える。
光検出ユニットは、特に好ましくは３次元カメラシステムとして設計され、それによって距離測定のための飛行時間法を実行することができる。例えば、光検出ユニットは、照明ユニットと、少なくとも１つの光学要素と、少なくとも１つの光学センサと駆動及び評価のための対応する電子機器とを備える所謂飛行時間（ＴＯＦ；ｔｉｍｅ−ｏｆ−ｆｌｉｇｈｔ）カメラとして設計される。
ＴＯＦカメラの原理は距離測定のための飛行時間法に基づく。このため、例えば、車両室内又は車両室内の一部は、照明ユニット、特に、レーザダイオードによって生成される光パルスによって照らされる。ここで、ＴＯＦカメラは、光がオブジェクトに伝搬して、光学センサに戻ることに要求される時間をピクセルごとに測定する。好ましくは、要求される時間は、対応する距離に比例する。光学センサにおいて、検出されるシーン、特に、検出される動作手順は撮像されて、その後、相応に評価される。この場合、ＴＯＦカメラは、非常にロバスト且つ適応的であり、３Ｄデータを供給する。
特に好ましくは又は代替的に、光検出ユニットは、ステレオカメラ、特に、赤外線ステレオカメラとして設計され、それによって動作手順を光学的に３次元的に検出することができる。
この場合、少なくとも１つの光学センサは、特に好ましくは、光混合検出器として設計される。赤外線範囲内の光は、光学センサによって検出することができる。この場合、光学センサは、好ましくは、ＴＯＦカメラに統合され又は結合される。例えば、光学センサは、車両のルーフコンソールに配置され得る。その代替として、光学センサは室内コンソールにおいて運転者の方向に指向され、又は計器パネル又は車両のヘッドレスト又はＡピラーに配置され得る。
代替的な実施形態では、光検出ユニットは、赤外線光グリッドが車両乗員に当てられる所謂構造化光スキャナとして設計される。好ましくは、スキャナによってエネルギ消費を低減することができる。
特に好ましくは、光学センサは、３次元カメラシステム（ＴＯＦ）又はステレオカメラに統合され、又はそれらに結合される。
視線を変えることなく直感的に車両運転者が表示される情報を検出できるように、ディスプレイユニットは、好ましくは、車両運転者の視野においてヘッドアップディスプレイとして設計される。このため、ディスプレイユニットは、所謂ヘッドアップディスプレイ又はコンバイナヘッドアップディスプレイ（ｃｏｍｂｉｎｅｒ ｈｅａｄ−ｕｐ ｄｉｓｐｌａｙ）とも呼ばれる複合ヘッドアップディスプレイ（ｃｏｍｂｉｎｅｄ ｈｅａｄ−ｕｐ ｄｉｓｐｌａｙ）として設計され、例えば、車両のフロントガラスの中又は上に配置される。
オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する方法において、本発明によれば、オブジェクト及び／又は人物及びこの人物によって行われ及び／又は実行されるジェスチャ及び／又は操作手順が、光検出ユニットによって車両室内で３次元的に検出される。
特に有利に、タッチセンサ式ディスプレイユニットは、本発明による装置によってエミュレートされ、このディスプレイユニットは、ディスプレイユニットが車両運転者又はそれ以外の人物によって操作されるかどうかを区別するために容量性近接法のエミュレーションを可能にする。
ダイヤフラムの開口及び／又は光検出ユニットの構築によって、後者は、例えば、スイッチによって管理されるように制御可能であり、例えば、車両運転者の頭部の動き及び／又は観察方向を検出するために使用され得る。検出された頭部の動き及び／又は観察方向に基づいて、ヘッドレストのトラッキング又は調節が更に可能になり、及び／又は車両運転者の注意が現在の交通状況から逸れることが検出され得る。好ましくは、それから対応するアクション、例えば、警告信号が起動され、その結果、交通安全性が高まる。
添付の概略的な図面を参照して、本発明が以下により詳細に説明される。
本発明による装置の機能的原理に関する例示を概略的に示す。 ディスプレイユニットの操作手順を非接触で検出するための装置、及びディスプレイユニットを有する擬似的な車両室内の抜粋を正面図で概略的に示す。 図１による装置及びディスプレイユニットを有する擬似的な車両室内の抜粋を側面図で概略的に示す。 光検出ユニットの好ましい実施形態を斜視図で示す。 図４による光検出ユニットの好ましい実施形態の機能的原理に関する例示を概略的に示す。 図４による光検出ユニットの光学センサの出力画像を概略的に示す。 図６による出力画像の抜粋を概略的に示す。 車両の平面図を半透明の例示で概略的に示す。 本発明による装置の車両における使用の例示的な実施形態を概略的に示す。
相互に対応する部分は、全ての図面において同じ符号で提供される。
図１は、本発明による装置１の機能的原理に関する例示を概略的に示す。装置１は、図２に示される車両室内２に配置され、少なくとも１人の車両乗員１０に向けられる。
装置１は、少なくとも１つの照明ユニット５及び光検出ユニット３を備え、それによって操作手順、例えば、表示された情報を拡大するための車両乗員１０の手の動き（手を開くこと）が、事前定義可能な検出領域４において３次元的に検出され得る。
１つの好ましい実施形態では、光検出ユニット３は、少なくとも１つの光学要素６と、少なくとも１つの光学センサ７と、駆動及び評価のための対応する電子機器とを備える所謂飛行時間（ＴＯＦ；ｔｉｍｅ−ｏｆ−ｆｌｉｇｈｔ）カメラとして設計される。
この場合、照明ユニット５は、好ましくは、車両乗員１０に向けられる検出領域４を照らす役割を果たす。このため、照明ユニット５は、従来のレーザダイオード、特に赤外線レーザダイオードとして設計される１つ又は複数の光源を含む。好ましくは、照明ユニット５は、例えば、車両乗員１０が装置１によって光学的に悪影響を受けないように、赤外線範囲内に光を生成する。
好ましくは、従来の光混合検出器として設計される光学センサ７は、カメラのピクセルごとに別個に飛行時間を検出する。この場合、光学センサ７は、ＴＯＦカメラに統合され又は結合される。例えば、光学センサ７は、車両のルーフコンソールに配置され得る。その代替として、光学センサ７は室内コンソールにおいて運転者の方向に指向され、又は計器パネル又は車両のヘッドレストに配置され得る。
光検出ユニット３の光学要素６によって、照らされた検出領域４が光学センサ７で撮像され得る。言い換えれば、光学要素６は、例えば、検出領域４が照らされる波長のみを有する光を通過させる光学帯域通過フィルタとして設計される。従って、周囲からの撹乱光が、可能な最大限まで除去され又はマスクされる。
照明ユニット５及び光検出ユニット３は共に、駆動電子機器８によって駆動される。評価電子機器９は、検出された操作手順を対応する信号に変換して、後者を制御ユニット（図示せず）に伝達し、それは対応して所望の操作手順を実行又は作動する。
特に好ましくは、光検出ユニットは、ステレオカメラ、特に、赤外線ステレオカメラとして設計され、それによって動作手順を光学的に３次元的に検出することができる。
光検出ユニット３のダイヤフラムの開口の形状（より詳細には示されない）及び／又は光学要素６のレンズ構造によって、例えば、車両運転者の頭部の動きを検出し、現在の交通状況から運転者の注意が逸れることを検出し、及び／又は検出された車両運転者の頭部の動きに基づいてヘッドレストを調節し、及び／又は車両運転者の頭部の誤った位置を検出するために、検出された画像領域が使用され得る。このために、多焦点光学センサが、例えば、光学センサ７として用いられ得る。代替的に、光学センサ７の個々の焦点は、可動式光学システム、例えば、微小機械システムによって枢動され得る。
例えば、車両運転者の誤った位置及び／又は現在の交通状況から注意が逸れることが検出されると、好ましくは、対応するアクション、例えば、警告信号が起動され得る。その結果、交通安全が改善され、及び／又は情報がディスプレイユニット、例えば、従来のコンビネーション表示計器に出力され得る。
図２及び３は、擬似的な車両室内１７の概略図を示す。この場合、図２の観察方向は、仮想交通状況が撮像される擬似フロントガラス１８の方向に延びている。図３は、擬似的な車両室内１７の側面図を示す。
情報を表示し且つ機能を操作するためのディスプレイユニット２０が、擬似車両室内１７に配置されるハンドル１９に対して横方向に配置される。ディスプレイユニット２０は、例えば、車両室内照明を操作するために、及び車両の室内の照明に関する情報を表示するために、好ましくは、結合されたディスプレイ及び入力装置として、特に、所謂設ヘッドアップディスプレイ又はコンバイナヘッドアップディスプレイとも呼ばれる複合ヘッドアップディスプレイとして設計される。
ディスプレイユニット２０は、より詳細には示されていないが、ディスプレイユニット２０の操作手順を非接触で検出するための装置１に機械的及び／又は電気的に結合される。
この場合、装置１は、観察方向においてディスプレイユニット２０の上に配置される。例えば、装置１は、車両のルーフコンソールの上又は中に配置され得る。
装置１は、少なくとも１つの光検出ユニット３を備え、それによって操作手順、例えば、表示された情報を拡大するための車両乗員の手の動き（手を開くこと）が、事前定義可能な検出領域４において３次元的に検出され得る。
１つの好ましい実施形態では、光検出ユニット３は、照明ユニット５、少なくとも１つの光学要素６、図４でより詳細に示される少なくとも１つの光学センサ７及び駆動のための対応する駆動電子機器８及び対応する評価電子機器９を備える所謂飛行時間（ＴＯＦ）カメラとして設計される。
この場合、センサ７に結合される照明ユニット５は、上記のように、好ましくは、ディスプレイユニット２０の近傍に直接的に位置している検出領域４を照らす役割を果たす。
第１の代替的な実施形態では、光検出ユニット３は、ステレオカメラ、特に、赤外線ステレオカメラとして設計され、それによって動作手順を光学的に３次元的に検出することができる。
第２の代替的な実施形態では、光検出ユニット３は、赤外線光グリッドが車両乗員に当てられる所謂構造化光スキャナとして設計される。
従来のディスプレイユニット２０によってタッチセンサ式であるディスプレイユニットは、装置１によってエミュレートすることができる。このディスプレイユニットは、例えば、ディスプレイユニットが運転者又は乗客によって操作されるのかどうかを区別するために、容量性近接法のエミュレーションを可能にする。従って、中央情報ディスプレイ（ＣＩＤ：ｃｅｎｔｅｒ ｉｎｆｏｒｍａｔｉｏｎ ｄｉｓｐｌａｙ）として所謂タッチパネルをエミュレートすることを可能にする。
図４は、光学センサ７及びそれに割り当てられる照明ユニット５を有するＴＯＦカメラとして設計される光検出ユニット３の斜視図を示す。
図５は、図４による光検出ユニットの好ましい実施形態の機能的原理を概略的に示す。
機能的原理は距離測定のための飛行時間法に基づく。
照明ユニット５は、強度変調された散光円錐の形態で、例えば、正弦形態で、光信号Ｌ１を放射する。これは観察シーンＳを照射して、後者によって反射される。放射された光信号Ｌ１の波長は、非可視の赤外線の範囲にある。反射された光信号Ｌ２は、光学センサ７によって検出される。放射され且つ反射された光信号Ｌ１，Ｌ２の相関によって、距離情報に対応する位相シフトを決定することができる。このために、光学センサ７によって受信される光子は、感光性半導体領域で電子に変換され、距離によって異なる電荷スイング（ｃｈａｒｇｅ ｓｗｉｎｇ）に分離される。従って、結果として生じる各ピクセルの出力信号は、観察されたシーンＳの実際の奥行き情報との直接的な関係を確立する。好ましくは、要求される時間は、対応する距離に比例する。
図６及び７は、図５で検出されたシーンＳの出力を示す。ここで、図６は、出力されたシーンＳ’の抜粋を示す。
図８は、半透明で例示された車両１１の従来の車両室内２を示す。
車両室内２において、本発明による装置１は、例えば、計器パネル１２、ルーフコンソール１３、中央コンソール１４、ドアトリム１５及び／又はヘッドレスト１６に配置され得る。
図９は、車両室内２における装置１の様々な適用例を示す。この場合、この例示的な実施形態では、装置１は、光検出ユニット３として、赤外線カメラ、例えば、赤外線レーザ、特に、赤外線レーザダイオードを備え、割り当てられた検出領域４がカバーされる。このために、光検出ユニット３はルーフコンソール１３の領域に配置され、検出領域４は中央コンソール１４の方向に指向される。
従来の液晶ディスプレイ、特に、ＴＦＴスクリーンが、ディスプレイユニット２０として中央コンソール１４の領域に配置される。
追加的に又は代替的に、投射領域２２を有する投射ユニット２１を、ルーフコンソール１３の領域に又は計器パネル１２の領域に設けることができる。この投射ユニットは、ヘッドダウンディスプレイとして設計される更なるディスプレイユニット２０において、中央コンソール１４の領域に又はフロントガラス２２の領域に、従って車両乗員１０、例えば、運転者及び／又は乗客の視野に情報を挿入することができる。
この場合、光検出ユニット３と組み合わせて個々の又はそれぞれ更なるディスプレイユニット２０が、複合式ディスプレイ及び入力装置を形成することができる。この場合、検出ユニット３の検出領域４は、投射ユニット２１の投射領域に大部分は対応する。結果として、検出領域内で行われる車両乗員１０のアクション及びジェスチャを検出して、ディスプレイユニット２０の操作機能、仮想操作要素及び／又は仮想ディスプレイを制御するために使用することが出来る。
中央コンソールの領域に投射されるディスプレイユニット２０の代替として、他の室内部分及び／又は他のディスプレイユニットに又はタッチパネルとして投射と結合されるように、このディスプレイユニットを実現することができる。
更なる実施形態の変種では、装置１によって、車両室内２における表面で、例えば、計器パネル１２で、ルーフコンソール１３、中央コンソール１４、ドアトリム１５及び／又はヘッドレスト１６でタッチセンサ式操作要素をエミュレートすることができる。従来の操作要素は磨耗を免れず、結果として複雑な配線が避けられる。
更なる可能な実施形態の変種では、近接又は接触で操作手順を開始する領域が、従来式で投射される表現で装置１によってエミュレートされ得る。
１つの有利な実施形態の変種では、装置１は、車両において操作手順を実行するのが車両運転者であるか又は何らかの他の車両乗員１０であるかを区別するように設計される。例えば、このようにして、車両運転者が旅の間にナビゲーション装置を操作し、これによって交通状況及び危険から注意が逸れることが識別されるか又は何らかの他の車両乗員１０がナビゲーション装置を操作するかを区別することが可能になる。１つの有利な実施形態の変種では、例えば、車両運転者のこのような操作手順は抑制され又は実行されなくてもよいが、何らかの他の車両乗員による操作手順は許可される。
更なる有利な実施形態の変種では、複数の表示手段２０に関する車両乗員１０の操作手順が、装置１によって検出され得る。この場合、例えば、表示されたコンテンツ及び／又は情報が、異なる表示手段２０の間で移動され及び／又は交換され得る。
更なる実施形態では、仮想ディスプレイが表示手段２０の１つで操作可能とされる。例えば、表示された情報及び／又はディスプレイは、車両乗員１０の対応するアクション及び／又はジェスチャによって拡大され、縮小され及び／又は制御され得る。更に、異なる表示手段２０からの表示されたディスプレイ及び／又は情報は、ディスプレイの１つが別のディスプレイに押し込まれると、ディスプレイのコンテンツがグラフィカルに結合されることによって結合され得る。更に、表示されたオブジェクトが選択されて、移動及び／又は制御され得る。
少なくとも１つの表示手段２０がオートステレオスコピック（ａｕｔｏｓｔｅｒｅｏｓｃｏｐｉｃ）ユニットとして設計される場合、表示された３Ｄディスプレイが自由空間における又は検出空間４における車両乗員のジェスチャ及び／又はアクションによって操作され得る。例えば、表示された３Ｄディスプレイの視点が変更され、例えば、回転され得る。
更なる有利な実施形態の変種（図示せず）では、装置１によって、開かれた車両窓及び／又はスライド式サンルーフが監視可能であり、結果として生ずる開口部に配置される車両乗員１０の部位及び／又はオブジェクトがそれぞれ検出され得る。このような開口部における部位及び／又はオブジェクトの検出に応じて、関連する車両窓又はスライド式サンルーフを閉じることが防がれる。
更に有利な実施形態の変種（図示せず）では、装置１によって、車両室内２における動作が監視可能であり、駐車した車両の場合に検出された動作が評価可能であり、車両室内２において望ましくない侵入が識別された場合に従来のアラームシステムに転送され得る。
上記の装置１の使用に関する全ての可能性は、代替的に又は累積的に使用され得る。
１ 装置
２ 車両室内
３ 光検出ユニット
４ 検出領域
５ 照明ユニット
６ 光学要素
７ 光学センサ
８ 駆動電子機器
９ 評価電子機器
１０ 車両乗員
１１ 車両
１２ 計器パネル
１３ ルーフコンソール
１４ 中央コンソール
１５ ドアトリム
１６ ヘッドレスト
１７ 擬似車両室内
１８ 擬似フロントガラス
１９ ハンドル
２０ ディスプレイユニット
２１ 投射ユニット
２２ 投射領域
Ｌ１ 放出された光信号
Ｌ２ 反射された光信号
Ｓ シーン
Ｓ’ 出力されたシーン

Claims (14)

  1. オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置であって、
    前記装置（１）は、車両室内（２）に配置され、少なくとも１つの照明ユニット（５）、ディスプレイユニット（２０）及び光検出ユニット（３）を備え、前記照明ユニット（５）は、少なくとも１つの赤外線レーザから形成されることを特徴とする、装置（１）。
  2. 前記光検出ユニット（３）は、少なくとも１つの光学センサ（７）を備えることを特徴とする、請求項１に記載の装置（１）。
  3. 前記光検出ユニット（３）は、３次元カメラシステムとして設計されることを特徴とする、請求項１又は２に記載の装置（１）。
  4. 前記光検出ユニット（３）によって距離測定のための飛行時間法が実行され得ることを特徴とする、請求項３に記載の装置（１）。
  5. 前記光検出ユニット（３）は、ステレオカメラとして設計されることを特徴とする、請求項１又は２に記載の装置（１）。
  6. 前記少なくとも１つの光学センサ（７）は、光混合検出器として設計されることを特徴とする、請求項１乃至５の何れか１項に記載の装置（１）。
  7. 前記光学センサ（７）は、前記３次元カメラシステム又は前記ステレオカメラに統合され、又はそれらに結合されることを特徴とする、請求項１乃至６の何れか１項に記載の装置（１）。
  8. 前記ディスプレイユニット（２０）は、車両運転者の視野においてヘッドアップディスプレイとして設計されることを特徴とする、請求項１乃至７の何れか１項に記載の装置（１）。
  9. オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する方法であって、
    オブジェクト及び／又は人物及び／又は前記人物によって行われ及び／又は実行されるジェスチャ及び／又は操作手順は、光検出ユニット（３）によって車両室内で３次元的に検出されることを特徴とする、方法。
  10. タッチセンサ式ディスプレイユニット（２０）が装置（１）によってエミュレートされ、前記ディスプレイユニットは、前記ディスプレイユニットが車両運転者又は他の車両乗員（１０）によって操作されるかどうかを区別するために容量性近接法のエミュレーションを可能にすることを特徴とする、請求項９に記載の方法。
  11. 前記ディスプレイユニット（２０）の仮想ディスプレイが、前記車両室内（２）の人物によって行われるアクション及び／又はジェスチャによって、操作され、特に、移動され、交換され、回転され及び／又は制御されることを特徴とする、請求項９又は１０に記載の方法。
  12. ディスプレイユニット（２０）において仮想画像を表示及び操作するための請求項１〜８の何れか１項に記載の装置の使用。
  13. ディスプレイユニット（２０）において生成される仮想操作要素を操作するための請求項１〜８の何れか１項に記載の装置の使用。
  14. 望ましくない侵入に関して車両室内（２）及び／又は車両における開口部を監視及び保護するための請求項１〜８の何れか１項に記載の装置の使用。
JP2014517750A 2011-06-30 2012-06-29 オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置及び方法 Pending JP2014518422A (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
DE102011106058.1 2011-06-30
DE102011106058 2011-06-30
DE102011111103 2011-08-19
DE102011111103.8 2011-08-19
DE102011089195.1 2011-12-20
DE102011089195A DE102011089195A1 (de) 2011-06-30 2011-12-20 Vorrichtung und Verfahren zur berührungslosen Erfassung von Gegenständen und/oder Personen und von diesen ausgeführten Gesten und/oder Bedienvorgängen
PCT/EP2012/062781 WO2013001084A1 (de) 2011-06-30 2012-06-29 Vorrichtung und verfahren zur berührungslosen erfassung von gegenständen und/oder personen und von diesen ausgeführten gesten und/oder bedienvorgängen

Publications (1)

Publication Number Publication Date
JP2014518422A true JP2014518422A (ja) 2014-07-28

Family

ID=47355080

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014517750A Pending JP2014518422A (ja) 2011-06-30 2012-06-29 オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置及び方法

Country Status (7)

Country Link
US (1) US20140195096A1 (ja)
EP (1) EP2726960A1 (ja)
JP (1) JP2014518422A (ja)
KR (1) KR20140041815A (ja)
CN (1) CN103748533A (ja)
DE (1) DE102011089195A1 (ja)
WO (1) WO2013001084A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014196024A (ja) * 2013-03-29 2014-10-16 株式会社デンソーアイティーラボラトリ クラクション発生装置、クラクション発生方法、プログラム及び乗物用入力装置
JP2016150656A (ja) * 2015-02-17 2016-08-22 トヨタ紡織株式会社 動き検出システム
JP2016534343A (ja) * 2013-08-14 2016-11-04 フーフ・ヒュルスベック・ウント・フュルスト・ゲーエムベーハー・ウント・コンパニー・カーゲーＨｕｆ Ｈｕｌｓｂｅｃｋ ＆ Ｆｕｒｓｔ Ｇｍｂｈ ＆ Ｃｏ． Ｋｇ 自動車の操作ジェスチャを認識するためのセンサ構成
JP2017210198A (ja) * 2016-05-27 2017-11-30 トヨタ紡織株式会社 車両用動き検出システム
JP2018503899A (ja) * 2014-12-12 2018-02-08 ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー 発光ユニットの同期作動によって自動車の乗員のジェスチャおよび／または視線方向を認識するための取込装置、操作装置、自動車、ならびに方法

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9873308B2 (en) * 2012-01-17 2018-01-23 Koninklijke Philips N.V. Heating system for heating a living being
DE102012205217B4 (de) * 2012-03-30 2015-08-20 Ifm Electronic Gmbh Informationsanzeigesystem mit einer virtuellen Eingabezone
DE102012205212B4 (de) * 2012-03-30 2015-08-20 Ifm Electronic Gmbh Informationsanzeigesystem mit einer virtuellen Eingabezone sowie Verfahren zum Betreiben eines Informationsanzeigesystems
DE102013000069B4 (de) * 2013-01-08 2022-08-11 Audi Ag Kraftfahrzeug-Bedienschnittstelle mit einem Bedienelement zum Erfassen einer Bedienhandlung
DE102013000080B4 (de) * 2013-01-08 2015-08-27 Audi Ag Aktivierung einer Kraftfahrzeugfunktion mittels eines optischen Sensors
DE102013000085A1 (de) * 2013-01-08 2014-07-10 Audi Ag Verfahren zum Wechseln eines Betriebsmodus eines Infotainmentsystems eines Kraftfahrzeugs
DE102013000071B4 (de) * 2013-01-08 2015-08-13 Audi Ag Synchronisieren von Nutzdaten zwischen einem Kraftfahrzeug und einem mobilen Endgerät
DE102013000072A1 (de) * 2013-01-08 2014-07-10 Audi Ag Bedienschnittstelle für eine handschriftliche Zeicheneingabe in ein Gerät
DE102013000083A1 (de) * 2013-01-08 2014-07-10 Audi Ag Kraftfahrzeug mit einer personenspezifischen Bedienschnittstelle
DE102013000066A1 (de) * 2013-01-08 2014-07-10 Audi Ag Zoomen und Verschieben eines Bildinhalts einer Anzeigeeinrichtung
DE102013100521A1 (de) * 2013-01-18 2014-07-24 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensoranordnung zur Erfassung von Bediengesten an Fahrzeugen
DE102013100522A1 (de) 2013-01-18 2014-08-07 Huf Hülsbeck & Fürst Gmbh & Co. Kg Universelle Sensoranordnung zur Erfassung von Bediengesten an Fahrzeugen
DE102013203925B4 (de) * 2013-03-07 2015-10-22 Ifm Electronic Gmbh Steuersystem für Fahrzeugscheinwerfer
DE102013007980B4 (de) 2013-05-10 2017-10-05 Audi Ag Abtasten eines Innenraums eines Kraftfahrzeugs
DE102013009567B4 (de) 2013-06-07 2015-06-18 Audi Ag Verfahren zum Betreiben einer Gestenerkennungseinrichtung sowie Kraftfahrzeug mit räumlich beschränkter Gestenerkennung
DE102013010018B3 (de) * 2013-06-14 2014-12-04 Volkswagen Ag Kraftfahrzeug mit einem Fach zum Aufbewahren eines Gegenstands sowie Verfahren zum Betreiben eines Kraftfahrzeugs
DE102013011533B4 (de) 2013-07-10 2015-07-02 Audi Ag Erfassungsvorrichtung zum Bestimmen einer Position eines Objekts in einem Innenraum eines Kraftfahrzeugs
CN104281254A (zh) * 2013-07-12 2015-01-14 上海硅通半导体技术有限公司 一种手势识别装置
DE102013012466B4 (de) * 2013-07-26 2019-11-07 Audi Ag Bediensystem und Verfahren zum Bedienen einer fahrzeugseitigen Vorrichtung
DE102013108093A1 (de) 2013-07-29 2015-01-29 evolopment UG (haftungsbeschränkt) Vorrichtung zur Bedienung eines beweglichen Schiebeelementes
DE102013013225B4 (de) * 2013-08-08 2019-08-29 Audi Ag Kraftfahrzeug mit umschaltbarer Bedieneinrichtung
DE102013013697B4 (de) 2013-08-16 2021-01-28 Audi Ag Vorrichtung und Verfahren zum Eingeben von Schriftzeichen im freien Raum
CN103488355B (zh) * 2013-10-16 2016-08-17 广东威创视讯科技股份有限公司 一种视频窗打开方法及系统、激光笔
DE102013019925B4 (de) 2013-11-22 2021-01-28 Audi Ag Kamerasystem und Verfahren zum Betreiben eines solchen Systems sowie Fahrzeug
DE102013021927A1 (de) 2013-12-20 2015-06-25 Audi Ag Verfahren und System zum Betreiben einer Anzeigeeinrichtung sowie Vorrichtung mit einer Anzeigeeinrichtung
US11161457B2 (en) 2014-04-03 2021-11-02 SMR Patents S.à.r.l. Pivotable interior rearview device for a motor vehicle
EP2927780A1 (de) * 2014-04-03 2015-10-07 SMR Patents S.à.r.l. Schwenkbarer Innenspiegel für ein Fahrzeug
US20150288948A1 (en) * 2014-04-08 2015-10-08 Tk Holdings Inc. System and method for night vision object detection and driver assistance
KR101519290B1 (ko) * 2014-04-09 2015-05-11 현대자동차주식회사 차량용 헤드 업 디스플레이 제어방법
FR3026502A1 (fr) * 2014-09-30 2016-04-01 Valeo Comfort & Driving Assistance Systeme et procede de commande d'un equipement d'un vehicule automobile
DE202015105611U1 (de) * 2014-10-22 2015-11-09 Visteon Global Technologies, Inc. Vorrichtung zur Gestensteuerung in einem Fahrzeug
FR3028221B1 (fr) * 2014-11-12 2018-03-16 Psa Automobiles Sa. Interface homme/machine et procede de controle de fonctions d’un vehicule par detection de mouvement et/ou d’expression du conducteur
DE102014223629A1 (de) * 2014-11-19 2016-05-19 Bayerische Motoren Werke Aktiengesellschaft Kamera in einem Fahrzeug
DE102015201456B4 (de) * 2015-01-28 2016-12-15 Volkswagen Aktiengesellschaft Verfahren und System zur Ausgabe einer Warnmeldung in einem Fahrzeug
DE102015201901B4 (de) 2015-02-04 2021-07-22 Volkswagen Aktiengesellschaft Bestimmung einer Position eines fahrzeugfremden Objekts in einem Fahrzeug
US9845103B2 (en) 2015-06-29 2017-12-19 Steering Solutions Ip Holding Corporation Steering arrangement
DE102015113841A1 (de) 2015-08-20 2017-02-23 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensorsystem einer Sensoreinrichtung eines Kraftfahrzeugs
DE102015114016A1 (de) 2015-08-24 2017-03-02 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensoreinrichtung zur optischen Erfassung von Betätigungsgesten
DE102015115098A1 (de) 2015-09-08 2017-03-09 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensoreinrichtung zur optischen Erfassung von Betätigungsgesten
DE102015115101A1 (de) 2015-09-08 2017-03-09 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensorsystem einer Sensoreinrichtung eines Kraftfahrzeugs
DE102015115096A1 (de) 2015-09-08 2017-03-09 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensoranordnung zur optischen Erfassung von Bediengesten an Fahrzeugen
DE102015115558A1 (de) 2015-09-15 2017-03-16 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensoreinrichtung zur optischen Erfassung von Betätigungsgesten
DE102015117967A1 (de) 2015-10-21 2017-04-27 Huf Hülsbeck & Fürst Gmbh & Co. Kg Sensoreinrichtung zur optischen Erfassung von Bedienungsgesten an Fahrzeugen und Verfahren zum Betreiben der Sensoreinrichtung
US9834121B2 (en) 2015-10-22 2017-12-05 Steering Solutions Ip Holding Corporation Tray table, steering wheel having tray table, and vehicle having steering wheel
US10322682B2 (en) 2016-03-03 2019-06-18 Steering Solutions Ip Holding Corporation Steering wheel with keyboard
US9821726B2 (en) * 2016-03-03 2017-11-21 Steering Solutions Ip Holding Corporation Steering wheel with keyboard
DE102016216577A1 (de) 2016-09-01 2018-03-01 Volkswagen Aktiengesellschaft Verfahren zur Interaktion mit Bildinhalten, die auf einer Anzeigevorrichtung in einem Fahrzeug dargestellt werden
US10144383B2 (en) 2016-09-29 2018-12-04 Steering Solutions Ip Holding Corporation Steering wheel with video screen and airbag
US10239381B2 (en) * 2017-01-23 2019-03-26 TSI Products, Inc. Vehicle roof fan
US10252688B2 (en) 2017-03-22 2019-04-09 Ford Global Technologies, Llc Monitoring a vehicle cabin
TW201908169A (zh) * 2017-07-19 2019-03-01 大陸商上海蔚蘭動力科技有限公司 汽車電子裝置控制系統及控制方法
FR3069657A1 (fr) * 2017-07-31 2019-02-01 Valeo Comfort And Driving Assistance Dispositif optique pour l'observation d'un habitacle de vehicule
FR3075402B1 (fr) * 2017-12-20 2021-01-08 Valeo Comfort & Driving Assistance Dispositif de visualisation d'un habitacle de vehicule, habitacle et procede de visualisation associes
DE102018111239A1 (de) * 2018-05-09 2019-11-14 Motherson Innovations Company Limited Vorrichtung und Verfahren zum Betreiben einer Objekterkennung für den Innenraum eines Kraftfahrzeugs sowie ein Kraftfahrzeug
EP3659862B1 (en) 2018-11-27 2021-09-29 SMR Patents S.à.r.l. Pivotable interior mirror for a motor vehicle
DE102018132683A1 (de) 2018-12-18 2020-06-18 Huf Hülsbeck & Fürst Gmbh & Co. Kg Pixelstruktur zur optischen abstandsmessung an einem objekt und zugehöriges abstandserfassungssystem
DE102019129797A1 (de) * 2019-11-05 2021-05-06 Valeo Schalter Und Sensoren Gmbh Dachbedienvorrichtung, Dachbediensystem, Verwendung einer Dachbedienvorrichtung und Fahrzeug mit einer Dachbedienvorrichtung
US11556175B2 (en) 2021-04-19 2023-01-17 Toyota Motor Engineering & Manufacturing North America, Inc. Hands-free vehicle sensing and applications as well as supervised driving system using brainwave activity

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005138755A (ja) * 2003-11-07 2005-06-02 Denso Corp 虚像表示装置およびプログラム
JP2005280526A (ja) * 2004-03-30 2005-10-13 Tdk Corp 車両用カメラ装置、これを用いた車両警報システム及び車両警報方法
JP2006285370A (ja) * 2005-03-31 2006-10-19 Mitsubishi Fuso Truck & Bus Corp ハンドパターンスイッチ装置及びハンドパターン操作方法
WO2008149482A1 (ja) * 2007-06-05 2008-12-11 Mitsubishi Electric Corporation 車両用操作装置
JP2008545571A (ja) * 2005-05-20 2008-12-18 ボーズ・コーポレーション 車両情報の表示方法
JP2010510918A (ja) * 2006-11-27 2010-04-08 カール ツアイス マイクロイメージング ゲゼルシャフト ミット ベシュレンクテル ハフツング 自動車を操縦するための方法および配置
JP2010122183A (ja) * 2008-11-21 2010-06-03 Sanyo Electric Co Ltd 物体検出装置および情報取得装置
WO2010113397A1 (ja) * 2009-03-31 2010-10-07 三菱電機株式会社 表示入力装置
JP2011090645A (ja) * 2009-10-26 2011-05-06 Yupiteru Corp 車両用録画装置
JP2011117849A (ja) * 2009-12-03 2011-06-16 Sanyo Electric Co Ltd 物体検出装置および情報取得装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE59905312D1 (de) * 1999-02-25 2003-06-05 Siemens Ag Verfahren und Vorrichtung zum Erzeugen eines Positionsbildes eines Strahlung reflektierenden oder Strahlung streuenden Objekts oder einer Strahlung reflektierenden oder Strahlung streuenden Person
EP1031477B1 (de) * 1999-02-25 2004-09-08 Siemens Aktiengesellschaft Vorrichtung und Verfahren zum Erfassen eines Objektes oder einer Person im Innenraum eines Fahrzeugs
DE10158415C2 (de) * 2001-11-29 2003-10-02 Daimler Chrysler Ag Verfahren zur Überwachung des Innenraums eines Fahrzeugs, sowie ein Fahrzeug mit mindestens einer Kamera im Fahrzeuginnenraum
CN101090482B (zh) * 2006-06-13 2010-09-08 唐琎 一种基于图象处理和信息融合技术的驾驶员疲劳监测系统及方法
US9645968B2 (en) * 2006-09-14 2017-05-09 Crown Equipment Corporation Multiple zone sensing for materials handling vehicles
US8452464B2 (en) * 2009-08-18 2013-05-28 Crown Equipment Corporation Steer correction for a remotely operated materials handling vehicle
US8589033B2 (en) * 2007-01-11 2013-11-19 Microsoft Corporation Contactless obstacle detection for power doors and the like
DE102007028645A1 (de) 2007-06-21 2009-01-02 Siemens Ag Anordnung und Verfahren zur Steuerung von Geräteeinheiten
IL184868A0 (en) * 2007-07-26 2008-03-20 Univ Bar Ilan Motion detection system and method
DE102008005106B4 (de) * 2008-01-14 2023-01-05 Bcs Automotive Interface Solutions Gmbh Bedienvorrichtung für ein Kraftfahrzeug
US8259163B2 (en) * 2008-03-07 2012-09-04 Intellectual Ventures Holding 67 Llc Display with built in 3D sensing
DE102009032069A1 (de) * 2009-07-07 2011-01-13 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer Benutzerschnittstelle in einem Fahrzeug

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005138755A (ja) * 2003-11-07 2005-06-02 Denso Corp 虚像表示装置およびプログラム
JP2005280526A (ja) * 2004-03-30 2005-10-13 Tdk Corp 車両用カメラ装置、これを用いた車両警報システム及び車両警報方法
JP2006285370A (ja) * 2005-03-31 2006-10-19 Mitsubishi Fuso Truck & Bus Corp ハンドパターンスイッチ装置及びハンドパターン操作方法
JP2008545571A (ja) * 2005-05-20 2008-12-18 ボーズ・コーポレーション 車両情報の表示方法
JP2010510918A (ja) * 2006-11-27 2010-04-08 カール ツアイス マイクロイメージング ゲゼルシャフト ミット ベシュレンクテル ハフツング 自動車を操縦するための方法および配置
WO2008149482A1 (ja) * 2007-06-05 2008-12-11 Mitsubishi Electric Corporation 車両用操作装置
JP2010122183A (ja) * 2008-11-21 2010-06-03 Sanyo Electric Co Ltd 物体検出装置および情報取得装置
WO2010113397A1 (ja) * 2009-03-31 2010-10-07 三菱電機株式会社 表示入力装置
JP2011090645A (ja) * 2009-10-26 2011-05-06 Yupiteru Corp 車両用録画装置
JP2011117849A (ja) * 2009-12-03 2011-06-16 Sanyo Electric Co Ltd 物体検出装置および情報取得装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
加茂 浩之 HIROYUKI KAMO: "Air surface:拡張現実感を用いた仮想タッチパネルインタフェース", 第７３回（平成２３年）全国大会講演論文集（４） インタフェース コンピュータと人間社会, JPN6014055148, 2 March 2011 (2011-03-02), pages 4 - 299, ISSN: 0002975836 *
池内 克史 KATSUSHI IKEUCHI, ３次元デジタルアーカイブ 初版 3D DIGITAL ARCHIVING, vol. 第1版, JPN6014055150, 10 November 2010 (2010-11-10), pages 18 - 21, ISSN: 0002975837 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014196024A (ja) * 2013-03-29 2014-10-16 株式会社デンソーアイティーラボラトリ クラクション発生装置、クラクション発生方法、プログラム及び乗物用入力装置
JP2016534343A (ja) * 2013-08-14 2016-11-04 フーフ・ヒュルスベック・ウント・フュルスト・ゲーエムベーハー・ウント・コンパニー・カーゲーＨｕｆ Ｈｕｌｓｂｅｃｋ ＆ Ｆｕｒｓｔ Ｇｍｂｈ ＆ Ｃｏ． Ｋｇ 自動車の操作ジェスチャを認識するためのセンサ構成
JP2018503899A (ja) * 2014-12-12 2018-02-08 ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー 発光ユニットの同期作動によって自動車の乗員のジェスチャおよび／または視線方向を認識するための取込装置、操作装置、自動車、ならびに方法
JP2016150656A (ja) * 2015-02-17 2016-08-22 トヨタ紡織株式会社 動き検出システム
JP2017210198A (ja) * 2016-05-27 2017-11-30 トヨタ紡織株式会社 車両用動き検出システム

Also Published As

Publication number Publication date
DE102011089195A1 (de) 2013-01-03
US20140195096A1 (en) 2014-07-10
KR20140041815A (ko) 2014-04-04
CN103748533A (zh) 2014-04-23
EP2726960A1 (de) 2014-05-07
WO2013001084A1 (de) 2013-01-03

Similar Documents

Publication Publication Date Title
JP2014518422A (ja) オブジェクト及び／又は人物及びそれによって行われ及び／又は実行されるジェスチャ及び／又は操作手順を非接触式に検出する装置及び方法
US11503251B2 (en) Vehicular vision system with split display
KR101367593B1 (ko) 쌍방향 조작 장치 및 쌍방향 조작 장치의 작동 방법
US10821925B2 (en) Apparatus and method for assisting a user
US10591723B2 (en) In-vehicle projection display system with dynamic display area
US9513744B2 (en) Control systems employing novel physical controls and touch screens
US8994676B2 (en) Method for operating a control device, and control device
US20160132126A1 (en) System for information transmission in a motor vehicle
CN108136908B (zh) 用于在车辆中操作至少一个功能的方法和操作系统
KR101946746B1 (ko) 차량에서 비-차량 오브젝트의 위치 결정
CN111148649B (zh) 适于车辆的虚拟人机接口系统以及相应的虚拟人机接口方法
JP2014229997A (ja) 車両用表示装置
KR20120049249A (ko) 차량에서 사용자 인터페이스를 제공하는 방법 및 장치
US10482667B2 (en) Display unit and method of controlling the display unit
CN111556281B (zh) 车用安全系统及其操作方法
US20130054048A1 (en) Vehicle control system
JP5549571B2 (ja) 車内状況表示装置
JP4720979B2 (ja) 車両用監視装置
JP2007062668A (ja) 車両用入力装置
WO2018230526A1 (ja) 入力システム、および入力方法
CN114144325A (zh) 光学机构和方法
KR20200046140A (ko) 차량 및 그 제어방법
JP2017178025A (ja) 運転支援装置
US11995253B1 (en) Systems with deployable controllers and user identification
JP2009166662A (ja) 車両用情報表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150401

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150804