JP6723983B2 - 慣性センサを利用するドライバ支援システム - Google Patents

慣性センサを利用するドライバ支援システム Download PDF

Info

Publication number
JP6723983B2
JP6723983B2 JP2017506787A JP2017506787A JP6723983B2 JP 6723983 B2 JP6723983 B2 JP 6723983B2 JP 2017506787 A JP2017506787 A JP 2017506787A JP 2017506787 A JP2017506787 A JP 2017506787A JP 6723983 B2 JP6723983 B2 JP 6723983B2
Authority
JP
Japan
Prior art keywords
controller
host vehicle
image data
vehicle
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017506787A
Other languages
English (en)
Other versions
JP2017530896A (ja
Inventor
クリストファー エイ ピーターソン
クリストファー エイ ピーターソン
ジョン シー ピーターソン
ジョン シー ピーターソン
Original Assignee
ジェンテックス コーポレイション
ジェンテックス コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ジェンテックス コーポレイション, ジェンテックス コーポレイション filed Critical ジェンテックス コーポレイション
Publication of JP2017530896A publication Critical patent/JP2017530896A/ja
Application granted granted Critical
Publication of JP6723983B2 publication Critical patent/JP6723983B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/06Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle
    • B60Q1/08Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically
    • B60Q1/085Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically due to special conditions, e.g. adverse weather, type of road, badly illuminated road signs or potential dangers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/06Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle
    • B60Q1/08Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically
    • B60Q1/10Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically due to vehicle inclination, e.g. due to load distribution
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/14Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
    • B60Q1/1415Dimming circuits
    • B60Q1/1423Automatic dimming circuits, i.e. switching between high beam and low beam due to change of ambient light or light level in road traffic
    • B60Q1/143Automatic dimming circuits, i.e. switching between high beam and low beam due to change of ambient light or light level in road traffic combined with another condition, e.g. using vehicle recognition from camera images or activation of wipers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/10Indexing codes relating to particular vehicle conditions
    • B60Q2300/11Linear movements of the vehicle
    • B60Q2300/112Vehicle speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/10Indexing codes relating to particular vehicle conditions
    • B60Q2300/11Linear movements of the vehicle
    • B60Q2300/114Vehicle acceleration or deceleration
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/10Indexing codes relating to particular vehicle conditions
    • B60Q2300/13Attitude of the vehicle body
    • B60Q2300/132Pitch
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/41Indexing codes relating to other road users or special conditions preceding vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/42Indexing codes relating to other road users or special conditions oncoming vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)
  • Traffic Control Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本開示は、運転強化のための車両用物体検出に関する。
一実施形態では、本開示は、車両制御システム用画像データの処理機能を調整するよう構成された装置に関する。装置は、視野に対応する画像データを捕捉するよう構成された画像センサを備える。画像センサは、コントローラと通信し、コントローラはさらに慣性センサと通信する。コントローラは、画像センサから画像データを受信し、慣性センサから方向信号を受信するよう動作可能である。方向信号は、画像センサに対する重力方向を特定するために利用され得る。
コントローラは、標的車両の少なくとも1つの特性用の画像データを走査するよう構成された機能を開始するよう動作可能である。方向信号に基づいて、コントローラは、画像データの視野の基点をオフセットし、調整された基点を生成するよう動作可能である。その後、調整された基点が、コントローラの少なくとも1つの処理機能を向上するために利用され、画像データの特性を特定する。本明細書に記載の様々な実施形態は、効果的かつ正確に標的車両を特定するよう構成される、改良されたシステム及び方法を提供し得る。
本発明のこれら及びその他の特徴、利点、及び目的は、以下の明細書、特許請求の範囲、及び添付図面を参照することにより、当業者によってさらに理解及び認識される。
インテリジェントヘッドライトシステムを備えるホスト車両の環境視野である。
インテリジェントヘッドライトシステムから受信した画像データの基点のずれを説明する図である。
丘の頂上から接近するホスト車両の環境視野である。
谷に接近するホスト車両の環境視野である。
加速度計の測定値のグラフィック表示である。
加速度計の測定値のグラフィック表示である。
インテリジェントヘッドライトシステムを制御するよう構成される、コントローラのブロック図である。
本書での説明の目的で、「上側」、「下側」、「右」、「左」、「後部」、「前部」、「垂直」、「水平」といった用語、及びそこから派生したものは、図1Aで方向付けられたような装置に関連する。ただし、それに反して明示的に特定された場合を除き、この装置がこれとは異なる様々な向き及び段階の順序をとることができると理解される。また、当然のことながら、添付した図表に図示し、以下の明細書で説明した特定の装置及びプロセスは、添付した特許請求の範囲に定義された発明の概念の単なる模範的実施形態にすぎない。よって、特許請求の範囲でそうでないことが明示的に述べられていない限り、本書で開示された実施形態に関連する具体的な寸法及びその他の物理的特性は、制限的なものとはみなされない。
図1Aを参照すると、コントローラ12のための動作環境10が示されている。コントローラ12は、例えば、ドライバ支援システムなど、1つまたは複数のシステムに対する少なくとも1つの制御信号を出力するよう動作可能であり得る。例示的な実施形態では、ドライバ支援システムが、ヘッドライトシステム14に対応し得る。ヘッドライトシステム14を参照して論じるが、コントローラ12は、車線逸脱警報システム、衝突検知システム、車両誘導システムなどを含むがそれらに限定されない、車両システムのための1つまたは複数の制御信号を出力するために利用され得る。
ヘッドライトシステム14は、例えば、ホスト車両18の複数のヘッドランプ16のそれぞれのハイビームまたはロービームなどの、照明パターンを調整するよう構成される。コントローラ12は、視野22に対応するデータを捕捉するよう構成される、画像センサ20と通信する。当該データに基づいて、コントローラ12は、標的車両26に対応する少なくとも1つの特性24を検出するよう動作可能である。当該少なくとも1つの特性24を検出することに応答して、コントローラ12は、複数のヘッドランプ16の照明パターンを制御するよう構成される。このように、ヘッドライトシステム14は、標的車両26へ向けられる閃光28を制限すると同時に、ホスト車両18からの環境の照明10が安全に維持されることを確実にするよう動作可能である。
標的車両26を特定するために用いられる特徴24は、例えば、1つまたは複数のヘッドランプ、テールランプ、走行ランプなどの、光源のことを指し得る。コントローラ12は、少なくとも1つの特徴24を特定することにより、さらに経時的に当該少なくとも1つの特徴24の動き及び/または振る舞いを特定することにより、標的車両26を検出するよう動作可能である。少なくとも1つの特徴24の動きは、一時的な期間に対応する一連の画像データにおける特徴24の相対的位置に基づいて判定され得る。例えば、コントローラ12は、一連の画像データにおける標的ヘッドランプ30の相対的な位置に基づいて、標的車両26の複数の標的ヘッドランプ30を特定するよう動作可能である。
コントローラ12は、視野22の中でのそれらの位置に基づいて、標的ヘッドランプ30をさらに特定し得る。視野22の中での標的ヘッドランプ30または少なくとも1つの特徴24の位置及び対応する動きに基づいて、コントローラ12は、当該少なくとも1つの特徴24が標的車両26または非標的光源のいずれに合致するかを判定するよう動作可能である。一部の実施形態では、コントローラ12は、特徴24の検出を向上するため、及び/または、標的車両26が堅実及び正確に特定され得ることを保証するため、視野22及び/または視野22の基点ないし水平線に合致する画像データの処理ウィンドウを調整するよう動作可能である。
ここで、図1A及び図1Bを参照すると、コントローラ12は、少なくとも1つの特徴24の検出を向上するため、動作環境10の丘の瞬間の傾斜31を特定するよう動作可能である。さらに、検出は、誤検出を制限するべく、視野22に対応する画像センサ20からのデータをフィルタに掛けることをヘッドライトシステム14に提供し得る。誤検出は、本明細書で論じるように、非標的光源に合致し得る。動作環境10の傾斜に基づいて、コントローラ12は、標的車両26を効率的に特定するため、画像センサ20の画像データ33のほぼ水平または基点32を調整するよう、及び/または、画像データ33の処理ウィンドウ34を調整するよう構成される。このようにして、コントローラ12は、標的車両26を検出する効率及び正確さを向上し得る。
一例示的な実施形態では、コントローラ12は、慣性センサ72(図3)と通信する。慣性センサは、ヘッドライトシステム14に組み込まれ得るか、または、本明細書で論じられるように慣性センサを備える任意の車両システムからコントローラ12への1つまたは複数の入力を介して、ヘッドライトシステム14と通信し得る。一部の実施形態では、コントローラ12は、車両の動作を支援するよう(例えば、衝突検知、車両誘導など)動作可能な車線逸脱警報システムまたは任意の形態のドライバ支援システムと、さらに通信可能、及び/または、組み合わせられ得る。そのような実施形態では、視野22の基点32及び/または処理ウィンドウ34は、慣性センサ72から受信された信号に応答して、コントローラ12により同様に調整され得る。慣性センサ72及びコントローラ12と通信するヘッドライトシステム14のブロック図が、図3を参照して論じられる。
慣性センサ72は、重力方向に対するホスト車両18の方向を測定する、及び/または、追跡するよう構成され得る様々な装置に対応し得る。例えば、慣性センサ72は、加速度計、ジャイロスコープ、慣性測定装置(IMU)、及び、ホスト車両18の方向を特定するために利用され得る測定値を生成するよう動作可能であり得る他のセンサ、に対応し得る。加速度計は、複数の軸に沿ってホスト車両の加速度を測定するよう構成された、多軸加速度計に対応し得る。加速度計からの出力は、コントローラ12がホスト車両18の指向性の加速度を特定できるようにコントローラ12に信号を提供することができ、かつ、ホスト車両18の方向を特定するため重力の方向を提供することができる。
ジャイロスコープは、ホスト車両18の回転を測定するよう構成され得る。ジャイロスコープは、コントローラ12と通信可能で、ホスト車両18の回転速度の変化に基づいて、方向を通信する信号を出力するよう構成され得る。ジャイロスコープからの信号は、幾らかのフィルタリング及び校正またはオフセットを必要とし得るが、ホスト車両18の方向の堅実な表示を提供し得る。このようにして、コントローラは、ホスト車両18の回転または方向を判定するためにジャイロスコープを利用し得て、ホスト車両18が、丘にいるのか、谷を走っているのか、あるいはいずれの方向に向かっているのか、を特定し得る。
一部の実施形態では、慣性センサ72は、車両の付属品に組み入れられ得る。一部の付属品は、リアビュー表示装置36、オーバーヘッドコンソールインターフェース、サイドミラー、及び、他の様々なホスト車両18の装置、を含み得る。一例示的な実施形態では、慣性センサ72は、リアビュー表示装置36及び/またはミラーの画像センサ20に組み入れられ得る。コントローラ12は、リアビュー表示装置36の特定の方向に基づいて、慣性センサ72の測定値を校正及び/またはオフセットするよう動作可能であり得る。校正は、重力方向40に対してホスト車両18の法線ベクトル38を調整(整列)し得る。このようにして、コントローラ12は、ホスト車両18の法線ベクトル38に対する重力方向40を常時監視し得る。
ホスト車両18の方向及び/または回転がコントローラ12により特定されると、コントローラ12は、ホスト車両18の方向の情報を利用して、画像センサ20からの画像データを処理し得る。例えば、コントローラ12は、当該方向の情報に基づいて、画像データの処理ウィンドウまたは画像データの一部をオフセットし得る。このようにして、コントローラ12は、画像センサ20からの画像データを処理して、画像データ内の物体を効率的かつ正確に特定し得る。コントローラ12は、前記方向の情報に基づいて、少なくとも一つの対象となる物体を含みそうな画像データを処理することにより、効率及び正確さを向上し得る。
一部の実施形態では、慣性センサ72が、例えば、IMUなど、加速度計及びジャイロスコープを備えるハイブリッド装置に対応し得る。そのような実施形態では、ハイブリッド加速度計/ジャイロスコープは、ホスト車両18の方向を判定するうえで、向上した正確さをさらに提供し得る。そのような実施形態では、加速度計は、いつホスト車両18が加速しているかを判定するためコントローラ12により利用され得る。また、加速度計は、重力に基づいて、ホスト車両18の角度の方向を計算するために利用され得る。さらに、コントローラは、ジャイロスコープからの方向情報を利用して、校正/オフセットに対するホスト車両18の回転を特定し得る。このようにして、ノイズが、ホスト車両18の速度変化及び回転変化を正確に特定するために、速度計及びジャイロスコープからの方向の情報または加速信号から、取り除かれ得る。
一部の実施形態では、慣性センサ72は、車両の付属品に組み入れられ得る。一部の付属品は、リアビュー表示装置36、オーバーヘッドコンソールインターフェース、サイドミラー、及び、他の様々なホスト車両18の装置、を含み得る。一例示的な実施形態では、慣性センサ72は、リアビュー表示装置36及び/またはミラーの画像センサ20に組み入れられ得る。コントローラ12は、重力方向40に対してホスト車両18の法線ベクトル38を調整するために、リアビュー表示装置36の特定の方向に基づいて、慣性センサ72の加速測定値を校正、及び/または、オフセットするよう動作可能であり得る。このようにして、コントローラ12は、ホスト車両18の法線ベクトル38に対する重力方向40を常時監視し得る。
図1A及び図1Bをさらに参照して、視野22に対応するデータまたは画像データに基づいて、コントローラ12は、標的車両26と、近づいてくる車両の誤検出に対応し得る複数の非標的物体と、の間を区別するよう動作可能である。非標的物体は、例えば、標識、交通信号、街灯、反射鏡、ヘッドランプの反射など、ホスト車両18が走っている道路の近くで特定され得る任意の物体に対応し得る。コントローラ12は、少なくとも部分的に、水平線及び/または基点32の位置を調整し、かつ標的車両26が視野22内で検出され得る処理ウィンドウ34を調整することにより、非標的物体の検出または標的車両26の不正確な検出を制限するよう、動作可能である。
視野22の処理ウィンドウ34を調整することにより、コントローラ12により走査される画像データを制限及び/または優先付けして、ホスト車両18に対する重力の向きまたは方向に基づいて、標的車両26及び任意の近づいてくる車両が予想されるデータに集中(focus)することができる。視野22の基点32を調整すること、及び/または、処理ウィンドウ34を調整することにより、コントローラ12は、近づいてくる車両に対応する特徴を効率的かつ正確に特定するために画像データを走査し得て、例えば、ホスト車両18のヘッドライトシステム14など、様々なドライバ支援システムを制御し得る。処理ウィンドウ34及び/または基点32を調整することにより、コントローラ12は、ホスト車両18の法線ベクトル38に対する重力方向40に基づいて走査するための画像データ33の最も関連する部分を判定するよう動作可能である。
標的車両26を特定することは、複数の処理方法によってコントローラ12により達成され得る。例えば、標的車両26は、画像データ33内の少なくとも1つの特徴24(例えば、標的ヘッドランプ30)を検出すること、及び、画像センサ20から受信される連続する画像または画像データ内のヘッドランプ30の動きを特定することにより、非標的物体から区別され得る。本明細書で論じられる標的車両26と類似の車両の検出は、当該参照によりその全体が本明細書に組み入れられる、Joseph S.Stam等の2001年3月5日出願の「IMAGE PROCESSING SYSTEM TO CONTROL VEHICLE HEADLAMPS OR OTHER VEHICLE EQUIPMENT」と題する米国特許出願番号第09/799,310(現在、米国特許第6,631,316号)、Joseph S.Stam等の2005年3月15日出願の「IMAGE PROCESSING SYSTEM TO CONTROL VEHICLE HEADLAMPS OR OTHER VEHICLE EQUIPMENT」と題する米国特許第6,868,322号、及び、Joseph S.Stam等の2009年11月3日出願の「VEHICLE AUTOMATIC EXTERIOR LIGHT CONTROL」と題する米国特許第7,613,327号、にさらに記載されている。
本明細書で論じられるように、コントローラ12は、慣性センサ72から加速信号または方向情報を受信するよう構成される。加速信号及び/または方向情報に基づいて、コントローラ12は、重力方向40に対するホスト車両の方向を判定するよう構成され得る。図1Aに示される実施例では、ホスト車両18は、丘31を上っている。ホスト車両が丘31を登ると、慣性センサ72は、丘31の傾斜と一致する重力方向Δ及び/または方向情報の変化を通信する。この検出は、加速度データまたは方向データの複数のサンプルにわたる重力方向の変化に基づいて、特定され得る。一部の実施形態では、コントローラ12は、加速度計の第1軸42及び第2軸44に対する複数の加速度データのサンプルを受信するよう構成され得る。さらに、当該検出は、ジャイロスコープの回転速度に対応する方向信号に基づいて特定され得る。
一部の実施形態では、複数のサンプルにわたる重力方向が、当該重力方向を特定するためコントローラ12により平均され得る。重力の平均方向は、ホスト車両18の十分な運転中の水準面に対応し得る。コントローラ12により判定される重力方向は、運転を通して保存され、かつ更新されて、ホスト車両18の法線ベクトル38に対する慣性センサ72の方向の調整を補償し得る。これは、リアビュー表示装置36に慣性センサ72を組み込む実施形態では、特に有用であり得る。さらに、一部の実施形態では、種々のフィルタリング及び信号処理技術が、ホスト車両18の方向を判定するために利用される1つまたは複数の信号の完全性及び/または品質を向上するために利用され得る。
重力方向及び/またはホスト車両18の方向が特定されたら、重力方向Δの変化を示す傾向が、フィルタリング閾値を超える重力方向の移動に基づいて検出され得る。この変化は、画像センサ20から受信される各画像に対してコントローラ12により更新され得る。フィルタリング閾値は、重力の方向の移動が、最低傾斜値を超え、及び/または、所定の時間、傾斜の変化を維持することを要求し得る。フィルタリング閾値は、コントローラ12の性能に普通なら影響を与え得る信号ノイズ及び隆起の影響を制限するよう機能し得る。
重力方向Δ及び/またはホスト車両18の方向の変化がホスト車両18の法線ベクトル38に対して判定されると、センサデータの水平線または基点32が、重力方向Δの変化の角度に対して視野22内で調整され得る。例えば、画像センサ20からの画像データ33に対応する基点32または水平線は、ホスト車両18が丘31を上っていることを表す重力方向Δの変化に基づいた下方向移動46により調整され得る。コントローラ12は、ホスト車両18の後方部に向けて移動された重力方向Δの変化に応答して、画像データ33の基点32を下方向へ移動し得る。このようにして、コントローラ12は、標的車両26を正確に検出するため、調整された処理ウィンドウ34内で標的車両26の少なくとも1つの特徴24を探索するよう動作可能である。コントローラ12は、標的車両26が特定されると、ヘッドランプ16のレベルまたは照準を調節して、ヘッドランプ16から発せられる閃光が標的車両26の運転者を混乱させないことを保証する、というように構成されている。
基点32の下方向移動46は、重力方向Δの変化を測定することによって、丘31の傾斜の程度または等級に対して増大し得る。基点32を調整することで、コントローラ12が標的車両26の少なくとも1つの特徴24を検出するよう動作可能な正確さ及び効率が、増大され得る。この増大(向上)は、標的車両26が位置しそうであり得る視野22のおよその領域でコントローラ12が動作可能であることによるものであり得る。ヘッドライトシステム14は、加速度データを利用することで標的車両26の検出を向上するために、視野22に対する画像データ33の処理ウィンドウ34及び/または基点32を調整する。
一部の実施形態では、ホスト車両18の方向及び/または重力方向Δが、コントローラ12と通信するホスト車両18のためのいずれのシステムにも使用され得る。そのようなシステムは、様々な視覚及び/またはドライバ支援システムを含むことができ、画像センサを組み入れてもよく、及び/または、画像データを処理するよう構成されていてもよい。そのようなシステムは、法線ベクトル38に対する重力方向Δ及び/またはホスト車両18の方向を利用して、物体識別及び/または検索ルーチンのうちの少なくとも1つを改良し得る。物体識別及び/または検索ルーチンは、画像データ内に捕捉され得る1つまたは複数の特徴の識別のために画像データ上で実行され得る。例えば、重力方向Δ及び/またはホスト車両18の方向は、車線逸脱警報システム、歩行者/物体検出システム、ビデオ表示システムなどにより利用され得て、特定のシステムに関連する対象となる物体を含みそうであり得る画像データの部分ないし領域を特定し得る。
図2A及び図2Bを参照すると、ホスト車両18及び対応する画像データ50が、丘52を下るホスト車両18用に示されている。本明細書で論じられるように、コントローラ12は、標的車両26を特定するために様々な特徴を検出するよう動作可能である。この例では、コントローラ12は、標的車両26のテールライト54を検出していることを示す。ホスト車両18の方向や重力方向Δの変化に基づいて、コントローラ12は、処理ウィンドウ34及び/または基点32の上方移動56を適用して、降下中の視野22の関連する部分に集中(focus)するよう構成されている。ホスト車両18が丘52を下ると、慣性センサ72は、丘52の傾斜により、ホスト車両18の方向及び/または重力方向の変化を通信する。この検出は、慣性センサ72により測定された重力方向の変化及び/または回転速度の変化に基づいて、特定される。前記識別は、方向データ及び/または加速度データの複数のサンプルにわたって処理され得る。例えば、加速度データは、加速度計の第1軸42及び第2軸44の測定値から特定され得る。第1軸42及び第2軸44は、加速度計を参照して論じられているが、加速度計は、複数の軸を含み得る。さらに、複数の実施形態で、ジャイロスコープが、ホスト車両18の法線ベクトル38に対する方向情報及び/または重力方向を測定するために利用され得る。
ホスト車両18の法線ベクトル38に対するホスト車両18の方向及び/または重力方向の変化が判定されたら、センサデータの水平線または基点32が、上方移動56により調整され得る。上方移動は、重力方向Δ及び/またはホスト車両18の方向の変化に基づいてもよい。例えば、コントローラ12は、ホスト車両18の前方部に向けて移動された重力方向Δの変化に応答して、画像データ50の基点32及び/または処理ウィンドウ34を上方向へ移動し得る。このようにして、コントローラ12は、標的車両26を効率よく正確に検出するため、調整された処理ウィンドウ34内で標的車両26の少なくとも1つの特徴24を探索するよう動作可能である。
再び図1Aを参照して、コントローラ12は、標的車両26の検出を向上するため、加速度信号からホスト車両18の速度を判定するよう動作可能であり得る。本明細書で論じられるように、コントローラ12は、画像データ50内の少なくとも1つの特徴24の位置に基づいて標的車両26を検出し得る。コントローラ12は、画像センサ20から受信された一連の画像データ内での標的車両26の相対的な位置に基づいて標的車両26を検出するよう動作可能である。例えば、標的車両26がホスト車両18に近づいている場合、標的車両26の標的ヘッドランプ30は一連の画像内で予想進路62に沿って動き得る。前記ヘッドランプ30は、視野22の中央部分で始まり、視野22の外側へ移動し得る。
標的ヘッドランプ30の位置の変化の予想速度(レート)を判定するために、コントローラ12は、加速度計信号から判定され得るように、車両の速度を利用して、標的ヘッドランプ30の位置の変化の予想速度を判定し得る。標的ヘッドランプ30の位置の変化の予想速度を判定することにより、光源が近づいてくる車両に対応することを保証し得て、非標的光源に対応する検出を避け得る。加速度計のデータに基づいてホスト車両18の速度を特定することにより、コントローラ12は、本明細書で論じられるように、標的ヘッドランプ30の予想行動を推定することにより標的車両26及び少なくとも1つの特徴24の検出の精度を向上するよう動作可能である。
ホスト車両18の推定速度は、ホスト車両18の様々な動作条件に基づいて、加速度計72から特定され得る。第1動作条件では、コントローラ12は、ホスト車両18が停止しているか否かを判定し得る。図3Aを参照すると、平均加速度計信号60のグラフィカル表示58が、車両の減速62、停止64及び加速66を表している。停止状態は、所定の閾値またはノイズの動き閾値68より下の小さなノイズの量を有する加速度計信号により特定され得る。ホスト車両が、道路を下っているとき、加速度計信号60が検出する背景ノイズの量は、ノイズ−動き閾値を越えて上昇し得るので、その結果、コントローラ12は、ホスト車両18が動いていることを特定できる。
ノイズ−動き閾値68は、加速度計の連続するデータサンプルの中の加速の平均差に基づいて判定され得る。このノイズレベル(例えば、加速信号60)が、ノイズ−動き閾値68より下に落ちるとき、ホスト車両18が停止していると考えることができる。ノイズ−動き閾値68は、車両の種類及び車両の様々な動作状態に基づいて、変化し得る。例えば、ノイズ−動き閾値68は、特定の車両用に、ノイズ−動き閾値の初期校正に基づいて、更新され得る。また、ノイズ−動き閾値68は、経時的にホスト車両18と関連する振動の変化を考慮するべく、ホスト車両18の始動時及び運転中、更新ないし補償され得る。
追加の動作状態として、コントローラ12は、ホスト車両が加速しているか減速しているかを判定し得る。コントローラ12は、加速度計からの信号を利用して、経時的に加速を組み込むことにより速度の変化を推定し得る。ホスト車両18の速度の変化は、加速時間を乗じたある方向のホスト車両18の測定された加速の変化に基づいて決定される。所定の時間間隔でホスト車両18が進行している方向のホスト車両18の複数の加速度を測定し、それぞれの加速度を前記時間間隔で乗じることにより、コントローラ12は、速度の変化を加算することでホスト車両18の速度を決定するよう動作可能である。この技術により、ホスト車両18の速度について、いつ加速するか、または減速するか、を決定されるようになる。
さらの別の動作状態では、コントローラ12は、ホスト車両18が曲がるときのホスト車両18の速度を決定するよう動作可能である。ホスト車両18が右折または左折するとき、加速度計は、ホスト車両18の前方運転方向に対して垂直な加速度または向心加速度を通信し得る。旋回時に、ホスト車両18の速度を決定するために、向心加速度がホスト車両18の旋回レートと組み合わせて利用され得る。
旋回時のホスト車両18の速度は、コントローラ12がホスト車両18の向心加速度を角速度で割ることにより、決定され得る。ホスト車両18の角速度は、コントローラ12と通信する、例えば、磁気計、コンパスなどの方向検出装置により、測定され得る。角速度は、コントローラ12が、経時的にコンパスから受信したコンパス向首方向を監視することにより、決定され得る。角速度により、コントローラ12は、向心加速度をホスト車両18の角速度で割って、ホスト車両18の速度を決定し得る。
ここで、図3Bを参照すると、加速度計72の例示的な加速度信号70のグラフィック表示69が示されている。加速度信号は、ホスト車両18のz軸計測値に対応し得る。コントローラ12は、車両の速度を決定し、及び/または、1つまたは複数の隆起または穴に対応する加速度計から受信された検出外データを排除するよう、さらに動作可能である。コントローラ12は、平均の加速度計の信号71cとは異なる一対の類似のスパイク71a及び71bの加速度計の信号を監視することにより、車両の速度を計算し得る。スパイク間の時間71dは、コントローラ12により決定され得る。また、その後、コントローラ12は、ホスト車両18の速度を決定するため、ホスト車両18のホイールベースの長さを加速スパイクの間の時間71dによって割ることができる。コントローラは、対(組)を上回るグルーピングで起こるスパイクを除去(フィルタリング)し、また、例えば、時速5マイル〜時速90マイルといった、ほどよい速度範囲に対応するスパイクの対(組)だけを利用することができる。
図4を参照すると、コントローラ12のブロック図が示されている。画像センサ20は、プロセッサを備えるコントローラ12と電気通信する。プロセッサは、画像センサ20から画像データを受信するように構成されている。プロセッサは、少なくとも1つの特徴24を検出するため、画像データに対応する画像を処理するよう構成されている。プロセッサは、本明細書で論じられるように、画像データ及び加速度データを処理するよう構成されたメモリと通信し得る。プロセッサは、マイクロコントローラ、マイクロプロセッサ、デジタル信号プロセッサ、プログラム可能論理装置、ディスクリート回路、または、それらのいずれかの組み合わせを使用して、実装され得る。さらに、マイクロプロセッサは、1つより多いマイクロプロセッサを使用して実装され得る。
コントローラ12が、慣性センサ72、画像センサ20及びコンパス74と通信するのが図示されている。慣性センサ72は、3軸加速度計、ジャイロスコープ、IMU、及び、ホスト車両18の方向及び/または方向の変化を測定するよう動作可能な様々な他の装置、を備え得る。慣性センサ72は、約16ビットの解像度でおよそプラスマイナス4gの範囲で測定するよう構成され得る。さらに、慣性センサ72は、幅広い温度範囲で動作可能であり、約25Hzの効果的なサンプリングレートを有する。本明細書で論じられるように、方向情報及び/または加速度信号は、加速度計の各軸に対応し得る複数の信号及び様々な追加の方向情報を含み得る。慣性センサ72に対応する特定の性能特性が本明細書で論じられるが、様々な慣性センサが、特定の精度、ヘッドライトシステム14の動作パラメータ、及び、ホスト車両18の動作状態/動作環境にしたがって、利用され得る。
画像センサ20は、標的車両26の光源から発せられる光を検出するよう構成された、光センサまたは画像センサなどの、様々な種類のものであり得る。図1Aに示された実施例では、標的車両は、近づいている自動車両であり、光源が、標的車両26の標的ヘッドランプ30に対応している。また、標的車両26を検出するためにコントローラ12により特定される光源または特性24は、テールライト、走行ライト、または、標的車両26に対応する特性を特定する任意の他のもの、を含んでもよい。
一部の実施形態では、画像センサ20は、車両が近づいているのかセンサから遠のいているのかを判定することが可能、及び/または、速度及び距離を判定することが可能なドップラーレーダトランシーバなど、レーダセンサとして実装され得る。画像センサ20を利用する実施形態では、コントローラ12は、環境光のレベルを測定するよう構成される環境光センサ76とさらに通信し得る。環境光のレベルに基づいて、コントローラ12は、閾値のレベルを選択して、画像センサ20により検知される光のレベルを比較するよう構成される。このようにして、コントローラ12は、閾値のレベルを調整して、様々な環境光の条件で標的車両26の識別を向上するよう動作可能である。
画像センサ20は、例えば、電荷結合デバイス(CCD)または相補型金属酸化膜半導体(CMOS)などの、任意の形態の画像センサまたは光センサに対応し得る。画像センサ20は、各開示が当該参照により本明細書にその全体について組み入れられる、本発明の譲受人に譲渡された、米国特許仮出願60/900588、60/902728及び61/008762、米国特許出願公開第2008/0192132、2009/0160987及び2009/0190015、並びに、米国特許出願第12/082215に記述の、Gentex Corporationにより製造される、SMART BEAM 光制御システムで開示される撮像素子に対応し得る。さらに、そのような自動車両外部光制御システムの詳細説明は、本発明の譲受人に譲渡された、米国特許第5,837,994号、米国特許第5,990,469号、米国特許第6,008,486号、米国特許第6,130,421号、米国特許第6,049,171号、米国特許第6,465,963号、米国特許第6,403,942、6号,米国特許第587,573号、米国特許第6,611,610号、米国特許第6,621,616号、米国特許第6,631,316号、米国特許第6,774,988号及び米国特許第6,861,809号、米国特許出願公開2004/02014183、ならびに米国特許仮出願第60/404,879及び60/394,583に記述されており、それらの開示もまた、当該参照によりその全体について本明細書に組み入れられる。また、本発明の譲受人に譲渡された、米国特許仮出願60/780,655及び60/804,351ならびに米国特許公開2008/0068520及び2009/0096937が、本発明と共に使用する様々なディスプレイについて説明している。また、これらの各用途のすべての開示は、当該参照により本明細書に組み入れられる。
コンパス74は、例えば、磁気計などのホスト車両18の絶対的または相対的な方向、ないしコンパス向首方向、を決定するよう動作可能な任意のデバイスとして実装され得る。標的車両26の検出を支援するため、コントローラ12は、ホスト車両18の動作状態に対応する様々な入力信号をさらに利用してもよい。速度入力78が、コントローラ12に車両の速度情報を与えるために利用され得る。画像センサ20から受信された画像データに加えて、速度入力78は、コントローラ12により利用され得て、非標的物体及び標的車両(例えば、標的車両26)の中から特定ないし識別する。
標的車両26の検出に応答して、コントローラ12は、ヘッドランプ駆動部80を制御するよう構成され得る。ヘッドランプ駆動部80は、ホスト車両18のロービームヘッドランプ及びハイビームヘッドランプを制御するよう構成される。コントローラ12は、例えば、ドライバ支援システムなどのさまざまな車両システムに対して信号を出力して、画像データ内の少なくとも1つの物体または対象となる特徴の検出を特定するよう構成され得る。この手法では、コントローラ12は、車両の運転を向上するため様々な車両システムを制御するよう動作可能である。ヘッドライト制御システム14の少なくとも一実施形態が、当該参照によりその開示が本明細書に組み入れられる、1998年9月18日出願のJoseph Stam等による「CONTINUOUSLY VARIABLE HEADLAMP CONTROL」と題する米国特許第6,049,171号によって教示されている。
任意の記述されたプロセスまたは記述されたプロセス内の手順は、記述されたその他のプロセスまたは手順と組み合わされて、本開示の範囲内での構造を形成しうることが、理解されよう。本書で開示されている模範的構造及びプロセスは、例証の目的であり、制限するものとは解釈されないものとする。
また、本開示の概念を逸脱することなく、前述の構造及び方法に対して変形及び変更をすることができ、さらに、こうした概念は、特許請求の範囲に文言で明示的に別段の定めをした場合を除き、以下の特許請求の範囲によって網羅されることが意図されていることを理解されたい。
上記の説明は、好適な実施形態についてのみのものと考えられる。当業者や本装置の製作者または使用者には、装置の変形が発生するであろう。したがって、図面及び上記の説明に示した実施形態は、単に例示的目的であって、本装置の範囲を限定することを意図したものではなく、本装置の範囲は、均等論を含む特許法の原則に従って解釈される以下の特許請求の範囲によって定義されることが理解されよう。

Claims (9)

  1. 視野に対応する画像データを捕捉するよう構成された画像センサと、
    前記画像センサと通信するコントローラと、
    前記コントローラと通信する慣性センサと、
    を備える、車両制御システム用の画像データの処理機能を調整するよう構成された装置であって、
    前記コントローラは、
    前記画像センサから画像データを受信し、
    前記慣性センサからホスト車両の方向に対応する加速度信号を受信し、
    前記視野のサブセットを含む処理ウィンドウ内で標的車両の少なくとも1つの特徴のために前記画像データを走査するよう構成された機能を作動し、
    前記加速度信号に応答して前記画像データ内の前記処理ウィンドウの位置を設定し、
    前記画像データ内の前記少なくとも1つの特徴を特定するために前記処理ウィンドウ内を走査し、
    前記標的車両の特定された前記少なくとも1つの特徴を通信するための制御信号を出力する
    ように動作可能であり、
    前記制御信号は、前記ホスト車両のヘッドライトの照準またはレベルを制御するように構成されたヘッドライド制御システムに出力される
    ことを特徴とする装置。
  2. 前記視野は、前記ホスト車両に対して前方方向の領域に対応する、請求項1に記載の装置。
  3. 前記少なくとも1つの特徴は、標的車両のヘッドライト及びテールライトのうちの少なくとも1つに起因する発光に対応する、請求項1〜2のいずれか1項に記載の装置。
  4. 前記位置は、前記加速度信号から決定されるような前記ホスト車両の方向変化に基づいて決定される、請求項1〜3のいずれか1項に記載の装置。
  5. 前記処理ウィンドウは、前記位置に基づいて非標的物体に対応する物体をフィルタリングするように前記画像データの走査を制限または優先付けするように構成されている、請求項1〜3のいずれか1項に記載の装置。
  6. 視野に対応する画像データを捕捉するよう構成された画像センサと、
    前記画像センサと通信するコントローラと、
    前記コントローラと慣性信号を通信するよう構成される慣性センサと、
    を備える、車両制御システム用の画像データの処理機能を調整するよう構成された装置であって、
    前記コントローラは、
    前記画像センサから画像データを受信し、
    前記慣性センサからホスト車両の方向を受信し、
    前記視野のサブセットを含む処理ウィンドウ内で標的車両の少なくとも1つの特徴のために前記画像データを走査するよう構成された機能を作動し、
    前記方向に応答して前記画像データ内の前記処理ウィンドウの位置を設定し
    前記画像データ内の前記少なくとも1つの特徴を特定するために前記処理ウィンドウ内を走査し
    前記標的車両の特定された前記少なくとも1つの特徴の検出を示す制御信号を出力する
    ように動作可能であり、
    前記ホスト車両の車軸の数に対応する複数の信号スパイクを決定するために、前記慣性信号が、当該慣性信号の平均と比較され、
    前記ホスト車両の前記速度を計算するために、前記ホスト車両の2つの車軸の間の距離が、前記複数の信号スパイクの間の時間差によって除算される
    ことを特徴とする装置。
  7. 前記コントローラは、前記ホスト車両の進行方向を検出するよう動作可能な方向検出装置と通信する、請求項6に記載の装置。
  8. 前記方向検出装置は、磁気計、コンパス、及び、任意の好適な方向検出装置、のうちの1つを有する、請求項7に記載の装置。
  9. 前記少なくとも1つの標的車両の特徴は、前記標的車両のヘッドライトとテールライトのうちの少なくとも1つに対応する、請求項6に記載の装置。
JP2017506787A 2014-08-04 2015-08-03 慣性センサを利用するドライバ支援システム Active JP6723983B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462032894P 2014-08-04 2014-08-04
US62/032,894 2014-08-04
PCT/US2015/043448 WO2016022483A1 (en) 2014-08-04 2015-08-03 Driver assist system utilizing an inertial sensor

Publications (2)

Publication Number Publication Date
JP2017530896A JP2017530896A (ja) 2017-10-19
JP6723983B2 true JP6723983B2 (ja) 2020-07-15

Family

ID=55180370

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017506787A Active JP6723983B2 (ja) 2014-08-04 2015-08-03 慣性センサを利用するドライバ支援システム

Country Status (6)

Country Link
US (1) US9704049B2 (ja)
EP (1) EP3194211B1 (ja)
JP (1) JP6723983B2 (ja)
KR (1) KR101911715B1 (ja)
CN (1) CN106573571B (ja)
WO (1) WO2016022483A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6350555B2 (ja) * 2016-02-10 2018-07-04 トヨタ自動車株式会社 車両用ヘッドランプ配光制御装置及び方法
KR101966255B1 (ko) * 2016-09-13 2019-08-28 주식회사 오트웍스 자전거 후미등 및 그 제어 방법
US10857883B2 (en) * 2016-11-14 2020-12-08 The University Of Massachusetts Efficient control of fuel consumption in cars
EP3574447B1 (en) * 2017-01-27 2023-10-11 Gentex Corporation Image compensation for motorcycle banking
US10698068B2 (en) 2017-03-24 2020-06-30 Samsung Electronics Co., Ltd. System and method for synchronizing tracking points
US10999539B2 (en) * 2017-12-26 2021-05-04 Waymo Llc Adjustable vertical field of view
DE102018200005B4 (de) 2018-01-02 2019-12-24 Ford Global Technologies, Llc Straßentopographieanpassung der Lampen eines Kraftfahrzeuges
US11352013B1 (en) 2020-11-13 2022-06-07 Samsara Inc. Refining event triggers using machine learning model feedback
US11341786B1 (en) 2020-11-13 2022-05-24 Samsara Inc. Dynamic delivery of vehicle event data
US11643102B1 (en) * 2020-11-23 2023-05-09 Samsara Inc. Dash cam with artificial intelligence safety event detection
US11352014B1 (en) 2021-11-12 2022-06-07 Samsara Inc. Tuning layers of a modular neural network
US11386325B1 (en) 2021-11-12 2022-07-12 Samsara Inc. Ensemble neural network state machine for detecting distractions

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0672380A (ja) * 1992-08-31 1994-03-15 Mitsubishi Heavy Ind Ltd 全没型水中翼船
US5301130A (en) * 1992-10-22 1994-04-05 Hughes Aircraft Company Absoulte velocity sensor
JP3168414B2 (ja) * 1997-10-02 2001-05-21 スタンレー電気株式会社 車両用前照灯の光軸調整装置
JP4726277B2 (ja) * 2000-05-31 2011-07-20 株式会社デンソー 車両用前照灯光軸方向自動調整装置
JP2002337600A (ja) * 2001-05-18 2002-11-27 Ichikoh Ind Ltd 車両用前照灯の光軸自動調整装置
US7156542B2 (en) * 2002-12-13 2007-01-02 Ford Global Technologies, Llc Vehicle headlight system having digital beam-forming optics
WO2008024639A2 (en) 2006-08-11 2008-02-28 Donnelly Corporation Automatic headlamp control system
US7974460B2 (en) * 2007-02-06 2011-07-05 Honeywell International Inc. Method and system for three-dimensional obstacle mapping for navigation of autonomous vehicles
US8017898B2 (en) * 2007-08-17 2011-09-13 Magna Electronics Inc. Vehicular imaging system in an automatic headlamp control system
WO2009064886A2 (en) * 2007-11-13 2009-05-22 Tk Holdings Inc. Vehicle communication system and method
CN201205893Y (zh) * 2008-01-22 2009-03-11 周定国 机动车大灯自动变光器
JP2010269686A (ja) * 2009-05-21 2010-12-02 Asahi Denso Co Ltd ターンシグナルスイッチ装置
WO2011106578A2 (en) 2010-02-26 2011-09-01 Gentex Corporation Automatic vehicle equipment monitoring, warning, and control system
JP5506599B2 (ja) * 2010-08-25 2014-05-28 株式会社エヌ・ティ・ティ・データ 通過時刻推定装置、車速算出方法、及びプログラム
US9555832B2 (en) * 2011-04-19 2017-01-31 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
EP2639781A1 (en) * 2012-03-14 2013-09-18 Honda Motor Co., Ltd. Vehicle with improved traffic-object position detection
CN104508595B (zh) * 2012-06-12 2017-07-18 金泰克斯公司 提供多级对准稳定性指示的车辆成像系统
JP5692180B2 (ja) * 2012-07-25 2015-04-01 株式会社デンソー 車両光源検出装置、ライト制御装置、および車両光源検出プログラム
JP6004916B2 (ja) * 2012-11-26 2016-10-12 株式会社小糸製作所 車両用灯具の制御装置及び車両用灯具システム
DE102013012325A1 (de) * 2013-07-25 2015-01-29 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Fahrerassistenzsystem und Betriebsverfahren dafür
JP6190210B2 (ja) * 2013-08-27 2017-08-30 株式会社Subaru 前照灯制御装置
DE102013225773A1 (de) * 2013-12-12 2015-06-18 Robert Bosch Gmbh Rückraumüberwachungsystem und Verfahren zur Rückraumüberwachung eines Fahrzeugs
CN105793108B (zh) 2013-12-20 2018-10-26 金泰克斯公司 控制外部车灯
US9248832B2 (en) * 2014-01-30 2016-02-02 Mobileye Vision Technologies Ltd. Systems and methods for detecting traffic signal details

Also Published As

Publication number Publication date
US9704049B2 (en) 2017-07-11
EP3194211A4 (en) 2017-08-09
KR20170036096A (ko) 2017-03-31
CN106573571B (zh) 2019-05-21
JP2017530896A (ja) 2017-10-19
WO2016022483A1 (en) 2016-02-11
EP3194211B1 (en) 2024-05-01
EP3194211A1 (en) 2017-07-26
US20160034770A1 (en) 2016-02-04
CN106573571A (zh) 2017-04-19
KR101911715B1 (ko) 2018-10-25

Similar Documents

Publication Publication Date Title
JP6723983B2 (ja) 慣性センサを利用するドライバ支援システム
JP6930613B2 (ja) 車載カメラ・システム、並びに画像処理装置及び画像処理方法
US9740942B2 (en) Moving object location/attitude angle estimation device and moving object location/attitude angle estimation method
JP5207146B2 (ja) 遠距離灯の自動制御方法
KR102519100B1 (ko) 모터사이클 기울어짐에 대한 이미지 보상
KR20170079096A (ko) 지능형 차량용 블랙박스
CN105793108B (zh) 控制外部车灯
US9836966B2 (en) Accelerometer integrated with display device
JP6834401B2 (ja) 自己位置推定方法及び自己位置推定装置
JP2020109560A (ja) 信号機認識方法及び信号機認識装置
CN112014935A (zh) 视觉防抖装置和方法
JP4434864B2 (ja) 車両の灯体制御装置
KR102003574B1 (ko) 차량을 위해 차량별 특유의 설정 방향 데이터를 측정하기 위한 방법 및 장치
JP2019132795A (ja) 距離算出装置および距離算出方法
US11368616B2 (en) Vehicle display control device, display control method, and non-transitory computer-readable medium
KR20110128544A (ko) 곡선로 헤드램프 제어방법 및 제어장치
US20210064893A1 (en) Signal processing apparatus, signal processing method, program, and moving body
JP2022017612A (ja) 情報処理装置、情報処理方法及び情報処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180501

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180427

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190405

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200525

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200624

R150 Certificate of patent or registration of utility model

Ref document number: 6723983

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250