JP2018536912A - 運転支援を提供するシステムおよび方法 - Google Patents
運転支援を提供するシステムおよび方法 Download PDFInfo
- Publication number
- JP2018536912A JP2018536912A JP2018507046A JP2018507046A JP2018536912A JP 2018536912 A JP2018536912 A JP 2018536912A JP 2018507046 A JP2018507046 A JP 2018507046A JP 2018507046 A JP2018507046 A JP 2018507046A JP 2018536912 A JP2018536912 A JP 2018536912A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- imaging device
- mode
- images
- activation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 24
- 238000003384 imaging method Methods 0.000 claims abstract description 259
- 230000004913 activation Effects 0.000 claims abstract description 84
- 230000033001 locomotion Effects 0.000 claims abstract description 47
- 230000009471 action Effects 0.000 claims abstract description 39
- 238000001514 detection method Methods 0.000 claims description 84
- 238000004891 communication Methods 0.000 claims description 36
- 230000008859 change Effects 0.000 claims description 25
- 238000006073 displacement reaction Methods 0.000 claims description 13
- 230000003190 augmentative effect Effects 0.000 claims description 5
- 239000004984 smart glass Substances 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 claims description 2
- 238000001994 activation Methods 0.000 description 70
- 230000005540 biological transmission Effects 0.000 description 16
- 238000012544 monitoring process Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 230000000295 complement effect Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000003213 activating effect Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 101001093748 Homo sapiens Phosphatidylinositol N-acetylglucosaminyltransferase subunit P Proteins 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000009849 deactivation Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000013308 plastic optical fiber Substances 0.000 description 2
- 239000011435 rock Substances 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 101100172132 Mus musculus Eif3a gene Proteins 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013016 damping Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Arrangement of adaptations of instruments
-
- B60K35/29—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
- B60Q1/0017—Devices integrating an element dedicated to another function
- B60Q1/0023—Devices integrating an element dedicated to another function the element being a sensor, e.g. distance sensor, camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
- B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
-
- B60K2360/186—
-
- B60K2360/21—
-
- B60K2360/334—
-
- B60K2360/347—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
- B60R2001/1253—Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
運転支援を提供するシステムおよび方法の様々な態様が本明細書で開示される。本システムは、車両に埋め込まれた1つまたは複数のセンサによって生成された1つまたは複数の信号に基づいて、車両に関連する1つまたは複数の動作を検出するよう構成される車両で使用される電子制御ユニット内の1つまたは複数の回路を備える。電子制御ユニットは、検出された1つまたは複数の動作に基づいて、車両の運転者の反対側で車両に配置された撮像装置の起動を制御するようさらに構成することができる。撮像装置は、車両の前方向に1つまたは複数の画像を捕捉するよう動作可能である。
Description
本開示の様々な実施形態は、運転支援を提供するシステムに関する。より具体的には、本開示の様々な実施形態は、1つまたは複数の動作の検出に基づいて、撮像装置を使用することによる運転支援を提供するシステムに関する。
テレマティクスの分野における最近の進歩により、運転者が交通状況に基づいて車両を操縦するのを支援することができるシステムが開発されている。そのような支援のために、現在の方法は、リアビューカメラを使用して、移動中の車両の後ろの交通状況を捕捉する。リアビューカメラによって捕捉された画像に基づいて、何らかの潜在的な事故の危険なしに車両を適切に操縦することができる。
特定の状況では、自車両は自車両の前方を移動する車両を追い越すか、追い越そうとする可能性がある。しかしながら、自車両の運転者が利用可能な視界は、車両のために制限される可能性がある。したがって、自車両の運転者は、車両の前方に存在する道路および/または交通状況に関する十分な情報を有していない可能性がある。他の状況では、運転者は自車両の助手席側に曲がる必要があるかもしれない。曲がりが急であり、道路の内側部分に向かう場合、曲がりの角度が鋭いために、曲がりをちょうど越える道路および/または路面の視界が制限される可能性がある。そのような状況では、運転者は、助手席側に死角があるために、曲がる際に道路および/または交通状況を視覚化することができない可能性がある。したがって、運転者は、路面に存在する交通状況に関する十分な情報を得ることが望ましいであろう。運転者は、自車両の助手席側に向かう曲がりの内側の路肩に関する十分な情報を有することがさらに望ましいであろう。
本出願の残りの部分および図面を参照して説明される本開示のいくつかの態様と記載されたシステムとの比較を通して、従来の典型的な手法のさらなる制限および欠点が、当業者に明らかになるであろう。
特許請求の範囲でより完全に説明されるように、図面の少なくとも1つで示されるような、および/または少なくとも1つの図面と関連して記載されるような、運転支援を提供するシステムおよび方法を実質的に提供する。
本開示のこれらのおよび他の特徴および利点は、同様の参照番号が全体を通じて同様の部分に関する添付図面と共に、本開示の以下の詳細な説明の考察から理解されよう。
運転支援を提供するためのシステムおよび/または方法において、様々な実装態様を見出すことができる。本開示の例示的な態様は、車両に使用される電子制御ユニットによって、車両に関連する1つまたは複数の動作の検出に基づいて運転支援を提供する方法を備えることができる。1つまたは複数の動作の検出は、車両に埋め込まれた1つまたは複数のセンサによって生成された1つまたは複数の信号に基づくことができる。本方法は、車両で使用される電子制御ユニットによって、車両の運転者の反対側で車両に配置された撮像装置の起動の制御をさらに備えることができる。撮像装置の起動の制御は、検出された1つまたは複数の動作に基づくことができる。さらに、撮像装置は、車両の前方向に1つまたは複数の画像を捕捉するよう動作可能とすることができる。
一実施形態によれば、撮像装置は、第1のモードまたは第2のモードのうちの一方に対応する動作モードで起動することができる。第1のモードおよび第2のモードは、少なくとも検出された1つもしくは複数の動作および/または撮像装置による1つもしくは複数の捕捉された画像に基づくことができる。第1のモードは、前方車両が通過した場合に使用され、第2のモードは交差点で曲がる場合に使用される。撮像装置の起動は、撮像装置の視線の調整を含むことができる。
一実施形態によれば、撮像装置は、前方車両を検出するために、第1のモードのために前方向で1つまたは複数の画像を捕捉するよう起動させることができる。起動は、第1のモード起動のための所定の速度閾値を下回る車両の減速、第1のモード起動のための手動ボタンの選択、第1のモード起動のための所定の距離閾値を超える車両の横方向変位、車両のブレーキペダルの踏み込み、車両の方向指示器の起動、車両の所定の近接範囲内に他の車両が存在すること、車両の前方向の視界に伴う視界不良、運転者からの前方向の視界に伴う視界不良、別の車両による視界の遮蔽、他の車両の速度を第1のモード起動のための予め規定された速度閾値を下回る値に減速させること、および/または第1のモード起動のための所定の角度閾値を超える操舵角の変化、の1つまたは複数を備える検出された1つまたは複数の動作に基づくことができる。
一実施形態によれば、撮像装置は、障害物または生物を検出するために、第2のモードのために、1つまたは複数の画像を後方向または横方向に捕捉するよう起動することができる。起動は、方向指示器の起動、第2のモード起動のための手動ボタンの選択、車両による車線変更の検出、車両の移動方向にある交差点の検出、ナビゲーションアプリケーションに設定された今後の走行経路上の交差点における旋回の検出、第2のモード起動のための所定の速度閾値を下回る値に車両が減速したことの検出、第2のモード起動のための所定の角度閾値を超える操舵角の変化の検出、および/または交通信号の検出、の1つまたは複数を備える検出された1つまたは複数の動作に基づくことができる。
一実施形態によれば、車両の表示画面上の捕捉された1つまたは複数の画像の表示を制御することができる。さらに、捕捉された1つまたは複数の画像が別の検出された車両および/または生物に対応する場合には、捕捉された1つまたは複数の画像と共に警告指示を表示することができる。
一実施形態によれば、起動された撮像装置の視線の調整は、車両の下の路面の1つまたは複数の路面特性に基づいて制御することができる。1つまたは複数の路面特性は、上向き傾斜、下向き傾斜、バンク角、曲率、境界、速度限界、路面状態、窪み、および/または車線区分線のうちの1つまたは複数を備えることができる。
一実施形態によれば、撮像装置の起動の制御は、音声ベースのコマンド、ジェスチャベースのコマンド、および/または車両のパネルもしくはステアリングホイール上に配置されたボタンの選択のうちの1つまたは複数に基づくことができる。捕捉された1つまたは複数の捕捉画像の表示は、インフォテイメントディスプレイ、ヘッドアップディスプレイ(HUD)、拡張現実(AR)−HUD、ドライバ情報コンソール(DIC)、シースルーディスプレイ、またはスマートグラスディスプレイを使用することで制御することができる。
一実施形態によれば、起動された撮像装置の停止は、モード停止のための所定の速度閾値を上回る車両の加速、モード停止のための所定の距離閾値を下回る車両の横方向変位、捕捉された1つまたは複数の画像内に1つまたは複数の他の車両が存在しないこと、撮像装置の起動時間に対する横ずれの変化、モード停止のための角度閾値を下回る操舵角の変化、交差点における車両の旋回動作の完了の検出、方向指示器の停止、および/または停止のための手動ボタンの選択、の1つまたは複数に基づくことができる。
一実施形態によれば、車両が安全に前方車両を通過できるかどうかを示す情報は、撮像装置の起動に基づいて生成することができる。生成された情報は、視覚情報、触覚情報、および/または音声情報の1つまたは複数を備えることができる。1つまたは複数の車両の検出は、1つまたは複数の他の車両を検出するための、撮像装置、電波ベースの物体検出装置、レーザベースの物体検出装置、および/または無線通信装置のうちの1つまたは複数の利用に基づくことができる。
一実施形態によれば、撮像装置は、助手席側のリアビューミラーや車両の外部ボディに取り付けられていてもよいし、一体化されていてもよい。一実施形態によれば、撮像装置は、助手席側リアビューミラーまたは車両の外部ボディに調整可能に取り付けられて、後方向または横方向に1つまたは複数の画像を取り込むことができる。
図1は、本開示の一実施形態による、運転支援を提供するための車両内部の車両インフラを示すブロック図である。図1を参照すると、車両100は、車両インフラ100aを含むことができる。車両インフラ100aは、撮像装置102と、車両ダッシュボード104と、インフォテインメントシステム106とを含むことができる。車両インフラ100aは、図2に図示され詳細に説明される検知装置および車両ネットワークをさらに備えることができる。車両ダッシュボード104は、電子計器クラスタ104a、車両ステアリングホイール104b、および/または動作モードボタンのセット104cを備えることができる。インフォテインメントシステム106は、表示装置106aを含むことができる。インフォテインメントシステム106は、車両ネットワークを介して、検知装置、撮像装置102、および車両ダッシュボード104に通信可能に結合することができる。
撮像装置102は、1つまたは複数の画像を捕捉するよう動作可能とすることができる適切なロジック、回路、インターフェース、および/またはコードを備えることができる。捕捉された1つまたは複数の画像は、車両100に近接した交通状況および/または道路状況に対応することができる。撮像装置102は、車両100の、運転者側108aのリアビューミラー110aおよび/または助手席側などの、反対側108bの別のリアビューミラー110bに調整可能に取り付けられるか、または一体化することができる。一実施形態によれば、撮像装置102は、車両100の外部ボディに取り付けることができる。一実施形態によれば、撮像装置102は、車両100の外部ボディに一体化してもよい。一実施形態によれば、撮像装置102は、車両100から外向きに伸びることができ、および/または自動的にあるいは動作モードボタンのセット104cを押すことに基づいて、車両100の本体に引っ込むことができる。動作モードにおける撮像装置102の自動起動は、1つまたは複数の動作に基づくことができる。一実施形態によれば、撮像装置102の視線は、1つまたは複数の入力パラメータおよび/または道路特性に基づいて調整することができる。撮像装置102の例としては、限定するものではないが、専用のフロントフォーカスカメラ、外部リアビューミラー(ORVM)カメラ、モーションカメラ、カメラに結合されたラジオ検出および測距(RADAR)装置、ならびに/もしくはカメラに結合された光検出および測距(LIDAR)装置を含むことができる。
車両ダッシュボード104は、車両100の様々な制御を容易にするよう動作可能とすることができる適切なロジック、回路、インターフェース、および/またはコードを備えることができる。車両ダッシュボード104は、電子計器クラスタ104a、車両ステアリングホイール104b、および動作モードボタンのセット104cを備えることができる。電子計器クラスタ104aは、検知装置によって測定された第1の情報をユーザが読める形式で表示するよう動作可能とすることができる1つまたは複数の計器を備えることができる。1つまたは複数の計器の例は、これらに限定するものではないが、スピードメータ、走行距離計、タコメータ、および/または燃料計を含むことができる。車両ステアリングホイール104bは、車両100の方向を制御することができる一連のリンク、ロッド、ピボット、およびギアの組み合わせとすることができる。車両ステアリングホイール104bは、車両100内のプロセッサによって計算された触覚フィードバックを運転者に提供するよう動作可能とすることができる。車両ステアリングホイール104bは、撮像装置102の動作モードを切り替えるよう動作可能とすることができる動作モードボタンのセット104cを備えることができる。車両インフラ100aは、動作モードボタンのセット104cの1つまたは複数に対する手動押下に基づいて、撮像装置102の動作モードに従って、撮像装置102を起動または停止するよう動作可能とすることができる。
インフォテインメントシステム106は、表示装置106aなどの1つまたは複数の出力装置を使用することによって電子出力を表示するよう動作可能とすることができる適切なロジック、回路、インターフェース、および/またはコードを備えることができる。電子出力は、ビデオストリーム、音声アラート、グラフィックアイコン、および/またはマルチメディアオブジェクトを備えることができる。表示装置106aは、さらに、車両インフラ100aの1つまたは複数の特徴および/または用途を表示するよう動作可能とすることができる。一実施形態によれば、表示装置106aは、車両100の運転者のような1人または複数人のユーザから入力パラメータを受信するよう動作可能とすることができるタッチセンシティブ画面であってもよい。そのような入力パラメータは、仮想キーパッド、スタイラス、タッチベースの入力、および/またはジェスチャを介して受信することができる。表示装置106aの例は、これらに限定するものではないが、拡張現実ヘッドアップディスプレイ(AR−HUD)、液晶表示(LCD)ディスプレイ、発光ダイオード(LED)ディスプレイ、および/または有機LED(OLED)ディスプレイ技術を含むことができる。インフォテインメントシステム106は、当分野で既知である1つまたは複数の技術に基づいて実現することができる。
車両ネットワークは、検知装置、撮像装置102、車両ダッシュボード104、およびインフォテインメントシステム106が相互に通信するための媒体を含むことができる。様々な標準フォーマットを、検知装置と撮像装置102との間のメッセージの交換のために定義することができる。そのような標準フォーマットには、これらに限定するものではないが、車両エリアネットワーク(VAN)、CANバス、ドメスティックデジタルバス(D2B)、Time−Triggered Protocol(TTP)、FlexRay、IEEE 1394、キャリア・センス・マルチプル・アクセス・ウィズ・コリジョン・ディテクション(CSMA/CD)ベースのデータ通信プロトコル、アイ・スクウェア・シー(I2C)、Inter Equipment Bus (IEBus)、自動車技術者協会(SAE)J1708,SAE J1939、国際標準化機構(ISO)11992、ISO 11783、Media Oriented Systems Transport(MOST)、MOST25、MOST50、MOST150、プラスチック光ファイバ(POF)、電力線通信(PLC)、シリアル・ペリフェラル・インターフェース(SPI)バス、および/または、ローカル相互接続ネットワーク(LIN)を含むことができる。
動作中、車両インフラ100aは、路面上を移動する車両100に対応することができる。路面は、単一車線の車道または車線区分線を含む可能性のある高速道路の1つに対応することができる。路面には、複数のレーンがある可能性がある。一実施形態によれば、複数のレーンは、同じ方向に移動する一組の車両を意味することができる。一実施形態によれば、複数のレーンの第1の半分は、第1の方向に移動する第1の車両セットを意味することができる。さらに、複数のレーンの第2の半分は、第1の方向と反対の第2の方向に移動する第2の車両セットを意味することができる。この場合、道路上の複数の車線の第1の半分と第2の半分とを車線区分線の標識に基づいて区別することができる。
車両インフラ100aは、撮像装置102を備えることができる。一実施形態によれば、撮像装置102は、助手席側のリアビューミラーに取り付けることができる。一実施形態によれば、撮像装置102は、車両100の外部ボディに取り付けることができる。撮像装置102は、車両100の外部ボディに一体化してもよい。撮像装置102は、車両から外向きに伸びることができ、および/または自動的にあるいは動作モードボタンのセット104cを押すことに基づいて、車両100の本体に引っ込むことができる。動作モードにおける撮像装置102の自動起動は、1つまたは複数の動作の検出に基づくことができる。一実施形態によれば、撮像装置102は、助手席側のリアビューミラーや車両100の外部ボディに一体化することができる。一実施形態によれば、撮像装置102は、助手席側のリアビューミラーや車両100の外部ボディに調整可能に取り付けることができる。さらに、撮像装置102は、車両100の後方向または横方向の1つまたは複数の画像を捕捉するよう動作可能とすることができる。
一実施形態によれば、検知装置は、路面上を移動する車両100に対応する第1の情報および/または第2の情報を検出するよう動作可能とすることができる。一実施形態によれば、第1の情報は、車両100の動きが直線方向にある場合に検出することができる。第1の情報は、車両100の減速率、第1のモード起動のための所定の距離閾値を超える車両100の横方向の変位、車両100のブレーキペダルの踏み込み、車両100の方向指示器の起動、車両100の所定の近接範囲内の別車両の存在、運転者からの車両100の前方方向の視界と関連する視認性の低下、他車両による車両100の前方視界の遮蔽、他の車両の速度を第1のモード起動のための所定の速度閾値を下回る値に減少させること、および/または第1のモード起動のための所定の角度閾値を上回る、車両100の操舵角の変化、の1つまたは複数とすることができる。
一実施形態によれば、第2の情報は、車両100が助手席側に向けて旋回しようとする場合に検出することができる。第2の情報は、方向指示器の起動、車両100による車線変更の検出、および/または車両100の速度が第2のモード起動のための所定の速度閾値を下回る値に減速されたことの検出の1つまたは複数に対応することができる。第2の情報は、第2のモード起動および/または交通信号の検出のための所定の角度閾値を超える操舵角の変化の検出にさらに対応することができる。一実施形態によれば、第2の情報は、道路の地理的座標に関連して検出された助手席側方向の道路の旋回にさらに対応することができる。
一実施形態によれば、第1の情報および/または第2の情報は、車両100の運転者などのユーザによって手動で実行される動作に対応することができる。そのような手動で実行されるユーザ動作は、動作モードでの撮像装置102の起動および/または停止のための専用の動作モードボタンのセット104cの1つまたは複数の起動を備えることができる。手動で実行されるユーザ動作は、インフォテインメントシステム106に提供される音声ベースのコマンドのセット、ならびに/または動作モードでの撮像装置102の起動および/もしくは停止のためのインフォテインメントシステム106によって検出された所定のジェスチャの組み合わせをさらに備えることができる。
一実施形態によれば、車両インフラ100aは、検出された第1の情報および/または第2の情報に基づいて、動作モードで撮像装置102の起動を制御するよう動作可能とすることができる。動作モードは、旋回支援モードまたは追越支援モードのうちの1つに対応することができる。旋回支援モードでは、撮像装置102の向きは、車両100の移動方向に対して、横向き、後ろ向き、および/または下向きとすることができる。追越支援モードでは、撮像装置102の向きは、車両100の移動方向に対して、前向きとすることができる。一実施形態によれば、動作モードのうちの1つにおける撮像装置102の起動の制御は、車両100の運転者などのユーザによって提供される音声ベースのコマンドまたはジェスチャベースのコマンドに基づくことができる。
一実施形態によれば、撮像装置102は、追越支援モードなどの1つの動作モードから、旋回支援モードなどの他の動作モードに切り替えるよう動作可能とすることができる。そのような動作モードの変更は、ユーザによって提供される入力パラメータ、検出された第1の情報、および/または検出された第2の情報に基づくことができる。
動作モードの1つにおける撮像装置102の起動に基づいて、撮像装置102は、1つまたは複数の画像の捕捉を開始するよう動作可能とすることができる。一実施形態によれば、予め構成されたタイマは、動作モードが起動された瞬間に開始することができる。
一実施形態によれば、撮像装置102の起動に関する制御情報は、車両ネットワークを介して車両ダッシュボード104に送信することができる。電子計器クラスタ104aは、動作モードにおける撮像装置102の起動に基づいて、アイコンを表示するよう動作可能とすることができる。一実施形態によれば、車両ダッシュボード104は、動作モードにおける撮像装置102の起動に基づいて、車両ステアリングホイール104bに触覚フィードバックを提供するようさらに動作可能とすることができる。一実施形態によれば、車両ダッシュボード104は、動作モードボタンのセット104cと一体化された通知インジケータを点灯して、撮像装置102が起動状態にあることを運転者に通知するようさらに動作可能とすることができる。
一実施形態によれば、起動された撮像装置102によって捕捉された1つまたは複数の画像は、車両ネットワークを介してインフォテインメントシステム106に送信することができる。インフォテインメントシステム106は、捕捉された1つまたは複数の画像を表示装置106aに表示するよう動作可能とすることができる。
一実施形態によれば、ユーザは、1つまたは複数の入力パラメータを提供して、起動された撮像装置102を制御することができる。一実施形態によれば、1つまたは複数の入力パラメータは、捕捉された1つまたは複数の画像に対してズームインおよび/またはズームアウト操作を実行するコマンドに対応することができる。一実施形態によれば、1つまたは複数の入力パラメータは、車両100の下の路面に対して起動された撮像装置102の視線を調整するコマンドに対応することができる。一実施形態によれば、起動された撮像装置102の視線は、路面の上り勾配、下り勾配、および/またはバンク角などの1つまたは複数の路面特性に基づいて調整することができる。
一実施形態によれば、車両インフラ100aは、捕捉された1つまたは複数の画像から1つまたは複数の他の車両を検出するよう動作可能とすることができる。検出された1つまたは複数の他の車両は、車両100の所定の近接範囲内に存在する可能性がある。一実施形態によれば、車両インフラ100aは、さらに、これらに限定するものではないが、車両100の下の路面に沿った舗道、路肩に沿った次の車両、車両100の進行方向前方の路面の曲率、車両前方の別の車両、窪み、スピードブレーカ、岩、人間、および/または車両100の助手席側への旋回を含むことができる、1つまたは複数の物体を検出するよう動作可能とすることができる。一実施形態によれば、1つもしくは複数の他の車両および/または1つもしくは複数の物体の検出は、電波ベースの物体検出装置、レーザベースの物体検出装置、および/または無線通信装置の1つまたは複数に基づくことができる。
一実施形態によれば、車両インフラ100aは、検出された1つまたは複数の他の車両に基づいて、表示装置106aに表示された1つまたは複数の画像と共に警告指示を生成するよう動作可能とすることができる。表示された1つまたは複数の画像と共に生成された警告指示は、1つまたは複数の他の車両がもはや車両インフラ100aによって検出されなくなった場合に、表示装置106aから消すことができる。
一実施形態によれば、車両インフラ100aは、経路情報を生成するよう動作可能とすることができる。生成された経路情報は、撮像装置102が追越支援モードで起動された場合に、検出された1つまたは複数の他の車両を追い越すことを可能にする経路の利用可能性を示すことができる。生成された安全経路情報は、表示装置106aにさらに表示することができる。一実施形態によれば、安全経路の利用可能性を示すアイコンを、電子計器クラスタ104aの1つに表示することができる。一実施形態によれば、安全経路の利用可能性を示すために、車両ステアリングホイール104bに触覚フィードバックを提供することができる。一実施形態によれば、動作モードボタンのセット104cと一体化された通知インジケータは、安全経路の利用可能性を通知するために点灯することができる。
一実施形態によれば、車両インフラ100aは、撮像装置102が旋回支援モードで起動された場合に、検出された1つまたは複数の物体の存在を示すことができる障害物情報を生成するよう動作可能とすることができる。一実施形態によれば、検出された1つまたは複数の物体の存在は、表示装置106aに表示することができる。一実施形態によれば、車両ダッシュボード104の電子計器クラスタ104aは、検出された1つまたは複数の物体の存在を示す警告指示としてアイコンを表示するよう動作可能とすることができる。一実施形態によれば、触覚フィードバックは、検出された1つまたは複数の物体の存在を示す警告指示として、車両ステアリングホイール104bに提供することができる。
一実施形態によれば、車両インフラ100aは、車両に関連する他の情報の検出に基づいて撮像装置102を停止させるよう動作可能とすることができる。他の情報は、第1の情報および/または第2の情報に関して相補的であるとすることができる。一実施形態によれば、起動されたタイマの持続時間が所定の期間を超えた場合、起動された撮像装置102を停止することができる。一実施形態によれば、起動された撮像装置102は、運転者によって手動で実行される1つまたは複数の他の動作の検出に基づいて、車両インフラ100aによって停止してもよい。1つまたは複数の他の動作は、撮像装置102を起動するために実行される1つまたは複数の動作と相補的であるとすることができる。さらに、停止した場合、撮像装置102による1つまたは複数の画像の捕捉を停止することができる。さらに、停止した場合、撮像装置102は、前方向または横方向から後方向に回転して戻ることができる。一実施形態によれば、停止した場合、撮像装置102の向きは、起動前の撮像装置102の向きに変更することができる。
図2は、本開示の一実施形態による、車両の様々な例示的な構成要素およびシステムを示すブロック図である。図2は、図1の要素と関連して説明される。図2を参照すると、車両100が示される。車両100は、メモリ204を含むことができるECU202を備えることができる。車両100は、ブレーキシステム206、オーディオインターフェース208、車輪210、無線通信システム212、車体制御モジュール214、駆動系216、ステアリングシステム220、検知システム222、および車両動力システム228をさらに備えることができる。駆動系216は、伝達系218を含むことができる。無線通信システム212は、通信チャネル212aを含むことができる。ステアリングシステム220は、電動モータ224およびステアリングホイール226を含むことができる。車両動力システム228は、バッテリ230を含むことができる。車両100は、図1で説明したように、撮像装置102と表示装置106aとをさらに備えることができる。
様々な構成要素およびシステムは、車両ネットワーク232を介して通信可能に結合することができる。ECU202は、車両ネットワーク232を介して、メモリ204、撮像装置102、ブレーキシステム206、オーディオインターフェース208、表示装置106a、車輪210、無線通信システム212、車体制御モジュール214、駆動系216、ステアリングシステム220、検知システム222、および車両動力システム228に通信可能に結合することができる。無線通信システム212は、通信チャネル212aを介して、1つまたは複数の他の車両と通信するよう構成することができる。車両100は、他の適切な構成要素およびシステムも含むことができるが、簡潔にするために、本開示の機能および動作を記述および説明するために使用される構成要素およびシステムが本明細書に例示される。
ECU202は、メモリ204に格納された命令のセットを実行するよう動作可能とすることができる適切なロジック、回路、インターフェース、および/またはコードを備えることができる。ECU202は、当分野で既知の多くのプロセッサ技術に基づいて実現することができる。ECU202の例は、X86ベースのプロセッサ、縮小命令セットコンピューティング(RISC)プロセッサ、特定用途向け集積回路(ASIC)プロセッサ、複合命令セットコンピューティング(CISC)プロセッサ、マイクロコントローラ、中央処理装置(CPU)、グラフィック処理装置(GPU)、状態マシン、および/または他のプロセッサもしくは回路とすることができる。
メモリ204は、ECU202によって実行可能な少なくとも1つのコードセクションを伴う機械可読コードおよび/またはコンピュータプログラムを格納するよう動作可能とすることができる適切なロジック、回路、および/またはインターフェースを備えることができる。メモリ204は、車両が走行する道路の地図および経路を示すことができるナビゲーションアプリケーションを格納するよう動作可能とすることができる。メモリ204の実装態様の例は、これらに限定するものではないが、電気的消去可能プログラマブル読み出し専用メモリ(EEPROM)、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、ハードディスクドライブ(HDD)、フラッシュメモリ、セキュアデジタル(SD)カード、ソリッドステートドライブ(SSD)、および/またはCPUキャッシュメモリを含むことができる。
ブレーキシステム206は、摩擦力を加えることによって車両100を停止または減速するために使用されるシステムを意味することができる。ブレーキシステム206は、検出された1つもしくは複数の動作および/または1つもしくは複数の捕捉された画像に基づいて、車体制御モジュール214またはECU202からコマンドを受信するよう構成することができる。
オーディオインターフェース208は、音声を生成するための、スピーカ、チャイム、ブザー、または他の装置を意味することができる。オーディオインターフェース208はまた、車両100の運転者などの車両100の乗員からの音声入力を受信するための、マイクロホンまたは他の装置を意味することができる。表示装置106aは、撮像装置102によって捕捉された1つまたは複数の画像を表示するよう動作可能とすることができるタッチスクリーンを意味することができる。表示装置106aは、撮像装置102が起動される動作モードに対応することができる1つまたは複数の入力パラメータを表示するようさらに動作可能とすることができる。表示装置106aは、ECU202による第1の情報および/または第2の情報の処理に基づいて、生成された出力を表示するようさらに動作可能とすることができる。生成された出力は、ユーザからの入力を受け取り、車両100の乗員に様々なタイプの情報を表示するために、表示装置106aで表示されるビデオストリームを備えることができる。表示装置106aの例としては、限定するものではないが、ヘッドアップディスプレイ(HUD)もしくは拡張現実システム(AR−HUD)を備えたヘッドアップディスプレイ、ドライバ情報コンソール(DIC)、投影型ディスプレイ、および/またはエレクトロクロミックディスプレイを含むことができる。
車輪210は、時間経過に伴う車両100の位置の変化を推定するために、車輪速度センサまたはオドメトリセンサなどの検知システム222の1つまたは複数のセンサと関連付けることができる。オドメトリセンサは、車両100の1つもしくは複数の車輪210および/または車両100の駆動系216に取り付けることができる。ブレーキシステム206は、車輪速度センサまたはオドメトリセンサと関連付けることができる。
無線通信システム212は、通信チャネル212aを介して、1台または複数台の他の車両と通信するよう動作可能とすることができる適切なロジック、回路、インターフェース、および/またはコードを備えることができる。無線通信システム212は、アンテナ、テレマティクスユニット、無線周波数(RF)トランシーバ、1つもしくは複数の増幅器、1つもしくは複数の発振器、デジタル信号プロセッサ、近距離通信(NFC)回路、コーダ/デコーダ(CODEC)チップセット、および/または加入者識別モジュール(SIM)カードを含むことができるが、これらに限定されない。通信チャネル212aは、車両100の無線通信システム212が1つまたは複数の他の車両の無線通信システムと通信することができる媒体を含むことができる。通信チャネル212aの例としては、これらに限定するものではないが、ロングタームレボリューション(LTE)ネットワーク、ワイヤレスフィデリティ(Wi−Fi)ネットワーク、無線ローカルエリアネットワーク(WLAN)、インターネット、専用狭域通信(DSRC)ネットワーク、モバイルアドホックネットワーク(MANET)、車両アドホックネットワーク(VANET)、および/またはメトロポリタンエリアネットワーク(MAN)を含むことができる。無線通信プロトコルのような第2の通信プロトコルの例には、これらに限定するものではないが、ロングタームレボリューション(LTE)、ワイヤレスフィデリティ(Wi−Fi)プロトコル、DSRCプロトコル、IEEE802.11,802.11p,802.15,802.16,1609、ワールドワイド・インターオペラビリティ・フォー・マイクロウェーブ・アクセス(Wi−MAX)、車載無線通信(WAVE)、伝送制御プロトコルおよびインターネットプロトコル(TCP/IP)、ユーザデータグラムプロトコル(UDP)、ハイパーテキスト転送プロトコル(HTTP)、ZigBee、EDGE、ならびに/またはブルートゥース(BT)通信プロトコルを含むことができる。
車体制御モジュール214は、中央ドアロックシステムなどの車両100の様々な電子部品またはシステムを制御するよう動作可能とすることができる適切なロジック、回路、インターフェース、および/またはコードを備える別の電子制御ユニットを意味することができる。車体制御モジュール214は、車両100の車両ドアのロックを解除するためにECU202からコマンドを受信するよう構成することができる。車体制御モジュール214は、車両100のアクセス制御のために中央ドアロックシステムなどの他の適切な車両システムまたは構成要素にコマンドを中継することができる。駆動系216は、エンジンからステアリングホイール226への動力伝達システムを意味することができ、当分野で既知の従来の駆動系でもよい。伝達系218は、駆動系216の一部とすることができる。伝達系218は、手動変速機、同期変速機、全自動変速機、半自動変速機、無段変速機(CVT)、シーケンシャル変速機、デュアルクラッチ変速機(DCT)、または当分野で既知の他の伝達系を意味することができる。
ステアリングシステム220は、ECU202および車体制御モジュール214から1つまたは複数のコマンドを受信するよう構成することができる。一実施形態によれば、ステアリングシステム220は、電動モータ224およびステアリングホイール226に関連して、車両100の移動方向を自動的に制御することができる。ステアリングシステム220の例には、これらに限定するものではないが、当分野で既知である、パワーアシストステアリングシステム、真空/油圧ベースステアリングシステム、電気油圧パワーアシストシステム(EHPAS)、または「ステアバイワイヤ」システムを含むことができる。
検知システム222は、1つまたは複数のセンサを使用することによって、車両100に関連する第1の情報および/または第2の情報を検出するよう動作可能とすることができる適切なロジック、回路、および/またはインターフェースを備えることができる。第1の情報および/または第2の情報の検出は、撮像装置102が起動される動作モードに基づくことができる。検知システム222はさらに、検出された第1の情報および/または第2の情報をECU202に送信するよう動作可能とすることができる。検知システム222に使用されるセンサの例は、これらに限定するものではないが、加速度計、ジャイロセンサ、近接センサ、全地球測位システム(GPS)センサ、車速センサ、オドメトリックセンサ、ヨーレートセンサ、操舵角検出センサ、車両進行方向検出センサ、画像センサ、タッチセンサ、および/または赤外線センサを含むことができる。
車両動力システム228は、上述したように、車両100の様々な電気回路および負荷(図示せず)に対するバッテリ230の充電および放電を調整するよう構成することができる。車両100がハイブリッド車両または自律車両である場合、車両動力システム228は、車両100のすべての構成要素に必要な電圧を提供するよう構成することができる。さらに、車両動力システム228に基づいて、車両100は、バッテリ230のバッテリ電力を特定の時間にわたって利用することを可能とすることができる。一実装態様によれば、車両動力システム228は、パワーエレクトロニクスシステムに対応することができ、車両ネットワーク232に通信可能に結合することができるマイクロコントローラを含むことができる。そのような実装態様では、マイクロコントローラは、ECU202の制御下で、駆動系216から1つまたは複数のコマンドを受信するよう構成することができる。
バッテリ230は、車両100の1つまたは複数の電気回路もしくは負荷のための電力源とすることができる。バッテリ230は充電式バッテリであってもよい。バッテリ230は、車両100の点火装置(図示せず)に選択的に電力を供給することによって、車両100のエンジンを始動させるための電力源とすることができる。負荷には、これらに限定するものではないが、様々なライト(ヘッドライトおよび室内キャビンライトなど)、電動式調整可能構成要素(車両シート、ミラー、または窓など)および/または他のシステム(ラジオ、表示装置106a、オーディオインターフェース208、電子ナビゲーションシステム、ステアリングシステム220などの電気的に制御される、動力および/または支援ステアリング)を含むことができる。
車両ネットワーク232は、車両100の様々な構成要素およびシステムが相互に通信するための媒体を含むことができる。車両ネットワーク232は、図1で説明した車両ネットワークに対応することができる。車両100の上述の構成要素とシステムとの間のメッセージの交換のために、様々な標準フォーマットを定義することができる。
動作中、検知システム222のセンサは、路面上の車両100の動きに対応することができる第1の情報および/または第2の情報を検出するよう動作可能とすることができる。検出された第1の情報は、検知システム222のセンサによって検出された車両100の減速率に対応することができる。検出された第1の情報は、第1のモード起動のための所定の距離閾値を超える車両100の横方向の変位にさらに対応することができる。車両100の横方向の変位は、検知システム222のセンサによる車輪210の監視に基づいて検出することができる。検出された第1の情報は、車両100のブレーキシステム206のブレーキペダルの踏み込み、車両100の方向指示器の起動、車両100の所定の近接範囲内の別車両の存在、運転者からの車両100の前方向の視界と関連する視認性の低下、他車両による車両100の前方視界の遮蔽、他の車両の速度を第1のモード起動のための所定の速度閾値を下回る値に減少させること、および/または第1のモード起動のための所定の角度閾値を上回る、車両100のステアリング224の操舵角の変化にさらに対応することができる。一実施形態によれば、速度閾値、距離閾値、および/または角度閾値は、メモリ204から検索することができる。一実施形態によれば、他の車両の移動パラメータの上述の変化に基づく第1の情報の検出は、撮像装置102による他の車両の監視に基づくことができる。監視は、電波ベースの物体検出および/またはレーザベースの物体検出に基づくことができる。監視は、無線通信システム212を使用することによって車両100と検出された他の車両との間に確立された無線通信にさらに基づくことができる。無線通信システム212は、通信チャネル212aに基づいて、車両100と検出された他の車両との間の通信接続を確立するよう動作可能とすることができる。
一実施形態によれば、第2の情報は、車両100が助手席側に向けて旋回しようとする場合に検出することができる。第2の情報は、車両100に関連する1つまたは複数の動作に対応することができる。1つまたは複数の動作は、検知システム222のセンサによる車輪210の監視に基づいて、車両100による方向指示器の起動および/または車線変更の検出に対応することができる。車両100による車線変更の検出は、ステアリングシステム220によるステアリングホイール226の監視にさらに基づくことができる。車両100に関連する1つまたは複数の動作は、車両100の検知システム222による、第2のモード起動のための所定の速度閾値を下回る値に速度低下したことの検出にさらに対応することができる。第2の情報は、第2のモード起動のための所定の角度閾値を上回るステアリングシステム220によるステアリングホイール226の操舵角の変化の検出にさらに対応することができる。
一実施形態によれば、ECU202は、メモリ204から検索されたマップに関連するデータと共に第2の情報を利用して、撮像装置102を制御するよう動作可能とすることができる。一実施形態によれば、検索されたマップに関連するデータは、車両100の助手席側にある道路の旋回および/または交差点に対応することができる。一実施形態によれば、ECU202は、GPSによって検出された車両100の位置データと共に第2の情報を使用して、撮像装置102を制御するよう動作可能とすることができる。
一実施形態によれば、撮像装置102は、運転者側108aのリアビューミラー110aおよび/または車両100の、助手席側などの、反対側108bの別のリアビューミラー110bに調整可能に取り付けられるか、または一体化することができる。一実施形態によれば、撮像装置102は、車体(図示せず)に取り付けることができる。一実施形態によれば、撮像装置102は、車体と一体型にしてもよい。一実施形態によれば、撮像装置102は、車両100から外向きに伸びることができ、および/または自動的に、もしくは検出された第1の情報および/または検出された第2の情報に基づいて、車体の中に引っ込むことができる。
一実施形態では、撮像装置102は、車両100の運転者などのユーザから受け取った1つまたは複数の命令に基づいてECU202によって制御することができる。1つまたは複数の命令は、車両ネットワーク232を介して、オーディオインターフェース208および/または表示装置106aから受信することができる。受信された1つまたは複数の命令は、動作モードの1つで撮像装置102が起動されたことに対応することができる。撮像装置102はさらに、1つまたは複数の画像を捕捉し、捕捉した1つまたは複数の画像を表示装置106aに送信して表示するよう動作可能とすることができる。
一実施形態によれば、車両動力システム228は、バッテリ230から表示装置106aおよび/またはオーディオインターフェース208への電力供給を制御するよう構成することができる。バッテリ230からの電力供給に基づいて、表示装置106aおよび/またはオーディオインターフェース208の動作状態を「オン」状態から「オフ」状態に切り替えることができ、その逆も可能である。表示装置106aは、運転者などのユーザによって手動で行われる動作に対応することができる第1の情報および/または第2の情報を受信して出力するよう動作可能とすることができる。そのような手動で実行されるユーザ動作は、動作モードボタンのセット104c、オーディオインターフェース208を介してインフォテインメントシステム106に提供される音声ベースのコマンドのセット、および/またはユーザによって実行されてインフォテインメントシステム106によって検出される所定のジェスチャの組み合わせの1つを選択することを備えることができる。
一実施形態によれば、検出された第1の情報および/または第2の情報に基づいて、ECU202は、追越支援モードまたは旋回支援モードなどの動作モードで撮像装置102の起動を制御するよう動作可能とすることができる。追越支援モードでは、撮像装置102の向きは、前方向とすることができる。前方向は、道路上の車両100の動きに沿った方向に対応することができる。旋回支援モードでは、撮像装置102の向きは、横方向とすることができる。横方向は、道路上の車両100の動きに対してある角度で傾斜した方向に対応することができる。一実施形態によれば、撮像装置102は、複数のカメラを備えることができる。追越支援モードでは、撮像装置102の第1のカメラを前方向に向けることができ、撮像装置102の第2のカメラを後方向に向けることができる。同様に、旋回支援モードでは、撮像装置102の第1のカメラを横方向に向けることができ、撮像装置102の第2のカメラを後方向に向けることができる。
一実施形態によれば、ECU202は、オーディオインターフェース208からの音声ベースのコマンドおよび/または車両ネットワーク232を介して、ユーザによって提供される、表示装置106aからのジェスチャベースのコマンドのうちの1つまたは複数を受信するよう動作可能とすることができる。ユーザから受信したコマンドに基づいて、ECU202は、動作モードで撮像装置102の起動を制御するよう動作可能とすることができる。一実施形態によれば、起動時に、撮像装置102は、後ろ向きから正面向きまたは横向きに回転することができる。一実施形態によれば、撮像装置102が複数のカメラを備える場合、撮像装置102の第1のカメラは、前方向または横方向に回転することができ、撮像装置102の第2のカメラは、後方向に向いたままとすることができる。
一実施形態によれば、ECU202は、撮像装置102の動作モードを予測するよう動作可能とすることができる。予測は、車両100の運転パターン、第1の情報、および/または第2の情報に関連する履歴記録に基づくことができる。例えば、経路に沿った車両100の毎日の動きに対応するデータの照合および経路上に存在する交差点に基づいて、ECU202は、旋回支援モードの起動を予測するよう動作可能とすることができる。
一実施形態によれば、撮像装置102は、ECU202から受信した制御命令に基づいて、1つまたは複数の画像の捕捉を開始するよう動作可能とすることができる。一実施形態によれば、ECU202は、車両ネットワーク232を介して、メモリ204から事前に設定されたタイマ値を検索するよう動作可能とすることができる。ECU202は、撮像装置102が1つまたは複数の画像を捕捉し始める瞬間に、事前に設定されたタイマ値でタイマを開始するようさらに動作することができる。一実施形態によれば、ECU202は、動作モードにおける撮像装置102の起動に対応する通知を生成するよう動作可能とすることができる。一実施形態によれば、通知は、表示装置106a上に表示することができるアイコンに対応することができる。表示されたアイコンは、起動された動作モードに対応することができる。一実施形態によれば、通知は、ステアリングホイール226にもたらされた触覚フィードバック、および/またはオーディオインターフェース208を介して再生される音に対応することができる。
一実施形態によれば、撮像装置102は、車両ネットワーク232を介して、捕捉した1つまたは複数の画像を表示装置106aに送信するよう動作可能とすることができる。表示装置106aは、ヘッドアップディスプレイ(HUD)、拡張現実(AR)−HUD、ドライバ情報コンソール(DIC)、シースルーディスプレイ、および/またはスマートグラスディスプレイに対応することができる。一実施形態によれば、撮像装置102は、捕捉された1つまたは複数の画像を車両100のフロントガラスに送信するよう動作可能とすることができる。フロントガラスは、投影機構に基づいて、受信した1つまたは複数の画像を表示することができる。投影機構は、車両100の運転者などのユーザの目の動きを追跡するよう動作可能とすることができる。追跡した眼球運動に基づいて、投影機構は、捕捉した1つまたは複数の画像で運転者の視界を拡大することができる。
一実施形態によれば、撮像装置102が複数のカメラを備える場合、表示装置106aは、第1の部分および/または第2の部分を備える複数の部分において表示装置106aの表示インターフェースを分割するよう動作可能とすることができる。撮像装置102の第1のカメラからの捕捉された1つまたは複数の画像は、表示装置106aの第1の部分に表示することができる。撮像装置102の第2のカメラからの捕捉された1つまたは複数の画像は、表示装置106aの第2の部分に表示することができる。
一実施形態によれば、ECU202は、車両ネットワーク232を介して、オーディオインターフェース208および/または表示装置106aから、起動した撮像装置102を制御するために、ユーザからの1つまたは複数の入力パラメータを受信するよう動作可能とすることができる。一実施形態によれば、1つまたは複数の入力パラメータは、捕捉された1つまたは複数の画像に対してズームインおよび/またはズームアウト操作を実行するコマンドに対応することができる。一実施形態によれば、1つまたは複数の入力パラメータは、捕捉された1つまたは複数の画像の解像度を変更するコマンドにさらに対応することができる。一実施形態によれば、1つまたは複数の入力パラメータは、車両100の下の路面に対して起動された撮像装置102の視線を調整するコマンドに対応することができる。一実施形態によれば、ECU202は、車両100の下の路面に対して起動した撮像装置102の視線を動的に調整するよう動作可能とすることができる。起動した撮像装置102の視線の調整は、上向きの傾斜、下向きの傾斜、バンク角、曲率、境界、速度限界、道路状態、窪み、および/または車線区分線などの1つまたは複数の路面特性に基づくことができる。それにもかかわらず、本開示はそれに限定されず、ECU202は、開示の範囲を制限することなく、捕捉された1つまたは複数の画像に関連する他のそのようなパラメータを調整するよう動作可能とすることができる。
一実施形態によれば、撮像装置102は、道路上を動く可能性のある1つまたは複数の物体を検出するよう動作可能とすることができる。1つまたは複数の物体の検出は、電波ベースの物体検出装置、レーザベースの物体検出装置、および/または無線通信装置に基づくことができる。
一実施形態によれば、ECU202は、捕捉された1つまたは複数の画像から1つまたは複数の物体を検出するよう動作可能とすることができる。一実施形態によれば、ECU202は、1つまたは複数の物体を検出するために、メモリ204からアルゴリズムを検索するよう動作可能とすることができる。検索されたアルゴリズムは、物体検出のための、グレースケールマッチングアルゴリズム、エッジマッチングアルゴリズム、勾配マッチングアルゴリズム、および/または受信領域応答のヒストグラムなどの当分野で既知のアルゴリズムを含むことができる。
一実施形態によれば、検出された1つまたは複数の他の物体は、道路上の1つまたは複数の他の車両および/または障害物に対応することができる。検出された1台または複数台の車両は、車両100の所定の近接範囲内に存在する可能性がある。検出された障害物は、車両100が走行している路面に沿った舗道、路肩に沿った次の車両、車両100の進行方向前方の路面の曲率、車両100の前方を移動する大型車両、窪み、スピードブレーカ、岩、人物、および/または車両100の助手席側への旋回の1つまたは複数に対応することができる。それにもかかわらず、本開示はそれに限定されず、検出された1つまたは複数のオブジェクトは、開示の範囲を限定することなく、上記のもの以外の他の障害を含むことができる。
一実施形態によれば、ECU202は、検出された1つまたは複数の他の車両に基づいて、表示装置106aに表示された1つまたは複数の画像と共に警告指示を生成するよう動作可能とすることができる。表示された1つまたは複数の画像と共に生成された警告指示は、1つまたは複数の他の車両がもはや車両インフラ100aによって検出されなくなった場合に、表示装置106aから消すことができる。
一実施形態によれば、撮像装置102が追越支援モードで起動された場合、ECU202は、通過情報を生成するよう動作可能とすることができる。生成された通過情報は、検出された1つまたは複数の他の車両を追い越すことを可能にする経路の利用可能性を示すことができる。一実施形態によれば、ECU202は、生成された通過情報を表示装置106aおよび/またはオーディオインターフェース208に伝達するようさらに動作可能とすることができる。一実施形態によれば、表示装置106aは、生成された通過情報を車両100のスマートフロントガラスに投影するよう動作可能とすることができる。表示装置106aは、安全経路の利用可能性を示すアイコンを含む警告指示を表示するよう動作可能とすることができる。一実施形態によれば、表示装置106aは、アイコンを表示装置106aに表示するよう動作可能とすることができる。一実施形態によれば、アイコンは、電子計器クラスタ104aに表示してもよい。一実施形態によれば、オーディオインターフェース208は、スピーカ、チャイム、ブザー、または音を生成するための他の装置に基づいて、安全経路の利用可能性を示すよう動作可能とすることができる。一実施形態によれば、ECU202は、ステアリングホイール226にもたらされた触覚フィードバックに基づいて安全経路の利用可能性を示すよう動作可能とすることができる。
一実施形態によれば、撮像装置102が旋回支援モードで起動される場合、ECU202は、障害物情報を生成するよう動作可能とすることができる。生成された障害物情報は、車両100が通過する可能性のある(助手席側方向の)旋回または交差点にある1つまたは複数の物体の存在を示すことができる。一実施形態によれば、ECU202は、障害物情報を表示装置106aおよび/またはオーディオインターフェース208に伝達するようさらに動作可能とすることができる。一実施形態によれば、表示装置106aは、旋回または交差点において検出された1つまたは複数の物体の存在を示すアイコンを備えることができる警告指示を表示するよう動作可能とすることができる。一実施形態によれば、オーディオインターフェース208は、スピーカ、チャイム、ブザー、または他の装置に基づいて、旋回または交差点で検出された1つまたは複数の物体の存在を示し、音を生成するよう動作可能とすることができる。一実施形態によれば、表示装置106aは、電子計器クラスタ104aの1つにアイコンを表示するよう動作可能とすることができる。一実施形態によれば、表示装置106aは、ステアリングホイール226で表現される触覚フィードバックに基づいて、旋回で検出された1つまたは複数の物体の存在を示すよう動作可能とすることができる。
一実施形態によれば、1つまたは複数の物体の検出に基づいて、ECU202は、実行すべき応答動作を決定するよう動作可能とすることができる。実行すべき応答動作は、撮像装置102が起動される動作モードに基づくことができる。一実施形態によれば、応答動作は、車両100の速度の、メモリ204から検索された所定の閾値速度値未満の値への自動的な変化に対応することができる。そのような速度の自動変化は、駆動系216および/または伝達系218に基づいて実行することができる。駆動系216は、エンジンからステアリングホイール226に伝達系218によって伝達される動力の減衰を実行するよう動作可能とすることができる。一実施形態によれば、応答動作は、検出された1つまたは複数の物体に基づいて、ブレーキシステム206の緊急ブレーキの自動適用に対応することができる。一実施形態によれば、応答動作は、警報として車両100の車体制御モジュール214に関連する警報を自動的に鳴らすことおよび/または起動することに対応することができる。
一実施形態によれば、ECU202は、車両100に関連する1つまたは複数の他の動作の検出に基づいて、動作モードの1つで起動された撮像装置102を停止させるよう動作可能とすることができる。そのような1つまたは複数の他の動作は、車両100の運転者などのユーザによって手動で実行してもよい。1つまたは複数の他の動作は、撮像装置102を起動するために実行される1つまたは複数の動作と相補的であるとすることができる。1つまたは複数の他の動作は、方向指示器の停止、動作モードボタンのセット104cの選択、オーディオインターフェース208を介してインフォテインメントシステム106に提供される音声ベースのコマンドのセット、および/または表示装置106aを介して、インフォテインメントシステム106に提供される事前に定義されたジェスチャの組み合わせに対応することができる。
一実施形態によれば、停止は、ECU202によって、捕捉された1つまたは複数の画像から1つまたは複数の他の車両が存在しないことを検出することに基づくことができる。一実施形態によれば、停止は、検知システム222による、モード停止のための所定の速度閾値を上回る、車両100の加速度の検出に基づくことができる。一実施形態によれば、停止は、検知システム222によって、モード停止のための所定の距離閾値未満の、車両100の横方向変位の検出に基づくことができる。そのような横方向変位は、検知システム222による車輪210の監視に基づくことができる。一実施形態によれば、停止は、モード停止のための角度閾値未満の値へのステアリングホイール226の操舵角の変化の検出および/または旋回もしくは交差点での車両100の旋回動作の完了の検出に基づくことができる。
一実施形態によれば、ECU202は、開始されたタイマの持続時間が所定の時間を超えた場合、起動された撮像装置102を自動的に停止させるよう動作可能とすることができる。タイマに関連するそのような所定の期間は、運転者などのユーザによって予め設定することができる。一実施形態によれば、停止時に、車両100の撮像装置102は、前方向または横方向から後方向に回転して戻ることができる。一実施形態によれば、撮像装置102が複数のカメラを備える場合、動作モードが停止されると、撮像装置102の第1のカメラは回転して後方向に戻ることができる。一実施形態によれば、撮像装置102が複数のカメラを備える場合、撮像装置102の第1のカメラは、動作モードが停止された場合にスイッチオフすることができる。
図3Aから図3Iは、本開示の一実施形態による、運転支援を示す例示的な状況を示す図である。図3Aから図3Iは、図1および図2の要素と関連して説明される。
図3Aを参照すると、第1の例示的な状況300aの上面図が示される。第1の例示的な道路304上を動く車両302aの上面図が示される。第1の例示的な道路304上の車両302aの前方で移動している車両302bおよび302cの上面図がさらに示されている。第1の例示的な道路304は、第1のレーン304aおよび第2のレーン304bなどの2つのレーンを備えることができる。車両302a、302b、および302cは、第1のレーン304aに沿って第1の例示的な道路304上を動くことができる。車両302aの車両インフラは、図1に詳細に記載された車両100の車両インフラ100aと同様とすることができる。さらに、車両302aの車両インフラのECU、検知装置、メモリ、撮像装置、およびI/O装置などの構成要素は、それぞれ、車両100(図2)の、ECU202、メモリ204、撮像装置102、表示装置106a、および車両インフラ100aの検知システム222などの構成要素と同様とすることができる。
第1の例示的な状況300aによれば、車両302bは、車両302aの前方の所定の近接範囲内で検出することができる。車両302a内の検知システム222のセンサは、少なくとも、車両302aの減速、車両302aの横方向の変位、車両302aのブレーキペダルの押下、車両302aの方向指示器の起動、および/または第1のモード起動のための角度閾値を超える車両302aの操舵角の変化の1つまたは組み合わせに基づいて、第1の情報を検出するよう動作可能とすることができる。検出された第1の情報は、車両302aの所定の近接範囲内における車両302bの検出にさらに基づくことができる。検出された第1の情報は、トラックなどの検出された車両302bのタイプにさらに基づくことができる。検出された第1の情報は、車両302aの前方向の低視認性の検出にさらに基づくことができる。検出された低視認性は、車両302bによる車両302aの正面図の遮蔽に対応することができる。検出された第1の情報は、車両302aの運転者からの前方向の低視認性の検出にさらに基づくことができる。車両302a内の検知システム222のカメラなどのセンサは、運転者が前方を見ることができる領域として、前方向の画像の特定の領域を決定することができる。車両302bが特定領域の所定部分を超えて占有している場合に、運転者からの前方向の低視認性が検出される可能性がある。検出された第1の情報は、車両302a以外の1つまたは複数の車両に対する所定の速度閾値よりも低い302bの速度の検出にさらに基づくことができる。第1の例示的な状況の例によれば、車両302bの上記の情報は、確立された通信チャネル212aに基づいて、車両302aから無線通信システム212を介して車両302aによって受信され得る。検出された第1の情報は、第1のレーン304aの車両302bを追い越すように、車両302aの運転者によって実行されるべき追い越し動作を示すことができる。
第1の例示的な状況300aによれば、車両302aが車両302bを追い越す動作は、そのような追い越し動作が車両302aを第2のレーン304bに進入させる可能性があるので、許可されない可能性があると仮定することができる。第1の例示的な状況300aの例によれば、車両302aが車両302bを追い越す動作は、そのような追い越し動作が車両302aと車両302bの前方に存在し得る車両302cとの衝突につながる可能性があるので、許可されない可能性がある。検出された第1の情報に基づいて、車両302aの車両インフラのECU202は、追越支援モードで車両302a内の撮像装置102を起動させるよう動作可能とすることができる。撮像装置102の起動の詳細は、図3C、図3D、および図3Eにおいて説明される。起動した撮像装置102は、車両302aの前方の助手席側にある第1の例示的な道路304の部分306に対応する1つまたは複数の画像を捕捉するよう動作可能とすることができる。捕捉された1つまたは複数の画像は、図3Fおよび図3Gに詳細に説明されている車両302aの表示画面に表示することができる。
第1の例示的な状況300aの例によれば、車両302a内のECUは、車両302bを追い越すことを可能にする安全経路の使用不可能性を判定するよう動作可能とすることができる。安全経路の使用不可能性、車両302cなどの1台または複数台の車両が車両302aの車両インフラによって(部分306において)検出される場合に判定することができる。車両302bを追い越すための安全経路の使用不可能性に基づいて、車両302aの車両インフラは、安全経路が使用不可である指示を生成することができる。そのような指示は、電子計器クラスタ上で、アイコンを介して、または車両302aの車両ステアリングホイール上の触覚フィードバックで表現することができる。指示は、車両302aの表示画面上に表示してもよい。
第1の例示的な状況300aの別の例によれば、車両302aの撮像装置が撮像した部分306には、車両302bの前方に車両302cが存在せず、車両302aが車両302bを追い越そうとするための経路を利用することができる。そのような場合、車両302aの車両インフラは、そのような追い越し動作を可能にする経路の利用可能性を示すことができる。そのような指示は、アイコンを介して電子計器クラスタ104aで、またはステアリング104b上の触覚フィードバックで表現することができる。指示は、車両302aの表示装置106a上に表示してもよい。
図3Bを参照すると、第2の例示的な状況300bの上面図が示される。第1のレーン308aおよび第2のレーン308bなどの2つのレーンを備えることができる第2の例示的な道路308の上面図が示される。第2の例示的な道路308は、第1のレーン308aに向かって徐々に湾曲する可能性がある。車両310bが車両310aの前方にあるように、第1のレーン308a上を動くことができる車両310aおよび310bの上面図がさらに示される。さらに、車両310cは、第2のレーン308b上の車両310aおよび310bに向かって動く可能性がある。車両310aの車両インフラは、図1に詳細に記載された車両100の車両インフラ100aと同様とすることができる。さらに、車両310aの車両インフラのECU、検知装置、メモリ、撮像装置、およびI/O装置などの構成要素は、それぞれ、車両100(図1)の、ECU202、メモリ204、撮像装置102、表示装置106a、および車両インフラ100aの検知システム222などの構成要素と同様とすることができる。
第2の例示的な状況300bによれば、車両310a内の検知装置は、車両310aの運転者によって車両310bを追い越すために実行される追い越し動作を示すことができる第1の情報を検出するよう動作可能とすることができる。追い越し動作は、第2のレーン308bを介して車両310bを追い越す動作に対応することができる。そのような状況では、車両310aの運転者は、緩やかな湾曲のために、車両310aの運転者側から運転者がアクセスできない可能性のある第2の例示的な道路308の前方の部分312の捕捉された画像を要求することができる。そのような状況では、検出された第1の情報に基づいて、車両310aの車両インフラは、図3C、図3D、および図3Eで詳細に説明するように、追越支援モードで車両310aの撮像装置を起動させるよう動作可能とすることができる。起動した撮像装置は、助手席側の第2の例示的な道路308の部分312に対応する1つまたは複数の画像を捕捉するよう動作可能とすることができる。捕捉された1つまたは複数の画像は、図3Fおよび図3Gに詳細に説明されている車両310aの表示画面に表示することができる。
一例では、対向車両310cが第2の例示的な道路308の部分312で検出される場合、車両310aの車両インフラは、車両310bを追い越さないようにユーザに警告する通知を生成するよう動作可能とすることができる。別の例では、第2のレーン308bの対向車両310cが車両310aおよび310bに向かって移動していない場合、車両310aの車両インフラは、別の通知を生成するよう動作可能とすることができる。そのような通知は、第2のレーン308bから車両310bを追い越すための経路の利用可能性を車両310aの運転者に通知することができる。
図3Cを参照すると、例示的なユーザインターフェース300cが示される。例示的なユーザインターフェース300cは、車両302aの表示装置106aの表示画面314aおよび314bに対応することができる。表示画面314aおよび314bは、検出された第1の情報および/または第2の情報(図1に詳細に説明されている)に基づいて、撮像装置102を起動するためのユーザインターフェースに対応することができる。
例示的なユーザインターフェース300cの第1の例によれば、車両302aは、助手席側108bのリアビューミラー110bまたは運転者側108aのリアビューミラー110に搭載または一体化することができる単一のカメラを備える撮像装置102を備えることができる。一例では、撮像装置102は、車両302aの外部ボディに取り付けることができる。撮像装置102は、車両302aの外部ボディに一体化してもよい。撮像装置102は、車両から外向きに伸びることができ、および/または自動的にあるいは動作モードボタンのセット104cを押すことに基づいて、車両302aの本体に引っ込むことができる。動作モードにおける撮像装置102の自動起動は、1つまたは複数の動作の検出に基づくことができる。そのような例では、表示画面314aは、第1の情報および/または第2の情報の検出に基づいて、表示装置106a上に表示することができる。表示画面314aは、第1のユーザインターフェース要素316aを備えることができる。第1のユーザインターフェース要素316aは、車両302aのユーザに対する通知に対応することができる。通知は、第1の情報および/または第2の情報の検出に基づいて生成することができる。通知に基づいて、表示装置106aは、1つまたは複数のユーザ入力を受信して撮像装置102を起動するよう動作可能とすることができる。通知は、「フロントビューが利用可能です。カメラを起動しますか?」などの例示的な文字列を備えることができる。
例示的なユーザインターフェース300cの第2の例によれば、車両302aは、撮像装置102を備えることができる。撮像装置は、運転者側108aのリアビューミラー110aまたは反対側108bの他のリアビューミラー110bなどの、車両302aの異なる部分に、それぞれ、取り付けまたは一体化することができる、「カメラ1」および「カメラ2」などの、複数のカメラを備えることができる。そのような例では、第1の情報および/または第2の情報の検出に基づいて、表示画面314bを表示装置106aに表示することができる。表示画面314bは、第2のユーザインターフェース要素316bを備えることができる。第2のユーザインターフェース要素316bは、起動のために、複数のカメラからの選択に対する通知に対応することができる。通知は、「フロントビューが利用可能です。カメラ1またはカメラ2を起動しますか?」などの例示的な文字列を備えることができる。
図3Dを参照すると、撮像装置102の例示的な向き300dが示される。例示的な向き300dは、車両302aのORVMに取り付けられた撮像装置102の第1の向き318aおよび第2の向き318bに対応することができる。第1の向き318aは、起動前の撮像装置102の向きに対応することができる。第2の向き318bは、起動後の撮像装置102の向きに対応することができる。
第1の向き318aを参照すると、撮像装置102は、車両302aの後方向で1つまたは複数の画像を捕捉するよう動作可能とすることができる。捕捉された1つまたは複数の画像は、車両302aの動きに対して後方向の部分320に対応することができる。第2の向き318bを参照すると、撮像装置102は、車両302aの前方向で1つまたは複数の画像を捕捉するよう動作可能とすることができる。捕捉された1つまたは複数の画像は、この場合、車両302aの動きに対して前方向の部分322に対応することができる。
図3Eを参照すると、撮像装置102の例示的な向き300eが示される。例示的な向き300eは、撮像装置102が第1の撮像装置102aおよび第2の撮像装置102bなどの複数の撮像装置102を備える場合の状況に対応することができる。例示的な向き300eは、第1の撮像装置102aおよび第2の撮像装置102bの第1の向き324aおよび第2の向き324bにさらに対応することができる。第1の向き324aは、起動前の第1の撮像装置102aおよび第2の撮像装置102bの向きに対応することができる。第2の向き324bは、起動後の第1の撮像装置102aおよび第2の撮像装置102bの向きに対応することができる。
第1の向き324aを参照すると、第1の撮像装置102aおよび第2の撮像装置102bは、車両302aの後方向で1つまたは複数の画像を捕捉するよう動作可能とすることができる。捕捉された1つまたは複数の画像は、車両302aの動きに対して後方向の部分326に対応することができる。第2の向き324bを参照すると、第1の撮像装置102aは、車両302aの前方向で1つまたは複数の画像を捕捉するために回転するよう動作可能とすることができる。第1の撮像装置102aによって捕捉された1つまたは複数の画像は、この場合、車両302aの動きに対して前方向の部分328に対応することができる。第2の撮像装置102bによって捕捉された1つまたは複数の画像は、車両302aの動きに対して後方向の同じ部分326に対応することができる。
図3Fを参照すると、撮像装置102の異なる表示画面における例示的なユーザインターフェース300fが示される。例示的なユーザインターフェース300fは、表示装置106aの第1の表示画面330aおよび第2の表示画面330bに対応することができる。第1の表示画面330aおよび第2の表示画面330bは、図3Dに記載された撮像装置102の向きに対応することができる。
第1の表示画面330aは、車両302aの前方向で撮像装置102によって撮像された1つまたは複数の画像に対応することができる。表示装置106aは、第1の例示的な道路304の部分306に対応する、捕捉された1つまたは複数の画像を、第1の表示画面330a上に表示するよう動作可能とすることができる。表示された1つまたは複数の画像は、検出された車両302bと、車両302bの前方に存在する可能性のある車両302cの少なくとも一部とを備えることができる。車両302cの存在は、境界ボックス332によって強調表示することができる。(図3Aで説明したような)追い越そうとする動作によって、または(図3Bで説明したように)追い越し動作によって、車両302bを追い越すための安全経路の利用不可能性を、警告指示334によって示すことができる。警告指示334は、車両302bおよび302cの表示された画像の近傍に配置することができるユーザインターフェース要素に対応することができる。第1の表示画面330aは、車両302aの起動された撮像装置102の向きのグラフィック表現を示す部分336をさらに備えることができる。例えば、第1の表示画面における撮像装置102の向きは、図3Dで説明したように、撮像装置102の第2の向き318bに対応する。
第2の表示画面330bは、車両302cの存在が検出されたが車両302cの画像が捕捉されていない場合に、撮像装置102によって捕捉された1つまたは複数の画像に対応することができる。車両302bの前方向で移動している可能性のある車両302cの存在は、電波ベースの物体検出装置および/またはレーザベースの物体検出装置に基づいて検出することができる。
例示的な状況によれば、車両302cの存在は、車両302aと車両302cとの間に確立された通信チャネル212aに基づいて検出することができる。そのような通信チャネル212aは、車両302aと車両302cとに存在する無線通信システム212に基づいて確立することができる。
別の例示的な状況によれば、表示装置106aは、第2の表示画面330bにおいて、車両302bの表示画像に重ね合わすことができる境界ボックス332に基づいて車両302cの存在を示すよう動作可能とすることができる。表示装置106aは、ユーザインターフェース要素338に基づいて通信チャネル212aの存在を示すようさらに動作可能とすることができる。車両302cと車両302aとの間の距離は、「100m先」などの例示的な文字列によって示すことができる。さらに、車両302bを追い越すための安全経路の利用不可能性を、警告指示334によって示すことができる。表示装置106aは、第2の表示画面330bの部分336に起動した撮像装置102の向きを示すようさらに動作可能とすることができる。
図3Gを参照すると、撮像装置102の例示的なユーザインターフェース300gが示される。例示的なユーザインターフェース300gは、表示装置106aの第1の表示画面340aおよび第2の表示画面340bを備えることができる。第1の表示画面340aおよび第2の表示画面340bは、図3Eに記載された撮像装置102の向きに対応することができる。
第1の表示画面340aは、第1の撮像装置102aおよび第2の撮像装置102bによって捕捉された1つまたは複数の画像を備えることができる。表示装置106aは、第1の表示画面340aを複数の領域に分割して、第1の撮像装置102aおよび第2の撮像装置102bによって捕捉された1つまたは複数の画像を表示するよう動作可能とすることができる。複数の領域は、第1の領域342aおよび第2の領域342bを備えることができる。第1の撮像装置102aに関連する1つまたは複数の捕捉画像は、車両302aの動きに対して前方向の第1の例示的な道路304の部分328に対応する。第1の撮像装置102aによって捕捉された1つまたは複数の画像は、第1の領域342aに表示することができる。第2の撮像装置102bによって捕捉された1つまたは複数の画像は、車両302aの動きに対して後方向の第1の例示的な道路304の部分326に対応する。第2の撮像装置102bによって捕捉された1つまたは複数の画像は、第2の領域342bに表示することができる。
第1の撮像装置102aによって捕捉された、表示された1つまたは複数の画像は、検出された車両302bと、車両302bの前方に存在する可能性のある車両302cの少なくとも一部とを備えることができる。同様に、第2の撮像装置102bによって取得された、表示された1つまたは複数の画像は、車両302aの後端から車両302aに向かって動く可能性がある検出車両344を備えることができる。
第1の領域342aは、図3Eで説明したように、車両302aの動きに対して前方向の起動した第1の撮像装置102aの向きのグラフィック表示を示す部分346aをさらに備えることができる。同様に、第2の領域342bは、図3Eで説明したように、車両302aの動きに対して前方に起動した第2の撮像装置102bの向きの別のグラフィック表示を示す部分346bを備えることができる。
第2の表示画面340bは、第1の表示画面340aに表示されるような要素を備えることができる。第2の表示画面340bは、第1の表示画面340aに記載された要素に加えて、車両302bの前方で移動している可能性のある検出車両302cの存在を強調する第1の境界ボックス348aを備える。第2の表示画面340bの第1の領域342aは、(図3Aで説明したような)追い越そうとする動作によって、または(図3Bで説明したような)追い越す動作によって、車両302bを追い越すための安全経路の利用不可能性を示す警告指示350aをさらに備えることができる。警告指示350aは、車両302bおよび302cの表示された画像の近傍に配置することができるユーザインターフェース要素に対応することができる。
第2の表示画面340bの第2の領域342bは、車両302aの後端から車両302aに向かって移動している可能性がある検出車両344の存在を強調する第2の境界ボックス348bを備えることができる。第2の表示画面340bの第2の領域342bは、(図3Aで説明したような)追い越そうとする動作によって、または(図3Bで説明したような)追い越す動作によって、検出車両344が存在するために、車両302bを追い越すための安全経路の利用不可能性を示す警告指示350bをさらに備えることができる。警告指示350bは、検出車両344の表示された画像の近傍に配置することができるユーザインターフェース要素に対応することができる。
図3Hを参照すると、本開示の一実施形態による、第3の例示的な状況300hの上面図が示される。第3の例示的な状況300hは、道路セグメント352a、352b、352c、および352dの交差を備えることができる交差点352を示す。さらに、交差点352の道路セグメント352a上を移動中の車両354が示されている。さらに、交差点352の道路セグメント352bは、窪みなどの障害物356を備える可能性がある。車両354の車両インフラは、図1に詳細に記載された車両100の車両インフラ100aと同様とすることができる。さらに、車両354の車両インフラのECU、検知装置、メモリ、撮像装置、およびI/O装置などの構成要素は、それぞれ、車両100(図1)の、ECU202、メモリ204、撮像装置102、表示装置106a、および車両インフラ100aの検知システム222などの構成要素と同様とすることができる。
第3の例示的な状況300hによれば、車両354内の検知システム222は、第2の情報を検出するよう動作可能とすることができる。第2の情報は、車両354において起動される方向指示器、旋回するための車両354による車線変更の検出、車両354の移動方向の交差の検出、および/または道路セグメント352a、352b、352c、および352dの交差における交通信号の検出の1つまたは複数に対応することができる。第2の情報は、ナビゲーションアプリケーションに設定された今後の走行経路上の交差点における旋回の検出に対応することができる。第2の情報は、さらに、車両354の減速、旋回支援モード起動のための所定の速度閾値を下回る車両354の低速の検出、旋回支援モード起動のための所定の角度閾値を超える操舵角の検出、および/または車両354の操舵角の変化の1つまたは複数に対応することができる。検出された第2の情報に基づいて、車両354の車両インフラは、旋回支援モードで車両354の撮像装置を起動させるよう動作可能とすることができる。
第3の例示的な状況300hによると、ECU202が第2の情報を検出すると、ECU202は、撮像装置102を起動させるよう動作可能とすることができる。ECU202は、図3Iで詳細に説明した撮像装置102の向きを調整するようさらに動作可能とすることができる。起動した撮像装置102は、車両354の助手席側に向かって、横方向および/または後方向で1つまたは複数の画像を捕捉するよう動作可能とすることができる。そのような捕捉された1つまたは複数の画像は、舗道、歩行者、自転車、または他の障害物に対応することができる。撮像装置102は、捕捉した1つまたは複数の画像を車両354の表示画面に表示するようさらに動作可能とすることができる。
第3の例示的な状況300hによれば、車両354は、道路セグメント352aから交差点に近づき、交差点352の道路セグメント352bに向かって旋回しようとする可能性がある。一例では、車両354が旋回しようとしている間に、生物が道路セグメント352bを横切る可能性がある。別の例では、障害物356は、旋回の近くに存在する可能性がある。しかしながら、車両354の運転者は、助手席側の死角により、生物および/または障害物356の存在に気付いていない可能性がある。そのような場合、生物および/または障害物356の存在の検出に基づいて、通知を含む警告指示を、車両354の車両インフラが生成することができる。生成された通知は、アイコンを介して車両354の電子計器クラスタ上に、または車両354の車両ステアリングホイールへの触覚フィードバックとして表現することができる。生成された経路情報は、車両354の表示画面上に表示することができる。
第3の例示的な状況300hによれば、生物および/または障害物356の存在の検出に基づいて、車両354の車両インフラによって動作を生成することができる。生成された動作は、車両354の速度が所定の速度閾値を下回る値に変化する速度に対応することができる。この動作は、さらに、検出された障害物356に基づいて、緊急ブレーキの自動適用または車両354の警報を鳴らすことに対応することができる。そのような動作は、伝達系218によって、駆動系216で車輪210に伝達される動力の減衰に基づいて実行することができる。
図3Iを参照すると、例示的な向き300iが図3Hと共に示される。例示的な向き300iは、第2の情報が車両354の検知システム222によって検出される場合の状況に対応することができる。撮像装置102は、第1の撮像装置102aおよび第2の撮像装置102bなどの、複数の撮像装置102を備える。第2の情報の検出に基づいて、第1の撮像装置102aおよび第2の撮像装置102bは、図3Hで説明するように、旋回支援モードで起動することができる。
例示的な向き300iは、第1の撮像装置102aおよび第2の撮像装置102bの第1の向き358aおよび第2の向き358bを備えることができる。第1の向き358aは、旋回支援モードで起動前の第1の撮像装置102aおよび第2の撮像装置102bの向きに対応することができる。第2の向き358bは、旋回支援モードで起動後の第1の撮像装置102aおよび第2の撮像装置102bの向きに対応することができる。
第1の向き358aを参照すると、旋回支援モードは起動しない。第1の撮像装置102aおよび第2の撮像装置102bは、車両354の動きに対して後方向の部分360に対応する1つまたは複数の画像を捕捉するよう動作可能とすることができる。第2の向き358bを参照すると、第1の撮像装置102aは、旋回支援モードが起動した場合に、車両354の横方向または後方向で部分362に対応する1つまたは複数の画像を捕捉するよう回転するように動作可能とすることができる。第1の撮像装置102aの横方向または後方向での起動に基づいて、第1の撮像装置102aは、交差点352の交差で舗道、歩行者、自転車、および/または他の障害物を捕捉するよう動作可能とすることができる。ステアリングホイール226の角度に基づいて、第1の撮像装置102aの横方向および/または後方向の角度を調整することができる。
第2の撮像装置102bによって捕捉された1つまたは複数の画像は、車両354の動きに対して横方向または後方向の部分362に対応することができる。第2の撮像装置102bによって捕捉された1つまたは複数の画像は、車両354の動きに対して後方向の部分360に対応することができる。
図4Aおよび図4Bは、本開示の一実施形態による、運転支援を提供する方法をまとめたフローチャートである。図4Aおよび図4Bを参照すると、フローチャート400が示される。フローチャート400は、図1および図2に関連して説明される。本方法は、ステップ402で開始し、ステップ404に進む。
ステップ404において、車両100に関連する1つまたは複数の動作が検出されたかどうかを判定することができる。場合によっては、車両100に関連する1つまたは複数の動作が検出された場合、制御はステップ406に移る。場合によっては、車両100に関連する1つまたは複数の動作が検出さない場合、制御はステップ402に戻る。
ステップ406では、撮像装置102を起動させる動作モードを決定することができる。動作モードの決定は、検出された1つまたは複数の動作に基づくことができる。一実施形態によれば、動作モードは、追越支援モードに対応することができる。一実施形態によれば、動作モードは、旋回支援モードに対応することができる。
一実施形態によれば、追越支援モードは、第1のモード起動のための所定の速度閾値を下回る車両の減速、第1のモード起動のための手動ボタンの選択、第1のモード起動のための所定の距離閾値を超える車両の横方向変位、車両のブレーキペダルの踏み込み、車両の方向指示器の起動、車両の所定の近接範囲内に他の車両が存在すること、運転者からの車両の前方方向の視界に伴う視界不良、別の車両による視界の遮蔽、他の車両の速度を第1のモード起動のための所定の速度閾値を下回る値に減少させること、および/または第1のモード起動のための所定の角度閾値を超える操舵角の変化、の1つまたは複数に対応する1つまたは複数の動作に基づいて起動することができる。
一実施形態によれば、旋回支援モードは、方向指示器の起動、第2のモード起動のための手動ボタンの選択、車両による車線変更の検出、車両の運動方向にある交差点の検出、ナビゲーションアプリケーションに設定された今後の走行経路上の交差点における旋回の検出、第2のモード起動のための所定の速度閾値を下回る値に車両が速度低下したことの検出、第2のモード起動のための所定の角度閾値を超える操舵角の変化の検出、および/または交通信号の検出、の1つまたは複数を備える検出された1つまたは複数の動作に基づいて起動することができる。
ステップ408では、撮像装置102が動作モードで起動されているかどうかを判断することができる。場合によっては、撮像装置102撮像装置102が動作モードで起動した場合、制御はステップ414に移行する。場合によっては、撮像装置102撮像装置102が動作モードで起動しなかった場合、制御はステップ410に移行する。
ステップ410において、撮像装置102は、決定した動作モードに基づいて起動することができる。さらに、撮像装置102が決定した動作モードで起動すると、撮像装置102の向きを制御することができる。一実施形態によれば、動作モードが旋回支援モードである場合、撮像装置102の向きは、車両の移動方向に対して、横方向および/または後方向とすることができる。一実施形態によれば、動作モードが追越支援モードである場合、撮像装置102の向きは、車両の移動方向に対して、前方向とすることができる。
ステップ412において、1つまたは複数の画像は、決定した動作モードで起動した撮像装置102によって捕捉することができる。ステップ410およびステップ412のこれらの連続的なステップは、代替的に、ステップ420の直前に配置することができる。ステップ414では、捕捉された1つまたは複数の画像の表示のための事前確認モードが設定されているかどうかを判定することができる。例では、捕捉された1つまたは複数の画像の表示のための事前確認モードが設定され、制御は416に移る。例では、捕捉された1つまたは複数の画像の表示のための事前確認モードが設定されない場合、制御は420に移る。
ステップ416において、決定された動作モードに対応する捕捉された1つまたは複数の画像の利用可能性を示す通知を表示装置106aによって表示することができる。ステップ418では、決定された動作モードに対応する捕捉された1つまたは複数の画像を表示するためのユーザ入力が受信されたかどうかを判定することができる。例では、ユーザ入力が受信された場合、制御はステップ420に移る。例では、ユーザ入力が受信されない場合、制御はステップ416に移る。
ステップ420では、決定された動作モードに対応する捕捉された1つまたは複数の画像を表示装置106aに表示することができる。ステップ422において、車両100の検知システム222のセンサによって1つもしくは複数の物体および/または1つもしくは複数の車両が検出されたかどうかを判定することができる。場合によっては、1つもしくは複数の物体および/または1つもしくは複数の車両が検出された場合、制御はステップ424に移る。場合によっては、1つもしくは複数の物体および/または1つもしくは複数の車両が検出されない場合、制御はステップ420に移る。
ステップ424で、検出された1つもしくは複数の物体および/または1つもしくは複数の車両に基づいて、通知を生成することができる。一実施形態によれば、通知は、1つまたは複数の物体の存在を示すことができる。一実施形態によれば、通知は、検出された1つまたは複数の他の車両を追い越すための経路が利用可能ではないことを示すことができる。生成された通知は、車両100の表示装置106a、電子計器クラスタ104a、および/または車両ステアリングホイール104bに表示することができる。
ステップ426において、撮像装置102が動作モードの1つで起動された場合に、検知装置によって1つまたは複数の他の動作が検出されたかどうかを判定することができる。1つまたは複数の他の動作が検出された場合、起動された撮像装置102は停止することができる。一実施形態によれば、起動した動作モードからの起動した撮像装置の停止は、モード停止のための所定の速度閾値を上回る車両の加速、モード停止のための所定の距離閾値を下回る車両の横方向変位、捕捉された1つまたは複数の画像において1つまたは複数の他の車両が存在しないこと、撮像装置の起動時間に対する横ずれの変化、モード停止のための角度閾値を下回る操舵角の変化、交差点における車両の旋回動作の完了の検出、方向指示器の停止、および/または停止のための手動ボタンの選択に基づくことができる。停止するために実行される1つまたは複数の他の動作は、撮像装置102を起動するために実行される1つまたは複数の動作と相補的であるとすることができる。場合によっては、1つまたは複数の他の動作が検出さない場合、制御はステップ420に戻る。1つまたは複数の他の動作が検出された場合、制御はステップ428に移る。ステップ428で、撮像装置102を停止することができ、捕捉された1つまたは複数の画像の表示装置106aへの表示を停止することができる。制御は最終ステップ430に進む。
本開示の一実施形態によれば、運転支援を提供するシステムは、(図2に示すような)ECU202などの1つまたは複数の回路を備えることができる。ECU202は、車両100に関連する1つまたは複数の動作を検出するよう動作可能とすることができる。検出された1つまたは複数の動作は、車両100に埋め込まれた1つまたは複数のセンサによって生成された1つまたは複数の信号に基づくことができる。ECU202は、検出された1つまたは複数の動作に基づいて、車両100の運転者の反対側に位置する撮像装置102の起動を制御するようさらに動作可能とすることができる。撮像装置102は、車両100の前方向に1つまたは複数の画像を捕捉するよう動作可能とすることができる。
本開示の様々な実施形態は、格納される非一時的コンピュータ可読媒体および/または記憶媒体、運転支援をもたらすために機械および/またはコンピュータによって実行可能な少なくとも1つのコードセクションを有する機械コードおよび/またはコンピュータプログラムを提供することができる。少なくとも1つのコードセクションは、車両および/またはコンピュータに、車両で使用される電子制御ユニットによって、車両に関連する1つまたは複数の動作の検出を備えるステップを実行させることができる。1つまたは複数の動作の検出は、車両に埋め込まれた1つまたは複数のセンサによって生成された1つまたは複数の信号に基づくことができる。車両の運転者の反対側の車両に配置された撮像装置の起動は、車両で使用される電子制御ユニットによって制御することができる。撮像装置の起動の制御は、検出された1つまたは複数の動作に基づくことができる。さらに、撮像装置は、車両の前方向に1つまたは複数の画像を捕捉するよう動作可能とすることができる。
本開示の一実施形態によれば、車両100(図1)は、少なくとも車両動力システム228(図2)に関連するバッテリ230、車両100に埋め込まれた検知システム222(図2)、車両100の運転者側108a(図1)に対して反対側108b(図1)に配置される撮像装置102(図1)、表示装置106a(図2)、および/または電子制御ユニット(ECU)202(図2)を備えることができる。車両100の検知システム222は、車両の前方向に1つまたは複数の画像を捕捉するよう構成することができる。表示装置106aは、捕捉した1つまたは複数の画像を表示するよう構成することができる。ECU202は、車両100に埋め込まれた検知システム222によって生成された1つまたは複数の信号に基づいて、車両100に関連する1つまたは複数の動作を検出するよう構成することができる1つまたは複数の回路を備えることができる。ECU202の1つまたは複数の回路は、車両100の運転者側108aに対して反対側108bに位置する撮像装置102の起動を制御するようさらに構成することができる。起動は、検出された1つもしくは複数の動作および/または捕捉された1つもしくは複数の画像に基づいて制御することができる。
本開示は、ハードウェア、またはハードウェアとソフトウェアとの組み合わせで実現することができる。本開示は、少なくとも1つのコンピュータシステムにおいて、または様々な要素をいくつかの相互接続されたコンピュータシステムにわたって分散することができる分散方式で、集中的に実現することができる。本明細書に記載の方法を実行するのに適したコンピュータシステムまたは他の装置が適している可能性がある。ハードウェアとソフトウェアの組み合わせは、ロードされ実行された場合、本明細書に記載の方法を実行するようにコンピュータシステムを制御することができるコンピュータプログラムを有する汎用コンピュータシステムとすることができる。本開示は、他の機能も実行する集積回路の一部を備えるハードウェアで実現してもよい。
本開示は、本明細書に記載された方法の実施を可能にするすべての特徴を備え、コンピュータシステムにロードされた場合にこれらの方法を実行することができる、コンピュータプログラム製品に埋め込むこともできる。本明細書において、コンピュータプログラムとは、任意の言語、コード、または表記で、情報処理能力を有するシステムに、特定の機能を直接的に、または以下、すなわち、a)別の言語、コード、または表記への変換、b)異なるマテリアル形式での複製、のいずれかまたは両方で特定の機能を実行させようとする命令のセットの任意の表現を意味する。
本開示は、特定の実施形態を参照して説明しているが、本開示の範囲から逸脱することなく、様々な変更がなされ、同等物で代用することができることは、当業者によって理解されよう。さらに、その範囲から逸脱することなく、特定の状況または材料を本開示の教示に適合させるために、多くの修正を行うことができる。したがって、本開示は、開示された特定の実施形態に限定されず、本開示は、添付の特許請求の範囲内に入るすべての実施形態を含むことが意図される。
Claims (20)
- 運転支援システムであって、前記システムは、
車両で使用される電子制御ユニット内の1つまたは複数の回路を備え、前記1つまたは複数の回路が、
前記車両に埋め込まれた1つまたは複数のセンサによって生成された1つまたは複数の信号に基づいて、前記車両に関連する1つまたは複数の動作を検出し、
前記検出された1つまたは複数の動作に基づいて、前記車両の運転者の反対側で前記車両に配置される、前記車両の前方向で1つまたは複数の画像を捕捉するよう動作可能な、撮像装置の起動を制御する、
よう構成される、
運転支援システム。 - 前記撮像装置は、第1のモードまたは第2のモードのうちの1つに対応する動作モードで起動され、前記第1のモードおよび前記第2のモードは、少なくとも前記検出された1つもしくは複数の動作および/または前記撮像装置による前記捕捉された1つもしくは複数の画像に基づき、前記第1のモードは前方車両を追い越すために使用され、前記第2のモードは交差点で旋回するために使用される、請求項1に記載のシステム。
- 前記撮像装置は、第1のモード起動のための所定の速度閾値未満の前記車両の減速、前記第1のモード起動のための手動ボタンの選択、第1のモード起動のための所定の距離閾値を超える前記車両の横方向変位、前記車両のブレーキペダルの押下、前記車両の方向指示器の起動、前記車両の所定の近接範囲内の別の車両の存在、運転者から前記車両の前方向の視界に関する低視認性、前記他の車両による前記視界の遮蔽、第1のモード起動のための所定の速度閾値未満の値への前記他の車両の減速、および/または第1のモード起動のための所定の角度閾値を超える操舵角の変化、の1つまたは複数を備える前記検出された前記1つまたは複数の動作に基づき前記第1のモードで前方車両を検出するために前記前方向で前記1つまたは複数の画像を捕捉するよう起動する、請求項2に記載のシステム。
- 前記撮像装置は、方向指示器の起動、前記第2のモード起動のための手動ボタンの選択、前記車両による車線変更の検出、前記車両の運動方向にある交差点の検出、ナビゲーションアプリケーションに設定された今後の走行経路上の交差点における旋回の検出、前記第2のモード起動のための所定の速度閾値を下回る値に前記車両が速度低下したことの検出、前記第2のモード起動のための所定の角度閾値を超える操舵角の変化の検出、および/または交通信号の検出、の1つまたは複数を備える前記検出された前記1つまたは複数の動作に基づき、前記第2のモードが障害物または生物を検出するために後方向または横方向で前記1つまたは複数の画像を捕捉するよう起動される、請求項2に記載のシステム。
- 前記1つまたは複数の回路は、前記車両の表示画面上での前記捕捉された1つもしくは複数の画像の表示を制御し、ならびに/または前記捕捉された1つもしくは複数の画像が別の検出された車両および/もしくは生物に対応する場合に前記捕捉された1つもしくは複数の画像を用いて警告指示を表示するよう構成される、請求項1に記載のシステム。
- 前記撮像装置の前記起動は、前記撮像装置の視線の調整を備える、請求項1に記載のシステム。
- 前記1つまたは複数の回路は、前記車両の下の路面の1つまたは複数の路面特性に基づいて前記起動した撮像装置の視線の調整を制御するよう構成され、前記1つまたは複数の路面特性は、上向き傾斜、下向き傾斜、バンク角、曲率、境界、速度制限、道路状態、窪み、および/または車線区分線のうちの1つまたは複数を備える、請求項1に記載のシステム。
- 前記撮像装置の前記起動の前記制御は、音声ベースのコマンド、ジェスチャベースのコマンド、および/または前記車両のパネルもしくはステアリングホイール上に配置された手動ボタンの選択、の1つまたは複数に基づく、請求項1に記載のシステム。
- 前記1つまたは複数の回路は、インフォテインメントディスプレイ、ヘッドアップディスプレイ(HUD)、拡張現実(AR)−HUD、ドライバ情報コンソール(DIC)、シースルーディスプレイ、またはスマートグラスディスプレイのうちの1つを使用することによって前記1つまたは複数の捕捉された画像の表示を制御するよう構成される、請求項1に記載のシステム。
- 前記1つまたは複数の回路は、モード停止のための所定の速度閾値を上回る前記車両の加速、モード停止のための所定の距離閾値を下回る前記車両の横方向変位、前記捕捉された1つまたは複数の画像内に1つまたは複数の他の車両が存在しないこと、前記撮像装置の起動時間に対する前記横方向変位の変化、モード停止のための角度閾値を下回る操舵角の変化、交差点における前記車両の旋回動作の完了の検出、方向指示器の停止、および/または前記停止のための手動ボタンの選択、の1つまたは複数に基づき前記起動した撮像装置を停止するよう構成される、請求項1に記載のシステム。
- 前記1つまたは複数の回路は、前記撮像装置の前記起動に基づいて前記車両が前記前方車両を安全に通過できるかどうかを示す情報を生成するよう構成され、前記生成された情報は、視覚情報、触覚情報、および/または音声情報の1つまたは複数を備える、請求項1に記載のシステム。
- 前記1つまたは複数の回路は、1つまたは複数の他の車両を検出するために、前記撮像装置、電波ベースの物体検出装置、レーザベースの物体検出装置、および/または無線通信装置のうちの1つまたは複数を利用するよう構成される、請求項11に記載のシステム。
- 前記撮像装置は、前記車両の助手席側リアビューミラーまたは外部ボディに取り付けられるか、または一体化される、請求項1に記載のシステム。
- 前記撮像装置は、前記車両の助手席側のリアビューミラーまたは外部ボディに調整可能に取り付けられ、1つまたは複数の画像を後方向または横方向で捕捉する、請求項1に記載のシステム。
- 運転支援方法であって、前記方法が、
車両で使用される電子制御ユニットによって、前記車両に埋め込まれる1つまたは複数のセンサによって生成される1つまたは複数の信号に基づいて前記車両と関連する1つまたは複数の動作を検出するステップと、
前記車両で使用される前記電子制御ユニットによって、前記検出された1つまたは複数の動作に基づいて、前記車両の運転者の反対側の前記車両に配置される、前記車両の前方向で1つまたは複数の画像を捕捉するよう動作可能な、撮像装置の起動を制御するステップと、
を備える、方法。 - 前記撮像装置は、第1のモードまたは第2のモードのうちの1つに対応する動作モードで起動され、前記第1のモードおよび前記第2のモードは、少なくとも前記検出された1つもしくは複数の動作および/または前記撮像装置による前記捕捉された1つもしくは複数の画像に基づき、前記第1のモードは前方車両を追い越すために使用され、前記第2のモードは交差点で旋回するために使用される、請求項15に記載の方法。
- 前記車両の表示画面上での前記捕捉された1つもしくは複数の画像の表示を制御するステップならびに/または前記捕捉された1つもしくは複数の画像が別の検出された車両および/もしくは生物に対応する場合に前記捕捉された1つもしくは複数の画像を用いて警告指示を表示するステップをさらに備える、請求項15に記載の方法。
- 前記撮像装置の前記起動が、前記撮像装置の視線の調整を備える、請求項15に記載の方法。
- コンピュータによって実行可能な少なくとも1つのコードセクションを有し、それにより、前記コンピュータに、運転支援方法のステップを実行させるプログラムを格納する非一時的コンピュータ可読記憶媒体であって、前記方法が、
車両で使用される電子制御ユニットによって、前記車両に埋め込まれた1つまたは複数のセンサによって生成される1つまたは複数の信号に基づいて前記車両と関連する1つまたは複数の動作を検出するステップと、
前記車両で使用される前記電子制御ユニットによって、前記検出された1つまたは複数の動作に基づいて、前記車両の運転者の反対側の前記車両に配置される、前記車両の前方向で1つまたは複数の画像を捕捉するよう動作可能な、撮像装置の起動を制御するステップと、
を備える、非一時的コンピュータ可読記憶媒体。 - 車両であって、
バッテリと、
前記車両に関連する動作を検出するよう構成される検知システムと、
前記バッテリによって電力供給され、前記車両の前方向に1つまたは複数の画像を捕捉するよう構成される撮像装置と、
前記捕捉された1つまたは複数の画像を表示するよう構成される表示装置と、
電子制御ユニット(ECU)内の1つまたは複数の回路と、
を備え、
前記1つまたは複数の回路が、
前記車両に埋め込まれた前記検知システムによって生成された1つまたは複数の信号に基づいて、前記車両に関連する1つまたは複数の動作を検出し、
前記検出された1つもしくは複数の動作および/または前記捕捉された1つもしくは複数の画像に基づいて、前記車両の運転者の反対側で前記車両に配置される前記撮像装置の起動を制御する、
よう構成される、
車両。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/851,201 US10181266B2 (en) | 2015-09-11 | 2015-09-11 | System and method to provide driving assistance |
US14/851,201 | 2015-09-11 | ||
PCT/JP2016/003901 WO2017043033A1 (en) | 2015-09-11 | 2016-08-26 | System and method to provide driving assistance |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2018536912A true JP2018536912A (ja) | 2018-12-13 |
Family
ID=56990897
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018507046A Pending JP2018536912A (ja) | 2015-09-11 | 2016-08-26 | 運転支援を提供するシステムおよび方法 |
Country Status (8)
Country | Link |
---|---|
US (1) | US10181266B2 (ja) |
EP (1) | EP3347888A1 (ja) |
JP (1) | JP2018536912A (ja) |
KR (1) | KR20180051503A (ja) |
CN (1) | CN107924634A (ja) |
CA (1) | CA2996401A1 (ja) |
MX (1) | MX2018002675A (ja) |
WO (1) | WO2017043033A1 (ja) |
Families Citing this family (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10599155B1 (en) | 2014-05-20 | 2020-03-24 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle operation feature monitoring and evaluation of effectiveness |
US10185997B1 (en) | 2014-05-20 | 2019-01-22 | State Farm Mutual Automobile Insurance Company | Accident fault determination for autonomous vehicles |
US11669090B2 (en) | 2014-05-20 | 2023-06-06 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle operation feature monitoring and evaluation of effectiveness |
US10373259B1 (en) | 2014-05-20 | 2019-08-06 | State Farm Mutual Automobile Insurance Company | Fully autonomous vehicle insurance pricing |
US9972054B1 (en) | 2014-05-20 | 2018-05-15 | State Farm Mutual Automobile Insurance Company | Accident fault determination for autonomous vehicles |
US10387962B1 (en) | 2014-07-21 | 2019-08-20 | State Farm Mutual Automobile Insurance Company | Methods of reconstructing an accident scene using telematics data |
US9944282B1 (en) | 2014-11-13 | 2018-04-17 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle automatic parking |
US11107365B1 (en) | 2015-08-28 | 2021-08-31 | State Farm Mutual Automobile Insurance Company | Vehicular driver evaluation |
US10071748B2 (en) | 2015-09-17 | 2018-09-11 | Sony Corporation | System and method for providing driving assistance to safely overtake a vehicle |
US11441916B1 (en) | 2016-01-22 | 2022-09-13 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle trip routing |
US11719545B2 (en) | 2016-01-22 | 2023-08-08 | Hyundai Motor Company | Autonomous vehicle component damage and salvage assessment |
US10824145B1 (en) | 2016-01-22 | 2020-11-03 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle component maintenance and repair |
US11242051B1 (en) | 2016-01-22 | 2022-02-08 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle action communications |
US10134278B1 (en) | 2016-01-22 | 2018-11-20 | State Farm Mutual Automobile Insurance Company | Autonomous vehicle application |
JP6460039B2 (ja) * | 2016-04-27 | 2019-01-30 | トヨタ自動車株式会社 | レーン維持制御装置 |
US10528056B2 (en) | 2016-05-06 | 2020-01-07 | GM Global Technology Operations LLC | Vehicle guidance system |
US10528826B2 (en) * | 2016-05-06 | 2020-01-07 | GM Global Technology Operations LLC | Vehicle guidance system |
US9925920B2 (en) * | 2016-05-24 | 2018-03-27 | Ford Global Technologies, Llc | Extended lane blind spot detection |
WO2018132605A1 (en) * | 2017-01-12 | 2018-07-19 | Mobileye Vision Technologies Ltd. | Determining a road surface characteristic |
JP6944525B2 (ja) * | 2017-01-27 | 2021-10-06 | ジェンテックス コーポレイション | オートバイバンキングのための画像補正 |
CN106853800B (zh) * | 2017-03-02 | 2020-04-14 | 合肥鑫晟光电科技有限公司 | 一种车辆行进监控系统 |
EP3373037B1 (en) * | 2017-03-10 | 2023-06-28 | The Hi-Tech Robotic Systemz Ltd | Single casing advanced driver assistance system |
US10421399B2 (en) * | 2017-05-26 | 2019-09-24 | GM Global Technology Operations LLC | Driver alert systems and methods based on the presence of cyclists |
FR3067686B1 (fr) * | 2017-06-14 | 2021-03-05 | Renault Sas | Aide a la conduite pour vehicule automobile |
DE102017114450B4 (de) * | 2017-06-29 | 2020-10-08 | Grammer Aktiengesellschaft | Vorrichtung und Verfahren zum Abbilden von Bereichen |
DE102017212780B4 (de) * | 2017-07-25 | 2022-11-17 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur Erzeugung eines haptischen Feedbacks |
US10850732B2 (en) * | 2017-09-05 | 2020-12-01 | Aptiv Technologies Limited | Automated speed control system |
JP2019066963A (ja) * | 2017-09-28 | 2019-04-25 | 株式会社デンソー | 運転支援装置および運転支援方法 |
US20190246036A1 (en) * | 2018-02-02 | 2019-08-08 | Futurewei Technologies, Inc. | Gesture- and gaze-based visual data acquisition system |
JP7185408B2 (ja) * | 2018-03-02 | 2022-12-07 | 本田技研工業株式会社 | 車両制御装置 |
US10813169B2 (en) | 2018-03-22 | 2020-10-20 | GoTenna, Inc. | Mesh network deployment kit |
DE102018213554A1 (de) | 2018-08-10 | 2020-02-13 | Audi Ag | Verfahren und Anzeigeeinrichtung zur Visualisierung einer Anordnung sowie Wirkungsweise von Umfeldsensoren eines Kraftfahrzeugs |
CN111204333B (zh) * | 2018-11-22 | 2023-06-27 | 沃尔沃汽车公司 | 车辆前方盲点检测和警告系统 |
CN109785655B (zh) * | 2018-12-11 | 2020-09-29 | 北京百度网讯科技有限公司 | 车辆控制方法、装置、设备、无人驾驶车辆及存储介质 |
US10926798B2 (en) | 2019-01-28 | 2021-02-23 | Ford Global Technologies, Llc | Pothole display |
CN109835254A (zh) * | 2019-03-20 | 2019-06-04 | 王传兴 | 一种汽车转弯报警系统 |
EP3718828A1 (en) * | 2019-04-04 | 2020-10-07 | Visteon Global Technologies, Inc. | System for providing a side mirror function |
US11657694B2 (en) | 2019-04-12 | 2023-05-23 | Stoneridge Electronics Ab | Mobile device usage monitoring for commercial vehicle fleet management |
DE102019207951B4 (de) | 2019-05-29 | 2022-06-30 | Volkswagen Aktiengesellschaft | Verfahren zum Durchführen einer Korrektur der Fahrtrichtung durch ein Fahrerassistenzsystem in einem Kraftfahrzeug sowie eine Steuervorrichtung hierzu |
US11269076B2 (en) * | 2019-07-11 | 2022-03-08 | Mtd Products Inc | Solid state LIDAR machine vision for power equipment device |
US11210946B2 (en) * | 2019-07-15 | 2021-12-28 | Verizon Patent And Licensing Inc. | Content sharing between vehicles based on a peer-to-peer connection |
KR20210017515A (ko) * | 2019-08-08 | 2021-02-17 | 현대자동차주식회사 | 차량의 모션 인식 장치 및 방법 |
JP7247851B2 (ja) * | 2019-10-11 | 2023-03-29 | トヨタ自動車株式会社 | 運転者支援装置 |
DE102019133680B3 (de) * | 2019-12-10 | 2021-03-04 | Audi Ag | Verfahren und System zum Durchführen einer Rekuperation |
CN113212312B (zh) * | 2020-01-21 | 2023-03-07 | 重庆长安汽车股份有限公司 | 一种ar后视镜总成及其控制方法 |
US11858509B2 (en) * | 2020-03-02 | 2024-01-02 | GM Global Technology Operations LLC | Driver offset request for automated lane following |
KR20220040884A (ko) * | 2020-09-24 | 2022-03-31 | 삼성전자주식회사 | 외부 물체에 대한 알림을 디스플레이하는 전자 장치 및 그 방법 |
US11482191B2 (en) * | 2020-10-08 | 2022-10-25 | Ford Global Technologies, L.L.C | Enhanced augmented reality vehicle pathway |
US11780493B2 (en) * | 2021-03-31 | 2023-10-10 | Honda Motor Co., Ltd. | Control device for vehicle |
CN113085745A (zh) * | 2021-04-27 | 2021-07-09 | 重庆金康赛力斯新能源汽车设计院有限公司 | 一种抬头显示的显示方法和系统 |
US11590845B2 (en) * | 2021-04-29 | 2023-02-28 | Toyota Research Institute, Inc. | Systems and methods for controlling a head-up display in a vehicle |
JP2023035095A (ja) * | 2021-08-31 | 2023-03-13 | トヨタ自動車株式会社 | 表示制御装置、表示システム、表示方法及び表示プログラム |
DE102022111784A1 (de) * | 2022-05-11 | 2023-11-16 | Man Truck & Bus Se | Kraftfahrzeug, mit Kamera-Display-System, vorzugsweise zur Unterstützung einer Vorbeifahrt an einem Hindernis, insbesondere im innerörtlichen Verkehr |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19749363B4 (de) | 1997-11-07 | 2005-10-27 | Volkswagen Ag | Kraftfahrzeug mit Abstandssensor |
US6320612B1 (en) | 1998-05-12 | 2001-11-20 | Jan J. Young | Vehicular camera system with plural perspectives |
US8130269B2 (en) * | 2005-03-23 | 2012-03-06 | Aisin Aw Co., Ltd. | Visual recognition apparatus, methods, and programs for vehicles |
JP5072201B2 (ja) | 2005-07-28 | 2012-11-14 | ライト工業株式会社 | 環境保全工法 |
CN101029823B (zh) * | 2006-02-28 | 2010-09-15 | 东软集团股份有限公司 | 基于车辆状态分类的车辆跟踪方法和装置 |
JP2008205644A (ja) | 2007-02-16 | 2008-09-04 | Fujitsu Ltd | 画像処理装置及び画像処理方法 |
JP4937030B2 (ja) * | 2007-07-24 | 2012-05-23 | ルネサスエレクトロニクス株式会社 | 車両用画像処理装置 |
DE102009040674A1 (de) | 2009-09-08 | 2010-07-01 | Daimler Ag | Verfahren und Vorrichtung zur Unterstützung eines Fahrers eines Fahrzeugs bei der Durchführung eines Überholmanövers |
DE102009048493A1 (de) * | 2009-09-25 | 2011-04-07 | Valeo Schalter Und Sensoren Gmbh | Fahrerassistenzsystem für ein Fahrzeug, Fahrzeug mit einem Fahrerassistenzsystem und Verfahren zum Unterstützen eines Fahrers beim Führen eines Fahrzeugs |
DE102011009106A1 (de) * | 2011-01-21 | 2012-07-26 | Audi Ag | Verfahren zum Betrieb eines eine auf einen Überholvorgang bezogene Empfehlung ausgebenden Fahrerassistenzsystems eines Kraftfahrzeugs und Kraftfahrzeug |
EP2885161B1 (en) | 2012-08-16 | 2020-07-15 | Klear-View Camera, LLC | System and method for providing front-oriented visual information to vehicle driver |
KR101373616B1 (ko) | 2012-11-14 | 2014-03-12 | 전자부품연구원 | 차량용 사이드 카메라 시스템 및 그 제어방법 |
DE102013201379B4 (de) | 2013-01-29 | 2020-12-10 | Robert Bosch Gmbh | Motorrad mit einem Kamerasystem |
US20140222298A1 (en) * | 2013-02-03 | 2014-08-07 | Michael H. Gurin | Systems For a Shared Vehicle |
US9487142B2 (en) * | 2013-06-25 | 2016-11-08 | Magna Mirrors Of America, Inc. | Rearview mirror assembly for vehicle |
CN103310465B (zh) * | 2013-06-27 | 2016-02-03 | 东南大学 | 一种基于马尔科夫随机场的车辆遮挡处理方法 |
CN203708343U (zh) * | 2013-07-10 | 2014-07-09 | 广州敏视数码科技有限公司 | 一种镜头可旋转车载摄像头 |
KR101565006B1 (ko) * | 2014-05-30 | 2015-11-13 | 엘지전자 주식회사 | 차량용 어라운드뷰 제공 장치 및 이를 구비한 차량 |
US20160193998A1 (en) * | 2015-01-02 | 2016-07-07 | Atieva, Inc. | Automatically Activated Vehicle Obstacle Viewing System |
CN204488644U (zh) * | 2015-02-09 | 2015-07-22 | 浙江机电职业技术学院 | 汽车a柱视域视线辅助系统 |
CN204845735U (zh) * | 2015-07-26 | 2015-12-09 | 黄远治 | 一种提高转弯视线范围的挂车 |
-
2015
- 2015-09-11 US US14/851,201 patent/US10181266B2/en not_active Expired - Fee Related
-
2016
- 2016-08-26 KR KR1020187005805A patent/KR20180051503A/ko unknown
- 2016-08-26 CN CN201680051116.5A patent/CN107924634A/zh active Pending
- 2016-08-26 WO PCT/JP2016/003901 patent/WO2017043033A1/en active Application Filing
- 2016-08-26 EP EP16770581.3A patent/EP3347888A1/en not_active Withdrawn
- 2016-08-26 CA CA2996401A patent/CA2996401A1/en not_active Abandoned
- 2016-08-26 JP JP2018507046A patent/JP2018536912A/ja active Pending
- 2016-08-26 MX MX2018002675A patent/MX2018002675A/es unknown
Also Published As
Publication number | Publication date |
---|---|
KR20180051503A (ko) | 2018-05-16 |
US10181266B2 (en) | 2019-01-15 |
MX2018002675A (es) | 2018-04-13 |
CN107924634A (zh) | 2018-04-17 |
US20170076606A1 (en) | 2017-03-16 |
EP3347888A1 (en) | 2018-07-18 |
CA2996401A1 (en) | 2017-03-16 |
WO2017043033A1 (en) | 2017-03-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2018536912A (ja) | 運転支援を提供するシステムおよび方法 | |
JP7371671B2 (ja) | 車両に安全に追い付けるように運転を支援するシステムおよび方法 | |
JP7253840B2 (ja) | 自動運転制御装置及び車両 | |
CN108058712B (zh) | 车辆及其控制方法 | |
JP6881444B2 (ja) | 車両に情報を送信するシステムおよび方法、車両、並びに非一過性のコンピュータ可読記憶媒体 | |
CN109562760B (zh) | 对于自主车辆测试预测 | |
US10937314B2 (en) | Driving assistance apparatus for vehicle and control method thereof | |
US10246095B2 (en) | Regenerative braking control apparatus for vehicles | |
EP3401148B1 (en) | Vehicle control device mounted on vehicle and method for controlling the vehicle | |
JP6323385B2 (ja) | 車両走行制御装置 | |
US10884412B2 (en) | Autonomous vehicle and method of controlling the same | |
US11016497B2 (en) | Vehicle control system, vehicle control method, and vehicle control program | |
CN109835257B (zh) | 显示装置及具有该显示装置的车辆 | |
CN110053608B (zh) | 安装在车辆上的车辆控制装置及控制该车辆的方法 | |
KR20210083462A (ko) | 운전자 보조 시스템, 그를 가지는 차량 및 그 제어 방법 | |
US20190276044A1 (en) | User interface apparatus for vehicle and vehicle including the same | |
KR102611337B1 (ko) | 차량의 ar 디스플레이 장치 및 그것의 동작방법 | |
US10442295B2 (en) | Display device and vehicle having the same | |
KR101979277B1 (ko) | 차량용 사용자 인터페이스 장치 및 차량 | |
KR20220125148A (ko) | 영상 출력 장치 및 그것의 제어 방법 | |
KR102387610B1 (ko) | 차량 및 그 제어방법 | |
KR101919889B1 (ko) | 디스플레이 장치 및 그것을 포함하는 차량 | |
JP2019171893A (ja) | 運転支援システム、運転支援装置、運転支援方法 | |
JP2023137771A (ja) | 表示制御装置、表示制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190819 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201027 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201223 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210406 |