JP7843796B2 - 制御装置、制御方法、およびプログラム - Google Patents
制御装置、制御方法、およびプログラムInfo
- Publication number
- JP7843796B2 JP7843796B2 JP2024037243A JP2024037243A JP7843796B2 JP 7843796 B2 JP7843796 B2 JP 7843796B2 JP 2024037243 A JP2024037243 A JP 2024037243A JP 2024037243 A JP2024037243 A JP 2024037243A JP 7843796 B2 JP7843796 B2 JP 7843796B2
- Authority
- JP
- Japan
- Prior art keywords
- lane
- image
- moving
- display
- display unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/18—Propelling the vehicle
- B60W30/18009—Propelling the vehicle related to particular drive situations
- B60W30/18163—Lane change; Overtaking manoeuvres
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3658—Lane guidance
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—Two-dimensional [2D] image generation
- G06T11/60—Creating or editing images; Combining images with text
- G06T11/65—Creating or editing images; Combining images with text on geographic maps
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
- B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Theoretical Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
Description
(1):この発明の一態様に係る制御装置は、移動体の周辺の状況を認識する認識部と、前記認識部により認識された前記周辺の状況に含まれる車線を表示部に表示させ、前記移動体の目標経路が、前記移動体が走行する第1車線に隣接する車線側である場合に、前記隣接する車線のオブジェクトの画像に前記車線側への移動体の移動を表す移動表示のオブジェクトの画像を重ねた画像を前記表示部に表示させる制御部と、を備え、前記隣接する車線が、前記移動体が走行している位置よりも前記移動体の進行方向の前方で前記第1車線に接続して増加する第2車線である場合に、前記制御部は、前記移動表示のオブジェクトの画像を前記表示部にさせるときに前記認識部が前記第2車線を認識していない場合であっても、前記第2車線のオブジェクトの画像を前記表示部に表示させる。
図1は、実施形態に係る車両制御システムを利用した車両システム1の構成図である。車両システム1が搭載される車両は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジンなどの内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。本実施形態は、車両に適用されるものとして説明するが、車両に代えて他の移動体に適用されてもよい。
図2は、比較例について説明するための図(その1)である。例えば、車両Mが第1車線L1を走行している。車両Mは、第1車線L1に隣接する第2車線L2に車線変更する予定である。第2車線L2は、第1車線L1から分岐する分岐車線であり。例えば、以下の制御は、車両Mが、第2車線L2を走行することが目標経路として設定されている場合に実行される制御である。また、車両Mの乗員(ドライバ)が、第1車線L1と第2車線L2とが接続している接続位置から所定距離手前で第2車線L2に車両Mを車線変更させることを指示する操作を行っている場合に実行される制御である。指示する操作とは、例えば、所定の車線変更の予約ボタンを操作することや、第1操作子84を操作することなど任意の操作である。例えば、予約ボタンの操作により分岐車線への車線変更が自動で行なわれる分岐支援制御が実行される。
処理部152は、認識部110により認識された車両Mの周辺の状況に含まれる車線を表示部に表示させる。処理部152は、車両Mの目標経路が、車両Mが走行する第1車線に隣接する車線側である場合に、隣接する車線のオブジェクトの画像に車線側への車両Mの移動を表す移動表示のオブジェクトの画像を重ねた画像を表示部に表示させる。
図5は、運転支援装置100により実行される処理の流れの一例を示すフローチャートである。まず、処理部152は、車両Mの位置情報を取得する(ステップS100)。次に、処理部152は、ナビ情報を取得する(ステップS102)。ナビ情報は、ナビゲーション装置50に設定されている目的地の情報や、ナビゲーション装置50が案内する車両Mの目標走路の情報、目標走路の周辺の道路の構造などである。ステップS100およびステップS102の処理は所定の間隔で繰り返し実行される。
プログラムを記憶した記憶装置と、
ハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサが前記記憶装置に記憶されたプログラムを実行することにより、
移動体の周辺の状況を認識し、
前記周辺の状況に含まれる車線を表示部に表示させ、
前記移動体の目標経路が、前記移動体が走行する第1車線に隣接する車線側である場合に、前記隣接する車線のオブジェクトの画像に前記車線側への移動体の移動を表す移動表示のオブジェクトの画像を重ねた画像を前記表示部に表示させ、
前記隣接する車線が、前記移動体が走行している位置よりも前記移動体の進行方向の前方で前記第1車線に接続して増加する第2車線である場合に、
前記移動表示のオブジェクトの画像を前記表示部にさせるときに前記認識部が前記第2車線を認識していない場合であっても、前記第2車線のオブジェクトの画像を前記表示部に表示させることを、実行する、
ように構成されている、制御装置。
10 カメラ
80 操作子
84 第1操作子
90 方向指示器
100 運転支援装置
110 認識部
150 制御部
152 処理部
154 支援制御部
Claims (9)
- 移動体の周辺の状況を認識する認識部と、
前記認識部により認識された前記周辺の状況に含まれる車線を画像に変換して変換後の画像を表示部に表示させ、
前記移動体の目標経路が、前記移動体が走行する第1車線に隣接する車線側である場合に、前記隣接する車線のオブジェクトの画像に前記車線側への移動体の移動を表す移動表示のオブジェクトの画像を重ねた画像を前記表示部に表示させる制御部と、を備え、
前記隣接する車線が、前記移動体が走行している位置よりも前記移動体の進行方向の前方で前記第1車線に接続して増加する第2車線である場合に、
前記制御部は、前記移動表示のオブジェクトの画像を前記表示部に表示させるときに前記認識部が前記第2車線を認識していない場合であっても、前記第2車線のオブジェクトの画像を前記表示部に表示させる、
制御装置。 - 前記制御部は、道路情報に基づいて、前記第2車線が前記移動体の進行方向に存在することを特定して前記第2車線のオブジェクトの画像を前記表示部に表示させる、
請求項1に記載の制御装置。 - 前記制御部は、前記第2車線のオブジェクトの画像と前記移動表示のオブジェクトの画像とを同時に前記表示部に表示させる、
請求項1に記載の制御装置。 - 前記制御部は、前記第2車線のオブジェクトの画像を前記表示部に表示させた後に前記移動表示のオブジェクトの画像を前記表示部に表示させる、
請求項1に記載の制御装置。 - 前記移動体を前記第2車線に自動で車線変更させる自動車線変更制御を実行する自動車線変更制御部を、更に備え、
前記制御部は、前記自動車線変更制御が実行されている場合に前記第2車線のオブジェクトの画像と前記移動表示のオブジェクトの画像とを重畳して前記表示部に表示させる、
請求項1に記載の制御装置。 - 前記制御部は、
前記移動体が前記第2車線の始点から所定距離手前に存在することにより前記認識部が前記第2車線を認識することができない場合であっても、前記移動体が前記第2車線に車線変更する予定であり、且つ前記移動体の乗員に前記第2車線への車線変更を通知する場合に、前記移動体のオブジェクトの第1画像と、前記第2車線のオブジェクトの第2画像と、前記第1画像と前記第2画像とに対応付けた前記移動表示のオブジェクトの第3画像とを含む画像を、前記表示部に表示させる、
請求項1に記載の制御装置。 - 前記制御部は、
前記認識部が認識した車線のオブジェクトの画像を表示部に表示させ、
前記移動体を自動で車線変更させる自動車線変更制御部に自動で車線変更させる指示を前記移動体の乗員が行っている場合において、
前記第2車線から第1距離の位置に到達したときに、前記認識部が認識した車線に前記第2車線が含まれない場合であっても、
ナビゲーション装置から取得した前記第2車線が存在することを示す情報に基づいて、
前記第2車線のオブジェクトの画像を表示部に表示させた後に前記移動体が前記第2車線に移動することを示す移動表示のオブジェクトの画像を前記表示部に表示させる、または
前記第2車線のオブジェクトの画像を表示させるタイミングで前記移動表示のオブジェクトの画像を前記表示部に表示させる、
請求項6に記載の制御装置。 - コンピュータが、
移動体の周辺の状況を認識する処理と、
前記周辺の状況に含まれる車線を画像に変換して変換後の画像を表示部に表示させる処理と、
前記移動体の目標経路が、前記移動体が走行する第1車線に隣接する車線側である場合に、前記隣接する車線のオブジェクトの画像に前記車線側への移動体の移動を表す移動表示のオブジェクトの画像を重ねた画像を前記表示部に表示させる処理と、
前記隣接する車線が、前記移動体が走行している位置よりも前記移動体の進行方向の前方で前記第1車線に接続して増加する第2車線である場合に、
前記移動表示のオブジェクトの画像を前記表示部に表示させるときに前記認識する処理で前記第2車線を認識していない場合であっても、前記第2車線のオブジェクトの画像を前記表示部に表示させる処理と、
を実行する制御方法。 - コンピュータに、
移動体の周辺の状況を認識する処理と、
前記周辺の状況に含まれる車線を画像に変換して変換後の画像を表示部に表示させる処理と、
前記移動体の目標経路が、前記移動体が走行する第1車線に隣接する車線側である場合に、前記隣接する車線のオブジェクトの画像に前記車線側への移動体の移動を表す移動表示のオブジェクトの画像を重ねた画像を前記表示部に表示させる処理と、
前記隣接する車線が、前記移動体が走行している位置よりも前記移動体の進行方向の前方で前記第1車線に接続して増加する第2車線である場合に、
前記移動表示のオブジェクトの画像を前記表示部に表示させるときに前記認識する処理で前記第2車線を認識していない場合であっても、前記第2車線のオブジェクトの画像を前記表示部に表示させる処理と、
を実行させるためのプログラム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2024037243A JP7843796B2 (ja) | 2024-03-11 | 2024-03-11 | 制御装置、制御方法、およびプログラム |
| US19/059,625 US20250283730A1 (en) | 2024-03-11 | 2025-02-21 | Control device, control method, and storage medium |
| CN202510203898.0A CN120621360A (zh) | 2024-03-11 | 2025-02-24 | 控制装置、控制方法以及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2024037243A JP7843796B2 (ja) | 2024-03-11 | 2024-03-11 | 制御装置、制御方法、およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2025138256A JP2025138256A (ja) | 2025-09-25 |
| JP7843796B2 true JP7843796B2 (ja) | 2026-04-10 |
Family
ID=96948782
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024037243A Active JP7843796B2 (ja) | 2024-03-11 | 2024-03-11 | 制御装置、制御方法、およびプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20250283730A1 (ja) |
| JP (1) | JP7843796B2 (ja) |
| CN (1) | CN120621360A (ja) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009109340A (ja) | 2007-10-30 | 2009-05-21 | Aisin Aw Co Ltd | 車両用ナビゲーション装置及び車両用ナビゲーションプログラム |
| JP2021509169A (ja) | 2017-09-12 | 2021-03-18 | トムトム インターナショナル ベスローテン フエンノートシャップ | ナビゲーション装置を使用して車線情報を提供する方法およびシステム |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3557902B2 (ja) * | 1997-07-24 | 2004-08-25 | トヨタ自動車株式会社 | 車両用走行誘導装置及び方法並びにプログラムを記録した媒体 |
-
2024
- 2024-03-11 JP JP2024037243A patent/JP7843796B2/ja active Active
-
2025
- 2025-02-21 US US19/059,625 patent/US20250283730A1/en active Pending
- 2025-02-24 CN CN202510203898.0A patent/CN120621360A/zh active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009109340A (ja) | 2007-10-30 | 2009-05-21 | Aisin Aw Co Ltd | 車両用ナビゲーション装置及び車両用ナビゲーションプログラム |
| JP2021509169A (ja) | 2017-09-12 | 2021-03-18 | トムトム インターナショナル ベスローテン フエンノートシャップ | ナビゲーション装置を使用して車線情報を提供する方法およびシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| CN120621360A (zh) | 2025-09-12 |
| US20250283730A1 (en) | 2025-09-11 |
| JP2025138256A (ja) | 2025-09-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110895417B (zh) | 车辆控制装置、车辆控制方法及存储介质 | |
| JP7048398B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
| US10960879B2 (en) | Vehicle control system, vehicle control method, and vehicle control program | |
| CN108883776B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
| US20190071075A1 (en) | Vehicle control system, vehicle control method, and vehicle control program | |
| CN110099833B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
| JPWO2018122966A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JP2018062237A (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| US20230311656A1 (en) | Driving assistance device, driving assistance method, and storage medium | |
| US12559121B2 (en) | Driving assistance device, driving assistance method, and storage medium | |
| US12403902B2 (en) | Control device, control method, and storage medium | |
| WO2018123346A1 (ja) | 車両制御装置、車両制御方法、及びプログラム | |
| JPWO2017183072A1 (ja) | 車両制御システム、車両用通信システム、車両制御方法、および車両制御プログラム | |
| JP2017207964A (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
| JP2020163903A (ja) | 表示制御装置、表示制御方法、及びプログラム | |
| JP7805387B2 (ja) | 制御装置、制御方法、およびプログラム | |
| JP7837357B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
| JP7843796B2 (ja) | 制御装置、制御方法、およびプログラム | |
| JP7847609B2 (ja) | 制御装置、制御方法、およびプログラム | |
| JP7829613B2 (ja) | 制御装置、制御方法、およびプログラム | |
| JP7843795B2 (ja) | 制御装置、制御方法、およびプログラム | |
| JP7834128B2 (ja) | 制御装置、制御方法、およびプログラム | |
| US12384375B2 (en) | Vehicle system, control method, and storage medium | |
| JP7785175B2 (ja) | 運転支援装置、運転支援方法、およびプログラム | |
| US20230311891A1 (en) | Driving assistance apparatus and driving assistance method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240927 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250930 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20251127 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20260303 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20260331 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7843796 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |