JP7433205B2 - 車両制御装置、車両制御方法、およびプログラム - Google Patents
車両制御装置、車両制御方法、およびプログラム Download PDFInfo
- Publication number
- JP7433205B2 JP7433205B2 JP2020209225A JP2020209225A JP7433205B2 JP 7433205 B2 JP7433205 B2 JP 7433205B2 JP 2020209225 A JP2020209225 A JP 2020209225A JP 2020209225 A JP2020209225 A JP 2020209225A JP 7433205 B2 JP7433205 B2 JP 7433205B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- evaluation
- overtake
- lane
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 17
- 238000011156 evaluation Methods 0.000 claims description 61
- 230000006870 function Effects 0.000 claims description 48
- 230000008859 change Effects 0.000 claims description 14
- 230000001133 acceleration Effects 0.000 claims description 12
- 230000002787 reinforcement Effects 0.000 claims description 12
- 238000012545 processing Methods 0.000 description 23
- 238000010586 diagram Methods 0.000 description 12
- 230000009471 action Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 238000002485 combustion reaction Methods 0.000 description 3
- 238000009795 derivation Methods 0.000 description 3
- 230000005484 gravity Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000036461 convulsion Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Description
(1):この発明の一態様に係る車両制御装置は、車両の周辺状況を認識する認識部と、車両の乗員の操作に依らずに前記車両の加減速および操舵を制御する運転制御部と、を備え、前記運転制御部は、複数の評価関数が出力する複数の評価値を統合した値を閾値と比較することで、前記車両と同一の車線上における前記車両の前方を走行する前走車両を追い越すか否かを決定する追い越し制御部を備え、前記複数の評価関数のそれぞれは、前記認識部により認識された前記車両の周辺状況を示す複数の指標値のうち一つが入力されると評価値を出力するものであり、事前環境において強化学習によって出力傾向が調整されたものである。
図1は、実施形態に係る車両制御装置を利用した車両システム1の構成図である。車両システム1が搭載される車両は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジンなどの内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
以下、自動運転制御装置100が行う追い越し制御について説明する。行動計画生成部140の追い越し制御部142は、例えば、定速走行イベントが実行されているときに作動する。追い越し制御部142は、自車両Mと同一の車線上における自車両Mの前方(直前)を走行する前走車両を追い越すために、自車両Mを一度隣接車線に車線変更し、自車両Mが前走車両であった車両よりも十分に前に出たときに元の車線に戻らせる。「直前」とは、間に車両が無いという意味である。
図6は、事前環境における評価関数の学習処理について説明するための図である。事前環境における評価関数の学習処理は、任意のコンピュータ装置によって実行される。なお、シミュレーション環境に代えて、テストコースなどの実環境が利用されてもよい。まずActor300として、追い越し制御部142と同等の機能(状態に含まれる指標値を評価関数に入力して得られる評価値の積が閾値以上である場合に追い越し実行すると判断するもの)を用意する。Actor300の判断結果を反映するシミュレーション環境の出力である状態は、Actor300と、報酬関数310とに入力される。
図7は、追い越し制御部142により実行される処理の流れの一例を示すフローチャートである。本フローチャートの処理は、例えば、定速走行イベントが実行されている間、繰り返し実行される。
プログラムを記憶した記憶装置と、
ハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサが前記記憶装置に記憶されたプログラムを実行することにより、
車両の周辺状況を認識し、
車両の乗員の操作に依らずに前記車両の加減速および操舵を制御し、
前記制御することは、複数の評価関数が出力する複数の評価値を統合した値を閾値と比較することで、前記車両と同一の車線上における前記車両の前方を走行する前走車両を追い越すか否かを決定することを含み、
前記複数の評価関数のそれぞれは、
前記認識部により認識された前記車両の周辺状況を示す複数の指標値が入力されると評価値を出力するものであり、
事前環境において強化学習によって出力傾向が調整されたものである、
ように構成されている、車両制御装置。
130 認識部
132 指標値導出部
140 行動計画生成部
142 追い越し制御部
Claims (4)
- 車両の周辺状況を認識する認識部と、
車両の乗員の操作に依らずに前記車両の加減速および操舵を制御する運転制御部と、を備え、
前記運転制御部は、複数の評価関数が出力する複数の評価値を統合した値を閾値と比較することで、前記車両と同一の車線上における前記車両の前方を走行する前走車両を追い越すか否かを決定する追い越し制御部を備え、
前記複数の評価関数のそれぞれは、
前記認識部により認識された前記車両の周辺状況を示す複数の指標値のうち一つが入力されると評価値を出力するものであり、
事前環境において強化学習によって出力傾向が調整されたものであり、
前記追い越し制御部は、前記複数の評価値の積が前記閾値以上である場合に、前記前走車両を追い越すことを決定し、前記車両に前記前走車両を追い越させ、
前記複数の指標値は、前記車両の目標速度と前記前走車両の速度との差、前記車両と前記前走車両との距離、および、前記車両と、前記車両が追い越しの際に車線変更する先の隣接車線において前記車両よりも後方に居る隣接後方車両との距離を全て含む、
車両制御装置。 - 前記複数の評価関数のそれぞれは、Actor-Critic法によって前記出力傾向が調整されたものである、
請求項1記載の車両制御装置。 - 車両制御装置が、
車両の周辺状況を認識し、
車両の乗員の操作に依らずに前記車両の加減速および操舵を制御し、
前記制御することは、複数の評価関数が出力する複数の評価値を統合した値を閾値と比較することで、前記車両と同一の車線上における前記車両の前方を走行する前走車両を追い越すか否かを決定することを含み、
前記複数の評価関数のそれぞれは、
前記認識された前記車両の周辺状況を示す複数の指標値のうち一つが入力されると評価値を出力するものであり、
事前環境において強化学習によって出力傾向が調整されたものであり、
前記車両制御装置が、前記複数の評価値の積が前記閾値以上である場合に、前記前走車両を追い越すことを決定し、前記車両に前記前走車両を追い越させ、
前記複数の指標値は、前記車両の目標速度と前記前走車両の速度との差、前記車両と前記前走車両との距離、および、前記車両と、前記車両が追い越しの際に車線変更する先の隣接車線において前記車両よりも後方に居る隣接後方車両との距離を全て含む、
車両制御方法。 - 車両に搭載されたコンピュータに、
車両の周辺状況を認識させ、
車両の乗員の操作に依らずに前記車両の加減速および操舵を制御させ、
前記制御させることは、複数の評価関数が出力する複数の評価値を統合した値を閾値と比較することで、前記車両と同一の車線上における前記車両の前方を走行する前走車両を追い越すか否かを決定させることを含み、
前記複数の評価関数のそれぞれは、
前記認識された前記車両の周辺状況を示す複数の指標値のうち一つが入力されると評価値を出力するものであり、
事前環境において強化学習によって出力傾向が調整されたものであり、
前記コンピュータに、前記複数の評価値の積が前記閾値以上である場合に、前記前走車両を追い越すことを決定させ、前記車両に前記前走車両を追い越させることを行わせ、
前記複数の指標値は、前記車両の目標速度と前記前走車両の速度との差、前記車両と前記前走車両との距離、および、前記車両と、前記車両が追い越しの際に車線変更する先の隣接車線において前記車両よりも後方に居る隣接後方車両との距離を全て含む、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020209225A JP7433205B2 (ja) | 2020-12-17 | 2020-12-17 | 車両制御装置、車両制御方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020209225A JP7433205B2 (ja) | 2020-12-17 | 2020-12-17 | 車両制御装置、車両制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022096232A JP2022096232A (ja) | 2022-06-29 |
JP7433205B2 true JP7433205B2 (ja) | 2024-02-19 |
Family
ID=82163796
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020209225A Active JP7433205B2 (ja) | 2020-12-17 | 2020-12-17 | 車両制御装置、車両制御方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7433205B2 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018030479A (ja) | 2016-08-25 | 2018-03-01 | スズキ株式会社 | 車両の走行制御装置 |
JP2019031268A (ja) | 2017-05-12 | 2019-02-28 | トヨタ モーター エンジニアリング アンド マニュファクチャリング ノース アメリカ,インコーポレイティド | 能動的探索なしの強化学習に基づく制御ポリシー学習及び車両制御方法 |
WO2020230306A1 (ja) | 2019-05-15 | 2020-11-19 | 日産自動車株式会社 | 車両の走行制御方法及び走行制御装置 |
-
2020
- 2020-12-17 JP JP2020209225A patent/JP7433205B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018030479A (ja) | 2016-08-25 | 2018-03-01 | スズキ株式会社 | 車両の走行制御装置 |
JP2019031268A (ja) | 2017-05-12 | 2019-02-28 | トヨタ モーター エンジニアリング アンド マニュファクチャリング ノース アメリカ,インコーポレイティド | 能動的探索なしの強化学習に基づく制御ポリシー学習及び車両制御方法 |
WO2020230306A1 (ja) | 2019-05-15 | 2020-11-19 | 日産自動車株式会社 | 車両の走行制御方法及び走行制御装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2022096232A (ja) | 2022-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7474314B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7043295B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7345349B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7112374B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP2019159428A (ja) | 車両制御装置、車両制御方法及びプログラム | |
JP2019137189A (ja) | 車両制御システム、車両制御方法、およびプログラム | |
JP7406432B2 (ja) | 移動体制御装置、移動体制御方法、およびプログラム | |
JP7161458B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP6966626B2 (ja) | 車両制御装置、車両制御方法、及びプログラム | |
JP7183237B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7376634B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP2024030413A (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7308880B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7125969B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7449751B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
CN115140086A (zh) | 车辆控制装置、车辆控制方法及存储介质 | |
JP7166988B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7091290B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7433205B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP2022142264A (ja) | 移動体制御システム、移動体制御方法、およびプログラム | |
JP2022142863A (ja) | 移動体制御装置、移動体制御方法、およびプログラム | |
JP2021149390A (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7425133B1 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7132190B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
JP7345515B2 (ja) | 車両制御装置、車両制御方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230131 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230822 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231017 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240206 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7433205 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |