JPH02114304A - 移動車の走行制御装置 - Google Patents
移動車の走行制御装置Info
- Publication number
- JPH02114304A JPH02114304A JP63267072A JP26707288A JPH02114304A JP H02114304 A JPH02114304 A JP H02114304A JP 63267072 A JP63267072 A JP 63267072A JP 26707288 A JP26707288 A JP 26707288A JP H02114304 A JPH02114304 A JP H02114304A
- Authority
- JP
- Japan
- Prior art keywords
- recognition
- module
- control
- traveling
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 25
- 230000015654 memory Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 238000000034 method Methods 0.000 description 9
- 230000007613 environmental effect Effects 0.000 description 4
- 230000010365 information processing Effects 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 241000951471 Citrus junos Species 0.000 description 1
- 101100136064 Mycobacterium tuberculosis (strain ATCC 25618 / H37Rv) PE13 gene Proteins 0.000 description 1
- 101150032799 PE15 gene Proteins 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
(産業上の利用分野)
本発明は、例えば無人車等のような移動車の走行を制御
する制御装置に関する。
する制御装置に関する。
(従来の技術)
従来におけるかかる走行制御においては、外部に設けら
れた誘導路に沿って走行制御を行なうのが一般的である
。しかしながら、かかる従来の走行制御では、誘導路が
あることが前提になっており、誘導路がない場合、誘導
路が変更された場合は走行制御は不能となる。この問題
を解消するものとして、例えば、特開昭61−2403
07号のような外界認識走行制御がある。この制御は、
外界の画像を入力する画像入力手段を備え、この入力さ
れた画像から移動車の現在位置及び移動方向を認識し、
この認識に基づいて走行制御するようにしている。この
場合の走行制御は、現時点の自己の位置及び現時点の移
動方向、並びに絡端の検出に基づいて走行方向を決定す
るというものである。
れた誘導路に沿って走行制御を行なうのが一般的である
。しかしながら、かかる従来の走行制御では、誘導路が
あることが前提になっており、誘導路がない場合、誘導
路が変更された場合は走行制御は不能となる。この問題
を解消するものとして、例えば、特開昭61−2403
07号のような外界認識走行制御がある。この制御は、
外界の画像を入力する画像入力手段を備え、この入力さ
れた画像から移動車の現在位置及び移動方向を認識し、
この認識に基づいて走行制御するようにしている。この
場合の走行制御は、現時点の自己の位置及び現時点の移
動方向、並びに絡端の検出に基づいて走行方向を決定す
るというものである。
(発明が解決しようとする課題)
即ち、かかる従来の外界認識に基づく走行制御では、外
界認識中認識に基づく判断中判断に基づく走行制御等は
一体の単一のアルゴリズムを形成している。即ち、1つ
の処理ループを形成している。これは換言すれば、走行
制御は上記のような単一ループである故に、もし、走行
制御を走行路状況(走行路の大局的変化)に応じてきめ
細かなものとすれば、走行制御アルゴリズムを精緻なも
のにしなければならず、これは制御プログラムの複雑化
、膨大化又はプログラム開発そのものの困難化を伴なう
ものであった。また、アルゴリズムの複雑化、膨大化は
制御の低速化を招き、高速走行時の自動走行制御には不
向きであった。もつとも、現在の移動車の走行制御は開
発途上であり、専ら低速走行についての場合であり、高
速時の走行制御に対するニーズは低いというのが実情で
ある。
界認識中認識に基づく判断中判断に基づく走行制御等は
一体の単一のアルゴリズムを形成している。即ち、1つ
の処理ループを形成している。これは換言すれば、走行
制御は上記のような単一ループである故に、もし、走行
制御を走行路状況(走行路の大局的変化)に応じてきめ
細かなものとすれば、走行制御アルゴリズムを精緻なも
のにしなければならず、これは制御プログラムの複雑化
、膨大化又はプログラム開発そのものの困難化を伴なう
ものであった。また、アルゴリズムの複雑化、膨大化は
制御の低速化を招き、高速走行時の自動走行制御には不
向きであった。もつとも、現在の移動車の走行制御は開
発途上であり、専ら低速走行についての場合であり、高
速時の走行制御に対するニーズは低いというのが実情で
ある。
そこで、本発明は上述従来例の欠点を除去するために提
案されたものでその目的は、走行路の状況に応じたきめ
細かな走行制御を、高速且つ確実に行な・うことができ
る移動車の走行制御装置を提案するところにある。
案されたものでその目的は、走行路の状況に応じたきめ
細かな走行制御を、高速且つ確実に行な・うことができ
る移動車の走行制御装置を提案するところにある。
(課題を達成するための手段及び作用)上記課題を達成
するための本発明に係る移動車の走行制御装置の構成は
、移動車の移動と共に変化する外界の画像を撮る撮像手
段と、前記撮像手段の出力を受け、入力した画像から走
行路の大局的な環境を認識する第1の認識手段と、この
第1の認識手段の認識結果に基づいて入力画像中の認識
対象を特定する特定手段と、前記第1の認識手段とは独
立した認識手段であって、前記特定手段の出力を受け、
入力した画像から前記認識対象を認識する第2の認識手
段と、この第2の認識手段からの特定の認識対象に関す
る情報を受け、移動車の走行制御を行なう制御手段とを
具備したことを特徴とする。
するための本発明に係る移動車の走行制御装置の構成は
、移動車の移動と共に変化する外界の画像を撮る撮像手
段と、前記撮像手段の出力を受け、入力した画像から走
行路の大局的な環境を認識する第1の認識手段と、この
第1の認識手段の認識結果に基づいて入力画像中の認識
対象を特定する特定手段と、前記第1の認識手段とは独
立した認識手段であって、前記特定手段の出力を受け、
入力した画像から前記認識対象を認識する第2の認識手
段と、この第2の認識手段からの特定の認識対象に関す
る情報を受け、移動車の走行制御を行なう制御手段とを
具備したことを特徴とする。
(実施例)
以下添付図面を参照して、本発明に係る実施例を説明す
る。
る。
第2図は、この実施例に係る走行制御装置の全体図であ
る。移動車1は、ビデオカメラ2、走行コントローラ5
、センサ3、車両コントローラ4を搭載している。この
移動車1は通常のガソリンエンジン(不図示)により駆
動され、不図示のステアリング機構により操舵される。
る。移動車1は、ビデオカメラ2、走行コントローラ5
、センサ3、車両コントローラ4を搭載している。この
移動車1は通常のガソリンエンジン(不図示)により駆
動され、不図示のステアリング機構により操舵される。
車両コントローラ4は、スロットルアクチュエータを制
御することにより移動車走行速度を制御し、また、ステ
アリングアクチュエータを制御することにより移動車走
行方向を制御し、ブレーキアクチュエータ(不図示)を
制御して移動車の制動を行なわしめる。センサ3は移動
車の走行ステータスを表わす物理情報を検出するもので
、例えば、速度センサ、横加速度センサ、タイヤ回転数
センサ等である。
御することにより移動車走行速度を制御し、また、ステ
アリングアクチュエータを制御することにより移動車走
行方向を制御し、ブレーキアクチュエータ(不図示)を
制御して移動車の制動を行なわしめる。センサ3は移動
車の走行ステータスを表わす物理情報を検出するもので
、例えば、速度センサ、横加速度センサ、タイヤ回転数
センサ等である。
走行コントローラ5は本実施例の走行制御装置の中枢を
成すものであって、その全体的な機能ブロック図を第1
図に示し、ハードウェア構成図を第3図に示す。この走
行コントローラ5は、ビデオカメラ2からの画像とセン
サ3からのステータス情報と゛を入力して、本実施例に
係る走行制御のための″所定の処理(後述)を行なって
、ステアリング値とスロットル開度値と、ブレーキ信号
とを車両コントローラ4に向けて出力する。
成すものであって、その全体的な機能ブロック図を第1
図に示し、ハードウェア構成図を第3図に示す。この走
行コントローラ5は、ビデオカメラ2からの画像とセン
サ3からのステータス情報と゛を入力して、本実施例に
係る走行制御のための″所定の処理(後述)を行なって
、ステアリング値とスロットル開度値と、ブレーキ信号
とを車両コントローラ4に向けて出力する。
走行5ントローラ5は、第1図′に示すように、主に5
つの処理モジュールからなる。これらのモジュールは、
画像処理モジュール20と、走行環境認識モジュール2
1と、低レベル認識モジュール22と、アルゴリズム選
択モジュール23と、移動制御実行モジュール24であ
る。
つの処理モジュールからなる。これらのモジュールは、
画像処理モジュール20と、走行環境認識モジュール2
1と、低レベル認識モジュール22と、アルゴリズム選
択モジュール23と、移動制御実行モジュール24であ
る。
この第1図に示された実施例では、移動車に設置された
ビデオカメラから入力画像は、画像処理モジュールによ
り、2つのバッファメモリに入力される。このバッファ
メモリの1つは、環境認識モジュール21により使われ
、他の1つは低レベル認識モジュール22により使われ
る。2つのバッファメモリを設定したのは、2つのモジ
ュールによるバッファメモリへのアクセスが競合するこ
とを防止するためである。走行環境認識モジュール21
は、走行路の画像に基づいて、その大局的な認識(例え
ば、直線路と曲線路の区別、障害物の有無の判断、障害
物の初期位置)を行ない、また、低レベル認識モジュー
ル22のために、この大局的な認識に基づいて、特定の
認識対象(センターライン、絡端、障害物の位置変化)
を設定する。
ビデオカメラから入力画像は、画像処理モジュールによ
り、2つのバッファメモリに入力される。このバッファ
メモリの1つは、環境認識モジュール21により使われ
、他の1つは低レベル認識モジュール22により使われ
る。2つのバッファメモリを設定したのは、2つのモジ
ュールによるバッファメモリへのアクセスが競合するこ
とを防止するためである。走行環境認識モジュール21
は、走行路の画像に基づいて、その大局的な認識(例え
ば、直線路と曲線路の区別、障害物の有無の判断、障害
物の初期位置)を行ない、また、低レベル認識モジュー
ル22のために、この大局的な認識に基づいて、特定の
認識対象(センターライン、絡端、障害物の位置変化)
を設定する。
アルゴリズム選択モジュール23は、モジュール21か
らの大局的認識結果を受けて、移動制御実行モジュール
24に、当該大局的認識結果に対応するアルゴリズムを
選択せしめる。
らの大局的認識結果を受けて、移動制御実行モジュール
24に、当該大局的認識結果に対応するアルゴリズムを
選択せしめる。
一方、低レベル認識モジュール22は、環境認識モジュ
ール21からの特定の認識対象を画像内で認識しつつ、
それらの対象に関する情報を移動制御実行モジュール2
4に送る。
ール21からの特定の認識対象を画像内で認識しつつ、
それらの対象に関する情報を移動制御実行モジュール2
4に送る。
実行モジュール24では、大局的認識結果に対応した走
行制御アルゴリズムが選択されており、この走行制御ア
ルゴリズムに従って、低レベル認識モジュール22から
の情報に従って、実際の移動走行制御を行なう。
行制御アルゴリズムが選択されており、この走行制御ア
ルゴリズムに従って、低レベル認識モジュール22から
の情報に従って、実際の移動走行制御を行なう。
第3図は、第2図に示した走行コントローラ5のハード
ウェア構成図である。第1図が概念的な構成を・示した
ものであるのに対し、第3図は実際的なハードウェア構
成図を示している。このハードウェア構成の特徴的な点
は、複数のPE(Processing Elemen
t)による多重並列処理である。多重並列処理には従来
から種々のアーキテクチャが提案されているが、第1図
と第3図との対応を強いて言えば、走行認識モジュール
21はPE12に対応し、低レベル認識モジュール22
はPE13に対応し、アルゴリズム選択モジュール23
はPE15に対応し、移動制御実行モジュール24はP
E16に対応する。各PEはネットワーク14により並
列的に接続されている。また、処理量が多過ぎて1つの
PEでは不足の場合はPEを追加してもよい。移動制御
実行を行なうPEからの出力は、ネットワーク14、I
10コントローラ17を介して、車両コントローラ4に
送られる。また、センサ3からのステータス情報は工1
0コントローラ17を介して、移動制御実行PEに送ら
れる。画像処理モジュール20はフレー、ムメモリ10
を含むものとして実現される。
ウェア構成図である。第1図が概念的な構成を・示した
ものであるのに対し、第3図は実際的なハードウェア構
成図を示している。このハードウェア構成の特徴的な点
は、複数のPE(Processing Elemen
t)による多重並列処理である。多重並列処理には従来
から種々のアーキテクチャが提案されているが、第1図
と第3図との対応を強いて言えば、走行認識モジュール
21はPE12に対応し、低レベル認識モジュール22
はPE13に対応し、アルゴリズム選択モジュール23
はPE15に対応し、移動制御実行モジュール24はP
E16に対応する。各PEはネットワーク14により並
列的に接続されている。また、処理量が多過ぎて1つの
PEでは不足の場合はPEを追加してもよい。移動制御
実行を行なうPEからの出力は、ネットワーク14、I
10コントローラ17を介して、車両コントローラ4に
送られる。また、センサ3からのステータス情報は工1
0コントローラ17を介して、移動制御実行PEに送ら
れる。画像処理モジュール20はフレー、ムメモリ10
を含むものとして実現される。
第5A図〜第5C図は、各モジュールで独立して並列的
に行なわれる制御手順である。第5A図は環境認識モジ
ュール21の制御手順であり、ステップS2で、バッフ
ァメモリからの画像入力を行なう。ステップS4では大
局的な環境認識を行なう。本実施例で認識可能な大局的
な環境とは、−例として、 直線路、 曲線路、 障害物のある道路、 の3種類とした。ステップS6では、この大局的な認識
結果と、この認識結果に夫々対応する特定の認識対象の
種別を出力する。この特定の認識対象は前述したように
、時事刻々のセンターライン位置、絡端位置、障害物の
位置等である。即ち、低レベル認識モジュール22は、
走行制御実行モジュール24のために、いかなる情報を
集中的に送ってやればよいのかを、環境認識モジュール
21から教えてもらうのである。例えば、直線路であれ
ば、追跡対象としてセンターライン等を指定する。柚線
路であれば、追跡対象として、センターラインと絡端等
とを指定する。障害路であれば、追跡対象として、セン
ターラインと絡端と障害物位置等とを指定する。認識結
果としての大局的な環境の種類は選択モジュール23に
送られ、認識対象の種別は低レベル認識モジュール22
に送られる。
に行なわれる制御手順である。第5A図は環境認識モジ
ュール21の制御手順であり、ステップS2で、バッフ
ァメモリからの画像入力を行なう。ステップS4では大
局的な環境認識を行なう。本実施例で認識可能な大局的
な環境とは、−例として、 直線路、 曲線路、 障害物のある道路、 の3種類とした。ステップS6では、この大局的な認識
結果と、この認識結果に夫々対応する特定の認識対象の
種別を出力する。この特定の認識対象は前述したように
、時事刻々のセンターライン位置、絡端位置、障害物の
位置等である。即ち、低レベル認識モジュール22は、
走行制御実行モジュール24のために、いかなる情報を
集中的に送ってやればよいのかを、環境認識モジュール
21から教えてもらうのである。例えば、直線路であれ
ば、追跡対象としてセンターライン等を指定する。柚線
路であれば、追跡対象として、センターラインと絡端等
とを指定する。障害路であれば、追跡対象として、セン
ターラインと絡端と障害物位置等とを指定する。認識結
果としての大局的な環境の種類は選択モジュール23に
送られ、認識対象の種別は低レベル認識モジュール22
に送られる。
走行環境認識モジュール21は、上記ステップ82〜ス
テツプS6のループを一定時間T+毎に繰返す、但し、
ステップS4の環境認識には多量の情報処理が必要なた
めに、T1時間は比較的長時間となる。
テツプS6のループを一定時間T+毎に繰返す、但し、
ステップS4の環境認識には多量の情報処理が必要なた
めに、T1時間は比較的長時間となる。
第5B図は走行制御アルゴリズム選択モジュール23の
制御手順である。このモジュールはステップS10で、
モジュール21からの大局的な環境認識結果の入力を待
つ。その入力があると、ステップS14で、当該認識結
果に最適な走行制御アルゴリズムを実行モジュール24
に選択せしめ、ステップS16で、その走行制御アルゴ
リズムを起動する。
制御手順である。このモジュールはステップS10で、
モジュール21からの大局的な環境認識結果の入力を待
つ。その入力があると、ステップS14で、当該認識結
果に最適な走行制御アルゴリズムを実行モジュール24
に選択せしめ、ステップS16で、その走行制御アルゴ
リズムを起動する。
第5C図は、低レベル認識モジュール22と移動制御実
行モジュール24夫々の制御手順のフローチャートであ
る。前述したように、低レベル認識モジュール22は、
走行制御実行モジュール24に対して如何なる情報を集
中的に送ってやればよいのかを、環境認識モジュール2
1から教えてもらい、その上で、移動制御実行モジュー
ル24に走行制御のための特定認識対象の情報を送る。
行モジュール24夫々の制御手順のフローチャートであ
る。前述したように、低レベル認識モジュール22は、
走行制御実行モジュール24に対して如何なる情報を集
中的に送ってやればよいのかを、環境認識モジュール2
1から教えてもらい、その上で、移動制御実行モジュー
ル24に走行制御のための特定認識対象の情報を送る。
先ず、低レベル認識モジュール22はステップS18で
、走行環境認識モジュール21からの新たな特定認識対
象の変更入力の有無を調べる。変更入力がなければ、ス
テップS24に進み、前からの特定認識対象について追
跡認識を行ない、その情報を、ステップS26で、ネッ
トワークを介して移動制御実行モジュール24に送出す
る。もし、走行環境認識モジュール21から、新たな認
識対象の通知があれば、その新たな認識対象の通知を受
け、ステップS24では、その新たな認識対象について
情報を収集する。
、走行環境認識モジュール21からの新たな特定認識対
象の変更入力の有無を調べる。変更入力がなければ、ス
テップS24に進み、前からの特定認識対象について追
跡認識を行ない、その情報を、ステップS26で、ネッ
トワークを介して移動制御実行モジュール24に送出す
る。もし、走行環境認識モジュール21から、新たな認
識対象の通知があれば、その新たな認識対象の通知を受
け、ステップS24では、その新たな認識対象について
情報を収集する。
移動制御実行モジュール24のステップS30のバラ゛
メータ再設定は、選択モジュール23により、移動制御
実行モジュール24のプログラムが変更されたときにの
み実行されるものであり、これは、走行制御アルゴリズ
ムがたとえ変更されても、走行路は連続しているから、
過去の走行制御アルゴリズムの実行中に蓄積していた走
行情報(例えば、絡端位置等)を新たな走行制御アルゴ
リズムが受は継ぐためである。ステップS32では、低
レベル認識モジュール22からの特定認識対象について
の走行情報をもらう、ステップS34では、この走行情
報に基づいて所定の演算を行ない、ステップS36で移
動車のアクチュエータに出力する。即ち、スロットルを
制御したり、ブレーキを制御したり、操舵する等である
。第6図に、直線路走行時のステアリング角制御のアル
ゴリズムの一例を示す。このアルゴリズムは、低レベル
認識モジュール22から送られてきたセンターライン情
報(特定認識対象情報)に基づいて走行バスを決定し、
一方、移動車のセンサ3から得られる車速等のステータ
ス情報とこの走行パスとに基づいて、目標ステアリング
角度を演算し、移動車のステアリングアクチュエータに
出力するものである。
メータ再設定は、選択モジュール23により、移動制御
実行モジュール24のプログラムが変更されたときにの
み実行されるものであり、これは、走行制御アルゴリズ
ムがたとえ変更されても、走行路は連続しているから、
過去の走行制御アルゴリズムの実行中に蓄積していた走
行情報(例えば、絡端位置等)を新たな走行制御アルゴ
リズムが受は継ぐためである。ステップS32では、低
レベル認識モジュール22からの特定認識対象について
の走行情報をもらう、ステップS34では、この走行情
報に基づいて所定の演算を行ない、ステップS36で移
動車のアクチュエータに出力する。即ち、スロットルを
制御したり、ブレーキを制御したり、操舵する等である
。第6図に、直線路走行時のステアリング角制御のアル
ゴリズムの一例を示す。このアルゴリズムは、低レベル
認識モジュール22から送られてきたセンターライン情
報(特定認識対象情報)に基づいて走行バスを決定し、
一方、移動車のセンサ3から得られる車速等のステータ
ス情報とこの走行パスとに基づいて、目標ステアリング
角度を演算し、移動車のステアリングアクチュエータに
出力するものである。
第4図に、カメラ2により捕えられたシーンの変化(■
に)II => IIIφ■と変化)に対応して、上記
4つのモジュール、即ち、走行環境認識モジュール21
〜移動制御実行モジュール24の制御サイクルの変化を
、時間経過と共に示した。前述したように、環境認識モ
ジュール21は大局的な認識を行なうものであるから、
高度の認識処理を行ない、認識誤りのないようにする。
に)II => IIIφ■と変化)に対応して、上記
4つのモジュール、即ち、走行環境認識モジュール21
〜移動制御実行モジュール24の制御サイクルの変化を
、時間経過と共に示した。前述したように、環境認識モ
ジュール21は大局的な認識を行なうものであるから、
高度の認識処理を行ない、認識誤りのないようにする。
大局的な環境は変化が遅いために、高度の認識処理のた
めに認識速度が低くなっても問題はない、そこで、第4
図に示すように、走行環境認識モジュール21の認識サ
イクルはTIという比較的長い周期となる。
めに認識速度が低くなっても問題はない、そこで、第4
図に示すように、走行環境認識モジュール21の認識サ
イクルはTIという比較的長い周期となる。
第4図の例では、走行環境認識モジュール21はシーン
IIを認識する前にシーンエの認識(シーンエは直線路
)を終了している。従って、時刻1+では、選択モジュ
ール23はこの認識結果を受けて、移動制御実行モジュ
ール24の走行制御アルゴリズムを直線路用に変更して
いる。低レベル認識モジュール22は走行環境認識モジ
ュール21からの連絡により移動制御実行モジュール2
4に対してT2という(TIに比して)かなり短い周期
で特定認識対象に関する情報を送り続ける。移動制御実
行モジュール24は、この情報を受けつつ、同じように
T2という短いサイクル、で、直線路走行制御アルゴリ
ズムに従って走行制御を実行する。
IIを認識する前にシーンエの認識(シーンエは直線路
)を終了している。従って、時刻1+では、選択モジュ
ール23はこの認識結果を受けて、移動制御実行モジュ
ール24の走行制御アルゴリズムを直線路用に変更して
いる。低レベル認識モジュール22は走行環境認識モジ
ュール21からの連絡により移動制御実行モジュール2
4に対してT2という(TIに比して)かなり短い周期
で特定認識対象に関する情報を送り続ける。移動制御実
行モジュール24は、この情報を受けつつ、同じように
T2という短いサイクル、で、直線路走行制御アルゴリ
ズムに従って走行制御を実行する。
一方、走行環境認識モジュール21は、低レベル認識モ
ジュール22.移動制御実行モジュール24が直線路走
行制御アルゴリズムを実行している最中も、次のシーン
の環境認識を行なっている。そして、シーン■を得ると
、走行環境認識モジュール21は走行路は直線路から曲
線路に変化することを認識するから、T□後に選択モジ
ュール23に対して、移動制御実行モジュール24の走
行制御アルゴリズムの変更を指令する。すると、移動制
御実行モジュール24では、新たに曲線路用の走行制御
アルゴリズムが起動される。また、同じく、曲線路に関
する新たな認識対象への変更を知らされた低レベル認識
モジュール22から受ける情報に基づき、曲線路用の走
行制御アルゴリズムに従って走行制御を継続して行なう
。
ジュール22.移動制御実行モジュール24が直線路走
行制御アルゴリズムを実行している最中も、次のシーン
の環境認識を行なっている。そして、シーン■を得ると
、走行環境認識モジュール21は走行路は直線路から曲
線路に変化することを認識するから、T□後に選択モジ
ュール23に対して、移動制御実行モジュール24の走
行制御アルゴリズムの変更を指令する。すると、移動制
御実行モジュール24では、新たに曲線路用の走行制御
アルゴリズムが起動される。また、同じく、曲線路に関
する新たな認識対象への変更を知らされた低レベル認識
モジュール22から受ける情報に基づき、曲線路用の走
行制御アルゴリズムに従って走行制御を継続して行なう
。
第4図からも明らかなように、低レベル認識モジュール
22は、走行制御実行モジュール24がセンターライン
、絡端若しくは障害物等の追跡情報に基づいて、スロッ
トル、ステアリング等の制御を高速に行なうために、セ
ンターライン、絡端、障害物の追跡情報を高速処理して
得ることが必要である。一方、大局的な環境認識には、
高度の情報処理と多量のデータ処理が必要となる。従来
のように、環境認識、情報収集、走行制御を一体として
連続して行なっていたのでは、走行制御のための高速処
理と環境認識のための多量の処理とが重畳して、高速走
行時の確実な走行制御には不適であった。しかしながら
、上述の実施例によれば、 ■:大局的な環境認識には、高度の情報処理と多量のデ
ー・夕処理が必要となる一方で、大局的な環境変化′は
頻繁に変化することはないことに着目して、環境認識系
(走行環境認識モジュール21)と、実際の走行制御を
行なう系(低レベル認識モジュール22及び移動制御実
行モジュール24)とを別系統に分け、実際の走行制御
を行なう系は、環境認識結果に基づいて指定された特定
の情報を収集し、この情報に基づいて走行制御を行なう
ようにする。即ち、2つの系を独立制御としても差し支
えないから、そのように独立制御としたことで、両サイ
クルは互いの制御サイクルに依存しなくなり、また、走
行制御系は、環境認識系が指定した特定の認識対象のみ
に関する情報の収集及びその情報に基づいた制御に集中
できるから、即ち、情報処理対象の認識対象が絞られる
から高速移動時の確実な高速走行制御が可能となる。
22は、走行制御実行モジュール24がセンターライン
、絡端若しくは障害物等の追跡情報に基づいて、スロッ
トル、ステアリング等の制御を高速に行なうために、セ
ンターライン、絡端、障害物の追跡情報を高速処理して
得ることが必要である。一方、大局的な環境認識には、
高度の情報処理と多量のデータ処理が必要となる。従来
のように、環境認識、情報収集、走行制御を一体として
連続して行なっていたのでは、走行制御のための高速処
理と環境認識のための多量の処理とが重畳して、高速走
行時の確実な走行制御には不適であった。しかしながら
、上述の実施例によれば、 ■:大局的な環境認識には、高度の情報処理と多量のデ
ー・夕処理が必要となる一方で、大局的な環境変化′は
頻繁に変化することはないことに着目して、環境認識系
(走行環境認識モジュール21)と、実際の走行制御を
行なう系(低レベル認識モジュール22及び移動制御実
行モジュール24)とを別系統に分け、実際の走行制御
を行なう系は、環境認識結果に基づいて指定された特定
の情報を収集し、この情報に基づいて走行制御を行なう
ようにする。即ち、2つの系を独立制御としても差し支
えないから、そのように独立制御としたことで、両サイ
クルは互いの制御サイクルに依存しなくなり、また、走
行制御系は、環境認識系が指定した特定の認識対象のみ
に関する情報の収集及びその情報に基づいた制御に集中
できるから、即ち、情報処理対象の認識対象が絞られる
から高速移動時の確実な高速走行制御が可能となる。
■・走行制御系と環境認識系とは独立系とした場合、第
3図にも示したような並列多重処理が最適で、最も効率
的なデータ処理が可能であるが、1つの制御処理ユニッ
トによるマルチタスク的な多重処理でも可能となる。い
ずれの多重処理でも、走行制御系と環境認識系とは独立
系となり、互いに依存しなくなり、高速処理が可能とな
る。
3図にも示したような並列多重処理が最適で、最も効率
的なデータ処理が可能であるが、1つの制御処理ユニッ
トによるマルチタスク的な多重処理でも可能となる。い
ずれの多重処理でも、走行制御系と環境認識系とは独立
系となり、互いに依存しなくなり、高速処理が可能とな
る。
■二また、第3図にも示したような並列多重処理では、
第4図に示すように、現在の環境認識結果は、将来の走
行制御に使われる。これは、現在の環境認識に基づいて
現在の走行制御を行なわなくても、大局的な環境は前述
したように大きく変化しないから、問題ないことによる
。従って、環境認識と走行制御が独立したものとなり、
その結果、現時点の環境認識を将来の走行制御に使うと
いう、第4図に示したような、所謂「パイプライン処理
」が実現され、並列多重処理と相まって、更に高速制御
処理が可能となる。
第4図に示すように、現在の環境認識結果は、将来の走
行制御に使われる。これは、現在の環境認識に基づいて
現在の走行制御を行なわなくても、大局的な環境は前述
したように大きく変化しないから、問題ないことによる
。従って、環境認識と走行制御が独立したものとなり、
その結果、現時点の環境認識を将来の走行制御に使うと
いう、第4図に示したような、所謂「パイプライン処理
」が実現され、並列多重処理と相まって、更に高速制御
処理が可能となる。
■二走行制御系の移動制御実行モジュール24は、選択
モジュール23により、認識された環境に最も適した走
行制御アルゴリズムに変更させられる。このことは、種
々の環境に適した走行制御アルゴリズムを必要最小限の
規模で作成できることを意味する。即ち、アルゴリズム
選択モジュール23は・、外部の高速メモリ(不図示)
に各走行制御ア′ルプリズムプログラムを格納しておき
、セグメンテーション若しくはページングの仮想記憶技
術で、環境認識結果に応じて、移動制御実行モジュール
24のプログラムメモリ領域内にオーバレイすれば、移
動制御実行モジュール24の回路規模も小さなものとな
る。最も、移動制御実行モジュール24のプログラムメ
モリサイズを捨象すれば、1つの走行制御アルゴリズム
によりあらゆる走行環境に対応した走行制御は可能であ
るから、上述の■〜■の効果を得るためには、選択モジ
ュール23がアルゴリズム選択を行なうということは、
本発明にとって本質的ではない。
モジュール23により、認識された環境に最も適した走
行制御アルゴリズムに変更させられる。このことは、種
々の環境に適した走行制御アルゴリズムを必要最小限の
規模で作成できることを意味する。即ち、アルゴリズム
選択モジュール23は・、外部の高速メモリ(不図示)
に各走行制御ア′ルプリズムプログラムを格納しておき
、セグメンテーション若しくはページングの仮想記憶技
術で、環境認識結果に応じて、移動制御実行モジュール
24のプログラムメモリ領域内にオーバレイすれば、移
動制御実行モジュール24の回路規模も小さなものとな
る。最も、移動制御実行モジュール24のプログラムメ
モリサイズを捨象すれば、1つの走行制御アルゴリズム
によりあらゆる走行環境に対応した走行制御は可能であ
るから、上述の■〜■の効果を得るためには、選択モジ
ュール23がアルゴリズム選択を行なうということは、
本発明にとって本質的ではない。
(発明の効果)
以上説明したように本発明に係る移動車の走行制御装置
は、移動車の移動と共に変化する外界の画像を撮る撮像
手段と、前記撮像手段の出力を受け、入力した画像から
走行路の大局的な環境を認識する第1の認識手段と、こ
の第1の認識手段の認識結果に基づいて入力画像中の認
識対象を特定する特定手段と、前記第1の認識手段とは
独立した認識手段であって、前記特定手段の出力を受け
、入力した画像から前記認識対象を認識する第2の認識
手段と、この第2の認識手段からの特定の認識対象に関
する情報を受け、移動車の走行制御を行なう制御手段と
を具備したことを特徴とする。
は、移動車の移動と共に変化する外界の画像を撮る撮像
手段と、前記撮像手段の出力を受け、入力した画像から
走行路の大局的な環境を認識する第1の認識手段と、こ
の第1の認識手段の認識結果に基づいて入力画像中の認
識対象を特定する特定手段と、前記第1の認識手段とは
独立した認識手段であって、前記特定手段の出力を受け
、入力した画像から前記認識対象を認識する第2の認識
手段と、この第2の認識手段からの特定の認識対象に関
する情報を受け、移動車の走行制御を行なう制御手段と
を具備したことを特徴とする。
従って、第2の認識手段は絞られた認識対象に集中して
情報収集することが可能となり、また、第1の認識手段
から独立しているために、第2の認識手段は第1の認識
手段のサイクルよりも短いサイクルで、独自に高速大量
に特定認識対象の情報収集が可能となる。その結果、高
速移動時の走行制御が確実になる。
情報収集することが可能となり、また、第1の認識手段
から独立しているために、第2の認識手段は第1の認識
手段のサイクルよりも短いサイクルで、独自に高速大量
に特定認識対象の情報収集が可能となる。その結果、高
速移動時の走行制御が確実になる。
第1図は本発明に係る一実施例の全体構成を示す機能ブ
ロック図、 第2図は第1図実施例を装着した移動車の一例の全体図
、 第3図は第1図実施例を多重並列処理により実現したと
・きのハードウェア構成図、 第4・図は第1図実施例の各モジュールの制御の状態の
時間変化の一例を示す図、 第5A図〜第5C図は同実施例の制御手順を説明するフ
ローチャート、 第6図は同実施例における直線路走行用のアルゴリズム
におけるステアリング角決定制御のブロック図である。 図中、 1・・・移動車、2・・・カメラ、3・・・センサ、4
・・・車両コントローラ、5・・・走行コントローラ、
10・・・フレームメモリ、11・・・ビデオバス、1
2.13.15.16・・・PE、14・・・ネットワ
ーク、17・・・I10コントローラ、2o・・・画像
処理モジュール、21・・・走行環境認識モジュール、
22・・・低レベル認識モジュール、23・・・アルゴ
リズム選択モジュール、24・・・移動制御実行モジュ
ールである。
ロック図、 第2図は第1図実施例を装着した移動車の一例の全体図
、 第3図は第1図実施例を多重並列処理により実現したと
・きのハードウェア構成図、 第4・図は第1図実施例の各モジュールの制御の状態の
時間変化の一例を示す図、 第5A図〜第5C図は同実施例の制御手順を説明するフ
ローチャート、 第6図は同実施例における直線路走行用のアルゴリズム
におけるステアリング角決定制御のブロック図である。 図中、 1・・・移動車、2・・・カメラ、3・・・センサ、4
・・・車両コントローラ、5・・・走行コントローラ、
10・・・フレームメモリ、11・・・ビデオバス、1
2.13.15.16・・・PE、14・・・ネットワ
ーク、17・・・I10コントローラ、2o・・・画像
処理モジュール、21・・・走行環境認識モジュール、
22・・・低レベル認識モジュール、23・・・アルゴ
リズム選択モジュール、24・・・移動制御実行モジュ
ールである。
Claims (1)
- (1)移動車の移動と共に変化する外界の画像を撮る撮
像手段と、 前記撮像手段の出力を受け、入力した画像から走行路の
大局的な環境を認識する第1の認識手段と、 この第1の認識手段の認識結果に基づいて入力画像中の
認識対象を特定する特定手段と、 前記第1の認識手段とは独立した認識手段であつて、前
記特定手段の出力を受けて、入力した画像から前記認識
対象を認識する第2の認識手段と、 この第2の認識手段からの特定の認識対象に関する情報
を受け、移動車の走行制御を行なう制御手段とを備えた
ことを特徴とする移動車の走行制御装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP63267072A JP2728170B2 (ja) | 1988-10-25 | 1988-10-25 | 移動車の走行制御装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP63267072A JP2728170B2 (ja) | 1988-10-25 | 1988-10-25 | 移動車の走行制御装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH02114304A true JPH02114304A (ja) | 1990-04-26 |
JP2728170B2 JP2728170B2 (ja) | 1998-03-18 |
Family
ID=17439638
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP63267072A Expired - Fee Related JP2728170B2 (ja) | 1988-10-25 | 1988-10-25 | 移動車の走行制御装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2728170B2 (ja) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05113822A (ja) * | 1991-10-14 | 1993-05-07 | Mazda Motor Corp | 移動車の走行制御装置 |
JP2020508509A (ja) * | 2017-02-10 | 2020-03-19 | ニッサン ノース アメリカ,インク | 自律走行車の動作管理制御 |
US10836405B2 (en) | 2017-10-30 | 2020-11-17 | Nissan North America, Inc. | Continual planning and metareasoning for controlling an autonomous vehicle |
US11027751B2 (en) | 2017-10-31 | 2021-06-08 | Nissan North America, Inc. | Reinforcement and model learning for vehicle operation |
US11084504B2 (en) | 2017-11-30 | 2021-08-10 | Nissan North America, Inc. | Autonomous vehicle operational management scenarios |
US11110941B2 (en) | 2018-02-26 | 2021-09-07 | Renault S.A.S. | Centralized shared autonomous vehicle operational management |
US11113973B2 (en) | 2017-02-10 | 2021-09-07 | Nissan North America, Inc. | Autonomous vehicle operational management blocking monitoring |
US11120688B2 (en) | 2018-06-29 | 2021-09-14 | Nissan North America, Inc. | Orientation-adjust actions for autonomous vehicle operational management |
US11300957B2 (en) | 2019-12-26 | 2022-04-12 | Nissan North America, Inc. | Multiple objective explanation and control interface design |
US11500380B2 (en) | 2017-02-10 | 2022-11-15 | Nissan North America, Inc. | Autonomous vehicle operational management including operating a partially observable Markov decision process model instance |
US11577746B2 (en) | 2020-01-31 | 2023-02-14 | Nissan North America, Inc. | Explainability of autonomous vehicle decision making |
US11613269B2 (en) | 2019-12-23 | 2023-03-28 | Nissan North America, Inc. | Learning safety and human-centered constraints in autonomous vehicles |
US11635758B2 (en) | 2019-11-26 | 2023-04-25 | Nissan North America, Inc. | Risk aware executor with action set recommendations |
US11702070B2 (en) | 2017-10-31 | 2023-07-18 | Nissan North America, Inc. | Autonomous vehicle operation with explicit occlusion reasoning |
US11714971B2 (en) | 2020-01-31 | 2023-08-01 | Nissan North America, Inc. | Explainability of autonomous vehicle decision making |
US11782438B2 (en) | 2020-03-17 | 2023-10-10 | Nissan North America, Inc. | Apparatus and method for post-processing a decision-making model of an autonomous vehicle using multivariate data |
US11874120B2 (en) | 2017-12-22 | 2024-01-16 | Nissan North America, Inc. | Shared autonomous vehicle operational management |
US11899454B2 (en) | 2019-11-26 | 2024-02-13 | Nissan North America, Inc. | Objective-based reasoning in autonomous vehicle decision-making |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS4930068A (ja) * | 1972-07-15 | 1974-03-18 | ||
JPS62138906A (ja) * | 1985-12-12 | 1987-06-22 | Toyoda Autom Loom Works Ltd | 無人搬送車の制御装置 |
-
1988
- 1988-10-25 JP JP63267072A patent/JP2728170B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS4930068A (ja) * | 1972-07-15 | 1974-03-18 | ||
JPS62138906A (ja) * | 1985-12-12 | 1987-06-22 | Toyoda Autom Loom Works Ltd | 無人搬送車の制御装置 |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05113822A (ja) * | 1991-10-14 | 1993-05-07 | Mazda Motor Corp | 移動車の走行制御装置 |
US11500380B2 (en) | 2017-02-10 | 2022-11-15 | Nissan North America, Inc. | Autonomous vehicle operational management including operating a partially observable Markov decision process model instance |
JP2020508509A (ja) * | 2017-02-10 | 2020-03-19 | ニッサン ノース アメリカ,インク | 自律走行車の動作管理制御 |
US10654476B2 (en) | 2017-02-10 | 2020-05-19 | Nissan North America, Inc. | Autonomous vehicle operational management control |
US11113973B2 (en) | 2017-02-10 | 2021-09-07 | Nissan North America, Inc. | Autonomous vehicle operational management blocking monitoring |
US10836405B2 (en) | 2017-10-30 | 2020-11-17 | Nissan North America, Inc. | Continual planning and metareasoning for controlling an autonomous vehicle |
US11027751B2 (en) | 2017-10-31 | 2021-06-08 | Nissan North America, Inc. | Reinforcement and model learning for vehicle operation |
US11702070B2 (en) | 2017-10-31 | 2023-07-18 | Nissan North America, Inc. | Autonomous vehicle operation with explicit occlusion reasoning |
US11084504B2 (en) | 2017-11-30 | 2021-08-10 | Nissan North America, Inc. | Autonomous vehicle operational management scenarios |
US11874120B2 (en) | 2017-12-22 | 2024-01-16 | Nissan North America, Inc. | Shared autonomous vehicle operational management |
US11110941B2 (en) | 2018-02-26 | 2021-09-07 | Renault S.A.S. | Centralized shared autonomous vehicle operational management |
US11120688B2 (en) | 2018-06-29 | 2021-09-14 | Nissan North America, Inc. | Orientation-adjust actions for autonomous vehicle operational management |
US11635758B2 (en) | 2019-11-26 | 2023-04-25 | Nissan North America, Inc. | Risk aware executor with action set recommendations |
US11899454B2 (en) | 2019-11-26 | 2024-02-13 | Nissan North America, Inc. | Objective-based reasoning in autonomous vehicle decision-making |
US12001211B2 (en) | 2019-11-26 | 2024-06-04 | Nissan North America, Inc. | Risk-aware executor with action set recommendations |
US11613269B2 (en) | 2019-12-23 | 2023-03-28 | Nissan North America, Inc. | Learning safety and human-centered constraints in autonomous vehicles |
US11300957B2 (en) | 2019-12-26 | 2022-04-12 | Nissan North America, Inc. | Multiple objective explanation and control interface design |
US11577746B2 (en) | 2020-01-31 | 2023-02-14 | Nissan North America, Inc. | Explainability of autonomous vehicle decision making |
US11714971B2 (en) | 2020-01-31 | 2023-08-01 | Nissan North America, Inc. | Explainability of autonomous vehicle decision making |
US11782438B2 (en) | 2020-03-17 | 2023-10-10 | Nissan North America, Inc. | Apparatus and method for post-processing a decision-making model of an autonomous vehicle using multivariate data |
Also Published As
Publication number | Publication date |
---|---|
JP2728170B2 (ja) | 1998-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JPH02114304A (ja) | 移動車の走行制御装置 | |
JP6725568B2 (ja) | 車両制御装置、車両、車両制御方法およびプログラム | |
JP7048353B2 (ja) | 走行制御装置、走行制御方法およびプログラム | |
EP2256667B1 (en) | Driver assistance system or robot with dynamic attention module | |
JP2018206036A (ja) | 車両制御システム及び方法、並びに走行支援サーバ | |
CN111881519B (zh) | 一种自动驾驶的测试方法、装置、计算机设备及存储介质 | |
JP3915746B2 (ja) | 車両用外界認識装置 | |
US11308357B2 (en) | Training data generation apparatus | |
WO2021026120A1 (en) | Using captured video data to identify active turn signals on a vehicle | |
CN111756990B (zh) | 一种图像传感器控制方法、装置及系统 | |
US20220301320A1 (en) | Controller, method, and computer program for controlling vehicle | |
JP6990137B2 (ja) | 車両制御装置 | |
AU2022200113A1 (en) | Proactive lane change for autonomous vehicles | |
JP6852107B2 (ja) | 車両制御装置、車両制御方法、車両およびプログラム | |
JP2021163432A (ja) | 信号灯状態識別装置、信号灯状態識別方法及び信号灯状態識別用コンピュータプログラムならびに制御装置 | |
WO2021053763A1 (ja) | 運転支援装置、運転支援方法及びプログラム | |
Hofmann et al. | EMS-vision: Application to hybrid adaptive cruise control | |
JP6796679B2 (ja) | 車両制御システム及び方法、並びに走行支援サーバ | |
US20230177844A1 (en) | Apparatus, method, and computer program for identifying state of lighting | |
JP6867257B2 (ja) | 車両制御装置、車両、車両制御方法およびプログラム | |
Wang et al. | Multi-grid based decision making at roundabout for autonomous vehicles | |
JP2003121543A (ja) | 車両用走行車線判断装置 | |
CN115179863A (zh) | 移动体的控制装置及控制方法、存储介质以及车辆 | |
WO2020250520A1 (ja) | 外部環境認識装置 | |
JP6933677B2 (ja) | 車両制御装置、車両制御方法、車両およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
LAPS | Cancellation because of no payment of annual fees |