JP6306735B2

JP6306735B2 - ステレオカメラ装置及びステレオカメラ装置を備える車両

Info

Publication number: JP6306735B2
Application number: JP2016555091A
Authority: JP
Inventors: 直人大原
Original assignee: Kyocera Corp
Current assignee: Kyocera Corp
Priority date: 2014-10-24
Filing date: 2015-10-23
Publication date: 2018-04-04
Anticipated expiration: 2035-10-23
Also published as: WO2016063545A1; EP3211368A1; US10595003B2; EP3211368B1; EP3211368A4; JPWO2016063545A1; US20170318279A1

Description

関連出願の相互参照

本出願は、２０１４年１０月２４日出願の日本国特許出願２０１４−２１７３７０号の優先権を主張するものであり、当該出願の開示全体を、ここに参照のために取り込む。

本発明は、ステレオカメラ装置及びステレオカメラ装置を備える車両に関する。

従来、路面及び路面上の物体を撮像した画像の広範囲をウィンドウによって区画し、ウィンドウ毎に被写体の物体認識を行う車両用路上物体認識装置が知られている（例えば、特許文献１）。

特開平７−２２５１２６号公報

しかしながら、ステレオカメラから遠距離にある被写体は、近距離にある物体より、画像の中で小さく撮像されるため、それらの画素を用いて行う距離検出の精度は低い。また、高速で移動する車両が備えるステレオカメラにおいては、高速に距離検出を行うために処理負荷を抑制する必要がある。それゆえ、処理負荷を抑制しつつ、遠距離にある物体についても高い精度での距離検出が求められる。

本発明の目的は、処理負荷を抑制しつつ、車両から遠距離にある物体から、車両までの距離を、高い精度で検出することのできるステレオカメラ装置及び車両を提供することにある。

ある実施形態におけるステレオカメラ装置は、ステレオカメラと、前記ステレオカメラが撮像する画像内において所定の方向における位置の異なる複数の領域の中の少なくとも１つの第１の領域に基づいて検知対象の物体を検知し、前記第１の領域内の、検知された前記物体の像を含み、前記第１の領域より小さい領域の原画素に基づいて画素補間を行うことにより補間画素を生成し、少なくとも該補間画素に基づいて基準位置から検知された前記物体の位置までの距離を検出する第１の制御部とを備える。

ある実施形態における車両は、ステレオカメラと、前記ステレオカメラが撮像する画像内において所定の方向における位置の異なる複数の領域の中の少なくとも１つの第１の領域に基づいて検知対象の物体を検知し、前記第１の領域内の、検知された前記物体の像を含み、前記第１の領域より小さい領域の原画素に基づいて画素補間を行うことにより補間画素を生成し、少なくとも該補間画素に基づいて基準位置から検知された前記物体の位置までの距離を検出する第１の制御部とを備える。

一実施形態に係るステレオカメラ装置を有するステレオカメラシステムの機能構成を示す機能ブロック図である。図１に示すステレオカメラシステムに係る撮像部を有するステレオカメラを設置した移動体の側面図である。図１に示すステレオカメラシステムに係る撮像部を有するステレオカメラを設置した移動体の正面図である。図１に示す第１の撮像部が撮像した画像の例を示す第１の図である。図１に示す第１の撮像部が撮像した画像の例を示す第２の図である。第１の画像における第１の領域の拡大図である。第２の画像における第１の領域の拡大図である。図１に示す制御部の、第２の領域に係る動作を表すフロー図である。図１に示す制御部の、第１の領域に係る動作を表すフロー図である。図１に示すステレオカメラ装置の機能構成の変形例を示す機能ブロック図である。

以下、一実施形態について、図１〜１０を用いて説明する。

＜一実施形態の機能構成＞
一実施形態に係るステレオカメラシステム１の機能構成について図１〜図７を用いて説明する。図１に示すように、ステレオカメラシステム１は、ＥＣＵ（ＥｌｅｃｔｒｏｎｉｃＣｏｎｔｒｏｌＵｎｉｔ）２０及びステレオカメラ装置３０を備える。ＥＣＵ２０及びステレオカメラ装置３０は有線又は無線の通信ネットワークを介して互いに接続され、各種情報を送受信する。本実施形態に係るステレオカメラ装置３０は例えば自動車などの移動体１０に設置することを想定している。ただし、ステレオカメラ装置３０は、自動車以外の移動体１０に設置して使用することも可能である。

ＥＣＵ２０は移動体１０が走行するために動作する、例えば、エンジン、ブレーキ、ステアリング（操舵装置）、方向指示器等の機器を制御する。ＥＣＵ２０は、速度、加速度、ブレーキ操作、ステアリングの舵角、方向指示器の示す方向、ヘッドライトの照射範囲等の運転状況を表す運転情報をこれらの機器から取得する。また、ＥＣＵ２０は、運転情報をステレオカメラ装置３０に出力する。以降においては、運転情報のうちステアリングの舵角、方向指示器の示す方向を方向情報という。

ステレオカメラ装置３０は、少なくとも２つの撮像部である第１の撮像部３１Ｌと第２の撮像部３１Ｒとを有するステレオカメラ、及び制御部３３（第１の制御部）を備える。

第１及び第２の撮像部３１Ｌ，３１Ｒは、例えば同一の光学系、及び、ＣＭＯＳ又はＣＣＤなどの同一の撮像素子を有し、光学系が結像する画像を撮像素子が撮像する。光学系の画角は広いことが好ましい。第１及び第２の撮像部３１Ｌ，３１Ｒは、所定時間毎、例えば、０．１秒毎に１フレームの画像を撮像する。

次に、第１及び第２の撮像部３１Ｌ，３１Ｒを移動体１０に設置する態様について、図２及び図３を用いて説明する。

図２に示すように、第１及び第２の撮像部３１Ｌ，３１Ｒは、移動体１０の前方を撮像するように、例えば、第１及び第２の撮像部３１Ｌ，３１Ｒにおける光学系の光軸ＯＸが前方向に平行となるよう設置される。また、図３に示すように、第１の撮像部３１Ｌと第２の撮像部３１Ｒそれぞれに設けられる撮像素子はそれらの光軸に垂直な同一の面内にあり、第１の撮像部３１Ｌと第２の撮像部３１Ｒとに設けられる撮像素子の中心などの基準点を通る直線が、水平となるように設置される。

制御部３３は、画像処理マイクロプロセッサ（Micro Processing Unit：ＭＰＵ）によって実現される。制御部３３は、画像入出力インターフェース（Interface:Ｉ／Ｆ）を介して第１及び第２の撮像部３１Ｌ，３１Ｒから画像を画像情報として取得する。また、制御部３３は、ＣＡＮ入出力インタフェースを介して、ＥＣＵ２０から移動体１０の運転情報を取得する。制御部３３は、第１及び第２の撮像部３１Ｌ，３１Ｒが撮像した画像および運転情報に基づいて、ステレオカメラ装置３０の基準点から画像に撮像されている物体までの距離を検出する。基準点とは、ステレオカメラにおける距離検出の基準となる任意の点であり、例えば、第１及び第２の撮像部３１Ｌ，３１Ｒの各撮像素子間の中点である。

本実施形態において、制御部３３は、画像中の複数の領域別に、移動体１０の近くにある物体（近距離の物体）用の距離検出方法、および移動体１０の遠くにある物体（遠距離の物体）用の距離検出方法を用いて距離を検出する。領域とは、画像の全体領域の中の一部を構成する領域である。制御部３３は、複数の領域を、画像内の所定の方向における異なる位置に、位置決めする。所定の方向とは、ステレオカメラ装置３０が移動体１０に取り付けられたときに、撮像した画像において鉛直方向上向きに実質的に対応する方向である。また、複数の領域は、所定の方向に位置するほど小さく、複数の領域のうち所定の方向に向かうほど、遠距離の物体が撮像される。以下の説明においては、複数の領域は第１の領域Ｆ及び第２の領域Ｎとし、第１の領域Ｆは第２の領域Ｎにより所定の方向に向かう方向に位置する。

第１及び第２の領域Ｆ，Ｎの鉛直方向に対応する方向における位置は、予め決められた位置であってもよいし、移動体１０が進行する速度に基づいて決定されてもよい。移動体１０が進行する速度に基づいて決定する方法としては、例えば、移動体１０の速度が速いほど、第１及び第２の領域Ｆ，Ｎの位置は、それぞれ所定の方向に向かうように決定する。

また、制御部３３は、画像における水平方向に対応する方向についての第１及び第２の領域Ｆ，Ｎの位置を、移動体１０の進行方向に基づいて決定する。ここで、図４及び図５を用いて、水平方向に対応する方向における第１及び第２の領域Ｆ，Ｎの位置を決定する方法を詳細に説明する。図４は、移動体１０が直進しているときに第１の撮像部３１Ｌによって撮像された画像の例を示す図である。図５は、移動体１０が左方向に進行しているときに第１の撮像部３１Ｌによって撮像された画像の例を示す図である。

また、制御部３３は、移動体１０が直進している場合、図４に示すように、第１及び第２の領域Ｆ，Ｎを、画像内の水平方向における中央部に位置するように決定する。移動体１０が左方向に進行している場合、図５に示すように第１及び第２の領域Ｆ，Ｎは、画像内の水平方向における中央部より左側に位置するように決定される。また、第１及び第２の領域Ｆ，Ｎは、移動体１０の舵角の大きさに基づいて決定されてもよい。例えば、移動体１０が直進方向から左に２０度の方向に進行している場合の第１及び第２の領域Ｆ，Ｎは、移動体１０が直進方向から左に１０度の方向に進行する場合に比べて、それぞれ左側に位置するように決定される。また、第１及び第２の領域Ｆ，Ｎはそれぞれ複数あってもよい。

続いて、それぞれの領域における距離検出方法について、近距離用の距離検出方法および遠距離用の距離検出方法を別々に説明する。

最初に、近距離用の距離検出方法について説明する。近距離用の距離検出において、制御部３３は、近距離の物体を検出する領域である第２の領域Ｎを、第１及び第２の撮像部３１Ｌ，３１Ｒによってそれぞれ撮像された第１の画像、第２の画像の中からクロップする。クロップすると、制御部３３は、クロップした両画像を用いてステレオマッチングを行い、距離を検出する。

続いて、制御部３３がステレオマッチングを行って距離を検出する機能について詳細に説明する。制御部３３は、第１及び第２の画像に撮像されている物体の像の原画素に基づいて、基準位置から該物体の位置までの距離を検出する。検知された物体の位置までの距離を検出するには、ＳＡＤ（Sum of. Absolute Difference）関数を利用したセミグローバルマッチング（Semi Global Matching：ＳＧＭ）等のステレオマッチング用いるのが好ましい。

次に、遠距離用の距離検出方法について説明する。遠距離用の距離検出において、制御部３３は、遠距離用の物体を検知する領域である第１の領域Ｆを、第１の画像の中からクロップする。クロップすると、制御部３３は、物体検知を行なう。次に、制御部３３は、検知された物体の像を形成する原画素を少なくとも用いて、例えば当該物体の像の描画領域よりやや広い領域内の原画素に対して画素補間を行う。画素補間が行われると、制御部３３は、少なくとも、同時刻に撮像した第２の画像における、第１の画像の第１の領域内で検知した物体の描画領域に対応する領域内の原画素に基づいて、画素補間を行う。そして、第１及び第２の画像の、少なくとも、画素補間によって生成された補間画素に基づいて距離検出を行う。

ここで、制御部３３が行う物体検知について詳細に説明する。制御部３３は、第１の撮像部３１Ｌによって撮像された画像における第１の領域Ｆのみについて、ＨＯＧ（Histogram of Oriented Gradients）特徴量を用いて、人や車などの検知対象の所定の物体を検知する。さらに詳しく説明すると制御部３３は、第１の領域Ｆを構成する画素の輝度の勾配を算出し、算出された輝度の勾配とＳＶＭ（Support Vector Machine）の学習データに基づいて物体を検知する。

次に、制御部３３が行う画素補間について詳細に説明する。制御部３３は、所定時間毎に撮像した第１の画像のうち同一のフレームの画像における、検知された物体の像の描画領域よりやや広い領域内の原画素に基づいて、補間画素を生成する。制御部３３は、例えば、線形補間法により隣接する２以上の原画素の各輝度値に重み付けをして演算することにより、これらの原画素の中心の間の位置における輝度値を算出し、算出された輝度値を有する補間画素を生成する。また、制御部３３は、線形補間法に限らず、ニアレストネイバー法、バイキュービック法、ランツォシュ法等を用いた画素補間を行ってもよい。

続いて、第１の画像の第１の領域内で検知した物体の描画領域に対応する、第２の画像の領域について、図６及び図７を用いて詳細に説明する。

図６に示すように、第１の画像の第１の領域には、検知された物体の一例として車がほぼ中央に撮像されている。上述の第１の撮像部及び第２の撮像部の設置状態によれば、第２の画像の第１の領域には、当該車は中央より左側に撮像されることになる。そのため、図７に示すように、第１画像の描画領域と同じ位置にある領域より左側の領域Ａを、対応する領域とする。また、第１の画像において物体の像が検知された領域と同じ位置にある領域を含む広い領域Ｂを、対応する領域としてもよい。

続いて、制御部３３がステレオマッチングにより、制御部３３は、第１及び第２の画像に撮像されている物体の像の少なくとも補間画素に基づいて、基準位置から該物体の位置までの距離を検出する。すなわち、制御部３３は、検知された物体の像を構成する原画素及び補間画素の両方に基づいて距離を検出してもよいし、補間画素のみに基づいて距離を検出してもよい。第２の領域に対しては原画素に基づいてステレオマッチングを行い、第１の領域に対しては少なくとも補間画素に基づいてステレオマッチングを行うという点を除いては、制御部３３が行う第１の領域についてのステレオマッチング及び距離検出は、上述の第２の領域についてのステレオマッチング及び距離検出の機能とそれぞれ同様である。

また、第１の領域及び第２の領域につき、このようにして検出された基準点から物体までの距離は、ＥＣＵ２０に送信され、移動体１０の運転支援に用いられる。

ステレオカメラ装置３０の各構成の機能は、これらの機能を実現する処理内容を記述したプログラムを、コンピュータの記憶部に格納しておき、当該コンピュータのＣＰＵによってこのプログラムを読み出して実行することで実現することができる。

＜一実施形態の動作＞
本実施形態に係るステレオカメラシステム１の動作について説明する。

第１及び第２の撮像部３１Ｌ，３１Ｒは、それぞれ移動体１０の前方の画像を撮像する。画像が撮像されると、制御部３３は、撮像された画像を表す画像情報を、第１及び第２の撮像部３１Ｌ，３１Ｒそれぞれから取得する。一方、ＥＣＵ２０は運転情報を取得し、制御部３３はＥＣＵ２０から運転情報を取得する。

続いて、制御部３３は、運転情報に基づいて、画像を処理する。

ここで、制御部が行う画像の処理について詳細に説明する。まず、制御部３３が、近距離の物体までの距離を検出するために第２の領域Ｎに対して行う処理について図８を用いて説明する。

図８に示すように、まず、制御部３３は、第１及び第２の撮像部３１Ｌ，３１Ｒによってそれぞれ撮像された画像から、運転情報が表す運転状況に基づいて第２の領域Ｎをクロップする（ステップＳ２１）。次に、制御部３３は、クロップされた第２の領域Ｎを構成する原画素に基づいて、ステレオマッチングを行い（ステップＳ２２）、基準点から、第２の領域Ｎに撮像されている物体までの距離を検出する（ステップＳ２３）。

次に、制御部３３が、第１の領域Ｆに対して行う処理について、図９を用いて説明する。

図９に示すように、まず、制御部３３は、運転情報が表す運転状況に基づいて、第１の画像から、第１の領域Ｆをクロップする（ステップＳ３１）。ステップＳ３１で、第１の領域Ｆがクロップされると、制御部３３は、第１の領域Ｆを構成する画素の輝度の勾配を算出する（ステップＳ３２）。そして、制御部３３は、ステップＳ３２で算出された勾配に基づいてＨＯＧ特徴量を算出し（ステップＳ３３）、算出されたＨＯＧ特徴量とＳＶＭの学習データとに基づいて検知対象となっている物体を検知する（ステップＳ３４）。

次に、制御部３３は、ステップＳ３４で検知された第１の画像の第１の領域内の物体の描画領域よりやや広い領域内の原画素を抽出する。また、制御部３３は、第１の画像において物体の像が検知された描画領域に対応する、第２の画像の領域内の原画素を抽出する（ステップＳ３５）。そして、制御部３３は、ステップＳ３５で第１及び第２の画像から抽出された原画素に基づいて画素補間を行って補間画素を生成する（ステップＳ３６）。

ステップＳ３６で、第１及び第２の画像について、検知された物体の像に係る補間画素が生成されると、制御部３３は、少なくともこれらの補間画素に基づいてステレオマッチングを行い（ステップＳ３７）、検知された物体から基準位置までの距離を検出する（ステップＳ３８）。

本実施形態によれば、ステレオカメラ装置３０の遠くにあるため画像内に小さく撮像されている物体については、少なくとも補間画素に基づいて距離を検出するため、画素補間を行わない場合に比べて多くの画素に基づいて距離を検出することができる。そのため、高精度に距離を検出することができる。そして、このように高精度な距離検出を実現しつつ、検知された物体の像に係る画像についてのみ画素補間を行っているため、画像内の全ての領域について画素補間を行う場合に比べて、画素補間に係る処理量を少なくすることができる。

また、本実施形態によれば、ステレオカメラ装置３０によって撮像される画像の複数の領域は所定の方向に位置するほど小さい。このため、物体検知に係る処理量は少なく、処理に要する時間は短くなる。また、所定の方向に向かうほど、ステレオカメラ装置３０から遠くに位置する物体までの距離検出に用いられ、遠くに位置する物体は画像内において小さく撮像されるため、小さい領域に対して物体検知を行っても検知対象の物体を検知することができる。

また、本実施形態によれば、第１の撮像部３１Ｌによって撮像した異なる複数のフレームの画像、例えば、任意のフレームの画像とその次のフレームの画像とを用いて画素補間を行う場合に比べて、処理速度が速くなる。異なるフレームの画像を用いて画素補間を行う場合、任意のフレームの画像は、その次のフレームの画像とともに画素補間が行われるために、その次のフレームの画像が撮像されるまで、その処理を開始するのを待たなければならないからである。したがって、高速で移動する移動体１０が備えるステレオカメラ装置３０の物体検知にはリアルタイムで行うことができる、同一のフレームの画像を構成する画素に基づく画素補間が適している。

また、本実施形態によれば、移動体１０が走行する方向に基づいて領域を決定し、その領域に対して画素補間及び距離検出を行うため、移動体１０が走行可能な領域について距離検出を行うことができる。

上述の実施形態は代表的な例として説明したが、本発明の趣旨及び範囲内で、多くの変更及び置換ができることは当業者に明らかである。したがって、本発明は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。例えば、実施形態に記載の複数の構成ブロックを１つに組み合わせたり、あるいは１つの構成ブロックを分割したりすることが可能である。

図１０に示すように、ステレオカメラ装置３０は、第１及び第２の撮像部３１Ｌ，３１Ｒを有するステレオカメラ、第１の制御部３３、及び第２の制御部３４を備えてもよい。このように、ステレオカメラシステム１を２つの制御部を備えるマルチコアによるものとすることによって、第１の制御部３３が遠距離用の距離検出方法によって距離検出を行い、第２の制御部３４が近距離用の距離検出方法によって距離検出を行う。このように複数の制御部が異なる領域に対してそれぞれ処理を行うことによって各制御部の処理量が減少する。そのため、ステレオカメラ装置３０は処理全体を高速に行うことができる。

また、本実施形態では、第１及び第２の撮像部３１Ｌ，３１Ｒは移動体１０の前方を撮像する位置に設置されているが、前方ではなく側方又は後方を撮像する位置に設置することも可能である。第１及び第２の撮像部３１Ｌ，３１Ｒが、移動体１０の側方又は後方を撮像する位置に設置した場合、ステレオカメラ装置３０は移動体１０のそれぞれ側方又は後方の、遠くにある物体を高い精度、かつ高い処理速度で検知することができる。

また、本実施形態を説明するための図４，５においては、第１及び第２の領域Ｆ，Ｎの形状をそれぞれ四角形として記載しているが、これらの領域の形状は四角形に限定されない。

また、本実施形態では、運転状況に基づいて、画像中の領域の大きさ及び形状を決定してもよい。例えば、移動体１０の速度に基づいて領域の大きさを決定したり、ヘッドライトの照射範囲又は舵角に基づいて領域の形状を決定したりしてもよい。

また、本実施形態では、制御部３３は、通信ネットワークを介して他の装置又は他のシステムに検知された物体及び計測された大きさに関する情報を送信してもよい。

１ステレオカメラシステム
１０移動体
２０ＥＣＵ
３０ステレオカメラ装置
３１Ｌ第１の撮像部
３１Ｒ第２の撮像部
３３制御部（第１の制御部）
３４第２の制御部
ＯＸ光軸
Ｆ第１の領域
Ｎ第２の領域

Claims

ステレオカメラと、
前記ステレオカメラが撮像する画像内において所定の方向における位置の異なる複数の領域の中の少なくとも１つの第１の領域に基づいて検知対象の物体を検知し、前記第１の領域内の、検知された前記物体の像を含み、前記第１の領域より小さい領域の原画素に基づいて画素補間を行うことにより補間画素を生成し、少なくとも該補間画素に基づいて基準位置から検知された前記物体の位置までの距離を検出する第１の制御部とを備える
ステレオカメラ装置。
請求項１に記載のステレオカメラ装置であって
前記ステレオカメラは、第１の撮像部と第２の撮像部とを有し、それぞれ第１の画像と第２の画像とを撮像し、
前記第１の制御部は、前記第１の画像および前記第２の画像それぞれに画素補間を行い、
前記第１の画像における前記画素補間を行う領域と前記第２の画像における前記画素補間を行う領域とが異なる
ステレオカメラ装置。
請求項２に記載のステレオカメラ装置であって
前記第２の画像における前記画素補間を行う領域は、前記第１の画像における前記画素補間を行う領域に比べて、前記第２の撮像部に対する第１の撮像部の設置の方向に位置する領域を含む
ステレオカメラ装置。
請求項３に記載のステレオカメラ装置であって、
前記第２の画像における前記画素補間を行う領域は、前記第１の画像における前記画素補間を行う領域と同じ位置の領域も含む
ステレオカメラ装置。
請求項１から４のいずれか一項に記載のステレオカメラ装置であって、
前記複数の領域は、前記所定の方向における一方側に位置するものほど小さい
ステレオカメラ装置。
請求項５に記載のステレオカメラ装置であって、
前記複数の領域のうち、前記一方側に位置するものほど、前記ステレオカメラ装置の遠くに位置する物体までの距離の検出に用いられる
ステレオカメラ装置。
請求項１から６のいずれか１項に記載のステレオカメラ装置であって、
前記所定の方向が、前記ステレオカメラで撮像される画像において鉛直方向上向きに対応する方向に実質的に一致する
ステレオカメラ装置。
請求項１から７のいずれか一項に記載のステレオカメラ装置であって、
前記画素補間は、前記ステレオカメラが撮像した同一のフレームの画像を構成する前記原画素を用いた画素補間である
ステレオカメラ装置。
請求項１から８のいずれか一項に記載のステレオカメラ装置であって、
前記複数の領域の中で、前記第１の領域とは異なる第２の領域においては、第２の領域を構成する原画素に基づいて、前記基準位置から前記第２の領域に描かれる物体までの距離が検出される
ステレオカメラ装置。
請求項９に記載のステレオカメラ装置であって、
前記第１の制御部が、前記基準位置から前記第２の領域に描かれる物体までの距離を検出する
ステレオカメラ装置。
請求項９に記載のステレオカメラ装置であって、
前記基準位置から前記第２の領域に描かれる物体までの距離の検出を行う第２の制御部を、さらに備える
ステレオカメラ装置。
請求項１から１１のいずれか一項に記載のステレオカメラ装置であって、
前記ステレオカメラは２つの撮像部を備え、
前記第１の制御部は、前記２つの撮像部のうちの一方の撮像部が撮像する画像のみに基づいて、物体を検知する
ステレオカメラ装置。
請求項１から１２のいずれか一項に記載のステレオカメラ装置であって、
前記第１の制御部は、前記ステレオカメラを備える車両の運転状況に基づいて、前記複数の領域のうちの少なくとも１つの領域の位置、大きさ、形状のうちいずれか１つ以上を決定する
ステレオカメラ装置。
請求項１から１３のいずれか一項に記載のステレオカメラ装置を備える車両。
請求項１４に記載の車両であって、
前記ステレオカメラ装置の前記第１の制御部は、前記ステレオカメラを備える前記車両の運転状況に基づいて、前記複数の領域のうちの少なくとも１つの領域の位置、大きさ、形状のうちいずれか１つ以上を決定する車両。