JP5752729B2 - 車間距離算出装置およびその動作制御方法 - Google Patents

車間距離算出装置およびその動作制御方法 Download PDF

Info

Publication number
JP5752729B2
JP5752729B2 JP2013038687A JP2013038687A JP5752729B2 JP 5752729 B2 JP5752729 B2 JP 5752729B2 JP 2013038687 A JP2013038687 A JP 2013038687A JP 2013038687 A JP2013038687 A JP 2013038687A JP 5752729 B2 JP5752729 B2 JP 5752729B2
Authority
JP
Japan
Prior art keywords
vehicle
distance
image
target vehicle
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013038687A
Other languages
English (en)
Other versions
JP2014167677A (ja
Inventor
野中 俊一郎
俊一郎 野中
優子 松井
優子 松井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2013038687A priority Critical patent/JP5752729B2/ja
Priority to CN201410043740.3A priority patent/CN104021541B/zh
Priority to US14/170,131 priority patent/US9135709B2/en
Publication of JP2014167677A publication Critical patent/JP2014167677A/ja
Application granted granted Critical
Publication of JP5752729B2 publication Critical patent/JP5752729B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/255Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Geometry (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of Optical Distance (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

この発明は,車間距離算出装置およびその動作制御方法に関する。
自動車事故を未然に防止するためには車間距離を算出することが重要である。このために,前方に走行中の車両の陰影を検出し,その陰影の位置と消失点とを用いて車間距離を算出するものがある(特許文献1)。また,消失点を利用して障害物を検出するもの(特許文献2),移動体かどうかを検出するもの(特許文献3)などもある。
特開2002-327635号公報 特開2007-199932号公報 特開2006-48338号公報
しかしながら,特許文献1においては前方に走行する車両の陰影の位置を検出しなければならないので,比較的煩雑であり,開発コストが高くなる。また,距離算出するまでの時間が長くなってしまうことがある。さらに,夜間,雪道などでは陰影を検出できにくいので距離を算出できないことがある。また,特許文献1,2においても比較的簡単に,かつ正確に車両間距離を算出することは考えられていない。
この発明は,比較的簡単に,かつ正確に車両間距離を算出することを目的とする。
この発明による車間距離算出装置は,自車両に搭載されたカメラによって自車両の前方に存在する対象車両を撮像するようにカメラを制御する撮像制御手段,カメラの撮像によって得られた画像にもとづいて,対象車両がどのような車両グループに属するかを決定する車両グループ決定手段,カメラの撮像によって得られた画像に含まれる対象画像の幅または高さの画素数を算出する対象車両画素数算出手段,車両グループ決定手段によって決定された車両グループの代表的な車幅または車高,対象車両画素数算出手段によって算出された画素数およびカメラの撮像によって得られた画像の幅または高さの画素数にもとづいて対象車両までの距離を算出する第1の距離算出手段,カメラの撮像によって得られた画像の中から対象車両を表す対象車両画像を検出する対象画像検出手段,カメラの撮像によって得られた画像の中から消失点を検出する消失点検出手段,対象画像検出手段によって検出された対象画像の上端部および下端部の少なくとも一方の位置と消失点検出手段によって検出された消失点位置とにもとづいて,対象車両までの距離を算出する第2の距離算出手段,ならびに対象車両画像検出手段によって検出された対象画像の位置と消失点検出手段によって検出された消失点の位置とが近いほど,第2の距離算出手段によって算出された第2の距離の重みが小さくなる重み付けで,第1の距離算出手段によって算出された第1の距離と第2の距離算出手段によって算出された第2の距離とから対象車両までの距離を決定する距離決定手段を備えていることを特徴とする。
この発明は,車間距離算出装置に適した動作制御方法も提供している。すなわち,この方法は,撮像制御手段が,自車両に搭載されたカメラによって自車両の前方に存在する対象車両を撮像するようにカメラを制御し,車両グループ決定手段が,カメラの撮像によって得られた画像にもとづいて,対象車両がどのような車両グループに属するかを決定し,対象車両画素数算出手段が,カメラの撮像によって得られた画像に含まれる対象画像の幅または高さの画素数を算出し,第1の距離算出手段が,車両グループ決定手段によって決定された車両グループの代表的な車幅または車高,対象車両画素数算出手段によって算出された画素数およびカメラの撮像によって得られた画像の幅または高さの画素数にもとづいて対象車両までの距離を算出し,対象画像検出手段が,カメラの撮像によって得られた画像の中から対象車両を表す対象車両画像を検出し,消失点検出手段が,カメラの撮像によって得られた画像の中から消失点を検出し,第2の距離算出手段が,対象画像検出手段によって検出された対象画像の上端部および下端部の少なくとも一方の位置と消失点検出手段によって検出された消失点位置とにもとづいて,対象車両までの距離を算出し,距離決定手段が,対象車両画像検出手段によって検出された対象画像の位置と消失点検出手段によって検出された消失点の位置とが近いほど,第2の距離算出手段によって算出された第2の距離の重みが小さくなる重み付けで,第1の距離算出手段によって算出された第1の距離と第2の距離算出手段によって算出された第2の距離とから対象車両までの距離を決定するものである。
この発明によると,自車両の前方に存在する対象車両が撮像され,撮像により得られた画像から,対象車両がどのような車両グループに属するかが決定される。また,撮像により得られた画像に含まれる対象車両の画像の幅または高さの画素数が算出される。決定された車両グループの代表的な車幅または車高,算出された対象車両の画像の幅または高さの画素数および撮像された画像の幅または高さの画素数にもとづいて自車両から対象車両までの距離が算出される。車両グループは,たとえば,軽自動車,普通乗用車,トラック,バスなどの大型車,自動二輪車,自転車など車両の幅または高さごとに分けられたグループであり,免許の種類に対応しているとも言える。この発明によると,対象車両がどのような車両グループに属するかが決定され,決定された車両グループの代表的な車幅または車高が利用されて対象車両までの第1の距離が算出される。
さらに,この発明によると,自車両の前方が撮像される。撮像された画像の中から対象車両を表す対象車両画像の上端部および下端部の少なくとも一方の位置と消失点位置とにもとづいて対象車両までの第2の距離が算出される。
対象車両画像から消失点までの距離が近いほど,第2の距離の重みが小さくなるように,算出された第1の距離と第2の距離とから,対象車両までの距離が決定される。消失点の近くに対象車両画像が存在する場合には,消失点の検出誤差が第2の距離の算出に多大な影響を与えることとなるが,この発明によると,消失点の近くに対象車両画像が存在する場合には,第2の距離の重み付けを小さくして,第1の距離と第2の距離とから対象車両までの距離が決定される。車間距離の算出精度を向上させることができる。
代表的な車幅または車高が車両グループごとにあらかじめ記憶されている車両メモリをさらに備えてもよい。この場合,第1の距離算出手段は,車両メモリに記憶されている代表的な車幅または車高のうち,車両グループ決定手段によって決定された車両グループの代表的な車幅または車高,対象車両画素数算出手段によって算出された画素数およびカメラの撮像によって得られた画像の幅または高さの画素数にもとづいて対象車両までの距離を算出するものとなろう。
第1の距離算出手段は,対象画像検出手段によって検出された対象車両画像の上端部と消失点検出手段によって検出された消失点位置とにもとづいて,対象車両までの第3の距離を算出する第3の距離算出手段,および対象画像検出手段によって検出された対象車両画像の下端部と消失点検出手段によって検出された消失点位置とにもとづいて,対象車両までの第4の距離を算出する第4の距離算出手段を備えてもよい。この場合,第3の距離算出手段によって算出された第3の距離および第4の距離算出手段によって算出された第4の距離にもとづいて対象車両までの距離を算出するものとなろう。
対象車両画像検出手段によって検出された対象画像の下端部よりも下方に対象車両のタイヤが無いかどうかを判定する判定手段,および判定手段によって,タイヤが無いと判定されたことに応じて,対象車両画像検出手段によって検出された対象画像の下端部の位置を補正する補正手段をさらに備えてもよい。この場合,第2の距離算出手段は,補正手段によって補正された下端部の位置を用いて対象車両までの距離を算出するものとなろう。
自車両と対象車両との関係を示している。 車間距離算出装置の電気的構成を示すブロック図である。 撮像によって得られた画像の一例である。 車両グループ・テーブルの一例である。 (A)および(B)は,自車両と対象車両との関係を示している。 撮像によって得られた画像の一例である。 撮像によって得られた画像の一例である。 対象車両画像の一例である。 対象車両画像の一例である。 自車両と対象車両との関係を示している。 消失点までの距離と重み付け係数との関係を示している。 運転傾向を示している。 運転傾向を示している。
図1は,自車両2と自車両2の前方を走行する対象車両1との関係を側面から表わしたものである。
道路3上を自車両(自動車)2が走行し,その自車両2の前方に車間距離dを算出する対象車両(自動車)1が走行している。
自車両2の車内前方の上方に,高さhの位置にカメラ10が取り付けられている。このカメラ10により,前方の対象車両2が撮像される。撮像された画像にもとづいて,自車両2から対象車両1までの車間距離dが算出される。カメラ10の取り付け位置から自車両2の先端までの距離はΔdである。
図2は,車間距離算出装置の電気的構成を示すブロック図である。
この実施例では,対象車両1の車両グループ(軽自動車,普通乗用車,大型車)を決定し,車両グループを利用して対象車両1までの車間距離を算出する第1の距離算出と,消失点を検出し,検出された消失点を利用して対象車両1までの距離を算出する第2の距離算出と,が行われる。第1の距離算出において得られた第1の車間距離d1と第2の距離算出において得られた第2の車間距離d2とにもとづいて,対象車両1までの車間距離dが算出される。
まず,第1の距離算出について説明する。
車間距離算出装置の全体の動作は,制御装置20によって統括される。
撮像制御装置23によってカメラ10が制御される。カメラ10によって自車両10の前方を走行(停止)している対象車両1が撮像される。
図3は,撮像によって得られた画像30の一例である。
画像30には,道路3を表わす道路画像3(道路3と同じ符号で示す)上に,前方に走行している対象車両1の対象車両画像1(対象車両1と同じ符号で示す)が表わされている。対象車両画像1にはナンバープレートの画像1Aも含まれている。対象車両画像1を挟んで,歩車道境界ブロックの画像4とセンター・ラインの画像5が表れている。
また,後述するように画像30から車両検出処理が行われ,対象車両画像1が検出される。図3では,対象車両画像40が検出されたことを示す車両枠1も表示されている。
図2に戻って,カメラ10によって撮像された画像30を表わす画像データは,車両画像検出回路11に入力する。車両画像検出回路11において,上述したように画像30の中から車両対象画像1が検出される。検出された車両対象画像1を表わすデータは車両グループ決定回路12に与えられる。
車両グループ決定回路12において,入力した車両対象画像1を表わすデータから自車両2の前方を走行している対象車両1の車両グループ(大きさに応じた車両の種類を示すもので,この実施例では,軽自動車,普通乗用車,バス,トラックなどの大型車,オートバイ,自転車に分けられている)が検出される。車両グループが決定すると,図4を参照して,その車両グループの代表的な車幅wが決まる。
図4は,車幅メモリ13に格納されている車両グループ・メモリの一例である。
車両グループ・メモリには,車両グループに対応して,その車両グループの代表的な車幅が格納されている。車両グループ・メモリに格納されている車両グループは,車両グループ決定回路12において決定できる車両グループに対応しているのはいうまでもない。軽自動車,普通自動車,大型車(トラック,バス),オートバイおよび自転車の車両グループに対応して車幅w1,w2,w3,w4およびw5が格納されている
車両グループ決定回路12において決定された車両グループを表すデータが車幅メモリ13に入力すると,その車両グループに対応する代表的な車幅を表すデータが車幅メモリ13から出力する。車幅を表すデータは第1の距離算出回路14に与えられる。
車両グループが決定される際に,対象車両画像1(図3参照)の底辺の幅の画素数Naも合わせて算出される。
図5(A)は,ある時刻t1における自車両2と対象車両1との位置関係を示す平面図である。
図5(A)を参照して,カメラ10の画角θが決まっており,また出力される画像30の幅の画素数Nwも決まっている。対象車両画像1の後端部の位置においてカメラ10が撮像できる実際の幅をx1,対象車両1から自車両2までの距離をd10とすると,式1の関係が成立する。
d10=x1/[2tan(θ/2)]・・・式1
また,Nw:x1=Na:wであるから,式2が成立する。
x1=Nw×w/Na・・・式2
式1と式2とから,式3が得られ,車間距離d10は式3から算出できる。
d10=Nw×w/[2×Na×tan(θ/2))・・・式3
図5(B)は,時刻tから単位時間が経過した時刻t2における自車両2と対象車両1との位置関係を示す平面図である。
時刻t2においても上述したように,自車両2から対象車両1までの車間距離をd20とすると,車間距離d20は式4から算出できる。
d20=Nw×w/[2×Na×tan(θ/2))・・・式4
車間距離d10,d20が第1の距離d1である。このようにして決定された第1の距離d1を表わすデータは,距離決定回路15に与えられる。
次に,第2の距離算出について説明する。
図6は,カメラ10の撮像によって得られた画像30の一例である。
画像30には,自車両2が走行する走行車線の道路3を表わす道路画像3(道路3と同じ符号で示す)および対向車が走行する走行車線の道路画像3Aが含まれている。走行車線の道路画像3と対向車の走行車線の道路画像3Aと間にはセンター・ラインの画像5が表示されている。また,道路画像3の左側および道路画像3Aの右側には歩車道境界ブロックの画像4が表示されている。
第2の距離算出では,対象車両2までの距離を測定するために消失点Pvが利用される。
消失点Pvは,歩道ブロック4の延長線とセンター・ライン5との延長線とが交差する位置にある。これらのいずれかが見当たらない場合には,これらの一方とこれらの平行線(例えば,ガードレールの延長線)とが交差する位置により消失点Pvを求めてもよい。
図7は,撮像によって得られた画像30Aの一例である。
画像30Aには,自車両2の前方を走行する対象車両画像1を表わす対象車両画像1が含まれている。対象車両画像1の回りには,画像30Aから検出される対象車両画像1を特定する枠40も表示されている。
対象車両画像1の下端のY座標(縦方向の座標)位置ybが検出され,その位置と消失点PvのY座標位置yeが検出される。検出されたこれらの位置ybおよびyeの差分Δyを用いて対象車両1までの距離(第2の距離)d2が算出される。
図2に戻って,上述のように,カメラ10によって自車両2の前方が撮像されると,撮像された画像を表わす画像データは,車両画像検出回路11に入力する。車両画像検出回路11において,上述したように画像30の中から車両対象画像1が検出される。検出された車両対象画像1の位置を表わすデータは下端位置決定回路26に与えられる。
下端位置決定回路26において,自車両2の前方を走行中の対象車両(対象車両画像)1の下端の位置ybが検出される。検出された位置ybを表わすデータは下端位置補正回路27に入力する。下端位置補正回路27において,検出された下端位置ybが補正される。この補正処理について詳しくは後述する。下端位置補正回路27において補正された下端位置ybを表わすデータは第2の距離算出回路29に入力する。
また,カメラ10によって撮像された画像を表わすデータは消失点検出回路28にも入力する。消失点検出回路28において,撮像された画像から消失点が検出される。検出された消失点の位置yeを示すデータも第2の距離算出回路29に入力する。
第2の距離算出回路29において,入力した消失点位置yeを示すデータ,対象車両1の下端位置ybを示すデータなどを利用して対象車両1までの距離(第2の距離)d2が算出される。
上述したように,図1を参照して,車間距離(第2の距離d2)d,自車両2においてカメラ10が取り付けられた位置から自車両2の前端までの距離をΔd,カメラ10の取り付け位置の高さをhとする。また,対象車両1の後端下端部における道路3からの高さをΔh1とする。
上述したように,図4を参照して,撮像により得られた画像30Aにおける消失点PvのY座標位置はye,検出された対象車両画像1の後端下端部のY座標位置はybである。また,Y座標位置yeとyeとの間の距離はΔyである。
カメラ10のY座標値1あたりの角度分解能をΔθ(rad)とすると,式1が成立する。
dy・Δθ(rad)=(h−Δh1)/(d2+Δd)・・・式1
式1から車間距離(第2の距離d2)が算出できる。第2の距離算出回路29において算出された第2の距離d2を示すデータは距離決定回路15に入力する。
図8は,撮像された画像30Aから検出された対象車両画像1の一例である。
検出された対象車両画像1にタイヤの画像7が含まれており,そのタイヤの画像7を含めて対象車両画像1として検出されると,そのときの検出枠41は,タイヤの画像7が含まれていないときの検出枠40よりも下がっている。このために,上述したにように検出された対象車両画像1の後端下端部のY座標位置ybはタイヤの画像7の分だけ下がってしまう。このために,図1に示すように,対象車両1のタイヤの画像7の高さの分を考慮して第2の距離d2が算出される。式2にしたがって第2の車間距離d2が算出される。
dy・Δθ(rad)=h/(d2+Δd)・・・式2
検出された対象車両画像1の中にタイヤの画像2が含まれている場合には,式2にもとづいて第2の距離d2が算出されるように,下端位置補正回路13によって下端位置が補正される。対象車両画像1の中にタイヤの画像2が含まれていないかどうかの判定は,検出枠40または41の下部にタイヤの画像2が含まれていないかどうかの確認によってもよいし,それらの枠40または41よりも外側の下にタイヤの画像2が含まれていないかどうかの確認によってもよい。
図9は,撮像された画像30Aから検出された対象車両画像1の一例である。
上述した実施例では,対象車両画像1の下端部のY座標位置ybを利用して第2の距離d2が算出されているが,対象車両画像1の後端の上端部のY座標位置yuを利用しても第2の距離d2を算出することができる。
対象車両画像1の後端部が検出され,検出枠42によって囲まれている。検出枠42は対象画像のリア・ウインドウが除かれるように対象車両画像1を囲んでいる。検出枠42の上端がY座標位置yuである。
図10は,図1に対応するもので,自車両2と対象車両1との関係を示す側面図である。
対象車両1の後端上部は,道路3から高さΔh2の位置にあるから,式3にしたがって第2の距離d2が算出される。
dy・Δθ(rad)=(h−Δh2)/(d2+Δd)・・・式3
式1または式2から算出される第2の距離d2(第3の距離)と式3から算出される第2の距離d2(第4の距離)との平均距離を第2の距離d2とすることにより,より正確な第2の距離d2が算出される。式3にしたがって第2の距離d2が算出される場合には,上述した下端位置決定回路26において,上端位置yuが決定され,第2の距離算出回路29には,上端位置yuおよび下端位置ybならびに消失点位置yeをそれぞれ示すデータが入力することとなろう。
このようにして算出された第2の距離d2を表わすデータは距離決定回路15に入力する。距離決定回路15には,上述したように,第1の距離算出回路14において算出された第1の距離d1を表わすデータのほか,車両画像検出回路11において検出された車両画像の位置を表わすデータおよび消失点検出回路28において検出された消失点の位置を示すデータも入力する。
距離決定回路15において,式4にしたがって対象車両1までの距離dが算出される。但し,式4においてd1は第1の距離算出回路14において算出される第1の距離,d2は第2の距離算出回路29において算出される第2の距離,kは対象車両画像1から消失点Pvまでの距離に応じて変わる重み付け係数である。
d=(1−k)×d1+k×d2・・・式4
図11は,対象車両画像1から消失点Pvまでの距離と重み付け係数kとの関係を示している。
対象車両画像1から消失点Pvまでの距離が近ければ重み付け係数kはk1である。同様に,消失点Pvまでの距離が近くも遠くも無く中くらいであれば,重み付け係数kはk2であり,消失点Pvまでの距離が遠いと重み付け係数kはk3である。但し,0<k1<k2<k3<1である。したがって,式4にもとづいて決定される車間距離dは,消失点Pvまでの距離が近いほど,消失点Pvにもとづいて算出される第2の距離d2の影響が少なくなる。消失点Pvの近くに対象車両画像1があるほど消失点Pvの検出誤差が第2の距離d2の算出誤差に影響を与えるが,消失点Pvの近くに対象車両画像1があるほど車間距離dに与える第2の距離d2の影響を少なくできるので,消失点Pvの検出誤差が車間距離dに与える影響を少なくできる。比較的正確に車間距離dを算出できるようになる。
距離決定回路15において単位時間ごとの車間距離dを表わすデータが決定されると,その車間距離dを表すデータは衝突時間算出回路16,時間計測回路17および運行表示回路25に入力する。
時間計測回路17において,車間距離が衝突する危険が生じる危険距離未満の状態がある程度つづいたかどうかが確認される。危険距離未満の状態がある程度つづくと,その旨を示すデータが警告装置18にあたえられる。警告装置18において警告音,警告表示などの警告が自車両2のドライバに行われる。また,記録制御装置21が制御され,カメラ10によって撮像された画像データが危険運転の動画データ,連続した静止画データとして記録装置22に記録される。
また,車間距離を表すデータが単位時間ごとに衝突時間算出回路16に与えられると,車間距離が0となる時刻が衝突時間算出回路16において予測される。衝突予測時間があらかじめ定められた時間となると,警告装置18にその旨のデータが与えられる。警告装置18において,上述ように警告が行われる。また,衝突しないようにエンジン制御回路19が制御させられ,自車両2の速度が遅くさせられる。
また,速度検出回路24によって自車両2の速度が検出される。検出された速度を示すデータは運行表示回路25に与えられる。
運行表示回路25において,自車両2の走行速度と車間距離との関係を示す運転傾向を示すグラフが表示される。
図12および図13は,運行傾向の表示例である。いずれも横軸が走行速度,縦軸が車間距離である。
図12および図13において,グラフGは,安全運転と考えられる走行速度と車間距離との関係を示している。
グラフGによって示される走行速度と車間距離との関係は,走行速度に応じて変わる。走行速度が低速の場合には,比較的車間距離が短くてもよいが,走行速度が中速となると車間距離が比較的必要となる。走行速度が高速となると長い車間距離が必要となる。
ハッチングで示す領域S1に,車間距離と走行速度との関係が入るように,グラフGによって示される車間距離よりも車間距離があれば安全運転の傾向となる。これに対して,領域S2に,車間距離と走行速度との関係が入り,グラフGによって示される車間距離よりも車間距離が無ければ危険運転の傾向となる。これらの傾向は走行速度に対応して得られる。
図12は,散布図により安全運転と危険運転との傾向を示している。
上述したように,走行速度と車間距離との関係を示す多数の点50が図示されている。これらの点50に分布にしたがって,ドライバの傾向が分かる。図5では,走行速度が低速度の場合には,ほぼ安全運転であるが,走行速度が中速度となると車間距離が短くなり危険運転の傾向がある。また,走行速度が高速度となると車間距離が長くなり安全運転の傾向があることが分かる。たとえば,特定の走行速度において必要車間距離と実際の車間距離との差Δ1を算出し,その差Δ1があることをドライバに知らせるようにしてもよい。
図13は,棒グラフを用いた傾向を示している。
走行速度と車間距離との関係が複数の棒グラフ51−55によって図示されている。走行速度が低速のときの棒グラフ51,52は,必要な車間距離があることを示しているが,走行速度が中速のときの棒グラフ53,54は,必要な車間距離に足りず,危険運転であることがわかる。また,走行速度が高速のときの棒グラフ55は,必要な車間距離があり比較的安全運転であることがわかる。
このように,ドライバの運転傾向が運転表示回路25に表示される。ドライバは,表示を見ながら安全運転を心がけることができる。
また,算出された走行速度と車間距離との関係を示すデータを抽出し,運転終了後にドライバの自宅,事務所等において上述した運行表示を行うようにしてもよい。
上述の実施例においては,第1の距離d1を算出する場合に,対象車両画像の幅から対象車両の車両グループを決定し,決定した車両グループに対応する車幅にもとづいて対象車両までの距離を算出している。しかしながら,対象車両画像の高さを検出し,その高さから対象車両のグループを決定し,決定した車両グループに対応する車高にもとづいて対象車両までの距離を算出するようにしてもよい。その場合には,車幅メモリ13の代わりに車両グループごとに車高を格納した車高メモリが利用されることとなる。
ナンバー・プレートは,軽自動車,普通乗用車,大型車などの車両グループごとに異なるので,車両画像検出回路11において,対象車両のナンバー・プレートの画像を検出し,検出されたナンバー・プレートの画像から対象車両の車両グループを決定するようにしてもよい。また,車両グループ決定回路12において車両グループを決定することができない場合にはナンバー・プレートの画像を参考にして車両グループを決定するようにしてもよい。
1 対象車両
2 自車両
10 カメラ
11 車両画像検出回路
12 車両グループ決定回路
13 車幅メモリ
14 第1の距離算出回路
15 距離決定回路
23 撮像制御回路
26 下端位置決定回路
28 消失点検出回路
29 第2の距離算出回路

Claims (3)

  1. 自車両に搭載されたカメラによって自車両の前方に存在する対象車両を撮像するように上記カメラを制御する撮像制御手段,
    上記カメラの撮像によって得られた画像にもとづいて,上記対象車両がどのような車両グループに属するかを決定する車両グループ決定手段,
    上記カメラの撮像によって得られた画像に含まれる上記対象画像の幅または高さの画素数を算出する対象車両画素数算出手段,
    上記車両グループ決定手段によって決定された車両グループの代表的な車幅または車高,上記対象車両画素数算出手段によって算出された画素数および上記カメラの撮像によって得られた画像の幅または高さの画素数にもとづいて上記対象車両までの距離を算出する第1の距離算出手段,
    上記カメラの撮像によって得られた画像の中から対象車両を表す対象車両画像を検出する対象画像検出手段,
    上記カメラの撮像によって得られた画像の中から消失点を検出する消失点検出手段,
    上記対象画像検出手段によって検出された対象画像の下端部の位置と上記消失点検出手段によって検出された消失点位置と,上記カメラの取り付け位置の高さから上記対象車両の後端下端部における道路からの高さを減算した値と,にもとづいて,対象車両までの距離を算出する第2の距離算出手段,
    上記対象車両画像検出手段によって検出された対象画像の位置と上記消失点検出手段によって検出された消失点の位置とが近いほど,上記第2の距離算出手段によって算出された第2の距離の重みが小さくなる重み付けで,上記第1の距離算出手段によって算出された第1の距離と上記第2の距離算出手段によって算出された第2の距離とから対象車両までの距離を決定する距離決定手段,
    上記対象車両画像検出手段によって検出された対象車両画像に対象車両のタイヤが含まれているかどうかを判定する判定手段,ならびに
    上記判定手段によってタイヤが含まれていると判定されたことに応じて,上記カメラの取り付け位置の高さから上記対象車両の後端下端部における道路からの高さを減算した値に代えて,上記カメラの取り付け位置の高さを用いることにより,上記対象車両画像検出手段によって検出された対象車両画像の下端部の位置を補正する補正手段をさらに備え,
    上記第2の距離算出手段は,上記補正手段によって補正された下端部の位置を用いて対象車両までの距離を算出するものである,
    を備えた車間距離算出装置。
  2. 代表的な車幅または車高が車両グループごとにあらかじめ記憶されている車両メモリをさらに備え,
    上記第1の距離算出手段は,
    上記車両メモリに記憶されている代表的な車幅または車高のうち,上記車両グループ決定手段によって決定された車両グループの代表的な車幅または車高,上記対象車両画素数算出手段によって算出された画素数および上記カメラの撮像によって得られた画像の幅または高さの画素数にもとづいて上記対象車両までの距離を算出するものである,
    請求項1に記載の車間距離算出装置。
  3. 撮像制御手段が,自車両に搭載されたカメラによって自車両の前方に存在する対象車両を撮像するように上記カメラを制御し,
    車両グループ決定手段が,上記カメラの撮像によって得られた画像にもとづいて,上記対象車両がどのような車両グループに属するかを決定し,
    対象車両画素数算出手段が,上記カメラの撮像によって得られた画像に含まれる上記対象画像の幅または高さの画素数を算出し,
    第1の距離算出手段が,上記車両グループ決定手段によって決定された車両グループの代表的な車幅または車高,上記対象車両画素数算出手段によって算出された画素数および上記カメラの撮像によって得られた画像の幅または高さの画素数にもとづいて上記対象車両までの距離を算出し,
    対象画像検出手段が,上記カメラの撮像によって得られた画像の中から対象車両を表す対象車両画像を検出し,
    消失点検出手段が,上記カメラの撮像によって得られた画像の中から消失点を検出し,
    第2の距離算出手段が,上記対象画像検出手段によって検出された対象画像の下端部の方の位置と上記消失点検出手段によって検出された消失点位置と,上記カメラの取り付け位置の高さから上記対象車両の後端下端部における道路からの高さを減算した値と,にもとづいて,対象車両までの距離を算出し,
    距離決定手段が,上記対象車両画像検出手段によって検出された対象画像の位置と上記消失点検出手段によって検出された消失点の位置とが近いほど,上記第2の距離算出手段によって算出された第2の距離の重みが小さくなる重み付けで,上記第1の距離算出手段によって算出された第1の距離と上記第2の距離算出手段によって算出された第2の距離とから対象車両までの距離を決定する車間距離算出装置の動作制御方法であって,
    判定手段が,上記対象車両画像検出手段によって検出された対象車両画像に対象車両のタイヤが含まれているかどうかを判定し,
    補正手段が,上記判定手段によってタイヤが含まれていると判定されたことに応じて,上記カメラの取り付け位置の高さから上記対象車両の後端下端部における道路からの高さを減算した値に代えて上記カメラの取り付け位置の高さを用いることにより,上記対象車両画像検出手段によって検出された対象車両画像の下端部の位置を補正し,
    上記第2の距離算出手段は,上記補正手段によって補正された下端部の位置を用いて対象車両までの距離を算出するものである,
    車間距離算出装置の動作制御方法。
JP2013038687A 2013-02-28 2013-02-28 車間距離算出装置およびその動作制御方法 Active JP5752729B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2013038687A JP5752729B2 (ja) 2013-02-28 2013-02-28 車間距離算出装置およびその動作制御方法
CN201410043740.3A CN104021541B (zh) 2013-02-28 2014-01-29 车至车距离计算装置和方法
US14/170,131 US9135709B2 (en) 2013-02-28 2014-01-31 Vehicle-to-vehicle distance calculation apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013038687A JP5752729B2 (ja) 2013-02-28 2013-02-28 車間距離算出装置およびその動作制御方法

Publications (2)

Publication Number Publication Date
JP2014167677A JP2014167677A (ja) 2014-09-11
JP5752729B2 true JP5752729B2 (ja) 2015-07-22

Family

ID=51388199

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013038687A Active JP5752729B2 (ja) 2013-02-28 2013-02-28 車間距離算出装置およびその動作制御方法

Country Status (3)

Country Link
US (1) US9135709B2 (ja)
JP (1) JP5752729B2 (ja)
CN (1) CN104021541B (ja)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9558419B1 (en) 2014-06-27 2017-01-31 Blinker, Inc. Method and apparatus for receiving a location of a vehicle service center from an image
US9600733B1 (en) 2014-06-27 2017-03-21 Blinker, Inc. Method and apparatus for receiving car parts data from an image
US9563814B1 (en) 2014-06-27 2017-02-07 Blinker, Inc. Method and apparatus for recovering a vehicle identification number from an image
US9589202B1 (en) 2014-06-27 2017-03-07 Blinker, Inc. Method and apparatus for receiving an insurance quote from an image
US10540564B2 (en) 2014-06-27 2020-01-21 Blinker, Inc. Method and apparatus for identifying vehicle information from an image
US10579892B1 (en) 2014-06-27 2020-03-03 Blinker, Inc. Method and apparatus for recovering license plate information from an image
US10733471B1 (en) 2014-06-27 2020-08-04 Blinker, Inc. Method and apparatus for receiving recall information from an image
US9589201B1 (en) 2014-06-27 2017-03-07 Blinker, Inc. Method and apparatus for recovering a vehicle value from an image
US9818154B1 (en) 2014-06-27 2017-11-14 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US10867327B1 (en) 2014-06-27 2020-12-15 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US10515285B2 (en) 2014-06-27 2019-12-24 Blinker, Inc. Method and apparatus for blocking information from an image
US9773184B1 (en) 2014-06-27 2017-09-26 Blinker, Inc. Method and apparatus for receiving a broadcast radio service offer from an image
US9594971B1 (en) 2014-06-27 2017-03-14 Blinker, Inc. Method and apparatus for receiving listings of similar vehicles from an image
US9754171B1 (en) 2014-06-27 2017-09-05 Blinker, Inc. Method and apparatus for receiving vehicle information from an image and posting the vehicle information to a website
US9760776B1 (en) 2014-06-27 2017-09-12 Blinker, Inc. Method and apparatus for obtaining a vehicle history report from an image
US9607236B1 (en) 2014-06-27 2017-03-28 Blinker, Inc. Method and apparatus for providing loan verification from an image
US9779318B1 (en) 2014-06-27 2017-10-03 Blinker, Inc. Method and apparatus for verifying vehicle ownership from an image
US10572758B1 (en) 2014-06-27 2020-02-25 Blinker, Inc. Method and apparatus for receiving a financing offer from an image
US9892337B1 (en) 2014-06-27 2018-02-13 Blinker, Inc. Method and apparatus for receiving a refinancing offer from an image
WO2017158983A1 (ja) 2016-03-18 2017-09-21 株式会社Jvcケンウッド 物体認識装置、物体認識方法及び物体認識プログラム
JP6462630B2 (ja) * 2016-05-24 2019-01-30 株式会社デンソー 物標検出装置
WO2018023556A1 (en) * 2016-08-04 2018-02-08 SZ DJI Technology Co., Ltd. Methods and systems for obstacle identification and avoidance
CN106671961A (zh) * 2017-03-02 2017-05-17 吉林大学 一种基于电动汽车的主动防碰撞系统及其控制方法
CN107290738A (zh) * 2017-06-27 2017-10-24 清华大学苏州汽车研究院(吴江) 一种测量前方车辆距离的方法和装置
JP7044513B2 (ja) * 2017-10-23 2022-03-30 株式会社Soken 道路認識装置
KR102564013B1 (ko) * 2018-04-02 2023-08-07 현대자동차주식회사 차량 제어 장치, 그를 포함한 시스템 및 그 방법
KR102622169B1 (ko) 2018-12-06 2024-01-08 팅크웨어(주) 주행 영상을 이용하여 차간 거리를 측정하는 차간 거리 측정 방법, 차간 거리 측정 장치, 전자 기기, 컴퓨터 프로그램 및 컴퓨터 판독 가능한 기록 매체
JP2022520544A (ja) * 2019-02-28 2022-03-31 シェンチェン センスタイム テクノロジー カンパニー リミテッド 車両インテリジェント運転制御方法及び装置、電子機器並びに記憶媒体
US11222219B2 (en) * 2019-04-15 2022-01-11 Qualcomm Incorporated Proximate vehicle localization and identification
CN110222658A (zh) * 2019-06-11 2019-09-10 腾讯科技(深圳)有限公司 道路灭点位置的获取方法及装置
CN110414357B (zh) * 2019-06-28 2023-04-07 上海工程技术大学 一种基于车辆类型识别的前方车辆定位方法
US10818035B1 (en) * 2019-06-28 2020-10-27 Baidu Usa Llc Representing vanishing points using relative distances
CN111521117B (zh) * 2019-08-21 2022-01-28 毫末智行科技有限公司 单目视觉测距方法、存储介质及单目摄像头
US11410334B2 (en) * 2020-02-03 2022-08-09 Magna Electronics Inc. Vehicular vision system with camera calibration using calibration target
KR20220135900A (ko) * 2021-03-31 2022-10-07 현대자동차주식회사 헤드램프 각도 보정 장치 및 보정 방법
CN118614058A (zh) * 2022-01-31 2024-09-06 本田技研工业株式会社 图像处理装置、图像处理方法及程序

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3099691B2 (ja) * 1995-08-09 2000-10-16 三菱自動車工業株式会社 走行路における対象物位置計測方法
JP3718747B2 (ja) * 2001-04-27 2005-11-24 日産自動車株式会社 車両用走行制御装置
KR100435650B1 (ko) * 2001-05-25 2004-06-30 현대자동차주식회사 카메라가 장착된 차량의 도로정보 추출 및 차간거리 탐지방법
JP3823782B2 (ja) * 2001-08-31 2006-09-20 日産自動車株式会社 先行車両認識装置
JP2005030925A (ja) * 2003-05-09 2005-02-03 Fujitsu Ten Ltd 車両情報算出装置、車両情報算出方法および車両情報算出プログラム
JP4107273B2 (ja) 2004-08-04 2008-06-25 日産自動車株式会社 移動体検出装置
US8164628B2 (en) * 2006-01-04 2012-04-24 Mobileye Technologies Ltd. Estimating distance to an object using a sequence of images recorded by a monocular camera
JP2007199932A (ja) 2006-01-25 2007-08-09 Toshiba Corp 画像処理装置及びその方法
JP2007309799A (ja) * 2006-05-18 2007-11-29 Matsushita Electric Ind Co Ltd 車載測距装置
US7786898B2 (en) * 2006-05-31 2010-08-31 Mobileye Technologies Ltd. Fusion of far infrared and visible images in enhanced obstacle detection in automotive applications
CN201144115Y (zh) * 2007-08-24 2008-11-05 虹光精密工业(苏州)有限公司 自动馈纸装置
TWI401175B (zh) * 2010-06-08 2013-07-11 Automotive Res & Testing Ct Dual vision front vehicle safety warning device and method thereof
CN102467821B (zh) * 2010-11-04 2014-03-05 北京汉王智通科技有限公司 基于视频图像的路面距离检测方法及装置
JP2013057992A (ja) * 2011-09-07 2013-03-28 Clarion Co Ltd 車間距離算出装置およびそれを用いた車両制御システム
JP5907700B2 (ja) * 2011-11-18 2016-04-26 クラリオン株式会社 画像処理装置、車両システム、及び、画像処理方法

Also Published As

Publication number Publication date
CN104021541A (zh) 2014-09-03
US9135709B2 (en) 2015-09-15
JP2014167677A (ja) 2014-09-11
US20140241579A1 (en) 2014-08-28
CN104021541B (zh) 2017-04-12

Similar Documents

Publication Publication Date Title
JP5752729B2 (ja) 車間距離算出装置およびその動作制御方法
JP5809653B2 (ja) 車間距離算出装置およびその動作制御方法
US10086831B2 (en) Method for assisting a driver of a motor vehicle combination, computer software product, lane departure warning system
US7190281B2 (en) Vehicle environment monitoring device, vehicle environment monitoring method, control program and computer-readable recording medium
US8175797B2 (en) Vehicle drive assist system
US9280824B2 (en) Vehicle-surroundings monitoring device
US7253389B2 (en) Mobile body surrounding surveillance apparatus, mobile body surrounding surveillance method, control program and computer-readable recording medium
US20070154068A1 (en) Estimating Distance To An Object Using A Sequence Of Images Recorded By A Monocular Camera
US20210042955A1 (en) Distance estimation apparatus and operating method thereof
CN103950410A (zh) 全景式辅助驾驶方法及系统
US20120173083A1 (en) Vehicle roll over prevention safety driving system and method
US20210224559A1 (en) Vehicle and method for avoiding a collision of a vehicle with one or more obstacles
JP5065210B2 (ja) 車線認識装置
CN110992710B (zh) 弯道测速预警方法、装置、控制设备及可读存储介质
JP6844307B2 (ja) 画角調整方法
JP5752728B2 (ja) 車両間距離算出装置およびその動作制御方法
JP2012164275A (ja) 画像認識装置
CN108082192A (zh) 车道偏离预警方法及装置
JP4768499B2 (ja) 車載周辺他車検出装置
US20230347910A1 (en) Vehicle orientation estimation system and vehicle orientation estimation method
JP7391947B2 (ja) カメラの画像処理デバイスの誤検出を検知するための方法
EP3865815A1 (en) Vehicle-mounted system
US11924578B2 (en) Image processing apparatus, camera, moveable body, and image processing method
JP7485580B2 (ja) 距離算出装置および距離算出方法
JP2000030181A (ja) 路面異常検出装置及びそれを用いた衝突警報装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140609

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150428

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150520

R150 Certificate of patent or registration of utility model

Ref document number: 5752729

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250