JP3914447B2 - 画像式車両感知システム及び画像式車両感知方法 - Google Patents
画像式車両感知システム及び画像式車両感知方法 Download PDFInfo
- Publication number
- JP3914447B2 JP3914447B2 JP2002048568A JP2002048568A JP3914447B2 JP 3914447 B2 JP3914447 B2 JP 3914447B2 JP 2002048568 A JP2002048568 A JP 2002048568A JP 2002048568 A JP2002048568 A JP 2002048568A JP 3914447 B2 JP3914447 B2 JP 3914447B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- projection
- time difference
- vehicle
- differential
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
- G06V20/54—Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/273—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion removing elements interfering with the pattern to be recognised
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
【発明の属する技術分野】
本発明は、画像式車両感知システムに関し、さらに詳しくは、撮像手段により撮影された移動体の画像情報を画像処理することにより、前記移動体から車両のみを検出する画像式車両感知システムに関するものである。
【0002】
【従来の技術】
交差点に設置されている信号機による指示内容は、車両を運転する運転者にとっては道路交通法規上、絶対遵守が求められる存在である。そして、信号機の表示内容は、横断若しくは停止するための行動指針となる。従って、もし、信号機が故障した場合、それによる交通渋滞、事故発生等の混乱には、計り知れないものがあり、信号機自体の信頼性確保は常に高いレベルで要求されている。そして、信頼性確保と併せて要求されることが、信号機と車両交通量とのマッチングがとれたシステムの開発である。特に、信号機自体が単に所定時間間隔で信号を切替えているだけでは道路の交通量、あるいは通行時間帯により刻々変化する状況をさばくことはできない。つまり、道路状況は生き物であり、信号灯を所定のパターンで順次点灯させる信号機の制御方法では、このように変化する道路状況に対応することが困難になってきている。そこで最近では信号機周辺の所定エリア内の交通量をリアルタイムに把握して、変化する交通状況に合わせて最適な信号制御を行う信号機が多くなってきている。このシステムを有効に、しかも正確に稼動させるための最重要課題は、路面上を移動する種々の移動体中から車両だけを正確に感知することである。この路面上を移動する移動体を感知するには、撮像手段が必要であり、一般的にはビデオカメラが使われる。そして、交差点の手前から所定のエリアを撮影するように設定されている。撮影するエリアは路面であるため、時間、周辺状況、季節により変化する被写体である。例えば、昼間と夜では周辺の明るさ、あるいは交通量が異なり、また、周辺が住宅街か否かによっても周りからの照明量が異なる。さらに、季節が異なれば当然路面状況は大きく変化する。例えば、冬に雪が降れば全く異なる状況を呈することになる。
【0003】
このような背景から、従来より車両検出に伴う課題を解決するために多くの提案がなされており、例えば、特開平11−328378号公報には、路面上の輝度の変化を明るい方向と暗い方向に分離して考え、明るい色の車両の検出と暗い色の車両の検出とを個別に行うことで、影の誤検出を抑える技術が開示されている。これは、明方向データから明色物体を検出し、双方向(明暗両方向)データと明方向データとから明色物体として検出されなかった物体を検出するものである。また、特開2001−273499公報には、背景画像と次にサンプリングされた撮影画像との輝度差分値を求め、それに応じたフィードバック量を背景画像に加算することにより背景画像を更新する技術について開示されており、これは、サンプリングされた撮影画像と1つ前にサンプリングされた撮影画像との輝度差画像と、前記フィードバック量を元に移動体のみを抽出するものである。また、特開平11−328578号公報には、時間的に緩やかに変化する輝度分布を非常駐車帯の背景画像に取り込み、背景画像との差分により車両を検出する技術について開示されている。しかし、これら何れの公報記載の技術にあっても、背景画像の設定が必要であり、その背景画像を設定することは必ずしも容易ではない。
【0004】
また、特開2000−113374公報には、車両前面の微分値が疎か密かにより、車両判定を行う技術について開示されている。また、特開2001−175845公報には、水平方向微分画像、垂直方向微分画像を生成し、エッジにより車両の上端下端を検出する技術について開示されている。さらに、特開平05−289009号公報には、エッジ画像の差分画像により、車頭位置を検出する技術について開示されている。しかしながら、これら何れの公報記載の技術も特徴の無い車両の検出が困難であるといった問題がある。
その他、特開2000−113169公報には、車両の下影領域を用いて車両を検出する技術が開示されているが、車両進行方向の後方から撮影しているため、下影が出ることが前提条件でありトンネル内に限られる。また、特開2000−168691公報には、車両の進行方向に対して一定の間隔で設定された2つの車両感知領域間における車両感知信号の立ち上がり時刻の差と立下り時刻の差により、物体が高さを持つ物体か、高さを持たない影かを判定する技術が開示されている。しかし、これには車両検出エリアが2つ必要である。さらに、特許第2841652号公報、及び第2924063号公報には、車両の影の検出方法について開示されているが、車の頭部を正しく検出する必要があったり、影の除去方法が本発明とは異なる発明である。
【0005】
【発明が解決しようとする課題】
以上のように、従来の方法では、背景画像の設定が必要であり、その背景画像を設定することは必ずしも容易ではないといった問題や、車両に特徴がないと検出が困難であったり、車両の特定部分を検出しないと正しく検出できないといった問題があった。
本発明は、かかる課題に鑑み、撮像手段により得られた画像から影のみを確実に除去して移動体から車両のみを検出する画像式車両感知システムを提供することを目的とする。また、他の目的は、対向車線に移動体が逆走してきた場合でも、その影を除去することができる画像式車両感知システムを提供することにある。
【0006】
【課題を解決するための手段】
本発明はかかる課題を解決するために、請求項1は、撮像手段により撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知システムにおいて、前記撮像手段により撮影された感知エリア内の移動体及び周辺の画像を格納する画像格納手段と、現在フレームの画像情報と該現在フレームの一つ前のフレーム画像情報から時間差分画像を生成する差分画像生成手段と、前記移動体の通行方向に対して垂直方向に微分処理する微分画像生成手段と、前記差分画像生成手段からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成手段と、複数の投影像生成手段からの投影値を論理積処理する論理積演算手段と、を備え、前記差分画像生成手段により得られた時間差分画像から前記投影像生成手段により第1の投影像を生成すると共に、前記微分画像生成手段により得られた微分画像から前記差分画像生成手段により時間差分画像を生成後、該時間差分画像を前記投影像生成手段により第2の投影像を生成し、前記第1の投影像と第2の投影像を前記論理積演算手段により演算することにより前記画像情報から車両のみを検出することを特徴とする。
撮像手段は一般的にはビデオカメラであり、交差点の手前から所定の感知エリアを撮影するように設定されている。撮影する感知エリアは路面であるため、時間、周辺状況、季節により変化する被写体である。例えば、昼間と夜では周辺の明るさ、あるいは交通量が異なり、また、周辺が住宅街か否かによっても周りからの照明量が異なる。さらに、季節が異なれば当然路面状況は大きく変化する。例えば、冬に雪が降れば全く異なる状況を呈することになる。従って、この状態での画像情報を一旦メモリに格納し、その格納された画像情報から車両についての画像情報のみを画像処理により抽出することが必要となる。本発明では画像処理のために、1フレーム前の画像との時間差分画像を生成する差分画像生成手段により移動体の影を除去し、画像のエッジを検出する微分画像生成手段により画像のエッジ部分を強調して画像の輪郭を求め、前記差分画像生成手段からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成手段により画像を論理演算可能なレベルに変換し、複数の投影像生成手段からの投影値を論理積処理する論理積演算手段により最終的な投影値を算出する。
また、移動体からその影を除去するためには、現在フレームの画像から1フレーム前の画像を引き算し、画像の輝度値が負の場合はゼロとすることにより可能である。つまり、並走する移動体がない場合、感知エリアに進入した移動体とその影の画像から、感知エリアに進入する前の画像を引き算すると移動体の輝度値は正となり、影のみが負となる性質を利用する。ここで、影は路面より必ず暗いため輝度値が負となるので消去することができる。しかし、このとき並走する移動体がある場合、並走する移動体の影が感知エリアに存在するので、その影も同時に時間差分画像として現れる。このような時間差分画像を論理演算可能なレベルに変換するために、次に、その画像のライン毎の輝度値を加算していき輝度値の投影像を作成する。一方、同時に画像のエッジ部分を検出するために感知エリア内の画像を微分する(具体的な方法は後述する)。そして、その微分画像から固定部物の影を除去するために前記と同様に、微分画像の時間差分画像を生成する。この方法は、前記と同様にして現在のフレーム画像(固定物と移動体とその影のエッジ画像)から1フレーム前の微分画像(固定物のみのエッジ画像)を引き算して固定物のエッジ画像を除去する。その後エッジ画像を論理演算可能なレベルに変換するために、その画像のライン毎の輝度値を加算していき輝度値の投影像を作成する。ここで、2種類の投影像が生成されたことになり、この2種類の投影画像を論理積することにより、車両部分の投影像が時間的に一致して論理積処理がなされて出力される。
かかる発明によれば、画像処理のために差分画像生成手段、微分画像生成手段、及び論理積演算手段を備えることにより、移動体から車両のみを確実に検出することができる。
【0008】
また、前記差分画像生成手段により得られた時間差分画像を前記投影像生成手段により第1の投影像を生成すると共に、前記微分画像生成手段により得られた微分画像から前記差分画像生成手段により時間差分画像を生成後、該時間差分画像を前記投影像生成手段により第2の投影像を生成し、前記第1の投影像と第2の投影像を前記論理積演算手段により演算することにより、並走する移動体の影と固定物の影を除去して車両のみを検出することができる。
請求項2では、前記微分画像生成手段は、前記画像情報の基準画素の座標をT(x、y)、該座標での輝度値をP(x、y)としたとき、P(x、y)>P(x、y−1)の場合、座標T(x、y)の輝度値をP(x、y)−P(x、y−1)とし、P(x、y)≦P(x、y−1)の場合、座標T(x、y)の輝度値を0とすることも本発明の有効な手段である。
【0009】
移動する画像を微分することは、その対象物の変化率を算出することである。そこで、画像を画素単位に分解して、ある基準画素に対してその画素の前後の変化を見ることによりエッジを検出することができる。例えば、基準画素の座標をT(x、y)、該座標での輝度値をP(x、y)としたとき、座標T(x、y)と隣接する座標T(x、y−1)の輝度値P(x、y−1)がP(x、y)より暗い場合(つまり、暗いところから明るいところに変化した場合)、その座標点の輝度値を基準座標の輝度値と隣接画素の輝度値の差分とする。また、この逆の場合、座標T(x、y)と隣接する座標T(x、y−1)の輝度値P(x、y−1)がP(x、y)と等しいか、あるいは明るい場合(つまり、明るいところから暗いところに変化した場合)ゼロにする。これにより、並走する移動体の陰影エッジ画像を除去することができる。
かかる技術手段によれば、前記微分画像生成手段は、前記画像情報の基準画素の座標をT(x、y)、該座標での輝度値をP(x、y)としたとき、P(x、y)>P(x、y−1)の場合、座標T(x、y)の輝度値をP(x、y)−P(x、y−1)とし、P(x、y)≦P(x、y−1)の場合、座標T(x、y)の輝度値を0とすることにより、感知エリア内の画像の明暗方向により微分画像を生成することができる。
【0010】
請求項3では、前記差分画像生成手段は、前記感知エリア内の前記移動体の現在フレームの画像の輝度値から該現在フレームの一つ前のフレーム画像の輝度値を減算し、該減算結果の画像輝度値から負の輝度値をゼロにすることにより、前記移動体に含まれる陰影部分を除去することも本発明の有効な手段である。
時間差分画像は、感知エリア内の現在のフレーム画像から1フレーム前の画像を引き算して得られる。つまり、対象が移動体の場合、その対象は常に移動しており、その変化を捉えるには1フレーム前の画像と比較する必要がある。そして、その画像を引き算することにより、移動体の輝度値が正の部分と負の部分の差分が残り、その差分の輝度値が負の部分をゼロにすることにより輝度値の正の差分のみが残る。これにより、移動体の影を除去することができる。
かかる技術手段によれば、前記差分画像生成手段は、前記感知エリア内の前記移動体の現在フレームの画像の輝度値から該現在フレームの一つ前のフレーム画像の輝度値を減算し、該減算結果の画像輝度値から負の輝度値をゼロにすることにより、前記移動体に含まれる陰影部分を除去することにより、移動体の影を除去することができる。
【0011】
請求項4では、前記微分画像生成手段により固定物の陰影及び前記移動体の陰影を微分処理した微分画像の一フレーム前の微分画像から前記差分画像生成手段により時間差分画像を生成することにより前記固定物の陰影と前記移動体の陰影を同時に除去することも本発明の有効な手段である。
固定物が感知エリア内に常に存在する場合、移動体の陰影と同時に、この固定物の影を除去する必要がある。その一つの方法として感知エリア内の固定物の影が撮影される部分を強制的に画像処理を行わないようにする方法である。しかし、この方法は、固定物の大きさや位置が変化した場合、対応が困難となる。そこで、画像処理により除去できれば好ましい。その方法として感知エリア内の画像を移動体の進行方向に対して垂直に微分処理する方法が考えられる。そして、画像の輝度値が暗から明に変化した場合のみ、その輝度値の差分を輝度値とし、逆に明から暗に変化した場合は、輝度値をゼロにすれば移動体の陰影エッジは除去され、固定物は常に微分されることになる。そして、その画像を前記の時間差分処理を行うことにより、全てのフレームに撮影される固定物の微分画像は引き算により除去される。
かかる技術手段によれば、前記微分画像生成手段により固定物の陰影及び前記移動体の陰影を微分処理した微分画像の一フレーム前の微分画像から前記差分画像生成手段により時間差分画像を生成することにより、固定物と並走する移動体の陰影の画像を除去することができる。
【0012】
請求項5は、撮像手段により撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知システムにおいて、前記撮像手段により撮影された進入判定エリア内の移動体及び周辺の画像を格納する進入画像格納手段と、前記移動体の進行方向に前記進入判定エリアに連続して設けられた感知エリア内の移動体及び周辺の画像を格納する感知画像格納手段と、現在フレームのN(Nは1以上の整数)フレーム前の画像情報と前記現在フレームの(N−1)フレーム前の画像情報から時間差分画像を生成する差分画像生成手段と、前記移動体の通行方向に対して垂直方向に微分処理する微分画像生成手段と、前記差分画像生成手段からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成手段と、複数の投影像生成手段からの投影値を論理積処理する論理積演算手段と、を備え、前記進入画像格納手段に格納された前記進入判定エリア内の画像から前記差分画像生成手段により第1の時間差分画像を生成し、該第1の時間差分画像から前記投影像生成手段により第1の投影像を生成すると共に、前記感知画像格納手段に格納された前記感知エリア内の画像から前記差分画像生成手段により第2の時間差分画像を生成し、該第2の時間差分画像から前記投影像生成手段により第2の投影像を生成し、前記微分画像生成手段により得られた微分画像から前記差分画像生成手段により第3の時間差分画像を生成後、該第3の時間差分画像を前記投影像生成手段により第3の投影像を生成し、前記第1の投影像、第2の投影像及び第3の投影像を前記論理積演算手段により演算することにより前記画像情報から逆走移動体の陰影部分を除去して車両のみを検出することを特徴とする。
前記請求項1から請求項4までは、複数車線を並走する移動体の画像処理である。しかし、対向車線がある場合は、対向車線の移動体が逆走してくるため、感知エリア内にその影が含まれてしまう可能性がある。従って、この余分な逆走移動体の影を予め除去しておく必要がある。その方法として、感知エリアの手前に進入判定エリアを設け、その中で逆走移動体の影を除去しようとするものである。具体的には、進入判定エリア内の現在フレームのNフレーム前の画像から現在フレームの(N−1)フレーム前の画像を引き算して時間差分画像を生成し、その投影値を求めておく。次に、感知エリア内の画像から前記請求項1の方法により時間差分画像と微分画像から投影値を求め、前記投影値同志を論理積処理することにより、逆走移動体の影を除去した車両を感知することができる。
また、前記で述べたように、移動体からその影を除去するためには、現在フレームの画像から1フレーム前の画像を引き算し、画像の輝度値が負の場合はゼロとすることにより可能である。つまり、進入判定エリアに進入した移動体とその影の画像(現在フレームのNフレーム前の画像)から、(N−1)フレーム前の画像を引き算すると移動体の輝度値は正となり、影のみが負となるので消去することができる。しかし、このとき逆走する移動体がある場合、逆走する移動体の影が感知エリアには存在してしまい、その影も同時に時間差分画像として現れる。また、固定物の影を除去するために感知エリア内の画像を微分して、その微分画像の時間差分画像を生成して除去しておく。このような時間差分画像を論理演算可能なレベルに変換するために、次に、進入判定エリアのNフレーム前の時間差分画像と感知エリアの時間差分画像を、画像のライン毎の輝度値を加算していき輝度値の投影像を夫々作成する。これにより進入判定エリアの投影像には車両のみが現れ、感知エリアの投影像には逆走する移動体の影と車両の投影像が現れ、微分画像には逆走する移動体の影と車両と車両の影の投影像が現れる。これらを論理積することにより車両部分の投影像が時間的に一致して論理積処理がなされて出力される。
かかる技術手段によれば、更に、進入判定エリア内に時間差分画像を生成するエリアを設けることにより、予め逆走移動体の影を除去することができる。また、第1の投影像、第2の投影像及び第3の投影像を論理積演算手段により演算することにより画像情報から逆走移動体の陰影部分を除去して車両のみを検出することができる。
【0014】
請求項6では、前記感知エリアは車両感知領域内に1個所設定することにより前記移動体から車両の特定を可能としたことも本発明の有効な手段である。
本発明の車両感知方法は、所定のエリア内の画像から移動体の影を除去して車両を特定する方法である。従って、車両感知領域内に所定のエリアが1箇所あれば画像処理が可能である。かかる技術手段によれば、前記感知エリアは車両感知領域内に1個所設定することにより前記移動体から車両の特定を可能としたので、システムのコストを安くすることができる。
請求項7では、前記差分画像生成手段及び前記微分画像生成手段は、所定の時間間隔で1フレーム単位に前記格納手段に格納された画像情報を画像処理することも本発明の有効な手段である。
撮像手段で撮影された画像は、一旦メモリに格納され、そのメモリから所定の時間間隔で読み出される。その時間間隔は一般的には1画面単位、つまりフレーム単位である。これにより、メモリ容量は少なくとも1フレーム分以上あればよく、メモリ容量を節約することができる。
かかる技術手段によれば、前記差分画像生成手段及び前記微分画像生成手段は、所定の時間間隔で1フレーム単位に前記格納手段に格納された画像情報を画像処理するので、少ないメモリ容量でシステムを構築することができる。
請求項8では、撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知方法において、撮影された感知エリア内の移動体及び周辺の画像を格納するステップと、この格納された画像情報に基づいて現在フレームと該現在フレームの一つ前のフレーム画像から時間差分画像を生成するステップと、前記移動体の通行方向に垂直な方向に微分処理するステップと、前記差分画像生成ステップからの出力画像のライン毎の輝度値の合計を演算して投影像を生成するステップと、複数の投影像生成ステップからの投影値を論理積処理するステップと、を備え、前記差分画像生成ステップにより得られた時間差分画像を前記投影像生成ステップにより第1の投影像を生成すると共に、前記微分画像生成ステップにより得られた微分画像から前記差分画像生成ステップにより時間差分画像を生成後、該時間差分画像を前記投影像生成ステップにより第2の投影像を生成し、前記第1の投影像と第2の投影像を前記論理積演算ステップにより演算することにより前記画像情報から車両のみを検出するたことを特徴とする。
かかる発明によれば、請求項1と同様の作用効果を奏する。
【0015】
請求項9は、撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知方法において、進入判定エリア内の移動体及び周辺の画像を格納するステップと、前記移動体の進行方向に前記進入判定エリアに連続して設けられた感知エリア内の移動体及び周辺の画像を格納するステップと、現在フレームのN(Nは1以上の整数)フレーム前の画像情報と前記現在フレームの(N−1)フレーム前の画像情報から時間差分画像を生成するステップと、前記移動体の通行方向に対して垂直方向に微分処理する微分画像生成ステップと、前記差分画像生成ステップからの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成ステップと、複数の投影像生成ステップからの投影値を論理積処理する論理積演算ステップと、を備え、前記進入判定エリア内の画像を前記差分画像生成ステップにより第1の時間差分画像を生成し、該第1の時間差分画像を前記投影像生成ステップにより第1の投影像を生成すると共に、前記感知エリア内の画像を前記差分画像生成ステップにより第2の時間差分画像を生成し、該第2の時間差分画像を前記投影像生成ステップにより第2の投影像を生成し、前記微分画像生成ステップにより得られた微分画像から前記差分画像生成ステップにより第3の時間差分画像を生成後、該第3の時間差分画像を前記投影像生成ステップにより第3の投影像を生成し、前記第1の投影像、第2の投影像、及び第3の投影像を前記論理積演算ステップにより演算することにより前記画像情報から逆走移動体の陰影部分を除去して車両のみを検出することを特徴とする。
かかる発明によれば、請求項5と同様の作用効果を奏する。
【0016】
【発明の実施の形態】
以下、本発明を図に示した実施形態を用いて詳細に説明する。但し、この実施形態に記載される構成要素、種類、組み合わせ、形状、その相対配置などは特定的な記載がない限り、この発明の範囲をそれのみに限定する主旨ではなく単なる説明例に過ぎない。
図1は、本発明の一実施形態に係る画像式車両感知システムの構成ブロック図である。この構成は、大きく3つの部分から構成されている。つまり、共通部分である撮像記憶部140、感知エリア内の画像認識部120、進入エリア内の画像認識部130である。撮像記憶部140には、CCDカメラで構成され、進入及び感知エリアの画像を撮影する撮像部100と、撮像部100で撮影されたアナログ画像データをデジタル信号に変換するA/D変換部101と、デジタル信号に変換された信号を多値階調データとして格納する多値メモリ部102がある。また、感知エリア内の画像認識部120には、多値メモリ部102のデータを所定のフレーム単位に取り出し、現在フレームと一つ前のフレーム画像から時間差分画像を生成する差分画像生成部103と、この差分画像生成部103からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影値演算部105と、移動体の通行方向に垂直な方向に微分処理する微分画像生成部104と、この微分画像生成部104の画像の現在フレームと一つ前のフレーム画像から時間差分画像を生成する差分画像生成部106と、この差分画像生成部106からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影値演算部108と、前記投影値演算部105と投影値演算部108からの投影値を論理積処理するAND処理部107から構成されている。また、進入エリア内の画像認識部130には、多値メモリ部102のデータを所定のフレーム単位に取り出し、Nフレーム前と(N−1)フレーム前の画像から時間差分画像を生成する差分画像生成部110と、この差分画像生成部110からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影値演算部111から構成されている。そして、AND処理部107の出力112と投影値演算部111の出力113をAND処理部109に入力している。
【0017】
次に、本構成による画像式車両感知システムの概略動作について図7のフローチャートと併せて参照しながら説明する。本構成によるシステムは、3つのステップに分けることができる。つまり、時間差分画像を生成するステップと、微分画像を生成するステップと、逆走車両の影を除去するステップであり、これらのステップは並行して実行される。まず、時間差分画像を生成するステップについて説明する。撮像部100で撮影された路面上の車両はモノクロのアナログ信号としてA/D変換部101に入力される。A/D変換部101では、そのアナログ信号を処理しやすいデジタル信号に変換する。そして、デジタル信号は画像の濃淡に応じて、例えば256階調に分解されて、320×32画素の画像として多値メモリ部102の所定のアドレスに今回感知エリア画像として格納される(S1)。次に、時間差分画像を生成するために、差分画像生成部103により、多値メモリ部102に格納された今回感知エリア画像から1フレーム前の前回感知エリア画像を減算する(S2)。次に、投影値演算部105により、この減算結果の画像をライン毎の輝度値の合計を演算してX軸投影像Aを生成する(S3)。次に、多値メモリ部102に格納した今回感知エリア画像を次の処理のために、前回感知エリア画像のアドレスに格納する(S4)。ここまでが、時間差分画像を生成するステップであり、次に微分画像を生成するステップについて説明する。ステップS1は共通であるので説明を省略する。今回画像の微分画像を生成するために、微分画像生成部104により多値メモリ部102に格納された今回感知エリア画像を微分して、今回画像の微分画像を生成する(S5)。次に、差分画像生成部106により今回画像の微分画像から1フレーム前の前回画像の微分画像を減算する(S6)。次に、投影値演算部108により、この減算結果の画像をライン毎の輝度値の合計を演算してX軸投影像Bを生成する(S7)。次に、多値メモリ部102に格納した今回画像の微分画像を次の処理のために、前回画像の微分画像のアドレスに格納する(S8)。ここまでが、微分画像を生成するステップであり、次に逆走車両の影を除去するステップについて説明する。まず撮像部100で撮影された路面上の車両はモノクロのアナログ信号としてA/D変換部101に入力される。A/D変換部101では、そのアナログ信号を処理しやすいデジタル信号に変換する。そして、デジタル信号は画像の濃淡に応じて、例えば256階調に分解されて、320×32画素の画像として多値メモリ部102の所定のアドレスに、今回進入判定エリア画像として格納される(S9)。次に、時間差分画像を生成するために、差分画像生成部110により多値メモリ部102に格納されたNフレーム前の進入判定エリア画像から(N−1)フレーム前の前回進入判定エリア画像を減算する(S10)。次に、投影値演算部111により、この減算結果の画像をライン毎の輝度値の合計を演算してX軸投影像Cを生成する(S11)。次に、多値メモリ部102に格納した今回進入判定エリア画像を次の処理のために、前回進入判定エリア画像のアドレスに格納する(S12)。
以上のステップは各フレーム単位に並行して実行され、それらの結果に基づいて更に、前記X軸投影像A、B、CをAND処理部107、109により論理積処理し、抽出領域として出力する(S13)。次に、感知エリアに車両が通過中かを検出し(S14)、NOであれば先頭のステップに戻り、YESであれば、その画像の幅が車両の幅であるか否かを検証し(S15)、車両の幅より小さければ(NOのルート)先頭のステップに戻り、車両の幅に近ければステップS13で抽出した抽出領域を車両と判定する(S16)。
【0018】
以上のように、撮像部100は一般的にはビデオカメラであり、交差点の手前から所定の感知エリアを撮影するように設定されている。撮影する感知エリアは路面であるため、時間、周辺状況、季節により変化する被写体である。例えば、昼間と夜では周辺の明るさ、あるいは交通量が異なり、また、周辺が住宅街か否かによっても周りからの照明量が異なる。さらに、季節が異なれば当然路面状況は大きく変化する。例えば、冬に雪が降れば全く異なる状況を呈することになる。従って、この状態での画像情報を一旦多値メモリ部102に格納し、その格納された画像情報から車両についての画像情報のみを画像処理により抽出することが必要となる。本発明では画像処理のために、1フレーム前の画像との時間差分画像を生成する差分画像生成部103、106により移動体の影を除去し、画像のエッジを検出する微分画像生成部104により画像のエッジ部分を強調して画像の輪郭を求め、前記差分画像生成部からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影値演算部105、108により画像を論理演算可能なレベルに変換し、投影値演算部105、108からの投影値を論理積処理するAND処理部107により最終的な投影値を算出する。これにより、移動体から車両のみを確実に検出することができる。
【0019】
更に詳細に説明すると、移動体からその影を除去するためには、現在フレームの画像から1フレーム前の画像を引き算し、画像の輝度値が負の場合はゼロとすることにより可能である。つまり、並走する移動体がない場合、感知エリアに進入した移動体とその影の画像から、感知エリアに進入する前の画像を引き算すると移動体の輝度値は正となり、影のみが負となる性質を利用する。ここで、影は路面より必ず暗いため輝度値が負となるので消去することができる。しかし、このとき並走する移動体がある場合、並走する移動体の影が感知エリアに存在するので、その影も同時に時間差分画像として現れる。このような時間差分画像を論理演算可能なレベルに変換するために、次に、その画像のライン毎の輝度値を加算していき輝度値の投影像を作成する。一方、同時に画像のエッジ部分を検出するために感知エリア内の画像を微分する。そして、その微分画像から固定部物の影を除去するために前記と同様に、微分画像の時間差分画像を生成する。この方法は、前記と同様にして現在のフレーム画像(固定物と移動体とその影のエッジ画像)から1フレーム前の微分画像(固定物のみのエッジ画像)を引き算して固定物のエッジ画像を除去する。その後エッジ画像を論理演算可能なレベルに変換するために、その画像のライン毎の輝度値を加算していき輝度値の投影像を作成する。ここで、2種類の投影像が生成されたことになり、この2種類の投影画像を論理積することにより、車両部分の投影像が時間的に一致して論理積処理がなされて出力される。
【0020】
次に、図を参照しながら前記で説明した動作を更に詳細に説明をする。図2は、時間差分画像を生成する過程について説明する図である。例えば、図2(a)は、車両とその影が感知エリアに進入する直前の様子を模式的に描いた図であり、(b)は車両とその影が一部感知エリアに進入した様子を模式的に描いた図であり、(c)は時間差分処理された画像を模式的に描いた図である。時間差分画像は、あるフレームの画像毎に現在のフレーム画像と1フレーム前の画像の比較を行うことにより生成される。例えば、説明を簡単にするために、図2(b)が現在フレーム画像、図2(a)が1フレーム前の画像とすると、図2(b)の画像の輝度値から図2(a)の画像の輝度値を引き算する。この例では図2(a)の感知エリア3には画像が無いので、引き算の結果は車両の一部7とその影8が残る。ここで、影8は感知エリアの路面より必ず暗いので輝度値が負となる。このアルゴリズムでは輝度値が負の場合は、輝度値をゼロにすることにより、(c)のように影8が消えて車両9のみが検出できる。
図3は、時間差分画像を生成する過程について説明する図であり、特に車両の影が感知エリアから出て行く際の時間差分画像の図である。例えば、図3(a)は車両の影が感知エリアから出ていく際の様子を模式的に描いた図であり、(b)は車両の影が感知エリアから出た後の様子を模式的に描いた図であり、(c)は時間差分処理された画像を模式的に描いた図である。例えば、説明を簡単にするために、図2と同様に図3(b)が現在フレーム画像、図3(a)が1フレーム前の画像とすると、図3(b)の画像の輝度値から図3(a)の画像の輝度値を引き算する。この例では図3(a)の感知エリア20には影21があり、図3(b)の感知エリア23には影が無いので、もともと負の輝度値を持つ影21の輝度値が引き算の結果正となり、図3(c)のように車両の影の一部26が残ってしまう。つまり、感知エリアに進入する車両は時間差分処理によりその影を消去することができるが、感知エリアから出て行く場合は、影が残ってしまう。この影を消去するために、以下に説明する微分画像処理が必要となる。
【0021】
図4は、ある画像の一部の画素座標を表す図である。移動する画像を微分することは、その対象物の変化率を算出することである。そこで、画像を画素単位に分解して、ある基準画素に対してその画素の前後の変化を見ることによりエッジを検出することができる。例えば、基準画素の座標を(x、y)34とすると、隣接画素はx軸方向に左右に(x−1、y)31、(x+1、y)37となり、y軸方向に上下に(x、y−1)33、(x、y+1)35となる。他の座標も同様に決定することができる。ここで、本発明のアルゴリズムとして、基準画素の座標をT(x、y)、該座標での輝度値をP(x、y)としたとき、座標T(x、y)と隣接する座標T(x、y−1)の輝度値P(x、y−1)がP(x、y)より暗い場合(つまり、暗いところから明るいところに変化した場合)、その座標点の輝度値を基準座標の輝度値と隣接画素の輝度値の差分とする。また、この逆の場合、座標T(x、y)と隣接する座標T(x、y−1)の輝度値P(x、y−1)がP(x、y)と等しいか、あるいは明るい場合(つまり、明るいところから暗いところに変化した場合)ゼロにする。これにより、影の下側のエッジは出るが、上側のエッジは出ないことになる。これを式で表すと、以下のように表せる。
T(x、y)=P(x、y)−P(x、y−1):P(x、y)>P(x、y−1)
T(x、y)=0 :P(x、y)≦P(x、y−1)
【0022】
図5は、本発明の第1の実施形態に係る車両感知方法を説明する図である。本実施形態は、複数車線を並走する車両の影及び固定物の影を除去する方法である。(a)は感知エリア内の車両と影の位置関係を表す図であり、(b)は時間差分画像から投影像を生成する図であり、(c)は微分画像から投影像を生成する図であり、(d)は(b)、(c)の投影像から車両領域を検出する図である。図5(a)は感知エリア50内に、建物や樹木等の固定物の影40の一部52と、車線42上を矢印の方向に移動する車両51とその影43があり、影43の一部41が感知エリア50内に含まれている。また、車線45に車両47が矢印の方向に移動し、その一部と影49が感知エリア50内に含まれている。このような状況の場合、車両と影を認識して車両のみを検出する方法について、以下に説明する。図5(a)の場合の感知エリア50内の画像から時間差分画像を生成するには、図2、3で説明したように、図示しない1フレーム前の画像には固定物の影52は常に存在するので、現在のフレーム画像から引き算することにより、影52と車両47の影49は消去される。しかし、車両51の影41は消去されないので(図3の説明により)残ってしまい、その結果、図5(b)(1)のように車両62と影61が時間差分画像として得られる。その画像のライン毎の輝度値の合計を演算して投影像を生成する。その結果、図5(b)(2)のように影61はx軸方向に輝度値のレベルを加算した画像が63であり、車両62に対する画像が64である。
また、この処理と並行して図5(a)の場合の感知エリア50内の画像から微分画像を生成する。これは、図4で説明したように、各画素を図4の式に従って微分すると、画像が暗から明に変化するエッジ部分が生成される。つまり、図5(c)(3)のように、固定物のエッジ画像65と、車両とその影のエッジ画像66が生成される。次に、図5(c)(4)のように、図示しない1フレーム前の画像には固定物の影52は常に存在するので、現在のフレーム画像から引き算することにより、固定物のエッジ画像65が消去され、車両とその影のエッジ画像68が残る。次に、図5(c)(5)のように、その画像のライン毎の輝度値の合計を演算して投影像を生成する。その結果、車両とその影のエッジ画像68はx軸方向に輝度値のレベルを加算した画像70として生成される。次に、図5(b)(2)の画像と図5(c)(5)の画像を同じ時間軸で画素の積をとると図5(d)(6)、(7)の斜線部分の画像64、72が一致してその結果図5(d)(8)のように車両領域の画像71が得られる。
【0023】
以上のように、固定物が感知エリア50内に常に存在する場合、移動車両の影41と同時に、この固定物の影を除去する必要がある。その一つの方法として感知エリア内の固定物の影が撮影される部分を強制的に画像処理を行わないようにする方法がある。しかし、この方法は、固定物の大きさや位置が変化した場合、対応が困難となる。そこで、画像処理により除去できれば好ましい。その方法として感知エリア内の画像を移動体の進行方向に対して垂直に微分処理する方法が考えられる。そして、画像の輝度値が暗から明に変化した場合のみ、その輝度値の差分を輝度値とし、逆に明から暗に変化した場合は、輝度値をゼロにすれば移動体の陰影のエッジは除去され、固定物は常に微分されることになる。そして、その画像を前記の時間差分処理を行うことにより、全てのフレームに撮影される固定物の微分画像は引き算により除去される。
【0024】
図6は、本発明の第2の実施形態に係る車両感知方法を説明する図である。本実施形態は、複数車線を逆走する車両の影を除去する方法である。(a)は進入判定エリアと感知エリア内の車両と影の位置関係を表す図であり、(b)は感知エリア内の時間差分画像から投影像を生成する図であり、(c)は感知エリア内の微分画像から投影像を生成する図であり、(d)はNフレーム前の進入判定エリア内の時間差分画像から投影像を生成する図であり、(e)は(b)、(c)、(d)の投影像から車両領域を検出する図である。図6(a)は進入判定エリア93内に、反対車線83を矢印Aの方向に移動する車両80の影81、車線85を矢印Bの方向に移動する車両87とその影88、及び建物や樹木等の固定物の影92があり、影92の一部が感知エリア94に含まれている。また車線86上を矢印Cの方向に移動する車両90とその影91があり、影91の一部が感知エリア94内に含まれている。
このような状況の場合、逆走する車両の影を認識して車両のみを検出する方法について、以下に説明する。図6(a)の場合の感知エリア94内の画像から時間差分画像を生成するには、図2、3で説明したように、図示しない1フレーム前の画像には固定物の影92が常に存在するので、現在のフレーム画像から引き算することにより、影92と車両87の影88は消去される。しかし、車両80の影82と、車両90の影91は消去されないので(図3の説明により)残ってしまい、その結果、図6(b)(1)のように車両96、影95、影97の画像が時間差分画像として得られる。その画像のライン毎の輝度値の合計を演算して投影像を生成する。その結果、図6(b)(2)のように影95はx軸方向に輝度値のレベルを加算した画像が98であり、車両96に対する画像が99であり、影97に対する画像が200である。
【0025】
また、この処理と並行して図6(a)の場合の感知エリア94内の画像から微分画像を生成する。これは、図4で説明したように、各画素を図4の式に従って微分すると、画像が暗から明に変化するエッジ部分が生成される。つまり、図6(c)(3)のように、影82のエッジ画像201、車両87と影88のエッジ画像202、固定物の影92のエッジ画像203が生成される。次に、図6(c)(4)のように、図示しない1フレーム前の画像には固定物の影92が常に存在するので、現在のフレーム画像から引き算することにより、固定物のエッジ画像203が消去され、影82のエッジ画像204と車両87と影88のエッジ画像205が残る。次に、図6(c)(5)のように、その画像のライン毎の輝度値の合計を演算して投影像を生成する。その結果、x軸方向に輝度値のレベルを加算した画像として、影82のエッジ画像204は投影画像206、車両87と影88のエッジ画像205は投影画像207として生成される。次に、本発明の特徴的な方法は、感知エリア94の手前に進入判定エリア93を設け、そのNフレーム前で車両80の画像が撮影されないフレームとの時間差分画像を生成することである。具体的には、図6(d)(6)のように、図示しないNフレーム前の画像には車両80影81と、車両87と影88と、固定物の影92が存在するので、Nフレーム前の車両から(N−1)フレーム前の画像を引き算することにより、車両80影81と、車両87の影88と固定物の影92が消去され、車両209のみが残る。次に、図6(d)(7)のように、その画像のライン毎の輝度値の合計を演算して投影像210を生成する。以上で、夫々の投影像が得られたので、次に、図6(b)(2)、(c)(5)、(d)(7)の画像を同じ時間軸で画素の積をとると図6(e)(8)、(9)、(10)の斜線部分の画像99、207、210が一致して、その結果図6(e)(11)のように車両領域の画像211が得られる。
【0026】
以上のように、移動体からその影を除去するためには、現在フレームの画像から1フレーム前の画像を引き算し、画像の輝度値が負の場合はゼロとすることにより可能である。つまり、進入判定エリアに進入した移動体とその影の画像(Nフレーム前の画像)から、(N−1)フレーム前の画像を引き算すると移動体の輝度値は正となり、影のみが負となるので消去することができる。しかし、このとき逆走する移動体がある場合、逆走する移動体の影が感知エリアには存在してしまい、その影も同時に時間差分画像として現れる。また、固定物の影を除去するために感知エリア内の画像を微分して、その微分画像の時間差分画像を生成して除去しておく。このような時間差分画像を論理演算可能なレベルに変換するために、進入判定エリアの時間差分画像と感知エリアの時間差分画像を、画像のライン毎の輝度値を加算していき輝度値の投影像を夫々生成する。これにより進入判定エリアの投影像には車両のみが現れ、感知エリアの投影像には逆走する移動体の影と車両の投影像が現れ、微分画像には逆走する移動体の影と車両と車両の影の投影像が現れる。これらを論理積することにより車両部分の投影像が時間的に一致して論理積処理がなされて出力される。
また、本発明の車両感知方法は、所定のエリア内の画像から移動体の影を除去して車両を特定する方法である。従って、車両感知領域内に所定のエリアが1箇所あれば画像処理が可能であるので、システムのコストを安くすることができる。また、撮像手段で撮影された画像は、一旦メモリに格納され、そのメモリから所定の時間間隔で読み出され、その時間間隔は一般的には1画面単位、つまりフレーム単位である。これにより、メモリ容量は少なくとも1フレーム分以上あればよく、少ないメモリ容量でシステムを構築することができる。
【0027】
【発明の効果】
以上記載のごとく請求項1、8の発明によれば、画像処理のために差分画像生成手段、微分画像生成手段、及び論理積演算手段を備え、前記差分画像生成手段により得られた時間差分画像を前記投影像生成手段により第1の投影像を生成すると共に、前記微分画像生成手段により得られた微分画像から前記差分画像生成手段により時間差分画像を生成後、該時間差分画像を前記投影像生成手段により第2の投影像を生成し、前記第1の投影像と第2の投影像を前記論理積演算手段により演算することにより、移動体から車両のみを確実に検出することができると共に、並走する移動体の影と固定物の影を除去して車両のみを検出することができる。
また請求項2は、前記微分画像生成手段は、前記画像情報の基準画素の座標をT(x、y)、該座標での輝度値をP(x、y)としたとき、P(x、y)>P(x、y−1)の場合、座標T(x、y)の輝度値をP(x、y)−P(x、y−1)とし、P(x、y)≦P(x、y−1)の場合、座標T(x、y)の輝度値を0とすることにより、感知エリア内の画像の明暗方向により微分画像を生成することができる。
また請求項3は、前記差分画像生成手段は、前記感知エリア内の前記移動体の現在フレームの画像の輝度値から該現在フレームの一つ前のフレーム画像の輝度値を減算し、該減算結果の画像輝度値から負の輝度値をゼロにすることにより、前記移動体に含まれる陰影部分を除去することにより、移動体の影を除去することができる。
また請求項4は、前記微分画像生成手段により固定物の陰影及び前記移動体の陰影を微分処理した微分画像の一フレーム前の微分画像から前記差分画像生成手段により時間差分画像を生成することにより、固定物と並走する移動体の陰影の画像を除去することができる。
また請求項5,9は、更に、進入判定エリア内に時間差分画像を生成するエリアを設けることにより、予め逆走移動体の影を除去することができる。また、第1の投影像、第2の投影像及び第3の投影像を論理積演算手段により演算することにより画像情報から逆走移動体の陰影部分を除去して車両のみを検出することができる。
また請求項6は、前記感知エリアは車両感知領域内に1個所設定することにより前記移動体から車両の特定を可能としたので、システムのコストを安くすることができる。
また請求項7は、前記差分画像生成手段及び前記微分画像生成手段は、所定の時間間隔で1フレーム単位に前記格納手段に格納された画像情報を画像処理するので、少ないメモリ容量でシステムを構築することができる。
【図面の簡単な説明】
【図1】本発明の一実施形態に係る画像式車両感知システムの構成ブロック図である。
【図2】(a)は車両とその影が感知エリアに進入する直前の様子を模式的に描いた図、(b)は車両とその影が一部感知エリアに進入した様子を模式的に描いた図、(c)は時間差分処理された画像を模式的に描いた図である。
【図3】(a)は車両の影が感知エリアから出ていく際の様子を模式的に描いた図、(b)は車両の影が感知エリアから出た後の様子を模式的に描いた図、(c)は時間差分処理された画像を模式的に描いた図である。
【図4】本発明のある画像の一部の画素座標を表す図である。
【図5】(a)乃至(d)は本発明の第1の実施形態に係る車両感知方法を説明する図である。
【図6】(a)乃至(e)は本発明の第2の実施形態に係る車両感知方法を説明する図である。
【図7】本発明の画像式車両感知システムの動作を説明するフローチャートである。
【符号の説明】
100 撮像部、101 A/D変換部、102 多値メモリ部、103、106、110 差分画像生成部、104 微分画像生成部、105、108 投影値演算部、107、109 AND処理部
Claims (9)
- 撮像手段により撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知システムにおいて、
前記撮像手段により撮影された感知エリア内の移動体及び周辺の画像を格納する画像格納手段と、現在フレームの画像情報と該現在フレームの一つ前のフレーム画像情報から時間差分画像を生成する差分画像生成手段と、前記移動体の通行方向に対して垂直方向に微分処理する微分画像生成手段と、前記差分画像生成手段からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成手段と、複数の投影像生成手段からの投影値を論理積処理する論理積演算手段と、を備え、
前記差分画像生成手段により得られた時間差分画像から前記投影像生成手段により第1の投影像を生成すると共に、前記微分画像生成手段により得られた微分画像から前記差分画像生成手段により時間差分画像を生成後、該時間差分画像を前記投影像生成手段により第2の投影像を生成し、前記第1の投影像と第2の投影像を前記論理積演算手段により演算することにより前記画像情報から車両のみを検出することを特徴とする画像式車両感知システム。 - 前記微分画像生成手段は、前記画像情報の基準画素の座標をT(x、y)、該座標での輝度値をP(x、y)としたとき、P(x、y)>P(x、y−1)の場合、座標T(x、y)の輝度値をP(x、y)−P(x、y−1)とし、P(x、y)≦P(x、y−1)の場合、座標T(x、y)の輝度値を0とすることを特徴とする請求項1に記載の画像式車両感知システム。
- 前記差分画像生成手段は、前記感知エリア内の現在フレームの画像の輝度値から該現在フレームの一つ前のフレーム画像の輝度値を減算し、該減算結果の画像輝度値から負の輝度値をゼロにすることにより、前記移動体に含まれる陰影部分を除去することを特徴とする請求項1に記載の画像式車両感知システム。
- 前記微分画像生成手段により固定物の陰影及び前記移動体の陰影を微分処理した微分画像の一フレーム前の微分画像から前記差分画像生成手段により時間差分画像を生成することにより前記固定物の陰影と前記移動体の陰影を同時に除去することを特徴とする請求項1乃至3の何れか一項に記載の画像式車両感知システム。
- 撮像手段により撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知システムにおいて、
前記撮像手段により撮影された進入判定エリア内の移動体及び周辺の画像を格納する進入画像格納手段と、前記移動体の進行方向に前記進入判定エリアに連続して設けられた感知エリア内の移動体及び周辺の画像を格納する感知画像格納手段と、現在フレームのN(Nは1以上の整数)フレーム前の画像情報と前記現在フレームの(N−1)フレーム前の画像情報から時間差分画像を生成する差分画像生成手段と、前記移動体の通行方向に対して垂直方向に微分処理する微分画像生成手段と、前記差分画像生成手段からの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成手段と、複数の投影像生成手段からの投影値を論理積処理する論理積演算手段と、を備え、
前記進入画像格納手段に格納された前記進入判定エリア内の画像から前記差分画像生成手段により第1の時間差分画像を生成し、該第1の時間差分画像から前記投影像生成手段により第1の投影像を生成すると共に、前記感知画像格納手段に格納された前記感知エリア内の画像から前記差分画像生成手段により第2の時間差分画像を生成し、該第2の時間差分画像から前記投影像生成手段により第2の投影像を生成し、前記微分画像生成手段により得られた微分画像から前記差分画像生成手段により第3の時間差分画像を生成後、該第3の時間差分画像を前記投影像生成手段により第3の投影像を生成し、前記第1の投影像、第2の投影像及び第3の投影像を前記論理積演算手段により演算することにより前記画像情報から逆走移動体の陰影部分を除去して車両のみを検出することを特徴とする画像式車両感知システム。 - 前記感知エリアを車両感知領域内に1個所設定することにより前記移動体から車両の特定を可能としたことを特徴とする請求項1乃至5の何れか一項に記載の画像式車両感知システム。
- 前記差分画像生成手段及び前記微分画像生成手段は、所定の時間間隔で1フレーム単位に前記格納手段により格納された画像情報を画像処理することを特徴とする請求項1乃至6の何れか一項に記載の画像式車両感知システム。
- 撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知方法において、
撮影された感知エリア内の移動体及び周辺の画像を格納するステップと、この格納された画像情報に基づいて現在フレームと該現在フレームの一つ前のフレーム画像から時間差分画像を生成するステップと、前記移動体の通行方向に垂直な方向に微分処理するステップと、前記差分画像生成ステップからの出力画像のライン毎の輝度値の合計を演算して投影像を生成するステップと、複数の投影像生成ステップからの投影値を論理積処理するステップと、を備え、
前記差分画像生成ステップにより得られた時間差分画像から前記投影像生成ステップにより第1の投影像を生成すると共に、前記微分画像生成ステップにより得られた微分画像から前記差分画像生成ステップにより時間差分画像を生成後、該時間差分画像から前記投影像生成ステップにより第2の投影像を生成し、前記第1の投影像と第2の投影像を前記論理積演算ステップにより演算することにより前記画像情報から車両のみを検出することを特徴とする画像式車両感知方法。 - 撮影された感知エリア内の移動体を画像情報処理により車両として検出する画像式車両感知方法において、
進入判定エリア内の移動体及び周辺の画像を格納するステップと、前記移動体の進行方向に前記進入判定エリアに連続して設けられた感知エリア内の移動体及び周辺の画像を格納するステップと、現在フレームのN(Nは1以上の整数)フレーム前の画像情報と前記現在フレームの(N−1)フレーム前の画像情報から時間差分画像を生成するステップと、前記移動体の通行方向に対して垂直方向に微分処理する微分画像生成ステップと、前記差分画像生成ステップからの出力画像のライン毎の輝度値の合計を演算して投影像を生成する投影像生成ステップと、複数の投影像生成ステップからの投影値を論理積処理する論理積演算ステップと、を備え、
前記進入判定エリア内の画像から前記差分画像生成ステップにより第1の時間差分画像を生成し、該第1の時間差分画像から前記投影像生成ステップにより第1の投影像を生成すると共に、前記感知エリア内の画像から前記差分画像生成ステップにより第2の時間差分画像を生成し、該第2の時間差分画像から前記投影像生成ステップにより第2の投影像を生成し、前記微分画像生成ステップにより得られた微分画像から前記差分画像生成ステップにより第3の時間差分画像を生成後、該第3の時間差分画像を前記投影像生成ステップにより第3の投影像を生成し、前記第1の投影像、第2の投影像、及び第3の投影像を前記論理積演算ステップにより演算することにより前記画像情報から逆走移動体の陰影部分を除去して車両のみを検出することを特徴とする画像式車両感知方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002048568A JP3914447B2 (ja) | 2002-02-25 | 2002-02-25 | 画像式車両感知システム及び画像式車両感知方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002048568A JP3914447B2 (ja) | 2002-02-25 | 2002-02-25 | 画像式車両感知システム及び画像式車両感知方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003248895A JP2003248895A (ja) | 2003-09-05 |
JP3914447B2 true JP3914447B2 (ja) | 2007-05-16 |
Family
ID=28661334
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002048568A Expired - Fee Related JP3914447B2 (ja) | 2002-02-25 | 2002-02-25 | 画像式車両感知システム及び画像式車両感知方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3914447B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6822563B2 (en) | 1997-09-22 | 2004-11-23 | Donnelly Corporation | Vehicle imaging system with accessory control |
US5877897A (en) | 1993-02-26 | 1999-03-02 | Donnelly Corporation | Automatic rearview mirror, vehicle lighting control and vehicle interior monitoring system using a photosensor array |
US7655894B2 (en) | 1996-03-25 | 2010-02-02 | Donnelly Corporation | Vehicular image sensing system |
JP2001297397A (ja) * | 2000-04-17 | 2001-10-26 | Nagoya Electric Works Co Ltd | 車両計測方法およびその装置 |
WO2003093857A2 (en) | 2002-05-03 | 2003-11-13 | Donnelly Corporation | Object detection system for vehicle |
US7526103B2 (en) | 2004-04-15 | 2009-04-28 | Donnelly Corporation | Imaging system for vehicle |
US7972045B2 (en) | 2006-08-11 | 2011-07-05 | Donnelly Corporation | Automatic headlamp control system |
JP5984205B2 (ja) * | 2012-03-30 | 2016-09-06 | 日本電気株式会社 | 情報処理装置、描画処理システム、描画処理方法およびプログラム |
JP2014182433A (ja) * | 2013-03-18 | 2014-09-29 | Toshiba Corp | 道路状況把握装置 |
CN104952256B (zh) * | 2015-06-25 | 2017-11-07 | 广东工业大学 | 一种基于视频信息的交叉口处车辆的检测方法 |
CN111314675A (zh) * | 2020-04-15 | 2020-06-19 | 绍兴穆托汽车电子有限公司 | 一种用于智能交通的ar智能投影系统 |
-
2002
- 2002-02-25 JP JP2002048568A patent/JP3914447B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2003248895A (ja) | 2003-09-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3780922B2 (ja) | 道路白線認識装置 | |
KR100377067B1 (ko) | 이미지 시퀀스내의 객체의 움직임을 검출하기 위한 방법 및장치 | |
JP2917661B2 (ja) | 交通流計測処理方法及び装置 | |
CN104509102A (zh) | 三维物体检测装置和异物检测装置 | |
US9965690B2 (en) | On-vehicle control device | |
JP2002074368A (ja) | 移動物体認識追跡装置 | |
JP6226368B2 (ja) | 車両監視装置、および車両監視方法 | |
KR20070065418A (ko) | 화상에서의 이동 물체의 추적 방법 및 장치 | |
JP2007183912A (ja) | 走路境界線検出装置、および走路境界線検出方法 | |
JP3914447B2 (ja) | 画像式車両感知システム及び画像式車両感知方法 | |
JP2008052517A (ja) | 交通量計測方法および交通量計測装置 | |
JP5811637B2 (ja) | 画像処理によるトロリ線摩耗測定装置 | |
JP2016206881A (ja) | レーン検出装置及びその方法、並びにレーン表示装置及びその方法 | |
CN111967396A (zh) | 障碍物检测的处理方法、装置、设备及存储介质 | |
JP2015090679A (ja) | 車両軌跡抽出方法、車両領域抽出方法、車両速度推定方法、車両軌跡抽出プログラム、車両領域抽出プログラム、車両速度推定プログラム、車両軌跡抽出システム、車両領域抽出システム、及び、車両速度推定システム | |
JP5353531B2 (ja) | 車両灯火認識装置及びプログラム | |
JP2020095623A (ja) | 画像処理装置および画像処理方法 | |
JP2004086417A (ja) | 横断歩道等における歩行者検出方法及び同装置 | |
JP2829934B2 (ja) | 移動車の環境認識装置 | |
CN107066929B (zh) | 一种融合多种特征的高速公路隧道停车事件分级识别方法 | |
CN110388985B (zh) | 确定街道标记的颜色的方法和图像处理系统 | |
JP3844750B2 (ja) | 赤外線画像認識装置、及び赤外線画像認識装置を用いた警報装置 | |
JP4842301B2 (ja) | 歩行者検出装置及びプログラム | |
JP3532896B2 (ja) | スミア検出方法及びこのスミア検出方法を用いた画像処理装置 | |
JPH10302074A (ja) | ナンバープレートの位置検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040930 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060901 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060911 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070123 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 3914447 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110209 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110209 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120209 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130209 Year of fee payment: 6 |
|
LAPS | Cancellation because of no payment of annual fees |