JPH11284997A - 移動体検知装置 - Google Patents
移動体検知装置Info
- Publication number
- JPH11284997A JPH11284997A JP10336798A JP10336798A JPH11284997A JP H11284997 A JPH11284997 A JP H11284997A JP 10336798 A JP10336798 A JP 10336798A JP 10336798 A JP10336798 A JP 10336798A JP H11284997 A JPH11284997 A JP H11284997A
- Authority
- JP
- Japan
- Prior art keywords
- image
- moving object
- template
- vehicle
- moving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】
【解決手段】 画像センサ1が、時間的に異なるタイミ
ングで順に取得した入力画像をそれぞれ比較して、その
差分値を得る。差分値の論理積演算を行った結果得た画
像データ中に一定量以上の有意データが存在すれば、監
視領域に移動体が進入したと判断する。進入車両検出部
4は移動体を検出すると、背景画像との差分値をとって
そのテンプレートを作成する。背景画像は、監視領域の
画像の加重平均処理により得る。 【効果】 車両等の移動体検知を、時間や気候の変化に
関わらず安定して行うことができ、雑音の誤検出も少な
い。
ングで順に取得した入力画像をそれぞれ比較して、その
差分値を得る。差分値の論理積演算を行った結果得た画
像データ中に一定量以上の有意データが存在すれば、監
視領域に移動体が進入したと判断する。進入車両検出部
4は移動体を検出すると、背景画像との差分値をとって
そのテンプレートを作成する。背景画像は、監視領域の
画像の加重平均処理により得る。 【効果】 車両等の移動体検知を、時間や気候の変化に
関わらず安定して行うことができ、雑音の誤検出も少な
い。
Description
【0001】
【発明の属する技術分野】本発明は、監視対象とされる
一定の領域を移動する、車両等の移動体の動きを検出す
るための、移動体検知装置に関する。
一定の領域を移動する、車両等の移動体の動きを検出す
るための、移動体検知装置に関する。
【0002】
【従来の技術】道路交通容量を拡大させ、交通事故を抑
制し、省エネルギー化を図ることを目的として、次世代
道路交通システムの研究が盛んに勧められている。道路
上の車両等の動きを正確に自動検知する技術は、この次
世代道路交通システムに欠かせない技術の一つである。
こうした目的のために使用される車両検知装置は、監視
対象とされる一定の領域を撮影するための画像センサを
使用する。この画像センサによって広範囲な領域を監視
し、移動体の画像を取得する。この画像を解析して、そ
の区間を通過する車両の動きを検出する。こうした技術
は、例えば「高橋、北村、小林著、「画像処理による交
通流監視方法の研究」信学技報 Vol.97 No.40 PRMU97-7
(1997)」に紹介されている。
制し、省エネルギー化を図ることを目的として、次世代
道路交通システムの研究が盛んに勧められている。道路
上の車両等の動きを正確に自動検知する技術は、この次
世代道路交通システムに欠かせない技術の一つである。
こうした目的のために使用される車両検知装置は、監視
対象とされる一定の領域を撮影するための画像センサを
使用する。この画像センサによって広範囲な領域を監視
し、移動体の画像を取得する。この画像を解析して、そ
の区間を通過する車両の動きを検出する。こうした技術
は、例えば「高橋、北村、小林著、「画像処理による交
通流監視方法の研究」信学技報 Vol.97 No.40 PRMU97-7
(1997)」に紹介されている。
【0003】
【発明が解決しようとする課題】ところで、上記のよう
な従来の技術には次のような解決すべき課題があった。
監視領域上を移動する車両等の移動体の画像を、その背
景領域の画像と共に取得し、解析を行う場合、時間や気
象の変化に従って変化する背景画像を常に更新しなが
ら、複数の移動体を区別することが必要になる。また、
監視領域中を移動する移動体の数や移動速度を検出する
には、移動体部分の画像のみを切り出したテンプレート
を取得しなければならないが、他の移動体と明確に区別
できるようなそのテンプレートを監視領域の画像中から
切り出さなければならない。次世代道路交通システムの
開発にあたり、こうした点について、より具体的な実用
的な方法の開発が望まれている。
な従来の技術には次のような解決すべき課題があった。
監視領域上を移動する車両等の移動体の画像を、その背
景領域の画像と共に取得し、解析を行う場合、時間や気
象の変化に従って変化する背景画像を常に更新しなが
ら、複数の移動体を区別することが必要になる。また、
監視領域中を移動する移動体の数や移動速度を検出する
には、移動体部分の画像のみを切り出したテンプレート
を取得しなければならないが、他の移動体と明確に区別
できるようなそのテンプレートを監視領域の画像中から
切り出さなければならない。次世代道路交通システムの
開発にあたり、こうした点について、より具体的な実用
的な方法の開発が望まれている。
【0004】
【課題を解決するための手段】本発明は以上の点を解決
するため次の構成を採用する。 〈構成1〉一定の監視領域の画像を取得する画像センサ
と、この画像センサが取得した画像を解析して、上記監
視領域に進入する移動体の検出処理をする進入検出部と
を備え、この進入検出部は、上記画像センサが時間的に
異なるタイミングで順に取得した入力画像を第1の画像
と第2の画像と第3の画像として受け入れ、第1の画像
と第2の画像の差分値と、第2の画像と第3の画像の差
分値とを求めて、上記両差分値の論理積演算により得た
画像データ中に、一定量以上の有意データが存在すれ
ば、上記監視領域に移動体が進入したと判断することを
特徴とする移動体検知装置。
するため次の構成を採用する。 〈構成1〉一定の監視領域の画像を取得する画像センサ
と、この画像センサが取得した画像を解析して、上記監
視領域に進入する移動体の検出処理をする進入検出部と
を備え、この進入検出部は、上記画像センサが時間的に
異なるタイミングで順に取得した入力画像を第1の画像
と第2の画像と第3の画像として受け入れ、第1の画像
と第2の画像の差分値と、第2の画像と第3の画像の差
分値とを求めて、上記両差分値の論理積演算により得た
画像データ中に、一定量以上の有意データが存在すれ
ば、上記監視領域に移動体が進入したと判断することを
特徴とする移動体検知装置。
【0005】〈構成2〉構成1に記載の移動体検知装置
において、進入検出部が、論理積演算の結果監視領域に
移動体が進入していないと判断したとき、その都度、比
較処理のために保存されている監視領域の背景画像を更
新する背景作成部を備えたことを特徴とする移動体検知
装置。
において、進入検出部が、論理積演算の結果監視領域に
移動体が進入していないと判断したとき、その都度、比
較処理のために保存されている監視領域の背景画像を更
新する背景作成部を備えたことを特徴とする移動体検知
装置。
【0006】〈構成3〉一定の監視領域の画像を取得す
る画像センサと、この画像センサが取得した画像を解析
して、上記監視領域に進入する移動体の検出処理をする
進入検出部と、この進入検出部が移動体を検出したと
き、入力画像から移動体の下部の画像を取り出してテン
プレートを作成するテンプレート作成部を備えたことを
特徴とする移動体検知装置。
る画像センサと、この画像センサが取得した画像を解析
して、上記監視領域に進入する移動体の検出処理をする
進入検出部と、この進入検出部が移動体を検出したと
き、入力画像から移動体の下部の画像を取り出してテン
プレートを作成するテンプレート作成部を備えたことを
特徴とする移動体検知装置。
【0007】〈構成4〉一定の監視領域の画像を取得す
る画像センサと、この画像センサが取得した画像を解析
して、上記監視領域に進入する移動体の検出処理をする
進入検出部と、この進入検出部が移動体を検出したと
き、入力画像から移動体の特定部位の画像を取り出して
テンプレートを作成するテンプレート作成部を備えたこ
とを特徴とする移動体検知装置。
る画像センサと、この画像センサが取得した画像を解析
して、上記監視領域に進入する移動体の検出処理をする
進入検出部と、この進入検出部が移動体を検出したと
き、入力画像から移動体の特定部位の画像を取り出して
テンプレートを作成するテンプレート作成部を備えたこ
とを特徴とする移動体検知装置。
【0008】〈構成5〉構成3に記載の移動体検知装置
において、テンプレート作成部は、画像中に検出された
複数の移動体にそれぞれ各移動体を区別するためのラベ
ル値を付与した、ラベル画像を作成して、このラベル画
像に含まれる同一のラベル値を持つラベル領域の、少な
くとも下端を含む部分を切り出してテンプレートを作成
することを特徴とする移動体検知装置。
において、テンプレート作成部は、画像中に検出された
複数の移動体にそれぞれ各移動体を区別するためのラベ
ル値を付与した、ラベル画像を作成して、このラベル画
像に含まれる同一のラベル値を持つラベル領域の、少な
くとも下端を含む部分を切り出してテンプレートを作成
することを特徴とする移動体検知装置。
【0009】〈構成6〉構成5に記載の移動体検知装置
において、テンプレート作成部は、テンプレートを作成
した後は、当該移動体のためのラベル領域のラベル値を
無効にして、未だテンプレートを作成していない移動体
のためのラベル領域と区別することを特徴とする移動体
検知装置。
において、テンプレート作成部は、テンプレートを作成
した後は、当該移動体のためのラベル領域のラベル値を
無効にして、未だテンプレートを作成していない移動体
のためのラベル領域と区別することを特徴とする移動体
検知装置。
【0010】〈構成7〉構成3に記載の移動体検知装置
において、テンプレート作成部は、入力画像から移動体
の下端の画像を検出して、入力画像の下端から移動体の
下端までの画像中の距離が閾値以上のとき、その移動体
のテンプレートを作成することを特徴とする移動体検知
装置。
において、テンプレート作成部は、入力画像から移動体
の下端の画像を検出して、入力画像の下端から移動体の
下端までの画像中の距離が閾値以上のとき、その移動体
のテンプレートを作成することを特徴とする移動体検知
装置。
【0011】〈構成8〉構成3に記載の移動体検知装置
において、テンプレート作成部は、入力画像中の進入車
両検出領域から移動体の下端の画像を検出して、進入車
両検出領域の下端から移動体の下端までの画像中の距離
が閾値以上のとき、上記入力画像からその移動体の下部
の画像を切り出してテンプレートを作成することを特徴
とする移動体検知装置。
において、テンプレート作成部は、入力画像中の進入車
両検出領域から移動体の下端の画像を検出して、進入車
両検出領域の下端から移動体の下端までの画像中の距離
が閾値以上のとき、上記入力画像からその移動体の下部
の画像を切り出してテンプレートを作成することを特徴
とする移動体検知装置。
【0012】〈構成9〉構成3に記載の移動体検知装置
において、入力画像から移動体の画像を検出したとき、
水平方向に見た画像の色もしくは輝度分布が所定の条件
を満たす部分を、移動体の下部と判定することを特徴と
する移動体検知装置。
において、入力画像から移動体の画像を検出したとき、
水平方向に見た画像の色もしくは輝度分布が所定の条件
を満たす部分を、移動体の下部と判定することを特徴と
する移動体検知装置。
【0013】〈構成10〉一定の監視領域の画像を所定
のフレーム周期で取得する画像センサと、この画像セン
サが時間的に異なるタイミングで取得した複数の監視領
域の画像について、その差分値を求めて解析し、上記監
視領域に進入する移動体の検出処理をする進入検出部
と、この進入検出部が移動体を検出したとき、入力画像
から移動体の下部の画像を取り出してテンプレートを作
成するテンプレート作成部と、上記画像センサが時間的
に異なるタイミングで取得した複数の監視領域の画像中
で、上記テンプレートを用いたマッチング処理をして移
動体の移動量を検出する追跡部と、上記追跡部の検出し
た移動体の移動量と上記フレーム周期とから、移動体の
移動速度を求める速度測定部とを備えたことを特徴とす
る移動体検知装置。
のフレーム周期で取得する画像センサと、この画像セン
サが時間的に異なるタイミングで取得した複数の監視領
域の画像について、その差分値を求めて解析し、上記監
視領域に進入する移動体の検出処理をする進入検出部
と、この進入検出部が移動体を検出したとき、入力画像
から移動体の下部の画像を取り出してテンプレートを作
成するテンプレート作成部と、上記画像センサが時間的
に異なるタイミングで取得した複数の監視領域の画像中
で、上記テンプレートを用いたマッチング処理をして移
動体の移動量を検出する追跡部と、上記追跡部の検出し
た移動体の移動量と上記フレーム周期とから、移動体の
移動速度を求める速度測定部とを備えたことを特徴とす
る移動体検知装置。
【0014】〈構成11〉構成10に記載の移動体検知
装置において、追跡部は、テンプレートの数が多いほど
短いフレーム周期で入力画像を受け入れ、テンプレート
の数が少ないほど長いフレーム周期で入力画像を受け入
れることを特徴とする移動体検知装置。
装置において、追跡部は、テンプレートの数が多いほど
短いフレーム周期で入力画像を受け入れ、テンプレート
の数が少ないほど長いフレーム周期で入力画像を受け入
れることを特徴とする移動体検知装置。
【0015】〈構成12〉構成10に記載の移動体検知
装置において、追跡部は、入力画像中に検出された移動
体の移動速度が速いほど短いフレーム周期で入力画像を
受け入れ、移動速度が遅いほど長いフレーム周期で入力
画像を受け入れることを特徴とする移動体検知装置。
装置において、追跡部は、入力画像中に検出された移動
体の移動速度が速いほど短いフレーム周期で入力画像を
受け入れ、移動速度が遅いほど長いフレーム周期で入力
画像を受け入れることを特徴とする移動体検知装置。
【0016】〈構成13〉一定の監視領域の画像を取得
する画像センサと、この画像センサが時間的に異なるタ
イミングで取得した複数の監視領域の画像について、そ
の差分値を求めて解析し、上記監視領域に進入する移動
体の検出処理をする進入検出部と、この進入検出部が移
動体を検出したとき、入力画像から移動体の下部の画像
を取り出してテンプレートを作成するテンプレート作成
部と、上記画像センサが時間的に異なるタイミングで取
得した複数の監視領域の画像中で、上記テンプレートを
用いたマッチング処理をして移動体の移動量を検出する
追跡部と、上記追跡部の検出した移動体の移動量と上記
フレーム周期とから、移動体の移動速度を求める速度測
定部とを備えたことを特徴とする移動体検知装置。
する画像センサと、この画像センサが時間的に異なるタ
イミングで取得した複数の監視領域の画像について、そ
の差分値を求めて解析し、上記監視領域に進入する移動
体の検出処理をする進入検出部と、この進入検出部が移
動体を検出したとき、入力画像から移動体の下部の画像
を取り出してテンプレートを作成するテンプレート作成
部と、上記画像センサが時間的に異なるタイミングで取
得した複数の監視領域の画像中で、上記テンプレートを
用いたマッチング処理をして移動体の移動量を検出する
追跡部と、上記追跡部の検出した移動体の移動量と上記
フレーム周期とから、移動体の移動速度を求める速度測
定部とを備えたことを特徴とする移動体検知装置。
【0017】
【発明の実施の形態】以下、本発明の実施の形態を具体
例を用いて説明する。 〈装置全体の構成〉図1は、本発明による移動体検知装
置のブロック図である。この装置は、画像センサ1によ
り取得した入力画像2を解析し、後から説明するような
監視領域に進入する移動体の検出処理を行うものであ
る。この装置は、入力画像記憶部3、進入車両検出部
4、背景作成部5、初期車両テンプレート作成部6、台
数計測部7、車両テンプレート記憶部8、車両追跡部9
及び速度測定部10と、走行判定部11とから構成され
る。なお、本発明は、車両に限らず様々な移動体の検知
処理に利用できるが、ここでは、例えば道路上を一方に
向かって走行する車両の検知処理を例にとって説明をす
る。
例を用いて説明する。 〈装置全体の構成〉図1は、本発明による移動体検知装
置のブロック図である。この装置は、画像センサ1によ
り取得した入力画像2を解析し、後から説明するような
監視領域に進入する移動体の検出処理を行うものであ
る。この装置は、入力画像記憶部3、進入車両検出部
4、背景作成部5、初期車両テンプレート作成部6、台
数計測部7、車両テンプレート記憶部8、車両追跡部9
及び速度測定部10と、走行判定部11とから構成され
る。なお、本発明は、車両に限らず様々な移動体の検知
処理に利用できるが、ここでは、例えば道路上を一方に
向かって走行する車両の検知処理を例にとって説明をす
る。
【0018】まず、画像センサ1について説明する。画
像センサ1には、既に従来技術の部分で説明した文献で
紹介されたものが使用される。このほかに、CCDカメ
ラその他の各種の画像取得のための装置を使用すること
ができる。
像センサ1には、既に従来技術の部分で説明した文献で
紹介されたものが使用される。このほかに、CCDカメ
ラその他の各種の画像取得のための装置を使用すること
ができる。
【0019】図2に、画像センサ1により取得される入
力画像2の内容説明図を示す。図の(a)に示すよう
に、画像センサ1は、例えば高速道路等の監視領域14
を監視し、その上を移動する車両15等の移動体を撮影
する。画像センサ1は、この図のように、監視領域14
の斜め上方から車両15の進行する向きに向けて設置さ
れている。こうして画像センサ1により得られた画像
は、図2(b)に示すように、監視領域14上を矢印K
方向に進行する車両15Aや15Bの後部を撮したもの
になる。
力画像2の内容説明図を示す。図の(a)に示すよう
に、画像センサ1は、例えば高速道路等の監視領域14
を監視し、その上を移動する車両15等の移動体を撮影
する。画像センサ1は、この図のように、監視領域14
の斜め上方から車両15の進行する向きに向けて設置さ
れている。こうして画像センサ1により得られた画像
は、図2(b)に示すように、監視領域14上を矢印K
方向に進行する車両15Aや15Bの後部を撮したもの
になる。
【0020】〈装置の概略動作〉上記の移動体検知装置
の概略動作は次の通りである。図3には、進入車両検出
領域の説明図を示す。この図に示すように、図1に示し
た画像センサ1は監視領域14を撮影し、この図に示し
たような入力画像を得る。ここで、この監視領域14に
次々に新たに進入する車両15Aや15Bを検出するた
めに、入力画像の一番下側、即ち最も手前の部分に、進
入車両検出領域16を設定する。この部分で車両15A
や15Bの進入を検出すると、各車両の後部の画像を切
り出してテンプレートを作る。そして、時間の経過と共
に次々に取得される入力画像上でこのテンプレートを用
いた濃淡パターンマッチングを行う。こうして、フレー
ム間の車両の動きを追跡する。
の概略動作は次の通りである。図3には、進入車両検出
領域の説明図を示す。この図に示すように、図1に示し
た画像センサ1は監視領域14を撮影し、この図に示し
たような入力画像を得る。ここで、この監視領域14に
次々に新たに進入する車両15Aや15Bを検出するた
めに、入力画像の一番下側、即ち最も手前の部分に、進
入車両検出領域16を設定する。この部分で車両15A
や15Bの進入を検出すると、各車両の後部の画像を切
り出してテンプレートを作る。そして、時間の経過と共
に次々に取得される入力画像上でこのテンプレートを用
いた濃淡パターンマッチングを行う。こうして、フレー
ム間の車両の動きを追跡する。
【0021】各車両の瞬間速度は、追跡したテンプレー
トの移動距離とこの移動に要する経過時間により求め
る。また、追跡車両が台数計測ライン17を通過する度
に、車両の台数を計上する。更に、追跡打ち切りライン
18までの間に回避走行したり、通常の運行と異なる異
常走行したりする移動体の検出を行う。
トの移動距離とこの移動に要する経過時間により求め
る。また、追跡車両が台数計測ライン17を通過する度
に、車両の台数を計上する。更に、追跡打ち切りライン
18までの間に回避走行したり、通常の運行と異なる異
常走行したりする移動体の検出を行う。
【0022】図4には、車両検出方法の説明図を示す。
上記のような入力画像中から車両15A,15Bのテン
プレートを切り出すひとつの方法をここで説明する。こ
こでは、入力画像について、X方向とY方向に沿った微
分処理を施し、明暗パターンを得る。図のグラフは、そ
れぞれ各座標軸に沿って各画素値を投影加算した結果を
示したものである。
上記のような入力画像中から車両15A,15Bのテン
プレートを切り出すひとつの方法をここで説明する。こ
こでは、入力画像について、X方向とY方向に沿った微
分処理を施し、明暗パターンを得る。図のグラフは、そ
れぞれ各座標軸に沿って各画素値を投影加算した結果を
示したものである。
【0023】即ち、画像の要素が多い部分ほどグラフの
山が高くなっている。これを閾値で区切ることによっ
て、閾値以上の投影加算値を示す部分が、入力画像中で
車両の存在する位置と判断する。グラフの極大値を示す
部分は車両の中心である。こうした判断結果を用いて車
両のテンプレートを切り出すこともできる。しかし、こ
の方法では次のような問題が生じる。
山が高くなっている。これを閾値で区切ることによっ
て、閾値以上の投影加算値を示す部分が、入力画像中で
車両の存在する位置と判断する。グラフの極大値を示す
部分は車両の中心である。こうした判断結果を用いて車
両のテンプレートを切り出すこともできる。しかし、こ
の方法では次のような問題が生じる。
【0024】図5には、テンプレートの説明図を示す。
上記のような方法で取得したテンプレートは、例えばこ
の図の車両15Aについてみれば、そのナンバープレー
ト周辺の車両の全幅を含む画像であることが望ましい。
この部分は、各車両毎に特徴があり、各々を区別しやす
いからである。ところが、車両の種類によっては、この
ようなテンプレート20の切り出しが容易でない場合が
ある。
上記のような方法で取得したテンプレートは、例えばこ
の図の車両15Aについてみれば、そのナンバープレー
ト周辺の車両の全幅を含む画像であることが望ましい。
この部分は、各車両毎に特徴があり、各々を区別しやす
いからである。ところが、車両の種類によっては、この
ようなテンプレート20の切り出しが容易でない場合が
ある。
【0025】図4に示したように、車両15Aと車両1
5Bとを比較した場合、車両15Aは全体として濃いボ
ディカラーの車両で、車両15Bは比較的明るいボディ
カラーの車両である。こうした場合、常に車両下部の明
暗パターンが強いとは限らない。従って、上記のグラフ
を用いると、場合によっては車両の上部等をテンプレー
トとして切り出してしまうことがある。こうした場合に
はテンプレートに特徴が少ないため、各車両を区別しな
がらパターンマッチングを行うことが難しくなる。
5Bとを比較した場合、車両15Aは全体として濃いボ
ディカラーの車両で、車両15Bは比較的明るいボディ
カラーの車両である。こうした場合、常に車両下部の明
暗パターンが強いとは限らない。従って、上記のグラフ
を用いると、場合によっては車両の上部等をテンプレー
トとして切り出してしまうことがある。こうした場合に
はテンプレートに特徴が少ないため、各車両を区別しな
がらパターンマッチングを行うことが難しくなる。
【0026】図6には、大型車両の問題点説明図を示
す。例えば、このトラックのように、車両の長さや高さ
が大きい車両の場合、車両中間部の水平方向の明暗パタ
ーンが弱いときには中間部が欠落して、上部と下部のテ
ンプレートが別々に切り出されてしまうこともある。即
ち、1台の車両を2台と計数してしまうことがある。本
発明では、こうした問題が生じないようなテンプレート
の切り出しを行う。
す。例えば、このトラックのように、車両の長さや高さ
が大きい車両の場合、車両中間部の水平方向の明暗パタ
ーンが弱いときには中間部が欠落して、上部と下部のテ
ンプレートが別々に切り出されてしまうこともある。即
ち、1台の車両を2台と計数してしまうことがある。本
発明では、こうした問題が生じないようなテンプレート
の切り出しを行う。
【0027】〈装置各部の構成〉図1に示した入力画像
記憶部3は、画像センサ1が時間的に異なるタイミング
で連続して取得した入力画像2を3フレーム分以上記憶
するメモリにより構成される。なお、こうして記憶され
た入力画像を入力画像3A,3B,3Cとした。一番古
い画像が第1の画像3A、次が第2の画像3B、一番新
しいのが第3の画像3Cとする。
記憶部3は、画像センサ1が時間的に異なるタイミング
で連続して取得した入力画像2を3フレーム分以上記憶
するメモリにより構成される。なお、こうして記憶され
た入力画像を入力画像3A,3B,3Cとした。一番古
い画像が第1の画像3A、次が第2の画像3B、一番新
しいのが第3の画像3Cとする。
【0028】画像センサ1が所定のフレーム周期で監視
領域の画像を取得すると、その画像は1フレームずつ入
力画像記憶部3に記憶される。このとき、その都度最も
古い画像が追い出され、新しい画像が追加されるといっ
た構成になっている。
領域の画像を取得すると、その画像は1フレームずつ入
力画像記憶部3に記憶される。このとき、その都度最も
古い画像が追い出され、新しい画像が追加されるといっ
た構成になっている。
【0029】進入車両検出部4は、入力画像記憶部3か
ら出力される3種類の入力画像即ち第1の画像3Aと、
第2の画像3Bと、第3の画像3Cとを受け入れて、こ
れらを比較解析し、監視領域に新たに車両が進入したか
どうかを判定する機能を持つ。なお、進入車両検出部4
は、新たに車両が進入したと判定すると、判定信号4A
を出力して、テンプレートの作成を要求するように構成
されている。その後その車両が監視領域を通過するまで
監視をするためである。背景作成部5は、時々刻々と変
化する監視領域の背景画像を更新する処理を行う部分で
ある。
ら出力される3種類の入力画像即ち第1の画像3Aと、
第2の画像3Bと、第3の画像3Cとを受け入れて、こ
れらを比較解析し、監視領域に新たに車両が進入したか
どうかを判定する機能を持つ。なお、進入車両検出部4
は、新たに車両が進入したと判定すると、判定信号4A
を出力して、テンプレートの作成を要求するように構成
されている。その後その車両が監視領域を通過するまで
監視をするためである。背景作成部5は、時々刻々と変
化する監視領域の背景画像を更新する処理を行う部分で
ある。
【0030】即ち、進入車両検出部4が車両の進入を検
出していないときの入力画像を取得し、背景画像とす
る。具体的には次の(1)式に示すようにしてこれまで
に蓄積した背景画像と、新たに入力した入力画像との加
重平均を求める。なお、入力画像中の位置(x,y)の
背景画像の画素値を、背景画像(x,y)とする。 背景画像(x,y)=α×S102(1)(x,y)+β×S102(2)(x,y)+γ×S102(3)(x,y) …(1) 但し、α,β,γは“α+β+γ=1”且つα≧0,β
≧0,γ≧0を満たす任意の定数である。なお、車両検
知装置を起動する前には、予め初期の背景画像をこの背
景作成部に入力し、記憶させておくものとする。
出していないときの入力画像を取得し、背景画像とす
る。具体的には次の(1)式に示すようにしてこれまで
に蓄積した背景画像と、新たに入力した入力画像との加
重平均を求める。なお、入力画像中の位置(x,y)の
背景画像の画素値を、背景画像(x,y)とする。 背景画像(x,y)=α×S102(1)(x,y)+β×S102(2)(x,y)+γ×S102(3)(x,y) …(1) 但し、α,β,γは“α+β+γ=1”且つα≧0,β
≧0,γ≧0を満たす任意の定数である。なお、車両検
知装置を起動する前には、予め初期の背景画像をこの背
景作成部に入力し、記憶させておくものとする。
【0031】初期車両テンプレート作成部6は、監視領
域中に新たに車両が進入したことを進入車両検出部4の
出力4Aにより認識すると、背景作成部5の出力する背
景画像5Aと、入力画像記憶部3から受け入れた入力画
像3Bとの差分をとり、監視領域に進入した車両の画像
を抽出する機能を持つ。この車両の画像中の下部領域の
画像によりテンプレート6Aが作成される。同時に、1
つのテンプレート6Aを出力する度に、信号6Bを台数
計数部7に出力する。台数計数部7は、信号6Bによっ
て、監視領域に進入した車両の台数計測を行う機能を持
つ。
域中に新たに車両が進入したことを進入車両検出部4の
出力4Aにより認識すると、背景作成部5の出力する背
景画像5Aと、入力画像記憶部3から受け入れた入力画
像3Bとの差分をとり、監視領域に進入した車両の画像
を抽出する機能を持つ。この車両の画像中の下部領域の
画像によりテンプレート6Aが作成される。同時に、1
つのテンプレート6Aを出力する度に、信号6Bを台数
計数部7に出力する。台数計数部7は、信号6Bによっ
て、監視領域に進入した車両の台数計測を行う機能を持
つ。
【0032】車両テンプレート記憶部8は、初期車両テ
ンプレート作成部6から出力された、全ての進入車両の
テンプレート6Aをまとめて記憶する部分である。な
お、ここに記憶されたテンプレートは、随時、車両追跡
部9において更新されたテンプレートに置き換えられ
る。図2(b)に示すように、同一の車両が監視領域に
進入してから通過してしまうまでの間に、その車両の画
像の大きさが次第に小さくなるから、テンプレートの大
きさもそれにつれて小さくしなければならないからであ
る。
ンプレート作成部6から出力された、全ての進入車両の
テンプレート6Aをまとめて記憶する部分である。な
お、ここに記憶されたテンプレートは、随時、車両追跡
部9において更新されたテンプレートに置き換えられ
る。図2(b)に示すように、同一の車両が監視領域に
進入してから通過してしまうまでの間に、その車両の画
像の大きさが次第に小さくなるから、テンプレートの大
きさもそれにつれて小さくしなければならないからであ
る。
【0033】車両追跡部9は、車両テンプレート記憶部
8に記憶されているテンプレートを入力画像中で動か
し、パターンマッチングをさせることによって車両の動
きを検出する機能を持つ。これによって各車両の動きベ
クトル9Aを求める。また、車両の動きに応じて大きさ
が変化したテンプレート9Bを新たに作成し、車両テン
プレート記憶部8に出力する機能を持つ。
8に記憶されているテンプレートを入力画像中で動か
し、パターンマッチングをさせることによって車両の動
きを検出する機能を持つ。これによって各車両の動きベ
クトル9Aを求める。また、車両の動きに応じて大きさ
が変化したテンプレート9Bを新たに作成し、車両テン
プレート記憶部8に出力する機能を持つ。
【0034】この車両テンプレート9Bは、車両テンプ
レート記憶部8に既に記憶された該当する車両のテンプ
レートと置き換えられる。そして、新たなテンプレート
8Aが車両追跡部9に提供されて、次の入力画像を使用
したパターンマッチングが行われる。なお、既に図3を
用いて説明した追跡打ち切りライン18を越えた車両
は、テンプレートが不要になるため、車両テンプレート
記憶部8から消去される。車両追跡部9は、この消去命
令を出力する機能も持つ。
レート記憶部8に既に記憶された該当する車両のテンプ
レートと置き換えられる。そして、新たなテンプレート
8Aが車両追跡部9に提供されて、次の入力画像を使用
したパターンマッチングが行われる。なお、既に図3を
用いて説明した追跡打ち切りライン18を越えた車両
は、テンプレートが不要になるため、車両テンプレート
記憶部8から消去される。車両追跡部9は、この消去命
令を出力する機能も持つ。
【0035】速度測定部10は、車両追跡部9から出力
された動きベクトル9Aを受け入れて、車両の移動量と
移動速度を計測する処理を行う機能を持つ。走行判定部
11は、車両追跡部9から出力された動きベクトル9A
に基づいて、その車両の走行が異常か正常かを判定する
機能を持つ。
された動きベクトル9Aを受け入れて、車両の移動量と
移動速度を計測する処理を行う機能を持つ。走行判定部
11は、車両追跡部9から出力された動きベクトル9A
に基づいて、その車両の走行が異常か正常かを判定する
機能を持つ。
【0036】以上が装置の概略構成であるが、以下、装
置の各機能ブロック毎に、詳細な構成と動作説明を行
う。 〈進入車両検出部〉図7に、進入車両検出部の機能ブロ
ック図を示す。進入車両検出部4は、図に示すように、
入力画像記憶部3から、それぞれ時間的に少しずつ異な
るタイミングで取得した、第1の画像3A,第2の画像
3B,第3の画像3Cを受け入れて処理する機能を持
つ。この動作のために、差分部21,22、2値化部2
3,24、論理積演算部25及び判定部26が設けられ
ている。
置の各機能ブロック毎に、詳細な構成と動作説明を行
う。 〈進入車両検出部〉図7に、進入車両検出部の機能ブロ
ック図を示す。進入車両検出部4は、図に示すように、
入力画像記憶部3から、それぞれ時間的に少しずつ異な
るタイミングで取得した、第1の画像3A,第2の画像
3B,第3の画像3Cを受け入れて処理する機能を持
つ。この動作のために、差分部21,22、2値化部2
3,24、論理積演算部25及び判定部26が設けられ
ている。
【0037】なお、差分部21は、第1の画像と第2の
画像との差分値を求める演算処理を行う部分である。差
分部22は、第2の画像と第3の画像の差分値を求める
演算処理を行う部分である。差分部21の出力21A
は、2値化部23において2値化処理される。差分部2
2の出力22Aは2値化部24において2値化処理され
る。そして、2値化部23,24の出力23A,24A
が論理積演算部25において論理積処理され、出力25
Aを得る。
画像との差分値を求める演算処理を行う部分である。差
分部22は、第2の画像と第3の画像の差分値を求める
演算処理を行う部分である。差分部21の出力21A
は、2値化部23において2値化処理される。差分部2
2の出力22Aは2値化部24において2値化処理され
る。そして、2値化部23,24の出力23A,24A
が論理積演算部25において論理積処理され、出力25
Aを得る。
【0038】上記差分処理は、入力画像中の時間的に変
化する部分を抽出するために行う。差分処理では、各々
の入力画像の同じ位置の画素1つずつの差分値を求めて
もよいし、入力画像を例えば2×2等のブロックに分割
して、同じ位置のブロックの画素値を合計し、その平均
値の差分を求めてもよい。2値化処理は、差分部21や
22の出力を所定の閾値を用いて、各画素値が0と1の
2値で表現される画像に変換する。各画素値が閾値未満
なら“0”、閾値以上なら“1”といった演算となる。
化する部分を抽出するために行う。差分処理では、各々
の入力画像の同じ位置の画素1つずつの差分値を求めて
もよいし、入力画像を例えば2×2等のブロックに分割
して、同じ位置のブロックの画素値を合計し、その平均
値の差分を求めてもよい。2値化処理は、差分部21や
22の出力を所定の閾値を用いて、各画素値が0と1の
2値で表現される画像に変換する。各画素値が閾値未満
なら“0”、閾値以上なら“1”といった演算となる。
【0039】図8には、進入車両検出部の動作説明図を
示す。この図に示すように、第1の画像3Aと第2の画
像3Bの差分を2値化した画像23Aと、第2の画像3
Bと第3の画像3Cの差分をとり2値化した出力24A
との論理積をとると、図の一番下に示すような論理積画
像出力25Aとなる。これにより、2つの差分部21、
22のいずれの出力からも、背景画像中を移動するもの
がある判定できるという結果が得られる。即ち、この画
像中に画素値が“1”の領域が一定以上存在すれば、入
力画像中に移動体が存在すると判断できる。
示す。この図に示すように、第1の画像3Aと第2の画
像3Bの差分を2値化した画像23Aと、第2の画像3
Bと第3の画像3Cの差分をとり2値化した出力24A
との論理積をとると、図の一番下に示すような論理積画
像出力25Aとなる。これにより、2つの差分部21、
22のいずれの出力からも、背景画像中を移動するもの
がある判定できるという結果が得られる。即ち、この画
像中に画素値が“1”の領域が一定以上存在すれば、入
力画像中に移動体が存在すると判断できる。
【0040】入力画像である第1の画像3Aと第2の画
像3Bと第3の画像3Cが、それぞれ全く変化のない背
景画像のみであるとすれば、その差分を2値化した出力
23A,24Aは、共に全ての画素値が“0”となる。
その論理積をとれば、出力結果は全て画素値が“0”と
なり、入力画像中に移動体は存在しないと判断できる。
監視領域に一定以上の面積の移動体が進入すると、各入
力画像にそれぞれ差分値が生じ、その論理積を求める
と、一定以上の画素値が“1”の領域が生じ、これが検
出される。
像3Bと第3の画像3Cが、それぞれ全く変化のない背
景画像のみであるとすれば、その差分を2値化した出力
23A,24Aは、共に全ての画素値が“0”となる。
その論理積をとれば、出力結果は全て画素値が“0”と
なり、入力画像中に移動体は存在しないと判断できる。
監視領域に一定以上の面積の移動体が進入すると、各入
力画像にそれぞれ差分値が生じ、その論理積を求める
と、一定以上の画素値が“1”の領域が生じ、これが検
出される。
【0041】このような方法で車両の進入を判定すれ
ば、背景が時間的に、例えば日照の関係で変化をしたと
しても、あるいは気象の変化によって次第に変化してい
ったとしても、その影響を受けずに移動体の進入を検出
できる。第1の画像3Aと第2の画像3Bと第3の画像
3Cとを取得するための時間は、背景の時間的な変化を
無視できるほど十分に短い時間だからである。また、適
当な閾値を設定することによって雑音の誤検出も少なく
て済む。なお、背景画像は、車両が監視領域中に存在し
ないときに更新しておく。
ば、背景が時間的に、例えば日照の関係で変化をしたと
しても、あるいは気象の変化によって次第に変化してい
ったとしても、その影響を受けずに移動体の進入を検出
できる。第1の画像3Aと第2の画像3Bと第3の画像
3Cとを取得するための時間は、背景の時間的な変化を
無視できるほど十分に短い時間だからである。また、適
当な閾値を設定することによって雑音の誤検出も少なく
て済む。なお、背景画像は、車両が監視領域中に存在し
ないときに更新しておく。
【0042】また、監視領域中に車両が存在しないとき
を検出して、背景画像を取得し、既に説明した要領で、
直前まで記憶していた背景画像との加重平均を行うよう
にすれば、様々な要因による背景画像の内容変動や雑音
の影響を十分に軽減できる。
を検出して、背景画像を取得し、既に説明した要領で、
直前まで記憶していた背景画像との加重平均を行うよう
にすれば、様々な要因による背景画像の内容変動や雑音
の影響を十分に軽減できる。
【0043】〈初期車両テンプレート作成部〉図9は、
初期車両テンプレート作成部のブロック図である。初期
車両テンプレート作成部6は、差分部31、2値化部3
2、ラベル画像作成部33、テンプレート切り出し部3
4及びラベル画像記憶部35から構成される。この初期
車両テンプレート作成部6には、図1に示す入力画像3
Bと背景画像5Aとが入力する。そして、入力画像3B
が入力した場合にのみ、この部分が動作する。
初期車両テンプレート作成部のブロック図である。初期
車両テンプレート作成部6は、差分部31、2値化部3
2、ラベル画像作成部33、テンプレート切り出し部3
4及びラベル画像記憶部35から構成される。この初期
車両テンプレート作成部6には、図1に示す入力画像3
Bと背景画像5Aとが入力する。そして、入力画像3B
が入力した場合にのみ、この部分が動作する。
【0044】差分部31は、入力画像3Bと背景画像5
Aとの差分値を演算処理し、出力31Aを得る部分であ
る。差分値を求めるのは、入力画像から背景画像に相当
する部分を除外して、車両部分の画像を求めるためであ
る。この差分処理は、入力画像3Bと背景画像5Aの同
じ位置の画素1つずつの差分値を求めてもよいし、入力
画像3Bと背景画像5Aを、例えば8×8画素で構成さ
れたブロックに分割し、同じ位置のブロックの平均値の
差分値を求めてもよい。
Aとの差分値を演算処理し、出力31Aを得る部分であ
る。差分値を求めるのは、入力画像から背景画像に相当
する部分を除外して、車両部分の画像を求めるためであ
る。この差分処理は、入力画像3Bと背景画像5Aの同
じ位置の画素1つずつの差分値を求めてもよいし、入力
画像3Bと背景画像5Aを、例えば8×8画素で構成さ
れたブロックに分割し、同じ位置のブロックの平均値の
差分値を求めてもよい。
【0045】また、入力画像3Bと背景画像5Aの各々
の微分画像を作り、微分画像同士の差分を行ってもよ
い。それぞれ例えば8×8画素のブロックに分割して、
各々の特徴量を得るための直交変換を行った上で、それ
らのブロック特徴量の差分値を求めてもよい。このブロ
ック特徴量を求める方法としては、例えば次のような文
献に示された方法が採用される。「安居院 猛,長尾
智晴「画像の処理と認識」昭晃堂(P.47−P.58)」
の微分画像を作り、微分画像同士の差分を行ってもよ
い。それぞれ例えば8×8画素のブロックに分割して、
各々の特徴量を得るための直交変換を行った上で、それ
らのブロック特徴量の差分値を求めてもよい。このブロ
ック特徴量を求める方法としては、例えば次のような文
献に示された方法が採用される。「安居院 猛,長尾
智晴「画像の処理と認識」昭晃堂(P.47−P.58)」
【0046】2値化部32は、差分部31から出力され
た画像31Aを閾値で2値化し、2値化画像32Aを出
力する。ラベル画像作成部33は、2値化画像32Aの
画素値が“1”の部分について、独立した集合毎に異な
る番号を割り当てるラベリングを行う部分である。画素
値が“1”の部分は、車両の画像が存在する部分であ
る。こうしてラベル画像33Aが生成される。この具体
的な処理方法は次の文献に記載されている。「安居院
猛,長尾 智晴「画像の処理と認識」昭晃堂(P.67−P.
68)」
た画像31Aを閾値で2値化し、2値化画像32Aを出
力する。ラベル画像作成部33は、2値化画像32Aの
画素値が“1”の部分について、独立した集合毎に異な
る番号を割り当てるラベリングを行う部分である。画素
値が“1”の部分は、車両の画像が存在する部分であ
る。こうしてラベル画像33Aが生成される。この具体
的な処理方法は次の文献に記載されている。「安居院
猛,長尾 智晴「画像の処理と認識」昭晃堂(P.67−P.
68)」
【0047】ラベル画像作成部33は、こうしたラベリ
ング手法を用いて次のような画素値を持つラベル画像を
作成する。まず、車両が存在する領域には、独立した集
合毎に“0”,“1”,“2”といった異なる番号を割
り当てる。異なる車両には異なるラベルを付け区別する
ためである。こうして割り当てられた領域の総数をラベ
ル数nと呼ぶことにする。また、車両が存在しない部分
にはラベル値として“−1”を割り当てる。その結果
は、後で図10により詳細に説明する。
ング手法を用いて次のような画素値を持つラベル画像を
作成する。まず、車両が存在する領域には、独立した集
合毎に“0”,“1”,“2”といった異なる番号を割
り当てる。異なる車両には異なるラベルを付け区別する
ためである。こうして割り当てられた領域の総数をラベ
ル数nと呼ぶことにする。また、車両が存在しない部分
にはラベル値として“−1”を割り当てる。その結果
は、後で図10により詳細に説明する。
【0048】テンプレート切り出し部34は、入力画像
3Bとラベル画像作成部33の出力するラベル画像33
Aを受け入れ、更に、ラベル画像記憶部35に記憶され
ている以前に記憶したラベル画像とを受け入れて、ラベ
ル画像の各ラベル領域の内容を調べる。そして、ここ
で、そのラベル領域に車両下部が含まれているかどうか
を判断する。車両下部が含まれていればテンプレートの
切り出しを行う。また、テンプレートを切り出す度に車
両カウントのための信号を生成する。こうして、テンプ
レート切り出し部34からテンプレート6Aと通過車両
信号6Bとが出力される。
3Bとラベル画像作成部33の出力するラベル画像33
Aを受け入れ、更に、ラベル画像記憶部35に記憶され
ている以前に記憶したラベル画像とを受け入れて、ラベ
ル画像の各ラベル領域の内容を調べる。そして、ここ
で、そのラベル領域に車両下部が含まれているかどうか
を判断する。車両下部が含まれていればテンプレートの
切り出しを行う。また、テンプレートを切り出す度に車
両カウントのための信号を生成する。こうして、テンプ
レート切り出し部34からテンプレート6Aと通過車両
信号6Bとが出力される。
【0049】図10には、ラベル画像の説明図を示す。
図に示すラベル画像33Aは、予め全体がラベル値“−
1”に初期化されている。これは、入力画像中の進入車
両検出領域の部分について作成される。図のハッチング
を示す部分に車両が検知されると、例えば図の左側のラ
ベル領域のラベル値を“0”とし、右側のラベル領域の
ラベル値を“1”とする。そして、各ラベル領域につい
て、その下端の状態を調べる。
図に示すラベル画像33Aは、予め全体がラベル値“−
1”に初期化されている。これは、入力画像中の進入車
両検出領域の部分について作成される。図のハッチング
を示す部分に車両が検知されると、例えば図の左側のラ
ベル領域のラベル値を“0”とし、右側のラベル領域の
ラベル値を“1”とする。そして、各ラベル領域につい
て、その下端の状態を調べる。
【0050】各ラベル領域の下端がラベル画像33Aの
下端から、画像中で例えばL1以上離れていれば、ラベ
ル画像33A中に車両下部の画像が含まれていると判断
する。この判断に基づいて、入力画像3Bから、このラ
ベル領域により特定される車両のイメージを切り出す。
こうして、車両下部を含むテンプレートを作成する。
下端から、画像中で例えばL1以上離れていれば、ラベ
ル画像33A中に車両下部の画像が含まれていると判断
する。この判断に基づいて、入力画像3Bから、このラ
ベル領域により特定される車両のイメージを切り出す。
こうして、車両下部を含むテンプレートを作成する。
【0051】テンプレートを切り出した後は、ラベル画
像のラベル値“0”のラベル領域を、テンプレート切り
出し済みという内容に切り換える。即ち、ラベル値を
“0”から例えば“−2”に変更する。従って、その後
はラベル値が“1”あるいはそれ以外のラベル値の部分
を探して、ラベル画像33Aの下端からL1だけ離れた
所にそのラベル領域の下端が存在するかどうかを判断す
る処理を繰り返す。
像のラベル値“0”のラベル領域を、テンプレート切り
出し済みという内容に切り換える。即ち、ラベル値を
“0”から例えば“−2”に変更する。従って、その後
はラベル値が“1”あるいはそれ以外のラベル値の部分
を探して、ラベル画像33Aの下端からL1だけ離れた
所にそのラベル領域の下端が存在するかどうかを判断す
る処理を繰り返す。
【0052】こうして書き替えられたラベル画像33A
は、テンプレート切り出し部34の出力34Aとなって
再びラベル画像記憶部35に記憶される。そして、続く
処理に使用される。
は、テンプレート切り出し部34の出力34Aとなって
再びラベル画像記憶部35に記憶される。そして、続く
処理に使用される。
【0053】以上が初期車両テンプレート作成部の概略
動作であるが、詳細な動作を次のフローチャートを用い
て説明する。図11は、初期車両テンプレート作成部の
動作フローチャートである。まず、ステップS1におい
て、ラベル画像作成部33からテンプレート切り出し部
34に、新たなラベル画像が入力する。ラベル数はnと
する。パラメータiを“0”に初期設定する。このパラ
メータiは、全てのラベル画像について処理を終了した
かどうかを判断するためのカウンタである。
動作であるが、詳細な動作を次のフローチャートを用い
て説明する。図11は、初期車両テンプレート作成部の
動作フローチャートである。まず、ステップS1におい
て、ラベル画像作成部33からテンプレート切り出し部
34に、新たなラベル画像が入力する。ラベル数はnと
する。パラメータiを“0”に初期設定する。このパラ
メータiは、全てのラベル画像について処理を終了した
かどうかを判断するためのカウンタである。
【0054】次のステップS3において、iがnよりも
小さいかどうかを判断し、小さければステップS4に進
む。ステップS4では、ラベル画像のラベル値がiであ
る領域について、ラベル画像記憶部35に既に格納され
ている直前のラベル画像の、どのラベル領域と対応して
いるかを調べる。新たなラベル画像中のラベル値がiの
ラベル領域が、直前のラベル画像中の対応するラベル領
域で、ラベル値が“−2”のものならば、ステップS1
2に進む。これは、既にテンプレートを作成済だから処
理をパスするためである。ここでは、ラベル領域(i)
の画素値を“−2”に変更する。なお、対応するラベル
領域を調べる方法として、ラベル領域(i)を直前のラ
ベル画像に重ね合わせたとき、重なった面積が閾値以上
のラベル領域が直前のラベル画像に存在すれば、それが
対応するラベル領域である。
小さいかどうかを判断し、小さければステップS4に進
む。ステップS4では、ラベル画像のラベル値がiであ
る領域について、ラベル画像記憶部35に既に格納され
ている直前のラベル画像の、どのラベル領域と対応して
いるかを調べる。新たなラベル画像中のラベル値がiの
ラベル領域が、直前のラベル画像中の対応するラベル領
域で、ラベル値が“−2”のものならば、ステップS1
2に進む。これは、既にテンプレートを作成済だから処
理をパスするためである。ここでは、ラベル領域(i)
の画素値を“−2”に変更する。なお、対応するラベル
領域を調べる方法として、ラベル領域(i)を直前のラ
ベル画像に重ね合わせたとき、重なった面積が閾値以上
のラベル領域が直前のラベル画像に存在すれば、それが
対応するラベル領域である。
【0055】それ以外の場合はステップS5に進み、ラ
ベル値iのラベル領域が進入車両検出領域の下端からL
1画素以上離れているかどうかを判断する。離れていれ
ば車両の下端が進入車両検出領域中に現れていると判断
し、ステップS6に進む。ここで、入力画像のラベル値
がiに該当する領域を切り出してテンプレートを作成す
る。そして、ステップS7に進み、テンプレートの評価
を行う。この評価は、具体的には左右対称であるか、テ
ールランプを含んでいるか等といった内容のものであ
る。
ベル値iのラベル領域が進入車両検出領域の下端からL
1画素以上離れているかどうかを判断する。離れていれ
ば車両の下端が進入車両検出領域中に現れていると判断
し、ステップS6に進む。ここで、入力画像のラベル値
がiに該当する領域を切り出してテンプレートを作成す
る。そして、ステップS7に進み、テンプレートの評価
を行う。この評価は、具体的には左右対称であるか、テ
ールランプを含んでいるか等といった内容のものであ
る。
【0056】なお、切り出し方法は、ラベル領域に該当
する部分そのままの形でもよいし、ラベル領域に外接す
る矩形でもよい。また、入力画像中で、ラベル領域の下
端の位置から一定のサイズ分を切り出すというようにし
てもよい。
する部分そのままの形でもよいし、ラベル領域に外接す
る矩形でもよい。また、入力画像中で、ラベル領域の下
端の位置から一定のサイズ分を切り出すというようにし
てもよい。
【0057】図12には、車両下部の評価動作説明図を
示す。図に示すように、車両15Aの下部からテンプレ
ート20を抽出した場合に、まず左右の対称性を調べ
る。これはテンプレートの横軸(水平方向の軸)の中心
から左右等距離の画素値の差分値を累積し、その累積値
Pをテンプレートの面積aで割った値B/aが一定の閾
値より小さいといった判断によって行うことができる。
左右対称であれば差分値は“0”になるからである。
示す。図に示すように、車両15Aの下部からテンプレ
ート20を抽出した場合に、まず左右の対称性を調べ
る。これはテンプレートの横軸(水平方向の軸)の中心
から左右等距離の画素値の差分値を累積し、その累積値
Pをテンプレートの面積aで割った値B/aが一定の閾
値より小さいといった判断によって行うことができる。
左右対称であれば差分値は“0”になるからである。
【0058】また、テールランプは車両下部に存在す
る。従って、テールランプ有無の判別は車両下部のテン
プレートを抽出したかどうかの評価につながる。この場
合、図に示すように、横方向(水平方向)の赤成分の色
分布を用いて、両端に閾値以上の暗い部分があるかどう
かという判定を行う。もし、画像が白黒の濃淡画像であ
ればテールランプは昼は黒く、夜は明るく写る。これを
利用すれば横方向の濃淡分布によって車両下部であるか
どうかの判断を行うことができる。
る。従って、テールランプ有無の判別は車両下部のテン
プレートを抽出したかどうかの評価につながる。この場
合、図に示すように、横方向(水平方向)の赤成分の色
分布を用いて、両端に閾値以上の暗い部分があるかどう
かという判定を行う。もし、画像が白黒の濃淡画像であ
ればテールランプは昼は黒く、夜は明るく写る。これを
利用すれば横方向の濃淡分布によって車両下部であるか
どうかの判断を行うことができる。
【0059】図13には、ラベル領域とテンプレートの
関係説明図を示す。図に示すように、ラベル画像36中
のあるラベル領域について、対応する入力画像3Bから
テンプレートを切り出す場合を考える。図の進入車両検
出領域16に対応させて、ラベル画像33Aが生成され
ている。この状態でラベル画像33A中で車両下部が検
知されたとする。この場合に、入力画像3Bからラベル
画像下端に相当する位置よりyより上方のhの高さ分の
領域を切り取り、テンプレート20を作成する。このh
は、車両下部を含む画像を切り出すことができる適当な
値を経験的に求めておいて決定すればよい。
関係説明図を示す。図に示すように、ラベル画像36中
のあるラベル領域について、対応する入力画像3Bから
テンプレートを切り出す場合を考える。図の進入車両検
出領域16に対応させて、ラベル画像33Aが生成され
ている。この状態でラベル画像33A中で車両下部が検
知されたとする。この場合に、入力画像3Bからラベル
画像下端に相当する位置よりyより上方のhの高さ分の
領域を切り取り、テンプレート20を作成する。このh
は、車両下部を含む画像を切り出すことができる適当な
値を経験的に求めておいて決定すればよい。
【0060】再び図11のフローチャートに戻って、ス
テップS8で、既に説明したようにテンプレートが車両
下部のものかどうかを判断する。ステップS9におい
て、車両下部のものであると判断されると、テンプレー
ト6Aと通過車両信号6Bとを出力する。テンプレート
6Aは、図1に示す車両テンプレート記憶部8に向けて
出力される。また、通過車両信号6Bは台数計測部7に
向けて出力される。
テップS8で、既に説明したようにテンプレートが車両
下部のものかどうかを判断する。ステップS9におい
て、車両下部のものであると判断されると、テンプレー
ト6Aと通過車両信号6Bとを出力する。テンプレート
6Aは、図1に示す車両テンプレート記憶部8に向けて
出力される。また、通過車両信号6Bは台数計測部7に
向けて出力される。
【0061】次のステップS10において、ラベル値が
iの領域の画素値を“−2”に変更する。こうしてテン
プレート抽出済みであることを表示した上でステップS
11に戻り、iをインクリメントする。その後は、ステ
ップS3から再び次の画像についての処理を行う。全て
の画像についての処理が終了すると、ステップS13に
進み、処理後のラベル画像をラベル画像記憶部35に記
憶する。
iの領域の画素値を“−2”に変更する。こうしてテン
プレート抽出済みであることを表示した上でステップS
11に戻り、iをインクリメントする。その後は、ステ
ップS3から再び次の画像についての処理を行う。全て
の画像についての処理が終了すると、ステップS13に
進み、処理後のラベル画像をラベル画像記憶部35に記
憶する。
【0062】〈車両追跡部〉次に、車両追跡部の動作に
ついて説明する。車両追跡部は、図1に示す車両テンプ
レート記憶部8に記憶された各車両に対応するテンプレ
ートを使用して、入力画像中の車両の位置を検出し、そ
の移動速度等を検知する処理を行う部分である。
ついて説明する。車両追跡部は、図1に示す車両テンプ
レート記憶部8に記憶された各車両に対応するテンプレ
ートを使用して、入力画像中の車両の位置を検出し、そ
の移動速度等を検知する処理を行う部分である。
【0063】図14に、車両追跡部9の動作原理を示す
テンプレートマッチングの説明図を示す。図に示すよう
に、入力画像3B中で車両15Aが移動するのを、図の
左側に示すテンプレート20を用いて検出する。入力画
像3Bは、一定の時間毎に更新される。新たに入力する
入力画像は、車両15Aが移動した内容のものである。
各入力画像について、テンプレート20を用いて、車両
の移動先の位置を検出する。これには、図に示すよう
に、テンプレート20を前後左右に動かすことによって
マッチングを行う。
テンプレートマッチングの説明図を示す。図に示すよう
に、入力画像3B中で車両15Aが移動するのを、図の
左側に示すテンプレート20を用いて検出する。入力画
像3Bは、一定の時間毎に更新される。新たに入力する
入力画像は、車両15Aが移動した内容のものである。
各入力画像について、テンプレート20を用いて、車両
の移動先の位置を検出する。これには、図に示すよう
に、テンプレート20を前後左右に動かすことによって
マッチングを行う。
【0064】具体的な処理としては、テンプレート
(i)即ち車両の識別番号がiの領域について、入力画
像との間の累積差分値を算出する。そして、累積差分値
が最小のときの移動量を出力する。これによって、画像
中の対応する車両の位置が検出される。入力画像毎にこ
の位置を検出して、そのつどテンプレートの移動量を調
べれば、車両の移動速度や移動状態を検出できる。
(i)即ち車両の識別番号がiの領域について、入力画
像との間の累積差分値を算出する。そして、累積差分値
が最小のときの移動量を出力する。これによって、画像
中の対応する車両の位置が検出される。入力画像毎にこ
の位置を検出して、そのつどテンプレートの移動量を調
べれば、車両の移動速度や移動状態を検出できる。
【0065】次に、車両追跡部の動作をフローチャート
を用いて説明する。図15は、車両追跡部の動作フロー
チャートである。まず、図1に示す車両追跡部9に新た
な入力画像3Aが入力し、入力画像中の各車両について
のテンプレートが車両テンプレート記憶部8に記憶され
ると、処理が開始される。
を用いて説明する。図15は、車両追跡部の動作フロー
チャートである。まず、図1に示す車両追跡部9に新た
な入力画像3Aが入力し、入力画像中の各車両について
のテンプレートが車両テンプレート記憶部8に記憶され
ると、処理が開始される。
【0066】始めにステップS1において、iを“0”
にリセットする。このiはテンプレートの識別をするた
めのパラメータである。即ち、ここではテンプレートが
T枚存在するものとする。ステップS2では、このTを
iが越えたかどうかを判断し、それ以下の場合にはステ
ップS3に進む。全てのテンプレートについて処理を終
了したかどうかの判断である。そして、ステップS3
で、識別番号iに該当するテンプレートが存在するかど
うかを判断する。存在しなければステップS10にジャ
ンプし、iをインクリメントして別のテンプレートを探
す。
にリセットする。このiはテンプレートの識別をするた
めのパラメータである。即ち、ここではテンプレートが
T枚存在するものとする。ステップS2では、このTを
iが越えたかどうかを判断し、それ以下の場合にはステ
ップS3に進む。全てのテンプレートについて処理を終
了したかどうかの判断である。そして、ステップS3
で、識別番号iに該当するテンプレートが存在するかど
うかを判断する。存在しなければステップS10にジャ
ンプし、iをインクリメントして別のテンプレートを探
す。
【0067】次のステップS4では、既に説明した要領
でテンプレートのマッチング処理を行う。ステップS5
では、マッチングスコアが閾値R0より良いかどうかを
判断する。図14で説明した差分累積値をテンプレート
の面積で割った値をマッチングスコアと呼ぶ。このマッ
チングスコアが閾値を越えているかどうかを判断する。
閾値以下であればテンプレート検出条件を満たしてい
る。マッチングスコアが小さいほど、入力画像とテンプ
レートとの合致性がよく、マッチングベクトルの信頼性
が高いことを示す。
でテンプレートのマッチング処理を行う。ステップS5
では、マッチングスコアが閾値R0より良いかどうかを
判断する。図14で説明した差分累積値をテンプレート
の面積で割った値をマッチングスコアと呼ぶ。このマッ
チングスコアが閾値を越えているかどうかを判断する。
閾値以下であればテンプレート検出条件を満たしてい
る。マッチングスコアが小さいほど、入力画像とテンプ
レートとの合致性がよく、マッチングベクトルの信頼性
が高いことを示す。
【0068】ステップS5でマッチングベクトルが出力
されると、ステップS7に進み、車両が追跡打ち切りラ
インを越えたかどうか判断する。車両の検出位置が図3
に示した追跡打ち切りライン18を越えるまで,この処
理が繰り返される。その後、テンプレート(i)が更新
条件を満たしているかどうかを判断する。車両の移動に
従って、同一の車両の画像が次第に小さくなる。これに
応じて、テンプレートもサイズを縮めるように調整す
る。これがテンプレートの更新である。
されると、ステップS7に進み、車両が追跡打ち切りラ
インを越えたかどうか判断する。車両の検出位置が図3
に示した追跡打ち切りライン18を越えるまで,この処
理が繰り返される。その後、テンプレート(i)が更新
条件を満たしているかどうかを判断する。車両の移動に
従って、同一の車両の画像が次第に小さくなる。これに
応じて、テンプレートもサイズを縮めるように調整す
る。これがテンプレートの更新である。
【0069】テンプレートの更新条件は、マッチングス
コアがステップS5で用いた閾値より少し大きい閾値R
1よりも大きいかどうかを判断して決める。車両の移動
とともにマッチングスコアが少し悪くなってくることを
利用する。また、マッチングベクトルの、上下方向のサ
イズが閾値LVよりも大きいかどうかを判断する。上下
方向の移動量とテンプレートの縮小率とは一定の関係に
あるからである。いずれの条件も満たしていればテンプ
レートの形が変わってきているので、テンプレートを更
新する(ステップS9)。更新する必要が無い場合に
は、ステップS10に戻って、他のテンプレートマッチ
ング処理に移る。
コアがステップS5で用いた閾値より少し大きい閾値R
1よりも大きいかどうかを判断して決める。車両の移動
とともにマッチングスコアが少し悪くなってくることを
利用する。また、マッチングベクトルの、上下方向のサ
イズが閾値LVよりも大きいかどうかを判断する。上下
方向の移動量とテンプレートの縮小率とは一定の関係に
あるからである。いずれの条件も満たしていればテンプ
レートの形が変わってきているので、テンプレートを更
新する(ステップS9)。更新する必要が無い場合に
は、ステップS10に戻って、他のテンプレートマッチ
ング処理に移る。
【0070】ステップS9のテンプレート更新処理で
は、これまでのテンプレートをマッチングベクトル分だ
け動かして、入力画像上に重ねる。そして、その移動量
に応じてテンプレートの枠サイズを縮小し、そのサイズ
の画像を入力画像から切り出す。切り出した画像を新た
なテンプレートとする。このテンプレートとその位置と
を図1に示した車両テンプレート記憶部8に記憶して、
これまでのテンプレートを消去する。なお、ステップS
7で、追跡打ち切りライン18を越えたと判断された場
合には、該当するテンプレートは使用済みのため、ステ
ップS11において、これを消去する。
は、これまでのテンプレートをマッチングベクトル分だ
け動かして、入力画像上に重ねる。そして、その移動量
に応じてテンプレートの枠サイズを縮小し、そのサイズ
の画像を入力画像から切り出す。切り出した画像を新た
なテンプレートとする。このテンプレートとその位置と
を図1に示した車両テンプレート記憶部8に記憶して、
これまでのテンプレートを消去する。なお、ステップS
7で、追跡打ち切りライン18を越えたと判断された場
合には、該当するテンプレートは使用済みのため、ステ
ップS11において、これを消去する。
【0071】図16に、テンプレート縮小法の説明図を
示す。図に示す入力画像3Aについて、例えば図のよう
に縦方向にZ軸を設定する。そして、この軸上の位置を
図に示すようにh0,h1,0,hvというように設定
する。0の部分をZ軸の原点とする。ここで、移動前の
テンプレートの位置をP0、移動後のテンプレートの位
置をP1とする。このように手前から奥へ向かって即ち
h0からh1の位置に向かって車両が移動すると、遠近
法の関係で、車両の画像が小さくなる。
示す。図に示す入力画像3Aについて、例えば図のよう
に縦方向にZ軸を設定する。そして、この軸上の位置を
図に示すようにh0,h1,0,hvというように設定
する。0の部分をZ軸の原点とする。ここで、移動前の
テンプレートの位置をP0、移動後のテンプレートの位
置をP1とする。このように手前から奥へ向かって即ち
h0からh1の位置に向かって車両が移動すると、遠近
法の関係で、車両の画像が小さくなる。
【0072】従って、車両の位置を検出するためのテン
プレートも移動前のものと移動後のものとではサイズを
変更する必要がある。そこでテンプレートの縮小を行
う。この縮小率は次の式(2)に示すようになる。 R(h0,h1)=(h1−hv)/(h0−hv) …(2) R(h0,h1)は、h0からh1の位置へ車両が移動
したときのテンプレート縮小率である。(h1−hv)
はh1からhvまでの長さで、(h0−hv)はh0か
らhvまでの長さである。車両の追跡にあたっては、こ
うした処理も考慮して移動ベクトルを検出する。
プレートも移動前のものと移動後のものとではサイズを
変更する必要がある。そこでテンプレートの縮小を行
う。この縮小率は次の式(2)に示すようになる。 R(h0,h1)=(h1−hv)/(h0−hv) …(2) R(h0,h1)は、h0からh1の位置へ車両が移動
したときのテンプレート縮小率である。(h1−hv)
はh1からhvまでの長さで、(h0−hv)はh0か
らhvまでの長さである。車両の追跡にあたっては、こ
うした処理も考慮して移動ベクトルを検出する。
【0073】〈速度測定部〉上記のような移動ベクトル
が検出されると、今度はその間の距離と時間の関係によ
って移動体の移動速度即ち車両の移動速度を測定でき
る。
が検出されると、今度はその間の距離と時間の関係によ
って移動体の移動速度即ち車両の移動速度を測定でき
る。
【0074】図17には、速度測定部の動作説明図を示
す。既に図2を用いて説明したように、画像センサ1は
監視領域14を例えばこの図に示すように高さHの位置
から斜めに見下ろすように撮影している。図の(b)に
示した入力画像3中の各車両の位置情報を含むマッチン
グベクトルから車両の速度を求める。ある車両の速度を
Sとする。この場合、異なる時間t1,t2に取得した
入力画像中の車両の位置をL(t1),L(t2)とす
ると、車両の速度sは次の(4)式で求めることができ
る。 S=(L(t2)−L(t1))/(t2−t1) …(3)
す。既に図2を用いて説明したように、画像センサ1は
監視領域14を例えばこの図に示すように高さHの位置
から斜めに見下ろすように撮影している。図の(b)に
示した入力画像3中の各車両の位置情報を含むマッチン
グベクトルから車両の速度を求める。ある車両の速度を
Sとする。この場合、異なる時間t1,t2に取得した
入力画像中の車両の位置をL(t1),L(t2)とす
ると、車両の速度sは次の(4)式で求めることができ
る。 S=(L(t2)−L(t1))/(t2−t1) …(3)
【0075】入力画像3中の車両の位置から、車両の道
路上の位置を求めるには次のようにする。今、カメラの
設置位置と監視領域14(これが道路の路面に相当す
る)の関係は、図17(a)に示すような状態であると
する。車両がRmの位置にいる場合の俯角がθmである
とする。図17(b)に示す入力画像3A中の、中央ラ
インLmの実際の位置は、図17(a)の画像センサ1
から水平方向にRm離れた位置である。
路上の位置を求めるには次のようにする。今、カメラの
設置位置と監視領域14(これが道路の路面に相当す
る)の関係は、図17(a)に示すような状態であると
する。車両がRmの位置にいる場合の俯角がθmである
とする。図17(b)に示す入力画像3A中の、中央ラ
インLmの実際の位置は、図17(a)の画像センサ1
から水平方向にRm離れた位置である。
【0076】また、(b)の入力画面中で、最初に進入
を検出されたときの車両の位置はLoである。この入力
画面上で画像センサ1とラインLmとの間の距離はOM
である。(b)に示すラインLoの道路上の位置は、
(a)に示す画像センサ1の直下から水平方向にRo離
れた位置である。画像センサ1とこのRoとを結ぶ線と
水平方向の線とのなす角を図に示すようにθoとする。
を検出されたときの車両の位置はLoである。この入力
画面上で画像センサ1とラインLmとの間の距離はOM
である。(b)に示すラインLoの道路上の位置は、
(a)に示す画像センサ1の直下から水平方向にRo離
れた位置である。画像センサ1とこのRoとを結ぶ線と
水平方向の線とのなす角を図に示すようにθoとする。
【0077】このとき、(b)に示す入力画像3Aのラ
インRoからLx離れたところにある車両の道路上の位
置Rxは、次の(4)式によって求めることができる。 Rx=H・tan[π/2−θm−tan-1{A・tan(θo−θm)/OM−Lx }] …(4) ただしθm=tan-1(H/Rm),θo=tan-1(H/R
o)である。
インRoからLx離れたところにある車両の道路上の位
置Rxは、次の(4)式によって求めることができる。 Rx=H・tan[π/2−θm−tan-1{A・tan(θo−θm)/OM−Lx }] …(4) ただしθm=tan-1(H/Rm),θo=tan-1(H/R
o)である。
【0078】図18には、速度測定部の動作説明図(そ
の2)を示す。この図の(a)には、監視領域14の移
動体の位置を、Ra(i)、(i=0,1,2,3,
…)というように表現している。この位置を図の(b)
の入力画像3A中にa(i)、i=0,1,2,…とい
うように表示した。このように、予め実際の位置と入力
画像上との位置との関係を求めておけば、任意の位置X
で車両が検出された場合、よく知られた例えばスプライ
ン補間等の補間アルゴリズムを用いて実際の位置を正確
に計算することができる。
の2)を示す。この図の(a)には、監視領域14の移
動体の位置を、Ra(i)、(i=0,1,2,3,
…)というように表現している。この位置を図の(b)
の入力画像3A中にa(i)、i=0,1,2,…とい
うように表示した。このように、予め実際の位置と入力
画像上との位置との関係を求めておけば、任意の位置X
で車両が検出された場合、よく知られた例えばスプライ
ン補間等の補間アルゴリズムを用いて実際の位置を正確
に計算することができる。
【0079】このようにして実際の位置を計算し、移動
体即ち車両の移動距離を計算し、その間に経過した時間
即ち入力画像の切り換え周期(フレーム周期)を元にし
た時間で換算すれば移動体の速度が求められる。
体即ち車両の移動距離を計算し、その間に経過した時間
即ち入力画像の切り換え周期(フレーム周期)を元にし
た時間で換算すれば移動体の速度が求められる。
【0080】〈走行判定部〉上記のように、車両の速度
等を計算すると、実際にその車両の移動ベクトルを調べ
ることによって、車両の走行状態が解析できる。図19
には、走行判定部の動作説明図を示す。この図の、例え
ば車両15Aが矢印K1方向に進行している場合と、矢
印K2方向に進行している場合がある。同一のレーンを
矢印K1方向に移動していれば正常、矢印K2方向に、
車線を切り替えたような場合、これを異常と判定する。
こうした結果は様々な場合に利用できる。
等を計算すると、実際にその車両の移動ベクトルを調べ
ることによって、車両の走行状態が解析できる。図19
には、走行判定部の動作説明図を示す。この図の、例え
ば車両15Aが矢印K1方向に進行している場合と、矢
印K2方向に進行している場合がある。同一のレーンを
矢印K1方向に移動していれば正常、矢印K2方向に、
車線を切り替えたような場合、これを異常と判定する。
こうした結果は様々な場合に利用できる。
【0081】〈変形例〉図20には、本発明による移動
体検知装置の変形例ブロック図を示す。この図の装置
は、図1に示した装置に対し、フレーム周期制御部12
を追加したものである。その他の部分は同一の構成であ
り、同一の符号を付した。
体検知装置の変形例ブロック図を示す。この図の装置
は、図1に示した装置に対し、フレーム周期制御部12
を追加したものである。その他の部分は同一の構成であ
り、同一の符号を付した。
【0082】このフレーム周期制御部12は、車両テン
プレート記憶部8に記憶されている車両テンプレート
数、即ち進入車両検出領域から追跡打ち切りラインの間
に存在する車両の台数や、速度測定部10から出力され
た各車両の速度情報を受け入れて動作する。そして、車
両の速度や車両の台数に見合ったフレーム周期を決定
し、入力画像記憶部3や速度設定部10に制御信号を出
力する。
プレート記憶部8に記憶されている車両テンプレート
数、即ち進入車両検出領域から追跡打ち切りラインの間
に存在する車両の台数や、速度測定部10から出力され
た各車両の速度情報を受け入れて動作する。そして、車
両の速度や車両の台数に見合ったフレーム周期を決定
し、入力画像記憶部3や速度設定部10に制御信号を出
力する。
【0083】例えば、車両の速度が非常に速い場合、短
い間隔で車両を追跡し、短い周期で入力画面を切り換え
ながら移動ベクトルを求めなければならない。一方、車
両の速度が十分に遅い場合には、速い周期でフレームを
切り換えても無駄な演算処理が増えて負荷が増大する。
フレーム周期を長くして効率よく処理をすることが好ま
しい。
い間隔で車両を追跡し、短い周期で入力画面を切り換え
ながら移動ベクトルを求めなければならない。一方、車
両の速度が十分に遅い場合には、速い周期でフレームを
切り換えても無駄な演算処理が増えて負荷が増大する。
フレーム周期を長くして効率よく処理をすることが好ま
しい。
【0084】また、車両を検出すべき領域中に存在する
車両数即ち車両テンプレートの数が多い場合には、1枚
のフレームを処理するための演算処理時間が長くなるた
め、フレーム周期をやや長く設定しないと演算処理が間
に合わない。こうしたケースを考慮して、フレーム周期
の最適化を図ることにより効率のよい車両検知が可能に
なる。
車両数即ち車両テンプレートの数が多い場合には、1枚
のフレームを処理するための演算処理時間が長くなるた
め、フレーム周期をやや長く設定しないと演算処理が間
に合わない。こうしたケースを考慮して、フレーム周期
の最適化を図ることにより効率のよい車両検知が可能に
なる。
【0085】フレーム周期制御部12は、例えば車両テ
ンプレートの数が“0”の場合、予め設定した標準フレ
ーム周期をCとしたとき、2倍の2Cにフレーム周期を
変更する。また、追跡している全ての車両の最大速度が
ある閾値以下という判断がされると、同様にフレーム周
期を2Cにする。一方、車両テンプレートの数がある閾
値以上になったときは、フレーム周期をC/2にする。
ンプレートの数が“0”の場合、予め設定した標準フレ
ーム周期をCとしたとき、2倍の2Cにフレーム周期を
変更する。また、追跡している全ての車両の最大速度が
ある閾値以下という判断がされると、同様にフレーム周
期を2Cにする。一方、車両テンプレートの数がある閾
値以上になったときは、フレーム周期をC/2にする。
【0086】入力画像記憶部3は、画像センサ1から一
定のフレーム周期Cで入力画像2を受け入れている。例
えばフレーム周期を長くする場合には、2回に1回入力
画像を選択して記憶するように制御する。フレーム周期
を3倍にするときは3回に1回入力画像を記憶し、その
他の入力画像は廃棄する。このようにして、フレーム周
期を制御し、適切な速度で処理を行うことができる。
定のフレーム周期Cで入力画像2を受け入れている。例
えばフレーム周期を長くする場合には、2回に1回入力
画像を選択して記憶するように制御する。フレーム周期
を3倍にするときは3回に1回入力画像を記憶し、その
他の入力画像は廃棄する。このようにして、フレーム周
期を制御し、適切な速度で処理を行うことができる。
【0087】なお、上記の各機能ブロックの動作のため
に様々な閾値を設定したが、これらは、監視領域の日照
条件、天候条件、その他の条件によって自由に変更して
最適化することができる。また、例えばトンネル等、背
景画像の変動が少ないような部分では、背景画像を更新
しないで、固定するような制御を行ってもよい。更に、
進入車両検出領域を複数にすることも可能である。
に様々な閾値を設定したが、これらは、監視領域の日照
条件、天候条件、その他の条件によって自由に変更して
最適化することができる。また、例えばトンネル等、背
景画像の変動が少ないような部分では、背景画像を更新
しないで、固定するような制御を行ってもよい。更に、
進入車両検出領域を複数にすることも可能である。
【0088】図21には、複数の進入車両検出領域の説
明図を示す。この図に示すように、入力画像3に、これ
までは1つの進入車両検出領域を設定していた。しかし
ながら、ここでは図に示すように、2つの進入車両検出
領域40,41を設定している。このように、車線毎に
別々の進入車両検出領域を設けて、これまで説明した処
理を行うようにしても差し支えない。更に、上記の説明
では、移動体の例として道路上を走行する車両を挙げ、
車両下部の画像を含むテンプレートを得るように説明し
た。しかしながら、移動体の種類によって、その特徴部
分は異なるから、下部に限定されることなく、移動体毎
に、その特定部分を指定してテンプレートの作成を行う
ようにすることができる。
明図を示す。この図に示すように、入力画像3に、これ
までは1つの進入車両検出領域を設定していた。しかし
ながら、ここでは図に示すように、2つの進入車両検出
領域40,41を設定している。このように、車線毎に
別々の進入車両検出領域を設けて、これまで説明した処
理を行うようにしても差し支えない。更に、上記の説明
では、移動体の例として道路上を走行する車両を挙げ、
車両下部の画像を含むテンプレートを得るように説明し
た。しかしながら、移動体の種類によって、その特徴部
分は異なるから、下部に限定されることなく、移動体毎
に、その特定部分を指定してテンプレートの作成を行う
ようにすることができる。
【0089】
【発明の効果】上記のように、入力画像から追跡すべき
移動体のテンプレートを作成する場合に、背景との差分
値を求めて対象を特定すると、車両が複数に分離される
ことがない。更に、車両下部の特徴を意識して、車両下
部を中心にしたテンプレートを切り出すようにすれば、
誤検出を防止することができる。また、進入車両検出領
域を上記のように入力画面の下方に設定すれば、前後の
車両が画面内で重なり合う前に車両の進入やテンプレー
トの切り出しが行える。
移動体のテンプレートを作成する場合に、背景との差分
値を求めて対象を特定すると、車両が複数に分離される
ことがない。更に、車両下部の特徴を意識して、車両下
部を中心にしたテンプレートを切り出すようにすれば、
誤検出を防止することができる。また、進入車両検出領
域を上記のように入力画面の下方に設定すれば、前後の
車両が画面内で重なり合う前に車両の進入やテンプレー
トの切り出しが行える。
【0090】更に、車両が画面に進入したかどうかの判
断を時間的に前後する入力画面の差分値を元にして行え
ば、背景画像の様々な変動に影響されず、車両の移動判
定を正確に行うことができる。
断を時間的に前後する入力画面の差分値を元にして行え
ば、背景画像の様々な変動に影響されず、車両の移動判
定を正確に行うことができる。
【図1】本発明による移動体検知装置のブロック図であ
る。
る。
【図2】入力画像の内容説明図である。
【図3】進入車両検出領域の説明図である。
【図4】車両検出方法の説明図である。
【図5】テンプレートの説明図である。
【図6】大型車両の問題点説明図である。
【図7】進入車両検出部のブロック図である。
【図8】進入車両検出部の動作説明図である。
【図9】初期車両テンプレート作成部のブロック図であ
る。
る。
【図10】ラベル画像の説明図である。
【図11】初期車両テンプレート作成部の動作フローチ
ャートである。
ャートである。
【図12】車両下部の評価動作説明図である。
【図13】テンプレート切り出し方法の説明図である。
【図14】テンプレートマッチングの説明図である。
【図15】車両追跡部の動作フローチャートである。
【図16】テンプレート縮小法の説明図である。
【図17】速度測定部の動作説明図(その1)である。
【図18】速度測定部の動作説明図(その2)である。
【図19】走行判定部の動作説明図である。
【図20】本発明による移動体検知装置の変形例ブロッ
ク図である。
ク図である。
【図21】2つの進入車両検出領域の説明図である。
1 画像センサ 2 入力画像 3 入力画像記憶部 4 進入車両検出部(進入検出部) 5 背景作成部 6 初期車両テンプレート作成部(テンプレート作成
部) 7 台数計測部 8 車両テンプレート記憶部(テンプレート記憶部) 9 車両追跡部(追跡部) 10 速度測定部 11 走行判定部
部) 7 台数計測部 8 車両テンプレート記憶部(テンプレート記憶部) 9 車両追跡部(追跡部) 10 速度測定部 11 走行判定部
Claims (13)
- 【請求項1】 一定の監視領域の画像を取得する画像セ
ンサと、 この画像センサが取得した画像を解析して、前記監視領
域に進入する移動体の検出処理をする進入検出部とを備
え、 この進入検出部は、 前記画像センサが時間的に異なるタイミングで順に取得
した入力画像を第1の画像と第2の画像と第3の画像と
して受け入れ、 第1の画像と第2の画像の差分値と、第2の画像と第3
の画像の差分値とを求めて、前記両差分値の論理積演算
により得た画像データ中に、一定量以上の有意データが
存在すれば、前記監視領域に移動体が進入したと判断す
ることを特徴とする移動体検知装置。 - 【請求項2】 請求項1に記載の移動体検知装置におい
て、 進入検出部が、論理積演算の結果監視領域に移動体が進
入していないと判断したとき、その都度、比較処理のた
めに保存されている監視領域の背景画像を更新する背景
作成部を備えたことを特徴とする移動体検知装置。 - 【請求項3】 一定の監視領域の画像を取得する画像セ
ンサと、 この画像センサが取得した画像を解析して、前記監視領
域に進入する移動体の検出処理をする進入検出部と、 この進入検出部が移動体を検出したとき、移動体のいな
いときの背景画像と入力画像との差分値から移動体の下
部の画像を取り出して、テンプレートを作成するテンプ
レート作成部を備えたことを特徴とする移動体検知装
置。 - 【請求項4】 一定の監視領域の画像を取得する画像セ
ンサと、 この画像センサが取得した画像を解析して、前記監視領
域に進入する移動体の検出処理をする進入検出部と、 この進入検出部が移動体を検出したとき、入力画像から
移動体の特定部位の画像を取り出してテンプレートを作
成するテンプレート作成部を備えたことを特徴とする移
動体検知装置。 - 【請求項5】 請求項3に記載の移動体検知装置におい
て、 テンプレート作成部は、 画像中に検出された複数の移動体にそれぞれ各移動体を
区別するためのラベル値を付与した、ラベル画像を作成
して、このラベル画像に含まれる同一のラベル値を持つ
ラベル領域の、少なくとも下端を含む部分を切り出して
テンプレートを作成することを特徴とする移動体検知装
置。 - 【請求項6】 請求項5に記載の移動体検知装置におい
て、 テンプレート作成部は、 テンプレートを作成した後は、当該移動体のためのラベ
ル領域のラベル値を無効にして、未だテンプレートを作
成していない移動体のためのラベル領域と区別すること
を特徴とする移動体検知装置。 - 【請求項7】 請求項3に記載の移動体検知装置におい
て、 テンプレート作成部は、 入力画像から移動体の下端の画像を検出して、入力画像
の下端から移動体の下端までの画像中の距離が閾値以上
のとき、その移動体のテンプレートを作成することを特
徴とする移動体検知装置。 - 【請求項8】 請求項3に記載の移動体検知装置におい
て、 テンプレート作成部は、 入力画像中の進入車両検出領域から移動体の下端の画像
を検出して、進入車両検出領域の下端から移動体の下端
までの画像中の距離が閾値以上のとき、前記入力画像か
らその移動体の下部の画像を切り出してテンプレートを
作成することを特徴とする移動体検知装置。 - 【請求項9】 請求項3に記載の移動体検知装置におい
て、 入力画像から移動体の画像を検出したとき、水平方向に
見た画像の色もしくは輝度分布が所定の条件を満たす部
分を、移動体の下部と判定することを特徴とする移動体
検知装置。 - 【請求項10】 一定の監視領域の画像を所定のフレー
ム周期で取得する画像センサと、 この画像センサが時間的に異なるタイミングで取得した
複数の監視領域の画像について、その差分値を求めて解
析し、前記監視領域に進入する移動体の検出処理をする
進入検出部と、 この進入検出部が移動体を検出したとき、入力画像から
移動体の下部の画像を取り出してテンプレートを作成す
るテンプレート作成部と、 前記画像センサが時間的に異なるタイミングで取得した
複数の監視領域の画像中で、前記テンプレートを用いた
マッチング処理をして移動体の移動量を検出する追跡部
と、 前記追跡部の検出した移動体の移動量と前記フレーム周
期とから、移動体の移動速度を求める速度測定部とを備
えたことを特徴とする移動体検知装置。 - 【請求項11】 請求項10に記載の移動体検知装置に
おいて、 追跡部は、テンプレートの数が多いほど短いフレーム周
期で入力画像を受け入れ、テンプレートの数が少ないほ
ど長いフレーム周期で入力画像を受け入れることを特徴
とする移動体検知装置。 - 【請求項12】 請求項10に記載の移動体検知装置に
おいて、 追跡部は、入力画像中に検出された移動体の移動速度が
速いほど短いフレーム周期で入力画像を受け入れ、移動
速度が遅いほど長いフレーム周期で入力画像を受け入れ
ることを特徴とする移動体検知装置。 - 【請求項13】 一定の監視領域の画像を取得する画像
センサと、 この画像センサが時間的に異なるタイミングで取得した
複数の監視領域の画像について、その差分値を求めて解
析し、前記監視領域に進入する移動体の検出処理をする
進入検出部と、 この進入検出部が移動体を検出したとき、入力画像から
移動体の下部の画像を取り出してテンプレートを作成す
るテンプレート作成部と、 前記画像センサが時間的に異なるタイミングで取得した
複数の監視領域の画像中で、前記テンプレートを用いた
マッチング処理をして移動体の移動量を検出する追跡部
と、 前記追跡部の検出した移動体の移動量と前記フレーム周
期とから、移動体の移動速度を求める速度測定部とを備
えたことを特徴とする移動体検知装置。前記画像センサ
が時間的に異なるタイミングで取得した複数の監視領域
の画像の加重平均処理により、監視画像中に移動体のい
ない背景画像を得る背景作成部を備えたことを特徴とす
る移動体検知装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10336798A JPH11284997A (ja) | 1998-03-31 | 1998-03-31 | 移動体検知装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10336798A JPH11284997A (ja) | 1998-03-31 | 1998-03-31 | 移動体検知装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH11284997A true JPH11284997A (ja) | 1999-10-15 |
Family
ID=14352157
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP10336798A Pending JPH11284997A (ja) | 1998-03-31 | 1998-03-31 | 移動体検知装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH11284997A (ja) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002358595A (ja) * | 2001-06-01 | 2002-12-13 | Mitsubishi Electric Corp | 道路交通流計測装置および道路交通流計測方法 |
JP2003173435A (ja) * | 2001-12-06 | 2003-06-20 | Tietech Co Ltd | 移動体検出方法及び移動体検出装置 |
JP2003196786A (ja) * | 2001-12-26 | 2003-07-11 | Tietech Co Ltd | 移動体検出方法及び移動体検出装置 |
JP2004112144A (ja) * | 2002-09-17 | 2004-04-08 | Nissan Motor Co Ltd | 前方車両追跡システムおよび前方車両追跡方法 |
JP2005236508A (ja) * | 2004-02-18 | 2005-09-02 | Matsushita Electric Ind Co Ltd | 自動追尾装置及び自動追尾方法 |
JP2005250910A (ja) * | 2004-03-04 | 2005-09-15 | Keio Gijuku | 移動物体検出方法及び移動物体検出システム |
JP2005300322A (ja) * | 2004-04-09 | 2005-10-27 | Nikon Corp | 位置検出装置 |
JP2006018339A (ja) * | 2004-06-30 | 2006-01-19 | Hitachi Ltd | ナンバープレート認識装置及び方法 |
JP2007115056A (ja) * | 2005-10-20 | 2007-05-10 | Ikegami Tsushinki Co Ltd | 速度計測装置、方法及びプログラム |
JP2007148907A (ja) * | 2005-11-29 | 2007-06-14 | Ikegami Tsushinki Co Ltd | 速度計測装置、方法及びプログラム |
JP2007293487A (ja) * | 2006-04-24 | 2007-11-08 | Honda Motor Co Ltd | 車両の周辺監視装置、車両、車両の周辺監視方法、並びに車両の周辺監視用プログラム |
WO2008020544A1 (en) * | 2006-08-18 | 2008-02-21 | Nec Corporation | Vehicle detection device, vehicle detection method, and vehicle detection program |
US7372994B2 (en) | 2003-03-03 | 2008-05-13 | Matsushita Electric Works, Ltd. | Image processing device for recognizing outline of moving target and method therefor |
US7834305B2 (en) | 2004-07-30 | 2010-11-16 | Panasonic Electric Works Co., Ltd. | Image processing device |
JP2011008505A (ja) * | 2009-06-25 | 2011-01-13 | Mitsubishi Electric Corp | 車両検知装置、交通情報提供システム、車両検知方法および車両検知プログラム |
JP2014059655A (ja) * | 2012-09-14 | 2014-04-03 | Toshiba Corp | 道路状況監視装置、及び道路状況監視方法 |
JP2020017804A (ja) * | 2018-07-23 | 2020-01-30 | 株式会社チャオ | 画像伝送装置、画像伝送方法および画像伝送プログラム |
KR20230066953A (ko) * | 2021-11-08 | 2023-05-16 | 세종대학교산학협력단 | 다중 cctv 비디오를 이용한 교통 정체 전파 패턴 분석 방법 및 장치 |
-
1998
- 1998-03-31 JP JP10336798A patent/JPH11284997A/ja active Pending
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002358595A (ja) * | 2001-06-01 | 2002-12-13 | Mitsubishi Electric Corp | 道路交通流計測装置および道路交通流計測方法 |
JP2003173435A (ja) * | 2001-12-06 | 2003-06-20 | Tietech Co Ltd | 移動体検出方法及び移動体検出装置 |
JP2003196786A (ja) * | 2001-12-26 | 2003-07-11 | Tietech Co Ltd | 移動体検出方法及び移動体検出装置 |
JP2004112144A (ja) * | 2002-09-17 | 2004-04-08 | Nissan Motor Co Ltd | 前方車両追跡システムおよび前方車両追跡方法 |
US7372994B2 (en) | 2003-03-03 | 2008-05-13 | Matsushita Electric Works, Ltd. | Image processing device for recognizing outline of moving target and method therefor |
JP2005236508A (ja) * | 2004-02-18 | 2005-09-02 | Matsushita Electric Ind Co Ltd | 自動追尾装置及び自動追尾方法 |
JP2005250910A (ja) * | 2004-03-04 | 2005-09-15 | Keio Gijuku | 移動物体検出方法及び移動物体検出システム |
JP4500563B2 (ja) * | 2004-03-04 | 2010-07-14 | 学校法人慶應義塾 | 車両検出方法及び車両検出システム |
JP2005300322A (ja) * | 2004-04-09 | 2005-10-27 | Nikon Corp | 位置検出装置 |
JP2006018339A (ja) * | 2004-06-30 | 2006-01-19 | Hitachi Ltd | ナンバープレート認識装置及び方法 |
EP2312336A1 (en) | 2004-07-30 | 2011-04-20 | Panasonic Electric Works Co., Ltd | Image processing device |
US7834305B2 (en) | 2004-07-30 | 2010-11-16 | Panasonic Electric Works Co., Ltd. | Image processing device |
JP2007115056A (ja) * | 2005-10-20 | 2007-05-10 | Ikegami Tsushinki Co Ltd | 速度計測装置、方法及びプログラム |
JP4731276B2 (ja) * | 2005-10-20 | 2011-07-20 | 池上通信機株式会社 | 速度計測装置、方法及びプログラム |
JP2007148907A (ja) * | 2005-11-29 | 2007-06-14 | Ikegami Tsushinki Co Ltd | 速度計測装置、方法及びプログラム |
JP2007293487A (ja) * | 2006-04-24 | 2007-11-08 | Honda Motor Co Ltd | 車両の周辺監視装置、車両、車両の周辺監視方法、並びに車両の周辺監視用プログラム |
WO2008020544A1 (en) * | 2006-08-18 | 2008-02-21 | Nec Corporation | Vehicle detection device, vehicle detection method, and vehicle detection program |
JP5223675B2 (ja) * | 2006-08-18 | 2013-06-26 | 日本電気株式会社 | 車両検知装置,車両検知方法並びに車両検知プログラム |
US8599257B2 (en) | 2006-08-18 | 2013-12-03 | Nec Corporation | Vehicle detection device, vehicle detection method, and vehicle detection program |
JP2011008505A (ja) * | 2009-06-25 | 2011-01-13 | Mitsubishi Electric Corp | 車両検知装置、交通情報提供システム、車両検知方法および車両検知プログラム |
JP2014059655A (ja) * | 2012-09-14 | 2014-04-03 | Toshiba Corp | 道路状況監視装置、及び道路状況監視方法 |
JP2020017804A (ja) * | 2018-07-23 | 2020-01-30 | 株式会社チャオ | 画像伝送装置、画像伝送方法および画像伝送プログラム |
KR20230066953A (ko) * | 2021-11-08 | 2023-05-16 | 세종대학교산학협력단 | 다중 cctv 비디오를 이용한 교통 정체 전파 패턴 분석 방법 및 장치 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JPH11284997A (ja) | 移動体検知装置 | |
JP3503230B2 (ja) | 夜間用車両認識装置 | |
EP0567059B1 (en) | Object recognition system using image processing | |
US5862508A (en) | Moving object detection apparatus | |
JP5815910B2 (ja) | マルチキュー・オブジェクトの検出および分析のための方法、システム、製品、およびコンピュータ・プログラム(マルチキュー・オブジェクトの検出および分析) | |
JP3756452B2 (ja) | 赤外線画像処理装置 | |
US7577274B2 (en) | System and method for counting cars at night | |
JPH08241414A (ja) | 動物体検出・追跡装置と閾値決定装置 | |
JPH07210795A (ja) | 画像式交通流計測方法と装置 | |
CN103164685A (zh) | 车灯检测方法和车灯检测设备 | |
KR101809088B1 (ko) | 전방 차량 추돌 알림 장치 및 방법 | |
CN110660225A (zh) | 闯红灯行为检测方法、装置和设备 | |
Kanhere et al. | Real-time detection and tracking of vehicle base fronts for measuring traffic counts and speeds on highways | |
JP3294468B2 (ja) | 映像監視装置における物体検出方法 | |
Siyal et al. | Image processing techniques for real-time qualitative road traffic data analysis | |
JP3729005B2 (ja) | 車両の後方監視装置 | |
JP2940296B2 (ja) | 駐車車両検出方法 | |
JPH10269492A (ja) | 車両監視装置 | |
JP3771729B2 (ja) | 交通流計測システム | |
JPH10307988A (ja) | 交通流監視装置 | |
JP2841640B2 (ja) | 交通流計測装置 | |
Yu et al. | Vision based vehicle detection and traffic parameter extraction | |
Marzouk et al. | Vehicles detection and counting based on internet of things technology and video processing techniques | |
JP2004199649A (ja) | 突発事象検出方法 | |
JP2946620B2 (ja) | 速度計測機能付き車番自動読取装置 |