JPH0594536A - 移動物体抽出処理方法 - Google Patents

移動物体抽出処理方法

Info

Publication number
JPH0594536A
JPH0594536A JP3253245A JP25324591A JPH0594536A JP H0594536 A JPH0594536 A JP H0594536A JP 3253245 A JP3253245 A JP 3253245A JP 25324591 A JP25324591 A JP 25324591A JP H0594536 A JPH0594536 A JP H0594536A
Authority
JP
Japan
Prior art keywords
image
background
processing
moving object
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP3253245A
Other languages
English (en)
Inventor
Akio Shio
昭夫 塩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP3253245A priority Critical patent/JPH0594536A/ja
Publication of JPH0594536A publication Critical patent/JPH0594536A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 【目的】 本発明は、物体背景に複雑な濃度変化があ
り、しかも多数の移動物体が存在する場合にも安定に移
動物体を抽出する方法を提供することを目的としてい
る。 【構成】 入力画像の系列から移動物体を含まない背景
画像を抽出し、各時点における入力画像からこの背景画
像を差し引くことによって、背景の影響を取り除き、物
体領域を鮮明に抽出する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、TVカメラなどから得
られる一連の画像を処理して、歩行者や車など複数の移
動物体を自動的に抽出する移動物体抽出処理方法に関す
る。
【0002】
【従来の技術】従来のこの種の物体抽出処理方法は、そ
の対象によって2つに分類できる。第1の方法は、物体
背景の一様な例えばベルトコンベア等の上に乗った工業
製品などを対象としたものであり、物体背景に複雑な濃
度変化の含まれる一般景観中の物体抽出には適用不可能
であった。もう一方は、道路や駐車場における車両など
の抽出を目的としたものであり、特開平2−83800
号公報を例にとってその技術の概要を説明する。
【0003】図9は、従来法における物体抽出処理方法
の説明図であって、(a)および(b)は時刻t−1お
よびtにおける入力画像の例、(c)は差分画像の例を
示し、800は物体領域、801は背景領域、802は
検出される物体領域である。
【0004】この方法では、物体抽出処理の妨げとなる
物体背景の影響を抑える為、一定時間(例えば数10ミ
リ秒)だけ異なった時点(時刻t−1およびt)に撮像
した2枚の画像の時間的な差分(差分画像と称す)をと
る方法を採っている。
【0005】この方法では、背景を除去すると言う意味
では目標が達成されている。
【0006】
【発明が解決しようとする課題】しかし、図9(c)に
示した様にこの方法で得られる差画像では、抽出すべき
物体領域が正しく得られず、抽出されるのは物体の輪郭
の一部、すなわち物体の破片のみであり、画像内の物体
数が少ない場合には、これら破片を一個の物体に対応さ
せるのは容易であるが、多くの物体が同時に動いている
場合には、差分画像上で抽出された複数の物体破片がど
の物体に対応するかを個々に決定する必要が生じ、物体
の個別抽出が著しく困難になるという問題があった。
【0007】本発明は、物体背景に複雑な濃度変化があ
り、しかも多数の移動物体が存在する場合にも安定に移
動物体を抽出する方法を提供することを目的としてい
る。
【0008】
【課題を解決するための手段】上記目的を達成するた
め、本発明の移動物体抽出処理方法においては、入力画
像の系列から移動物体を含まない背景のみからなる画像
(背景画像)を抽出し、各時点における入力画像からこ
の背景画像を差し引くことによって、背景の影響を取り
除き、かつ物体領域を鮮明に抽出するようにしている。
【0009】
【作用】本発明では、物体領域が一つの塊として抽出さ
れるから、従来方法の様な抽出された領域と物体との対
応付けの問題が低減されるため、画像シーケンス中に多
数の移動物体が含まれる場合であっても安定な移動物体
の抽出が可能である。
【0010】
【実施例】以下、本発明の実施例について説明する。図
1は、本発明による移動物体抽出システムの構成例であ
って、100はTVカメラ、200はビデオ入力部、3
00は制御部、400は画像処理部、500は画像メモ
リ部、510は入力画像メモリ、520は背景画像メモ
リ、530は差画像メモリ、540は領域画像メモリ、
600はホスト計算機である。
【0011】制御部300は、ホスト計算機600から
のプログラムロードによって動作を開始し、ビデオ入力
部200、画像処理部400、および画像メモリ部50
0の各部をプログラム制御によって動作を制御する。
【0012】まず、TVカメラ100からの画像情報
は、ビデオ入力部200でA/D変換され一時保持され
る。制御部300は、ビデオ入力部200上に保持され
ている画像In (nは入力画像番号)を一定フレームま
たはフィールド間隔毎に読み出して画像メモリ部500
内の入力画像メモリ510に順次格納する。入力画像メ
モリ510は、入力画像番号nに対応させてN枚の入力
画像In (n=0,1,…,N−1)を格納するメモリ
であって、制御部300および画像処理部400から直
接にアクセスされる。
【0013】画像処理部400は、入力画像メモリ51
0上のN枚の入力画像(I0 ,I1 ,…,IN-1 )に基
づいて後で説明する方法により背景画像Bを求め、背景
画像メモリ520にこれを格納する。次に、新たに入力
画像メモリ510に入力された入力画像In に対して、
背景画像Bとの差の画像、すなわち差画像Dn を Dn =In −B (1) の演算に基づいて求め、差画像メモリ530に格納す
る。差画像Dn では、物体の無い部分ではほぼ0の値、
物体のある部分では正または負の値をとることになる。
次に、この差画像Dn に対してしきい値処理
【0014】
【数1】
【0015】を行い、3値の領域画像Rn を求め、領域
画像メモリ540に格納する。ただし、Dthはしきい値
である。また、式(1)の代わりに、 Dn =|In −B| (3) に依って差画像を求める方法も考えられる。この場合に
は、Dn は、0または正の値になるため、式(2)の代
わりに、
【0016】
【数2】
【0017】を用いて、2値の領域画像Rn を得ること
が出来る。次に、この領域画像メモリ540の内容を入
力として、例えば特開昭61−214082号公報に開
示の方法などによりラベリング処理することにより移動
物体領域の存在位置、数などを求め、ホスト計算機60
0に転送する。
【0018】図2は、画像処理部400の動作説明のた
めのフローチャートの一例であって、4100〜490
0は、処理ブロックを示す。まず、処理ブロック410
0では、入力画像メモリ510の格納されたN枚の画像
から背景画像Bを抽出する(背景画像の抽出方法に関し
ては、後で説明する。)。次に、処理ブロック4200
でフレーム番号nを初期化した後、処理ブロック430
0でフレーム番号nに1を加える。
【0019】続いて、もし処理ブロック4400におい
てフレーム番号nがNより小さい時には、処理ブロック
4500に進み、ビデオ入力部200の出力を、入力画
像メモリ510のn枚目の画像In に対応するアドレス
に格納すると共に、処理ブロック4600に与える。
【0020】処理ブロック4600では、入力画像In
と背景画像メモリに保持された背景画像Bとを入力とし
て、上記の式(1)または(3)により差画像Dn を求
め、処理ブロック4700で、式(2)または(4)に
よりしきい値処理を行い領域画像Rn を求める。
【0021】次に、処理ブロック4800では、領域画
像Rn をラベリング処理し、移動物体の位置、数などを
必要に応じて求め、処理ブロック4900でホスト計算
機600に転送出力する。
【0022】一方、処理ブロック4400においてフレ
ーム番号nがNより大きい場合には、処理ブロック41
00に戻って背景画像を再度求め直す。これは、背景画
像を天候など撮影環境の変化に合わせて変化させるため
に設けてあり、パラメータNは、背景画像の修正頻度に
合わせて、例えば数秒〜1分に1度程度に相当する値に
設定すればよい。
【0023】図3は、本発明の背景画像抽出の処理フロ
ーチャートの一例であって、4110〜4190は処理
ブロックを示す。本処理においては、大きさMi ×Mj
の画像の各画素 (i,j)(0≦i≦Mi ,0≦j≦Mj ) に対して、画像枚数Nに対応してN個の画像濃度値の最
頻値(mode):mをモードフィルタリング処理41
50によりもとめ、これを背景画像メモリ520の
(i,j)に対応するアドレスに書き込む(処理ブロッ
ク4160)。
【0024】ここで、背景画像抽出にモードフィルタリ
ング処理を採用した理由について説明する。図4は、静
止したカメラから観測された画像中の任意の一点の濃度
値I n の時間(入力画像番号nに対応)変化の一例を示
している。ここで、縦軸は濃度値In 、横軸は入力画像
番号nを示す。
【0025】観測点に移動物体が掛かっていない場合に
は、濃度値In は背景の濃度値を表していることにな
る。同図において、細かく変化する曲線4151は観測
される濃度値、濃度値ib2からib1の間をゆっくり変化
する曲線4152は背景の濃度値を示し、その変化は天
候などによる環境変化を示している。また、矢印で示し
た区間4153は移動物体の通過を示している。
【0026】図5は、図4に示した濃度変化に対するヒ
ストグラム(頻度分布)を示している。背景濃度に対応
して濃度値ib2とib1との中間付近でピークを示してい
る。この様に、もし移動物体が通過している状態の頻度
に比べ、背景を示している頻度が高ければ、モードフィ
ルタリング処理によって背景濃度をもとめることができ
る。
【0027】次に、モードフィルタリング処理の実現方
法について説明する。モードフィルタリング処理の入力
は、上記の様にN枚の画像である。Nの値が十分大きけ
れば、濃度値の頻度分布は図5に示した様に滑らかにな
るが、実際にはNは、メモリ量と処理量の制約から数十
程度の値とせざるを得なく、得られる濃度値頻度分布は
図6に一例を示す様に離散的になる。しかし、入力画像
を例えば1秒毎に取り込むことにしてN=16を選べ
ば、16秒間の画像に対する最頻値を計算することにな
るから計算精度の点でも十分であり、離散的な頻度分布
は平滑化によって、滑らかな頻度分布に変換することが
出来る。
【0028】図7は、モードフィルタリング処理415
0のフローチャートの実施例であって、41510〜4
1530は処理ブロックを示す。まず、処理ブロック4
1510で、N個の画像濃度をもとに、図6に示した様
な離散的な濃度値の頻度分布を求める。続いて、処理ブ
ロック41520で、この離散的な濃度値の頻度分布を
例えばガウス関数などを畳み込むことによって平滑化
し、図5に示した様な滑らかな頻度分布に変換する。た
だし、関数の広がりの度合(ガウス関数の場合は分散な
ど)は、Nの値によって適当に選べばよい。最後に、処
理ブロック41530で、この平滑化された頻度分布を
最大とする濃度値(最頻値)mを求め出力する。
【0029】図8は、図9(a)(b)に示した画像I
t-1 とIt を入力とした場合の本発明による移動物体抽
出結果の一例である。
【0030】
【発明の効果】以上説明したように、本発明によれば背
景画像を抽出し、入力画像と背景画像との差に対して物
体検出を行うため、物体背景の影響を受けにくく、しか
も画像シーケンス中に多数の移動物体が含まれていても
安定に移動物体の抽出が可能である。
【図面の簡単な説明】
【図1】本発明による移動物体抽出システムの構成例を
示す。
【図2】画像処理部の動作を説明するフローチャートの
実施例を示す。
【図3】背景画像抽出の処理フローチャート実施例を示
す。
【図4】濃度値の時間変化の一例を示す。
【図5】濃度値の頻度分布の一例を示す。
【図6】濃度値の離散的頻度分布の一例を示す。
【図7】モードフィルタリング処理のフローチャート実
施例を示す。
【図8】移動物体抽出結果の一例を示す。
【図9】従来の移動物体抽出技術の説明図である。
【符号の説明】
100 TVカメラ 200 ビデオ入力部 300 制御部 400 画像処理部 500 画像メモリ部 510 入力画像メモリ 520 背景画像メモリ 530 差画像メモリ 540 領域画像メモリ 600 ホスト計算機

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 移動物体を含む動画像を静止したカメラ
    により撮像入力し、この動画像中の複数の移動物体を自
    動認識する方法において、 該動画像のうちの複数枚の画像を入力として移動物体を
    含まない背景画像を入力画像の各画素点に関する時間方
    向の最頻値フィルタリングによって抽出する工程と、 新たな入力画像と該背景画像の差である差画像を求める
    工程と、 該差画像のしきい値処理により領域画像を求める工程
    と、 該領域画像を走査してラベリング処理を行い移動物体領
    域を抽出する工程とからなることを特徴とする移動物体
    抽出処理方法。
  2. 【請求項2】 上記差画像は、入力画像と該背景画像と
    の差の絶対値であることを特徴とする請求項1記載の移
    動物体抽出処理方法。
JP3253245A 1991-10-01 1991-10-01 移動物体抽出処理方法 Pending JPH0594536A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP3253245A JPH0594536A (ja) 1991-10-01 1991-10-01 移動物体抽出処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3253245A JPH0594536A (ja) 1991-10-01 1991-10-01 移動物体抽出処理方法

Publications (1)

Publication Number Publication Date
JPH0594536A true JPH0594536A (ja) 1993-04-16

Family

ID=17248584

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3253245A Pending JPH0594536A (ja) 1991-10-01 1991-10-01 移動物体抽出処理方法

Country Status (1)

Country Link
JP (1) JPH0594536A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006293661A (ja) * 2005-04-11 2006-10-26 Nippon Telegr & Teleph Corp <Ntt> 変化領域抽出方法およびこの方法のプログラム
JP2016134679A (ja) * 2015-01-16 2016-07-25 キヤノン株式会社 画像処理装置及び画像処理装置の制御方法
JP2021185698A (ja) * 2017-03-31 2021-12-09 日本電気株式会社 映像処理装置、映像解析システム、方法およびプログラム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006293661A (ja) * 2005-04-11 2006-10-26 Nippon Telegr & Teleph Corp <Ntt> 変化領域抽出方法およびこの方法のプログラム
JP4560434B2 (ja) * 2005-04-11 2010-10-13 日本電信電話株式会社 変化領域抽出方法およびこの方法のプログラム
JP2016134679A (ja) * 2015-01-16 2016-07-25 キヤノン株式会社 画像処理装置及び画像処理装置の制御方法
JP2021185698A (ja) * 2017-03-31 2021-12-09 日本電気株式会社 映像処理装置、映像解析システム、方法およびプログラム
US11748892B2 (en) 2017-03-31 2023-09-05 Nec Corporation Video image processing device, video image analysis system, method, and program

Similar Documents

Publication Publication Date Title
CN108229475B (zh) 车辆跟踪方法、系统、计算机设备及可读存储介质
US5048107A (en) Table region identification method
US5889885A (en) Method and apparatus for separating foreground from background in images containing text
US20110211233A1 (en) Image processing device, image processing method and computer program
US8300101B2 (en) Image processing method, image processing system, image pickup device, image processing device and computer program for manipulating a plurality of images
CN110310305B (zh) 一种基于bssd检测与卡尔曼滤波的目标跟踪方法与装置
US7024040B1 (en) Image processing apparatus and method, and storage medium
JP3731952B2 (ja) 動画像検索用情報生成装置
CN114049499A (zh) 用于连续轮廓的目标对象检测方法、设备及存储介质
CN107295296A (zh) 一种监控视频选择性存储与恢复方法及系统
CN114419102B (zh) 一种基于帧差时序运动信息的多目标跟踪检测方法
CN113409353A (zh) 运动前景检测方法、装置、终端设备及存储介质
JPH0594536A (ja) 移動物体抽出処理方法
Xie et al. Robust vehicles extraction in a video-based intelligent transportation systems
JP5126124B2 (ja) 画像処理装置
KR102426591B1 (ko) 머신러닝 모델을 이용한 객체 인식 방법 및 시스템
CN110147747B (zh) 一种基于累积一阶导数高置信度策略的相关滤波跟踪方法
CN114639013A (zh) 基于改进Orient RCNN模型的遥感图像飞机目标检测识别方法
CN110033488B (zh) 一种基于压缩信息的自适应光源方向分析方法及系统
US8300926B2 (en) Image processing apparatus and image processing method
JPH0652311A (ja) 画像処理方法
JP3763279B2 (ja) 物体抽出システム、物体抽出方法および物体抽出プログラム
CN112364835A (zh) 视频信息取帧方法、装置、设备及存储介质
CN110826564A (zh) 一种复杂场景图像中的小目标语义分割方法及系统
JPH11120351A (ja) 画像マッチング装置および画像マッチングプログラムを格納する記憶媒体