JP2004199623A - Movable body counting method - Google Patents

Movable body counting method Download PDF

Info

Publication number
JP2004199623A
JP2004199623A JP2002370690A JP2002370690A JP2004199623A JP 2004199623 A JP2004199623 A JP 2004199623A JP 2002370690 A JP2002370690 A JP 2002370690A JP 2002370690 A JP2002370690 A JP 2002370690A JP 2004199623 A JP2004199623 A JP 2004199623A
Authority
JP
Japan
Prior art keywords
moving object
moving
image
information
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002370690A
Other languages
Japanese (ja)
Inventor
Hironori Sumitomo
博則 墨友
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Minolta Co Ltd
Original Assignee
Minolta Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Minolta Co Ltd filed Critical Minolta Co Ltd
Priority to JP2002370690A priority Critical patent/JP2004199623A/en
Publication of JP2004199623A publication Critical patent/JP2004199623A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a movable body counting method capable of counting the number of movable bodies bidirectionally passing in an observation area. <P>SOLUTION: The observation area is set so that the same movable body can be detected by at least two continued images, and images P1-P4 are continuously acquired in this state. Movable bodies A and B bidirectionally moving in the observation area are detected from the acquired images, and the matching of the movable body of the previous image with the movable body of the subsequent image is performed for every advancing direction. When the movable body of the previous image cannot be matched with the movable body of the subsequent image, this movable body is considered to move out of the observation area, and its number is counted. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
この発明は、道路や通路等の観察領域を通過する人物等の移動体を計数するのに用いられる移動体の計数方法に関する。
【0002】
【従来の技術】
上記のような移動体の計数方法として、移動体を抽出し、連続するフレーム画像間で移動体の対応付けを行うことによって、観察領域を通過した移動体の数を計数する方法が知られている(特許文献1参照)。
【0003】
【特許文献1】
特開平8−185521号の請求項1等
この計数方法では、連続する画像のそれぞれで検出された移動体の対応付けを行い、前の画像で検出された移動体について後の画像との対応がとれなかった場合は、その移動体が観察領域から抜け出たとものとしてこれを計数することにより、移動体の数を計数するものとなされている。
【0004】
【発明が解決しようとする課題】
しかしながら、上記特許文献1に記載された従来の移動体の計数方法では、観察領域を通過する移動体の方向が予め一方向に決められているため、移動体が観察領域を双方向に通過するような場合には、使用することができないという問題点があった。
【0005】
この発明は、このような問題点を解決するためになされたものであって、観察領域を双方向に通過する移動体の数を計数できる移動体の計数方法の提供を課題とする。
【0006】
【課題を解決するための手段】
上記課題は、少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で、画像を連続して取得するステップと、取得した画像から、観察領域を双方向に移動する移動体を検出するステップと、前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体を計数するステップと、を含むことを特徴とする移動体の計数方法によって解決される。
【0007】
この計数方法では、少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定し、この状態で画像を連続して取得するから、移動体が観察領域を双方向に通過する場合には、いずれの方向であっても、少なくとも2つの画像で連続して検出された後に、観察領域外に移動した時点で検出されなくなる。従って、取得した画像から、観察領域を双方向に移動する移動体を検出し、さらに前の画像の移動体と後の画像の移動体との対応付けを進行方向別に行い、前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、この移動体は観察領域外に移動したとみなせるから、その数を計数する。これにより、観察領域を双方向に通過する移動体の数を、簡単な処理で高速に計数することができる。
【0008】
前記移動体の計数方法において、移動体が人物である場合には、例えば道路や通路等を通過する人数を計数できる。
【0009】
また、前記移動体の計数方法において、前の画像の移動体が後の画像の移動体と対応付けできた場合は、その移動体の位置情報を更新し、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、位置情報及び進行方向を決定する構成としても良い。
【0010】
この計数方法では、前の画像の移動体が後の画像の移動体と対応付けできた場合は、この移動体は観察領域を通過中であるとみなせるから、移動体の位置情報を更新することにより、その移動体の位置が容易に把握される。また、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、観察領域に新たに移動してきた移動体とみなせるから、位置情報及び進行方向を決定することにより、次の画像との間での移動体の対応付けを容易に行える。こうして、観察領域に新たに移動してきた移動体については位置情報及び進行方向を決定し、観察領域を既に通過中の移動体についてはその位置情報を更新することにより、画像の更新に応じて実行される移動体の対応付け等を円滑に行うことができる。
【0011】
この場合、移動体の位置情報は画像上の座標であるものとすることにより、的確な位置情報が確実にかつ容易に得られる。また、後の画像において検出され前の画像の移動体と対応付けできなかった移動体についての進行方向は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定される構成とした場合にも、進行方向の決定を確実にかつ容易に行うことができる。
【0012】
【発明の実施の形態】
次に、この発明の一実施形態について説明する。なお、この実施形態では、計数対象である移動体が人物であるとし、観察領域を通過する人物の進行方向を上下方向として説明する。
【0013】
図1は、この実施形態に係る移動体の計数方法を実施するための移動体の計数装置の一例を示すブロック図である。
【0014】
図1において、1は所定の対象領域を撮像して、その信号を出力するCCDカメラ等の撮像装置、2は撮像装置1から出力された信号を、画像データとして一次的に記憶する画像記憶部である。
【0015】
前記画像記憶部2には連続する画像を順次記憶することができるフレームバッファが2つ内蔵されており、撮像装置1から出力される信号を交互にフレームバッファに記憶するように設計されている。
【0016】
3は画像記憶部2に一次的に記憶されている画像を用いて、移動体を検出する移動体検出部である。移動体を検出する方法は、特開2001−222719号公報に開示されている方法を用いる。この方法は、画像記憶部2に一次的に記憶されている画像の時間差分を計算することによってエッジ画像を作成し、予め準備した相似で大きさを異ならせた複数の円形状のテンプレートを、前記エッジ画像上を順次動かして、投票を行うことによって頭部領域を抽出する方法である。あるいは別の方法として、頭部領域を抽出せずに画像記憶部2に一次的に記憶されている画像の動き差分のみで人物領域を検出しても、もちろん構わない。
【0017】
4は方向別移動体計数手段である。この方向別移動体計数手段4は、新たに検出された頭部の進行方向を決定するとともに、連続する画像のそれぞれで検出された移動体の対応付けを進行方向別に行う同一移動体検知部5と、移動体の位置・大きさ・速度等の移動体に関する情報を一次的に記憶する移動体情報記憶部6と、移動体の人数を計数するカウンタ71を備える移動体計数部7と、移動体が検出されなくなったときに、移動体情報記憶部6に一次記憶されている移動体情報を初期状態に戻す移動体情報リセット部8とから構成されている。以下、方向別移動体計数手段4について説明する。
【0018】
図2は、撮像装置1の設置状況を表した図であり、撮像装置1は少なくとも連続する2フレームの画像において同一移動体を検出できるように、天井から真下方向に設置される。例えば、移動体A、Bの最大速度が5m/sで且つ、移動体検出処理及び移動体計数処理の合計処理時間を1回当たり200msecとした場合、移動体の進行方向の長さが2m以上写るように観察領域を設定して撮像装置を設置すればよい。このように撮像装置1を設置することによって、観察領域を移動中の移動体は、連続する2フレーム以上にわたって必ず観察領域に存在することになるのみならず、観察領域内に新たに進入してきた移動体が、画像の上半分に存在する場合は上から進入してきたと判断でき、逆に、画像の下半分に存在する場合は、下から進入してきたと判断することができる。
【0019】
移動体検出部3で、画像から移動体が検出されるとともに、同一移動体検知部5で、その移動体が前の画像で検出されていない新しい移動体であると判定された場合には、その移動体の進行方向を決定する。進行方向を決定した移動体に対して、進行方向別に用意されている移動体情報記憶部6に、その移動体の位置と大きさが移動体情報として記憶される。
【0020】
図3は、移動体情報記憶部6の内部構造を表した図である。移動体情報記憶部6は、複数個のバッファから構成される2種類の記憶テーブルM1、M2が用意されており、その初期値は全て−1に設定されている。2種類用意されているのは、進行方向別に移動体情報を記憶するためである。本実施形態では、移動体情報として位置・大きさ・速度の3種類を記憶できるものとして説明している。図3において、記憶テーブルM1、M2中のX、Yは画像のX座標及びY座標を示し、位置情報を表す。Rは大きさ情報を表す。Sは速度情報を表す。なお、移動体情報は、1種類でも2種類でも良いし4種類以上でも良いし、必要に応じて移動体情報を増減することができる。
【0021】
同一移動体検知部5では、前の画像で移動体が検出されていたならば、次の画像で、移動体情報記憶部6に一次記憶されている移動体情報に対応する移動体を探索して、見つかればその移動体情報を上書きで更新し、見つからなければその移動体情報を削除するとともに、移動体計数部7の計数カウンタ70をインクリメントする。
【0022】
対応する移動体の探索は、この実施形態では、速度情報を利用する方法と利用しない方法の2種類を用いて行う。速度情報とは、前の画像における移動体のY座標と次の画像における移動体のY座標の差で表した値である。速度情報を持った前の画像の移動体に対応する次の画像の移動体を探索するときに、前の画像の移動体の位置に速度情報を加減算することによって、次の画像の移動体の移動先を推定することができる。次の画像の推定した場所に移動体が存在する場合は、それらを対応付ける。ただし、この実施形態では、速度情報の誤差を考慮して、±10以内の誤差であれば対応付けを行うようにしている。
【0023】
前の画像の移動体が速度情報を持っていない場合については、前の画像の移動体と次の画像の移動体の位置を比較すると、少なくとも進行方向に対して次の画像の移動体は下流にあるので、進行方向が上から下の場合、前の画像の移動体のY座標よりも次の画像の移動体のY座標の方が大きくなっている。逆に、進行方向が下から上の場合、前の画像の移動体のY座標よりも次の画像の移動体のY座標の方が小さくなっている。
【0024】
また、移動体は狭い範囲ではほぼ直線運動すると仮定できるので、前の画像の移動体とそれに対応する次の画像の移動体は、ほぼ同一ライン上に存在するはずである。この点を考慮して、この実施形態では、前の画像の移動体のX座標と次の画像の移動体のX座標の差が±10以内である場合は、それらを対応付けされる移動体として扱うものとする。そして、前の画像の移動体よりも下流にあって、且つ同一ライン上に次の画像の移動体が複数存在する場合は、最も下流にある移動体を対応付けする。この対応付けは、移動体情報記憶部6に記憶される移動体情報が、ある規則に従って格納されることを前提に行っている。この規則についての説明は次に述べる。
【0025】
移動体情報記憶部6に一次記憶されている全ての移動体情報について調べた後、一次記憶されている全ての移動体情報を、ある規則に従って並び替えを行い、それを上位バッファから順に格納する。並び替えの方法は、速度情報を持つものを優先し、速度情報を持たないものに対しては、進行方向が上から下の場合はY座標が大きい順になるようにし、逆に進行方向が下から上の場合はY座標が小さい順になるようにする。これによって、速度情報を持たない移動体に対して、前の画像で下流に存在する移動体から探索を始めることができるため、同一ライン上に複数の対応付け候補が存在するときに間違って別の移動体を対応付けすることを防ぐことができる。
【0026】
そして、移動体情報記憶部6に格納されていた前の画像の移動体情報と対応付けられなかった次の画像の移動体については、次の画像の撮像時に新たに観察領域に進入したものとして、その移動体の進行方向を決定した後、進行方向別に用意されている移動体情報記憶部6の記憶テーブルM1、M2に、その移動体の位置と大きさを移動体情報として記憶する。以上の処理が順次繰り返される。
【0027】
移動体検出部3で移動体が検出されなくなった場合は、移動体情報記憶部6に一次記憶されている移動体情報に対応する次の画像の移動体は存在しないので、移動体情報リセット部8により、移動体情報記憶部6に一次記憶されている移動体情報を全て破棄するとともに、これを進行方向別に行い、移動体計数部7の計数カウンタ70を移動体情報リセット部8により破棄された数だけインクリメントする。
【0028】
次に、図1の移動体の計数装置を用いて、観察領域を双方向に通過する人物を計数する方法について説明する。
【0029】
図4のP1からP5は、時系列で検出された移動体(人物)の頭部を表した各1フレームの画像(以下、フレーム画像という)であり、M1n、M2n(n=1〜5)は移動体情報記憶部6の記憶テーブルである。P1からP5のフレーム画像のサイズを320×240、左上を原点と仮定し、M1n(n=1〜5)には、画像を上から下に通過する移動体情報が、M2n(n=1〜5)には画像を下から上に通過する移動体の情報が、それぞれ格納される。
【0030】
図5〜図8は、図1の移動体計数装置による計数処理を示すフローチャートであり、図5はメインルーチンを、図6は同一移動体検知処理(図5のステップ3(以下、ステップをSと略記する))のサブルーチンを、図7は移動体情報記憶処理(図5のS4)のサブルーチンを、図8は移動体情報リセット処理(図5のS5)のサブルーチンを、それぞれ示す。なお、実際には、移動体計数装置はコンピュータを備え、図5〜図8に示す処理は、コンピュータがROMやハードディスク等の記録媒体に記録された移動体計数プログラムに従って実行する。
【0031】
以下、図4〜図8を用いて説明する。
【0032】
図4のフレーム画像P1が方向別移動体計数手段4に入力されたとき、同一移動体検知部5は移動体が存在するかどうかを判定する(図5のS1)。フレーム画像P1では移動体の個数が0個であるので(S1の判定がNO)、図5のS5の移動体情報リセット処理に進み、記憶テーブルM11、M21に記憶されている移動体情報を全て破棄(リセット)し(図8のS5−1)、さらに破棄した移動体情報の個数だけ移動体を計数する(図8のS5−2)。ただし、記憶テーブルM11、M21は初期状態であるので、移動体の計数値は0のままである。計数後、図5のメインルーチンに戻り、メインルーチンを終了する。
【0033】
次に、図4のフレーム画像P2が方向別移動体計数手段4に入力されたとき、同一移動体検知部5は移動体が存在するかどうかを判定する(図5のS1)。フレーム画像P2では2つの移動体A2、B2が存在しているので(S1の判定がYES)、同一移動体検知部5は、一つ前のフレーム画像(P1)で移動体が検出されたかどうかを、移動体情報記憶部6の記憶テーブルM11及びM21に移動体情報が記憶されているかどうかで判定する(図5のS2)。
【0034】
M11及びM21は初期状態、即ち一つ前のフレーム画像P1で移動体が検出されていないので(S2の判定がNO)、図5のS4の移動体情報記憶処理に進み、新しいフレーム画像(P2)で検出された移動体の中で、記憶テーブルM11及びM21に記憶されていない移動体が存在するかどうかを判定する(図7のS4−1)。
【0035】
フレーム画像P2における移動体A2及び移動体B2の情報は、未だ記憶テーブルM11及びM21に一次記憶されていないので、移動体A2及びB2の進行方向を決定する(図7のS4−2)。進行方向の決定は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定する。この実施形態では、フレーム画像を上下2つに均等分割し、上側の領域に検出された場合には上から下に、下側の領域に検出された場合には下から上に移動しているものとする。
【0036】
各移動体の進行方向が決定されると、進行方向別に記憶テーブルM11及びM21に移動体の位置及び大きさ情報を格納する(図7のS4−3)。記憶テーブルM11及びM21に格納された移動体情報を、前述した規則に従って並び替えをする(図7のS4−4)。並べ替え後、図5のメインルーチンに戻り、メインルーチンを終了する。
【0037】
次に、図4のフレーム画像P3が方向別移動体計数手段4に入力されたとき、同一移動体検知部5は移動体が存在するかどうかを判定する(図5のS1)。P3では3つの移動体A3、B3、C3が存在しているので(S1の判定がYES)、一つ前のフレーム画像P2で移動体が検出されているかどうかを、記憶テーブルM12及びM22に移動体情報が記憶されているかどうかで判断する(図5のS2)。記憶テーブルM12及びM22は1つずつ、移動体情報が格納されているので(S2の判定がYES)、この移動体と対応付けられる移動体、即ち同一と認められる移動体をフレーム画像P3の中からそれぞれ検出する(図5のS3)。検出は図6のフローチャートに従って行われる。
【0038】
まず、記憶テーブルM12のNo1の移動体は速度情報を持っているかどうかを判定する(図6のS3−1)。記憶テーブルM12のNo1の移動体は速度情報を持っていないので(S3−1の判定がNO)、フレーム画像P3において、記憶テーブルM12のNo1の移動体に対し進行方向の下流で且つ同一ライン上に移動体が存在するかどうかを判定する(図6のS3−4)。記憶テーブルM12のNo1の移動体に対して、フレーム画像P3の移動体A3は進行方向下流に存在し、且つ同一ライン上に存在するので(S3−4の判定がYES)、記憶テーブルM12のNo1の移動体に対応するフレーム画像P3の移動体をA3とし、記憶テーブルM12の移動体情報を更新して記憶テーブルM13とする(図6のS3―5)。
【0039】
次に、記憶テーブルM12に、No1の移動体以外の移動体情報が残っているかどうかを判定し(図6のS3−8)、残っていれば(S3−8の判定がYES)、再び図6のS3−1〜S3−8の処理を繰り返す。この実施形態では、残っていないので(S3−8の判定がNO)、移動体情報を調べていない進行方向が残っているかどうかを判定する(図6のS3−9)。この実施形態では、もう一方の方向については調べていないので(S3−9の判定がNO)、S3−1に戻り、記憶テーブルM22のNo1の移動体は速度情報を持っているかどうかを判定する。
【0040】
記憶テーブルM22のNo1の移動体は速度情報を持っていないので(S3−1の判定がNO)、フレーム画像P3において、記憶テーブルM22のNolの移動体に対して進行方向下流で且つ同一ライン上に移動体が存在するかどうかを判定する(図6のS3−4)。記憶テーブルM22のNo1の移動体に対して、移動体B3は進行方向下流に存在し、且つ、同一ライン上に存在するので(S3−4の判定がYES)、記憶テーブルM22のNo1の移動体に対応するフレーム画像P3の移動体をB3とし、記憶テーブルM22を更新して記憶テーブルM23とする(図6のS3−5)。
【0041】
次いで、記憶テーブルM22に、No1の移動体以外の移動体情報が残っているかどうかを判定し(図6のS3−8)、残っていれば(S3−8の判定がYES)、再び図6のS3−1〜S3−8の処理を繰り返す。この実施形態では、残っていないので(S3−8の判定がNO)、移動体情報を調べていない進行方向が残っているかどうかを判定する(図6のS3−9)。両方向について調べたので(S3−9の判定がYES)、図5のメインルーチンに戻ってS4の処理に進む。
【0042】
次に、S4で、フレーム画像P3において検出された移動体の中で、一つ前の記憶テーブルM12及び記憶テーブルM22に記憶されていない移動体が存在するかどうかを判定する(図7のS4−1)。フレーム画像P3における移動体C3の情報は未だ記憶テーブルM12或いは記憶テーブルM22に一次記憶されていないので(S4−1の判定がYES)、移動体C3の進行方向を決定する(S4−2)。前記移動体C3は、フレーム画像P3の下側領域にあり、従って進行方向は下から上と決定される。
【0043】
移動体C3の進行方向が決定したので、対応する記憶テーブルM23に移動体の位置及び大きさ情報を格納する(図7のS4−3)。そして、記憶テーブルM13及びM23に格納された移動体情報を、規則に従って並び替えをする(図7のS4−4)。並べ替え後、図5のメインルーチンに戻り、メインルーチンを終了する。
【0044】
次に、図4のフレーム画像P4が方向別移動体計数手段4に入力されたとき、同一移動体検知部5は移動体が存在するかどうかを判定する(図5のS1)。P4では2つの移動体A4、C4が存在しているので(S1の判定がYES)、一つ前のフレーム画像P3で移動体が検出されたかどうかを、記憶テーブルM13及びM23に移動体情報が記憶されているかどうかで判定する(図5のS2)。記憶テーブルM13には1つ、記憶テーブルM23には2つ、移動体情報が格納されているので(S2の判定がYES)、この移動体と対応付けられる移動体をフレーム画像P4の中からそれぞれ検出する(図5のS3)。
【0045】
まず、記憶テーブルM13のNo1の移動体は速度情報を持っているかどうかを判定する(図6のS3−1)。記憶テーブルM13のNo1は速度情報として「100」の値を持っているので(S3−1の判定がYES)、記憶テーブルM13のNo1の移動体のY座標に「100」を加算した場所に、フレーム画像P4の移動体が存在するかどうかの判定を行う(図6のS3−2)。記憶テーブルM13のNo1の移動体に対して、移動体A4は所定の範囲に存在するので(S3−2の判定がYES)、記憶テーブルM13のNo1の移動体に対応するフレーム画像P4の移動体をA4とし、記憶テーブルM13を更新して記憶テーブルM14とする(図6のS3−3)。
【0046】
次に、記憶テーブルM13に、No1の移動体以外の移動体情報が残っているかどうかを判定する(図6のS3−8)。残っていれば(S3−8の判定がYES)、再び図6のS3−1〜S3−8の処理を繰り返す。この実施形態では、残っていないので(S3−8の判定がNO)、移動体情報を調べていない進行方向が残っているかどうかを判定する(図6のS3−9)。この実施形態では、もう一方の方向については調べていないので(S3−9の判定がNO)、S3−1に戻り、記憶テーブルM23のNo1の移動体は速度情報を持っているかどうかを判定する。
【0047】
記憶テーブルM23のNolの移動体は、速度情報として「100」の値を持っているので(S3−1の判定がYES)、記憶テーブルM23のNolのY座標に「100」を減算した場所に、フレーム画像P4の移動体が存在するかどうかの判定を行う(図6のS3−2)。記憶テーブルM23のNo1の移動体は、フレーム画像P4では既に観察領域を抜け出ているため(S3−2の判定がNO)、記憶テーブルM23のNo1の情報を削除し(図6のS3−6)、計数カウンタ70をインクリメントする(図6のS3−7)。これにより、計数カウンタ70の計数値は1、つまり1人が観察領域を通過したことを示すものとなる。そして、記憶テーブルM23に移動体情報が残っているかどうかを判定する(図6のS3−8)。
【0048】
この実施形態では、No2の移動体の情報が残っているから(S3−8の判定がYES)、そのNo2の移動体は速度情報を持っているかどうかを判定する(図6のS3−1)。記憶テーブルM23のNo2の移動体は速度情報を持っていないので(S3−1の判定がNO)、フレーム画像P4において、前記No2の移動体に対して進行方向下流で、且つ同一ライン上に移動体が存在するかどうかを判定する(図6のS3−4)。
【0049】
記憶テーブルM23のNo2の移動体に対して、フレーム画像P4の移動体C4は進行方向下流にあり、且つ同一ライン上に存在するので、記憶テーブルM23のNo2の移動体に対応するフレーム画像P4の移動体をC4とし、記憶テーブルM23の移動体情報を更新して記憶テーブルM24とする(図6のS3―5)。
【0050】
そして、記憶テーブルM23にまだ移動体情報が残っているかどうかを判定し(図6のS3−8)、残っていなければ(S3−8の判定がNO)、移動体情報を調べていない進行方向が残っているかどうかを判定する(S3−9)。両方向について調べたので(S3−9の判定がYES)、図5のメインルーチンに戻ってS4の処理に進む。
【0051】
次に、S4で、フレーム画像P4において検出された移動体の中で、記憶テーブルM13及び記憶テーブルM23に記憶されていない移動体が存在するかどうかを判定する(図7のS4−1)。記憶されていない移動体は存在しないので(S4−1の判定がNO)、S4−4に進んで、記憶テーブルM14及びM24に格納された移動体情報を規則に従って並び替えをする。並べ替え後、図5のメインルーチンに戻り、メインルーチンを終了する。
【0052】
次に、図4のフレーム画像P5が方向別移動体計数手段4に入力されたとき、同一移動体検知部5は移動体が存在するかどうかを判定する(図5のS1)。P5では移動体の個数が0個であるので(S1の判定がNO)、記憶テーブルM14及びM24に記憶されている移動体は全て観察領域を通過したと考えられる。このため、S5に進み、記憶テーブルM14及びM24に記憶されている移動体情報を全て破棄(リセット)し(図8のS5−1)、破棄した移動体情報の数だけ移動体をカウントしたのち(図8のS5−2)、メインルーチンに戻る。この実施形態では、破棄した移動体情報の数は2個であるので、計数カウンタ70の計数値は合計3、つまり3人が観察領域を通過したことを示すものとなる。
【0053】
以上のように、少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定してやると、その観察領域を双方向に通過する移動体を簡単な処理で進行方向別に計数することができる。また、移動体の速度情報を用いることによって、より安定して移動体計数を実現することができる。
【0054】
本実施例では、移動体情報として移動体の大きさを使用しなかったが、対応付けを行う際に、大きさが極端に異なる場合は対応付けが間遠っているとして、別の対応付けを行うことによって、より高精度で安定した移動体計数が可能となる。
【0055】
以上、この発明の一実施形態を説明したが、この発明は上記実施形態に限定されることはない。例えば、上記実施形態では、観察領域を双方向に通過する移動体を方向の別なく1個の計数カウンタで計数するものとしたが、方向別にそれぞれ計数カウンタを設けて、方向別の移動体通過数を求めても良い。
【0056】
また、同一の移動体が、連続する2つの画像で検出されるように、撮像装置の観察領域を設定した場合を示したが、同一の移動体が、連続する3つ以上の画像で検出されるように、観察領域を設定しても良い。この場合も、新たな移動体の存在が検出された場合には、位置情報を含む移動体情報と進行方向を決定し、同一の移動体が検出される毎にその情報を更新し、同一の移動体が存在しなくなったときに、その数を計数すればよい。
【0057】
なお、上述した具体的実施形態には、以下の構成を有する発明が含まれている。
(1)少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で、画像を連続して取得するステップと、
取得した画像から、観察領域を双方向に移動する移動体を検出するステップと、
前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、
前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体を計数するステップと、
を含み、
前の画像の移動体と後の画像の移動体との対応付けは、前の画像の移動体の進行方向の直線上またはほぼ直線上に、後の画像の移動体が存在するか否かによって行うことを特徴とする移動体の計数方法。
【0058】
この計数方法では、前の画像の移動体と後の画像の移動体との対応付けに際しては、前の画像の移動体の進行方向の直線上またはほぼ直線上に、後の画像の移動体が存在するか否かを判定すればよいから、対応付けが簡単になる。
(2)少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で、画像を連続して取得するステップと、
取得した画像から、観察領域を双方向に移動する移動体を検出するステップと、
前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、
前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体を計数するステップと、
を含み、
前の画像の移動体と後の画像の移動体との対応付けは、前の画像の移動体の速度情報を基に推測された後の画像の所定位置に、移動体が存在しているか否かによって行うことを特徴とする移動体計数方法。
【0059】
この計数方法では、前の画像の移動体と後の画像の移動体との対応付けに際しては、前の画像の移動体の速度情報を基に推測された後の画像の所定位置に、移動体が存在しているか否かを判定すればよいから、対応付けが簡単になる。
(3)少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で、画像を連続して取得する撮像手段と、
取得した画像から、観察領域を双方向に移動する移動体を検出する移動体検出手段と、
前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行う対応付け手段と、
前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体の数を計数する計数手段と、
を備えたことを特徴とする移動体の計数装置。
【0060】
この計数装置によっても、観察領域を双方向に移動する移動体を計数することができる。
【0061】
この移動体の計数装置において、移動体は人物であっても良い。
【0062】
また、前の画像の移動体が後の画像の移動体と対応付けできた場合は、その移動体の位置情報を更新し、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、位置情報及び進行方向を決定する移動体の情報管理手段を、さらに備えていても良い。この場合、移動体の位置情報は画像上の座標であっても良い。また、後の画像において検出され前の画像の移動体と対応付けできなかった移動体についての進行方向は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定される構成としても良い。
(5)少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で取得された画像を、連続的に受領するステップと、
受領した画像から、観察領域を双方向に移動する移動体を検出するステップと、
前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、
前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体の数を計数するステップと、
をコンピュータに実行させるための移動体計数プログラムが記録されている、コンピュータ読み取り可能な記録媒体。
【0063】
この記録媒体によれば、観察領域を双方向に通過する移動体の計数処理をコンピュータに実行させることができる。
【0064】
この記録媒体において、移動体は人物であっても良い。
【0065】
また、前の画像の移動体が後の画像の移動体と対応付けできた場合は、その移動体の位置情報を更新し、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、位置情報及び進行方向を決定する移動体の管理ステップを、コンピュータにさらに実行させるものであっても良い。
【0066】
この場合、移動体の位置情報は画像上の座標であっても良い。また、後の画像において検出され前の画像の移動体と対応付けできなかった移動体についての進行方向は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定される構成としても良い。
(6)少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で取得された画像を、連続的に受領するステップと、
受領した画像から、観察領域を双方向に移動する移動体を検出するステップと、
前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、
前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体の数を計数するステップと、
をコンピュータに実行させるための移動体計数プログラム。
【0067】
このプログラムによれば、観察領域を双方向に通過する移動体の計数処理をコンピュータに実行させることができる。
【0068】
このプログラムにおいて、移動体は人物であっても良い。
【0069】
また、前の画像の移動体が後の画像の移動体と対応付けできた場合は、その移動体の位置情報を更新し、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、位置情報及び進行方向を決定する移動体の管理ステップを、コンピュータにさらに実行させるものであっても良い。
【0070】
この場合、移動体の位置情報は画像上の座標であっても良い。また、後の画像において検出され前の画像の移動体と対応付けできなかった移動体についての進行方向は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定される構成としても良い。
【0071】
【発明の効果】
この発明に係る移動体の計数方法は、上述の次第で、少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で、画像を連続して取得するステップと、取得した画像から、観察領域を双方向に移動する移動体を検出するステップと、前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体の数を計数するステップと、を含むことを特徴とするものであるから、観察領域を双方向に通過する移動体の数を簡単な処理で計数でき、また処理が簡単であるから高速度で計数することができる。
【0072】
また、前記移動体の計数方法において移動体が人物である場合には、例えば道路や通路等を通過する人数を計数でき、人物の移動状況を的確に把握する必要がある例えば市場調査等の分野において、実用的価値の大きなものとなる。
【0073】
また、前記移動体の計数方法において、前の画像の移動体が後の画像の移動体と対応付けできた場合は前記移動体の位置情報を更新し、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、位置情報及び進行方向を決定する構成となされた場合には、その移動体の位置の把握及び画像間での移動体の対応付けを容易にかつ円滑に行うことができる。
【0074】
この場合、移動体の位置情報は画像上の座標であるものとすることにより、的確な位置情報が確実にかつ容易に得ることができる。また、後の画像において検出され前の画像の移動体と対応付けできなかった移動体についての進行方向は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定される構成とした場合には、進行方向の決定を確実にかつ容易に行うことができる。
【図面の簡単な説明】
【図1】この発明の一実施形態に係る計数方法が実施される移動体計数装置を示すブロック図である。
【図2】撮像装置による観察領域の設定状態の説明図である。
【図3】移動体情報記憶部の記憶テーブルを示す図である。
【図4】移動体の計数方法を実施する場合における移動体情報記憶部の記憶テーブルの推移を示す図である。
【図5】図1の移動体計数装置の動作を示すフローチャートである。
【図6】図5のフローチャートの同一移動体検出処理のサブルーチンを示すフローチャートである。
【図7】図5のフローチャートの移動体情報記憶処理のサブルーチンを示すフローチャートである。
【図8】図5のフローチャートの移動体情報リセット処理のサブルーチンを示すフローチャートである。
【符号の説明】
1・・・・・撮像装置
3・・・・・移動体検出部
4・・・・・方向別移動体計数部
5・・・・・同一移動体検知部
6・・・・・移動体情報記憶部
7・・・・・移動体計数部
8・・・・・移動体情報リセット部
A、B、A2〜A4、B2〜B4、C3、C4・・・・・移動体(人物)
M1、M11〜M15、M2、M21〜M25・・・・・記憶テーブル
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a moving object counting method used for counting a moving object such as a person passing through an observation area such as a road or a passage.
[0002]
[Prior art]
As a method of counting moving objects as described above, a method of extracting the moving objects and associating the moving objects between successive frame images to count the number of moving objects that have passed through the observation area is known. (See Patent Document 1).
[0003]
[Patent Document 1]
Claim 1 of JP-A-8-185521
In this counting method, the moving objects detected in each of the successive images are associated with each other, and if the moving object detected in the previous image cannot be associated with the subsequent image, the moving object is observed. The number of moving objects is counted by counting the number of moving objects as if they were out of the area.
[0004]
[Problems to be solved by the invention]
However, in the conventional moving object counting method described in Patent Literature 1, since the direction of the moving object passing through the observation area is predetermined in one direction, the moving object passes through the observation area in both directions. In such a case, there was a problem that it could not be used.
[0005]
The present invention has been made to solve such a problem, and an object of the present invention is to provide a moving object counting method capable of counting the number of moving objects that pass through an observation area in both directions.
[0006]
[Means for Solving the Problems]
The above-mentioned subject is a step of continuously acquiring images in a state where an observation region is set so that the same moving object can be detected in at least two consecutive images, and moving the observation region bidirectionally from the acquired image. Detecting a moving object, associating the moving object detected in the previous image with the moving object detected in the subsequent image for each traveling direction, and And a step of counting the number of moving objects when the moving object cannot be associated with the moving object.
[0007]
In this counting method, an observation area is set so that at least two consecutive images can detect the same moving object, and images are continuously acquired in this state. Therefore, when the moving object passes through the observation area in both directions. In any case, in any direction, after being continuously detected in at least two images, it is not detected when it moves out of the observation region. Therefore, from the acquired image, the moving body that moves the observation area in both directions is detected, and the moving body of the previous image and the moving body of the subsequent image are associated with each other in the traveling direction, and the moving of the previous image is performed. If the body cannot be associated with the moving body in the subsequent image, it can be considered that this moving body has moved out of the observation area, and the number is counted. Thus, the number of moving objects that pass through the observation region in both directions can be counted at high speed by simple processing.
[0008]
In the moving object counting method, when the moving object is a person, for example, the number of people passing on a road or a passage can be counted.
[0009]
Also, in the moving object counting method, when the moving object of the previous image can be associated with the moving object of the subsequent image, the position information of the moving object is updated, and the position of the moving object in the previous image is detected. For a moving object that could not be associated with the moving object, the position information and the traveling direction may be determined.
[0010]
In this counting method, if the moving object in the previous image can be associated with the moving object in the subsequent image, this moving object can be considered to be passing through the observation area, and thus the position information of the moving object should be updated. Thereby, the position of the moving body can be easily grasped. In addition, a moving object that is detected in a later image and cannot be associated with the moving object in the previous image can be regarded as a moving object that has newly moved to the observation area, so that by determining the position information and the traveling direction, The moving object can be easily associated with the next image. In this manner, the position information and the traveling direction are determined for the moving object newly moving to the observation region, and the position information is updated for the moving object that has already passed through the observation region, so that the moving object is executed in accordance with the image update. And the associated moving objects can be smoothly performed.
[0011]
In this case, by assuming that the position information of the moving object is the coordinates on the image, accurate position information can be obtained reliably and easily. In addition, the traveling direction of the moving object detected in the subsequent image and not associated with the moving object of the previous image is detected in any one of the observation regions divided in advance into two regions. Also in the case where the configuration is determined depending on whether the moving direction has been determined, the traveling direction can be determined reliably and easily.
[0012]
BEST MODE FOR CARRYING OUT THE INVENTION
Next, an embodiment of the present invention will be described. In this embodiment, the moving object to be counted is assumed to be a person, and the traveling direction of the person passing through the observation area is described as a vertical direction.
[0013]
FIG. 1 is a block diagram showing an example of a moving object counting device for implementing the moving object counting method according to this embodiment.
[0014]
In FIG. 1, reference numeral 1 denotes an image pickup device such as a CCD camera that picks up an image of a predetermined target area and outputs the signal, and 2 denotes an image storage unit that temporarily stores a signal output from the image pickup device 1 as image data. It is.
[0015]
The image storage unit 2 has two built-in frame buffers capable of sequentially storing continuous images, and is designed to store signals output from the imaging device 1 in the frame buffer alternately.
[0016]
Reference numeral 3 denotes a moving object detection unit that detects a moving object using an image temporarily stored in the image storage unit 2. As a method for detecting a moving object, a method disclosed in JP-A-2001-222719 is used. In this method, an edge image is created by calculating a time difference between images temporarily stored in the image storage unit 2, and a plurality of similar circular templates of different sizes prepared in advance are obtained. This is a method of extracting a head region by sequentially moving on the edge image and voting. Alternatively, as another method, a person area may be detected only by a motion difference of an image temporarily stored in the image storage unit 2 without extracting a head area.
[0017]
Reference numeral 4 denotes direction-dependent moving object counting means. The direction-dependent moving object counting means 4 determines the traveling direction of the newly detected head and associates the moving object detected in each of the successive images with the traveling direction. A moving object information storage unit 6 for temporarily storing information about the moving object such as the position, size, and speed of the moving object; a moving object counting unit 7 including a counter 71 for counting the number of moving objects; When the body is no longer detected, the mobile body information reset section 8 returns the mobile body information temporarily stored in the mobile body information storage section 6 to an initial state. Hereinafter, the direction-specific moving object counting means 4 will be described.
[0018]
FIG. 2 is a diagram illustrating an installation state of the imaging apparatus 1. The imaging apparatus 1 is installed directly below the ceiling so that the same moving object can be detected in at least two consecutive frames of images. For example, when the maximum speed of the moving objects A and B is 5 m / s and the total processing time of the moving object detection process and the moving object counting process is 200 msec per time, the length of the moving object in the traveling direction is 2 m or more. What is necessary is just to set the observation area so that the image is taken and to install the imaging device. By installing the imaging device 1 in this manner, the moving object moving in the observation region not only necessarily exists in the observation region over two or more consecutive frames, but also newly enters the observation region. If the moving object exists in the upper half of the image, it can be determined that it has entered from above, and conversely, if it exists in the lower half of the image, it can be determined that it has entered from below.
[0019]
When the moving object detecting unit 3 detects the moving object from the image and the same moving object detecting unit 5 determines that the moving object is a new moving object not detected in the previous image, The traveling direction of the moving object is determined. For the moving body for which the traveling direction has been determined, the position and size of the moving body are stored as moving body information in the moving body information storage unit 6 prepared for each traveling direction.
[0020]
FIG. 3 is a diagram illustrating an internal structure of the mobile information storage unit 6. The mobile unit information storage unit 6 has two types of storage tables M1 and M2 composed of a plurality of buffers, all of which have initial values set to -1. The two types are prepared for storing moving body information for each traveling direction. In the present embodiment, the description has been given assuming that three types of position, size, and speed can be stored as the moving object information. In FIG. 3, X and Y in the storage tables M1 and M2 indicate an X coordinate and a Y coordinate of an image, and represent position information. R represents size information. S represents speed information. In addition, the moving body information may be one kind, two kinds, four kinds or more, and the number of moving body information can be increased or decreased as needed.
[0021]
In the same moving object detecting unit 5, if a moving object is detected in the previous image, the next image is searched for a moving object corresponding to the moving object information temporarily stored in the moving object information storage unit 6. If found, the mobile unit information is updated by overwriting, and if not found, the mobile unit information is deleted, and the count counter 70 of the mobile unit counter 7 is incremented.
[0022]
In this embodiment, the search for the corresponding moving object is performed using two methods, a method using speed information and a method not using speed information. The speed information is a value represented by a difference between the Y coordinate of the moving object in the previous image and the Y coordinate of the moving object in the next image. When searching for the moving object of the next image corresponding to the moving object of the previous image having the speed information, by adding or subtracting the speed information to the position of the moving object of the previous image, The destination can be estimated. If a moving object exists at the estimated location of the next image, it is associated with them. However, in this embodiment, in consideration of the error of the speed information, if the error is within ± 10, the correspondence is performed.
[0023]
When the moving body of the previous image does not have speed information, comparing the moving body of the previous image with the moving body of the next image, the moving body of the next image is at least downstream in the traveling direction. Therefore, when the traveling direction is from top to bottom, the Y coordinate of the moving body of the next image is larger than the Y coordinate of the moving body of the previous image. Conversely, when the traveling direction is from top to bottom, the Y coordinate of the moving object of the next image is smaller than the Y coordinate of the moving object of the previous image.
[0024]
Further, since it can be assumed that the moving object moves almost linearly in a narrow range, the moving object of the previous image and the corresponding moving object of the next image should exist on substantially the same line. In consideration of this point, in this embodiment, when the difference between the X coordinate of the moving object of the previous image and the X coordinate of the moving object of the next image is within ± 10, the moving object Shall be treated as Then, when there are a plurality of moving objects of the next image on the same line downstream of the moving object of the previous image, the moving object at the most downstream position is associated. This association is performed on the assumption that the mobile object information stored in the mobile object information storage unit 6 is stored according to a certain rule. A description of this rule follows.
[0025]
After examining all the moving object information temporarily stored in the moving object information storage unit 6, all the temporarily stored moving object information is rearranged according to a certain rule and stored in order from the upper buffer. . The rearrangement method gives priority to those having speed information, and to those having no speed information, when the traveling direction is from top to bottom, the Y coordinates are arranged in descending order. In the case of from above, the Y coordinates are arranged in the order of smaller values. This makes it possible to start searching for a moving object having no speed information from a moving object existing downstream in the previous image. Can be prevented from being associated with each other.
[0026]
The moving object of the next image that is not associated with the moving object information of the previous image stored in the moving object information storage unit 6 is assumed to have newly entered the observation area at the time of capturing the next image. After the moving direction of the moving body is determined, the position and size of the moving body are stored as moving body information in the storage tables M1 and M2 of the moving body information storage unit 6 prepared for each moving direction. The above processing is sequentially repeated.
[0027]
When the moving object is no longer detected by the moving object detection unit 3, there is no moving object of the next image corresponding to the moving object information temporarily stored in the moving object information storage unit 6, and therefore, the moving object information reset unit In step 8, all the moving object information temporarily stored in the moving object information storage unit 6 is discarded, and this is performed for each traveling direction. The count counter 70 of the moving object counting unit 7 is discarded by the moving object information reset unit 8. Increment by number.
[0028]
Next, a description will be given of a method of counting the number of persons passing through the observation region in both directions using the moving object counting device of FIG.
[0029]
P1 to P5 in FIG. 4 are images of one frame (hereinafter, referred to as frame images) representing the head of the moving object (person) detected in time series, and are M1n and M2n (n = 1 to 5). Is a storage table of the mobile unit information storage unit 6. Assuming that the size of the frame image from P1 to P5 is 320 × 240 and the upper left is the origin, M1n (n = 1 to 5) contains the moving object information passing through the image from top to bottom, M2n (n = 1 to 5). In 5), information on a moving object passing from the bottom to the top of the image is stored.
[0030]
5 to 8 are flowcharts showing a counting process by the moving object counting device of FIG. 1, FIG. 5 shows a main routine, and FIG. 6 shows an identical moving object detection process (Step 3 in FIG. FIG. 7 shows a subroutine of the moving object information storing process (S4 in FIG. 5), and FIG. 8 shows a subroutine of the moving object information resetting process (S5 in FIG. 5). Actually, the moving object counting device includes a computer, and the computer executes the processes illustrated in FIGS. 5 to 8 according to a moving object counting program recorded on a recording medium such as a ROM or a hard disk.
[0031]
Hereinafter, a description will be given with reference to FIGS.
[0032]
When the frame image P1 in FIG. 4 is input to the direction-dependent moving object counting means 4, the same moving object detecting unit 5 determines whether or not a moving object exists (S1 in FIG. 5). In the frame image P1, since the number of moving objects is 0 (NO in S1), the process proceeds to the moving object information reset process in S5 in FIG. 5, and all the moving object information stored in the storage tables M11 and M21 is deleted. It is discarded (reset) (S5-1 in FIG. 8), and the number of moving objects is counted by the number of discarded moving object information (S5-2 in FIG. 8). However, since the storage tables M11 and M21 are in the initial state, the count value of the moving object remains 0. After the counting, the process returns to the main routine of FIG. 5 and ends the main routine.
[0033]
Next, when the frame image P2 of FIG. 4 is input to the moving object counting means 4 for each direction, the same moving object detecting unit 5 determines whether or not there is a moving object (S1 of FIG. 5). Since two moving objects A2 and B2 exist in the frame image P2 (the determination in S1 is YES), the same moving object detecting unit 5 determines whether the moving object is detected in the immediately preceding frame image (P1). Is determined based on whether or not mobile object information is stored in the storage tables M11 and M21 of the mobile object information storage unit 6 (S2 in FIG. 5).
[0034]
In M11 and M21, the moving object is not detected in the initial state, that is, the previous frame image P1 (the determination in S2 is NO). Therefore, the process proceeds to the moving object information storage process of S4 in FIG. ), It is determined whether or not there is a moving object that is not stored in the storage tables M11 and M21 among the moving objects detected in (S4-1 in FIG. 7).
[0035]
Since the information of the moving objects A2 and B2 in the frame image P2 has not been temporarily stored in the storage tables M11 and M21, the traveling directions of the moving objects A2 and B2 are determined (S4-2 in FIG. 7). The determination of the traveling direction is determined based on which of the observation regions divided into two regions in advance has detected the moving object. In this embodiment, the frame image is equally divided into two upper and lower parts, and moves from top to bottom when detected in the upper area, and moves from bottom to upper when detected in the lower area. Shall be.
[0036]
When the moving direction of each moving body is determined, the position and size information of the moving body are stored in the storage tables M11 and M21 for each moving direction (S4-3 in FIG. 7). The mobile unit information stored in the storage tables M11 and M21 is rearranged according to the above-described rules (S4-4 in FIG. 7). After the rearrangement, the process returns to the main routine of FIG. 5 and ends the main routine.
[0037]
Next, when the frame image P3 in FIG. 4 is input to the moving object counting means 4 for each direction, the same moving object detecting unit 5 determines whether or not a moving object exists (S1 in FIG. 5). In P3, since three moving objects A3, B3, and C3 exist (the determination of S1 is YES), whether the moving object is detected in the immediately preceding frame image P2 is moved to the storage tables M12 and M22. It is determined whether the body information is stored (S2 in FIG. 5). Since the moving object information is stored in each of the storage tables M12 and M22 (the determination in S2 is YES), the moving object associated with this moving object, that is, the moving object recognized as the same is stored in the frame image P3. (S3 in FIG. 5). The detection is performed according to the flowchart of FIG.
[0038]
First, it is determined whether the moving object No. 1 in the storage table M12 has speed information (S3-1 in FIG. 6). Since the moving object No. 1 in the storage table M12 does not have the speed information (the determination in S3-1 is NO), in the frame image P3, the moving object No. 1 in the storage table M12 is downstream in the traveling direction and on the same line as the moving object No. 1 in the storage table M12. It is determined whether or not there is a moving object (S3-4 in FIG. 6). Since the moving object A3 of the frame image P3 exists on the same line as the moving object A3 of the frame image P3 with respect to the moving object of No. 1 in the storage table M12 (the determination of S3-4 is YES), The moving body of the frame image P3 corresponding to the moving body is set to A3, and the moving body information in the storage table M12 is updated to the storage table M13 (S3-5 in FIG. 6).
[0039]
Next, it is determined whether moving object information other than the No. 1 moving object remains in the storage table M12 (S3-8 in FIG. 6), and if it remains (YES in S3-8), FIG. The processing of S3-1 to S3-8 of No. 6 is repeated. In this embodiment, since there is no remaining information (NO in S3-8), it is determined whether or not there is a traveling direction for which the moving object information has not been checked (S3-9 in FIG. 6). In this embodiment, since the other direction has not been checked (NO in S3-9), the process returns to S3-1 to determine whether the moving object No. 1 in the storage table M22 has speed information. .
[0040]
Since the moving object No. 1 in the storage table M22 does not have the speed information (the determination in S3-1 is NO), in the frame image P3, the moving object downstream of the Nol moving object in the storage table M22 is on the same line as the moving object. It is determined whether or not there is a moving object (S3-4 in FIG. 6). With respect to the moving object No. 1 in the storage table M22, the moving object B3 exists downstream in the traveling direction and exists on the same line (the determination in S3-4 is YES). Is set to B3, and the storage table M22 is updated to the storage table M23 (S3-5 in FIG. 6).
[0041]
Next, it is determined whether or not moving object information other than the No. 1 moving object remains in the storage table M22 (S3-8 in FIG. 6). If the moving object information remains (YES in S3-8), FIG. S3-1 to S3-8 are repeated. In this embodiment, since there is no remaining information (NO in S3-8), it is determined whether or not there is a traveling direction for which the moving object information has not been checked (S3-9 in FIG. 6). Since both directions have been checked (YES in S3-9), the process returns to the main routine of FIG. 5 and proceeds to the process of S4.
[0042]
Next, in S4, it is determined whether or not there is a moving object that is not stored in the immediately preceding storage table M12 and the storage table M22 among the moving objects detected in the frame image P3 (S4 in FIG. 7). -1). Since the information on the moving object C3 in the frame image P3 has not been temporarily stored in the storage table M12 or the storage table M22 (YES in S4-1), the traveling direction of the moving object C3 is determined (S4-2). The moving object C3 is in the lower area of the frame image P3, and therefore, the traveling direction is determined to be from bottom to top.
[0043]
Since the traveling direction of the moving object C3 has been determined, the position and size information of the moving object are stored in the corresponding storage table M23 (S4-3 in FIG. 7). Then, the mobile unit information stored in the storage tables M13 and M23 is rearranged according to the rules (S4-4 in FIG. 7). After the rearrangement, the process returns to the main routine of FIG. 5 and ends the main routine.
[0044]
Next, when the frame image P4 of FIG. 4 is input to the moving object counting means 4 for each direction, the same moving object detecting unit 5 determines whether or not there is a moving object (S1 of FIG. 5). In P4, since two moving bodies A4 and C4 exist (the determination in S1 is YES), whether the moving body is detected in the previous frame image P3 is stored in the storage tables M13 and M23. It is determined whether or not the information is stored (S2 in FIG. 5). Since one moving object information is stored in the storage table M13 and two moving object information is stored in the storage table M23 (YES in S2), the moving object associated with this moving object is stored in the frame image P4. It is detected (S3 in FIG. 5).
[0045]
First, it is determined whether the moving object No. 1 in the storage table M13 has speed information (S3-1 in FIG. 6). Since No. 1 in the storage table M13 has a value of “100” as the speed information (the determination in S3-1 is YES), the location where “100” is added to the Y coordinate of the moving body of No. 1 in the storage table M13 is It is determined whether or not the moving object of the frame image P4 exists (S3-2 in FIG. 6). Since the moving object A4 is within a predetermined range with respect to the moving object of No. 1 in the storage table M13 (the determination in S3-2 is YES), the moving object of the frame image P4 corresponding to the moving object of No. 1 in the storage table M13. Is set to A4, and the storage table M13 is updated to the storage table M14 (S3-3 in FIG. 6).
[0046]
Next, it is determined whether or not moving body information other than the moving body of No. 1 remains in the storage table M13 (S3-8 in FIG. 6). If there remains (YES in S3-8), the processing of S3-1 to S3-8 in FIG. 6 is repeated again. In this embodiment, since there is no remaining information (NO in S3-8), it is determined whether or not there is a traveling direction for which the moving object information has not been checked (S3-9 in FIG. 6). In this embodiment, since the other direction is not checked (NO in S3-9), the process returns to S3-1 to determine whether the moving object No. 1 in the storage table M23 has the speed information. .
[0047]
Since the moving object of Nol in the storage table M23 has a value of “100” as the speed information (the determination in S3-1 is YES), the moving object in the storage table M23 is obtained by subtracting “100” from the Y coordinate of Nol in the storage table M23. It is determined whether or not the moving object of the frame image P4 exists (S3-2 in FIG. 6). Since the moving object No. 1 in the storage table M23 has already escaped from the observation area in the frame image P4 (NO in S3-2), the information of No. 1 in the storage table M23 is deleted (S3-6 in FIG. 6). , The counter 70 is incremented (S3-7 in FIG. 6). As a result, the count value of the counter 70 is 1, which indicates that one person has passed the observation area. Then, it is determined whether moving body information remains in the storage table M23 (S3-8 in FIG. 6).
[0048]
In this embodiment, since the information on the No. 2 moving body remains (YES in S3-8), it is determined whether the No. 2 moving body has speed information (S3-1 in FIG. 6). . Since the moving body of No. 2 in the storage table M23 does not have the speed information (the determination in S3-1 is NO), in the frame image P4, the moving body is moved downstream with respect to the moving body of No. 2 in the traveling direction and on the same line. It is determined whether a body exists (S3-4 in FIG. 6).
[0049]
Since the moving object C4 of the frame image P4 is on the same line as the moving object of the frame image P4 with respect to the moving object of No. 2 in the storage table M23, the frame image P4 corresponding to the moving object of No. 2 in the storage table M23 is displayed. The moving object is C4, and the moving object information in the storage table M23 is updated to the storage table M24 (S3-5 in FIG. 6).
[0050]
Then, it is determined whether or not the moving body information still remains in the storage table M23 (S3-8 in FIG. 6). If not (NO in S3-8), the traveling direction in which the moving body information is not checked. It is determined whether or not remains (S3-9). Since both directions have been checked (YES in S3-9), the process returns to the main routine of FIG. 5 and proceeds to the process of S4.
[0051]
Next, in S4, it is determined whether or not there is a moving object that is not stored in the storage tables M13 and M23 among the moving objects detected in the frame image P4 (S4-1 in FIG. 7). Since there is no moving object that is not stored (NO in S4-1), the process proceeds to S4-4, and the moving object information stored in the storage tables M14 and M24 is rearranged according to the rules. After the rearrangement, the process returns to the main routine of FIG. 5 and ends the main routine.
[0052]
Next, when the frame image P5 of FIG. 4 is input to the direction-dependent moving object counting means 4, the same moving object detecting unit 5 determines whether or not there is a moving object (S1 of FIG. 5). In P5, since the number of moving objects is 0 (NO in S1), it is considered that all the moving objects stored in the storage tables M14 and M24 have passed the observation area. Therefore, the process proceeds to S5, where all the moving object information stored in the storage tables M14 and M24 is discarded (reset) (S5-1 in FIG. 8), and the number of moving objects is counted by the number of discarded moving object information. (S5-2 in FIG. 8), the process returns to the main routine. In this embodiment, since the number of discarded moving object information is two, the count value of the counter 70 is a total of three, that is, it indicates that three persons have passed the observation area.
[0053]
As described above, if the observation area is set so that the same moving object can be detected in at least two consecutive images, it is possible to count the moving objects passing through the observation area in both directions by a simple process for each traveling direction. it can. Further, by using the speed information of the moving object, the moving object counting can be more stably realized.
[0054]
In the present embodiment, the size of the moving object is not used as the moving object information. However, when performing the association, if the size is extremely different, it is determined that the association is distant and another association is performed. Is performed, a more accurate and stable moving object count can be performed.
[0055]
The embodiment of the present invention has been described above, but the present invention is not limited to the above embodiment. For example, in the above-described embodiment, the moving object passing in both directions through the observation area is counted by one counting counter without any direction. However, a counting counter is provided for each direction, and the moving object passing in each direction is counted. You may ask for the number.
[0056]
In addition, although the case where the observation region of the imaging device is set so that the same moving object is detected in two consecutive images is shown, the same moving object is detected in three or more consecutive images. The observation region may be set as described above. Also in this case, when the presence of a new moving body is detected, the moving body information including the position information and the traveling direction are determined, and the information is updated each time the same moving body is detected, and the same moving body is detected. When the moving object no longer exists, its number may be counted.
[0057]
The specific embodiments described above include inventions having the following configurations.
(1) continuously acquiring images in a state where an observation area is set so that the same moving object can be detected in at least two consecutive images;
Detecting a moving object that moves in both directions in the observation area from the acquired image;
Performing a correspondence between the moving body detected in the previous image and the moving body detected in the subsequent image for each traveling direction,
If the moving body of the previous image could not be associated with the moving body of the subsequent image, counting the moving body;
Including
The correspondence between the moving object of the previous image and the moving object of the subsequent image depends on whether or not the moving object of the subsequent image exists on a straight line or almost linearly in the traveling direction of the moving object of the previous image. A moving object counting method characterized by performing.
[0058]
In this counting method, when associating the moving object of the previous image with the moving object of the subsequent image, the moving object of the subsequent image is positioned on a straight line or almost linearly in the traveling direction of the moving object of the previous image. Since it is sufficient to determine whether or not there is, the association is simplified.
(2) continuously acquiring images in a state where an observation area is set so that the same moving object can be detected in at least two consecutive images;
Detecting a moving object that moves in both directions in the observation area from the acquired image;
Performing a correspondence between the moving body detected in the previous image and the moving body detected in the subsequent image for each traveling direction,
If the moving body of the previous image could not be associated with the moving body of the subsequent image, counting the moving body;
Including
The association between the moving object of the previous image and the moving object of the subsequent image is based on whether or not the moving object exists at a predetermined position of the image after being estimated based on the speed information of the moving object of the previous image. A moving object counting method,
[0059]
In this counting method, when associating the moving object of the previous image with the moving object of the subsequent image, the moving object is located at a predetermined position of the image after the estimation based on the speed information of the moving object of the previous image. It is only necessary to determine whether or not exists, so that the association is simplified.
(3) imaging means for continuously acquiring images in a state where an observation area is set so that the same moving object can be detected in at least two consecutive images;
A moving object detecting unit that detects a moving object that moves the observation region in both directions from the acquired image,
Associating means for associating the moving object detected in the previous image with the moving object detected in the subsequent image for each traveling direction;
Counting means for counting the number of moving objects if the moving object of the previous image could not be associated with the moving object of the subsequent image;
A counting device for a moving object, comprising:
[0060]
Even with this counting device, it is possible to count moving objects that move in the observation area in both directions.
[0061]
In this moving object counting device, the moving object may be a person.
[0062]
If the moving object of the previous image can be associated with the moving object of the subsequent image, the position information of the moving object is updated, and the moving object of the previous image is detected and cannot be associated with the moving object of the previous image. The moving body may further include a moving body information management means for determining position information and a traveling direction. In this case, the position information of the moving object may be coordinates on the image. In addition, the traveling direction of the moving object detected in the subsequent image and not associated with the moving object of the previous image is detected in any one of the observation regions divided in advance into two regions. Alternatively, the configuration may be determined depending on whether the operation has been performed.
(5) continuously receiving an image obtained with an observation area set so that the same moving object can be detected in at least two consecutive images;
Detecting, from the received image, a moving object that bidirectionally moves the observation area;
Performing a correspondence between the moving body detected in the previous image and the moving body detected in the subsequent image for each traveling direction,
Counting the number of moving objects if the moving object in the previous image could not be associated with the moving object in the subsequent image;
Computer-readable recording medium on which a moving object counting program for causing a computer to execute the program is recorded.
[0063]
According to this recording medium, it is possible to cause a computer to execute a process of counting moving objects that pass through the observation region in both directions.
[0064]
In this recording medium, the moving object may be a person.
[0065]
If the moving object of the previous image can be associated with the moving object of the subsequent image, the position information of the moving object is updated, and the moving object of the previous image is detected and cannot be associated with the moving object of the previous image. For the moving object, the computer may further execute a step of managing the moving object for determining the position information and the traveling direction.
[0066]
In this case, the position information of the moving object may be coordinates on the image. In addition, the traveling direction of the moving object detected in the subsequent image and not associated with the moving object of the previous image is detected in any one of the observation regions divided in advance into two regions. Alternatively, the configuration may be determined depending on whether the operation has been performed.
(6) continuously receiving an image acquired with an observation area set so that the same moving object can be detected in at least two consecutive images;
Detecting, from the received image, a moving object that bidirectionally moves the observation area;
Performing a correspondence between the moving body detected in the previous image and the moving body detected in the subsequent image for each traveling direction,
Counting the number of moving objects if the moving object in the previous image could not be associated with the moving object in the subsequent image;
Moving object counting program for causing a computer to execute.
[0067]
According to this program, it is possible to cause the computer to execute a process of counting moving objects that pass through the observation region in both directions.
[0068]
In this program, the moving object may be a person.
[0069]
If the moving object of the previous image can be associated with the moving object of the subsequent image, the position information of the moving object is updated, and the moving object of the previous image is detected and cannot be associated with the moving object of the previous image. For the moving object, the computer may further execute a step of managing the moving object for determining the position information and the traveling direction.
[0070]
In this case, the position information of the moving object may be coordinates on the image. In addition, the traveling direction of the moving object detected in the subsequent image and not associated with the moving object of the previous image is detected in any one of the observation regions divided in advance into two regions. Alternatively, the configuration may be determined depending on whether the operation has been performed.
[0071]
【The invention's effect】
According to the moving object counting method of the present invention, as described above, in a state where an observation area is set so that the same moving object can be detected in at least two consecutive images, a step of continuously acquiring images; Detecting a moving object that bidirectionally moves the observation area from the obtained image, and performing a correspondence between the moving object detected in the previous image and the moving object detected in the subsequent image for each traveling direction. And counting the number of moving objects in the case where the moving object in the previous image could not be associated with the moving object in the subsequent image. Can be counted by simple processing, and the number of moving bodies passing in both directions can be counted at a high speed because the processing is simple.
[0072]
Further, when the moving object is a person in the method of counting moving objects, for example, it is possible to count the number of people passing on a road or a passage, and it is necessary to accurately grasp the moving state of the person. , It is of great practical value.
[0073]
Further, in the moving object counting method, when the moving object of the previous image can be associated with the moving object of the subsequent image, the position information of the moving object is updated, and the position information of the previous image is detected in the subsequent image. For a moving object that could not be associated with the moving object, if the position information and the traveling direction are determined, it is easy and easy to grasp the position of the moving object and associate the moving object between images. It can be done smoothly.
[0074]
In this case, by assuming that the position information of the moving object is coordinates on the image, accurate position information can be obtained reliably and easily. In addition, the traveling direction of the moving object detected in the subsequent image and not associated with the moving object of the previous image is detected in any one of the observation regions divided in advance into two regions. In the case where the configuration is determined depending on whether the operation has been performed, the traveling direction can be reliably and easily determined.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a moving object counting apparatus in which a counting method according to an embodiment of the present invention is performed.
FIG. 2 is an explanatory diagram of a setting state of an observation region by an imaging device.
FIG. 3 is a diagram showing a storage table of a mobile information storage unit.
FIG. 4 is a diagram showing a transition of a storage table of a mobile information storage unit when a mobile object counting method is performed.
FIG. 5 is a flowchart showing the operation of the moving object counting device of FIG. 1;
FIG. 6 is a flowchart showing a subroutine of the same moving object detection process in the flowchart of FIG. 5;
FIG. 7 is a flowchart showing a subroutine of a moving object information storage process in the flowchart of FIG. 5;
FIG. 8 is a flowchart showing a subroutine of a moving object information reset process in the flowchart of FIG. 5;
[Explanation of symbols]
1 ... Imaging device
3 ・ ・ ・ ・ ・ Moving object detection unit
4 ・ ・ ・ ・ ・ ・ ・ Moving object counting unit for each direction
5 ... Same moving object detection unit
6: Mobile information storage unit
7 ···· Mobile object counting unit
8 ····· Moving object information reset unit
A, B, A2 to A4, B2 to B4, C3, C4 ... Moving object (person)
M1, M11 to M15, M2, M21 to M25 ... storage table

Claims (5)

少なくとも連続する2つの画像で同一移動体を検出できるように観察領域を設定した状態で、画像を連続して取得するステップと、
取得した画像から、観察領域を双方向に移動する移動体を検出するステップと、
前の画像で検出された移動体と後の画像で検出された移動体との対応付けを、進行方向別に行うステップと、
前の画像の移動体が後の画像の移動体と対応付けできなかった場合には、その移動体を計数するステップと、
を含むことを特徴とする移動体の計数方法。
Continuously acquiring images in a state where an observation region is set so that the same moving object can be detected in at least two consecutive images;
Detecting a moving object that moves in both directions in the observation area from the acquired image;
Performing a correspondence between the moving body detected in the previous image and the moving body detected in the subsequent image for each traveling direction,
If the moving body of the previous image could not be associated with the moving body of the subsequent image, counting the moving body;
A moving object counting method, comprising:
移動体が人物である請求項1に記載の移動体の計数方法。The counting method of a moving object according to claim 1, wherein the moving object is a person. 前の画像の移動体が後の画像の移動体と対応付けできた場合は、その移動体の位置情報を更新し、後の画像で検出され前の画像の移動体と対応付けできなかった移動体については、位置情報及び進行方向を決定する請求項1に記載の移動体の計数方法。If the moving object of the previous image can be associated with the moving object of the subsequent image, the position information of the moving object is updated, and the moving object detected in the subsequent image and not associated with the moving object of the previous image can be updated. The moving object counting method according to claim 1, wherein the position information and the traveling direction are determined for the body. 移動体の位置情報は画像上の座標である請求項3に記載の移動体の計数方法。4. The moving object counting method according to claim 3, wherein the position information of the moving object is coordinates on an image. 後の画像において検出され前の画像の移動体と対応付けできなかった移動体についての進行方向は、予め2つの領域に分割された観察領域のうちのいずれの観察領域で移動体が検出されたかによって決定される請求項3に記載の移動体の計数方法。The moving direction of the moving object detected in the subsequent image and not associated with the moving object of the previous image is determined in which of the observation regions of the observation region divided in advance into two regions. The moving object counting method according to claim 3, which is determined by:
JP2002370690A 2002-12-20 2002-12-20 Movable body counting method Pending JP2004199623A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002370690A JP2004199623A (en) 2002-12-20 2002-12-20 Movable body counting method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002370690A JP2004199623A (en) 2002-12-20 2002-12-20 Movable body counting method

Publications (1)

Publication Number Publication Date
JP2004199623A true JP2004199623A (en) 2004-07-15

Family

ID=32766540

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002370690A Pending JP2004199623A (en) 2002-12-20 2002-12-20 Movable body counting method

Country Status (1)

Country Link
JP (1) JP2004199623A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009245172A (en) * 2008-03-31 2009-10-22 Saxa Inc Counting device for moving object, and program
EP2202673A1 (en) 2004-07-06 2010-06-30 Canon Kabushiki Kaisha Mask generation method for color ink jet printing
WO2016143187A1 (en) * 2015-03-09 2016-09-15 Necソリューションイノベータ株式会社 Same-fish identification device, fish counting device, portable terminal for counting fish, same-fish identification method, fish counting method, fish count prediction device, fish count prediction method, same-fish identification system, fish counting system, and fish count prediction system
JP2021524116A (en) * 2018-08-24 2021-09-09 シャンハイ センスタイム インテリジェント テクノロジー カンパニー リミテッド Dynamic motion detection method, dynamic motion control method and device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2202673A1 (en) 2004-07-06 2010-06-30 Canon Kabushiki Kaisha Mask generation method for color ink jet printing
JP2009245172A (en) * 2008-03-31 2009-10-22 Saxa Inc Counting device for moving object, and program
WO2016143187A1 (en) * 2015-03-09 2016-09-15 Necソリューションイノベータ株式会社 Same-fish identification device, fish counting device, portable terminal for counting fish, same-fish identification method, fish counting method, fish count prediction device, fish count prediction method, same-fish identification system, fish counting system, and fish count prediction system
JP2016165238A (en) * 2015-03-09 2016-09-15 Necソリューションイノベータ株式会社 Same fish determination device, fish counting device, mobile terminal for fish counting, same fish determination method, fish counting method, number of fish estimation device, number of fish estimation method, same fish determination system, fish counting system and number of fish estimation system
CN107205366A (en) * 2015-03-09 2017-09-26 日本电气方案创新株式会社 Same fish identification equipment, fish counting equipment, portable terminal, the recognition methods of same fish, fish method of counting, fish count predictions equipment, fish count predictions method, same fish identifying system, fish number system and the fish count predictions system counted for fish
JP2021524116A (en) * 2018-08-24 2021-09-09 シャンハイ センスタイム インテリジェント テクノロジー カンパニー リミテッド Dynamic motion detection method, dynamic motion control method and device
JP7127202B2 (en) 2018-08-24 2022-08-29 シャンハイ センスタイム インテリジェント テクノロジー カンパニー リミテッド Dynamic motion detection method, dynamic motion control method and device
US11455836B2 (en) 2018-08-24 2022-09-27 Shanghai Sensetime Intelligent Technology Co., Ltd. Dynamic motion detection method and apparatus, and storage medium

Similar Documents

Publication Publication Date Title
Bhuiyan et al. A deep learning based assistive system to classify COVID-19 face mask for human safety with YOLOv3
JP2019194857A (en) Object tracking method and device
WO2013053159A1 (en) Method and device for tracking vehicle
JP3831112B2 (en) Moving object measuring device
JP6194963B2 (en) Video processing system
JPWO2005020152A1 (en) Person detection device and person detection method
JP2012243161A (en) Image processing apparatus and image processing method
CN108090493A (en) It is a kind of based on wifi positioning into shop customer data statistical method
JP2010198566A (en) Device, method and program for measuring number of people
JP2009500709A (en) Recognizing object movement patterns
JP6503079B2 (en) Specific person detection system, specific person detection method and detection device
JP2010140425A (en) Image processing system
JP2001229488A (en) Vehicle tracking method and traffic state tracking device
JP2004199623A (en) Movable body counting method
JP2019109724A (en) Abnormality determination device
CN109034100B (en) Face pattern detection method, device, equipment and storage medium
CN117173415A (en) Visual analysis method and system for large-scale floor washing machine
CN104392201B (en) A kind of human body tumble recognition methods based on omnidirectional vision
JP2004094518A (en) Figure tracing device and figure tracing method and its program
Miene et al. Advanced and adaptive shot boundary detection
CN111862023A (en) Pantograph structure abnormity detection method based on computer vision
JP2002150295A (en) Object detection method and object detection device
JP2005157134A (en) Information output method, device and program, and computer readable storage medium stored with information output program
JP2014074977A (en) Image processing apparatus, image processing method, and image processing program
JP2007164375A (en) Three-dimensional object detection device and method, computer readable medium and three-dimensional object management system

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20050613

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20050802

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050802