JP2005033518A

JP2005033518A - 情報収集システム

Info

Publication number: JP2005033518A
Application number: JP2003196335A
Authority: JP
Inventors: Tetsuo Aikawa; 徹郎相川; Takashi Butsuen; 隆仏円; Fukashi Choho; 深長方
Original assignee: Toshiba Corp; Toshiba Plant Systems and Services Corp
Current assignee: Toshiba Corp; Toshiba Plant Systems and Services Corp
Priority date: 2003-07-14
Filing date: 2003-07-14
Publication date: 2005-02-03

Abstract

【課題】人の特徴情報、作業に費やした選択経路や行為を基にして、人の行動と人が接触した物体とを総合的に評価できる情報収集システムを提供することである。
【解決手段】監視領域を離れた位置から映像手段１１で連続的に映像化した映像信号を入力し、その映像信号から人の行動を画像計測手段１２で計測し、情報作成手段１３は画像計測手段１２にて計測したデータから人の行動と人が接触した物体の状況を総合した情報を作成する。また、物体による死角領域が監視領域内に存在しないように複数個の映像手段１１を配置し、画像計測手段１２は複数個の撮像手段１１間で得られた映像信号から同一人物を同定する。
【選択図】図１

Description

【０００１】
【発明の属する技術分野】
本発明は、監視領域で行動する人の情報を画像処理にて計測し、その情報から人の行動と人が接触した物体の状況を総合した情報を作成収集する情報収集システムに関する。
【０００２】
【従来の技術】
近年、２４時間の営業を特徴とする商品販売店舗の増加や店舗密集地における販売競争の激化から店舗売上げを伸ばすことが最重要課題となっており、店舗売上げを大きく左右する商品の陳列場所や配置方法は重要な管理要素とされている。お客の要求に適した状態に商品を陳列配置するためには、商品の販売状況を調査することが必要不可欠である。従来、商品の販売状況を調査する方法として、店員が陳列品の個数を調べたり、電子化されているレジにて販売した商品の情報を入力し管理するなどの方法が用いられてきた。
【０００３】
また、施設などにおける監視では、工場などにおいて作業員の監視として作業エリアで作業する人の人数確認や、夜間施設内に進入した人の検知などが実施されている。また、自動計測した移動物体の動線を使って算出した移動コストで施設のレイアウトの良し悪しを判定するようにしたものもある（例えば、特許文献１参照）。
【０００４】
【特許文献１】
特開２００３−２２３０９号公報（図１）
【０００５】
【発明が解決しようとする課題】
ところが、店舗などで実施される調査方法で得られる情報は、販売した単体商品の販売状況を表しており単一商品の陳列状況の適切性しか評価できない。店舗全体の売上げに貢献できる情報は、店舗で販売している全商品の陳列場所や配置を総合的に評価できる情報であり、従来のものでは、店舗全体の売上げに貢献できる情報を得ることは困難である。
【０００６】
また、工場などにおける作業員の監視については、作業エリア内に設置してある設備に対して規定作業を行っているのか規定外作業を行っているのかの判断は難しく、夜間施設内の監視においても、進入した人が不審者なのか関係者なのかの判断は困難である。
【０００７】
また、施設のレイアウトを管理するものでは、特定の者を監視対象としているがレイアウトの良し悪しの状態を把握するものであり、人の行動と人が接触した物体とを総合的に評価するものではない。
【０００８】
本発明の目的は、人の特徴情報、作業に費やした選択経路や行為を基にして、人の行動と人が接触した物体とを総合的に評価できる情報収集システムを提供することである。
【０００９】
【課題を解決するための手段】
本発明に係わる情報収集システムは、監視領域を離れた位置から映像手段で連続的に映像化した映像信号を入力し、その映像信号から人の行動を画像計測手段で計測し、情報作成手段は画像計測手段にて計測したデータから人の行動と人が接触した物体の状況を総合した情報を作成する。また、物体による死角領域が監視領域内に存在しないように複数個の映像手段を配置し、画像計測手段は複数個の撮像手段間で得られた映像信号から同一人物を同定する。
【００１０】
【発明の実施の形態】
以下、本発明の実施の形態を説明する。図１は本発明の第１の実施の形態に係わる情報収集システムのブロック構成図である。この第１の実施の形態では、工場などの安全管理において、作業エリア内で機械工作機を操作する作業員が予め定められた操作手順を遵守し安全に作業を行っているかどうかを監視する場合について説明する。
【００１１】
図１に示すように、第１の実施の形態に係わる情報収集システムは、監視領域を連続的に映像化する撮像手段１１と、撮像手段１１から出力される映像信号から人の行動を計測する画像計測手段１２と、画像計測手段１２の計測結果から人の行動と人が接触した物体とを関連付けた情報を作成する情報作成手段１３とから構成される。そして、画像計測手段１２は、撮像手段１１から出力される映像信号を取込みデジタルの画像データに変換する画像取込み手段１４と、画像取込み手段１４から出力される画像データにて人の抽出を行う抽出手段１５と、抽出手段１５にて抽出した人を識別する識別手段１６と、識別手段１６にて識別した人の歩行軌跡を計測する歩行軌跡計測手段１７と、識別手段１６にて識別した人の行為を計測する行為計測手段１８とを備える。
【００１２】
図２は作業員１９が作業を行うエリアのレイアウト図である。作業員１９が作業を行う作業室２０内は、複数個の作業エリア２１ａ〜２１ｅに区分されており、いま、作業員１９は作業エリア２１ａと作業エリア２１ｃとで作業を行うものとし、その場合の作業員１９の行動を監視する場合について説明する。
【００１３】
図３は、この作業員１９が行うべき規定作業手順を示したフロー図である。この作業員１９は作業開始にあたり、まず、作業室２０に入室し（Ｓ１）、最初の作業エリア２１ａに移動し（Ｓ２）、作業エリア２１ａにて作業機の安全装置をＯＮとする（Ｓ３）。そして、作業エリア２１ｃに移動し（Ｓ４）、その作業エリア２１ｃで作業を行う（Ｓ５）。作業が終了すると再び作業エリア２１ａに戻り（Ｓ６）、作業エリア２１ａの作業機の安全装置をＯＦＦして（Ｓ７）、作業室２０から退出して（Ｓ８）、作業員１９の作業は終了する。
【００１４】
このような作業員の作業を監視する場合には、撮像手段１１は、作業員１９が作業を行う作業エリア２１ａ〜２１ｅを監視領域として、作業エリア２１ａ〜２１ｅから離れた位置より連続的に作業エリア２１ａ〜２１ｅを映像化する。撮像手段１１にて映像化された作業エリア２１ａ〜２１ｅの映像信号は、画像計測手段１２の画像取込み手段１４に取り込まれた後、デジタルの画像データに変換され抽出手段１５に入力される。抽出手段１５は、画像データ内に写像された作業員１９を画像処理にて求め、計測結果を識別手段１６へ入力する。
【００１５】
図４は、抽出手段１５での画像データから作業員１９を求める方法の一例の説明図である。図４（ａ）において、人が写像されていない画像データを背景画像データ２２として予め登録しておき、図４（ｂ）に示す計測した画像データ２３と背景画像データ２２とを比較することで、図４（ｃ）に示すように輝度変化や形状変化を表す変化量画像２４を作成する。変化量画像２４は、人が写像された領域では変化値が大きく、その他の領域では変化値が小さくなることから人領域１９ａを抽出することができる。また、複数個の背景画像データ２２を環境条件に応じて登録することで、監視エリアで定期的に発生する外乱の影響を除去することが可能となる。
【００１６】
次に、識別手段１６では、抽出手段１５にて抽出した作業員１９の特徴情報に関して画像データから計測する。作業員１９の特徴情報とは、身長、体型、年齢層、性別などである。身長は、抽出した矩形サイズ、撮影距離、視野角などから求めることができ、体型は抽出した矩形サイズの縦横比にて求められる。年齢層においては、身長や体型より大まかな推定が可能である。性別に関しては、髪の長さや形、服装などの特徴から識別することができる。
【００１７】
また、識別手段１６では、抽出手段１５から時間軸に沿って連続的に入力されるデータに複数の作業員１９がいる場合、時系列のデータ間で同一作業員１９を同定する。同一作業員１９の同定には、特徴情報（身長、体型、年齢層、性別等）を用いて特徴の最も類似した作業員１９を選択しても良いし、画像データそのものを比較しても良い。画像データの比較には、輝度の絶対値を比較する方法、輝度のばらつきを比較する方法、形状を比較する方法などがあるが環境に適した手法を用いる。
【００１８】
図５は、歩行軌跡計測手段１７での歩行経路を求める方法の説明図である。歩行軌跡計測手段１７は、作業エリアに侵入した作業員１９が退出するまでに費やした歩行経路を計測するもので、例えば、図５（ａ）、図５（ｂ）、図５（ｃ）に示す識別手段１６にて求めた作業員１９の時系列的な写像位置１９Ａ、１９Ｂ、１９Ｃを時系列的につなぎ合わせることで、図５（ｄ）に示すような歩行軌跡２５を計測する。また、作業員１９の写像位置と、撮影距離および視野角などから奥行き情報を持つ３次元計測も可能である。
【００１９】
図６は、行為計測手段１８での人の行動を求める方法の説明図である。行為計測手段１８では、作業エリア２１ａ〜２１ｄにて機械工作機を操作する作業員１９の操作行為や歩行中の作業員１９の歩行行為を計測する。作業員１９の行為を計測する一例として、図６（ａ）に示すように、予め予想できる作業員１９の行為像２６を登録しておき、実際の作業員１９の画像データと行為像２６とを照らし合わせ最も類似した行為像を作業員１９の行為と判断する。
【００２０】
また、類似値に所定のしきい値を設けて予想外の行為と断定することも可能である。行為像２６は、多値のデータでも２値のデータでも良いが、２値のデータを用いる場合には形状を比較できる方法を用いることが望ましい。また、図６（ｂ）、図６（ｃ）に示すように、行為像２６を時系列的な複数行為の羅列データ２７ａ、２７ｂとして登録しておき、一定の時間幅を持った行為として扱うことも可能である。この場合は、計測精度や計測できる行為を高度化できる。
【００２１】
画像計測手段１２の画像取込み手段１４、識別手段１６、歩行軌跡計測手段１７、行為計測手段１８で計測された計測データは、情報作成手段１３に集められ、情報作成手段１３にてこれら計測データを基にして目的とするデータを作成する。
【００２２】
情報作成手段１３では、例えば作業室２０で作業を許可されている作業員１９を登録しておき、識別手段１６にて計測した計測データと比較照合し、作業室２０に入室した作業員１９が許可された作業員１９であるかを判断する。そして、許可されていない作業員１９であると判断した場合には、その旨を表現するデータを出力する。
【００２３】
許可された作業員１９であると判断した場合には、作業員１９の作業情報を図３に示した規定作業手順を基に作成する。規定作業手順によれば、入室後の次の作業は、作業エリア２１ａに移動した後、作業機の安全装置をＯＮにする行為であるから、歩行軌跡計測手段１７で求めた歩行軌跡にて作業員１９の移動先の適切性を判断する。作業員１９の移動先が作業エリア２１ａでない場合や、行為計測手段１８にて他行為を計測した場合には、規定した作業外を実施していると判断する。また、作業エリア２１ａに移動したとしても、作業機の安全装置をＯＮにする行為以外を行った場合も同様である。規定外の作業を行ったと判断した場合には、その旨を表す情報を出力する。以降の作業についても作業員１９が作業室２０から退出するまで同様の処理を行う。また、作業員１９が行ってはいけない危険作業手順を定義することで、危険作業を行った旨を出力することもできる。
【００２４】
第１の実施の形態によれば、作業員１９の歩行軌跡および作業行為を遠隔非接触で計測することにより、機械工作機に対して作業員１９が規定作業手順を遵守し安全に作業を行っているかの監視情報を適正に提供することができる。
【００２５】
次に、本発明の第２の実施の形態を説明する。図７は、本発明の第２の実施の形態に係わる情報収集システムのブロック構成図である。この第２の実施の形態は、図１に示す第１の実施の形態に対し、複数個の撮像手段１１ａ、１１ｂ、１１ｃを備えたものである。
【００２６】
第２の実施の形態に係わる情報収集システムは、監視領域を連続的に映像化する複数個の撮像手段１１ａ、１１ｂ、１１ｃからなる映像装置２８を設け、これら複数個の撮像手段１１ａ、１１ｂ、１１ｃから出力される映像信号から画像計測手段１２は人の行動を計測する。また、情報作成手段１３は画像計測手段１２の計測結果から人の行動と人が接触した物体とを関連付けた情報を作成する。
【００２７】
画像計測手段１２は、撮像手段１１ａ、１１ｂ、１１ｃから出力される映像信号を取込みデジタルの画像データに変換する画像取込み手段１４と、画像取込み手段１４から出力される画像データにて人の抽出を行う抽出手段１５と、抽出手段１５にて抽出した人を識別する識別手段１６と、識別手段１６にて識別した人の歩行軌跡を計測する歩行軌跡計測手段１７と、識別手段１６にて識別した人の行為を計測する行為計測手段１８とを備える。
【００２８】
第１の実施の形態においては、単一の撮像手段１１にて監視領域を映像化しているが、第２の実施の形態においては、監視領域内の物体により死角領域が存在しないよう配置した複数個の撮像手段１１ａ、１１ｂ、１１ｃにて監視領域を映像化する。複数個の撮像手段１１ａ、１１ｂ、１１ｃにて監視領域を映像化することから、撮像手段１１ａ、１１ｂ、１１ｃ間で重複した監視領域の映像信号が出力され、画像計測手段１２は、第１の実施の形態における画像計測手段１２の機能に加え各撮像手段１１ａ、１１ｂ、１１ｃから出力される映像信号間で同一人物を断定する機能を備える。
【００２９】
具体的には、識別手段１６にて人特徴情報を計測した後、各撮像手段間における特徴情報（身長、体型、年齢層、性別等）を用いて最も類似した人を同一人物と断定する。また、画像データを撮像手段１１ａ、１１ｂ、１１ｃの撮影距離と視野角などから変形加工し、画像データそのものを比較して同一人物を断定するようにしても良い。また、画像計測手段１２は単一の画像計測手段１２にて構成した場合を示したが、撮像手段１１ａ、１１ｂ、１１ｃの数量に合わせて複数個の画像計測手段１２を設け、複数個の映像信号を処理して相互に情報の共有化ができるような構成としても良い。
【００３０】
第２の実施の形態によれば、作業エリア内の物体による死角領域が監視領域内に存在しないよう複数個の撮像手段１１ａ、１１ｂ、１１ｃを配置し、これら複数個の撮像手段１１ａ、１１ｂ、１１ｃ間で得られた画像信号で同一人物を同定するので、より正確に同一人物を判別できる。
【００３１】
次に、本発明の第３の実施の形態を説明する。図８は、本発明の第３の実施の形態に係わる情報収集システムのブロック構成図である。この第３の実施の形態は、図１に示す第１の実施の形態に対し、画像計測手段１２での計測データや情報作成手段１３での作成データを記録するための記録手段２９を追加して設けたものであり、必要時に記録手段２９に記録したデータの参照を行えるようにしたものである。
【００３２】
以下、本発明の第３の実施の形態に係わる情報収集システムを、商品を販売する店舗などの商品の陳列場所や配置の管理において、商品の陳列状態がお客の要望に適しているかを判断できる情報を提供する情報収集システムに適用した場合を例にとり説明する。
【００３３】
第３の実施の形態に係わる情報収集システムでは、撮像手段１１にて店舗内を連続的に映像化し、画像計測手段１２の画像取込み手段１４にて撮像手段１１から出力される映像信号をデジタルの画像データへ変換する。次に、画像データからお客の領域を抽出手段１５にて求め、お客の特徴情報（身長、体型、年齢層、性別等）、歩行軌跡および行為を、それぞれ識別手段１６、歩行軌跡計測手段１７および行為計測手段１８にて計測する。第３の実施の形態では、画像計測手段１２である画像取込み手段１４、抽出手段１５、識別手段１６、歩行軌跡計測手段１７、行為計測手段１８から出力される計測データをデータベース化して記録手段２９へ記録する。
【００３４】
歩行軌跡計測手段１７では、記録手段２９へ計測データを記録する際に、識別手段１６の計測データである人の特徴情報とリンクさせて歩行軌跡データを記録する。図９は、識別手段１６の計測データである人の特徴情報と歩行軌跡計測手段１７の計測データである歩行軌跡データとのリンクの説明図である。
【００３５】
図９において、識別手段１６にて計測したお客の特徴情報３０は、例えば性別３１と年齢層３２であるとする。この場合、歩行軌跡計測手段１７にて計測した各人の歩行軌跡データ３３は、計測データ３３ａ、３３ｂ、３３ｃごとに特徴情報３０にリンクされる。例えば、計測データ３３ａにおいては、一つ目の特徴情報である性別３１について男性とリンクし、二つ目の特徴情報である年齢層３２については大人とリンクする。同様に、計測データ３３ｂにおいては、一つ目の特徴情報である性別３１について男性とリンクし、二つ目の特徴情報である年齢層３２については子供とリンクする。計測データ３３ｃにおいては、一つ目の特徴情報である性別３１について女性とリンクし、二つ目の特徴情報である年齢層３２については大人とリンクする。このように、歩行軌跡データ３３を特徴情報３０とリンクさせて記録手段２９に記録する。
【００３６】
また、歩行軌跡計測手段１７は、歩行状態が停止した状態、つまり人が止まっている状態を区切りとしてセグメント化して記録する。図１０は、歩行軌跡計測手段１７での歩行軌跡データをセグメント化し歩行状態を示す歩行軌跡リストを求める説明図である。図１０（ａ）に示す歩行軌跡データ３３の計測データ３３ａは、図１０（ｂ）に示すように停止状態Ａ〜Ｅを区切りとしてセグメント化されて歩行軌跡セグメント３４が求められ、セグメントの順位に沿って歩行軌跡リスト３５が作成される。歩行軌跡リスト３５には、予め作成した監視領域をセグメント化したエリアマップ３６に応じた停止場所３７と各セグメントに要した時間３８とが記録される。
【００３７】
行為計測手段１８では、記録手段２９へ計測データを記録する際に、識別手段１６および歩行軌跡計測手段１７の計測データとリンクさせて行為計測データを記録する。図１１は、識別手段１６の特徴情報および歩行軌跡計測手段１７の歩行軌跡リストと行為計測手段１８の行為計測データ３９とのリンクの説明図である。
【００３８】
図１１において、行為計測手段１８にて計測した各人の行為計測データ３９は、識別手段１６にて計測したお客の特徴情報３０である性別３１と年齢層３２と共に、歩行軌跡計測手段１７にて作成された歩行軌跡リスト３５にリンクされる。例えば、行為計測データ３９の計測データ３９ａは、一つ目の特徴情報３０である性別３１について男性とリンクし、二つ目の特徴情報３０である年齢層３２について大人とリンクする。また、歩行軌跡リスト３５の計測データ３５ａともリンクされ、この際に行為順位に沿って歩行軌跡リスト３５のリストＮｏ．も同時にリンクする。
【００３９】
次に、情報作成手段１３では、記録手段２９に記録されたデータからお客の商品陳列における場所や配置への要望を示す情報を作成する。まず、一つ目の例として、お客の興味度の経年的変化を示す情報を作成する場合について説明する。この場合、情報作成手段１３では、図１１に示す行為計測データ３９における行為を参照し、商品視察、商品取得および商品返却を選択する。ここで、商品視察とは商品を眺めた行為で、商品取得とは商品を手に取った行為である。商品返却とは一度商品を取得した後に商品を元の陳列に戻した行為を示している。これらの行為を選択すると共に選択行為に記録されている歩行軌跡リストＮｏ．から、行為を行った場所と行為時間も同時に選択する。
【００４０】
次に、選択行為にお客の興味に応じた興味係数を設定し興味値を求め、行為を行った場所において興味値と行為時間とからお客の商品に対する興味度を求める。興味値は、興味係数が例えば商品視察については１、商品取得については２、商品返却については−１とすると、その総和でも良い。お客が商品視察のみだと興味値は１であり、商品視察した後に商品取得をすれば３である。また、商品を返却した場合には２となる。興味度は、この求めた興味値に行為時間を乗算することで求める。以上述べた係数および計算は一例であり、行為や時間の重要度にて変更しても良い。
【００４１】
次に、所定の期間について興味度の累積値を求め、この累積値を求める期間を経年的に変化させることで、お客の興味度の変化を示す情報が作成され出力される。これにて、お客の行為と時間を基にしたお客の商品への興味や要望を数値化した情報が提供できる。
【００４２】
次に、二つ目の例として商品配置を検討する際の情報を提供する場合について説明する。この場合、情報作成手段１３では、図１０に示す歩行軌跡リスト３５において人が歩行している歩行状態を参照し、移動元と移動先及び歩行に要した時間を選択する。そして、その選択情報から移動先の場所ごとに移動元を調べ、各移動元の累積回数と移動に要した時間との累積時間を求める。この求めた情報は、お客が移動先の場所に訪れる前に立ち寄った場所を示しており、すなわち移動先に陳列された商品を視察する前に視察した商品の統計的な割合を示している。
【００４３】
また、移動に要した時間の累積時間から商品間の関連性も推測できる。例えば累積時間が短い場合には、お客は移動元の商品を視察した後に直ぐに移動先の商品を視察しており、移動元の商品の購入を考えているお客は、移動先の商品も同様に購入を検討していると推測できる。また累積時間が長い場合には、商品間の関連性がないかまたは低いと推測できる。情報作成手段１３では、移動先ごとの移動元の累積回数および移動に要した累積時間を任意の期間について求め、この期間を経年的に変化させることで、経年的な情報を作成し出力する。これにて、お客の歩行と時間を基にした商品間の関連性を数値化した情報が提供でき、店舗では、関連のある商品を離れて配置することで多くの商品をお客が視察するように考慮するのか、または、近くに配置することでお客が購入し易くするかなどの、商品配置を検討する際の情報として活用できる。
【００４４】
また、以上述べた二つの例を複合させることで、お客の興味や要望と商品間の関連性を組み合わせた情報も作成可能であると考えられる。すなわち、情報作成手段１３は、所定の期間を計測サイクルとして、画像計測手段１２にて計測したデータと記録手段２９で保持したデータとを比較して経年的変化を示すデータを作成し、お客の商品陳列における場所や配置への要望を示す情報を作成する。
【００４５】
第３の実施の形態によれば、記録手段２９に記録されたデータの基づいて所定の期間を計測サイクルとして、画像計測手段にて計測したデータと記録手段２９に保持したデータとを比較し、経年的変化を示すデータを作成するので、お客の商品陳列における場所や配置への要望を適切に示す情報を提供できる。
【００４６】
次に、本発明の第４の実施の形態を説明する。図１２は、本発明の第４の実施の形態に関わる情報収集システムのブロック構成図である。この第４の実施の形態は、図８に示す第３の実施の形態に対し、人が接触した物体を認識する物体認識手段４０を追加して備えたものである。
【００４７】
第４の実施の形態に関わる情報収集システムでは、店舗内を連続的に映像化した撮像手段１１の出力信号を画像計測手段１２の画像取込み手段１４でデジタルの画像データに変換し、この画像データから物体認識手段４０にて人が接触した物体を認識する。認識手法としては、人が物体に接触したことを行為計測手段１８から信号として受け取り、それをトリガとして画像取込み手段１４から出力されるデジタルの画像データに画像処理を施し自動で人が接触した物体を認識する手法や、予め各場所に陳列された商品の種類を示したマップを準備しておき、このマップと行為計測手段１８で人が物体に接触した場所とを比較することで人が接触した物体を認識する手法が挙げられる。
【００４８】
第４の実施の形態によれば、物体認識手段４０を備えたので、商品の種類も識別することが可能となり、情報作成手段１３で作成されるお客の興味や要望の情報を商品の種類に応じて作成することが可能となる。
【００４９】
【発明の効果】
以上説明したように、本発明によれば、遠隔非接触で得られる映像信号から人の行為や歩行を計測して、人の行動と人が接触した物体の状況を把握するので、計測対象である人を拘束したり違和感を与えることなく、人の行動と人が接触した物体の状況の総合情報を作成することができる。また、作業員の操作手順に係わる安全監視や商用店舗などにおける商品の陳列場所や配置の適切性を判断できる情報などの提供が可能である。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係わる情報収集システムのブロック構成図。
【図２】本発明の第１の実施の形態における作業員が作業を行うエリアのレイアウト図。
【図３】本発明の第１の実施の形態における作業員の規定作業手順を示したフロー図。
【図４】本発明の第１の実施の形態における抽出手段での画像データから作業員を求める方法の一例の説明図。
【図５】本発明の第１の実施の形態における歩行軌跡計測手段での歩行経路を求める方法の説明図。
【図６】本発明の第１の実施の形態における行為計測手段での人の行動を求める方法の説明図。
【図７】本発明の第２の実施の形態に係わる情報収集システムのブロック構成図。
【図８】本発明の第３の実施の形態に係わる情報収集システムのブロック構成図。
【図９】本発明の第３の実施の形態における識別手段の計測データである人の特徴情報と歩行軌跡計測手段の計測データである歩行軌跡データとのリンクの説明図。
【図１０】本発明の第３の実施の形態における歩行軌跡計測手段での歩行軌跡データをセグメント化し歩行状態を示す歩行軌跡リストを求める説明図。
【図１１】本発明の第３の実施の形態における識別手段の特徴情報および歩行軌跡計測手段の歩行軌跡リストと行為計測手段の行為計測データとのリンクの説明図。
【図１２】本発明の第４の実施の形態に関わる情報収集システムのブロック構成図。
【符号の説明】
１１…映像手段、１２…画像計測手段、１３…情報作成手段、１４…画像取込み手段、１５…抽出手段、１６…識別手段、１７…歩行軌跡計測手段、１８…行為計測手段、１９…作業員、２０…作業室、２１…作業エリア、２２…背景画像データ、２３…計測画像データ、２４…変化量画像、２５…歩行軌跡、２６…行為像、２７…複数行為羅列データ、２８…映像装置、２９…記録手段、３０…特徴情報、３１…性別、３２…年齢層、３３…歩行軌跡データ、３４…歩行軌跡セグメント、３５…歩行軌跡リスト、３６…エリアマップ、３７…停止場所、３８…時間、３９…行為計測データ、４０…物体認識手段

Claims

監視領域を離れた位置から連続的に映像化する撮像手段と、前記撮像手段で映像化した映像信号から人の行動を計測する画像計測手段と、前記画像計測手段にて計測したデータから人の行動と人が接触した物体の状況を総合した情報を作成する情報作成手段とを備えたことを特徴とする情報収集システム。
前記撮像手段は複数個設けられ、物体による死角領域が監視領域内に存在しないように配置され、前記画像計測手段は複数個の前記撮像手段間で得られた映像信号から同一人物を同定することを特徴とする請求項１記載の情報収集システム。
前記画像計測手段は、前記撮像手段で映像化された映像信号を取込みデジタルの画像データに変換する画像取込み手段と、前記画像取込み手段にて得られた画像から人を抽出する抽出手段と、前記抽出手段にて抽出した人を識別する識別手段と、前記識別手段にて識別した人の歩行軌跡を計測する歩行軌跡計測手段と、前記識別手段にて識別した人の行為を計測する行為計測手段とを備えたことを特徴とする請求項１または請求項２記載の情報収集システム。
前記歩行軌跡計測手段は、前記画像取込み手段にて得られた画像データから人の歩行軌跡を計測し歩行状態を判断することを特徴とする請求項３記載の情報収集システム。
前記歩行軌跡計測手段は、前記画像取込み手段にて得られた画像データから計測した人の歩行軌跡データを前記識別手段にて求めた識別情報を基に区分することを特徴とする請求項３または請求項４記載の情報収集システム。
前記行為計測手段は、前記画像取込み手段にて得られた画像データから計測した人の行為データを前記識別手段にて求めた識別情報を基に区分することを特徴とする請求項３記載の情報収集システム。
前記行為計測手段は、前記画像取込み手段にて得られた画像データから計測した人の行為データを前記歩行軌跡計測手段にて求めた歩行状態を基に区分することを特徴とする請求項４記載の情報収集システム。
前記画像計測手段の出力データと前記情報作成手段にて作成したデータとを記録して保持する記録手段を備えたことを特徴とする請求項１記載の情報収集システム。
前記情報作成手段は、所定の期間を計測サイクルとして前記画像計測手段にて計測したデータと前記記録手段で保持したデータとを比較し、経年的変化を示すデータを作成することを特徴とする請求項８記載の情報収集システム。
前記画像計測手段は、前記画像取込み手段にて得られた画像データから人が接触した物体を認識する物体認識手段を備えたことを特徴とする請求項３記載の情報収集システム。