JP5205137B2 - 行動管理システム - Google Patents

Description

この発明は、金融機関の店舗などにおいて人物の行動を管理記録する行動管理システムに関するものである。

従来から、金融機関などの店舗において、デジタルビデオレコーダなどの複数の撮影機器を店舗内に設けて顧客等の人物の行動を映像として記録する行動管理装置が知られている。
また、この種の行動管理装置として、映像に基づいて複数の通行人の位置座標を求め、この位置座標に基づいて通行人毎の通行軌跡を記録表示させるものがある（例えば、特許文献１参照）。
特開２００５−３４６６１７号公報

ところで、上述の行動管理装置においては、前者の場合は、特定の顧客の行動を検索する際に、人物が映っていないものを含む全ての映像の中から所望の映像を探さなければならず、検索に非常に時間がかかるという課題がある。また、デジタルビデオレコーダなどにより撮像された映像を長期間保存しようとすると、データ量が膨大になるため、映像を長期間保存することが困難であるという課題がある。
さらに、前者の行動管理装置の場合、個人が特定された人物の映像を確認後に消去することでデータ量の削減を図ることも可能であるが、個人が特定されない人物の映像については記憶装置に残存して時間とともに蓄積されることから、例えば、この残存した映像データを、頻繁に他の記憶装置に移動したり、不必要なものを選択的に削除する作業が必要となり、映像データの管理が煩雑になるという課題がある。

一方、後者の行動管理装置の場合には、顧客の一人一人を特定することができず、また、全ての通行軌跡の中から所定の行動を推定して抽出する必要があるため、顧客を特定してその行動を検出すること自体が困難であるという課題がある。

この発明は、上記事情に鑑みてなされたもので、人物の行動を少ないデータ量で記録可能とし、特定の人物に関する行動を容易に検索することができるとともに、人物の認証可能な機会を増加させることで記憶装置に蓄積される映像データを削減することが可能な行動管理装置を提供するものである。

上記の課題を解決するために、請求項１に記載した発明は、所定エリア内の人物の行動を管理する行動管理システム（例えば、実施の形態における行動管理システム１０）において、前記所定エリア内の映像を撮像する撮像手段（例えば、実施の形態におけるビデオカメラＶ１〜Ｖｎ）と、該撮像手段によって撮像された映像を記憶する映像記憶手段（例えば、実施の形態における映像バッファＢ１〜Ｂｎ）と、前記撮像手段によって撮像された映像から人物を特定する人物特定手段（例えば、実施の形態における人物特定部３１）と、前記人物特定手段によって特定された人物の認証を行う認証手段（例えば、実施の形態における認証部３４）と、前記認証手段によって認証が行われた人物による所定の行動を検出する行動検出手段（例えば、実施の形態における行動検出部３８）と、前記行動検出手段によって特定された所定の行動を文字データに変換する文字データ変換手段（例えば、実施の形態における文字データ変換部３９）と、前記文字データ変換手段によって変換された文字データを前記認証手段により認証された人物の識別情報と関連付けて記憶する記憶手段（例えば、実施の形態における記憶部３５）と、を有した行動管理装置（例えば、実施の形態における行動管理装置１００）と、複数の前記行動管理装置が通信手段を介して接続され、該通信手段を介して前記行動管理装置の前記記憶手段に記憶されている記憶情報を取得して記憶する主記憶手段（例えば、実施の形態における全店情報記憶部７３）を有したサーバ（例えば、実施の形態における本部サーバ７０）と、を備え、前記行動管理装置は、前記人物特定手段により特定された人物の認証情報が前記記憶手段の記憶情報に無い場合、当該人物の認証に用いる抽出情報を、仮の識別情報と共に所定のタイミングで前記通信手段を介して前記サーバへ出力する出力手段（例えば、実施の形態における更新制御部４２）を備え、前記サーバは、前記抽出情報と前記主記憶手段の記憶情報との照合処理を行う照合手段（例えば、実施の形態における照合部７２）を備え、前記照合手段による照合結果に基づいて、前記抽出情報に対応する前記主記憶手段の記憶情報がある場合に、当該記憶情報を、前記抽出情報を出力した前記行動管理装置に送信し、該行動管理装置は、前記サーバから返信された前記主記憶手段の記憶情報に基づいて前記記憶手段の記憶情報を更新すると共に前記仮の識別情報を正規の識別情報に更新する更新手段（例えば、実施の形態における更新制御部４２）を備えることを特徴とする。

請求項２に記載した発明は、請求項１に記載の発明において、前記サーバは、前記照合手段による照合結果に基づいて、前記抽出情報に対応する前記主記憶手段の記憶情報がない場合に、その旨の情報を、前記抽出情報を出力した前記行動管理装置に送信し、該行動管理装置は、操作入力が行われると、前記仮の識別情報を正規の識別情報に更新し前記記憶手段の記憶情報を登録することを特徴とする。

請求項３に記載した発明は、請求項１または２に記載の発明において、前記所定のエリアは店舗であり、前記所定のタイミングは前記店舗の営業終了時間から翌営業開始時間までの間の何れかのタイミングであることを特徴とする。

請求項４に記載した発明は、請求項１または２に記載の発明において、前記所定のタイミングは、前記人物特定手段により特定された人物の認証情報が前記認証手段によって前記記憶手段に無いと判定されたタイミングであることを特徴とする。

請求項１に記載の発明によれば、行動検出手段によって特定された所定の行動を文字データに変換し、この文字データを認証された人物の識別情報と関連付けて記憶することで、行動を記録しておくために映像データを全て残しておく場合と比較して、文字データとして所定の行動を記憶させる分だけ遙かにデータ量を低減することができるとともに、例えば、識別情報に基づいて、特定の人物の所定の行動を容易に検索することができる効果がある。
また、サーバにより複数の行動管理装置の記憶情報を一括管理するため、例えば、一のエリア内の行動管理装置の記憶情報に基づいて人物の認証ができない場合であっても、抽出した情報に基づいて他のエリア内の行動管理装置の記憶情報に当該人物の認証情報があれば、一のエリア内で認証できなかった人物の認証が可能となるため、人物の認証される確率が向上し、したがって、映像記憶手段に蓄積される認証できない人物の映像データ量を削減して、映像データの管理を簡素化することができる効果がある。

また、人物特定手段により特定された人物の認証情報が記憶手段の記憶情報に無い場合に、自動的に出力手段により所定のタイミングで人物の認証に用いる抽出情報をサーバへ出力して、サーバの照合手段により当該抽出情報と主記憶手段の記憶情報との照合処理が行われるため、例えば、記憶手段にサーバの主記憶手段に記憶されている全ての情報を記憶させる場合と比較して、記憶手段の記憶容量の増加を抑制することができる。
また、サーバの照合手段の照合結果に基づいて、例えば、抽出情報に合致する特徴情報が主記憶手段に記憶されている場合に、この特徴情報に関連付けられて記憶されている記憶情報を、抽出情報を出力した行動管理装置に対して送信して記憶手段の記憶情報を更新することができるので、主記憶手段の記憶情報のうち必要な情報のみを各記憶手段に記憶させることができる。

請求項３に記載の発明によれば、請求項１または２の効果に加え、人物の認証に用いる抽出情報を、店舗の営業終了時間から翌営業開始時間までの間にサーバへ出力して照合処理を行うことで、店舗の営業時間外に、記憶手段に記憶されている特定できない人物の映像データのうちサーバに認証情報がある人物を特定して認証することができるため、翌営業日には、認証できない人物の映像データの数量を低減することができる。

請求項４に記載の発明によれば、請求項１または２の効果に加え、認証手段により人物の特徴情報が記憶手段に無いと判定されたタイミングで、人物の認証に用いる抽出情報をサーバへ出力することで、サーバ側において抽出情報に対応した認証情報を特定して即座に行動管理装置側で認証を行うことができる。

次に、この発明の実施の形態の行動管理装置について図面を参照しながら説明する。
図１は、この実施の形態における行動管理システム１０の概略構成を示したものである。この実施の形態の行動管理システム１０は、複数のビデオカメラＶ１〜Ｖｎと、制御装置３０、表示部６０、操作入力部６１とを備えて構成された行動管理装置１００が、金融機関などのＡ店舗〜Ｄ店舗にそれぞれ設置されて人物の行動を監視および記録を行う。なお、この実施の形態ではＡ店舗〜Ｄ店舗の４店舗に設置される場合を一例に説明し、これらの各店舗に設置される行動管理装置１００はそれぞれ同等の構成であるため、Ａ店舗の行動管理装置１００の構成のみ詳細に説明する。

複数のビデオカメラＶ１〜Ｖｎは、金融機関の店舗内の各箇所にいる人物を撮像するためのものであり、これら複数のビデオカメラＶ１〜Ｖｎで撮像された各映像は制御装置３０に送信される。図２は店舗におけるレイアウト及びカメラ配置の一例を示したものであり、ビデオカメラＶ１〜Ｖｎ（図２中、符号Ｖで示す）は、正面口５０、ＡＴＭコーナ５１、各ＡＴＭ５２、店内ロビー５３、窓口カウンター５４、コピー機５５、貸金庫５６、および、受付発券機５７などの映像を撮像可能な箇所にそれぞれ配置されている。

制御装置３０は、店舗の窓口カウンター５４内に配置されたサーバなどのコンピュータにより構成されており、映像バッファＢ１〜Ｂｎ、人物特定部３１、人物映像メモリ群３３、認証部３４、記憶部３５、識別情報付与部３６、物品検出部３７、行動検出部３８、文字データ変換部３９、静止画抽出部４０、検索部４１、更新制御部４２、および、通信部４３を備えて構成されている。また制御装置３０には、液晶等の表示部６０と、キーボードやマウスなどからなる操作入力部６１とがそれぞれ接続されている。

人物特定部３１は、各ビデオカメラＶ１〜Ｖｎで撮像された映像に基づいて、それぞれの映像に映っている人物を特定（換言すれば、映像中の人間を検出）する。そして、人物特定部３１は人物が特定された映像のみを抽出して人物映像メモリＭ１〜Ｍｎにそれぞれ記憶する。
ここで、人物の特定方法としては、各ビデオカメラＶ１〜Ｖｎで撮像された映像の中から人物の顔を検出する方法などを用いることができる。

人物特定部３１は、各ビデオカメラＶ１〜Ｖｎによって映し出される画像の中から、人物の画像を切り出し、さらに、後述する認証部３４で認証しやすいように、人物の特徴として、例えば、顔の正面画像などを切り出して抽出情報として認証部３４へ出力する。

人物映像メモリ群３３は、各ビデオカメラＶ１〜Ｖｎに対応した個別の人物映像メモリＭ１〜Ｍｎを備えている。これら人物映像メモリＭ１〜Ｍｎは、人物特定部３１により抽出された映像データを記憶し、これら映像データを物品検出部３７、行動検出部３８、および静止画抽出部４０へ出力する。

認証部３４は、人物特定部３１により特定された人物の認証すなわち、人物が誰であるのかを認証するものであり、例えば、人物特定部３１により抽出された人物の特徴としての顔の正面画像から顔の特徴を抽出し、この顔の特徴と略同一の顔の特徴を、記憶部３５に予め記憶されている人物リストの中で探し、該当する顔の特徴を有した個人が存在する場合に、この個人を人物特定部３１により抽出された人物として認証する。

さらに、認証部３４は、認証された人物が店舗の店員か顧客かを記憶部３５に予め記憶された情報に基づいて判別する。ここで、認証された人物は、その人物を識別するための識別情報が割り当てられており、この識別情報に人物が店員又は顧客であることを示す情報が関連付けられて記憶部３５に記憶されている。

記憶部３５（記憶手段）は、顧客の識別情報（例えば、識別番号など）、店員又は顧客、個人名、顧客の行動や用件の履歴、静止画像、顔の特徴、要注意人物か否かなどの情報を記憶する。さらに記憶部３５は、認証部３４からの要求に応じて、人物の認証に必要となる、例えば、顔の特徴などの情報を認証部３４へ出力する。また記憶部３５は、識別情報付与部３６によって新たな識別情報（以下、単に仮の識別情報と称す）が付与された場合に、この仮の識別情報に対して、静止画抽出部４０により抽出される静止画像や、人物特定部３１により抽出される顔の特徴情報等の情報をそれぞれ関連付けて記憶する。

また、記憶部３５は、後述する文字データ変換部３９で変換される所定の行動の文字データを、認証された人物の識別情報に関連付けて記憶するとともに、文字データ変換部３９で変換された所定の行動の文字データを、識別情報付与部３６で付与される仮の識別情報に関連付けて記憶する。さらに、記憶部３５は、識別情報および仮の識別情報に対して、後述の静止画抽出部４０で抽出した静止画像を関連付けて記憶する。

識別情報付与部３６は、上述した認証部３４により認証できなかった人物、すなわち、口座を開設していない顧客など誰であるか分からない人物に対して、仮の識別情報を付与するものである。ここで、仮の識別情報としては、例えば、「Ｕｎｋｎｏｗｎ１」、「Ｕｎｋｎｏｗｎ２」・・・「ＵｎｋｎｏｗｎＮ」等のような識別情報が付与される。
物品検出部３７は、人物映像メモリ群３３に記憶された映像データすなわち、ビデオカメラＶ１〜Ｖｎでそれぞれ撮像された映像に映っている所定の物品を検出して、その検出情報を行動検出部３８へ出力する。所定の物品としては、例えば、「通帳」や「印鑑」等がある。

行動検出部３８は、人物特定部３１で特定された人物の所定の行動を検出するものであり、記憶部３５に予め記憶されている店舗内部のレイアウト情報（図２参照）、ビデオカメラＶ１〜Ｖｎにより撮像された映像および、物品検出部３７の検出情報に基づいて人物特定部３１で特定された人物の所定の行動を検出するとともに、認証部３４で店舗の店員であると判別された人物と、認証部３４で顧客であると認証された人物との位置関係と、店舗内部のレイアウト情報とに基づいて人物が行っている所定の行動を検出して、これら検出情報を文字データ変換部３９へ出力する。

文字データ変換部３９は、行動検出部３８によって検出された所定の行動を文字データに変換し、この変換された所定の行動の文字データを記憶部３５へ出力する。
静止画抽出部４０は、行動検出部３８が所定の行動を検出する際に、当該行動を行った人物の静止画像を映像データから抽出し、この抽出した静止画像のデータを記憶部３５へ出力する。

検索部４１は、操作入力部６１を介して入力された所定のキーワードと一致する情報および、キーワードと関連する語句を少なくとも含む情報を記憶部３５の記憶情報（例えば、人物リスト）から検索し、この検索された情報の中から必要な情報を表示部６０に出力する。さらに、検索部４１は、操作入力部６１を介して所定の入力操作として、撮像された時間帯や場所などの指定操作が行われると、指定された条件に合致する映像データを人物映像メモリ群３３に記憶されている映像データから検索し、当該条件の映像データを表示部６０へ出力する。
表示部６０は、液晶などのディスプレイであり、検索部４１から入力された情報を画面上に表示するとともに、検索された映像データの再生を行う。

更新制御部４２は、識別情報付与部３６によって仮の識別情報が付与された人物の顔画像や顔の特徴情報等の抽出情報を通信部４３を介して本部サーバへ出力する。また、更新制御部４２は、所定のタイミングで記憶部３５に新たに追加された記憶情報を通信部４３を介して本部サーバ７０へ出力する。さらに、更新制御部４２は、本部サーバ７０から入力された情報に基づいて記憶部３５の記憶情報を更新する。なお、上述の新たに追加された記憶情報とは、前回本部サーバ７０へ出力した後に追加および更新された記憶情報を意味している。
通信部４３は、ＷＡＮ（Wide Area Network）などの通信インターフェースを構成するものであって、本部サーバ７０と各店舗の行動管理装置１００とを接続してこれらの通信制御を行う。

本部サーバ７０は、通信部７１、照合部７２、および、全店情報記憶部７３を備えている。
通信部７１は、上述した通信部４３と同様に、通信インターフェースを構成するものであり、Ａ店舗〜Ｄ店舗にそれぞれ接続される。
照合部７２は、行動管理装置１００から通信インターフェースを介して入力された抽出情報を、全店情報記憶部７３の記憶情報の中から検索し、全店情報記憶部７３に抽出情報と合致する記憶情報がある場合には、当該記憶情報を、抽出情報を出力した行動管理装置１００へ通信インターフェースを介して出力する。さらに照合部７２は、所定のタイミングで各行動管理装置１００から新たに追加された記憶情報が入力されると、この記憶情報を加えるべく全店情報記憶部７３の記憶情報を更新する。

全店情報記憶部７３は、Ａ店舗〜Ｄ店舗の各行動管理装置１００の記憶部３５に記憶されている記憶情報を全て記憶する記憶媒体であり、上述したように照合部７２によって記憶情報が追加更新される。

この実施の形態に係る行動管理システム１０は上記構成を備えており、次に、この行動管理システム１０の動作を説明する。なお、この行動管理システム１０の動作は、行動管理装置１００が金融機関の複数の店舗に設置されている場合を一例に説明する。
まず、行動管理装置１００の電源を立ち上げると、ビデオカメラＶ１〜Ｖｎによる撮像が開始される。そして、ビデオカメラＶ１で撮像された映像データを映像バッファＢ１に、ビデオカメラＶ２で撮像された映像データを映像バッファＢ２に、ビデオカメラＶ３で撮像された映像データを映像バッファＢ３に、同様に、ビデオカメラＶｎで撮像された映像データを映像バッファＢｎに一時的に保存する。

映像バッファＢ１〜Ｂｎにより一時的に保存した各映像データを、順次人物特定部３１へ出力して、この出力した映像データを映像バッファＢ１〜Ｂｎから削除する。そして、人物特定部３１で映像データの中に人物が含まれるか（人物が特定されるか）否かを判定し、この判定の結果、映像に人物が含まれる場合は、その人物を特定するための顔の画像などを認証部３４へ出力する。また、人物特定部３１で人物が特定された映像データのみを抽出して人物映像メモリＭ１〜Ｍｎへ出力し記憶させる。ここで、人物特定部３１により人物が含まれないと判定された映像データは、人物特定映像抽出部３２によって削除する。

人物特定部３１により人物の特定がなされると、認証部３４において特定した人物の認証処理を行う。この認証処理においては、まず人物の特徴として、例えば顔の画像からその顔の特徴を抽出し、記憶部３５に記憶されている人物リストの特徴情報（例えば、顔の特徴など）に、抽出した人物の特徴（例えば、顔の特徴など）と一致する特徴情報があるか否かを判定する。この判定の結果、人物特定部３１で特定された人物の特徴と一致する人物の特徴情報が記憶部３５に含まれている場合には、記憶部３５の人物の特徴に関連付けられた識別情報を特定する。

さらに、他の認証処理として、記憶部３５の識別情報に関連付けられた店員又は顧客を示す情報に基づいて、認証された人物が顧客か店員かの判別を行う。ここで、認証部３４の認証処理に際しては、過去において認証できず、認証処理において仮の識別情報が与えられている人物の認証も行う。例えば、抽出した人物の特徴が、過去に記憶部３５に記憶された仮の識別情報「Ｕｎｋｎｏｗｎ３２５」を有する人物の特徴情報と一致する場合に、この仮の識別情報「Ｕｎｋｎｏｗｎ３２５」を特定する。

一方、人物特定部３１で特定された人物の特徴と一致する人物の特徴情報が記憶部３５に記憶されていないと判定された場合には、識別情報付与部３６において、認証できなかった顧客に対して認証部３４で認証できなかった顧客用の仮の識別情報を新たに付与する。そして、この認証できなかった顧客用の仮の識別情報を記憶部３５へ出力する。記憶部３５においては、識別情報付与部３６から仮の識別情報が入力されると、この仮の識別情報を新たな登録情報として記憶する。

また、認証部３４による認証処理と並行して、物品検出部３７において、新たに人物映像メモリＭ１〜Ｍｎに記憶された映像データの中から、予め登録されている所定の物品を検出し、この検出された物品の情報を行動検出部３８へ出力する。

行動検出部３８においては、識別情報又は仮の識別情報を受信して、これら識別情報又は仮の識別情報に対応付けられて人物映像メモリ群３３に記憶された映像データ、記憶部３５に記憶されているレイアウト、および、映像を撮像したビデオカメラＶ１〜Ｖｎの配置などに基づいて、顧客の所定の行動を検出する。例えば、顧客が正面口５０から入店した場合には、「正面口から来店」を検出し、顧客がＡＴＭコーナ５１に配置されているビデオカメラＶにより撮像された場合には、直接的な行動として、「Ｎ号機のＡＴＭを操作」などを検出する。あるいは、類推できる所定の行動として、「入金」、「出金」、「振込み」、「通帳記帳」、および、「両替」などを検出する。また、受付発券機（図示略）の近傍を撮像するカメラの映像から顧客が検出された場合には、所定の行動として「受付」を検出する。

さらに、行動検出部３８においては、撮像した映像から顧客と店員との位置関係を検出して、この位置関係に基づいて、所定の行動を検出する。例えば、顧客が、所定の業務を行う窓口の担当である店員の近くに移動したことが検出されると、直接的な行動として、「Ｎ番の窓口で取引」などを検出する。あるいは、その店員の担当する業務内容が口座開設や解約などである場合には、類推できる所定の行動として「口座開設」や「解約」等を検出する。

さらに行動検出部３８においては、物品検出部３７により検出された物品の種類に基づいて顧客の所定の行動を検出する。例えば、顧客が、ＡＴＭコーナ５１でカードや通帳を取り出したことが検出された場合には、直接的な行動として、「カードを財布類から取り出す」、「カードをＡＴＭに挿入」、「通帳をバッグ類から取り出す」などを検出する。また、類推できる所定の行動として「入金」、「出金」および「通帳記帳」などを検出する。そして、顧客が所定の業務を行う窓口にいることが検出され、さらに印鑑が検出された場合には、直接的な行動として、「印鑑をバッグ類から取り出す」などを検出する。あるいは、所定の業務の中から印鑑を使用する業務すなわち印鑑を使用する行動に限定されるため、この限定された行動を顧客の所定の行動として検出する。

次に、行動検出部３８により検出された所定の行動を文字データ変換部３９により文字データに変換して記憶部３５へ出力する。さらに静止画抽出部４０においては、行動検出部３８が所定の行動を検出する際の人物を含む静止画像を、当該人物を撮像した映像（動画）から抽出して記憶部３５へ出力する。
記憶部３５においては、文字データに変換した所定の行動と、静止画抽出部４０で抽出した静止画像とをそれぞれ関連情報として識別情報および仮の識別情報に関連付けて記憶する。

ここで、上述した記憶部３５の記憶情報の人物リストの一例を以下の表に示す。なお、表中の画像における「ｊｐｇ」とは、ファイル拡張子の一例を示している。なお、この表においては、都合上、人物を特定するための顔の特徴等のデータ（以下、単に抽出情報と称す）を省略している。また、日時情報についても、一つ一つの記憶情報に関連付けて記憶されるが、この表においては省略している。さらには、この表においては、一の識別情報または一の仮の識別情報に対して、一の行動に関わる記憶情報しか示していないが、これに限るものではなく、一人の人物に対して、来店から退店までの間、記録すべき行動が行動検出部３８によって検出、確認された分だけ、記録されるものである。

店舗の責任者などにより操作入力部６１を介して記憶部３５内の関連情報を検索するためのキーワード（例えば、「０１」や「入金」など、あるいは顧客名など）が入力されると、検索部４１において、記憶部３５に記憶されている関連情報の中から、当該キーワードと一致する識別情報およびキーワードと関連する語句を含む識別情報が検索され、この検索結果のうち必要とする関連情報を表示部６０に表示する。

また、操作入力部６１に対して、人物映像メモリＭ１〜Ｍｎに記憶されている映像データの確認を行うための所定の操作入力が行われると、検索部４１において、人物映像メモリＭ１〜Ｍｎに記憶されている映像データの中から入力条件に合致する映像データを検索し、表示部６０により再生表示する。さらに店舗の責任者などにより操作入力部６１を介して、選択的に映像データを削除する所定の入力操作が行われた場合には、該当する映像データの削除を行う。

一方、更新制御部４２においては、識別情報付与部３６によって仮の識別情報が付与されると、この仮の識別情報に関連付けられる顔の特徴などの抽出情報を、所定のタイミングで、仮の識別情報とともに通信部４３を介して本部サーバ７０へ出力する。所定のタイミングとしては、行動管理装置が設定される店舗すなわちＡ店舗の営業終了時間から翌営業開始時間の間の適宜のタイミング、または、記憶部３５に抽出情報に一致する記憶情報が無いと判定されたタイミングすなわち、仮の識別情報が付与されたタイミングとするのが好ましい。なお、本部サーバ７０への出力情報には出力元の行動管理装置１００を特定するための識別情報が含まれる。

通信部７１を介して仮の識別情報および抽出情報が照合部７２に入力されると、この抽出情報と合致する記憶情報（顔の特徴など）が全店情報記憶部７３から検索される。
全店情報記憶部７３に抽出情報と合致する情報が無い場合は、照合ができなかった旨の情報を出力元の行動管理装置１００へ出力する。
全店情報記憶部７３に抽出情報と合致する情報が見つかった場合には、当該情報に関連する人物の識別情報を含む全ての情報を出力元の行動管理装置１００へ出力する。

全店情報記憶部７３のから識別情報を含む人物の情報が通信部４３を介して更新制御部４２に入力されると、更新制御部４２によって入力された情報に基づいて記憶部３５の記憶情報が更新される。更新は、例えば、仮の識別情報に関連付けられている情報（検出された行動等の情報）を、入力された識別情報に関連付けて記憶部３５に記憶して、それまでの仮の識別情報を削除する。

一方、各店舗の行動管理装置１００においては、仮の識別情報が付与され、本部サーバ７０の照合部７２によって個人が特定できないものについて、個人を特定する情報が操作入力部６１を介して入力されると、正規の識別情報（仮の識別情報ではない識別情報）を付与して人物リストを更新する。そして、この更新された更新情報を更新制御部４２を介して本部サーバ７０へ出力する。本部サーバ７０では、更新情報が入力されると、この更新情報を登録すべく、全店情報記憶部７３を更新する。これにより、全店情報記憶部７３には、行動管理装置１００から更新情報が送信されて各店舗の記憶部３５の記憶情報の全てが自動的に登録されて記憶されることとなる。

なお、上述の行動管理システムにおいては、Ａ店舗と本部サーバ７０との情報の更新処理について説明したが、Ｂ店舗〜Ｄ店舗においても並行して更新処理が行われる。

したがって、上述の実施の形態によれば、ビデオカメラＶ１〜Ｖｎによって撮像された店舗内部の映像から、人物特定部３１により人物を特定し、認証部３４により特定された人物の認証を行い、行動検出部３８により認証部３４により特定された人物の所定の行動を検出するとともに、行動検出部３８で検出された所定の行動を文字データ変換部３９により文字データに変換し、特定された人物の識別情報に関連付けて記憶部３５に記憶させることができるため、撮像した映像を全て記憶させる従来よりも文字データとして記憶できる分だけデータ量を遙かに低減することができ、さらに、識別情報に基づいて、特定の人物の行動を容易に検索することができる。

また、本部サーバ７０により複数の行動管理装置１００の記憶情報を一括管理するため、例えば、Ａ店舗内の行動管理装置１００の記憶情報に基づいて人物の認証ができない場合であっても、抽出情報に基づいて他のＢ〜Ｄ店舗内の行動管理装置１００の記憶情報に当該人物の特徴の情報があれば、Ａ店舗内で認証できなかった人物の認証が可能となるため、人物の認証される確率が向上し、この結果、人物映像メモリ群３３に蓄積される認証できない人物の映像データ量を削減することができる。

さらに、人物特定部３１により特定された人物の認証情報が記憶部３５の記憶情報に無い場合に、所定のタイミングで自動的に更新制御部４２により人物の認証に用いる抽出情報を本部サーバ７０へ出力して、本部サーバ７０の照合部７２により当該抽出情報と全店情報記憶部７３の記憶情報との照合処理が行われるため、記憶部３５に本部サーバ７０の全店情報記憶部７３に記憶されている全ての情報を記憶させる場合と比較して、記憶部３５の記憶容量の増加を抑制することができる。

そして、人物の認証に用いる抽出情報を、店舗の営業終了時間から翌営業開始時間までの間に本部サーバ７０へ出力する場合には、店舗の営業時間外に、個人が特定できない人物のうち本部サーバ７０に情報がある人物を特定して認証することができるため、翌営業日には、人物映像メモリ群３３に蓄積される認証できない人物の映像データ量を削減することができる。

また、認証部３４により人物の認証に用いる抽出情報が記憶部３５の記憶情報に無いと判定されたタイミングで、人物の認証に用いる抽出情報を本部サーバ７０へ出力する場合には、本部サーバ７０に認証情報がある人物を即座に特定して認証することができるため、例えば、人物映像メモリ群３３に記憶される認証できない人物の映像データ量を削減することができる。

さらに、本部サーバ７０の照合部７２の照合結果に基づいて、例えば、全店情報記憶部７３に抽出情報に合致する情報があると判定された場合に、この情報に関連付けられた記憶情報を、抽出情報を出力した出力元の行動管理装置１００に対して送信し、記憶部３５の記憶情報を更新することができるので、全店情報記憶部７３の記憶情報のうち必要な情報のみを各記憶部３５に記憶させることができる。

なお、上述した実施の形態では、複数の人物映像メモリＭ１〜Ｍｎを設けた場合について説明したが、映像データを撮像したビデオカメラＶ１〜Ｖｎが区別できれば人物映像メモリＭ１〜Ｍｎは物理的に離別している必要はなく、１つの記憶媒体で構成しても良い。

また、上述の実施の形態では、顧客の行動を識別情報に関連付けて記憶させる場合について説明したが、店員の行動を同様に記憶させるようにしても良い。また、行動管理装置１００を銀行などの金融機関の店舗に設ける一例について説明したが、この構成に限られず、例えば、金融機関以外の店舗や店舗以外の場所に設けるようにしても良い。

さらに、上述の実施の形態では、映像バッファＢ１〜Ｂｎと人物映像メモリＭ１〜Ｍｎとを個別に設けた場合について説明したが、映像バッファＢ１〜Ｂｎに人物映像メモリＭ１〜Ｍｎの機能すなわち、個人を特定できない人物の映像データを記憶する機能を持たせるようにしても良い。
そして、上述の実施の形態では、本部にサーバを設ける一例について説明したが、複数の店舗のうち何れかの店舗に設けるようにしても良い。

本発明の実施の形態における行動管理システムの概略構成図である。 本発明の実施の形態における店舗のレイアウトの一例を示す図である。

符号の説明

３１ 人物特定部（人物特定手段）
３４ 認証部（認証手段）
３５ 記憶部（記憶手段）
３８ 行動検出部（行動検出手段）
３９ 文字データ変換部（文字データ変換手段）
４２ 更新制御部（出力手段，更新手段）
７０ 本部サーバ（サーバ）
７２ 照合部（照合手段）
７３ 全店情報記憶部（主記憶手段）
１００ 行動管理装置
Ｖ１〜Ｖｎ ビデオカメラ（撮像手段）
Ｂ１〜Ｂｎ 映像バッファ（映像記憶手段）

Claims (4)

1. 所定エリア内の人物の行動を管理する行動管理システムにおいて、
   前記所定エリア内の映像を撮像する撮像手段と、
   該撮像手段によって撮像された映像を記憶する映像記憶手段と、
   前記撮像手段によって撮像された映像から人物を特定する人物特定手段と、
   前記人物特定手段によって特定された人物の認証を行う認証手段と、
   前記認証手段によって認証が行われた人物による所定の行動を検出する行動検出手段と、
   前記行動検出手段によって特定された所定の行動を文字データに変換する文字データ変換手段と、
   前記文字データ変換手段によって変換された文字データを前記認証手段により認証された人物の識別情報と関連付けて記憶する記憶手段と、
   を有した行動管理装置と、
   複数の前記行動管理装置が通信手段を介して接続され、該通信手段を介して前記行動管理装置の前記記憶手段に記憶されている記憶情報を取得して記憶する主記憶手段を有したサーバと、
   を備え、
   前記行動管理装置は、前記人物特定手段により特定された人物の認証情報が前記記憶手段の記憶情報に無い場合、当該人物の認証に用いる抽出情報を、仮の識別情報と共に所定のタイミングで前記通信手段を介して前記サーバへ出力する出力手段を備え、
   前記サーバは、前記抽出情報と前記主記憶手段の記憶情報との照合処理を行う照合手段を備え、前記照合手段による照合結果に基づいて、前記抽出情報に対応する前記主記憶手段の記憶情報がある場合に、当該記憶情報を、前記抽出情報を出力した前記行動管理装置に送信し、
   該行動管理装置は、前記サーバから返信された前記主記憶手段の記憶情報に基づいて前記記憶手段の記憶情報を更新すると共に前記仮の識別情報を正規の識別情報に更新する更新手段を備えることを特徴とする行動管理システム。
2. 前記サーバは、前記照合手段による照合結果に基づいて、前記抽出情報に対応する前記主記憶手段の記憶情報がない場合に、その旨の情報を、前記抽出情報を出力した前記行動管理装置に送信し、
   該行動管理装置は、操作入力が行われると、前記仮の識別情報を正規の識別情報に更新し前記記憶手段の記憶情報を登録することを特徴とする請求項１に記載の行動管理システム。
3. 前記所定のエリアは店舗であり、前記所定のタイミングは前記店舗の営業終了時間から翌営業開始時間までの間の何れかのタイミングであることを特徴とする請求項１または２に記載の行動管理システム。
4. 前記所定のタイミングは、前記人物特定手段により特定された人物の抽出情報が前記認証手段によって前記記憶手段の記憶情報に無いと判定されたタイミングであることを特徴とする請求項１または２に記載の行動管理システム。

Images