JP7145622B2 - 情報処理装置、情報処理装置の制御方法、被写体検出システム、及び、プログラム - Google Patents

Description

本発明は、情報処理装置、情報処理装置の制御方法、被写体検出システム、及び、プログラムに関する。

近年、多数のネットワークカメラを用いた大規模な監視システムが登場してきている。このような監視システムでは、オフィス、店舗、ショッピングモール、スタジアム、街頭、地域全体など、広い範囲にネットワークカメラが設置されるようになっており、セキュリティの向上に役立っている。

このような監視システムの一例として、ネットワークカメラで撮像した画像に対して画像解析・認識処理を行うことで、画像中の被写体認識を行い、被写体を検出する被写体検出システム等が提案されている。被写体検出システムでは、検出すべき物体や人物等の特定の被写体の画像をシステムに予め登録しておき、リアルタイムにカメラ映像を解析し検出対象の被写体を検出した際に警報（アラーム）を監視員や警備員に通知する。当該アラームは、検出時に監視モニタへアラーム表示を行うことで、監視員らに通知することができる。このとき監視員らはアラーム通知の原因となったカメラ映像も確認できる。このような被写体検出システムにつき特許文献１では、ネットワークカメラで撮影した人物の顔画像と、予め登録した要注意人物の顔画像を照合することで、要注意人物であるか否かを判定するシステムが提案されている。

また、監視システムが大規模化するにつれ、カメラ台数やそれを表示するモニタ数が増加し、システムの操作者の負担が大きくなりつつある。そこで、特許文献２では、保安システムの警報活動がリスト化されたログを一覧表示することで操作員のシステムの操作性を向上させる技術を提案している。

特開２０１６－００９２３４号広報 特開平５－０９４４１８号広報

提案にかかる被写体検出システムでは、映像解析により検出対象の人物が検出されると、表示画面にカメラ映像と共にアラームやその履歴を表示し、当該人物が検出されたことを報知していた。

しかし、画面表示されるカメラ映像は、ネットワークカメラの設置条件や照明条件、被写体の状態などの影響を受けるため、必ずしも操作者が人物を特定できる程度に鮮明に撮影されているとは限らない。よって、アラームが発生した場合に操作者がカメラ映像を見ても検出された人物を特定することが困難となるおそれがある。

また、撮影条件によっては映像解析の結果に誤りが生ずる場合もある。この場合、映像中の人物を別の人物と誤認識してアラーム表示を行うことになるが、検出された人物をカメラ映像において特定しにくいと操作者は誤認識が発生していることにすら気づかないおそれがある。

そこで、本発明は、被写体検出システムにおいて、被写体を検出したことの通知表示において、検出対象の被写体の視認性を向上させることを可能とする技術を提供する。

上記課題を解決するための本発明は情報処理装置であって、
撮像画像から検出すべき被写体の特徴情報を保持する保持手段と、
前記特徴情報に基づいて、撮像画像から前記被写体を検出する検出手段と、
前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成手段と
前記表示情報を出力する出力手段と
を備え、
前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
前記生成手段は、前記被写体の優先度が表示されるように前記表示情報を生成し、
前記生成手段は、前記撮像画像に、前記検出された被写体を識別可能に示すための、前記被写体の名称を含む標識が重畳されて表示されるように前記表示情報を生成することを特徴とする。

本発明によれば、被写体検出システムにおいて、被写体を検出したことの通知表示において、検出対象の被写体の視認性を向上させることを可能とする技術を提供することができる。

発明の実施形態に対応する被写体検出システムの構成の一例を示す図。 発明の実施形態に対応する各装置のハードウェア構成及び機能構成の一例を示す図。 発明の実施形態に対応する被写体情報の登録処理の一例を示すフローチャート。 発明の実施形態に対応する登録者リスト、及び、登録者リスト管理テーブルの構成の一例を示す図。 発明の実施形態に対応する被写体検出処理、及び、アラーム表示処理の一例を示すフローチャート。 発明の実施形態に対応するアラーム表示に関連する情報を管理する各種テーブルの構成の一例を示す図。 発明の実施形態に対応するアラーム表示画面の一例を示す図。 発明の実施形態に対応するアラーム表示画面の他の一例を示す図。 発明の実施形態に対応するアラーム表示画面の更に他の一例を示す図。 発明の実施形態に対応するアラーム表示画面の更に他の一例を示す図。 発明の実施形態に対応するアラーム表示画面に含まれる情報の表示形態の他の例を示す図。

以下、添付図面を参照して、発明を実施するための形態について詳細に説明する。なお、以下に説明する実施の形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。

図１は、本実施形態における被写体検出システムの構成の一例を示したブロック図である。本実施形態では、被写体検出システムをネットワークカメラシステム１０に適用する。

ネットワークカメラシステム１０は、少なくとも１台のネットワークカメラ（以下、単に「カメラ」ともいう）１０２と、情報処理装置１０３、１０４、１０５を備える。情報処理装置１０３は画像録画サーバ、情報処理装置１０４は画像解析サーバ、情報処理装置１０５は操作端末として、それぞれ構成することができる。これらの情報処理装置は、物理的に独立した装置として構成しても、あるいは、一体的に構成してもよい。

カメラ１０２と情報処理装置１０３、１０４、１０５とは、ネットワーク回線であるＬＡＮ（Local Area Network）１０１によって接続されている。なお、ネットワーク回線はＬＡＮに限定されるものではなく、インターネットやＷＡＮ（Wide Area Network）などであってもよい。また、ＬＡＮ１０１への物理的な接続形態は、有線であってもよいし、無線であってもよい。さらに、図１において、カメラ１０２及び情報処理装置１０３、１０４、１０５は、１台または２台がＬＡＮ１０１に接続されているが、接続台数は図１に示す数に限定されない。

カメラ１０２は、所定の画角で監視対象空間内に存在する所定の被写体を撮像する、監視カメラ等の撮像装置である。カメラ１０２は、撮像画像（以下、単に「画像」ともいう。）を、ＬＡＮ１０１を介して各情報処理装置１０３、１０４、１０５へ送信する機能を有する。

画像録画サーバ１０３は、ネットワークカメラ１０２から送信された撮像画像をＬＡＮ１０１経由で受信して保存、蓄積する。また、画像録画サーバ１０３は、画像解析サーバ１０４及び操作端末１０５から受け付けた要求に応じて保存している撮像画像を各装置に送信する。画像解析サーバ１０４は、撮像画像から検出すべき被写体の画像等を操作端末１０５からＬＡＮ１０１経由で受信し、被写体検出処理に必要な特徴量を生成し被写体を検出するために用いる特徴情報として保存しておく。また、画像解析サーバ１０４は、カメラ１０２が撮像した撮像画像をＬＡＮ１０１経由でカメラ１０２から受信して画像解析処理を行い、検出すべき被写体が当該撮像画像に含まれているかどうかの被写体検出処理を行うことができる。また、画像録画サーバ１０３に記録されている撮像画像をＬＡＮ１０１経由で受信した場合も、当該撮像画像について同様に被写体検出処理を行うことができる。

画像解析サーバ１０４は、撮像画像中で検出すべき被写体を検出した場合にはアラーム表示情報を生成し、操作端末１０５に生成したアラーム表示情報を送信する。アラーム表示情報の送信は、操作端末１０５からの要求に基づき実行してもよいし、操作端末１０５が検出結果をリアルタイムで受信する設定であれば、画像解析サーバ１０４は解析結果を解析処理終了毎に操作端末１０５へ送信してもよい。

本実施形態の以下の説明では、画像解析サーバ１０４がネットワークカメラ１０２の撮像画像を画像録画サーバ１０３経由で受信する場合を想定しているが、ネットワークカメラ１０２から直接受信する場合も同様にして各種の処理を実行することができる。また、以下の説明では、画像解析サーバ１０４が解析結果や登録情報を保持する場合を想定しているが、ネットワークを介した他のデータベースや操作端末１０５に保存するようにしても構わない。

操作端末１０５は、表示装置（ディスプレイ）を備え、カメラ１０２から受信した撮像画像や、画像録画サーバ１０３に記録された画像データの再生・表示や、画像解析サーバ１０４から受信したアラーム表示情報を表示するための表示制御機能を有する。また操作端末１０５は、被写体検出用のユーザインタフェースと入力部を備え、被写体検出のための画像解析処理に関するパラメータ設定や、登録情報の設定、アラーム表示情報の各種パラメータの設定の操作を行うための機能を有する。

次に、発明の実施形態に対応する各装置の構成について説明する。図２（Ａ）は、発明の実施形態に対応するカメラ１０２のハードウェア構成の一例を示す図である。カメラ１０２は、ＣＰＵ２０１、ＲＯＭ２０２、ＲＡＭ２０３、外部メモリ２０４、撮像部２０５、入力部２０６、通信Ｉ／Ｆ２０７、システムバス２０８を含んで構成することができる。これ以外の構成をさらに含んでいてもよい。

ＣＰＵ２０１は、カメラ１０２における動作を統括的に制御する制御部であって、システムバス２０８を介して、各構成要素（２０２～２０７）の動作を制御する。ＲＯＭ２０２は、ＣＰＵ２０１が処理を実行するために必要な制御プログラム等を記憶する不揮発性メモリである。なお、当該プログラムは、外部メモリ２０４や着脱可能な記憶媒体（不図示）に記憶されていてもよい。ＲＡＭ２０３は、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。すなわち、ＣＰＵ２０１は、処理の実行に際してＲＯＭ２０２から必要なプログラム等をＲＡＭ２０３にロードし、当該プログラム等を実行することで各種の機能動作を実現する。

外部メモリ２０４は、例えば、ＣＰＵ２０１がプログラムを用いた処理を行う際に必要な各種データや各種情報等を記憶している。また、外部メモリ２０４には、例えば、ＣＰＵ２０１がプログラム等を用いた処理を行うことにより得られた各種データや各種情報等が記憶される。撮像部２０５は、被写体の撮像を行って撮像画像を生成する。撮像部２０５は、例えばＣＭＯＳ（Complementary Metal Oxide Semiconductor）、ＣＣＤ（Charge Coupled Device）等の撮像素子、Ａ／Ｄ変換器、現像処理部等を含んで構成することができる。

入力部２０６は電源ボタンや設定ボタンなどから構成され、カメラ１０２の操作者は、入力部２０６を介して当該カメラ１０２に指示を与えることができる。通信Ｉ／Ｆ２０７は、外部装置（ここでは、情報処理装置１０３）と通信するためのインターフェースである。通信Ｉ／Ｆ２０７は、例えばＬＡＮインターフェースである。システムバス２０８は、ＣＰＵ２０１、ＲＯＭ２０２、ＲＡＭ２０３、外部メモリ２０４、撮像部２０５、入力部２０６及び通信Ｉ／Ｆ２０７を通信可能に接続する。カメラ１０２の各部の機能は、ＣＰＵ２０１がＲＯＭ２０２もしくは外部メモリ２０４に記憶されたプログラムを実行することで実現される。

本実施形態において、情報処理装置１０３から１０５のそれぞれのハードウェア構成についても、図２（Ａ）に示すハードウェア構成に準ずることができる。ただし、その場合には、撮像部２０５に代えて、表示部等のハードウェア構成を具備することができる。ここで、表示部は、液晶ディスプレイ（ＬＣＤ）等のモニタで構成される。また、情報処理装置１０３から１０５は、入力部２０６として、キーボードやマウス等のポインティングデバイスを具備し、操作者が情報処理装置１０３から１０５に対して指示を与えることができるように構成される。また、外部メモリ２０４は、種々の情報を記憶しておくためのデータベースを含むことができる。

図２（Ｂ）は、発明の実施形態に対応する情報処理装置としての画像解析サーバ１０４の機能構成の一例を示すブロック図である。画像解析サーバ１０４は、画像取得部２１１、被写体領域検出部２１２、特徴量取得部２１３、被写体情報登録部２１４、被写体情報管理部２１５、照合部２１６を備えることができる。さらに、アラーム情報設定部２１７、アラーム情報管理部２１８、アラーム作成部２１９、アラーム通信部２２０、設定管理部２２１を備えることができる。

図２（Ｂ）に示す各機能構成要素は、画像解析サーバ１０４のＣＰＵ２０１が対応する処理プログラムを実行することによって実現され得る。ただし、図２（Ｂ）に示す各要素のうち少なくとも一部を専用のハードウェアで実現するように構成してもよい。この場合、専用のハードウェアは、ＣＰＵ２０１の制御に基づいて動作する。

本実施形態では、図２（Ｂ）の各機能を画像解析サーバ１０４内に搭載する場合を説明するが、機能の一部を他の機器に搭載してもよい。例えば、機能の一部をカメラ１０２内に搭載してもよいし、画像録画サーバ１０３を含む他の情報処理装置に搭載してもよい。また、本実施形態においては、画像解析サーバ１０４が被写体として主に人物を検出する場合を説明するが、検出対象となる被写体は人物に限定されるものではない。例えば、車両や不審物などの特定の被写体を検出対象とすることもできる。

画像取得部２１１は、カメラ１０２から送信された撮像画像を画像録画サーバ１０３経由で受信し、伸長、復号化して画像（動画像若しくは静止画像）を取得する。画像取得部２１１は、取得した画像を順次、被写体領域検出部２１２へ送出する。ここで、本実施形態においてカメラ１０２から提供される撮像画像は、静止画であっても動画であってもよい。また、撮像画像の供給元については特に限定するものではない。供給元は、有線若しくは無線を介して撮像画像を供給するカメラ１０２、画像録画サーバ１０３、あるいは、それら以外の他の撮像装置であってもよい。また、画像取得部２１１は、同一の装置内のメモリ（例えば、外部メモリ２０４）から撮像画像を取得するようにしてもよい。以下の説明では、画像取得部２１１が動画像を取得した場合であっても静止画像を取得した場合であっても、画像取得部２１１は、被写体領域検出部２１２へ１枚の画像を送出する場合について説明する。前者の場合は、上記１枚の画像が動画像を構成する各フレームに相当し、後者の場合は、上記１枚の画像が静止画像に相当する。動画像の場合は、各フレームについて同様の処理を繰り返せばよい。

次に、被写体領域検出部２１２は、画像取得部２１１が受信した撮像画像に対し、照合パターン辞書等を用いて被写体領域検出処理を実施する。これにより、撮像画像中で被写体（例えば、人物）が含まれる被写体領域（人物領域）が抽出される。特徴量取得部２１３は、被写体領域検出部２１２で抽出された被写体領域の画像から、所定の演算に基づいて特徴量を抽出する特徴量抽出処理を行う。例えば、被写体として人物が抽出される場合、特徴量として人物の顔の特徴量を抽出することができる。また、顔以外にも上半身、下半身、全身、後姿、着衣等の特徴量を抽出してもよい。

次に、被写体情報登録部２１４は、検出対象とする被写体の画像を含む情報を操作端末１０５からＬＡＮ１０１経由で受信し、被写体検出処理に必要な特徴量を生成し被写体の特徴情報（以下、「被写体情報」という）として被写体情報管理部２１５に登録する。ここでの特徴量の生成については、特徴量取得部２１３が行う処理と同様に実施することができる。被写体情報管理部２１５は、被写体情報登録部２１４が生成した登録対象の被写体の特徴量や画像を、登録名や登録時刻等の情報と共に被写体情報として管理する。

照合部２１６は特徴量取得部２１３が取得した特徴量と被写体情報管理部２１５が保持・管理する、検出対象の被写体の特徴量とを照合し、類似度を算出する。算出した類似度が所定の閾値以上である場合、撮像された被写体は、検出対象の被写体に類似していると判断し、検出対象の被写体が検出されたと認識する。

上述のように本実施形態において検出すべき対象である被写体は人物に限定されない。したがって、被写体情報登録部２１４は、操作端末１０５から提供された被写体画像から、当該被写体を撮像画像において検出するのに有効となる特徴量を抽出する。検出対象が車両であれば、当該車両を検出可能な車両の形状的特徴や、車両に固有の識別情報（例えばナンバープレートの番号）を特徴量として抽出することができる。

アラーム情報設定部２１７は、画像解析サーバ１０４での解析処理結果に応じたアラームの通知内容や対象カメラなどのアラーム設定を行う。アラーム情報設定部２１７は、アラーム設定を操作端末１０５からＬＡＮ１０１経由で受信し、アラーム情報管理部２１８へ登録する。アラーム作成部２１９は、検出対象の被写体が検出されたことを通知するためのアラーム表示情報をアラーム情報管理部２１８の設定及びに基づき作成する。アラーム通信部２２０は、アラーム作成部２１９が作成したアラーム表示情報をＬＡＮ１０１経由で操作端末１０５へ送信する。設定管理部２２１は、画像解析サーバ１０４の設定や映像解析に必要な設定、カメラ設定など映像解析処理及びアラーム作成処理に必要な情報を保持している。

図２（Ｃ）は、発明の実施形態に対応する操作端末１０５の機能構成の一例を示すブロック図である。操作端末１０５は、アラーム受信部２３１と、画像取得部２３２と、設定入力部２３３と、設定通信部２３４と、アラーム通知部２３５とを備える。設定入力部２３３は、検出対象とする被写体の画像を含む被写体に関する情報やアラーム設定情報を入力する。設定通信部２３４は、入力された情報をＬＡＮ１０１経由で画像解析サーバ１０４に送信する。アラーム受信部２３１は、画像解析サーバ１０４からアラーム表示情報をＬＡＮ１０１経由で受信する。画像取得部２３２は、受信したアラーム表示情報のアラーム発生時刻の撮像画像を画像録画サーバ１０３から取得する。アラーム通知部２３５は、受信したアラーム表示情報とアラームに関する撮像画像等を含むアラーム表示画面をディスプレイに表示し操作者へアラームを通知する。

上記構成で本発明が適用できる被写体検出システムの動作の詳細を説明する。まず画像解析サーバ１０４が実行する被写体情報登録処理手順について、図３を参照しながら説明する。

Ｓ３０１では、被写体情報登録部２１４は、検出対象となる被写体に関する情報が入力されたか否かを判定する。本実施形態では、操作端末１０５から画像解析サーバ１０４に対して当該情報を入力することができる。操作端末１０５の操作者は、被写体情報登録時に、登録しようとする被写体の名称（人物であれば氏名、名称）、被写体画像、被写体に関する記述的情報を含めることができる。例えば、記述的情報には、被写体に関するコメントや、被写体が人物である場合には性別、年齢、その他の当該人物に関連する任意の属性情報を含めることができる。被写体画像は、例えば人物の場合には顔画像とすることができ、複数枚数の画像を登録することができる。複数枚の画像を登録することで、人物を検出する精度をより高めることが可能となる。情報が入力された場合、処理はＳ３０２へ進む。

Ｓ３０２では、Ｓ３０１で入力された情報のチェックを行う。入力値のチェックとして、入力された画像に対し特徴量の抽出処理を行う。例えば、検出対象の被写体が人物の場合には、顔検出処理を行って、入力画像に顔画像が含まれるかどうかを判定する。顔画像が含まれる場合には、顔特徴量抽出処理を更に行って、顔特徴量が抽出する。Ｓ３０１において顔画像が複数枚入力された場合には、顔画像ごとに顔特徴量を抽出する。顔特徴量が抽出できる場合には、処理はＳ３０３へ進む。一方、検出対象の被写体の特徴量が抽出できない場合には、入力された情報は、登録するには不十分な情報であるので、処理はＳ３０１に戻る。Ｓ３０３では、Ｓ３０１で入力された被写体画像等の情報と、Ｓ３０２で抽出した特徴量とを関連付けて被写体情報管理部２１５に被写体情報として登録する。

ここで、被写体情報管理部２１５が管理する被写体情報について説明する。図４（Ａ）は被写体情報として人物情報を登録している登録者リスト４００の一例を示す。登録者リスト４００は、登録者ＩＤ４０１、登録時刻４０２、登録名４０３、特徴量４０４、顔画像４０５、性別４０６、コメント４０７のフィールドを有するが、登録人物に関するさらなる情報が登録されていてもよい。

登録者ＩＤ４０１は、登録人物に対して一意に割り当てられる識別情報であり、登録人物と関連付けられた登録情報を識別するために用いることができる。登録時刻４０２は、被写体情報管理部２１５に当該人物情報が登録された時刻を示す。登録名４０３は、登録された人物の指名、名称等が登録される。登録名４０３は、操作端末１０５から被写体情報を画像解析サーバ１０４に登録する際に、端末操作者により入力することができる。同様に顔画像４０５、性別４０６、コメント４０７は端末操作者により入力された内容を登録することができる。特徴量４０４には、登録人物が含まれる画像において、当該人物を特定するために利用可能な特徴量が登録される。本実施形態では、顔画像４０５から抽出された顔特徴量を登録することができる。また、顔画像以外の他の画像（全身画像、上半身画像、下半身画像、後姿、着衣の画像）が提供される場合にも、それらの画像から抽出された特徴量が登録される。また、提供された他の画像も登録者リスト４００に登録することができる。

このようにして登録者リストを生成することができるが、当該リストは登録される対象の属性に応じて複数種類を生成することもできる。図４（Ｂ）は、複数種類のリストが生成される場合に、当該リストを管理するための登録者リスト管理テーブルの構成の一例を示す図である。図４（Ｂ）に示すように、図４（Ａ）の一般的な登録人物のリストの他に、例えば要注意人物リストや従業員リストといったリストを作成することもできる。テーブル４１０は、これらのリストを識別するための識別情報であるリストＩＤ、リスト名４１２、コメント４１３が登録される。ここで、リストＩＤ００１の登録者リスト１が図４（Ａ）に示した登録者リスト４００に対応している。

登録者リスト４００は、一部の情報が操作端末１０５に保持されてもよい。例えば、登録者ＩＤ４０１、登録時刻４０２、登録名４０３、顔画像４０５、性別４０６、コメント４０７の情報は、操作端末１０５側にもリストとして保持されてもよい。このリストを操作端末１０５側での保持しておくことにより、画像解析サーバ１０４から受信したアラーム表示情報を操作端末１０５の表示装置に表示する際に、検出された被写体の画像を特定してアラーム表示に含めることが可能となる。

次に、画像解析サーバ１０４が実行する照合処理について、図５（Ａ）のフローチャートを参照しながら説明する。まず、Ｓ５０１では、画像取得部２１１が、カメラ１０２が撮像した撮像画像を画像録画サーバ１０３経由で受信し、伸長、復号化して画像（動画像若しくは静止画像）を取得する。取得した画像は順次、被写体領域検出部２１２へ送出する。Ｓ５０２では、被写体領域検出部２１２が、照合パターン辞書等を用いて取得した画像から被写体領域を検出する処理を実施する。ここで検出すべき被写体が特定の人物である場合には、撮像画像から人物領域を抽出する。その場合、被写体領域検出部２１２は、画像から人物が含まれる領域であって、少なくとも顔特徴量等を抽出可能な領域を検出する機能を有していればよく、人物領域の検出処理はパターン処理に限定されない。

人物領域を検出するための他の手法としては例えば、以下の方法がある。当該方法では所定の大きさの検出ウィンドウを入力画像上で走査させ、検出ウィンドウ内の画像を切り出したパターン画像に対し人物であるか否かの２クラス判別を行う。この判別には、アダブーストを使って多くの弱判別器を有効に組み合わせて判別器を構成し、判別精度を向上させる。また、この判別器を直列に繋ぎ、カスケード型の検出器を構成するようにしている。弱判別器はＨＯＧ特徴量で構成されている。そして、カスケード型の検出器は、まず前段の単純な判別器を使って明らかに被写体でないパターンの候補をその場で除去する。それ以外の候補に対してのみ、より高い識別性能を持つ後段の複雑な判別器を使って人物かどうかの判別を行う。

また、被写体領域検出部２１２による被写体領域検出処理においては、必ずしも受信した撮像画像の全体について処理を行う必要はない。例えば、撮像画像のうち特定の領域あるいは範囲をあらかじめ処理対象に定めておき、当該範囲内で被写体が存在するか否かを判定し、被写体領域を抽出してもよい。また、検出対象とする被写体の最大サイズと最小サイズとに基づく範囲を指定しておき、この範囲から外れた被写体の検出を行わないようにすることも可能である。このような処理により、被写体領域の検出処理を高速化することができる。当該範囲などの指定は、情報処理装置１０４又は操作端末１０５のユーザインタフェースを介して被写体領域検出部２１２に処理パラメータを設定することにより行うことができる。

続くＳ５０３では、特徴量取得部２１３が、Ｓ５０２で取得した被写体領域画像から特徴量を抽出する抽出処理を行う。例えば、被写体が人物である場合には、被写体領域である人物領域から顔検出処理を行って顔領域を特定し、当該顔領域から顔特徴量を抽出する。顔検出処理は、画像から目、口等のエッジを検出して人物の顔の特徴部分を検出する処理を行う。すなわち、顔検出処理では、顔位置や顔の大きさ、顔の確からしさ等から顔領域を検出する。

続くＳ５０４では、照合部２１６が、Ｓ５０３で取得した特徴量と、被写体情報管理部２１５に保持されている被写体情報における特徴量とを照合し、類似度を算出する。例えば、検出しようとする被写体が図４（Ａ）に示す登録者リスト１に含まれる人物である場合、Ｓ５０３で取得した特徴量としての顔特徴量と、登録者リスト４００に登録されている各人物の特徴量４０４とを順に比較して、それぞれについて類似度を算出する。

続くＳ５０５では、照合部２１６が、被写体情報管理部２１５に登録されている被写体と同一とみなされる被写体が検出されたか否かの判定を行う。当該判定は、Ｓ５０４で算出した類似度が所定の類似度閾値以上となるかどうかに基づく。具体的に図４（Ａ）のリストを用いた場合では、登録者リスト４００に登録されている各人物の特徴量４０４と比較して算出された類似度のうち、閾値以上となった特徴量４０４があれば、当該特徴量４０４対応する人物が判定対象の撮像画像に写っている人物とみなすことができるので、登録人物が検出されたことになる。一方、類似度が閾値以上となる特徴量４０４が存在しない場合には、撮像画像に写っている人物は、登録人物ではないとみなすことができる。なお、類似度が閾値以上になる人物が複数存在する場合には、類似度がより高い人物を選択する。また、複数の登録画像が存在する場合には、画像ごとに算出された特徴量との比較を行い、算出された類似度の平均値がより高くなる人物を選択してもよい。

Ｓ５０５において、照合部２１６が登録被写体を検出したと判定される場合、処理はＳ５０６に進む。一方、照合部２１６が登録被写体を検出していないと判定される場合、処理はＳ５０８に進む。Ｓ５０６では、アラーム作成部２１９が、登録された被写体が検出されたことを操作端末１０５において報知（画面表示）するためのアラーム表示情報の作成を行う。このアラーム表示情報は、アラーム情報管理部２１８で設定された条件を満たす検出結果について生成される。続くＳ５０７において、アラーム通信部２２０が、Ｓ５０６で作成したアラーム表示情報を操作端末１０５へ送信する。Ｓ５０８では、本処理を継続するか否かを判別し、継続する場合はＳ５０１へ戻り、継続しない場合は本処理を終了する。

Ｓ５０７における送信では、生成したアラーム表示情報を外部装置である操作端末１０５に送信する場合を記載したが、画像解析サーバ１０４がディスプレイ等の表示装置を有する場合に、当該表示装置にも表示してもよい。

次に図６を参照して、アラーム情報管理部２１８で管理するアラーム設定項目について説明する。図６（Ａ）はアラーム設定リストであり、アラーム情報管理部２１８で管理するアラーム条件設定の一例である。アラーム設定は画像解析サーバ１０４が保持する情報であり、アラームＩＤ６０１、リストＩＤ６０２、アラーム種別６０３、優先度６０４、対象カメラ６０５、アラーム閾値６０６の項目が含まれる。

アラームＩＤ６０１はアラーム設定に対して一意に割り当てられ、アラームを識別するための識別情報である。リストＩＤ６０２は、アラーム設定が適用されるリストＩＤを示し、図４（Ｂ）のリストＩＤ４１１と共通の識別情報が用いられる。図６（Ａ）の設定では登録者リストＩＤ「００１」の登録者が検出された際はアラームＩＤ「１」が出力される。

アラーム種別６０３には、撮像画像を解析して検出する内容が登録される。本実施形態では人物検出を行っているため設定値として「Human Detection」が設定されている。画像解析サーバ１０４で他の画像解析を行い、その結果をアラームとして通知する場合には、対応する解析種別を設定することができる。例えば画像解析サーバ１０４で人物が侵入禁止エリアに侵入したことを検知し、それをアラームとして出力することもできる。

優先度６０４には、出力するアラームの優先度を示す値が設定される。優先度６０４は、リストＩＤ６０２に登録されるリストの種別に対応付けられている。よって、操作端末１０５上でアラーム表示画面に優先度の表示を含めることで、どのリストに登録されている人物についてアラームが出力されたのかを把握することができる。優先度は、アラームに対する優先度の高低を操作者が認識することを可能とする。例えば、アラームとしての緊急性が高いものほど優先度を高くすることができる。図４（Ｂ）に示したリストとの関連では、リストＩＤ４１１が００２の要注意人物リストには優先度Ｈｉｇｈを割り当て、００１の登録者リスト１にはＭｉｄｄｌｅを割り当て、００３の従業員リストにはＬｏｗを割り当てることができる。また、優先度に応じて操作端末１０５側で別の警報装置へ通知する等のシステムを導入することも可能である。

対象カメラ６０５には、アラーム生成の対象となるカメラ１０２を特定する値が登録される。システム１０に接続されているカメラ１０２のすべてを対象とする場合は「all」を示す値が登録される。一部のカメラ１０２のみを指定する場合には、当該カメラを特定するためのカメラＩＤ等を登録することができる。アラーム閾値６０６には、照合部２１６が算出した類似度に基づきアラームを生成する場合に用いるアラーム閾値が登録される。アラーム閾値６０６は、照合部２１６が登録された被写体が検出されたか否かを判定する際に用いる閾値とは異なる。アラーム閾値６０６は、照合部２１６で登録人物と判定した人物について、アラーム生成の有無やアラーム種別の変更等を行うかどうかを判定するために用いられる閾値である。よって、リスト００１や００２の人物が検出されたと照合部２１６が判定した場合には、アラーム閾値は０であるので、全てがアラーム生成の対象となる。アラーム閾値６０６を設定することにより、例えば、画像解析処理の設定パラメータは変更せずにアラームの発行制限を行うことや、類似度が高く登録人物の可能性が高い場合に別のアラーム種別のアラーム生成を行ったりすることができる。

図６（Ｂ）は、発明の実施形態に対応するアラーム表示情報テーブルの一例を示す。アラーム表示情報テーブル６１０は画像解析サーバ１０４が保持する情報であり、検出日時６１１、登録者ＩＤ６１２、登録名６１３、アラーム種別６１４、場所６１５、カメラＩＤ６１６、カメラ名６１７、優先度６１８、登録リスト名６１９、類似度６２０のフィールドを有する。

検出日時６１１はカメラ１０２の撮像画像から登録人物が検出された日時である。登録者ＩＤ６１２は、照合部２１６で検出した人物を識別するための識別情報であり、図４（Ａ）の登録者ＩＤ４０１と対応する値が登録される。登録名６１３は、照合部２１６で検出した被写体の登録名であり、図４（Ａ）の登録名４０３と対応する値が登録される。アラーム種別は６１４、アラーム情報管理部２１８の設定条件に基づき作成されたアラームの種類である。場所６１５は、被写体が検出された画像を撮像したカメラ１０２の設置場所である。カメラＩＤ６１６は、被写体を検出した画像を撮像したカメラ１０２の識別情報である。カメラ名６１７は被写体を検出した画像を撮像したカメラ１０２のカメラ名である。優先度６１８は、アラーム情報管理部２１８の設定条件に基づき作成されたアラームの優先度である。登録リスト名６１９は、検出した被写体が含まれるリスト名である。類似度６２０は、被写体を検出した際に算出した類似度である。

このようなアラーム表示情報は、画像解析サーバ１０４から操作端末１０５へアラーム表示を操作端末１０５で行うための表示情報として送信され、図７に示すアラーム表示処理手順にしたがって表示される。

次に図６（Ｃ）は、発明の実施形態に対応するカメラ情報テーブル６３０の一例を示す図である。カメラ情報テーブル６３０は、カメラＩＤ６３１、カメラ名６３２、場所６３３、ＩＰアドレス６４４、領域６３５、マップＩＤ６３６、マップ位置６３７の項目を有する。カメラＩＤ６３１には、個々のカメラ１０２を識別する情報が登録される。カメラ名６３２には、個々のカメラに与えられる名称が登録される。場所６３３には、カメラが配置される場所を示す情報が登録される。ＩＰアドレス６３４には、個々のカメラに与えられたＩＰアドレスが登録される。これによりカメラ１０２は外部装置と直接に通信することができる。領域６３５には、カメラが撮影する領域を示す情報が登録される。マップＩＤ６３６には、表示情報で用いられるマップ画像を特定するための識別情報が登録される。マップ位置６３７は、マップＩＤ６３６により特定されるマップ画像上におけるカメラ相対位置を示す情報が登録される。これらの情報は画像解析サーバ１０４が保持する情報であり、カメラ名６３２、場所６３３、領域６３５、マップ位置６３７は、操作端末１０５からも変更が可能である。また、アラーム作成部２１９は、当該情報をアラーム作成時に参照し、作成したアラーム表示情報を操作端末１０５へ送信する。

次に図６（Ｄ）は、発明の実施形態に対応するマップ情報テーブル６４０の一例を示す図である。マップ情報テーブル６４０は、マップＩＤ６４１、マップ名６４２、画像データ６４３の項目を有する。マップＩＤ６４１は、マップを一意に特定するための識別情報が登録され、カメラ情報テーブル６３０のマップＩＤ６３６と対応する。マップ名６４２には、マップの名称が登録される。画像データ６４３は、マップＩＤで識別されるマップ画像のデータが登録される。本テーブルを参照することにより、マップＩＤが特定されれば、対応するマップ画像を取得することが可能となる。マップ情報テーブル６４０は、画像解析サーバ１０４が保持していてもよいし、操作端末１０５が保持していてもよい。また、両装置がそれぞれ保持していてもよい。

次に、操作端末１０５が実行するアラーム表示処理手順について、図５（Ｂ）のフローチャートを参照しながら説明する。Ｓ５１１において、操作端末１０５は、画像解析サーバ１０４からアラーム表示情報を受信する。続くＳ５１２において、操作端末１０５は、操作端末１０５の表示装置にアラーム表示画面を表示するために、Ｓ５１１で受信したアラーム表示情報を解析する。続くＳ５１３において、Ｓ５１２における解析結果に基づき、アラーム表示情報に含める各種の情報を取得する。当該情報は、画像録画サーバ１０３や画像解析サーバ１０４から取得することもできるし、操作端末１０５自体が保持している場合には操作端末１０５が保持する情報を利用することもできる。例えば、操作端末１０５は、検出日時６１１及びカメラＩＤ６１６に基づいてアラーム発生時の撮像画像を画像録画サーバ１０３から取得する。また、受信したアラーム表示情報の登録者ＩＤ６１２に基づき、登録者リストからアラーム表示に含める顔画像を取得する。また、アラーム表示情報のカメラＩＤ６１６に基づき、カメラ情報テーブル６３０に従いマップＩＤ６３６及びマップ位置６３７を取得する。また、取得したマップＩＤ６３６とマップ情報テーブル６４０とに基づき、対応するマップ画像データを取得する。

続くＳ５１４では、以上により取得した情報に基づいてアラーム表示画面を操作端末１０５の表示装置上に表示する。アラーム表示画面は、アラーム表示情報に含まれる検出日時、アラーム種別などのテキストデータの他、検出した被写体の画像、被写体が検出された画像を撮像カメラ１０２の位置により、マップ上において被写体が検出された位置を示すマップ画像等を含むことができる。Ｓ５１４におけるアラーム画面表示では、Ｓ５１３で取得した情報を全て表示してもよいが、操作者の設定や操作に応じて、所定の情報に絞り込んで表示を行ったり、段階的に情報を提供したりするようにしてもよい。

また、アラーム表示情報を画像解析サーバ１０４がディスプレイ等の表示装置に表示する場合には、画像解析サーバ１０４が図５（Ｂ）の処理を実行することができる。

次に、発明の実施形態に対応するアラーム表示画面の例を説明する。図７は発明の実施形態に対応するアラーム表示画面の一例を示す図である。図７に示すアラーム表示画面７０１は、アラーム情報リスト７０２、被写体情報表示領域７０３、撮像画像７０４、登録画像７０５、操作パネル７０６、マップ画像７０７、カメラ標識７０８を含めることができる。

アラーム情報リスト７０２は、検出された被写体を一覧表示するリストであり、検出対象の被写体が検出される度にリストの先頭行に当該検出被写体に関する情報が追加される。被写体情報表示領域７０３には、被写体が検出されたときに撮像された撮像画像７０４と、検出された被写体の登録画像７０５、撮像画像７０４が動画である場合、あるいは、複数枚の静止画である場合に、表示を制御するための操作パネル７０６が含まれる。アラーム情報リスト７０２の中からから、いずれかの検出被写体が選択されると、選択された被写体の検出時の画像が撮像画像７０４として表示される。また、当該被写体の画像が登録画像７０５として表示される。これにより、操作端末１０５の操作者は、検出時の被写体の様子を把握すると同時に、検出された被写体が誰（何）であるかを登録画像７０５により直ちに認識することが可能となる。よって、撮像画像７０４からは被写体を認識しづらい場合であっても、直ちに検出された被写体を特定することが可能となる。登録画像７０５を表示する場合に、枠の色を優先度に対応する色としてもよい。例えば、優先度がＨｉｇｈの場合は赤、Ｍｉｄｄｌｅは黄色、Ｌｏｗは青といったように色分けすることにより、検出された被写体の優先度を直感的に把握することが可能となる。

マップ７０７には、撮像画像７０４を撮像したカメラ１０２に対応するマップ画像が表示され、当該カメラ１０２の位置がカメラ標識７０８により示される。これにより、どのカメラ１０２によって被写体が検出されたか、換言すれば、マップ上のどの位置において被写体が検出されたかを直ちに把握することができる。

次に、図８を参照して、発明の実施形態に対応するアラーム表示画面の他の例を説明する。図８は発明の実施形態に対応するアラーム表示画面の他の一例を示す図である。図８に示すアラーム表示画面８０１は図７に示したアラーム表示画面７０１とほぼ同様であるが、図７では登録画像が１枚であったのに対して、図８では３枚の登録画像が表示される点で異なっている。登録画像８０１から８０３は、同一の被写体について登録された画像である。ここでは、人物を想定しているので同一人物について３枚の画像が登録されている。これらの画像は登録者リスト４００に登録された画像を用いることができるので、登録者リスト４００に複数枚の画像が登録されていれば、それらを表示することができる。

また、複数の画像を表示する場合、撮像画像から抽出された特徴量との類似度が最も高いと判定された登録画像を優先して表示することができる。その際に、類似度がより高いと判定された画像を識別可能に表示してもよい。例えば、類似度が高いほど表示サイズを大きくしたり、撮像画像７０４の近くに表示したりしてもよい。

次に、図９を参照して、発明の実施形態に対応するアラーム表示画面の更に他の例を説明する。図９は発明の実施形態に対応するアラーム表示画面の更に他の一例を示す図である。図９に示すアラーム表示画面９０１は図７に示したアラーム表示画面７０１とほぼ同様であるが、図７と比較して撮像画像７０４をより大きく表示するとともに、登録画像をマップ７０７上に表示している点で異なる。アラーム表示画面７０１では、被写体を検出したカメラの位置をカメラ標識７０８により示していたが、図９に示すように登録画像９０２を標識として用いて当該カメラと関連付けることにより、被写体が検出された位置をマップ上で特定できると同時に、被写体が誰（何）であるかを把握することが可能となる。また、図９に示すように、操作端末１０５のアラーム表示画面上において、アラーム情報リスト７０２、被写体情報表示領域７０３及びマップ７０７の表示位置は固定的ではなく、任意に変更が可能である。

次に、図１０を参照して、発明の実施形態に対応するアラーム表示画面の更に他の例を説明する。図１０は発明の実施形態に対応するアラーム表示画面の更に他の一例を示す図である。図１０に示すアラーム表示画面１００１は図７に示したアラーム表示画面７０１とほぼ同様であるが、図７と比較して登録画像１００２から１００４がマップ上７０７にも表示されるとともに、登録画像７０５と関連付けて検出日時、登録名、検出場所の情報１００５が表示される点で異なる。

登録画像１００２は、カメラ標識７０８で示すカメラ１０２で検出された被写体の登録画像を表示する。また、登録画像１００３及び１００４は、登録画像１００２に対応する画像であって、カメラ標識７０８で示すカメラ１０２で検出される以前に、同一の被写体を検出したカメラ１０２をマップ上で示すための標識として機能しえる。このように過去に検出された位置をマップ上で示すことにより、検出対象の被写体の移動の軌跡をマップ上に示すことが可能となる。このとき被写体の移動方向が分かりやすいように、移動の方向を示す表示を付加してもよい。例えば、被写体の移動方向に合わせて矢印等の方向を示す表示を重畳してもよい。あるいは、表示する登録画像の透明度や色や枠等の画像表示形態を変える等で過去のアラームであることが分かるようにすることも可能である。具体的には、新しく検出された位置程、透明度を低くし、古い検出位置ほど透明度を高くすることができる。

情報１００５は、検出された被写体に関する情報の別の表示形態の例を示す。当該情報は、アラーム情報リスト７０２に含まれる情報を用いてもよい。これにより、検出された被写体に関する情報を登録画像と対応付けてより把握しやすくすることができる。情報１００５の表示位置は、図１０に示した位置に限定されるものではなく、マップ７０７上に表示してもよい。また、情報１００５に含める情報の種類は、操作端末１０５の操作者が任意に選択できるようにしてもよい。

次に、図１１を参照して、発明の実施形態に対応するアラーム表示画面における撮像画像７０４及びマップ７０７の他の表示形態を説明する。図１１（Ａ）は発明の実施形態に対応する撮像画像７０４の他の表示形態の一例を示す図である。図１１（Ａ）に示す撮像画像７０４においては、検出対象の被写体が撮像画像７０４に含まれる被写体のうちのいずれであるかを示す標識１１０１と、被写体の登録名１１０２とが撮像画像に重畳表示される。これの表示により、撮像画像中において検出対象の被写体を直ちに特定することが可能となる。この時、登録名１１０２と共に他の被写体情報を表示してもよい。例えば、登録画像を合わせて表示してもよい。これらの標識の表示は、画像解析サーバ１０４における画像解析において顔領域を撮像画像から検出した際に特定した顔位置の情報を利用することができる。当該顔位置の情報は、アラーム表示情報に含められて、画像解析サーバ１０４から操作端末１０５に提供される。

次に、図１１（Ｂ）及び（Ｃ）は発明の実施形態に対応するマップ７０７の他の表示形態の一例を示す図である。図１１（Ｂ）に示すマップ７０７においては、検出対象の被写体を検出したカメラ１０２を示すカメラ標識１１０３が、図７等に示したカメラ標識７０８とは異なっている。これは標識の表示形態を、アラームの優先度に対応させたものであって、アラームの優先度が高い場合には、優先度が高いことを示すように標識の表示を切り替えることができる。これによりマップ表示を見るだけで、優先度の高さを直感的に認識することが可能となる。

また、現在マップで表示されている検出被写体よりもアラームの優先度が高い被写体が検出された場合には、図１１（Ｃ）に示すように選択されていない検出被写体であっても重畳表示をして、操作者に通知を行うことができる。例えば、アラーム情報リスト７０２において選択され表示されていた検出被写体が、優先度がＭｉｄｄｌｅの人物Ａであり、操作者は当該人物Ａについて撮像画像を確認している最中に、優先度がＨｉｇｈの人物Ｚが検出された場合を想定する。この時、操作者は直ちに人物Ｚについて把握するべきであるが、アラーム情報リスト７０２に人物Ｚについての情報が一行追加されただけでは気づかないことも考えられる。そこで、現在表示している被写体よりも優先度の高い被写体が検出された場合には、マップ上で当該人物を検出したカメラ位置を標識１１０３を使って通知することで、操作者に確実に新しい被写体が検出されたことを通知することができる。このとき、単に画面上の表示によるだけではなく、音声を出力することにより操作者に通知してもよい。

以上に説明した発明の実施形態によれば、被写体検出システムにおいて、登録されている検出対象の被写体を検出した際の表示の視認性を向上させることが可能となる。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０...被写体検出システム、１０１...ＬＡＮ、１０２...ネットワークカメラ、１０３...画像録画サーバ、１０４...画像解析サーバ、１０５...操作端末

Claims (19)

1. 撮像画像から検出すべき被写体の特徴情報を保持する保持手段と、
   前記特徴情報に基づいて、撮像画像から前記被写体を検出する検出手段と、
   前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成手段と
   前記表示情報を出力する出力手段と
   を備え、
   前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
   前記生成手段は、前記被写体の優先度が表示されるように前記表示情報を生成し、
   前記生成手段は、前記撮像画像に、前記検出された被写体を識別可能に示すための、前記被写体の名称を含む標識が重畳されて表示されるように前記表示情報を生成することを特徴とする情報処理装置。
2. 撮像画像から検出すべき被写体の特徴情報を保持する保持手段と、
   前記特徴情報に基づいて、撮像画像から前記被写体を検出する検出手段と、
   前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成手段と
   前記表示情報を出力する出力手段と
   を備え、
   前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
   前記生成手段は、前記被写体の優先度が表示されるように前記表示情報を生成し、
   前記生成手段は、前記複数の被写体のうち、前記リストにおいて選択された第１の被写体について、前記第１の被写体が検出された撮像画像と、検出された前記第１の被写体を特定する情報と、前記検出された第１の被写体の前記特徴情報が表示されるように前記表示情報を生成し、
   前記出力手段は、前記第１の被写体よりも前記優先度が高い被写体が検出された場合に、新しい被写体が検出されたことを通知することを特徴とする情報処理装置。
3. 撮像画像から検出すべき被写体の特徴情報を保持する保持手段と、
   前記特徴情報に基づいて、撮像画像から前記被写体を検出する検出手段と、
   前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成手段と
   前記表示情報を出力する出力手段と
   を備え、
   前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
   前記生成手段は、前記被写体の優先度が表示されるように前記表示情報を生成し、
   前記表示情報は、前記優先度が他の被写体より高い被写体を撮像した撮像装置を強調する表示を含むことを特徴とする情報処理装置。
4. 前記特徴情報には、前記被写体の画像が含まれることを特徴とする請求項１から３のいずれか１項に記載の情報処理装置。
5. 前記生成手段は、前記第１の撮像画像を撮像した第１の撮像装置に関する情報がさらに関連付けられて表示されるように前記表示情報を生成することを特徴とする請求項４に記載の情報処理装置。
6. 前記第１の撮像装置に関する情報には、前記被写体を検出しようとする空間において前記第１の撮像装置が配置されている位置を識別可能に表示するための情報が含まれることを特徴とする請求項５に記載の情報処理装置。
7. 前記生成手段は、前記被写体の画像が、前記第１の撮像装置と関連付けて表示されるように前記表示情報を生成することを特徴とする請求項５または６に記載の情報処理装置。
8. 前記生成手段は、前記被写体の画像が、前記第１の撮像画像よりも前に撮像され、前記被写体が検出された第２の撮像画像を撮像した第２の撮像装置とさらに関連付けて表示されるように前記表示情報を生成することを特徴とする請求項７に記載の情報処理装置。
9. 前記生成手段は、前記被写体の画像を複数の撮像装置のそれぞれと関連付けて前記被写体の移動の軌跡が表示されるように前記表示情報を生成することを特徴とする請求項８に記載の情報処理装置。
10. 前記標識は、前記被写体の画像を含むことを特徴とする請求項１に記載の情報処理装置。
11. 前記検出手段は、前記撮像画像に含まれる複数の被写体を検出し、
    前記生成手段は、前記優先度に基づいて、前記検出された被写体の前記優先度に応じて区別して表示するための前記表示情報を生成することを特徴とする請求項１から１０のいずれか１項に記載の情報処理装置。
12. 前記リストは、被写体の属性毎に前記優先度を対応づけて生成されており、
    前記生成手段は、前記被写体が登録されている前記リストに基づいて、前記被写体の前記優先度を決定することを特徴とする請求項１から１１のいずれか１項に記載の情報処理装置。
13. 前記撮像画像は、複数の撮像装置のいずれかで撮像された画像であって、動画像または静止画像であることを特徴とする請求項１から１２のいずれか１項に記載の情報処理装置。
14. 前記出力手段は、前記表示情報を表示する前記情報処理装置の表示部と、前記情報処理装置と通信する外部装置とのうち、少なくともいずれかに前記表示情報を出力することを特徴とする請求項１から１３のいずれか１項に記載の情報処理装置。
15. 撮像装置と、
    前記撮像装置が撮像した撮像画像を処理する請求項１から１４のいずれか１項に記載の情報処理装置と、
    前記情報処理装置が出力した表示情報を表示する表示装置と
    を備える、被写体検出システム。
16. 情報処理装置の制御方法であって、
    検出手段が、撮像画像から検出すべき被写体の特徴情報に基づいて、撮像画像から前記被写体を検出する検出工程と、
    前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成工程と
    前記表示情報を出力する出力工程と
    を含み、
    前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
    前記生成工程では、前記被写体の優先度が表示されるように前記表示情報が生成され、
    前記生成工程では、前記撮像画像に、前記検出された被写体を識別可能に示すための、前記被写体の名称を含む標識が重畳されて表示されるように前記表示情報が生成されることを特徴とする情報処理装置の制御方法。
17. 情報処理装置の制御方法であって、
    検出手段が、撮像画像から検出すべき被写体の特徴情報に基づいて、撮像画像から前記被写体を検出する検出工程と、
    前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成工程と
    前記表示情報を出力する出力工程と
    を含み、
    前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
    前記生成工程では、前記被写体の優先度が表示されるように前記表示情報が生成され、
    前記生成工程では、前記複数の被写体のうち、前記リストにおいて選択された第１の被写体について、前記第１の被写体が検出された撮像画像と、検出された前記第１の被写体を特定する情報と、前記検出された第１の被写体の前記特徴情報が表示されるように前記表示情報が生成され、
    前記出力工程では、前記第１の被写体よりも前記優先度が高い被写体が検出された場合に、新しい被写体が検出されたことが通知されることを特徴とする情報処理装置の制御方法。
18. 情報処理装置の制御方法であって、
    検出手段が、撮像画像から検出すべき被写体の特徴情報に基づいて、撮像画像から前記被写体を検出する検出工程と、
    前記検出手段が第１の撮像画像において検出した前記被写体について、過去に検出された複数の前記被写体に関する情報のリストを含む表示情報を生成する生成工程と
    前記表示情報を出力する出力工程と
    を含み、
    前記リストには、少なくとも前記被写体の検出の報知に関わる優先度に関する情報が含まれ、
    前記生成工程では、前記被写体の優先度が表示されるように前記表示情報が生成され、
    前記表示情報は、前記優先度が他の被写体より高い被写体を撮像した撮像装置を強調する表示を含むことを特徴とする情報処理装置の制御方法。
19. コンピュータを請求項１から１４のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。

Images