JP2013196423A - 監視システム、監視装置及び監視方法 - Google Patents

Abstract

【課題】監視対象として指定された監視対象人物を監視する場合に、監視対象者の検知精度を向上すること。
【解決手段】監視対象人物の顔画像データとアピアランスデータとを関連付けて記憶部３６に記憶し、施設内に設けたカメラ１０により人物の顔を含む外観を撮像して顔照合部３５により顔照合し、顔照合の結果、監視対象人物であると判定した場合に、アピアランスデータを算定して記憶部３６に記憶されたアピアランスデータを更新する。施設の出入口に設けたカメラ２０が撮像した画像データに対して最新のアピアランスデータを用いてアピアランス照合を行なって、監視対象者である場合に報知を行なう。
【選択図】図３

Description

この発明は、監視対象として指定された監視対象人物を監視する監視システム、監視装置及び監視方法に関する。

従来、介護施設等で、単独での外出を制限するべき介護対象者が施設を出て戻れなくなるといった問題を解決するため、出入口に監視カメラを設けて対象者の外出を監視する技術が知られている。

例えば、特許文献１には、マンション等の玄関に設置したカメラで入館者及び退館者を撮像して顔画像を照合し、照合の結果、予め登録された人物である場合には撮像した顔画像を撮像時刻とともに所定の連絡先に通知するシステムが開示されている。

また、特許文献２には、病院或いは老人ホーム等に出入口において、退出する人物の少なくとも顔を含む画像を撮像し、撮像した顔画像と予め登録されている痴呆症患者の顔画像とを照合し、照合の結果、痴呆症患者である場合には撮像した顔画像を該痴呆症患者の管理者に通知して、退出の可否を制御するシステムが開示されている。

また、特許文献３には、監視したい人物の特徴量を事前に設定しておき、カメラ映像の中から要求に応じた映像を選別して出力するシステムが開示されている。具体的には、時系列の画像から人物の位置を検出し、人物の動きや外観の特徴量を計測して、特徴量が設定条件を満たす場合に時系列の画像を映像出力する。

特開２００６−１０７１８７号公報 特開２００４−１７１１２１号公報 特開２００７−２４３２７０号公報

しかしながら、上記特許文献１及び２のものは、監視カメラにより撮像した画像データに顔の画像が含まれていないと対象者を検知できないため、検知精度が不十分であるという問題点があった。特に、出入口を上方から撮像するように監視カメラを設置していると、対象者が俯いて通るだけで顔の画像が取得できない。また、出入口を下方や側方から撮像するように監視カメラを設置したとしても、遮蔽物により顔の画像が取得できない状況が発生する。

上記特許文献３のものは、対象者の外観の特徴量を使用するため、監視カメラにより撮像した画像データに顔の画像が含まれていなくとも照合が可能であるが、服装などが替わることにより外観の特徴量が変化すると、対象者の照合ができなくなるため、やはり精度が不十分である。

本発明は、上記従来技術の課題を解消するためになされたものであって、監視対象として指定された監視対象人物を監視する場合に、監視対象者の検知精度を向上することができる監視システム、監視装置及び監視方法を提供することを目的とする。

上述した課題を解決し、目的を達成するため、本発明は、監視対象として指定された監視対象人物を監視する監視システムであって、施設内に設けられた、人物の顔を含む外観を撮像する１又は複数の第１の撮像手段と、少なくとも人物の外観を撮像する第２の撮像手段と、前記監視対象人物の顔画像データと外観特徴量とを関連付けて記憶する記憶手段と、前記記憶手段により記憶された顔画像データを用いて、前記第１の撮像手段により撮像された人物が前記監視対象人物であるか否かを判定する第１の判定手段と、前記第１の判定手段による判定の結果、前記第１の撮像手段により撮像された人物が監視対象人物である場合に、前記第１の撮像手段により撮像された人物の外観から外観特徴量を算定し、前記記憶手段により記憶された外観特徴量を更新する更新手段と、前記記憶手段により記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、前記第２の撮像手段により撮像された人物が監視対象人物であるか否かを判定する第２の判定手段と、前記第２の判定手段による判定の結果、前記第２の撮像手段により撮像された人物が監視対象人物である場合に、報知を行う報知手段とを備えたことを特徴とする。

また、本発明は、上記発明において、前記更新手段は、操作者からの入力に基づく前記外観特徴量の更新が可能であることを特徴とする。

また、本発明は、上記発明において、前記記憶手段は、前記外観特徴量の算定に用いられた画像データをさらに関連付けて記憶することを特徴とする。

また、本発明は、上記発明において、前記記憶手段は、前記更新手段による外観特徴量の更新履歴をさらに記憶することを特徴とする。

また、本発明は、上記発明において、前記第２の判定手段は、前記記憶手段により記憶された顔画像データに基づいて前記第２の撮像手段により撮像された人物が監視対象人物であるか否かを判定するとともに、前記記憶手段により記憶された外観特徴量に基づいて前記第２の撮像手段により撮像された人物が監視対象人物であるか否かを判定し、前記報知手段は、前記第２の判定手段が前記顔画像データに基づいて判定した判定結果と、前記第２の判定手段が前記外観特徴量に基づいて判定した判定結果との組み合わせにより異なる報知を行なうことを特徴とする。

また、本発明は、監視対象として指定された監視対象人物を監視する監視装置であって、前記監視対象人物の顔画像データと外観特徴量とを関連付けて記憶する記憶手段と、人物の顔と外観とを含む第１の画像データを取得した場合に、前記記憶手段により記憶された顔画像データを用いて、前記第１の画像データ内の人物が前記監視対象人物であるか否かを判定する第１の判定手段と、前記第１の判定手段による判定の結果、前記第１の画像データ内の人物が監視対象人物である場合に、前記第１の画像データ内の人物の外観から外観特徴量を算定し、前記記憶手段により記憶された外観特徴量を更新する更新手段と、特定箇所で撮像され、少なくとも人物の外観を含む第２の画像データを取得した場合に、前記記憶手段により記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、前記第２の画像データ内の人物が監視対象人物であるか否かを判定する第２の判定手段と、前記第２の判定手段による判定の結果、前記第２の画像データ内の人物が監視対象人物である場合に、報知を行う報知手段とを備えたことを特徴とする。

また、本発明は、監視対象として指定された監視対象人物を監視する監視方法であって、前記監視対象人物の顔画像データと外観特徴量とを関連付けて記憶部に格納する格納工程と、人物の顔を含む外観を撮像する第１の撮像工程と、前記記憶部に記憶された顔画像データを用いて、前記第１の撮像工程により撮像された人物が前記監視対象人物であるか否かを判定する第１の判定工程と、前記第１の判定工程による判定の結果、前記第１の撮像工程により撮像された人物が監視対象人物である場合に、前記第１の撮像工程により撮像された人物の外観から外観特徴量を算定し、前記記憶部に記憶された外観特徴量を更新する更新工程と、所定箇所で、少なくとも人物の外観を撮像する第２の撮像工程と、前記記憶部に記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、前記第２の撮像工程により撮像された人物が監視対象人物であるか否かを判定する第２の判定工程と、前記第２の判定工程による判定の結果、前記第２の撮像工程により撮像された人物が監視対象人物である場合に、報知を行う報知工程とを含んだことを特徴とする。

本発明によれば、監視対象人物の顔画像データと外観特徴量とを関連付けて記憶し、人物の顔と外観とを含む第１の画像データを取得した場合に、記憶手段により記憶された顔画像データを用いて第１の画像データ内の人物が監視対象人物であるか否かを判定し、該判定の結果、第１の画像データ内の人物が監視対象人物である場合に、第１の画像データ内の人物の外観から外観特徴量を算定し、記憶手段により記憶された外観特徴量を更新し、特定箇所で撮像され、少なくとも人物の外観を含む第２の画像データを取得した場合に、記憶手段により記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、第２の画像データ内の人物が監視対象人物であるか否かを判定し、該判定の結果、第２の画像データ内の人物が監視対象人物である場合に報知を行うよう構成したので、監視対象者の検知精度を向上することができる。

図１は、実施例に係る監視システムの概念を説明するための説明図である。 図２は、カメラの設置箇所を説明する為の説明図である。 図３は、実施例に係る監視装置の内部構成を示すブロック図である。 図４は、監視対象管理データについて説明するための説明図である。 図５は、アピアランスデータ入力画面を説明するための説明図である。 図６は、報知処理部による報知について説明するための説明図である。 図７は、監視装置によるアピアランスデータの更新にかかる処理手順を示すフローチャートである。 図８は、監視装置による監視対象者の外出検知にかかる処理手順を示すフローチャートである。

以下に、添付図面を参照して、本発明に係る監視システム、監視装置及び監視方法の好適な実施例を詳細に説明する。なお、以下に示す実施例では、介護施設の出口にカメラを設置し、単独での外出を制限するべき介護対象者の外出を監視する場合を示すこととする。

まず、本実施例に係る監視システムの概念を説明する。図１は、本実施例に係る監視システムの概念を説明するための説明図である。図１に示すように、本実施例に係る監視システムでは、監視装置３０は、介護施設の施設内に設置したカメラ１０により撮像した画像データから人物の顔を検出する。

顔が検出できたならば、監視装置３０は、画像データの顔部分である検出顔画像データと監視の対象となる介護対象者（監視対象者）の登録顔画像データとを照合する。照合の結果、検出顔画像データと登録顔画像データとが一致したならば、監視装置３０は、カメラ１０により撮像した画像データの人物像から外観の特徴量であるアピアランスデータを算定する。アピアランスデータは、服装、服の色、帽子等の装飾品、装飾品の色及び持ち物等の外観上の特徴を示す。

監視装置３０は、アピアランスデータを監視対象者に関連付けて記憶する。監視対象者に関連付けられたアピアランスデータは、該監視対象者がカメラ１０により撮像され、顔画像データと登録顔画像データとの照合が一致となる度に更新される。このため、監視装置３０は、監視対象者の外観上の特徴を常に最新の状態で保持することとなる。

また、施設の出口にはカメラ２０を設置し、施設から出ようとする人物を撮像する。監視装置３０は、カメラ２０により撮像された画像データから人物の顔を検出できたならば、検出顔画像データを用いた顔照合により、監視対象者であるか否かを判定できる。

施設から出ようとする人物が俯いている場合のように、カメラ２０により撮像された画像データから画像データから人物の顔を検出できない場合には、顔照合では監視対象者であるか否かの判定ができないが、アピアランスデータを用いたアピアランス照合により、監視対象者であるか否かの判定が可能である。

監視装置３０は、カメラ２０により撮像された画像データに基づく顔照合又はアピアランス照合の結果、監視対象者が施設から出ようとしていることを検知した場合には、従業員に対する報知を行なう。

このように、施設内のカメラ１０による撮像結果に対する顔照合により監視対象者を検知して該監視対象者の最新のアピアランスデータを取得し、出口では顔画像が取れなくとも最新のアピアランスデータを用いたアピアランス照合により監視対象者を検知するので、監視対象者の外出を精度良く検知することができる。

図２は、カメラ１０及び２０の設置箇所を説明する為の説明図である。図２（ａ）に示すように、カメラ２０は、施設の出入口に、施設から出ようとする人物を上方から撮像可能な位置に設置する。また、カメラ１０ａは、監視対象者の居室に設置され、カメラ１０ｂは、エレベータ内に設置され、カメラ１０ｃは廊下に設置されている。カメラ１０ａ〜１０ｃは、それぞれ上述したカメラ１０として機能する。

カメラ１０ａ〜１０ｃ及びカメラ２０による撮像結果は、図２（ｂ）に示すように、監視装置３０の表示部３２に表示されている。また、監視装置３０は、カメラ１０ａ〜１０ｃ及びカメラ２０による撮像結果を用いて上述のアピアランスデータ更新及び外出検知を行なう。そして、監視対象者の外出を検知した場合には、表示部３２による表示や音声出力を用いて報知する。

次に、本実施例に係る監視装置の内部構成について説明する。図３は、本実施例に係る監視装置の内部構成を示すブロック図である。図３に示すように、監視装置３０は、複数のカメラ１０ａ〜１０ｃ及びカメラ２０に接続されている。

監視装置３０は、画像入力インタフェース３１、表示部３２、入力部３３、スピーカ３４、顔照合部３５、記憶部３６、アピアランス照合部３７及び制御部３８を有する。画像入力インタフェース３１は、カメラ１０ａ〜１０ｃ及びカメラ２０により撮像された画像データを受信するためのインタフェースである。表示部３２は、液晶パネルやディスプレイ装置等であり、入力部３３は、キーボードやマウス等である。また、スピーカ３４は、音声出力を行なう出力デバイスである。

記憶部３６は、フラッシュメモリ又はハードディスク装置等からなる記憶デバイスであり、監視対象管理データ３６ａを記憶する。監視対象管理データ３６ａは、監視対象者の登録顔画像データとアピアランスデータとが関連付けられたデータである。

顔照合部３５は、カメラ１０ａ〜１０ｃ及びカメラ２０により撮像された画像データから顔画像データを検出し、検出した顔画像データを監視対象管理データ３６ａの登録顔画像データと照合処理する処理部である。顔照合部３５は、照合の結果を制御部３８に出力する。

アピアランス照合部３７は、カメラ２０により撮像された画像データから人物像を検出し、検出した人物像のアピアランスデータと監視対象管理データ３６ａのアピアランスデータと照合処理する処理部である。アピアランス照合部３７は、照合の結果を制御部３８に出力する。

制御部３８は、監視装置３０を全体制御する制御部であり、更新判定部３８ａ、アピアランス算定部３８ｂ、アピアランス更新部３８ｃ、報知判定部３８ｄ及び報知処理部３８ｅを有する。実際には、これらの機能部に対応するプログラムを図示しないＲＯＭや不揮発性メモリに記憶しておき、これらのプログラムをＣＰＵ（Central Processing Unit）が実行することにより、更新判定部３８ａ、アピアランス算定部３８ｂ、アピアランス更新部３８ｃ、報知判定部３８ｄ及び報知処理部３８ｅにそれぞれ対応するプロセスを実行させることになる。

更新判定部３８ａは、カメラ１０ａ〜１０ｃにより撮像された画像データを顔照合部３５に出力し、顔照合を行なわせる。顔照合部３５による顔照合の結果、登録者であると判定されたならば、アピアランス算定部３８ｂによるアピアランスの算定を行なう。

アピアランス算定部３８ｂは、登録者であると判定された画像データから人物の外観の特徴を示すアピアランスデータを算定する処理を行なう。アピアランスデータの算定には、既存の任意の手法を用いることができる。

アピアランス更新部３８ｃは、アピアランス算定部３８ｂにより算定されたアピアランスデータを監視対象管理データ３６ａに登録することで、登録者のアピアランスデータを更新する。

また、アピアランス更新部３８ｃは、操作者が入力部３３を操作して入力したアピアランスデータを監視対象管理データ３６ａに登録することで、登録者のアピアランスデータを更新することもできる。

報知判定部３８ｄは、カメラ２０により撮像された画像データを顔照合部３５に出力して顔照合を行なわせるとともに、カメラ２０により撮像された画像データをアピアランス照合部３７に出力してアピアランス照合を行わせる。顔照合部３５による顔照合若しくはアピアランス照合部３７によるアピアランス照合の結果、監視対象者であると判定されたならば、報知処理部３８ｅによる報知処理を行う。

報知処理部３８ｅは、表示部３２による表示出力並びにスピーカ３４による音声出力により、監視対象者が外出しようとしていることを従業員に報知する。ここで、報知処理部３８ｅは、顔照合の結果及びアピアランス照合の結果により異なる報知を行う。

具体的には、顔照合により監視判定者との一致が確認された場合には表示部３２に警報表示を表示させるとともにスピーカ３４に警報音を出力させる。一方、顔照合で監視対象者との一致が確認されず、アピアランス照合で監視判定者との一致が確認された場合には表示部３２に注意表示を表示させるとともにスピーカ３４に注意音を出力させる。

このように、アピアランス照合により監視対象の外出を検知した場合と、より信頼性の高い顔照合により監視対象の外出を検知した場合とで、報知の態様を異ならせることにより、状況に応じた柔軟な報知が可能となる。

次に、図３に示した監視対象管理データ３６ａについて説明する。図４は、監視対象管理データ３６ａについて説明するための説明図である。図４に示すように監視対象管理データ３６ａは、登録ＩＤ、名前、種別、登録顔画像データ、アピアランスデータ、外観画像データ、更新ログデータ、所有衣服データを関連付けたデータである。

登録ＩＤは、登録した人物を一意に識別する識別情報である。名前は、登録した人物の氏名である。種別は、登録した人物が監視対象者であるか否かを示す。監視対象者以外にも、従業員や監視対象ではない介護対象者を登録することができる。顔照合やアピアランス照合によって監視対象ではない人物であると判定された場合には、該人物については報知を行なう必要がないことが確認できるので、監視対象者の外出検知における誤報を減らし、検知精度を向上することができる。

登録顔画像データは、登録された人物の顔画像データである。アピアランスデータは、登録された人物の最新の外観特徴量である。外観画像データは、外観画像は、アピアランスデータの算定に使用した元の画像データである。このように、外観画像データを残しておくことで、従業員が外観画像データを視認して最新の外観を確認できる。

更新ログデータは、アピアランスデータ及び外観画像データの更新履歴である。過去のアピアランスデータ及び外観画像データを残しておくことで、過去の外観に基づいてアピアランス照合が可能となる。例えば、コートを着た状態のアピアラスデータから、コートを脱いだ状態のアピアランスデータに更新されたとしても、アピアランスデータの更新後に再びコートを着て外出する状況が考えられる。このような場合には、最新のアピアランスデータではなく、過去のアピアランスデータを用いることで監視対象者を検知することができる。

所有衣服データは、登録された人物が所有する、即ち登録された人物が着る可能性のある衣服の外観を示すデータである。監視対象者が着る衣服は、本人が所有する衣服の組み合わせであることが多いため、本人が所有する衣服の外観からアピアランスデータを算定して記憶しておく。この所有衣服データを用いることで、カメラ１０により撮像されていない衣服であっても、監視対象者が所有する衣服を着ている場合には、監視対象者である可能性が高いと判定できる。

図４に示す監視対象管理データ３６ａは、登録ＩＤ「０００１」として名前「Ａ Ｂ」である人物が「監視対象者」として登録され、登録ＩＤ「１００２」として名前「Ｃ Ｄ」である人物が「従業員」として登録された状態を示している。

また、登録ＩＤ「０００１」には、登録顔画像データ「０００１ＦＡＣＥ．ＪＰＧ」、アピアランスデータ「０００１ＡＰＰ．ＪＰＧ」、外観画像データ「０００１ＯＵＴ．ＪＰＧ」、更新ログデータ「０００１ＬＯＧ．ＤＡＴ」及び所有衣服データ「０００１ＷＥＡＲ．ＪＰＧ」が関連付けられている。また、登録ＩＤ「１００２」には、登録顔画像データ「１００２ＦＡＣＥ．ＪＰＧ」、アピアランスデータ「１００２ＡＰＰ．ＪＰＧ」、外観画像データ「１００２ＯＵＴ．ＪＰＧ」、更新ログデータ「１００２ＬＯＧ．ＤＡＴ」及び所有衣服データ「１００２ＷＥＡＲ．ＪＰＧ」が関連付けられている。

次に、操作者によるアピアランスデータの入力を受け付けるアピアランスデータ入力画面について説明する。図５は、アピアランスデータ入力画面を説明するための説明図である。図５に示すように、アピアランスデータ入力画面は、登録ＩＤ又は名前の入力を受け付けて登録者を特定する。このとき、登録ＩＤと名前のうち一方が入力され、登録者が特定できたならば、他方については自動入力することが望ましい。

また、アピアランスデータ入力画面は、上半身と下半身について、それぞれ色を指定する入力を受け付けることができる。また、帽子、持ち物及びマスクについて、それぞれ身につけているか否かの選択入力を受け付けることができる。さらに、帽子を身につけている場合には、帽子の色を指定する入力を受け付けることができる。また、過去に撮像した外観画像データを更新ログデータより取得し、選択可能とすることができる。

操作者が「登録」ボタンを押下操作すると、アピアランス算定部３８ｂは、入力されたデータに基づいてアピアランスデータを算定する。アピアランス更新部３８ｃは、アピアランス算定部３８ｂが算定したアピアランスデータを監視対象管理データ３６ａに登録することで、監視対象者のアピアランスデータを更新する。なお、アピアランスデータ入力画面には、「キャンセル」ボタンを設け、アピアランスデータの登録を行なわずにアピアランスデータ入力画面の表示を終了することができるようにする。

次に、図３に示した報知処理部３８ｅによる報知について説明する。図６は、図３に示した報知処理部３８ｅによる報知について説明するための説明図である。図６に示すように、出口に設けたカメラ２０により撮像された画像データを用いて顔照合及びアピアランス照合を行なった場合に、顔照合の結果及びアピアランス照合の結果により異なる報知を行う。

具体的には、顔照合とアピアランス照合の双方が一致した場合と、顔照合のみ一致した場合には、報知処理部３８ｅは、警告を行なう。この警告では表示部３２に警告表示を行ない、スピーカ３４から警報音を出力し、全従業員にメールを送信する。警告の内容としては、「警報！！Ｒ号室Ａさんが、西玄関口から退出 警報！！」等を用いればよい。また、対応する外観画像データや顔画像データを表示するようにしてもよい。

また、アピアランス照合のみ一致した場合には、報知処理部３８ｅは、注意喚起を行なう。この注意喚起では表示部３２に注意表示を行ない、スピーカ３４から注意音を出力し、当該監視対象者を担当する担当者にメールを送信する。注意喚起の内容としては、「注意！！Ｒ号室Ａさんが、西玄関口から退出 注意！！」等を用いればよい。また、対応する外観画像データや顔画像データを表示するようにしてもよい。

また、更新ログデータに示された過去のアピアランスデータによる照合や、所有衣服データに示された衣服に基づくアピアランスデータによる照合で一致が確認された場合には、報知処理部３８ｅは、確認喚起を行なう。この確認喚起では表示部３２に確認喚起表示を行ない、スピーカ３４から確認喚起音を出力し、当該監視対象者を担当する担当者にメールを送信する。確認喚起の内容としては、「確認！！Ｒ号室Ａさんが、西玄関口から退出 確認！！」等を用いればよい。また、対応する顔画像データを表示するようにしてもよい。

次に、監視装置３０によるアピアランスデータの更新にかかる処理手順について説明する。図７は、監視装置３０によるアピアランスデータの更新にかかる処理手順を示すフローチャートである。

監視装置３０の更新判定部３８ａは、カメラ１０ａ〜１０ｃより画像データを取得し（ステップＳ１０１）、顔照合部３５に出力する。顔照合部３５は、画像データに対して顔検出処理を実行する（ステップＳ１０２）。顔検出処理の結果、画像データから顔が検出されなければ（ステップＳ１０３；Ｎｏ）、監視装置３０は、アピアランスデータの更新処理を終了する。

一方、顔検出処理の結果、画像データから顔が検出されたならば（ステップＳ１０３；Ｙｅｓ）、顔照合部３５は、顔照合処理を実行する（ステップＳ１０４）。具体的には、画像データから顔画像データを切り出して、監視対象管理データ３６ａに登録された各登録顔画像データと照合する。

顔照合処理（ステップＳ１０４）の結果、監視対象管理データ３６ａに登録された登録者の登録顔画像データと一致しなければ（ステップＳ１０５；Ｎｏ）、監視装置３０は、アピアランスデータの更新処理を終了する。

一方、顔照合処理の結果、監視対象管理データ３６ａに登録された登録者の登録顔画像データと一致したならば（ステップＳ１０５；Ｙｅｓ）、更新判定部３８ａは、登録者であると判定する。アピアランス算定部３８ｂは、登録者であると判定された画像データから人物の外観の特徴を示すアピアランスデータを算定する（ステップＳ１０６）。

アピアランス更新部３８ｃは、アピアランス算定部３８ｂにより算定されたアピアランスデータを監視対象管理データ３６ａに登録することで、登録者のアピアランスデータを更新し（ステップＳ１０７）、処理を終了する。

次に、監視装置３０による監視対象者の外出検知にかかる処理手順について説明する。図８は、監視装置３０による監視対象者の外出検知にかかる処理手順を示すフローチャートである。

監視装置３０の報知判定部３８ｄは、カメラ２０より画像データを取得し（ステップＳ２０１）、画像データに人物の像が含まれているか否かを判定する（ステップＳ２０２）。画像データに人物の像が含まれていなければ（ステップＳ２０３；Ｎｏ）、監視装置３０は監視対象者の外出検知処理を終了する。

一方、画像データに人物の像が含まれているならば、報知判定部３８ｄは、画像データを顔照合部３５に出力する。顔照合部３５は、画像データに対して顔検出処理を実行する（ステップＳ２０４）。

顔検出処理の結果、画像データから顔が検出されたならば（ステップＳ２０５；Ｙｅｓ）、顔照合部３５は、顔照合処理を実行する（ステップＳ２０６）。具体的には、画像データから顔画像データを切り出して、監視対象管理データ３６ａに登録された各登録顔画像データと照合し、照合結果を報知判定部３８ｄに出力する。

顔照合処理（ステップＳ２０６）の後若しくは、顔検出処理により画像データから顔が検出されなければ（ステップＳ２０５；Ｎｏ）、アピアランス算定部３８ｂによりアピアランスデータを算定し（ステップＳ２０７）、算定したアピアランスデータをアピアランス照合部３７に出力する。

アピアランス照合部３７は、アピアランス算定部３８ｂが算定したアピアランスデータを用いてアピアランス照合処理を実行する（ステップＳ２０８）。具体的には、アピアランス算定部３８ｂが算定したアピアランスデータと監視対象管理データ３６ａに登録された各アピアランスデータとを照合し、照合結果を報知判定部３８ｄに出力する。

報知判定部３８ｄは、顔照合及びアピアランス照合のいずれも監視対象者ではないと判定された場合には（ステップＳ２０９；Ｎｏ）、処理を終了する。一方、顔照合又はアピアランス照合のいずれかで監視対象者であると判定された場合には（ステップＳ２０９；Ｙｅｓ）、報知処理部３８ｅによる報知処理を行って（ステップＳ２１０）、処理を終了する。

上述してきたように、本実施例では、監視対象人物の顔画像データとアピアランスデータとを関連付けて記憶部３６に記憶し、施設内に設けたカメラ１０により人物の顔を含む外観を撮像して顔照合し、顔照合の結果、監視対象人物であると判定した場合に、アピアランスデータを算定して記憶部３６に記憶されたアピアランスデータを更新し、施設の出入口に設けたカメラ２０が撮像した画像データに対してアピアランス照合を行なって、監視対象者である場合に報知を行なうよう構成したので、監視対象者を精度よく検知して報知を行なうことができる。

また、操作者からの入力に基づくアピアランスデータの更新が可能であるので、施設内のカメラの数が少ない場合等のようにアピアランスデータを十分に取得できない場合であっても、アピアランス照合による監視対象者の検知が可能となる。

また、アピアランスデータの算定に用いた画像データをさらに関連付けて記憶し、従業員に提供することで、従業員による監視対象者の捜索を支援することができる。

また、アピアランスデータの更新ログを記憶し、アピアランス照合に使用することで、過去のアピアランスデータに基づいて監視対象者を検知することが可能となる。

また、顔照合とアピアランス照合の照合結果の組み合わせにより報知の態様を変化させることにより、検知結果の信頼性に合わせて柔軟な報知が可能となる。

なお、上記実施例で図示した各構成は機能概略的なものであり、必ずしも物理的に図示の構成をされていることを要しない。すなわち、各装置の分散・統合の形態は図示のものに限られず、その全部または一部を各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。

また、上記実施例では、介護施設における監視対象者の外出を検知する場合を例に説明を行なったが、病院やマンション等、任意の施設において登録された人物の監視をする場合に、本発明を適用することが可能である。

以上のように、本発明に係る監視システム、監視装置及び監視方法は、監視対象として指定された監視対象人物を監視する場合の検知精度の向上に有用である。

１０、１０ａ〜１０ｃ、２０ カメラ
３０ 監視装置
３１ 画像入力インタフェース
３２ 表示部
３３ 入力部
３４ スピーカ
３５ 顔照合部
３６ 記憶部
３６ａ 監視対象管理データ
３７ アピアランス照合部
３８ 制御部
３８ａ 更新判定部
３８ｂ アピアランス算定部
３８ｃ アピアランス更新部
３８ｄ 報知判定部
３８ｅ 報知処理部

Claims (7)

1. 監視対象として指定された監視対象人物を監視する監視システムであって、
   施設内に設けられた、人物の顔を含む外観を撮像する１又は複数の第１の撮像手段と、
   少なくとも人物の外観を撮像する第２の撮像手段と、
   前記監視対象人物の顔画像データと外観特徴量とを関連付けて記憶する記憶手段と、
   前記記憶手段により記憶された顔画像データを用いて、前記第１の撮像手段により撮像された人物が前記監視対象人物であるか否かを判定する第１の判定手段と、
   前記第１の判定手段による判定の結果、前記第１の撮像手段により撮像された人物が監視対象人物である場合に、前記第１の撮像手段により撮像された人物の外観から外観特徴量を算定し、前記記憶手段により記憶された外観特徴量を更新する更新手段と、
   前記記憶手段により記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、前記第２の撮像手段により撮像された人物が監視対象人物であるか否かを判定する第２の判定手段と、
   前記第２の判定手段による判定の結果、前記第２の撮像手段により撮像された人物が監視対象人物である場合に、報知を行う報知手段と
   を備えたことを特徴とする監視システム。
2. 前記更新手段は、操作者からの入力に基づく前記外観特徴量の更新が可能であることを特徴とする請求項１に記載の監視システム。
3. 前記記憶手段は、前記外観特徴量の算定に用いられた画像データをさらに関連付けて記憶することを特徴とする請求項１又は２に記載の監視システム。
4. 前記記憶手段は、前記更新手段による外観特徴量の更新履歴をさらに記憶することを特徴とする請求項１、２又は３に記載の監視システム。
5. 前記第２の判定手段は、前記記憶手段により記憶された顔画像データに基づいて前記第２の撮像手段により撮像された人物が監視対象人物であるか否かを判定するとともに、前記記憶手段により記憶された外観特徴量に基づいて前記第２の撮像手段により撮像された人物が監視対象人物であるか否かを判定し、
   前記報知手段は、前記第２の判定手段が前記顔画像データに基づいて判定した判定結果と、前記第２の判定手段が前記外観特徴量に基づいて判定した判定結果との組み合わせにより異なる報知を行なうことを特徴とする請求項１〜４のいずれか一つに記載の監視システム。
6. 監視対象として指定された監視対象人物を監視する監視装置であって、
   前記監視対象人物の顔画像データと外観特徴量とを関連付けて記憶する記憶手段と、
   人物の顔と外観とを含む第１の画像データを取得した場合に、前記記憶手段により記憶された顔画像データを用いて、前記第１の画像データ内の人物が前記監視対象人物であるか否かを判定する第１の判定手段と、
   前記第１の判定手段による判定の結果、前記第１の画像データ内の人物が監視対象人物である場合に、前記第１の画像データ内の人物の外観から外観特徴量を算定し、前記記憶手段により記憶された外観特徴量を更新する更新手段と、
   特定箇所で撮像され、少なくとも人物の外観を含む第２の画像データを取得した場合に、前記記憶手段により記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、前記第２の画像データ内の人物が監視対象人物であるか否かを判定する第２の判定手段と、
   前記第２の判定手段による判定の結果、前記第２の画像データ内の人物が監視対象人物である場合に、報知を行う報知手段と
   を備えたことを特徴とする監視装置。
7. 監視対象として指定された監視対象人物を監視する監視方法であって、
   前記監視対象人物の顔画像データと外観特徴量とを関連付けて記憶部に格納する格納工程と、
   人物の顔を含む外観を撮像する第１の撮像工程と、
   前記記憶部に記憶された顔画像データを用いて、前記第１の撮像工程により撮像された人物が前記監視対象人物であるか否かを判定する第１の判定工程と、
   前記第１の判定工程による判定の結果、前記第１の撮像工程により撮像された人物が監視対象人物である場合に、前記第１の撮像工程により撮像された人物の外観から外観特徴量を算定し、前記記憶部に記憶された外観特徴量を更新する更新工程と、
   所定箇所で、少なくとも人物の外観を撮像する第２の撮像工程と、
   前記記憶部に記憶された顔画像データと外観特徴量のうち少なくとも一つを用いて、前記第２の撮像工程により撮像された人物が監視対象人物であるか否かを判定する第２の判定工程と、
   前記第２の判定工程による判定の結果、前記第２の撮像工程により撮像された人物が監視対象人物である場合に、報知を行う報知工程と
   を含んだことを特徴とする監視方法。

Images