JP2014099171A - 監視方法およびカメラ - Google Patents

Abstract

【課題】監視カメラによって領域を監視するための方法およびシステムが提供する。
【解決手段】保護対象ゾーン５が、監視対象領域３内に定義され、疑わしい対象９ａ、９ｂが、保護対象ゾーンの内側および外側の両方に存在する対象として検出される。疑わしい対象のキー位置が割り出され、このキー位置が保護対象ゾーン５の内側であるか、あるいは外側であるかが判断される。キー位置が保護対象ゾーンの外側である場合、第１のアクションが開始される。
【選択図】図１

Description

本発明は、監視カメラによって領域を監視するための方法およびシステムに関する。

監視カメラが、現時点において、屋内および屋外の両方の環境を監視するために、多数のさまざまな用途に使用されている。カメラを、例えば、人員がカウンター越しに顧客に対応しており、カウンターの内側をカウンターに配置された人員によるアクセスを制限すべき品物または設備の収容場所として使用することができる領域を、監視するために使用することができる。そのような環境の例として、ホテルの帳場、銀行の窓口、受付デスク、飲み屋、ファーストフードのカウンター、ガソリンスタンドの精算デスク、または空港のチェックインカウンターを挙げることができる。他の例は、カウンター越しの接客にて香水、宝石、または腕時計を販売するショップまたはブティックである。デスクまたはカウンターで働いている者は、自身が顧客に対応しているときに、他の者がデスクに近づき、カウンターで働いている者だけが取り扱うことになっている品物および設備にアクセスしようと試みる可能性を、把握することが困難であるかもしれない。したがって、カウンターに配置された人員にとって、カウンターの背後の領域への権限のないアクセスを防止するうえで助けとなる優れた技術的解決策を提供することが、望ましいと考えられる。

以上に鑑み、本発明の目的は、小売店のカウンターなどの領域の優れた監視方法を提供することにある。

本発明の第１の態様によれば、監視カメラによって領域を監視する方法であって、
監視対象領域内の保護対象ゾーンを定義するステップと、
疑わしい対象を、前記保護対象ゾーンの内側および外側の両方に存在する対象として検出するステップと、
前記疑わしい対象のキー位置を割り出すステップと、
前記キー位置が前記保護対象ゾーンの内側または外側のいずれにあるかを判断するステップと、
前記キー位置が前記保護対象ゾーンの外側にある場合に、第１のアクションを開始させるステップと
を含む方法が提供される。

この方法を使用し、カウンターの周囲の領域を効率的かつ押し付けがましくないやり方で監視し、特定の特性を有する対象にだけ特定の領域へのアクセスを許すルールを設定することができる。換言すると、本方法は、対象の位置識別ルールの容易かつ効率的な設定を可能にする。本方法は柔軟であり、さまざまな監視の筋書きおよび種々の異なる実際の実施例に適応させることが可能である。

本方法は、前記監視対象領域内に閉鎖ゾーンを定義するステップをさらに含むことができ、その場合、前記第１のアクションは、前記キー位置が前記閉鎖ゾーンの外側であるか否かを判断するステップと、前記キー位置が前記保護対象ゾーンの外側かつ前記閉鎖ゾーンの外側である場合に第２のアクションを開始させるステップとを実行することを含む。これは、本方法を、保護対象ゾーンへの特定の方向からの進入を許すことが望まれる筋書きなど、さまざまな監視の筋書きに合わせて調整するためのさらなる可能性を導入する。

前記保護対象ゾーンを定義するステップは、前記保護対象ゾーンの少なくとも一部を囲む物理的要素の境界を検出するステップを含むことができる。このやり方で、システムにカウンターの境界を検出させ、保護対象ゾーンを例えばカウンターの背後の領域またはカウンターの内部の空間として定義することによって、監視システムの自動設定を実行することができる。

これに加え、あるいはこれに代えて、前記保護対象ゾーンを定義するステップは、あらかじめ定義された保護対象ゾーンの座標にアクセスするステップを含むことができる。このやり方で、ユーザは、例えばユーザフレンドリなシステムの設定のやり方を提供するグラフィカルユーザインターフェイスにて保護対象ゾーンの境界の図を描くことができる。これを、例えばユーザが検出された境界をユーザインターフェイスを介して確認することにより、物理的要素の境界の自動検出と組み合わせることができる。

前記保護対象ゾーンを定義するステップが、三次元の保護対象空間を定義するステップを含むことができ、前記キー位置が前記保護対象ゾーンの内側または外側のいずれにあるかを判断するステップが、前記疑わしい対象が前記保護対象空間の二次元の投影の内側または外側のいずれにあるかを判断するステップを含むことができる。これは、カウンターの背後かつカウンターの上面よりも下方の空間を保護対象ゾーンとして設定することを可能にしながらも、カウンターの背後に立つ者を依然として無視することができる。

前記疑わしい対象を検出するステップは、前記保護対象ゾーンの内側の対象画素を検出し、該対象画素が属する対象が前記保護対象ゾーンの外側に存在するかどうかを判断するステップを含むことができる。これは、疑わしい対象の実施が容易かつ効率的な検出方法を提供する。

前記疑わしい対象のキー位置を割り出すステップは、前記疑わしい対象に含まれる画素の画素座標の平均位置に前記キー位置を設定するステップを含むことができる。これは、三次元および二次元の両方の対象の表現に使用することができる実施が容易かつ効率的なキー位置の発見方法を提供する。

前記キー位置を割り出すステップは、前記疑わしい対象の最高点の位置に前記キー位置を設定するステップを含むことができる。これは、高さの測定が可能なカメラ、すなわち三次元の撮像能力を有する撮像センサが監視システムに含まれる場合に、好都合な選択肢となりうる。最高点の位置を、安定性を高めるために、対象の１０個の最高点の位置の平均値または中央値として選択してもよい。人物の最高点は、通常はその人物の頭部であり、すなわちこれが、大部分の場合に、人物の立ち位置の正確な推定であると考えられる。

前記キー位置を割り出すステップは、前記疑わしい対象に含まれる画素のうちの所定の割合が前記保護対象ゾーンの外側にある場合に、前記キー位置を前記保護対象ゾーンの外側の位置に設定するステップを含むことができる。これは、対象の三次元の表現が入手できる場合および対象の二次元の表現が入手できる場合の両方において、好都合な選択肢と考えられる。また、熱カメラが使用される場合にも、好都合な選択肢であると考えられる。前記割合を、例えば５０％または７０％、あるいは正しい推定をもたらすように例えば試行錯誤によって決定される任意の値として選択することができる。

前記キー位置を割り出すステップは、前記疑わしい対象の最高温度の位置に前記キー位置を設定するステップを含むことができる。人物の体温は、通常は頭部領域において最高であり、すなわちこれが、多くの場合に、人物の体の位置の正確な推定であると考えられる。安定性を高めるために、最高温度の位置を、例えば１０個の最高温度位置の平均値または中央値に設定することが可能であると考えられる。また、最高温度が相応に高い温度の領域によって囲まれていなければならない、などといった他の基準を追加することが可能であると考えられる。

前記キー位置を割り出すステップは、顔、頭部、両肩、および帽子のうちの１つなど、対象分類器の縦列を使用して検出される前記疑わしい対象の一部分の位置に前記キー位置を設定するステップを含むことができる。これは、キー位置の割り出しを種々の異なる監視の筋書きに合わせて容易に調整することを可能にすると考えられる。

本発明の第２の態様によれば、領域を監視するための監視システムが、監視カメラと、監視対象領域内に保護対象ゾーンを定義するように配置されたゾーン定義ユニットと、疑わしい対象を、前記保護対象ゾーンの内側および外側の両方に存在する対象として検出するように配置された疑わしい対象の検出ユニットと、前記疑わしい対象のキー位置を割り出し、該キー位置が前記保護対象ゾーンの内側または外側のいずれにあるかを判断するように配置された対象位置判定ユニットと、前記キー位置が前記保護対象ゾーンの外側にあると判断される場合に、第１のアクションを開始させるように配置されたアクション開始ユニットとを備える。

前記対象位置判定ユニットは、対象のキー位置を割り出すために、対象分類器、対象の高さ、または対象の温度を割り出すための対象分類器ユニット、高さ測定ユニット、または熱測定ユニットのうちの１つ以上を備えることができる。

本発明の第３の態様によれば、コンピュータ可読記録媒体に、処理能力を有する装置上で実行されたときに請求項１〜１２のいずれか一項に記載の方法を実行するためのプログラムが記録される。

本発明の第２および第３の態様はどちらも、第１の態様に関連して上述した利点と同じ利点を伴う。

本発明のさらなる適用可能範囲が、後述される詳細な説明から明らかになるであろう。しかしながら、詳細な説明および具体的な実施例が、本発明の好ましい実施の形態を示しているが、あくまでも例示として提示されていることを、理解すべきである。なぜならば、この詳細な説明から、本発明の技術的範囲に包含される種々の変更および改良が当業者にとって明らかになるからである。したがって、本発明が、説明される装置の特定の構成部品または説明される方法の特定の段階に限られないことを、理解すべきである。なぜならば、そのような装置および方法は、さまざまであってよいからである。また、本明細書において使用される用語が、あくまでも特定の実施の形態を説明する目的のためのものにすぎず、本発明を限定しようとするものではないことを、理解すべきである。明細書および添付の特許請求の範囲において使用されるとき、冠詞「ａ」、「ａｎ」、「ｔｈｅ」、および「前記（ｓａｉｄ）」は、文脈からそのようでないことが明らかでない限り、その構成要素が１つ以上存在することを意味することを意図していることを、指摘しておかなければならない。したがって、例えば「センサ（ａ ｓｅｎｓｏｒ）」または「前記センサ（ｔｈｅ ｓｅｎｓｏｒ）」への言及は、複数の装置を含むことができる、などである。さらに、用語「・・・を備える（ｃｏｍｐｒｉｓｉｎｇ）」は、他の構成要素または段階を排除するものではない。

次に、本発明を、あくまでも例として、添付の概略図を参照してさらに詳しく説明する。

領域を監視する監視カメラを示している。 監視対象領域を上方から示している。 別の監視対象領域を上方から示している。 さらに別の監視対象領域を断面図にて示している。 監視システムを示している。 領域を監視する方法を示している。

図１は、監視カメラ１が領域３を監視すべく配置されている典型的な状況を示している。監視カメラ１は、異なる撮像能力を有する一群の監視カメラまたは複数の撮像センサを備えるカメラを象徴することができる。カメラは、例えば、可視光の画像を取得する撮像センサ、監視対象領域内の温度の像を生成する熱センサ、または例えばＴＯＦ（飛行時間）撮像センサ（種々の画素までの距離の像をもたらし、そこから監視対象領域および監視対象領域内の対象の奥行きまたは高さを計算できる）などの三次元の画像を取得する撮像センサを備えることができる。

監視対象領域３は、図示の例では例えばカウンターの形態の物理的要素７によって定められている保護対象ゾーン５を含んでいる。対象９ａ、９ｂ、および９ｃが、監視対象領域３内に存在している。図２が、図１に示した状況の上方からの図である。換言すると、図２は、カメラ１によって取得される画像を概略的に示している。保護対象ゾーンを、三次元の撮像能力を有する監視システムが使用される場合には１つ以上の平面によって定めることができ、二次元の撮像能力を有する監視システムが使用される場合には１つ以上の線によって定めることができることに、注目することができる。

図１および図２に示される状況においては、疑わしい意図を有する顧客、すなわち対象９ａが、例えばカウンター越しでのみ販売される高価な製品にアクセスすべく、カウンター７に隣接して立ち、カウンターの背後の領域、すなわち保護対象ゾーン５に手を伸ばしている。カウンターに配置された店員を象徴している対象９ｂが、他の顧客、すなわち対象９ｃと会話を行なっている。したがって、対象９ｂは、対象９ａがカウンターの背後の品物に権限のないアクセスを行なおうとしていることに気付いていない。

本明細書に提示の方法および装置によれば、カウンターの背後からの窃盗を、監視カメラによって取得される画像を分析し、第１の段階において、同時に保護対象ゾーンの内側および外側の両方に存在する対象を発見することによって、防止することができる。そのような対象を、不許可の行為を実行しているかどうかを判断するためにさらなる分析を必要とするがゆえに、疑わしい対象と称することができる。

疑わしい対象の検出を、さまざまなやり方で実行することができる。１つの選択肢は、保護対象ゾーンの内側に位置する対象画素を発見し、次いでそれらの対象画素に関係する対象が保護対象ゾーンの外側にも存在するかどうかを判断することである。この判断を、例えば、同じ対象に属する他の対象画素が存在するかどうかを確認し、それらの他の対象画素のいずれかが保護対象ゾーンの外側に位置するかどうかを確認することによって、行なうことができる。

さらに詳しくは後述される対象のキー位置を、対象が保護対象ゾーンの外側に存在するか否か、およびキー位置が保護対象ゾーンの外側であるか否か、の両方を直接的に判断するために使用することもできる。

他の選択肢は、保護対象ゾーン５を画定している線または平面の交差を検出することである。そのような線または平面が交差された場合、対象が保護対象ゾーンの内側および外側の両方に存在すると推定することができ、すなわち換言すると、線または平面の交差に係る対象が疑わしい対象であり、さらなる調査が必要であると推定することができる。

図１および図２に戻ると、対象９ａおよび対象９ｂ（腕をカウンター上に置き、おそらくは例えば商品を顧客９ｃに見せるためにカウンターの向こうに延ばしている店員）の両方が、疑わしい対象と判断されると考えられる。対象９ｂを無視して対象９ａだけに反応するように、画像が、保護対象ゾーンの内側および外側の両方に存在する各々の対象（すなわち、対象９ａおよび９ｂ）のキー位置を見つけるためにさらに分析される。

疑わしい対象が保護対象ゾーンの外側にキー位置を有すると判断される場合、例えば光または音による警報、ログへの情報入力、カメラからの画像の記録の開始、あるいは他の種類の監視行為（例えば他の監視装置からの画像またはセンサ入力の分析の開始など）の形態のアクションが開始される。本明細書において使用されるとき、用語「アクション」は、広い意味で解釈されるべきであり、カメラによる事象の検出または検出された事象のカメラによる例えば映像分析エンジンへの送信などの動作を含むと理解されるべきでもある。したがって、この例では、アクションが対象９ａについて開始されると考えられる。店員、すなわち対象９ｂに関しては、キー位置が保護対象ゾーンの内側にあるため、いかなるアクションも開始されない。念のため、対象９ｃは保護対象ゾーンの外側にだけ存在しており、したがってキー位置を見つける必要がないことを、指摘することができる。

対象のキー位置は、対象の体の主要部分が位置している可能性が高い位置に設定され、あるいは或る意味で、対象が立っている位置に設定される。対象のキー位置の割り出しに関して、いくつかの異なる選択肢が存在し、それらの異なる選択肢を、割り出しをより正確にするために適切なやり方で組み合わせることができる。

一例は、或る対象に属すると判断される画素について画素座標の平均値を計算し、この対象のキー位置を計算された平均の座標値に設定することである。これを、二次元の領域または三次元の空間のいずれかにおける対象の質量中心または重心の割り出しと理解することもできる。

監視対象領域における対象の奥行きまたは高さを割り出すことができる監視カメラが、監視システムに含まれている場合には、対象の最高点をキー位置として使用することができる。対象の最高点は、大部分の場合に、対象の頭部の位置の正確な視標であると考えられる。高さの測定の正確さに関して不確実性が存在する場合には、安定性を高めるために、対象の最高点の位置を、例えば対象において測定された高さの最も高い１０個の点の座標の平均値または中央値の位置に設定することができる。

他の選択肢は、或る対象に含まれる画素のうちの所定の割合が保護対象ゾーンの外側にある場合に、その対象のキー位置が保護対象ゾーンの外側にあると判断することである。この割合は、例えば５０％または７０％であってよく、あるいは目的に適すると考えられる他の値であってよい。

感熱カメラが監視システムに含まれる場合には、対象の温度を、キー位置を設定するために使用することができる。人間の体温は、通常は頭部の領域において最も高く、手および腕は、通常はより低温である。このことから、対象について検出される最高温度の位置を、キー位置として使用することができる。また、例えば火のついた煙草が対象の手に保持されている場合からの区別のために、最高の温度が相応に高い温度を有する対象の領域に囲まれていなければならない、などの基準を追加することも可能であると考えられる。温度測定の正確さに関して不確実性が存在する場合には、最高点の測定の場合とちょうど同じように、安定性を高めるために、対象の最高温度の位置を、例えば対象において測定される１０個の最高温度の座標の中央位置に設定することが可能であると考えられる。

対象のキー位置を、対象分類器の縦列を使用して検出される対象の或る部分の位置に設定することもできる。対象分類器は、例えば顔、頭部、両肩、または帽子のうちの１つであってよい。対象分類器の考え方は、例えば米国特許第７０９９５１０号に記載されている。

対象のキー位置を割り出す上述のやり方のいずれも、二次元の画像が取得される場合および奥行きの座標を含む三次元の画像が取得される場合の両方において有用であると考えられることを、指摘しておくことができる。

疑わしい対象のキー位置を見つけるための種々の方法を、互いに組み合わせることができ、対象の移動の履歴に関する情報が利用可能であるならば、そのような情報と組み合わせて使用することもできる。典型的には、カウンターの背後の領域に権限のないアクセスを試みる人物を示す対象は、保護対象ゾーンの外側の領域においてカウンターに接近する移動の履歴を有すると考えられる。カウンターで働く店員は、典型的には、カウンターの背後の種々の位置を含む移動の履歴を有すると考えられる。他の選択肢は、疑わしい対象のキー位置に関する情報を、対象の種々の特徴と組み合わせること（特定の衣服を店員だけが着用している場合にこれを検出し、疑わしい対象として分類された対象を無視するための追加の基準として用いる、など）である。

疑わしい対象を見つける段階に先立って、カメラによって取得された画像を、前景を背景から分離するために分析しておくことができ、カメラの視野内の対象を、対象の分割を使用して分割しておくことができる。

対象を分析するとき、画像分析の意味で融合した２つの対象を分割することが必要となりうる状況が生じうる。これは、例えば、店員が顧客と握手をしている場合や、顧客に品物を渡している場合であるかもしれない。これを、腕の厚さを有しており、かつ保護対象ゾーンの外側にキー位置を有している対象に属しているあらゆる部分を「切除」することによって対象を分割し、次いで保護対象ゾーン内の対象画素と同じ分類を有する対象の数を数える段階を追加することで、回避することができる。数が１よりも大きい場合、これは、２つの対象が融合していたことを示しており、盗難の試みが行なわれていた可能性がほとんどないことを意味している。数が１に等しい場合、これは、盗難が行なわれており、アクションを開始すべきであることを知らせている。

図３に、閉鎖ゾーン１１が追加で定められている別の状況が示されている。これは、対象が警報のアクションを生じさせることなく保護対象ゾーン５に特定の方向から進入することを可能にすることが望まれる状況において有用である。この場合、上述の条件の両方（保護対象ゾーンの内側および外側の両方に存在すること、ならびに保護対象ゾーンの外側にキー位置を有すること）を満たす対象（この場合には、対象９ｄ）が発見されるとき、第１のアクションが開始される。第１のアクションは、この場合には、対象のキー位置が閉鎖ゾーン１１の内側にあるか、あるいは外側にあるかを、追加で確認することである。

図３に示される状況においては、対象９ｄのキー位置が、閉鎖ゾーン１１の内側にあり、したがって第２のアクションは開始されないと考えられる。対象９ｄのキー位置が閉鎖ゾーン１１の外側にあると考えられる場合は、例えば図１および図２に関連して説明した上述の例におけるアクションと同じ種類のアクションなど、保護対象ゾーンへの不適切な到達が行なわれた旨を伝える第２のアクションが開始されると考えられる。

図４に、本明細書に提示の考え方を利用するさらに別のやり方が示されている。図４においては、保護対象ゾーンが、カウンターの下方の空間として定められている。対象９ａが、カウンター内に収容された品物１２へのアクセスを試みている。対象９ｂ、すなわちカウンターに配置された人物は、別の方向に目を向けており、この窃盗の企てに気付いていない。対象９ａの手１０が保護対象ゾーン５に達するとき、対象９ａが疑わしい対象として検出され、対象９ａのキー位置が保護対象ゾーン５の内側または外側のどちらにあるかが確認され、明らかに外側にあるため、アクションが開始される。

典型的には店員９ｂによるカウンターの内部空間への許可されたアクセスを窃盗の企てから区別するために、カウンターの背後の空間または領域が、閉鎖ゾーン１１として定められている。したがって、対象９ａの手が保護対象ゾーンに達するときに開始されるアクションは、疑わしい対象のキー位置が閉鎖ゾーン１１内にあるかどうかを追加で確認することである。図４においては、疑わしい対象のキー位置が閉鎖ゾーン１１内になく、したがって例えば音または光による警報、ログへの情報入力、あるいは記録の開始などの別のアクションが開始される。対象９ｂが保護対象ゾーン５に手を伸ばしている場合には、対象９ｂが閉鎖ゾーンの内側にキー位置を有しているため、第２のアクションは開始されないと考えられる。

図５に、監視システム１３が概略的に示されている。監視システムは、監視カメラ１と、監視カメラ１によって監視される領域３内に保護対象ゾーン５を定めるように配置されたゾーン定義ユニット１５とを備えている。保護対象ゾーン５を、例えばゾーン定義ユニット１５によって保護対象ゾーンの少なくとも一部を囲む物理的要素７の境界を検出するための画像分析を使用して定めることができる。

別の選択肢は、ゾーン定義ユニット１５が、あらかじめ定義される保護対象ゾーンの座標にアクセスすることである。これらの座標を、ユーザが例えばグラフィカルユーザインターフェイスにおいて図を描き、あるいは座標を入力するなどにより、ユーザインターフェイスにて定義することができる。１つの選択肢は、監視対象領域を横切る線であって、保護対象ゾーンをその線の片側の領域として定義する線を、定義することである。また、保護対象ゾーンを画定する１つ以上の平面を定義することも可能であると考えられる。

保護対象ゾーンを、領域または三次元空間のどちらかとして定義することができる。後者の場合は、通常は３Ｄカメラの使用と組み合わせられると考えられる。したがって、図１〜３に示した例では、保護対象ゾーンを、カウンターの背後かつカウンターの上面に一致する高さよりも低い空間として定義することができる。図４においては、すでに述べたように、保護対象ゾーンがカウンターの内部空間として定義される。

三次元の保護対象ゾーンが定義される場合には、疑わしい対象のキー位置が保護対象ゾーンの内側または外側のどちらにあるかを判断するときに、三次元の保護対象ゾーンの二次元の投影を使用することが適切かもしれない。二次元の投影を使用するか否かは、三次元の保護対象ゾーンがどのように定義されるかにもとづいて決定される。例えば、図１における保護対象ゾーンが、カウンターの背後かつカウンターの表面の高さよりも下方の空間として定義される場合には、疑わしい対象のキー位置が保護対象ゾーンの内側または外側のどちらにあるかを判断するときに、おそらくは二次元の投影を使用することがより便利であると考えられる。その結果、対象９ｂが確実に保護対象ゾーンの内側にキー位置を有すると考えられるが、保護対象ゾーンの三次元表現が使用される場合には、そのようでないかもしれない。

閉鎖ゾーンを、ゾーン定義ユニット１５によって保護対象ゾーンと同じやり方で定義することができる。例えばカウンターの背後の保護対象ゾーンへの２つ以上の方向からの進入を許すことが望まれる場合、２つ以上の閉鎖ゾーンを用いることができることを、指摘することができる。

さらに監視システムは、疑わしい対象の検出ユニット１７を備えることができ、この検出ユニット１７が、カメラ１からの画像データおよび定義された保護対象ゾーン５に関するデータを使用して、疑わしい対象を保護対象ゾーンの内側および外側の両方に存在する対象として検出する。そのような対象が発見された場合、対象位置判定ユニット１９が用意され、疑わしい対象のキー位置を割り出し、このキー位置が保護対象ゾーン５の内側であるか、あるいは外側であるかを判断する。

最後に、キー位置が保護対象ゾーンの外側であると判断される場合にアクションを開始させるアクション開始ユニット２１が備えられている。上述のように、このアクションは、光または音による警報、ログへの情報入力、または記録セッションの開始であってよい。閉鎖ゾーン１１が定義される場合には、アクション（第１のアクション）が、キー位置が閉鎖ゾーン１１の内側または外側のどちらにあるかを調べるために対象位置判定ユニット１９による確認を開始させることであると考えられる。その場合には、アクション開始ユニット２１が、疑わしい対象のキー位置が閉鎖ゾーンのやはり外側にあると判断される場合に、第２のアクションを開始させるように適合されると考えられ、この第２のアクションは、例えば光または音による警報、ログへの情報入力、記録セッションの開始であってよい。

ユニット１５、１７、１９、２１を、ハードウェアまたはソフトウェアのいずれかで実現でき、あるいはそれらの組み合わせにて実現することができる。ユニット１５、１７、１９、２１を、例えば監視カメラ内のプロセッサ上で動作するソフトウェアの形態や、監視カメラに含まれるハードウェアとして、監視カメラに設けることも可能であると考えられる。ユニット１５、１７、１９、２１のうちの１つ以上を、別の装置に配置することも可能であり、ユニット１５、１７、１９、２１を、いくつかの装置上に分配することも可能である。

図６に、本発明の実施の形態による方法６００が示されている。第１の段階６０１において、保護対象ゾーンが定義される。第２の段階６０３において、疑わしい対象が、保護対象ゾーンの内側および外側の両方に存在する対象として検出される。

次の段階６０５において、疑わしい対象のキー位置が検出され、段階６０７において、キー位置が保護対象ゾーンの内側であるか、あるいは外側であるかが判断される。キー位置が保護対象ゾーンの外側である場合、段階６０９において、第１のアクションが開始される。上述のように、このアクションは、例えば音または光による警報、ログへの情報入力、または画像の記録の開始であってよい。キー位置が保護対象ゾーンの内側にある場合、本方法は、図６に示されているように疑わしい対象を検出する段階６０３に戻ることができ、あるいは段階６０１に戻り、保護対象ゾーンを別のやり方で定義することができる。別の選択肢は、段階６０５に戻り、以前に段階６０３において検出されているかもしれない別の疑わしい対象のキー位置を割り出すことである。

閉鎖ゾーンが使用される場合には、このゾーンが段階６１１において定義され、段階６０９において開始されるアクション（第１のアクション）が、段階６１３においてキー位置が閉鎖ゾーンの内側または外側のどちらにあるかを確認する。キー位置が閉鎖ゾーンの外側であると判断される場合、別のアクション（第２のアクション）が段階６１５において開始される。この第２のアクションは、例えば音または光による警報、ログへの情報入力、または画像の記録の開始、あるいは閉鎖ゾーンが存在しない状況に関して上述したとおりの任意の他のアクションであってよい。

キー位置が閉鎖ゾーンの内側にある場合、いかなるアクションも開始されず、本方法は、図６に示されているように疑わしい対象を検出する段階６０３に戻ることができ、あるいは段階６０１に戻り、保護対象ゾーンを別のやり方で定義することができ、もしくは段階６１１に戻り、閉鎖ゾーンを別のやり方で定義することができる。別の選択肢は、段階６０５に戻り、以前に段階６０３において検出されているかもしれない別の疑わしい対象のキー位置を割り出すことである。

当業者であれば上述の実施の形態を多数のやり方で変更でき、それでもなお上述の実施の形態において示したとおりの本発明の利点を使用できることを、理解できるであろう。例えば、本明細書において提示した考え方を２つ以上の保護対象ゾーンの使用に拡張することが単刀直入であると考えられることを、指摘することができる。

例えば可視光カメラならびに熱カメラまたは３Ｄカメラが存在する場合など、２つ以上の監視カメラまたは撮像センサが存在する場合には、可視光カメラを使用して保護対象ゾーンを定義し、対象の検出およびキー位置の分析のために熱カメラまたは３Ｄカメラの使用に切り換えを行なうことが、可能であると考えられる。

このように、本発明は提示の実施の形態に限られず、添付の特許請求の範囲によってのみ定められる。

１ 監視カメラ
３ 監視対象領域
５ 保護対象ゾーン
７ 物理的要素
９ａ〜９ｄ 対象
１０ 対象の手
１１ 閉鎖ゾーン
１２ カウンターに収容された品物
１３ 監視システム
１５ ゾーン定義ユニット
１７ 疑わしい対象の検出ユニット
１９ 対象位置判定ユニット
２１ アクション開始ユニット

Claims (14)

1. 監視カメラ（１）によって領域を監視する方法であって、
   監視対象領域（２）内の保護対象ゾーン（５）を定義するステップ（６０１）と、
   疑わしい対象（９ａ、９ｂ）を、前記保護対象ゾーンの内側および外側の両方に存在する対象として検出するステップ（６０３）と、
   前記疑わしい対象のキー位置を割り出すステップ（６０５）と、
   前記キー位置が前記保護対象ゾーン（５）の内側または外側のいずれにあるかを判断するステップ（６０７）と、
   前記キー位置が前記保護対象ゾーンの外側にある場合に、第１のアクションを開始させるステップ（６０９）と
   を含んでおり、
   前記疑わしい対象の前記キー位置は、前記対象の体の主要部分が位置していると思われる位置、または前記対象が立っている位置であり、
   前記保護対象ゾーンを定義するステップ（６０１）が、三次元の保護対象空間を定義するステップを含んでおり、
   前記キー位置が前記保護対象ゾーンの内側または外側のいずれにあるかを判断するステップ（６０５）が、前記キー位置が前記保護対象空間の二次元の投影の内側または外側のいずれにあるかを判断するステップを含んでいる、方法。
2. 前記監視対象領域（２）内の閉鎖ゾーン（１１）を定義するステップ（６１１）
   をさらに含んでおり、
   前記第１のアクションが、前記キー位置が前記閉鎖ゾーンの外側であるか否かを判断（６１３）し、前記キー位置が前記閉鎖ゾーンの外側である場合に第２のアクションを開始（６１５）させるステップを含んでおり、
   前記閉鎖ゾーンは、前記監視対象領域のうちで、特定の方向からの前記保護対象ゾーンへの許された進入を定義する部分である、請求項１に記載の方法。
3. 保護対象ゾーン（５）を定義する前記ステップが、前記保護対象ゾーンの少なくとも一部を囲む物理的要素（７）の境界を検出するステップを含んでいる、請求項１に記載の方法。
4. 保護対象ゾーン（５）を定義する前記ステップが、あらかじめ定義された保護対象ゾーンの座標にアクセスするステップを含んでいる、請求項１に記載の方法。
5. 疑わしい対象を検出する前記ステップが、前記保護対象ゾーンの内側の対象画素を検出し、該対象画素が属する対象が前記保護対象ゾーンの外側に存在するかどうかを判断するステップを含んでいる、請求項１に記載の方法。
6. 前記疑わしい対象のキー位置を割り出す前記ステップが、前記疑わしい対象に含まれる画素の画素座標の平均位置に前記キー位置を設定するステップを含んでいる、請求項１〜５のいずれか一項に記載の方法。
7. キー位置を割り出す前記ステップが、前記疑わしい対象の最高点の位置に前記キー位置を設定するステップを含んでいる、請求項１〜６のいずれか一項に記載の方法。
8. キー位置を割り出す前記ステップが、前記疑わしい対象に含まれる画素のうちの所定の割合が前記保護対象ゾーンの外側にある場合に、前記キー位置を前記保護対象ゾーンの外側の位置に設定するステップを含んでいる、請求項１〜７のいずれか一項に記載の方法。
9. キー位置を割り出す前記ステップが、前記疑わしい対象の最高温度の位置に前記キー位置を設定するステップを含んでいる、請求項１〜８のいずれか一項に記載の方法。
10. キー位置を割り出す前記ステップが、対象分類器の縦列を使用して検出された前記疑わしい対象の一部分の位置に前記キー位置を設定するステップを含んでいる、請求項１〜９のいずれか一項に記載の方法。
11. 対象分類器の縦列を使用して検出される前記疑わしい対象の前記一部分が、顔、頭部、両肩、および帽子のうちの１つである、請求項１０に記載の方法。
12. 監視カメラ（１）と、
    監視対象領域（２）内に保護対象ゾーン（５）を定義するように配置されたゾーン定義ユニット（１５）と、
    疑わしい対象を、前記保護対象ゾーンの内側および外側の両方に存在する対象として検出するように配置された疑わしい対象の検出ユニット（１７）と、
    前記疑わしい対象のキー位置を割り出し、該キー位置が前記保護対象ゾーンの内側または外側のいずれにあるかを判断するように配置された対象位置判定ユニット（１９）と、
    前記キー位置が前記保護対象ゾーンの外側にあると判断される場合に、第１のアクションを開始させるように配置されたアクション開始ユニット（２１）と
    を備えている領域（２）を監視するための監視システム（１３）であって、
    前記疑わしい対象の前記キー位置は、前記対象の体の主要部分が位置していると思われる位置、または前記対象が立っている位置であり、
    前記ゾーン定義ユニット（１５）が、三次元の保護対象空間を定義するように配置されており、
    前記対象位置判定ユニット（１９）が、前記疑わしい対象が前記保護対象空間の二次元の投影の内側または外側のいずれにあるかを判断するように配置されている
    ことを特徴とする、監視システム。
13. 前記対象位置判定ユニット（１９）が、対象分類器ユニット、高さ測定ユニット、および／または熱測定ユニットのうちの１つ以上を備えている、請求項１２に記載の監視システム。
14. 処理能力を有する装置上で実行されたときに請求項１〜１２のいずれか一項に記載の方法を実行するためのプログラムが記録されたコンピュータ可読記録媒体。

Images