JP4508038B2 - Image processing device - Google Patents
Image processing device Download PDFInfo
- Publication number
- JP4508038B2 JP4508038B2 JP2005240980A JP2005240980A JP4508038B2 JP 4508038 B2 JP4508038 B2 JP 4508038B2 JP 2005240980 A JP2005240980 A JP 2005240980A JP 2005240980 A JP2005240980 A JP 2005240980A JP 4508038 B2 JP4508038 B2 JP 4508038B2
- Authority
- JP
- Japan
- Prior art keywords
- mask
- area
- motion
- designation
- designation area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
本発明は画像処理装置に係り、特に監視カメラを用いた映像監視システムにおけるプライバシー保護のためのマスキングに関するものである。 The present invention relates to an image processing apparatus, and more particularly to masking for privacy protection in a video surveillance system using a surveillance camera.
近年、店舗、集合住宅、道路、商店街等では、セキュリティを確保する手段として監視カメラを用いた映像監視システムが利用されている。かかる映像監視システムは、監視カメラが撮像した映像情報をモニタリングしたり記録する手段を備え、非常時の速やかな対処や事後の問題解決を助けるという効果をもたらしている。 In recent years, video surveillance systems using surveillance cameras have been used as means for ensuring security in stores, apartment houses, roads, shopping streets, and the like. Such a video surveillance system includes means for monitoring and recording video information captured by the surveillance camera, and has the effect of promptly responding in an emergency and helping to solve problems after the fact.
しかしながら、上記の映像監視システムは、通常、監視カメラからの映像情報をそのまま表示したり記録するものであり、監視領域内に存在するプライバシーの保護すべき映像情報を除外することができない問題を有していた。
このような問題に対して、従来から、監視カメラからの映像情報にプライバシー保護領域を設定し、該保護領域をマスクして保護すべき映像情報を画面に表示しないよう信号処理した後に外部に出力する技術が多数提案されている（例えば、下記特許文献１参照）。
However, the above video surveillance system usually displays or records video information from the surveillance camera as it is, and there is a problem that it is not possible to exclude video information that should be protected for privacy existing in the surveillance area. Was.
Conventionally, for this problem, a privacy protection area is set in the video information from the surveillance camera, and the protection area is masked so that the video information to be protected is not displayed on the screen and then output to the outside. Many techniques have been proposed (see, for example, Patent Document 1 below).
一方、不審者の侵入を監視する目的の映像監視システムには、常時画面を観察せずとも、あるいは常時連続記録せずとも良いように、不審者の侵入で画面内の一部に変化があった場合にのみ警報を出したり記録を開始する機能を持つものがある。このような映像監視システムでは、不審者侵入の検出に画像処理による動き検出技術が用いられている。
下記特許文献２は、本特許出願人により提案されたもので、周辺光量の変動の影響を受けないように改良された動き検出技術の開示例である。
The following Patent Document 2 has been proposed by the present applicant, and is an example of disclosure of a motion detection technique improved so as not to be affected by fluctuations in the amount of peripheral light.
ところで、特許文献１には監視カメラからの映像情報にプライバシー保護領域を設定し、該保護領域をマスクして保護すべき情報を画面に表示しない技術が開示されているが、この場合には、前記保護領域内の映像情報は、たとえ保護すべきでない画像や保護する必要のない画像であっても、すべてマスクされてしまうという問題がある。
すなわち、従来のマスク手段では、画面上のマスクされる領域内に、例えば監視の必要な不審者の画像が入り込んだときには、この不審者の画像がマスクされて見えなくなるという不都合が発生した。
By the way, Patent Document 1 discloses a technology that sets a privacy protection area for video information from a surveillance camera and masks the protection area so as not to display information to be protected on the screen. There is a problem that the video information in the protected area is masked even if it is an image that should not be protected or an image that should not be protected.
That is, with the conventional masking means, for example, when an image of a suspicious person who needs to be monitored enters a masked area on the screen, the image of the suspicious person is masked and cannot be seen.
本発明は、このような従来の問題点に鑑みてなされたものであり、その目的は、監視カメラを用いた映像監視システムにおいて、撮像した映像情報にプライバシー保護領域を設定し、該保護領域をマスクして保護すべき情報を画面に表示しないようにすると共に、保護すべきでない画像や保護する必要のない画像が該保護領域内に入り込んだ場合に、これらの画像がマスクされないようにする信号処理手段を有する画像処理装置を提供することにある。 The present invention has been made in view of such conventional problems, and an object of the present invention is to set a privacy protection area for captured video information in a video surveillance system using a surveillance camera, and to set the protection area. Signals that prevent masked information from being displayed on the screen and prevent unprotected images from being masked when images that should not be protected or images that do not need to be protected enter the protected area. An object of the present invention is to provide an image processing apparatus having processing means.
本発明は、上記課題を解決する手段として以下の（１）（２）（３）に記載の構成からなる。すなわち、
（１）監視カメラを用いて撮影した撮像画像の一部をマスキング処理する画像処理装置において、
前記監視カメラから出力される撮像画像の中の動き領域を検出する動き検出手段と、
前記動き検出手段で検出された前記動き領域の中から指定した動き指定領域を定義する動き領域定義手段と、
予め定められたマスク領域設定情報に基づき、前記撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、
前記動き指定領域が前記マスク指定領域に重なっていない場合或いは前記動き指定領域が前記マスク指定領域内に収まっている場合には、前記マスク指定領域をマスキングするマスク制御信号を生成し、前記動き指定領域が前記マスク指定領域と一部重なっている場合には、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、
前記マスク制御信号により、前記マスク指定領域をマスキングするマスク処理手段と、 を備えたことを特徴とする画像処理装置。
（２）監視カメラを用いて撮影した撮像画像の一部をマスキング処理する画像処理装置において、
前記監視カメラから出力される撮像信号の中の動き領域を検出する動き検出手段と、
前記動き検出手段で検出された前記動き領域の中から指定した動き指定領域を定義する動き領域定義手段と、
前記動き領域の位置と前記動き領域の直前の位置とから前記動き領域の動き方向の連続性を判定する動き方向判定手段と、
予め定められたマスク領域設定情報に基づき、前記撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、
前記動き指定領域が前記マスク指定領域に重なっていない場合には、前記マスク指定領域をマスキングするマスク制御信号を生成し、前記動き指定領域が前記マスク指定領域と一部重なっている場合には、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、前記動き領域が前記マスク指定領域内に収まっている場合には、前記動き方向判定手段で判定された前記動き方向の連続性の判定結果により、連続性があるときには、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、連続性がないときには、前記マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、
前記マスク制御信号により、前記マスク指定領域をマスキングするマスク処理手段と、 を備えたことを特徴とする画像処理装置。
（３）監視カメラを用いて撮影した撮像画像の一部をマスキング処理する画像処理装置において、
前記監視カメラから出力される撮像信号の中の動き領域を検出する動き検出手段と、
前記動き検出手段で検出された前記動き領域の中から指定した動き指定領域を定義して、メモリに格納させる動き領域定義手段と、
前記動き領域の位置と前記動き領域の直前の位置とから前記動き指定領域の動き方向の連続性を判定する動き方向判定手段と、
予め定められたマスク領域設定情報に基づき、前記撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、
前記動き指定領域が前記マスク指定領域に重なっていない場合には、前記マスク指定領域をマスキングするマスク制御信号を生成し、前記動き指定領域が前記マスク指定領域と一部重なっている場合には、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、前記動き領域が前記マスク指定領域内に収まっている場合には、前記動き方向判定手段で判定された前記動き方向の連続性の判定結果により、連続性があるときには、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、連続性がないときには、前記マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、
前記動き領域の連続性がないときに、前記マスク指定領域内に収まった状態の前記動き領域が停止したか否かの判定を行う停止判定手段と、
前記停止判定手段で前記動き指定領域が停止していると判定された場合に、前記動き指定領域が前記マスク指定領域内で停止した状態からの時間を計測するタイマーと、
前記タイマーで計測された時間が所定時間経過するまで、前記マスク判定手段に前記動き領域定義手段のメモリに格納されている前記動き指定領域の情報を出力させる第１制御手段と、
前記所定時間以内に前記動き指定領域が停止した状態から再度動き出した場合に、前記マスク判定手段に前記動き方向判定手段で判定された前記動き指定領域を除いて前記マスク指定領域をマスキングさせるマスク制御信号を生成させる第２制御手段と、
前記マスク制御信号により、前記マスク指定領域をマスキングするマスク処理手段と、 を備えたことを特徴とする画像処理装置である。
The present invention includes the following configurations (1), (2), and (3) as means for solving the above-described problems. That is,
(1) In an image processing apparatus that performs a masking process on a part of a captured image captured using a surveillance camera,
Motion detection means for detecting a motion region in a captured image output from the surveillance camera;
A motion area defining means for defining a motion designation area designated from the motion areas detected by the motion detection means;
Mask area setting means for setting a mask designation area for masking from the captured image based on predetermined mask area setting information;
When the motion designation area does not overlap with the mask designation area or when the motion designation area is within the mask designation area, a mask control signal for masking the mask designation area is generated, and the motion designation is generated. A mask determining means for generating a mask control signal for masking the mask designated area except for the motion area in the mask designated area when the area partially overlaps the mask designated area;
An image processing apparatus comprising: mask processing means for masking the mask designated area by the mask control signal.
(2) In an image processing apparatus that performs a masking process on a part of a captured image captured using a surveillance camera,
Motion detection means for detecting a motion region in an imaging signal output from the surveillance camera;
A motion area defining means for defining a motion designation area designated from the motion areas detected by the motion detection means;
A motion direction determination means for determining continuity of the motion direction of the motion region from the position of the motion region and the position immediately before the motion region;
Mask area setting means for setting a mask designation area for masking from the captured image based on predetermined mask area setting information;
When the motion designation area does not overlap the mask designation area, a mask control signal for masking the mask designation area is generated, and when the motion designation area partially overlaps the mask designation area, The mask designation area is masked except for the movement area in the mask designation area, and when the movement area is within the mask designation area, the movement direction judgment means determines the movement direction. A mask control signal for masking the mask designation area except for the movement area in the mask designation area when there is continuity, and masking the mask designation area when there is no continuity according to the continuity determination result. A mask determination means to generate;
An image processing apparatus comprising: mask processing means for masking the mask designated area by the mask control signal.
(3) In an image processing apparatus that performs a masking process on a part of a captured image taken using a surveillance camera,
Motion detection means for detecting a motion region in an imaging signal output from the surveillance camera;
A motion area defining means for defining a motion designation area designated from the motion areas detected by the motion detection means and storing the motion designation area in a memory;
A movement direction determination means for determining continuity of the movement direction of the movement designation area from the position of the movement area and the position immediately before the movement area;
Mask area setting means for setting a mask designation area for masking from the captured image based on predetermined mask area setting information;
When the motion designation area does not overlap the mask designation area, a mask control signal for masking the mask designation area is generated, and when the motion designation area partially overlaps the mask designation area, The mask designation area is masked except for the movement area in the mask designation area, and when the movement area is within the mask designation area, the movement direction judgment means determines the movement direction. A mask control signal for masking the mask designation area except for the movement area in the mask designation area when there is continuity, and masking the mask designation area when there is no continuity according to the continuity determination result. A mask determination means to generate;
Stop determination means for determining whether or not the motion region in a state of being in the mask designation region has stopped when the motion region is not continuous,
A timer for measuring a time from a state in which the motion designation region is stopped in the mask designation region when the movement designation region is determined to be stopped by the stop determination unit;
First control means for causing the mask determination means to output the information of the motion designation area stored in the memory of the motion area definition means until the time measured by the timer elapses a predetermined time;
Mask control for masking the mask designation area except for the movement designation area determined by the movement direction determination means when the movement designation area starts moving again from the stopped state within the predetermined time. Second control means for generating a signal;
An image processing apparatus comprising: mask processing means for masking the mask designated area by the mask control signal.
請求項１に係る本発明の第１の効果は、撮像画像の中の動き領域を検出する動き検出手段と、動き検出手段で検出された動き領域の中から指定した動き指定領域を定義する動き領域定義手段と、予め定められたマスク領域設定情報に基づき、撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、動き指定領域がマスク指定領域に重なっていない場合或いは動き指定領域がマスク指定領域内に収まっている場合には、マスク指定領域をマスキングするマスク制御信号を生成し、動き指定領域がマスク指定領域と一部重なっている場合には、マスク指定領域内の動き領域を除いてマスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、マスク制御信号により、マスク指定領域をマスキングするマスク処理手段とを備えた格別な構成があるので、保護すべきでない画像や保護する必要のない画像の一部がマスク領域内に入り込んだ場合に、これらの画像がマスクされずに画像表示できるので、プライバシー保護のためのマスク処理によって監視機能が損なわれることのない監視が可能となる。 The first effect of the present invention according to claim 1 is that a motion detection unit that detects a motion region in a captured image, and a motion that defines a motion designation region designated from the motion regions detected by the motion detection unit. An area defining means, a mask area setting means for setting a mask designation area to be masked from the captured image based on predetermined mask area setting information, and a case where the motion designation area does not overlap the mask designation area or a motion designation If the area is within the mask specification area, a mask control signal that masks the mask specification area is generated. If the motion specification area partially overlaps the mask specification area, the motion within the mask specification area is generated. Mask determining means for generating a mask control signal for masking the mask designated area except for the area, and masking the mask designated area by the mask control signal. Since there is a special configuration equipped with a mask processing means, when an image that should not be protected or a part of an image that does not need to be protected enters the mask area, these images can be displayed without being masked. Therefore, it is possible to perform monitoring without losing the monitoring function by the mask processing for privacy protection.
又、請求項２に係る本発明の第２の効果は、前記構成に加え、動き領域の位置とこの動き領域の直前の位置とから動き領域の動き方向の連続性を判定する動き方向判定手段と、動き領域がマスク指定領域内にすべて収まっている場合には、動き方向判定手段で判定された動き方向の連続性の判定結果により、連続性があるときには、マスク指定領域内の前記動き領域を除いてマスク指定領域をマスキングし、連続性がないときには、マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段とを備えた格別な構成があるので、保護すべきでない画像や保護する必要のない画像の全部がマスク領域内にすべて入り込んだ場合においても、これらの画像がマスクされずに画像表示できるので、プライバシー保護のためのマスク処理によって監視機能が損なわれることのない監視が可能となる。 The second effect of the present invention according to claim 2 is that, in addition to the above-mentioned configuration, a motion direction determination means for determining the continuity of the motion direction of the motion region from the position of the motion region and the position immediately before this motion region. When the motion area is all within the mask designation area, the motion area in the mask designation area is determined to be continuous if there is continuity based on the judgment result of the motion direction continuity determined by the motion direction determination means. The mask designation area is masked except for, and when there is no continuity, there is a special configuration including a mask determination means for generating a mask control signal for masking the mask designation area. Even when all unnecessary images enter the mask area, these images can be displayed without being masked. It is possible to monitor never monitoring function is impaired by.
又、請求項３に係る本発明の第３の効果は、更に前記構成に加え、動き指定領域をメモリに格納させる動き領域定義手段と、マスク指定領域内に収まった状態の動き領域が停止したか否かの判定を行う停止判定手段と、停止判定手段で前記動き指定領域が停止していると判定された場合に、動き指定領域がマスク指定領域内で停止した状態からの時間を計測するタイマーと、タイマーで計測された時間が所定時間経過するまで、マスク判定手段に動き領域定義手段のメモリに格納されている動き指定領域の情報を出力させる第１制御手段と、所定時間以内に動き指定領域が停止した状態から再度動き出した場合に、マスク判定手段に動き方向判定手段で判定された動き指定領域を除いてマスク指定領域をマスキングさせるマスク制御信号を生成させる第２制御手段とを備えた格別な構成があるので、保護すべきでない画像や保護する必要のない画像の全部がマスク領域内にすべて入り込み、動きを停止した場合においても、これらの画像がマスクされずに画像表示できるので、プライバシー保護のためのマスク処理によって監視機能が損なわれることのない監視が可能となる。 The third effect of the present invention according to claim 3 is that, in addition to the above configuration, the motion region defining means for storing the motion designated region in the memory and the motion region within the mask designated region are stopped. A stop determination unit that determines whether or not the motion designation region is stopped by the stop determination unit, and measures a time from a state in which the motion designation region is stopped in the mask designation region A timer, first control means for causing the mask determination means to output information on the motion designated area stored in the memory of the motion area defining means until the time measured by the timer has elapsed, and movement within a predetermined time When the designated area starts moving again from the stopped state, a mask control signal for masking the mask designated area except for the movement designated area determined by the movement direction judging means is generated by the mask judging means. Since there is a special configuration including the second control means, all of the images that should not be protected or need not be protected all enter the mask area, and even when the movement is stopped, Since the image can be displayed without being masked, the monitoring function can be monitored without impairing the monitoring function by the mask processing for privacy protection.
以下、本発明を実施するための最良の形態について図面と共に説明する。
図１は本発明に係る画像処理装置の第１の実施例を示すブロック図、図２は第１の実施例の動作を説明する画面表示例を示した図で、（ａ）はマスク処理をしない画面、（ｂ）は保護領域をマスク処理した画面、（ｃ）は従来のマスク処理による画面、（ｄ）は第１の実施例によるマスク処理画面を示す図であり、図３は第１の実施例におけるマスクキング領域を説明するための図である。
又、図４は本発明に係る画像処理装置の第２の実施例を示すブロック図、図５は第２の実施例の動作を説明する画面表示例を示した図で、（ａ）はマスク処理をしない画面、（ｂ）は保護領域とその上下を含めて大きくマスク処理した画面、（ｃ）は動き領域の移動を説明する図、（ｄ）は第２の実施例によるマスク処理画面を示す図である。
更に、図６は本発明に係る画像処理装置の第３の実施例を示すブロック図、図７は第３の実施例の動作を説明する画面表示例を示した図であり、（ａ）は人物が停止したためにマスクされる従来の不具合を説明する図、（ｂ）は第３の実施例によるマスク処理により人物が表示される画面を示す図である。
Hereinafter, the best mode for carrying out the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a first embodiment of the image processing apparatus according to the present invention, FIG. 2 is a diagram showing a screen display example for explaining the operation of the first embodiment, and FIG. (B) is a screen obtained by masking the protection area, (c) is a screen obtained by conventional mask processing, (d) is a diagram showing a mask processing screen according to the first embodiment, and FIG. It is a figure for demonstrating the masking area | region in the Example of this.
FIG. 4 is a block diagram showing a second embodiment of the image processing apparatus according to the present invention, FIG. 5 is a diagram showing a screen display example for explaining the operation of the second embodiment, and FIG. (B) is a screen that has been largely masked including the protection area and its upper and lower sides, (c) is a diagram for explaining the movement of the motion area, and (d) is a mask processing screen according to the second embodiment. FIG.
FIG. 6 is a block diagram showing a third embodiment of the image processing apparatus according to the present invention, FIG. 7 is a diagram showing a screen display example for explaining the operation of the third embodiment, and FIG. The figure explaining the conventional malfunction masked because a person stopped, (b) is a figure which shows the screen on which a person is displayed by the mask process by a 3rd Example.
本発明に係る第１の実施例における画像処理装置は、プライバシー保護領域の画像が比較的小さい場合に用いて好適な構成である。まず全体構成と動作の概略を説明する。 The image processing apparatus according to the first embodiment of the present invention is suitable for use when the image in the privacy protection area is relatively small. First, the overall configuration and the outline of the operation will be described.
図１において、図示しない監視カメラから入来した入力画像信号１は、マスク処理回路２と動き検出回路４に入力される。マスク処理回路２は、後述のマスク判定回路６からのマスク制御信号により、入力画像信号１に後述する格別のマスク処理を施して出力画像信号３として外部に出力する。なお、外部に出力された出力画像信号３は、図示しないモニターテレビに表示して監視したり、ビデオテープレコーダ等の記録再生装置で記録保存される。 In FIG. 1, an input image signal 1 coming from a monitoring camera (not shown) is input to a mask processing circuit 2 and a motion detection circuit 4. The mask processing circuit 2 performs a special mask process described later on the input image signal 1 in accordance with a mask control signal from a mask determination circuit 6 described later, and outputs the input image signal 3 to the outside. The output image signal 3 output to the outside is monitored by being displayed on a monitor television (not shown) or recorded and stored by a recording / reproducing apparatus such as a video tape recorder.
動き検出回路４では、入力された入力画像信号１から動きがあった領域の検出を行う。このときに用いる動き検出技術は、前記特許文献２（６〜８頁（段落００１８〜００３０）、図３〜６）に記載のアルゴリズムからなる検出技術である。
ここで、特許文献２に記載の動き検出技術の仕組みを簡単に説明する。この動き検出は、監視カメラからの入力画像信号をフレーム表示画面上で四角形の小面積に一様に細分化し、細分化された一つ一つの小面積の平均輝度レベルを求めて、この平均輝度と同じ個所での所定時間前の平均輝度とを比較し、この比較結果から小面積部分の画像信号に変化が有ったかどうかを検出するもので、この変化の有った小面積部分がひとかたまりの群を成しているときに、その領域は人物等が動いている画像情報であると判定するものである。
The motion detection circuit 4 detects a region where there is a motion from the input image signal 1 that has been input. The motion detection technique used at this time is a detection technique including the algorithm described in Patent Document 2 (pages 6 to 8 (paragraphs 0018 to 0030) and FIGS. 3 to 6).
Here, the mechanism of the motion detection technique described in Patent Document 2 will be briefly described. In this motion detection, the input image signal from the surveillance camera is uniformly subdivided into small square areas on the frame display screen, and the average luminance level of each subdivided small area is obtained, and this average luminance is obtained. Is compared with the average luminance before a predetermined time at the same location, and it is detected from this comparison result whether there is any change in the image signal of the small area part. The area is determined to be image information in which a person or the like is moving.
このようにして、動き検出回路４で入力画像信号１に動きが検出されたならば、次に動き領域定義回路５において、動きの検出された小面積部分が指定したひとかたまりの群を成していると判定されたときに、このひとかたまりの動きの有る領域は監視対象物と定義してフレーム表示画面上の位置情報を得る。次いでこの動き領域位置情報は次のマスク判定回路６に供給される。 In this way, if a motion is detected in the input image signal 1 by the motion detection circuit 4, then in the motion region definition circuit 5, the small area portion where the motion is detected forms a group of designated groups. When it is determined that there is a group of movements, the region having the movement is defined as a monitoring object and position information on the frame display screen is obtained. Next, this movement region position information is supplied to the next mask determination circuit 6.
マスク判定回路６には、別途マスク領域設定回路８において、外部から供給されたマスク領域設定情報９を受けて作成された、フレーム表示画面上でプライバシーを保護するためのマスク領域位置情報が入力されている。 The mask determination circuit 6 receives mask area position information for protecting privacy on the frame display screen, which is generated in response to the mask area setting information 9 supplied from the outside in the mask area setting circuit 8 separately. ing.
マスク判定回路６は、入力された動き領域位置情報とマスク領域位置情報とから、入力画像信号１内の動き画像部分の表示を制御するマスク制御信号を作成してマスク処理回路２に供給するものである。
次に、上記マスク制御信号の作成方法を説明する。
マスク制御信号は、動き領域位置情報とマスク領域位置情報との相対位置関係から、次の３つの状態を判定してマスク制御信号を作成する。
The mask determination circuit 6 generates a mask control signal for controlling the display of the motion image portion in the input image signal 1 from the input motion region position information and mask region position information, and supplies the mask control signal to the mask processing circuit 2 It is.
Next, a method for creating the mask control signal will be described.
The mask control signal is generated by determining the following three states from the relative positional relationship between the motion region position information and the mask region position information.
第１の状態は、動き領域とマスク領域が重なっていない場合である。この状態では、マスク領域位置情報をそのままマスク制御信号として出力する。したがって、動き領域の画像はそのまま画面に表示される。 The first state is a case where the motion area and the mask area do not overlap. In this state, the mask area position information is output as it is as a mask control signal. Therefore, the image of the motion area is displayed on the screen as it is.
第２の状態は、動き領域がすべてマスク領域の範囲に入っている場合である。この状態も前記第１の状態と同様にマスク領域位置情報をそのままマスク制御信号として出力する。詳しくは後述するが、この状態は、マスク領域の中で画像が動いている場合であって、プライバシーを保護すべき画像が動いているのでマスクする必要がある。したがって、動き領域は画面に表示されない。 The second state is a case where all the motion areas are within the mask area. In this state as well, the mask area position information is output as a mask control signal as it is in the first state. Although details will be described later, this state is a case where an image is moving in the mask area, and an image to be protected for privacy needs to be masked. Therefore, the movement area is not displayed on the screen.
第３の状態は、動き領域の一部分がマスク領域と重なっている場合である。つまり、動き領域がマスク領域内とマスク領域外の両方にまたがっている場合である。この状態のときは、マスク領域内の動き領域部分をマスクしない形態のマスク制御信号を作成する。したがって、動き領域は画面に表示される。 The third state is a case where a part of the motion area overlaps the mask area. That is, this is a case where the motion region extends both inside and outside the mask region. In this state, a mask control signal in a form that does not mask the motion region portion in the mask region is created. Therefore, the motion area is displayed on the screen.
次に、図２を用い、マスク判定回路６で作成されたマスク制御信号がマスク処理回路２に供給され、入力画像信号１がマスク処理される状態の表示画像について説明する。
図２（ａ）は、マスク処理をしない場合で、監視カメラが撮像して得た映像信号をそのまま表示した画面である。この図で窓１０１の画像部分がプライバシーを保護する領域である。人物１０２は保護すべきでないか、あるいは保護する必要のない画像で、動きを伴っており、常に表示したい画像とする。
Next, a display image in a state where the mask control signal created by the mask determination circuit 6 is supplied to the mask processing circuit 2 and the input image signal 1 is masked will be described with reference to FIG.
FIG. 2A shows a screen in which the video signal obtained by the surveillance camera is displayed as it is without mask processing. In this figure, the image portion of the window 101 is an area for protecting privacy. The person 102 is an image that should not be protected or need not be protected, is accompanied by movement, and is an image that is always desired to be displayed.
同図（ｂ）は、保護領域である前記窓１０１をマスク１０３で隠した表示画像である。こうすることで、窓１０１の内部は画面に表示されずプライバシーが保護される。
この図の状態には、前記の動き領域位置情報とマスク領域位置情報との相対位置関係で述べた２つの状態が表されている。
一つは、人物１０２とマスク１０３の相対関係で、この図の場合両者は離れているので前記第１の状態である。したがって、動いている人物１０２はそのまま表示される。
FIG. 4B shows a display image in which the window 101 which is a protection area is hidden by a mask 103. By doing so, the inside of the window 101 is not displayed on the screen, and privacy is protected.
In the state of this figure, two states described in the relative positional relationship between the motion region position information and the mask region position information are shown.
One is the relative relationship between the person 102 and the mask 103. In the case of this figure, the two are separated from each other, which is the first state. Therefore, the moving person 102 is displayed as it is.
一方、窓１０１とマスク１０３の相対関係は、仮に窓１０１の内部で何かの動きが有ったとして動き検出されても、その領域はマスク１０３の領域の範囲にすべて入るので、前記第２の状態となって、窓１０１の画像はマスクされたままになる。 On the other hand, the relative relationship between the window 101 and the mask 103 is that even if motion is detected assuming that there is some motion inside the window 101, the region falls within the range of the region of the mask 103. In this state, the image of the window 101 remains masked.
次いで、人物１０２は前進し、マスク１０３の領域に入った場合の画像が同図（ｄ）である。
このとき、従来のマスク処理では、同図（ｃ）に示すように、マスク１０３の領域に重なっている人物１０２の上半身は隠れてしまい、監視するには具合が悪いことになる。しかし、本実施例では、図（ｄ）に示すように、人物１０２の上半身が隠れることなく表示されるようになる。
図（ｄ）における人物１０２とマスク１０３の相対関係は前記第３の状態であるから、動きが検出された人物１０２とマスク１０３とが重なっている部分はマスクしないようなマスク制御信号が作成される。すなわち、マスク領域からはみ出して動き領域が検出された画像は、マスク領域と重なっている部分もマスクせずにそのまま表示される。
図３は、この状態におけるマスク１０３のマスキング領域を分り易く示したものであり、マスク１０３は人物の輪郭で抜き取られた形のマスク領域になる。この図３に示すマスク１０３でマスク処理をすると、人物の輪郭で抜き取られた形の部分の画像はそのまま表示されるので、人物１０２の上半身が見えることになる。
Next, an image when the person 102 moves forward and enters the area of the mask 103 is shown in FIG.
At this time, in the conventional mask processing, as shown in FIG. 5C, the upper body of the person 102 that overlaps the area of the mask 103 is hidden, which makes it unsuitable for monitoring. However, in this embodiment, as shown in FIG. 4D, the upper body of the person 102 is displayed without being hidden.
Since the relative relationship between the person 102 and the mask 103 in the diagram (d) is the third state, a mask control signal is generated so as not to mask the portion where the person 102 and the mask 103 where the motion is detected overlap. The In other words, an image in which a motion region is detected that protrudes from the mask region is displayed as it is without masking a portion that overlaps the mask region.
FIG. 3 shows the masking area of the mask 103 in this state in an easy-to-understand manner. The mask 103 becomes a mask area extracted in the outline of a person. When mask processing is performed with the mask 103 shown in FIG. 3, the image of the portion extracted by the outline of the person is displayed as it is, so that the upper body of the person 102 can be seen.
以上詳述したように、本発明の第１の実施例では、検出された動き領域とマスク領域の相対位置関係を３つの状態に分けて、夫々の状態で動きを伴っている画像の表示をマスク制御信号で制御することにより、プライバシー保護のためのマスク処理によって監視機能が損なわれることのない監視が可能となる。 As described above in detail, in the first embodiment of the present invention, the relative positional relationship between the detected motion region and the mask region is divided into three states, and an image accompanied by motion in each state is displayed. By controlling with a mask control signal, it is possible to perform monitoring without losing the monitoring function by mask processing for privacy protection.
次に、本発明の第２の実施例を図４及び図５を用いて説明する。第２の実施例は、監視したい人物が設定したマスク領域内にすべて入ってしまうような広いマスク領域の場合に用いて好適な画像処理装置である。
まず第２の実施例におけるマスク領域を説明する。図５（ａ）において、窓２０１の画像部分がプライバシーを保護する領域である。人物２０２は、保護すべきでないか、あるいは保護する必要のない画像で、動きを伴っており、常に表示したい画像とする。
Next, a second embodiment of the present invention will be described with reference to FIGS. The second embodiment is an image processing apparatus suitable for use in the case of a wide mask area that completely enters a mask area set by a person to be monitored.
First, the mask area in the second embodiment will be described. In FIG. 5A, the image portion of the window 201 is an area for protecting privacy. The person 202 is an image that should not be protected or need not be protected, is accompanied by movement, and is an image that is always desired to be displayed.
図５（ｂ）は、保護領域である前記窓２０１をマスク２０３で隠した表示画像である。こうすることで、窓２０１の内部は画面に表示されずプライバシーが保護される。なお、図示したように本実施例のマスク２０３は窓２０１の上下すべてをマスクする状態に設定されている例である。これにより、人物２０２が移動してマスク領域に重なったときには、人物の画像がすべてマスクの領域内に包含されることになる。このような状態の場合には、前記第１の実施例では、人物がすべてマスクされ隠れることになり監視できなくなるので不都合である。 FIG. 5B shows a display image in which the window 201 which is a protection area is hidden by a mask 203. By doing so, the inside of the window 201 is not displayed on the screen, and privacy is protected. As shown in the figure, the mask 203 of this embodiment is an example in which the upper and lower portions of the window 201 are masked. As a result, when the person 202 moves and overlaps the mask area, all the images of the person are included in the mask area. In such a state, the first embodiment is inconvenient because all persons are masked and hidden and cannot be monitored.
次に、図４を用いて第２の実施例における画像処理装置の構成を説明する。
図４は、前記図１と同一機能の回路ブロックには同一番号を付してある。又、図４が図１と異なる点は、動き方向判定回路７が加わったことである。したがって、この動き方向判定回路７に直接関連しない部分は、前記第１の実施例と同一の動作であるので簡略化のために説明を省略する。
Next, the configuration of the image processing apparatus in the second embodiment will be described with reference to FIG.
In FIG. 4, circuit blocks having the same functions as those in FIG. 4 differs from FIG. 1 in that a movement direction determination circuit 7 is added. Accordingly, the portions not directly related to the movement direction determination circuit 7 are the same as those in the first embodiment, and therefore the description thereof is omitted for simplification.
動き方向判定回路７は、画像の中の動きが検出された領域が、所定時間前に検出された動き領域と比較することで動き方向を検出し、動きの画像が移動したものであることを判定する回路である。
この動き方向を検出するアルゴリズムは、前記特許文献２（１１〜１２頁（段落００４３〜００４６）、図９〜１０）に記載のアルゴリズムからなる検出技術を用いる。
The motion direction determination circuit 7 detects the motion direction by comparing the region where the motion is detected in the image with the motion region detected a predetermined time ago, and confirms that the motion image has moved. It is a circuit for determining.
As an algorithm for detecting the movement direction, a detection technique including the algorithm described in Patent Document 2 (pages 11 to 12 (paragraphs 0043 to 0046) and FIGS. 9 to 10) is used.
ここで、特許文献２に記載の動き方向を検出する技術の仕組みを簡単に説明する。動き方向検出は、前記動き検出の仕組みの説明で述べたような手段で、小面積に一様に細分化された画像信号から動きが検出された各小面積部分の位置情報を得て、まず、この位置情報から動き領域全体の中心座標を算出し記憶しておく。
次いで、所定時間経過後における同様に算出した動き領域全体の中心座標を求めて、前記記憶されている中心座標の値とを比較することにより、動き領域の移動の量と方向を得るのである。
Here, the mechanism of the technique for detecting the movement direction described in Patent Document 2 will be briefly described. The motion direction detection is performed by obtaining the positional information of each small area portion where the motion is detected from the image signal uniformly subdivided into small areas by means as described in the explanation of the mechanism of motion detection. The center coordinates of the entire motion region are calculated from the position information and stored.
Next, the central coordinates of the entire motion area calculated in the same manner after a predetermined time has elapsed are obtained, and the amount and direction of movement of the motion area are obtained by comparing the stored central coordinate values.
図４に示す動き方向判定回路７は、動き領域定義回路５からの動き領域位置情報を受けて動き領域の移動の量と方向を算出し、現在の動き領域が所定時間前の位置から移動したものであることを判定し、動き方向判定結果をマスク判定回路６に入力する。 The motion direction determination circuit 7 shown in FIG. 4 receives the motion region position information from the motion region definition circuit 5, calculates the amount and direction of movement of the motion region, and the current motion region has moved from a position before a predetermined time. It determines that it is a thing, and inputs a movement direction determination result to the mask determination circuit 6.
マスク判定回路６は、入力された前記動き方向判定結果や、動き領域定義回路５からの動き領域位置情報、マスク領域設定回路８からのマスク領域位置情報とから、入力画像信号１内の動き画像部分の表示を制御するマスク制御信号を作成してマスク処理回路２に供給する。
マスク判定回路６で作成されるマスク制御信号は、動き方向判定結果と動き領域位置情報、マスク領域位置情報から、次の３つの状態を判定してマスク制御信号を作成する。
The mask determination circuit 6 uses the input motion direction determination result, the motion region position information from the motion region definition circuit 5, and the mask region position information from the mask region setting circuit 8 to input a motion image in the input image signal 1. A mask control signal for controlling the display of the part is generated and supplied to the mask processing circuit 2.
The mask control signal generated by the mask determination circuit 6 determines the following three states from the motion direction determination result, the motion region position information, and the mask region position information, and generates a mask control signal.
第１の状態は、動き領域とマスク領域が重なっていない場合である。この状態では、マスク領域位置情報をそのままマスク制御信号として出力する。したがって、動き領域の画像はそのまま画面に表示される。 The first state is a case where the motion area and the mask area do not overlap. In this state, the mask area position information is output as it is as a mask control signal. Therefore, the image of the motion area is displayed on the screen as it is.
第２の状態は、動き領域の一部分がマスク領域と重なっている場合である。つまり、動き領域がマスク領域内とマスク領域外の両方にまたがっている場合である。この状態のときは、マスク領域内の動き領域部分をマスクしない形態のマスク制御信号を作成する。したがって、動き領域は画面に表示される。 The second state is a case where a part of the motion area overlaps the mask area. That is, this is a case where the motion region extends both inside and outside the mask region. In this state, a mask control signal in a form that does not mask the motion region portion in the mask region is created. Therefore, the motion area is displayed on the screen.
第３の状態は、動き領域がすべてマスク領域の範囲に入っている場合である。
この状態では、動き方向判定結果を用いてマスク制御信号の作成方法を切替える。
動き方向判定結果により、動き領域がマスク領域の外から移動してきたものであるときは、マスク領域内の動き領域部分をマスクしない形態のマスク制御信号を作成する。したがって、動き領域は画面に表示される。
The third state is a case where all the motion areas are within the mask area.
In this state, the method for creating the mask control signal is switched using the motion direction determination result.
If the movement area is moved from outside the mask area as a result of the movement direction determination, a mask control signal in a form that does not mask the movement area portion in the mask area is created. Therefore, the motion area is displayed on the screen.
又、動き方向判定結果により、動き領域がマスク領域の外から移動してきたものでないときは、前記第１の状態と同様にマスク領域位置情報をそのままマスク制御信号として出力する。この状態は、マスク領域の中で画像が動いている場合であって、プライバシーを保護すべき画像が動いているのでマスクする必要がある。したがって、動き領域は画面に表示されない。 If the movement area is not moved from outside the mask area as a result of the movement direction determination, the mask area position information is output as a mask control signal as it is in the first state. This state is a case where an image is moving in the mask area, and an image to be protected for privacy needs to be masked. Therefore, the movement area is not displayed on the screen.
次に、図５を用いて前記動き方向判定回路７の動作を補足説明する。
図５（ｃ）において、人物２０２ａは現在の動き領域位置で、人物２０２ｂは所定時間前の動き領域位置を表している。この２つの動き領域位置情報から、動き方向判定回路７は画像の移動量と方向を算出する。
図５（ｄ）は更に所定時間経過後の画像である。人物２０２ａがマスク領域２０３内にすべて包含された状態である。この場合も上記と同様に、所定時間前の人物２０２ｂの位置情報を用いて、現在の動き画像の移動量と方向を算出し、これまでに算出した移動量と方向から動き領域の連続性を判定して、現在の動き画像は所定時間前からの移動であることを判定する。
Next, the operation of the movement direction determination circuit 7 will be supplementarily described with reference to FIG.
In FIG. 5C, the person 202a represents the current motion region position, and the person 202b represents the motion region position a predetermined time ago. From these two motion region position information, the motion direction determination circuit 7 calculates the moving amount and direction of the image.
FIG. 5D shows an image after a predetermined time has passed. In this state, all the persons 202a are included in the mask area 203. In this case as well, in the same way as described above, the movement amount and direction of the current motion image are calculated using the position information of the person 202b a predetermined time ago, and the continuity of the motion region is calculated from the movement amount and direction calculated so far. It is determined that the current motion image is a movement from a predetermined time before.
以上詳述したように、本発明の第２の実施例では、検出された動き領域が設定したマスク領域内にすべて入ってしまうような広いマスク領域の場合であっても、動き領域の移動量と方向から、動き領域がマスク領域外からの移動であるとして、動き領域の画像を表示するマスク処理を行うので、プライバシー保護のためのマスク処理によって監視機能が損なわれることのない監視が可能となる。 As described above in detail, in the second embodiment of the present invention, even when the detected motion area is a large mask area that falls within the set mask area, the amount of movement of the motion area From the direction, it is assumed that the movement area is moving from outside the mask area, and the mask process for displaying the image of the movement area is performed, so that the monitoring function is not impaired by the mask process for privacy protection. Become.
次に、本発明の第３の実施例を図６及び図７を用いて説明する。第３の実施例は、監視したい人物が設定したマスク領域内に入り、そこで動きを停止することがある場合に用いて好適な画像処理装置である。
前記第２の実施例では、監視対象は撮像画面内を通過するような連続動作が前提でマスク処理を行っているので、たとえば、監視したい人物が設定したマスク領域内で立ち止まり動きが検出されなくなるとマスク処理に不具合が生ずることになる。
Next, a third embodiment of the present invention will be described with reference to FIGS. The third embodiment is an image processing apparatus suitable for use in a case where a person who wants to monitor enters a mask area set and stops moving there.
In the second embodiment, the masking process is performed on the assumption that the monitoring target passes through the imaging screen, so that, for example, the stop motion is not detected in the mask area set by the person to be monitored. As a result, a problem occurs in the mask processing.
図７（ａ）はこの様子を示したものである。すなわち、マスク３０３の領域内に人物３０２（ａ）が入り、そこで立ち止ると動きが検出されなくなるので、第２の実施例のマスク処理動作ではマスク３０３により人物がマスクされて表示されなくなる。なお、同図ではこの表示されない状態を表すのに人物３０２ａを薄い線で描いてある。
本発明の第３の実施例は、このような不具合が起こらないようにマスク処理を行うもので、図７（ｂ）の人物３０２（ｂ）に示すように、人物が立ち止り動きが検出されなくなってもマスクされずに表示できるようにするものであり、以下、図６を用いて本実施例におけるマスク処理動作を説明する。
FIG. 7A shows this state. That is, since the person 302 (a) enters the area of the mask 303 and stops there, the movement is not detected. Therefore, in the mask processing operation of the second embodiment, the person is masked by the mask 303 and is not displayed. In the figure, the person 302a is drawn with a thin line to show the state where it is not displayed.
In the third embodiment of the present invention, mask processing is performed so that such a problem does not occur. As shown in a person 302 (b) in FIG. The mask processing operation according to the present embodiment will be described below with reference to FIG. 6.
図６のブロック図は、前記第２の実施例で使用した図４に、新たに動き停止判定回路１０、メモリ１１、タイマー１２を加えて構成されているものである。なお、図４と同一構成部分は同一符号を付してあり、簡略のためその部分の動作説明は省略する。
新たに加わった動き停止判定回路１０は、画像の中の動きが停止したことを判定する回路であり、メモリ１１は動き領域定義回路５で定義された動き領域の座標位置データを逐次更新しながら保持するメモリ、タイマー１２は動き停止判定回路１０によって動き停止が判定されてからの経過時間を計測するタイマーである。
The block diagram of FIG. 6 is configured by adding a motion stop determination circuit 10, a memory 11, and a timer 12 to FIG. 4 used in the second embodiment. Note that the same components as those in FIG. 4 are denoted by the same reference numerals, and for the sake of brevity, explanation of the operation of those portions is omitted.
The newly added motion stop determination circuit 10 is a circuit for determining that the motion in the image has stopped, and the memory 11 sequentially updates the coordinate position data of the motion region defined by the motion region definition circuit 5. The memory and timer 12 to be held are timers that measure an elapsed time after the movement stop determination circuit 10 determines the movement stop.
第３の実施例は、前記したように第２の実施例においてマスク領域内に人物が入り立ち止まるという特殊な状態に対応したマスク処理であるが、人物が立ち止るまでは第２の実施例で述べたマスク処理と同一であるのでその説明は省略し、人物が立ち止まった時点からの動作について述べる。 The third embodiment is a mask process corresponding to a special state in which a person enters and stops in the mask area in the second embodiment as described above, but the second embodiment is the same until the person stops. Since it is the same as the mask processing described above, the description thereof will be omitted, and the operation from when the person stopped will be described.
図６において、動き停止判定回路１０は、動き検出回路４からの動き情報が無くなり人物の動きが停止したと判定した場合には、動き領域定義回路５に制御信号を供給する。これにより動き領域定義回路５は、メモリ１１に対して動き領域位置情報のデータ更新を停止する制御を行うと共に、このメモリ１１に格納されている直前の動き領域位置情報を読み出してこの位置情報をマスク判定回路６に供給する。 In FIG. 6, the motion stop determination circuit 10 supplies a control signal to the motion region definition circuit 5 when it is determined that the motion information from the motion detection circuit 4 is lost and the motion of the person has stopped. As a result, the motion region definition circuit 5 controls the memory 11 to stop updating the data of the motion region position information, and also reads the immediately preceding motion region position information stored in the memory 11 to obtain the position information. This is supplied to the mask determination circuit 6.
更に、同時に動き領域定義回路５は、タイマー１２を起動して動き停止の制御信号が動き停止判定回路１０より供給されてからの時間を計測する。そして、動き領域定義回路５はタイマー１２による所定の時間経過まで、マスク判定回路６にメモリ１１に格納されている動き領域位置情報の供給を継続する。
このようにして、人物の動き停止後は予め設定されている所定の時間の間、動き停止直前の動き領域が表示されるので、人物がマスクされることなく見ることが可能になる。
At the same time, the motion region definition circuit 5 starts the timer 12 and measures the time after the motion stop control signal is supplied from the motion stop determination circuit 10. The motion region definition circuit 5 continues to supply the motion region position information stored in the memory 11 to the mask determination circuit 6 until a predetermined time elapses by the timer 12.
In this way, since the movement area immediately before the movement is stopped is displayed for a predetermined time after the movement of the person is stopped, the person can be seen without being masked.
前記所定時間内に人物の動きが再開されると、動き領域定義回路５からは、メモリ１１に格納されていた停止期間の動き領域位置情報に引き続き、動きが再開された時刻の動き領域位置情報とが動き方向判定回路７に供給される。この２つの動き領域位置情報に基づき、動き方向判定回路７によって再び連続した動きを判定し、前記第２実施例と同様にマスク領域内の人物の表示を継続する。 When the movement of the person is resumed within the predetermined time, the movement area definition circuit 5 sends the movement area position information at the time when the movement is resumed following the movement area position information of the stop period stored in the memory 11. Are supplied to the movement direction determination circuit 7. Based on the two pieces of movement area position information, the movement direction determination circuit 7 determines the continuous movement again, and the display of the person in the mask area is continued as in the second embodiment.
以上詳述したように、本発明の第３の実施例では、動き領域が設定したマスク領域内にすべて入ってしまうような広いマスク領域の場合であっても、動き領域の移動量と方向から動き領域がマスク領域外からの移動であると判断することにより、その動き領域の画像を表示可能とするマスク処理を行うと共に、マスク領域内で人物が立ち止るなどの動きが停止した場合にも、動きの停止を判定して所定の停止時間内は継続して人物を表示できる機能を有するものである。
このようなマスク処理を行うので、本発明による画像処理装置ではプライバシー保護のためのマスク処理によって監視機能が損なわれることのない監視が可能となる。
As described above in detail, in the third embodiment of the present invention, even if the movement area is a wide mask area that falls within the set mask area, the movement amount and direction of the movement area are determined. When it is determined that the motion area is moving from outside the mask area, mask processing is performed so that an image of the motion area can be displayed, and when a motion stops, such as when a person stops in the mask area It has a function of determining stoppage of movement and displaying a person continuously within a predetermined stop time.
Since such mask processing is performed, the image processing apparatus according to the present invention can perform monitoring without losing the monitoring function by the mask processing for privacy protection.
１… 入力画像信号
２… マスク処理回路
３… 出力画像信号
４… 動き検出回路
５… 動き領域定義回路
６… マスク判定回路
７… 動き方向判定回路
８… マスク領域設定回路
９… マスク領域設定情報
１０… 動き停止判定回路
１１… メモリ
１２… タイマー
１０１、２０１… 窓（プライバシーを保護する領域）
１０２、２０２… 人物（２０２ａ…現在位置、２０２ｂ…所定時間前の位置）
１０３、２０３、３０３… マスク
３０２… 立ち止った人物（３０２ａ…マスクされて見えない状態、３０２ｂ…マスクされない状態）
DESCRIPTION OF SYMBOLS 1 ... Input image signal 2 ... Mask processing circuit 3 ... Output image signal 4 ... Motion detection circuit 5 ... Motion area definition circuit 6 ... Mask determination circuit 7 ... Motion direction determination circuit 8 ... Mask area setting circuit 9 ... Mask area setting information 10 ... Motion stop judgment circuit 11 ... Memory 12 ... Timer 101, 201 ... Window (area protecting privacy)
102, 202 ... person (202a ... current position, 202b ... position before a predetermined time)
103, 203, 303 ... Mask 302 ... Standing person (302a ... Masked state not visible, 302b ... Unmasked state)
Claims (3)
前記監視カメラから出力される撮像画像の中の動き領域を検出する動き検出手段と、
前記動き検出手段で検出された前記動き領域の中から指定した動き指定領域を定義する動き領域定義手段と、
予め定められたマスク領域設定情報に基づき、前記撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、
前記動き指定領域が前記マスク指定領域に重なっていない場合或いは前記動き指定領域が前記マスク指定領域内に収まっている場合には、前記マスク指定領域をマスキングするマスク制御信号を生成し、前記動き指定領域が前記マスク指定領域と一部重なっている場合には、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、
前記マスク制御信号により、前記マスク指定領域をマスキングするマスク処理手段と、
を備えたことを特徴とする画像処理装置。 In an image processing apparatus that performs masking processing on a part of a captured image taken using a surveillance camera,
Motion detection means for detecting a motion region in a captured image output from the surveillance camera;
A motion area defining means for defining a motion designation area designated from the motion areas detected by the motion detection means;
Mask area setting means for setting a mask designation area for masking from the captured image based on predetermined mask area setting information;
When the motion designation area does not overlap with the mask designation area or when the motion designation area is within the mask designation area, a mask control signal for masking the mask designation area is generated, and the motion designation is generated. A mask determining means for generating a mask control signal for masking the mask designated area except for the motion area in the mask designated area when the area partially overlaps the mask designated area;
Mask processing means for masking the mask designated area by the mask control signal;
An image processing apparatus comprising:
前記監視カメラから出力される撮像信号の中の動き領域を検出する動き検出手段と、
前記動き検出手段で検出された前記動き領域の中から指定した動き指定領域を定義する動き領域定義手段と、
前記動き領域の位置と前記動き領域の直前の位置とから前記動き領域の動き方向の連続性を判定する動き方向判定手段と、
予め定められたマスク領域設定情報に基づき、前記撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、
前記動き指定領域が前記マスク指定領域に重なっていない場合には、前記マスク指定領域をマスキングするマスク制御信号を生成し、前記動き指定領域が前記マスク指定領域と一部重なっている場合には、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、前記動き領域が前記マスク指定領域内に収まっている場合には、前記動き方向判定手段で判定された前記動き方向の連続性の判定結果により、連続性があるときには、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、連続性がないときには、前記マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、
前記マスク制御信号により、前記マスク指定領域をマスキングするマスク処理手段と、
を備えたことを特徴とする画像処理装置。 In an image processing apparatus that performs masking processing on a part of a captured image taken using a surveillance camera,
Motion detection means for detecting a motion region in an imaging signal output from the surveillance camera;
A motion area defining means for defining a motion designation area designated from the motion areas detected by the motion detection means;
A motion direction determination means for determining continuity of the motion direction of the motion region from the position of the motion region and the position immediately before the motion region;
Mask area setting means for setting a mask designation area for masking from the captured image based on predetermined mask area setting information;
When the motion designation area does not overlap the mask designation area, a mask control signal for masking the mask designation area is generated, and when the motion designation area partially overlaps the mask designation area, The mask designation area is masked except for the movement area in the mask designation area, and when the movement area is within the mask designation area, the movement direction judgment means determines the movement direction. A mask control signal for masking the mask designation area except for the movement area in the mask designation area when there is continuity, and masking the mask designation area when there is no continuity according to the continuity determination result. A mask determination means to generate;
Mask processing means for masking the mask designated area by the mask control signal;
An image processing apparatus comprising:
前記監視カメラから出力される撮像信号の中の動き領域を検出する動き検出手段と、
前記動き検出手段で検出された前記動き領域の中から指定した動き指定領域を定義して、メモリに格納させる動き領域定義手段と、
前記動き領域の位置と前記動き領域の直前の位置とから前記動き指定領域の動き方向の連続性を判定する動き方向判定手段と、
予め定められたマスク領域設定情報に基づき、前記撮像画像の中からマスキングするマスク指定領域を設定するマスク領域設定手段と、
前記動き指定領域が前記マスク指定領域に重なっていない場合には、前記マスク指定領域をマスキングするマスク制御信号を生成し、前記動き指定領域が前記マスク指定領域と一部重なっている場合には、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、前記動き領域が前記マスク指定領域内に収まっている場合には、前記動き方向判定手段で判定された前記動き方向の連続性の判定結果により、連続性があるときには、前記マスク指定領域内の前記動き領域を除いて前記マスク指定領域をマスキングし、連続性がないときには、前記マスク指定領域をマスキングするマスク制御信号を生成するマスク判定手段と、
前記動き領域の連続性がないときに、前記マスク指定領域内に収まった状態の前記動き領域が停止したか否かの判定を行う停止判定手段と、
前記停止判定手段で前記動き指定領域が停止していると判定された場合に、前記動き指定領域が前記マスク指定領域内で停止した状態からの時間を計測するタイマーと、
前記タイマーで計測された時間が所定時間経過するまで、前記マスク判定手段に前記動き領域定義手段のメモリに格納されている前記動き指定領域の情報を出力させる第１制御手段と、
前記所定時間以内に前記動き指定領域が停止した状態から再度動き出した場合に、前記マスク判定手段に前記動き方向判定手段で判定された前記動き指定領域を除いて前記マスク指定領域をマスキングさせるマスク制御信号を生成させる第２制御手段と、
前記マスク制御信号により、前記マスク指定領域をマスキングするマスク処理手段と、
を備えたことを特徴とする画像処理装置。
In an image processing apparatus that performs masking processing on a part of a captured image taken using a surveillance camera,
Motion detection means for detecting a motion region in an imaging signal output from the surveillance camera;
A motion area defining means for defining a motion designation area designated from the motion areas detected by the motion detection means and storing the motion designation area in a memory;
A movement direction determination means for determining continuity of the movement direction of the movement designation area from the position of the movement area and the position immediately before the movement area;
Mask area setting means for setting a mask designation area for masking from the captured image based on predetermined mask area setting information;
When the motion designation area does not overlap the mask designation area, a mask control signal for masking the mask designation area is generated, and when the motion designation area partially overlaps the mask designation area, The mask designation area is masked except for the movement area in the mask designation area, and when the movement area is within the mask designation area, the movement direction judgment means determines the movement direction. A mask control signal for masking the mask designation area except for the movement area in the mask designation area when there is continuity, and masking the mask designation area when there is no continuity according to the continuity determination result. A mask determination means to generate;
Stop determination means for determining whether or not the motion region in a state of being in the mask designation region has stopped when the motion region is not continuous,
A timer for measuring a time from a state in which the motion designation region is stopped in the mask designation region when the movement designation region is determined to be stopped by the stop determination unit;
First control means for causing the mask determination means to output the information of the motion designation area stored in the memory of the motion area definition means until the time measured by the timer elapses a predetermined time;
Mask control for masking the mask designation area except for the movement designation area determined by the movement direction determination means when the movement designation area starts moving again from the stopped state within the predetermined time. Second control means for generating a signal;
Mask processing means for masking the mask designated area by the mask control signal;
An image processing apparatus comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005240980A JP4508038B2 (en) | 2005-03-23 | 2005-08-23 | Image processing device |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005084039 | 2005-03-23 | ||
| JP2005240980A JP4508038B2 (en) | 2005-03-23 | 2005-08-23 | Image processing device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2006304250A JP2006304250A (en) | 2006-11-02 |
| JP4508038B2 true JP4508038B2 (en) | 2010-07-21 |
Family
ID=37471962
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005240980A Active JP4508038B2 (en) | 2005-03-23 | 2005-08-23 | Image processing device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4508038B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109697814A (en) * | 2017-10-20 | 2019-04-30 | 佳能株式会社 | Equipment, control method and medium are set |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4873229B2 (en) * | 2006-03-31 | 2012-02-08 | サクサ株式会社 | Surveillance video processing apparatus and method |
| JP5156264B2 (en) * | 2007-05-30 | 2013-03-06 | 京セラ株式会社 | Mobile device |
| JP2009124618A (en) * | 2007-11-19 | 2009-06-04 | Hitachi Ltd | Camera apparatus, and image processing device |
| KR101453087B1 (en) | 2008-01-24 | 2014-10-27 | 엘지전자 주식회사 | Method for controlling mask color display in monitoring camera |
| JP5330750B2 (en) * | 2008-07-15 | 2013-10-30 | 三菱重工業株式会社 | Personal information protection device, personal information protection method, program, and monitoring system |
| JP2011130271A (en) * | 2009-12-18 | 2011-06-30 | Canon Inc | Imaging device and video processing apparatus |
| JP2011138409A (en) * | 2009-12-28 | 2011-07-14 | Sogo Keibi Hosho Co Ltd | Image sensor, monitoring system, and image processing method of the image sensor |
| CN104969542B (en) * | 2013-01-29 | 2019-05-31 | 有限会社雷姆洛克映像技术研究所 | Monitoring system |
| EP2813970A1 (en) | 2013-06-14 | 2014-12-17 | Axis AB | Monitoring method and camera |
| JP6024999B2 (en) * | 2014-11-26 | 2016-11-16 | パナソニックＩｐマネジメント株式会社 | Imaging device, recording device, and video output control device |
| JP6176619B2 (en) * | 2016-09-26 | 2017-08-09 | パナソニックＩｐマネジメント株式会社 | IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM |
| US10277901B2 (en) | 2017-05-08 | 2019-04-30 | Axis Ab | Encoding a video stream having a privacy mask |
| CN111183636A (en) * | 2017-11-29 | 2020-05-19 | 京瓷办公信息系统株式会社 | Monitoring system and image processing apparatus |
| SE1951220A1 (en) * | 2019-10-25 | 2021-04-26 | Assa Abloy Ab | Controlling camera-based supervision of a physical space |
| CN115883959B (en) * | 2023-02-14 | 2023-06-06 | 深圳市湘凡科技有限公司 | Picture content control method for privacy protection and related product |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003046745A (en) * | 2001-07-30 | 2003-02-14 | Matsushita Electric Ind Co Ltd | Apparatus and method for image processing |
| JP2003319158A (en) * | 2002-04-18 | 2003-11-07 | Toshiyuki Tani | Image processing system |
| JP2004304847A (en) * | 2004-06-25 | 2004-10-28 | Matsushita Electric Ind Co Ltd | Supervisory camera apparatus and display method of supervisory camera |
| JP2004364030A (en) * | 2003-06-05 | 2004-12-24 | Victor Co Of Japan Ltd | Monitoring system |
-
2005
- 2005-08-23 JP JP2005240980A patent/JP4508038B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003046745A (en) * | 2001-07-30 | 2003-02-14 | Matsushita Electric Ind Co Ltd | Apparatus and method for image processing |
| JP2003319158A (en) * | 2002-04-18 | 2003-11-07 | Toshiyuki Tani | Image processing system |
| JP2004364030A (en) * | 2003-06-05 | 2004-12-24 | Victor Co Of Japan Ltd | Monitoring system |
| JP2004304847A (en) * | 2004-06-25 | 2004-10-28 | Matsushita Electric Ind Co Ltd | Supervisory camera apparatus and display method of supervisory camera |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109697814A (en) * | 2017-10-20 | 2019-04-30 | 佳能株式会社 | Equipment, control method and medium are set |
| CN109697814B (en) * | 2017-10-20 | 2021-01-12 | 佳能株式会社 | Setting apparatus, control method, and medium |
| US10924657B2 (en) | 2017-10-20 | 2021-02-16 | Canon Kabushiki Kaisha | Setting apparatus and control method thereof |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2006304250A (en) | 2006-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4508038B2 (en) | Image processing device | |
| JP7173196B2 (en) | Image processing device, image processing method, and program | |
| JP2009124618A (en) | Camera apparatus, and image processing device | |
| JP2008009849A (en) | Person tracking device | |
| JP2022111126A (en) | Information processing system, information processing method, and information processing program | |
| JP2005347905A (en) | Crime prevention support system | |
| JP2010193227A (en) | Video processing system | |
| WO2014069088A1 (en) | Information processing system, information processing method, and program | |
| KR101518485B1 (en) | Intelligent object tracking system | |
| JPH0583712A (en) | Picture processing system and monitor system | |
| JP2015149522A (en) | Projection control apparatus | |
| JP4535919B2 (en) | Surveillance system, surveillance camera, and controller | |
| JP6766009B2 (en) | Monitoring equipment, monitoring methods, computer programs, and storage media | |
| JP2007036782A (en) | Moving object detection apparatus | |
| JPS607593A (en) | Invasion monitor | |
| JP6933178B2 (en) | Control device, surveillance system, surveillance camera control method and surveillance program | |
| KR101445361B1 (en) | Site Monitoring System | |
| KR100278989B1 (en) | Closed Circuit Monitoring Apparatus and Method | |
| JP2005167604A (en) | Image monitoring system | |
| JP2009017031A (en) | Image information output device, monitoring camera system, and image information output method | |
| JP2014074957A (en) | Image processing apparatus and image processing method | |
| JP2009282842A (en) | Intrusion monitor device | |
| JP2007325170A (en) | Image monitoring device and method | |
| JP5053936B2 (en) | Intercom system | |
| CN103621055A (en) | Imaging device, information processing device, and non-temporary computer readable medium wherein program is stored |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071228 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100413 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100426 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 4508038 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |