JP4487660B2 - Image protection device and imaging device - Google Patents

Image protection device and imaging device Download PDF

Info

Publication number
JP4487660B2
JP4487660B2 JP2004199945A JP2004199945A JP4487660B2 JP 4487660 B2 JP4487660 B2 JP 4487660B2 JP 2004199945 A JP2004199945 A JP 2004199945A JP 2004199945 A JP2004199945 A JP 2004199945A JP 4487660 B2 JP4487660 B2 JP 4487660B2
Authority
JP
Japan
Prior art keywords
image
protection
unit
area
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004199945A
Other languages
Japanese (ja)
Other versions
JP2006025061A (en
Inventor
祥治 萩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2004199945A priority Critical patent/JP4487660B2/en
Publication of JP2006025061A publication Critical patent/JP2006025061A/en
Application granted granted Critical
Publication of JP4487660B2 publication Critical patent/JP4487660B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Studio Circuits (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

1つの発明は、入力画像のうち指定された画像領域の画像を選択的に保護する機能を実現する画像保護装置に関する。
ここでの入力画像には、撮像画像、再生画像その他の画像を含む。なお、この発明は、画像保護装置を搭載した撮像装置としても実現される
One aspect of the present invention relates to an image protection device that realizes a function of selectively protecting an image in a designated image area of an input image.
The input image here includes a captured image, a reproduced image, and other images. Note that the present invention is also realized as an imaging device equipped with an image protection device .

現在、防犯や犯罪証拠の保全を目的として、監視カメラの設置が求められている。例えば、建物、施設、場所への設定が求められている。被写体は、人、動物その他の生物に限られず、不動産や自然物も含まれる。
従来装置の場合、プライバシー保護のため、保護対象とする画像範囲をマスク画像と置換する。マスク画像には、一般に単色パターンが使用される。例えば黒色パターン、灰色パターン、白色パターン、その他の色付きパターンが用いられる。
図1に、従来用いられているパターン例を示す。図1(A)は、全体的に明るい画面1に、黒色パターン3が表示されている状態を示す。また、図1(B)は、全体的に暗い画面5に、白色パターン7が表示されている状態を示す。
特開2004−80669号公報
Currently, surveillance cameras are required to be installed for the purpose of crime prevention and preservation of crime evidence. For example, settings for buildings, facilities, and places are required. The subject is not limited to people, animals and other living things, but also includes real estate and natural objects.
In the case of a conventional apparatus, the image range to be protected is replaced with a mask image for privacy protection. A monochromatic pattern is generally used for the mask image. For example, a black pattern, a gray pattern, a white pattern, and other colored patterns are used.
FIG. 1 shows a pattern example conventionally used. FIG. 1A shows a state in which a black pattern 3 is displayed on a generally bright screen 1. FIG. 1B shows a state in which a white pattern 7 is displayed on an entirely dark screen 5.
JP 2004-80669 A

しかし、かかるマスク画像の表示方法は、周辺画像との明るさや色合いの違いから、観察者に違和感を与えることが多い。また、マスク画像はまとまった範囲を保護するため、保護領域が目立ち易い。
ところで、マスク画像が使用される領域は、本来、見る必要がない又は秘密にすべき領域である。従って、でき得る限り、周囲の画像と同化して目立たない方が好ましい。
However, such a mask image display method often gives the viewer a sense of discomfort due to differences in brightness and hue from the surrounding images. Further, since the mask image protects a collective range, the protection area is easily noticeable.
By the way, the area where the mask image is used is an area which does not need to be seen or should be kept secret. Therefore, as much as possible, it is preferable that the image is not as conspicuous as the surrounding image.

本発明者は、以上の事実認識に基づき、以下の技術手法を提案する。
すなわち、画像保護装置として、
画像信号と、保護領域を指定する保護領域データとが入力され、(a)保護領域内の明るさ及び色あいを保持するマスク画像を、保護領域内の画像信号に応じて生成するマスク画像生成部と、(b)保護領域内の画像をマスク画像に置換する保護処理部とを有するプライバシー保護部と、
プライバシー保護部から出力された画像信号を保存するとともに、保護領域データを保存するデータ記憶部と、
プライバシー保護部に、外部からの画像信号と外部入力又は装置内の設定に基づく保護領域データとを入力させるのか、データ記憶部から再生された画像信号とデータ記憶部から再生された保護領域データとを入力させるのかの切り替えを行う入力選択スイッチとを備えたものを提案する。
なお、この画像保護装置では、マスク画像生成部は、保護領域全体の画像信号の明るさと色合いの平均値として算出したものをマスク画像に使用するのが望ましい。
この場合、マスク画像は単色となる。ただし、マスク画像には、置換前の原画像の明るさと色合いが保存される。
このため、保護領域にマスク画像を配置しても、周囲の画像と整合し、画面全体としての違和感を軽減できる。
The inventor proposes the following technique based on the above fact recognition.
That is, as an image protection device,
An image signal and protection area data for designating a protection area are input, and (a) a mask image generation unit that generates a mask image that retains the brightness and hue in the protection area according to the image signal in the protection area And (b) a privacy protection unit having a protection processing unit that replaces an image in the protection region with a mask image ;
A data storage unit for storing the image signal output from the privacy protection unit and storing the protection area data;
Whether the privacy protection unit inputs an image signal from the outside and protected area data based on external input or setting in the apparatus, or an image signal reproduced from the data storage unit and protected area data reproduced from the data storage unit A switch equipped with an input selection switch for switching whether or not to input is proposed.
In this image protection apparatus, it is preferable that the mask image generation unit uses the mask image that is calculated as the average value of the brightness and hue of the image signal of the entire protection area.
In this case, the mask image is a single color. However, the brightness and hue of the original image before replacement are stored in the mask image.
For this reason, even if the mask image is arranged in the protection area, it can be matched with the surrounding images and the uncomfortable feeling of the entire screen can be reduced.

また、この画像保護装置では、マスク画像生成部は、保護領域内の画像信号から下位のビット情報を削除したものをマスク画像に使用するのが望ましい。この場合、マスク画像は、モザイク状の画像となる。
また、この画像保護装置では、マスク画像生成部は、保護領域内の画像信号から中位のビット情報を削除したものをマスク画像に使用するのが望ましい。この場合も、マスク画像は、モザイク状となる。
また、この画像保護装置では、マスク画像生成部は、保護領域内の画像信号から高位のビット情報を削除したものをマスク画像に使用するのが望ましい。
また、この画像保護装置では、マスク画像生成部は、保護領域内の画像信号をフィルタリング処理し、高域側の成分を除去したものをマスク画像として使用するのが望ましい。この場合、隣接画素間で明るさや色合いを平均化した画像が得られる。
なお、マスク画像生成部は、複数種類の生成方式に対応し、選択された生成方式を用いてマスク画像を生成するのであるのが望ましい。
In this image protection apparatus, it is preferable that the mask image generation unit uses a mask image obtained by deleting lower-order bit information from the image signal in the protection area. In this case, the mask image is a mosaic image.
In this image protection apparatus, it is desirable that the mask image generation unit uses a mask image obtained by deleting the middle bit information from the image signal in the protection area. Also in this case, the mask image has a mosaic shape.
In this image protection apparatus, it is preferable that the mask image generation unit uses a mask image obtained by deleting high-order bit information from the image signal in the protection area.
Further, in this image protection apparatus, it is desirable that the mask image generation unit uses an image signal in the protection area that has been subjected to filtering processing, and the high-frequency component is removed as the mask image. In this case, an image in which the brightness and hue are averaged between adjacent pixels is obtained.
Note that the mask image generation unit preferably corresponds to a plurality of types of generation methods and generates a mask image using the selected generation method.

以上の技術手法の採用により、マスク画像と周囲の画像とが整合し、画面全体の違和感が少ない保護付き画像を生成できる。
また、処理対象とする画像信号を主信号系(外部からの画像信号)と再生系(データ記憶部から再生された画像信号)とで自由に選択できるため、画像に対する保護処理の作業効率を向上できる。
By employing the above-described technique, the mask image and the surrounding image are matched, and a protected image with less discomfort on the entire screen can be generated.
In addition, the image signal to be processed can be freely selected between the main signal system (external image signal) and the playback system (image signal reproduced from the data storage unit), improving the efficiency of image protection processing. it can.

以下、発明に係る技術手法を採用する画像保護装置の実施形態例を説明する。
なお、本明細書で特に図示又は記載されない部分には、当該技術分野の周知又は公知技術を適用する。
また以下に説明する実施形態は、発明の一つの実施形態であって、これらに限定されるものではない。
Embodiments of an image protection apparatus that employs the technical technique according to the invention will be described below.
In addition, the well-known or well-known technique of the said technical field is applied to the part which is not illustrated or described in particular in this specification.
The embodiment described below is one embodiment of the present invention and is not limited thereto.

(A)実施例1
(a)装置の構成
図2に、画像保護装置の1つの構成例を示す。画像保護装置11は、設定状態判定部13と、プライバシー保護部15と、デジタル/アナログ変換部17と(以下、「D/A変換部17」という。)を構成要素に有する。
設定状態判定部13は、ユーザーインターフェースの操作や設定を通じて、画像の保護が要求されているか否かを判定する処理デバイスである。ユーザーインターフェースには、例えばボタン、スイッチ、GUIその他を使用する。また、設定情報の記憶には、半導体記憶装置やハードディスクその他の記録媒体を使用する。
設定状態判定部13は、判定結果を保護機能信号Sswとして出力する。プライバシー保護部15に保護処理の実行を指示する場合、設定状態判定部13は、保護機能信号Sswを“オン”状態に制御する。一方、入力画像をそのまま出力する場合、設定状態判定部13は、保護機能信号Sswを“オフ”状態に制御する。
(A) Example 1
(A) Device Configuration FIG. 2 shows one configuration example of an image protection device. The image protection device 11 includes a setting state determination unit 13, a privacy protection unit 15, a digital / analog conversion unit 17 (hereinafter referred to as “D / A conversion unit 17”) as constituent elements.
The setting state determination unit 13 is a processing device that determines whether image protection is requested through user interface operations and settings. For the user interface, for example, buttons, switches, GUIs and the like are used. For storing the setting information, a semiconductor storage device, a hard disk or other recording medium is used.
The setting state determination unit 13 outputs the determination result as a protection function signal Ssw. When instructing the privacy protection unit 15 to execute the protection process, the setting state determination unit 13 controls the protection function signal Ssw to be in an “on” state. On the other hand, when the input image is output as it is, the setting state determination unit 13 controls the protection function signal Ssw to the “off” state.

プライバシー保護部15は、入力画像のうち指定された画像領域を処理対象とする信号処理デバイスである。ここで、処理対象とする画像領域(以下、「保護領域」という。)は、保護領域データSp により与えられる。保護領域データSp は、外部装置や設定情報を記憶する記憶デバイスを通じて与えられる。
プライバシー保護部15には、輝度信号Vy と色信号Vc のそれぞれ用に信号処理部15A及び15Bが搭載されている。
信号処理部15A及び15Bは、保護領域について、予め定めた保護処理を選択的に加えるデバイスである。なお、信号処理部15A及び15Bは、保護領域以外の画像信号(輝度信号Vy と色信号Vc )には処理を加えない。
ここで、予め定めた保護処理の実行又は停止は、設定状態判定部13から与えられる保護機能信号Sswにより制御される。保護処理は、画像の保護が要求されたときに実行される。
The privacy protection unit 15 is a signal processing device that processes a specified image area in an input image. Here, the image area to be processed (hereinafter referred to as “protected area”) is given by the protected area data Sp. The protected area data Sp is given through an external device or a storage device that stores setting information.
In the privacy protection unit 15, signal processing units 15A and 15B are mounted for the luminance signal Vy and the color signal Vc, respectively.
The signal processing units 15A and 15B are devices that selectively apply a predetermined protection process to the protection area. Note that the signal processing units 15A and 15B do not process the image signals (luminance signal Vy and color signal Vc) other than the protected area.
Here, execution or stop of the predetermined protection process is controlled by a protection function signal Ssw given from the setting state determination unit 13. The protection process is executed when image protection is requested.

信号処理部15A及び15Bには、保護処理部としての機能と、マスク画像生成部としての機能とが搭載されている。
ここで、保護処理部としての処理内容は、保護領域内の画像のマスク画像への置換である。
また、マスク画像生成部としての処理内容は、保護領域内の明るさ及び色あいを保持するマスク画像の生成である。
例えば、マスク画像の生成処理として、保護領域全体の画像信号の明るさと色合いの平均値を算出する処理、保護領域内の画像信号から下位のビット情報を削除する処理、保護領域内の画像信号から中位のビット情報を削除する処理、フィルタリング処理により高域側の成分を除去する処理、その他の処理を適用する。また、マスク生成処理には、これら処理を組み合わせたものを含む。
The signal processing units 15A and 15B are equipped with a function as a protection processing unit and a function as a mask image generation unit.
Here, the processing content as the protection processing unit is the replacement of the image in the protection area with the mask image.
Further, the processing content as the mask image generation unit is generation of a mask image that retains the brightness and hue in the protected area.
For example, as a mask image generation process, a process for calculating the average value of the brightness and hue of the image signal of the entire protected area, a process for deleting lower bit information from the image signal in the protected area, and an image signal in the protected area The process of deleting the middle bit information, the process of removing the high frequency component by the filtering process, and other processes are applied. Further, the mask generation process includes a combination of these processes.

ここで、平均値の算出処理を採用する場合、単色のマスク画像に保護領域の明るさと色合いを反映させることができる。一般に、保護領域の明るさや色合いは、保護領域周辺の画像の明るさや色合いとも整合する。従って、周辺画像との自然な関係を期待できる。
また、下位のビット情報の削除処理を採用する場合、保護領域のモザイク画像を生成できる。モザイク画像は、保護領域内の画像の明るさと色合いを反映している。従って、保護領域周辺の画像の明るさや色合いとも整合する。この処理手法は、保護領域内の画像の雰囲気だけは表現したい場合に好適である。
因みに、削除対象とする下位のビット情報の削除量(削除するビット数)は、自由に選択できる。削除量は、画像保護の目的と表現上許容される雰囲気との関係に応じて適当なものを選択すれば良い。勿論、削除量を増やせばモザイク画の程度が進み、削除量を減らせば原画像に近づく。
Here, when the average value calculation process is employed, the brightness and hue of the protection area can be reflected in the single-color mask image. In general, the brightness and hue of the protection area matches the brightness and hue of the image around the protection area. Therefore, a natural relationship with surrounding images can be expected.
In addition, when adopting a process of deleting lower bit information, a mosaic image of a protected area can be generated. The mosaic image reflects the brightness and color of the image in the protected area. Therefore, it matches the brightness and hue of the image around the protected area. This processing method is suitable for expressing only the atmosphere of the image in the protected area.
Incidentally, the deletion amount (the number of bits to be deleted) of the lower bit information to be deleted can be freely selected. An appropriate deletion amount may be selected according to the relationship between the purpose of image protection and the atmosphere allowed for expression. Of course, if the deletion amount is increased, the degree of the mosaic image is advanced, and if the deletion amount is reduced, the original image is approximated.

また、中位のビット情報を削除する処理を採用する場合、モザイク化の進んだ画像を生成できる。勿論、モザイク画像は、保護領域内の画像の明るさと色合いを反映している。従って、保護領域周辺の画像の明るさや色合いとも整合する。この処理手法も、保護領域内の画像の雰囲気だけは表現したい場合に好適である。
また、削除対象とする中位のビット情報の削除量(削除するビット数)は、自由に選択できる。削除量は、画像保護の目的と表現上許容される雰囲気との関係に応じて適当なものを選択すれば良い。勿論、削除量を増やせばモザイク画の程度が進み、削除量を減らせば原画像に近づく。
In addition, when a process of deleting the middle bit information is employed, an image with advanced mosaicing can be generated. Of course, the mosaic image reflects the brightness and hue of the image in the protected area. Therefore, it matches the brightness and hue of the image around the protected area. This processing method is also suitable when only the atmosphere of the image in the protected area is desired to be expressed.
In addition, the deletion amount (number of bits to be deleted) of the middle bit information to be deleted can be freely selected. An appropriate deletion amount may be selected according to the relationship between the purpose of image protection and the atmosphere allowed for expression. Of course, if the deletion amount is increased, the degree of the mosaic image is advanced, and if the deletion amount is reduced, the original image is approximated.

また、高域側の成分を除去するフィルタリング処理を採用する場合、隣接画素間で明るさや色合いを平均化した画像が得られる。勿論、得られる画像は、保護領域内の画像の明るさと色合いを反映している。従って、保護領域周辺の画像の明るさや色合いとも整合する。この処理手法も、保護領域内の画像の雰囲気だけは表現したい場合に好適である。
また、除去する成分量は、フィルタ係数の変更により自由に変更できる。低域成分が増えるほど、単一の明るさ色合いのマスク画像に近づき、高域成分が増えるほど原画像に近づく。
これらの処理手法の実行により、保護領域の画像は、その明るさと色合いを反映したマスク画像に変換される。
なお、信号処理部5A及び5Bが使用するマスク画像の生成方法は予め定められており、対応する処理デバイスが予め格納されているものとする。
In addition, when a filtering process that removes high frequency components is employed, an image in which the brightness and hue are averaged between adjacent pixels can be obtained. Of course, the obtained image reflects the brightness and hue of the image in the protected area. Therefore, it matches the brightness and hue of the image around the protected area. This processing method is also suitable when only the atmosphere of the image in the protected area is desired to be expressed.
The amount of components to be removed can be freely changed by changing the filter coefficient. As the low-frequency component increases, it approaches a mask image having a single brightness hue, and as the high-frequency component increases, it approaches the original image.
By executing these processing methods, the image in the protected area is converted into a mask image reflecting its brightness and hue.
Note that the mask image generation method used by the signal processing units 5A and 5B is determined in advance, and the corresponding processing device is stored in advance.

D/A変換部17は、プライバシー保護部15から出力されたデジタル信号形式の画像信号をアナログ信号形式に変換するデバイスである。もっとも、保護処理の加えられた画像信号をデジタル信号形式のまま出力する場合には、D/A変換部17を搭載する必要はない。図2は、2種類の信号形式に対応する場合について表している。
なお、不図示であるが、プライバシー保護部15とD/A変換部17には、同期パルスが与えられる。
The D / A conversion unit 17 is a device that converts the digital signal format image signal output from the privacy protection unit 15 into an analog signal format. However, in the case of outputting the image signal subjected to the protection process in the digital signal format, it is not necessary to mount the D / A conversion unit 17. FIG. 2 shows a case corresponding to two types of signal formats.
Although not shown, a synchronization pulse is given to the privacy protection unit 15 and the D / A conversion unit 17.

図3に、保護領域を与える保護領域データSp を与える2点を例示する。図3は、画像保護装置11の出力信号をモニタ上に表示した画面例に対応する。
保護領域データSp は、保護領域21のスタート点23と、その対角座標であるエンド点25とで与えられる。
保護領域の指定には、例えば、図4に示す座標入力装置を使用する。マウス31を通じたポインタの位置情報は、位置検出部33で検出される。位置検出部33で検出されたポインタの位置情報は、モニタの画面上に表示される。
位置検出部33は、水平方向ドットカウンタ33A、垂直ラインカウンタ33B、位置入力部33Cで構成される。
水平方向ドットカウンタ33Aは、マウスのX方向への移動をパルスの計数により検出するカウンタである。垂直ラインカウンタ33Bは、マウスのY方向への移動をパルスの計数により検出するカウンタである。位置入力部33Cは、スイッチ31Aのクリックを検出するデバイスである。
FIG. 3 exemplifies two points for providing protection area data Sp for providing a protection area. FIG. 3 corresponds to a screen example in which the output signal of the image protection device 11 is displayed on the monitor.
The protected area data Sp is given by a start point 23 of the protected area 21 and an end point 25 which is a diagonal coordinate thereof.
For example, a coordinate input device shown in FIG. 4 is used to designate the protection area. Position information of the pointer through the mouse 31 is detected by the position detector 33. The position information of the pointer detected by the position detection unit 33 is displayed on the monitor screen.
The position detection unit 33 includes a horizontal dot counter 33A, a vertical line counter 33B, and a position input unit 33C.
The horizontal dot counter 33A is a counter that detects the movement of the mouse in the X direction by counting pulses. The vertical line counter 33B is a counter that detects the movement of the mouse in the Y direction by counting pulses. The position input unit 33C is a device that detects a click on the switch 31A.

保護領域21の指定は、例えば以下のように行う。まず、操作者が画面上のポインタをスタート点23として用いる位置に移動し、スイッチ31Aをクリックする。スイッチ31Aのクリックは、位置入力部33Cにより検出される。位置入力部33Cは、その時点のX座標とY座標を2つのカウンタを通じて特定する。
次に、操作者は、スイッチ31Aをクリックしたままポインタを対角方向に移動し、エンド点として用いる位置でクリック状態を停止する。スイッチ31Aのクリックを停止した位置は、位置入力部33Cにより検出される。位置入力部33Cは、その時点のX座標とY座標を2つのカウンタを通じて特定する。
これらの操作を通じ、保護領域が指定される。なお、最初にエンド点を指定し、次にスタート点を指定しても良い。また、左下隅の位置と右上隅の位置が入力された場合には、これらの座標値を基に、スタート点とエンド点の座標値を算出すれば良い。
The protection area 21 is designated as follows, for example. First, the operator moves the pointer on the screen to a position where it is used as the start point 23, and clicks the switch 31A. The click of the switch 31A is detected by the position input unit 33C. The position input unit 33C specifies the X and Y coordinates at that time through two counters.
Next, the operator moves the pointer in the diagonal direction while clicking the switch 31A, and stops the click state at the position used as the end point. The position where the click on the switch 31A is stopped is detected by the position input unit 33C. The position input unit 33C specifies the X and Y coordinates at that time through two counters.
Through these operations, a protection area is specified. Note that the end point may be specified first, and then the start point may be specified. Further, when the position of the lower left corner and the position of the upper right corner are inputted, the coordinate values of the start point and the end point may be calculated based on these coordinate values.

(b)処理動作
図5に、画像保護装置1を用いた保護処理を概念的に示す。図5は、全体的に明るい画面41が表示されている場合の表示例である。
まず、撮像カメラで撮像された画像信号が画像保護装置11に入力された場合について説明する。なお、保護領域は既に設定されているものとする。
図5(A)は、保護処理を加えない場合の画面例である。この場合、保護機能信号Sswは“オフ”状態である。
保護機能信号Sswは、設定状態判定部13を通じてプライバシー保護部15に与えられ、プライバシー保護部15の処理動作を規定する。すなわち、プライバシー保護部15は、撮像カメラから入力された輝度信号Vy と色信号Vc を入力時のまま出力する。
(B) Processing Operation FIG. 5 conceptually shows protection processing using the image protection apparatus 1. FIG. 5 shows a display example when a generally bright screen 41 is displayed.
First, a case where an image signal captured by the imaging camera is input to the image protection device 11 will be described. It is assumed that the protection area has already been set.
FIG. 5A shows an example of a screen when no protection process is added. In this case, the protection function signal Ssw is in the “off” state.
The protection function signal Ssw is given to the privacy protection unit 15 through the setting state determination unit 13 and defines the processing operation of the privacy protection unit 15. That is, the privacy protection unit 15 outputs the luminance signal Vy and the color signal Vc input from the imaging camera as they are input.

図5(B)は、保護処理を加える場合の画面例である。この場合、保護機能信号Sswは“オン”状態である。
保護機能信号Sswは、設定状態判定部13を通じてプライバシー保護部15に与えられ、プライバシー保護部15の処理動作を規定する。この場合、プライバシー保護部15は、保護領域データSp で指定された保護領域43に対応する画像信号が入力されると、保護領域全体の輝度信号Vy と色信号Vc の平均値を算出し、この値を保護領域43の全体についてマスク画像信号として出力する。
ここで、輝度信号Vy と色信号Vc の平均値は、保護領域43の明るさと色合いを反映する。従って、図5(B)に示すように、保護領域内の画像を保護しながら、周辺画像との違和感を軽減することが可能である。
なお、保護領域以外の画像部分は、入力時のまま出力される。
FIG. 5B shows an example of a screen when a protection process is added. In this case, the protection function signal Ssw is in the “on” state.
The protection function signal Ssw is given to the privacy protection unit 15 through the setting state determination unit 13 and defines the processing operation of the privacy protection unit 15. In this case, when an image signal corresponding to the protection area 43 specified by the protection area data Sp is input, the privacy protection unit 15 calculates an average value of the luminance signal Vy and the color signal Vc of the entire protection area, The value is output as a mask image signal for the entire protection area 43.
Here, the average value of the luminance signal Vy and the color signal Vc reflects the brightness and hue of the protection area 43. Therefore, as shown in FIG. 5B, it is possible to reduce the sense of discomfort with the surrounding image while protecting the image in the protected area.
Note that image portions other than the protected area are output as they are input.

勿論、全体的に暗い画面45が表示されている場合にも同様の結果が得られる。
図6に、画像保護装置1を用いた保護処理を概念的に示す。図6(A)は保護処理を加えない場合の画面例であり、図6(B)は保護処理を加える場合の画面例である。
図6(B)に示すように、保護領域47は、周辺画像とほぼ同じ明るさ及び色合いで違和感なく表示さえる。
Of course, the same result can be obtained when the dark screen 45 is displayed as a whole.
FIG. 6 conceptually shows protection processing using the image protection apparatus 1. FIG. 6A shows an example of a screen when no protection process is added, and FIG. 6B shows an example of a screen when a protection process is added.
As shown in FIG. 6B, the protection area 47 can be displayed with the same brightness and color as the surrounding image without any sense of incongruity.

(c)効果
以上のように、保護領域の保護に保護領域内の画像の明るさと色合いを反映させることにより、マスク画像を周辺画像に対して目立ち難いようにできる。すなわち、保護処理後の違和感が格段に小さくて済む画像保護装置を実現できる。
(C) Effect As described above, the mask image can be made inconspicuous with respect to the peripheral image by reflecting the brightness and the hue of the image in the protection area in the protection of the protection area. In other words, it is possible to realize an image protection apparatus that can significantly reduce the uncomfortable feeling after the protection process.

(B)実施例2
(a)装置の構成
図7に、画像保護装置の他の構成例を示す。図7には、図2との対応部分に同一符号を付して示すものとする。
画像保護装置51は、設定状態判定部13と、プライバシー保護部53と、D/A変換部17を構成要素に有する。すなわち、プライバシー保護部53以外の構成は、図2の場合と同じである。以下では、プライバシー保護部53について説明する。
プライバシー保護部53は、複数の保護処理に対応し、そのいずれか一つを選択的に使用して保護処理を実行する点で、前述のプライバシー保護部15と異なっている。
このプライバシー保護部53は、保護領域全体について求めた画像信号の明るさと色合いの平均値をマスク画像として用いる処理、保護領域内の画像信号から下位のビット情報を削除する処理、保護領域内の画像信号から中位のビット情報を削除する処理、フィルタリング処理により高域側の成分を除去する処理、その組み合わせ処理に対応するものとする。
(B) Example 2
(A) Device Configuration FIG. 7 shows another configuration example of the image protection device. In FIG. 7, parts corresponding to those in FIG.
The image protection device 51 includes a setting state determination unit 13, a privacy protection unit 53, and a D / A conversion unit 17 as constituent elements. That is, the configuration other than the privacy protection unit 53 is the same as that in FIG. Below, the privacy protection part 53 is demonstrated.
The privacy protection unit 53 is different from the privacy protection unit 15 described above in that it supports a plurality of protection processes and selectively uses any one of them to execute the protection process.
The privacy protection unit 53 uses the average value of the brightness and hue of the image signal obtained for the entire protection area as a mask image, the process of deleting lower bit information from the image signal in the protection area, and the image in the protection area The processing corresponds to processing for deleting middle bit information from a signal, processing for removing a high-frequency component by filtering processing, and combination processing thereof.

プライバシー保護部53には、これら複数の保護処理に対応した複数の処理デバイスが予め格納されているものとする。これらの処理デバイスは、輝度信号Vy と色信号Vc に対応する信号処理部53Aと53Bに対応して設けられる。
プライバシー保護部53には、これら複数の処理デバイスによる処理を、方式選択信号Ssel1に基づいて選択的に切り替える機能が搭載されている。
方式選択信号Ssel1は、外部装置や設定情報を記憶する記憶デバイスを通じて与えられる。
ここで、保護処理を実現する処理方式は、任意に選択された一つの方式でも良い。この選択は、ユーザーインターフェースを通じて行うこともできるし、画像保護装置51内に用意した乱数発生器を通じて行うこともできる。
なお、保護処理は、選択した処理方式を固定的に使用しても良いし、処理方式を何度も切り替えても良い。
また、切替タイミングには、任意のタイミングで切り替える方法(ユーザーインターフェースを通じてタイミングを指定する場合を含む。)、定期的又は周期的に切り替える方法がある。
It is assumed that the privacy protection unit 53 stores a plurality of processing devices corresponding to the plurality of protection processes in advance. These processing devices are provided corresponding to the signal processing units 53A and 53B corresponding to the luminance signal Vy and the color signal Vc.
The privacy protection unit 53 is equipped with a function of selectively switching the processing by the plurality of processing devices based on the method selection signal Ssel1.
The system selection signal Ssel1 is given through an external device or a storage device that stores setting information.
Here, the processing method for realizing the protection processing may be one arbitrarily selected method. This selection can be performed through a user interface or a random number generator prepared in the image protection device 51.
In the protection process, the selected processing method may be used in a fixed manner, or the processing method may be switched over and over.
The switching timing includes a method of switching at an arbitrary timing (including a case where timing is specified through a user interface) and a method of switching periodically or periodically.

また、使用する処理方式の選択方法も、ユーザーインターフェースを通じて選択する方法、ランダムに切り替える方法、予め定められた順番に切り替える方法その他がある。
なお、処理方式をランダムに切り替える場合、方式選択信号Ssel1は、乱数発生器が発生する乱数を通じて与えられる。乱数には疑似乱数を含む。
(b)効果
以上のように、画像の保護処理に使用する処理方式を複数用意することにより、ユーザーの使用目的、画像の絵柄、保護の強度その他に応じて最適な処理方式を選択できる。
これにより、ユーザーにとって使い勝手を一段と向上できる。
In addition, as a method of selecting a processing method to be used, there are a method of selecting through a user interface, a method of switching randomly, a method of switching in a predetermined order, and the like.
When the processing method is switched at random, the method selection signal Ssel1 is given through a random number generated by a random number generator. The random number includes a pseudo random number.
(B) Effect As described above, by preparing a plurality of processing methods used for image protection processing, it is possible to select an optimal processing method according to the user's purpose of use, image design, protection strength, and the like.
As a result, the usability for the user can be further improved.

(C)実施例3
(a)装置の構成
図8に、画像保護装置の他の構成例を示す。図8には、図1との対応部分に同一符号を付して示すものとする。
画像保護装置61は、設定状態判定部13と、プライバシー保護部15と、D/A変換部17と、データ記憶装置63と、入力選択スイッチ65、67、69とで構成される。すなわち、データ記憶装置63と、入力選択スイッチ65、67、69以外の構成は、図1の場合と同じである。以下では、データ記憶装置63と、入力選択スイッチ65、67、69について説明する。
(C) Example 3
(A) Device Configuration FIG. 8 shows another configuration example of the image protection device. In FIG. 8, parts corresponding to those in FIG.
The image protection device 61 includes a setting state determination unit 13, a privacy protection unit 15, a D / A conversion unit 17, a data storage device 63, and input selection switches 65, 67, and 69. That is, the configuration other than the data storage device 63 and the input selection switches 65, 67, and 69 is the same as in the case of FIG. Hereinafter, the data storage device 63 and the input selection switches 65, 67, and 69 will be described.

データ記憶装置63は、プライバシー保護部15から出力された画像信号を記憶媒体に保存する記憶デバイスである。
すなわち、保護領域に保護処理が加えられている画像信号、又は、保護領域に保護処理が加えられていない画像信号が保存される記憶デバイスである。
なお、画像信号の保存は、同期パルスに同期して実行される。また、画像信号と共に保護領域データSp も保存される。また、復号時の検索用に記録日時その他の管理情報も同時に保存される。
The data storage device 63 is a storage device that stores the image signal output from the privacy protection unit 15 in a storage medium.
That is, it is a storage device that stores an image signal that has undergone protection processing in the protected area or an image signal that has not undergone protection processing in the protected area.
Note that the image signal is stored in synchronization with the synchronization pulse. The protected area data Sp is also saved together with the image signal. Also, the recording date and other management information are saved at the same time for retrieval at the time of decoding.

記憶媒体には、例えば磁気テープ、磁気ディスクその他の磁気記録媒体、光学的に情報を読み出す方式の光ディスク、半導体メモリその他の各種メディアが用いられる。
なお、記憶媒体は画像保護装置61の装置本体に対して着脱自在でも良い。勿論、記憶媒体は、内部記憶装置でも良い。また、記憶媒体は、画像保護装置61と外部接続された外部記憶装置に搭載されたものでも良い。
入力選択スイッチ65は、輝度信号Vy の入力切り替え用のスイッチである。ここでは、主信号系の輝度信号Vy と再生系の輝度信号Vy(PB) の切り替えに使用される。
入力選択スイッチ67は、色信号Vc の入力切り替え用のスイッチである。ここでは、主信号系の色信号Vc と再生系の色信号Vc(PB) の切り替えに使用される。
入力選択スイッチ69は、保護領域データSp の入力切り替え用のスイッチである。ここでは、外部入力又は装置内の設定に基づく保護領域データSp と画像信号と共に再生された保護領域データSp(PB)
との切り替えに使用される。
なお、これら入力選択スイッチ65、67及び69の切替は、主信号系と再生系とで入力を切り替える入力切替信号Ssel2により実現される。
As the storage medium, for example, a magnetic tape, a magnetic disk or other magnetic recording medium, an optical disk for optically reading information, a semiconductor memory or other various media is used.
The storage medium may be detachable from the main body of the image protection device 61. Of course, the storage medium may be an internal storage device. Further, the storage medium may be mounted on an external storage device externally connected to the image protection device 61.
The input selection switch 65 is a switch for switching the input of the luminance signal Vy. Here, it is used to switch between the luminance signal Vy of the main signal system and the luminance signal Vy (PB) of the reproduction system.
The input selection switch 67 is a switch for switching the input of the color signal Vc. Here, it is used for switching between the main signal color signal Vc and the reproduction color signal Vc (PB).
The input selection switch 69 is a switch for switching the input of the protection area data Sp. Here, the protection area data Sp (PB) reproduced together with the image data and the protection area data Sp based on the external input or the setting in the apparatus.
Used to switch between.
Note that switching of these input selection switches 65, 67 and 69 is realized by an input switching signal Ssel2 for switching input between the main signal system and the reproduction system.

(b)処理動作
続いて、この実施例の処理動作について説明する。
まず、入力切替信号Ssel2が主信号系を指示している場合について説明する。
この場合は、実施例1と全く同じである。すなわち、保護機能信号Sswに応じ、主信号系から入力される輝度信号Vy と色信号Vc に対する保護処理が選択的に実行される。
この場合、データ記憶装置63には、画像信号と共に保護領域データSp が記憶される。一方、保護領域に保護処理が加えられない場合には、画像信号だけがデータ記憶装置63に記憶される。
(B) Processing Operation Next, the processing operation of this embodiment will be described.
First, the case where the input switching signal Ssel2 indicates the main signal system will be described.
This case is exactly the same as in the first embodiment. That is, protection processing for the luminance signal Vy and the color signal Vc input from the main signal system is selectively executed according to the protection function signal Ssw.
In this case, the data storage device 63 stores the protection area data Sp together with the image signal. On the other hand, when the protection process is not applied to the protection area, only the image signal is stored in the data storage device 63.

次に、入力切替信号Ssel2が再生系を指示している場合について説明する。
この場合は、再生アドレスで特定された位置の再生輝度信号Vy(PB) 、再生色信号Vc(PB) 及び保護領域データSp(PB) がデータ記憶装置63から読み出され、入力選択スイッチ65、67及び69を通じてプライバシー保護部15に入力される。
入力された再生輝度信号Vy(PB) 及び再生色信号Vc(PB) に対する保護処理の内容は、実施例1と同じである。例えば、保護処理の追加を実現できる。勿論、入力された画像信号を入力時のまま出力することもできる。
(c)効果
以上のように、処理対象とする画像信号を主信号系と再生系とで自由に選択できるため、画像に対する保護処理の作業効率を向上できる。特に、保護領域を追記する場合に好適である。
Next, the case where the input switching signal Ssel2 indicates the reproduction system will be described.
In this case, the reproduction luminance signal Vy (PB), the reproduction color signal Vc (PB) and the protection area data Sp (PB) at the position specified by the reproduction address are read from the data storage device 63, and the input selection switch 65, Input to the privacy protection unit 15 through 67 and 69.
The contents of the protection processing for the input reproduction luminance signal Vy (PB) and reproduction color signal Vc (PB) are the same as those in the first embodiment. For example, the addition of protection processing can be realized. Of course, it is also possible to output the input image signal as it is being input.
(C) Effect As described above, since the image signal to be processed can be freely selected between the main signal system and the reproduction system, the work efficiency of the protection process for the image can be improved. This is particularly suitable when a protection area is additionally written.

(D)実施例4
図9に、画像保護装置の他の構成例を示す。図9には、図8との対応部分に同一符号を付して示すものとする。
画像保護装置71は、実施例3の構成に、保護領域の自動追従機能を追加した点を特徴とする。以下では、この実施例に特有な構成である保護領域追従部73について説明する。
保護領域追従部73は、撮像方向の変更(いわゆる、パン/チルト)に追従して、保護領域の位置をずらすための処理デバイスである。
図10に、その追従動作を示す。図10では、撮像中の撮像方向の移動を太い矢印で示す。また、移動前の保護領域81の位置を破線で示し、移動後の保護領域81の位置を実線で示す。なお、保護領域81の移動を細い矢印で示す。
(D) Example 4
FIG. 9 shows another configuration example of the image protection apparatus. In FIG. 9, parts corresponding to those in FIG.
The image protection apparatus 71 is characterized in that an automatic tracking function of a protection area is added to the configuration of the third embodiment. Below, the protection area tracking part 73 which is a structure peculiar to this Example is demonstrated.
The protection area tracking unit 73 is a processing device for shifting the position of the protection area following a change in imaging direction (so-called pan / tilt).
FIG. 10 shows the following operation. In FIG. 10, the movement in the imaging direction during imaging is indicated by a thick arrow. Further, the position of the protection area 81 before movement is indicated by a broken line, and the position of the protection area 81 after movement is indicated by a solid line. The movement of the protection area 81 is indicated by a thin arrow.

2つの矢印を見比べて分かるように、保護領域追従部73は、撮像方向の移動とは反対方向に保護領域81の位置を移動させる。これは、保護対象が撮像方向の移動により画面中央から画面隅に相対移動するためである。
保護領域追従部73は、保護領域データSp と撮像方向の変更情報Sm を入力し、保護領域の位置を変更した保護領域データSp’ を生成する。ここで、変更情報Sm は、撮像時の撮像方向が単位時間に移動した方向と移動量を与える情報である。変更後の保護領域データSp’
は、入力選択スイッチ69の一方の入力端子に与えられる。
(b)効果
以上のように、保護領域の自動追従機能を搭載することにより、保護領域の設定後に撮像方向が変更される場合にも、これに追従して保護領域の位置を移動させることができる。この結果、保護領域を再設定する作業を省略することができる。
As can be seen by comparing the two arrows, the protection area follower 73 moves the position of the protection area 81 in the direction opposite to the movement in the imaging direction. This is because the object to be protected moves relative to the screen corner from the center of the screen by moving in the imaging direction.
The protection area tracking unit 73 receives the protection area data Sp and the imaging direction change information Sm, and generates protection area data Sp ′ in which the position of the protection area is changed. Here, the change information Sm is information that gives the direction and amount of movement in which the imaging direction during imaging has moved in unit time. Protected area data Sp 'after change
Is applied to one input terminal of the input selection switch 69.
(B) Effect As described above, by installing the protection area automatic tracking function, even when the imaging direction is changed after the protection area is set, the position of the protection area can be moved following this. it can. As a result, the work of resetting the protection area can be omitted.

(E)実施例5
図11に、画像保護装置の他の構成例を示す。図11にも、図8との対応部分に同一符号を付して示すものとする。
画像保護装置91は、実施例3の構成に、保護領域の自動設定機能を追加した点を特徴とする。以下では、この実施例に特有な構成である保護領域設定部93について説明する。
保護領域設定部93は、画面内で動きのある領域を保護領域に自動設定する機能を実現する処理デバイスである。保護領域設定部93は、動き検出部93Aと、フレームメモリ93Bと、動き座標抽出部93Cとを構成要素とする。
ここで、動き検出部93Aには、入力選択スイッチ65、67で選択された輝度信号Vy(Vy(PB))と色信号Vc(Vc(PB))が入力される。動き検出部93Aは、これらの信号と、フレームメモリ93Bに格納されている数フレーム分の信号とを比較し、動きのある領域部分を検出する。検出結果は、動き座標抽出部93Cに与えられる。
なお、判断基準に応じて動きのある領域部分として検出される範囲を自由に設定できる。例えば、動きベクトルの閾値を大きくすれば、比較的大きい動きのある領域部分だけを検出することが可能である。
(E) Example 5
FIG. 11 shows another configuration example of the image protection apparatus. Also in FIG. 11, the same reference numerals are given to the portions corresponding to FIG. 8.
The image protection apparatus 91 is characterized in that an automatic protection area setting function is added to the configuration of the third embodiment. Below, the protection area setting part 93 which is a structure peculiar to this Example is demonstrated.
The protected area setting unit 93 is a processing device that realizes a function of automatically setting a moving area in the screen as a protected area. The protection area setting unit 93 includes a motion detection unit 93A, a frame memory 93B, and a motion coordinate extraction unit 93C.
Here, the luminance signal Vy (Vy (PB)) and the color signal Vc (Vc (PB)) selected by the input selection switches 65 and 67 are input to the motion detector 93A. The motion detection unit 93A compares these signals with signals for several frames stored in the frame memory 93B, and detects a region part with motion. The detection result is given to the motion coordinate extraction unit 93C.
Note that it is possible to freely set a range that is detected as a moving region portion according to the determination criterion. For example, if the threshold value of the motion vector is increased, it is possible to detect only an area portion having a relatively large motion.

動き座標抽出部93Cは、検出された領域部分の座標を求め、これを保護領域データSp” とする。動き座標抽出部93Cで生成された保護領域データSp” は、入力選択スイッチ99の一つの入力端子に入力される。
なお、入力選択スイッチ69による入力端子の切替は、主信号系と再生系と自動設定系との3つで入力を切り替える入力切替信号Ssel3により実現される。
図12に、この保護領域設定部93を用いる場合の保護領域の設定例を示す。図12(A)は、動きのある複数の領域部分が保護領域101に設定された状態を示す。また、図12(B)は、被写体の移動に伴い保護領域101が追従するように移動している様子を表している。
(b)効果
以上のように、動きのある領域部分を自動的に保護領域に設定できる機能を搭載することにより、動きのある被写体を保護する際の作業負担を低減することができる。また、被写体の動きに応じて保護領域を移動させることもできる。
The motion coordinate extraction unit 93C obtains the coordinates of the detected region portion and uses this as the protection region data Sp ″. The protection region data Sp ″ generated by the motion coordinate extraction unit 93C is one of the input selection switches 99. Input to the input terminal.
Note that the switching of the input terminal by the input selection switch 69 is realized by an input switching signal Ssel3 that switches the input among the main signal system, the reproduction system, and the automatic setting system.
FIG. 12 shows an example of setting a protection area when this protection area setting unit 93 is used. FIG. 12A shows a state in which a plurality of moving area portions are set as the protection area 101. FIG. 12B shows a state in which the protection area 101 moves so as to follow the movement of the subject.
(B) Effect As described above, by mounting a function that can automatically set a moving area portion as a protection area, it is possible to reduce a work burden when protecting a moving object. Also, the protection area can be moved according to the movement of the subject.

(F)システム例
図13に、以上説明した画像保護装置の応用例を示す。図13は、画像保護装置のセキュリティカメラシステム111への応用例を示す。
セキュリティカメラシステム111は、ネットワーク113に、撮像画像の送信側システム(撮像カメラ115、117、119及び画像処理装置121)と、撮像画像の受信側システム(記憶装置123及びモニタ125)を接続した構成でなる。
このうち、撮像カメラ115は、フロントエンド信号処理部115Aと、画像保護装置11と、送信部115Bを筐体内に格納した装置構成でなる。撮像カメラ115で撮像された画像信号には前述した保護処理が加えられ、ネットワーク113に送信される。
また、撮像カメラ117は、フロントエンド信号処理部117Aと、画像保護装置61と、送信部117Bを筐体内に格納した装置構成でなる。やはり、撮像カメラ117で撮像された画像信号には前述した保護処理が加えられ、ネットワーク113に送信される。
(F) System Example FIG. 13 shows an application example of the image protection apparatus described above. FIG. 13 shows an application example of the image protection apparatus to the security camera system 111.
The security camera system 111 has a configuration in which a captured image transmission side system (imaging cameras 115, 117, and 119 and an image processing device 121) and a captured image reception side system (a storage device 123 and a monitor 125) are connected to a network 113. It becomes.
Among these, the imaging camera 115 has a device configuration in which the front-end signal processing unit 115A, the image protection device 11, and the transmission unit 115B are stored in a casing. The above-described protection processing is added to the image signal captured by the imaging camera 115 and transmitted to the network 113.
The imaging camera 117 has a device configuration in which a front-end signal processing unit 117A, an image protection device 61, and a transmission unit 117B are stored in a housing. Again, the above-described protection processing is applied to the image signal captured by the imaging camera 117 and transmitted to the network 113.

また、撮像カメラ119は、フロントエンド信号処理部119Aと、送信部119Bを筐体内に格納した装置構成でなる。撮像カメラ119は、画像保護装置を搭載していないが、その後段に画像処理装置121が接続されており、その内部に画像保護装置71と91が搭載されている。従って、ネットワーク113には、保護処理の加えられた画像信号が送信される。
なお、これら画像信号のうちあるものは、ネットワーク113を通じて接続された記憶装置123に蓄積され、またあるものはモニタ125に表示される。
かかるシステム構成とすることにより、プライバシーの高い画像をネットワークを通じて伝送する場合にも、プライバシーや秘密を守ることができる。
The imaging camera 119 has a device configuration in which a front end signal processing unit 119A and a transmission unit 119B are stored in a housing. The imaging camera 119 is not equipped with an image protection device, but an image processing device 121 is connected to the subsequent stage, and image protection devices 71 and 91 are installed therein. Accordingly, the image signal subjected to the protection process is transmitted to the network 113.
Some of these image signals are stored in the storage device 123 connected through the network 113, and some are displayed on the monitor 125.
With this system configuration, privacy and secrets can be protected even when an image with high privacy is transmitted through a network.

(F)他の実施形態
(a)前述の実施例では、輝度信号Vy と色信号Vc を画像信号として入力したが、RGB信号を入力する場合、輝度信号と色差信号を入力する場合にも適用できる。
なお、RGB信号を輝度信号Vy と色信号Vc の信号形式に変換した上で、前述した実施例と同様の処理を適用しても良い。勿論、輝度信号Vy と色信号Vc をRGB信号の形式に変更し、又は、輝度信号と色差信号の形式に変更しても良い。
(b)前述の実施例では、保護処理に対応する処理デバイスがプライバシー保護部15にハードウェアとして予め格納されている場合について述べたが、対応する保護処理をソフトウェア的に実現しても良い。この場合、保護処理に使用する処理モジュールがコンピュータ上で実行される。
(F) Other Embodiments (a) In the above-described embodiment, the luminance signal Vy and the color signal Vc are input as image signals. However, the present invention is also applicable to the case where an RGB signal is input and a luminance signal and a color difference signal are input. it can.
Note that the RGB signal may be converted into the signal format of the luminance signal Vy and the color signal Vc, and the same processing as in the above-described embodiment may be applied. Of course, the luminance signal Vy and the color signal Vc may be changed to the RGB signal format, or may be changed to the luminance signal and color difference signal formats.
(B) In the above-described embodiment, the case where the processing device corresponding to the protection process is stored in advance in the privacy protection unit 15 as hardware has been described. However, the corresponding protection process may be realized by software. In this case, the processing module used for the protection process is executed on the computer.

(c)前述の実施例では、保護領域データSp を保護領域の指定に使用したが、非保護領域の指定に使用しても良い。この場合、保護領域データSp で指定された領域を除く領域が保護領域となる。
(d)前述の実施例では、画像保護装置をセキュリティカメラシステムに応用する場合について説明したが、放送システム、通信システムの分野にも適用できる。
(e)前述の実施例では、送信側システムにのみ画像保護装置を搭載する場合について説明したが、受信側システムに画像保護装置を搭載することもできる。
(f)前述の実施例では、動き検出部93Aで検出された動きのある部分領域を保護領域に設定したが、動き検出部93Aで検出された動きベクトルに基づいて保護領域の位置を移動させても良い。このような手法を採用しても、保護対象の移動に追従するように保護領域を移動させることができる。
(C) In the above-described embodiment, the protected area data Sp is used for designating a protected area, but it may be used for designating a non-protected area. In this case, the area excluding the area specified by the protection area data Sp is the protection area.
(D) In the above-described embodiment, the case where the image protection apparatus is applied to the security camera system has been described. However, the present invention can also be applied to the fields of broadcasting systems and communication systems.
(E) In the above-described embodiment, the case where the image protection apparatus is mounted only on the transmission side system has been described. However, the image protection apparatus can also be mounted on the reception side system.
(F) In the above-described embodiment, the partial region with motion detected by the motion detection unit 93A is set as the protection region, but the position of the protection region is moved based on the motion vector detected by the motion detection unit 93A. May be. Even if such a method is employed, the protection region can be moved so as to follow the movement of the protection target.

(g)前述の実施例では、画像保護装置を撮像カメラに搭載する場合について説明したが、画像処理装置であれば、どのような装置にも搭載することができる。
例えば、コンピュータ、印刷装置、ビデオカメラ、デジタルカメラ、ゲーム機器、スキャナ、携帯情報端末(携帯型のコンピュータ、携帯電話機、携帯型ゲーム機、電子書籍等)、時計、画像再生装置(例えば、光ディスク装置、ホームサーバー)、モニタ、テレビジョン受像器、発明に係る機能を搭載した処理ボードや処理カードにも搭載できる。
いずれの画像処理装置も、筐体と、信号処理部と、外部インターフェースとを共通構成とし、商品形態に応じた周辺装置が組み合わされて構成される。
例えば、ビデオカメラやデジタルカメラであれば、前述の構成に加え、カメラユニットや撮像された映像データを記憶媒体に保存するための書き込み回路を有する。
また例えば、携帯電話機その他の通信機能を有する電子機器であれば、前述の構成に加え、送受信回路やアンテナを有する。
(h)前述の実施例には、発明の趣旨の範囲内で様々な変形例が考えられる。また、本明細書の記載に基づいて創作される各種の変形例及び応用例も考えられる。
(G) In the above-described embodiments, the case where the image protection device is mounted on the imaging camera has been described. However, the image protection device can be mounted on any device.
For example, a computer, a printing device, a video camera, a digital camera, a game machine, a scanner, a portable information terminal (a portable computer, a mobile phone, a portable game machine, an electronic book, etc.), a clock, an image reproducing device (for example, an optical disc device) , Home server), monitors, television receivers, processing boards and processing cards equipped with the functions according to the invention.
Each of the image processing apparatuses has a common configuration of a housing, a signal processing unit, and an external interface, and is configured by combining peripheral devices according to the product form.
For example, in the case of a video camera or a digital camera, in addition to the above-described configuration, a camera unit and a writing circuit for storing captured video data in a storage medium are provided.
In addition, for example, a mobile phone or other electronic device having a communication function includes a transmission / reception circuit and an antenna in addition to the above-described structure.
(H) Various modifications can be considered in the above-described embodiments within the scope of the gist of the invention. Various modifications and application examples created based on the description of the present specification are also conceivable.

従来処理による保護処理後の表示例を示す図である。It is a figure which shows the example of a display after the protection process by a conventional process. 画像保護装置例を示す図である。It is a figure which shows the example of an image protection apparatus. 保護領域と保護領域データとの関係を示す図である。It is a figure which shows the relationship between a protection area and protection area data. 座標入力装置の一例を示す図である。It is a figure which shows an example of a coordinate input device. 明るい画面に保護処理を加える場合の処理前後の表示例を示す図である。It is a figure which shows the example of a display before and behind a process in the case of adding a protection process to a bright screen. 暗い画面に保護処理を加える場合の処理前後の表示例を示す図である。It is a figure which shows the example of a display before and after the process in the case of adding a protection process to a dark screen. 複数種類の保護処理機能を搭載する画像保護装置例を示す図である。It is a figure which shows the example of an image protection apparatus carrying multiple types of protection processing functions. 画像信号の入力切替機能を搭載する画像保護装置例を示す図である。It is a figure which shows the example of an image protection apparatus carrying the input switching function of an image signal. 撮像方向の変更に対する自動設定機能を搭載する画像保護装置例を示す図である。It is a figure which shows the example of an image protection apparatus carrying the automatic setting function with respect to the change of an imaging direction. 撮像方向の変更に対する保護領域の自動追従例を示す図である。It is a figure which shows the example of automatic tracking of the protection area with respect to the change of an imaging direction. 保護領域の自動設定機能を搭載する画像保護装置例を示す図である。It is a figure which shows the example of an image protection apparatus carrying the automatic setting function of a protection area. 保護領域の自動設定例を示す図である。It is a figure which shows the example of automatic setting of a protection area. セキュリティカメラシステムへの応用例を示す図である。It is a figure which shows the example of application to a security camera system.

符号の説明Explanation of symbols

11、61、71、91 画像保護装置
13 設定状態判定部
15 プライバシー保護部
15A、15B 信号処理部
73、93 保護領域追従部
111 セキュリティカメラシステム
DESCRIPTION OF SYMBOLS 11, 61, 71, 91 Image protection apparatus 13 Setting state determination part 15 Privacy protection part 15A, 15B Signal processing part 73, 93 Protection area follow-up part 111 Security camera system

Claims (11)

画像信号と、保護領域を指定する保護領域データとが入力され、前記保護領域内の明るさ及び色あいを保持するマスク画像を、前記保護領域内の画像信号に応じて生成するマスク画像生成部と、前記保護領域内の画像を前記マスク画像に置換する保護処理部とを有するプライバシー保護部と、
前記プライバシー保護部から出力された画像信号を保存するとともに、前記保護領域データを保存するデータ記憶部と、
前記プライバシー保護部に、外部からの画像信号と外部入力又は装置内の設定に基づく前記保護領域データとを入力させるのか、前記データ記憶部から再生された画像信号と前記データ記憶部から再生された前記保護領域データとを入力させるのかの切り替えを行う入力選択スイッチと
を備えた
画像保護装置。
A mask image generation unit that receives an image signal and protection area data that designates a protection area, and generates a mask image that retains the brightness and hue in the protection area according to the image signal in the protection area; , a privacy protection unit and a protection processing section for replacing the image of the protected area in the mask image,
A data storage unit that stores the image data output from the privacy protection unit and stores the protection area data;
Whether the privacy protection unit is input with an external image signal and the protected area data based on external input or setting in the apparatus, or is reproduced from the image signal reproduced from the data storage unit and the data storage unit An input selection switch for switching whether to input the protection area data;
An image protection device.
請求項1に記載の画像保護装置において、
前記マスク画像生成部は、前記保護領域全体の画像信号の明るさと色合いの平均値を算出してマスク画像とす
画像保護装置。
The image protection apparatus according to claim 1.
The mask image generation unit, an image protection apparatus calculates an average value of the brightness and hue of the image signal of the entire protected area shall be the mask image.
請求項1に記載の画像保護装置において、
前記マスク画像生成部は、前記保護領域内の画像信号から下位のビット情報を削除してマスク画像を生成す
画像保護装置。
The image protection apparatus according to claim 1.
The mask image generation unit, an image protection apparatus that generates a mask image by removing the lower bit information from the image signal of the protected area.
請求項1に記載の画像保護装置において、
前記マスク画像生成部は、前記保護領域内の画像信号から中位のビット情報を削除してマスク画像を生成す
画像保護装置。
The image protection apparatus according to claim 1.
The mask image generation unit, an image protection apparatus that generates a mask image by removing the bit information medium from the image signal of the protected area.
請求項3又は4に記載の画像保護装置において、
ビット情報の削減量は自由に増減でき
画像保護装置。
The image protection apparatus according to claim 3 or 4,
Reduction of the bit information is freely increased or decreased can Ru image protection apparatus.
請求項1に記載の画像保護装置において、
前記マスク画像生成部は、前記保護領域内の画像信号をフィルタリング処理して、高域側の成分を除去したマスク画像を生成す
画像保護装置。
The image protection apparatus according to claim 1.
The mask image generation unit, and filtering the image signal of the protected area, an image protection apparatus that generates a mask image obtained by removing the components in the high frequency side.
請求項6に記載の画像保護装置において、
除去する周波数成分の量は自由に増減でき
画像保護装置。
The image protection apparatus according to claim 6.
The amount of removed frequency component image protection apparatus that can freely increase or decrease.
請求項1に記載の画像保護装置において、
前記マスク画像生成部は、複数種類の生成方式のうち選択された生成方式を用いてマスク画像を生成す
画像保護装置。
The image protection apparatus according to claim 1.
The mask image generation unit, an image protection apparatus that generates a mask image using the generated method selected among a plurality of types of generation method.
請求項1乃至8のいずれかに記載の画像保護装置において、The image protection apparatus according to any one of claims 1 to 8,
外部入力又は装置内の設定に基づく前記保護領域データと、外部からの画像信号の撮像時の撮像方向が単位時間に移動した方向及び移動量を与える変更情報とが入力され、前記保護領域データによって指定される保護領域の位置を前記変更情報による撮像方向の移動とは反対方向に変更した保護領域データを生成して、生成した前記保護領域データを前記入力選択スイッチに入力させる保護領域追従部The protection area data based on the external input or the setting in the apparatus, and the change information that gives the direction and amount of movement in which the imaging direction at the time of imaging of the image signal from the outside moves in unit time are input, A protection area tracking unit that generates protection area data in which the position of the designated protection area is changed in the direction opposite to the movement in the imaging direction by the change information, and causes the input selection switch to input the generated protection area data
をさらに備え、Further comprising
前記入力選択スイッチは、前記プライバシー保護部に、外部からの画像信号と前記保護領域追従部によって生成された前記保護領域データとを入力させるのか、前記データ記憶部から再生された画像信号と前記データ記憶部から再生された前記保護領域データとを入力させるのかの切り替えを行うThe input selection switch causes the privacy protection unit to input an image signal from the outside and the protection area data generated by the protection area tracking unit, or the image signal and the data reproduced from the data storage unit Switch whether to input the protected area data reproduced from the storage unit
画像保護装置。Image protection device.
請求項1乃至8のいずれかに記載の画像保護装置において、The image protection apparatus according to any one of claims 1 to 8,
動き検出部と、フレームメモリと、動き座標抽出部とを有する保護領域設定部Protected area setting unit having a motion detection unit, a frame memory, and a motion coordinate extraction unit
をさらに備え、Further comprising
前記動き検出部は、前記入力選択スイッチで選択された画像信号が入力され、該画像信号と、前記フレームメモリに格納した数フレーム分の画像信号とを比較して動きのある領域部分を検出し、The motion detection unit receives an image signal selected by the input selection switch, compares the image signal with several frames of image signals stored in the frame memory, and detects an area portion having motion. ,
前記動き座標抽出部は、前記動き検出部によって検出された領域部分の座標を求めることによって前記保護領域データを生成して、生成した前記保護領域データを前記入力選択スイッチに入力させ、The motion coordinate extraction unit generates the protection region data by obtaining the coordinates of the region portion detected by the motion detection unit, and causes the input selection switch to input the generated protection region data.
前記入力選択スイッチは、前記保護領域データの切り替えに関しては、外部入力又は装置内の設定に基づく前記保護領域データと、前記データ記憶部から再生された前記保護領域データと、前記動き座標抽出部によって生成された前記保護領域データとのうちのいずれを前記プライバシー保護部に入力させるのかの切り替えを行うRegarding the switching of the protection area data, the input selection switch includes the protection area data based on an external input or a setting in the apparatus, the protection area data reproduced from the data storage section, and the motion coordinate extraction section. Switch which of the generated protected area data is input to the privacy protection unit
画像保護装置。Image protection device.
撮像画像を画像信号の形式で出力する画像出力部と、An image output unit for outputting a captured image in the form of an image signal;
画像信号と、保護領域を指定する保護領域データとが入力され、前記保護領域内の明るさ及び色あいを保持するマスク画像を、前記保護領域内の画像信号に応じて生成するマスク画像生成部と、前記保護領域内の画像を前記マスク画像に置換する保護処理部とを有するプライバシー保護部と、A mask image generation unit that receives an image signal and protected area data that designates a protected area, and generates a mask image that retains the brightness and hue in the protected area according to the image signal in the protected area; A privacy protection unit having a protection processing unit for replacing an image in the protection area with the mask image;
前記プライバシー保護部から出力された画像信号を保存するとともに、前記保護領域データを保存するデータ記憶部と、A data storage unit that stores the image signal output from the privacy protection unit and stores the protection area data;
前記プライバシー保護部に、前記画像出力部から出力された画像信号と外部入力又は装置内の設定に基づく前記保護領域データとを入力させるのか、前記データ記憶部から再生された画像信号と前記データ記憶部から再生された前記保護領域データとを入力させるのかの切り替えを行う入力選択スイッチとWhether the privacy protection unit inputs the image signal output from the image output unit and the protected area data based on external input or setting in the apparatus, or the image signal reproduced from the data storage unit and the data storage An input selection switch for switching whether to input the protected area data reproduced from the unit;
を備えたWith
保護機能付き撮像装置。Imaging device with protection function.
JP2004199945A 2004-07-07 2004-07-07 Image protection device and imaging device Expired - Fee Related JP4487660B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004199945A JP4487660B2 (en) 2004-07-07 2004-07-07 Image protection device and imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004199945A JP4487660B2 (en) 2004-07-07 2004-07-07 Image protection device and imaging device

Publications (2)

Publication Number Publication Date
JP2006025061A JP2006025061A (en) 2006-01-26
JP4487660B2 true JP4487660B2 (en) 2010-06-23

Family

ID=35798040

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004199945A Expired - Fee Related JP4487660B2 (en) 2004-07-07 2004-07-07 Image protection device and imaging device

Country Status (1)

Country Link
JP (1) JP4487660B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101453087B1 (en) * 2008-01-24 2014-10-27 엘지전자 주식회사 Method for controlling mask color display in monitoring camera
JP5210994B2 (en) 2009-08-18 2013-06-12 東芝アルパイン・オートモティブテクノロジー株式会社 Image display device for vehicle
JP6345345B2 (en) * 2015-05-15 2018-06-20 三菱電機株式会社 Image processing apparatus, image processing method, and image processing program
JP7455545B2 (en) * 2019-09-30 2024-03-26 キヤノン株式会社 Information processing device, information processing method, and program
JP2023088061A (en) * 2021-12-14 2023-06-26 株式会社Jvcケンウッド Three-dimensional model generation apparatus, three-dimensional model generation method, and three-dimensional model generation program

Also Published As

Publication number Publication date
JP2006025061A (en) 2006-01-26

Similar Documents

Publication Publication Date Title
US8311367B2 (en) Image processing device
US20190012949A1 (en) Image signal processing apparatus and control method therefor
TWI410132B (en) Data generation device, data generation method and program product
JP2009171318A (en) Image processor, image processing method, and imaging device
MX2013003373A (en) Flash synchronization using image sensor interface timing signal.
CN102369497A (en) Method and apparatus for creating a zone of interest in a video display
US20090027519A1 (en) Noise reduction device, noise reduction method and video camera
JP2018207497A (en) Image processing apparatus and image processing method, imaging apparatus, program, and storage medium
EP1092316A4 (en) Method and system for combining multiple images into a single higher-quality image
JP4487660B2 (en) Image protection device and imaging device
KR20060049881A (en) Image protection apparatus, imaging apparatus, and program
JP2009094751A (en) Noise suppressing device, noise suppression method, noise suppression program, and imaging apparatus
EP1288864A2 (en) Image processing apparatus, image processing method, and image processing program
US9661217B2 (en) Image capturing apparatus and control method therefor
JP2016039409A (en) Image processing device, its control method, program, and storage medium
JP2006229690A (en) Image display device, image display method, and program
US20150279119A1 (en) Image processing device, image processing method, and program
JP2009038627A (en) Imaging apparatus
JP4936816B2 (en) Imaging apparatus and simultaneous display control method
JP2004193970A (en) Picture data processor
JP5448799B2 (en) Display control apparatus and display control method
US11310442B2 (en) Display control apparatus for displaying image with/without a frame and control method thereof
JP2000115694A (en) Image data recording method and device thereof, image data reproducing method and device thereof information recording medium and computer-readable recording medium
JP4603804B2 (en) Video camera and control method thereof
JPS63144683A (en) Image processor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070522

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20081222

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20081225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091208

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100309

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100322

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130409

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130409

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees