JP2001024934A - Monitoring system - Google Patents

Monitoring system

Info

Publication number
JP2001024934A
JP2001024934A JP11196248A JP19624899A JP2001024934A JP 2001024934 A JP2001024934 A JP 2001024934A JP 11196248 A JP11196248 A JP 11196248A JP 19624899 A JP19624899 A JP 19624899A JP 2001024934 A JP2001024934 A JP 2001024934A
Authority
JP
Japan
Prior art keywords
shake
surveillance camera
shake correction
camera
vibration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11196248A
Other languages
Japanese (ja)
Other versions
JP4162333B2 (en
Inventor
Kazuyuki Kinoshita
和行 木下
Yasuyuki Ito
康行 伊藤
Yasuyuki Miyazaki
靖之 宮崎
Masami Yoshino
雅美 芳野
Yuji Takizawa
祐治 滝沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Telecommunication System Engineering Corp
Original Assignee
Toshiba Corp
Toshiba Telecommunication System Engineering Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Telecommunication System Engineering Corp filed Critical Toshiba Corp
Priority to JP19624899A priority Critical patent/JP4162333B2/en
Publication of JP2001024934A publication Critical patent/JP2001024934A/en
Application granted granted Critical
Publication of JP4162333B2 publication Critical patent/JP4162333B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To efficiently collect effective image information immune to monitoring by enabling a monitor camera to perform optimal oscillation correction corresponding to the degree and characteristics of oscillation in the main body of monitor camera. SOLUTION: A control part 80 discriminates the mode of the main body of a monitor camera 10 on the basis of the detection output of a vibration sensor 40 and instructs a correcting mode to an oscillation correcting part 111 built in an ITV camera so as to optimize the oscillation correction of the oscillation correcting part 111. At the same time, on the basis of lightness around the monitor camera 10 detected by a lightness sensor 50, the image pickup sensitivity of the ITV camera 11 is controlled and the oscillation correction due to the oscillation correcting part 111 built in the ITV camera 11 is optimized.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、監視カメラによ
り撮像した撮像画像に基づき該監視カメラ周辺の監視を
行う監視システムに関し、詳しくは、監視カメラによる
撮像画像のゆれ補正を適正に行うことで有効な画像情報
を収集することができるようにした監視システムに関す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a surveillance system for monitoring the periphery of a surveillance camera based on an image taken by the surveillance camera. The present invention relates to a monitoring system capable of collecting various image information.

【0002】[0002]

【従来の技術】一般に、道路や鉄道、河川等において
は、監視必要個所にITVカメラ等の監視カメラを設置
し、該監視カメラで撮像した画像を収集することにより
該道路や鉄道、河川等の状態を監視することが行われて
いる。
2. Description of the Related Art Generally, on roads, railways, rivers, and the like, a monitoring camera such as an ITV camera is installed at a place where monitoring is required, and images taken by the monitoring camera are collected to obtain information on the road, railway, river, or the like. Monitoring the status has been done.

【0003】この監視カメラの設置に際しては、従来、 1)専用ポールを立てて、この専用のポールに監視カメ
ラを取り付ける 2)照明灯ポール等の既存のポールを利用して監視カメ
ラを取り付ける等が行われている。
Conventionally, when installing this surveillance camera, 1) erecting a dedicated pole and attaching the surveillance camera to this dedicated pole 2) attaching the surveillance camera using an existing pole such as a lighting pole, etc. Is being done.

【0004】しかし、専用ポールや照明灯ポール等に監
視カメラを取り付ける場合、風や車両の通行等によりこ
のポール等にゆれが発生すると、このポール等のゆれに
より監視カメラ本体がゆれ、これにより監視カメラの撮
像画像にゆれが生じ、これが監視の妨げになるという問
題があった。
However, when a surveillance camera is mounted on a dedicated pole, a lighting pole, or the like, if the pole or the like shakes due to wind, traffic of a vehicle, or the like, the surveillance camera body shakes due to the swing of the pole or the like, thereby monitoring. There is a problem in that the captured image of the camera is distorted, which hinders monitoring.

【0005】この監視カメラの撮像画像のゆれを補正す
る従来の手法としては、従来、監視カメラ本体に内蔵さ
れた画像処理によるゆれ補正手段が知られているが、こ
の従来のゆれ補正手段によってはポール等に発生したゆ
れの程度、その特性に応じた最適なゆれ補正を行うこと
はできず、その結果、監視に耐えられる有効な画像情報
を効率よく収集できないという問題があった。
As a conventional method for correcting the shake of the image captured by the surveillance camera, a shake correction means based on image processing built in the monitoring camera body is conventionally known. However, depending on the conventional shake correction means, Optimal shaking correction cannot be performed according to the degree of shaking that has occurred in the poles and the like, and as a result, there has been a problem that effective image information that can withstand monitoring cannot be efficiently collected.

【0006】[0006]

【発明が解決しようとする課題】上述の如く、従来のこ
の種の監視カメラを用いた監視システムにおいては、監
視カメラを取り付けるポール等に発生したゆれによる監
視カメラ本体のゆれの程度、その特性に応じた最適なゆ
れ補正を監視カメラで行うことはできず、その結果、監
視に耐えられる有効な画像情報を効率よく収集できない
という問題があった。
As described above, in a conventional surveillance system using this type of surveillance camera, the degree of the shake of the surveillance camera main body due to the shake generated on a pole or the like on which the surveillance camera is mounted, and the characteristics thereof are limited. The surveillance camera cannot perform the optimum and appropriate shake correction, and as a result, there is a problem that effective image information that can withstand the surveillance cannot be efficiently collected.

【0007】そこで、この発明は、監視カメラ本体のゆ
れの程度、その特性に応じた最適なゆれ補正を監視カメ
ラにおいて行うことができるようにすることで監視に耐
えられる有効な画像情報を効率よく収集することができ
るようにした監視システムを提供することを目的とす
る。
[0007] Therefore, the present invention enables effective surveillance camera to carry out effective image information that can withstand surveillance by enabling the surveillance camera to perform optimal shake correction according to the degree of shake of the surveillance camera body and its characteristics. An object of the present invention is to provide a monitoring system capable of collecting information.

【0008】[0008]

【課題を解決するための手段】上記目的を達成するた
め、請求項1記載の発明は、監視カメラにより撮像され
た撮像画像に基づき該監視カメラ周辺の監視を行う監視
システムにおいて、監視カメラ本体に内蔵され、該監視
カメラによる撮像画像のゆれ補正を行うゆれ補正手段
と、前記監視カメラ本体のゆれを検出する振動検出手段
と、前記振動検出手段により検出された前記監視カメラ
本体のゆれ成分を解析するゆれ成分解析手段と、前記ゆ
れ成分解析手段の解析結果に応じて前記監視カメラのゆ
れ補正手段に対してゆれ補正モードを指示する指示手段
とを具備することを特徴とする。
According to an aspect of the present invention, there is provided a surveillance system for monitoring the periphery of a surveillance camera based on an image taken by the surveillance camera. Built-in shake correction means for correcting shake of an image captured by the surveillance camera, vibration detection means for detecting shake of the surveillance camera body, and analyzing shake components of the surveillance camera body detected by the vibration detection means A vibration component analyzing means, and an instruction means for instructing the vibration correcting means of the surveillance camera in a vibration correction mode in accordance with an analysis result of the vibration component analyzing means.

【0009】また、請求項2記載の発明は、請求項1記
載の発明において、前記ゆれ補正手段は、前記監視カメ
ラ本体の1次の振動に適した第1のゆれ補正モードと2
次の振動に適した第2のゆれ補正モードとを切替可能に
有しており、前記ゆれ成分解析手段は、前記振動センサ
の検出出力に基づき前記監視カメラ本体のゆれの1次の
振動が優勢か2次の振動が優勢かを判別し、前記指示手
段は、前記ゆれ成分解析手段により1次の振動が優勢で
あると判別された場合は、前記ゆれ補正手段に前記第1
のゆれ補正モードに切り替えることを指示し、2次の振
動が優勢であると判別された場合は、前記ゆれ補正手段
に前記第2のゆれ補正モードに切り替えることを指示す
ることを特徴とする。
According to a second aspect of the present invention, in the first aspect of the present invention, the shake correcting means includes a first shake correction mode suitable for a primary vibration of the monitoring camera body.
A second shake correction mode suitable for the next vibration is switchably provided, and the shake component analyzing means is configured so that the primary vibration of the shake of the surveillance camera body is dominant based on the detection output of the vibration sensor. Or if the secondary vibration is dominant, and if the shake component analyzing means determines that the primary vibration is dominant, the instructing means sends the first shake to the shake correction means.
In this case, it is instructed to switch to the shake correction mode, and when it is determined that the secondary vibration is dominant, the shake correction means is instructed to switch to the second shake correction mode.

【0010】また、請求項3記載の発明は、請求項1記
載の発明において、前記監視カメラの周囲の明るさを検
出する明るさ検出手段と、前記明るさ検出手段により検
出された前記監視カメラの周囲の明るさが所定の基準値
以下と判定された場合は前記監視カメラに対して感度を
上げる指示を行う感度指示手段とを更に具備することを
特徴とする。
According to a third aspect of the present invention, in the first aspect of the invention, a brightness detecting means for detecting brightness around the surveillance camera, and the surveillance camera detected by the brightness detection means And a sensitivity instructing unit for instructing the surveillance camera to increase the sensitivity when it is determined that the surrounding brightness is equal to or less than a predetermined reference value.

【0011】また、請求項4記載の発明は、請求項1記
載の発明において、前記監視カメラに対してズーム指示
があるかを検出するズーム指示検出手段と、前記ズーム
指示検出手段により前記監視カメラに対してズーム指示
がある場合は、前記ゆれ補正手段によるゆれ補正を禁止
する手段とを更に具備することを特徴とする。
According to a fourth aspect of the present invention, in the first aspect of the invention, a zoom instruction detecting means for detecting whether a zoom instruction is given to the surveillance camera, and the surveillance camera is provided by the zoom instruction detection means. Means for prohibiting the shake correction by the shake correction means when there is a zoom instruction for.

【0012】また、請求項5記載の発明は、請求項1記
載の発明において、前記監視カメラに対して旋回指示が
あるかを検出する旋回指示検出手段と、前記旋回指示検
出手段により前記監視カメラに対して旋回指示がある場
合は、前記ゆれ補正手段によるゆれ補正を禁止する手段
とを更に具備することを特徴とする。
According to a fifth aspect of the present invention, in the first aspect of the present invention, the surveillance camera is provided by the turning instruction detecting means for detecting whether there is a turning instruction to the surveillance camera, and the turning instruction detecting means. And a means for prohibiting the shake correction by the shake correction means when there is a turn instruction with respect to.

【0013】また、請求項6記載の発明は、監視カメラ
により撮像された撮像画像に基づき該監視カメラ周辺の
監視を行う監視システムにおいて、監視カメラ本体に内
蔵され、該監視カメラによる撮像画像のゆれ補正を行う
ゆれ補正手段と、監視カメラ本体に内蔵され、該監視カ
メラによる撮像画像のゆれ量を検出するゆれ量検出手段
と、前記ゆれ量検出手段により検出された前記監視カメ
ラによる撮像画像のゆれ量が前記ゆれ補正手段により補
正可能範囲かを判別する判別手段と、前記判別手段によ
り前記ゆれ量検出手段により検出された前記監視カメラ
による撮像画像のゆれ量が前記ゆれ補正手段により補正
可能範囲であると判断された場合は、前記ゆれ補正手段
に対してゆれ補正の指示を行い、前記ゆれ量検出手段に
より検出された前記監視カメラによる撮像画像のゆれ量
が前記ゆれ補正手段により補正可能範囲外である場合
は、前記ゆれ補正手段によるゆれ補正を禁止するゆれ補
正制御手段とを具備することを特徴とする。
According to a sixth aspect of the present invention, there is provided a surveillance system for monitoring the periphery of a surveillance camera based on an image photographed by the surveillance camera. A shake correction unit for performing a correction, a shake amount detection unit built in the monitoring camera main body and detecting a shake amount of the captured image by the monitoring camera, and a shake of the captured image by the surveillance camera detected by the shake amount detection unit. Determining means for determining whether the amount is within a range that can be corrected by the shake correcting means; and determining the amount of shake of the image captured by the surveillance camera detected by the shake amount detecting means by the determining means. If it is determined that there is, a command for the shake correction is given to the shake correction means, and the detection before the movement is detected by the shake amount detection means is performed. If shake amount of images taken by surveillance cameras are correctable range by the shake correction means is characterized by comprising a swing correction control means for inhibiting shake correction by the shake correction means.

【0014】また、請求項7記載の発明は、請求項6記
載の発明において、前記ゆれ補正制御手段は、前記ゆれ
量検出手段により検出された前記監視カメラによる撮像
画像のゆれ量が前記ゆれ補正手段により補正可能範囲外
である場合、前記監視カメラによる撮像画像のゆれ量を
小さくすべく、前記監視カメラに対してズーム位置の変
更を指示するズーム位置変更指示手段を具備することを
特徴とする。
According to a seventh aspect of the present invention, in the sixth aspect of the present invention, the shake correction control means corrects the shake amount of the image captured by the surveillance camera detected by the shake amount detection means. A zoom position change instructing unit for instructing the surveillance camera to change a zoom position in order to reduce a shake amount of an image captured by the surveillance camera when the correction value is out of a correction range. .

【0015】また、請求項8記載の発明は、請求項6記
載の発明において、前記ゆれ補正制御手段は、前記ゆれ
量検出手段により検出された前記監視カメラによる撮像
画像のゆれ量が前記ゆれ補正手段により補正可能範囲外
である場合、前記監視カメラによる撮像画像のゆれ量を
小さくすべく、前記監視カメラのゆれ補正手段に対して
ゆれ補正の対象となる画面サイズの変更を指示する画面
サイズ変更指示手段を具備することを特徴とする。
According to an eighth aspect of the present invention, in the invention according to the sixth aspect, the shake correction control means corrects the shake amount of the image captured by the surveillance camera detected by the shake amount detection means. A screen size change instruction for instructing a shake correction unit of the surveillance camera to change a screen size to be shake-corrected in order to reduce a shake amount of an image captured by the surveillance camera when the correction value is out of a range that can be corrected by the means. It is characterized by comprising an instruction means.

【0016】また、請求項9記載の発明は、請求項6記
載の発明において、前記ゆれ補正制御手段は、前記ゆれ
量検出手段により検出された前記監視カメラによる撮像
画像のゆれ量が前記ゆれ補正手段により補正可能範囲外
である場合、前記監視カメラによる撮像画像のゆれ量を
小さくすべく、前記監視カメラのゆれ補正手段に対して
ゆれ補正パラメータの変更を指示するゆれ補正パラメー
タ変更指示手段を具備することを特徴とする。
According to a ninth aspect of the present invention, in the sixth aspect of the present invention, the shake correction control means includes means for correcting the shake amount of the image captured by the surveillance camera detected by the shake amount detection means. Means for instructing the shake correction means of the surveillance camera to change the shake correction parameter in order to reduce the amount of shake of the captured image by the surveillance camera when it is out of the range that can be corrected by the means. It is characterized by doing.

【0017】また、請求項10記載の発明は、請求項6
記載の発明において、前記監視カメラ本体のゆれを検出
する振動検出手段と、前記振動検出手段により検出され
た前記監視カメラ本体のゆれ成分を解析するゆれ成分解
析手段とを更に具備し、前記ゆれ補正制御手段は、前記
ゆれ量検出手段により検出された前記監視カメラによる
撮像画像のゆれ量が前記ゆれ補正手段により補正可能範
囲外である場合、前記監視カメラによる撮像画像のゆれ
量を小さくすべく、前記ゆれ成分解析手段の解析結果に
応じて前記監視カメラのゆれ補正手段に対してゆれ補正
モードを指示する指示手段を具備することを特徴とす
る。
The invention according to claim 10 is the invention according to claim 6.
The invention described in the above, further comprising: a vibration detecting means for detecting a shake of the surveillance camera body; and a shake component analyzing means for analyzing a shake component of the surveillance camera body detected by the vibration detection means. The control means, when the shake amount of the image captured by the surveillance camera detected by the shake amount detection means is outside the range that can be corrected by the shake correction means, to reduce the shake amount of the image captured by the monitoring camera, The image processing apparatus further includes an instructing unit that instructs the shake correcting unit of the surveillance camera to indicate a shake correction mode in accordance with an analysis result of the shake component analyzing unit.

【0018】また、請求項11記載の発明は、請求項1
0記載の発明において、前記ゆれ補正手段は、前記監視
カメラ本体の1次の振動に適した第1のゆれ補正モード
と2次の振動に適した第2のゆれ補正モードとを切替可
能に有しており、前記ゆれ成分解析手段は、前記振動セ
ンサの検出出力に基づき前記監視カメラ本体のゆれの1
次の振動が優勢か2次の振動が優勢かを判別し、前記指
示手段は、前記ゆれ成分解析手段により1次の振動が優
勢であると判別された場合は、前記ゆれ補正手段に前記
第1のゆれ補正モードに切り替えることを指示し、2次
の振動が優勢であると判別された場合は、前記ゆれ補正
手段に前記第2のゆれ補正モードに切り替えることを指
示することを特徴とする。
The invention according to claim 11 is the same as the claim 1.
0, the shake correcting means is capable of switching between a first shake correction mode suitable for primary vibration of the surveillance camera body and a second shake correction mode suitable for secondary vibration. The shaking component analysis means is configured to detect the shaking of the surveillance camera body based on the detection output of the vibration sensor.
The determination means determines whether the next vibration is dominant or the secondary vibration is dominant. If the shake component analysis means determines that the primary vibration is dominant, the indicating means determines whether the shake correction means has the first vibration. The first vibration correction mode is instructed to be switched, and when it is determined that the secondary vibration is dominant, the second vibration correction unit is instructed to switch to the second vibration correction mode. .

【0019】また、請求項12記載の発明は、請求項6
記載の発明において、前記監視カメラの周囲の明るさを
検出する明るさ検出手段と、前記明るさ検出手段により
検出された前記監視カメラの周囲の明るさが所定の基準
値以下と判定された場合は前記監視カメラに対して感度
を上げる指示を行う感度指示手段とを更に具備すること
を特徴とする。
The invention according to claim 12 is the invention according to claim 6.
In the invention described in the above, when the brightness around the surveillance camera detected by the brightness detection means is detected to be equal to or less than a predetermined reference value, the brightness detection means for detecting the brightness around the surveillance camera Is further provided with sensitivity instructing means for instructing the monitoring camera to increase sensitivity.

【0020】また、請求項13記載の発明は、請求項6
記載の発明において、前記監視カメラに対してズーム指
示があるかを検出するズーム指示検出手段と、前記ズー
ム指示検出手段により前記監視カメラに対してズーム指
示がある場合は、前記ゆれ補正手段によるゆれ補正を禁
止する手段とを更に具備することを特徴とする。
[0020] Further, the invention according to claim 13 is based on claim 6.
In the invention described in the claims, a zoom instruction detecting means for detecting whether there is a zoom instruction to the surveillance camera, and a shake by the shake correction means when there is a zoom instruction to the surveillance camera by the zoom instruction detection means. Means for prohibiting correction.

【0021】また、請求項14記載の発明は、請求項6
記載の発明において、前記監視カメラに対して旋回指示
があるかを検出する旋回指示検出手段と、前記旋回指示
検出手段により前記監視カメラに対して旋回指示がある
場合は、前記ゆれ補正手段によるゆれ補正を禁止する手
段とを更に具備することを特徴とする。
The invention according to claim 14 is the invention according to claim 6
In the invention described in the above, a turning instruction detecting means for detecting whether there is a turning instruction to the surveillance camera, and when there is a turning instruction to the surveillance camera by the turning instruction detecting means, a shake by the shake correcting means. Means for prohibiting correction.

【0022】[0022]

【発明の実施の形態】以下、この発明に係わる監視シス
テムの実施の形態を添付図面を参照して詳細に説明す
る。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of a monitoring system according to the present invention will be described in detail with reference to the accompanying drawings.

【0023】図1は、この発明に係わる監視システムで
採用される監視カメラを示す図である。
FIG. 1 is a diagram showing a surveillance camera employed in a surveillance system according to the present invention.

【0024】図1において、監視カメラ装置10は、I
TVカメラ(以下、単にカメラという)11、このカメ
ラに取り付けられたレンズ12、カメラ11およびレン
ズ12を収容するカメラケース13、旋回台40を具備
して構成される。この監視カメラ装置10は、カメラ取
付ポール20に取り付けられたカメラ取付台30上に取
り付けられる。
In FIG. 1, the monitoring camera device 10
The camera includes a TV camera (hereinafter simply referred to as a camera) 11, a lens 12 attached to the camera, a camera case 13 for housing the camera 11, the lens 12, and a swivel 40. The monitoring camera device 10 is mounted on a camera mount 30 mounted on a camera mounting pole 20.

【0025】上記構成において、この監視カメラ装置1
0は、レンズ12を介して撮像画像をカメラ11に取り
込み、所望の撮像画像を得ることができるように構成さ
れており、また、旋回台40による旋回によりこの監視
カメラ装置10の周囲の画像をカメラ11により撮像す
ることができ、さらに、レンズ12の制御により、ズー
ム制御も行うことができるように構成されている。
In the above configuration, this monitoring camera device 1
Reference numeral 0 denotes a configuration in which a captured image can be captured by the camera 11 via the lens 12 and a desired captured image can be obtained. An image can be taken by the camera 11, and further, zoom control can be performed by controlling the lens 12.

【0026】また、カメラ11には、取り込んだ撮像画
像の画像処理により、 1)取り込んだ撮像画像のゆれを補正する 2)取り込んだ撮像画像のゆれ量を検出する ゆれ補正手段およびゆれ量検出手段が内蔵されている。
Further, the camera 11 performs image processing of the captured image which has been captured, 1) corrects the fluctuation of the captured image, and 2) detects the amount of fluctuation of the captured image. Is built-in.

【0027】すなわち、カメラ11内に内蔵されるゆれ
補正手段およびゆれ量検出手段は、周知のぶれ補正機能
を利用することにより構成されるもので、このぶれ補正
機能においては、カメラ11に取り込んだ撮像画像の所
定の領域を所定の周期で切り出し、この切り出した撮像
画像を比較することにより取り込んだ撮像画像のゆれ量
(ぶれ量)を検出し、この検出したゆれ量に基づき取り
込んだ撮像画像を画像処理により補正することで、取り
込んだ撮像画像から画像のゆれを補正するように構成さ
れている。
That is, the shake correcting means and the shake amount detecting means incorporated in the camera 11 are constituted by utilizing a well-known shake correcting function. A predetermined area of the captured image is cut out at a predetermined cycle, the shake amount (blur amount) of the captured image captured is detected by comparing the cut-out captured images, and the captured image captured based on the detected shake amount is determined. The image processing is configured to correct the image shake from the captured image by correcting the image by image processing.

【0028】ここで、取り込んだ撮像画像のゆれ量は、
上記画像のゆれを補正するために検出されたゆれ量から
求めることができる。
Here, the fluctuation amount of the captured image is
It can be obtained from the amount of shake detected to correct the shake of the image.

【0029】また、上記カメラ11による撮像画像のゆ
れの補正は、レンズのズーム位置、取り込んだ撮像画像
の切り出し範囲、レンズ13の焦点距離等に依存する。
The correction of the shake of the captured image by the camera 11 depends on the zoom position of the lens, the cut-out range of the captured image, the focal length of the lens 13, and the like.

【0030】そこで、この実施の形態においては、カメ
ラ11により検出されたゆれ量に応じて上記レンズのズ
ーム位置および撮像画像の切り出し範囲をそれぞれ指示
できるとともに、上記レンズ13の焦点距離等の他のパ
ラメータをゆれ補正パラメータとして指示できるように
構成されている。
Therefore, in this embodiment, the zoom position of the lens and the cut-out range of the picked-up image can be respectively designated according to the amount of shake detected by the camera 11, and other parameters such as the focal length of the lens 13 can be specified. The configuration is such that the parameter can be designated as a shake correction parameter.

【0031】また、この実施の形態において、監視カメ
ラ装置10を取り付けるポール20に、このポール20
の振動を検出する振動センサ50、監視カメラ装置10
の周辺の明るさを検出する明るさセンサ60が設けられ
ている。
In this embodiment, the pole 20 to which the surveillance camera device 10 is attached is
Sensor 50 for detecting vibration of the camera, monitoring camera device 10
Is provided with a brightness sensor 60 for detecting the brightness of the surrounding area.

【0032】ここで、振動センサ50により検出される
ポール20の振動は、この検出したポールの振動に基づ
き監視カメラ装置10本体の振動モードを判別して、例
えば、カメラ11に取り込んだ撮像画像のカメラ11に
よる切り出し周期等のゆれ補正モードを変更すること
で、カメラ11に内蔵されるゆれ補正手段によるゆれ補
正を最適化するために用いられる。
Here, the vibration of the pole 20 detected by the vibration sensor 50 is determined by determining the vibration mode of the main body of the monitoring camera device 10 based on the detected vibration of the pole. By changing the shake correction mode such as the cutout cycle of the camera 11, it is used to optimize the shake correction by the shake correction means built in the camera 11.

【0033】また、明るさセンサ60により検出された
監視カメラ装置10の周辺の明るさは、カメラ11に内
蔵されるゆれ補正手段によるゆれ補正を最適化するため
に、カメラ11の撮像感度を調整するために用いられ
る。
The brightness around the monitoring camera device 10 detected by the brightness sensor 60 is adjusted by adjusting the imaging sensitivity of the camera 11 in order to optimize the shake correction by the shake correction means built in the camera 11. Used to

【0034】なお、振動センサ50および明るさセンサ
60は、ポール20に取り付けたが、監視カメラ10本
体に取り付けるように構成してもよい。
Although the vibration sensor 50 and the brightness sensor 60 are mounted on the pole 20, the vibration sensor 50 and the brightness sensor 60 may be mounted on the monitoring camera 10 body.

【0035】図2は、図1に示した監視システムにおけ
るゆれ補正制御を示すブロック図である。
FIG. 2 is a block diagram showing the shake correction control in the monitoring system shown in FIG.

【0036】図2において、監視カメラ装置10のカメ
ラ11には、上述したように、取り込んだ撮像画像のゆ
れを補正するゆれ補正手段であるゆれ補正部111およ
び取り込んだ撮像画像のゆれ量を検出するゆれ量検出手
段であるゆれ量検出部112が設けられている。
In FIG. 2, the camera 11 of the surveillance camera device 10, as described above, detects a shake correction unit 111, which is a shake correction means for correcting the shake of the captured image, and detects the amount of shake of the captured image. A fluctuation amount detection unit 112, which is a fluctuation amount detection means, is provided.

【0037】また、監視カメラ装置10のレンズ12に
は、このレンズ12の制御によりズーム位置を制御する
ズーム位置制御部121が設けられている。
The lens 12 of the monitoring camera device 10 is provided with a zoom position control section 121 for controlling a zoom position by controlling the lens 12.

【0038】また、監視カメラ装置10の旋回台40に
は、この旋回台40の旋回位置を制御する旋回制御部4
01が設けられている。
The turntable 40 of the monitoring camera device 10 has a turn control unit 4 for controlling the turn position of the turntable 40.
01 is provided.

【0039】制御部80は、監視カメラ装置10のカメ
ラ11のゆれ量検出部112の検出出力、振動センサ5
0の検出出力、明るさセンサ60の検出出力、この監視
カメラ装置10に遠隔して配置され、この監視カメラ装
置10を遠隔操作する操作部70からの操作信号を入力
し、監視カメラ装置10のカメラ11のゆれ補正部11
1に対してゆれ補正機能をON、OFFする制御信号お
よび画面サイズ変更指示、ゆれ補正パラメータ変更指
示、ゆれ補正モード指示等の指示を行うとともに、レン
ズ10のズーム位置制御部121にブーム位置変更指
示、旋回台40の旋回制御部401に対して旋回制御指
示を行う。
The control unit 80 is provided with a detection output of the shake amount detection unit 112 of the camera 11 of the monitoring camera device 10 and the vibration sensor 5
A detection output of 0, a detection output of the brightness sensor 60, and an operation signal from an operation unit 70 that is remotely located in the surveillance camera device 10 and remotely operates the surveillance camera device 10 are input. Shake correction unit 11 of camera 11
1, a control signal for turning on / off the shake correction function, a screen size change instruction, a shake correction parameter change instruction, a shake correction mode instruction, and the like, and a boom position change instruction to the zoom position control unit 121 of the lens 10. Then, a turn control instruction is issued to the turn control unit 401 of the turn table 40.

【0040】ここで、この実施の形態の監視システムに
おいて、制御部80は、振動センサ50の検出出力に基
づき監視カメラ装置10本体のモードを判別してITV
カメラ11に内蔵されるゆれ補正部111によるゆれ補
正を最適化すべくゆれ補正部111に対して補正モード
を指示するとともに、明るさセンサ60により検出され
た監視カメラ装置10の周辺の明るさに基づきカメラ1
1の撮像感度を調整してカメラ11に内蔵されるゆれ補
正部111によるゆれ補正を最適化するように構成され
る。
Here, in the monitoring system of this embodiment, the control unit 80 determines the mode of the monitoring camera device 10 based on the detection output of the vibration sensor 50, and
The correction mode is instructed to the shake correction unit 111 to optimize the shake correction by the shake correction unit 111 built in the camera 11, and based on the brightness around the monitoring camera device 10 detected by the brightness sensor 60. Camera 1
The camera 1 is configured to adjust the imaging sensitivity to optimize the shake correction by the shake correction unit 111 built in the camera 11.

【0041】図3は、図2に示した制御部80の処理を
示すフローチャートである。
FIG. 3 is a flowchart showing the processing of the control unit 80 shown in FIG.

【0042】図3において、この制御部80の処理が開
始されると、まず、制御部80は、操作部70により監
視カメラ装置10に対するゆれ補正操作があるかを調べ
る(ステップ801)。ここで、監視カメラ装置10に
対するゆれ補正操作がない場合は(ステップ801でN
O)、監視カメラ装置10のカメラ11のゆれ補正部1
11によるゆれ補正は行わないので、ゆれ補正部111
によるゆれ補正をOFFにして(ステップ809)この
処理を終了する。
In FIG. 3, when the process of the control unit 80 is started, the control unit 80 first checks whether or not there is a shake correction operation on the monitoring camera device 10 by the operation unit 70 (step 801). Here, when there is no shake correction operation on the monitoring camera device 10 (N in step 801)
O), the shake correction unit 1 of the camera 11 of the monitoring camera device 10
11 is not performed, the shake correction unit 111
Is turned off (step 809), and this process ends.

【0043】ステップ801において、操作部70によ
り監視カメラ装置10に対するゆれ補正操作があると判
断された場合は(ステップ801でYES)、次に、操
作部70により監視カメラ装置10のレンズ12に対す
るズーム制御操作があるかを調べる(ステップ80
2)。ここで、監視カメラ装置10のレンズ12に対す
るズーム制御操作がある場合は(ステップ802でYE
S)、レンズ12に対するズーム制御中は、カメラ11
のゆれ補正部111によるゆれ補正を行っても正確なゆ
れ補正はできないので、ゆれ補正部111によるゆれ補
正をOFFにして(ステップ809)この処理を終了す
る。
If it is determined in step 801 that the operation unit 70 has performed a shake correction operation on the surveillance camera device 10 (YES in step 801), then the operation unit 70 zooms on the lens 12 of the surveillance camera device 10. It is checked whether there is a control operation (step 80).
2). Here, when there is a zoom control operation on the lens 12 of the monitoring camera device 10 (YE in step 802)
S) During the zoom control of the lens 12, the camera 11
Even if the shake correction by the shake correction unit 111 is performed, accurate shake correction cannot be performed. Therefore, the shake correction by the shake correction unit 111 is turned off (step 809), and this process ends.

【0044】ステップ802で、監視カメラ装置10の
レンズ12に対するズーム制御操作がないと判断された
場合は(ステップ802でNO)、次に、操作部70に
より監視カメラ装置10の旋回台40に対する旋回制御
操作があるかを調べる(ステップ803)。ここで、監
視カメラ装置10の旋回台40に対する旋回制御操作が
あると判断された場合は(ステップ803でYES)、
旋回台40による旋回制御中は、カメラ11のゆれ補正
部111によるゆれ補正を行っても正確なゆれ補正はで
きないので、ゆれ補正部111によるゆれ補正をOFF
にして(ステップ809)この処理を終了する。
If it is determined in step 802 that there is no zoom control operation on the lens 12 of the surveillance camera device 10 (NO in step 802), then the operation unit 70 turns the surveillance camera device 10 with respect to the turntable 40. It is checked whether there is a control operation (step 803). Here, when it is determined that there is a turning control operation on the turntable 40 of the monitoring camera device 10 (YES in step 803),
During the turning control by the swivel table 40, even if the shake correction by the shake correction unit 111 of the camera 11 is performed, accurate shake correction cannot be performed.
(Step 809), and this process ends.

【0045】ステップ803で、監視カメラ装置10の
旋回台40に対する旋回制御操作がないと判断された場
合は(ステップ803でNO)、次に、明るさセンサ6
0で検出した監視カメラ10の周辺の明るさが所定の基
準値以下かを調べる(ステップ804)。ここで、明る
さセンサ60で検出した監視カメラ10の周辺の明るさ
が所定の基準値以下である場合は、カメラ11のゆれ補
正部111によるゆれ補正を行っても正確なゆれ補正は
できないので、カメラ112感度アップの指示を行い
(ステップ805)、ゆれ補正部111によるゆれ補正
をOFFにして(ステップ809)この処理を終了す
る。
If it is determined in step 803 that there is no turning control operation on the turntable 40 of the monitoring camera device 10 (NO in step 803), then the brightness sensor 6
It is checked whether the brightness around the monitoring camera 10 detected at 0 is below a predetermined reference value (step 804). Here, when the brightness around the monitoring camera 10 detected by the brightness sensor 60 is equal to or less than a predetermined reference value, even if the shake correction is performed by the shake correction unit 111 of the camera 11, accurate shake correction cannot be performed. Then, an instruction to increase the sensitivity of the camera 112 is issued (step 805), the shake correction by the shake correction unit 111 is turned off (step 809), and this processing ends.

【0046】ステップ804で、明るさセンサ60で検
出した監視カメラ装置10の周辺の明るさが所定の基準
値を越えていると判断されると(ステップ804でYE
S)、カメラ11のゆれ補正部111によるゆれ補正を
行うかまたはカメラ11のゆれ補正部111に対して必
要な指示を与えるかを判別するゆれ補正判別処理を実行
する(ステップ806)。このステップ806のゆれ補
正判別処理の詳細については後に図4のフローチャート
を参照して詳細に説明する。
If it is determined in step 804 that the brightness around the monitoring camera device 10 detected by the brightness sensor 60 exceeds a predetermined reference value (YE in step 804).
S), a shake correction determination process is performed to determine whether to perform shake correction by the shake correction unit 111 of the camera 11 or to give a necessary instruction to the shake correction unit 111 of the camera 11 (step 806). Details of the shake correction determination processing in step 806 will be described later in detail with reference to the flowchart of FIG.

【0047】ステップ806の処理により、カメラ11
のゆれ補正部111によるゆれ補正を行うと判断された
場合は(ステップ807でYES)、ゆれ補正部111
によるゆれ補正をONにして(ステップ808)、この
処理を終了する。しかし、ステップ806の処理によ
り、カメラ11のゆれ補正部111によるゆれ補正を行
わずに必要な指示を行うと判断された場合は(ステップ
807でNO)、ゆれ補正部111によるゆれ補正をO
FFにして(ステップ809)この処理を終了する。
By the processing of step 806, the camera 11
If it is determined that the shake correction by the shake correction unit 111 is to be performed (YES in step 807), the shake correction unit 111
Is turned on (step 808), and this process ends. However, if it is determined by the processing in step 806 that a necessary instruction is performed without performing the shake correction by the shake correction unit 111 of the camera 11 (NO in step 807), the shake correction by the shake correction unit 111 is disabled.
FF is set (step 809), and this process ends.

【0048】上記図3に示したフローチャートの処理は
予め設定された所定の周期で繰り返し実行される。
The processing of the flowchart shown in FIG. 3 is repeatedly executed at a predetermined cycle set in advance.

【0049】図4は、図3に示したステップ806のゆ
れ補正判別処理の詳細を示すフローチャートである。
FIG. 4 is a flowchart showing the details of the shake correction determination processing in step 806 shown in FIG.

【0050】図4において、まず、カメラ11のゆれ量
検出部112で検出された画像のゆれ量が、カメラ11
のゆれ補正部111により補正可能範囲かを調べる(ス
テップ811)。
In FIG. 4, first, the amount of shake of the image detected by the shake amount detector 112 of the camera 11 is
It is checked whether the correction range is correctable by the shake correction unit 111 (step 811).

【0051】ここで、カメラ11のゆれ量検出部112
で検出された画像のゆれ量が、カメラ11のゆれ補正部
111により補正可能範囲であると判別された場合は
(ステップ811でYES)、カメラ11のゆれ補正部
111に対してゆれ補正をONにするゆれ補正指示を与
えて(ステップ812)、このゆれ補正判別処理を終了
する。
Here, the shake amount detector 112 of the camera 11
If the shake amount of the image detected in step S11 is determined to be within the correctable range by the shake correction unit 111 of the camera 11 (YES in step 811), the shake correction is turned on for the shake correction unit 111 of the camera 11. Is given (step 812), and the shake correction determination processing ends.

【0052】ステップ811で、カメラ11のゆれ量検
出部112で検出された画像のゆれ量が、カメラ11の
ゆれ補正部111により補正可能範囲を越えている場合
は(ステップ811でNO)、次に、ズーム位置を変更
するか、すなわち、監視カメラ装置10のレンズ12の
ズーム位置を変更してもカメラ11のゆれ量検出部11
2で検出された画像のゆれ量が、カメラ11のゆれ補正
部111により補正可能範囲に収まるようにする設定が
なされているかを調べる(ステップ813)。ここで、
ズーム位置を変更する設定がなされている場合は(ステ
ップ813でYES)、ゆれ量検出部112で検出され
た画像のゆれ量が小さくなるように、具体的には、ズー
ム量を小さくするズーム位置変更指示をズーム位置制御
部121に与えて(ステップ814)、このゆれ補正判
別処理を終了する。
In step 811, if the image shake detected by the camera shake detector 112 of the camera 11 exceeds the range that can be corrected by the camera shake corrector 111 of the camera 11 (NO in step 811), the process proceeds to step 811. In addition, whether the zoom position is changed, that is, even if the zoom position of the lens 12 of the monitoring camera device 10 is changed, the shake amount detection unit 11 of the camera 11 is changed.
It is checked whether or not a setting has been made so that the shake amount of the image detected in step 2 falls within the correctable range by the shake correction unit 111 of the camera 11 (step 813). here,
If the setting for changing the zoom position has been made (YES in step 813), the zoom position at which the zoom amount is reduced is set so that the shake amount of the image detected by the shake amount detection unit 112 is reduced. A change instruction is given to the zoom position control unit 121 (step 814), and the shake correction determination processing ends.

【0053】また、ステップ813で、ズーム位置を変
更する設定がなされていないと判断されると(ステップ
813でNO)、次に、ゆれ補正のためにカメラ11の
ゆれ補正部111で切り出す画面サイズを変更するか、
すなわち、カメラ11のゆれ補正部111で切り出す画
面サイズを変更してもカメラ11のゆれ量検出部112
で検出された画像のゆれ量が、カメラ11のゆれ補正部
111により補正可能範囲に収まるようにする設定がな
されているかを調べる(ステップ815)。ここで、画
面サイズを変更する設定がなされている場合は(ステッ
プ815でYES)、ゆれ量検出部112で検出された
画像のゆれ量が小さくなるように、具体的には、切り出
す画面サイズを小さくする画面サイズ変更指示をゆれ補
正部111に与えて(ステップ816)、このゆれ補正
判別処理を終了する。
If it is determined in step 813 that the setting for changing the zoom position has not been made (NO in step 813), the screen size cut out by the shake correction unit 111 of the camera 11 for shake correction Change or
That is, even if the screen size cut out by the shake correction unit 111 of the camera 11 is changed, the shake amount detection unit 112 of the camera 11
It is checked whether or not a setting has been made so that the shake amount of the image detected in step S11 falls within the correctable range by the shake correction unit 111 of the camera 11 (step 815). Here, if the setting for changing the screen size is made (YES in step 815), the screen size to be cut out is specifically set so that the shake amount of the image detected by the shake amount detection unit 112 is reduced. A screen size change instruction to reduce the size is given to the shake correction unit 111 (step 816), and the shake correction determination processing ends.

【0054】また、ステップ815で、画面サイズを変
更する設定がなされていないと判断されると(ステップ
815でNO)、次に、ゆれ補正のためにカメラ11の
ゆれ補正部111のゆれ補正パラメータを変更するか、
すなわち、カメラ11のゆれ補正部111のゆれ補正パ
ラメータを変更してもカメラ11のゆれ量検出部112
で検出された画像のゆれ量が、カメラ11のゆれ補正部
111により補正可能範囲に収まるようにする設定がな
されているかを調べる(ステップ817)。ここで、ゆ
れ補正パラメータを変更する設定がなされている場合は
(ステップ817でYES)、ゆれ量検出部112で検
出された画像のゆれ量が小さくなるようにゆれ補正パラ
メータを変更するゆれ補正パラメータ変更指示をゆれ補
正部111に与えて(ステップ818)、このゆれ補正
判別処理を終了する。
If it is determined in step 815 that the setting for changing the screen size has not been made (NO in step 815), then the shake correction parameter of the shake correction unit 111 of the camera 11 is used to correct the shake. Change or
That is, even if the shake correction parameter of the shake correction unit 111 of the camera 11 is changed, the shake amount detection unit 112 of the camera 11
It is checked whether or not the setting has been made so that the shake amount of the image detected in step S11 falls within the correctable range by the shake correction unit 111 of the camera 11 (step 817). If the setting for changing the shake correction parameter has been made (YES in step 817), the shake correction parameter is changed so that the shake amount of the image detected by the shake amount detection unit 112 is reduced. A change instruction is given to the shake correction unit 111 (step 818), and the shake correction determination processing ends.

【0055】また、ステップ817で、ゆれ補正パラメ
ータを変更する設定がなされていないと判断された場合
は(ステップ817でNO)、振動センサ54の検出出
力に基づき、監視カメラ装置10本体の振動モードを解
析する(ステップ819)。そして、この解析に基づき
監視カメラ装置10本体の振動について1次の振動が優
勢であるか否かを調べる(ステップ820)。ここで、
1次の振動が優勢であると判断されると(ステップ82
0でYES)、1次の振動補正モードをカメラ11のゆ
れ補正部111に指示し(ステップ821)、このゆれ
補正判別処理を終了する。
If it is determined in step 817 that the setting for changing the shake correction parameter has not been made (NO in step 817), the vibration mode of the main body of the monitoring camera device 10 is determined based on the detection output of the vibration sensor 54. Is analyzed (step 819). Then, based on this analysis, it is checked whether the primary vibration is dominant in the vibration of the monitoring camera device 10 (step 820). here,
If it is determined that the primary vibration is dominant (step 82)
(YES at 0) the primary vibration correction mode is instructed to the shake correction unit 111 of the camera 11 (step 821), and the shake correction determination processing ends.

【0056】また、ステップ820で、1次の振動以外
の2次の振動が優勢であると判断されると、2次の振動
補正モードをカメラ11のゆれ補正部111に指示し
(ステップ822)、このゆれ補正判別処理を終了す
る。
If it is determined in step 820 that the secondary vibration other than the primary vibration is dominant, the secondary vibration correction mode is instructed to the shake correction unit 111 of the camera 11 (step 822). Then, the shake correction determination processing ends.

【0057】すなわち、上述したように、カメラ11の
ゆれ補正部111では、カメラ11に取り込んだ撮像画
像の所定の領域を所定の周期で切り出し、この切り出し
た撮像画像を比較することにより取り込んだ撮像画像の
ゆれ量を検出し、この検出したゆれ量に基づき取り込ん
だ撮像画像を画像処理により補正することで、取り込ん
だ撮像画像から画像のゆれを補正するように構成されて
いるが、このゆれ補正部111におけるゆれ補正を最適
化するためには、監視カメラ装置10本体の振動周波数
に応じて撮像画像から所定の領域を切り出す周期等のゆ
れ補正パラメータを変更する必要がある。
That is, as described above, the shake correction unit 111 of the camera 11 cuts out a predetermined region of the captured image captured by the camera 11 at a predetermined cycle, and compares the captured image by capturing the captured image. It is configured to detect the amount of shake of the image and correct the captured image based on the detected amount of shake by image processing, thereby correcting the image shake from the captured image. In order to optimize the shake correction in the unit 111, it is necessary to change a shake correction parameter such as a cycle of cutting out a predetermined region from a captured image in accordance with the vibration frequency of the monitoring camera device 10.

【0058】そこで、この実施の形態においては、カメ
ラ11のゆれ補正部111に関して、1次の振動が優勢
の場合のゆれ補正パラメータを用いたゆれ補正を1次振
動補正モード、2次の振動が優勢の場合のゆれ補正パラ
メータを用いたゆれ補正を2次振動補正モードとして設
定しておき、ステップ820で1次の振動が優勢である
と判断された場合は、カメラ11のゆれ補正部111に
対して1次振動補正モードを指示し、2次の振動が優勢
であると判断された場合は、カメラ11のゆれ補正部1
11に対して2次振動補正モードを指示することで、ゆ
れ補正部111におけるゆれ補正を最適化するように構
成されている。
Therefore, in this embodiment, the shake correction unit 111 of the camera 11 performs the shake correction using the shake correction parameter when the primary vibration is dominant in the primary vibration correction mode and the secondary vibration in the primary vibration correction mode. Shake correction using the shake correction parameter in the case of dominance is set as a secondary vibration correction mode, and if it is determined in step 820 that primary vibration is dominant, the shake correction unit 111 of the camera 11 On the other hand, the primary vibration correction mode is instructed, and if it is determined that the secondary vibration is dominant, the shake correction unit 1 of the camera 11
By instructing the secondary vibration correction mode to the secondary vibration correction mode, the vibration correction in the vibration correction unit 111 is optimized.

【0059】なお、ここでは、監視カメラ装置10本体
の1次の振動と2次の振動について着目したが、3次以
上の振動モードを考慮するように構成してもよい。
Although the primary and secondary vibrations of the main body of the monitoring camera device 10 have been focused on here, the third and higher vibration modes may be considered.

【0060】図4のゆれ補正判別処理により、ステップ
811で画像のゆれ量は補正可能範囲であると判断され
(ステップ811でYES)、ステップ812でゆれ補
正指示がなされた場合は、図3のステップ807でゆれ
補正を行うと判断され、ステップ808でカメラ11の
ゆれ補正部111によるゆれ補正がONにされる。
In the shake correction determination process of FIG. 4, it is determined in step 811 that the amount of image shake is within the correctable range (YES in step 811). In step 807, it is determined that the shake correction is to be performed. In step 808, the shake correction by the shake correction unit 111 of the camera 11 is turned ON.

【0061】しかし、ステップ811で、画像のゆれ量
は補正可能範囲でないと判断された場合は(ステップ8
11でNO)、図3のステップ809でカメラ11のゆ
れ補正部111によるゆれ補正がOFFにされるが、再
び図3の処理が実行された結果、図4のステップ811
で、画像のゆれ量は補正可能範囲であると判断されると
(ステップ811でYES)、ステップ812でゆれ補
正指示がなされ、この結果、図3のステップ807でゆ
れ補正を行うと判断され、ステップ808でカメラ11
のゆれ補正部111によるゆれ補正がONにされる。
However, if it is determined in step 811 that the image shake amount is not within the correctable range (step 811).
11 is NO), the shake correction by the shake correction unit 111 of the camera 11 is turned off in step 809 in FIG. 3, but as a result of the processing in FIG. 3 being executed again, the step 811 in FIG.
If it is determined that the image shake amount is within the correctable range (YES in step 811), a shake correction instruction is issued in step 812, and as a result, it is determined in step 807 in FIG. In step 808, the camera 11
The shake correction by the shake correction unit 111 is turned ON.

【0062】図5は、図2に示した監視カメラ装置10
においてカメラ11のゆれ補正部111によるゆれ補正
可能範囲とゆれ補正部111で切り出す画像サイズとの
関係を示した図である。
FIG. 5 shows the monitoring camera device 10 shown in FIG.
5 is a diagram illustrating a relationship between a shake correction possible range of the shake correction unit 111 of the camera 11 and an image size cut out by the shake correction unit 111.

【0063】図5において、Sは、カメラ11の撮像範
囲を示し、SCは、ゆれ補正のためにカメラ11の撮像
範囲Sから切り取られる範囲(画面サイズ)を示す。
In FIG. 5, S indicates an imaging range of the camera 11, and SC indicates a range (screen size) cut out from the imaging range S of the camera 11 for shake correction.

【0064】図5に示すように、ゆれ補正可能範囲は、
カメラ11の撮像範囲Sから切り取られる画面サイズS
Cが大きくなると小さくなり、反対に小さくなると大き
くなる。
As shown in FIG. 5, the shake correction possible range is
Screen size S cut out from imaging range S of camera 11
When C becomes large, it becomes small, and when C becomes small, it becomes large.

【0065】そこで、図4のステップ816に示した画
面サイズ変更指示においては、カメラ11のゆれ量検出
部112で検出したゆれ量がゆれ補正可能範囲を外れた
場合は、画面サイズを小さくするように制御する。
Therefore, in the screen size change instruction shown in step 816 of FIG. 4, if the shake amount detected by the shake amount detection unit 112 of the camera 11 is out of the shake correction range, the screen size is reduced. To control.

【0066】[0066]

【発明の効果】以上説明したようにこの発明によれば、
監視カメラ本体に発生したゆれの程度、その特性に応じ
た最適なゆれ補正を行うことができるので、監視に耐え
られる有効な画像情報を効率よく収集することができる
という効果を奏する。
As described above, according to the present invention,
Since the optimal shake correction according to the degree of the shake generated in the surveillance camera body and the characteristics thereof can be performed, there is an effect that effective image information that can withstand monitoring can be efficiently collected.

【図面の簡単な説明】[Brief description of the drawings]

【図1】この発明に係わる監視システムで採用される監
視カメラ装置を示す図である。
FIG. 1 is a diagram showing a surveillance camera device employed in a surveillance system according to the present invention.

【図2】図1に示した監視システムにおけるゆれ補正制
御を示すブロック図である。
FIG. 2 is a block diagram showing a shake correction control in the monitoring system shown in FIG.

【図3】図2に示した制御部の処理を示すフローチャー
トである。
FIG. 3 is a flowchart illustrating a process of a control unit illustrated in FIG. 2;

【図4】図3に示したゆれ補正判別処理の詳細を示すフ
ローチャートである。
FIG. 4 is a flowchart illustrating details of a shake correction determination process illustrated in FIG. 3;

【図5】図2に示した監視カメラ装置においてカメラの
ゆれ補正部によるゆれ補正可能範囲とゆれ補正部で切り
出す画像サイズとの関係を示した図である。
FIG. 5 is a diagram illustrating a relationship between a shake correction range of a camera shake correction unit and an image size cut out by the shake correction unit in the monitoring camera device illustrated in FIG. 2;

【符号の説明】[Explanation of symbols]

10 監視カメラ装置 11 ITVカメラ(カメラ) 12 レンズ 20 ポール 30 カメラ取付台 40 旋回台 50 振動センサ 60 明るさセンサ 70 操作部 80 制御部 111 ゆれ補正部 112 ゆれ量検出部 121 ズーム位置制御部 401 旋回制御部 DESCRIPTION OF SYMBOLS 10 Surveillance camera apparatus 11 ITV camera (camera) 12 Lens 20 Pole 30 Camera mounting base 40 Revolving base 50 Vibration sensor 60 Brightness sensor 70 Operation unit 80 Control unit 111 Shake correction unit 112 Shake amount detection unit 121 Zoom position control unit 401 Rotation Control unit

───────────────────────────────────────────────────── フロントページの続き (72)発明者 伊藤 康行 東京都日野市旭が丘3丁目1番地の1 株 式会社東芝日野工場内 (72)発明者 宮崎 靖之 東京都日野市旭が丘3丁目1番地の1 株 式会社東芝日野工場内 (72)発明者 芳野 雅美 東京都日野市旭が丘3丁目1番地の1 株 式会社東芝日野工場内 (72)発明者 滝沢 祐治 東京都日野市旭が丘3丁目1番地の1 東 芝通信システムエンジニアリング株式会社 内 Fターム(参考) 5C022 AA01 AB02 AB55 AC27 AC41 AC51 AC63 AC69  ────────────────────────────────────────────────── ─── Continued on the front page (72) Inventor Yasuyuki Ito 3-1-1 Asahigaoka, Hino-shi, Tokyo Inside the Toshiba Hino Plant Co., Ltd. (72) Inventor Yasuyuki Miyazaki 3-1-1 Asahigaoka, Hino-shi, Tokyo Inside the Toshiba Hino Plant Co., Ltd. (72) Inventor Masami Yoshino 3-1-1, Asahigaoka, Hino-shi, Tokyo In-house Co., Ltd. Toshiba Communication Systems Engineering Co., Ltd. F-term (reference) 5C022 AA01 AB02 AB55 AC27 AC41 AC51 AC63 AC69

Claims (14)

【特許請求の範囲】[Claims] 【請求項1】 監視カメラにより撮像された撮像画像に
基づき該監視カメラ周辺の監視を行う監視システムにお
いて、 監視カメラ本体に内蔵され、該監視カメラによる撮像画
像のゆれ補正を行うゆれ補正手段と、 前記監視カメラ本体のゆれを検出する振動検出手段と、 前記振動検出手段により検出された前記監視カメラ本体
のゆれ成分を解析するゆれ成分解析手段と、 前記ゆれ成分解析手段の解析結果に応じて前記監視カメ
ラのゆれ補正手段に対してゆれ補正モードを指示する指
示手段とを具備することを特徴とする監視システム。
1. A surveillance system for monitoring the periphery of a surveillance camera based on a captured image taken by a surveillance camera, a shake correction means built in the surveillance camera body and performing a shake correction of an image captured by the surveillance camera; Vibration detecting means for detecting the shaking of the monitoring camera body; shaking component analyzing means for analyzing the shaking component of the monitoring camera body detected by the vibration detecting means; and A surveillance system, comprising: an instructing unit for instructing a shake correction mode of the surveillance camera to a shake correction mode.
【請求項2】 前記ゆれ補正手段は、 前記監視カメラ本体の1次の振動に適した第1のゆれ補
正モードと2次の振動に適した第2のゆれ補正モードと
を切替可能に有しており、 前記ゆれ成分解析手段は、 前記振動センサの検出出力に基づき前記監視カメラ本体
のゆれの1次の振動が優勢か2次の振動が優勢かを判別
し、 前記指示手段は、 前記ゆれ成分解析手段により1次の振動が優勢であると
判別された場合は、前記ゆれ補正手段に前記第1のゆれ
補正モードに切り替えることを指示し、2次の振動が優
勢であると判別された場合は、前記ゆれ補正手段に前記
第2のゆれ補正モードに切り替えることを指示すること
を特徴とする請求項1記載の監視システム。
2. The shake correcting means is switchable between a first shake correction mode suitable for primary vibration of the monitoring camera body and a second shake correction mode suitable for secondary vibration. Wherein the shake component analyzing means determines whether primary or secondary vibration of the shake of the surveillance camera main body is dominant or dominant based on the detection output of the vibration sensor, and the instructing means comprises: When the primary vibration is determined to be dominant by the component analyzing means, the controller instructs the shake correction means to switch to the first shake correction mode, and determines that the secondary vibration is dominant. 2. The monitoring system according to claim 1, wherein in the case, the shake correction means is instructed to switch to the second shake correction mode.
【請求項3】 前記監視カメラの周囲の明るさを検出す
る明るさ検出手段と、 前記明るさ検出手段により検出された前記監視カメラの
周囲の明るさが所定の基準値以下と判定された場合は前
記監視カメラに対して感度を上げる指示を行う感度指示
手段とを更に具備することを特徴とする請求項1記載の
監視システム。
3. A brightness detecting means for detecting the brightness around the surveillance camera; and a case where the brightness around the surveillance camera detected by the brightness detecting means is determined to be equal to or less than a predetermined reference value. 2. The surveillance system according to claim 1, further comprising: sensitivity instructing means for instructing the surveillance camera to increase sensitivity.
【請求項4】 前記監視カメラに対してズーム指示があ
るかを検出するズーム指示検出手段と、 前記ズーム指示検出手段により前記監視カメラに対して
ズーム指示がある場合は、前記ゆれ補正手段によるゆれ
補正を禁止する手段とを更に具備することを特徴とする
請求項1記載の監視システム。
4. A zoom instruction detecting means for detecting whether or not a zoom instruction is issued to the surveillance camera, and when the zoom instruction is issued to the surveillance camera, a shake by the shake correcting means is provided. The monitoring system according to claim 1, further comprising: means for prohibiting correction.
【請求項5】 前記監視カメラに対して旋回指示がある
かを検出する旋回指示検出手段と、 前記旋回指示検出手段により前記監視カメラに対して旋
回指示がある場合は、前記ゆれ補正手段によるゆれ補正
を禁止する手段とを更に具備することを特徴とする請求
項1記載の監視システム。
5. A turning instruction detecting means for detecting whether there is a turning instruction to the surveillance camera, and when there is a turning instruction to the surveillance camera by the turning instruction detecting means, a shake by the shake correcting means. The monitoring system according to claim 1, further comprising: means for prohibiting correction.
【請求項6】 監視カメラにより撮像された撮像画像に
基づき該監視カメラ周辺の監視を行う監視システムにお
いて、 監視カメラ本体に内蔵され、該監視カメラによる撮像画
像のゆれ補正を行うゆれ補正手段と、 監視カメラ本体に内蔵され、該監視カメラによる撮像画
像のゆれ量を検出するゆれ量検出手段と、 前記ゆれ量検出手段により検出された前記監視カメラに
よる撮像画像のゆれ量が前記ゆれ補正手段により補正可
能範囲かを判別する判別手段と、 前記判別手段により前記ゆれ量検出手段により検出され
た前記監視カメラによる撮像画像のゆれ量が前記ゆれ補
正手段により補正可能範囲であると判断された場合は、
前記ゆれ補正手段に対してゆれ補正の指示を行い、前記
ゆれ量検出手段により検出された前記監視カメラによる
撮像画像のゆれ量が前記ゆれ補正手段により補正可能範
囲外である場合は、前記ゆれ補正手段によるゆれ補正を
禁止するゆれ補正制御手段とを具備することを特徴とす
る監視システム。
6. A surveillance system for monitoring the periphery of a surveillance camera based on a captured image taken by the surveillance camera, wherein a shake correction means is incorporated in the surveillance camera body and corrects a shake of the image captured by the surveillance camera. A shake amount detecting means built in the surveillance camera main body and detecting a shake amount of an image captured by the surveillance camera; and a shake amount of the image captured by the surveillance camera detected by the shake amount detection means is corrected by the shake correction means. Determination means for determining whether the image is in a possible range, and when the amount of shake of the image captured by the monitoring camera detected by the shake amount detection means by the determination means is determined to be within the correctable range by the shake correction means,
An instruction for shake correction is given to the shake correcting means, and when the shake amount of the image captured by the surveillance camera detected by the shake amount detecting means is outside the range that can be corrected by the shake correcting means, the shake correction is performed. And a shake correction control means for prohibiting shake correction by the means.
【請求項7】 前記ゆれ補正制御手段は、 前記ゆれ量検出手段により検出された前記監視カメラに
よる撮像画像のゆれ量が前記ゆれ補正手段により補正可
能範囲外である場合、前記監視カメラによる撮像画像の
ゆれ量を小さくすべく、前記監視カメラに対してズーム
位置の変更を指示するズーム位置変更指示手段を具備す
ることを特徴とする請求項6記載の監視システム。
7. The image pick-up by the surveillance camera when the amount of shake of the image captured by the surveillance camera detected by the amount-of-shake detection means is out of a range that can be corrected by the shake correction means. 7. The surveillance system according to claim 6, further comprising zoom position change instructing means for instructing the surveillance camera to change a zoom position in order to reduce a fluctuation amount of the surveillance camera.
【請求項8】 前記ゆれ補正制御手段は、 前記ゆれ量検出手段により検出された前記監視カメラに
よる撮像画像のゆれ量が前記ゆれ補正手段により補正可
能範囲外である場合、前記監視カメラによる撮像画像の
ゆれ量を小さくすべく、前記監視カメラのゆれ補正手段
に対してゆれ補正の対象となる画面サイズの変更を指示
する画面サイズ変更指示手段を具備することを特徴とす
る請求項6記載の監視システム。
8. The image pickup device according to claim 1, wherein the shake correction control unit is configured to, when a shake amount of the image captured by the surveillance camera detected by the shake amount detection unit falls outside a range that can be corrected by the shake correction unit, 7. The surveillance camera according to claim 6, further comprising a screen size change instructing unit for instructing the shake correcting unit of the surveillance camera to change a screen size to be shake-corrected in order to reduce a shake amount. system.
【請求項9】 前記ゆれ補正制御手段は、 前記ゆれ量検出手段により検出された前記監視カメラに
よる撮像画像のゆれ量が前記ゆれ補正手段により補正可
能範囲外である場合、前記監視カメラによる撮像画像の
ゆれ量を小さくすべく、前記監視カメラのゆれ補正手段
に対してゆれ補正パラメータの変更を指示するゆれ補正
パラメータ変更指示手段を具備することを特徴とする請
求項6記載の監視システム。
9. The image captured by the surveillance camera when the amount of fluctuation of the image captured by the surveillance camera detected by the fluctuation amount detection means is out of a range that can be corrected by the fluctuation correction means. 7. The surveillance system according to claim 6, further comprising a shake correction parameter change instructing unit that instructs the shake correcting unit of the surveillance camera to change a shake correction parameter in order to reduce the amount of shake.
【請求項10】 前記監視カメラ本体のゆれを検出する
振動検出手段と、 前記振動検出手段により検出された前記監視カメラ本体
のゆれ成分を解析するゆれ成分解析手段とを更に具備
し、 前記ゆれ補正制御手段は、 前記ゆれ量検出手段により検出された前記監視カメラに
よる撮像画像のゆれ量が前記ゆれ補正手段により補正可
能範囲外である場合、前記監視カメラによる撮像画像の
ゆれ量を小さくすべく、前記ゆれ成分解析手段の解析結
果に応じて前記監視カメラのゆれ補正手段に対してゆれ
補正モードを指示する指示手段を具備することを特徴と
する請求項6記載の監視システム。
10. The vibration correction means, further comprising: vibration detection means for detecting a vibration of the surveillance camera body; and a fluctuation component analysis means for analyzing a vibration component of the surveillance camera body detected by the vibration detection means. The control unit, when the amount of shake of the image captured by the monitoring camera detected by the amount of shake detection unit is outside the range that can be corrected by the shake correction unit, to reduce the amount of shake of the image captured by the monitoring camera, 7. The surveillance system according to claim 6, further comprising an instruction unit for instructing a shake correction mode of the surveillance camera in accordance with an analysis result of the shake component analysis unit.
【請求項11】 前記ゆれ補正手段は、 前記監視カメラ本体の1次の振動に適した第1のゆれ補
正モードと2次の振動に適した第2のゆれ補正モードと
を切替可能に有しており、 前記ゆれ成分解析手段は、 前記振動センサの検出出力に基づき前記監視カメラ本体
のゆれの1次の振動が優勢か2次の振動が優勢かを判別
し、 前記指示手段は、 前記ゆれ成分解析手段により1次の振動が優勢であると
判別された場合は、前記ゆれ補正手段に前記第1のゆれ
補正モードに切り替えることを指示し、2次の振動が優
勢であると判別された場合は、前記ゆれ補正手段に前記
第2のゆれ補正モードに切り替えることを指示すること
を特徴とする請求項10記載の監視システム。
11. The shake correction means is switchable between a first shake correction mode suitable for a primary vibration of the monitoring camera body and a second shake correction mode suitable for a secondary vibration. Wherein the shake component analyzing means determines whether primary or secondary vibration of the shake of the surveillance camera main body is dominant or dominant based on the detection output of the vibration sensor, and the instructing means comprises: When the primary vibration is determined to be dominant by the component analyzing means, the controller instructs the shake correction means to switch to the first shake correction mode, and determines that the secondary vibration is dominant. 11. The monitoring system according to claim 10, wherein in the case, the shake correction unit is instructed to switch to the second shake correction mode.
【請求項12】 前記監視カメラの周囲の明るさを検出
する明るさ検出手段と、 前記明るさ検出手段により検出された前記監視カメラの
周囲の明るさが所定の基準値以下と判定された場合は前
記監視カメラに対して感度を上げる指示を行う感度指示
手段とを更に具備することを特徴とする請求項6記載の
監視システム。
12. A brightness detecting means for detecting brightness around the surveillance camera, and when the brightness around the surveillance camera detected by the brightness detecting means is determined to be equal to or less than a predetermined reference value. 7. The surveillance system according to claim 6, further comprising sensitivity instructing means for instructing the surveillance camera to increase sensitivity.
【請求項13】 前記監視カメラに対してズーム指示が
あるかを検出するズーム指示検出手段と、 前記ズーム指示検出手段により前記監視カメラに対して
ズーム指示がある場合は、前記ゆれ補正手段によるゆれ
補正を禁止する手段とを更に具備することを特徴とする
請求項6記載の監視システム。
13. A zoom instruction detecting means for detecting whether a zoom instruction has been issued to the surveillance camera, and when the zoom instruction detecting means has issued a zoom instruction to the surveillance camera, a shake by the shake correcting means. 7. The monitoring system according to claim 6, further comprising means for prohibiting correction.
【請求項14】 前記監視カメラに対して旋回指示があ
るかを検出する旋回指示検出手段と、 前記旋回指示検出手段により前記監視カメラに対して旋
回指示がある場合は、前記ゆれ補正手段によるゆれ補正
を禁止する手段とを更に具備することを特徴とする請求
項6記載の監視システム。
14. A turning instruction detecting means for detecting whether there is a turning instruction to the surveillance camera, and when the turning instruction detecting means gives a turning instruction to the surveillance camera, a shake by the shake correcting means. 7. The monitoring system according to claim 6, further comprising means for prohibiting correction.
JP19624899A 1999-07-09 1999-07-09 Monitoring system Expired - Fee Related JP4162333B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP19624899A JP4162333B2 (en) 1999-07-09 1999-07-09 Monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP19624899A JP4162333B2 (en) 1999-07-09 1999-07-09 Monitoring system

Publications (2)

Publication Number Publication Date
JP2001024934A true JP2001024934A (en) 2001-01-26
JP4162333B2 JP4162333B2 (en) 2008-10-08

Family

ID=16354658

Family Applications (1)

Application Number Title Priority Date Filing Date
JP19624899A Expired - Fee Related JP4162333B2 (en) 1999-07-09 1999-07-09 Monitoring system

Country Status (1)

Country Link
JP (1) JP4162333B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010016700A (en) * 2008-07-04 2010-01-21 Canon Inc Vibration correcting device
JP2011133696A (en) * 2009-12-25 2011-07-07 Casio Computer Co Ltd Imaging apparatus, method for controlling the imaging apparatus, and program
JP2011139169A (en) * 2009-12-25 2011-07-14 Canon Inc Imaging apparatus
JP2016530159A (en) * 2013-09-04 2016-09-29 ジェンテックス コーポレイション Display system for displaying an image acquired by a camera system on a rearview mirror assembly of a vehicle
JP2016180780A (en) * 2015-03-23 2016-10-13 株式会社Jvcケンウッド Shaking correction device

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6421955B2 (en) 2017-02-28 2018-11-14 パナソニックIpマネジメント株式会社 Imaging device and method for correcting shake of captured image
JP6410062B2 (en) 2017-03-03 2018-10-24 パナソニックIpマネジメント株式会社 Imaging device and display method of captured image

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03190381A (en) * 1989-12-19 1991-08-20 Sharp Corp Picture blurr compensation device
JPH0548961A (en) * 1991-08-16 1993-02-26 Sharp Corp Image pickup device capable of image pickup under low illuminance
JPH05130481A (en) * 1991-11-07 1993-05-25 Mitsubishi Electric Corp Image pickup device
JPH0698246A (en) * 1992-09-11 1994-04-08 Canon Inc Vibration corrector
JPH07177418A (en) * 1993-12-20 1995-07-14 Canon Inc Image blur preventing device
JPH1023322A (en) * 1996-07-08 1998-01-23 Hitachi Ltd Camera shake correcting method and picture monitoring system
JPH114379A (en) * 1997-06-12 1999-01-06 Matsushita Electric Ind Co Ltd Image signal processing unit

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03190381A (en) * 1989-12-19 1991-08-20 Sharp Corp Picture blurr compensation device
JPH0548961A (en) * 1991-08-16 1993-02-26 Sharp Corp Image pickup device capable of image pickup under low illuminance
JPH05130481A (en) * 1991-11-07 1993-05-25 Mitsubishi Electric Corp Image pickup device
JPH0698246A (en) * 1992-09-11 1994-04-08 Canon Inc Vibration corrector
JPH07177418A (en) * 1993-12-20 1995-07-14 Canon Inc Image blur preventing device
JPH1023322A (en) * 1996-07-08 1998-01-23 Hitachi Ltd Camera shake correcting method and picture monitoring system
JPH114379A (en) * 1997-06-12 1999-01-06 Matsushita Electric Ind Co Ltd Image signal processing unit

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010016700A (en) * 2008-07-04 2010-01-21 Canon Inc Vibration correcting device
JP2011133696A (en) * 2009-12-25 2011-07-07 Casio Computer Co Ltd Imaging apparatus, method for controlling the imaging apparatus, and program
JP2011139169A (en) * 2009-12-25 2011-07-14 Canon Inc Imaging apparatus
US8767079B2 (en) 2009-12-25 2014-07-01 Canon Kabushiki Kaisha Image capture apparatus and control method thereof
JP2016530159A (en) * 2013-09-04 2016-09-29 ジェンテックス コーポレイション Display system for displaying an image acquired by a camera system on a rearview mirror assembly of a vehicle
US9884591B2 (en) 2013-09-04 2018-02-06 Gentex Corporation Display system for displaying images acquired by a camera system onto a rearview assembly of a vehicle
JP2016180780A (en) * 2015-03-23 2016-10-13 株式会社Jvcケンウッド Shaking correction device

Also Published As

Publication number Publication date
JP4162333B2 (en) 2008-10-08

Similar Documents

Publication Publication Date Title
US7590336B2 (en) Image stabilizer
JP4859625B2 (en) Camera with image stabilization device
US7583889B2 (en) Imaging apparatus
JP4411037B2 (en) Lens apparatus and photographing system
JP2006258944A (en) Autofocus system
US10694109B2 (en) Imaging apparatus
US20060170813A1 (en) Image pickup apparatus
US11102410B2 (en) Camera parameter setting system and camera parameter setting method
EP1648165A1 (en) Auto focus system with automatic object tracking function
JP5155625B2 (en) Image stabilizer for camera
JP4596246B2 (en) Auto focus system
JP2001024934A (en) Monitoring system
JPH07115579A (en) Automatic focus adjustment device
EP2031440B1 (en) Image stabilization apparatus for camera
US20010010558A1 (en) Image pickup apparatus having focus detection area size dependent on aspect ratio
JP5033600B2 (en) Imaging device
JP2001339632A (en) Image pickup device
JP3402760B2 (en) Imaging equipment
JP2005326776A (en) Image blur correcting device
JP2001197357A (en) Image pickup device
JP3859590B2 (en) Projection apparatus and focus adjustment method thereof
JP3253067B2 (en) Imaging device
JP3960140B2 (en) Video camera
JP2006148421A (en) Imaging equipment
JP2001211446A (en) Supervisory camera system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050805

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080304

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080520

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080624

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080715

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080722

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110801

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110801

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120801

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120801

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130801

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees