JP2014107622A - Monitoring camera device, control program, and compression control method - Google Patents

Monitoring camera device, control program, and compression control method Download PDF

Info

Publication number
JP2014107622A
JP2014107622A JP2012257489A JP2012257489A JP2014107622A JP 2014107622 A JP2014107622 A JP 2014107622A JP 2012257489 A JP2012257489 A JP 2012257489A JP 2012257489 A JP2012257489 A JP 2012257489A JP 2014107622 A JP2014107622 A JP 2014107622A
Authority
JP
Japan
Prior art keywords
luminance
unit
image
compression
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012257489A
Other languages
Japanese (ja)
Other versions
JP6110115B2 (en
Inventor
Toshihiro Sato
稔浩 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MegaChips Corp
Original Assignee
MegaChips Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MegaChips Corp filed Critical MegaChips Corp
Priority to JP2012257489A priority Critical patent/JP6110115B2/en
Publication of JP2014107622A publication Critical patent/JP2014107622A/en
Application granted granted Critical
Publication of JP6110115B2 publication Critical patent/JP6110115B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a technique capable of reducing power consumption of a monitoring camera device.SOLUTION: A monitoring camera device is configured such that: a compression section of a codec 35 compresses image data indicating an image captured by an imaging unit 32 for capturing an image through a lens; a luminance control section of a control unit 36 controls the luminance of the image indicated by the image data compressed by the compression section of the codec 35; a luminance acquisition section of the control unit 36 acquires the luminance of the image whose luminance is controlled by the luminance control section of the control unit 36; and a compression control section of the control unit 36 stops operation of the compression section of the codec 35 when the luminance acquired by the luminance acquisition section is lower than a reference value.

Description

本発明は、監視カメラ装置に関する。   The present invention relates to a surveillance camera device.

従来から監視カメラ装置に関して様々な技術が提案されている。例えば特許文献1には、太陽電池からの電源に基づいて動作する監視カメラ装置が開示されている。また、特許文献2には、画像処理装置に関する技術が開示されている。   Conventionally, various techniques have been proposed for surveillance camera devices. For example, Patent Document 1 discloses a monitoring camera device that operates based on a power source from a solar battery. Patent Document 2 discloses a technique related to an image processing apparatus.

特開2001−186387号公報JP 2001-186387 A 特開2010−151920号公報JP 2010-151920 A

さて、監視カメラ装置においては、低消費電力化が望まれている。   Now, in the surveillance camera device, low power consumption is desired.

そこで、本発明は上述の点に鑑みて成されたものであり、監視カメラ装置の消費電力を低減することが可能な技術を提供することを目的とする。   Therefore, the present invention has been made in view of the above-described points, and an object thereof is to provide a technique capable of reducing the power consumption of a monitoring camera device.

上記課題を解決するため、本発明に係る監視カメラ装置の一態様は、レンズと、前記レンズを介して画像を撮像する撮像部と、前記撮像部で撮像された画像を示す画像データを圧縮する圧縮部と、前記圧縮部で圧縮される画像データが示す画像の輝度を制御する輝度制御部と、前記輝度制御部で輝度が制御された画像の輝度を取得する輝度取得部と、前記圧縮部を制御する圧縮制御部とを備え、前記圧縮制御部は、前記輝度取得部で取得された輝度が第1基準値よりも小さい場合には前記圧縮部の動作を停止する。   In order to solve the above-described problem, an aspect of the monitoring camera device according to the present invention compresses image data indicating an image captured by the lens, an imaging unit that captures an image through the lens, and the image captured by the imaging unit. A compression unit, a luminance control unit that controls luminance of an image indicated by image data compressed by the compression unit, a luminance acquisition unit that acquires luminance of an image whose luminance is controlled by the luminance control unit, and the compression unit And the compression control unit stops the operation of the compression unit when the luminance acquired by the luminance acquisition unit is smaller than a first reference value.

また、本発明に係る監視カメラ装置の一態様では、前記圧縮制御部は、前記輝度取得部で取得された輝度が、前記第1基準値よりも大きい第2基準値よりも大きい場合には前記圧縮部の動作を停止する。   Further, in one aspect of the surveillance camera device according to the present invention, the compression control unit is configured such that the luminance acquired by the luminance acquisition unit is greater than a second reference value that is greater than the first reference value. Stop the operation of the compression unit.

また、本発明に係る監視カメラ装置の一態様では、前記監視カメラ装置は、動作モードとして、カラー画像を撮像するカラーモードと、白黒画像を撮像する白黒モードとを有し、前記圧縮部は、画像データの輝度成分を圧縮する第1圧縮部と、画像データの色差成分を圧縮する第2圧縮部とを有し、前記圧縮制御部は、前記圧縮部が動作している場合に前記監視カメラ装置の動作モードが前記白黒モードになると、前記第2圧縮部の動作を停止する。   In one aspect of the surveillance camera device according to the present invention, the surveillance camera device has, as operation modes, a color mode for capturing a color image and a monochrome mode for capturing a monochrome image, and the compression unit includes: A first compression unit that compresses the luminance component of the image data; and a second compression unit that compresses the color difference component of the image data, and the compression control unit is configured to monitor the monitoring camera when the compression unit is operating. When the operation mode of the apparatus is the monochrome mode, the operation of the second compression unit is stopped.

また、本発明に係る監視カメラ装置の一態様では、ゲインが調整可能であって、前記撮像部から出力される画像データを増幅する増幅部がさらに設けられ、前記圧縮部は、前記増幅部で増幅された画像データを圧縮し、前記輝度制御部は、前記増幅部の前記ゲインを制御することによって前記圧縮部で圧縮される画像データが示す画像の輝度を制御する。   In one aspect of the surveillance camera device according to the present invention, the gain can be adjusted, and an amplification unit that amplifies image data output from the imaging unit is further provided, and the compression unit is the amplification unit. The amplified image data is compressed, and the luminance control unit controls the luminance of the image indicated by the image data compressed by the compression unit by controlling the gain of the amplification unit.

また、本発明に係る監視カメラ装置の一態様では、前記レンズは、絞りを有し、前記輝度制御部は、前記絞りを制御することによって前記圧縮部で圧縮される画像データが示す画像の輝度を制御する。   Further, in one aspect of the monitoring camera device according to the present invention, the lens has a diaphragm, and the luminance control unit controls the diaphragm, and the luminance of the image indicated by the image data compressed by the compression unit is controlled. To control.

また、本発明に係る制御プログラムの一態様は、レンズと、前記レンズを介して画像を撮像する撮像部と、前記撮像部で撮像された画像を示す画像データを圧縮する圧縮部とを備える監視カメラ装置を制御するための制御プログラムであって、前記監視カメラ装置に、(a)前記圧縮部が圧縮する画像データが示す画像の輝度を制御する工程と、(b)前記工程(a)で輝度が制御された画像の輝度を取得する工程と、(c)前記工程(b)で取得された輝度が基準値よりも小さい場合に前記圧縮部の動作を停止する工程とを実行させるためのものである。   One aspect of the control program according to the present invention includes a lens, a capturing unit that captures an image through the lens, and a compression unit that compresses image data indicating the image captured by the capturing unit. A control program for controlling a camera device, wherein: (a) a step of controlling brightness of an image indicated by image data compressed by the compression unit; and (b) a step (a). A step of acquiring a luminance of an image whose luminance is controlled; and (c) a step of stopping the operation of the compression unit when the luminance acquired in the step (b) is smaller than a reference value. Is.

また、本発明に係る圧縮制御方法の一態様は、レンズと、前記レンズを介して画像を撮像する撮像部と、前記撮像部で撮像された画像を示す画像データを圧縮する圧縮部とを備える監視カメラ装置での圧縮制御方法であって、(a)前記圧縮部が圧縮する画像データが示す画像の輝度を制御する工程と、(b)前記工程(a)で輝度が制御された画像の輝度を取得する工程と、(c)前記工程(b)で取得された輝度が基準値よりも小さい場合に前記圧縮部の動作を停止する工程とを備える。   An aspect of the compression control method according to the present invention includes a lens, an imaging unit that captures an image through the lens, and a compression unit that compresses image data indicating the image captured by the imaging unit. A method for controlling compression in a monitoring camera device, comprising: (a) a step of controlling the luminance of an image indicated by image data compressed by the compression unit; and (b) an image whose luminance is controlled in the step (a). A step of obtaining the luminance, and (c) a step of stopping the operation of the compression unit when the luminance obtained in the step (b) is smaller than a reference value.

本発明によれば、監視カメラ装置の消費電力を低減することができる。   According to the present invention, the power consumption of the surveillance camera device can be reduced.

監視カメラ装置の構成を示す図である。It is a figure which shows the structure of the monitoring camera apparatus. カメラ部の構成を示す図である。It is a figure which shows the structure of a camera part. コーデックの構成を示す図である。It is a figure which shows the structure of a codec. 制御部の機能ブロックを示す図である。It is a figure which shows the functional block of a control part. 監視カメラ装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a surveillance camera apparatus. 監視カメラ装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a surveillance camera apparatus. 変形例に係る監視カメラ装置のカメラ部の構成を示す図である。It is a figure which shows the structure of the camera part of the surveillance camera apparatus which concerns on a modification.

図1は実施の形態に係る監視カメラ装置1の構成を示す図である。本実施の形態に係る監視カメラ装置1は、例えば、常に動作しており(24時間動作しており)、1秒間に複数枚(例えば30枚)のカラー画像を撮像する。そして、監視カメラ装置1は、撮像したカラー画像を示す画像データを圧縮し、圧縮後の画像データをネットワークに出力する。ネットワークに出力された圧縮後の画像データは、例えば、セキュリティ会社の管理コンピュータに入力されて保存される。管理コンピュータは、保存した圧縮後の画像データを伸張してディスプレイに表示する。   FIG. 1 is a diagram illustrating a configuration of a monitoring camera device 1 according to an embodiment. The surveillance camera device 1 according to the present embodiment is always operating (operating for 24 hours), for example, and captures a plurality of (for example, 30) color images per second. Then, the monitoring camera device 1 compresses the image data indicating the captured color image, and outputs the compressed image data to the network. The compressed image data output to the network is input and stored in a management computer of a security company, for example. The management computer decompresses the stored compressed image data and displays it on the display.

図1に示されるように、監視カメラ装置1は、絞り20を有するレンズ2と、当該レンズ2が取り付けられたカメラ部3とを備えている。絞り20は、カメラ部3で生成される絞り制御信号400(後述の図2参照)によって制御される。つまり、絞り20の開口は、絞り制御信号400によって、大きくなったり小さくなったりする。   As shown in FIG. 1, the monitoring camera device 1 includes a lens 2 having a diaphragm 20 and a camera unit 3 to which the lens 2 is attached. The aperture 20 is controlled by an aperture control signal 400 (see FIG. 2 described later) generated by the camera unit 3. That is, the aperture of the aperture 20 is increased or decreased by the aperture control signal 400.

絞り20には、電線21の一端が接続されている。また電線21の他端にはコネクタ22が接続されている。コネクタ22は、カメラ部3に設けられたコネクタ30と嵌合する。カメラ部3のコネクタ30には絞り制御信号400が入力される。これにより、カメラ部3で生成された絞り制御信号400が、コネクタ22,30及び電線21を通じて絞り20に与えられる。   One end of an electric wire 21 is connected to the diaphragm 20. A connector 22 is connected to the other end of the electric wire 21. The connector 22 is fitted with a connector 30 provided in the camera unit 3. A diaphragm control signal 400 is input to the connector 30 of the camera unit 3. Thereby, the aperture control signal 400 generated by the camera unit 3 is given to the aperture 20 through the connectors 22 and 30 and the electric wire 21.

図2はカメラ部3の構成を示す図である。図3に示されるように、カメラ部3は、コネクタ30と、カラーフィルタ31と、撮像部32と、AGCアンプ33と、A/Dコンバータ34(以後、「ADC34」と呼ぶ)とを備えている。さらに、カメラ部3は、コーデック35と、制御部36と、ネットワーク通信部37とを備えている。   FIG. 2 is a diagram illustrating a configuration of the camera unit 3. As shown in FIG. 3, the camera unit 3 includes a connector 30, a color filter 31, an imaging unit 32, an AGC amplifier 33, and an A / D converter 34 (hereinafter referred to as “ADC 34”). Yes. Furthermore, the camera unit 3 includes a codec 35, a control unit 36, and a network communication unit 37.

コネクタ30は、上述のように、カメラ部3とレンズ2の絞り20とを接続するためのコネクタであって、制御部36で生成される絞り制御信号400が入力される。   As described above, the connector 30 is a connector for connecting the camera unit 3 and the diaphragm 20 of the lens 2, and receives the diaphragm control signal 400 generated by the control unit 36.

カラーフィルタ31は、例えば、R(レッド)、G(グリーン)及びB(ブルー)の3色系のカラーフィルタであって、カメラ部3に取り付けられたレンズ2と、撮像部32の撮像面との間に配置されている。   The color filter 31 is, for example, a three-color color filter of R (red), G (green), and B (blue), and includes a lens 2 attached to the camera unit 3 and an imaging surface of the imaging unit 32. It is arranged between.

撮像部32は、例えばCCDであって、レンズ2及びカラーフィルタ31を通じて画像を撮像する。そして、撮像部32は、撮像した画像を示すアナログ形式の画像データ500を出力する。本実施の形態では、撮像部32が撮像する画像はカラー画像であって、画像データ500はR成分、G成分及びB成分で構成されている。   The imaging unit 32 is a CCD, for example, and captures an image through the lens 2 and the color filter 31. Then, the imaging unit 32 outputs analog image data 500 indicating the captured image. In the present embodiment, the image captured by the imaging unit 32 is a color image, and the image data 500 is composed of an R component, a G component, and a B component.

AGCアンプ33は、ゲインが調整可能なアナログ増幅器であって、撮像部32から出力される画像データ500を増幅して、画像データ510として出力する。AGCアンプ33のゲインは制御部36によって制御される。制御部36は、AGCアンプ33のゲインを制御するためのゲイン制御信号410を生成して、AGCアンプ33に入力する。AGCアンプ33は、ゲインの値を、入力されたゲイン制御信号410に応じた値に設定する。制御部36は、画像データ510が示す画像、つまり増幅された画像データ500が示す画像の輝度が目標輝度に近づくように、ゲイン制御信号410によってAGCアンプ33のゲインを制御する。これにより、撮像部32での撮像画像の明るさが適切に設定される。   The AGC amplifier 33 is an analog amplifier whose gain can be adjusted. The AGC amplifier 33 amplifies the image data 500 output from the imaging unit 32 and outputs it as image data 510. The gain of the AGC amplifier 33 is controlled by the control unit 36. The control unit 36 generates a gain control signal 410 for controlling the gain of the AGC amplifier 33 and inputs it to the AGC amplifier 33. The AGC amplifier 33 sets the gain value to a value corresponding to the input gain control signal 410. The control unit 36 controls the gain of the AGC amplifier 33 by the gain control signal 410 so that the luminance of the image indicated by the image data 510, that is, the image indicated by the amplified image data 500 approaches the target luminance. Thereby, the brightness of the captured image in the imaging part 32 is set appropriately.

ADC34は、AGCアンプ33から出力されるアナログ形式の画像データ510をデジタル形式に変換して、デジタル形式の画像データ520として出力する。   The ADC 34 converts the analog image data 510 output from the AGC amplifier 33 into a digital format and outputs the digital image data 520.

コーデック35は、ADC34から出力される画像データ520を圧縮して出力する。またコーデック35は、画像データ520が示す画像についての輝度情報を取得して出力する。   The codec 35 compresses and outputs the image data 520 output from the ADC 34. Further, the codec 35 acquires and outputs luminance information about the image indicated by the image data 520.

図3はコーデック35の構成を示す図である。図3に示されるように、コーデック35は、色空間変換部350及び圧縮部351を備えている。色空間変換部350は、画像データ520の色空間をRGBからYCbCrに変換する。具体的には、色空間変換部350は、R成分521、G成分522及びB成分523で構成される画像データ520を、Y成分(輝度成分)601、Cb成分(青色差成分)602及びCr成分(赤色差成分)603から成る画像データ600に変換する。   FIG. 3 is a diagram showing the configuration of the codec 35. As shown in FIG. 3, the codec 35 includes a color space conversion unit 350 and a compression unit 351. The color space conversion unit 350 converts the color space of the image data 520 from RGB to YCbCr. Specifically, the color space conversion unit 350 converts the image data 520 including the R component 521, the G component 522, and the B component 523 into a Y component (luminance component) 601, a Cb component (blue difference component) 602, and Cr. It is converted into image data 600 composed of a component (red difference component) 603.

圧縮部351は、画像データ600を圧縮し、圧縮後画像データ610として出力する。圧縮部351は、画像データ600を、JPEG(Joint Photographic Experts Group)等の静止画像圧縮方式、あるいはH.264等の動画圧縮方式を用いて圧縮する。圧縮部351は、Y圧縮部352、Cb圧縮部353及びCr圧縮部354を備えている。Y圧縮部352は、画像データ600のY成分601を圧縮して、圧縮後Y成分611として出力する。Cb圧縮部353は、画像データ600のCb成分602を圧縮して、圧縮後Cb成分612として出力する。Cr圧縮部354は、画像データ600のCr成分603を圧縮して、圧縮後Cr成分613として出力する。これにより、コーデック35では、圧縮後Y成分611、圧縮後Cb成分612及び圧縮後Cr成分613から成る圧縮後画像データ610が得られる。Y圧縮部352、Cb圧縮部353及びCr圧縮部354のそれぞれは、例えば、DCT(Discrete Cosine Transform)を行うDCT処理部、量子化処理を行う量子化処理部及び可変長符号化処理を行う可変長符号化処理部で構成されている。   The compression unit 351 compresses the image data 600 and outputs the compressed image data 610. The compression unit 351 converts the image data 600 into a still image compression method such as JPEG (Joint Photographic Experts Group) or H.264. Compress using a moving image compression method such as H.264. The compression unit 351 includes a Y compression unit 352, a Cb compression unit 353, and a Cr compression unit 354. The Y compression unit 352 compresses the Y component 601 of the image data 600 and outputs the compressed Y component 611. The Cb compression unit 353 compresses the Cb component 602 of the image data 600 and outputs the compressed Cb component 612. The Cr compression unit 354 compresses the Cr component 603 of the image data 600 and outputs the compressed Cr component 613. As a result, the codec 35 obtains post-compression image data 610 including a post-compression Y component 611, a post-compression Cb component 612, and a post-compression Cr component 613. Each of the Y compression unit 352, the Cb compression unit 353, and the Cr compression unit 354 includes, for example, a DCT processing unit that performs DCT (Discrete Cosine Transform), a quantization processing unit that performs quantization processing, and a variable that performs variable length coding processing. It consists of a long encoding processing unit.

コーデック35は、圧縮部351で生成された圧縮後画像データ610を制御部36に出力する。またコーデック35は、色空間変換部350で生成されたY成分601を、画像データ600が示す画像についての輝度情報として制御部36に出力する。Y成分601は、画像データ510,520及び圧縮後画像データ620が示す画像についての輝度情報であると言える。   The codec 35 outputs the compressed image data 610 generated by the compression unit 351 to the control unit 36. Further, the codec 35 outputs the Y component 601 generated by the color space conversion unit 350 to the control unit 36 as luminance information about the image indicated by the image data 600. It can be said that the Y component 601 is luminance information about the images indicated by the image data 510 and 520 and the compressed image data 620.

制御部36は、CPU(Central Processing Unit)360及び記憶部361を備えており、監視カメラ装置1の動作を統括的に管理する。記憶部361は、ROM(Read Only Memory)及びRAM(Random Access Memory)等で構成されている。記憶部361には、監視カメラ装置1の動作を制御するための制御プログラム362等が記憶されている。制御部36の各種機能は、CPU360が記憶部361内の制御プログラム362を実行することによって実現される。制御部36では、制御プログラム362が実行されることによって、複数の機能ブロックが形成される。図4は、制御部36に形成される複数の機能ブロックの一部を示す図である。   The control unit 36 includes a CPU (Central Processing Unit) 360 and a storage unit 361, and comprehensively manages the operation of the monitoring camera device 1. The storage unit 361 includes a ROM (Read Only Memory) and a RAM (Random Access Memory). The storage unit 361 stores a control program 362 for controlling the operation of the monitoring camera device 1 and the like. Various functions of the control unit 36 are realized by the CPU 360 executing the control program 362 in the storage unit 361. In the control unit 36, a plurality of functional blocks are formed by executing the control program 362. FIG. 4 is a diagram illustrating a part of a plurality of functional blocks formed in the control unit 36.

図4に示されるように、制御部36は、機能ブロックとして、圧縮制御部365と、ゲイン制御部366及び絞り制御部367から成る輝度制御部368と、輝度取得部369とを備えている。   As illustrated in FIG. 4, the control unit 36 includes a compression control unit 365, a luminance control unit 368 including a gain control unit 366 and an aperture control unit 367, and a luminance acquisition unit 369 as functional blocks.

圧縮制御部365は、コーデック35の圧縮部351を制御する。具体的には、圧縮制御部365は、圧縮部351の動作を停止したり、圧縮部351の動作を再開したりする。   The compression control unit 365 controls the compression unit 351 of the codec 35. Specifically, the compression control unit 365 stops the operation of the compression unit 351 or restarts the operation of the compression unit 351.

輝度制御部368は、圧縮部351で圧縮される画像データ600が示す画像(画像データ510,520が示す画像)の輝度が目標輝度に近づくように当該輝度を制御する。輝度制御部368では、ゲイン制御部366が、AGCアンプ33のゲインを制御することによって、画像データ600が示す画像の輝度を制御する。ゲイン制御部366は、AGCアンプ33のゲインを制御するためのゲイン制御信号410を生成してAGCアンプ33に出力する。また、輝度制御部368では、絞り制御部367が、レンズ2の絞り20を制御することによって、画像データ600が示す画像の輝度を制御する。絞り制御部367は、レンズ2の絞り20を制御するための絞り制御信号400を生成してコネクタ30に出力する。   The luminance control unit 368 controls the luminance so that the luminance of the image (images indicated by the image data 510 and 520) indicated by the image data 600 compressed by the compression unit 351 approaches the target luminance. In the luminance control unit 368, the gain control unit 366 controls the luminance of the image indicated by the image data 600 by controlling the gain of the AGC amplifier 33. The gain control unit 366 generates a gain control signal 410 for controlling the gain of the AGC amplifier 33 and outputs the gain control signal 410 to the AGC amplifier 33. In the brightness control unit 368, the aperture control unit 367 controls the brightness of the image indicated by the image data 600 by controlling the aperture 20 of the lens 2. The diaphragm control unit 367 generates a diaphragm control signal 400 for controlling the diaphragm 20 of the lens 2 and outputs it to the connector 30.

輝度取得部369は、コーデック35から輝度情報として出力される、画像データ600のY成分601に基づいて、画像データ600が示す画像、つまり輝度制御部368によって輝度が制御された画像の輝度を求める。具体的には、輝度取得部369は、例えば、画像データ600が示す1枚の画像の中心部に含まれる複数の画素の平均輝度をY成分601に基づいて算出する。そして、輝度取得部369は、求めた平均輝度を、画像データ600が示す画像の輝度とする。   The luminance acquisition unit 369 obtains the luminance of the image indicated by the image data 600, that is, the image whose luminance is controlled by the luminance control unit 368, based on the Y component 601 of the image data 600 output from the codec 35 as luminance information. . Specifically, the luminance acquisition unit 369 calculates, for example, the average luminance of a plurality of pixels included in the central portion of one image indicated by the image data 600 based on the Y component 601. Then, the luminance acquisition unit 369 sets the obtained average luminance as the luminance of the image indicated by the image data 600.

ネットワーク通信部37は、LAN(Local Area Network)あるいはインターネットなどのネットワークに接続されている。ネットワーク通信部37は、制御部36から出力される圧縮後画像データ610をネットワークに出力する。ネットワークに出力された圧縮後画像データ610は、当該ネットワークに接続された、セキュリティ会社等の管理コンピュータに入力される。管理コンピュータは、入力された圧縮後画像データ610を、ハードディスク等のストレージデバイスに保存する。そして、管理コンピュータは、ストレージデバイスから圧縮後画像データ610を読み出して伸張し、それによって得られた画像データに基づいて当該画像データが示す画像をディスプレイに表示する。これにより、管理コンピュータの使用者は、本実施の形態に係る監視カメラ装置1で撮像された画像を視覚で確認することができる。   The network communication unit 37 is connected to a network such as a LAN (Local Area Network) or the Internet. The network communication unit 37 outputs the compressed image data 610 output from the control unit 36 to the network. The compressed image data 610 output to the network is input to a management computer such as a security company connected to the network. The management computer stores the input compressed image data 610 in a storage device such as a hard disk. Then, the management computer reads the compressed image data 610 from the storage device, expands it, and displays the image indicated by the image data on the display based on the image data obtained thereby. Thereby, the user of the management computer can visually confirm the image captured by the monitoring camera device 1 according to the present embodiment.

<輝度調整処理について>
本実施の形態に係る監視カメラ装置1は、レンズ2の絞り20及びAGCアンプ33のゲインを制御することによって、画像データ600が示す画像の輝度(明るさ)を調整する輝度調整処理を行う。この輝度調整処理により、画像データ600が示す、撮像部32での撮像画像の輝度(明るさ)が不適切であるために、当該撮像画像中に含まれる、不審者等の監視対象物の画像が特定されにくくなることが抑制される。そして、本実施の形態に係る監視カメラ装置1は、画像データ600が示す画像の輝度を調整したにもかかわらず、当該画像が暗すぎたり明るすぎたりする場合には、圧縮部351の動作を停止する。これにより、その中に含まれる不審者等の監視対象物の画像を特定することが困難である、暗すぎる画像や明るすぎる画像、つまり、監視カメラ装置1においては不要な画像に対して圧縮処理が行われることを抑制することができる。よって、無駄な圧縮処理が行われることが抑制され、監視カメラ装置1の消費電力を低減することができる。以下に、監視カメラ装置1での輝度調整処理について詳細に説明する。
<About brightness adjustment processing>
The surveillance camera device 1 according to the present embodiment performs luminance adjustment processing for adjusting the luminance (brightness) of the image indicated by the image data 600 by controlling the gain of the diaphragm 20 and the AGC amplifier 33 of the lens 2. Due to the brightness adjustment processing, the brightness (brightness) of the image captured by the image capturing unit 32 indicated by the image data 600 is inappropriate, and thus an image of a monitoring target such as a suspicious person included in the captured image. Is less likely to be specified. The surveillance camera device 1 according to the present embodiment performs the operation of the compression unit 351 when the brightness of the image indicated by the image data 600 is adjusted but the image is too dark or too bright. Stop. Thereby, it is difficult to specify an image of a monitoring object such as a suspicious person included therein, an image that is too dark or too bright, that is, an image that is unnecessary in the monitoring camera device 1 is compressed. Can be suppressed. Therefore, useless compression processing is suppressed, and the power consumption of the monitoring camera device 1 can be reduced. Hereinafter, the brightness adjustment processing in the monitoring camera device 1 will be described in detail.

図5,6は監視カメラ装置1での輝度調整処理を示すフローチャートである。図5,6に示される輝度調整処理は定期的に、例えば0.5秒ごとに行われる。   5 and 6 are flowcharts showing the brightness adjustment processing in the monitoring camera device 1. The brightness adjustment process shown in FIGS. 5 and 6 is performed periodically, for example, every 0.5 seconds.

図5に示されるように、ステップs1において、輝度取得部369は、上述のようにして、画像データ600が示す画像の輝度を求める。以後、輝度取得部369で求められた画像の輝度を「取得輝度」と呼ぶ。   As shown in FIG. 5, in step s1, the luminance acquisition unit 369 obtains the luminance of the image indicated by the image data 600 as described above. Hereinafter, the luminance of the image obtained by the luminance acquisition unit 369 is referred to as “acquired luminance”.

次にステップs2において、輝度制御部368は、ステップs1での取得輝度と目標輝度との関係を求める。輝度制御部368は、取得輝度と目標輝度との差の絶対値が所定値以下である場合には、取得輝度と目標輝度とがほぼ同じであると判断する。ステップs2において、取得輝度と目標輝度とがほぼ同じであると判断されると、監視カメラ装置1は、画像データ600が示す画像の輝度(明るさ)は適切であるとして、輝度調整処理を終了する。このとき、圧縮部351の動作が停止している際には、圧縮制御部365は圧縮部351を動作させる。   Next, in step s2, the luminance control unit 368 obtains a relationship between the acquired luminance and the target luminance in step s1. The luminance control unit 368 determines that the acquired luminance and the target luminance are substantially the same when the absolute value of the difference between the acquired luminance and the target luminance is equal to or less than a predetermined value. If it is determined in step s2 that the acquired brightness and the target brightness are substantially the same, the monitoring camera apparatus 1 ends the brightness adjustment process, assuming that the brightness (brightness) of the image indicated by the image data 600 is appropriate. To do. At this time, when the operation of the compression unit 351 is stopped, the compression control unit 365 operates the compression unit 351.

また、輝度制御部368が、取得輝度と目標輝度との差の絶対値が所定値よりも大きく、かつ取得輝度が目標輝度より小さいと判断すると、監視カメラ装置1では、ステップs3以降が実行されて、画像データ600が示す画像の輝度を大きくしようとする処理が行われる。一方で、輝度制御部368が、取得輝度と目標輝度との差の絶対値が所定値よりも大きく、かつ取得輝度が目標輝度より大きいと判断すると、監視カメラ装置1では、図6に示されるステップs10以降が実行されて、画像データ600が示す画像の輝度を小さくしようとする処理が行われる。   When the luminance control unit 368 determines that the absolute value of the difference between the acquired luminance and the target luminance is larger than a predetermined value and the acquired luminance is smaller than the target luminance, the monitoring camera device 1 executes step s3 and subsequent steps. Thus, processing for increasing the brightness of the image indicated by the image data 600 is performed. On the other hand, when the luminance control unit 368 determines that the absolute value of the difference between the acquired luminance and the target luminance is larger than the predetermined value and the acquired luminance is larger than the target luminance, the surveillance camera device 1 is shown in FIG. Steps s10 and subsequent steps are executed, and processing for reducing the luminance of the image indicated by the image data 600 is performed.

ステップs3では、絞り制御部367が、レンズ2の絞り20を所定量だけ開くことができるかを判断する。絞り制御部367は、絞り20を所定量だけ開くことができる場合には、絞り制御信号400を変化させて絞り20を所定量だけ開く。これにより、画像データ600が示す画像の輝度が大きくなる。   In step s3, the aperture control unit 367 determines whether the aperture 20 of the lens 2 can be opened by a predetermined amount. If the diaphragm 20 can open the diaphragm 20 by a predetermined amount, the diaphragm controller 367 changes the diaphragm control signal 400 to open the diaphragm 20 by a predetermined amount. Thereby, the brightness of the image indicated by the image data 600 is increased.

一方で、レンズ2の絞りが全開しており、絞り制御部367が、レンズ2の絞り20を所定量だけ開くことができないと判断すると、ステップs5において、ゲイン制御部366はAGCアンプ33のゲインを所定量だけ大きくすることができるか判断する。ゲイン制御部366は、AGCアンプ33のゲインを所定量だけ大きくすることができる場合には、ゲイン制御信号410を変化させて当該ゲインを所定量だけ大きくする。これにより、画像データ600が示す画像の輝度が大きくなる。   On the other hand, when the aperture of the lens 2 is fully opened and the aperture controller 367 determines that the aperture 20 of the lens 2 cannot be opened by a predetermined amount, the gain controller 366 determines the gain of the AGC amplifier 33 in step s5. Is determined to be increased by a predetermined amount. When the gain of the AGC amplifier 33 can be increased by a predetermined amount, the gain control unit 366 changes the gain control signal 410 to increase the gain by a predetermined amount. Thereby, the brightness of the image indicated by the image data 600 is increased.

ステップs4が実行されて、絞り20が所定量だけ開くと、ステップs1が再度実行されて、絞り20が所定量だけ開いた後に撮像部32で撮像された画像に基づく画像データ600が示す画像の輝度が求められる。以後、同様の処理が行われる。同様に、ステップs6が実行されて、AGCアンプ33のゲインが所定量だけ大きくなると、ステップs1が再度実行されて、AGCアンプ33のゲインが所定量だけ大きくなった後に撮像部32で撮像された画像に基づく画像データ600が示す画像の輝度が求められる。以後、同様の処理が行われる。   When step s4 is performed and the diaphragm 20 is opened by a predetermined amount, step s1 is performed again, and the image data 600 based on the image captured by the imaging unit 32 after the diaphragm 20 is opened by the predetermined amount is displayed. Luminance is required. Thereafter, the same processing is performed. Similarly, when step s6 is executed and the gain of the AGC amplifier 33 is increased by a predetermined amount, step s1 is executed again, and the image is captured by the imaging unit 32 after the gain of the AGC amplifier 33 is increased by a predetermined amount. The brightness of the image indicated by the image data 600 based on the image is obtained. Thereafter, the same processing is performed.

このように、本実施の形態に係る監視カメラ装置1では、取得輝度が目標輝度から離れている場合には、まず機械的な絞り20が制御されて、取得輝度を目標輝度に近づける制御が行われる。これにより、画像データ600が示す画像の輝度を大きくしたとしても、当該画像データ600に含まれるホワイトノイズが増加することを抑制することができる。そして、絞り20を制御しても取得輝度が目標輝度から離れている場合には、AGCアンプ33のゲインが制御されて、取得輝度を目標輝度に近づける制御が行われる。   As described above, in the monitoring camera device 1 according to the present embodiment, when the acquired luminance is away from the target luminance, the mechanical aperture 20 is first controlled to control the acquired luminance to be close to the target luminance. Is called. Thereby, even if the luminance of the image indicated by the image data 600 is increased, it is possible to suppress an increase in white noise included in the image data 600. If the acquired luminance is far from the target luminance even when the diaphragm 20 is controlled, the gain of the AGC amplifier 33 is controlled to control the acquired luminance close to the target luminance.

ステップs5において、AGCアンプ33のゲインが最大であり、ゲイン制御部366が、当該ゲインを所定量だけ大きくすることができないと判断すると、ステップs7が実行される。ステップs7では、圧縮制御部365が、ステップs1での取得輝度が、目標輝度値よりも小さい第1基準値よりも小さいかどうかを判断する。本実施の形態では、第1基準値は、例えば目標輝度の50%に設定されている。圧縮制御部365が、取得輝度が第1基準値以上であると判断すると、監視カメラ装置1は輝度調整処理を終了する。一方で、圧縮制御部365は、取得輝度が第1基準値よりも小さい場合には、撮像部32では非常に暗い画像が撮像されると判断して、圧縮部351の動作を停止する。圧縮制御部365は、例えば、圧縮部351に対して画像データ600が入力されないようにすることによって圧縮部351の動作を停止する。あるいは、圧縮制御部365は、圧縮部351への電源供給を停止することによって圧縮部351の動作を停止する。圧縮部351の動作が停止している間においては、圧縮部351からは圧縮後画像データ610は出力されない。したがって、圧縮部351の動作が停止している間では、監視カメラ装置1からネットワークに対して圧縮後画像データ610が出力されない。   In step s5, when the gain of the AGC amplifier 33 is the maximum and the gain control unit 366 determines that the gain cannot be increased by a predetermined amount, step s7 is executed. In step s7, the compression control unit 365 determines whether the acquired luminance in step s1 is smaller than a first reference value that is smaller than the target luminance value. In the present embodiment, the first reference value is set to 50% of the target luminance, for example. When the compression control unit 365 determines that the acquired luminance is equal to or higher than the first reference value, the monitoring camera device 1 ends the luminance adjustment process. On the other hand, when the acquired luminance is smaller than the first reference value, the compression control unit 365 determines that the imaging unit 32 captures a very dark image and stops the operation of the compression unit 351. For example, the compression control unit 365 stops the operation of the compression unit 351 by preventing the image data 600 from being input to the compression unit 351. Alternatively, the compression control unit 365 stops the operation of the compression unit 351 by stopping the power supply to the compression unit 351. The compressed image data 610 is not output from the compression unit 351 while the operation of the compression unit 351 is stopped. Accordingly, the compressed image data 610 is not output from the monitoring camera device 1 to the network while the operation of the compression unit 351 is stopped.

監視カメラ装置1では、監視エリア(撮像エリア)が非常に暗い場合には、撮像部32では非常に暗い画像が撮像される。この場合には、ステップs8が実行されて、圧縮部351の動作が停止する。また、本実施の形態では、レンズ2のコネクタ22がカメラ部3のコネクタ30から外れたり、電線21が断線したりすることによって、レンズ2の絞り20に対してカメラ部3からの絞り制御信号400が入力されない場合には、絞り20が完全に閉じるようになっている。したがって、この場合にも、撮像部32では非常に暗い画像(真っ暗な画像)が撮像される。よって、ステップs8が実行されて、圧縮部351の動作が停止する。また、絞り20が故障することによって、絞り20が閉じた状態や、ほんの少ししか開かない状態の場合にも、撮像部32では非常に暗い画像が撮像される。この場合にも、ステップs8が実行されて、圧縮部351の動作が停止する。   In the monitoring camera device 1, when the monitoring area (imaging area) is very dark, the imaging unit 32 captures a very dark image. In this case, step s8 is executed and the operation of the compression unit 351 is stopped. Further, in the present embodiment, when the connector 22 of the lens 2 is disconnected from the connector 30 of the camera unit 3 or the electric wire 21 is disconnected, an aperture control signal from the camera unit 3 is transmitted to the aperture 20 of the lens 2. When 400 is not input, the diaphragm 20 is completely closed. Therefore, also in this case, the imaging unit 32 captures a very dark image (a completely dark image). Therefore, step s8 is executed and the operation of the compression unit 351 stops. Further, even when the diaphragm 20 is closed or opened only slightly due to a failure of the diaphragm 20, the imaging unit 32 captures a very dark image. Also in this case, step s8 is executed and the operation of the compression unit 351 is stopped.

なお、監視カメラ装置1は、ステップs1での取得輝度が第1基準値よりも大きい場合に輝度調整処理を終了し、ステップs1での取得輝度が第1基準値以下の場合に圧縮部351の動作を停止してよい。つまり、監視カメラ装置1は、ステップs1での取得輝度が第1基準値と一致する場合には、輝度調整処理を終了してもよいし、圧縮部351の動作を停止してもよい。   Note that the monitoring camera device 1 ends the luminance adjustment process when the acquired luminance at step s1 is larger than the first reference value, and when the acquired luminance at step s1 is less than or equal to the first reference value, the monitoring unit 351 Operation may be stopped. That is, the monitoring camera device 1 may end the luminance adjustment process or stop the operation of the compression unit 351 when the acquired luminance in step s1 matches the first reference value.

このように、本実施の形態では、圧縮制御部365は、取得輝度が第1基準値よりも小さい場合には圧縮部351の動作を停止している。したがって、圧縮部351において、暗すぎる不要な画像を示す画像データ600に対して圧縮処理が行われることを抑制することができる。よって、不要な圧縮処理が行われることが抑制され、監視カメラ装置1の消費電力が低減する。   Thus, in the present embodiment, the compression control unit 365 stops the operation of the compression unit 351 when the acquired luminance is smaller than the first reference value. Therefore, the compression unit 351 can suppress the compression process from being performed on the image data 600 indicating an unnecessary image that is too dark. Therefore, unnecessary compression processing is suppressed, and the power consumption of the monitoring camera device 1 is reduced.

また、本実施の形態では、画像データ600が示す画像は、画像データ510が示す画像、つまりAGCアンプ33によって増幅された画像データ500が示す画像と同じであることから、圧縮制御部365は、AGCアンプ33によって、それが示す画像の輝度が目標輝度に近づくように増幅された画像データ500が示す画像の輝度が第1基準値よりも小さいときには、圧縮部351の動作を停止していると言える。つまり、圧縮制御部365は、AGCアンプ33によって、それが示す画像の輝度が目標輝度に近づくように増幅されたにもかかわらず、当該輝度が非常に小さい画像データ500、つまり撮像部32で撮像された時点で非常に暗い画像(例えば真っ暗な画像)を示す画像データ500が圧縮部351で圧縮されないようにしている。   In the present embodiment, the image indicated by the image data 600 is the same as the image indicated by the image data 510, that is, the image indicated by the image data 500 amplified by the AGC amplifier 33. When the luminance of the image indicated by the image data 500 amplified so that the luminance of the image indicated by the AGC amplifier 33 approaches the target luminance is smaller than the first reference value, the operation of the compression unit 351 is stopped. I can say that. In other words, the compression control unit 365 captures the image data 500 with the very small luminance, that is, the imaging unit 32 even though the luminance of the image indicated by the AGC amplifier 33 is amplified so as to approach the target luminance. At this time, the image data 500 indicating a very dark image (for example, a completely dark image) is not compressed by the compression unit 351.

ここで、撮像部32で撮像された時点で非常に暗い画像を示す画像データ500については圧縮部351での圧縮効率が悪くなる。AGCアンプ33によって、非常に暗い画像を示す画像データ500が、その非常に暗い画像の輝度が目標輝度に近づくように増幅されると、当該画像データ500に含まれるノイズ成分(ホワイトノイズ)が大きく増幅されることから、AGCアンプ33で増幅された後の当該画像データ500が示す画像は、輝度が大きい画素がランダムに存在する画像(いわゆる「砂嵐画像」)となる。このような画像を示す画像データを圧縮する際には圧縮効率が悪くなる。圧縮効率が悪い画像データを圧縮部351が圧縮する際には、当該画像データに対する圧縮処理が完了するまでの時間が長くなって、圧縮部351の消費電力が大きくなる。   Here, the compression efficiency of the compression unit 351 deteriorates for the image data 500 indicating a very dark image at the time when the image is captured by the imaging unit 32. When the image data 500 indicating a very dark image is amplified by the AGC amplifier 33 so that the brightness of the very dark image approaches the target brightness, the noise component (white noise) included in the image data 500 increases. Since the image data 500 is amplified by the AGC amplifier 33, the image indicated by the image data 500 is an image in which pixels with high luminance are randomly present (so-called “sandstorm image”). When the image data indicating such an image is compressed, the compression efficiency is deteriorated. When the compression unit 351 compresses image data with poor compression efficiency, the time until the compression process for the image data is completed becomes longer, and the power consumption of the compression unit 351 increases.

本実施の形態では、撮像部32で撮像された時点で非常に暗い画像を示す画像データ500が圧縮部351で圧縮されないようにされていることから、圧縮部351の消費電力をさらに低減することができる。よって、監視カメラ装置1の消費電力をさらに低減することができる。   In the present embodiment, since the image data 500 indicating a very dark image at the time when the image is captured by the imaging unit 32 is not compressed by the compression unit 351, the power consumption of the compression unit 351 is further reduced. Can do. Therefore, the power consumption of the monitoring camera device 1 can be further reduced.

上述のステップs2において、取得輝度と目標輝度との差の絶対値が所定値よりも大きく、かつ取得輝度が目標輝度より大きいと判断されると、図6に示されるように、ステップs10において、絞り制御部367が、レンズ2の絞り20を所定量だけ閉じることができるかを判断する。絞り制御部367は、絞り20を所定量だけ閉じることができる場合には、絞り制御信号400を変化させて絞り20を所定量だけ閉じる。これにより、画像データ600が示す画像の輝度が小さくなる。   If it is determined in step s2 that the absolute value of the difference between the acquired luminance and the target luminance is larger than a predetermined value and the acquired luminance is larger than the target luminance, as shown in FIG. The aperture control unit 367 determines whether the aperture 20 of the lens 2 can be closed by a predetermined amount. If the diaphragm 20 can be closed by a predetermined amount, the diaphragm controller 367 changes the diaphragm control signal 400 to close the diaphragm 20 by a predetermined amount. Thereby, the brightness of the image indicated by the image data 600 is reduced.

一方で、レンズ2の絞りがこれ以上閉じることができない状態まで閉じており、絞り制御部367が、レンズ2の絞り20を所定量だけ閉じることができないと判断すると、ステップs12において、ゲイン制御部366はAGCアンプ33のゲインを所定量だけ小さくできるか判断する。ゲイン制御部366は、AGCアンプ33のゲインを所定量だけ小さくすることができる場合には、ゲイン制御信号410を変化させて当該ゲインを所定量だけ小さくする。これにより、画像データ600が示す画像の輝度が小さくなる。   On the other hand, if the aperture of the lens 2 is closed until it cannot be closed any more, and the aperture controller 367 determines that the aperture 20 of the lens 2 cannot be closed by a predetermined amount, in step s12, the gain controller A step 366 determines whether the gain of the AGC amplifier 33 can be reduced by a predetermined amount. When the gain of the AGC amplifier 33 can be reduced by a predetermined amount, the gain control unit 366 changes the gain control signal 410 to reduce the gain by a predetermined amount. Thereby, the brightness of the image indicated by the image data 600 is reduced.

ステップs11が実行されて絞り20が所定量だけ閉じると、ステップs1が再度実行されて、絞り20が所定量だけ閉じた後に撮像部32で撮像された画像に基づく画像データ600が示す画像の輝度が求められる。以後、同様の処理が行われる。同様に、ステップs13が実行されてAGCアンプ33のゲインが所定量だけ小さくなると、ステップs1が再度実行されて、AGCアンプ33のゲインが所定量だけ小さくなった後に撮像部32で撮像された画像に基づく画像データ600が示す画像の輝度が求められる。以後、同様の処理が行われる。   When step s11 is executed and the diaphragm 20 is closed by a predetermined amount, step s1 is executed again, and the brightness of the image indicated by the image data 600 based on the image captured by the imaging unit 32 after the diaphragm 20 is closed by the predetermined amount. Is required. Thereafter, the same processing is performed. Similarly, when step s13 is executed and the gain of the AGC amplifier 33 is reduced by a predetermined amount, step s1 is executed again and the image captured by the imaging unit 32 after the gain of the AGC amplifier 33 is reduced by a predetermined amount. The luminance of the image indicated by the image data 600 based on the above is obtained. Thereafter, the same processing is performed.

ステップs12において、AGCアンプ33のゲインが最小であり、ゲイン制御部366が、当該ゲインを所定量だけ小さくすることができないと判断すると、ステップs14が実行される。   In step s12, when the gain of the AGC amplifier 33 is minimum and the gain control unit 366 determines that the gain cannot be reduced by a predetermined amount, step s14 is executed.

ステップs14では、圧縮制御部365が、ステップs1での取得輝度が、第1基準値よりも大きい第2基準値よりも大きいかどうかを判断する。本実施の形態では、第2基準値は、例えば目標輝度の200%に設定されている。圧縮制御部365が、取得輝度が第2基準値以下であると判断すると、監視カメラ装置1は輝度調整処理を終了する。一方で、圧縮制御部365は、取得輝度が第2基準値よりも大きい場合には、撮像部32では非常に明るい画像が撮像されると判断して、圧縮部351の動作を停止する。監視カメラ装置1では、例えば、レンズ2がカメラ部3に接続されていない場合には、撮像部32では真っ白な画像が撮像される。したがって、この場合にはステップs15が実行され、圧縮部351の動作は停止する。   In step s14, the compression control unit 365 determines whether the acquired luminance in step s1 is greater than a second reference value that is greater than the first reference value. In the present embodiment, the second reference value is set to 200% of the target luminance, for example. When the compression control unit 365 determines that the acquired luminance is equal to or less than the second reference value, the monitoring camera device 1 ends the luminance adjustment process. On the other hand, when the acquired luminance is larger than the second reference value, the compression control unit 365 determines that a very bright image is captured by the imaging unit 32 and stops the operation of the compression unit 351. In the monitoring camera device 1, for example, when the lens 2 is not connected to the camera unit 3, a pure white image is captured by the imaging unit 32. Accordingly, in this case, step s15 is executed, and the operation of the compression unit 351 is stopped.

なお、監視カメラ装置1は、ステップs1での取得輝度が第2基準値以上の場合に輝度調整処理を終了し、ステップs1での取得輝度が第2基準値よりも小さい場合に圧縮部351の動作を停止してもよい。つまり、監視カメラ装置1は、ステップs1での取得輝度が第2基準値と一致する場合には、輝度調整処理を終了してもよいし、圧縮部351の動作を停止してもよい。   Note that the monitoring camera device 1 ends the luminance adjustment process when the acquired luminance at step s1 is equal to or higher than the second reference value, and when the acquired luminance at step s1 is smaller than the second reference value, the monitoring unit 351 The operation may be stopped. That is, the monitoring camera device 1 may end the brightness adjustment process or stop the operation of the compression unit 351 when the acquired brightness in step s1 matches the second reference value.

このように、本実施の形態では、圧縮制御部365は、取得輝度が、第1基準値よりも大きい第2基準値よりも大きい場合には圧縮部351の動作を停止している。したがって、圧縮部351において、明るすぎる不要な画像を示す画像データ600に対して圧縮処理が行われることを抑制することができる。よって、不要な圧縮処理が行われることが抑制され、監視カメラ装置1の消費電力が低減する。   As described above, in the present embodiment, the compression control unit 365 stops the operation of the compression unit 351 when the acquired luminance is larger than the second reference value that is larger than the first reference value. Therefore, the compression unit 351 can suppress the compression process from being performed on the image data 600 indicating an unnecessary image that is too bright. Therefore, unnecessary compression processing is suppressed, and the power consumption of the monitoring camera device 1 is reduced.

上記の例では、監視カメラ装置1は、暗すぎる画像を示す画像データ600及び明るすぎる画像を示す画像データ600に対して圧縮処理を行っていなかったが、それらのうち、暗すぎる画像を示す画像データ600だけ圧縮処理を行わなくてもよい。つまり、監視カメラ装置1は、明るすぎる画像を示す画像データ600に対して圧縮処理を行ってもよい。この場合には、上述のステップs12において、AGCアンプ33のゲインを所定量だけ小さくすることができないと判断されると、輝度調整処理が終了する。   In the above example, the surveillance camera device 1 did not perform compression processing on the image data 600 indicating an image that is too dark and the image data 600 that indicates an image that is too bright. Only the data 600 need not be compressed. That is, the monitoring camera device 1 may perform compression processing on the image data 600 that indicates an image that is too bright. In this case, if it is determined in step s12 described above that the gain of the AGC amplifier 33 cannot be reduced by a predetermined amount, the luminance adjustment process ends.

また上記の例では、第1基準値は、目標輝度の50%に設定されていたが、他の値に設定されてもよい。また第2基準値は、目標輝度の200%に設定されていたが、他の値に設定されてもよい。   In the above example, the first reference value is set to 50% of the target luminance, but may be set to another value. The second reference value is set to 200% of the target luminance, but may be set to another value.

<変形例>
本変形例に係る監視カメラ装置1は、動作モードとして、カラー画像を撮像するカラーモードと、白黒画像を撮像する白黒モードとを有している。監視カメラ装置1がカラーモードで動作する場合には、上述の図2に示されるように、カラーフィルタ31がレンズ2と撮像部32の撮像面との間に位置するようになる。一方で、監視カメラ装置1が白黒モードで動作する場合には、図7に示されるように、カラーフィルタ31は、レンズ2と撮像部32の撮像面との間に位置しないようになる。よって、白黒モードでは、撮像部32は、レンズ2だけを介して画像を撮像する。本変形例では、カラーフィルタ31は、制御部36による制御によって移動することが可能となっている。
<Modification>
The surveillance camera device 1 according to this modification has a color mode for capturing a color image and a monochrome mode for capturing a monochrome image as operation modes. When the surveillance camera device 1 operates in the color mode, the color filter 31 is positioned between the lens 2 and the imaging surface of the imaging unit 32 as shown in FIG. On the other hand, when the monitoring camera device 1 operates in the monochrome mode, the color filter 31 is not positioned between the lens 2 and the imaging surface of the imaging unit 32 as shown in FIG. Therefore, in the monochrome mode, the imaging unit 32 captures an image only through the lens 2. In this modification, the color filter 31 can be moved under the control of the control unit 36.

このように、白黒モードでは、レンズ2と撮像部32の撮像面との間にカラーフィルタ31が存在しないことから、監視カメラ装置1の撮像感度が向上する。よって、監視エリアが暗い場合であっても、本変形例に係る監視カメラ装置1は鮮明な画像を撮像することができる。   Thus, in the black and white mode, the color filter 31 does not exist between the lens 2 and the imaging surface of the imaging unit 32, so that the imaging sensitivity of the monitoring camera device 1 is improved. Therefore, even if the monitoring area is dark, the monitoring camera device 1 according to this modification can capture a clear image.

本変形例に係る監視カメラ装置1は、いわゆるデイナイト機能を有しており、監視エリアが明るい場合にはカラーモードで動作し、監視エリアが暗い場合には撮像感度を上げるために白黒モードで動作する。   The surveillance camera device 1 according to this modification has a so-called day / night function, and operates in the color mode when the monitoring area is bright, and operates in the monochrome mode to increase the imaging sensitivity when the monitoring area is dark. To do.

本変形例に係る監視カメラ装置1では、制御部36は、画像データ600が示す画像の輝度を上述のようにして求める。そして、制御部36は、求めた輝度が所定値よりも大きければ、監視カメラ装置1の監視エリアは明るいと判断して(昼間であると判断して)、カラーフィルタ31をレンズ2と撮像部32との間に位置するようにして、監視カメラ装置1の動作モードをカラーモードに設定する。一方で、制御部36は、求めた輝度が所定値よりも小さければ、監視エリアは暗いと判断して(夜間であると判断して)、カラーフィルタ31をレンズ2と撮像部32との間に位置しないようにして、監視カメラ装置1の動作モードを白黒モードに設定する。なお、制御部36は、求めた輝度が所定値と一致する場合には、監視カメラ装置1の動作モードを、カラーモード及び白黒モードのどちらに設定してもよい。   In the surveillance camera device 1 according to this modification, the control unit 36 obtains the luminance of the image indicated by the image data 600 as described above. Then, if the calculated luminance is greater than the predetermined value, the control unit 36 determines that the monitoring area of the monitoring camera device 1 is bright (determines that it is daytime), and replaces the color filter 31 with the lens 2 and the imaging unit. The operation mode of the monitoring camera device 1 is set to the color mode. On the other hand, if the calculated luminance is smaller than the predetermined value, the control unit 36 determines that the monitoring area is dark (determines that it is nighttime), and moves the color filter 31 between the lens 2 and the imaging unit 32. The operation mode of the surveillance camera device 1 is set to the monochrome mode. Note that the control unit 36 may set the operation mode of the monitoring camera device 1 to either the color mode or the black and white mode when the obtained luminance matches a predetermined value.

また、本変形例に係る監視カメラ装置1では、圧縮部351が動作している場合に、監視カメラ装置1の動作モードが白黒モードになると、圧縮制御部365は、画像データ600の色差成分を圧縮する圧縮部の動作を停止する。つまり、圧縮部351が動作している場合に、監視カメラ装置1の動作モードが白黒モードになると、圧縮制御部365は、白黒画像では不要なCb圧縮部353及びCr圧縮部354の動作を停止する。圧縮制御部365は、例えば、Cb圧縮部353及びCr圧縮部354に対して画像データ600のCb成分602及びCr成分603がそれぞれ入力されないようにすることによってCb圧縮部353及びCr圧縮部354の動作を停止する。あるいは、圧縮制御部365はCb圧縮部353及びCr圧縮部354への電源供給を停止することによってCb圧縮部353及びCr圧縮部354の動作を停止する。Cb圧縮部353及びCr圧縮部354の動作が停止している間においては、圧縮部351からは圧縮後Y成分611だけが出力され、圧縮後Cb成分612及び圧縮後Cr成分613は出力されない。したがって、この場合には、監視カメラ装置1からネットワークに対して圧縮後Y成分611だけが出力される、ネットワークに接続された管理コンピュータは、入力された圧縮後Y成分611に基づいて、監視カメラ装置1が撮像された白黒画像を再生してディスプレイに表示する。   In the monitoring camera device 1 according to this modification, when the compression unit 351 is operating and the operation mode of the monitoring camera device 1 is the monochrome mode, the compression control unit 365 displays the color difference component of the image data 600. Stop the operation of the compression unit to compress. That is, when the compression unit 351 is operating and the operation mode of the surveillance camera device 1 is in the monochrome mode, the compression control unit 365 stops the operations of the Cb compression unit 353 and the Cr compression unit 354 that are not necessary for the monochrome image. To do. For example, the compression control unit 365 prevents the Cb compression unit 353 and the Cr compression unit 354 from inputting the Cb component 602 and the Cr component 603 of the image data 600 to the Cb compression unit 353 and the Cr compression unit 354, respectively. Stop operation. Alternatively, the compression control unit 365 stops the operations of the Cb compression unit 353 and the Cr compression unit 354 by stopping the power supply to the Cb compression unit 353 and the Cr compression unit 354. While the operations of the Cb compression unit 353 and the Cr compression unit 354 are stopped, only the compressed Y component 611 is output from the compression unit 351, and the compressed Cb component 612 and the compressed Cr component 613 are not output. Therefore, in this case, only the compressed Y component 611 is output from the monitoring camera apparatus 1 to the network, and the management computer connected to the network can monitor the monitoring camera based on the input compressed Y component 611. The device 1 reproduces the captured black and white image and displays it on the display.

また、本変形例に係る監視カメラ装置1では、監視カメラ装置1の動作モードが白黒モードである場合であって、Cb圧縮部353及びCr圧縮部354の動作が停止し、Y圧縮部352が動作している場合に、上述の輝度調整処理が実行されてステップs8あるいはステップs15が実行されると、圧縮制御部365はY圧縮部352の動作を停止して、圧縮部351の動作を停止する。   In the surveillance camera device 1 according to this modification, the operation mode of the surveillance camera device 1 is the monochrome mode, and the operations of the Cb compression unit 353 and the Cr compression unit 354 are stopped, and the Y compression unit 352 is If the brightness adjustment process described above is executed and step s8 or step s15 is executed in the operation, the compression control unit 365 stops the operation of the Y compression unit 352 and stops the operation of the compression unit 351. To do.

また、本変形例に係る監視カメラ装置1では、監視カメラ装置1の動作モードが白黒モードである場合であって、Y圧縮部352、Cb圧縮部353及びCr圧縮部354の動作が停止している場合に、上述の輝度調整処理が実行されてステップs2において取得輝度と目標輝度とがほぼ同じであると判定されると、圧縮制御部365は、Cb圧縮部353及びCr圧縮部354の動作の停止を維持したまま、Y圧縮部352を動作させる。   In the surveillance camera device 1 according to this modification, the operation mode of the surveillance camera device 1 is the monochrome mode, and the operations of the Y compression unit 352, the Cb compression unit 353, and the Cr compression unit 354 are stopped. If it is determined that the acquired luminance and the target luminance are substantially the same in step s2 when the luminance adjustment process described above is performed, the compression control unit 365 operates the Cb compression unit 353 and the Cr compression unit 354. The Y compression unit 352 is operated while maintaining the stop.

また、本変形例に係る監視カメラ装置1では、Cb圧縮部353及びCr圧縮部354の動作が停止し、Y圧縮部352が動作している状態で、監視カメラ装置1の動作モードが白黒モードからカラーモードに変化すると、圧縮制御部365は、Y圧縮部352、Cb圧縮部353及びCr圧縮部354のすべてを動作させる。   In the surveillance camera device 1 according to the present modification, the operation mode of the surveillance camera device 1 is the monochrome mode while the operations of the Cb compression unit 353 and the Cr compression unit 354 are stopped and the Y compression unit 352 is operating. When the color mode is changed to the color mode, the compression control unit 365 operates all of the Y compression unit 352, the Cb compression unit 353, and the Cr compression unit 354.

また、本変形例に係る監視カメラ装置1では、Y圧縮部352、Cb圧縮部353及びCr圧縮部354のすべてが動作が停止している状態、つまり圧縮部351の動作が停止している状態で、監視カメラ装置1の動作モードが白黒モードからカラーモードに変化すると、圧縮制御部365は、Y圧縮部352、Cb圧縮部353及びCr圧縮部354のすべての動作が停止している状態、つまり圧縮部351の動作が停止している状態を維持する。   In the surveillance camera device 1 according to this modification, all of the Y compression unit 352, the Cb compression unit 353, and the Cr compression unit 354 are stopped, that is, the operation of the compression unit 351 is stopped. When the operation mode of the surveillance camera device 1 changes from the monochrome mode to the color mode, the compression control unit 365 is in a state where all the operations of the Y compression unit 352, the Cb compression unit 353, and the Cr compression unit 354 are stopped. That is, the state where the operation of the compression unit 351 is stopped is maintained.

なお、本変形例では、監視カメラ装置1の動作モードが白黒モードである場合に、Cb圧縮部353及びCr圧縮部354の両方の動作を停止していたが、どちらか一方の動作を停止してもよい。   In this modification, when the operation mode of the surveillance camera device 1 is the monochrome mode, the operations of both the Cb compression unit 353 and the Cr compression unit 354 are stopped, but one of the operations is stopped. May be.

このように、本変形例では、圧縮部351が動作している場合に、監視カメラ装置1の動作モードが白黒モードになると、圧縮制御部365が、Cb圧縮部353及びCr圧縮部354の少なくとも一方の動作を停止する。したがって、白黒画像の撮像では不要である、色差成分を圧縮する圧縮部の動作を停止することができる。よって、監視カメラ装置1の消費電力をさらに低減することができる。   Thus, in this modification, when the compression unit 351 is operating and the operation mode of the surveillance camera device 1 is in the monochrome mode, the compression control unit 365 includes at least the Cb compression unit 353 and the Cr compression unit 354. Stop one operation. Accordingly, it is possible to stop the operation of the compression unit that compresses the color difference component, which is not necessary for capturing a monochrome image. Therefore, the power consumption of the monitoring camera device 1 can be further reduced.

以上のように、監視カメラ装置1は詳細に説明されたが、上記した説明は、すべての局面において例示であって、この発明がそれに限定されるものではない。また、上述した各種変形例は、相互に矛盾しない限り組み合わせて適用可能である。そして、例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。   As described above, although the monitoring camera device 1 has been described in detail, the above description is an example in all aspects, and the present invention is not limited thereto. The various modifications described above can be applied in combination as long as they do not contradict each other. And it is understood that the countless modification which is not illustrated can be assumed without deviating from the scope of the present invention.

1 監視カメラ装置
2 レンズ
32 撮像部
33 AGCアンプ
351 圧縮部
352 Y圧縮部
353 Cb圧縮部
354 Cr圧縮部
362 制御プログラム
368 輝度制御部
369 輝度取得部
DESCRIPTION OF SYMBOLS 1 Surveillance camera apparatus 2 Lens 32 Imaging part
33 AGC amplifier 351 Compression unit 352 Y compression unit 353 Cb compression unit 354 Cr compression unit 362 Control program 368 Luminance control unit 369 Luminance acquisition unit

Claims (7)

レンズと、
前記レンズを介して画像を撮像する撮像部と、
前記撮像部で撮像された画像を示す画像データを圧縮する圧縮部と、
前記圧縮部で圧縮される画像データが示す画像の輝度を制御する輝度制御部と、
前記輝度制御部で輝度が制御された画像の輝度を取得する輝度取得部と、
前記圧縮部を制御する圧縮制御部と
を備え、
前記圧縮制御部は、前記輝度取得部で取得された輝度が第1基準値よりも小さい場合には前記圧縮部の動作を停止する、監視カメラ装置。
A lens,
An imaging unit that captures an image through the lens;
A compression unit that compresses image data indicating an image captured by the imaging unit;
A luminance control unit that controls the luminance of the image indicated by the image data compressed by the compression unit;
A luminance acquisition unit that acquires the luminance of an image whose luminance is controlled by the luminance control unit;
A compression control unit for controlling the compression unit,
The monitoring camera device, wherein the compression control unit stops the operation of the compression unit when the luminance acquired by the luminance acquisition unit is smaller than a first reference value.
請求項1に記載の監視カメラ装置であって、
前記圧縮制御部は、前記輝度取得部で取得された輝度が、前記第1基準値よりも大きい第2基準値よりも大きい場合には前記圧縮部の動作を停止する、監視カメラ装置。
The surveillance camera device according to claim 1,
The monitoring camera device, wherein the compression control unit stops the operation of the compression unit when the luminance acquired by the luminance acquisition unit is larger than a second reference value larger than the first reference value.
請求項1及び請求項2のいずれか一つに記載の監視カメラ装置であって、
前記監視カメラ装置は、動作モードとして、カラー画像を撮像するカラーモードと、白黒画像を撮像する白黒モードとを有し、
前記圧縮部は、画像データの輝度成分を圧縮する第1圧縮部と、画像データの色差成分を圧縮する第2圧縮部とを有し、
前記圧縮制御部は、前記圧縮部が動作している場合に前記監視カメラ装置の動作モードが前記白黒モードになると、前記第2圧縮部の動作を停止する、監視カメラ装置。
The surveillance camera device according to any one of claims 1 and 2,
The surveillance camera device has, as operation modes, a color mode for capturing a color image and a monochrome mode for capturing a monochrome image,
The compression unit includes a first compression unit that compresses the luminance component of the image data, and a second compression unit that compresses the color difference component of the image data,
The compression control unit stops the operation of the second compression unit when the operation mode of the monitoring camera device becomes the monochrome mode when the compression unit is operating.
請求項1乃至請求項3のいずれか一つに記載の監視カメラ装置であって、
ゲインが調整可能であって、前記撮像部から出力される画像データを増幅する増幅部をさらに備え、
前記圧縮部は、前記増幅部で増幅された画像データを圧縮し、
前記輝度制御部は、前記増幅部の前記ゲインを制御することによって前記圧縮部で圧縮される画像データが示す画像の輝度を制御する、監視カメラ装置。
The surveillance camera device according to any one of claims 1 to 3,
The gain is adjustable, and further includes an amplifying unit that amplifies image data output from the imaging unit,
The compression unit compresses the image data amplified by the amplification unit,
The luminance control unit is a monitoring camera device that controls luminance of an image indicated by image data compressed by the compression unit by controlling the gain of the amplification unit.
請求項1乃至請求項3のいずれか一つに記載の監視カメラ装置であって、
前記レンズは、絞りを有し、
前記輝度制御部は、前記絞りを制御することによって前記圧縮部で圧縮される画像データが示す画像の輝度を制御する、監視カメラ装置。
The surveillance camera device according to any one of claims 1 to 3,
The lens has an aperture;
The luminance control unit is a surveillance camera device that controls luminance of an image indicated by image data compressed by the compression unit by controlling the diaphragm.
レンズと、前記レンズを介して画像を撮像する撮像部と、前記撮像部で撮像された画像を示す画像データを圧縮する圧縮部とを備える監視カメラ装置を制御するための制御プログラムであって、
前記監視カメラ装置に、
(a)前記圧縮部が圧縮する画像データが示す画像の輝度を制御する工程と、
(b)前記工程(a)で輝度が制御された画像の輝度を取得する工程と、
(c)前記工程(b)で取得された輝度が基準値よりも小さい場合に前記圧縮部の動作を停止する工程と
を実行させるための制御プログラム。
A control program for controlling a surveillance camera device including a lens, an imaging unit that captures an image through the lens, and a compression unit that compresses image data indicating an image captured by the imaging unit,
In the surveillance camera device,
(A) controlling the luminance of the image indicated by the image data compressed by the compression unit;
(B) obtaining the luminance of the image whose luminance is controlled in the step (a);
(C) A control program for executing the step of stopping the operation of the compression unit when the luminance acquired in the step (b) is smaller than a reference value.
レンズと、前記レンズを介して画像を撮像する撮像部と、前記撮像部で撮像された画像を示す画像データを圧縮する圧縮部とを備える監視カメラ装置での圧縮制御方法であって、
(a)前記圧縮部が圧縮する画像データが示す画像の輝度を制御する工程と、
(b)前記工程(a)で輝度が制御された画像の輝度を取得する工程と、
(c)前記工程(b)で取得された輝度が基準値よりも小さい場合に前記圧縮部の動作を停止する工程と
を備える、圧縮制御方法。
A compression control method in a surveillance camera device comprising a lens, an imaging unit that captures an image via the lens, and a compression unit that compresses image data indicating an image captured by the imaging unit,
(A) controlling the luminance of the image indicated by the image data compressed by the compression unit;
(B) obtaining the luminance of the image whose luminance is controlled in the step (a);
(C) a step of stopping the operation of the compression unit when the luminance acquired in the step (b) is smaller than a reference value.
JP2012257489A 2012-11-26 2012-11-26 Surveillance camera device, control program, and compression control method Expired - Fee Related JP6110115B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012257489A JP6110115B2 (en) 2012-11-26 2012-11-26 Surveillance camera device, control program, and compression control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012257489A JP6110115B2 (en) 2012-11-26 2012-11-26 Surveillance camera device, control program, and compression control method

Publications (2)

Publication Number Publication Date
JP2014107622A true JP2014107622A (en) 2014-06-09
JP6110115B2 JP6110115B2 (en) 2017-04-05

Family

ID=51028778

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012257489A Expired - Fee Related JP6110115B2 (en) 2012-11-26 2012-11-26 Surveillance camera device, control program, and compression control method

Country Status (1)

Country Link
JP (1) JP6110115B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0352385A (en) * 1989-07-20 1991-03-06 Fuji Photo Film Co Ltd Digital electronic still camera
JPH08265682A (en) * 1995-03-27 1996-10-11 Canon Inc Video recorder, recording controller and image pickup device
JP2005094346A (en) * 2003-09-17 2005-04-07 Matsushita Electric Ind Co Ltd Supervisory video camera
JP2008111945A (en) * 2006-10-30 2008-05-15 Matsushita Electric Ind Co Ltd Monitoring camera device
JP2008235969A (en) * 2007-03-16 2008-10-02 Sanyo Electric Co Ltd Video camera

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0352385A (en) * 1989-07-20 1991-03-06 Fuji Photo Film Co Ltd Digital electronic still camera
JPH08265682A (en) * 1995-03-27 1996-10-11 Canon Inc Video recorder, recording controller and image pickup device
JP2005094346A (en) * 2003-09-17 2005-04-07 Matsushita Electric Ind Co Ltd Supervisory video camera
JP2008111945A (en) * 2006-10-30 2008-05-15 Matsushita Electric Ind Co Ltd Monitoring camera device
JP2008235969A (en) * 2007-03-16 2008-10-02 Sanyo Electric Co Ltd Video camera

Also Published As

Publication number Publication date
JP6110115B2 (en) 2017-04-05

Similar Documents

Publication Publication Date Title
US11343437B2 (en) Reducing power consumption for enhanced zero shutter lag
JP6019964B2 (en) Image processing apparatus, imaging apparatus equipped with the same, and image processing method
JP6396397B2 (en) Bit rate controller and output bit rate limiting method
US10509982B2 (en) On-camera image processing based on image luminance data
US9609328B2 (en) Electronic device and method
WO2017088564A1 (en) Image processing method, device, terminal, and storage medium
US7750972B2 (en) Digital camera
JP2003199019A (en) Imaging apparatus and method therefor, recording medium and program
JP4561649B2 (en) Image compression apparatus, image compression program and image compression method, HDR image generation apparatus, HDR image generation program and HDR image generation method, image processing system, image processing program and image processing method
TWI655865B (en) A method for configuration of video stream output from a digital video camera
US20140232892A1 (en) Digital signal processor buffer management
JP6110115B2 (en) Surveillance camera device, control program, and compression control method
US20140334729A1 (en) Image processing apparatus and image processing method
EP2515543B1 (en) Image capturing apparatus and image capturing method
JP2018110300A (en) Imaging device, control method therefor, program, and recording medium
JP2008141326A (en) Imaging system and camera unit
EP2495972A1 (en) Monitoring device and method for monitoring a location
JP2008219738A (en) Imaging apparatus
KR100771138B1 (en) Imaging device and image correcting method
JP2013211757A (en) Imaging device, imaging method, and image processing device
KR101692400B1 (en) Photographing apparatus, photographing method and recording medium
WO2011161883A1 (en) Image processing device and image processing program
JP6242172B2 (en) Image processing apparatus, image processing method, and program
JP2015159406A (en) Image pickup device and control method of the same
JP2020010244A (en) Imaging apparatus and control method for imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151019

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160830

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170221

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170309

R150 Certificate of patent or registration of utility model

Ref document number: 6110115

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees