JP2008113412A - Camera and monitoring device using it - Google Patents

Camera and monitoring device using it Download PDF

Info

Publication number
JP2008113412A
JP2008113412A JP2007168371A JP2007168371A JP2008113412A JP 2008113412 A JP2008113412 A JP 2008113412A JP 2007168371 A JP2007168371 A JP 2007168371A JP 2007168371 A JP2007168371 A JP 2007168371A JP 2008113412 A JP2008113412 A JP 2008113412A
Authority
JP
Japan
Prior art keywords
imaging
image
monitoring
camera
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007168371A
Other languages
Japanese (ja)
Other versions
JP4969336B2 (en
JP2008113412A5 (en
Inventor
Takashi Watanabe
高志 渡邊
Hirotaka Nagayoshi
洋登 永吉
Yutaka Sako
裕 酒匂
Kosuke Yanai
孝介 柳井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Omron Terminal Solutions Corp
Original Assignee
Hitachi Omron Terminal Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Omron Terminal Solutions Corp filed Critical Hitachi Omron Terminal Solutions Corp
Priority to JP2007168371A priority Critical patent/JP4969336B2/en
Priority to CN 200710161929 priority patent/CN101159856B/en
Publication of JP2008113412A publication Critical patent/JP2008113412A/en
Publication of JP2008113412A5 publication Critical patent/JP2008113412A5/ja
Application granted granted Critical
Publication of JP4969336B2 publication Critical patent/JP4969336B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a camera and a monitoring device or system using it, which can prevent a flicker without reducing light energy per image and losing trackability to a mobile unit. <P>SOLUTION: The camera and monitoring device are provided with a camera for photographing an image by a light with a wavelength different from that of a visible light. By correcting an image photographed by a visible light based on an image photographed by a light with a wavelength different from that of a visible light, stable monitoring is made possible. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、フリッカー(ちらつき)の発生を抑えたカメラおよびカメラを用いた監視装置ないし監視システムに関する。   The present invention relates to a camera in which occurrence of flicker (flicker) is suppressed and a monitoring device or a monitoring system using the camera.

近年、犯罪事実の記録や抑止のため、カメラ(監視カメラ)を用いた映像監視装置を設置する施設が増加している。一般的な映像監視装置は、カメラと映像記録用の記録装置、映像確認用のモニターから構成されており、施設内の出入り口の天井や施設外の出入り口の壁などに設置されることが多い。このようなシステムを用いて、不審者などの出入りや滞在がないことを監視するのである。   In recent years, facilities for installing video surveillance devices using cameras (surveillance cameras) are increasing in order to record and deter criminal facts. A general video monitoring apparatus is composed of a camera, a recording device for video recording, and a monitor for video confirmation, and is often installed on the ceiling of the entrance / exit inside the facility or the wall of the entrance / exit outside the facility. By using such a system, it is monitored that there is no entry / exit of a suspicious person or stay.

さらに、一般家庭においても、訪問者が居住者を呼び出すためのインターホンが備えられている場合が多い。訪問者はインターホンに備えられている呼び鈴ボタンをおせば、居住者に訪問者が到着した旨の通知が行われ、玄関扉の開錠を促すことができる。近年では、インターホンにカメラを搭載し、訪問者の姿を居住者が事前に確認することができるようになっているものも販売されるようになっている。   Furthermore, even in ordinary households, there are many cases where an intercom is provided for a visitor to call a resident. If the visitor uses the doorbell button provided on the intercom, the resident is notified that the visitor has arrived, and can be prompted to unlock the entrance door. In recent years, an interphone equipped with a camera so that a resident can confirm the appearance of a visitor in advance has been sold.

一般的な監視カメラは、1秒間に60枚の画像を撮影して、記録装置や表示装置に送信する。人間の目の反応速度には限界があるため、このように多くの枚数を撮影して連続的に表示することで、体感的にはスムーズな動画像として知覚される。   A typical surveillance camera takes 60 images per second and transmits them to a recording device or a display device. Since the reaction speed of the human eye is limited, shooting a large number of images in this way and displaying them continuously allows them to be perceived as a smooth moving image.

しかし、1秒間に60枚の画像を撮影するという性質のため、照明の性質によってはフリッカーとよばれる映像のちらつきが観察されることがある。   However, because of the property of capturing 60 images per second, flickering of images called flicker may be observed depending on the nature of the illumination.

フリッカーの原因となる最も典型的な照明は、蛍光灯である。蛍光灯は、電気の変動に応じて放電し、放電によって発生した電子と管内の水銀原始と衝突して紫外線を発生する。この紫外線が蛍光物質に衝突することで光を発する。すなわち、光の強度が電源の周波数に強く影響を受ける。よく知られているように、日本においては西日本のAC電源の周数が60Hzであり東日本の周波数が50Hzと異なっている。世界においても各国で電源の周波数が異なっており、たとえば米国では60Hz、ヨーロッパでは50Hzが主に用いられている。   The most typical illumination that causes flicker is a fluorescent lamp. Fluorescent lamps discharge in response to fluctuations in electricity, and generate ultraviolet rays by colliding with the electrons generated by the discharge and the mercury source in the tube. Light is emitted when the ultraviolet rays collide with the fluorescent material. That is, the intensity of light is strongly influenced by the frequency of the power source. As is well known, in Japan, the frequency of the AC power supply in western Japan is 60 Hz, and the frequency of eastern Japan is different from 50 Hz. In the world, the frequency of the power supply is different in each country. For example, 60 Hz is mainly used in the United States, and 50 Hz is mainly used in Europe.

図3に、簡単にフリッカーの原因について示す。日本においては、AC電源の周波数が50Hzとなっている東日本でフリッカーが観測される。カメラは60Hz(1秒間に60回撮影する)で撮影を行い、蛍光灯の発する光は図3のように1/50秒で1周期となるように変動する。図中の201は、光のエネルギーを擬似的に三角形で表現したものであり、電源がサイン波で変化するのに応じて各時刻で蛍光灯から発せられる光のエネルギーは変化する。理想的には光のエネルギーの放射はサイン波となるが、実際にはきれいなサイン波となることはなく、若干いびつな山を形作る。しかし、ここでは、原理を説明するのであり、201のように三角波で考えることにする。   FIG. 3 simply shows the cause of flicker. In Japan, flicker is observed in eastern Japan where the frequency of the AC power supply is 50 Hz. The camera shoots at 60 Hz (shoots 60 times per second), and the light emitted from the fluorescent lamp fluctuates so that one cycle is 1/50 seconds as shown in FIG. 201 in the figure represents the energy of light in a pseudo triangle, and the energy of the light emitted from the fluorescent lamp changes at each time as the power source changes with a sine wave. Ideally, the emission of light energy is a sine wave, but in reality it is not a beautiful sine wave, and forms a slightly distorted mountain. However, here, the principle is explained, and a triangular wave like 201 is considered.

図3には、50Hzで変化する光のエネルギーを1/60秒で区切った様子をあわせて示した。たとえば、最初の1/60秒では202,203が取り込まれ、次の1/60秒では204,205,206が取り込まれる。すなわち、最初の画像には202,203の合計の光エネルギーが取得されるのに対して、次の画像には204,205,206の合計の光エネルギーが取得されるといったことを繰り返しているのである。   FIG. 3 also shows how the energy of light changing at 50 Hz is divided in 1/60 second. For example, 202, 203 is captured in the first 1/60 seconds, and 204, 205, 206 are captured in the next 1/60 seconds. That is, the total light energy of 202 and 203 is acquired in the first image, whereas the total light energy of 204, 205, and 206 is acquired in the next image.

さらに図3において、207に示したのは、203に204と206を重ね合わせた図形である。先ほどの最初の画像と次の画像では202と205の光エネルギーは同等なので、207を見れば、最初の画像と次の画像に含まれる光のエネルギーの差異が見て取れる。207を見れば、明らかに203の面積のほうが204,206の合計面積よりも大きいため、最初の画像のほうが次の画像よりも多くの光エネルギーを取得していることがわかる。すなわち、最初の画面のほうが次の画面よりも明るいということになる。   Further, in FIG. 3, what is indicated by 207 is a figure in which 204 and 206 are superimposed on 203. Since the light energy of 202 and 205 is the same in the first image and the next image, the difference in light energy contained in the first image and the next image can be seen by looking at 207. As can be seen from 207, the area of 203 is clearly larger than the total area of 204 and 206, so that the first image acquires more light energy than the next image. That is, the first screen is brighter than the next screen.

同様に考えれば、光のエネルギーが50Hzで変化している場合におこり、60Hzで変化している場合には起こらないことは明らかである。   Similarly, it is clear that this occurs when the light energy changes at 50 Hz and does not occur when it changes at 60 Hz.

従来、フリッカーを防止する技術として、カメラの1回の撮影速度を1秒間に100回撮影する速度に相当する100Hzまで増加させ、60Hzと同期するタイミングで撮影することで、各画像に取り込まれる光のエネルギーを安定させる方法が知られている。 すなわち、カメラは内部で60Hzの信号と100Hzの信号を発生し、60Hzの信号の1周期の開始時刻から、100Hzの信号の1周期の期間だけ、光を取り込むように撮像素子を制御する。このように構成することで、図3からも明らかなように、電源周波数が50Hzの場合でも、一回の撮影結果に含まれる光の量が一定となり、フリッカーが抑制される。   Conventionally, as a technology to prevent flicker, the light that is captured in each image is increased by increasing the shooting speed of the camera to 100 Hz, which corresponds to the shooting speed of 100 times per second, and shooting at a timing synchronized with 60 Hz. There are known methods for stabilizing the energy. That is, the camera internally generates a 60 Hz signal and a 100 Hz signal, and controls the image sensor so as to capture light only for one period of the 100 Hz signal from the start time of one cycle of the 60 Hz signal. With this configuration, as is apparent from FIG. 3, even when the power supply frequency is 50 Hz, the amount of light included in one imaging result is constant, and flicker is suppressed.

また、撮影対象が静止していると仮定すれば、複数枚の画像の平均値を1枚の画像とみなすことで、1枚の画像に含まれる光のエネルギーを安定させることができる。   If it is assumed that the object to be photographed is stationary, the energy of light contained in one image can be stabilized by regarding the average value of a plurality of images as one image.

また,特許文献1では、異なる複数の波長の光を観察して、そのうちで最も輝度値の大きな波長の光の撮像結果を出力画像として用いている。   Moreover, in patent document 1, the light of a several different wavelength is observed and the imaging result of the light of a wavelength with the largest luminance value is used as an output image among them.

特開2004−185109号公報JP 2004-185109 A

しかしながら、1秒間の撮影回数を増加させる方法では、1画像あたりの光のエネルギーは減少するため、画面の明るさが暗くなり、複数枚の画像の平均値を1枚の画像とみなす方法では、実質的に撮影速度が減少することに対応するため、画面内に移動物体が入った場合に残像が多く現れるため、監視という用途には望ましいとはいえない。   However, in the method of increasing the number of shootings per second, the energy of light per image decreases, so the brightness of the screen becomes dark, and in the method of considering the average value of multiple images as one image, In order to cope with a substantial decrease in shooting speed, a lot of afterimages appear when a moving object enters the screen, which is not desirable for monitoring purposes.

本発明は、1画像あたりの光エネルギーを低下させずに、また移動物体への追従性を失わずに、フリッカーを防止することができるカメラおよびカメラを用いた監視装置ないし監視システムを提供することを目的とする。   The present invention provides a camera capable of preventing flicker without reducing light energy per image and without losing followability to a moving object, and a monitoring apparatus or a monitoring system using the camera. With the goal.

以上の課題を解決し、目的を達成したカメラおよびカメラを用いた監視装置ないし監視システムを提供するために、本発明のカメラおよび監視装置ないし監視システムは、可視光の画像を撮影するカメラと、可視光とは異なる(蛍光灯の光とは異なる)波長の光の画像を撮影するカメラと、前記可視光とは異なる波長の光による画像を基準として前記可視光の画像の補正を行う。   In order to solve the above problems and to provide a camera and a monitoring device or monitoring system using the camera that have achieved the object, the camera and the monitoring device or monitoring system of the present invention include a camera that captures an image of visible light, The visible light image is corrected based on a camera that captures an image of light having a wavelength different from that of visible light (different from that of a fluorescent lamp) and an image of light having a wavelength different from that of the visible light.

図1に一般的な監視装置の構成を示す。ブース10には、監視対象となる装置11が設置されている。ブース10の天井101には蛍光灯102と監視カメラ12が取り付けられている。監視カメラ12の撮影した画像は、ケーブル13を通じて映像保存装置14や映像監視装置15に届けられる。映像監視装置15には、監視カメラ12の画像や映像監視装置15からの警報などを表示するための表示装置16がつながっている。映像保存装置14と映像監視装置15の接続の順序は一例であって、必ずしも図1の順序で接続されている必要はなく、用途によっては映像保存装置14を必要としない場合もある。   FIG. 1 shows the configuration of a general monitoring device. In the booth 10, a device 11 to be monitored is installed. A fluorescent lamp 102 and a surveillance camera 12 are attached to the ceiling 101 of the booth 10. An image taken by the monitoring camera 12 is delivered to the video storage device 14 and the video monitoring device 15 through the cable 13. Connected to the video monitoring device 15 is a display device 16 for displaying an image of the monitoring camera 12, an alarm from the video monitoring device 15, and the like. The order of connection between the video storage device 14 and the video monitoring device 15 is an example, and the video storage device 14 is not necessarily required to be connected in the order shown in FIG.

図2は従来の映像監視装置15の内部構造についてより詳細に示したものである。監視カメラ12からの画像は、画像入力端子1500を通じて監視機能の本体である解析装置1501に送る。解析装置1501は入力された画像を適宜解析して、結果を出力生成装置1502に送る。ここで、解析装置1501が一般的に行うのは、入力された画像と過去に蓄積された画像との比較を行い、注目するべき差異が見られれば、その旨を警報として出力生成装置1502に送るという処理である。そのためには、解析装置1501内部に、幾分かの映像記憶手段を持ち、過去の画像を保存する場合や、映像保存装置14と通信することで、過去の画像を取り出すといった処理がおこなわれることがある。出力生成装置1502では、たとえば解析装置1501からの警報がなければ入力された画像をそのまま出力端子1503を通じて外部のモニタ16などに出力したり、解析装置1501からの警報があれば、その旨を映像的ないし音響的に出力端子1503を通じて外部に出力する。   FIG. 2 shows the internal structure of the conventional video monitoring apparatus 15 in more detail. The image from the monitoring camera 12 is sent to the analysis device 1501 which is the main body of the monitoring function through the image input terminal 1500. The analysis device 1501 appropriately analyzes the input image and sends the result to the output generation device 1502. Here, the analysis device 1501 generally performs a comparison between the input image and the image accumulated in the past, and if there is a difference to be noticed, the output generation device 1502 notifies that fact as an alarm. It is a process of sending. To that end, the analysis device 1501 has some video storage means to store past images or to perform processing such as extracting past images by communicating with the video storage device 14. There is. In the output generation device 1502, for example, if there is no alarm from the analysis device 1501, the input image is output as it is to the external monitor 16 or the like through the output terminal 1503, or if there is an alarm from the analysis device 1501, a video to that effect is displayed. The sound is output to the outside through an output terminal 1503.

本発明の監視装置の一例を図4に示す。図4の監視装置は、ブース10内に監視対象となる装置11が設置されている。ブース10の天井101には、蛍光灯102および赤外光発生装置103、さらに複数の監視カメラ12および17が設置されている。ここで、蛍光灯102や赤外光発生装置103および監視カメラ12および17は、必ずしも天井101に設置されている必要はない。つまり、監視対象を適切にライトアップして画像を取得することができれば壁面などに設置してもよく、設置場所を制限されることはない。また、ここで103を赤外光発生装置としたが、蛍光灯102が発する可視光と異なる波長の光であれば、赤外光に限定する必要はない。   An example of the monitoring apparatus of the present invention is shown in FIG. In the monitoring device of FIG. 4, a device 11 to be monitored is installed in the booth 10. On the ceiling 101 of the booth 10, a fluorescent lamp 102, an infrared light generator 103, and a plurality of monitoring cameras 12 and 17 are installed. Here, the fluorescent lamp 102, the infrared light generator 103, and the monitoring cameras 12 and 17 are not necessarily installed on the ceiling 101. That is, as long as the monitoring target can be appropriately lit up and an image can be acquired, it may be installed on a wall surface or the like, and the installation location is not limited. Here, 103 is an infrared light generator, but it is not necessary to limit to infrared light as long as the light has a wavelength different from that of visible light emitted from the fluorescent lamp 102.

本実施例において、監視カメラ12は可視光を撮影するカメラであり、監視カメラ17は赤外光を撮影するカメラである。もちろん、監視カメラ17は赤外光発生装置103の光を撮影することを目的としているため、103が赤外光以外(もちろん可視光以外)の波長の光であれば、それを撮影するのに好適な撮像系を持つカメラと置き換えればよい。よく知られているように、カメラのA/Dコンバータ部分に特定波長のみを通過するフィルタを用いれば、必要な波長の光を撮影するカメラを構成することができる。蛍光灯102の電源の周波数と監視カメラ12の1秒あたりの撮像回数とは異なるものとする。また、赤外光発生装置103は、電源の周波数に依存しない。すなわち、交流電源の特性を利用した発光方式ではなく、直流電源の特性を利用した発光方式を用いる。もしくは、交流電源の特性を利用する発光方式であっても、フィラメントを加熱して発光する白熱灯などのように、時刻ごとの照度のゆらぎがほとんど無い方式を用いる。実際に、白熱灯は赤外光を発しており、赤外光発生装置103として白熱灯を用いることもできる。この場合、白熱灯から発生する、本願において画像の補正に用いられる波長の光(たとえば赤外光)以外の可視光などの成分の光は、画像の補正に用いられないだけで、本願の監視システムを構成する上で特に問題になることは無い。また、赤外光発生装置103として、白熱灯の一種であるハロゲンランプを用いることもできる。ハロゲンランプは、同じワット数の白熱灯と比較すると、容積が約200分の1とコンパクト化が可能であり、2倍程度の発光寿命が得られるといった性質を持っている。ハロゲンランプは、タングステンでできたフィラメントを備えており、フィラメントに電流が流れると、タングステンが白熱して光を発する。フィラメント方式であれば、時刻ごとの照度のゆらぎがほとんど無いため、蛍光灯のようにちらつきを誘発することが無い。   In this embodiment, the monitoring camera 12 is a camera that captures visible light, and the monitoring camera 17 is a camera that captures infrared light. Of course, since the surveillance camera 17 is intended to capture the light of the infrared light generator 103, if 103 is light of a wavelength other than infrared light (of course, other than visible light), A camera having a suitable imaging system may be replaced. As is well known, if a filter that passes only a specific wavelength is used in the A / D converter portion of the camera, a camera that captures light of a required wavelength can be configured. It is assumed that the frequency of the power source of the fluorescent lamp 102 and the number of imaging per second of the monitoring camera 12 are different. The infrared light generator 103 does not depend on the frequency of the power source. That is, the light emission method using the characteristics of the DC power supply is used instead of the light emission method using the characteristics of the AC power supply. Or even if it is the light emission system using the characteristic of an alternating current power supply, a system with almost no fluctuations in illuminance at each time, such as an incandescent lamp that emits light by heating a filament, is used. Actually, the incandescent lamp emits infrared light, and the incandescent lamp can be used as the infrared light generator 103. In this case, light of a component such as visible light other than light having a wavelength used for image correction in the present application (for example, infrared light) generated from an incandescent lamp is not used for image correction. There is no particular problem in configuring the system. Further, as the infrared light generator 103, a halogen lamp which is a kind of incandescent lamp can be used. Compared with incandescent lamps of the same wattage, halogen lamps can be made compact with a volume of about 1/200, and have a property that a light emission life of about twice can be obtained. The halogen lamp includes a filament made of tungsten. When a current flows through the filament, tungsten is incandescent and emits light. In the filament system, there is almost no fluctuation in illuminance at each time, so that flickering is not induced like a fluorescent lamp.

本実施例では、監視カメラ12および17で撮影された画像は、ケーブル13を通じて映像保存装置14や監視装置18に送られる。また、監視装置18の出力が表示装置16に送られる。ケーブル13は多くの場合同軸ケーブルであるが,近年ではIPネットワークに直接接続することのできる監視カメラも多く,ケーブル13はLANケーブルとなる場合もある。その他,特別な仕様に従うケーブルである可能性も有るが,いずれであっても本発明の適用を妨げるものではない。   In the present embodiment, images taken by the monitoring cameras 12 and 17 are sent to the video storage device 14 and the monitoring device 18 through the cable 13. Further, the output of the monitoring device 18 is sent to the display device 16. The cable 13 is often a coaxial cable, but in recent years there are many surveillance cameras that can be directly connected to an IP network, and the cable 13 may be a LAN cable. In addition, there is a possibility that the cable conforms to a special specification, but any of them does not prevent application of the present invention.

本発明の映像監視装置18の構成は、図2に示した従来の映像監視装置15とは異なる。本発明の映像監視装置の構成を図5に示す。図5に示すように、本発明の映像監視装置18は、従来の第一の解析装置1501と出力生成装置1508に加えて、補正情報計算装置1504、補正装置1506、第二の解析装置1507を備える。以下、第一のカメラ12からは可視光を撮影した画像が出力され、第二のカメラ17からは赤外光を撮影した画像が出力されるとする。   The configuration of the video monitoring apparatus 18 of the present invention is different from the conventional video monitoring apparatus 15 shown in FIG. The configuration of the video monitoring apparatus of the present invention is shown in FIG. As shown in FIG. 5, the video monitoring device 18 of the present invention includes a correction information calculation device 1504, a correction device 1506, and a second analysis device 1507 in addition to the conventional first analysis device 1501 and output generation device 1508. Prepare. Hereinafter, it is assumed that an image obtained by photographing visible light is output from the first camera 12, and an image obtained by photographing infrared light is output from the second camera 17.

本発明の映像監視装置18は、補正情報1505を作成するために、第一のカメラ12および第二のカメラ17から同時刻ないし近接した時刻に撮影した画像を補正情報計算装置1504に取り込む。図8に示すように、一方の取得画像にフリッカーが発生するため、ほとんどの時刻で第一のカメラ12からの画像401と第二のカメラ17からの画像402の相対的な明るさは異なる。そこで、次のように、明るさのバラツキのないカメラ17の画像と、基準となるカメラ12の画像(401)との相対的な明るさの違いを覚えておいて、後のタイミングで、カメラ12の画像が基準よりも暗くなっている場合は明るく、明るくなっている場合は暗くなるように補正する。   The video monitoring apparatus 18 according to the present invention captures, in the correction information calculation apparatus 1504, images taken at the same time or close times from the first camera 12 and the second camera 17 in order to create correction information 1505. As shown in FIG. 8, since flicker occurs in one acquired image, the relative brightness of the image 401 from the first camera 12 and the image 402 from the second camera 17 is different at most times. Therefore, remember the relative brightness difference between the image of the camera 17 that does not vary in brightness and the image (401) of the reference camera 12, as shown below. If the 12 images are darker than the reference, the image is corrected to be bright, and if it is bright, the image is corrected to be dark.

補正情報計算装置1504は、第一のカメラからの画像401と第二のカメラからの画像402を比較して、後の時刻で第一のカメラからの画像403と第二のカメラからの画像404を受け取ったときに、補正装置1506で補正を行って画像403を画像401と同程度の明るさの画像405に補正することができるように、補正情報1505を計算する。前記の機能を実現するための補正情報のうちで最も簡単なものは、画像401と画像402の差分値である。基準となる差分値があれば、第二のカメラからの画像402や404の明るさが安定しているという仮定の元に、第一のカメラからの画像の明るさを補正することができる。つまり、画像内のある領域に着目して、画像403と画像404の差分値が補正情報の差分値と一致するかどうかを確認し、不一致であれば、一致ないし十分に近くなるように画像403の画素値を補正するのである。   The correction information calculation device 1504 compares the image 401 from the first camera with the image 402 from the second camera, and at a later time, the image 403 from the first camera and the image 404 from the second camera. , Correction information 1505 is calculated so that the correction device 1506 can correct the image 403 so that the image 403 has the same brightness as the image 401. The simplest correction information for realizing the above function is a difference value between the image 401 and the image 402. If there is a reference difference value, the brightness of the image from the first camera can be corrected under the assumption that the brightness of the images 402 and 404 from the second camera is stable. That is, paying attention to a certain area in the image, it is confirmed whether or not the difference value between the image 403 and the image 404 matches the difference value of the correction information. The pixel value is corrected.

ここでは、画像401,403を可視光を撮影した画像であると想定したが、可視光を撮影するカメラの画像は、さらに赤、緑、青の三成分に分割して処理することが多く、本発明の監視装置においても、補正情報1505を三成分それぞれについて作成するようにすることで、より高精度の補正を行うことができる。もちろん、前記の三成分に制限される必要はなく、輝度信号(Y)、輝度信号と青色成分の差(U)、および輝度信号と赤色成分の差(V)で表現されるYUV形式などで補正情報を作成しても良いことは言うまでもない。更にいえば、差分値を計算する上で、同一の座標の画素のみではなく、その周辺の座標の画素の明るさの平均値を用いるようにすれば、撮像系に現れる熱雑音の影響を和らげることができる。   Here, it is assumed that the images 401 and 403 are images obtained by capturing visible light, but the image of the camera that captures visible light is often further processed by being divided into three components of red, green, and blue. Even in this monitoring apparatus, it is possible to perform correction with higher accuracy by generating the correction information 1505 for each of the three components. Of course, it is not necessary to be limited to the above three components, such as the YUV format expressed by the luminance signal (Y), the difference between the luminance signal and the blue component (U), and the difference between the luminance signal and the red component (V). Needless to say, correction information may be created. Furthermore, in calculating the difference value, if the average value of the brightness of the pixels at the surrounding coordinates is used instead of the pixels at the same coordinates, the influence of the thermal noise appearing in the imaging system is reduced. be able to.

ここでは、画像401と402を基準として補正情報1505を計算する例について述べたが、第一のカメラ12で撮影される画像にはフリッカーが含まれており、図7の301,303,305に見られるように、撮影時刻とともに明るさが変化する。よって、監視装置18は、補正情報計算装置1504に入力する画像を選択する手段を持ち、第一のカメラ12からの画像がもっとも明るいときに補正情報1505を生成するといったように、第一の監視装置1501で用いるのに好適な画像が得られるような調整を行うことも可能である。   Here, an example in which the correction information 1505 is calculated based on the images 401 and 402 has been described, but the image captured by the first camera 12 includes flicker, as seen in 301, 303, and 305 in FIG. The brightness changes with the shooting time. Therefore, the monitoring device 18 has means for selecting an image to be input to the correction information calculation device 1504, and generates the correction information 1505 when the image from the first camera 12 is brightest. It is also possible to perform adjustment so that an image suitable for use in the apparatus 1501 can be obtained.

本発明の監視システムは、第一の監視カメラと第二の監視カメラの撮影時刻がわずかにずれていても期待する効果が得られるが、完全に同期した場合に最も補正効果が高い。図6に記載の監視装置18は、さらに同期信号生成装置1510を備えており、同期信号出力端子1511から第一のカメラ12および第二の監視カメラ17に同期信号を送出する。第一の監視カメラ12および第二の監視カメラ17は、受け取った同期信号に従って撮影を行うことで、同一時刻に撮影を行うことができる。前記の同期信号は一般的には60Hzを用いるが、必ずしも60Hzに限定されるわけではない。一方で、AC電源の周波数から同期信号を作り出すことも可能であり、その場合は監視装置18から同期信号を送出する必要はない。とはいえ、複数のAC電源の周期について同期が保証されるわけではないので、監視装置18からの同期信号を用いる方式のほうが信頼性が高いといえる。   The monitoring system of the present invention can achieve the expected effect even if the shooting times of the first monitoring camera and the second monitoring camera are slightly shifted, but the correction effect is highest when they are completely synchronized. The monitoring device 18 illustrated in FIG. 6 further includes a synchronization signal generation device 1510, and transmits a synchronization signal from the synchronization signal output terminal 1511 to the first camera 12 and the second monitoring camera 17. The first monitoring camera 12 and the second monitoring camera 17 can perform shooting at the same time by performing shooting according to the received synchronization signal. The synchronizing signal generally uses 60 Hz, but is not necessarily limited to 60 Hz. On the other hand, it is also possible to generate a synchronization signal from the frequency of the AC power supply, and in that case, it is not necessary to send the synchronization signal from the monitoring device 18. However, since synchronization is not guaranteed for a plurality of AC power supply cycles, the method using the synchronization signal from the monitoring device 18 is more reliable.

補正情報の計算方法について一例を示す。補正情報計算用の第一のカメラの画像X1および第二のカメラの画像X2が得られた場合、X1=A*X2の関係にあると考え、ベクトルAを計算する。つまり、X1,X2の各座標の画素値x1[i,j]およびx2[i,j]に対して、x1[i,j]=a[i,j]*x2[i,j]となるa[i,j]を計算する。このa[i,j]が補正情報となる。なお,i,jは撮影された画像のx座標およびy座標の位置を表す変数であり,a[i,j]は画像の座標(i,j)に対応する補正情報である。本例で,映像補正装置に保持する補正情報は,すべての座標に対するa[i,j]の値である。   An example of the correction information calculation method will be described. When the image X1 of the first camera and the image X2 of the second camera for correction information calculation are obtained, the vector A is calculated assuming that X1 = A * X2. That is, x1 [i, j] = a [i, j] * x2 [i, j] for the pixel values x1 [i, j] and x2 [i, j] at the coordinates of X1 and X2 Calculate a [i, j]. This a [i, j] is the correction information. Note that i, j is a variable representing the x-coordinate and y-coordinate positions of the photographed image, and a [i, j] is correction information corresponding to the image coordinates (i, j). In this example, the correction information held in the video correction device is the value of a [i, j] for all coordinates.

次に補正方法に関する一例を示す。第一のカメラの画像X3および第二のカメラの画像X4が得られた場合、X3=B*X4の関係にあると考え、ベクトルBを計算する。つまり、X3,X4の各座標の画素値x3[i,j]およびx4[i,j]に対して、x3[i,j]=b[i,j]*x4[i,j]となるb[i,j]を計算する。b[i,j]と補正情報であるa[i,j]を比較して、近い値であると判断されればx3[i,j]の値をそのまま使用する。b[i,j]とa[i,j]が乖離している場合は、x3[i,j]=a[i,j]*x4[i,j]として補正する。本実施例では、X3が可視光画像(R,G,B)でX4が赤外光画像(グレースケール)であるから、x3[i,j]をR,G,Bに分解してx3R[i,j], x3G[i,j], x3B[i,j]それぞれ独立にx4を用いた補正を行っても良い。   Next, an example regarding the correction method is shown. When the image X3 of the first camera and the image X4 of the second camera are obtained, the vector B is calculated assuming that X3 = B * X4. That is, x3 [i, j] = b [i, j] * x4 [i, j] is obtained for the pixel values x3 [i, j] and x4 [i, j] at the coordinates of X3 and X4. b [i, j] is calculated. b [i, j] is compared with a [i, j] as correction information, and if it is determined that the values are close, the value of x3 [i, j] is used as it is. If b [i, j] and a [i, j] are different, correction is made as x3 [i, j] = a [i, j] * x4 [i, j]. In this embodiment, since X3 is a visible light image (R, G, B) and X4 is an infrared light image (grayscale), x3 [i, j] is decomposed into R, G, B and x3R [ i, j], x3G [i, j], x3B [i, j] may be corrected independently using x4.

以上では、簡単な補正の例を示したが、補正情報を作成するために使用する画像の枚数は必ずしも1枚(1組)に限定する必要は無く、複数の画像を用いてもよい。複数の画像を用いることで、異なる時刻の第一のカメラの画像と第二のカメラの画像の差分同士の差分を補正情報とするなど、より複雑な補正情報を作成することができる。可視光照明の明滅間隔と撮影間隔の関係によっては、時刻tにおける第一のカメラの画像と第二のカメラの画像の差分D(t)と次の時刻t+1における同様の差分D(t+1)の差分絶対値|D(t+1)-D(t)|が一定になる場合もあり、そのような場合は補正情報をよりコンパクトにすることができる。また、補正情報は、最初に一度だけ作成する方法だけではなく、画像が入力されるごとに再作成ないし更新するように構成してもよいことは言うまでもない。   Although an example of simple correction has been described above, the number of images used to create correction information is not necessarily limited to one (one set), and a plurality of images may be used. By using a plurality of images, it is possible to create more complicated correction information such as using the difference between the difference between the first camera image and the second camera image at different times as the correction information. Depending on the relationship between the blinking interval of visible light illumination and the shooting interval, the difference D (t) between the image of the first camera and the image of the second camera at time t and the similar difference D (t at the next time t + 1 In some cases, the difference absolute value | D (t + 1) −D (t) | of +1) may be constant. In such a case, the correction information can be made more compact. Further, it is needless to say that the correction information is not only generated once at the beginning, but may be recreated or updated every time an image is input.

映像補正装置20と映像監視装置21が独立した場合の実施例を図9に示す。本実施例の映像監視装置21は,映像補正装置20の出力であり第一のカメラから得られた画像を第二のカメラで補正した結果である画像と第二のカメラの画像を入力として受け取る。図10に示すように,第一のカメラと第二のカメラで取得された画像は,映像補正装置20に送信される。映像補正装置は,補正情報の生成が指示された場合,入力された二つの画像から補正情報を生成して,内部に保持する。補正情報の生成が指示されない場合,映像補正装置は,入力された二つの画像と内部に保持している補正情報を組み合わせて一方の画像の補正を行い,二つの画像を出力する。ここで出力された画像は,映像補正装置20の後段に設置されている映像監視装置21に送信される。映像監視装置21では,入力された画像を解析し,結果を出力する。   FIG. 9 shows an embodiment in which the video correction device 20 and the video monitoring device 21 are independent. The video monitoring apparatus 21 of the present embodiment receives as an input an image which is an output of the video correction apparatus 20 and is a result of correcting an image obtained from the first camera by the second camera and an image of the second camera. . As shown in FIG. 10, images acquired by the first camera and the second camera are transmitted to the video correction device 20. When the generation of the correction information is instructed, the video correction device generates the correction information from the two input images and holds it inside. When generation of correction information is not instructed, the video correction apparatus combines one of the two input images and the correction information held therein to correct one image and outputs two images. The image output here is transmitted to the video monitoring device 21 installed at the subsequent stage of the video correction device 20. The video monitoring device 21 analyzes the input image and outputs the result.

図10には,第一のカメラと第二のカメラの撮影タイミングを同期させるための同期信号生成装置を搭載した映像補正装置の例を示したが,この機能は必ずしも必須のものではなく,このような同期信号を使用することでより精度の高い補正が行えるという性質のものである。また,同期信号生成装置は映像補正装置に内蔵する必要は無く,それ自体が独立のモジュールとして存在しても良いし,映像監視装置に搭載されても良い。   FIG. 10 shows an example of a video correction device equipped with a synchronization signal generation device for synchronizing the shooting timings of the first camera and the second camera, but this function is not necessarily essential, By using such a synchronization signal, correction can be performed with higher accuracy. Further, the synchronization signal generation device does not need to be built in the video correction device, and may exist as an independent module or may be installed in the video monitoring device.

図11に示した映像補正装置20と映像監視装置21は,図10に加えてさらに同期信号を出入力するための端子である同期信号出力端子1512と同期信号入力端子1513を備える。同期信号生成装置の出力は,映像補正装置20における補正終了時に二つの画像を同時に出力する際に,同期信号出力端子1512を通じて出力され,映像監視装置21が同期信号入力端子1513から受け取るように構成されている。映像監視装置21は,同期信号入力端子1513から同期信号を受け取ることで,同時刻において映像補正装置20から画像が出力されていると判断し,第一の解析装置1501と第二の解析装置1507に画像を入力する。画像の入力を受けた第一の解析装置1501と第二の解析装置1507はそれぞれ不審物検知等の処理を行い,解析結果を出力する。   The video correction device 20 and the video monitoring device 21 shown in FIG. 11 further include a synchronization signal output terminal 1512 and a synchronization signal input terminal 1513 which are terminals for inputting and outputting a synchronization signal in addition to FIG. The output of the synchronization signal generator is configured to be output through the synchronization signal output terminal 1512 when the two images are output simultaneously at the end of the correction in the video correction device 20, and received by the video monitoring device 21 from the synchronization signal input terminal 1513. Has been. The video monitoring device 21 receives the synchronization signal from the synchronization signal input terminal 1513, determines that an image is output from the video correction device 20 at the same time, and the first analysis device 1501 and the second analysis device 1507. Enter an image in. Receiving the image input, the first analysis device 1501 and the second analysis device 1507 each perform processing such as suspicious object detection and output an analysis result.

図4、5、6,9,10,11では、可視光撮影用の監視カメラ12と赤外光撮影用の監視カメラ17を備える構成を示したが、必ずしもカメラを二台用意する必要はない。   4, 5, 6, 9, 10, and 11, the configuration including the monitoring camera 12 for visible light imaging and the monitoring camera 17 for infrared light imaging is shown, but it is not always necessary to prepare two cameras. .

図12は、一台で可視光と赤外光の撮影を同時に行うことのできる監視カメラ19を用いた監視装置の実施例である。監視カメラ19の内部構造を図13に示す。本監視カメラ19は、入射光1900をレンズ1901で受け、内部に備えたプリズム1902を用いて、可視光1903と赤外光1905に分離する。可視光1903は可視光撮影用のカメラないしA/D変換機1904で、赤外光1905は赤外光撮影用のカメラないしA/D変換機1906で撮影され、それぞれ出力端子1907および1908から出力される。これら出力端子1907および1908を図4、5、6,9,10,11において、第一の監視カメラ12および第二の監視カメラ17と読み替えれば、備え付ける監視カメラは一つでも良い。   FIG. 12 shows an example of a monitoring device using a monitoring camera 19 that can simultaneously perform imaging of visible light and infrared light with a single unit. The internal structure of the surveillance camera 19 is shown in FIG. The surveillance camera 19 receives incident light 1900 with a lens 1901 and separates it into visible light 1903 and infrared light 1905 using a prism 1902 provided therein. Visible light 1903 is captured by a visible light camera or A / D converter 1904, and infrared light 1905 is captured by an infrared light camera or A / D converter 1906, and output from output terminals 1907 and 1908, respectively. Is done. If these output terminals 1907 and 1908 are read as the first monitoring camera 12 and the second monitoring camera 17 in FIGS. 4, 5, 6, 9, 10, 11, one monitoring camera may be provided.

図14に、本発明を適用した監視装置が、監視対象となる装置2004に内在するものを示す。本実施例の監視装置は,監視対象2004に組み込まれた,第一のカメラ2001と第二のカメラ2002と映像補正装置および監視装置が一体となった映像補正監視装置20005と表示装置2006と第二のカメラ2002で撮像可能な波長の不可視光源のみもしくは第一のカメラ2001で撮像可能な波長の可視光源を併せ持つ照明装置2003からなる。   FIG. 14 shows a monitoring device to which the present invention is applied that is inherent in the device 2004 to be monitored. The monitoring apparatus of the present embodiment includes a video correction monitoring apparatus 20005, a display apparatus 2006, and a first camera 2001, a second camera 2002, a video correction apparatus, and a monitoring apparatus that are incorporated in the monitoring target 2004. The illumination device 2003 includes only an invisible light source having a wavelength that can be imaged by the second camera 2002 or a visible light source having a wavelength that can be imaged by the first camera 2001.

第一のカメラ2001と第二のカメラ2002は,データ伝送用ケーブル2008および2009を用いて,映像補正監視装置2005に接続されている。また,表示装置2006は表示内容伝送用のケーブル2007を用いて,映像補正監視装置2005に接続されている。本実施例の監視装置は,省スペースであり,監視領域を細かく設定することができ,監視対象ごとに微調整が可能である。   The first camera 2001 and the second camera 2002 are connected to the video correction monitoring apparatus 2005 using data transmission cables 2008 and 2009. The display device 2006 is connected to the image correction monitoring device 2005 using a display content transmission cable 2007. The monitoring apparatus of this embodiment is space-saving, can set a monitoring area in detail, and can finely adjust for each monitoring target.

第一のカメラ2001は、データ伝送用ケーブル2008を通じて,映像補正監視装置2005に撮像データを伝送する。伝送するデータは,必ずしも撮像データのみに限定されることはなく,撮像データの撮影時刻情報や露出設定などの付加データを併せて送ることもできる。また,映像補正監視装置2005から第一のカメラ2001に向けて,露出調整などを指示するコマンドやパラメータなどの情報を送る場合もある。カメラの小型化を優先する場合は、調整機能や取得データ数を限定することがあり,撮像データのみを送る場合もある。   The first camera 2001 transmits the imaging data to the video correction monitoring apparatus 2005 through the data transmission cable 2008. The data to be transmitted is not necessarily limited to only the imaging data, and additional data such as shooting time information and exposure settings of the imaging data can be sent together. In addition, information such as a command or parameter for instructing exposure adjustment may be sent from the image correction monitoring apparatus 2005 to the first camera 2001. When priority is given to downsizing the camera, the adjustment function and the number of acquired data may be limited, and only imaging data may be sent.

第二のカメラ2002についても,データ伝送用ケーブル2009を通じて,上記の第一のカメラの場合と同様のやり取りを行う。表示装置2006は,表示内容伝送用のケーブル2007を通じて,映像補正監視装置2005が表示するべく生成した映像情報を受け取り,表示を行う。   The second camera 2002 also exchanges data through the data transmission cable 2009 in the same manner as in the case of the first camera. The display device 2006 receives and displays the video information generated by the video correction monitoring device 2005 for display via the display content transmission cable 2007.

本実施例では,表示装置2006が監視対象2004の情報表示装置を兼ねており,あるタイミングでは監視装置の処理結果を表示し,別のタイミングでは,監視対象の処理結果を表示するように,切り替えないし画面を複数に分割して表示装置を用いることを想定している。そのため,映像補正監視装置2005は,監視対象2004の情報処理装置を兼ねることとし,表示装置2006との接続は表示データ伝送用ケーブル2007の一本のみを示している。   In this embodiment, the display device 2006 is also used as an information display device for the monitoring target 2004, and the processing result of the monitoring device is displayed at one timing and the processing result of the monitoring target is displayed at another timing. It is assumed that the display device is used by dividing the screen into a plurality of screens. For this reason, the video correction monitoring apparatus 2005 also serves as an information processing apparatus for the monitoring target 2004, and only one display data transmission cable 2007 is connected to the display apparatus 2006.

映像補正監視装置2005と監視対象2004の情報処理装置を分離して備える場合は,表示データ伝送用ケーブル2007とは別に,監視対象2004の情報処理装置と表示装置を接続する新たな表示データ伝送用ケーブルを用いる。これら二本のケーブルは,表示装置2006に二つの受け口を用意して接続しても良いし,監視対象2004の情報処理装置からの表時データ伝送用ケーブルをいったん,映像補正監視装置2005に接続し,表示データの選択や合成を適宜行った上で,最終的な表示データを表示データ伝送用ケーブル2007で表示装置2006に伝送しても良い。   When the image correction monitoring device 2005 and the information processing device of the monitoring target 2004 are separately provided, a new display data transmission for connecting the information processing device of the monitoring target 2004 and the display device is provided separately from the display data transmission cable 2007. Use cables. These two cables may be connected to the display device 2006 with two receptacles, or the data transmission cable from the information processing device 2004 to be monitored is once connected to the video correction monitoring device 2005 The final display data may be transmitted to the display device 2006 by the display data transmission cable 2007 after appropriately selecting and combining the display data.

第一のカメラと第二のカメラの位置は,監視対象2004のフロントパネルを監視することができるように図14の位置に設置する例を示した。しかし,監視対象2004のうちで実際に監視を行いたい場所が限定されている場合や,フロントパネル以外の監視を行いたい場合は,必ずしも図示した場所に設置場所を限定する必要はない。   An example in which the positions of the first camera and the second camera are installed at the positions shown in FIG. 14 so that the front panel of the monitoring target 2004 can be monitored is shown. However, when the location to be monitored is limited in the monitoring target 2004 or when monitoring other than the front panel is desired, the installation location is not necessarily limited to the illustrated location.

また,第一のカメラと第二のカメラを左右に分離して設置した例を示したが,必ずしも分離する必要は無く,一ヶ所に隣接して設置してもよい。また,ひとつの箱に第一のカメラと第二のカメラの機能を一体化させて設置しても良い。本実施例の監視装置は,組込みによる省スペースの要求から,映像補正装置と監視装置が一体となった映像補正監視装置2005を用いているが,両者は必ずしもひとつの装置とする必要はない。   Moreover, although the example which separated and installed the 1st camera and the 2nd camera was shown, it does not necessarily need to isolate | separate and you may install adjacent to one place. Further, the functions of the first camera and the second camera may be integrated in one box. The monitoring apparatus of the present embodiment uses the video correction monitoring apparatus 2005 in which the video correction apparatus and the monitoring apparatus are integrated because of the requirement for space saving due to the built-in, but it is not always necessary to use a single apparatus.

照明装置2003は,監視対象2004の上部に設置しているが,監視対象部分を照らすことができればよく,より下方に設置するなど,監視対象2004の形状に依存して設置場所を変更する。また,照明装置2003は必ずしもひとつに限定する必要は無く,複数備えても良い。   The lighting device 2003 is installed above the monitoring target 2004. However, the lighting device 2003 only needs to be able to illuminate the monitoring target part, and is installed at a lower position depending on the shape of the monitoring target 2004. Further, the lighting device 2003 is not necessarily limited to one, and a plurality of lighting devices may be provided.

図15は,照明装置2003をカメラのハウジング2103に収めた例である。カメラのレンズ2101の周辺に光源2102を配置することで,監視対象2004に特別な照明を設置することなく,監視装置を構成することができる。   FIG. 15 shows an example in which the lighting device 2003 is housed in a camera housing 2103. By arranging the light source 2102 around the lens 2101 of the camera, a monitoring device can be configured without installing special illumination on the monitoring target 2004.

可視光源が,監視装置外にすでに設置されている場合は,不可視光源のみを内蔵したカメラを用いても良い。また,第一のカメラと第二のカメラのどちらか一方だけを,光源内臓のカメラとしても良い。   If a visible light source is already installed outside the monitoring device, a camera with only an invisible light source may be used. Further, only one of the first camera and the second camera may be a camera with a built-in light source.

図16は,光源内臓のカメラを用いる場合の実施例を表している。第一のカメラ2201と第二のカメラ2202の両方もしくは一方に光源を内蔵しており,監視対象2203を撮像する。撮像データを用いて,映像補正監視装置2204が監視を行う。本実施例では,監視対象2203に照明を取り付ける必要が無いため,監視装置を後から設置する場合により適している。   FIG. 16 shows an embodiment in which a camera with a built-in light source is used. A light source is incorporated in one or both of the first camera 2201 and the second camera 2202, and the monitoring target 2203 is imaged. The image correction monitoring device 2204 performs monitoring using the imaging data. In this embodiment, since it is not necessary to attach illumination to the monitoring target 2203, it is more suitable when the monitoring device is installed later.

本発明のカメラおよび監視装置ないし監視システムを用いることで、電源周波数の異な
る地域においても安定した監視映像を取得し、安定した監視を行うことができる。
By using the camera and the monitoring device or the monitoring system of the present invention, it is possible to acquire a stable monitoring image and perform stable monitoring even in regions having different power supply frequencies.

一般的な監視システムの構成。General monitoring system configuration. 一般的な監視装置の構成。General monitoring device configuration. フリッカー(ちらつき)の発生原理の説明図。Explanatory drawing of the generation principle of flicker (flicker). 本発明の監視システムの構成。The structure of the monitoring system of this invention. 本発明の監視装置の構成。The structure of the monitoring apparatus of this invention. 同期信号生成装置を持つ本発明の監視装置の構成。The structure of the monitoring apparatus of this invention which has a synchronizing signal production | generation apparatus. 本発明の監視システムで取得される画像の説明図。Explanatory drawing of the image acquired with the monitoring system of this invention. 本発明の監視装置における画像補正の説明図。Explanatory drawing of the image correction in the monitoring apparatus of this invention. 本発明の監視システムで用いられるカメラの構成例。2 is a configuration example of a camera used in the monitoring system of the present invention. 同期信号生成装置を持ち映像補正部と映像監視部が分かれた本発明の監視装置の構成。The structure of the monitoring apparatus of this invention which has a synchronizing signal production | generation apparatus and divided | segmented the video correction part and the video monitoring part. 同期信号により映像補正部と映像監視部を同期する本発明の監視装置の構成。The structure of the monitoring apparatus of this invention which synchronizes a video correction | amendment part and a video monitoring part with a synchronizing signal. 一台で可視光と赤外光の撮影を同時に行うことのできる監視カメラを備えた監視装置の構成。A configuration of a monitoring device including a monitoring camera capable of simultaneously capturing visible light and infrared light with a single unit. 一台で可視光と赤外光の撮影を同時に行うことのできる監視カメラの構成。A surveillance camera configuration that can capture visible light and infrared light at the same time. 監視対象に組み込んだ本発明の監視装置の構成。The structure of the monitoring apparatus of this invention incorporated in the monitoring object. 光源を内蔵したカメラの説明図。Explanatory drawing of the camera which incorporated the light source. 光源を内蔵したカメラを用いた本発明の監視装置の構成。The structure of the monitoring apparatus of this invention using the camera which incorporated the light source.

符号の説明Explanation of symbols

10:監視対象のブース、11:監視対象物、12:第一の監視カメラ、13:ケーブル、14:映像記録装置、15:映像監視装置、16:モニタ、17:第二の監視カメラ、18:本発明の映像補正監視装置、19:複数の波長の光から複数の画像を出力するカメラ、20:映像補正装置、21:映像監視装置、101:監視対象のブースの天井、102:監視対象のブースの蛍光灯、103:監視対象のブースの赤外光照明、201,202,203,204,205,206:光のエネルギーの時間変化を表す模式図形、207:203,204,206を重ね合わせた図、301,303,305:各時刻における第一のカメラの出力画像、302,304,306:各時刻における第二のカメラの出力画像、401:基準となる第一のカメラの出力画像、402:基準となる第二のカメラの出力画像、403:ある時刻における第一のカメラの出力画像、404:ある時刻における第二のカメラの出力画像、405:補正された第一のカメラの出力画像、1500:第一の画像等入力端子、1501:第一の監視装置、1502:出力生成装置、1503:映像監視装置の画像等出力端子、1504:補正情報計算装置、1505:補正情報、1506:補正装置、1507:第二の監視装置、1508:出力生成装置、1509:第二の画像等入力端子、1510:同期信号生成装置、1511.1512:同期信号出力端子、1513:同期信号入力端子、1900:カメラに入射する光、1901:入射光を受けるレンズ、1902:異なる波長の光を分離するプリズム、1903:第一の波長の光、1904:第一の波長の光を撮影するカメラ、1905:第二の波長の光、1906:第二の波長の光を撮影するカメラ、1907:第一の波長の光を撮影するカメラの画像出力端子、1908:第二の波長の光を撮影するカメラの画像出力端子。2001,2002,2201,2202:監視カメラ、2003:照明装置、2004,2203:監視対象の装置、2005,2204:映像補正監視装置、2006:表示装置、2007:表示内容伝送用ケーブル、2008,2009:データ伝送用ケーブル、2101:レンズ、2102:光源、2103:カメラのハウジング。   10: Booth to be monitored, 11: Monitored object, 12: First surveillance camera, 13: Cable, 14: Video recording device, 15: Video surveillance device, 16: Monitor, 17: Second surveillance camera, 18 : Video correction monitoring device of the present invention, 19: Camera that outputs multiple images from light of multiple wavelengths, 20: Video correction device, 21: Video monitoring device, 101: Ceiling of booth to be monitored, 102: Monitoring target Booth fluorescent lamp, 103: Infrared illumination of the booth to be monitored, 201, 202, 203, 204, 205, 206: Schematic diagram representing the temporal change of light energy, 207: Overlaid diagram of 203, 204, 206, 301, 303, 305: First camera at each time Output image, 302, 304, 306: Output image of second camera at each time, 401: Output image of first camera as reference, 402: Output image of second camera as reference, 403: First image at a certain time Camera output image, 404 at a certain time Second camera output image, 405: corrected first camera output image, 1500: first image input terminal, 1501: first monitoring device, 1502: output generation device, 1503: video monitoring device Image output terminal, 1504: Correction information calculation device, 1505: Correction information, 1506: Correction device, 1507: Second monitoring device, 1508: Output generation device, 1509: Second image input terminal, 1510: Synchronization signal Generator, 1511.1512: synchronization signal output terminal, 1513: synchronization signal input terminal, 1900: light incident on the camera, 1901: lens receiving incident light, 1902: prism for separating light of different wavelengths, 1903: first wavelength 1904: Camera that shoots light of the first wavelength, 1905: Light of the second wavelength, 1906: Camera that shoots light of the second wavelength, 1907: Camera that shoots light of the first wavelength Image output terminal, 1908: Image output terminal of the camera that captures light of the second wavelength. 2001, 2002, 2201, 2202: Surveillance camera, 2003: Lighting device, 2004, 2203: Device to be monitored, 2005, 2204: Video correction monitoring device, 2006: Display device, 2007: Display content transmission cable, 2008, 2009 : Data transmission cable, 2101: Lens, 2102: Light source, 2103: Camera housing.

Claims (12)

所定の頻度で撮像を行う第一および第二の撮像手段と、映像補正部と映像監視部とを有する監視装置であって、
前記第一及び前記第二の撮像手段は略同じ領域の映像を撮像し、
前記第一の撮像手段は該領域の映像を第一の波長領域において撮像して第一の画像を出力し、
前記第二の撮像手段は該領域の映像を第二の波長領域において撮像して第二の画像を出力し、
前記映像補正部は、前記第二の画像の輝度に基づいて前記第一の画像の輝度を補正し、
前記映像監視部は、前記輝度を補正された第一の画像と前記第二の画像とを用いて前記領域の監視処理を行うことを特徴とする監視装置。
A monitoring device having first and second imaging means for imaging at a predetermined frequency, a video correction unit, and a video monitoring unit,
The first and second imaging means capture images of substantially the same region,
The first imaging means captures an image of the region in a first wavelength region and outputs a first image;
The second imaging means captures an image of the region in the second wavelength region and outputs a second image,
The video correction unit corrects the luminance of the first image based on the luminance of the second image,
The monitoring apparatus, wherein the video monitoring unit performs the monitoring process of the area using the first image with the corrected brightness and the second image.
請求項1記載の監視装置であって、前記第一の波長領域は可視光の波長領域であり、前記第二の波長領域は赤外光の波長領域であることを特徴とする監視装置。   2. The monitoring apparatus according to claim 1, wherein the first wavelength region is a visible light wavelength region, and the second wavelength region is an infrared light wavelength region. 請求項1記載の監視装置であって、前記第一の撮像手段は、明るさが第一の周波数により変動する第一の光源による前記第一の波長領域の光で撮像を行い、前記第二の撮像手段は、前記撮像を行う所定の頻度の時間内では明るさが変動しない第二の光源による前記第二の波長領域の光で撮像を行うことを特徴とする監視装置。   2. The monitoring apparatus according to claim 1, wherein the first imaging unit performs imaging using light in the first wavelength region by a first light source whose brightness varies with a first frequency, The imaging device performs imaging with light in the second wavelength region by a second light source whose brightness does not vary within a predetermined frequency for performing the imaging. 請求項3記載の監視装置であって、前記第一の光源は蛍光灯であり、前記第二の光源はLEDまたはハロゲンランプであることを特徴とする監視装置。   4. The monitoring apparatus according to claim 3, wherein the first light source is a fluorescent lamp, and the second light source is an LED or a halogen lamp. 請求項3記載の監視装置であって、前記所定の頻度と前記第一の周波数は異なることを特徴とする監視装置。   4. The monitoring apparatus according to claim 3, wherein the predetermined frequency and the first frequency are different. 請求項1記載の監視装置であって、前記第一および前記第二の撮像手段は、第一および第二のカメラであることを特徴とする監視装置。   The monitoring apparatus according to claim 1, wherein the first and second imaging units are first and second cameras. 請求項1記載の監視装置であって、前記第一および前記第二の撮像手段は、同じレンズから入射された光をプリズムにより前記第一の波長領域の光と前記第二の波長領域の光とに分離し、それぞれを前記第一および前記第二の画像として撮像して出力する撮像手段であることを特徴とする監視装置。   2. The monitoring apparatus according to claim 1, wherein the first and second imaging units use a prism to convert light incident from the same lens into light in the first wavelength region and light in the second wavelength region. 3. And a first imaging unit for capturing and outputting the first and second images, respectively. 請求項1記載の監視装置であって、前記第一の撮像手段と前記第二の撮像手段とは撮影タイミングを同期するように制御されることを特徴とする監視装置。   The monitoring apparatus according to claim 1, wherein the first imaging unit and the second imaging unit are controlled to synchronize imaging timing. 請求項8記載の監視装置であって、前記第一の撮像手段と前記第二の撮像手段の撮影タイミングを同期するために、前記第一の撮像手段と前記第二の撮像手段が同期信号を受け取ることを特徴とする監視装置。   9. The monitoring apparatus according to claim 8, wherein the first imaging unit and the second imaging unit send a synchronization signal in order to synchronize the imaging timing of the first imaging unit and the second imaging unit. A monitoring device characterized by receiving. 請求項1記載の監視装置であって、前記映像監視装置は、複数の時刻に前記第一および第二の撮像手段により撮影された前記第一および第二の画像を用いて不審物検出を行うことを特徴とする監視装置。   The monitoring device according to claim 1, wherein the video monitoring device performs suspicious object detection using the first and second images taken by the first and second imaging means at a plurality of times. A monitoring device characterized by that. 第一の撮像手段、第二の撮像手段、映像補正部及び映像監視部は、第一の撮像手段及び第二の撮像手段により撮像する対象物に外在することを特徴とする請求項1記載の監視装置。   2. The first imaging unit, the second imaging unit, the video correction unit, and the video monitoring unit are located outside an object to be imaged by the first imaging unit and the second imaging unit. Monitoring device. 第一の撮像手段、第二の撮像手段、映像補正部及び映像監視部は、第一の撮像手段及び第二の撮像手段により撮像される対象物に内在することを特徴とする請求項1記載の監視装置。   The first imaging means, the second imaging means, the video correction unit, and the video monitoring unit are inherent in an object imaged by the first imaging means and the second imaging means. Monitoring device.
JP2007168371A 2006-10-06 2007-06-27 Camera and monitoring device using the camera Expired - Fee Related JP4969336B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2007168371A JP4969336B2 (en) 2006-10-06 2007-06-27 Camera and monitoring device using the camera
CN 200710161929 CN101159856B (en) 2006-10-06 2007-09-26 Vidicon and monitoring device using the same

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006274606 2006-10-06
JP2006274606 2006-10-06
JP2007168371A JP4969336B2 (en) 2006-10-06 2007-06-27 Camera and monitoring device using the camera

Publications (3)

Publication Number Publication Date
JP2008113412A true JP2008113412A (en) 2008-05-15
JP2008113412A5 JP2008113412A5 (en) 2010-05-13
JP4969336B2 JP4969336B2 (en) 2012-07-04

Family

ID=39445652

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007168371A Expired - Fee Related JP4969336B2 (en) 2006-10-06 2007-06-27 Camera and monitoring device using the camera

Country Status (2)

Country Link
JP (1) JP4969336B2 (en)
CN (1) CN101159856B (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8976259B2 (en) 2012-02-27 2015-03-10 Greywolf Technical Services, Inc. Methods and systems for modified wavelength diversity image compensation

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10222285A (en) * 1997-01-31 1998-08-21 Toshiba Corp Image extracting device
JPH11122536A (en) * 1997-10-15 1999-04-30 Sharp Corp Image pickup device
JP2001189926A (en) * 1999-12-28 2001-07-10 Mitsubishi Electric Corp Image pickup device for road monitor
JP2006127058A (en) * 2004-10-27 2006-05-18 Sumitomo Electric Ind Ltd Object recognition system and image processing device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1156152C (en) * 1999-10-08 2004-06-30 松下电器产业株式会社 Lighting scintillation detecting, compensating device and ac power supply frequency detecting device and method
JP2003198932A (en) * 2001-12-27 2003-07-11 Sharp Corp Flicker correction device, flicker correction method, and recording medium with flicker correction program recorded

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10222285A (en) * 1997-01-31 1998-08-21 Toshiba Corp Image extracting device
JPH11122536A (en) * 1997-10-15 1999-04-30 Sharp Corp Image pickup device
JP2001189926A (en) * 1999-12-28 2001-07-10 Mitsubishi Electric Corp Image pickup device for road monitor
JP2006127058A (en) * 2004-10-27 2006-05-18 Sumitomo Electric Ind Ltd Object recognition system and image processing device

Also Published As

Publication number Publication date
JP4969336B2 (en) 2012-07-04
CN101159856A (en) 2008-04-09
CN101159856B (en) 2010-12-29

Similar Documents

Publication Publication Date Title
US9225916B2 (en) System and method for enhancing video images in a conferencing environment
US8169496B2 (en) Image processing system and image acquisition method
US8384754B2 (en) Method and system of providing lighting for videoconferencing
US9148581B2 (en) Multi-function control illumination device
KR100961046B1 (en) Image-clock adjusting circuit and method
US10250855B2 (en) Video display apparatus, video display system, and luminance adjusting method of video display apparatus
US8531590B2 (en) Camera with precise visual indicator to subject when within camera view
US20110292241A1 (en) Extended flicker cancellation for auto exposure for a video camera
US20130083997A1 (en) Temporally structured light
JP2008277092A (en) Luminaire
JP6351151B2 (en) Image sensor check adapter and image sensor
JPWO2016163248A1 (en) Imaging apparatus and method, electronic device, and in-vehicle electronic device
JP4969336B2 (en) Camera and monitoring device using the camera
US9787908B1 (en) Frame synchronized room lighting
JP6917759B2 (en) Video generation system, video signal generator, and display device
KR100809286B1 (en) Video signal processing device of security camera
KR101233009B1 (en) CCTV Camera Illumination System
JP2008224593A (en) Monitoring device
KR20150136746A (en) A control system for lighting of cmos rolling-shutter type cctv camera
CN203827456U (en) Detection system used for internal layer surface of small-diameter seamless steel pipe
JP2005064973A (en) Photographing environment determinination method and imaging apparatus
JPH0851619A (en) Video intercom device
JP2009010840A (en) Imaging device
JPS62260478A (en) Solid-state image pickup device
WO2013092198A1 (en) Tv frame play-out in sync with line cycle

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100326

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100326

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100326

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120306

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120403

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150413

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees