JP2008113412A - Camera and monitoring device using it - Google Patents
Camera and monitoring device using it Download PDFInfo
- Publication number
- JP2008113412A JP2008113412A JP2007168371A JP2007168371A JP2008113412A JP 2008113412 A JP2008113412 A JP 2008113412A JP 2007168371 A JP2007168371 A JP 2007168371A JP 2007168371 A JP2007168371 A JP 2007168371A JP 2008113412 A JP2008113412 A JP 2008113412A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- image
- monitoring
- camera
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、フリッカー(ちらつき)の発生を抑えたカメラおよびカメラを用いた監視装置ないし監視システムに関する。 The present invention relates to a camera in which occurrence of flicker (flicker) is suppressed and a monitoring device or a monitoring system using the camera.
近年、犯罪事実の記録や抑止のため、カメラ(監視カメラ)を用いた映像監視装置を設置する施設が増加している。一般的な映像監視装置は、カメラと映像記録用の記録装置、映像確認用のモニターから構成されており、施設内の出入り口の天井や施設外の出入り口の壁などに設置されることが多い。このようなシステムを用いて、不審者などの出入りや滞在がないことを監視するのである。 In recent years, facilities for installing video surveillance devices using cameras (surveillance cameras) are increasing in order to record and deter criminal facts. A general video monitoring apparatus is composed of a camera, a recording device for video recording, and a monitor for video confirmation, and is often installed on the ceiling of the entrance / exit inside the facility or the wall of the entrance / exit outside the facility. By using such a system, it is monitored that there is no entry / exit of a suspicious person or stay.
さらに、一般家庭においても、訪問者が居住者を呼び出すためのインターホンが備えられている場合が多い。訪問者はインターホンに備えられている呼び鈴ボタンをおせば、居住者に訪問者が到着した旨の通知が行われ、玄関扉の開錠を促すことができる。近年では、インターホンにカメラを搭載し、訪問者の姿を居住者が事前に確認することができるようになっているものも販売されるようになっている。 Furthermore, even in ordinary households, there are many cases where an intercom is provided for a visitor to call a resident. If the visitor uses the doorbell button provided on the intercom, the resident is notified that the visitor has arrived, and can be prompted to unlock the entrance door. In recent years, an interphone equipped with a camera so that a resident can confirm the appearance of a visitor in advance has been sold.
一般的な監視カメラは、1秒間に60枚の画像を撮影して、記録装置や表示装置に送信する。人間の目の反応速度には限界があるため、このように多くの枚数を撮影して連続的に表示することで、体感的にはスムーズな動画像として知覚される。 A typical surveillance camera takes 60 images per second and transmits them to a recording device or a display device. Since the reaction speed of the human eye is limited, shooting a large number of images in this way and displaying them continuously allows them to be perceived as a smooth moving image.
しかし、1秒間に60枚の画像を撮影するという性質のため、照明の性質によってはフリッカーとよばれる映像のちらつきが観察されることがある。 However, because of the property of capturing 60 images per second, flickering of images called flicker may be observed depending on the nature of the illumination.
フリッカーの原因となる最も典型的な照明は、蛍光灯である。蛍光灯は、電気の変動に応じて放電し、放電によって発生した電子と管内の水銀原始と衝突して紫外線を発生する。この紫外線が蛍光物質に衝突することで光を発する。すなわち、光の強度が電源の周波数に強く影響を受ける。よく知られているように、日本においては西日本のAC電源の周数が60Hzであり東日本の周波数が50Hzと異なっている。世界においても各国で電源の周波数が異なっており、たとえば米国では60Hz、ヨーロッパでは50Hzが主に用いられている。 The most typical illumination that causes flicker is a fluorescent lamp. Fluorescent lamps discharge in response to fluctuations in electricity, and generate ultraviolet rays by colliding with the electrons generated by the discharge and the mercury source in the tube. Light is emitted when the ultraviolet rays collide with the fluorescent material. That is, the intensity of light is strongly influenced by the frequency of the power source. As is well known, in Japan, the frequency of the AC power supply in western Japan is 60 Hz, and the frequency of eastern Japan is different from 50 Hz. In the world, the frequency of the power supply is different in each country. For example, 60 Hz is mainly used in the United States, and 50 Hz is mainly used in Europe.
図3に、簡単にフリッカーの原因について示す。日本においては、AC電源の周波数が50Hzとなっている東日本でフリッカーが観測される。カメラは60Hz(1秒間に60回撮影する)で撮影を行い、蛍光灯の発する光は図3のように1/50秒で1周期となるように変動する。図中の201は、光のエネルギーを擬似的に三角形で表現したものであり、電源がサイン波で変化するのに応じて各時刻で蛍光灯から発せられる光のエネルギーは変化する。理想的には光のエネルギーの放射はサイン波となるが、実際にはきれいなサイン波となることはなく、若干いびつな山を形作る。しかし、ここでは、原理を説明するのであり、201のように三角波で考えることにする。 FIG. 3 simply shows the cause of flicker. In Japan, flicker is observed in eastern Japan where the frequency of the AC power supply is 50 Hz. The camera shoots at 60 Hz (shoots 60 times per second), and the light emitted from the fluorescent lamp fluctuates so that one cycle is 1/50 seconds as shown in FIG. 201 in the figure represents the energy of light in a pseudo triangle, and the energy of the light emitted from the fluorescent lamp changes at each time as the power source changes with a sine wave. Ideally, the emission of light energy is a sine wave, but in reality it is not a beautiful sine wave, and forms a slightly distorted mountain. However, here, the principle is explained, and a triangular wave like 201 is considered.
図3には、50Hzで変化する光のエネルギーを1/60秒で区切った様子をあわせて示した。たとえば、最初の1/60秒では202,203が取り込まれ、次の1/60秒では204,205,206が取り込まれる。すなわち、最初の画像には202,203の合計の光エネルギーが取得されるのに対して、次の画像には204,205,206の合計の光エネルギーが取得されるといったことを繰り返しているのである。 FIG. 3 also shows how the energy of light changing at 50 Hz is divided in 1/60 second. For example, 202, 203 is captured in the first 1/60 seconds, and 204, 205, 206 are captured in the next 1/60 seconds. That is, the total light energy of 202 and 203 is acquired in the first image, whereas the total light energy of 204, 205, and 206 is acquired in the next image.
さらに図3において、207に示したのは、203に204と206を重ね合わせた図形である。先ほどの最初の画像と次の画像では202と205の光エネルギーは同等なので、207を見れば、最初の画像と次の画像に含まれる光のエネルギーの差異が見て取れる。207を見れば、明らかに203の面積のほうが204,206の合計面積よりも大きいため、最初の画像のほうが次の画像よりも多くの光エネルギーを取得していることがわかる。すなわち、最初の画面のほうが次の画面よりも明るいということになる。 Further, in FIG. 3, what is indicated by 207 is a figure in which 204 and 206 are superimposed on 203. Since the light energy of 202 and 205 is the same in the first image and the next image, the difference in light energy contained in the first image and the next image can be seen by looking at 207. As can be seen from 207, the area of 203 is clearly larger than the total area of 204 and 206, so that the first image acquires more light energy than the next image. That is, the first screen is brighter than the next screen.
同様に考えれば、光のエネルギーが50Hzで変化している場合におこり、60Hzで変化している場合には起こらないことは明らかである。 Similarly, it is clear that this occurs when the light energy changes at 50 Hz and does not occur when it changes at 60 Hz.
従来、フリッカーを防止する技術として、カメラの1回の撮影速度を1秒間に100回撮影する速度に相当する100Hzまで増加させ、60Hzと同期するタイミングで撮影することで、各画像に取り込まれる光のエネルギーを安定させる方法が知られている。 すなわち、カメラは内部で60Hzの信号と100Hzの信号を発生し、60Hzの信号の1周期の開始時刻から、100Hzの信号の1周期の期間だけ、光を取り込むように撮像素子を制御する。このように構成することで、図3からも明らかなように、電源周波数が50Hzの場合でも、一回の撮影結果に含まれる光の量が一定となり、フリッカーが抑制される。 Conventionally, as a technology to prevent flicker, the light that is captured in each image is increased by increasing the shooting speed of the camera to 100 Hz, which corresponds to the shooting speed of 100 times per second, and shooting at a timing synchronized with 60 Hz. There are known methods for stabilizing the energy. That is, the camera internally generates a 60 Hz signal and a 100 Hz signal, and controls the image sensor so as to capture light only for one period of the 100 Hz signal from the start time of one cycle of the 60 Hz signal. With this configuration, as is apparent from FIG. 3, even when the power supply frequency is 50 Hz, the amount of light included in one imaging result is constant, and flicker is suppressed.
また、撮影対象が静止していると仮定すれば、複数枚の画像の平均値を1枚の画像とみなすことで、1枚の画像に含まれる光のエネルギーを安定させることができる。 If it is assumed that the object to be photographed is stationary, the energy of light contained in one image can be stabilized by regarding the average value of a plurality of images as one image.
また,特許文献1では、異なる複数の波長の光を観察して、そのうちで最も輝度値の大きな波長の光の撮像結果を出力画像として用いている。
Moreover, in
しかしながら、1秒間の撮影回数を増加させる方法では、1画像あたりの光のエネルギーは減少するため、画面の明るさが暗くなり、複数枚の画像の平均値を1枚の画像とみなす方法では、実質的に撮影速度が減少することに対応するため、画面内に移動物体が入った場合に残像が多く現れるため、監視という用途には望ましいとはいえない。 However, in the method of increasing the number of shootings per second, the energy of light per image decreases, so the brightness of the screen becomes dark, and in the method of considering the average value of multiple images as one image, In order to cope with a substantial decrease in shooting speed, a lot of afterimages appear when a moving object enters the screen, which is not desirable for monitoring purposes.
本発明は、1画像あたりの光エネルギーを低下させずに、また移動物体への追従性を失わずに、フリッカーを防止することができるカメラおよびカメラを用いた監視装置ないし監視システムを提供することを目的とする。 The present invention provides a camera capable of preventing flicker without reducing light energy per image and without losing followability to a moving object, and a monitoring apparatus or a monitoring system using the camera. With the goal.
以上の課題を解決し、目的を達成したカメラおよびカメラを用いた監視装置ないし監視システムを提供するために、本発明のカメラおよび監視装置ないし監視システムは、可視光の画像を撮影するカメラと、可視光とは異なる(蛍光灯の光とは異なる)波長の光の画像を撮影するカメラと、前記可視光とは異なる波長の光による画像を基準として前記可視光の画像の補正を行う。 In order to solve the above problems and to provide a camera and a monitoring device or monitoring system using the camera that have achieved the object, the camera and the monitoring device or monitoring system of the present invention include a camera that captures an image of visible light, The visible light image is corrected based on a camera that captures an image of light having a wavelength different from that of visible light (different from that of a fluorescent lamp) and an image of light having a wavelength different from that of the visible light.
図1に一般的な監視装置の構成を示す。ブース10には、監視対象となる装置11が設置されている。ブース10の天井101には蛍光灯102と監視カメラ12が取り付けられている。監視カメラ12の撮影した画像は、ケーブル13を通じて映像保存装置14や映像監視装置15に届けられる。映像監視装置15には、監視カメラ12の画像や映像監視装置15からの警報などを表示するための表示装置16がつながっている。映像保存装置14と映像監視装置15の接続の順序は一例であって、必ずしも図1の順序で接続されている必要はなく、用途によっては映像保存装置14を必要としない場合もある。
FIG. 1 shows the configuration of a general monitoring device. In the
図2は従来の映像監視装置15の内部構造についてより詳細に示したものである。監視カメラ12からの画像は、画像入力端子1500を通じて監視機能の本体である解析装置1501に送る。解析装置1501は入力された画像を適宜解析して、結果を出力生成装置1502に送る。ここで、解析装置1501が一般的に行うのは、入力された画像と過去に蓄積された画像との比較を行い、注目するべき差異が見られれば、その旨を警報として出力生成装置1502に送るという処理である。そのためには、解析装置1501内部に、幾分かの映像記憶手段を持ち、過去の画像を保存する場合や、映像保存装置14と通信することで、過去の画像を取り出すといった処理がおこなわれることがある。出力生成装置1502では、たとえば解析装置1501からの警報がなければ入力された画像をそのまま出力端子1503を通じて外部のモニタ16などに出力したり、解析装置1501からの警報があれば、その旨を映像的ないし音響的に出力端子1503を通じて外部に出力する。
FIG. 2 shows the internal structure of the conventional
本発明の監視装置の一例を図4に示す。図4の監視装置は、ブース10内に監視対象となる装置11が設置されている。ブース10の天井101には、蛍光灯102および赤外光発生装置103、さらに複数の監視カメラ12および17が設置されている。ここで、蛍光灯102や赤外光発生装置103および監視カメラ12および17は、必ずしも天井101に設置されている必要はない。つまり、監視対象を適切にライトアップして画像を取得することができれば壁面などに設置してもよく、設置場所を制限されることはない。また、ここで103を赤外光発生装置としたが、蛍光灯102が発する可視光と異なる波長の光であれば、赤外光に限定する必要はない。
An example of the monitoring apparatus of the present invention is shown in FIG. In the monitoring device of FIG. 4, a
本実施例において、監視カメラ12は可視光を撮影するカメラであり、監視カメラ17は赤外光を撮影するカメラである。もちろん、監視カメラ17は赤外光発生装置103の光を撮影することを目的としているため、103が赤外光以外(もちろん可視光以外)の波長の光であれば、それを撮影するのに好適な撮像系を持つカメラと置き換えればよい。よく知られているように、カメラのA/Dコンバータ部分に特定波長のみを通過するフィルタを用いれば、必要な波長の光を撮影するカメラを構成することができる。蛍光灯102の電源の周波数と監視カメラ12の1秒あたりの撮像回数とは異なるものとする。また、赤外光発生装置103は、電源の周波数に依存しない。すなわち、交流電源の特性を利用した発光方式ではなく、直流電源の特性を利用した発光方式を用いる。もしくは、交流電源の特性を利用する発光方式であっても、フィラメントを加熱して発光する白熱灯などのように、時刻ごとの照度のゆらぎがほとんど無い方式を用いる。実際に、白熱灯は赤外光を発しており、赤外光発生装置103として白熱灯を用いることもできる。この場合、白熱灯から発生する、本願において画像の補正に用いられる波長の光(たとえば赤外光)以外の可視光などの成分の光は、画像の補正に用いられないだけで、本願の監視システムを構成する上で特に問題になることは無い。また、赤外光発生装置103として、白熱灯の一種であるハロゲンランプを用いることもできる。ハロゲンランプは、同じワット数の白熱灯と比較すると、容積が約200分の1とコンパクト化が可能であり、2倍程度の発光寿命が得られるといった性質を持っている。ハロゲンランプは、タングステンでできたフィラメントを備えており、フィラメントに電流が流れると、タングステンが白熱して光を発する。フィラメント方式であれば、時刻ごとの照度のゆらぎがほとんど無いため、蛍光灯のようにちらつきを誘発することが無い。
In this embodiment, the
本実施例では、監視カメラ12および17で撮影された画像は、ケーブル13を通じて映像保存装置14や監視装置18に送られる。また、監視装置18の出力が表示装置16に送られる。ケーブル13は多くの場合同軸ケーブルであるが,近年ではIPネットワークに直接接続することのできる監視カメラも多く,ケーブル13はLANケーブルとなる場合もある。その他,特別な仕様に従うケーブルである可能性も有るが,いずれであっても本発明の適用を妨げるものではない。
In the present embodiment, images taken by the
本発明の映像監視装置18の構成は、図2に示した従来の映像監視装置15とは異なる。本発明の映像監視装置の構成を図5に示す。図5に示すように、本発明の映像監視装置18は、従来の第一の解析装置1501と出力生成装置1508に加えて、補正情報計算装置1504、補正装置1506、第二の解析装置1507を備える。以下、第一のカメラ12からは可視光を撮影した画像が出力され、第二のカメラ17からは赤外光を撮影した画像が出力されるとする。
The configuration of the
本発明の映像監視装置18は、補正情報1505を作成するために、第一のカメラ12および第二のカメラ17から同時刻ないし近接した時刻に撮影した画像を補正情報計算装置1504に取り込む。図8に示すように、一方の取得画像にフリッカーが発生するため、ほとんどの時刻で第一のカメラ12からの画像401と第二のカメラ17からの画像402の相対的な明るさは異なる。そこで、次のように、明るさのバラツキのないカメラ17の画像と、基準となるカメラ12の画像(401)との相対的な明るさの違いを覚えておいて、後のタイミングで、カメラ12の画像が基準よりも暗くなっている場合は明るく、明るくなっている場合は暗くなるように補正する。
The
補正情報計算装置1504は、第一のカメラからの画像401と第二のカメラからの画像402を比較して、後の時刻で第一のカメラからの画像403と第二のカメラからの画像404を受け取ったときに、補正装置1506で補正を行って画像403を画像401と同程度の明るさの画像405に補正することができるように、補正情報1505を計算する。前記の機能を実現するための補正情報のうちで最も簡単なものは、画像401と画像402の差分値である。基準となる差分値があれば、第二のカメラからの画像402や404の明るさが安定しているという仮定の元に、第一のカメラからの画像の明るさを補正することができる。つまり、画像内のある領域に着目して、画像403と画像404の差分値が補正情報の差分値と一致するかどうかを確認し、不一致であれば、一致ないし十分に近くなるように画像403の画素値を補正するのである。
The correction
ここでは、画像401,403を可視光を撮影した画像であると想定したが、可視光を撮影するカメラの画像は、さらに赤、緑、青の三成分に分割して処理することが多く、本発明の監視装置においても、補正情報1505を三成分それぞれについて作成するようにすることで、より高精度の補正を行うことができる。もちろん、前記の三成分に制限される必要はなく、輝度信号(Y)、輝度信号と青色成分の差(U)、および輝度信号と赤色成分の差(V)で表現されるYUV形式などで補正情報を作成しても良いことは言うまでもない。更にいえば、差分値を計算する上で、同一の座標の画素のみではなく、その周辺の座標の画素の明るさの平均値を用いるようにすれば、撮像系に現れる熱雑音の影響を和らげることができる。
Here, it is assumed that the
ここでは、画像401と402を基準として補正情報1505を計算する例について述べたが、第一のカメラ12で撮影される画像にはフリッカーが含まれており、図7の301,303,305に見られるように、撮影時刻とともに明るさが変化する。よって、監視装置18は、補正情報計算装置1504に入力する画像を選択する手段を持ち、第一のカメラ12からの画像がもっとも明るいときに補正情報1505を生成するといったように、第一の監視装置1501で用いるのに好適な画像が得られるような調整を行うことも可能である。
Here, an example in which the
本発明の監視システムは、第一の監視カメラと第二の監視カメラの撮影時刻がわずかにずれていても期待する効果が得られるが、完全に同期した場合に最も補正効果が高い。図6に記載の監視装置18は、さらに同期信号生成装置1510を備えており、同期信号出力端子1511から第一のカメラ12および第二の監視カメラ17に同期信号を送出する。第一の監視カメラ12および第二の監視カメラ17は、受け取った同期信号に従って撮影を行うことで、同一時刻に撮影を行うことができる。前記の同期信号は一般的には60Hzを用いるが、必ずしも60Hzに限定されるわけではない。一方で、AC電源の周波数から同期信号を作り出すことも可能であり、その場合は監視装置18から同期信号を送出する必要はない。とはいえ、複数のAC電源の周期について同期が保証されるわけではないので、監視装置18からの同期信号を用いる方式のほうが信頼性が高いといえる。
The monitoring system of the present invention can achieve the expected effect even if the shooting times of the first monitoring camera and the second monitoring camera are slightly shifted, but the correction effect is highest when they are completely synchronized. The
補正情報の計算方法について一例を示す。補正情報計算用の第一のカメラの画像X1および第二のカメラの画像X2が得られた場合、X1=A*X2の関係にあると考え、ベクトルAを計算する。つまり、X1,X2の各座標の画素値x1[i,j]およびx2[i,j]に対して、x1[i,j]=a[i,j]*x2[i,j]となるa[i,j]を計算する。このa[i,j]が補正情報となる。なお,i,jは撮影された画像のx座標およびy座標の位置を表す変数であり,a[i,j]は画像の座標(i,j)に対応する補正情報である。本例で,映像補正装置に保持する補正情報は,すべての座標に対するa[i,j]の値である。 An example of the correction information calculation method will be described. When the image X1 of the first camera and the image X2 of the second camera for correction information calculation are obtained, the vector A is calculated assuming that X1 = A * X2. That is, x1 [i, j] = a [i, j] * x2 [i, j] for the pixel values x1 [i, j] and x2 [i, j] at the coordinates of X1 and X2 Calculate a [i, j]. This a [i, j] is the correction information. Note that i, j is a variable representing the x-coordinate and y-coordinate positions of the photographed image, and a [i, j] is correction information corresponding to the image coordinates (i, j). In this example, the correction information held in the video correction device is the value of a [i, j] for all coordinates.
次に補正方法に関する一例を示す。第一のカメラの画像X3および第二のカメラの画像X4が得られた場合、X3=B*X4の関係にあると考え、ベクトルBを計算する。つまり、X3,X4の各座標の画素値x3[i,j]およびx4[i,j]に対して、x3[i,j]=b[i,j]*x4[i,j]となるb[i,j]を計算する。b[i,j]と補正情報であるa[i,j]を比較して、近い値であると判断されればx3[i,j]の値をそのまま使用する。b[i,j]とa[i,j]が乖離している場合は、x3[i,j]=a[i,j]*x4[i,j]として補正する。本実施例では、X3が可視光画像(R,G,B)でX4が赤外光画像(グレースケール)であるから、x3[i,j]をR,G,Bに分解してx3R[i,j], x3G[i,j], x3B[i,j]それぞれ独立にx4を用いた補正を行っても良い。 Next, an example regarding the correction method is shown. When the image X3 of the first camera and the image X4 of the second camera are obtained, the vector B is calculated assuming that X3 = B * X4. That is, x3 [i, j] = b [i, j] * x4 [i, j] is obtained for the pixel values x3 [i, j] and x4 [i, j] at the coordinates of X3 and X4. b [i, j] is calculated. b [i, j] is compared with a [i, j] as correction information, and if it is determined that the values are close, the value of x3 [i, j] is used as it is. If b [i, j] and a [i, j] are different, correction is made as x3 [i, j] = a [i, j] * x4 [i, j]. In this embodiment, since X3 is a visible light image (R, G, B) and X4 is an infrared light image (grayscale), x3 [i, j] is decomposed into R, G, B and x3R [ i, j], x3G [i, j], x3B [i, j] may be corrected independently using x4.
以上では、簡単な補正の例を示したが、補正情報を作成するために使用する画像の枚数は必ずしも1枚(1組)に限定する必要は無く、複数の画像を用いてもよい。複数の画像を用いることで、異なる時刻の第一のカメラの画像と第二のカメラの画像の差分同士の差分を補正情報とするなど、より複雑な補正情報を作成することができる。可視光照明の明滅間隔と撮影間隔の関係によっては、時刻tにおける第一のカメラの画像と第二のカメラの画像の差分D(t)と次の時刻t+1における同様の差分D(t+1)の差分絶対値|D(t+1)-D(t)|が一定になる場合もあり、そのような場合は補正情報をよりコンパクトにすることができる。また、補正情報は、最初に一度だけ作成する方法だけではなく、画像が入力されるごとに再作成ないし更新するように構成してもよいことは言うまでもない。 Although an example of simple correction has been described above, the number of images used to create correction information is not necessarily limited to one (one set), and a plurality of images may be used. By using a plurality of images, it is possible to create more complicated correction information such as using the difference between the difference between the first camera image and the second camera image at different times as the correction information. Depending on the relationship between the blinking interval of visible light illumination and the shooting interval, the difference D (t) between the image of the first camera and the image of the second camera at time t and the similar difference D (t at the next time t + 1 In some cases, the difference absolute value | D (t + 1) −D (t) | of +1) may be constant. In such a case, the correction information can be made more compact. Further, it is needless to say that the correction information is not only generated once at the beginning, but may be recreated or updated every time an image is input.
映像補正装置20と映像監視装置21が独立した場合の実施例を図9に示す。本実施例の映像監視装置21は,映像補正装置20の出力であり第一のカメラから得られた画像を第二のカメラで補正した結果である画像と第二のカメラの画像を入力として受け取る。図10に示すように,第一のカメラと第二のカメラで取得された画像は,映像補正装置20に送信される。映像補正装置は,補正情報の生成が指示された場合,入力された二つの画像から補正情報を生成して,内部に保持する。補正情報の生成が指示されない場合,映像補正装置は,入力された二つの画像と内部に保持している補正情報を組み合わせて一方の画像の補正を行い,二つの画像を出力する。ここで出力された画像は,映像補正装置20の後段に設置されている映像監視装置21に送信される。映像監視装置21では,入力された画像を解析し,結果を出力する。
FIG. 9 shows an embodiment in which the
図10には,第一のカメラと第二のカメラの撮影タイミングを同期させるための同期信号生成装置を搭載した映像補正装置の例を示したが,この機能は必ずしも必須のものではなく,このような同期信号を使用することでより精度の高い補正が行えるという性質のものである。また,同期信号生成装置は映像補正装置に内蔵する必要は無く,それ自体が独立のモジュールとして存在しても良いし,映像監視装置に搭載されても良い。 FIG. 10 shows an example of a video correction device equipped with a synchronization signal generation device for synchronizing the shooting timings of the first camera and the second camera, but this function is not necessarily essential, By using such a synchronization signal, correction can be performed with higher accuracy. Further, the synchronization signal generation device does not need to be built in the video correction device, and may exist as an independent module or may be installed in the video monitoring device.
図11に示した映像補正装置20と映像監視装置21は,図10に加えてさらに同期信号を出入力するための端子である同期信号出力端子1512と同期信号入力端子1513を備える。同期信号生成装置の出力は,映像補正装置20における補正終了時に二つの画像を同時に出力する際に,同期信号出力端子1512を通じて出力され,映像監視装置21が同期信号入力端子1513から受け取るように構成されている。映像監視装置21は,同期信号入力端子1513から同期信号を受け取ることで,同時刻において映像補正装置20から画像が出力されていると判断し,第一の解析装置1501と第二の解析装置1507に画像を入力する。画像の入力を受けた第一の解析装置1501と第二の解析装置1507はそれぞれ不審物検知等の処理を行い,解析結果を出力する。
The
図4、5、6,9,10,11では、可視光撮影用の監視カメラ12と赤外光撮影用の監視カメラ17を備える構成を示したが、必ずしもカメラを二台用意する必要はない。
4, 5, 6, 9, 10, and 11, the configuration including the
図12は、一台で可視光と赤外光の撮影を同時に行うことのできる監視カメラ19を用いた監視装置の実施例である。監視カメラ19の内部構造を図13に示す。本監視カメラ19は、入射光1900をレンズ1901で受け、内部に備えたプリズム1902を用いて、可視光1903と赤外光1905に分離する。可視光1903は可視光撮影用のカメラないしA/D変換機1904で、赤外光1905は赤外光撮影用のカメラないしA/D変換機1906で撮影され、それぞれ出力端子1907および1908から出力される。これら出力端子1907および1908を図4、5、6,9,10,11において、第一の監視カメラ12および第二の監視カメラ17と読み替えれば、備え付ける監視カメラは一つでも良い。
FIG. 12 shows an example of a monitoring device using a
図14に、本発明を適用した監視装置が、監視対象となる装置2004に内在するものを示す。本実施例の監視装置は,監視対象2004に組み込まれた,第一のカメラ2001と第二のカメラ2002と映像補正装置および監視装置が一体となった映像補正監視装置20005と表示装置2006と第二のカメラ2002で撮像可能な波長の不可視光源のみもしくは第一のカメラ2001で撮像可能な波長の可視光源を併せ持つ照明装置2003からなる。
FIG. 14 shows a monitoring device to which the present invention is applied that is inherent in the
第一のカメラ2001と第二のカメラ2002は,データ伝送用ケーブル2008および2009を用いて,映像補正監視装置2005に接続されている。また,表示装置2006は表示内容伝送用のケーブル2007を用いて,映像補正監視装置2005に接続されている。本実施例の監視装置は,省スペースであり,監視領域を細かく設定することができ,監視対象ごとに微調整が可能である。
The
第一のカメラ2001は、データ伝送用ケーブル2008を通じて,映像補正監視装置2005に撮像データを伝送する。伝送するデータは,必ずしも撮像データのみに限定されることはなく,撮像データの撮影時刻情報や露出設定などの付加データを併せて送ることもできる。また,映像補正監視装置2005から第一のカメラ2001に向けて,露出調整などを指示するコマンドやパラメータなどの情報を送る場合もある。カメラの小型化を優先する場合は、調整機能や取得データ数を限定することがあり,撮像データのみを送る場合もある。
The
第二のカメラ2002についても,データ伝送用ケーブル2009を通じて,上記の第一のカメラの場合と同様のやり取りを行う。表示装置2006は,表示内容伝送用のケーブル2007を通じて,映像補正監視装置2005が表示するべく生成した映像情報を受け取り,表示を行う。
The
本実施例では,表示装置2006が監視対象2004の情報表示装置を兼ねており,あるタイミングでは監視装置の処理結果を表示し,別のタイミングでは,監視対象の処理結果を表示するように,切り替えないし画面を複数に分割して表示装置を用いることを想定している。そのため,映像補正監視装置2005は,監視対象2004の情報処理装置を兼ねることとし,表示装置2006との接続は表示データ伝送用ケーブル2007の一本のみを示している。
In this embodiment, the
映像補正監視装置2005と監視対象2004の情報処理装置を分離して備える場合は,表示データ伝送用ケーブル2007とは別に,監視対象2004の情報処理装置と表示装置を接続する新たな表示データ伝送用ケーブルを用いる。これら二本のケーブルは,表示装置2006に二つの受け口を用意して接続しても良いし,監視対象2004の情報処理装置からの表時データ伝送用ケーブルをいったん,映像補正監視装置2005に接続し,表示データの選択や合成を適宜行った上で,最終的な表示データを表示データ伝送用ケーブル2007で表示装置2006に伝送しても良い。
When the image
第一のカメラと第二のカメラの位置は,監視対象2004のフロントパネルを監視することができるように図14の位置に設置する例を示した。しかし,監視対象2004のうちで実際に監視を行いたい場所が限定されている場合や,フロントパネル以外の監視を行いたい場合は,必ずしも図示した場所に設置場所を限定する必要はない。
An example in which the positions of the first camera and the second camera are installed at the positions shown in FIG. 14 so that the front panel of the
また,第一のカメラと第二のカメラを左右に分離して設置した例を示したが,必ずしも分離する必要は無く,一ヶ所に隣接して設置してもよい。また,ひとつの箱に第一のカメラと第二のカメラの機能を一体化させて設置しても良い。本実施例の監視装置は,組込みによる省スペースの要求から,映像補正装置と監視装置が一体となった映像補正監視装置2005を用いているが,両者は必ずしもひとつの装置とする必要はない。
Moreover, although the example which separated and installed the 1st camera and the 2nd camera was shown, it does not necessarily need to isolate | separate and you may install adjacent to one place. Further, the functions of the first camera and the second camera may be integrated in one box. The monitoring apparatus of the present embodiment uses the video
照明装置2003は,監視対象2004の上部に設置しているが,監視対象部分を照らすことができればよく,より下方に設置するなど,監視対象2004の形状に依存して設置場所を変更する。また,照明装置2003は必ずしもひとつに限定する必要は無く,複数備えても良い。
The
図15は,照明装置2003をカメラのハウジング2103に収めた例である。カメラのレンズ2101の周辺に光源2102を配置することで,監視対象2004に特別な照明を設置することなく,監視装置を構成することができる。
FIG. 15 shows an example in which the
可視光源が,監視装置外にすでに設置されている場合は,不可視光源のみを内蔵したカメラを用いても良い。また,第一のカメラと第二のカメラのどちらか一方だけを,光源内臓のカメラとしても良い。 If a visible light source is already installed outside the monitoring device, a camera with only an invisible light source may be used. Further, only one of the first camera and the second camera may be a camera with a built-in light source.
図16は,光源内臓のカメラを用いる場合の実施例を表している。第一のカメラ2201と第二のカメラ2202の両方もしくは一方に光源を内蔵しており,監視対象2203を撮像する。撮像データを用いて,映像補正監視装置2204が監視を行う。本実施例では,監視対象2203に照明を取り付ける必要が無いため,監視装置を後から設置する場合により適している。
FIG. 16 shows an embodiment in which a camera with a built-in light source is used. A light source is incorporated in one or both of the
本発明のカメラおよび監視装置ないし監視システムを用いることで、電源周波数の異な
る地域においても安定した監視映像を取得し、安定した監視を行うことができる。
By using the camera and the monitoring device or the monitoring system of the present invention, it is possible to acquire a stable monitoring image and perform stable monitoring even in regions having different power supply frequencies.
10:監視対象のブース、11:監視対象物、12:第一の監視カメラ、13:ケーブル、14:映像記録装置、15:映像監視装置、16:モニタ、17:第二の監視カメラ、18:本発明の映像補正監視装置、19:複数の波長の光から複数の画像を出力するカメラ、20:映像補正装置、21:映像監視装置、101:監視対象のブースの天井、102:監視対象のブースの蛍光灯、103:監視対象のブースの赤外光照明、201,202,203,204,205,206:光のエネルギーの時間変化を表す模式図形、207:203,204,206を重ね合わせた図、301,303,305:各時刻における第一のカメラの出力画像、302,304,306:各時刻における第二のカメラの出力画像、401:基準となる第一のカメラの出力画像、402:基準となる第二のカメラの出力画像、403:ある時刻における第一のカメラの出力画像、404:ある時刻における第二のカメラの出力画像、405:補正された第一のカメラの出力画像、1500:第一の画像等入力端子、1501:第一の監視装置、1502:出力生成装置、1503:映像監視装置の画像等出力端子、1504:補正情報計算装置、1505:補正情報、1506:補正装置、1507:第二の監視装置、1508:出力生成装置、1509:第二の画像等入力端子、1510:同期信号生成装置、1511.1512:同期信号出力端子、1513:同期信号入力端子、1900:カメラに入射する光、1901:入射光を受けるレンズ、1902:異なる波長の光を分離するプリズム、1903:第一の波長の光、1904:第一の波長の光を撮影するカメラ、1905:第二の波長の光、1906:第二の波長の光を撮影するカメラ、1907:第一の波長の光を撮影するカメラの画像出力端子、1908:第二の波長の光を撮影するカメラの画像出力端子。2001,2002,2201,2202:監視カメラ、2003:照明装置、2004,2203:監視対象の装置、2005,2204:映像補正監視装置、2006:表示装置、2007:表示内容伝送用ケーブル、2008,2009:データ伝送用ケーブル、2101:レンズ、2102:光源、2103:カメラのハウジング。 10: Booth to be monitored, 11: Monitored object, 12: First surveillance camera, 13: Cable, 14: Video recording device, 15: Video surveillance device, 16: Monitor, 17: Second surveillance camera, 18 : Video correction monitoring device of the present invention, 19: Camera that outputs multiple images from light of multiple wavelengths, 20: Video correction device, 21: Video monitoring device, 101: Ceiling of booth to be monitored, 102: Monitoring target Booth fluorescent lamp, 103: Infrared illumination of the booth to be monitored, 201, 202, 203, 204, 205, 206: Schematic diagram representing the temporal change of light energy, 207: Overlaid diagram of 203, 204, 206, 301, 303, 305: First camera at each time Output image, 302, 304, 306: Output image of second camera at each time, 401: Output image of first camera as reference, 402: Output image of second camera as reference, 403: First image at a certain time Camera output image, 404 at a certain time Second camera output image, 405: corrected first camera output image, 1500: first image input terminal, 1501: first monitoring device, 1502: output generation device, 1503: video monitoring device Image output terminal, 1504: Correction information calculation device, 1505: Correction information, 1506: Correction device, 1507: Second monitoring device, 1508: Output generation device, 1509: Second image input terminal, 1510: Synchronization signal Generator, 1511.1512: synchronization signal output terminal, 1513: synchronization signal input terminal, 1900: light incident on the camera, 1901: lens receiving incident light, 1902: prism for separating light of different wavelengths, 1903: first wavelength 1904: Camera that shoots light of the first wavelength, 1905: Light of the second wavelength, 1906: Camera that shoots light of the second wavelength, 1907: Camera that shoots light of the first wavelength Image output terminal, 1908: Image output terminal of the camera that captures light of the second wavelength. 2001, 2002, 2201, 2202: Surveillance camera, 2003: Lighting device, 2004, 2203: Device to be monitored, 2005, 2204: Video correction monitoring device, 2006: Display device, 2007: Display content transmission cable, 2008, 2009 : Data transmission cable, 2101: Lens, 2102: Light source, 2103: Camera housing.
Claims (12)
前記第一及び前記第二の撮像手段は略同じ領域の映像を撮像し、
前記第一の撮像手段は該領域の映像を第一の波長領域において撮像して第一の画像を出力し、
前記第二の撮像手段は該領域の映像を第二の波長領域において撮像して第二の画像を出力し、
前記映像補正部は、前記第二の画像の輝度に基づいて前記第一の画像の輝度を補正し、
前記映像監視部は、前記輝度を補正された第一の画像と前記第二の画像とを用いて前記領域の監視処理を行うことを特徴とする監視装置。 A monitoring device having first and second imaging means for imaging at a predetermined frequency, a video correction unit, and a video monitoring unit,
The first and second imaging means capture images of substantially the same region,
The first imaging means captures an image of the region in a first wavelength region and outputs a first image;
The second imaging means captures an image of the region in the second wavelength region and outputs a second image,
The video correction unit corrects the luminance of the first image based on the luminance of the second image,
The monitoring apparatus, wherein the video monitoring unit performs the monitoring process of the area using the first image with the corrected brightness and the second image.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007168371A JP4969336B2 (en) | 2006-10-06 | 2007-06-27 | Camera and monitoring device using the camera |
CN 200710161929 CN101159856B (en) | 2006-10-06 | 2007-09-26 | Vidicon and monitoring device using the same |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006274606 | 2006-10-06 | ||
JP2006274606 | 2006-10-06 | ||
JP2007168371A JP4969336B2 (en) | 2006-10-06 | 2007-06-27 | Camera and monitoring device using the camera |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2008113412A true JP2008113412A (en) | 2008-05-15 |
JP2008113412A5 JP2008113412A5 (en) | 2010-05-13 |
JP4969336B2 JP4969336B2 (en) | 2012-07-04 |
Family
ID=39445652
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007168371A Expired - Fee Related JP4969336B2 (en) | 2006-10-06 | 2007-06-27 | Camera and monitoring device using the camera |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP4969336B2 (en) |
CN (1) | CN101159856B (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8976259B2 (en) | 2012-02-27 | 2015-03-10 | Greywolf Technical Services, Inc. | Methods and systems for modified wavelength diversity image compensation |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10222285A (en) * | 1997-01-31 | 1998-08-21 | Toshiba Corp | Image extracting device |
JPH11122536A (en) * | 1997-10-15 | 1999-04-30 | Sharp Corp | Image pickup device |
JP2001189926A (en) * | 1999-12-28 | 2001-07-10 | Mitsubishi Electric Corp | Image pickup device for road monitor |
JP2006127058A (en) * | 2004-10-27 | 2006-05-18 | Sumitomo Electric Ind Ltd | Object recognition system and image processing device |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1156152C (en) * | 1999-10-08 | 2004-06-30 | 松下电器产业株式会社 | Lighting scintillation detecting, compensating device and ac power supply frequency detecting device and method |
JP2003198932A (en) * | 2001-12-27 | 2003-07-11 | Sharp Corp | Flicker correction device, flicker correction method, and recording medium with flicker correction program recorded |
-
2007
- 2007-06-27 JP JP2007168371A patent/JP4969336B2/en not_active Expired - Fee Related
- 2007-09-26 CN CN 200710161929 patent/CN101159856B/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10222285A (en) * | 1997-01-31 | 1998-08-21 | Toshiba Corp | Image extracting device |
JPH11122536A (en) * | 1997-10-15 | 1999-04-30 | Sharp Corp | Image pickup device |
JP2001189926A (en) * | 1999-12-28 | 2001-07-10 | Mitsubishi Electric Corp | Image pickup device for road monitor |
JP2006127058A (en) * | 2004-10-27 | 2006-05-18 | Sumitomo Electric Ind Ltd | Object recognition system and image processing device |
Also Published As
Publication number | Publication date |
---|---|
JP4969336B2 (en) | 2012-07-04 |
CN101159856A (en) | 2008-04-09 |
CN101159856B (en) | 2010-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9225916B2 (en) | System and method for enhancing video images in a conferencing environment | |
US8169496B2 (en) | Image processing system and image acquisition method | |
US8384754B2 (en) | Method and system of providing lighting for videoconferencing | |
US9148581B2 (en) | Multi-function control illumination device | |
KR100961046B1 (en) | Image-clock adjusting circuit and method | |
US10250855B2 (en) | Video display apparatus, video display system, and luminance adjusting method of video display apparatus | |
US8531590B2 (en) | Camera with precise visual indicator to subject when within camera view | |
US20110292241A1 (en) | Extended flicker cancellation for auto exposure for a video camera | |
US20130083997A1 (en) | Temporally structured light | |
JP2008277092A (en) | Luminaire | |
JP6351151B2 (en) | Image sensor check adapter and image sensor | |
JPWO2016163248A1 (en) | Imaging apparatus and method, electronic device, and in-vehicle electronic device | |
JP4969336B2 (en) | Camera and monitoring device using the camera | |
US9787908B1 (en) | Frame synchronized room lighting | |
JP6917759B2 (en) | Video generation system, video signal generator, and display device | |
KR100809286B1 (en) | Video signal processing device of security camera | |
KR101233009B1 (en) | CCTV Camera Illumination System | |
JP2008224593A (en) | Monitoring device | |
KR20150136746A (en) | A control system for lighting of cmos rolling-shutter type cctv camera | |
CN203827456U (en) | Detection system used for internal layer surface of small-diameter seamless steel pipe | |
JP2005064973A (en) | Photographing environment determinination method and imaging apparatus | |
JPH0851619A (en) | Video intercom device | |
JP2009010840A (en) | Imaging device | |
JPS62260478A (en) | Solid-state image pickup device | |
WO2013092198A1 (en) | Tv frame play-out in sync with line cycle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100326 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100326 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100326 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120306 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120403 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150413 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |