JP5397714B1 - 監視用カメラ装置 - Google Patents
監視用カメラ装置 Download PDFInfo
- Publication number
- JP5397714B1 JP5397714B1 JP2012170733A JP2012170733A JP5397714B1 JP 5397714 B1 JP5397714 B1 JP 5397714B1 JP 2012170733 A JP2012170733 A JP 2012170733A JP 2012170733 A JP2012170733 A JP 2012170733A JP 5397714 B1 JP5397714 B1 JP 5397714B1
- Authority
- JP
- Japan
- Prior art keywords
- signal
- red
- lighting
- area
- control means
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000001514 detection method Methods 0.000 claims abstract description 82
- 238000003384 imaging method Methods 0.000 claims abstract description 75
- 239000000203 mixture Substances 0.000 claims abstract description 45
- 230000002238 attenuated effect Effects 0.000 claims abstract description 38
- 238000012544 monitoring process Methods 0.000 claims description 32
- 230000035945 sensitivity Effects 0.000 claims description 25
- 229920006395 saturated elastomer Polymers 0.000 claims description 17
- 230000004397 blinking Effects 0.000 claims description 14
- 230000003595 spectral effect Effects 0.000 claims description 13
- 238000009738 saturating Methods 0.000 abstract description 2
- 238000005286 illumination Methods 0.000 description 12
- 230000000694 effects Effects 0.000 description 10
- 238000000034 method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000008033 biological extinction Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 210000003127 knee Anatomy 0.000 description 3
- 239000000758 substrate Substances 0.000 description 3
- 230000004044 response Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000003705 background correction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
Abstract
【解決手段】その撮像領域内の交通信号機の信号灯の点灯、点灯/消灯時間、形状と個数又は信号灯制御信号を検出し、前記信号灯のRGB信号の比率を検出するRGB比率検出手段と、RGB信号の利得を制御する利得制御手段と、各信号灯色の混色を制御する混色制御手段とで構成する信号制御手段を備え、信号制御手段が、青黄赤それぞれの信号灯の点灯、点灯/消灯時間、形状と個数又は信号灯制御信号に基づいてRGB信号レベルの比率を検出し、R>G≒Bであれば赤色信号灯の赤色信号点灯領域と特定し、前記混色制御手段によってGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能とした。
【選択図】 図1
Description
(A)光量を部分的に減衰可能なフィルタが挿入されると、その減衰領域においては、例えば、交通信号等は透過率1〜2%のNDフィルタによって適正レベルを得ることができるが、交通信号機の信号灯近辺の被写体像は1〜2%の信号レベルとなり視認が困難になる。
(B)撮像領域内の交通信号機の信号灯の位置と個数は監視用カメラ装置の設置場所によって千差万別であり、NDフィルタの位置変更をその都度行わねばならない。
(C)プラスチック基板等の表面にNDフィルタを蒸着処理したり、機械的に摺動する機構が必要となり、製品原価が高騰すると同時に、故障頻度の増加・保守等の費用もかさむこととなる。
(D)また、前記NDフィルタの領域外、及び一般的な単板方式固体撮像素子を使用した監視用カメラは、特に夜間において暗部を監視しやすくしようと増幅器の利得を上げると、撮像した交通信号機の赤信号灯は飽和して薄い黄色、又は完全飽和して白色となり、誤認する恐れがある。
(1)固体撮像素子と、該固体撮像素子から出力される被写体像のRGB信号のそれぞれに対応する信号制御手段を備え、交通信号機を含む街路を監視する監視用カメラ装置において、
前記信号制御手段は、前記固体撮像素子の撮像領域内にある交通信号機のLED発光素子で構成された信号灯の点灯を検出する信号灯検出手段と、
前記検出された各信号灯の点灯→消灯→点灯を周期的に繰り返す点灯/消灯領域を検出する点灯/消灯領域検出手段と、
前記点灯/消灯領域検出手段から出力された点灯/消灯領域のRGB信号の比率を検出するRGB比率検出手段と、
各信号灯色の混色を制御する混色制御手段と、
RGB信号の利得を制御する利得制御手段とを備え、
前記信号灯検出手段は、前記固体撮像素子から出力されるRGB信号それぞれの当該固体撮像素子の分光感度特性と前記LED発光素子の発光波長特性に基づいて、前記撮像領域内で横方向又は縦方向で、かつ3個直列配列され周期的に繰り返し点灯/消灯する画素のxy座標値で示された領域を検出し、
前記点灯/消灯領域検出手段は、前記信号灯検出手段から出力された画素の前記xy座標値で示された領域に基づいて、前記3個の点灯/消灯している点灯/消灯領域を特定して前記RGB比率検出手段に送出し、
前記RGB比率検出手段は、前記点灯/消灯領域の点灯時のRGB信号のレベルを比較し、RGB信号レベルが、
R>G≒Bであれば赤色信号灯、
R>G>Bであれば黄色信号灯、
G>B>Rであれば青色信号灯、
として検出し、
前記RGB比率検出手段はさらに、前記R>G≒Bの信号レベルである点灯/消灯領域の画素の前記xy座標値で示された領域に基づいてこの領域を赤色信号点灯領域と特定して前記混色制御手段へ送出し、
前記混色制御手段は、前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じて前記利得制御手段に送出し、前記利得制御手段は入力したR信号を制御することで、赤色信号灯の点灯領域を適正な赤色としてモニタに表示可能にしてなることを特徴とする監視用カメラ装置。
(2)前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯の各点灯時間に同期して信号を出力する前記画素のxy座標値で示された領域に基づいて、青黄赤それぞれの前記特定された点灯/消灯領域におけるRGB信号レベルをそれぞれ比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする前項(1)に記載の監視用カメラ装置。
(3)前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯それぞれの点灯/消灯時間又は点灯/消灯時間間隔に同期して出力信号レベルが変化する画素のxy座標値で示された領域に基づいて、青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする前項(1)又は(2)に記載の監視用カメラ装置。
(4)前記信号制御手段は、前記RGB信号の飽和領域を検出する飽和領域検出手段を備え、夜間や雨天時の感度上昇制御により前記飽和領域検出手段によって前記RGB信号の飽和領域を検出したとき、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって信号レベルを飽和レベル以下に減衰し、かつ前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯それぞれの点灯/消灯時間又は点灯/消灯時間間隔に同期して出力信号レベルが変化する前記画素のxy座標値で示された領域に基づいて、青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする前項(1)〜(3)のいずれか1項に記載の監視用カメラ装置。
(5)前記信号制御手段は、前記交通信号機の信号灯の形状を認識し、その形状部分における青黄赤それぞれの信号灯のRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする前項(1)に記載の監視用カメラ装置。
(6)前記信号制御手段は、前記RGB信号の飽和領域を検出する飽和領域検出手段を備え、夜間や雨天時の感度上昇制御により前記飽和領域検出手段によって前記RGB信号の飽和領域を検出したとき、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって信号レベルを飽和レベル以下に減衰してから前記交通信号機の信号灯の形状を認識し、その形状部分における青黄赤それぞれの信号灯のRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする前項(1)又は(5)に記載の監視用カメラ装置。
(7)前記信号制御手段が、前記交通信号機の信号灯の点滅制御信号を受信し、赤色信号灯の点滅制御信号に基づいて点灯した前記赤色信号灯を赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする前項(1)に記載の監視用カメラ装置。
(8)監視用カメラ装置において、
前記信号制御手段が、昼間の飽和していない前記交通信号機の信号灯のRGB信号比率から赤色信号の赤色信号点灯領域と特定した前記赤色信号点灯領域をメモリに記憶し、常時前記メモリから読み出した赤色信号点灯領域に基づいて、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする)前項(1)〜(7)のいずれか1項に記載の監視用カメラ装置。
(9)前記信号制御手段が、前記交通信号機の各信号灯の点灯時と消灯時それぞれのRGB信号レベルをメモリに記憶し、メモリから読み出した前記各信号灯の点灯時と消灯時それぞれの信号レベルに基づいて、点灯時のRGB信号レベルから消灯時のRGB信号レベルを減算してなることを特徴とする前項(8)に記載の監視用カメラ装置。
〈1〉本発明によれば、
固体撮像素子と、該固体撮像素子から出力される被写体像のRGB信号のそれぞれに対応する信号制御手段を備え、交通信号機を含む街路を監視する監視用カメラ装置において、
前記信号制御手段は、前記固体撮像素子の撮像領域内にある交通信号機のLED発光素子で構成された信号灯の点灯を検出する信号灯検出手段と、
前記検出された各信号灯の点灯→消灯→点灯を周期的に繰り返す点灯/消灯領域を検出する点灯/消灯領域検出手段と、
前記点灯/消灯領域検出手段から出力された点灯/消灯領域のRGB信号の比率を検出するRGB比率検出手段と、
各信号灯色の混色を制御する混色制御手段と、
RGB信号の利得を制御する利得制御手段とを備え、
前記信号灯検出手段は、前記固体撮像素子から出力されるRGB信号それぞれの当該固体撮像素子の分光感度特性と前記LED発光素子の発光波長特性に基づいて、前記撮像領域内で横方向又は縦方向で、かつ3個直列配列され周期的に繰り返し点灯/消灯する画素のxy座標値で示された領域を検出し、
前記点灯/消灯領域検出手段は、前記信号灯検出手段から出力された画素の前記xy座標値で示された領域に基づいて、前記3個の点灯/消灯している点灯/消灯領域を特定して前記RGB比率検出手段に送出し、
前記RGB比率検出手段は、前記点灯/消灯領域の点灯時のRGB信号のレベルを比較し、RGB信号レベルが、
R>G≒Bであれば赤色信号灯、
R>G>Bであれば黄色信号灯、
G>B>Rであれば青色信号灯、
として検出することにより、監視画面中に存在し点滅する他のイルミネーション又は照明等と明確に区別し交通信号機の信号灯であると特定できる。
前記混色制御手段は、前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じて前記利得制御手段に送出し、前記利得制御手段は入力したR信号を制御することで、赤色信号灯の点灯領域を適正な赤色としてモニタに表示可能なので、
前記撮像領域内の各信号灯の点灯/消灯が順次行われることを利用し、点灯時の各信号灯の前記xy座標値で示された領域に基づいてRGB信号レベルを比較し、単板式固体撮像素子の赤色チャンネルの分光感度特性と赤色LED発光素子の発光波長特性から、後記するように赤色信号点灯領域のR信号が90〜100%のときG信号及び青信号が約5±2%〜4±2%であることから、R>G≒Bであれば他の黄色信号灯(R>G>B)及び緑色信号灯(G>R>B)と区別することができ、赤色信号灯の赤色信号点灯領域と特定できる。
前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯の各点灯時間に同期して信号を出力する前記画素のxy座標値で示された領域に基づいて、
青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルをそれぞれ比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示できるので、交通信号機の信号灯の青黄赤、あるいは赤黄又は赤青等2灯の点灯/消灯時間に同期して信号を出力する前記画素のxy座標値で示された領域に基づいて、青黄赤それぞれの信号灯のRGB信号レベルの比率を検出し赤色信号灯の赤色信号点灯領域と特定しているので、点滅している他のイルミネーション又は照明等と明確に区別して赤色信号灯の点灯を赤色としてモニタに表示できる。
前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯それぞれの点灯/消灯時間又は点灯/消灯時間間隔に同期して出力信号レベルが変化する画素のxy座標値で示された領域に基づいて、青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしているので、
交差点に設置された青黄赤3つの信号灯の指定された青>黄<赤≒青の順の点灯/消灯時間又は点灯/消灯時間間隔に同期した信号灯点灯の前記xy座標値で示された領域に基づいて赤色信号灯の赤色信号点灯領域をより確実に検出し、点滅している他のイルミネーション又は照明等と明確に区別して赤色信号灯の点灯を赤色としてモニタに表示できる。
前記信号制御手段は、前記RGB信号の飽和領域を検出する飽和領域検出手段を備え、夜間や雨天時の感度上昇制御により前記飽和領域検出手段によって前記RGB信号の飽和領域を検出したとき、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって信号レベルを飽和レベル以下に減衰し、かつ前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯それぞれの点灯/消灯時間又は点灯/消灯時間間隔に同期して出力信号レベルが変化する前記画素のxy座標値で示された領域に基づいて、青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしているので、
夜間や雨天時において交通信号機の信号灯が飽和状態にあっても、一旦、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって飽和レベル以下に信号レベルを減衰してから青黄赤それぞれの信号灯のRGB信号レベルの比率を検出していることから、確実に赤色信号灯を赤色信号点灯領域と特定することができる。
前記信号制御手段は、前記交通信号機の信号灯の形状を認識し、その形状部分における青黄赤それぞれの信号灯のRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能であり、
横方向又は縦方向3個直列配列(又は2個配列)の交通信号機の信号灯をその形状で認識し、そして赤色信号灯の赤色信号点灯領域と特定しているので、夜間において、他の形状のイルミネーション又は照明等と明確に区別して赤色信号灯を赤色としてモニタに表示できる。
前記信号制御手段は、前記RGB信号の飽和領域を検出する飽和領域検出手段を備え、夜間や雨天時の感度上昇制御により前記飽和領域検出手段によって前記RGB信号の飽和領域を検出したとき、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって信号レベルを飽和レベル以下に減衰してから前記交通信号機の信号灯の形状を認識し、その形状部分における青黄赤それぞれの信号灯のRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしているので、
夜間や雨天時の感度上昇制御により交通信号機の信号灯が飽和状態にあっても、一旦、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって飽和レベル以下に信号レベルを減衰してから形状を認識しているので、飽和状態による誤作動を防止でき、かつ正確に赤色信号灯を赤色として認識できる。
前記信号制御手段が、前記交通信号機の信号灯の点滅制御信号を受信し、赤色信号灯の点滅制御信号に基づいて点灯した前記赤色信号灯を赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしているので、前記交通信号機の信号灯の赤色信号灯の点滅制御信号を受信して前記赤色信号灯を赤色信号点灯領域として認識でき、点滅制御信号の受信のため有線又は無線の送受信機を設置することにより、赤色信号灯を最も確実に認識できると同時にGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示できる。
前記信号制御手段が、昼間の飽和していない前記交通信号機の信号灯のRGB信号比率から赤色信号の赤色信号点灯領域と特定した前記赤色信号点灯領域をメモリに記憶し、常時前記メモリから読み出した赤色信号点灯領域に基づいて、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしているので、前記交通信号機の信号灯が夜間の飽和している状態でも前記メモリから読み出した信号が赤色信号点灯領域と特定されているので、
夜間信号灯が飽和状態にあっても青黄赤それぞれの信号灯のRGB信号レベルの比率を検出する必要もなく、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、的確に赤色信号灯を赤色信号として出力できる。
前記信号制御手段が、前記交通信号機の各信号灯の点灯時と消灯時それぞれのRGB信号レベルをメモリに記憶し、メモリから読み出した前記各信号灯の点灯時と消灯時それぞれの信号レベルに基づいて、点灯時のRGB信号レベルから消灯時のRGB信号レベルを減算しているので、
昼間又は夜間において、赤色信号灯の表面に写り込んだ太陽光又は周辺の照明光による混色を防止して、前記赤色信号灯本来のRGB成分による赤色信号として、あるいは混色のない純粋の赤色信号として出力することができる。
図において、1は監視用カメラ装置、2は信号灯、3はレンズ、4は固体撮像素子、5はS/H(サンプルホールド回路)、6はA/D変換手段、7は信号制御手段、8はホワイトバランス制御手段、9はメモリ、10は信号灯検出手段、11は点灯/消灯領域検出手段、12はRGB比率検出手段、13は利得制御手段(信号処理回路を含む)、14は混色制御手段、15は飽和領域検出手段、16は出力端子、17はモニタ、18は撮像領域、19は信号灯画像、20は固体撮像素子駆動手段(電子シャッタ制御手段を含む)、21は同期信号発生手段である。
R>G≒B(又はR>>G、B)であれば赤色信号灯、
R>G>B(又はR、G>>B)であれば黄色信号灯、
G>B>R(又はG、B>>R)であれば青色信号灯、
として検出し特定している。
前記混色制御手段14は、前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じて前記利得制御手段13に送出し、前記利得制御手段13は入力したR信号を制御することで、赤色信号灯の点灯領域を適正な赤色としてモニタ17に表示可能にしたものである。
信号灯検出手段10は前記メモリ9から読み出したxy座標値で示された領域に基づき、3個の信号灯画像19が撮像領域18の縦軸方向y座標位置にあり、かつ撮像したフレームの二次元画像の画素の横軸方向のx座標上に信号灯画像19のxb、xye及びxrの直列配列された3個の座標位置を検出したとき、図2(b)発光タイミングチャートに示すとおり、xb(青信号)が点灯後消灯し、直後にxye(黄信号)が点灯後消灯し、続いてxr(赤信号)が点灯後消灯していることから、前記交通信号機の信号灯2であると認識することができる。
信号灯検出手段10は前記メモリ9から読み出したxy座標値で示された領域に基づき、3個の信号灯画像19が撮像領域18の横軸方向x座標位置にあり、かつ撮像したフレームの二次元画像の画素の縦軸方向のy座標上に信号灯画像19のyr、yye及びybの直列配列された3個の座標位置を検出したとき、図2(d)発光タイミングチャートに示すとおり、yb(青信号)が点灯後消灯し、直後にyye(黄信号)が点灯後消灯し、続いてyr(赤信号)が点灯後消灯していることから、前記交通信号機の信号灯2であると認識することができる。
ここで、図2(b)、(d)の縦軸は信号灯2の「明るさ」、横軸は時間(t)を示す。
点灯/消灯領域検出手段11は、前記信号灯検出手段10から出力され点灯/消灯する信号灯画像19の前記xy座標値で示された領域に基づいて、前記メモリ9から読み出した各画像信号のレベルと水平ライン(又は垂直ライン)ごとの点灯持続時間から各信号灯の点灯/消灯領域を検出し、前記RGB比率検出手段12へ入力する。
前記点灯/消灯領域検出手段11から入力された前記点灯/消灯領域の点灯時のRGB信号レベルの比率を比較し、画像信号レベルが、
R>G≒B(又はR>>G、B)であれば赤色信号灯、
R>G>B(又はR、G>>B)であれば黄色信号灯、
G>B>R(又はG、B>>R)であれば青色信号灯、
として検出し、3信号を備えた交通信号機の信号灯2であると特定できる。
青黄赤それぞれの信号灯のRGB信号レベルの比率を検出し、R>G≒Bであれば赤色信号灯の赤色信号点灯領域と特定し、前記混色制御手段14によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じて前記利得制御手段13に送出し、前記利得制御手段13は入力したR信号を制御することで、赤色信号灯の点灯領域を適正な赤色としてモニタに表示可能である。
図3(a)において、横軸は波長(nm)で、縦軸は相対感度を表す。
図3(b)において、横軸は波長(nm)で、縦軸は相対発光強度を表す。
図4において、図の昼夜における交通信号機の赤信号灯の色再現性説明図において、図4(a)は明るい昼間における交通信号機の赤信号灯の色再現性を示すRGB信号のレベル比を示す。
RSD=90R+5G+4B (1式)
であり、ほぼ赤色を再現している。
夜間においては、信号灯2周辺は暗くなるので、レンズ絞り制御手段、固体撮像素子の電子シャッタ制御手段及び利得制御手段13が作動し、画面全体を明るくする制御が行われる。
RSN=100R+75G+60B (2式)
となり、赤信号は赤色ではなく薄い黄色になる。
上記100Rの理論値は、90R×15倍で1350Rとなるが、100%を超えるR信号は白圧縮及びニー補正によって規定レベル100%に圧縮されるのでRSNの実測値は(2式)のとおりとなる。
RSN=90〜100R+5〜0G+4〜0B (3式)
即ち、通常のR信号又は混色のないR信号として出力され、モニタ17には赤色信号灯として表示される。
R≒100%、G≒36%、B≒1%以下
であることから、前記R>G>Bの信号レベルの信号灯点灯座標位置に基づいて黄色信号灯の黄色信号点灯領域と特定し、前記混色制御手段14によってB信号を減衰させ又は零とし、RG信号レベルはその比率を維持するようにして、黄色信号灯の点灯を黄色としてモニタに表示することもできる。
G≒100%、B≒80%、R≒1%以下
であることから、前記G>B>Rの信号レベルの信号灯点灯座標位置に基づいて青色信号灯の青色信号点灯領域と特定し、前記混色制御手段14によってR信号を減衰させ又は零とし、GB信号レベルはその比率を維持するようにして、青色信号灯の点灯を青色としてモニタに表示することもできる。
ステップS1「スタート」で本装置がスタートすると、先ずステップS2「飽和領域検出」で飽和領域検出手段15によって撮像領域内のRGB信号レベルが100%を超過し飽和状態であるかどうかを検出して「yes」のときは、ステップS2a「レベル正常化」で図示しないレンズ絞り手段、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段13のいずれか又は重複して作動させて飽和レベル以下に信号レベルを減衰させステップS3「WHTバランス制御」へ移行する。
R>G≒B(又はR>>G、B)であれば赤色信号灯、
R>G>B(又はR、G>>B)であれば黄色信号灯、
G>B>R(又はG、B>>R)であれば青色信号灯、
として検出し特定することができる。
青黄赤それぞれの信号灯のRGB信号レベルの比率を検出する必要もなく、
前記混色制御手段14によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、的確に赤色信号灯を赤色信号として出力できる。
本発明は、青黄赤それぞれの信号灯点灯位置、点灯/消灯時間、点灯/消灯時間間隔、形状と個数、信号灯の点滅制御信号に基づいてRGB信号レベルの比率を検出し、R>G≒Bであれば赤色信号灯の赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能とした。
2:信号灯
3:レンズ
4:固体撮像素子
5:S/H(サンプルホールド回路)
6:A/D変換手段
7:信号制御手段
8:ホワイトバランス制御手段
9:メモリ
10:信号灯検出手段
11:点灯/消灯領域検出手段
12:RGB比率検出手段
13:利得制御手段(信号処理回路を含む)
14:混色制御手段
15:飽和領域検出手段
16:出力端子
17:モニタ
18:撮像領域
19:信号灯画像
20:固体撮像素子駆動手段(電子シャッタ制御手段を含む)
21:同期信号発生手段
Claims (9)
- 固体撮像素子と、該固体撮像素子から出力される被写体像のRGB信号のそれぞれに対応する信号制御手段を備え、交通信号機を含む街路を監視する監視用カメラ装置において、
前記信号制御手段は、前記固体撮像素子の撮像領域内にある交通信号機のLED発光素子で構成された信号灯の点灯を検出する信号灯検出手段と、
前記検出された各信号灯の点灯→消灯→点灯を周期的に繰り返す点灯/消灯領域を検出する点灯/消灯領域検出手段と、
前記点灯/消灯領域検出手段から出力された点灯/消灯領域のRGB信号の比率を検出するRGB比率検出手段と、
各信号灯色の混色を制御する混色制御手段と、
RGB信号の利得を制御する利得制御手段とを備え、
前記信号灯検出手段は、前記固体撮像素子から出力されるRGB信号それぞれの当該固体撮像素子の分光感度特性と前記LED発光素子の発光波長特性に基づいて、前記撮像領域内で横方向又は縦方向で、かつ3個直列配列され周期的に繰り返し点灯/消灯する画素のxy座標値で示された領域を検出し、
前記点灯/消灯領域検出手段は、前記信号灯検出手段から出力された画素の前記xy座標値で示された領域に基づいて、前記3個の点灯/消灯している点灯/消灯領域を特定して前記RGB比率検出手段に送出し、
前記RGB比率検出手段は、前記点灯/消灯領域の点灯時のRGB信号のレベルを比較し、RGB信号レベルが、
R>G≒Bであれば赤色信号灯、
R>G>Bであれば黄色信号灯、
G>B>Rであれば青色信号灯、
として検出し、
前記RGB比率検出手段はさらに、前記R>G≒Bの信号レベルである点灯/消灯領域の画素の前記xy座標値で示された領域に基づいてこの領域を赤色信号点灯領域と特定して前記混色制御手段へ送出し、
前記混色制御手段は、前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じて前記利得制御手段に送出し、前記利得制御手段は入力したR信号を制御することで、赤色信号灯の点灯領域を適正な赤色としてモニタに表示可能にしてなることを特徴とする監視用カメラ装置。 - 前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯の各点灯時間に同期して信号を出力する前記画素のxy座標値で示された領域に基づいて、青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルをそれぞれ比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1に記載の監視用カメラ装置。
- 前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯それぞれの点灯/消灯時間又は点灯/消灯時間間隔に同期して出力信号レベルが変化する画素のxy座標値で示された領域に基づいて、
青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1又は2に記載の監視用カメラ装置。 - 前記信号制御手段は、前記RGB信号の飽和領域を検出する飽和領域検出手段を備え、夜間や雨天時の感度上昇制御により前記飽和領域検出手段によって前記RGB信号の飽和領域を検出したとき、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって信号レベルを飽和レベル以下に減衰し、
かつ前記RGB比率検出手段は、前記交通信号機の青黄赤色信号灯それぞれの点灯/消灯時間又は点灯/消灯時間間隔に同期して出力信号レベルが変化する前記画素のxy座標値で示された領域に基づいて、
青黄赤それぞれの信号灯の前記特定された点灯/消灯領域におけるRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1〜3のいずれか1項に記載の監視用カメラ装置。 - 前記信号制御手段は、前記交通信号機の信号灯の形状を認識し、その形状部分における青黄赤それぞれの信号灯のRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1に記載の監視用カメラ装置。
- 前記信号制御手段は、前記RGB信号の飽和領域を検出する飽和領域検出手段を備え、夜間や雨天時の感度上昇制御により前記飽和領域検出手段によって前記RGB信号の飽和領域を検出したとき、固体撮像素子の電子シャッタ制御手段及び前記利得制御手段によって信号レベルを飽和レベル以下に減衰してから前記交通信号機の信号灯の形状を認識し、その形状部分における青黄赤それぞれの信号灯のRGB信号レベルを比較し、R>G≒Bであれば赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1又は5に記載の監視用カメラ装置。
- 前記信号制御手段が、前記交通信号機の信号灯の点滅制御信号を受信し、赤色信号灯の点滅制御信号に基づいて点灯した前記赤色信号灯を赤色信号点灯領域と特定し、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1に記載の監視用カメラ装置。
- 前記信号制御手段が、昼間の飽和していない前記交通信号機の信号灯のRGB信号比率から赤色信号の赤色信号点灯領域と特定した前記赤色信号点灯領域をメモリに記憶し、常時前記メモリから読み出した赤色信号点灯領域に基づいて、前記混色制御手段によって前記赤色信号点灯領域内のGB信号を減衰させ又は零として前記赤色信号点灯領域における混色を減じ、赤色信号灯の点灯を赤色としてモニタに表示可能にしてなることを特徴とする請求項1〜7のいずれか1項に記載の監視用カメラ装置。
- 前記信号制御手段が、前記交通信号機の各信号灯の点灯時と消灯時それぞれのRGB信号レベルをメモリに記憶し、メモリから読み出した前記各信号灯の点灯時と消灯時それぞれの信号レベルに基づいて、点灯時のRGB信号レベルから消灯時のRGB信号レベルを減算してなることを特徴とする請求項8に記載の監視用カメラ装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012170733A JP5397714B1 (ja) | 2012-08-01 | 2012-08-01 | 監視用カメラ装置 |
US13/811,857 US9025026B2 (en) | 2012-08-01 | 2012-08-21 | Monitoring camera apparatus |
CN201280002428.9A CN103703768B (zh) | 2012-08-01 | 2012-08-21 | 监视用照相机装置 |
PCT/JP2012/071524 WO2014020774A1 (ja) | 2012-08-01 | 2012-08-21 | 監視用カメラ装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012170733A JP5397714B1 (ja) | 2012-08-01 | 2012-08-01 | 監視用カメラ装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP5397714B1 true JP5397714B1 (ja) | 2014-01-22 |
JP2014032435A JP2014032435A (ja) | 2014-02-20 |
Family
ID=50027497
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012170733A Expired - Fee Related JP5397714B1 (ja) | 2012-08-01 | 2012-08-01 | 監視用カメラ装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9025026B2 (ja) |
JP (1) | JP5397714B1 (ja) |
CN (1) | CN103703768B (ja) |
WO (1) | WO2014020774A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114038204A (zh) * | 2020-10-21 | 2022-02-11 | 南京光准科技有限公司 | 一种利用激光感知红绿灯状态实现闯红灯风险预警的装置 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101848451B1 (ko) * | 2013-08-19 | 2018-04-12 | 젠텍스 코포레이션 | 차량 후미등과 점멸 적색 정지등을 구별하기 위한 차량 촬상 시스템 및 방법 |
US9305224B1 (en) * | 2014-09-29 | 2016-04-05 | Yuan Ze University | Method for instant recognition of traffic lights countdown image |
US10412309B2 (en) * | 2015-04-13 | 2019-09-10 | Sony Corporation | Image capture device, method of image capture, signal processing device, method of signal processing, and program |
JP6477876B2 (ja) * | 2015-06-18 | 2019-03-06 | 日産自動車株式会社 | 信号機検出装置及び信号機検出方法 |
CN105303860B (zh) * | 2015-10-22 | 2017-06-16 | 四川膨旭科技有限公司 | 车辆行驶过程中对红绿灯进行识别的系统 |
CN106056921A (zh) * | 2016-08-18 | 2016-10-26 | 福州大学 | 基于二维码的车辆信息识别系统 |
EP3884840A1 (de) * | 2020-03-27 | 2021-09-29 | Diaspective Vision GmbH | Medizinische bildgebungsvorrichtung zur ortsaufgelösten aufnahme multispektraler videodaten |
CN112147439A (zh) * | 2020-09-10 | 2020-12-29 | 北京罗克维尔斯科技有限公司 | 仪表检测方法、装置、设备、存储介质和系统 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08149485A (ja) * | 1994-11-25 | 1996-06-07 | Nippon Avionics Co Ltd | Rgb色順次式テレビカメラ |
US9955551B2 (en) * | 2002-07-12 | 2018-04-24 | Yechezkal Evan Spero | Detector controlled illuminating system |
JP2007189559A (ja) * | 2006-01-13 | 2007-07-26 | Toshiba Corp | 監視カメラシステム及びカメラの制御方法 |
JP2007257303A (ja) | 2006-03-23 | 2007-10-04 | Honda Motor Co Ltd | 信号機認識装置 |
US7825829B2 (en) * | 2007-05-15 | 2010-11-02 | Jai, Inc. USA | Modulated light trigger for license plate recognition cameras |
JP2009055504A (ja) * | 2007-08-29 | 2009-03-12 | Ikegami Tsushinki Co Ltd | 監視カメラ装置 |
CN100507970C (zh) * | 2007-09-14 | 2009-07-01 | 清华大学 | 基于数字摄像机的闯红灯检测系统及方法 |
CN101426080B (zh) * | 2007-10-29 | 2012-10-17 | 三星电子株式会社 | 监控系统中检测并抑制相机移动产生的影响的设备和方法 |
JP5071198B2 (ja) | 2008-03-28 | 2012-11-14 | 富士通株式会社 | 信号機認識装置,信号機認識方法および信号機認識プログラム |
JP5254102B2 (ja) | 2009-03-24 | 2013-08-07 | 富士重工業株式会社 | 環境認識装置 |
WO2010116922A1 (ja) * | 2009-04-07 | 2010-10-14 | コニカミノルタオプト株式会社 | 画像入力装置 |
JP2011054110A (ja) * | 2009-09-04 | 2011-03-17 | Mitsutoyo Corp | 画像処理型測定機および画像処理測定方法 |
CN102129779B (zh) * | 2010-01-13 | 2014-04-23 | 中国科学院自动化研究所 | 路口交通信号安全和效率监测系统 |
JP2011216051A (ja) * | 2010-04-02 | 2011-10-27 | Institute Of National Colleges Of Technology Japan | 信号灯識別プログラムおよび信号灯識別装置 |
-
2012
- 2012-08-01 JP JP2012170733A patent/JP5397714B1/ja not_active Expired - Fee Related
- 2012-08-21 WO PCT/JP2012/071524 patent/WO2014020774A1/ja active Application Filing
- 2012-08-21 CN CN201280002428.9A patent/CN103703768B/zh not_active Expired - Fee Related
- 2012-08-21 US US13/811,857 patent/US9025026B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114038204A (zh) * | 2020-10-21 | 2022-02-11 | 南京光准科技有限公司 | 一种利用激光感知红绿灯状态实现闯红灯风险预警的装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2014020774A1 (ja) | 2014-02-06 |
CN103703768A (zh) | 2014-04-02 |
CN103703768B (zh) | 2017-03-08 |
US20140192190A1 (en) | 2014-07-10 |
US9025026B2 (en) | 2015-05-05 |
JP2014032435A (ja) | 2014-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5397714B1 (ja) | 監視用カメラ装置 | |
JP5485004B2 (ja) | 撮像装置 | |
US8723980B2 (en) | Image processing system and image acquisition method | |
CN104838644B (zh) | 求取检测区域图像信息的摄像机系统和方法 | |
JP2004501496A (ja) | Ccdセンサを用いた照明制御装置及び照明制御方法 | |
KR20130006122A (ko) | 발광 장치 및 이를 포함하는 카메라 시스템 | |
KR101169017B1 (ko) | 고해상도 씨모스 카메라가 적용된 주야간 자동 스위칭방식의 감시용 카메라 | |
US9105105B2 (en) | Imaging device, imaging system, and imaging method utilizing white balance correction | |
US20200029016A1 (en) | Moving object monitoring device and moving object monitoring system | |
JP4328865B2 (ja) | 赤外線照明内蔵型監視用デイナイトカメラ | |
KR20150057041A (ko) | 카메라의 led 조명제어 방법 및 그 장치 | |
JP2009253316A (ja) | 車載カメラ及びドライブレコーダ | |
KR101475468B1 (ko) | 적외선 led 카메라 시스템 | |
JP6504892B2 (ja) | 撮像装置 | |
US10154201B2 (en) | Method for adjusting photographic images to higher resolution | |
KR101943195B1 (ko) | 지능형 조명 제어장치 및 방법 | |
TWI629552B (zh) | 攝影裝置及影像管理系統 | |
KR101100489B1 (ko) | 주변조명밝기 조절장치 | |
US20060285008A1 (en) | Image pickup apparatus and image pickup method | |
KR102497020B1 (ko) | 다중 광도 및 다중 대역 영상 획득 장치 및 방법 | |
KR101691043B1 (ko) | 적외선을 이용하여 야간 컬러영상을 구현하는 폐쇄회로 텔레비전 카메라 | |
CN113401048B (zh) | 车用取像装置及其设定方法 | |
JP2007300374A (ja) | 監視カメラ装置 | |
CN112492124A (zh) | 一种控制摄像机系统的方法 | |
TWI572207B (zh) | Photographic image adjustment method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131009 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5397714 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |