WO2019026457A1 - 画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体 - Google Patents

画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体 Download PDF

Info

Publication number
WO2019026457A1
WO2019026457A1 PCT/JP2018/023612 JP2018023612W WO2019026457A1 WO 2019026457 A1 WO2019026457 A1 WO 2019026457A1 JP 2018023612 W JP2018023612 W JP 2018023612W WO 2019026457 A1 WO2019026457 A1 WO 2019026457A1
Authority
WO
WIPO (PCT)
Prior art keywords
blocks
flat
image monitoring
dirt
brightness
Prior art date
Application number
PCT/JP2018/023612
Other languages
English (en)
French (fr)
Inventor
釣部　智行
Original Assignee
パナソニックＩｐマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックＩｐマネジメント株式会社 filed Critical パナソニックＩｐマネジメント株式会社
Publication of WO2019026457A1 publication Critical patent/WO2019026457A1/ja
Priority to US16/656,205 priority Critical patent/US10701352B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/28—Circuitry to measure or to take account of the object contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30168—Image quality inspection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation

Definitions

  • the present disclosure relates to an image monitoring device, an image monitoring method, an image monitoring program, and a recording medium.
  • Patent Document 1 There has been proposed a monitoring device that analyzes an image obtained from a camera mounted on a vehicle to detect another vehicle or a person.
  • a method of detecting camera dirt has also been proposed because accurate detection can not be performed if dirt such as mud adheres to the camera (for example, Patent Document 1).
  • inter-frame differences of video signals obtained at different timings are sequentially integrated, and it is determined that dirt is attached to the lens when the area where the integrated value is equal to or less than a predetermined value is large.
  • Patent Document 1 can not always detect dirt accurately. Further, since the differences between the frames are integrated and determined, it takes time to determine the adhesion of the dirt.
  • the present disclosure provides an image monitoring device, an image monitoring method, an image monitoring program, and a recording medium that can accurately detect camera dirt without time delay.
  • An image monitoring device includes a maximum value / minimum value calculation unit, a flat block determination unit, a flat block count unit, and a dirt adhesion determination unit.
  • the maximum value / minimum value calculation unit is configured to calculate a maximum value of luminance of a plurality of pixels constituting each of a plurality of blocks and each of a plurality of blocks set in one frame of the video signal obtained through the lens. Calculate the minimum value respectively.
  • the flat block determination unit determines, for each of the plurality of blocks, whether or not the luminance of each of the plurality of blocks is flat based on the maximum value and the minimum value.
  • the flat block counting unit counts the number of blocks whose brightness is flat in one frame.
  • the dirt adhesion determination unit determines whether dirt is attached to the lens based on the number of blocks having flat brightness.
  • an image monitoring method first, for each of a plurality of blocks set in one frame of a video signal obtained through a lens, a plurality of pixels forming each of a plurality of blocks, The maximum and minimum values of luminance are calculated respectively. Next, for each of the plurality of blocks, it is determined based on the maximum value and the minimum value whether or not the brightness of each of the plurality of blocks is flat. Furthermore, the number of blocks with flat luminance in one frame is counted. Then, it is determined whether dirt is attached to the lens based on the number of blocks having flat luminance.
  • An image monitoring program causes a computer to function as the maximum value / minimum value calculation unit, the flat block determination unit, the flat block counting unit, and the dirt adhesion determination unit.
  • a non-transitory recording medium stores the image monitoring program in a computer-readable manner.
  • camera dirt can be detected without a time delay as compared with the method of integrating the differences between a plurality of frames.
  • a block diagram showing a schematic configuration of an image monitoring device according to an embodiment of the present disclosure A block diagram showing in detail the configuration of the image processing unit in the image monitoring apparatus shown in FIG. A diagram for explaining a block set in one frame of a video signal obtained through a lens
  • FIG. 1 is a block diagram showing a schematic configuration of an image monitoring apparatus according to the present embodiment.
  • the image monitoring apparatus includes a video signal processing unit 3, an exposure control unit 4, an image processing unit 5, and an image memory 6.
  • the image signal processing unit 3 receives an image signal of light formed on the imaging device 2 through the lens 1. Then, based on the control of the exposure control unit 4, the video signal processing unit 3 performs amplification processing and the like on the video signal according to the external light.
  • the video signal output from the video signal processing unit 3 is stored in the image memory 6 for each frame.
  • the image processing unit 5 uses one frame stored in the image memory 6 to determine whether dirt is attached to the lens 1 or not.
  • FIG. 2 is a block diagram showing the configuration of the image processing unit 5 in detail.
  • FIG. 3 is a diagram for explaining a block set in one frame of a video signal obtained through a lens.
  • the image processing unit 5 includes a maximum value / minimum value calculation unit 51, a flatness determination unit 52, a flat block counting unit 53, and a dirt adhesion detection unit 54.
  • the video of one frame is virtually divided into a plurality of blocks 71.
  • a plurality of blocks 71 are set in one frame.
  • Each block 71 is composed of a plurality of pixels.
  • the block 71 may be configured by 32 ⁇ 32 pixels or 64 pixels ⁇ 64 pixels.
  • the image processing unit 5 processes a predetermined effective area 75 in which a bumper or the like is not shown in the video signal.
  • the maximum value minimum value calculation unit 51 illustrated in FIG. 2 calculates the maximum value and the minimum value of the luminance of the plurality of pixels constituting the block 71 for each of the plurality of blocks 71 to be processed.
  • the flatness determination unit 52 determines whether the brightness of the block 71 to be processed is flat based on the maximum value and the minimum value of the brightness.
  • the flat block counting unit 53 counts the number of blocks 71 whose brightness is flat in one frame.
  • the dirt adhesion detection unit 54 determines whether the dirt 73 is attached to the lens 1 based on the number of blocks 71 having flat luminance.
  • FIGS. 1 and 2 may be implemented by hardware or software. In the latter case, each functional unit can be realized by the processor executing a predetermined image monitoring program. Further, the whole of FIG. 1 may be in one device or may be distributed to a plurality of devices.
  • FIG. 4 is a flowchart showing an example of the processing operation of the image monitoring apparatus of FIG.
  • the flat block counting unit 53 in the image processing unit 5 previously initializes the number of flat blocks to 0 (step S1).
  • the video signal processing unit 3 processes the video signal from the imaging device 2 based on the control of the exposure control unit 4. For example, when the entire video is dark, the video signal processing unit 3 amplifies the video signal so that the entire video becomes bright (step S2). Thereby, the video signal subjected to the exposure control is input to the image processing unit 5 and stored in the image memory 6. Thereafter, the process of detecting the adhesion of dirt is performed on one frame of the video signal.
  • the maximum value / minimum value calculation unit 51 of the image processing unit 5 determines one block in one frame as a processing target block. Then, the maximum value and the minimum value of the luminance among the plurality of pixels constituting the processing target block are calculated (step S3).
  • the flatness determination unit 52 determines whether the brightness of the processing target block is flat based on the maximum value and the minimum value of the brightness. More specifically, when the maximum value-minimum value is less than or equal to a predetermined threshold value TH1 (first threshold value) (YES in step S4), the flatness determination unit 52 determines that the brightness of the processing target block is flat. . On the other hand, when the maximum value-minimum value is larger than the threshold value TH1 (NO in step S4), the flatness determination unit 52 determines that the luminance of the processing target block is not flat.
  • TH1 first threshold value
  • the flat block counting unit 53 regards the processing target block as a flat block, and adds one flat block number. (Step S5). The above process is performed on all blocks in one frame (NO in step S6), and when it is completed (YES in step S6), the number of flat blocks in one frame is counted.
  • the dirt adhesion detection unit 54 determines whether dirt is attached to the lens 1 based on the number of flat blocks in one frame. More specifically, when the number of flat blocks in one frame is equal to or greater than a predetermined threshold value TH2 (second threshold value) (YES in step S7), the dirt adhesion detection unit 54 has dirt on the lens 1 It is determined that (step S8a). On the other hand, if the number of flat blocks is less than the threshold value TH2 (NO in step S7), the dirt adhesion detection unit 54 determines that dirt is not attached to the lens 1 (step S8b).
  • TH2 second threshold value
  • information on whether or not dirt is attached to the lens 1 is output from the image monitoring apparatus.
  • the stain attached to the lens 1 When the exposure control is performed on the video signal, when the entire video becomes bright, the stain attached to the lens 1 also becomes bright, and when the entire video becomes dark, the stain attached to the lens 1 also becomes dark. That is, the brightness of the stain may change depending on the frame. Therefore, if the contamination adhesion determination is performed using a plurality of frames, the accuracy of the determination is lowered.
  • the contamination determination is performed using only one frame without straddling a plurality of frames. Therefore, even in the case of performing exposure control, it is possible to perform the contamination adhesion determination accurately without time delay.
  • the present disclosure is useful, for example, as an image monitoring device that analyzes an image obtained from a camera mounted on a vehicle to detect another vehicle or a person.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Exposure Control For Cameras (AREA)

Abstract

画像監視装置は、最大値最小値算出部と、平坦ブロック判定部と、平坦ブロック計数部と、汚れ付着判定部とを有する。最大値最小値算出部は、レンズを通して得られた映像信号のうちの１フレーム内に設定される複数のブロックのそれぞれについて、複数のブロックのそれぞれを構成する複数の画素の、輝度の最大値および最小値を各々算出する。平坦ブロック判定部は、複数のブロックのそれぞれについて、最大値および最小値に基づいて、複数のブロックのそれぞれの輝度が平坦か否かを判定する。平坦ブロック計数部は、１フレーム内で輝度が平坦なブロックの数を計数する。汚れ付着判定部は、輝度が平坦なブロックの数に基づいてレンズに汚れが付着しているか否かを判定する。

Description

画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体
　本開示は、画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体に関する。
　車両に搭載されたカメラから得られた画像を解析して他の車両や人を検出する監視装置が提案されている。カメラに泥などの汚れが付着すると正確な検出ができなくなるため、カメラの汚れを検知する方法も提案されている（例えば、特許文献１）。特許文献１の手法では、異なるタイミングで得られた映像信号のフレーム間差分を順次積算し、積算値が所定値以下となる領域が大きい場合に、レンズに汚れが付着していると判断する。
日本国特許第３８０７３３１号公報
　しかしながら、特許文献１の手法では、必ずしも精度よく汚れを検知できるとは限らない。また、フレーム間差分を積算して判断するため、汚れ付着の判断に時間を要している。
　本開示は、精度よく時間遅延なくカメラの汚れを検知できる画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体を提供する。
　本開示の一態様による画像監視装置は、最大値最小値算出部と、平坦ブロック判定部と、平坦ブロック計数部と、汚れ付着判定部とを有する。最大値最小値算出部は、レンズを通して得られた映像信号のうちの１フレーム内に設定される複数のブロックのそれぞれについて、複数のブロックのそれぞれを構成する複数の画素の、輝度の最大値および最小値を各々算出する。平坦ブロック判定部は、複数のブロックのそれぞれについて、最大値および最小値に基づいて、複数のブロックのそれぞれの輝度が平坦か否かを判定する。平坦ブロック計数部は、１フレーム内で輝度が平坦なブロックの数を計数する。汚れ付着判定部は、輝度が平坦なブロックの数に基づいてレンズに汚れが付着しているか否かを判定する。
　本開示の一態様による画像監視方法では、まず、レンズを通して得られた映像信号のうちの１フレーム内に設定される複数のブロックのそれぞれについて、複数のブロックのそれぞれを構成する複数の画素の、輝度の最大値および最小値を各々算出する。次に、複数のブロックのそれぞれについて、最大値および最小値に基づいて、複数のブロックのそれぞれの輝度が平坦か否かを判定する。さらに、１フレーム内で輝度が平坦なブロックの数を計数する。そして、輝度が平坦なブロックの数に基づいてレンズに汚れが付着しているか否かを判定する。
　本開示の一態様による画像監視プログラムは、コンピュータを、上記最大値最小値算出部と、平坦ブロック判定部と、平坦ブロック計数部と、汚れ付着判定部として機能させる。
　本開示の一態様による非一過性の記録媒体は、上記画像監視プログラムをコンピュータに読み取り可能に格納している。
　本開示によれば、露光制御により映像信号の輝度が変動しても精度よく、かつ、複数フレームの差分を積算する手法と比べて時間遅延なくカメラの汚れを検知できる。
本開示の実施の形態に係る画像監視装置の概略構成を示すブロック図 図１に示す画像監視装置における画像処理部の構成を詳細に示すブロック図 レンズを通して得られた映像信号のうちの１フレーム内に設定されるブロックを説明する図 図１に示す画像監視装置の処理動作の一例を示すフローチャート
　以下、本開示に係る実施の形態について、図面を参照しながら具体的に説明する。
　図１は、本実施の形態に係る画像監視装置の概略構成を示すブロック図である。この画像監視装置は、映像信号処理部３と、露光制御部４と、画像処理部５と、画像メモリ６とを有する。映像信号処理部３には、レンズ１を通って撮像素子２に結像した光による映像信号が入力される。そして、映像信号処理部３は、露光制御部４の制御に基づき、外光に応じて映像信号に対する増幅処理などを行う。映像信号処理部３から出力された映像信号はフレームごとに画像メモリ６に記憶される。画像処理部５は、画像メモリ６に記憶された１フレームを用いて、レンズ１に汚れが付着しているか否かを判定する。
　図２は、画像処理部５の構成を詳細に示すブロック図である。図３は、レンズを通して得られた映像信号のうちの１フレーム内に設定されるブロックを説明する図である。図２に示すように、画像処理部５は、最大値最小値算出部５１と、平坦判定部５２と、平坦ブロック計数部５３と、汚れ付着検知部５４とを有する。
　図３に示すように、１フレームの映像は仮想的に複数のブロック７１に分割されている。言い換えると、１フレーム内に複数のブロック７１が設定されている。そして、それぞれのブロック７１は複数画素から構成される。一例として、１フレームが６４０×４８０画素である場合、ブロック７１は３２×３２画素あるいは６４画素×６４画素などから構成されてよい。そして、画像処理部５は、映像信号のうち、バンパー等が写っていない、予め定められている有効領域７５を処理する。
　図２に示す最大値最小値算出部５１は、処理対象の複数のブロック７１のそれぞれについて、ブロック７１を構成する複数画素の、輝度の最大値および最小値を算出する。平坦判定部５２は、輝度の最大値および最小値に基づいて、処理対象のブロック７１の輝度が平坦であるか否かを判定する。平坦ブロック計数部５３は１フレーム内で輝度が平坦なブロック７１の数を計数する。汚れ付着検知部５４は、輝度が平坦なブロック７１の数に基づいて、レンズ１に汚れ７３が付着しているか否かを判定する。
　なお、図１および図２に示す各機能部の一部または全部は、ハードウェアで実装されてもよいし、ソフトウェアで実現されてもよい。後者の場合、プロセッサが所定の画像監視プログラムを実行することで各機能部が実現され得る。また、図１の全体が１つの装置内にあってもよいし、複数の装置に分散していてもよい。
　図４は、図１の画像監視装置の処理動作の一例を示すフローチャートである。まず、画像処理部５内の平坦ブロック計数部５３は、平坦ブロック数を０に予め初期化しておく（ステップＳ１）。
　映像信号処理部３は、露光制御部４の制御に基づいて、撮像素子２からの映像信号を処理する。例えば、映像全体が暗い場合、映像信号処理部３は映像全体が明るくなるよう映像信号を増幅する（ステップＳ２）。これにより、露光制御が行われた映像信号が画像処理部５に入力され、画像メモリ６に記憶される。以下、映像信号の１フレームに対して、汚れ付着検知処理が行われる。
　画像処理部５の最大値最小値算出部５１は、１フレーム内における１つのブロックを処理対象ブロックと定める。そして、処理対象ブロックを構成する複数画素のうち、輝度の最大値および最小値を算出する（ステップＳ３）。
　続いて、平坦判定部５２は、輝度の最大値および最小値に基づいて、処理対象ブロックの輝度が平坦であるか否かを判定する。より具体的には、最大値－最小値が予め定めた閾値ＴＨ１（第１閾値）以下である場合（ステップＳ４のＹＥＳ）、平坦判定部５２は処理対象ブロックの輝度が平坦であると判定する。一方、最大値－最小値が閾値ＴＨ１より大きい場合（ステップＳ４のＮＯ）、平坦判定部５２は処理対象ブロックの輝度が平坦でないと判定する。
　そして、処理対象ブロックの輝度が平坦であると判定された場合には（ステップＳ４のＹＥＳ）、平坦ブロック計数部５３はその処理対象ブロックを平坦ブロックと見做し、平坦ブロック数を１だけ加算する（ステップＳ５）。以上の処理を１フレーム内の全ブロックに対して行い（ステップＳ６のＮＯ）、終了したら(ステップＳ６のＹＥＳ)、１フレーム内の平坦ブロック数がカウントされる。
　汚れ付着検知部５４は、１フレーム内の平坦ブロック数に基づいて、レンズ１に汚れが付着しているか否かを判定する。より具体的には、１フレーム内の平坦ブロック数が予め定めた閾値ＴＨ２（第２閾値）以上である場合（ステップＳ７のＹＥＳ）、汚れ付着検知部５４はレンズ１に汚れが付着していると判定する（ステップＳ８ａ）。一方、平坦ブロック数が閾値ＴＨ２未満である場合（ステップＳ７のＮＯ）、汚れ付着検知部５４はレンズ１に汚れが付着していない判定する（ステップＳ８ｂ）。
　以上により、レンズ１に汚れが付着しているか否かの情報が画像監視装置から出力される。
　映像信号に対して露光制御を行う場合、映像全体が明るくなるとレンズ１に付着した汚れも明るくなり、映像全体が暗くなるとレンズ１に付着した汚れも暗くなる。すなわち、フレームによって汚れの明るさが変化し得る。そのため、仮に複数フレームを用いた汚れ付着判定を行うと、判定の精度が低くなってしまう。
　これに対し、本実施の形態では、複数フレームに跨ることなく、１フレームのみを用いて汚れ付着判定を行う。そのため、露光制御を行う場合でも精度よく時間遅延なく汚れ付着判定を行うことができる。
　なお、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
　本開示は、例えば、車両に搭載されたカメラから得られた画像を解析して他の車両や人を検出する画像監視装置として有用である。
１　　レンズ
２　　撮像素子
３　　映像信号処理部
４　　露光制御部
５　　画像処理部
６　　画像メモリ
５１　　最大値最小値算出部
５２　　平坦判定部
５３　　平坦ブロック計数部
５４　　汚れ付着検知部
７１　　ブロック
７３　　汚れ
７５　　有効領域

Claims (7)

  1. レンズを通して得られた映像信号のうちの１フレーム内に設定される複数のブロックのそれぞれについて、前記複数のブロックのそれぞれを構成する複数の画素の、輝度の最大値および最小値を各々算出する最大値最小値算出部と、
    前記複数のブロックのそれぞれについて、前記最大値および前記最小値に基づいて、前記複数のブロックのそれぞれの輝度が平坦か否かを判定する平坦ブロック判定部と、
    前記１フレーム内で輝度が平坦なブロックの数を計数する平坦ブロック計数部と、
    前記輝度が平坦なブロックの前記数に基づいて前記レンズに汚れが付着しているか否かを判定する汚れ付着判定部と、を備えた、
    画像監視装置。
  2. 前記映像信号は、露光制御が施されている、
    請求項１に記載の画像監視装置。
  3. 前記平坦ブロック判定部は、前記最大値と前記最小値との差と、第１閾値とを比較することにより、前記複数のブロックのそれぞれの輝度が平坦か否かを判定する、
    請求項１または２に記載の画像監視装置。
  4. 前記汚れ付着判定部は、前記輝度が平坦なブロックの前記数と、第２閾値とを比較することにより、前記レンズに前記汚れが付着しているか否かを判定する、
    請求項１～３のいずれか一項に記載の画像監視装置。
  5. レンズを通して得られた映像信号のうちの１フレーム内に設定される複数のブロックのそれぞれについて、前記複数のブロックのそれぞれを構成する複数の画素の、輝度の最大値および最小値を各々算出するステップと、
    前記複数のブロックのそれぞれについて、前記最大値および前記最小値に基づいて、前記複数のブロックのそれぞれの輝度が平坦か否かを判定するステップと、
    前記１フレーム内で輝度が平坦なブロックの数を計数するステップと、
    前記輝度が平坦なブロックの前記数に基づいて前記レンズに汚れが付着しているか否かを判定するステップと、を備えた、
    画像監視方法。
  6. コンピュータを、
    レンズを通して得られた映像信号のうちの１フレーム内に設定される複数のブロックのそれぞれについて、前記複数のブロックのそれぞれを構成する複数の画素の、輝度の最大値および最小値を各々算出する最大値最小値算出部と、
    前記複数のブロックのそれぞれについて、前記最大値および前記最小値に基づいて、前記複数のブロックのそれぞれの輝度が平坦か否かを判定する平坦ブロック判定部と、
    前記１フレーム内で輝度が平坦なブロックの数を計数する平坦ブロック計数部と、
    前記輝度が平坦なブロックの前記数に基づいて前記レンズに汚れが付着しているか否かを判定する汚れ付着判定部と、として機能させる、
    画像監視プログラム。
  7. 請求項６に記載の画像監視プログラムをコンピュータに読み取り可能に格納した非一過性の記録媒体。
PCT/JP2018/023612 2017-08-03 2018-06-21 画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体 WO2019026457A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/656,205 US10701352B2 (en) 2017-08-03 2019-10-17 Image monitoring device, image monitoring method, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-150375 2017-08-03
JP2017150375A JP6731645B2 (ja) 2017-08-03 2017-08-03 画像監視装置、画像監視方法および画像監視プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/656,205 Continuation US10701352B2 (en) 2017-08-03 2019-10-17 Image monitoring device, image monitoring method, and recording medium

Publications (1)

Publication Number Publication Date
WO2019026457A1 true WO2019026457A1 (ja) 2019-02-07

Family

ID=65233689

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/023612 WO2019026457A1 (ja) 2017-08-03 2018-06-21 画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体

Country Status (3)

Country Link
US (1) US10701352B2 (ja)
JP (1) JP6731645B2 (ja)
WO (1) WO2019026457A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110572636A (zh) * 2019-07-23 2019-12-13 RealMe重庆移动通信有限公司 摄像头脏污检测方法、装置、存储介质及电子设备
CN111726612A (zh) * 2020-07-07 2020-09-29 歌尔科技有限公司 镜头模组脏污检测方法、系统、设备及计算机存储介质
WO2022082904A1 (zh) * 2020-10-20 2022-04-28 诚瑞光学(深圳)有限公司 镜头脏污检测方法、装置和设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7398643B2 (ja) * 2022-03-29 2023-12-15 パナソニックＩｐマネジメント株式会社 画像監視装置
JP7398644B2 (ja) * 2022-03-29 2023-12-15 パナソニックＩｐマネジメント株式会社 画像監視装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008071150A (ja) * 2006-09-14 2008-03-27 Fujifilm Corp 画像処理装置、画像処理プログラム及び撮影装置
JP2011239037A (ja) * 2010-05-06 2011-11-24 Fujitsu Ltd 画像処理装置、画像処理方法及び画像処理用コンピュータプログラムならびに撮像装置
JP2015061163A (ja) * 2013-09-18 2015-03-30 本田技研工業株式会社 遮蔽検知装置
JP2015197640A (ja) * 2014-04-02 2015-11-09 キヤノン株式会社 画像処理装置、撮像装置、制御方法およびプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3807331B2 (ja) 2002-03-06 2006-08-09 日産自動車株式会社 カメラの汚れ検出装置およびカメラの汚れ検出方法
JP5820120B2 (ja) * 2011-01-28 2015-11-24 キヤノン株式会社 撮像装置およびその制御方法
US9319637B2 (en) * 2012-03-27 2016-04-19 Magna Electronics Inc. Vehicle vision system with lens pollution detection

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008071150A (ja) * 2006-09-14 2008-03-27 Fujifilm Corp 画像処理装置、画像処理プログラム及び撮影装置
JP2011239037A (ja) * 2010-05-06 2011-11-24 Fujitsu Ltd 画像処理装置、画像処理方法及び画像処理用コンピュータプログラムならびに撮像装置
JP2015061163A (ja) * 2013-09-18 2015-03-30 本田技研工業株式会社 遮蔽検知装置
JP2015197640A (ja) * 2014-04-02 2015-11-09 キヤノン株式会社 画像処理装置、撮像装置、制御方法およびプログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110572636A (zh) * 2019-07-23 2019-12-13 RealMe重庆移动通信有限公司 摄像头脏污检测方法、装置、存储介质及电子设备
CN110572636B (zh) * 2019-07-23 2020-08-04 RealMe重庆移动通信有限公司 摄像头脏污检测方法、装置、存储介质及电子设备
CN111726612A (zh) * 2020-07-07 2020-09-29 歌尔科技有限公司 镜头模组脏污检测方法、系统、设备及计算机存储介质
WO2022082904A1 (zh) * 2020-10-20 2022-04-28 诚瑞光学(深圳)有限公司 镜头脏污检测方法、装置和设备

Also Published As

Publication number Publication date
US10701352B2 (en) 2020-06-30
JP2019029948A (ja) 2019-02-21
JP6731645B2 (ja) 2020-07-29
US20200053354A1 (en) 2020-02-13

Similar Documents

Publication Publication Date Title
JP6731645B2 (ja) 画像監視装置、画像監視方法および画像監視プログラム
US10791252B2 (en) Image monitoring device, image monitoring method, and recording medium
JP2013530466A (ja) ステレオカメラシステムの光学式自己診断
JP5904069B2 (ja) 画像処理装置、オブジェクト検出方法、およびオブジェクト検出プログラム
US9367742B2 (en) Apparatus and method for monitoring object from captured image
US9582868B2 (en) Image processing apparatus that appropriately performs tone correction in low-illuminance environment, image processing method therefor, and storage medium
US8643751B2 (en) Method for detecting dead pixels and computer program product thereof
JP2014006243A (ja) 異常診断装置、異常診断方法、撮像装置、移動体制御システム及び移動体
CN113570582A (zh) 相机盖板清洁度检测方法及检测装置
US20150381913A1 (en) Image processing apparatus and image processing method
JP2009200672A (ja) 画像信号処理装置、画像信号処理方法、およびプログラム
JP2008232837A (ja) 欠陥強調・欠陥検出の方法および装置、プログラム
JP2007213191A (ja) 動き検出プログラム、動き検出方法、動き検出装置、
WO2020003764A1 (ja) 画像処理装置、移動装置、および方法、並びにプログラム
US20200092452A1 (en) Image generating method and electronic apparatus
JP6838651B2 (ja) 画像処理装置、画像処理方法及びプログラム
US20220150424A1 (en) Information processing apparatus, information processing method, and storage medium
US9871982B2 (en) Image pickup apparatus that detects flash band and control method therefor
JP2018129789A5 (ja)
US20130223692A1 (en) Method for logo detection in memc
JP2009017158A (ja) カメラ検査装置
JP7031570B2 (ja) 振動検出方法
JP2021190515A (ja) ワーク取り残し判定システム
KR101793091B1 (ko) 불량화소의 검출방법 및 검출장치
KR100744158B1 (ko) 확률적인 접근방법을 적용한 영상 감시 시스템 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18840300

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18840300

Country of ref document: EP

Kind code of ref document: A1