JP7128671B2 - ビデオ画像のクラッタの再帰的抑制 - Google Patents
ビデオ画像のクラッタの再帰的抑制 Download PDFInfo
- Publication number
- JP7128671B2 JP7128671B2 JP2018120681A JP2018120681A JP7128671B2 JP 7128671 B2 JP7128671 B2 JP 7128671B2 JP 2018120681 A JP2018120681 A JP 2018120681A JP 2018120681 A JP2018120681 A JP 2018120681A JP 7128671 B2 JP7128671 B2 JP 7128671B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- sub
- order correction
- images
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000001629 suppression Effects 0.000 title description 7
- 238000012937 correction Methods 0.000 claims description 329
- 230000009466 transformation Effects 0.000 claims description 76
- 238000000034 method Methods 0.000 claims description 46
- 238000000844 transformation Methods 0.000 claims description 40
- 230000001131 transforming effect Effects 0.000 claims description 26
- 238000009825 accumulation Methods 0.000 claims description 22
- 238000009877 rendering Methods 0.000 claims description 7
- 230000006870 function Effects 0.000 description 12
- 230000033001 locomotion Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000003702 image correction Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration using non-spatial domain filtering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10032—Satellite or aerial image; Remote sensing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Description
ビデオ画像におけるクラッタを抑制するための装置であって、
装置に複数の動作を行わせるように構成されたプロセッサを備え、装置に複数の動作を行わせることは、装置に少なくとも、
焦点面アレイからビデオ画像を受信することと、
ビデオ画像のサブイメージであるクラッタパターンに対応する独立移動座標変換にビデオ画像を分解することと、
ビデオ画像の画像からサブイメージを除去して、画像のクラッタ抑制済み版を生成すること(このことは、装置に少なくとも、
サブイメージに対する各ゼロ次補正を生成して、画像から各ゼロ次補正を減算することと、
各ゼロ次補正からサブイメージに対する各一次補正を再帰的に生成して、画像から各一次補正を減算することとを含み、各一次補正が生成されて画像から減算される前に各ゼロ次補正が生成されて画像から減算される)と、
画像のクラッタ抑制済み版をレンダリングすることとを行わせることを含む、装置。
装置にビデオ画像を分解させることは、クラッタパターン(そのうちの一つは焦点面アレイに関連する固定パターンノイズである)に対応する独立移動座標変換にビデオ画像を分解させることを含む、項1に記載の装置。
前記画像がビデオ画像のk番目のフレームの画像であり、装置にサブイメージを除去させることが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去させることを含み、装置に各ゼロ次補正を生成させることが、k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成させることを備え、これは、装置に少なくとも、
k番目のフレームまでであってk番目のフレームを含むビデオ画像のN個の連続フレームのN個の連続画像の各々からDC成分を除去することによって、N個の連続したDC除去済み画像を生成することと、
N個の連続フレームからk番目のフレームへのm番目のサブイメージの各座標変換を用いてN個の連続したDC除去済み画像を変換することによって、N個の変換済み画像を生成することと、
N個の変換済み画像を累積及び正規化して、k番目のフレームのm番目のサブイメージに対するゼロ次補正を得ることとをさせることを含む、項1又は2に記載の装置。
前記サブイメージはM個のサブイメージであり、前記画像はビデオ画像のk番目のフレームの画像であり、装置にサブイメージを除去させることが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去させることを含み、
装置に各一次補正を再帰的に生成させることが、k番目のフレームのM個のサブイメージの全部に対する各ゼロ次補正からk番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成させることを含む、項1から3のいずれか一項に記載の装置。
装置にk番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成させることが、少なくとも、
m番目のサブイメージを除く各サブイメージに対して独立的に、
複数の座標変換(その各々は、ビデオ画像のN個の連続フレームのk番目のフレームからN個の連続フレームのq番目のフレームへのサブイメージの座標変換と、q番目のフレームからk番目のフレームへのm番目のサブイメージの座標変換との組み合わせであり、複数の座標変換が1からNまでの値のqを含む)を用いてサブイメージに対するゼロ次補正を個別に変換すること(ゼロ次補正を個別に変換することは、サブイメージに対するN個の変換済みゼロ次補正を生成する)と、
サブイメージに対するN個の変換済みゼロ次補正を累積、正規化、及びネガ化することによって、サブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を生成することとをさせること含み、また、
m番目のサブイメージを除くM個のサブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を累積して、k番目のフレームのm番目のサブイメージに対する一次補正を得ることをさせることを含む、項4に記載の装置。
装置に各一次補正を再帰的に生成させることが、サブイメージに対する各一次補正及び高次補正を再帰的に生成させることを含み、装置に画像から各一次補正を減算させることが、装置に画像から各一次補正及び高次補正を減算させることを含み、
n≧0に対して、各n+1次補正が各n次補正から生成され、各n+1次補正が生成されて画像から減算される前に各n次補正が生成されて画像から減算される、項1から5のいずれか一項に記載の装置。
前記サブイメージがM個のサブイメージであり、前記画像がビデオ画像のk番目のフレームの画像であり、装置にサブイメージを除去させることが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去させることを含み、
装置に各一次補正及び高次補正を再帰的に生成させることが、k番目のフレームのM個のサブイメージの少なくとも一部に対する各n次補正からk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成させることを含む、項6に記載の装置。
装置にk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成させることが、少なくとも、
M個のサブイメージの少なくとも一部の各サブイメージに対して独立的に、
複数の座標変換(その各々は、ビデオ画像のN個の連続フレームのk番目のフレームからN個の連続フレームのq番目のフレームへのサブイメージの座標変換と、q番目のフレームからk番目のフレームへのm番目のサブイメージの座標変換との組み合わせであり、複数の座標変換は1からNまでの値のqを含む)を用いてサブイメージに対するn次補正を個別に変換すること(n次補正を個別に変換することは、サブイメージに対するN個の変換済みn次補正を生成する)と、
サブイメージに対するN個の変換済みn次補正を累積、正規化、及びネガ化することによって、サブイメージに対する累積、正規化、及びネガ化済みn次補正を生成することとをさせることを含み、また、
M個のサブイメージの少なくとも一部に対する累積、正規化、及びネガ化済みn次補正を累積して、累積(その累積は、k番目のフレームのm番目のサブイメージに対するn+1次補正であるか、又はその累積からk番目のフレームのm番目のサブイメージに対するn+1次補正が得られる)を得ることをさせることを含む、項7に記載の装置。
前記M個のサブイメージの少なくとも一部がM個のサブイメージの全部であり、装置にk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成させることが、累積からm番目のサブイメージに対する累積、正規化、及びネガ化済みn次補正を減算して、k番目のフレームのm番目のサブイメージに対するn+1次補正を得ることをさせることを更に含む、項8に記載の装置。
ビデオ画像におけるクラッタを抑制する方法であって、
焦点面アレイからビデオ画像を受信することと、
ビデオ画像のサブイメージであるクラッタパターンに対応する独立移動座標変換にビデオ画像を分解することと、
ビデオ画像の画像からサブイメージを除去して、画像のクラッタ抑制済み版を生成すること(このことは、
サブイメージに対する各ゼロ次補正を生成して、画像から各ゼロ次補正を減算することと、
各ゼロ次補正からサブイメージに対する各一次補正を再帰的に生成して、画像から各一次補正を減算することとを含み、各一次補正が生成されて画像から減算される前に各ゼロ次補正が生成されて画像から減算される)と、
画像のクラッタ抑制済み版をレンダリングすることとを備える方法。
ビデオ画像を分解することが、クラッタパターン(そのうちの一つが焦点面アレイに関連する固定パターンノイズである)に対応する独立移動座標変換にビデオ画像を分解することを含む、項10に記載の方法。
前記画像がビデオ画像のk番目のフレームの画像であり、サブイメージを除去することが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、
各ゼロ次補正を生成することが、k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成することを備え、このことが、
k番目のフレームまでであってk番目のフレームを含むビデオ画像のN個の連続フレームのN個の連続画像の各々からDC成分を除去することによって、N個の連続したDC除去済み画像を生成することと、
N個の連続フレームからk番目のフレームへのm番目のサブイメージの各座標変換を用いてN個の連続したDC除去済み画像を変換することによって、N個の変換済み画像を生成することと、
N個の変換済み画像を累積及び正規化して、k番目のフレームのm番目のサブイメージに対するゼロ次補正を得ることとを含む、項10又は11に記載の方法。
前記サブイメージがM個のサブイメージであり、前記画像がビデオ画像のk番目のフレームの画像であり、サブイメージを除去することが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、
各一次補正を再帰的に生成することが、k番目のフレームのM個のサブイメージの全部に対する各ゼロ次補正からk番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成することを含む、項10から12のいずれか一項に記載の方法。
k番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成することが、
m番目のサブイメージを除く各サブイメージに対して独立的に、
複数の座標変換(その各々がビデオ画像のN個の連続フレームのk番目のフレームからN個の連続フレームのq番目のフレームへのサブイメージの座標変換と、q番目のフレームからk番目のフレームへのm番目のサブイメージの座標変換との組み合わせであり、複数の座標変換は1からNまでの値のqを含む)を用いてサブイメージに対するゼロ次補正を個別に変換すること(ゼロ次補正を個別に変換することは、サブイメージに対するN個の変換済みゼロ次補正を生成する)と、
サブイメージに対するN個の変換済みゼロ次補正を累積、正規化、及びネガ化することによって、サブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を生成することとを含み、また、
m番目のサブイメージを除くM個のサブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を累積して、k番目のフレームのm番目のサブイメージに対する一次補正を得ることを含む、項13に記載の方法。
各一次補正を再帰的に生成することが、サブイメージに対する各一次補正及び高次補正を再帰的に生成することを含み、画像から各一次補正を減算することが、画像から各一次補正及び高次補正を減算することを含み、
n≧0に対して、各n+1次補正が各n次補正から生成され、各n+1次補正が生成されて画像から減算される前に各n次補正が生成されて画像から減算される、項10から14のいずれか一項に記載の方法。
前記サブイメージがM個のサブイメージであり、前記画像がビデオ画像のk番目のフレームの画像であり、サブイメージを除去することが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、
各一次補正及び高次補正を再帰的に生成することが、k番目のフレームのM個のサブイメージの少なくとも一部に対する各n次補正からk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成することを含む、項15に記載の方法。
k番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成することが、
M個のサブイメージの少なくとも一部の各サブイメージに対して独立的に、
複数の座標変換(その各々がビデオ画像のN個の連続フレームのk番目のフレームからN個の連続フレームのq番目のフレームへのサブイメージの座標変換と、q番目のフレームからk番目のフレームへのm番目のサブイメージの座標変換との組み合わせであり、複数の座標変換が1からNまでの値のqを含む)を用いてサブイメージに対するn次補正を個別に変換すること(n次補正を個別に変換することは、サブイメージに対するN個の変換済みn次補正を生成する)と、
サブイメージに対するN個の変換済みn次補正を累積、正規化、及びネガ化することによって、サブイメージに対する累積、正規化、及びネガ化済みn次補正を生成することとを含み、また、
M個のサブイメージの少なくとも一部に対する累積、正規化、及びネガ化済みn次補正を累積して、累積(その累積はk番目のフレームのm番目のサブイメージに対するn+1次補正であるか、又はその累積からk番目のフレームのm番目のサブイメージに対するn+1次補正が得られる)を得ることを含む、項16に記載の方法。
前記M個のサブイメージの少なくとも一部がM個のサブイメージの全部であり、k番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成することが、累積からm番目のサブイメージに対する累積、正規化、及びネガ化済み補正を減算して、k番目のフレームのm番目のサブイメージに対するn+1次補正を得ることを更に含む、項17に記載の方法。
ビデオ画像におけるクラッタを抑制するためのコンピュータ可読記憶媒体であって、該コンピュータ可読記憶媒体が非一時的であり、そこに記憶されたコンピュータ可読プログラムコード部を有し、該コンピュータ可読プログラムコード部が、プロセッサによる実行に応答して、装置に、少なくとも、
焦点面アレイからビデオ画像を受信することと、
ビデオ画像のサブイメージであるクラッタパターンに対応する独立移動座標変換にビデオ画像を分解することと、
ビデオ画像の画像からサブイメージを除去して、画像のクラッタ抑制済み版を生成すること(このことは、装置に、少なくとも、
サブイメージに対する各ゼロ次補正を生成して、画像から各ゼロ次補正を減算することと、
各ゼロ次補正からサブイメージに対する各一次補正を再帰的に生成して、画像から各一次補正を減算することとをさせ、各一次補正が生成されて画像から減算される前に各ゼロ次補正が生成されて画像から減算される)と、
画像のクラッタ抑制済み版をレンダリングすることとをさせる、コンピュータ可読記憶媒体。
装置にビデオ画像を分解させることが、クラッタパターン(そのうちの一つが焦点面アレイに関連する固定パターンノイズである)に対応する独立移動座標変換にビデオ画像を分解させることを含む、項19に記載のコンピュータ可読記憶媒体。
前記画像がビデオ画像のk番目のフレームの画像であり、装置にサブイメージを除去させることが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去させることを含み、装置に各ゼロ次補正を生成させることが、k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成させることを備え、このことは、装置に、少なくとも、
k番目のフレームまでであってk番目のフレームを含むビデオ画像のN個の連続フレームのN個の連続画像の各々からDC成分を除去することによって、N個の連続したDC除去済み画像を生成することと、
N個の連続フレームからk番目のフレームへのm番目のサブイメージの各座標変換を用いてN個の連続したDC除去済み画像を変換することによって、N個の変換済み画像を生成することと、
N個の変換済み画像を累積及び正規化して、k番目のフレームのm番目のサブイメージに対するゼロ次補正を得ることとをさせる、項19又は20に記載のコンピュータ可読記憶媒体。
前記サブイメージがM個のサブイメージであり、前記画像がビデオ画像のk番目のフレームの画像であり、装置にサブイメージを除去させることが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去させることを含み、
装置に各一次補正を再帰的に生成させることが、k番目のフレームのM個のサブイメージの全部に対する各ゼロ次補正からk番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成させることを含む、項19から21のいずれか一項に記載のコンピュータ可読記憶媒体。
装置に前記k番目のフレームのm番目のサブフレームに対する一次補正を再帰的に生成させることが、少なくとも、
m番目のサブイメージを除く各サブイメージに対して独立的に、
複数の座標変換(その各々がビデオ画像のN個の連続フレームのk番目のフレームからN個の連続フレームのq番目のフレームへのサブイメージの座標変換と、q番目のフレームからk番目のフレームへのm番目のサブイメージの座標変換との組み合わせであり、複数の座標変換が1からNまでの値のqを含む)を用いてサブイメージに対するゼロ次補正を個別に変換すること(ゼロ次補正を個別に変換することは、サブイメージに対するN個の変換済みゼロ次補正を生成する)と、
サブイメージに対するN個の変換済みゼロ次補正を累積、正規化、及びネガ化することによって、サブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を生成することとをさせ、また、
m番目のサブイメージを除くM個のサブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を累積して、k番目のフレームのm番目のサブイメージに対するゼロ次補正を得ることをさせることを含む、項22に記載のコンピュータ可読記憶媒体。
装置に各一次補正を再帰的に生成させることが、サブイメージに対する各一次補正及び高次補正を再帰的に生成させることを含み、装置に画像から各一次補正を減算させることが、画像から各一次補正及び高次補正を減算させることを含み、
n≧0に対して、各n+1次補正が各n次補正から生成され、各n+1次補正が生成されて画像から減算される前に各n次補正が生成されて減算される、項19から23のいずれか一項に記載のコンピュータ可読記憶媒体。
前記サブイメージがM個のサブイメージであり、前記画像がビデオ画像のk番目のフレームの画像であり、装置にサブイメージを除去させることが、k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去させることを含み、
装置に各一次補正及び高次補正を再帰的に生成させることが、k番目のフレームのM個のサブイメージの少なくとも一部に対する各n次補正からk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成させることを含む、項24に記載のコンピュータ可読記憶媒体。
装置にk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成させることが、少なくとも、
M個のサブイメージの少なくとも一部の各画像に対して独立的に、
複数の座標変換(その各々は、ビデオ画像のN個の連続フレームのk番目のフレームからN個の連続画像のq番目のフレームまでのサブイメージの座標変換と、q番目のフレームからk番目のフレームまでのm番目のサブイメージの座標変換との組み合わせであり、複数の座標変換は1からNまでの値のqを含む)を用いてサブイメージに対するn次補正を個別に変換すること(n次補正個別に変換することは、サブイメージに対するN個の変換済みn次補正を生成する)と、
サブイメージに対するN個の変換済みn次補正を累積、正規化、及びネガ化することによって、サブイメージに対する累積、正規化、及びネガ化済みn次補正を生成することとをさせることを含み、また、
M個のサブイメージの少なくとも一部に対する累積、正規化、及びネガ化済みn次補正を累積して、累積(その累積はk番目のフレームのm番目のサブイメージに対するn+1次補正であるか、又はその累積からk番目のフレームのm番目のサブイメージに対するn+1次補正が得られる)を求めることをさせることを含む、項25に記載のコンピュータ可読記憶媒体。
前記M個のサブイメージの少なくとも一部がM個のサブイメージの全部であり、装置にk番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成させることが、累積からm番目のサブイメージに対する累積、正規化、及びネガ化済みn次補正を減算して、k番目のフレームのm番目のサブイメージに対するn+1次補正を得ることをさせることを更に含む、項26に記載のコンピュータ可読記憶媒体。
102 焦点面アレイ
104 可動プラットフォーム
106 光学センサ
108 光学系
110 計算装置
112 目標検出プロセッサ
114 ディスプレイ
116 不揮発性メモリ
118 プロセッサ
Claims (15)
- ビデオ画像におけるクラッタを抑制するための装置であって、
前記装置に複数の動作を行わせるように構成されたプロセッサ(118)を備え、
前記複数の動作が、少なくとも、
焦点面アレイ(102)からビデオ画像を受信することと、
前記ビデオ画像のサブイメージであるクラッタパターンに対応する独立移動座標変換に前記ビデオ画像を分解することと、
前記ビデオ画像の画像から前記サブイメージを除去して、前記画像のクラッタ抑制済み版を生成することと、
前記画像のクラッタ抑制済み版をレンダリングすることとを含み、
前記ビデオ画像の画像から前記サブイメージを除去して、前記画像のクラッタ抑制済み版を生成することが、少なくとも、
前記サブイメージに対する各ゼロ次補正を生成して、前記画像から各ゼロ次補正を減算することと、
各ゼロ次補正から前記サブイメージに対する各一次補正を再帰的に生成して、前記画像から各一次補正を減算することとを含み、
各一次補正が生成されて前記画像から減算される前に各ゼロ次補正が生成されて前記画像から減算される、装置。 - 前記ビデオ画像を分解することが、前記焦点面アレイ(102)に関連する固定パターンノイズであるクラッタパターンに対応する独立移動座標変換に前記ビデオ画像を分解することを含む、請求項1に記載の装置。
- 前記画像が前記ビデオ画像のk番目のフレームの画像であり、前記サブイメージを除去することが、前記k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、前記各ゼロ次補正を生成することが、前記k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成することを備え、
前記k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成することが、少なくとも、
前記k番目のフレームまでであって前記k番目のフレームを含む前記ビデオ画像のN個の連続フレームのN個の連続画像の各々からDC成分を除去することによって、N個の連続したDC除去済み画像(202)を生成することと、
前記N個の連続フレームから前記k番目のフレームへの前記m番目のサブイメージの各座標変換(206)を用いて、前記N個の連続したDC除去済み画像(202)を変換することによって、N個の変換済み画像を生成することと、
前記N個の変換済み画像を累積及び正規化して、前記k番目のフレームのm番目のサブイメージに対するゼロ次補正(212)を得ることとを含む、請求項1又は2に記載の装置。 - 前記サブイメージがM個のサブイメージであり、前記画像が前記ビデオ画像のk番目のフレームの画像であり、前記サブイメージを除去することが、前記k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、
前記各一次補正を再帰的に生成することが、前記k番目のフレームのM個のサブイメージの全てに対する各ゼロ次補正から前記k番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成することを含む、請求項1から3のいずれか一項に記載の装置。 - 前記k番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成することが、少なくとも、
前記m番目のサブイメージを除く各サブイメージに対して独立的に、
複数の座標変換を用いてサブイメージに対するゼロ次補正を個別に変換することであって、各座標変換が前記ビデオ画像のN個の連続フレームのk番目のフレームから前記N個の連続フレームのq番目のフレームへのサブイメージの座標変換と、前記q番目のフレームから前記k番目のフレームへの前記m番目のサブイメージの座標変換との組み合わせであり、前記複数の座標変換が1からNまでの値のqを含み、前記ゼロ次補正を個別に変換することが前記サブイメージに対するN個の変換済みゼロ次補正を生成することと、
前記サブイメージに対するN個の変換済みゼロ次補正を累積、正規化、及びネガ化することによって、前記サブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を生成することとを含み、更に、
前記m番目のサブイメージを除くM個のサブイメージに対する累積、正規化、及びネガ化済みゼロ次補正を累積して、前記k番目のフレームのm番目のサブイメージに対する一次補正を得ることを含む、請求項4に記載の装置。 - 前記各一次補正を再帰的に生成することが、前記サブイメージに対する各一次補正及び高次補正を再帰的に生成することを含み、前記画像から各一次補正を減算することが、前記画像から各一次補正及び高次補正を減算することを含み、
n≧0に対して、各n+1次補正が各n次補正から生成され、各n+1次補正が生成され前記画像から減算される前に各n次補正が生成され前記画像から減算される、請求項1から5のいずれか一項に記載の装置。 - 前記サブイメージがM個のサブイメージであり、前記画像が前記ビデオ画像のk番目のフレームの画像であり、前記サブイメージを除去することが、前記k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、
前記各一次補正及び高次補正を再帰的に生成することが、前記k番目のフレームのM個のサブイメージの少なくとも一部に対して各n次補正から前記k番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成することを含む、請求項6に記載の装置。 - 前記k番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成することが、少なくとも、
前記M個のサブイメージの少なくとも一部の各サブイメージに対して独立的に、
複数の座標変換を用いて前記サブイメージに対するn次補正を個別に変換することであって、各座標変換が前記ビデオ画像のN個の連続フレームのk番目のフレームから前記N個の連続フレームのq番目のフレームへのサブイメージの座標変換と、前記q番目のフレームから前記k番目のフレームへの前記m番目のサブイメージの座標変換との組み合わせであり、前記複数の座標変換が1からNまでの値のqを含み、前記n次補正を個別に変換することが前記サブイメージに対するN個の変換済みn次補正を生成することと、
前記サブイメージに対するN個の変換済みn次補正を累積、正規化、及びネガ化することによって、前記サブイメージに対する累積、正規化、及びネガ化済みn次補正を生成することとを含み、更に、
前記M個のサブイメージの少なくとも一部に対して前記累積、正規化、及びネガ化済みn次補正を累積して、累積を得ることを含み、
前記累積が前記k番目のフレームのm番目のサブイメージに対するn+1次補正であるか、又は、前記累積から前記k番目のフレームのm番目のサブイメージに対するn+1次補正が得られる、請求項7に記載の装置。 - 前記M個のサブイメージの少なくとも一部が前記M個のサブイメージの全部であり、前記k番目のフレームのm番目のサブイメージに対するn+1次補正を再帰的に生成することが、前記累積から前記m番目のサブイメージに対する累積、正規化、及びネガ化済みn次補正を減算して、前記k番目のフレームのm番目のサブイメージに対するn+1次補正を得ることを更に含む、請求項8に記載の装置。
- ビデオ画像におけるクラッタを抑制する方法であって、
焦点面アレイ(102)からビデオ画像を受信すること(402)と、
前記ビデオ画像のサブイメージであるクラッタパターンに対応する独立移動座標変換に前記ビデオ画像を分解すること(404)と、
前記ビデオ画像の画像から前記サブイメージを除去して、前記画像のクラッタ抑制済み版を生成すること(406)と、
前記画像のクラッタ抑制済み版をレンダリングすること(416)とを備え、
前記ビデオ画像の画像から前記サブイメージを除去して、前記画像のクラッタ抑制済み版を生成すること(406)が、
前記サブイメージに対する各ゼロ次補正を生成すること(408)及び前記画像から各ゼロ次補正を減算すること(410)と、
前記各ゼロ次補正から前記サブイメージに対する各一次補正を再帰的に生成すること(412)及び前記画像から各一次補正を減算すること(414)とを含み、前記各一次補正が生成され前記画像から減算される前に前記各ゼロ次補正が生成され前記画像から減算される、方法。 - 前記ビデオ画像を分解することが、前記焦点面アレイ(102)に関連する固定パターンノイズであるクラッタパターンに対応する独立移動座標変換に前記ビデオ画像を分解することを含む、請求項10に記載の方法。
- 前記画像が前記ビデオ画像のk番目のフレームの画像であり、前記サブイメージを除去することが、前記k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、前記各ゼロ次補正を生成することが、前記k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成することを備え、
前記k番目のフレームのm番目のサブイメージに対するゼロ次補正を生成することが、
前記k番目のフレームまでであって前記k番目のフレームを含む前記ビデオ画像のN個の連続フレームのN個の連続画像の各々からDC成分を除去することによって、N個の連続したDC除去済み画像(202)を生成することと、
前記N個の連続フレームから前記k番目のフレームへの前記m番目のサブイメージの各座標変換を用いて前記N個の連続したDC除去済み画像(202)を変換することによって、N個の変換済み画像を生成することと、
前記N個の変換済み画像を累積及び正規化して、前記k番目のフレームのm番目のサブイメージに対するゼロ次補正を得ることとを含む、請求項10又は11に記載の方法。 - 前記サブイメージがM個のサブイメージであり、前記画像が前記ビデオ画像のk番目のフレームの画像であり、前記サブイメージを除去することが、前記k番目のフレームの画像からm番目のサブイメージを含むサブイメージを除去することを含み、
前記各一次補正を再帰的に生成することが、前記k番目のフレームのM個のサブイメージの全部に対する各ゼロ次補正から前記k番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成することを含む、請求項10から12のいずれか一項に記載の方法。 - 前記k番目のフレームのm番目のサブイメージに対する一次補正を再帰的に生成することが、
前記m番目のサブイメージを除く各サブイメージに対して独立的に、
複数の座標変換を用いて前記サブイメージに対するゼロ次補正を個別に変換することであって、各座標変換がビデオ画像のN個の連続フレームのk番目のフレームから前記N個の連続フレームのq番目のフレームへのサブイメージの座標変換と、前記q番目のフレームから前記k番目のフレームへの前記m番目のサブイメージの座標変換との組み合わせであり、前記複数の座標変換が1からNまでの値のqを含み、前記ゼロ次補正を個別に変換することが、前記サブイメージに対するN個の変換済みゼロ次補正を生成することと、
前記サブイメージに対するN個の変換済みゼロ次補正を累積、正規化及びネガ化することによって、前記サブイメージに対する累積、正規化及びネガ化済みゼロ次補正を生成することとを含み、更に、
前記m番目のサブイメージを除く前記M個のサブイメージに対する累積、正規化及びネガ化済みゼロ次補正を累積して、前記k番目のフレームのm番目のサブイメージに対する一次補正を得ることを含む、請求項13に記載の方法。 - 前記各一次補正を再帰的に生成することが、前記サブイメージに対する各一次補正及び高次補正を再帰的に生成することを含み、前記画像から各一次補正を減算することが前記画像から各一次補正及び高次補正を減算することを含み、
n≧0に対して、各n+1次補正が各n次補正から生成され、各n+1次補正が生成され前記画像から減算される前に各n次補正が生成され前記画像から減算される、請求項10から14のいずれか一項に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/656,808 US10438326B2 (en) | 2017-07-21 | 2017-07-21 | Recursive suppression of clutter in video imagery |
US15/656,808 | 2017-07-21 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019032824A JP2019032824A (ja) | 2019-02-28 |
JP7128671B2 true JP7128671B2 (ja) | 2022-08-31 |
Family
ID=62909346
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018120681A Active JP7128671B2 (ja) | 2017-07-21 | 2018-06-26 | ビデオ画像のクラッタの再帰的抑制 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10438326B2 (ja) |
EP (1) | EP3432258B1 (ja) |
JP (1) | JP7128671B2 (ja) |
CN (1) | CN109286761B (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110780272B (zh) * | 2019-10-29 | 2023-06-30 | 西安电子科技大学 | 一种颠簸平台sar的非参数化成对回波抑制方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003250093A (ja) | 2002-02-25 | 2003-09-05 | Mitsubishi Electric Corp | 映像補正装置 |
JP2017102245A (ja) | 2015-12-01 | 2017-06-08 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS6024476A (ja) * | 1983-07-21 | 1985-02-07 | Nec Corp | レ−ダ装置 |
US5341142A (en) * | 1987-07-24 | 1994-08-23 | Northrop Grumman Corporation | Target acquisition and tracking system |
US5317395A (en) * | 1993-03-31 | 1994-05-31 | The United States Of America As Represented By The Secretary Of The Army | Focal plane array dual processing system and technique |
US5400161A (en) | 1993-10-04 | 1995-03-21 | Raytheon Company | Optical system including focus-defocus focal plane array compensation technique using liquid crystal phased array |
DE69525495T2 (de) | 1994-07-22 | 2002-10-31 | Hughes Electronics Corp | Satellitenkamera mit Bildebenenarray |
US5894323A (en) | 1996-03-22 | 1999-04-13 | Tasc, Inc, | Airborne imaging system using global positioning system (GPS) and inertial measurement unit (IMU) data |
US5798786A (en) | 1996-05-07 | 1998-08-25 | Recon/Optical, Inc. | Electro-optical imaging detector array for a moving vehicle which includes two axis image motion compensation and transfers pixels in row directions and column directions |
US6108032A (en) | 1996-11-05 | 2000-08-22 | Lockheed Martin Fairchild Systems | System and method for image motion compensation of a CCD image sensor |
WO1998020301A1 (en) | 1996-11-05 | 1998-05-14 | Lockheed Martin Corporation | Electro-optical reconnaissance system with forward motion compensation |
JP2930051B2 (ja) * | 1997-04-15 | 1999-08-03 | 日本電気株式会社 | レーダビデオ信号処理装置 |
US5903659A (en) * | 1997-04-17 | 1999-05-11 | Raytheon Company | Adaptive non-uniformity compensation algorithm |
US6714240B1 (en) * | 1998-06-23 | 2004-03-30 | Boeing North American, Inc. | Optical sensor employing motion compensated integration-device and process |
US6211515B1 (en) | 1998-10-19 | 2001-04-03 | Raytheon Company | Adaptive non-uniformity compensation using feedforward shunting and wavelet filter |
US8553113B2 (en) | 2003-08-20 | 2013-10-08 | At&T Intellectual Property I, L.P. | Digital image capturing system and method |
US7742077B2 (en) | 2004-02-19 | 2010-06-22 | Robert Bosch Gmbh | Image stabilization system and method for a video camera |
US7418149B2 (en) * | 2004-07-30 | 2008-08-26 | Algolith Inc. | Apparatus and method for adaptive 3D noise reduction |
FR2882160B1 (fr) | 2005-02-17 | 2007-06-15 | St Microelectronics Sa | Procede de capture d'images comprenant une mesure de mouvements locaux |
US7656428B2 (en) | 2005-05-05 | 2010-02-02 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Imaging device employing optical motion sensor as gyroscope |
US9298014B2 (en) | 2005-07-01 | 2016-03-29 | Flir Systems, Inc. | Image stabilization system |
US7907278B1 (en) * | 2006-11-06 | 2011-03-15 | Lowell Williams | Staring imaging grating spectrometer for detection of projectiles |
US20080118104A1 (en) | 2006-11-22 | 2008-05-22 | Honeywell International Inc. | High fidelity target identification and acquisition through image stabilization and image size regulation |
US8611600B2 (en) * | 2011-10-12 | 2013-12-17 | Raytheon Company | Three-frame difference moving target acquisition system and method for target track identification |
WO2013054403A1 (ja) * | 2011-10-12 | 2013-04-18 | キヤノン株式会社 | 撮像装置及び撮像装置の制御方法 |
US9402028B2 (en) | 2012-03-15 | 2016-07-26 | Honeywell International Inc. | Image stabilization and tracking system |
US9635220B2 (en) * | 2012-07-16 | 2017-04-25 | Flir Systems, Inc. | Methods and systems for suppressing noise in images |
US9646388B2 (en) | 2015-01-09 | 2017-05-09 | The Boeing Company | Integrated image distortion correction with motion compensated integration |
-
2017
- 2017-07-21 US US15/656,808 patent/US10438326B2/en active Active
-
2018
- 2018-06-26 JP JP2018120681A patent/JP7128671B2/ja active Active
- 2018-06-26 EP EP18179938.8A patent/EP3432258B1/en active Active
- 2018-07-20 CN CN201810804758.9A patent/CN109286761B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003250093A (ja) | 2002-02-25 | 2003-09-05 | Mitsubishi Electric Corp | 映像補正装置 |
JP2017102245A (ja) | 2015-12-01 | 2017-06-08 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
US10438326B2 (en) | 2019-10-08 |
JP2019032824A (ja) | 2019-02-28 |
US20190026868A1 (en) | 2019-01-24 |
CN109286761A (zh) | 2019-01-29 |
CN109286761B (zh) | 2021-07-23 |
EP3432258B1 (en) | 2020-02-19 |
EP3432258A1 (en) | 2019-01-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7207875B2 (ja) | ビデオ画像の背景クラッタの抑制 | |
CN109118542B (zh) | 激光雷达与相机之间的标定方法、装置、设备及存储介质 | |
US7813581B1 (en) | Bayesian methods for noise reduction in image processing | |
US20140241612A1 (en) | Real time stereo matching | |
KR102169309B1 (ko) | 정보 처리장치 및 그 제어방법 | |
US20170039727A1 (en) | Methods and Systems for Detecting Moving Objects in a Sequence of Image Frames Produced by Sensors with Inconsistent Gain, Offset, and Dead Pixels | |
KR20110120317A (ko) | 3d 포인트 클라우드 데이터를 2d 전자광학 영상 데이터로 등록 | |
Amaricai et al. | An FPGA sliding window-based architecture Harris corner detector | |
Jeeva et al. | Survey on background modeling and foreground detection for real time video surveillance | |
KR101586452B1 (ko) | 거리 적응적 탐지 문턱값 적용에 의한 적외선 해상 표적 탐지장치 구현 방법 | |
US8582810B2 (en) | Detecting potential changed objects in images | |
US10977808B2 (en) | Three-frame difference target acquisition and tracking using overlapping target images | |
US20150262362A1 (en) | Image Processor Comprising Gesture Recognition System with Hand Pose Matching Based on Contour Features | |
JP7128671B2 (ja) | ビデオ画像のクラッタの再帰的抑制 | |
WO2015119657A1 (en) | Depth image generation utilizing depth information reconstructed from an amplitude image | |
US9135715B1 (en) | Local feature cameras for structure from motion (SFM) problems with generalized cameras | |
Alpatov et al. | An estimation algorithm of the multispectral image geometric transformation parameters based on multiple reference area tracking | |
Joseph Raj et al. | Video-rate calculation of depth from defocus on a FPGA | |
Alpatov et al. | The implementation of multiple objects tracking algorithm based on partition of bipartite graph in FPGA-based onboard vision systems | |
US20160112641A1 (en) | Frame registration for imaging sensors in motion | |
Shi et al. | Accurate estimation of motion blur parameters in noisy remote sensing image | |
US9600901B2 (en) | Video tracker having digital signal processor | |
Cadena et al. | Noise removal of the x-ray medical image using fast spatial filters and GPU | |
Żorski et al. | Object tracking and recognition using massively parallel processing with CUDA | |
US20180293460A1 (en) | Image processing system with discriminative control |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210618 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220708 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220725 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220819 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7128671 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |