KR102563468B1 - 이미지 처리 방법, 장치 및 저장 매체 - Google Patents
이미지 처리 방법, 장치 및 저장 매체 Download PDFInfo
- Publication number
- KR102563468B1 KR102563468B1 KR1020210035077A KR20210035077A KR102563468B1 KR 102563468 B1 KR102563468 B1 KR 102563468B1 KR 1020210035077 A KR1020210035077 A KR 1020210035077A KR 20210035077 A KR20210035077 A KR 20210035077A KR 102563468 B1 KR102563468 B1 KR 102563468B1
- Authority
- KR
- South Korea
- Prior art keywords
- frequency band
- subband information
- image
- decomposition
- decomposed
- Prior art date
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 29
- 238000000034 method Methods 0.000 claims abstract description 52
- 238000000354 decomposition reaction Methods 0.000 claims description 422
- 230000000875 corresponding effect Effects 0.000 claims description 326
- 239000011159 matrix material Substances 0.000 claims description 310
- 238000012545 processing Methods 0.000 claims description 46
- 230000002596 correlated effect Effects 0.000 claims description 24
- 238000004364 calculation method Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 5
- 238000004891 communication Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 7
- 230000004927 fusion Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 101100248200 Arabidopsis thaliana RGGB gene Proteins 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007500 overflow downdraw method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
- H04N1/4072—Control or modification of tonal gradation or of extreme levels, e.g. background level dependent on the contents of the original
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/67—Circuits for processing colour signals for matrixing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/16—Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization
-
- G06T5/009—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/48—Picture signal generators
- H04N1/486—Picture signal generators with separate detectors, each detector being used for one specific colour component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/64—Systems for the transmission or the storage of the colour picture signal; Details therefor, e.g. coding or decoding means therefor
- H04N1/648—Transmitting or storing the primary (additive or subtractive) colour signals; Compression thereof
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Mathematical Physics (AREA)
- Mathematical Analysis (AREA)
- Computational Mathematics (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Algebra (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Image Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
본 발명은 이미지 처리 방법, 장치 및 저장 매체를 제공하는 바, 당해 방법은, 본 발명 실시예의 제1 측면에 따르면, 이미지 처리 방법을 제공하는 바, 당해 방법은, 타겟 이미지에서 적색 녹색 청색 채널 이미지와 흰색 채널 이미지를 추출하는 단계; 상기 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 상기 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정하는 단계; 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계; 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계; 상기 제3 분해 서브 밴드 정보에 따라, 이미지를 재구성하고, 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라, 상기 타겟 이미지에 대응하는 컬러 이미지를 구성하는 단계; 를 포함한다. 본 발명에서, W채널 이미지의 정보로 RGB채널 이미를 를 보정함으로써, 저조도에서 이미지의 신호 대 잡음비를 개선하고, 이미지 전체의 밝기 및 이미지의 질량을 향상시킨다.
Description
본 발명은 모바일 단말 데이터 처리 기술 분야에 관한 것으로, 특히 이미지 처리 방법, 장치 및 저장 매체에 관한 것이다.
촬영 기술의 지속적인 발전으로, 전통 유형의 이미징 센서는 이미 이미징의 새로운 수요를 만족할 수 없고, 다양한 신형 이미징 센서의 출현은, 이미지 센서의 부동한 채널 사이에서 수집한 이미지의 우세를 결합하여, 출력한 이미지의 질량을 효과적으로 향상시킬 수 있다.
현재, 모바일 단말에서 사용되는 일반적인 센서는 RGGB어레이 배열이다. 전통 RGGB배열의 센서의 R, G, B 채널은 협대역의 스펙트럼 에너지만을 통과할 수 있으므로, 센서가 수집할 수 있는 에너지가 비교적 적고, 저조도에서 이미지 촬영을 할 경우, 이미지의 밝기가 낮고, 신호 대 잡음비가 낮은 문제가 나타난다.
관련 기술에 존재하는 문제를 극복하기 위해, 본 발명은 이미지 처리 방법, 장치 및 저장 매체를 제공한다.
본 발명 실시예의 제1 측면에 따르면, 이미지 처리 방법을 제공하는 바, 당해 방법은,
타겟 이미지에서 적색 녹색 청색(RGB) 채널 이미지와 흰색(W) 채널 이미지를 추출하는 단계;
상기 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 상기 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정하는 단계;
상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계 - 상기 제1 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응되고; 제2 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응됨 - ;
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보에 따라, 이미지를 재구성하여 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라 상기 타겟 이미지에 대응하는 컬러 이미지를 구성하는 단계; 를 포함한다.
일 실시 방식에서, 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계는,
이미지 멀티 스케일 분해 방법에 따라, 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계를 포함하고,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 분해층의 수량이 동일하고, 각 분해층의 주파수 대역의 수량은 동일하다.
일 실시 방식에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
동일 분해층에서 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 동일 주파수 대역을, 당해 분해층에서, 상기 제3 분해 서브 밴드 정보에 대응하는 주파수 대역으로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보의 각 분해층의 각 주파수 대역에 대해, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스 및 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스에 따라, 상기 제3 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스를 계산하는 단계; 를 포함한다.
일 실시 방식에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보에서 상기 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정하는 단계; 를 포함한다.
일 실시 방식에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제1 매트릭스와 제2 매트릭스의 합임을 결정하는 단계를 포함하고, 상기 제1 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제2 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 설정 고주파 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 상기 설정 고주파 대역 이외의 주파수 대역에서 대응하는 가중치 계수보다 크다.
일 실시 방식에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역계수 매트릭스는, 제3 매트릭스와 제4 매트릭스의 합임을 결정하는 단계를 포함하고, 상기 제3 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제4 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
일 실시 방식에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제5 매트릭스와 제6 매트릭스의 합임을 결정하는 단계; 를 포함하고, 상기 제5 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제6 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
일 실시 방식에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역의 계수 매트릭스는, 제7 매트릭스 및 제8 매트릭스의 합임을 결정하는 단계를 포함하고, 상기 제7 매트릭스는, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제1 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고; 상기 제8 매트릭스는, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제2 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고;
상기 제1 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제1 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제1 분산에 따라 계산하여 획득되는 것이고;
상기 제2 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제2 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제2 분산에 따라 계산하여 획득되는 것이며;
동일 주파수 대역의 분해 이미지의 동일 픽셀에서, 제1 그레이스케일 분량 이미지 및 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수의 합은 1이고; 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제1 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀이 대응하는 제1 분산은 정상관되고, 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀에 대응하는 제2 분산은 정상관된다.
본 발명 실시예의 제2 측면에 따르면, 이미지 처리 장치를 제공하는 바, 당해 장치는,
타겟 이미지에서 적색 녹색 청색 채널 이미지 및 흰색 채널 이미지를 추출하도록 구성된 추출 모듈;
상기 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 상기 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정하도록 구성된 제1 결정 모듈;
상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하도록 구성된 제2 결정 모듈 - 상기 제1 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응되고; 제2 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응됨 - ;
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성된 제3 결정 모듈; 및
상기 제3 분해 서브 밴드 정보에 따라 이미지를 재구성하여 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라 상기 타겟 이미지에 대응하는 컬러 이미지를 구성하도록 구성된 구성 모듈; 을 포함한다.
일 실시 방식에서, 상기 제2 결정 모듈은 하기의 방식으로 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
이미지 멀티 스케일 분해 방법으로, 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 것을 포함하고,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 분해층의 수량은 동일하고, 각 분해층의 주파수 대역의 수량은 동일하다.
일 실시 방식에서, 상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
동일 분해층에서 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 동일 주파수 대역을, 당해 분해층에서, 상기 제3 분해 서브 밴드 정보에 대응하는 주파수 대역으로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보의 각 분해층의 각 주파수 대역에 대해, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스 및 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역계수 매트릭스에 따라, 상기 제3 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스를 계산하는 것; 을 포함한다.
일 실시 방식에서, 상기 제3 결정 모듈은, 하기의 방법으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보에서 상기 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정하는 것; 을 포함한다.
일 실시 방식에서, 상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제1 매트릭스와 제2 매트릭스의 합임을 결정하는 것을 포함하고, 상기 제1 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제2 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 설정 고주파 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 상기 설정 고주파 대역 이외의 주파수 대역에서 대응하는 가중치 계수보다 크다.
일 실시 방식에서, 상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역계수 매트릭스는, 제3 매트릭스와 제4 매트릭스의 합임을 결정하는 것을 포함하고, 상기 제3 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제4 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
일 실시 방식에서, 상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제5 매트릭스와 제6 매트릭스의 합임을 결정하는 것; 을 포함하고, 상기 제5 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제6 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
일 실시 방식에서, 상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역의 계수 매트릭스는, 제7 매트릭스 및 제8 매트릭스의 합임을 결정하는 것을 포함하고, 상기 제7 매트릭스는, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제1 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고; 상기 제8 매트릭스는, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제2 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이며;
상기 제1 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제1 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제1 분산에 따라 계산하여 획득되는 것이고;
상기 제2 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제2 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서 각 픽셀에 대응하는 제2 분산에 따라 계산하여 획득되는 것이며;
동일 주파수 대역의 분해 이미지의 동일 픽셀에서, 제1 그레이스케일 분량 이미지 및 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수의 합은 1이고; 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제1 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀이 대응하는 제1 분산은 정상관되고, 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀에 대응하는 제2 분산은 정상관된다.
본 발명 실시예의 제3 측면에 따르면, 이미지 처리 장치를 제공하는 바, 당해 장치는,
프로세서; 및
프로세서에 의해 수행 가능한 명령을 저장하기 위한 메모리; 를 포함하고,
상기 프로세서는 상기 이미지 처리 방법을 수행하도록 구성된다.
본 발명 실시예의 제4 측면에 따르면, 비일시적 컴퓨터 판독 가능 저장 매체를 제공하는바, 상기 저장 매체의 명령이 모바일 단말의 프로세서에 의해 수행될 경우, 상기 모바일 단말이 상기 이미지 처리 방법을 수행한다.
본 발명의 실시예에서 제공하는 기술 방안은 이하의 유익한 효과를 포함한다. 타겟 이미지에서 RGB채널 이미지의 제1 그레이스케일 분량 이미지 및 W채널 이미지의 제2 그레이스케일 분량 이미지를 추출하고, 두 개의 그레이스케일 분량 이미지의 분해 서브 밴드 정보를 융합하고, W채널 이미지의 정보로 RGB채널 이미지를 보정함으로써, 저조도에서 이미지의 신호 대 잡음비를 개선하고, 이미지 전체의 밝기 및 이미지의 질량을 향상시킨다.
이해해야 할 것은, 상기 일반적 설명 및 후문의 세부 묘사는 예시적인 것과 설명적인 것일 뿐, 본 발명을 제한하지 않는다.
이하의 도면은 명세서에 통합되고, 명세서의 일부를 구성하여 본 발명에 부합되는 실시예를 나타내고, 명세서와 함께 본 발명의 원리를 해석한다.
도1은 예시적인 일 실시예에 따른 이미지 처리 방법의 흐름도이다.
도2는 예시적인 일 실시예에 따른 RGBW채널 이미지에 대해 이미지 추출을 진행하는 개략도이다.
도3은 예시적인 일 실시예에 따른 이미지 처리 장치의 구조도이다.
도4는 예시적인 일 실시예에 따른 이미지 처리 장치의 구조도이다.
도1은 예시적인 일 실시예에 따른 이미지 처리 방법의 흐름도이다.
도2는 예시적인 일 실시예에 따른 RGBW채널 이미지에 대해 이미지 추출을 진행하는 개략도이다.
도3은 예시적인 일 실시예에 따른 이미지 처리 장치의 구조도이다.
도4는 예시적인 일 실시예에 따른 이미지 처리 장치의 구조도이다.
아래에서, 예시적인 일 실시예에 대해 상세히 설명한다. 당해 예시는 도면에서 나타나고, 하기의 설명이 도면에 관한 것일 경우, 다른 표시가 없으면, 부동한 도면에서 동일 부호는 동일 또는 비슷한 요소를 표시한다. 하기의 예시적인 일 실시예에 설명한 실시 방식은 본 발명과 일치한 모든 실시 방식을 대표하는 것은 아니다. 반면, 그들은 부가된 청구범위에서 상세히 설명한 본 발명의 일부 측면과 일치한 장치 및 방법의 예일 뿐이다
본 발명 실시예는 이미지 처리 방법을 제공한다. 도1을 참조하고, 도1은 예시적인 일 실시예에 따른 이미지 처리 방법의 흐름도이다. 도1에 도시한 바와 같이, 당해 방법은, 단계S11 내지 단계S15를 포함한다.
단계S11, 타겟 이미지에서 적색 녹색 청색 채널 이미지 및 흰색 채널 이미지를 추출한다.
단계S12, 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정한다.
단계S13, 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정한다. 제1 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응되고; 제2 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응된다.
단계S14, 제1 분해 서브 밴드 정보 및 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정한다.
단계S15, 제3 분해 서브 밴드 정보에 따라 이미지를 재구성하여 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라 상기 타겟 이미지에 대응하는 컬러 이미지를 구성한다.
본 실시예에서, 타겟 이미지에서 RGB채널 이미지의 제1 그레이스케일 분량 이미지 및 W채널 이미지의 제2 그레이스케일 분량 이미지를 추출하고, 두 개의 그레이스케일 분량 이미지의 분해 서브 밴드 정보를 융합하며, W채널 이미지의 정보로 RGB채널 이미지를 보정함으로써, 저조도에서 이미지의 신호 대 잡음비를 개선하고, 이미지 전체의 밝기 및 이미지의 질량을 향상시킬수 있다.
일 실시 방식에서, 단계S11의 타겟 이미지는, 적색(R) 원색 픽셀, 녹색(G) 원색 픽셀, 청색(B) 원색 픽셀 및 흰색(W) 픽셀을 구비한 이미지 센서로 수집하여 획득한 최초의 RAW포맷 이미지일 수 있고, 당해 이미지 센서가 수집한 최초의 RAW포맷 이미지에는, RGB채널 이미지 및 W채널 이미지를 포함할 수 있다. 예시적으로, 당해 이미지 센서는, RGBW어레이 배열의 이미지 센서일 수 있고, 당해 이미지 센서는 RGBW채널 이미지를 수집할 수 있으며, 여기서, RGBW채널 이미지는, 적색(R) 원색 픽셀, 녹색(G) 원색 픽셀, 청색(B) 원색 픽셀 및 흰색(W) 픽셀로 구성된 각 픽셀의 이미지를 가리킨다. RGGB어레이 배열을 기반으로 하는 센서에 대비해, RGBW어레이 배열의 센서는 일부 G채널을 W(white)채널로 변경한다.
타겟 이미지가 RGBW채널 이미지일 경우, 단계S11의 RGBW채널 이미지에서 RGB채널 이미지(즉, 적색 녹색 청색 채널 이미지) 및 W채널 이미지(즉, 흰색 채널 이미지)를 추출할 수 있다. 예시적으로, RGB채널 이미지가 바이어(Bayer) RGB포맷 이미지일 경우, 단계S11에서, RGBW어레이 배열한 RGBW채널 이미지 데이터를 바이어(Bayer) RGB포맷 이미지와 W채널 이미지, 두 갈래의 데이터로 분할할 수 있다. RGBW채널 이미지를 바이어 RGB포맷 이미지와 W채널 이미지로 분할할 경우, 대각선 위치의 동일한 유형의 픽셀 값으로 binning동작을 수행할 수 있다. 즉, 서로 더한 후 2로 나누는 동작이다. 도2에 도시된 바와 같이, 사이즈가 4*4인 RGBW채널 이미지를 입력하고, 분할한 후, 사이즈가 각각 2*2인 바이어 RGB포맷 이미지와 흰색 채널 이미지를 획득한다. 바이어 RGB포맷 이미지와 흰색 채널 이미지는 각각 각자의 이미지 처리 파이프라인(ISP pipeline)을 경과하여 처리되고, 각각 처리 후의 YUV이미지를 출력한다. 두 개의 YUV이미지에서 각각 Y채널의 이미지를 추출하고, 해당 그레이 스케일 분량 이미지를 획득한다. 후속 처리에서, 그레이스케일 분량 이미지에 따라, 이미지 융합 처리를 수행할 수 있다.
RGB채널 이미지는 R분량, G분량 및 B분량을 포함한다. RGB채널 이미지는 다양한 구성방식이 있다. 예를 들면, 도2에 도시한 바와 같이, 각 2*2의 RGGB포맷의 RGB채널 이미지에는 1개의 R분량, 1개의 B분량 및 2개의 G분량를 포함한다. 기타 포맷의 RGB채널 이미지에서, 1개의 R분량, 2개의 B분량 및 1개의 G분량 또는 2개의 R분량, 1개의 B분량 및 1개의 G분량을 포함하는 바, 분량의 배치 방식은 도2에 도시한 배치 방식과 다르다.
단계S12에서, 이미지 멀티 스케일 분해 방법으로, 그레이스케일 분량 이미지의 분해 서브 밴드 정보를 결정할 수 있다. 이미지 멀티 스케일 분해 방법은, 원본 이미지를 부동한 사이즈의 복수의 이미지로 분해하는데 사용되고, 분해한 부동한 분해 이미지는 부동한 주파수 대역의 이미지 정보를 표현한다. 예를 들면, 단계S12에서, 제1 이미지 멀티 스케일 분해 방법으로, 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보를 결정하고; 제2 이미지 멀티 스케일 분해 방법으로, 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정한다. 제1 이미지 멀티 스케일 분해 방법 및 제2 이미지 멀티 스케일 분해 방법은 동일하거나 또는 부동할 수 있다.
단계S15에서, 제3 그레이스케일 분량 이미지에 따라, 타겟 이미지에 대응하는 컬러 이미지를 구성하는 단계는, 제3 그레이스케일 분량 이미지와 RGB채널 이미지에 대응하는 YUV이미지의 색도 분량 이미지 및 색포화도 분량 이미지로 새로운 YUV이미지를 구성하거나, 제3 그레이스케일 분량 이미지와 RGB채널 이미지에 대응하는 YUV이미지의 색도 분량 이미지 및 색포화도 분량 이미지로 새로운 YUV이미지를 구성하고, YUV이미지를 RGB이미지로 전환하는 단계를 포함한다.
본 실시예에서, RGBW어레이 배열을 구비한 이미지 센서에서 최초RAW포맷 이미지를 수집하여 획득하고, 최초 RAW포맷 이미지에서 RGB채널 이미지 및 W채널 이미지를 추출하고, RGB채널 이미지의 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 W채널 이미지의 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정할 수 있고, 두 개의 분해 서브 밴드 정보를 융합하고, W채널 이미지의 정보로 RGB채널 이미지를 보정함으로써, 저조도에서 이미지의 신호 대 잡음비를 개선하고, 이미지 전체의 밝기 및 이미지의 질량을 향상시킨다.
본 실시예로 RGBW채널 이미지를 처리할 경우, 융합 후의 이미지(예를 들면, 융합 후의 RGB이미지)의 신호 대 잡음비, 이미지 전체의 밝기 및 이미지의 질량을 효과적으로 향상시킬 수 있다. 구체적인 분석은 하기와 같다. 전통적인 RGGB구조 이미지 센서에 대비해, RGBW구조 이미지 센서의 W채널은 풀 스펙트럼의 에너지를 통과할 수 있다. 따라서, 동일한 노출시간에서, W채널은 더 높은 밝기를 획득할 수 있다. RGBW이미지 센서의 RGB채널 및 W채널에 대한 통상적인 융합 방법은 하기와 같다. RGBW어레이 배열의 센서가 수집한 이미지를 RGB채널 이미지 및 W채널 이미지로 분할하고, RGB채널 이미지와 W채널 이미지가 각각 이미지 처리 파이프라인(ISP pipeline)을 통과하여 처리된 YUV포맷 이미지를 출력하고, RGB채널 이미지에 대응하는 YUV이미지에, Y채널 이미지의 가중치가 0.5되도록 부여하고, W채널 이미지에 대응하는 YUV이미지에서도, Y채널 이미지의 가중치가 0.5되도록 부여하며, 두 개의 Y채널 이미지에 대해 이미지 융합하고, 융합 후의 Y채널 이미지 및 RGB채널 이미지에 대응하는 YUV이미지의 색도 분량 이미지와 색포화도 분량 이미지로 새로운 RGB이미지를 구성하고, RGB채널 정보와 W채널 정보를 융합하는 목적을 달성한다. 당해 직접 RGB채널 이미지에 대응하는 Y채널 이미지 및 W채널 이미지에 대응하는 Y채널 이미지로, 동일한 가중치를 사용하는 방식은, 이미지 콘트라스트의 현저한 하락과 이미지의 세부 손실을 초래할 수 있고, 이미지 질량에 대한 영향이 비교적 크다. 이를 통해, 본 실시예의 방법으로 RGBW이미지를 처리한 후, 융합 후의 이미지(예를 들면, 융합 후의 RGB이미지)의 신호 대 잡음비, 이미지 전체의 밝기 및 이미지의 질량을 효과적으로 향상시킬 수 있다.
본 발명 실시예에서 제공하는 이미지 처리 방법은, 도1에 도시한 바와 같은 방법을 포함하고, 멀티 스케일 이미지 처리 알고리즘은, 웨이블릿을 기반으로 변환된 멀티 스케일 이미지 처리 알고리즘 또는 라플라시안 피라미드를 기반으로 하는 멀티 스케일 이미지 처리 알고리즘일 수 있다.
이미지 멀티 스케일 처리 알고리즘은, 이미지 멀티 스케일 분해 알고리즘 및 이미지 멀티 스케일 재구성 알고리즘을 포함하고, 이미지 멀티 스케일 재구성 알고리즘은, 이미지 멀티 스케일 분해 알고리즘의 리버스 알고리즘이다.
웨이블릿이 변환하는 멀티 스케일 이미지 처리 알고리즘에서, 부동한 웨이블릿 베이스를 사용할 수 있다. 예를 들면, 사용 가능한 웨이블릿 베이스는 하기의, Haar, Daubechies, Biorthogonal, Coiflets, Symlets, Morlet, Mexican 중의 하나를 포함할 수 있다.
웨이블릿이 변환하는 멀티 스케일 이미지 분해 알고리즘의 제1 분해층에서, 이미지를 1개의 저주파 대역 서브 이미지와 3개의 고주파 대역 서브 이미지로 분해하고, 1개의 저주파 대역 웨이블릿 계수 매트릭스와 3개의 고주파 대역 웨이블릿 계수 매트릭스를 획득한다. 후속의 분해층에서, 이전 분해층의 저주파 대역의 이미지를 1개의 저주파 대역 서브 이미지와 3개의 고주파 대역 서브 이미지로 계속 분해하는바, 이러한 방식으로 유도한다.
웨이블릿이 변환하는 멀티 스케일 이미지 분해 알고리즘을 기반으로, 이미지의 멀티 스케일 계수를 계산하는 방법은 아래와 같다.
이미지를 1개의 저주파 대역 서브 이미지와 3개의 고주파 대역 서브 이미지로 분해하여, 1개의 저주파 대역 웨이블릿 계수 매트릭스와 3개의 고주파 대역 웨이블릿 계수 매트릭스를 획득한다. 저주파 대역 웨이블릿 계수 매트릭스는, LL주파수 대역에 대응되고, LL주파수 대역은, 이미지를 포함하는 저주파 정보의 주파수 대역이다. 3개의 고주파 대역 웨이블릿 계수 매트릭스는 각각 HH주파수 대역, LH주파수 대역 및 HL주파수 대역에 대응된다. 여기서, HH주파수 대역은, 이미지를 포함하는 대각선 고주파 정보의 주파수 대역이고, LH주파수 대역은, 이미지를 포함하는 수평 방향의 고주파 정보의 주파수 대역이며, HL주파수 대역은, 이미지를 포함하는 수직 방향의 고주파 정보의 주파수 대역이다.
이를 통해, 제1 분해층에서 1개의 저주파 대역 웨이블릿 계수 매트릭스, 저주파 대역 이미지의 각 픽셀 계수를 포함하고, 로 제1 분해층에 대응하는 LL주파수 대역의 분해 이미지 중 픽셀(i,j)의 계수를 나타낸다. I는 현재 픽셀이 해당 이미지에서의 행의 위치를 나타내고, j는 현재 픽셀이 해당 이미지에서의 열의 위치를 나타낸다.
제1 분해층은, 3개의 고주파 대역 웨이블릿 계수 매트릭스를 더 포함하고, 각각 , , 이다.
여기서, 는 제1 분해층에 대응하는 HH주파수 대역의 분해 이미지 중 픽셀(i,j)의 계수를 나타내고; 는 제1 분해층에 대응하는 LH주파수 대역의 분해 이미지 중 픽셀(i,j)의 계수를 나타내고; 는 제1 분해층에 대응하는 HL주파수 대역의 분해 이미지 중 픽셀(i,j)의 계수를 나타낸다. 기타 분해층의 각 주파수 대역의 계수의 표현 방식도 이와 같은 원리이다.
제2 분해층에서, 제1 분해층에서 획득한 저주파 대역 웨이블릿 이미지를 진일보로 1개의 저주파 대역 서브 이미지와 3개의 고주파 대역 서브 이미지로 분해하여, 1개의 저주파 대역 웨이블릿 계수 매트릭스와 3개의 고주파 대역 웨이블릿 계수 매트릭스를 획득한다.
따라서, 제2 분해층에서, 1개의 저주파 대역 웨이블릿 계수 매트릭스를 로 표시하고, 3개의 고주파 대역 웨이블릿 계수 매트릭스는 각각 , , 이다.
제3 분해층에서, 제2 분해층에서 획득한 저주파 대역 웨이블릿 이미지를 진일보로 1개의 저주파 대역 서브 이미지와 3개의 고주파 대역 서브 이미지로 분해하여, 1개의 저주파 대역 웨이블릿 계수 매트릭스와 3개의 고주파 대역 웨이블릿 계수 매트릭스를 획득한다.
따라서, 제3 분해층에서, 1개의 저주파 대역 웨이블릿 계수 매트릭스를 로 표시하고, 3개의 고주파 대역 웨이블릿 계수 매트릭스는 각각 , , 이다.
이러한 방식으로 유도한다.
이미지 피라미드 방법의 원리는, 원본 이미지를 멀티 스케일의 피라미드 이미지 시퀀스로 분해하고, 저해상도의 이미지는 상층에 있고, 고해상도의 이미지는 하층에 있으며, 상층 이미지의 크기는 이전 층의 이미지 크기의 1/4이다. 전부의 이미지 피라미드를 해당 층에서 일정한 규칙으로 융합하여, 합성 피라미드를 획득할 수 있고, 당해 합성 피라미드를 피라미드가 생성한 역과정에 따라 재구성하여 융합 피라미드를 획득한다.
본 발명 실시예에서 제공하는 이미지 처리 방법은 도1에 도시한 바와 같은 방법을 포함하고, 단계S12에서 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계는,
이미지 멀티 스케일 분해 방법으로, 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계를 포함하고, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보의 분해층 수량은 동일하고, 각 분해층의 주파수 대역 수량은 동일하다.
예를 들면, Haar웨이블릿 베이스를 기반으로 하는 웨이블릿이 변환하는 이미지 멀티 스케일 분해 방법으로, 제1 그레이스케일 분량 이미지에 대해 3층 분해하여 3개의 분해층을 획득하고, 각 분해층은 4개의 주파수 대역의 주파수 대역 계수에 대응된다.
일 실시예에서, 웨이블릿이 변환하는 멀티 스케일 이미지 처리 알고리즘으로, 계산해낸 바이어 RGB포맷 이미지에 대응하는 Y채널 이미지의 멀티 스케일 분해 서브 밴드 정보는, , , , , , , , , , 를 포함한다. 제1 분해층의 가 제2 분해층의 4개 계수로 분해되므로, RGB채널 이미지의 멀티 스케일 분해 서브 밴드 정보는 를 포함하지 않는다. 마찬가지로, 제2 분해층의 가 제3 분해층의 4개 계수로 분해되므로, RGB채널 이미지의 멀티 스케일 분해 서브 밴드 정보는 를 포함하지 않는다.
여기서, 는 RGB채널 이미지가 제1 분해층의 HH주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타내고, 는 RGB채널 이미지가 제1 분해층의 LH주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 는 RGB채널 이미지가 제1 분해층의 HL주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 는 RGB채널 이미지가 제1 분해층의 LL주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 기타 분해층의 각 주파수 대역의 계수 표현 방식도 이와 같은 원리이다.
웨이블릿이 변환하는 멀티 스케일 이미지 분해 알고리즘으로 계산해낸 W채널 이미지에 대응하는 Y채널 이미지의 멀티 스케일 분해 서브 밴드 정보는, , , , , , , , , , 를 포함한다.
는 W채널 이미지가 제1 분해층의 HH주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 는 W채널 이미지가 제1 분해층의 LH주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 는 W채널 이미지가 제1 분해층의 HL주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 는 W채널 이미지가 제1 분해층의 LL주파수 대역의 분해 이미지에 대응하는 픽셀(i,j)의 계수를 나타낸다. 기타 분해층의 각주파수 대역의 계수 표현 방식도 이와 같은 원리이다
다른 하나의 실시방식에서, 부동한 이미지 멀티 스케일 분해 방법으로, 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정한다. 예를 들면, 제1 분해 방법으로 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보를 결정하고, 제2 분해 방법으로 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정한다. 제1 분해 방법 및 제2 분해 방법은 모두 동일 웨이블릿 베이스에 기반하는 웨이블릿 변환이지만, 제1 분해 방법의 분해층 수는 제2 분해 방법의 분해층 수와 부동하다.
본 발명 실시예에서 제공하는 이미지 처리 방법은, 도1에 도시한 바와 같은 방법을 포함하고, 단계S14에서, 제1 분해 서브 밴드 정보 및 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는, 단계S141 내지 S142를 포함한다.
단계S141, 동일 분해층에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보의 동일 주파수 대역을, 당해 분해층에서, 상기 제3 분해 서브 밴드 정보에 대응하는 주파수 대역으로 결정한다.
단계S142, 상기 제3 분해 서브 밴드 정보의 각 분해층의 각 주파수 대역에 대해, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스 및 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역계수 매트릭스에 따라, 상기 제3 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스를 계산해 낸다.
일 실시 방식에서, 단계S141 전에, 단계S140, 제1 분해 서브 밴드 정보에 대응하는 제1 분해층 수와 각 분해층에 대응하는 주파수 대역 수를 결정하고; 제2 분해 서브 밴드 정보에 대응하는 제2 분해층 수와 각 분해층에 대응하는 주파수 대역수를 결정하는 단계를 더 포함할 수 있다.
제1 분해 서브 밴드 정보 및 제2 분해 서브 밴드 정보의 분해층 수가 부동 또는 동일하나, 적어도 하나의 분해층에 대응하는 주파수 대역의 수량이 동일할 경우, 단계S141에서, 동일 분해층의 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보의 동일 주파수 대역을 결정할 수 있다.
예를 들면, 일 예시로써, 단계S140에서, 제1 분해 서브 밴드 정보에 대응하는 제1 분해층 수가 3이고, 각 분해층은 4개의 주파수 대역에 대응된다. 제1 분해층에 대응하는 주파수 대역은, 각각 제1 분해층의 LL주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역이고; 제2 분해층에 대응하는 4개의 주파수 대역은, 각각 제2 분해의 LL주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역이고; 제3 분해층에 대응하는 4개의 주파수 대역은, 각각 제3 분해층의 LL주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역이다.
제2 분해 서브 밴드 정보에 대응하는 제2 분해층 수가 2이고, 각 분해층은 4개의 주파수 대역에 대응된다. 제1 분해층에 대응하는 주파수 대역은, 각각 제1 분해층의 LL주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역이고; 제2 분해층에 대응하는 4개의 주파수 대역은, 각각 제2 분해의 LL주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역이다.
당해 예시에서, 단계S141에서, 동일 분해층의 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보의 동일 주파수 대역을 결정하는 단계는, 제1 분해층의 4개 주파수 대역 및 제2 분해층의 4개 주파수 대역에 따라, 제3 분해 서브 밴드 정보에 포함되는 2개의 분해층을 결정하는 단계를 포함하고, 각 분해층에는 4개의 주파수 대역을 포함한다.
일 실시 방식에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보의 분해층 수가 동일하고, 각 분해층 수에 대응하는 주파수 대역 수도 동일할 경우, 제3 분해 서브 밴드 정보의 분해층 수를, 제1 분해 서브 밴드 정보 또는 제2 분해 서브 밴드 정보의 분해층 수로 결정하고, 제3 분해 서브 밴드 정보의 각 분해층에 대응하는 주파수 대역 수를, 제1 분해 서브 밴드 정보 또는 제2 분해 서브 밴드 정보의 해당 분해층의 주파수 대역 수로 결정한다.
단계S142에서, 제3 분해 서브 밴드 정보 중 하나의 주파수 대역의 주파수 대역 계수 매트릭스를 계산할 경우, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보의 동일 주파수 대역에 대응하는 주파수 대역 계수 매트릭스로 계산할 수 있다.
제1 분해 서브 밴드 정보 중의 제1 분해층의 HH주파수 대역의 주파수 대역 계수 매트릭스 및 제2 분해 서브 밴드 정보 중의 제1 분해층의 HH주파수 대역의 주파수 대역 계수 매트릭스로, 제3 분해 서브 밴드 정보 중의 제1 분해층의 HH주파수 대역의 주파수 대역 계수 매트릭스를 계산한다.
제1 분해 서브 밴드 정보 중의 제2 분해층의 LL주파수 대역의 주파수 대역계수 매트릭스 및 제2 분해 서브 밴드 정보 중의 제2 분해층의 LL주파수 대역의 주파수 대역 계수 매트릭스로, 제3 분해 서브 밴드 정보 중의 제2 분해층의 LL주파수 대역의 주파수 대역 계수 매트릭스를 계산한다.
본 발명 실시예에서 제공하는 이미지 처리 방법은, 도1에 도시한 바와 같은 방법을 포함하고, 단계S14에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보에서 상기 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값이고, 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값의 평균치임을 결정하는 단계; 를 포함한다.
본 실시예에서, 부동한 경우에 따라 제3 분해 서브 밴드 정보의 부동한 하나 또는 복수의 주파수 대역을 설정 고주파 대역으로 설정할 수 있다.
일 실시방식에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보는 웨이블릿이 변환하는 이미지 멀티 스케일 분해 방법을 기반으로 획득된 분해 서브 밴드 정보이다. 설정 고주파 대역은 제1 분해층의 HH주파수 대역이다.
설정 고주파 대역에 있어서, W채널 이미지의 제2 분해 서브 밴드 정보에 대응하는 설정 고주파 대역의 주파수 대역계수 매트릭스를 제3 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스로 결정한다. 즉, 제1 분해층의 HH주파수 대역에 있어서,
여기서, 는 제3 분해 서브 밴드 정보의 제1 분해층의 HH주파수 대역에 대응하는 분해 이미지중, 픽셀(i,j)의 주파수 대역 계수를 나타낸다. 제3 분해 서브 밴드 정보의 기타 분해층 및 기타 주파수 대역에 대응하는 주파수 대역 계수도 이와 같은 원리이다.
제3 분해 서브 밴드 정보에서 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정한다.
일 예시에서, 제1 분해층의 LH주파수 대역에 있어서,
제1 분해층의 HL주파수 대역에 있어서,
제2 분해층의 HH주파수 대역, 즉, 제1 분해층의 LL주파수 대역의 HH주파수 대역에 있어서,
제2 분해층의 LH주파수 대역, 즉, 제1 분해층의 LL주파수 대역의 LH주파수 대역에 있어서,
제2 분해층의 HL주파수 대역, 즉, 제1 분해층의 LL주파수 대역의 HL주파수 대역에 있어서,
제3 분해층의 HH주파수 대역, 즉, 제2 분해층의 LL주파수 대역의 HH주파수 대역에 있어서,
제3 분해층의 LH주파수 대역, 즉, 제2 분해층의 LL주파수 대역의 LH주파수 대역에 있어서,
제3 분해층의 HL주파수 대역, 즉, 제2 분해층의 LL주파수 대역의 HL주파수 대역에 있어서,
제3 분해층의 LL주파수 대역, 즉, 제2 분해층의 LL주파수 대역의 LL주파수 대역에 있어서,
여기서, 는, 제3 분해 서브 밴드 정보에 대응하는 제3 분해층의 HH주파수 대역의 분해 이미지 중, 픽셀(i,j)의 계수를 나타낸다. 는, 제3 분해 서브 밴드 정보에 대응하는 제3 분해층의 LH주파수 대역의 분해 이미지 중, 픽셀(i,j)의 계수를 나타낸다. 는, 제3 분해 서브 밴드 정보에 대응하는 제3 분해층의 HL주파수 대역의 분해 이미지 중, 픽셀(i,j)의 계수를 나타낸다. 는, 제3 분해 서브 밴드 정보에 대응하는 제3 분해층의 LL주파수 대역의 분해 이미지 중, 픽셀(i,j)의 계수를 나타낸다.
일 실시방식에서, 설정 고주파 대역에 대응하는 주파수 대역은, 제1 분해층의 HH주파수 대역, LH주파수 대역 및 HL주파수 대역을 포함함을 결정한다.
설정 고주파 대역에 있어서, W채널 이미지의 제1 분해 서브 밴드 정보에 대응하는 설정 고주파 대역의 주파수 대역계수 매트릭스를 제3 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스로 결정한다. 즉, 제1 분해층의 HH주파수 대역, LH주파수 대역 및 HL주파수 대역에 있어서,
설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정한다.
본 발명 실시예에서 제공하는 이미지 처리 방법은, 도1에 도시한 바와 같은 방법을 포함하고, 단계S14에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는 제1 매트릭스와 제2 매트릭스의 합임을 결정하는 단계를 포함하고, 상기 제1 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제2 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이다.
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 설정 고주파 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 상기 설정 고주파 대역 이외의 주파수 대역에서 대응하는 가중치 계수보다 크다.
예를 들면, 웨이블릿의 변환된 분해층 수가 3층일 경우, 설정 고주파 대역은, 제1 분해층의 HH주파수 대역이다. 설정 고주파 대역에서, W채널 이미지의 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는 0.98이고, 고주파 대역 이외의 주파수 대역에 대응하는 가중치 계수는 모두 0.5 또는 0.6 또는 0.55 등이다.
일 예시에서, 설정 고주파 대역은 제1 분해층의 HH주파수 대역이다.
제1 분해층의 HH주파수 대역에 있어서,
제1 분해층의 LH주파수 대역에 있어서,
제1 분해층의 HL주파수 대역에 있어서,
이러한 방식으로 유도한다.
본 발명 실시예에서 제공하는 이미지 처리 방법은 도1에 도시한 바와 같은 방법을 포함하고, 단계S14에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역계수 매트릭스는, 제3 매트릭스와 제4 매트릭스의 합임을 결정하는 단계를 포함하고, 상기 제3 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제4 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보가 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이다.
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
예를 들면, 웨이블릿의 변환된 분해층 수가 3층일 경우, 주파수 대역에서, 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역이 속하는 분해층의 층수는 역상관된다.
예를 들면, 제1 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수는, 모두 제2 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수보다 크다.
제2 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수는, 모두 제3 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수보다 크다.
본 발명 실시예에서 제공하는 이미지 처리 방법은 도1에 도시한 방법을 포함하고, 단계S14에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수를, 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수로 결정하는 단계를 포함한다.
제3 분해 서브 밴드 정보에서 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 하기의 동작을 수행한다.
즉, 상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 동작; 및
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제5 매트릭스와 제6 매트릭스의 합임을 결정하는 동작을 진행하고, 상기 제5 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제6 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이다.
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
예를 들면, 웨이블릿의 변환된 분해층 수가 3층일 경우, 고주파 대역은 제1 분해층의 HH주파수 대역임을 결정한다. W채널 이미지의 제2 분해 서브 밴드 정보 중의 제1 분해층의 HH주파수 대역의 주파수 대역 계수를, 제3 분해 서브 밴드 정보 중의 제1 분해층의 HH주파수 대역의 주파수 대역 계수로 결정한다.
제1 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수는, 모두 제2 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수보다 크다.
제2 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수는, 모두 제3 분해층의 HH주파수 대역, LH주파수 대역, HL주파수 대역 및 HH주파수 대역에 대응하는 가중치 계수보다 크다.
본 발명 실시예에서 제공하는 이미지 처리 방법은 도1에 도시한 바와 같은 방법을 포함하고, 단계S14에서, 제1 분해 서브 밴드 정보와 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역의 계수 매트릭스는, 제7 매트릭스 및 제8 매트릭스의 합임을 결정하는 단계를 포함하고, 상기 제7 매트릭스는, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제1 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고; 상기 제8 매트릭스는, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제2 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이다.
상기 제1 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제1 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제1 분산에 따라 계산하여 획득되는 것이다.
상기 제2 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제2 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제2 분산에 따라 계산하여 획득되는 것이다.
동일 주파수 대역의 분해 이미지의 동일 픽셀에서, 제1 그레이스케일 분량 이미지 및 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수의 합은 1이고; 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제1 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀이 대응하는 제1 분산은 정상관되고, 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀에 대응하는 제2 분산은 정상관된다.
여기서, 일 픽셀에 대응하는 제1 분산 및 제2 분산은 모두 각 픽셀을 중심으로 크기를 설정하는 영역(예를 들면, 3*3의 영역 또는 5*5의 영역 또는 7*7의 영역) 내의 픽셀 값의 분산이다.
일 실시예에서, 각 픽셀에 대응하는 제1 분산 및 제2 분산의 비율은, 해당 픽셀에서, 제1 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서, 당해 픽셀과 대응하는 가중치 계수 및 제2 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서, 해당 픽셀에 대응하는 가중치 계수의 비율과 같다.
예를 들면, 제1 분해층의 HH주파수 대역에 있어서,
여기서, 는, 제1 분해층의 HH주파수 대역에서, 제2 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서, 픽셀(i,j)에 대응하는 가중치 계수를 가리킨다.
는, 제1 분해층의 HH주파수 대역에서, 제2 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서 픽셀(i,j)에 대응하는 가중치 계수를 가리킨다.
는, 제1 분해층의 HH주파수 대역에서, 제2 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서 픽셀(i,j)의 제2 분산을 가리킨다.
는 제1 분해층의 HH주파수 대역에서, 제1 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서 픽셀(i,j)의 제1분산을 가리킨다.
예를 들면, 웨이블릿의 변환된 분해층 수가 2층일 경우, 웨이블릿이 변환하는 멀티 스케일 이미지 분해 알고리즘을 기반으로, 계산해낸 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보는, , , , , , , 를 포함한다.
웨이블릿의 변환된 분해층 수가 2층일 경우, 웨이블릿이 변환하는 멀티 스케일 이미지 분해 알고리즘을 기반으로, 계산해낸 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보는, , , , , , , 를 포함한다.
일 주파수 대역의 일 픽셀에 대해, 당해 픽셀에 대응하는 제1 분산 및 제2 분산에 따라, 해당 픽셀에서 제1 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서, 당해 픽셀에 대응하는 가중치 계수 및 제2 그레이스케일 분량 이미지가 당해 주파수 대역의 분해 이미지에서, 당해 픽셀에 대응하는 가중치 계수를 결정한다. 예를 들면, 제1 분해층의 HH주파수 대역의 계산 방식은,
제1 분해층의 LH주파수 대역에 대한 계산 방식은,
제1 분해층의 기타 주파수 대역 및 제2 분해층의 각 주파수 대역의 계산 방식은, 상기 계산 방식과 같은 원리이다.
상기 실시예의 장치에 관하여, 각 모듈이 수행하고 동작하는 구체방식은 이미 당해 방법에 관련되는 실시예에서 상세한 설명을 하였으므로, 여기서 상세히 설명하지 않는다.
*본 발명 실시예는 이미지 처리 장치를 제공한다. 도3를 참조할 경우, 도3은 예시적인 일 실시예에 따른 이미지 처리 장치의 구조도이다. 도3에 도시한 바와 같이, 당해 장치는,
타겟 이미지에서 적색 녹색 청색 채널 이미지 및 흰색 채널 이미지를 추출하도록 구성된 추출 모듈(301);
상기 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 상기 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정하도록 구성된 제1 결정 모듈(302);
상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하도록 구성된 제2 결정 모듈(303) - 상기 제1 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응되고; 제2 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응됨 - ;
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성된 제3 결정 모듈(304); 및
상기 제3 분해 서브 밴드 정보에 따라, 이미지를 재구성하여 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라 상기 타겟 이미지에 대응하는 컬러 이미지를 구성하도록 구성된 구성 모듈(305); 을 포함한다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제2 결정 모듈(303)은 하기의 방식으로 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
이미지 멀티 스케일 분해 방법으로, 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 것을 포함하고,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 분해층의 수량은 동일하고, 각 분해층의 주파수 대역의 수량은 동일하다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제3 결정 모듈(304)은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
동일 분해층에서 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 동일 주파수 대역을, 당해 분해층에서, 상기 제3 분해 서브 밴드 정보에 대응하는 주파수 대역으로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보의 각 분해층의 각 주파수 대역에 대해, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스 및 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스에 따라, 상기 제3 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스를 계산하는 것; 을 포함한다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제2 결정 모듈(303)은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보에서 상기 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정하는 것; 을 포함한다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제2 결정 모듈(303)은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제1 매트릭스와 제2 매트릭스의 합임을 결정하는 것을 포함하고, 상기 제1 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제2 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이다.
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 설정 고주파 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 상기 설정 고주파 대역 이외의 주파수 대역에서 대응하는 가중치 계수보다 크다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제2 결정 모듈(303)은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역계수 매트릭스는, 제3 매트릭스와 제4 매트릭스의 합임을 결정하는 것을 포함하고, 상기 제3 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역계수 매트릭스의 승적이고, 상기 제4 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이다.
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제2 결정 모듈(303)은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제5 매트릭스와 제6 매트릭스의 합임을 결정하는 것; 을 포함하고, 상기 제5 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제6 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이다.
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관된다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는 도3에 도시한 바와 같은 모듈을 포함하고,
상기 제2 결정 모듈(303)은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역의 계수 매트릭스는, 제7 매트릭스 및 제8 매트릭스의 합임을 결정하는 것을 포함하고, 상기 제7 매트릭스는, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제1 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고; 상기 제8 매트릭스는, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제2 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이다.
상기 제1 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제1 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제1 분산에 따라 계산하여 획득되는 것이다.
상기 제2 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제2 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서 각 픽셀에 대응하는 제2 분산에 따라 계산하여 획득되는 것이다.
여기서, 동일 주파수 대역의 분해 이미지의 동일 픽셀에서, 제1 그레이스케일 분량 이미지 및 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수의 합은 1이고; 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제1 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀이 대응하는 제1 분산은 정상관되고, 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀에 대응하는 제2 분산은 정상관된다.
본 발명 실시예는 이미지 처리 장치를 제공하는 바, 당해 장치는, 프로세서; 및
프로세서에 의해 수행 가능한 명령을 저장하기 위한 메모리; 를 포함하고,
상기 프로세서는 상기 이미지 처리 방법을 수행하도록 구성된다.
본 발명 실시예는 비일시적 컴퓨터 판독 가능 저장 매체를 제공하는 바, 상기 저장 매체의 명령이 모바일 단말의 프로세서에 의해 수행될 경우, 모바일 단말은 상기 이미지 처리 방법을 수행할 수 있다.
도4는 예시적인 일 실시예에 따른 이미지 처리 장치(400)의 블록도이다. 예를 들면, 당해 장치(400)는 휴대폰, 컴퓨터, 디지털 방송 단말, 메시징 기기, 게임 콘솔, 태블릿 기기, 의료 기기, 피트니스 기기, 개인 휴대 단말기 등일 수 있다.
도4를 참조하면, 장치(400)는 하나 또는 복수의 컴포넌트를 포함하는데, 처리 컴포넌트(402), 메모리(404), 전원 컴포넌트(406), 멀티미디어 컴포넌트(408), 오디오 컴포넌트(410), 입력/출력(I/O) 인터페이스(412), 센서 컴포넌트(414) 및 통신 컴포넌트(416)가 포함된다.
처리 컴포넌트(402)는 일반적으로 디스플레이, 전화 통화, 데이터 통신, 카메라 동작 및 기록 동작과 관련되는 장치(400)의 전체 동작을 제어한다. 처리 컴포넌트(402)는 하나 또는 복수의 프로세서(420)를 포함하여 명령을 수행함으로써, 상기 방법의 전부 또는 일부 단계를 완성한다. 이외에, 처리 컴포넌트(402)는 하나 또는 복수의 모듈을 포함할 수 있어, 처리 컴포넌트(402)와 기타 컴포넌트 사이의 인터랙션을 용이하게 한다. 예를 들면, 처리 컴포넌트(402)는 멀티미디어 모듈을 포함하여, 멀티미디어 컴포넌트(408)와 처리 컴포넌트(402)사이의 인터랙션을 용이하게 한다.
메모리(404)는 장치(400)에서의 동작을 지원하기 위해 다양한 유형의 데이터를 저장하도록 구성된다. 이러한 데이터의 예시에는 장치(400)에서 작동되는 모든 애플리케이션 프로그램 또는 방법의 명령, 연락처 데이터, 전화 번호부 데이터, 메시지, 이미지, 비디오 등이 포함된다. 메모리(404)는 모든 유형의 휘발성 또는 비 휘발성 메모리 또는 이들의 조합으로 구현 가능하다. 예를 들면, 스태틱 랜덤 액세스 메모리(SRAM), 전기적으로 지울 수 있는 프로그래밍 가능한 읽기 전용 메모리(EEPROM), 지울 수 있는 프로그래밍 가능한 읽기 전용 메모리(EPROM), 프로그래밍 가능한 읽기 전용 메모리(PROM), 읽기 전용 메모리(ROM), 자기 메모리, 플래시 메모리, 자기 디스크 또는 광 디스크와 같은 것들이다.
전원 컴포넌트(406)는 장치(400)의 다양한 컴포넌트에 전력을 제공한다. 전원 컴포넌트(406)는 전원 관리 시스템, 하나 또는 복수의 전원 및 장치(400)에 전력을 생성, 관리 및 분배하는 것과 관련되는 기타 컴포넌트를 포함할 수 있다.
멀티미디어 컴포넌트(408)는 상기 장치(400)와 사용자 사이에 출력 인터페이스를 제공하는 스크린을 포함한다. 일부 실시예에서, 스크린은 액정 디스플레이(LCD) 및 터치 패널 (TP)을 포함할 수 있다. 만약 스크린이 터치 패널을 포함하면, 스크린은 사용자로부터 입력 신호를 수신하기 위해 터치 스크린으로 구현 될 수 있다. 터치 패널에는 터치 패널의 터치, 슬라이딩 및 제스처를 감지하는 하나 또는 복수의 터치 센서가 포함된다. 상기 터치 센서는 터치 또는 슬라이드 동작의 경계를 감지할 수 있을 뿐만 아니라, 상기 터치 또는 슬라이드 동작과 관련된 지속 시간 및 압력도 감지할 수 있다. 일부 실시예에서, 멀티미디어 컴포넌트(408)는 전면 카메라 및/또는 후면 카메라를 포함한다. 기기(400)가 촬영 모드 또는 비디오 모드와 같은 작동 모드에 있을 경우, 전면 카메라 및/또는 후면 카메라는 외부의 멀티미디어 데이터를 수신할 수 있다. 각 전면 카메라 및 후면 카메라는 고정 광학 렌즈 시스템이거나 초점 거리 및 광학 줌 기능을 가질 수 있다.
오디오 컴포넌트(410)는 오디오 신호를 출력 및/또는 입력하도록 구성된다. 예를 들면, 오디오 컴포넌트(410)는 마이크(MIC)를 포함하고, 장치(400)가 통화 모드, 녹음 모드, 음성 인식 모드와 같은 동작 모드인 경우, 마이크는 외부의 오디오 신호를 수신하도록 구성된다. 수신된 오디오 신호는 메모리(404)에 저장되거나 통신 컴포넌트(416)를 통해 송신될 수 있다. 일부 실시예에서, 오디오 컴포넌트(410)는 오디오 신호를 출력하기 위한 스피커를 더 포함한다.
I/O 인터페이스(412)는 처리 컴포넌트(402)와 주변 인터페이스 모듈 사이에 인터페이스를 제공하며, 상기 주변 인터페이스 모듈은 키보드, 클릭 휠, 버튼 등일 수 있다. 이러한 버튼에는 홈 버튼, 볼륨 버튼, 시작 버튼 및 잠금 버튼이 포함될 수 있지만 이에 한정되지 않는다.
센서 컴포넌트(414)는 하나 또는 복수의 센서를 포함하여, 장치(400)에 다양한 측면의 상태 평가를 제공하는데 사용된다. 예를 들면, 센서 컴포넌트(414)는 장치(400)의 온/오프 상태, 기기(400)의 디스플레이 및 키패드와 같은 컴포넌트의 상대적 위치를 검출할 수 있고, 센서 컴포넌트(414)는 장치(400) 또는 장치(400)의 컴포넌트의 위치 변화, 사용자와 장치(400)사이의 접촉 유무, 장치(400)의 방향 및 위치 또는 가속/감속, 장치(400)의 온도 변화를 검출할 수 있다. 센서 컴포넌트(414)는 근접 센서를 포함 하는데 이는 물리적 접촉이 없을 경우 주변 물체의 존재를 감지하도록 구성된다. 센서 컴포넌트(414)는 CMOS또는 CCD이미징 센서와 같은 광 센서를 더 포함하여 이미징 응용에 사용될 수 있다. 일부 실시예에서, 센서 컴포넌트(414)는 가속도 센서, 자이로스코프 센서, 자기 센서, 압력 센서 또는 온도 센서를 더 포함할 수 있다.
통신 컴포넌트(416)는 장치(400)와 기타 기기 사이의 유선 또는 무선 통신을 용이하게 하도록 구성된다. 장치(400)는 통신 표준을 기반으로 하는 WiFi, 2G 또는 3G 또는 이들의 조합과 같은 무선 네트워크에 액세스할 수 있다. 예시적인 실시예에서, 통신 컴포넌트(416)는 방송 채널을 통해 외부 방송 관리 시스템으로부터 방송 신호 또는 방송 관련 정보를 수신한다. 예시적인 실시예에서, 상기 통신 컴포넌트(416)는 근거리 통신(NFC) 모듈을 더 포함하여 단거리 통신을 촉진한다. 예를 들면, NFC 모듈은 무선 주파수 식별 (RFID) 기술, 적외선 데이터 협회 (IrDA) 기술, 초 광대역 (UWB) 기술, 블루투스 (BT) 기술 및 기타 기술을 기반으로 구현될 수 있다.
예시적인 실시예에서, 장치(400)는 하나 또는 복수의 주문형 집적 회로 (ASIC), 디지털 신호 프로세서 (DSP), 디지털 신호 처리 장치 (DSPD), 프로그래밍 가능 논리 장치 (PLD), 필드 프로그래밍 가능 게이트 어레이(FPGA), 컨트롤러, 마이크로 컨트롤러, 마이크로 프로세서 또는 기타 전자 부품에 의해 상기 방법을 수행한다.
예시적인 실시예에서 명령을 포함하는 비 일시적 컴퓨터 판독 가능 저장 매체를 더 제공한다. 예를 들면, 명령을 포함하는 메모리(404)이고, 상기 명령은 장치(400)의 프로세서(420)에 의해 수행되어 상기 방법을 완성할 수 있다. 예를 들면, 상기 비 일시적 컴퓨터 판독 가능 저장 매체는, 롬(ROM), 랜덤 액세스 메모리(RAM), 시디롬(CD-ROM), 자기 테이프, 플로피 디스크 및 광학 데이터 저장 기기 등일 수 있다.
당업자는 본 명세서를 고려하고 본 발명을 실시한 후, 본 발명의 기타 실시예를 쉽게 생각해낼 수 있다. 본 발명은 본 발명의 임의의 변형, 용도 또는 적응적 변경을 포괄하기 위한 것으로, 이러한 변형, 용도 또는 적응적 변경은 본 발명의 일반적인 원리를 따르며 본 명세서에 공개되지 않은 본 기술 분야의 공지 상식 또는 통상적인 기술적 수단을 포함한다. 본 명세서 및 실시예는 단지 예시적인 것이며, 본 발명의 진정한 범위 및 사상은 하기의 청구 범위에 의해 결정된다.
본 발명은 상기 첨부된 도면에 도시한 정확한 구조에 한정되지 않고, 그 범위를 벗어나지 않고 다양한 수정 및 변경이 가능하다는 점을 이해해야 한다. 본 발명의 범위는 첨부된 청구 범위에 의해서만 제한된다.
301: 추출 모듈 302: 제1 결정 모듈
303: 제2 결정 모듈 304: 제3 결정 모듈
305: 구성 모듈
303: 제2 결정 모듈 304: 제3 결정 모듈
305: 구성 모듈
Claims (18)
- 이미지 처리 방법에 있어서,
타겟 이미지에서 적색 녹색 청색 채널 이미지와 흰색 채널 이미지를 추출하는 단계 - 상기 타겟 이미지는, 적색 원색 픽셀, 녹색 원색 픽셀, 청색 원색 픽셀 및 흰색 픽셀을 구비한 이미지 센서로 수집하여 획득한 최초의 RAW 포맷 이미지이고, 상기 최초의 RAW 포맷 이미지에는, 상기 적색 녹색 청색 채널 이미지와 상기 흰색 채널 이미지를 포함함 -;
상기 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 상기 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정하는 단계;
상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계 - 상기 제1 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응되고; 제2 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응됨 - ;
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보에 따라 이미지를 재구성하여 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라 상기 타겟 이미지에 대응하는 컬러 이미지를 구성하는 단계; 를 포함하고,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보에서 상기 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역 계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정하는 단계; 를 포함하는,
것을 특징으로 하는 이미지 처리 방법.
- 제1항에 있어서,
상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계는,
이미지 멀티 스케일 분해 방법에 따라, 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 단계를 포함하고,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 분해층의 수량이 동일하고, 각 분해층의 주파수 대역 수량이 동일한,
것을 특징으로 하는 이미지 처리 방법.
- 제1항에 있어서,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
동일 분해층에서 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 동일 주파수 대역을, 당해 분해층에서, 상기 제3 분해 서브 밴드 정보에 대응하는 주파수 대역으로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보의 각 분해층의 각 주파수 대역에 대해, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스 및 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스에 따라, 상기 제3 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스를 계산하는 단계; 를 더 포함하는,
것을 특징으로 하는 이미지 처리 방법.
- 삭제
- 제1항에 있어서,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제1 매트릭스와 제2 매트릭스의 합임을 결정하는 단계를 더 포함하고,
상기 제1 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제2 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 설정 고주파 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 상기 설정 고주파 대역 이외의 주파수 대역에서 대응하는 가중치 계수보다 큰,
것을 특징으로 하는 이미지 처리 방법.
- 제1항에 있어서,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제3 매트릭스와 제4 매트릭스의 합임을 결정하는 단계를 더 포함하고,
상기 제3 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제4 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관되는,
것을 특징으로 하는 이미지 처리 방법.
- 제1항에 있어서,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 단계; 및
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제5 매트릭스와 제6 매트릭스의 합임을 결정하는 단계; 를 더 포함하고,
상기 제5 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제6 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관되는,
것을 특징으로 하는 이미지 처리 방법.
- 제1항에 있어서,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하는 단계는,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역의 계수 매트릭스는, 제7 매트릭스 및 제8 매트릭스의 합임을 결정하는 단계를 더 포함하고,
상기 제7 매트릭스는, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제1 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고; 상기 제8 매트릭스는, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제2 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고;
상기 제1 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제1 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제1 분산에 따라 계산하여 획득되는 것이고;
상기 제2 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제2 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제2 분산에 따라 계산하여 획득되는 것이며;
동일 주파수 대역의 분해 이미지의 동일 픽셀에서, 제1 그레이스케일 분량 이미지 및 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수의 합은 1이고; 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제1 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀이 대응하는 제1 분산은 정상관되고, 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀에 대응하는 제2 분산은 정상관되는,
것을 특징으로 하는 이미지 처리 방법.
- 이미지 처리 장치에 있어서,
타겟 이미지에서 적색 녹색 청색 채널 이미지 및 흰색 채널 이미지를 추출하도록 구성된 추출 모듈 - 상기 타겟 이미지는, 적색 원색 픽셀, 녹색 원색 픽셀, 청색 원색 픽셀 및 흰색 픽셀을 구비한 이미지 센서로 수집하여 획득한 최초의 RAW 포맷 이미지이고, 상기 최초의 RAW 포맷 이미지에는, 상기 적색 녹색 청색 채널 이미지와 상기 흰색 채널 이미지를 포함함 -;
상기 적색 녹색 청색 채널 이미지의 제1 그레이스케일 분량 이미지 및 상기 흰색 채널 이미지의 제2 그레이스케일 분량 이미지를 결정하도록 구성된 제1 결정 모듈;
상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하도록 구성된 제2 결정 모듈 - 상기 제1 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응되고; 상기 제2 분해 서브 밴드 정보는 적어도 하나의 분해층을 포함하고, 각 분해층은 적어도 하나의 주파수 대역을 포함하며, 각 주파수 대역은 하나의 주파수 대역 계수 매트릭스에 대응됨 - ;
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성된 제3 결정 모듈; 및
상기 제3 분해 서브 밴드 정보에 따라 이미지를 재구성하여 제3 그레이스케일 분량 이미지를 획득하고, 상기 제3 그레이스케일 분량 이미지에 따라 상기 타겟 이미지에 대응하는 컬러 이미지를 구성하도록 구성된 구성 모듈; 을 포함하고,
상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보에서 상기 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 제3 분해 서브 밴드 정보 중의 각 주파수 대역의 주파수 대역 계수 매트릭스에서, 각 픽셀에 대응하는 계수값은, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과, 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스의 해당 픽셀의 계수값과의 평균치임을 결정하는 것; 을 포함하는,
것을 특징으로 하는 이미지 처리 장치.
- 제9항에 있어서,
상기 제2 결정 모듈은 하기의 방식으로 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
이미지 멀티 스케일 분해 방법으로, 상기 제1 그레이스케일 분량 이미지의 제1 분해 서브 밴드 정보 및 상기 제2 그레이스케일 분량 이미지의 제2 분해 서브 밴드 정보를 결정하는 것을 포함하고,
상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 분해층의 수량은 동일하고, 각 분해층의 주파수 대역 수량이 동일한,
것을 특징으로 하는 이미지 처리 장치.
- 제9항에 있어서,
상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
동일 분해층에서 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보의 동일 주파수 대역을, 당해 분해층에서, 상기 제3 분해 서브 밴드 정보에 대응하는 주파수 대역으로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보의 각 분해층의 각 주파수 대역에 대해, 상기 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스 및 상기 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스에 따라, 상기 제3 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스를 계산하는 것; 을 포함하는,
것을 특징으로 하는 이미지 처리 장치.
- 삭제
- 제9항 또는 제11항에 있어서,
상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제1 매트릭스와 제2 매트릭스의 합임을 결정하는 것을 포함하고,
상기 제1 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제2 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 설정 고주파 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 상기 설정 고주파 대역 이외의 주파수 대역에서 대응하는 가중치 계수보다 큰,
것을 특징으로 하는 이미지 처리 장치.
- 제9항 또는 제11항에 있어서,
상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제3 매트릭스와 제4 매트릭스의 합임을 결정하는 것을 포함하고,
상기 제3 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제4 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관되는,
것을 특징으로 하는 이미지 처리 장치.
- 제9항 또는 제11항에 있어서,
상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역에 있어서, 상기 제2 분해 서브 밴드 정보의 설정 고주파 대역의 주파수 대역 계수 매트릭스를, 상기 제3 분해 서브 밴드 정보의 해당 설정 고주파 대역의 주파수 대역 계수 매트릭스로 결정하는 것; 및
상기 제3 분해 서브 밴드 정보 중의 설정 고주파 대역 이외의 각 주파수 대역에 있어서, 상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제5 매트릭스와 제6 매트릭스의 합임을 결정하는 것; 을 포함하고,
상기 제5 매트릭스는, 해당 주파수 대역에서, 상기 제1 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이고, 상기 제6 매트릭스는, 해당 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수와 주파수 대역 계수 매트릭스의 승적이며;
동일 주파수 대역에서, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수의 합은 1이고, 주파수 대역에서, 상기 제2 분해 서브 밴드 정보에 대응하는 가중치 계수는, 주파수 대역이 속하는 분해층의 층수와 역상관되는,
것을 특징으로 하는 이미지 처리 장치.
- 제9항 또는 제11항에 있어서,
상기 제3 결정 모듈은, 하기의 방식으로, 상기 제1 분해 서브 밴드 정보 및 상기 제2 분해 서브 밴드 정보에 따라, 제3 분해 서브 밴드 정보를 결정하도록 구성되고, 당해 방식은,
상기 제3 분해 서브 밴드 정보의 각 주파수 대역의 주파수 대역 계수 매트릭스는, 제7 매트릭스 및 제8 매트릭스의 합임을 결정하는 것을 포함하고,
상기 제7 매트릭스는, 제1 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제1 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이고; 상기 제8 매트릭스는, 제2 분해 서브 밴드 정보의 해당 주파수 대역의 주파수 대역 계수 매트릭스와 제2 분해 서브 밴드 정보의 해당 주파수 대역의 가중치 계수 매트릭스의 도트 매트릭스이며;
상기 제1 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제1 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서, 각 픽셀에 대응하는 제1 분산에 따라 계산하여 획득되는 것이고;
상기 제2 분해 서브 밴드 정보의 각 주파수 대역의 가중치 계수 매트릭스 중 각 픽셀의 가중치 계수값은, 상기 제2 그레이스케일 분량 이미지가 해당 주파수 대역의 분해 이미지에서 각 픽셀에 대응하는 제2 분산에 따라 계산하여 획득되는 것이며;
동일 주파수 대역의 분해 이미지의 동일 픽셀에서, 제1 그레이스케일 분량 이미지 및 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수의 합은 1이고; 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제1 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀이 대응하는 제1 분산은 정상관되고, 각 주파수 대역의 분해 이미지의 각 픽셀에서, 제2 그레이스케일 분량 이미지에 대응하는 가중치 계수와 해당 픽셀에 대응하는 제2 분산은 정상관되는,
것을 특징으로 하는 이미지 처리 장치.
- 이미지 처리 장치에 있어서,
프로세서; 및
프로세서에 의해 수행 가능한 명령을 저장하기 위한 메모리; 를 포함하고,
상기 프로세서는 제1항 내지 제3항, 제5항 내지 제8항 중 어느 한 항의 방법을 수행하도록 구성되는,
것을 특징으로 하는 이미지 처리 장치.
- 컴퓨터 명령이 저장되어 있는 비일시적 컴퓨터 판독 가능 저장 매체에 있어서,
상기 컴퓨터 명령은 모바일 단말이 상기 제1항 내지 제3항, 제5항 내지 제8항 중 어느 한 항의 방법을 수행하도록 하는,
것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010747369.4A CN114066784A (zh) | 2020-07-29 | 2020-07-29 | 一种图像处理方法、装置和存储介质 |
| CN202010747369.4 | 2020-07-29 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220014801A KR20220014801A (ko) | 2022-02-07 |
| KR102563468B1 true KR102563468B1 (ko) | 2023-08-04 |
Family
ID=75277805
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210035077A KR102563468B1 (ko) | 2020-07-29 | 2021-03-18 | 이미지 처리 방법, 장치 및 저장 매체 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US11900637B2 (ko) |
| EP (1) | EP3945713A1 (ko) |
| JP (1) | JP7093441B2 (ko) |
| KR (1) | KR102563468B1 (ko) |
| CN (1) | CN114066784A (ko) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2022122682A (ja) * | 2021-02-10 | 2022-08-23 | キヤノン株式会社 | 画像符号化装置及びその制御方法及びプログラム |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106447641A (zh) * | 2016-08-29 | 2017-02-22 | 努比亚技术有限公司 | 图像生成装置及方法 |
Family Cites Families (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6195465B1 (en) * | 1994-09-21 | 2001-02-27 | Ricoh Company, Ltd. | Method and apparatus for compression using reversible wavelet transforms and an embedded codestream |
| JP2004228952A (ja) * | 2003-01-23 | 2004-08-12 | Ricoh Co Ltd | 画像処理装置、画像処理用プログラム及び記憶媒体 |
| KR100607144B1 (ko) * | 2003-12-29 | 2006-08-01 | 엘지.필립스 엘시디 주식회사 | 액정 디스플레이 장치 |
| JP4837503B2 (ja) * | 2006-09-12 | 2011-12-14 | オリンパス株式会社 | 画像処理システム、画像処理プログラム |
| KR20110006112A (ko) * | 2009-07-13 | 2011-01-20 | 삼성전자주식회사 | 카메라 시스템에서 디스플레이 패널의 백라이트를 제어하는 장치 및 그 방법 |
| FR2975804B1 (fr) * | 2011-05-27 | 2022-06-17 | Lvmh Rech | Procede de caracterisation du teint de la peau ou des phaneres |
| US9111339B1 (en) * | 2013-07-31 | 2015-08-18 | Marvell International Ltd. | System and method for reducing noise from an image |
| JP2016014727A (ja) * | 2014-07-01 | 2016-01-28 | 株式会社ジャパンディスプレイ | 表示装置、電子機器及び画像表示方法 |
| US10186023B2 (en) * | 2016-01-25 | 2019-01-22 | Qualcomm Incorporated | Unified multi-image fusion approach |
| CN106355569A (zh) * | 2016-08-29 | 2017-01-25 | 努比亚技术有限公司 | 图像生成装置及方法 |
| WO2018040751A1 (zh) * | 2016-08-29 | 2018-03-08 | 努比亚技术有限公司 | 图像生成装置及方法、图像处理设备及存储介质 |
| CN107992182B (zh) * | 2017-12-05 | 2021-06-29 | 北京小米移动软件有限公司 | 显示界面图像的方法和装置 |
| CN108389165B (zh) | 2018-02-02 | 2022-06-21 | 成都西纬科技有限公司 | 一种图像去噪方法、装置、终端系统和存储器 |
| CN109360182A (zh) * | 2018-10-31 | 2019-02-19 | 广州供电局有限公司 | 图像融合方法、装置、计算机设备和存储介质 |
| CN111353982B (zh) * | 2020-02-28 | 2023-06-20 | 贝壳技术有限公司 | 一种深度相机图像序列筛选方法及装置 |
-
2020
- 2020-07-29 CN CN202010747369.4A patent/CN114066784A/zh active Pending
-
2021
- 2021-03-18 KR KR1020210035077A patent/KR102563468B1/ko active IP Right Grant
- 2021-03-18 US US17/205,520 patent/US11900637B2/en active Active
- 2021-03-26 JP JP2021053241A patent/JP7093441B2/ja active Active
- 2021-03-29 EP EP21165486.8A patent/EP3945713A1/en active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106447641A (zh) * | 2016-08-29 | 2017-02-22 | 努比亚技术有限公司 | 图像生成装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220014801A (ko) | 2022-02-07 |
| US20220036590A1 (en) | 2022-02-03 |
| JP7093441B2 (ja) | 2022-06-29 |
| EP3945713A1 (en) | 2022-02-02 |
| JP2022027438A (ja) | 2022-02-10 |
| CN114066784A (zh) | 2022-02-18 |
| US11900637B2 (en) | 2024-02-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2019192316A1 (zh) | 图像相关处理方法及装置、设备、存储介质 | |
| US8692896B2 (en) | Image quality evaluation device, terminal device, image quality evaluation system, image quality evaluation method and computer-readable recording medium for storing programs | |
| CN107395898B (zh) | 一种拍摄方法及移动终端 | |
| EP2533520B1 (en) | Image sensor having HDR capture capability | |
| CN110944160B (zh) | 一种图像处理方法及电子设备 | |
| US20130177242A1 (en) | Super-resolution image using selected edge pixels | |
| US20180352201A1 (en) | Image processing method, device, terminal and storage medium | |
| US11375175B2 (en) | Multi-processor support for array imagers | |
| KR102525293B1 (ko) | 촬영 방법 및 장치, 단말기, 저장 매체 | |
| CN113850367A (zh) | 网络模型的训练方法、图像处理方法及其相关设备 | |
| US9350962B2 (en) | Image processing device, imaging apparatus, computer, image processing method, and non-transitory computer readable medium | |
| KR102563468B1 (ko) | 이미지 처리 방법, 장치 및 저장 매체 | |
| CN110674697A (zh) | 滤波方法、装置及相关产品 | |
| US9363435B2 (en) | Apparatus and method of determining how to perform low-pass filter processing as a reduction association processing when moire is suppressed in a captured image represented by image capture data according to an array of color filters and when the moire appears in the reduced image after processing the reduction processing on the image pickup data, on the basis of an acquisition result of the shooting condition data | |
| CN113837980A (zh) | 分辨率的调整方法、装置、电子设备及存储介质 | |
| CN112437237A (zh) | 拍摄方法及装置 | |
| CN113287147A (zh) | 一种图像处理方法及装置 | |
| CN115735226B (zh) | 一种图像处理方法及芯片 | |
| WO2017094504A1 (ja) | 画像処理装置、画像処理方法、撮像装置、及び、プログラム | |
| CN114298889A (zh) | 图像处理电路和图像处理方法 | |
| JP2016167258A (ja) | デコンボリューション画像において色収差を減じる方法、装置及びコンピュータプログラム製品 | |
| CN118317203A (zh) | 图像处理方法、装置、电子设备及芯片 | |
| CN116228554A (zh) | 图像恢复方法、装置和计算机存储介质 | |
| CN117440241A (zh) | 一种视频处理方法及装置 | |
| CN117557484A (zh) | 颜色还原方法、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| AMND | Amendment | ||
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |