KR100695003B1 - 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및이를 위한 장치 - Google Patents
주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및이를 위한 장치 Download PDFInfo
- Publication number
- KR100695003B1 KR100695003B1 KR1020050094759A KR20050094759A KR100695003B1 KR 100695003 B1 KR100695003 B1 KR 100695003B1 KR 1020050094759 A KR1020050094759 A KR 1020050094759A KR 20050094759 A KR20050094759 A KR 20050094759A KR 100695003 B1 KR100695003 B1 KR 100695003B1
- Authority
- KR
- South Korea
- Prior art keywords
- image information
- information
- spatial
- frequency
- jpeg
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000001914 filtration Methods 0.000 claims abstract description 30
- 238000013139 quantization Methods 0.000 claims description 11
- 238000006243 chemical reaction Methods 0.000 claims description 8
- 230000006837 decompression Effects 0.000 claims 1
- 239000004973 liquid crystal related substance Substances 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000010295 mobile communication Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/16—Spatio-temporal transformations, e.g. video cubism
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4023—Scaling of whole images or parts thereof, e.g. expanding or contracting based on decimating pixels or lines of pixels; based on inserting pixels or lines of pixels
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration using non-spatial domain filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20182—Noise reduction or smoothing in the temporal domain; Spatio-temporal filtering
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
본 발명은 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및 이를 위한 장치에 관한 것으로, 주파수 영역 상의 영상 정보인 JPEG 주파수 정보에 저대역 통과 필터링을 수행하여 주파수 영상 정보에서 잡음을 효과적으로 신속하게 제거하는 영상 복원 방법 및 이를 위한 장치에 관한 것이다.
이를 위하여 본 발명은 공간 영역 상의 공간 영상정보가 주파수 영역 상의 정보로 변환되어 압축된 주파수 영상 정보를 복원하는 영상 복원 장치로, 상기 주파수 영상 정보에서 잡음을 제거하기 위해 상기 주파수 영상 정보에 저대역 통과 필터링을 수행하는 저대역 통과 필터부; 상기 저대역 통과 필터링된 주파수 영상 정보를 상기 공간 영상 정보로 변환하여 복원하는 역 변환부;를 포함하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치를 제공한다.
JPEG, 주파수 영상 신호, 저대역 통과 필터, 잡음
Description
도 1은 본 발명의 일 실시예에 따른 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치의 블록도이다.
도 2는 본 발명의 일 실시예에 따라 도 1에 도시된 영상부의 상세블록도이다.
도 3은 본 발명의 일 실시예에 따른 JPEG 주파수 정보의 개념도이다.
도 4는 본 발명의 일 실시예에 따른 주파수 영상정보에서 잡음을 제거하는 영상 복원 방법의 절차도이다.
도 5는 본 발명의 일 실시예에 따른 영상 복원 장치의 잡음 제거 효과를 설명하기 위한 화면예이다.
<도면 주요 부분에 대한 부호의 설명>
100: 영상 복원 장치 110: 입력부
120: 표시부 130: 영상부
131: 카메라 132: JPEG부
133: 허프만 복호화부 134: 역 양자화부
135: 저대역 통과 필터부 136: IDCT부
137: 색상 변환부 138: 출력 처리부
140: 저장부 150: 제어부
본 발명은 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및 이를 위한 장치에 관한 것으로, 특히 주파수 영역 상의 영상 정보인 JPEG 주파수 정보에 저대역 통과 필터링을 수행하여 주파수 영상 정보에서 잡음을 효과적으로 신속하게 제거하는 영상 복원 방법 및 이를 위한 장치에 관한 것이다.
디지털 영상 기술의 괄목할만한 발전과 더불어 디지털 영상 정보를 효과적으로 압축하고 복원하는 다양한 방법이 개발되고 있다. 특히 사진을 촬영한 후, 부착된 소형 표시 장치, 예를 들어 소형 액정 표시 장치(liquid crystal display, LCD) 등을 통해 촬영한 사진을 바로 감상할 수 있는 디지털 카메라 및 디지털 카메라를 구비한 이동통신단말기의 광범위한 보급으로 인해, 디지털 영상 정보를 효율적으로 압축하여 제한된 저장 공간에도 불구하고 많은 사진을 찍을 수 있게 하고, 압축된 사진을 소형 표시 장치를 통해서도 원본에 가깝게 재생할 수 있게 하는 알고리즘의 필요성이 보다 증대되고 있다.
JPEG(joint photographic coding experts group) 방식도 그 중 하나로서 공간 영역 상의 데이터인 공간 영상 정보를 DCT(discrete cosine transform)을 통해 주파수 영역 상의 주파수 영상 정보로 변환하여 압축하는 기술을 사용한다.
그러나, 조도가 낮은 환경에서 디지털 카메라 또는 이동통신단말기의 디지털 카메라로 사진을 촬영할 경우, 도 5a에 도시된 바와 같이 카메라에 의해 획득한 공간 영상 정보에 많은 잡음이 포함되게 된다. 또한 촬영한 공간 영상 정보를 JPEG 방식에 의해 압축하여 저장한 후 다시 복원하여 재생하는 경우, 디지털 카메라 또는 이동통신단말기의 카메라는 소형 표시 장치에 영상 정보를 표시하기 위해 해당 공간 영상 정보를 다운 샘플링(down sampling)하는 데시메이션(decimation)을 수행하게 되는데, 데시메이션이 수행됨에 따라 공간 영상 정보에 포함된 잡음이, 도 5b에 도시된 바와 같이, 더욱 두드러지게 되는 문제점이 있다.
본 발명의 목적은, 상기 문제점을 해결하기 위한 것으로, JPEG(joint photographic coding experts group) 방식에 의해 압축된 영상 정보를 복원할 때 영상 정보에 포함된 잡음을 효율적이고 신속하게 제거하고자 함에 있다.
상기 목적을 달성하기 위한 본 발명의 실시예에 따른 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치는 주파수 영상 정보에 대해 엔트로피 복호화(entropy decoding)를 수행하는 엔트로피 복호화부; 상기 복호화된 주파수 영상 정보에 대해 역 양자화(de-quantization)를 수행하는 역 양자화부; 상기 역 양자화된 주파수 영상 정보에서 잡음을 제거하기 위해 상기 주파수 영상 정보에 저대역 통과 필터링을 수행하는 저대역 통과 필터부; 및 상기 저대역 통과 필터링된 주파수 영상 정보를 공간 영상 정보로 변환하여 복원하는 역 변환부;를 포함하는 것을 특징으로 한다.
삭제
더욱 바람직하게는 상기 주파수 영상 정보는 JPEG(joint photographic coding experts group) 방식에 의해 압축된 JPEG 주파수 정보이고, 상기 공간 영상 정보는 JPEG 방식에 의해 복원된 JPEG 공간 정보이며, 상기 역 변환부는 상기 저대역 통과 필터링된 주파수 영상정보에 IDCT(inverse discrete cosine transform)를 수행하여 상기 JPEG 공간 정보를 복원하고, 상기 JPEG 공간 정보에 색상 변환을 수행하여 RGB(red green blue) 공간 영상정보를 생성하는 색상 변환부;를 더 포함한다.
더욱 바람직하게는 상기 RGB 공간 정보를 표시하는 표시부; 상기 표시부에 적합하도록 상기 RGB 공간 정보에 데시메이션(decimation)을 수행하여 표시하는 출력 처리부; 를 더 포함한다.
또한, 본 발명의 실시예에 따른 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법은 주파수 영상 정보에 대해 엔트로피 복호화(entropy decoding)를 수행하는 단계; 상기 복호화된 주파수 영상 정보에 대해 역 양자화(de-quantization)를 수행하는 단계; 상기 역 양자화된 주파수 영상 정보에서 잡음을 제거하기 위해 상기 주파수 영상 정보에 저대역 통과 필터링을 수행하는 단계; 및 상기 저대역 통과 필터링된 주파수 영상 정보를 공간 영상 정보로 변환하여 복원하는 단계;를 포함하는 것을 특징으로 한다.
삭제
더욱 바람직하게는 상기 주파수 영상 정보는 JPEG(joint photographic coding experts group) 방식에 의해 압축된 JPEG 주파수 정보이고, 상기 공간 영상 정보는 JPEG 방식에 의해 복원된 JPEG 공간 정보이며, 상기 복원하는 단계는 상기 저대역 통과 필터링된 주파수 영상정보에 IDCT(inverse discrete cosine transform)를 수행하여 상기 JPEG 공간 정보를 복원하고, 상기 JPEG 공간 정보에 색상 변환을 수행하여 RGB(red green blue) 공간 영상정보를 생성하는 단계;를 더 포함한다.
더욱 바람직하게는 상기 복원하는 단계에 의해 복원된 상기 RGB 공간 정보에 대해, 표시하기 적합하도록 데시메이션(decimation)을 수행하여 표시하는 출력 처리 단계;를 더 포함한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치의 블록도이다.
도 1을 참조하여 설명하면, 본 발명의 일 실시예에 따른 영상 복원 장치(100)는 입력부(110), 표시부(120), 영상부(130), 저장부(140) 및 제어부(150)를 포함한다.
상기 입력부(110)는 문자키, 숫자키와 각종 기능키를 구비하며, 사용자가 입력하는 키에 대응하는 키입력 신호를 발생하여 상기 제어부(150)로 출력한다.
상기 표시부(120)는 액정 표시 장치(LCD) 등과 같은 표시 장치로서 상기 제어부(150)의 표시기능 제어신호에 따라 각종 영상이나 문자 데이터를 표시한다. 특히, 상기 표시부(120)는 상기 영상부(130)에 의해 복원된 RGB 공간 정보를 표시한다.
상기 영상부(130)는 입력된 3차원 형상에 대한 빛 신호를 2차원 평면상의 밝기와 컬러값을 가지는 픽셀들을 갖는 RGB(reg green blue) 공간 정보로 변환한 후 상기 RGB 공간 정보를 JPEG(joint photographic coding experts group) 방식에 의해 주파수 영역 정보로 압축된 JPEG 주파수 정보로 변환하며, 카메라(131), JPEG부(132) 및 출력 처리부(133)를 포함한다.
상기 카메라(131)는 사용자가 상기 입력부(110)의 키패드를 눌러 상기 카메라(131)를 작동시키면, 일정시간 동안 상기 카메라(131)의 렌즈를 통해 들어온 3차원 형상에 대한 영상의 빛 신호를 2차원 평면상의 각 픽셀별로 빨간색, 녹색 및 파란색의 밝기와 컬러값을 가지는 상기 RGB 공간 정보로 변환하여 상기 JPEG부(132)로 출력한다.
상기 JPEG부(132)는 상기 RGB 공간 정보를 상기 JPEG 방식에 의해 압축하여 상기 RGB 공간 정보에 대한 JPEG 주파수 정보를 생성한 후 상기 저장부(140)에 저장한다. 여기서 JPEG 주파수 정보라 함은 상기 RGB 공간 정보를 JPEG 방식에 의해 압축하여 생성된 영상 정보로서 공간영역 상의 상기 RGB 공간 정보를 주파수영역 상의 정보로 변환하여 압축한 주파수 영상 정보이다.
또한 상기 JPEG부(132)는 사용자의 선택에 따라 상기 저장부(140)에 저장된 상기 JPEG 주파수 정보에 대해 저대역 통과 필터링을 수행하여 잡음을 제거한 후, 상기 저대역 통과 필터링이 수행된 JPEG 주파수 정보를 상기 RGB 공간 정보로 복원하여 상기 출력 처리부(138)를 통해 상기 표시부(120)에 표시하는 역할을 수행한다.
주파수 영역상의 정보인 상기 JPEG 주파수 정보에 대해 저대역 통과 필터링이 수행되기 때문에 공간영역 상의 정보에 대해 필터링이 수행되는 것보다 연산량이 적으며, 이에 따라 영상 정보인 상기 JPEG 주파수 정보에 대해 잡음 제거를 보다 신속하고 용이하게 수행할 수 있는 장점이 있다.
또한 상기 JPEG(132)부는 소프트웨어에 의해 구현이 가능하므로 추가비용 및 전력이 소요되는 하드웨어 칩셋을 사용하지 않고 용이하게 JPEG 주파수 정보에서 잡음을 제거할 수 있는 장점이 있다.
상기 출력 처리부(138)는 상기 복원된 RGB 공간 정보에 대해 상기 표시부(120)에 적합하도록 데시메이션(decimation)을 수행한 후, 상기 데시메이션이 수행된 RGB 공간 정보를 상기 표시부(120)로 출력한다.
상기 표시부(120)는 소형 디스플레이 장치, 예를 들어 액정 표시 장치(LCD) 로 구성되며, 상기 액정 표시 장치에 영상 정보를 표시하는 경우 172x220의 크기를 갖는 QCIF 형식 등이 사용된다. 상기 RGB 공간 정보를 상기 QCIF(quarter common intermediate format) 형식으로 상기 액정 표시 장치에 표시하기 위해서는 상기 RGB 공간 정보에서 일부 픽셀들만을 샘플링하는 데시메이션이 수행되어야 한다.
그러나 상기 필터들에 의해 상기 데시메이션과 함께 필터링을 수행할 경우, 연산량이 증가하여 프로세서 등에 과부하를 줄 뿐만 아니라 실시간으로 영상을 재생하지 못하는 문제점이 발생한다. 또한 상기 필터들을 하드웨어로 구현할 경우 추가 비용 및 전력이 소요되는 문제점이 있다.
상기 영상 복원 장치(100)의 경우, 이미 상기 JPEG 주파수 정보에 대해 저대역 통과 필터링을 수행하였기 때문에, 데시메이션과 함께 필터링을 수행하지 않아도 도 5d에 도시된 바와 같이 잡음이 제거된 원본에 충실한 영상을 재생할 수 있다.
상기 JPEG부(132)는 상기 데시메이션이 수행되기 전에 상기 JPEG 주파수 정보에 저대역 통과 필터링을 수행하여 상기 RGB 공간 정보에 잡음이 거의 포함되지 않도록 한다.
상기 저장부(140)는 상기 제어부(150)의 제어를 받으며, 상기 제어부(150)의 제어시에 필요한 동작 프로그램, 시스템 프로그램이 저장되며, 여러 동작 프로그램 수행 중에 발생하는 데이터를 일시적으로 저장하는 램(RAM)을 포함한다. 특히, 상기 저장부(140)는 상기 RGB 공간 정보를 JPEG 방식에 의해 압축하여 생성된 영상정보인 상기 JPEG 주파수 정보를 저장한다.
상기 제어부(150)는 상기 영상 복원 장치(100)의 전반적인 동작을 제어하며, 특히 사용자의 키입력에 따라 상기 영상부(130)가 동작하도록 제어한다.
상기 영상부(130)를 DB 2020 칩(digital baseband 2020 chip)에 의해 구현하는 경우, 상기 JPEG부(132)는 상기 DB 2020 칩 내의 ARM 프로세서를 이용해 구현할 수 있으며 상기 출력 처리부(138)는 XGAM 모듈(graphic accelerator module)의 PDI_CON(display module interface)에 의해 구현될 수 있다.
도 2는 본 발명의 일 실시예에 따라 도 1에 도시된 영상부의 상세블록도이다.
도 2를 참조하여 설명하면, 본 발명의 일 실시예에 따른 영상 장치(100)의 JPEG부(132)는 허프만 복호화부(huffman decoding part)(133), 역 양자화부(de-quantizing part)(134), 저대역 통과 필터부(135), IDCT부(inverse discrete cosine transform part)(136) 및 색상 변환부(color conversion part)(137)를 포함한다.
상기 허프만 복호화부(133)는 JPEG 주파수 정보에 대해 허프만 복호화를 수행하여 복호화된 JPEG 주파수 정보를 생성한다.
상기 JPEG 주파수 정보는 허프만 암호화 방법에 의해 압축되어 있으며 상기 허프만 복호화부(133)는 상기 JPEG 주파수 정보에 포함된 허프만 코드 테이블을 이용해 상기 JPEG 주파수 정보를 복호화한다.
허프만 암호화 방법은 각 정보의 배열에서 각 정보들의 빈도수를 구한 후, 상기 빈도수를 이용해 상기 코드의 길이를 구하고, 해당 코드의 길이를 이용해 허 프만 코드를 구하는 방법으로 엔트로피 부호화 방식(entropy encoding)의 하나이다. 여기서 엔트로피 부호화 방식이라 함은 무손실(loseless) 부호화 방식 중 하나로서 정보의 통계적 발생 빈도에 따라 정보나 연속된 정보들을 적절한 길이의 부호로 표현하는 방식이다. 상기 허프만 복호화 동작에 관한 내용은 공지된 기술인바 이하 상세한 설명을 생략한다. 상기 허프만 방식 이외에 다른 엔트로피 부호화 방식, 예를 들어 산술 부, 복호화(arithmetic en/decoding) 방식이 채용될 수 있다.
상기 역 양자화부(134)는 상기 복호화된 JPEG 주파수 정보에 대해 역 양자화를 수행하여 역 양자화된 JPEG 주파수 정보를 생성한다. 상기 JPEG 주파수 정보는 상기 허프만 암호화 방법에 의해 암호화되기 전에 미리 설정된 파라미터에 따라 양자화가 수행되어 압축된 정보이다. 즉, RGB 공간 정보에 대해 DCT(discrete cosine transform)를 수행하여 획득한 DCT 계수들 중 미리 설정된 범위의 계수들만을 취하고 나머지는 버려서 정보량을 줄이는 작업이 수행된다. 따라서 상기 역 양자화부(134)는 상기 복호화된 JPEG 주파수 정보에 대해 역 양자화를 수행하여 버려진 나머지 DCT 계수들을 보간한다.
상기 저대역 통과 필터부(135)는 상기 역 양자화된 JPEG 주파수 정보에 대해 저대역 통과 필터링을 수행하여 상기 역 양자화된 JPEG 주파수 정보에 포함된 잡음을 제거한다. 상기 JPEG 주파수 정보에 포함된 잡음은 주로 고 주파수 대역에 분포하고 있으며 임펄스와 같은 특성을 가지므로 상기 저대역 통과 필터링 동작에 의해 효과적으로 제거될 수 있다.
상기 저대역 통과 필터부(135)는 8x8(=64) 크기를 갖는 JPEG 주파수 정보 블 록별로 저대역 통과 필터링을 수행한다. 도 3에 도시된 바와 같이, 상기 JPEG 주파수 정보는 8x8 크기를 갖는 블록별로 DCT를 수행하여 생성된 정보로서, 상기 JPEG 주파수 정보를 RGB 공간 정보로 변환하고자 하는 경우, 다시 8x8 크기를 갖는 블록별로 IDCT를 수행해야 한다.
도 3을 참조하여 설명하면, DC 블록은 상기 RGB 공간 정보 중 DC(direct current) 성분을 나타내는 0차 계수인 DC DCT 계수들을 포함하는 블록을 의미하고, AC 블록은 상기 RGB 공간 정보 중 AC(altenating current) 성분을 나타내는 1차 계수 이상의 AC DCT 계수들을 포함하는 블록을 의미한다.
상기 DC 블록에서 거리가 먼 블록일수록 고주파 성분에 대한 DCT 계수들을 포함하고 있다. 상기 저대역 통과 필터부(135)는 상기 DC 블록에서 일정한 거리 내에 있는 AC 블록들만을 통과시키고 나머지 AC 블록들은 0으로 놓은 방식으로 저대역 필터링을 수행할 수 있다. 예를 들어, 상기 저대역 통과 필터부(135)가 DC 블록으로부터의 거리가 1인 AC 블록만을 통과시키도록 설정되어 있는 경우, 상기 JPEG 주파수 정보 중 (0,0) DC 블록, (0,1) AC 블록, 및 (1,0) AC 블록만이 통과되고 나머지 AC 블록들은 0으로 놓게 된다.
본 발명의 일 실시예에 따른 저대역 통과 필터부(135)의 전달함수는 다음과 같다.
여기서 H( )는 JPEG 주파수 정보 블록, k 및 l은 JPEG 주파수 정보 블록의 좌표, D0은 미리 설정된 거리를 의미한다.
상기 거리를 지나치게 작게 설정할 경우 잡음은 많이 제거되나 화면이 번져(blurring)보이게 되므로 일정 수준 이상의 대비(contrast)를 유지하면서 잡음을 제거할 수 있도록 상기 거리를 설정해야 한다.
그러나 위에 예시한 저대역 통과 필터링 방법 이외에도 다른 여러 저대역 통과 필터링을 채용하여 본 발명을 용이하게 구현할 수 있음은 물론이다.
상기 저대역 통과 필터부(135)는 주파수 영역 정보인 JPEG 주파수 정보를 입력받아 저대역 통과 필터링을 수행하기 때문에 시간 영역 상에서 필터링을 수행하는 경우보다 연산량이 적어 프로세서 등에 과도한 부하를 주지 않으면서 보다 신속하게 필터링을 수행할 수 있는 장점이 있다.
상기 IDCT부(136)는 상기 저대역 통과 필터링된 JPEG 주파수 정보에 대해 IDCT를 수행하여 JPEG 공간 정보를 생성한다. 여기서 JPEG 공간 정보라 함은 상기 JPEG 주파수 정보의 DCT 계수들에 대해 IDCT를 수행하여 획득한 공간 영역 상의 영상 정보를 말한다. 상기 JPEG 공간 정보는 Y-Cb-Cr 색상 체계에 따른 영상 정보로서, 상기 Y는 밝기, 상기 Cb 및 Cr은 색상을 나타낸다.
상기 DCT/IDCT는 공간 영역 상의 공간 영상 정보를 주파수 영역 상의 정보인 주파수 영상 정보로 변환하여 압축하고 상기 주파수 영상 정보를 다시 공간 영역 상의 공간 영상 정보로 복원하는 변환/역변환의 일종이다. 상기 공간 영상 정보가 다른 종류의 변환에 의해 압축된 경우, 본 발명은 상기 IDCT부(136)가 아닌 해당 변환에 상응하는 역 변환 동작을 수행하는 다른 역 변환부를 채용하여 구현할 수 있다.
상기 색상 변환부(137)는 상기 JPEG 공간 정보에 대해 색상 변환을 수행하여 RGB 색상 체계에 따른 영상 정보인 RGB 공간 정보를 생성한다. 상기 RGB 색상 체계는 색차 신호 체계인 상기 Y-Cb-Cr 색상체계와 달리 원색 신호 체계이다.
도 4는 본 발명의 일 실시예에 따른 주파수 영상정보에서 잡음을 제거하는 영상 복원 방법의 절차도이다.
도 4를 참조하여 설명하면, 영상 복원 장치(100)의 허프만 복호화부(133)는 입력된 JPEG 주파수 정보에 허프만 복호화를 수행하여, 복호화된 JPEG 주파수 정보를 생성한다(S100).
그 후, 영상 복원 장치(100)의 역 양자화부(134)는 상기 복호화된 JPEG 주파수 정보에 역 양자화를 수행하여 역 양자화된 JPEG 주파수 정보를 생성한다(S110).
그 후, 영상 복원 장치(100)의 저대역 통과 필터부(135)는 상기 역 양자화된 JPEG 주파수 정보에 저대역 통과 필터링을 수행하여 잡음이 제거된 JPEG 주파수 정보를 생성한다(S120).
그 후, 영상 복원 장치(100)의 IDCT부(136)는 상기 저대역 통과 필터링된 JPEG 주파수 정보에 IDCT를 수행하여 JPEG 공간 정보를 생성한다(S130).
그 후, 영상 복원 장치(100)의 색상 변화부(137)는 상기 JPEG 공간 정보에 색상 변환을 수행하여 RGB 공간 정보를 생성한다(S140).
그 후, 영상 복원 장치(100)의 출력 처리부(138)는 상기 RGB 공간 정보에 데시메이션을 수행한 후, 상기 데시메이션이 수행된 RGB 공간 정보를 영상 복원 장치(100)의 표시부(120)에 표시하고(S150) 절차를 종료한다.
이상의 본 발명은 상기에 기술된 실시예들에 의해 한정되지 않고, 당업자들에 의해 다양한 변형 및 변경을 가져올 수 있으며, 이는 첨부된 청구항에서 정의되는 본 발명의 취지와 범위에 포함된다.
상기와 같은 본 발명에 따르면 JPEG(joint photographic coding experts group) 방식에 의해 압축된 영상 정보를 복원하는 경우 주파수 영역 상의 영상 정보인 JPEG 주파수 정보에 저대역 통과 필터링을 수행하여 효율적이고 신속하게 공간 영상 정보에 포함된 잡음을 제거할 수 있는 효과가 있다.
종래의 기술과 비교해 보면, 종래의 기술에는 공간 영상 정보를 액정 표시 장치에 표시하기 위해 RGB(red green blue) 공간 정보에서 일부 픽셀들을 샘플링하는 데시메이션(decimation)을 수행한다. 이때 데시메이션이 수행된 RGB 공간 정보는 도 5b에 도시된 바와 같이 잡음이 더욱 두드러지게 되어 도 5a에 도시된 원본 RGB 공간 정보에 비해 훨씬 낮은 품질을 가진다. 따라서 종래의 기술에서는 상기 표시되는 RGB 공간 정보의 품질이 잡음에 의해 지나치게 저하되는 것을 방지하기 위해, 상기 데시메이션과 함께 필터링을 수행하여 상기 RGB 공간 정보에 포함된 잡음을 제거였다. 상기 필터링을 수행하는 필터로는 평균 필터(mean filter), 중앙값 필터(median filter), 콤플렉스 필터(complex filter) 등이 사용되었다. 도 5c는 상기 데시메이션과 함께 필터링이 수행된 RGB 공간 정보를 도시하고 있었다.
이에 반하여 본 발명에 의하면 JPEG부에서 데시메이션을 수행하기 전에 JPEG 주파수 정보에 대한 저대역 통과 필터링을 수행함으로써 JPEG 주파수 정보에 대한 잡음이 거의 포함되지 않음에 따라, 데시메이션을 수행할 때 RGB 공간 정보에 데시메이션과 함께 부가적인 필터링을 수행하지 않아도 도 5d에 도시된 바와 같이 잡음이 제거되어 원본에 충실한 영상을 재생할 수 있다.
또한, 상기와 같은 본 발명에 따르면 소프트웨어적으로 JPEG 주파수 정보에서 잡음을 제거할 수 있도록 하여 추가적인 비용 및 전력의 소요 없이 용이하게 실시간으로 JPEG 방식에 의해 압축된 영상 정보를 복원할 수 있는 효과도 있다.
Claims (8)
- 공간 영역 상의 공간 영상 정보가 주파수 영역 상의 정보로 변환되어 압축된 주파수 영상 정보를 복원하는 영상 복원 장치로,주파수 영상 정보에 대해 엔트로피 복호화(entropy decoding)를 수행하는 엔트로피 복호화부;상기 복호화된 주파수 영상 정보에 대해 역 양자화(de-quantization)를 수행하는 역 양자화부;상기 역 양자화된 주파수 영상 정보에서 잡음을 제거하기 위해 상기 주파수 영상 정보에 저대역 통과 필터링을 수행하는 저대역 통과 필터부; 및상기 저대역 통과 필터링된 주파수 영상 정보를 공간 영상 정보로 변환하여 복원하는 역 변환부;를 포함하는 것을 특징으로 하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치.
- 삭제
- 청구항 1에 있어서,상기 주파수 영상 정보는 JPEG(joint photographic coding experts group) 방식에 의해 압축된 JPEG 주파수 정보이고, 상기 공간 영상 정보는 JPEG 방식에 의해 복원된 JPEG 공간 정보이며,상기 역 변환부는 상기 저대역 통과 필터링된 주파수 영상정보에 IDCT(inverse discrete cosine transform)를 수행하여 상기 JPEG 공간 정보를 복원하고,상기 JPEG 공간 정보에 색상 변환을 수행하여 RGB(red green blue) 공간 영상정보를 생성하는 색상 변환부;를 더 포함하는 것을 특징으로 하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치.
- 청구항 3에 있어서,상기 RGB 공간 정보를 표시하는 표시부;상기 표시부에 적합하도록 상기 RGB 공간 정보에 데시메이션(decimation)을 수행하여 표시하는 출력 처리부;를 더 포함하는 것을 특징으로 하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 장치.
- 공간 영역 상의 공간 영상 정보가 주파수 영역 상의 정보로 변환되어 압축된 주파수 영상 정보를 복원하는 영상 복원 방법으로,주파수 영상 정보에 대해 엔트로피 복호화(entropy decoding)를 수행하는 단계;상기 복호화된 주파수 영상 정보에 대해 역 양자화(de-quantization)를 수행하는 단계;상기 역 양자화된 주파수 영상 정보에서 잡음을 제거하기 위해 상기 주파수 영상 정보에 저대역 통과 필터링을 수행하는 단계; 및상기 저대역 통과 필터링된 주파수 영상 정보를 공간 영상 정보로 변환하여 복원하는 단계;를 포함하는 것을 특징으로 하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법.
- 삭제
- 청구항 5에 있어서,상기 주파수 영상 정보는 JPEG(joint photographic coding experts group) 방식에 의해 압축된 JPEG 주파수 정보이고, 상기 공간 영상 정보는 JPEG 방식에 의해 복원된 JPEG 공간 정보이며,상기 복원하는 단계는 상기 저대역 통과 필터링된 주파수 영상정보에 IDCT(inverse discrete cosine transform)를 수행하여 상기 JPEG 공간 정보를 복원하고,상기 JPEG 공간 정보에 색상 변환을 수행하여 RGB(red green blue) 공간 영상정보를 생성하는 단계;를 더 포함하는 것을 특징으로 하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법.
- 청구항 7에 있어서,상기 복원하는 단계에 의해 복원된 RGB 공간 정보에 대해, 표시하기 적합하도록 데시메이션(decimation)을 수행하여 표시하는 단계;를 더 포함하는 것을 특징으로 하는 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020050094759A KR100695003B1 (ko) | 2005-10-10 | 2005-10-10 | 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및이를 위한 장치 |
CNA2006101524828A CN1949821A (zh) | 2005-10-10 | 2006-09-29 | 频率影像信息中除去噪音的影像复原方法及其装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020050094759A KR100695003B1 (ko) | 2005-10-10 | 2005-10-10 | 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및이를 위한 장치 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR100695003B1 true KR100695003B1 (ko) | 2007-03-13 |
Family
ID=38019189
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020050094759A KR100695003B1 (ko) | 2005-10-10 | 2005-10-10 | 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및이를 위한 장치 |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR100695003B1 (ko) |
CN (1) | CN1949821A (ko) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100821939B1 (ko) | 2006-12-22 | 2008-04-15 | 연세대학교 산학협력단 | 영상 잡음 제거 장치 및 방법 |
KR20140124180A (ko) * | 2013-04-16 | 2014-10-24 | 에스케이하이닉스 주식회사 | 영상의 잡음 제거 방법 및 장치 |
EP3837635A4 (en) * | 2018-08-14 | 2022-04-27 | Contrast, Inc. | IMAGE COMPRESSION |
US11910099B2 (en) | 2016-08-09 | 2024-02-20 | Contrast, Inc. | Real-time HDR video for vehicle control |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111127328A (zh) * | 2018-10-31 | 2020-05-08 | Tcl集团股份有限公司 | 一种图像虚化方法、终端、存储介质及处理器 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR19980703741A (ko) * | 1996-02-05 | 1998-12-05 | 요트.게.아.롤페즈 | 영상 데이타 잡음 필터링 방법 및 장치 |
KR100271994B1 (ko) | 1995-05-15 | 2000-11-15 | 쥴리 오. 페트리니 | 고속2차원코사인변환필터링방법및그장치 |
KR20040105274A (ko) * | 2003-06-04 | 2004-12-16 | 삼성전자주식회사 | 블록 이산 코사인 변환 방식에 의해 부호화된 영상에포함된 블록현상 제거 방법 |
-
2005
- 2005-10-10 KR KR1020050094759A patent/KR100695003B1/ko not_active IP Right Cessation
-
2006
- 2006-09-29 CN CNA2006101524828A patent/CN1949821A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100271994B1 (ko) | 1995-05-15 | 2000-11-15 | 쥴리 오. 페트리니 | 고속2차원코사인변환필터링방법및그장치 |
KR19980703741A (ko) * | 1996-02-05 | 1998-12-05 | 요트.게.아.롤페즈 | 영상 데이타 잡음 필터링 방법 및 장치 |
KR20040105274A (ko) * | 2003-06-04 | 2004-12-16 | 삼성전자주식회사 | 블록 이산 코사인 변환 방식에 의해 부호화된 영상에포함된 블록현상 제거 방법 |
Non-Patent Citations (3)
Title |
---|
1002719940000 |
1020040105274 |
참고자료 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100821939B1 (ko) | 2006-12-22 | 2008-04-15 | 연세대학교 산학협력단 | 영상 잡음 제거 장치 및 방법 |
KR20140124180A (ko) * | 2013-04-16 | 2014-10-24 | 에스케이하이닉스 주식회사 | 영상의 잡음 제거 방법 및 장치 |
KR101962372B1 (ko) * | 2013-04-16 | 2019-03-26 | 에스케이하이닉스 주식회사 | 영상의 잡음 제거 방법 및 장치 |
US11910099B2 (en) | 2016-08-09 | 2024-02-20 | Contrast, Inc. | Real-time HDR video for vehicle control |
EP3837635A4 (en) * | 2018-08-14 | 2022-04-27 | Contrast, Inc. | IMAGE COMPRESSION |
Also Published As
Publication number | Publication date |
---|---|
CN1949821A (zh) | 2007-04-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7847833B2 (en) | Digital camera device providing improved methodology for rapidly taking successive pictures | |
US7369161B2 (en) | Digital camera device providing improved methodology for rapidly taking successive pictures | |
Wallace | The JPEG still picture compression standard | |
US6825876B1 (en) | Digital camera device with methodology for efficient color conversion | |
EP1894413B1 (en) | Image processing of dct-based video sequences in compressed domain | |
KR100880039B1 (ko) | 웨이블릿 기반 이미지 코덱에서의 부호화 이득을 달성하는방법 및 시스템 | |
Wiseman | The still image lossy compression standard-JPEG | |
US8666186B1 (en) | Lossy compression of high dynamic range video | |
US5854858A (en) | Image signal coder operating at reduced spatial resolution | |
JPH11331847A (ja) | 画像変換方法、ディジタルカメラおよびコンピュ―タシステム | |
US11303932B2 (en) | Image compression | |
Daly et al. | Visual masking in wavelet compression for JPEG-2000 | |
KR100695003B1 (ko) | 주파수 영상 정보에서 잡음을 제거하는 영상 복원 방법 및이를 위한 장치 | |
Deshlahra | Analysis of Image Compression Methods Based On Transform and Fractal Coding | |
JP2018019239A (ja) | 撮像装置及びその制御方法及びプログラム | |
TWI390959B (zh) | 視頻訊號處理裝置,視頻訊號處理方法及視頻訊號處理程式 | |
JP2009010612A (ja) | 画像圧縮装置および画像圧縮方法 | |
US6226445B1 (en) | Image compression and expansion device | |
KR20060022894A (ko) | 이동 단말기에서의 썸네일 영상 생성 장치 및 방법 | |
JPH08251418A (ja) | ブロック歪低減装置および低減方法 | |
KR100619685B1 (ko) | 웨이브릿 부호화를 이용한 화상통신기기의 전송속도조절방법과 장치 | |
JP4711879B2 (ja) | 画像処理装置、画像形成装置、コンピュータプログラム、記録媒体及び画像処理方法 | |
JPH0746407A (ja) | 画像データ圧縮装置および画像データ復元装置 | |
KR20040105274A (ko) | 블록 이산 코사인 변환 방식에 의해 부호화된 영상에포함된 블록현상 제거 방법 | |
Okuda et al. | Raw image encoding based on polynomial approximation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130226 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20140224 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20150224 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20160224 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20170224 Year of fee payment: 11 |
|
LAPS | Lapse due to unpaid annual fee |