KR20030003222A - 디지털 이미지들을 필터링하기 위한 방법 및 필터링 장치 - Google Patents

디지털 이미지들을 필터링하기 위한 방법 및 필터링 장치 Download PDF

Info

Publication number
KR20030003222A
KR20030003222A KR1020027009308A KR20027009308A KR20030003222A KR 20030003222 A KR20030003222 A KR 20030003222A KR 1020027009308 A KR1020027009308 A KR 1020027009308A KR 20027009308 A KR20027009308 A KR 20027009308A KR 20030003222 A KR20030003222 A KR 20030003222A
Authority
KR
South Korea
Prior art keywords
filtering
block
blocks
current block
decoded
Prior art date
Application number
KR1020027009308A
Other languages
English (en)
Other versions
KR100754461B1 (ko
Inventor
라이네마자니
도브린보그단-파울
카르체위츠마르타
Original Assignee
노키아 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from FI20000122A external-priority patent/FI20000122A0/fi
Application filed by 노키아 코포레이션 filed Critical 노키아 코포레이션
Publication of KR20030003222A publication Critical patent/KR20030003222A/ko
Application granted granted Critical
Publication of KR100754461B1 publication Critical patent/KR100754461B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment

Abstract

본 발명은 블록들(B1, B2, B3, B4)별로 부호화된 후 복호화되는, 디지털 이미지내의 비주얼 아티팩트들을 감소시키기 위한 방법에 관한 것이다. 상기 방법에서 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위하여 필터링이 수행된다. 상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 수행되고 상기 현재 블록과 이전에 복호화된 블록간의 필터링을 위해 이용가능한 경계가 존재한다.

Description

디지털 이미지들을 필터링하기 위한 방법 및 필터링 장치{A method for filtering digital images, and a filtering device}
일반적으로 도 1에 도시된 것과 같은 장치가 압축된 형태의 디지털 비디오 시퀀스를 전송하기 위해 사용된다. 상기 디지털 비디오 시퀀스는 종종 프레임들로 지칭되는, 순차적인 이미지들로 형성된다. 예를 들어 ITU-T H.261/H.263 권고들과 같은 몇몇 종래 기술의 디지털 비디오 전송 시스템들에 있어서, 적어도 3개의 프레임 유형들이 정의된다: I-프레임(인트라), P-프레임(예측된 또는 인터) 및 B-프레임(양방향). 상기 I-프레임은 상기 이미지 자체에 포함된 정보에 기초하여 단독으로 생성되고, 수신단에서, 이 I-프레임은 전체 이미지를 형성하는데 사용될 수 있다. P-프레임들은 이전의 I-프레임 또는 P-프레임에 근거하여 형성되는데, 상기 수신단에서 이전의 I-프레임 또는 P-프레임은 상기 이미지를 재구성하기 위하여 수신된 P-프레임과 함께 대응하여 사용된다. P-프레임들의 구성시, 예를 들어 움직임 보상이 정보의 양을 압축하는데 사용된다. B-프레임들은 하나 이상의 이전의 P-프레임들 또는 I-프레임들 및/또는 하나 이상의 다음 P-프레임들 또는 I-프레임들에 근거하여 형성된다.
상기 프레임들은 추가로 블록들로 분할된다. 하나의 프레임은 다른 유형들의 블록들을 포함할 수 있다. 예측된 프레임(예를 들어 인터 프레임(inter frame))은 또한 예측되지 않은 블록들을 포함할 수 있다. 즉, P-프레임의 몇몇 블록들은 사실상 인트라 부호화될 수 있다. 더욱이, 몇몇 비디오 부호기들은 독립적인 세그먼트 복호화의 개념을 사용할 수 있는데, 그 경우 몇몇 블록들은 서로 독립적으로 부호화되는 세그먼트들을 형성하기 위하여 함께 그룹화된다. 어떤 세그먼트내의 모든 블록들은 동일한 유형일 수 있다. 예를 들어, P-프레임이 주로 예측된 블록들 및 몇몇 인트라-부호화된 블록들로 이루어져 있는 경우, 상기 프레임은 인트라 블록들의 적어도 하나의 세그먼트 및 예측된 블록들의 적어도 하나의 세그먼트를 포함하는 것으로 여겨진다.
잘 알려진 바와 같이, 디지털 이미지는 이미지 픽셀들의 어레이를 포함한다. 흑백 이미지의 경우, 각 픽셀은 픽셀들의 휘도를 나타내는, 어떤 범위(예를 들어 0 - 255)내의 픽셀 값을 갖는다. 컬러 이미지에 있어서, 픽셀 값들은 다수의 다른 방법들로 표현될 수 있다. RGB 컬러 모델로 지칭되는, 일반적으로 사용되는 표현에 있어서, 각 픽셀은 3개의 값들로 설명되는데, 하나는 레드(Red) 색성분의 값에 대응하고, 다른 하나는 그린(Green) 색성분의 값에 대응하며, 세번째는 블루(Blue) 색성분의 값에 대응한다. 대안적인 표현들이 사용되는, 수많은 다른 색 모델들이 존재한다. YUV 색 모델로 알려진, 이러한 하나의 대안에 있어서, 이미지 픽셀들은 휘도 성분(Y) 및 각각 관련된 픽셀 값을 갖는, 2개의 색 또는 색차 성분들(U, V)로 표현된다.
일반적으로, 휘도 및 색성분들을 채용하는 색 모델들은 상기 RGB 모델보다 더 효율적인 컬러 이미지의 표현을 제공한다. 또한 이러한 색 모델들의 상기 휘도 성분이 일반적으로 이미지의 인지된 구조에 대한 가장 많은 정보를 제공하는 것으로 알려져 있다. 특히, 이것은 이미지의 색성분들이 인지된 이미지 품질의 중대한 손실없이 공간적으로 서브-샘플링되도록 허용한다. 이들 이유들로 휘도/색 표현을 채용하는 색 모델들은 많은 애플리케이션들에서 선호되는데, 특히 데이터 저장 공간, 처리 전력 또는 전송 대역폭이 제한되는 애플리케이션들에서 선호된다.
상기한 바와 같이, 상기 YUV 색 모델에 있어서, 이미지는 휘도 성분 및 2개의 색 성분들로 표현된다. 전형적으로 상기 이미지내의 휘도 정보는 완전한 공간 해상도를 가지고 변환된다. 색 신호들 양자는 공간적으로 서브샘플링되는데, 예를 들어 16 ×16 픽셀들의 필드는 8 ×8 픽셀들의 필드로 서브샘플링된다. 블록 크기들의 차이들은 주로 눈이 휘도의 변화처럼 동일하게 색의 변화를 잘 인식하지 못한다는 사실에 기인하는데, 2 ×2 픽셀들의 필드는 동일한 색 값을 가지고 부호화된다.
전형적으로, 이미지 블록들은 매크로블록들을 형성하기 위하여 함께 그룹화된다. 상기 매크로블록은 보통 가로 세로 16 픽셀들, 16 로우들(rows)의 휘도 샘플들, 모드 정보 및 가능한 움직임 벡터들을 포함한다. 상기 매크로블록은 4개의 8 ×8 휘도 블록들 및 2개의 8 ×8 색 블록들로 분할된다. 스캐닝(및 부호화/복호화)은 관례적으로 상기 프레임의 좌측 상단 모서리에서 우측 하단 모서리까지, 매크로블록씩 진행된다. 하나의 매크로블록내에서 상기 스캐닝(및 부호화/복호화) 순서는 상기 매크로블록의 좌측 상단 모서리에서 우측 하단 모서리까지이다.
예를 들어 디지털 비디오의 전송에서 사용되는 전형적인 부호화 및 복호화 시스템(코덱(codec))을 도시한 도 1을 참조하면, 부호화될 현재의 비디오 프레임은 입력 데이터(In(x,y))로서 전송 시스템(10)에 온다. 상기 입력 데이터(In(x,y))는 전형적으로 픽셀 값 정보의 형태를 취한다. 차분 가산기(11)에서 그것은, 그것에서 이전의 이미지에 근거하여 형성된 예측 프레임(Pn(x,y))을 감산함으로써 예측 오차 프레임(En(x,y))으로 변환된다. 상기 예측 오차 프레임은 이하에 설명되는 방법으로 블록(12)에서 부호화되고, 상기 부호화된 예측 오차 프레임은 다중화기(13)로 보내진다. 새로운 재구성된 프레임을 형성하기 위하여, 상기 부호화된 예측 오차 프레임은 복호기(14)로 보내지는데, 복호기(14)는 가산기(15)에서 상기 예측 프레임(Pn(x,y))과 가산되어 재구성된 프레임()이 초래되는 복호화된 예측 오차 프레임()을 생성한다. 상기 재구성된 프레임은 프레임 메모리(16)에 저장된다. 다음 프레임을 부호화하기 위하여, 상기 프레임 메모리에 저장된 상기재구성된 프레임은 기준 프레임(Rn(x,y))으로서 독출되고 수학식 1에 따라 움직임 보상 및 예측 블록(17)에서 새로운 예측 프레임(Pn(x,y))으로 변환된다.
Pn(x,y) = Rn[x + Dx(x,y),y + Dy(x,y)]
숫자들 [Dx(x,y), Dy(x,y)]의 쌍은 위치 (x,y)의 픽셀의 움직임 벡터로 불리우고, 숫자들 Dx(x,y) 및 Dy(x,y)은 상기 픽셀의 수평 편이(shift) 및 수직 편이이다. 그들은 움직임 추정 블록(18)에서 계산된다. 압축될 상기 프레임의 픽셀들과 관련된 모든 움직임 벡터들을 구성하는 움직임 벡터들의 세트는 또한 기조 함수들(basis functions) 및 계수들을 포함하는 움직임 모델을 사용하여 부호화된다. 상기 기조 함수들은 상기 부호기 및 상기 복호기 양자에 알려져 있다. 상기 계수 값들은 부호화되고 상기 다중화기(13)로 보내지는데, 상기 다중화기(13)는 수신기에 송신하기 위하여 상기 부호화된 예측 오차 프레임을 가지고 그들을 동일한 데이터 스트림으로 다중화한다. 이러한 방법으로 전송될 정보의 양은 극적으로 감소된다. 몇몇 프레임들은 상기 기준 프레임(Rn(x,y))만을 사용하여 부분적으로 또는 전체적으로 예측하는 것이 너무 어려울 수 있어서 그들을 부호화할 때 움직임 보상된 예측을 사용하는 것은 실용적이지 않다. 이들 프레임들 또는 프레임들의 일부분들은 상기 기준 프레임(Rn(x,y))으로부터의 어떤 예측없이 인트라-부호화를 사용하여 부호화되고, 따라서 그들과 관련한 움직임 벡터 정보는 상기 수신기로 송신되지 않는다. 종래 기술에 있어서 I-프레임들 또는 인트라-부호화된 P-프레임들의 부분들을 위해 다른 종류의 예측, 즉 인트라 예측이 채용될 수 있다. 이 경우, 상기 기준은 동일한 프레임의 일부(또는 독립적인 세그먼트 복호화가 사용되는 경우 슬라이스)인 이전에 복호화되고 재구성된 블록들에 의해 형성된다.
상기 수신기(20)에서, 역다중화기(21)는 상기 부호화된 예측 오차 프레임들 및 상기 움직임 벡터들로 전송된 상기 움직임 정보를 분리하고 상기 부호화된 예측 오차 프레임들을 복호기(22)로 보내는데, 상기 복호기(22)는 가산기(23)에서 이전의 프레임에 근거하여 형성된 상기 예측 프레임(Pn(x,y))과 가산되어 복호화되고, 재구성된 프레임()이 초래되는 복호화된 예측 오차 프레임()을 생성한다. 상기 복호화된 프레임은 상기 복호기의 출력(24)으로 보내지고 동시에 프레임 메모리(25)에 저장된다. 다음 프레임을 복호화할 때, 상기 프레임 메모리에 저장된 프레임은 기준 프레임(Rn(x,y))으로서 독출되고 상기에 제시된 수학식 1에 따라, 움직임 보상 및 예측 블록(26)에서 새로운 예측 프레임으로 변환된다.
예측 오차 프레임들의 부호화 및 움직임 예측을 사용하지 않고 송신될 프레임 또는 P-프레임의 일부의 인트라부호화에서 사용되는 부호화 방법은 일반적으로 변환에 근거하는데, 가장 일반적인 변환은 이산 코사인 변환(DCT: Discrete Cosine Transformation)이다. 상기 프레임은 예를 들어 8 ×8 픽셀들의 크기를 갖는 인접 블록들로 분할된다. 상기 변환은 부호화될 블록에 대해 계산되는데, 이것은 일련의 항들을 초래한다. 이들 항들의 계수들은 그들이 디지털적으로 처리될 수 있도록 이산 스케일로 양자화된다. 양자화는 라운딩(rounding) 에러들을 야기하는데, 이것은 블록들로부터 재구성된 이미지에서 보일 수 있어서, 인접 블록들간의 경계에서 픽셀 값들의 불연속성이 존재한다. 어떤 복호화된 프레임이 다음 예측된 (P) 프레임들을 위한 예측 프레임을 계산하는데 사용되기 때문에, 이들 에러들은 순차적인 프레임들로 전파될 수 있고, 따라서 상기 수신기에 의해 재생된 이미지에서 가시적인 에지들을 야기한다. 이러한 유형의 이미지 에러들은 블록화 아티팩트들(artefacts)로 불리운다. 더욱이, 인트라-예측이 사용되는 경우, 블록화 아티팩트들은 또한 주어진 프레임내의 블록에서 블록으로 전파될 수 있다. 이 경우, 블록화 아티팩트들은 전형적으로 사용되는 인트라 예측의 유형에 특정한 시각적인 영향들을 초래한다. 그러므로 전송을 위해 부호화되고 다음에 복호화되는 디지털 이미지들내의 블록화 아티팩트들의 공간적인 그리고 시간적인 전파와 관련한 중대한 기술적인 문제가 존재한다는 것은 이해되어야 한다.
상기에 제시된 원리들은 또한 세그먼트화된 프레임들이 사용되는 상황에 적용가능하다. 이 경우 부호화 및 복호화는 각 세그먼트내의 블록들의 유형에 따라, 상기 프레임의 세그먼트들에서 수행된다.
이전의 논의 및 다음 설명중 많은 부분이 디지털 비디오와 같은 이미지 시퀀스들에 대한 본 발명의 적용에 집중될지라도, 본 발명에 의한 방법이 또한 개별 디지털 이미지들(즉 스틸 이미지들)에 적용될 수 있다는 것은 또한 주목되어야 한다. 본질적으로, 본 발명에 의한 방법은 어떤 부호화/복호화 방법을 사용하여 블록씩 부호화 및/또는 복호화되는 어떤 디지털 이미지에도 적용될 수 있다.
더욱이, 본 발명에 의한 방법은 디지털 이미지의 어떤 휘도 또는 색 성분에도 적용될 수 있다. 상기에 소개된 바와 같이, YUV 색 모델을 사용하여 표현되는 이미지의 예를 취하면, 본 발명에 의한 방법은 상기 휘도(Y) 성분, 어느 하나의 색 성분(U 또는 V), 색 성분(U 및 V) 양자, 또는 모든 3개의 성분들(Y, U 및 V)에 적용될 수 있다. 상기 휘도 성분이 이미지 구조 및 내용에 관한 더 지각적으로 중요한 정보를 제공하는 것으로 알려진 경우, 본 발명에 의한 방법을 상기 휘도 성분에만 적용하는 것이 충분할 수 있지만, 본 발명에 의한 방법이 적용될 수 있는 휘도/색/색차 성분들의 수 또는 조합에 아무런 제한도 존재하지 않는다.
블록화 아티팩트들을 제거하기 위한 몇몇 종래 기술의 방법들이 알려져있다. 이들 방법들은 다음 특징들에 의해 특징지워진다:
- 블록화 아티팩트를 제거하기 위하여 어떤 픽셀들이 값 정정을 필요로하는지를 결정하는 것,
- 상기 픽셀 주위에 배치된 필터링 윈도우에 의해 포함되는 다른 픽셀들의 값들에 근거하여, 정정될 각 픽셀을 위해 적합한 저역통과 필터링을 결정하는 것,
- 정정될 픽셀을 위해 새로운 값을 계산하는 것 및
- 상기 새로운 값을 가장 근접한 디지털화된 픽셀 값으로 라운딩(rounding)하는 것.
필터의 선택 및 필터링을 사용할 것인지에 대한 결정에 영향을 미치는 인자들은 예를 들어 상기 블록 경계를 가로지르는 픽셀들의 값들간의 차이, 변환 결과로서 수신되는 계수들의 양자화 스텝의 크기 및 처리되는 픽셀의 다른 측들상의 픽셀 값들간의 차이일 수 있다.
종래 기술의 방법들에 있어서, 블록화의 필터링 및 다른 유형의 비주얼 아티팩트들이 프레임씩 수행된다. 즉 전체 프레임이 우선 복호화되고 그다음 필터링된다. 그 결과, 블록화 아티팩트들의 영향은 프레임내에서 또는 하나의 프레임으로부터 다른 프레임으로 쉽게 전파된다. 이것은 특히 예측 인트라-부호화가 사용될 때 사실이다.
종래 기술의 방법들이 또한 상기 이미지의 실제 특징들에 속한 라인들을 제거하려는 경향이 있는 것으로 알려졌다. 다른 한편으로, 종래 기술의 방법들이 모든 블록화 또는 블록화-관련 아티팩트들을 항상 제거할 수 있는 것은 아니다.
본 발명은 블록들별로 부호화되고 복호화되는, 디지털 이미지내의 비주얼 아티팩트들(artefacts)을 감소시키기 위한 방법에 관한 것으로, 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키기 위하여 필터링이 수행된다. 본 발명은 또한 블록들별로 부호화되고 복호화되는, 디지털 이미지내의 비주얼 아티팩트들을 감소시키기 위한 장치에 관한 것으로, 상기 장치는 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 수단을 포함한다. 본 발명은 또한 블록들별로 디지털 이미지를 부호화하기 위한 수단 및 국부적으로 복호화하기 위한 수단을 포함하는 부호기에 관한 것으로, 상기 부호기는 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 수단을 포함한다. 본 발명은 또한 블록들별로 디지털 이미지를 복호화하기 위한 수단을 포함하는 복호기에 관한 것으로, 상기 복호기는 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 수단을 포함한다. 본 발명은 또한 블록들별로 디지털 이미지를 부호화하기 위한 수단과 국부적으로 복호화하기 위한 수단 및 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 수단을 포함하는 부호기를 포함하는 단말기에 관한 것이다. 더욱이 본 발명은 블록들별로 디지털 이미지를 복호화하기 위한 수단 및 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 수단을 포함하는 단말기에 관한 것이다. 또한 본 발명은 블록들별로 디지털 비디오 신호를 부호화하고 국부적으로 복호화하기 위한 그리고 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 기계 실행가능 단계들을 포함하는 소프트웨어 프로그램을 저장하기 위한 저장 매체에 관한 것이다. 본 발명은 또한 블록들별로 디지털 비디오 신호를 복호화하기 위한 그리고 현재 블록과 인접 블록간의 경계로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 기계 실행가능 단계들을 포함하는 소프트웨어 프로그램을 저장하기 위한 저장 매체에 관한 것이다.
도 1은 종래 기술에 의한 디지털 비디오 부호기 및 복호기를 도시한 것이다.
도 2는 본 발명의 바람직한 실시예에 의한 방법에서 유리한 블록 스캐닝 순서를 도시한 것이다.
도 3은 본 발명의 바람직한 실시예에 의한 유리한 블록 경계 필터링 순서를 도시한 것이다.
도 4는 본 발명에 의한 바람직한 방법에서 유리한 필터링 순서를 도시한 것이다.
도 5는 본 발명의 방법을 구현하기 위한 디지털 이미지 블록 전송 시스템을 도시한 것이다.
도 6은 본 발명에 의한 방법의 흐름도를 도시한 것이다.
도 7은 본 발명에 의한 방법을 구현하는 휴대용 비디오 원격통신 장치의 개략도를 도시한 것이다.
본 발명에 의한 방법의 주된 목적은 프레임들내의 그리고 한 프레임에서 다른 프레임으로 블록화 아티팩트들의 전파를 제한하는 것이다. 본 발명의 다른 목적은 예측 인트라-부호화가 사용될 때 특히 가시적인 블록화 및 다른 블록화-관련 아티팩트들을 제거하기 위한 새로운 종류의 필터링 장치를 제공하는 것이다. 또한 본 발명은 상기 방법 및 관련된 장치가 종래 기술의 해법들보다 더 신뢰성있고 효과적으로 동작하는 목적을 갖는다.
본 발명의 상기 목적들은 실질적으로 이미지 블록이 복호화된 후 즉시 블록 경계 필터링을 수행함으로써 달성되고 필터링되는데 이용가능한 적어도 하나의 블록 경계가 존재한다. 특히, 이것은 블록화 및 다른 비주얼 아티팩트들의 공간적 그리고 시간적 전파가 종래 기술의 방법들보다 더 큰 정도로 제한되는 이점을 갖는다. 더욱이, 이전 블록 경계 필터링 동작들의 결과들은 후속 블록들의 부호화, 복호화 및 필터링에서 사용될 수 있다. 즉, 한 경계의 필터링과 관련하여 변경된/정정된 픽셀 값들은 다른 블록들을 부호화하고 복호화할 때 그리고 다른 블록들/블록 경계들을 필터링할 때 사용될 수 있다.
본 발명의 일 태양에 의하면, 현재 블록이 복호화된 후 필터링이 수행되고 상기 현재 블록 및 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는, 블록들별로 부호화된 프레임으로부터 (주로 블록화 아티팩트들에 의해 야기되는) 블록화 및 다른 비주얼 아티팩트들을 감소시키기 위한 방법이 제공된다.
본 발명의 제2 태양에 의하면, 본 발명에 의한 방법을 구현하기 위한 장치가 제공된다. 본 발명에 의한 장치는, 현재 블록이 복호화된 후 필터링이 수행되도록 정해지고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
본 발명의 제3 태양에 의하면, 본 발명의 방법을 구현하는 복호기를 포함하는 디지털 이미지들을 부호화하기 위한 부호기가 제공된다. 본 발명에 의한 부호기는, 현재 블록이 국부적으로 복호화된 후 필터링이 수행되도록 정해지고 상기 현재 블록과 이전에 국부적으로 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
본 발명의 제4 태양에 의하면, 본 발명에 의한 방법을 구현하는 디지털 이미지들을 복호화하기 위한 복호기가 제공된다. 본 발명에 의한 복호기는, 현재 블록이 복호화된 후 필터링이 수행되도록 정해지고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
본 발명의 제5 태양에 의하면, 본 발명에 의한 방법을 구현하고 디지털 이미지 전송 능력을 갖는 단말기가 제공된다. 본 발명에 의한 단말기는, 현재 블록이 국부적으로 복호화된 후 필터링이 수행되도록 정해지고 상기 현재 블록과 이전에 국부적으로 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
본 발명의 제6 태양에 의하면, 본 발명에 의한 방법을 구현하고 디지털 이미지 복호화 능력을 갖는 단말기가 제공된다. 본 발명에 의한 단말기는, 현재 블록이 복호화된 후 필터링이 수행되도록 정해지고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
본 발명의 제7 태양에 의하면, 본 발명에 의한 방법을 구현하는 명령들을 포함하는 소프트웨어 프로그램을 저장하는 저장 매체가 제공된다. 본 발명에 의한 저장 매체는, 현재 블록이 국부적으로 복호화된 후 필터링을 수행하기 위한 기계 실행가능 단계들을 상기 소프트웨어 프로그램이 더 포함하고 상기 현재 블록과 이전에 국부적으로 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
본 발명의 제8 태양에 의하면, 본 발명에 의한 방법을 구현하는 명령들을 구비하고 디지털 비디오 신호를 블록들별로 복호화하기 위한 기계 실행가능 단계들을 포함하는 소프트웨어 프로그램을 저장하는 저장 매체가 제공된다. 본 발명에 의한저장 매체는, 현재 블록이 복호화된 후 필터링을 수행하기 위한 기계 실행가능 단계들을 상기 소프트웨어 프로그램이 더 포함하고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 한다.
블록화 아티팩트들은 블록 경계들에서 발생하기 때문에, 블록 경계들 및 그 부근의 픽셀들만을 필터링하는 것이 유리하다. 상기 이미지 자체의 일부인 에지들은 상기 이미지 영역내의 어디든지 존재할 수 있다. 블록화 아티팩트들을 포함하는 픽셀들만이 정정 필터링을 위해 선택되도록 그리고 상기 이미지의 일부인 에지들의 품질이 필터링동안 영향을 받지 않도록, 다음이 가정된다:
상기 이미지의 일부인 에지들과 관련된 픽셀 값의 변경들은 블록화 아티팩트들과 관련된 에지들보다 일반적으로 더 크고,
상기 픽셀 값 변경이 작은, 상기 이미지내의 에지들은 필터링에 의해 야기되는 상기 픽셀 값 차이들의 라운딩(rounding)을 상당히 당하지 않는다.
본 발명에 의한 방법이 실제 필터링 동작을 수행하는데 선택된 방법 및 필터링을 위해 선택된 상기 경계 부근의 픽셀들의 수에 상관없이 적용될 수 있다는 것은 주목되어야 한다. 본 발명은 특히 사용될 수 있는 어떤 특정 필터 구현의 정확한 상세보다도, 필터링이 부호화/복호화 프로세스에서 수행되는 스테이지 및 필터링이 적용되는 방법에 관한 것이다.
부호화될 이미지는 일반적으로 수직 및 수평 양방향으로 블록들로 분할되기 때문에, 상기 이미지는 수직 및 수평 블록 경계들을 포함한다. 수직 블록 경계들에 관해서, 상기 경계의 우측 및 좌측에 픽셀들이 존재하고, 수평 블록 경계들에 관해서, 상기 경계의 위 및 아래에 픽셀들이 존재한다. 일반적으로, 상기 픽셀들의 위치는 상기 블록 경계의 제1 측 및 제2 측에 존재하는 것으로 설명될 수 있다.
본 발명에 의한 방법 및 관련된 장치는 이전에 재구성된 블록들로부터 동일한 프레임내의 또는 독립적인 세그먼트 복호화가 사용되는 경우, 동일한 세그먼트내의 다음의 재구성된 블록들로의 블록화 아티팩트들로 인한 시각 변형들의 전파를 중대하게 제한한다. 한 프레임으로부터 다음 프레임으로의 블록화 아티팩트들의 전파가 또한 감소된다. 본 발명에 의한 방법 및 장치를 사용함으로써 많은 수의 블록화 및 블록화 관련 아티팩트들이 불합리하게 상기 이미지내의 실제 에지들을 약화시키는 것없이 제거될 수 있다.
하기에, 본 발명이 바람직한 실시예들과 첨부한 도면들을 참조하여 더 상세히 설명될 것이다.
본 발명 및 본 발명의 바람직한 실시예들의 설명에 있어서, 도 2 내지 도 6이 주로 참조될 것이다.
하기에, 디지털 이미지 복호기의 동작이 설명된다. 도 5에 도시된 바와 같은, 본 발명에 의한 디지털 이미지 전송 시스템에 있어서, 부호기 및 복호기에서 사용되는 상기 블록 및 블록 경계 스캐닝 순서는 동일하다. 즉 부호기 및 복호기 양자에 알려져있다. 그러나, 선택된 특정 스캐닝 순서는 본 발명에 의한 방법의 구현에 필수적이지는 않다. 도 2는 블록들의 그룹들, 예를 들어 매크로블록들을 포함하는 프레임을 위한 유리한 스캐닝 순서를 도시한 것이다. 우선, 좌측 상단의 블록(B1)이 복호화된다. 즉 예를 들어 상기 블록의 휘도 정보를 나타내는 픽셀 값들이 재구성되고 프레임 버퍼에 저장된다. 그다음, 우측 상단의 블록(B2)이 복호화되고 상기 프레임 버퍼에 저장된다. 이제, 상기 좌측 상단의 블록(B1)과 우측 상단의 블록(B2)간의 제1 수직 경계(R12)는 양측에 복호화된 블록을 가지며, 따라서 상기 경계(R12)가 필터링될 수 있다. 유리하게, 상기 필터링에 의해 변경된 픽셀 값들만이 상기 프레임 버퍼에서 갱신된다. 상기 블록 경계에 대해 필터링을 수행하기 위한 많은 알려진 방법들이 존재한다. 본 발명과 함께 구현될 수 있는 한가지 종래기술의 필터링 방법은 여기에 참조로써 고려되는, 국제 특허 공보 WO 98/41025에 개시된다.
다음, 당해 블록들의 그룹중 좌측 하단의 블록(B3)이 복호화되고 상기 프레임 버퍼에 저장된다. 이제, 상기 좌측 상단의 블록(B1)과 좌측 하단의 블록(B3)간의 제1 수평 경계(R13)는 양측에 복호화된 블록을 가지는데, 또한 상기 제1 수평 경계(R13)가 필터링된다. 상기 제1 수직 경계(R12)의 필터링에서 상기 제1 수평 경계(R13) 근처의 몇몇 픽셀 값들은 변경될 수 있다. 유리하게, 이들 변경된 값들은 상기 제1 수평 경계(R13)의 필터링에서 사용된다. 이것은 이전에 재구성된 블록들로부터 동일한 프레임 또는 독립적인 세그먼트 부호화/복호화가 사용되는 경우, 동일한 세그먼트내의 다음에 재구성된 블록들로 비주얼 아티팩트들의 전파를 더 제한하도록 도와준다.
이제 상기 매크로블록내의 제4 블록(B4)이 복호화되고 상기 프레임 버퍼에 저장된다. 상기 제4 블록(B4)의 복호화가 완료될 때 어느 한쪽에 복호화된 블록을 구비하는 2개의 부가적인 경계들이 존재한다: 제2 수직 경계(R34)와 제2 수평 경계(R24). 그러므로, 상기 경계들(R34, R24) 양자는 이제 필터링될 수 있다. 본 발명에 의한 방법의 유리한 실시예에 있어서, 상기 필터링은, 상기 제2 수직 경계(R34)가 우선 필터링되고, 상기 필터링 결과가 상기 프레임 버퍼에 저장되며, 상기 제2 수평 경계(R24)가 그다음에 필터링되도록 수행된다. 일반적인 경우에 있어서, 현재 블록의 (예를 들어 좌측 및 상부의) 2개의 경계들이 필터링되는 경우, 첫번째로 필터링된 경계에 기인한 변경된 픽셀 값들은 다른 경계를 필터링할 때 사용된다.
본 발명의 유리한 실시예에 있어서, 어떤 블록에 대해, 프레임 또는 세그먼트내의 블록들을 부호화하기 위해 어떤 스캐닝 순서가 채택되는지에 따라, 상기 블록의 경계들중 한개의 경계, 두개의 경계, 세개의 경계, 네개의 경계를 가로질러 필터링이 수행될 수 있거나 상기 경계들중 아무 것도 필터링이 수행될 수 없다. 바람직한 구현 방식에 있어서, 블록들이 재구성되는 순서가 도 2에 도시된다. 도시된 바와 같이, 네개의 블록들이 2 ×2 블록들의 매크로블록들을 형성하기 위하여 함께 그룹화된다. 그다음 상기 프레임의 좌측 상단 모서리로부터 우측 하단 모서리까지 매크로블록씩 스캐닝이 진행된다. 하나의 매크로블록내에서 상기 스캐닝 순서는 상기 매크로블록의 좌측 상단 모서리로부터 우측 하단 모서리까지이다. 이 특정 스캐닝 순서로 인하여, 바람직한 구현 방식에 있어서, 블록(의 좌측 및/또는 상부의) 최대 2개의 경계들은, 블록이 재구성될 때 필터링을 위해 이용가능해진다. 블록 경계들이 필터링을 위해 유리하게 검사되는 순서가 도 3에 도시된다(우선 좌측 경계 그다음 상부 경계). 나머지 경계들, 즉 우측 및 하단의 경계들은 우측 및 각각 하단에 인접한 블록의 재구성이 완료될 때에만 필터링된다. 상기 블록이 프레임 경계 또는 세그먼트 경계에 위치하는 경우, 대응하는 블록 경계/경계들은 공통 경계를 가로질러 필터링하기 위한 아무런 인접 블록도 존재하지 않기 때문에 필터링되지 않는다. 바람직한 구현 방식에 있어서, 6 ×4 블록들의 작은 프레임 크기에 대해, 블록 경계들이 한 프레임내에서 필터링되는 순서가 도 4에 도시된다. 블록 경계들상의 숫자들은 본 발명의 유리한 실시예에 의한 필터링 순서를 나타낸다. 실제 애플리케이션들에 있어서, 전형적으로 상기 프레임은 6 ×4 블록들보다 많은 블록들을 포함하지만, 6 ×4 블록들보다 더 많은 (또는 더 적은) 블록들을 포함하는 프레임들 및 세그먼트들까지 어떻게 상기 바람직한 필터링 순서가 확장될 수 있는지는 상기 설명으로부터 명백하다.
일반적으로, 본 발명에서 설명된 시스템은 블록-기반 비디오 부호기들에서의 모든 종류의 부호화 뿐만 아니라 블록-기반 스틸 이미지 부호화에 적용될 수 있다: I, P, B 부호화되고 부호화되지 않음. 본 발명에서 설명된 필터링 프로세스는 부호화를 위해 N ×M 블록들로 분할된 어떤 프레임에 대해 작용한다.
본 발명에 의한 방법의 유리한 실시예에 있어서, 필터링은, 블록이 실질적으로 재구성(복호화)되자마자, 다른 이전에 재구성된 블록들에 인접한 블록 경계들만을 가로질러 적용된다. 그러나, 상기 블록의 재구성 및 상기 블록 경계/경계들의 필터링간에 다른 단계들이 수행될 수 있다는 것은 명백하다.
본 발명에 의한 방법에 있어서, 필터링은 이전에 재구성(복호화)된 블록들에 인접한 블록 경계들만을 가로질러 적용된다. 본 발명의 유리한 실시예에 있어서, 필터링은 실질적으로 블록이 재구성되자마자 수행되고 이전에 복호화된 블록을 갖는 경계는 이용가능해진다. 그러나, 상기 블록의 재구성 및 상기 블록 경계/경계들의 필터링간에 다른 단계들이 수행될 수 있다는 것은 명백하다. 하지만, 일단 경계가 이용가능해지면, 바람직하기로는 상기 경계는 다른 블록이 복호화되기 전에 필터링된다.
또한 상기 필터링은 실질적으로 블록이 재구성된후 즉시 수행되지 않는 것이가능하고 필터링될 경계는 존재한다. 예를 들어, 본 발명의 다른 실시예에서, 상기 필터링은 이미지의 대부분의 블록들이 재구성될 때 수행된다. 또한 상기 필터링 및 재구성은 순차적으로 수행되는 것이 가능하다. 예를 들어, 어떤 양의 블록들이 재구성되고 그다음 필터링을 위해 이용가능한 이러한 경계들에 대해 상기 필터링이 수행된다.
독립적인 세그먼트 복호화가 사용되는 경우, 현재 블록과 동일한 세그먼트에 속한 이전에 재구성된 블록들에 인접한 블록 경계들만을 가로질러 필터링이 적용된다.
본 발명에 의한 방법의 특히 유리한 특징은 필터링의 결과가 프레임내의 후속 블록을 재구성하기 전에 상기 디지털 이미지 부호화 시스템에 이용가능하게 형성된다는 사실이다. 이것은 특히 블록의 예측이 동일한 프레임(또는 독립적인 세그먼트 복호화가 사용되는 경우 세그먼트)내의 이전에 재구성된 블록들을 참조하여 수행되는 예측 인트라-부호화를 위해 유리하다. 따라서, 본 발명은 블록들이 동일한 프레임 또는 동일한 세그먼트내의 이전에 재구성된 블록들로부터 예측되는 어떤 블록 부호화 스킴과 관련하여 사용될 때 유리하다. 그것은 이전에 재구성된 블록들로부터 동일한 프레임 또는 독립적인 세그먼트 부호화/복호화가 사용되는 경우 동일한 세그먼트내의 다음에 재구성된 블록들로의 비주얼 아티팩트들의 전파를 중대하게 감소시키거나 막는다. 그러므로, 어떤 블록의 재구성은 이전에 재구성된 블록들로부터 유도된 필터링된 데이터에 의존한다. 따라서, 부호기-복호기 불일치를 피하기 위하여, 복호기는 동일한 필터링 스킴을 실행해야 할 뿐만 아니라 또한 부호기와 동일한 순서로 필터링 동작들을 수행해야 한다. 상기 방법은 또한 한 프레임에서 다른 프레임으로 블록화 아티팩트들의 전파를 감소시키거나 막는데, 이것은 예를 들어 인터 프레임 예측에서 사용되는 프레임내의 블록화 아티팩트들이 본 발명에 의한 방법에 의해 감소되기 때문이다.
이하, 도 5에 제시된 디지털 이미지 전송 시스템 및 도 6의 흐름도를 참조하여, 비디오 전송 시스템에서의 비디오 프레임들의 전송 및 수신이 설명된다. 본 발명에 의한 상기 블록 경계 필터링 방법의 동작이 우선 상기 전송 시스템의 부호기와 관련되어 설명될 것인데, 이 경우, 디지털 이미지 시퀀스의 프레임이 몇몇 형태의 인트라 블록 예측을 사용하여 인트라(I-프레임) 포맷으로 부호화되고, 상기 인트라 프레임의 블록은 동일한 프레임내의 다른 이전에 부호화된 인트라 블록들을 참조하여 부호화될 수 있다. 그다음 상기 전송 시스템의 복호기에서 블록 경계들의 필터링이 상기 수신기에서 복호화를 위해 수신되는 대응하는 인트라-부호화된 프레임을 위해 설명될 것이다. 마지막으로, 본 발명에 의한 상기 블록 경계 필터링 방법을 인터-부호화된 프레임들(P-프레임들)에 적용하는 것이 설명될 것이다.
프레임이 몇몇 형태의 인트라 예측을 사용하여 인트라 포맷으로 부호화된다고 가정하면, 상기 프레임의 부호화는 다음과 같이 진행된다. 부호화될 프레임의 블록들은 도 5에 제시된 상기 비디오 전송 시스템의 부호기(50)로 하나씩 보내진다. 상기 프레임의 블록들은 디지털 이미지 소스, 예를 들어 카메라 또는 비디오 레코더(미도시)로부터 상기 이미지 전송 시스템의 입력(27)에서 수신된다. 그것으로서 알려진 방법으로, 상기 디지털 이미지 소스로부터 수신된 블록들은 이미지 픽셀 값들을 포함한다. 상기 프레임은 임시로 프레임 메모리(미도시)에 저장될 수 있거나, 대안적으로 상기 부호기는 블록씩 직접 상기 입력 데이터를 수신한다.
상기 블록들은 부호화될 현재 블록의 픽셀 값들이 동일한 프레임 또는 세그먼트내의 이전에 인트라-부호화된 블록들에 근거하여 예측될 수 있는지를 결정하는 예측 방법 선택 블록(35)으로 하나씩 보내진다. 이것을 행하기 위하여, 상기 예측 방법 선택 블록(35)은, 이전에 부호화되고 후속하여 복호화되며 재구성된 인트라 블록들의 레코드를 포함하는, 부호기(33)의 프레임 버퍼로부터 입력을 수신한다. 이러한 방법으로, 상기 예측 방법 선택 블록은 현재 블록의 예측이 이전에 복호화되고 재구성된 블록들에 근거하여 수행될 수 있는지를 결정할 수 있다. 더욱이, 적합한 복호화된 블록들이 이용가능한 경우, 상기 예측 방법 선택 블록(35)은 하나 이상의 이러한 방법이 선택될 수 있다면, 현재 블록의 픽셀 값들을 예측하기 위하여 가장 적합한 방법을 선택할 수 있다. 어떤 경우에 있어서, 예측에 사용하기 위한 적합한 블록들이 상기 프레임 버퍼(33)에서 이용가능하지 않기 때문에 현재 블록의 예측이 가능하지 않다는 것은 이해되어야 한다. 하나 이상의 예측 방법이 이용가능한 상황에서, 선택된 예측 방법에 대한 정보는 상기 복호기로의 추가 전송을 위하여 다중화기(13)로 공급된다. 또한 몇몇 예측 방법들에 있어서, 상기 예측을 수행하는데 필요한 몇몇 파라미터들이 상기 복호기로 전송된다는 것은 주목되어야 한다. 물론, 이것은 채용된 정확한 구현에 의존하고 조금도 본 발명에 의한 상기 블록 경계 필터의 적용을 제한하지 않는다.
현재 블록의 픽셀 값들은 인트라 예측 블록(34)에서 예측된다. 상기 인트라예측 블록(34)은 상기 예측 방법 선택 블록(35)으로부터 선택된 예측 방법에 관한 입력 및 프레임 버퍼(33)로부터 예측시 사용을 위해 이용가능한 블록들에 관한 정보를 수신한다. 이 정보에 근거하여, 상기 인트라 예측 블록(34)은 현재 블록을 위해 예측을 구성한다. 현재 블록을 위해 예측된 픽셀 값들은 상기 예측된 현재 블록의 픽셀 값들 및 입력(27)으로부터 수신된 현재 블록의 실제 픽셀 값들간의 차이를 취함으로써 예측 오차 블록을 생성하는 차분 가산기(28)로 보내진다. 다음, 상기 예측된 블록을 위한 상기 오차 정보는 예를 들어 이산 코사인 변환(DCT)을 사용하여 전송을 위해 효율적인 형태로 상기 예측 오차 부호화 블록에서 부호화된다. 상기 부호화된 예측 오차 블록은 상기 복호기로의 추가 전송을 위하여 다중화기(13)로 보내진다.
또한 상기 디지털 이미지 전송 시스템의 부호기는 복호 기능을 포함한다. 현재 블록의 상기 부호화된 예측 오차는 예측 오차 복호화 블록(30)에서 복호화되고 그다음 현재 블록을 위해 상기 예측된 픽셀 값들과 가산기(31)에서 가산된다. 이러한 방법으로, 현재 블록의 복호화된 버전이 획득된다. 그다음 상기 복호화된 현재 블록은 본 발명의 방법에 따라 구현된, 블록 경계 필터(32)로 보내진다. 이제 도 6의 흐름도를 참조하면, 상기 블록 경계 필터(32)는 현재 (금방 복호화된) 블록이 필터링될 수 있는 경계들을 가지고 있는지 검사한다(602, 604). 이러한 경계들이 존재하는지를 결정하기 위하여, 상기 블록 경계 필터는 상기 프레임 버퍼(33)의 내용들을 검사한다. 하나 이상의 이러한 경계가 존재하는 경우, 상기 블록 경계 필터는 상기 경계들을 필터링하는데 사용될 필터링 순서를 결정한다(603). 적어도 하나의 경계가 발견되는 경우, 상기 블록 경계 필터는 상기 필터링 프로세스에서 사용될 현재 경계의 인접 블록에 속한 픽셀 값들을 복구한다(605). 상기 블록 경계 필터는 바람직한 필터링 방법에 따라 필터링을 수행하고(606) 현재 블록내의 적어도 변경된 픽셀 값들 및 상기 프레임 버퍼(33)에 저장된 이전에 복호화된 블록들에서 필터링된 픽셀들의 값들을 갱신한다. 그다음 상기 블록 경계 필터는 아직 필터링될 경계들이 존재하는지를 검사한다(608). 다른 경계들이 필터링되어야 하는 경우 상기 프로세스는 단계 605로 리턴한다. 상기 블록 필터는 모든 블록들이 부호화되고 국부적으로 복호화될 때까지 부호화되는 프레임의 각 블록에 대해 유사한 동작들을 수행한다. 각 블록이 필터링되기 때문에 그것은 예를 들어 블록들을 상기 프레임 버퍼(33)에 저장함으로써 후속 블록들의 예측 및/또는 필터링에서 사용을 위해 이용가능하게 한다.
본 발명에 의한 상기 블록 경계 필터링 방법의 동작이 이제 상기 디지털 이미지 전송 시스템의 수신기와 관련하여 설명될 것이다. 여기에서, 상기 필터의 사용은, 현재 블록의 픽셀 값들이 동일한 프레임내의 이전에 부호화된 이미지 블록들에 근거하여 예측된 몇몇 형태의 인트라 예측 방법을 사용하여 인트라 포맷으로 부호화되었던 것으로 가정되는, 프레임의 복호화와 관련되어 설명된다.
또한 여기에서 상기 수신기는 전송 채널로부터 하나씩 디지털 이미지 프레임을 형성하는 블록들을 수신하는 것으로 가정된다. 다른 실시예들에 있어서, 상기 수신기는 복호화될 완전한 프레임을 수신할 수 있거나, 대안적으로 몇몇 형태의 저장 매체 또는 장치에 존재하는 파일로부터 복호화될 디지털 이미지를 복구할 수 잇다는 것은 이해되어야 한다. 어떤 경우든, 본 발명에 의한 블록 경계 필터링 방법의 동작이 하기에 설명되는 바와 같이, 블록씩 수행된다.
수신기(60)에 있어서, 역다중화기는 상기 부호기(50)로부터 전송된 부호화된 예측 오차 블록들 및 예측 정보를 수신하고 역다중화한다. 당해 예측 방법에 따라, 상기 예측 정보는 예측 프로세스에서 사용되는 파라미터들을 포함할 수 있다. 단지 하나의 인트라 예측 방법이 사용되는 경우, 여전히 상기 예측 프로세스에서 사용되는 파라미터들을 전송할 필요가 있을지라도, 상기 블록들을 부호화하는데 사용되는 예측 방법에 관한 정보가 불필요하다는 것은 이해되어야 한다. 도 5에서, 점선들은 예측 방법 정보 및/또는 예측 파라미터들의 선택적인 전송 및 수신을 나타내는데 사용된다. 하나 이상의 인트라 예측 방법이 사용될 수 있다고 가정하면, 복호화되는 현재 블록을 위한 예측 방법의 선택에 관한 정보는 인트라 예측 블록(41)에 제공된다. 인트라 예측 블록(41)은 현재 블록의 픽셀 값들의 예측에서 사용될 이전에 복호화된 블록들이 존재하는지를 결정하기 위하여 프레임 버퍼(39)의 내용들을 검사한다. 이러한 이미지 블록들이 존재하는 경우, 인트라 예측 블록(41)은 수신된 예측 방법 정보 및 상기 부호기로부터 수신된 가능한 예측-관련 파라미터들로 표시된 예측 방법을 사용하여 현재 블록의 내용들을 예측한다. 현재 블록과 관련된 예측 오차 정보는 적합한 방법을 사용하여 상기 예측 오차 블록을 복호화하는 예측 오차 복호화 블록(36)에 의해 수신된다. 예를 들어, 상기 예측 오차 정보가 이산 코사인 변환을 사용하여 부호화된 경우, 상기 예측 오차 복호화 블록은 상기 오차 정보를 복구하기 위하여 역 DCT를 수행한다. 그다음 상기 예측 오차 정보는가산기(37)에서 현재 이미지 블록을 위한 예측값과 가산되고 상기 가산기의 출력은 블록 경계 필터(38)에 인가된다. 블록 경계 필터(38)는 상기 부호기의 블록 경계 필터(32)와 유사한 방식으로 새롭게 복호화된 이미지 블록에 경계 필터링을 적용한다. 따라서, 블록 경계 필터(38)는 현재 (새롭게 복호화된) 블록이 필터링될 수 있는 경계들을 가지고 있는지 검사한다(602, 604). 이러한 경계들이 존재하는지를 검사하기 위하여, 상기 블록 경계 필터(38)는 이전에 복호화되고 재구성된 이미지 블록들을 포함하는 프레임 버퍼(39)의 내용들을 검사한다. 하나 이상의 이러한 경계가 존재하는 경우, 상기 블록 경계 필터는 상기 경계들을 필터링하는데 사용될 필터링 순서를 결정한다(603). 유리하게, 이 순서는 상기 부호기의 경계 필터(32)에서 사용된 순서와 동일하다. 적어도 하나의 경계가 발견된 경우, 상기 블록 경계 필터는 상기 필터링 프로세스에서 사용하기 위한 현재 경계의 인접 블록에 속한 픽셀 값들을 복구한다(605). 상기 블록 경계 필터는 (유리하게는 상기 부호기에서 사용된 것과 동일한) 바람직한 필터링 방법에 따라 필터링을 수행하고(606) 현재 블록내의 적어도 변경된 픽셀 값들 및 상기 프레임 버퍼(39)에 저장된 이전에 복호화된 블록들에서 필터링된 픽셀들의 값들을 갱신한다. 그다음 상기 블록 경계 필터는 아직 필터링될 경계들이 존재하는지 검사한다(608). 다른 경계들이 필터링되어야 하는 경우, 상기 프로세스는 단계 605로 리턴한다.
상기 블록 필터는 모든 블록들이 복호화되고 그들의 경계들이 적합하게 필터링될 때까지, 실질적으로 각 블록이 복호화된 후 즉시 상기 프레임의 각 블록에 대해 유사한 동작들을 수행한다. 각 블록이 필터링되기 때문에 그것은 예를 들어 후속 블록들을 상기 프레임 버퍼(39)에 저장함으로써 후속 블록들의 예측 및/또는 필터링에서 사용할 수 있게 한다. 더욱이, 각 블록이 복호화되고 그것의 경계들이 본 발명에 의한 방법을 적용함으로써 필터링되기 때문에, 그것은 예를 들어 몇몇 형태의 디스플레이 수단에 표시되도록, 상기 복호기(40)의 출력으로 보내진다. 대안적으로, 상기 이미지 프레임은 전체 프레임이 복호화되고 상기 프레임 버퍼(39)에 축적된 후에만 표시될 수 있다.
상기 단락들에서, 본 발명에 의한 방법은 인트라 포맷으로 그리고 추가로 인트라 예측 방법들을 사용하여 부호화된 프레임내의 블록 경계들의 필터링과 관련하여 설명되었다. 본 발명에 의한 방법이 다른 인터-부호화된 프레임의 일부를 형성하는 인트라 부호화된 블록들간의 블록 경계들을 필터링하기 위해 정확하게 유사한 방식으로 적용될 수 있다는 것은 이해되어야 한다. 대안적으로, 상기 방법은 인터 부호화된 이미지 블록들에 적용될 수 있다. 또한 그것은 당해 블록의 유형에 상관없이 다른 유형들의 블록들간의 블록 경계들을 필터링하기 위해 적용될 수 있다.
인터 부호화된 이미지 블록들의 경우, 각 인터 부호화된 블록은 현재 프레임과 기준 프레임간의 그것의 움직임에 관한 정보에 근거하여 예측되고 상기 부호기의 동작들은 다음과 같다: 예측 오차 블록은 상기 블록에 대한 예측값과 상기 블록의 실제 내용들간의 차이에 근거하여 형성된다. 상기 예측 오차 블록은 예를 들어 DCT를 사용하여 그것으로서 알려진 방식으로 부호화되고 예를 들어 상기 블록의 움직임을 나타내는 움직임 계수들과 같은 정보와 함께 상기 복호기로 전송된다. 상기 부호기에서, 상기 부호화된 예측 오차는 상기 시퀀스에서 다음 프레임의 움직임 보상된 예측 부호화와 관련되어 사용될 예측 기준 프레임의 일부를 형성하는 복호화되고 재구성된 블록을 생성하기 위하여 추가로 복호화되고 현재 블록을 위한 예측 값과 가산된다. 인트라 부호화와 관련한 상기에 주어진 예의 경우와 같이, 블록 경계 필터는, 실질적으로 인터 부호화된 블록들이 복호화된 후 즉시 현재 프레임의 인터 부호화된 블록들을 수신하고 필터링하는 방식으로 인터 부호화된 블록들과 관련하여 사용을 위해 구현될 수 있다. 디지털 이미지 전송 시스템의 수신기에서 수신된 인터 부호화된 블록들의 복호화와 관련하여 등가의 장치가 사용될 수 있다.
본 발명에 의한 필터링 방법을 수행하는 블록은 특히 디지털 신호 처리기 또는 입력 데이터로서 수신되는 신호들에 소정의 처리 기능들을 적용하도록 프로그램될 수 있는, 디지털 신호들을 처리하는데 적합한 대응하는 범용 장치에서 유리하게 구현된다. 도 6에 의한 방책들은 개별 신호 처리기에서 수행될 수 있거나, 그들은 또한 신호 처리를 위한 다른 장치들을 포함하는 신호 처리기의 동작의 일부일 수 있다.
본 발명에 의한 방법을 수행하기 위하여 기계 실행가능 단계들을 포함하는 소프트웨어 프로그램을 저장하기 위한 저장 매체가 사용될 수 있다. 그다음, 본 발명의 유리한 실시예에서, 상기 소프트웨어 프로그램은 상기 저장 매체로부터 본 발명의 방법을 수행하기 위한 프로그램가능 수단, 예를 들어 프로세서를 포함하는 장치로 독출될 수 있다.
본 발명에 의한 방법 및 장치에 있어서, 필터링을 위해 선택되는 픽셀들의 수는 변경될 수 있고, 상기 블록 경계의 다른 측들에서 동일할 필요가 없다. 픽셀들의 수는 상기 프레임에 의해 포함된 이미지 정보의 일반적인 특징들에 따라 채택될 수 있다. 더욱이, 많은 필터링 방법들이 본 발명에 적용될 수 있다. 몇몇 인트라-예측 방법들에 있어서 상기 부호화된 차분 블록들에 부가하여 상기 수신기(60)로 인트라 예측 정보를 보낼 필요는 없다. 상기 필터링 순서의 정의는 단지 예로서 의도되었다.
본 발명은 특히 이동 원격회의 애플리케이션들, 디지털 텔레비전 수신기들 및 적어도 디지털 비디오 이미지들을 수신하고 복호화하는 다른 장치들에서 유리하게 사용된다.
도 7은 휴대용 비디오 원격통신 장치로서 사용하기 위해 의도되고 본 발명에 의한 비블록화 필터를 적용하는 이동 단말기(41)의 단순화된 개락도를 나타낸다. 상기 이동 단말기는 유리하게는 적어도 이미지들을 표시하기 위한 디스플레이 수단(42), 오디오 정보를 포획하고 재생하기 위한 오디오 수단(43), 예를 들어 사용자 명령들을 입력하기 위한 키보드(44), 이동 원격통신 네트워크와 통신하기 위한 무선부(45), 상기 장치의 동작을 제어하기 위한 처리 수단(46), 정보를 저장하기 위한 기억 수단(47) 및 바람직하기로는 이미지들을 찍기 위한 카메라(48)를 포함한다.
본 발명은 오로지 상기에 제공된 실시예들에 제한되는 것이 아니라, 첨부된 청구항들의 범위내에서 변경될 수 있다.

Claims (39)

  1. 블록들(B1, B2, B3, B4)별로 부호화되고 복호화되는 디지털 이미지내의 비주얼 아티팩트들(artefacts)을 감소시키기 위한 방법으로서, 필터링이, 현재의 블록및 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위하여 수행되는 방법에 있어서,
    상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 수행되고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 방법.
  2. 제1항에 있어서, 상기 필터링은 실질적으로 상기 현재 블록이 복호화된 후 즉시 수행되고 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 방법.
  3. 제1항에 있어서, 상기 필터링은 상기 디지털 이미지의 모든 블록들이 복호화되기 전에 수행되는 것을 특징으로 하는 방법.
  4. 제1항에 있어서, 상기 블록들은 어떤 복호화 순서로 복호화되고, 상기 필터링은 상기 현재 블록보다 상기 복호화 순서에서 더 늦고 상기 현재 블록에 인접한 블록을 복호화하기 전에 수행되는 것을 특징으로 하는 방법.
  5. 제1항에 있어서, 상기 블록의 복호화 및 필터링은 순차적으로 수행되는 것을 특징으로 하는 방법.
  6. 제1항에 있어서, 상기 필터링은 상기 현재 블록내의 제1 수의 픽셀 값들 및 상기 이전에 복호화된 블록내의 제2 수의 픽셀 값들의 변경을 야기하도록 정해지는 것을 특징으로 하는 방법.
  7. 제1항 내지 제6항중의 어느 한 항에 있어서, 필터링을 위해 이용가능한 하나 이상의 경계가 존재하는지가 결정되고(603, 604), 필터링은 필터링을 위해 이용가능한 상기 하나 이상의 경계(R12, R13, R24, R34)에 대해 수행되는 것을 특징으로 하는 방법.
  8. 제7항에 있어서, 필터링은 상기 하나 이상의 경계(R12, R13, R24, R34)에 대해 어떤 순서로 수행되는 것을 특징으로 하는 방법.
  9. 제1항 내지 제8항중의 어느 한 항에 있어서, 상기 디지털 이미지의 부호화 및 복호화동안 상기 디지털 이미지내의 블록들(B1, B2, B3, B4)간의 경계들(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위하여 필터링이 수행되는 것을 특징으로 하는 방법.
  10. 제1항 내지 제9항중의 어느 한 항에 있어서, 픽셀 값은 필터링에 의해 정정되고, 상기 정정된 픽셀 값은 적어도 하나의 다른 경계(R12, R13, R24, R34)를 필터링하는데 사용되는 것을 특징으로 하는 방법.
  11. 제1항 내지 제10항중의 어느 한 항에 있어서, 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 후속 블록의 인트라 예측이 수행되고, 픽셀 값은 필터링에 의해 정정되며, 상기 정정된 픽셀 값은 적어도 하나의 후속 블록의 상기 인트라 예측에서 사용되는 것을 특징으로 하는 방법.
  12. 제1항 내지 제11항중의 어느 한 항에 있어서, 상기 이미지의 블록들은 매크로블록들로 그룹화되고, 상기 이미지는 매크로블록씩 스캐닝되는 것을 특징으로 하는 방법.
  13. 제1항 내지 제12항중의 어느 한 항에 있어서, 상기 이미지는 좌측 상단에서 우측 하단으로 수평으로 스캐닝되는 것을 특징으로 하는 방법.
  14. 제8항에 있어서, 상기 필터링 순서는 상기 현재 블록의 좌측의 경계(R34)가 상기 현재 블록의 상단의 경계(R24) 이전에 필터링되도록 선택되는 것을 특징으로 하는 방법.
  15. 제1항 내지 제14항중의 어느 한 항에 있어서, 상기 이미지는 블록들(B1, B2, B3, B4)의 적어도 하나의 세그먼트를 포함하고, 동일한 세그먼트에 속한 그러한 인접 블록들간의 경계들만이 필터링되는 것을 특징으로 하는 방법.
  16. 제15항에 있어서, 하나의 세그먼트내의 모든 블록들(B1, B2, B3, B4)은 동일한 유형인 것을 특징으로 하는 방법.
  17. 제1항 내지 제16항중의 어느 한 항에 있어서, 상기 이미지는 휘도 및 색 성분들을 포함하고, 상기 필터링은,
    - 상기 휘도 성분의 현재의 블록과 인접 블록,
    - 상기 색 성분의 현재 블록과 인접 블록 중 적어도 하나 사이의 경계로 인한 비주얼 아티팩트들을 감소시키기 위하여 수행되는 것을 특징으로 하는 방법.
  18. 제1항 내지 제16항중의 어느 한 항에 있어서, 상기 이미지는 적어도 제1 색 성분 및 제2 색 성분을 포함하고, 상기 필터링은,
    - 상기 제1 색 성분의 현재 블록과 인접 블록,
    - 상기 제2 색 성분의 현재 블록과 인접 블록 중 적어도 하나 사이의 경계로 인한 비주얼 아티팩트들을 감소시키기 위하여 수행되는 것을 특징으로 하는 방법.
  19. 블록들(B1, B2, B3, B4)별로 부호화되고 복호화되는 디지털 이미지내의 비주얼 아티팩트들(artefacts)을 감소시키기 위한 장치로서, 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위한 필터링을 수행하는 수단을 포함하는 장치에 있어서,
    상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 수행되도록 정해지고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 장치.
  20. 제19항에 있어서, 상기 필터링은 실질적으로 상기 현재 블록이 복호화된 후 즉시 수행되도록 정해지고 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 장치.
  21. 제19항에 있어서, 상기 필터링은 상기 디지털 이미지의 모든 블록들이 복호화되기 전에 수행되도록 정해지는 것을 특징으로 하는 장치.
  22. 제19항에 있어서, 상기 필터링은 상기 현재 블록보다 상기 복호화 순서에서 더 늦고 상기 현재 블록에 인접한 블록을 복호화하기 전에 수행되도록 정해지는 것을 특징으로 하는 장치.
  23. 제19항에 있어서, 블록의 상기 필터링 및 상기 복호화는 순차적으로 수행되도록 정해지는 것을 특징으로 하는 장치.
  24. 제19항 내지 제23항 중의 어느 한 항에 있어서, 필터링을 위해 이용가능한 하나 이상의 경계들이 존재하는지를 결정하기 위한 수단을 포함하는 것을 특징으로 하는 장치.
  25. 제19항 내지 제24항 중의 어느 한 항에 있어서, 하나 이상의 경계(R12, R13, R24, R34)에 대해 어떤 순서로 상기 필터링을 수행하기 위한 수단을 포함하는 것을 특징으로 하는 장치.
  26. 제19항 내지 제25항 중의 어느 한 항에 있어서, 상기 디지털 이미지의 부호화 및 복호화동안 상기 디지털 이미지내의 블록들(B1, B2, B3, B4)간의 경계들(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위하여 필터링이 수행되도록 정해지고, 복호화시 상기 경계들을 필터링하는 순서는 부호화시의 순서와 동일하도록 정해지는 것을 특징으로 하는 장치.
  27. 제19항 내지 제26항 중의 어느 한 항에 있어서, 픽셀 값을 정정하기 위한 필터, 필터링에 의해 정정된 픽셀 값을 저장하기 위한 수단 및 적어도 하나의 다른 경계(R12, R13, R24, R34)를 필터링하는데 있어서 상기 정정된 픽셀 값을 사용하는 수단을 포함하는 것을 특징으로 하는 장치.
  28. 제25항 내지 제27항 중의 어느 한 항에 있어서, 후속 블록의 인트라 예측을 수행하기 위한 수단, 픽셀 값을 정정하기 위한 수단, 필터링에 의해 정정된 픽셀 값을 저장하기 위한 수단 및 적어도 하나의 후속 블록의 인트라 예측에 있어서 상기 정정된 픽셀 값을 사용하는 수단을 포함하는 것을 특징으로 하는 장치.
  29. 제25항 내지 제28항 중의 어느 한 항에 있어서, 상기 이미지의 블록들은 매크로블록들로 그룹화되고, 상기 장치는 상기 이미지를 매크로블록씩 스캐닝하기 위한 수단을 포함하는 것을 특징으로 하는 장치.
  30. 제29항에 있어서, 상기 이미지를 스캐닝하기 위한 수단은 상기 이미지를 좌측 상단에서 우측 하단으로 수평으로 스캐닝하도록 정해지는 것을 특징으로 하는 장치.
  31. 제25항에 있어서, 상기 필터링 순서는 상기 현재 블록의 좌측의 경계(R34)가 상기 현재 블록의 상단의 경계(R24) 이전에 필터링되도록 정해지는 것을 특징으로 하는 장치.
  32. 제19항 내지 제31항중의 어느 한 항에 있어서, 상기 이미지는 블록들(B1, B2, B3, B4)의 적어도 하나의 세그먼트를 포함하고, 상기 장치는 상기 블록들이 어떤 세그먼트에 속하는지를 결정하기 위한 수단을 포함하며, 동일한 세그먼트에 속한 인접 블록들간의 경계들만이 필터링되는 것을 특징으로 하는 장치.
  33. 디지털 이미지를 블록들(B1, B2, B3, B4)별로 부호화하기 위한 수단 및 국부적으로 복호화하기 위한 수단을 포함하는 부호기(50)로서, 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위한 필터링을 수행하는 수단을 포함하는 부호기(50)에 있어서,
    상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 국부적으로 복호화된 후 수행되도록 정해지고 상기 현재 블록과 이전에 국부적으로 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 부호기(50).
  34. 디지털 이미지를 블록들(B1, B2, B3, B4)별로 복호화하기 위한 수단을 포함하고, 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위한 필터링을 수행하는 수단을 포함하는 복호기(60)에 있어서,
    상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 수행되도록 정해지고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 복호기(60).
  35. 디지털 이미지를 블록들(B1, B2, B3, B4)별로 부호화하기 위한 수단과 국부적으로 복호화하기 위한 수단 및 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위한 필터링을 수행하는 수단을 포함하는 부호기를 포함하는 단말기에 있어서,
    상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 국부적으로 복호화된 후 수행되도록 정해지고 상기 현재 블록과 이전에 국부적으로 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 단말기.
  36. 디지털 이미지를 블록들(B1, B2, B3, B4)별로 복호화하기 위한 수단, 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키기 위한 필터링을 수행하는 수단을 포함하는 단말기에 있어서,
    상기 필터링은 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 수행되도록 정해지고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 단말기.
  37. 제35항 또는 제36항에 있어서, 상기 단말기는 이동 단말기인 것을 특징으로 하는 단말기.
  38. 디지털 비디오 신호를 블록들(B1, B2, B3, B4)별로 부호화하고 국부적으로 복호화하기 위한 그리고 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12,R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 기계 실행가능 단계들을 포함하는 소프트웨어 프로그램을 저장하기 위한 저장 매체에 있어서,
    상기 소프트웨어 프로그램은 상기 현재 블록(B1, B2, B3, B4)이 국부적으로 복호화된 후 상기 필터링을 수행하기 위한 기계 실행가능 단계를 더 포함하고, 상기 현재 블록과 이전에 국부적으로 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 저장 매체.
  39. 디지털 비디오 신호를 블록들(B1, B2, B3, B4)별로 복호화하기 위한 그리고 현재의 블록과 인접 블록(B1, B2, B3, B4)간의 경계(R12, R13, R24, R34)로 인한 비주얼 아티팩트들을 감소시키는 필터링을 수행하기 위한 기계 실행가능 단계들을 포함하는 소프트웨어 프로그램을 저장하기 위한 저장 매체에 있어서,
    상기 소프트웨어 프로그램은 상기 현재 블록(B1, B2, B3, B4)이 복호화된 후 상기 필터링을 수행하기 위한 기계 실행가능 단계들을 포함하고 상기 현재 블록과 이전에 복호화된 블록간에 필터링을 위해 이용가능한 경계가 존재하는 것을 특징으로 하는 저장 매체.
KR1020027009308A 2000-01-21 2001-01-22 디지털 이미지들을 필터링하기 위한 방법 및 필터링 장치 KR100754461B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
FI20000122 2000-01-21
FI20000122A FI20000122A0 (fi) 2000-01-21 2000-01-21 Menetelmä digitaalisten kuvien suodattamiseksi ja suodatin
FI20000141A FI117534B (fi) 2000-01-21 2000-01-24 Menetelmä digitaalisten kuvien suodattamiseksi ja suodatin
FI20000141 2000-01-24
PCT/FI2001/000048 WO2001054414A1 (en) 2000-01-21 2001-01-22 A method for filtering digital images, and a filtering device

Publications (2)

Publication Number Publication Date
KR20030003222A true KR20030003222A (ko) 2003-01-09
KR100754461B1 KR100754461B1 (ko) 2007-09-03

Family

ID=26160929

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020027009308A KR100754461B1 (ko) 2000-01-21 2001-01-22 디지털 이미지들을 필터링하기 위한 방법 및 필터링 장치

Country Status (13)

Country Link
US (1) US7388996B2 (ko)
EP (1) EP1264486B1 (ko)
JP (2) JP2003520530A (ko)
KR (1) KR100754461B1 (ko)
CN (1) CN100568973C (ko)
AT (1) ATE420534T1 (ko)
AU (1) AU2001230274A1 (ko)
BR (1) BR0107757A (ko)
CA (1) CA2396941C (ko)
DE (1) DE60137315D1 (ko)
FI (1) FI117534B (ko)
HK (1) HK1054289A1 (ko)
WO (1) WO2001054414A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100782848B1 (ko) * 2005-11-01 2007-12-06 삼성전자주식회사 디지털 이미지 처리 방법 및 그 시스템
KR100827822B1 (ko) * 2006-07-14 2008-05-07 엠텍비젼 주식회사 블록화 현상을 제거하는 디코딩 보정 방법 및 디코딩 보정시스템
US8964836B2 (en) 2004-06-03 2015-02-24 Industry Academic Cooperation Foundation Kyunghee University Method and apparatus for spatial predictive encoding and/or decoding of video data

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE454016T1 (de) * 2001-09-12 2010-01-15 Panasonic Corp Bildkodierungs- und biddekodierungsverfahren
US6983079B2 (en) * 2001-09-20 2006-01-03 Seiko Epson Corporation Reducing blocking and ringing artifacts in low-bit-rate coding
EP2899977A1 (en) 2002-01-31 2015-07-29 Samsung Electronics Co., Ltd Filtering method and apparatus for reducing block artifacts or ringing noise
US7031552B2 (en) * 2002-04-05 2006-04-18 Seiko Epson Corporation Adaptive post-filtering for reducing noise in highly compressed image/video coding
US7543326B2 (en) * 2002-06-10 2009-06-02 Microsoft Corporation Dynamic rate control
US7289674B2 (en) 2002-06-11 2007-10-30 Nokia Corporation Spatial prediction based intra coding
US6950473B2 (en) * 2002-06-21 2005-09-27 Seiko Epson Corporation Hybrid technique for reducing blocking and ringing artifacts in low-bit-rate coding
US20030235250A1 (en) * 2002-06-24 2003-12-25 Ankur Varma Video deblocking
US7031392B2 (en) * 2002-09-20 2006-04-18 Seiko Epson Corporation Method and apparatus for video deblocking
US6922492B2 (en) * 2002-12-27 2005-07-26 Motorola, Inc. Video deblocking method and apparatus
MXPA05007447A (es) * 2003-01-10 2005-09-12 Thomson Licensing Sa Aparato de decodificador y metodo para suavizar artefactos creados durante el ocultamiento de error.
CN1843037B (zh) * 2003-08-26 2010-09-22 汤姆森特许公司 用于编码混合内部-相互编码块的方法和装置
WO2005029737A2 (en) * 2003-09-25 2005-03-31 Amimon Ltd. Wireless transmission of high quality video
FI116959B (fi) * 2004-03-17 2006-04-13 Nokia Corp Elektroninen laite ja menetelmä elektronisessa laitteessa kuvadatan prosessoimiseksi
US20060029135A1 (en) * 2004-06-22 2006-02-09 Minhua Zhou In-loop deblocking filter
KR100644618B1 (ko) * 2004-07-02 2006-11-10 삼성전자주식회사 블록 단위로 부호화된 영상의 블록경계에서의 불연속성제거필터 및 방법
US7664184B2 (en) * 2004-07-21 2010-02-16 Amimon Ltd. Interpolation image compression
US8085846B2 (en) * 2004-08-24 2011-12-27 Thomson Licensing Method and apparatus for decoding hybrid intra-inter coded blocks
DE102004049094B4 (de) * 2004-10-08 2006-09-28 Sci-Worx Gmbh Verfahren zur Reduktion von Blockartefakten an Blockgrenzen digitaler Bildblöcke, die aus einem Feld von Pels bestehen, wobei eine Mehrzahl von Bildblöcken ein Bild oder Teilbild bilden
KR20060060919A (ko) * 2004-12-01 2006-06-07 삼성전자주식회사 Ｈ.264/ｍｐｅｇ-4 에서의 블록킹 효과를 제거하기 위한디블록 필터 및 필터링 방법
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
JP4784188B2 (ja) * 2005-07-25 2011-10-05 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US8625914B2 (en) 2013-02-04 2014-01-07 Sony Corporation Image processing system, image processing method and program
KR100678958B1 (ko) * 2005-07-29 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
US7551232B2 (en) * 2005-11-14 2009-06-23 Lsi Corporation Noise adaptive 3D composite noise reduction
JP4789753B2 (ja) 2006-08-28 2011-10-12 富士通セミコンダクター株式会社 画像データバッファ装置、画像転送処理システム、及び画像データバッファ方法
KR101379255B1 (ko) * 2007-04-06 2014-03-28 삼성전자주식회사 미분 방정식을 이용한 인트라 예측 부호화, 복호화 방법 및장치
US7961224B2 (en) * 2008-01-25 2011-06-14 Peter N. Cheimets Photon counting imaging system
KR101595899B1 (ko) * 2008-04-15 2016-02-19 오렌지 선형 형태의 픽셀들의 파티션들로 슬라이스 된 이미지 또는 이미지들의 시퀀스의 코딩 및 디코딩
JP5334070B2 (ja) * 2009-02-13 2013-11-06 ブラックベリー リミテッド 画像処理における均衡ピクセル領域ひずみ分布を有する適合量子化
EP2396969A4 (en) * 2009-02-13 2012-12-12 Research In Motion Ltd MODIFIED ENTROPIC CODING FOR IMAGES AND VIDEOS
EP2396771A4 (en) * 2009-02-13 2012-12-12 Research In Motion Ltd IN-LOOP DEFLECTION FOR INTRACODED PICTURES OR FRAMES
JP5568884B2 (ja) * 2009-04-02 2014-08-13 セイコーエプソン株式会社 映像処理装置、映像処理方法
KR20110123651A (ko) 2010-05-07 2011-11-15 한국전자통신연구원 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법
CN107295342B (zh) * 2011-07-22 2020-04-28 Sk电信有限公司 视频编码装置
US20130083845A1 (en) 2011-09-30 2013-04-04 Research In Motion Limited Methods and devices for data compression using a non-uniform reconstruction space
EP2595382B1 (en) 2011-11-21 2019-01-09 BlackBerry Limited Methods and devices for encoding and decoding transform domain filters
US10110926B2 (en) 2015-10-15 2018-10-23 Cisco Technology, Inc. Efficient loop filter for video codec
BR112020025145A2 (pt) 2019-01-10 2021-07-20 Huawei Technologies Co., Ltd. filtro de desbloqueio para fronteiras de subpartição causadas por ferramenta de codificação de subpartição intra

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5337088A (en) 1991-04-18 1994-08-09 Matsushita Electric Industrial Co. Ltd. Method of correcting an image signal decoded in block units
US5493513A (en) * 1993-11-24 1996-02-20 Intel Corporation Process, apparatus and system for encoding video signals using motion estimation
JP3401894B2 (ja) 1994-02-17 2003-04-28 松下電器産業株式会社 映像信号処理装置
KR0174452B1 (ko) * 1995-02-28 1999-03-20 배순훈 디지털 영상 복호화장치
JP3540855B2 (ja) * 1995-03-08 2004-07-07 シャープ株式会社 ブロック歪み補正器
FR2737931B1 (fr) 1995-08-17 1998-10-02 Siemens Ag Procede destine au traitement de blocs d'images decodes d'un procede de codage d'images a base de blocs
DE19626985C1 (de) 1996-07-04 1998-01-02 Siemens Ag Verfahren und Anordnung zur Reduktion von Codierungsartefakten von blockbasierten Bildcodierungsverfahren und objektbasierten Bildcodierungsverfahren
US6496605B1 (en) * 1996-08-02 2002-12-17 United Module Corporation Block deformation removing filter, image processing apparatus using the same, method of filtering image signal, and storage medium for storing software therefor
JPH10224790A (ja) * 1997-02-07 1998-08-21 Matsushita Electric Ind Co Ltd 圧縮伸張された画像中のブロック状ノイズを除去するフィルタおよびフィルタ方法
FI106071B (fi) 1997-03-13 2000-11-15 Nokia Mobile Phones Ltd Mukautuva suodatin
KR100463004B1 (ko) 1997-03-20 2005-06-02 주식회사 팬택앤큐리텔 Mpeg-4vop부호화방법
JP4164877B2 (ja) * 1997-05-28 2008-10-15 ソニー株式会社 ブロック歪低減方法及び装置並びに符号化方法及び装置
US6275533B1 (en) * 1997-06-20 2001-08-14 Matsushita Electric Industrial Co., Ltd. Image processing method, image processing apparatus, and data recording medium
US6157676A (en) 1997-07-31 2000-12-05 Victor Company Of Japan Digital video signal inter-block interpolative predictive encoding/decoding apparatus and method providing high efficiency of encoding
EP0926899A3 (en) * 1997-12-25 1999-12-15 SANYO ELECTRIC Co., Ltd. An apparatus and process for decoding motion pictures
JP3905969B2 (ja) 1998-01-30 2007-04-18 株式会社東芝 動画像符号化装置および動画像符号化方法
AUPP444898A0 (en) * 1998-07-02 1998-07-23 Canon Kabushiki Kaisha A method and apparatus for boundary filtering a digital image
US6236764B1 (en) * 1998-11-30 2001-05-22 Equator Technologies, Inc. Image processing circuit and method for reducing a difference between pixel values across an image boundary
EP1072157A1 (en) 1999-02-16 2001-01-31 Koninklijke Philips Electronics N.V. Video decoding device and method using a filtering step for block effect reduction

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8964836B2 (en) 2004-06-03 2015-02-24 Industry Academic Cooperation Foundation Kyunghee University Method and apparatus for spatial predictive encoding and/or decoding of video data
KR100782848B1 (ko) * 2005-11-01 2007-12-06 삼성전자주식회사 디지털 이미지 처리 방법 및 그 시스템
KR100827822B1 (ko) * 2006-07-14 2008-05-07 엠텍비젼 주식회사 블록화 현상을 제거하는 디코딩 보정 방법 및 디코딩 보정시스템

Also Published As

Publication number Publication date
WO2001054414A1 (en) 2001-07-26
US7388996B2 (en) 2008-06-17
FI20000141A (fi) 2001-07-22
BR0107757A (pt) 2002-11-12
EP1264486A1 (en) 2002-12-11
JP4990701B2 (ja) 2012-08-01
KR100754461B1 (ko) 2007-09-03
HK1054289A1 (zh) 2003-11-21
FI20000141A0 (fi) 2000-01-24
ATE420534T1 (de) 2009-01-15
CA2396941C (en) 2005-10-18
AU2001230274A1 (en) 2001-07-31
EP1264486B1 (en) 2009-01-07
FI117534B (fi) 2006-11-15
CN100568973C (zh) 2009-12-09
DE60137315D1 (de) 2009-02-26
JP2007300676A (ja) 2007-11-15
CN1416650A (zh) 2003-05-07
JP2003520530A (ja) 2003-07-02
CA2396941A1 (en) 2001-07-26
US20010019634A1 (en) 2001-09-06

Similar Documents

Publication Publication Date Title
KR100754461B1 (ko) 디지털 이미지들을 필터링하기 위한 방법 및 필터링 장치
US20180048910A1 (en) Method and associated device for filtering digital video images
US7324595B2 (en) Method and/or apparatus for reducing the complexity of non-reference frame encoding using selective reconstruction
KR101596829B1 (ko) 비디오 신호의 디코딩 방법 및 장치
CA2478691C (en) Method for coding motion in a video sequence
KR100984612B1 (ko) 비디오 화상에 대한 글로벌 모션 보상
US7010044B2 (en) Intra 4×4 modes 3, 7 and 8 availability determination intra estimation and compensation
US20060002466A1 (en) Prediction encoder/decoder and prediction encoding/decoding method
JPH08251601A (ja) 動きベクトルを符号化又は復号化する方法及び装置
JP2004527981A (ja) 予測タイプの選択によるビデオデータブロックのイントラ符号化
CN110636302A (zh) 视频解码、编码方法和装置、存储介质及解码器、编码器
KR20050018948A (ko) 비디오 부호화에서 보간 필터 유형을 선택하기 위한 방법및 장치
KR19990063464A (ko) 동화상 복호화 장치 및 동화상 복호화 방법
KR101923460B1 (ko) 비디오 신호의 디코딩 방법 및 장치
Kolkeri Error concealment techniques in H. 264/AVC, for video transmission over wireless networks
ZA200205507B (en) A method for filtering digital images, and a filtering device.
JP2005260989A (ja) 画像処理装置及び画像処理方法
JPH09130791A (ja) 画像処理装置
CN114449279A (zh) 基于视频质量度量的视频编码
EP1387587A1 (en) Image encoder and decoder with error concealment of motion vector losses
CN110572680A (zh) 视频解码、编码方法和装置，存储介质与解码器、编码器
JP2001283227A (ja) 動画像解析処理方法及び装置

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120727

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130729

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140730

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20160629

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170629

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20180628

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20190725

Year of fee payment: 13