KR100863166B1 - 블록 기반 디지털 비디오의 역블럭화 및 에지 강화를 위한 방법, 장치, 전자 디바이스, 컴퓨터 판독가능 매체, 및 프로세서 - Google Patents

블록 기반 디지털 비디오의 역블럭화 및 에지 강화를 위한 방법, 장치, 전자 디바이스, 컴퓨터 판독가능 매체, 및 프로세서 Download PDF

Info

Publication number
KR100863166B1
KR100863166B1 KR1020067025608A KR20067025608A KR100863166B1 KR 100863166 B1 KR100863166 B1 KR 100863166B1 KR 1020067025608 A KR1020067025608 A KR 1020067025608A KR 20067025608 A KR20067025608 A KR 20067025608A KR 100863166 B1 KR100863166 B1 KR 100863166B1
Authority
KR
South Korea
Prior art keywords
threshold
edge
pixels
blocks
activity
Prior art date
Application number
KR1020067025608A
Other languages
English (en)
Other versions
KR20070011570A (ko
Inventor
비자얄라크시미 알 라빈드란
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20070011570A publication Critical patent/KR20070011570A/ko
Application granted granted Critical
Publication of KR100863166B1 publication Critical patent/KR100863166B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)

Abstract

블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법 및 장치는 2개의 블록이 공통의 경계를 공유하는지를 결정하는 단계; 공통의 경계의 에지 액티비티를 측정하는 단계; 제 1 임계값에 측정된 에지 액티비티를 비교하는 단계; 에지 액티비티가 제 1 임계값 미만이라면 저역 통과 필터로 2개의 블록의 하나 이상의 픽셀을 필터링하는 단계; 에지 액티비티가 제 1 임계값 이상이라면 2개의 이웃하는 블록의 하나 이상의 픽셀을 강화하는 단계를 포함한다.
에지 강화, 픽셀 강화, 데이터 압축, 블록 기반 압축

Description

블록 기반 디지털 비디오의 역블럭화 및 에지 강화를 위한 방법, 장치, 전자 디바이스, 컴퓨터 판독가능 매체, 및 프로세서{METHOD, APPARATUS, ELECTRONIC DEVICE, COMPUTER-READABLE MEDIUM AND PROCESSOR FOR DEBLOCKING AND EDGE ENHANCEMENT OF BLOCK BASED DIGITAL VIDEO}
35 U.S.C.§ 119 의 우선권 주장
본 특허 출원은, 발명의 명칭이 "저 비트율 비디오 압축에 대한 이미지 강화를 위한 방법 및 장치" 로 2004년 5월 6일자로 출원된 미국 가출원 제 60/569,369 호를 우선권 주장하는 것으로, 본 발명의 양수인에게 양도되어 있고 여기서 참조로서 명백하게 포함된다.
발명의 배경
분야
본 발명은 일반적으로 데이터 압축 및 특히 블록 기반 압축에 관한 것이다.
배경기술
변환 코딩은 프로세스를 위해 이미지를 서브-이미지 또는 블록으로 분할하는 통상적인 이미지 압축 기법이다. 블록들이 독립적으로 코딩되기 때문에 블록 기반 압축은 블록 경계 사이에 아티팩트 (artifact) 를 도입한다. 따라서, 변환은 블록 경계들 사이의 상호관계를 고려하지 않는다. 따라서, 그 기법은 통상적으로 고밀도로 (heavily) 압축된 저 비트율 이미지를 발생시키지만, 블록킹, 링잉 (ringing), 및 모션 스미어 (motion smear) 와 같은 심각한 압축 아티팩트를 포함한다.
스케일러블한 (scalable) 비디오 코딩은 저 비트율 애플리케이션, 특히 다양한 대역폭을 가진 이종의 네트워크 (예를 들어, 인터넷 및 무선 스트리밍) 로의 광범위한 수용을 취득하고 있다. 스케일러블한 비디오 코딩은 코딩된 비디오가 다중 층으로서 송신되는 것을 가능하게 하고, 통상적으로, 기저 층은 가장 중요한 정보를 포함하고 가장 적은 대역 폭 (비디오에 대한 가장 낮은 비트율) 을 점유하며 강화 층은 기저 층 위로 정제를 제공한다. 가장 스케일러블한 비디오 압축 기법은 인간의 시각 시스템이 더 평평하고, 저주파인 영역보다 이미지의 고주파 영역에서 (압축으로 인한) 잡음을 더 용인한다는 사실을 이용한다. 따라서, 기저 층은 우세하게 저주파 정보를 포함하고 고주파 정보는 강화 층에서 전달된다. 네트워크 대역폭이 불충분할 때, 단지 코딩된 비디오의 기저 층 (강화 층 없이) 만을 수신할 더 높은 확률이 존재한다. 그러한 상황에서, 재구성된 비디오는 블러링 (blurred) 되고 역블록화 필터는 이러한 효과를 더욱 강화시킬 수도 있다.
그 결과, 역블록화를 위한 몇몇 포스트-프로세싱 알고리즘이 압축 아티팩트를 감소 및/또는 제거하기 위해 제안되었다. 그러나, 다수가 복잡한 계산을 수반하고 출력 이미지 상에 전체적인 블러링 효과를 발생시킬 수도 있다. 다른 역블록화 필터는 에지 정보를 효율적으로 보존하지 않고 하드웨어에 구현하기가 통상적으로 복잡하다.
요약
디코딩된 기저 층의 고주파 에지를 강조함으로써 블러링 감소를 통하여 이미지 품질을 강화시키기 위한 방법 및 장치를 설명한다. 고역 통과 필터는 이웃 하는 4 X 4 픽셀 블록의 에지를 표시, 즉 하이라이트할 수 있고 이미지 상에 하이라이트를 오버레이 (overlay) 할 수 있다. 무선 기술에서 사용되는 이동 스테이션 모뎀 (Mobile Station Modem; MSM) 장치 플랫폼과 같은 하드웨어 구현의 경우에, 개시된 방법 및 장치는 아주 적은 또는 추가적인 비용 없이 고주파 강화 특성을 도입하기 위해 비디오 코어에 이미 존재하는 전기 회로도 및 역블록화 필터 조건을 사용할 수 있다.
도면의 간단한 설명
도 1은 스트리밍 비디오의 송달을 위한 통신 시스템의 일 예의 설명이다;
도 2는 수직 및 수평 4 x 4 블록 경계에 인접한 픽셀의 설명이다;
도 3은 이미지 압축기의 일 예의 설명이다;
도 4는 이미지 압축기에 대칭하는 이미지 해독기의 일 예의 설명이다; 및
도 5는 프로세스 이미지로의 실시형태의 일 예의 플로우차트이다.
상세한 설명
이하의 설명에서, 특정한 세부사항이 실시형태의 완전한 이해를 제공하기 위해 주어진다. 그러나, 그 실시형태가 이러한 특정한 세부사항 없이도 실행될 수도 있다는 것이 당업자에 의해 이해될 것이다. 예를 들어, 전기 컴포넌트는 불필요한 세부사항으로 실시형태를 명료하게 하기 위해 블록 다이어그램으로 도시될 수도 있다. 다른 예에서, 이러한 컴포넌트, 다른 구조 및 기법은 실시형태를 더 설명하기 위해 상세하게 도시될 수도 있다.
또한, 실시형태가 플로우차트, 플로우 다이어그램, 구조 다이어그램, 또는 블록 다이어그램으로서 설명되는 프로세스로서 설명될 수도 있다는 것이 또한 주의되어야 한다. 플로우차트가 동작을 연속된 프로세스로서 설명할 수도 있지만, 다수의 동작은 평행하게 또는 동시에 수행될 수 있고 프로세스는 반복될 수 있다. 추가적으로, 동작의 순서는 재배열될 수도 있다. 프로세스는 그것의 동작이 완료되었을 때 종료된다. 프로세스는 방법, 함수, 절차, 서브루틴, 서브프로그램 등에 대응할 수도 있다. 프로세스가 함수에 대응할 때, 그것의 종료는 콜링 함수 또는 주요 함수로의 함수의 돌아옴에 대응한다.
디코딩된 이미지의 고주파 에지를 강조함으로써 블록 기반 압축을 사용하여 압축된 이미지의 품질을 강화시키는 방법 및 장치를 설명한다. 고주파 강조 필터는 수신된 각각의 이미지 블록의 에지를 증폭, 즉 강화시키기 때문에 이미지 블록의 에지는 강화된다. 저주파가 통과하도록 허용한 결과, 입력 이미지에서 일정한 강도의 영역은 기본적으로 고주파 강조 필터에 의해 영향을 받지 않는다. 고주파를 포함하는 강한 강도 그래디언트의 영역은 필터 출력에서 강조되거나 증폭된다. 고역 통과 필터는 또한 이미지 상에 추가된 또는 오버레이된 고역 통과 필터의 출력과 함께 이용되고, 이에 따라, 이미지의 에지를 강화시킨다. 고역 통과 필터의 출력이 저주파 영역에 대해 거의 0이기 때문에, 일정한 강도의 영역은 오버레이된 출력에 의해 뚜렷하게 영향을 받지 않는다. 에지 강화 특성은 기저 층이 수신될 때, 시간적으로 스케일러블한 비디오 전달 시스템에 유용하지만, 강화 층 데이터의 일부는 수신되지 않거나, 오류와 함께 수신된다.
도 1은 스트리밍 픽처 (picture) 의 인코딩 및 디코딩을 위한 일반적인 통신 시스템의 블록 다이어그램이다. 시스템 (100) 은 인코더 디바이스 (105) 및 디코더 디바이스 (110) 를 포함한다. 인코더 디바이스 (105) 는 또한 변환 컴포넌트 (115), 양자화 컴포넌트 (120), 역블록화 (125), 시간적 예측 컴포넌트 (130), 프로세서 컴포넌트 (135), 및 통신 컴포넌트 (140) 를 포함한다. 프로세서 (135) 는 다른 컴포넌트의 프로세스를 수행하기 위한 계산하는 플랫폼을 제공한다. 변환 컴포넌트 (115) 는 공간적 도메인으로부터 DCT (불연속 코사인 변환 (discrete cosine transform)) 의 경우에 주파수 도메인과 같은 다른 도메인으로 비디오 데이터를 변환한다. 변환되고 있는 데이터는 실제 비디오 데이터가 변환되는 내부-코딩된 데이터일 수 있거나, 모션 벡터 및 잔여 오류가 변환되는 상호-코딩된 데이터일 수 있다. 다른 디지털 변환은 H.264에서 사용된 것과 같은 정수 변환 (integer transform), 하다마드 (Hadamard) 변환, 및 DWT (불연속 웨이브렛 변환 (discrete wavelet transform)) 을 포함한다.
양자화 컴포넌트 (120) 는 각각의 변환된 계수를 나타내기 위한 비트의 수를 할당한다. 변환된 계수의 양자화는 모든 매크로블록마다 변경될 수 있고, 여기서 매크로블록은 16 x 16 픽셀 (하나의 매크로블록은 하나의 16 x 16 루마 (Luma) 블록과 2 개의 8 x 8 크로마 (Chroma) 블록으로 구성된다) 이다. 양자화 파라미터, QP 는 수행되는 양자화 레벨을 결정한다. 더욱 거친 디지털 표현을 대비하여 더 많은 디지털 압축이 계수의 증가하는 QP 에 의해 실현되지만, 블러링 및 블록킹과 같은 아티팩트가 또한 도입될 수 있다. 역블록화 컴포넌트 (125) 는 저역 통과 필터링 및/또는 에지 강화를 수행한다. 시간적 예측 컴포넌트 (130) 는 참조 프레임 (또는 프레임들) 에서 가장 잘 매치되는 매크로블록의 위치를 찾아내고 가장 잘 매치되는 매크로블록을 식별하는 모션 벡터를 계산한다.
변환 컴포넌트 (115) 및 양자화 컴포넌트 (120) 는 또한 역 변환 및 역-양자화를 개별적으로 수행한다. 시간적 예측 컴포넌트 (130) 가 인코딩된 데이터를 수신하는 디코더 디바이스와 동일한 재구성된 비디오 데이터와 함께 그것의 예측을 수행할 수 있도록, 압축된 비디오 데이터의 재구성을 고려하기 위해 이러한 역 동작이 인코더에서 수행된다. 동일한 이유로, 역블록화 컴포넌트 (125) 는 저역 통과 필터링 및/또는 인코더 디바이스 (105) 에서 에지 강화를 수행할 수 있다. 역블록화 동작은 재구성 프로세스에서 역양자화 및 역 변환 후에 수행된다.
통신 컴포넌트 (140) 는 외부 소스 (145) 로부터 인코딩될 데이터를 수신하는데 사용되는 논리를 포함한다. 외부 소스 (145) 는, 예를 들어, 외부 메모리, 인터넷, 라이브 비디오 및/또는 오디오 공급이 될 수 있고, 데이터 수신은 유선 및/또는 무선 통신을 포함할 수 있다. 통신 컴포넌트 (140) 는 또한 네트워크 (150) 를 통하여 인코딩된 데이터를 송신하기 위한 논리 (Tx) 를 포함한다. 네트워크 (150) 는 전화기, 케이블, 및 광섬유와 같은 유선 시스템, 또는 무선 시스템의 일부일 수 있다. 무선의 경우에, 통신 시스템, 네트워크 (140) 는, 예를 들어, 코드 분할 다중 액세스 (CDMA 또는 CDMA2000) 통신 시스템의 일부를 포함할 수 있거나, 또는 택일적으로, 시스템은 주파수 분할 다중 액세스 (FDMA) 시스템, GSM/GPRS (일반 패킷 라디오 서비스 (General Packet Radio Service)/EDGE (강화된 데이터 GSM 환경) 또는 서비스 산업을 위한 TETRA (Terrestrial Trunked Radio) 이동 전화 기술과 같은 시간 분할 다중 액세스 (TDMA) 시스템, 광대역 코드 분할 다중 액세스 (WCDMA), 고 데이터 율 (1xEV-DO or 1xEV-DO Gold Multicast) 시스템, 또는 일반적으로 기법들의 조합을 사용하는 어떤 무선 통신 시스템일 수 있다.
디코더 디바이스 (110) 는 역 변환 컴포넌트 (155), 역-양자화 컴포넌트 (160), 역블록화 컴포넌트 (165), 시간적 예측 디코딩 컴포넌트 (170), 통신 컴포넌트 (175) 및 프로세서 컴포넌트 (180) 를 포함하는 인코더 디바이스 (105) 와 유사한 컴포넌트를 포함한다. 디코더 디바이스 (110) 는 네트워크 (105) 를 통하여 또는 외부 저장부 (185) 로부터 송신된 인코딩된 데이터를 수신한다. 통신 컴포넌트 (175) 는 외부 저장부 (185) 로부터 인코딩된 데이터를 수신하기 위한 논리뿐만이 아니라, 네트워크 (150) 와 결합하여 인코딩된 데이터를 수신하기 위해 사용되는 논리 (Rx) 를 포함한다. 외부 저장부 (185) 는, 예를 들어, 외부 RAM 또는 ROM, 또는 원격 서버일 수 있다. 내부-코딩된 데이터는, 디스플레이 컴포넌트 (190) 상에 디스플레이될 수 있는 디코딩된 픽처를 발생시키는 역블록화 컴포넌트 (165) 가 뒤따르는 역 변환 컴포넌트 (155) 가 뒤따르는 역양자화 컴포넌트 (160) 에 의해 프로세스된다. 역블록화 컴포넌트 (165) 는 저역 통과 필터링 및/또는 에지 강화를 수행한다.
상호-코딩된 데이터는 오직 그것이 예측되었던 참조 프레임이 디코딩된 후에 디코딩될 수 있다. 잔여 오류 계수는 역양자화 컴포넌트 (160) 에 이어 역변환 컴포넌트 (155) 에 이어 역블록킹 컴포넌트 (165) 에 의하여 프로세스 되어 디코딩 된 잔여 오류를 발생시킨다. 그리고, 잔여 오류는 시간적 예측 디코딩 컴포넌트 (170) 에 의해 로케이팅된 참조 프레임으로부터 가장 잘 매치되는 매크로블록과 조합된다. 그리고, 역블록화 컴포넌트 (165) 는 상호-코딩된 프레임을 프로세스하여, 디코딩된 상호-코딩된 프레임을 발생시킨다. 디코딩된 프레임은 디스플레이 컴포넌트 (190) 로 디스플레이될 수 있고, 외부 저장부 (185) 또는 프로세서 컴포넌트 (180) 의 내부 메모리에 저장될 수 있다. 디스플레이 컴포넌트 (190) 는 디스플레이 스크린을 포함하는 비디오 디스플레이 하드웨어 및 논리와 같은 부분을 포함하는 디코딩 디바이스의 통합된 부분이 될 수 있거나, 외부 주변 디바이스가 될 수 있다. 통신 컴포넌트 (175) 는 또한 디코딩된 프레임을 외부 저장부 컴포넌트 (185) 또는 디스플레이 컴포넌트 (190) 로 통신하는데 사용되는 논리를 포함한다. 역블록화 컴포넌트 (125 및 165) 에 의해 수행된 저역 통과 필터링 및 에지 강화는 이하에서 더 상세히 논의된다.
H.264 로 알려진 비디오 인코딩 표준은 이동 픽처 전문 그룹 (Moving Picture Experts Group; MPEG) 및 국제 원격통신 연합 (International Telecommunication Union; ITU) 에 의해 공동적으로 발전되었고 MPEG-4 파트 10 으로서 또는 전진된 비디오 코딩 (Advanced Video Coding; AVC) 으로서 MPEG-4 세목에 추가되었다.
H.264 에서 특정된 역블록화 필터는 블록 경계를 따라 액티비티를 결정하는 결정 트리 (decision tree) 를 요구한다. H.264 에서 원래 설계된 바와 같이, 저 액티비티 블록에 따른 블록 에지는 강하게 필터링되는 반면에, 세트 임계값을 넘은 이미지 액티비티를 갖는 블록 에지는 필터링되지 않거나 또는 미약하게 필터링된다. 적용되는 필터는, 예를 들어 3-탭 또는 5-탭 저역 통과 유한 임펄스 응답 (Finite Impulse Response; FIR) 필터와 같은 것이 될 수 있다.
일 예에서, 에지 강화 방법은 역블록화 필터를 사용하는 고주파 강조를 통해 달성된다. 블록 기반 비디오 압축을 위한 역블록화 필터 설계는 블록 에지를 따라 변하는 강도를 측정하는 단계에 이어, 적용되는 필터의 강도를 결정하는 단계 이후, 블록 에지들을 가로지르는 실제 저역 통과 필터링 동작인, 통상의 원칙을 주로 따른다. 역블록화 필터의 목적은 블록 에지 (가로지른 저역 통과 필터링) 의 평활화 (smoothing) 를 통하여 블록킹 아티팩트를 감소시키는 것이다. 이미지에서 에지 형상 (edge feature) 의 블러링을 회피하기 위해, 에지 액티비티 측정은 수행되고 저역 통과 필터링은 정상적으로 에지-없는 영역 (영역에서 에지 액티비티 측정치가 더 낮을수록, 필터는 더 강해진다) 에 적용된다. 예를 들어, 필터의 계수를 변경함에 의하는 것과 같은 역블록화 필터에의 수정을 통해, 역블록화 필터는 보충하는 방식으로 작용할 수 있고 고주파 강조 필터 (이상적인 의미에서, 고주파 강조 필터는 단순히 1+고역 통과 필터이다) 를 사용하여 검출된 에지를 강화시킨다.
역블록화 필터를 사용하는 에지 강화는 또한 기저 층 및 강화 층을 포함하는 시간적으로 스케일러블한 코딩된 비트스트림에서 애플리케이션을 가진다. 디코더가 기저 층을 수신하지만 모든 강화 층(들)을 수신하지는 않는 조건에서, 재구성된 이미지 시퀀스가 블러링될 것이고 수신된 이미지의 에지 또는 액티비티 강화 (고역 통과 필터링 또는 고주파 강조를 사용하여) 는 지각할 수 있는 이미지 품질을 개선할 수 있다. 필터 결정이 이미 존재하는 설계의 부분이기 때문에, 역블록기에서 에지 강화를 구현하는 것이 더 효율적일 수 있다. 또한, 다수의 다른 품질 강화 함수뿐만 아니라, 디지털 신호 프로세서 (DSP) 플랫폼의 이러한 픽셀 도메인 포스트-프로세싱 함수의 구현은 비트스트림에서 확장성 지지를 위해 이용될 수 있는 다수의 중요한 MIPS 를 소비한다.
인-루프 (in-loop) 역블록화 필터 (역블록화된 재구성된 프레임 상의 인코더의 디코더 인에이블링 (enabling) 예측 후에 포함된) 는 모든 4 X 4 블록 경계 상에서 동작할 수 있고 재구성된 프레임의 모든 픽셀에 영향을 줄 수 있다. (계산에 있어서) 복잡하다고 하더라도, 이 역블록화 특성 (feature) 은 H.264 표준 및 광범하게 퍼진 채택에의 순종이 요청되고 표준의 확산은 목표 애플리케이션에 따라 그것의 소프트웨어, 펌웨어 (firmware) 및 하드웨어 플랫폼 상의 구현을 필요로 한다. 그 결과, 재구성된 비디오의 모든 픽셀에의 액세스가 제공된다. 이것은 포스트-프로세싱 함수를 이미지 강화, 에지 강화, 오류 은닉 (오류가 발생하기 쉬운 네트워크를 통한 비디오 송신 애플리케이션에서), 프레임 비율 상승 전환 등과 같은 재구성된 비디오에 적용할 수 있는 능력을 인에이블링 한다. 기선 (baseline) H.264 표준은 확장성 모드 (scalability mode) 를 제공하지 않는 반면에, H.264 의 연장은 에지 강화를 위한 고주파 강조 필터링이 적용될 수 있는 스케일러블한 비디오 코딩 (Scalable Video Coding; SVC) 을 가능하게 한다.
도 2는 수직 및 수평 4 x 4 블록 경계에 인접한 픽셀의 설명이다. 수직 경계 (200) 는 2개의 근접한 4 x 4 블록 사이의 어떤 경계를 나타낸다. q0, q1, q2 및 q3 로 각각 라벨이 붙은 픽셀 212, 214, 216 및 218 이 수직 경계 (200) 의 우측에 존재하는 반면에, p0, p1, p2 및 p3 로 각각 라벨이 붙은 픽셀 202, 204, 206 및 208 은 수직 경계 (200) 의 좌측에 존재한다. 수평 경계 (220) 는 하나 위에 바로 다른 것이 있는, 2개의 4 x 4 블록 사이의 어떤 경계를 나타낸다. q0, q1, q2 및 q3 로 각각 라벨이 붙은 픽셀 232, 234, 236 및 238 이 수평 경계 (200) 의 상방에 존재하는 반면에, p0, p1, p2 및 p3 로 각각 라벨이 붙은 픽셀 222, 224, 226 및 228 은 수평 경계 (200) 의 하방에 존재한다. 이하의 예에서, 필터링 동작은 경계의 측면, 상방 또는 하방 중 하나에 3 개의 픽셀까지 영향을 준다. 변환된 계수에 대해 사용되는 양자화기, (내부 또는 상호 코딩된) 블록의 코딩 모드, 및 경계를 가로지르는 이미지 샘플의 그래디언트에 따라, 몇 개의 출력이 필터된 픽셀이 없는 것에서부터 필터링 픽셀 p0, p1, p2, q0, q1 및 q2 까지의 범위로 가능하다.
일 예에서, 고주파 강조 필터 에지 강화를 수행하기 충분한 에지 액티비티, 즉 임계값 초과의 에지 액티비티가 존재한다는 결정이 이루어진다. 에지 액티비티가 임계값 미만이라면, 저역 통과 필터링이 수행될 수 있다. 택일적으로, 액티비티에 관계없이 고주파 강조 필터링은 모든 에지에서 수행될 수 있고 저역 통과 필터로의 결정이 이루어질 수 있다. 택일적으로, 에지 액티비티가 제 2 임계값을 초과하면 고주파 강조 필터링이 수행되는 곳에서, 에지 액티비티가 제 1 임계값 미만이면 저역 통과 필터링이 수행되는 곳에서 제 2 임계값이 사용될 수 있 다.
H.264 역블록화는 상대적으로 적은 액티비티의 영역에서 사용된 강한 필터링 방법을 포함하고, 따라서 매우 적은 에지의 가능성을 가지고, 더 높은 액티비티를 가지는 영역에서 사용되는 약한 필터링은, 따라서, 에지의 더 높은 가능성을 가진다. 이하의 논의는 오직 H.264 약한 역블록화 필터 방법에 관련된다. 그 이하에서 원래 H.264 약한 역블록화 필터에 의해 저역 통과 필터링이 수행되는 최대 임계값을 결정하기 위해, 이하의 변수가 필터링의 강도 및 어떤 액티비티 조건에서 각각의 고려되는 4 x 4 블록 에지가 필터링되는지를 결정하기 위해 첫째로 계산된다:
임계값 tc 는 다음과 같이 결정된다.
루마에 대해:
tc = tc0 + ((ap < β)? 1:0) + ((aq< β)? 1:0) [1]
크로마에 대해:
tc = tc0 + 1 [2]
여기서 ap = Abs(p2-p0) 및 aq = Abs(q2-q0) [3]
H.264 에서, 변수 tc0 는 bS (경계 강도 (boundary Strength)) 및 인덱스 A (인덱스 A 는 양자화 파라미터 QP 로부터의 오프셋이고, QP 는 0 부터 51 까지에서 변한다) 에 기초한 액티비티 임계값이다. 상기 방정식 [3] 에서 주어진 액티비 티 측정치 ap 및 aq 는 그들이 β 미만일 때 각각 1 씩 tc0 에 증가된다 (상기 방정식 [1] 참조). β가 더 클수록, 에지가 존재할 가능성은 높아지고 저역 통과 필터링이 수행될 가능성은 낮아진다. 경계 강도는 각각의 4 x 4 블록 에지에 대해 결정되고 0 에서 4 의 범위를 갖는다. 경계 강도 결정의 세부사항은 당업자에게 공지되어 있고 개시된 방법을 이해할 필요는 없다. 경계 강도가 유도된 후에는, 인덱스 A 값이 이웃하는 블록의 평균 QP 에 기초해 결정된다. QP 가 매크로블록 기저 상에서 변경되고 루마 및 크로마에 대해 상이하기 때문에, 루마 및 크로마 평균 QP 의 3 개의 값(따라서 6 개의 인덱스 A 의 값) 이 1) 가장 좌측 매크로블록 에지를 따라, 2) 최상 매크로블록 에지를 따라 및 3) 매크로 블록 내부의 모든 4 x 4 블록 에지에 대해 계산된다. 인덱스 A 값이 계산된 후에는, β에 대한 값이 룩-업 (look-up) 테이블에서 결정되고 β에 대한 값은 0 부터 18 의 범위이다. 그리고, 임계값 tc 는 상기 방정식 [1] 및 [2] 에서 계산되고 저역 통과 필터링 파라미터 델타 (Delta) 가 계산된다:
델타:
△ = Clip3(-tc, tc, ((((q0-p0)<<2) + (p1-q1) + 4)>>3)) [4]
루마 및 크로마 모두에 대한 pi,qi, i=0,1,2 의 저역 통과 필터링은 이하와 같이 발생한다:
Figure 112006090127100-pct00001
상기 방정식 [5] 및 [6] 의 저역 통과 필터링은 오직 H.264 역블록화 필터에서 제 1 저역 통과 필터링이다. 이 저역 통과 필터링에 추가하여, 제 2 유형의 저역 통과 필터링이 또한 수행된다. 이 예에서, 개시된 방법이 실행되는 곳은 이 제 2 유형의 저역 통과 필터링에서이다. 이하의 방정식 [9], [10], [11] 및 [12] 에서 루마에 대한 필터링은 에지 액티비티 측정 ap 및 aq 에 따르고 오직 픽셀 p1 및 q1 (도 2의 픽셀 204, 214, 224 및 234 를 보라) 만을 필터링 하고 에지 액티비티 측정치가 임계값 β 미만일 때는 저역 통과 필터링을, 에지 액티비티 측정치가 임계값 초과일 때는 고주파 강조 필터링을 포함한다:
만약 (ap<β) 이면, 이하와 같은 저역 통과 필터:
p`1 = p1 + Clip3(-tc0, tc0, (p2 + ((p0+q0+1)>>1) - (p1<<1))>>1) [9]
그렇지 않으면, 이하와 같은 고역 통과 필터:
p`1 = p1 + Clip3(-tc0, tc0, ((p2>>1) - ((p0+q0+1)>>1) + (p1>>1))>>1) [10]
만약 (aq<β) 이면, 이하와 같은 저역 통과 필터:
q`1 = q1 + Clip3(-tc0, tc0, (q2 + ((p0 + q0 +1)>>1) - (q1<<1))>>1) [11]
그렇지 않으면, 이하와 같은 고역 통과 필터:
q`1 = q1 + Clip3(-tc0, tc0, ((q2>>1) - ((p0+q0+1)>>1) + (q1>>1))>>1) [12]
p1 및 q1 픽셀의 필터링은 에일리어싱 (aliasing) 과 같은 아티팩트를 야기하지 않고 만족할만한 에지 강화를 제공한다는 것이 발견되었다. 필터링 픽셀 p0 및 q0 는 에일리어싱 및/또는 블록킹 아티팩트를 발생시킨다는 것이 발견되었다.
요약하자면, 블록 에지에 따른 액티비티가 약할 때 (β 미만), 에지는 다음과 같이 저역 통과 필터된다:
Figure 112006090127100-pct00002
액티비티가 β 초과일 때, 역블록화 필터링은 다음과 같은 고주파 강조로 변경된다:
Figure 112006090127100-pct00003
실시형태 예에서, 고역 통과 필터링 동작은, 예를 들어, 7 (여기서 7 은 0 부터 4 까지의 bS 의 H.264 표준화된 값 중 어느 것에도 대응하지 않는 임의의 값 이다) 과 같은 결정된 경계 강도 (bS) 값을 사용하여 고역 통과 필터링 동작이 강화 층 없이 오직 기저 층만이 수신되었을 때 디코더에 의해 활성화 되도록 인에이블링 될 수 있다. bS 의 값을 나타내기 위하여 3-비트가 요청되기 때문에, 5 부터 7 까지의 어떤 값이 주어진 4 x 4 블록 에지가 강화되도록 요청되거나 에지 강화가 턴 온 되어야 한다는 것을 나타내도록 사용될 수 있다. 상기에 논의된 바와 같이, 제 2 임계값 (예를 들어, β2) 는 에지 액티비티가 제 2 임계값 β2 초과라면 고주파 강조 필터링이 수행되는 곳에서, 에지 액티비티가 제 1 임계값 β 미만이라면 저역 통과 필터링이 수행되는 곳에서 사용될 수 있다.
도 3, 4, 및 5 는 에지 강화를 포함하는 역블록화 프로세스의 예를 설명하는 플로우차트를 도시한다. 도 3, 4 및 5 에서 설명되는 프로세스는 도 1의 인코더 디바이스 (105) 및 디코더 디바이스 (110) 와 같은 디바이스에 의해 수행될 수 있다. 도 3의 프로세스 (300) 는 상기에서 논의된 예와 유사하고 방정식 [9], [10], [11] 및 [12] 에 포함된 하나의 임계값을 이용한다. 역블록화 프로세스 (300) 는 매크로블록이 디코딩되는 동안 또는 전체 프레임이 디코딩될 때까지 연기되는 동안 래스터 (raster) 순서로 수행될 수 있다. 도 1의 프로세서 컴포넌트 (135 및 180) 와 같은 프로세서는 메모리로부터, 수신되고, 역양자화되고, 역 변환된 16 x 16 픽셀 매크로블록으로 액세스한다 (단계 305). 도 1의 통신 컴포넌트 (140 및 175) 와 같은 수신 수단은, 도 1의 역블록화 컴포넌트 (125 및 165) 와 같은 이웃하는 블록 결정 수단을 따라, 단계 305 를 수행할 수 있다. 각각의 이웃하는 4 x 4 블록 쌍의 각각의 에지를 따른 에지 액티비티가 측정된다 (단계 310). 에지 액티비티는, 예를 들어, 상기 방정식 [3] 에서 ap 및 aq 에 대해 도시된 것과 같은 방법으로 측정될 수 있다. 도 1의 역블록화 컴포넌트 (125 및 165) 와 같은 측정 수단은 단계 310 을 수행할 수 있다. 에지 액티비티가 임계값 초과로 결정된다면 (단계 315), 에지 강화가 수행된다 (단계 320). 에지 강화는 상기 방정식 [10] 및 [12] 에서와 같이 고주파 강조 필터링으로, 또는 고역 통과 필터를 이용하고 강화된 픽셀 상에 고역 통과 필터의 출력을 오버레이함 (추가함) 으로써 수행될 수 있다. 도 1의 역블록화 컴포넌트 (125 및 165) 와 같은 강화 수단은 단계 320 을 수행할 수 있다. 역블록화 컴포넌트 (125 및 165) 와 같은 비교 수단은 단계 315 를 수행할 수 있다. 단계 315 에서, 에지 액티비티가 임계값 초과가 아니라는 것이 결정되면, 픽셀은 저역 통과 필터된다 (단계 325). 저역 통과 필터링은 상기 방정식 [5], [6], [9] 및 [11] 과 같은 저역 통과 필터링으로 수행될 수 있다. 필터링 후에, 4 x 4 블록은 메모리에 저장된다 (단계 330). 단계 305 내지 330 은 전체 프레임이 저역 통과 필터링되고/거나 고주파 강조 필터될 때까지 반복되며, 그 때 프레임은 메모리 또는 디스플레이에 저장될 수 있다 (단계 330). 단계 305 내지 330 은 인코딩된 비트스트림이 완료될 때까지 반복된다.
도 4 및 5 는 프로세스 (300) 의 변화를 도시한다. 도 4의 프로세스 (400) 는 에지 액티비티 측정과 관계없이 4 x 4 이웃하는 블록 사이의 각각의 경계의 고주파 강조 필터링에 의해 에지 강화를 수행한다 (단계 415). 에지 액티비 티가, 단계 410 에서 측정된 바와 같이, 임계값 이하라면 (단계 420), 이웃하는 블록은 저역 통과 필터된다. 도 5의 프로세스 (500) 는 2 개의 임계값을 이용한다. 에지 액티비티가 제 1 임계값 미만이라면 (단계 515), 이웃하는 블록은 저역 통과 필터된다 (단계 520). 이 임계값은 상기 논의되고 방정식 [9], [10], [11] 및 [12] 에서 표현된 바와 같이 표준 β임계값이 될 수 있다. 에지 액티비티가 제 1 임계값 이상이라면, 제 2 임계값과 비교된다 (단계 525). 에지 액티비티가 제 2 임계값 초과라면, 이웃하는 블록의 픽셀은 고주파 강조 필터링으로 에지 강화된다 (단계 530). 단계 525 가 에지 액티비티가 제 2 임계값 이하라고 결정한다면, 어떤 필터링도 수행되지 않는다.
설명된 방법 및 장치가 MSM 에서 비디오 코어의 존재하는 구성 상의 수정과 함께 실행될 수 있고, 이러한 수정은 이 특성의 일반적인 하드웨어 구현으로 확장될 수 있다는 것이 이해되어야 한다.
상기 설명에서, 슬라이스는 16 연속된 스캔 라인 외에 연속된 스캔 라인의 세트를 나타낸다. 또한, 데이터 블록은 n X m 블록일 수도 있고, 여기서 블록이 재분할될 수 있다면 n 은 m 과 동일하지 않다. 또한, 동일하거나 상이한 컬러 컴포넌트의 수를 갖는 상이한 컬러 공간은 이미지 픽셀을 나타내는데 사용될 수도 있다. 그러나, 16 X 16 픽셀의 블록 크기 및 YCbCr 컬러 공간은 설명의 목적을 위해 이하에서 사용될 것이다.
상기에서 논의된 바와 같이, 도 1의 역블록화 컴포넌트 (125 및 165) 는, 시스템이 허용하는 한에서, 이웃하는 블록의 특성에 따라 상이한 필터를 선택할 수 있다. 따라서, 역블록화 컴포넌트 (125 및 165) 는 FIR 필터, 평균 필터 (averaging filter), 가우시안 필터 (Gaussian filter), 및/또는 다상 필터 (polyphase filter) 와 같은, 그러나 이에 제한되지는 않는, 하나 이상의 필터의 유형을 포함할 수 있다.
또한, 상기에 논의된 바와 같이, 도 1의 변환 컴포넌트 (115 및 155) 는 상기에 논의된 바와 같은 H.264 정수 변환 외에 상이한 유형의 변환을 포함할 수 있다. H.264 정수 변환은 4 x 4 픽셀 블록 상에 동작한다. 따라서, 각각의 4 x 4 블록은 역블록화되거나 에지 강화될 필요가 있다. 다른 유형의 변환은 ABSDCT (ABSolute DCT) 기법이다. ABSDCT 를 사용하는 압축 기법은 16 X 16 픽셀의 블록 크기를 사용하여 다음에 설명될 것이다. 일반적으로, 각각의 휘도 및 색차 컴포넌트는 블록 인터리버 (interleaver) 로 통과된다. 일 실시형태에서, 16 X 16 블록은 블록 인터리버에 제출되고, 이것은 16 X 16 블록 내의 이미지 샘플을 DCT 분석을 위한 데이터의 블록 및 합성 서브-블록을 생성하도록 순서를 매긴다. 하나의 16 X 16 DCT 는 제 1 오더링에 적용되고, 4 개의 8 X 8 DCT 는 제 2 오더링에 적용되고, 16 개의 4 X 4 DCT 는 제 3 오더링에 적용되고, 64 개의 2 X 2 DCT 는 제 4 오더링에 적용된다. DCT 동작은 이미지 소스의 선천적인 공간적 과잉을 감소시킨다. DCT 가 수행된 후에, 대부분의 이미지 신호 에너지는 몇 개의 DCT 계수에 집중되는 경향이 있다.
16 X 16 블록 및 각각의 서브-블록에서, 변환된 계수는 블록 또는 서브-블록을 인코딩하도록 요청되는 비트의 수를 결정하기 위해 분석된다. 그리고, 인코 딩할 비트의 최소 수를 요청하는 블록 또는 서브-블록의 조합이 이미지 세그먼트를 나타내기 위해 선택된다. 예를 들어, 2 개의 8 X 8 서브-블록, 6 개의 4 X 4 서브-블록, 및 8 개의 2 X 2 서브-블록이 이미지 세그먼트를 나타내기 위해 선택될 수도 있다. 그리고, 선택된 블록 또는 서브-블록의 조합은 적절히 순서대로 배열된다.
16 X 16 데이터 블록에서, ABSDCT 기법은 16 X 16 블록 내의 블록 크기 할당을 나타내는 PQR 정보로 알려진 데이터를 생성한다. PQR 정보는 변수 비트 폭 데이터이고 어떤 범위까지 16 X 16 블록이 재분할되는지 설명한다. PQR 필드의 R-비트는 16 X 16 블록이 4 개의 8 X 8 블록으로 재분할되었는지를 나타낸다.
추가적인 4 비트가 'Q' 정보로 참조된다. Q 의 각각의 비트는 8 X 8 블록의 4 개의 4 X 4 블록으로의 재분할을 표시한다. 세트된 Q 의 각각의 비트에서, 'P' 의 4 비트 더 많은 것이 4 X 4 블록의 어떤 것이 2 X 2 로 재분할되었는지를 나타내기 위해 존재한다. 따라서, PQR 데이터의 길이는 1 에서 21 비트 길이가 될 수 있고, 이는 16 X 16 블록 내에서 블록 크기 할당에 따른다. 따라서, 각각의 블록은 할당 기준에 따라 크기 8 X 8, 4 X 4 및/또는 2 X 2 로 분할될 수도 있다.
따라서, PQR 정보는 생성될 수도 있고 어떤 블록 크기를 역블록화할지 (저역 통과 필터링 및/또는 고주파 강조 필터링) 결정하기 위해 사용될 수도 있다. PQR 정보는 이미지의 에지 내용을 결정하기 위해 사용된다. 블록의 에지 정보가 더 클수록, 블록 크기는 더 작아지고 PQR 코드는 더 길어진다.
전술된 방법 및 장치의 예는 이하를 포함한다:
2개의 블록이 공통의 경계를 공유하는지를 결정하는 단계, 공통의 경계의 에지 액티비티를 측정하는 단계, 제 1 임계값에 측정된 에지 액티비티를 비교하는 단계, 에지 액티비티가 제 1 임계값 미만이라면 저역 통과 필터로 2개의 블록의 하나 이상의 픽셀을 필터링하는 단계, 에지 액티비티가 제 1 임계값 이상이라면 2개의 이웃하는 블록의 하나 이상의 픽셀을 강화하는 단계를 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
2개의 블록이 공통의 경계를 공유하는지를 결정하기 위한 수단, 공통의 경계의 에지 액티비티를 측정하기 위한 수단, 제 1 임계값에 측정된 에지 액티비티를 비교하기 위한 수단, 에지 액티비티가 제 1 임계값 미만이라면 저역 통과 필터로 2개의 블록의 하나 이상의 픽셀을 필터링하기 위한 수단, 에지 액티비티가 제 1 임계값 이상이라면 2개의 이웃하는 블록의 하나 이상의 픽셀을 강화하기 위한 수단을 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
2개의 블록이 공통의 경계를 공유하는지를 결정하고, 공통의 경계의 에지 액티비티를 측정하고, 제 1 임계값에 측정된 에지 액티비티를 비교하고, 에지 액티비티가 제 1 임계값 미만이라면 저역 통과 필터로 2개의 블록의 하나 이상의 픽셀을 필터링하며, 에지 액티비티가 제 1 임계값 이상이라면 2개의 이웃하는 블록의 하나 이상의 픽셀을 강화하도록 구성된 전자 디바이스로, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
2개의 블록이 공통의 경계를 공유하는지를 결정하는 단계, 공통의 경계의 에 지 액티비티를 측정하는 단계, 제 1 임계값에 측정된 에지 액티비티를 비교하는 단계, 에지 액티비티가 제 1 임계값 미만이라면 저역 통과 필터로 2개의 블록의 하나 이상의 픽셀을 필터링하는 단계, 에지 액티비티가 제 1 임계값 이상이라면 2개의 이웃하는 블록의 하나 이상의 픽셀을 강화하는 단계를 포함하는, 프로세서로 하여금 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법을 실행하게 하는 수단을 내장한 컴퓨터 판독가능 매체.
당업자는 다양한 서로 다른 기술 및 기법을 이용하여 정보 및 신호를 표현할 수도 있음을 알 수 있다. 예를 들어, 상기의 설명 전반에 걸쳐 참조될 수도 있는 데이터, 명령, 커맨드 (commands), 정보, 신호, 비트, 심볼, 및 칩은 전압, 전류, 전자기파, 자계 또는 자성 입자, 광계 또는 광자, 또는 이들의 임의의 결합으로 나타낼 수도 있다.
또한, 당업자는 여기에서 개시된 실시형태들과 관련하여 설명된 다양한 예시적인 논리 블록들, 모듈들, 회로들, 및 알고리즘 단계들을 전자 하드웨어, 컴퓨터 소프트웨어, 또는 이들의 결합으로 구현할 수도 있음을 알 수 있다. 하드웨어와 소프트웨어의 이러한 대체 가능성을 분명히 설명하기 위하여, 다양한 예시적인 컴포넌트들, 블록들, 모듈들, 회로들 및 단계들을 주로 그들의 기능의 관점에서 상술하였다. 그러한 기능이 하드웨어로 구현될지 소프트웨어로 구현될지는 전체 시스템에 부과된 특정한 애플리케이션 및 설계 제약조건들에 의존한다. 당업자는 설명된 기능을 각각의 특정한 애플리케이션에 대하여 다양한 방식으로 구현할 수도 있지만, 그러한 구현의 결정이 본 발명의 범주를 벗어나도록 하는 것으로 해 석하지는 않아야 한다.
여기에서 개시된 실시형태들과 관련하여 설명된 다양한 예시적인 논리 블록들, 모듈들, 회로들은 범용 프로세서, 디지털 신호 프로세서 (DSP), 주문형 집적회로 (ASIC), 필드 프로그래머블 게이트 어레이 신호 (FPGA), 또는 기타 프로그래머블 로직 디바이스, 별도의 게이트 또는 트랜지스터 로직, 별도의 하드웨어 컴포넌트들, 또는 여기서 설명된 기능을 수행하도록 설계되는 이들의 임의의 결합으로 구현 또는 수행될 수도 있다. 범용 프로세서는 마이크로프로세서일 수도 있지만, 다른 방법으로, 그 프로세서는 임의의 종래 프로세서, 제어기, 마이크로 제어기, 또는 상태 기계일 수도 있다. 또한, 프로세서는 컴퓨팅 디바이스들의 결합, 예를 들어, DSP 와 마이크로프로세서의 결합, 복수의 마이크로프로세서들, DSP 코어와 결합된 하나 이상의 마이크로프로세서들 또는 임의의 기타 다른 구성물로 구현될 수도 있다.
여기에 개시된 실시형태들과 관련하여 설명된 방법 또는 알고리즘의 단계는 프로세서에 의해 실행되는 하드웨어, 소프트웨어 모듈, 또는 그 2 개의 결합으로 직접 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈형 디스크, CD-ROM, 또는 당업계에 알려진 임의의 다른 형태의 저장 매체에 상주할 수도 있다. 예시적인 저장 매체는 프로세서에 커플링되며, 그 프로세서는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있다. 다른 방법으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 ASIC 내 에 상주할 수도 있다. ASIC는 사용자 단말기 내에 상주할 수도 있다. 다른 방법으로, 프로세서 및 저장 매체는 사용자 단말기 내에 개별 컴포넌트로서 상주할 수도 있다.
개시되어 있는 실시형태들에 대한 상기의 설명은 당업자로 하여금 본 발명을 제조 또는 이용할 수 있도록 제공된다. 당업자는 이들 실시형태에 대한 다양한 변형들을 명백히 알 수 있으며, 여기에서 정의된 일반적인 원리들은 본 발명의 사상 또는 범위를 벗어나지 않고도 다른 실시형태들에 적용될 수도 있다.
따라서, 블록 경계의 측정된 에지 액티비티 레벨에 기초한 저역 통과 필터링 및 고주파 에지 강화를 포함하는 블록 기반 비디오의 역블록화 및 에지 강화를 위한 방법 및 장치가 설명되었다.

Claims (35)

  1. 2개의 블록이 공통의 경계를 공유하는지를 결정하는 단계;
    상기 공통의 경계의 에지 액티비티 (activity) 를 측정하는 단계;
    제 1 임계값에 상기 측정된 에지 액티비티를 비교하는 단계;
    상기 에지 액티비티가 상기 제 1 임계값 미만이라면 저역 통과 필터로 상기 2개의 블록의 하나 이상의 픽셀을 필터링하는 단계; 및
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하는 단계를 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  2. 제 1 항에 있어서,
    고주파 강조 필터링을 수행함으로써 픽셀을 강화시키는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  3. 제 1 항에 있어서,
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 제 2 임계값에 상기 측정된 에지 액티비티를 비교하는 단계; 및
    상기 에지 액티비티가 상기 제 2 임계값 이상이라면 상기 2개의 블록의 상기 하나 이상의 픽셀을 강화하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  4. 제 1 항에 있어서,
    기저 층으로부터 상기 2개의 블록을 수신하는 단계; 및
    사용 가능한 강화 층이 수신되지 않는다는 것을 결정하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  5. 제 1 항에 있어서,
    상기 픽셀 값의 고역 통과 필터링을 수행하고 상기 픽셀 값에 상기 고역 통과 필터링의 출력을 추가함으로써 픽셀을 강화하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  6. 제 1 항에 있어서,
    상기 공통의 경계와 관련된 경계 강도 변수가 표준화되지 않은 값과 동일할 때에만 상기 2개의 블록의 하나 이상의 픽셀을 강화하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  7. 제 1 항에 있어서,
    상기 제 1 임계값 미만의 측정된 에지 액티비티가 액티비티가 없음을 나타내도록 상기 제 1 임계값을 세팅하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  8. 제 1 항에 있어서,
    상기 2개의 블록 각각이 4 X 4 루마 픽셀을 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  9. 제 1 항에 있어서,
    상기 공통의 경계로부터 제거된 하나 이상의 픽셀들인 픽셀들만 강화하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  10. 제 1 항에 있어서,
    상기 제 1 임계값을 H.264 역블록화 필터의 β 임계값과 동일한 값으로 세팅하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  11. 제 3 항에 있어서,
    상기 제 2 임계값을 0 으로 세팅하는 단계를 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법.
  12. 2개의 블록이 공통의 경계를 공유하는지를 결정하기 위한 수단;
    상기 공통의 경계의 에지 액티비티를 측정하기 위한 수단;
    제 1 임계값에 상기 측정된 에지 액티비티를 비교하기 위한 수단;
    상기 에지 액티비티가 상기 제 1 임계값 미만이라면 저역 통과 필터로 상기 2개의 블록의 하나 이상의 픽셀을 필터링하기 위한 수단; 및
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  13. 제 12 항에 있어서,
    고주파 강조 필터링을 수행함으로써 픽셀을 강화시키기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  14. 제 12 항에 있어서,
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 제 2 임계값에 상기 측정된 에지 액티비티를 비교하기 위한 수단; 및
    상기 에지 액티비티가 상기 제 2 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  15. 제 12 항에 있어서,
    기저 층으로부터 상기 2개의 블록을 수신하기 위한 수단; 및
    사용 가능한 강화 층이 수신되지 않는다는 것을 결정하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  16. 제 12 항에 있어서,
    상기 픽셀 값의 고역 통과 필터링을 수행하고 상기 픽셀 값에 상기 고역 통과 필터링의 출력을 추가함으로써 픽셀을 강화하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  17. 제 12 항에 있어서,
    상기 공통의 경계와 관련된 경계 강도 변수가 표준화되지 않은 값과 동일할 때에만 상기 2개의 블록의 하나 이상의 픽셀을 강화하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  18. 제 12 항에 있어서,
    상기 제 1 임계값 미만의 측정된 에지 액티비티가 엑티비티 없음을 나타내도록 상기 제 1 임계값을 세팅하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  19. 제 12 항에 있어서,
    상기 2개의 블록 각각이 4 X 4 루마 픽셀을 포함하는, 블록 기반 디지털 비 디오의 역블록화 및 에지 강화를 위한 장치.
  20. 제 12 항에 있어서,
    상기 공통의 경계로부터 제거된 하나 이상의 픽셀들인 픽셀들만 강화하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  21. 제 12 항에 있어서,
    상기 제 1 임계값을 H.264 역블록화 필터의 β 임계값과 동일한 값으로 세팅하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  22. 제 14 항에 있어서,
    상기 제 2 임계값을 0 으로 세팅하기 위한 수단을 더 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 장치.
  23. 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스로서, 상기 전자 디바이스는 2개의 블록이 공통의 경계를 공유하는지를 결정하고, 상기 공통의 경계의 에지 액티비티를 측정하고, 제 1 임계값에 상기 측정된 에지 액티비티를 비교하고, 상기 에지 액티비티가 상기 제 1 임계값 미만이라면 저역 통과 필터로 상기 2개의 블록의 하나 이상의 픽셀을 필터링하며, 상기 에지 액티비티가 상기 제 1 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하도록 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  24. 제 23 항에 있어서,
    고주파 강조 필터링을 수행함으로써 픽셀을 강화시키도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  25. 제 23 항에 있어서,
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 제 2 임계값에 상기 측정된 에지 액티비티를 비교하며, 상기 에지 액티비티가 상기 제 2 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  26. 제 23 항에 있어서,
    기저 층으로부터 상기 2개의 블록을 수신하며, 사용 가능한 강화 층이 수신되지 않는다는 것을 결정하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  27. 제 23 항에 있어서,
    상기 픽셀 값의 고역 통과 필터링을 수행하고 상기 픽셀 값에 상기 고역 통과 필터링의 출력을 추가함으로써 픽셀을 강화하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  28. 제 23 항에 있어서,
    상기 공통의 경계와 관련된 경계 강도 변수가 표준화되지 않은 값과 동일할 때에만 상기 2개의 블록의 하나 이상의 픽셀을 강화하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  29. 제 23 항에 있어서,
    상기 제 1 임계값 미만의 측정된 에지 액티비티가 액티비티 없음을 나타내도록 상기 제 1 임계값을 세팅하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  30. 제 23 항에 있어서,
    상기 2개의 블록 각각이 4 X 4 루마 픽셀을 포함하는, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  31. 제 23 항에 있어서,
    상기 공통의 경계로부터 제거된 하나 이상의 픽셀들인 픽셀들만 강화하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  32. 제 23 항에 있어서,
    상기 제 1 임계값을 H.264 역블록화 필터의 β 임계값과 동일한 값으로 세팅하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  33. 제 25 항에 있어서,
    상기 제 2 임계값을 0 으로 세팅하도록 또한 구성된, 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 전자 디바이스.
  34. 프로세서로 하여금 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법을 실행하게 하는 수단을 내장한 컴퓨터 판독가능 매체로서, 상기 방법은,
    2개의 블록이 공통의 경계를 공유하는지를 결정하는 단계;
    상기 공통의 경계의 에지 액티비티를 측정하는 단계;
    제 1 임계값에 상기 측정된 에지 액티비티를 비교하는 단계;
    상기 에지 액티비티가 상기 제 1 임계값 미만이라면 저역 통과 필터로 상기 2개의 블록의 하나 이상의 픽셀을 필터링하는 단계; 및
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하는 단계를 포함하는, 컴퓨터 판독가능 매체.
  35. 블록 기반 디지털 비디오의 역블록화 및 에지 강화를 위한 방법을 실행하도록 구성된 하나 이상의 프로세서로서, 상기 방법은,
    2개의 블록이 공통의 경계를 공유하는지를 결정하는 단계;
    상기 공통의 경계의 에지 액티비티를 측정하는 단계;
    제 1 임계값에 상기 측정된 에지 액티비티를 비교하는 단계;
    상기 에지 액티비티가 상기 제 1 임계값 미만이라면 저역 통과 필터로 상기 2개의 블록의 하나 이상의 픽셀을 필터링하는 단계; 및
    상기 에지 액티비티가 상기 제 1 임계값 이상이라면 상기 2개의 블록의 하나 이상의 픽셀을 강화하는 단계를 포함하는, 하나 이상의 프로세서.
KR1020067025608A 2004-05-06 2005-05-05 블록 기반 디지털 비디오의 역블럭화 및 에지 강화를 위한 방법, 장치, 전자 디바이스, 컴퓨터 판독가능 매체, 및 프로세서 KR100863166B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US56936904P 2004-05-06 2004-05-06
US60/569,369 2004-05-06

Publications (2)

Publication Number Publication Date
KR20070011570A KR20070011570A (ko) 2007-01-24
KR100863166B1 true KR100863166B1 (ko) 2008-10-13

Family

ID=35451573

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067025608A KR100863166B1 (ko) 2004-05-06 2005-05-05 블록 기반 디지털 비디오의 역블럭화 및 에지 강화를 위한 방법, 장치, 전자 디바이스, 컴퓨터 판독가능 매체, 및 프로세서

Country Status (10)

Country Link
US (1) US7430336B2 (ko)
EP (1) EP1747676B1 (ko)
JP (2) JP2007536828A (ko)
KR (1) KR100863166B1 (ko)
CN (1) CN1981532B (ko)
AT (1) ATE425635T1 (ko)
CA (1) CA2565737A1 (ko)
DE (1) DE602005013210D1 (ko)
TW (1) TWI418218B (ko)
WO (1) WO2005117447A2 (ko)

Families Citing this family (81)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2002323591A1 (en) * 2001-09-05 2003-03-18 Emblaze Systems Ltd. Method for reducing blocking artifacts
CN100553151C (zh) * 2002-11-15 2009-10-21 高通股份有限公司 用于多种描述编码的设备和方法
JP3860545B2 (ja) * 2003-02-07 2006-12-20 誠 小川 画像処理装置及び画像処理方法
US7995849B2 (en) * 2003-03-17 2011-08-09 Qualcomm, Incorporated Method and apparatus for improving video quality of low bit-rate video
US20050013494A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation In-loop deblocking filter
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7697782B2 (en) * 2004-09-16 2010-04-13 Sharp Laboratories Of America, Inc. System for reducing ringing artifacts
US8780957B2 (en) 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
KR100703744B1 (ko) * 2005-01-19 2007-04-05 삼성전자주식회사 디블록을 제어하는 ｆｇｓ 기반의 비디오 인코딩 및디코딩 방법 및 장치
US7570829B2 (en) * 2005-02-17 2009-08-04 Eastman Kodak Company Selection of alternative image processing operations to maintain high image quality
US7995656B2 (en) * 2005-03-10 2011-08-09 Qualcomm Incorporated Scalable video coding with two layer encoding and single layer decoding
MX2007011084A (es) 2005-03-10 2007-11-15 Qualcomm Inc Clasificacion de contenido para procesamiento multimedia.
US8520739B2 (en) * 2005-05-09 2013-08-27 Intel Corporation Method and apparatus for adaptively reducing artifacts in block-coded video
US20070016081A1 (en) * 2005-07-12 2007-01-18 Globalmedia Group, Llc Chroma-photon staining
US8139642B2 (en) * 2005-08-29 2012-03-20 Stmicroelectronics S.R.L. Method for encoding signals, related systems and program product therefor
WO2007029235A2 (en) * 2005-09-05 2007-03-15 Algosoft Limited Automatic digital film and video restoration
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
KR100668346B1 (ko) * 2005-10-04 2007-01-12 삼성전자주식회사 멀티 코덱용 필터링 장치 및 방법
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US8654848B2 (en) 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
TWI296099B (en) * 2005-12-15 2008-04-21 Princeton Technology Corp Method for improving image quality and image processor of operating the same
JP4825524B2 (ja) * 2006-01-31 2011-11-30 株式会社東芝 動画像復号装置および動画像復号方法
US9131164B2 (en) 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
EP1848219B1 (en) * 2006-04-18 2008-11-05 Pioneer Corporation Block noise removal device
US20070286277A1 (en) * 2006-06-13 2007-12-13 Chen Xuemin Sherman Method and system for video compression using an iterative encoding algorithm
US8422555B2 (en) * 2006-07-11 2013-04-16 Nokia Corporation Scalable video coding
JP4747975B2 (ja) * 2006-07-14 2011-08-17 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
US8253752B2 (en) 2006-07-20 2012-08-28 Qualcomm Incorporated Method and apparatus for encoder assisted pre-processing
US8155454B2 (en) * 2006-07-20 2012-04-10 Qualcomm Incorporated Method and apparatus for encoder assisted post-processing
US20080084932A1 (en) * 2006-10-06 2008-04-10 Microsoft Corporation Controlling loop filtering for interlaced video frames
KR100827106B1 (ko) * 2006-10-20 2008-05-02 삼성전자주식회사 디블록킹 필터에서의 필터 조건 영역 판별을 위한 장치 및방법
US20080101469A1 (en) * 2006-10-31 2008-05-01 Motorola, Inc. Method and apparatus for adaptive noise filtering of pixel data
GB2443700A (en) * 2006-11-10 2008-05-14 Tandberg Television Asa Reduction of blocking artefacts in decompressed images
KR101370287B1 (ko) * 2006-11-22 2014-03-07 세종대학교산학협력단 디블록킹 필터링 방법 및 장치
TWI330041B (en) * 2006-11-28 2010-09-01 Realtek Semiconductor Corp Image processing method and device for performing block effect reduction
KR101498044B1 (ko) * 2007-01-10 2015-03-05 삼성전자주식회사 매크로 블럭이 적응적으로 부호화된 압축영상에 대한축소영상 생성방법 및 이를 적용한 영상기기
WO2008084996A1 (en) * 2007-01-11 2008-07-17 Samsung Electronics Co, . Ltd. Method and apparatus for deblocking-filtering video data
US8204129B2 (en) * 2007-03-27 2012-06-19 Freescale Semiconductor, Inc. Simplified deblock filtering for reduced memory access and computational complexity
KR100866492B1 (ko) * 2007-05-30 2008-11-03 삼성전자주식회사 에지 향상 기능을 갖는 노이즈 저감 장치 및 방법
TWI375470B (en) * 2007-08-03 2012-10-21 Via Tech Inc Method for determining boundary strength
US8331717B2 (en) * 2007-10-03 2012-12-11 Panasonic Corporation Method and apparatus for reducing block noise
EP2051524A1 (en) * 2007-10-15 2009-04-22 Panasonic Corporation Image enhancement considering the prediction error
JP4991590B2 (ja) * 2008-02-14 2012-08-01 キヤノン株式会社 画像処理装置、画像処理方法、画像処理プログラム、及び、記憶媒体
JP4896915B2 (ja) * 2008-03-28 2012-03-14 株式会社東芝 動画像復号化装置および動画像復号化方法
US9338475B2 (en) * 2008-04-16 2016-05-10 Intel Corporation Tone mapping for bit-depth scalable video codec
EP2112833B1 (en) * 2008-04-24 2014-12-17 Psytechnics Ltd Method and apparatus for measuring blockiness in video images
US20090285308A1 (en) * 2008-05-14 2009-11-19 Harmonic Inc. Deblocking algorithm for coded video
KR101552639B1 (ko) * 2008-07-11 2015-09-14 한국전자통신연구원 인트라 매크로 블록의 디블록킹 필터 및 필터링 방법
DE102008048257B4 (de) * 2008-09-22 2012-02-09 Trident Microsystems (Far East) Ltd. Verfahren zur Detektion eines Blockrasters
KR101483497B1 (ko) * 2008-09-25 2015-01-20 에스케이텔레콤 주식회사 임펄스 신호를 고려한 영상 부호화/복호화 장치 및 방법
JP2010081368A (ja) * 2008-09-26 2010-04-08 Toshiba Corp 画像処理装置、動画像復号装置、動画像符号化装置、画像処理方法、動画像復号方法、及び、動画像符号化方法
US8538189B2 (en) * 2008-11-14 2013-09-17 Ati Technologies Ulc Image noise filter and method
US8761538B2 (en) * 2008-12-10 2014-06-24 Nvidia Corporation Measurement-based and scalable deblock filtering of image data
US8380001B2 (en) * 2009-02-27 2013-02-19 Vixs Systems, Inc. Edge adaptive deblocking filter and methods for use therewith
TWI383688B (zh) * 2009-03-11 2013-01-21 Quanta Comp Inc 視訊壓縮電路與其方法
CN101567964B (zh) * 2009-05-15 2011-11-23 南通大学 一种低码率视频应用中的预处理降噪去块效应方法
CN102714726B (zh) 2010-01-15 2015-03-25 杜比实验室特许公司 使用元数据的用于时间缩放的边缘增强
JP5793511B2 (ja) * 2010-02-05 2015-10-14 テレフオンアクチーボラゲット エル エム エリクソン（パブル） デブロッキングフィルタリング制御
US8787443B2 (en) * 2010-10-05 2014-07-22 Microsoft Corporation Content adaptive deblocking during video encoding and decoding
US8755625B2 (en) 2010-11-19 2014-06-17 Analog Devices, Inc. Component filtering for low-light noise reduction
US20120128244A1 (en) * 2010-11-19 2012-05-24 Raka Singh Divide-and-conquer filter for low-light noise reduction
US8699813B2 (en) 2010-11-19 2014-04-15 Analog Devices, Inc Adaptive filter for low-light noise reduction
US8849053B2 (en) 2011-01-14 2014-09-30 Sony Corporation Parametric loop filter
MA34906B1 (fr) 2011-01-14 2014-02-01 Ericsson Telefon Ab L M Filtrage de déblocage
PL3001682T3 (pl) * 2011-03-01 2017-07-31 Telefonaktiebolaget Lm Ericsson (Publ) Sterowanie filtrowaniem pozbywania się bloków
US9042458B2 (en) 2011-04-01 2015-05-26 Microsoft Technology Licensing, Llc Multi-threaded implementations of deblock filtering
CN107426579B (zh) 2011-06-24 2020-03-10 Lg 电子株式会社 图像信息编码和解码方法
CN107295335B (zh) * 2011-06-28 2020-03-17 索尼公司 图像处理装置和图像处理方法
EP2774371B1 (en) * 2011-11-03 2020-08-26 Sun Patent Trust Efficient rounding for deblocking
EP2774359B1 (en) * 2011-11-04 2015-12-30 Panasonic Intellectual Property Corporation of America Deblocking filtering with modified image block boundary strength derivation
KR20130090465A (ko) * 2012-02-06 2013-08-14 삼성전자주식회사 순차 주사 기반의 디블록킹 필터링 장치 및 방법
TWI463468B (zh) * 2012-03-03 2014-12-01 Mstar Semiconductor Inc 影像處理裝置及影像處理方法
WO2014052602A1 (en) * 2012-09-28 2014-04-03 Vid Scale, Inc. Method and apparatus of edge guided processing for video coding
KR20140086632A (ko) 2012-12-28 2014-07-08 삼성디스플레이 주식회사 영상 처리 장치 및 그것을 포함하는 표시 장치
KR102091141B1 (ko) 2015-01-14 2020-04-14 삼성전자주식회사 주파수 적응적 디스크리닝 방법 및 이를 수행하기 위한 장치
EP3280142A4 (en) * 2015-05-12 2018-03-07 Samsung Electronics Co., Ltd. Image encoding method and device for sample value compensation and image decoding method and device for sample value compensation
US10057601B2 (en) * 2015-06-22 2018-08-21 Integrated Device Technology, Inc. Methods and apparatuses for filtering of ringing artifacts post decoding
EP3403406A1 (en) * 2016-01-15 2018-11-21 VID SCALE, Inc. System and method for enhanced motion compensation using adaptive filtering
KR20240066303A (ko) 2016-12-28 2024-05-14 소니그룹주식회사 화상 처리 장치 및 화상 처리 방법
KR102282455B1 (ko) * 2017-07-11 2021-07-28 한화테크윈 주식회사 영상 처리 장치 및 영상 처리 방법
CN109819272B (zh) * 2018-12-26 2022-09-16 平安科技（深圳）有限公司 视频发送方法、装置、计算机可读存储介质及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5229864A (en) 1990-04-16 1993-07-20 Fuji Photo Film Co., Ltd. Device for regenerating a picture signal by decoding
US20020076043A1 (en) * 2000-10-11 2002-06-20 Van Der Vleuten Renatus Josephus Coding
US20030081854A1 (en) * 2001-06-12 2003-05-01 Deshpande Sachin G. Filter for combined de-ringing and edge sharpening
US20030138154A1 (en) * 2001-12-28 2003-07-24 Tooru Suino Image-processing apparatus, image-processing method, program and computer readable information recording medium

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03125586A (ja) * 1989-10-11 1991-05-28 Sanyo Electric Co Ltd 映像信号処理装置
JPH04970A (ja) * 1990-04-18 1992-01-06 Fuji Photo Film Co Ltd 画像信号復号再生装置
US5799111A (en) * 1991-06-14 1998-08-25 D.V.P. Technologies, Ltd. Apparatus and methods for smoothing images
US6041145A (en) * 1995-11-02 2000-03-21 Matsushita Electric Industrial Co., Ltd. Device and method for smoothing picture signal, device and method for encoding picture and device and method for decoding picture
JPH09247672A (ja) * 1996-03-07 1997-09-19 Matsushita Electric Ind Co Ltd 画像復号方法および画像復号装置
US5854859A (en) * 1996-12-27 1998-12-29 Hewlett-Packard Company Image sharpening filter providing variable sharpening dependent on pixel intensity
US5822467A (en) * 1996-12-27 1998-10-13 Hewlett-Packard Company Sharpening filter for images with automatic adaptation to image type
JP3800704B2 (ja) * 1997-02-13 2006-07-26 ソニー株式会社 映像信号処理装置及び方法
JP2001245179A (ja) * 1999-12-21 2001-09-07 Sanyo Electric Co Ltd 画像データの歪み低減方法、及びその装置
US6614944B1 (en) * 2000-02-10 2003-09-02 Oak Technology, Inc. Image enhancement filter with adaptive threshold
EP1209624A1 (en) * 2000-11-27 2002-05-29 Sony International (Europe) GmbH Method for compressed imaging artefact reduction
US7450641B2 (en) * 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
US7003174B2 (en) * 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts
BRPI0205988B1 (pt) * 2001-09-12 2017-01-17 Matsushita Electric Ind Co Ltd aparelho de codificação de imagem que codifica imagens que são introduzidas em sequência e aparelho de decodificação de imagem que decodifica imagens que são introduzidas em sequência
JP2003304538A (ja) * 2002-04-11 2003-10-24 Matsushita Electric Ind Co Ltd 画像符号化装置、画像復号化装置及びそれらの方法
US6983079B2 (en) * 2001-09-20 2006-01-03 Seiko Epson Corporation Reducing blocking and ringing artifacts in low-bit-rate coding
US20030076858A1 (en) * 2001-10-19 2003-04-24 Sharp Laboratories Of America, Inc. Multi-layer data transmission system
US6907079B2 (en) * 2002-05-01 2005-06-14 Thomson Licensing S.A. Deblocking filter conditioned on pixel brightness
US7319415B2 (en) * 2002-05-01 2008-01-15 Thomson Licensing Chroma deblocking filter
US7656950B2 (en) * 2002-05-29 2010-02-02 Diego Garrido Video interpolation coding
AU2003279015A1 (en) * 2002-09-27 2004-04-19 Videosoft, Inc. Real-time video coding/decoding
US7227901B2 (en) * 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
US7167522B2 (en) * 2003-02-27 2007-01-23 Texas Instruments Incorporated Video deblocking filter
JP3795880B2 (ja) * 2003-09-22 2006-07-12 株式会社リコー 画像処理装置、画像処理方法および記録媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5229864A (en) 1990-04-16 1993-07-20 Fuji Photo Film Co., Ltd. Device for regenerating a picture signal by decoding
US20020076043A1 (en) * 2000-10-11 2002-06-20 Van Der Vleuten Renatus Josephus Coding
US20030081854A1 (en) * 2001-06-12 2003-05-01 Deshpande Sachin G. Filter for combined de-ringing and edge sharpening
US20030138154A1 (en) * 2001-12-28 2003-07-24 Tooru Suino Image-processing apparatus, image-processing method, program and computer readable information recording medium

Also Published As

Publication number Publication date
CN1981532B (zh) 2010-09-01
EP1747676B1 (en) 2009-03-11
CA2565737A1 (en) 2005-12-08
DE602005013210D1 (de) 2009-04-23
WO2005117447A3 (en) 2006-05-26
US7430336B2 (en) 2008-09-30
JP2011125034A (ja) 2011-06-23
EP1747676A2 (en) 2007-01-31
US20050276505A1 (en) 2005-12-15
ATE425635T1 (de) 2009-03-15
CN1981532A (zh) 2007-06-13
JP2007536828A (ja) 2007-12-13
TW200607356A (en) 2006-02-16
WO2005117447A2 (en) 2005-12-08
TWI418218B (zh) 2013-12-01
KR20070011570A (ko) 2007-01-24

Similar Documents

Publication Publication Date Title
KR100863166B1 (ko) 블록 기반 디지털 비디오의 역블럭화 및 에지 강화를 위한 방법, 장치, 전자 디바이스, 컴퓨터 판독가능 매체, 및 프로세서
US9615093B2 (en) Method and appartus of adaptive loop filtering
KR100938568B1 (ko) 프레임 레이트 업 컨버젼 애플리케이션에서의 보간된 프레임 디블록킹 오퍼레이션
JP5207942B2 (ja) 量子化効果減少のための映像データ後処理方法及び装置
KR100797807B1 (ko) 코딩 아티팩트 감소 방법
JP5357898B2 (ja) 多格子スパーシティベースフィルタリングを使用するアーチファクト除去フィルタリングのための方法および装置
WO2002096118A2 (en) Decoding compressed image data
CN106954072B (zh) 去伪像滤波的基于区域的滤波器参数选择的方法和装置
Francisco et al. A generic post-deblocking filter for block based image compression algorithms
KR100885441B1 (ko) 블록 경계 영역 필터링 방법
KR100598369B1 (ko) 블록 경계 영역 필터링 방법
KR100598368B1 (ko) 블록 경계 영역 필터링 방법
KR100524856B1 (ko) 블록 경계 영역 필터링 방법
Kesireddy et al. Adaptive Trilateral Filter for In-Loop Filtering
KR100917208B1 (ko) 블록 경계 영역 필터링 방법
KR100598367B1 (ko) 블록 경계 영역 필터링 방법
KR100917207B1 (ko) 블록 경계 영역 필터링 방법
Kesireddy A new adaptive trilateral filter for in-loop filtering
Kesireddy et al. Adaptive Trilateral Filter For HEVC Standard
KR20050069971A (ko) 동영상 디코딩 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120927

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20130927

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140929

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20150930

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20160929

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20180928

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20190924

Year of fee payment: 12