KR20000017586A - 부호화-정합 필터 배열을 사용한 비디오 통신 시스템 및 방법 - Google Patents

부호화-정합 필터 배열을 사용한 비디오 통신 시스템 및 방법 Download PDF

Info

Publication number
KR20000017586A
KR20000017586A KR1019990035820A KR19990035820A KR20000017586A KR 20000017586 A KR20000017586 A KR 20000017586A KR 1019990035820 A KR1019990035820 A KR 1019990035820A KR 19990035820 A KR19990035820 A KR 19990035820A KR 20000017586 A KR20000017586 A KR 20000017586A
Authority
KR
South Korea
Prior art keywords
image
quantization step
block
image processing
pixels
Prior art date
Application number
KR1019990035820A
Other languages
English (en)
Inventor
매듀스킴니겔
매듀스엘리사피.
Original Assignee
루센트 테크놀러지스 인크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 루센트 테크놀러지스 인크 filed Critical 루센트 테크놀러지스 인크
Publication of KR20000017586A publication Critical patent/KR20000017586A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

영상을 통신하기 위한 시스템에 있어서, 영상 압축 구조는 영상을 전송하는데 요구되는 대역폭을 줄이도록 영상을 부호화하는데 사용된다. 예를 들면, 이 압축 구조는 양자화로 이어지는 이산 코사인 변환 (DCT)을 영상에 실행하는 것을 포함한다. 압축 구조에 의해 발생되는 부호화 결함의 효과를 줄이기 위해, 본 발명에서는, 영상의 부호화에 정합되는 필터 배열이 수신된 영상을 처리하기 위해 사용된다. 상기 필터 배열은 사용되는 양자화 단계 크기의 함수인 특정한 한계값 보다 진폭이 더 낮은 수신된 영상에서 0이 아닌 각 주파수 성분을 제거하도록 설계된다.

Description

부호화-정합 필터 배열을 사용한 비디오 통신 시스템 및 방법{Technique for video communications using a coding-matchedfilter arrangement}
본 발명은 통신 시스템 및 방법에 관한 것으로, 특히 영상 압축 구조를 실행하는 비디오 통신에 대한 시스템 및 방법에 관한 것이다.
비디오 통신에서는 영상을 전송하는데 요구되는 대역폭을 줄이기 위해 영상 압축 구조에 따라 영상이 부호화된다. MPEG, MPEG-2, 이동 (motion)-JPEG, 및 JPEG 표준과 같이 이미 공지된 영상 압축 표준에 따라, 영상 부호화 처리는 전형적으로 전송되는 영상에 블록 기초의 주파수 변환, 예를 들면 이산 코사인 변환 (DCT)을 실행하는 것을 포함한다. 결과의 DCT 계수는 적절하게 표현되도록 다른 양자화 단계로 맵핑 (mapping)되거나 양자화된다. 이용가능한 전송 대역폭이 전송되는 영상의 복잡성에 대해 비교적 작으면, 양자화 단계의 크기는 비교적 클 필요가 있다. 그 경우, DCT 계수의 결과적인 조잡한 양자화는 전송된 영상에 부호화 결함을 생기게 하여, 예를 들면 회복된 영상에 나타내는 물체의 엣지 부근에 반점과 같은 왜곡을 포함하게 된다.
회복된 영상을 이전 처리함으로서 부호화 결함의 효과를 줄이려는 시도가 이루어졌왔다. 결함은 통상 고주파수 성분이 포함되므로, 이러한 시도는 회복된 영상에 이러한 성분을 필터처리하는 저역통과 필터를 포함하는 포스트프로세서 (postprocessor)를 항상 사용해 왔다. 그러나, 이러한 포스트프로세서의 설계는 일반적으로 특별한 방식의 실험에 의해 결정되었다. 그 결과로, 이전 처리된 영상의 질은 전송된 영상의 실제 종류 및 필드에서 사용된 전송율이 실험에서와 얼마나 가까운가에 매우 의존되었다. 결과적으로, 영상의 질을 개선하기 위한 종래 포스트프로세서를 사용하는 것은 기껏해야 실행에 따라 불확실하므로, 필드 조건에 따라 매우 변할 수 있었다.
따라서, 영상 부호화 처리가 가해진 영상에서 부호화 결함의 효과를 효과적으로 줄이기 위해 확실한 기술이 필요하다.
전송된 영상에 대해 블록 기초의 주파수 변환 계수, 예를 들면 DCT 계수의 양자화를 포함하는 상기 영상 부호화 처리의 실행으로 인해, 0이 아닌 각 영상 주파수 성분의 진폭이, 수신될 때, 양자화 단계 크기의 함수인 한계값 보다 더 작을 수 없음을 인식하고 있다. 즉, 한계값 보다 더 작은 진폭을 갖는 0이 아닌 주파수 성분은 아마도 대역이 제한된 채널을 통과하는 변환 계수의 블록 구조로 인해 생기는 앨리어싱 (aliasing)에 의해 에러가 발생될수 있다.
따라서, 본 발명에 따른, 상기의 양자화를 포함하는 영상의 부호화와 정합되는 필터 배열을 사용하기 때문에, 수신된 영상은 이를 나타내는 주파수 성분의 세트로 변환된다. 양자화에서 사용되는 양자화 단계 크기는 주파수 성분에 따라 변한다. 그에 대응하여 한계값 이하의 값을 갖는 각 주파수 성분은 그 세트로부터 제거되고, 여기서 한계값은 주파수 성분과 연관된 양자화 단계 크기의 함수이다. 유리하게, 나머지 주파수 성분으로 구성된 결과의 영상은 실질적으로 감소된 수신 영상의 부호화 결함의 효과로 수신된 영상 보다 질이 뛰어나다. 또한, 본 발명 기술의 효율성은 영상이 통신되는 필드 조건에 무관하다.
도 1은 본 발명에 따른 비디오 영상 통신용 통신 시스템의 블록도.
도 2는 본 발명에 따른 도 1의 시스템에서 회복된 영상의 질을 개선하기 위해 부호화-정합 필터 배열에 의해 실행되는 포스트프로세스 (postprocess)를 도시하는 도면.
도 3은 본 발명에 따른 부호화-정합 필터 배열을 프리프로세서 (preprocessor)로 사용한 비디오 엔코더를 도시하는 블록도.
도 1은 비디오 영상을 통신하기 위해 본 발명의 원리를 이용하는 통신 시스템(100)을 도시한다. 도 1에 도시된 바와 같이, 시스템(100)은 종래 설계의 비디오 소스(105), 비디오 엔코더(103), 전송 전자부품(131), 수신 전자부품(151), 및 비디오 디코더(150)와, 본 발명에 따른 부호화 정합 필터 배열(180)을 구비한다.
비디오 소스(105)는 종래의 방식으로 프레임 (frame)을 기초로 영상을 나타내는 비트 스트림 (bit stream)을 제공한다. 각 프레임은 L x M 픽셀을 구비하고, 여기서 L과 M은 0 보다 크게 선택된 정수이다. 예를 들면, 이 경우에서는 L = 720이고 M = 480이다. 이러한 비트 스트림에 응답해, 이동 평가기(108)는 표준적인 방법으로 소스로부터 이전 영상 프레임과 현재 영상 프레임 사이의 차이를 나타내는 이동 벡터를 유도한다. 이러한 이동 벡터 정보 및 후술되는 가산기(110)에 의해 제공되는 이전에 전송된 프레임을 근거로, 이동 보상기(113)는 전송될 현재 프레임의 예측 버전을 발생한다. 이 예측 버전은 가산기(110)와 감산기(115)에 제공된다. 감산기는 소스(105)로부터의 원래 버전에서 현재 프레임의 예측 버전을 감산하여 예측 에러 신호를 형성한다.
이산 코사인 변환 (DCT) 프로세서(119)는 감산기(115)로부터의 예측 에러 신호에 블록 기초의 주파수 변환인 이미 공지된 DCT를 실행한다. 결과의 DCT 계수는 블록에 이차원적으로 배열된다. 이들 DCT 계수는 D. LeGall, "멀티미디어 응용을 위한 MPEG, 비디오 압축 (MPEG, a Video Compression for Multimedia Applications)",Transaction of ACM, vol. 34, no. 4, 1991년 4월, pp. 46-58에서 설명된 MPEG 영상 압축 구조에 따라, 양자화기(121)에 의해 양자화되고, 가변길이 엔코더(124)에 의해 엔트로피 (entropy) 부호화되어, 압축 포맷터 (compression formatter)(127)에 의해 포맷된다. 이러한 영상 압축 구조를 적절하게 실행하기 위해, 상술된 이동 벡터 정보가 또한 평가기(108)에 의해 압축 포맷터(127)에 제공된다.
여기서, 비록 양자화기(121)가 선형 양자화기라도, 이러한 양자화 단계 크기는 그에 의해 나타내지는 주파수 성분을 변조시키는 결과적인 양자화 에러를 제어하도록 블록에서 각 DCT 계수의 위치에 따라 변함을 주목하여야 한다. 따라서, 상기 양자화 단계 크기는 일반적으로 Qij로 나타내지고, 여기서 i 및 j는 블록에서 그에 대응하는 DCT 계수의 로우 (row) 및 칼럼 (column) 지수이다. 또한, 각 Qij는 블록별로, 즉 시간에 따라 변함을 주목하여야 한다.
특히, 양자화기(121)로 입력된 각 DCT 계수의 값은 대응하는 Qij로 나뉘어, 모두 0이 될 수 있는 몫(qt)과 나머지(R)를 구한다. 이어서, R은 본 예에서 Qij/2인 "양자화 한계값"과 비교된다. R ≥ Qij/2 이면, 신호는 부호화를 위한 (qt + 1)Qij의 레벨인 것으로 가정한다. R 〈 Qij/2이면, 신호는 (qt)Qij의 레벨인 것으로 가정한다.
양자화 단계 크기 Qij에 대한 정보는 또한 비디오 디코더(150)로의 전송을 위해 가변길이 엔코더(124)에 제공된다. 압축 포맷터(127)의 출력은 1 Mb/s 내지 20 Mb/s의 범위이고, 통신 채널을 통해 전송 전자부품에 의해 전송된다.
양자화기(121)로부터 양자화된 DCT 계수는 디코더(150)에서 결국 회복되는 전송 프레임을 재구성하도록 역양자화기(133)로 피드백된다. 이를 위해, 역양자화기(133)는 양자화된 DCT 계수를 역양자화하고, 그에 의해 원래 DCT 계수의 버전을 대략적으로 제공한다. 이와 같은 대략적인 버전을 근거로, 역DCT (IDCT) 프로세서(135)는 예측 에러 신호를 회복한다. 가산기(110)는 보상기(113)로부터 전송된 프레임의 상기 예측 버전에 회복된 예측 에러 신호를 더하여 전송된 프레임을 재구성하고, 이는 보상기(113)에 의해 상술된 방식으로 이후 전송될 프레임을 예측하는데 사용된다.
수신 전자부품(151)은 상술된 통신 채널을 통해 전송 전자부품(131)으로부터 전송된 영상 프레임을 나타내는 신호를 수신한다. 수신된 신호는 비디오 디코더(150)에서 압축 디포맷터 (compression deformatter(153))에 의해 처리된다. 디포맷터(153)는 상술된 압축 포맷터(127)에 대한 역기능을 실행한다. 특히, 디포맷터(127)는 이동 보상기(163)로 공급될 상기의 이동 벡터 정보를 회복한다. 나머지 출력은 상술된 가변길이 엔코더(124)에 대한 역기능을 실행하는 가변길이 디코더(157)에 의해 더 처리된다. 양자화 단계 크기 정보 및 양자화된 DCT 계수로 구성된 디코더(157)의 출력은 역양자화기(167)로 제공된다. 일부 예에서 비디오 엔코더(103)가 또한 전송된 프레임에 관한 필드/프레임 정보를 제공하는 경우, 디코더(157)의 출력은 또한 이와 같은 정보로 구성된다. 필드/프레임 정보와 함께, 양자화 단계 크기 정보는 후술되는 부호화-정합 필터 배열(180)에 제공된다.
여기서, 수신기(150)내의 이동 보상기(163), 역양자화기(167), IDCT 프로세서(173), 및 가산기(170)는 전송된 프레임을 재구성하도록 전송기(103)내의 이동 보상기(113), 역양자화기(133), IDCT 프로세서(135), 및 가산기(110)와 유사하게 동작함을 주목하여야 한다. 따라서, 수신된 이동 벡터 정보를 근거로, 보상기(113)와 같이, 보상기(163)는 전송 프레임의 예측된 버전을 가산기(170)에 제공한다. 양자화된 DCT 계수 및 수신된 양자화 단계 크기를 근거로, 역양자화기(133)와 같이, 역양자화기(167)는 계수의 역양자화된 대략적인 버전을 제공한다. 이와 같은 대략적인 버전을 근거로, IDCT 프로세서(135)와 같이, IDCT 처리기(173)는 예측 에러 신호를 회복한다. 가산기(170)는 전송된 프레임을 회복하도록 보상기(163)로부터 전송된 프레임의 예측 버전에 예측 에러 신호를 더한다. 회복된 프레임은 이후 전송될 프레임의 예측 버전을 제공하도록 보상기(163)에 피드백된다.
그러나, 가산기(170)로부터 회복된 영상 프레임은 비디오 엔코더(103)에서 사용되는 MPEG 부호화 구조로부터 기인된 부호화 결함에 의해 변조된다. 이들 결함은 이와 같은 구조에서 양자화에 이어지는 DCT로 인한 것이다. 특히, 전송기(103)에서는 감산기(115)로부터의 예측 에러 신호가 프로세서(119)에 의해 DCT 변환되고, 이어서 양자화기(121)에 의해 양자화된다. 프로세서(119)로부터의 DCT 계수값이 비교적 작고 양자화 단계 크기가 비교적 커서 전송 비율을 효과적으로 줄이게 되면, 계수는 모두 0으로 양자화된다. 이는 수신기(150)에 0의 예측 에러 신호를 전송하게 만든다. 그 결과로, 수신기(150)내의 이동 보상기(163)로부터 전송된 프레임의 예측 버전은 정정되지 않고, 그에 의해 "예측 부호화" 결함을 발생시킨다. 또한, 블록 기초의 주파수 변환인 DCT를 사용함으로서, 공지된 "블록" 결함이 또한 수신된 영상 프레임에서 나타난다.
본 발명에 따라, 가산기(170)로부터 회복된 영상 프레임은 상술된 결함의 효과를 줄이도록 부호화-정합 필터 배열(180)에 의해 더 처리된다. 필터 배열(180)은 사용된 부호화 구조를 근거로 설계되고, 실시예에서는 DCT 및 양자화를 포함하는 상술된 MPEG 구조에 정합된다. 특히, 가산기(170)로부터 회복된 영상 프레임은 배열(180)내의 DCT 프로세서(183)에 의해 처리된다. 실시예의 프로세서(183)는 회복된 영상 프레임에서 이미 공지된 8 x 8 DCT를 실행한다. 그러나, 종래 기술에 숙련된 자는 비록 덜 바람직하지만 그 대신에 월시-하다마드 (Walsh-Hadamard) 변환 또는 일차원 변환과 같은 다른 변환을 실행하도록 선택할 수 있는 것으로 이해된다.
8 x 8 DCT를 실행할 때, 프로세서(183)는 먼저 회복된 영상 프레임을 8 픽셀 대 8 픽셀의 블록으로 분할한다. 각 블록은 프레임에서 하나 이상의 픽셀과 연관된다. 도 2는 (205)로 나타내지는 한 블록을 도시하는데, 이는 픽셀 A1, B1, ..., H8을 포함하고 픽셀 D4와만 연관된다. 프로세서(183)는 DCT에 따라 각 블록을 변환한다. 예를 들어, 블록(205)의 변환된 버전이 블록(207)으로, 이는 그에 대응하는 DCT 계수 a1, b1, ..., h8을 포함한다.
엔코더(103)에서 양자화된 DCT 변환을 포함하는 상기 부호화 구조를 실행하기 때문에, 블록(207)에서 0이 아닌 DCT 계수 중 가장 작은 값은 대응하는 양자화 한계값 Qij/2 보다 작을 수 없음을 인식한다. 대응하는 Qij/2 보다 더 작은 절대값을 갖는 블록(207)내의 0이 아닌 DCT 계수는 아마도 제한된 대역의 상기 통신 채널을 통과하는 DCT 프로세서(119)로부터 DCT 계수의 블록 구조로 인해 생기는 앨리어싱 (aliasing)에 의해 에러가 발생될 수 있다.
그래서, 본 발명에 따라, 비디오 디코더(150)로부터 Qij에 관한 상기 정보에 응답해, 한계값 제어기(185)는 전송된 정보를 손실시키지 않고 절대값이 대응하는 Qij/2 이하인 모든 DCT 계수를 0으로 만든다. 몇몇 계수, 즉 a1, b1, c1, d1, e1, a2, b2, c2, d2, a3, b3, 및 a4를 제외하고 블록(207)내의 모든 DCT 계수가 각각 대응하는 Qij/2 보다 작은 절대값을 갖는다고 가정하면, 제어기(185)는 그에 따라 이들 몇몇 계수를 제외한 모든 DCT 계수를 0으로 대치하여 블록(209)을 만든다. 이어서, IDCT 프로세서(187)는 블록(209)에 역 DCT를 실행하여 픽셀 A1', B1', ..., H8'로 구성된 블록(211)을 만든다. 그러나, 실시예에서는 프로세서(187)의 출력이 블록(205)과 연관된 픽셀 D4에 대응하여 블록(211)에서 픽셀 D4'로 구성된다. 이 출력은 디코더(150)로부터 회복된 프레임에서 픽셀 D4를 대치한다. 도 2의 처리는 유사하게 그와 연관된 픽셀을 대치하도록 프로세서(183)에 의해 분할된 각 다른 블록에 대해 반복된다. 대치 픽셀을 포함하는 결과의 프레임은 유리하게 실질적으로 줄어든 상기 부호화 결함의 효과로, 회복된 프레임 보다 질이 뛰어나다.
지금까지, 본 발명의 원리에 대해 설명했다. 그래서, 종래 기술에 숙련된 자는 비록 여기서는 명확히 도시되거나 설명되지 않지만, 본 발명의 정신 및 범위를 벗어나지 않고 다른 변경을 행할 수 있다.
예를 들면, 설명된 실시예에서, 본 발명에 따른 부호화-정합 필터 배열(180)은 통신 시스템(100)에서 포스트프로세서 (postprocessor)로 사용된다. 그러나, 본 발명의 배열은 또한 시스템에서 프리프로세서 (preprocessor)로 사용될 수 있는 것으로 이해된다. 도 3은 배열(180)에 유사한 부호화-정합 필터 배열(380)이 비디오 엔코더(103) 이전에서 비디오 소스(105)로부터의 영상 프레임을 나타내는 비트 스트림을 처리하는 한 시스템을 도시한다. 이러한 시스템에서, 배열(380)내의 한계값 제어기는 진폭이 대응하는 한계값 Qij/2 보다 낮은 각 영상 프레임의 모든 주파수 성분을 효과적으로 제거한다. 이와 같이 낮은 진폭을 갖는 영상 프레임에서 대부분의 주파수 성분은 전형적으로 고주파수 성분임을 주목하여야 한다. 예를 들어 때때로 날카로운 물체 경계를 나타내는 고주파수 정보를 제거하는 것은 사람눈이 본래 영상에서 엣지 및 경계쪽으로 특별한 시각 감도를 소유하기 때문에 시각적으로 영상 프레임에 현저하게 영향을 주지 않는다. 배열(380)에 의해 미리 처리된 영상 프레임을 전송하는데는 처리되지 않은 반대 부분 보다 더 좁은 대역폭이 요구되므로, 엔코더(103)에서 사용되는 더 섬세한 양자화가 부호화 결함의 효과를 더 줄이도록 허용한다. 양자화 단계 크기 제어기(303)는 이용가능한 전송 대역폭에 의해 허용되는 비트 비율에 따라 엔코더(103)에서의 양자화와 배열(380)내의 한계값 제어기에 대한 값 Qij을 결정하고, 여기서 Qij는 이러한 비트 비율에 대해 역으로 변한다.
또한, 비록 본 발명의 부호화-정합 필터 배열은 설명된 실시예에서 MPEG 부호화 구조와 사용되지만, 상기 배열은 또한 MPEG-2 구조, 이동-JPEG 구조, JPEG 구조 등과 같은 다른 영상 부호화 구조에 정합되어 사용될 수 있다.
마지막으로, 통신 시스템(100)은 여기서 다양한 전송기 기능이 이산 기능 블록에 의해 실행되는 형태로 설명된다. 그러나, 하나 이상의 블록 기능 또는 모든 기능이 예를 들어 적절하게 프로그램된 하나 이상의 프로세서에 의해 실현된 배열에서도 하나 이상의 이들 기능이 동일하게 잘 실현될 수 있다.

Claims (38)

  1. 하나 이상의 양자화 단계 크기에 따라 영상에 관한 정보의 양자화를 포함하는 부호화 처리에 의해 부호화된 영상을 처리하는 영상 처리 장치에 있어서,
    영상을 그의 표시 성분의 세트로 변환하고, 하나 이상의 양자화 단계 크기의 각각이 상기 성분 중 각 하나와 연관되게 하는 프로세서 및,
    상기 성분 중에서 선택된 것들을 세트로부터 제거하고, 선택된 각 성분은 이에 대응하는 한계값 이하의 절대값을 갖고, 상기 한계값은 상기 선택된 성분과 연관된 양자화 단계 크기의 함수가 되는 제어기를 포함하는 영상 처리 장치.
  2. 제 1 항에 있어서, 상기 영상은 MPEG 구조에 따라 부호화되는 영상 처리 장치.
  3. 제 1 항에 있어서, 상기 영상은 블록 기초의 주파수 변환에 따라 변환되는 영상 처리 장치.
  4. 제 3 항에 있어서, 상기 블록 기초의 주파수 변환은 이산 코사인 변환 (DCT)을 포함하는 영상 처리 장치.
  5. 제 1 항에 있어서, 상기 하나 이상의 양자화 단계 크기는 시간에 따라 변하는 영상 처리 장치.
  6. 제 1 항에 있어서, 상기 한계값은 연관된 양자화 단계 크기의 반과 동일한 영상 처리 장치.
  7. 제 1 항에 있어서, 상기 프로세서는 상기 제어기를 포함하는 영상 처리 장치.
  8. 선택된 주파수 성분 세트로 나타내지는 하나 이상의 영상을 전송하기 위해 처리하는 영상 처리 장치에 있어서,
    상기 영상을 수정하고, 상기 수정된 영상은 제 2 주파수 성분 세트로 나타내지고, 제 2 세트내의 각 주파수 성분은 상기 선택된 세트에 포함되게 하는 제어기 및,
    하나 이상의 양자화 단계 크기에 따라 수정된 상기 영상에 관한 선택된 정보를 양자화하고, 상기 하나 이상의 양자화 단계 크기 각각은 상기 제 2 세트내의 상기 주파수 성분 중 각 하나와 연관되고, 상기 제 2 세트에서 0이 아닌 각 주파수 성분은 0이 아닌 주파수 성분과 연관된 양자화 단계 크기의 함수인 대응하는 한계값과 적어도 동일한 절대값을 갖게 하는 양자화기를 포함하는 영상 처리 장치.
  9. 제 8 항에 있어서, 상기 선택된 정보는 수정된 상기 영상과 그의 예측 버전 사이의 차이를 나타내는 예측 에러 정보를 포함하는 영상 처리 장치.
  10. 제 9 항에 있어서, 상기 예측 에러 정보는 이를 나타내는 DCT 계수를 포함하는 영상 처리 장치.
  11. 제 8 항에 있어서, 상기 양자화기는 선형 양자화기인 영상 처리 장치.
  12. 제 8 항에 있어서, 상기 하나 이상의 양자화 단계 크기는 시간에 따라 변하는 영상 처리 장치.
  13. 제 8 항에 있어서, 상기 한계값은 상기 연관된 양자화 단계 크기의 반과 동일한 영상 처리 장치.
  14. 하나 이상의 영상에 관한 정보를 수신하는 영상 정보 수신 장치에 있어서,
    상기 영상을 회복하고, 하나 이상의 양자화 단계 크기에 따라 수신된 정보 중 적어도 일부를 역양자화하기 위한 역양자화기를 포함하는 수신기 및,
    회복된 영상 중 선택된 주파수 성분을 그로부터 제거함으로서 상기 회복된 영상을 수정하고, 선택된 각 주파수 성분은 하나 이상의 양자화 단계 크기 중 각 하나와 연관되고, 선택된 각 주파수 성분은 대응하는 한계값 이하의 절대값을 갖고, 상기 한계값은 상기 선택된 성분과 연관된 상기 양자화 단계 크기의 함수가 되는 제어기를 포함하는 영상 정보 수신 장치.
  15. 제 14 항에 있어서, 상기 수신된 정보 중 적어도 일부는 상기 영상과 그의 예측 버전 사이의 차이를 나타내는 예측 에러 정보를 포함하는 하는 영상 정보 수신 장치.
  16. 제 14 항에 있어서, 상기 선택된 주파수 성분은 DCT 계수로 나타내지는 영상 정보 수신 장치.
  17. 제 14 항에 있어서, 상기 회복된 영상은 다수의 픽셀 (pixel)을 포함하고, 상기 제어기는 상기 회복된 영상을 다수의 블록으로 분할하기 위한 프로세서를 포함하고, 각 블록은 소정의 수의 픽셀을 포함하는 영상 정보 수신 장치.
  18. 제 17 항에 있어서, 상기 각 블록은 블록에서 하나 이상의 픽셀과 연관되는 영상 정보 수신 장치.
  19. 제 18 항에 있어서, 상기 프로세서는 각각 블록과 연관된 하나 이상의 픽셀을 대치하기 위해 상기 하나 이상의 픽셀을 발생하도록 각 블록을 처리하는 영상 정보 수신 장치.
  20. 제 19 항에 있어서, 상기 발생된 하나 이상의 픽셀은 상기 수정된 회복 영상을 구성하는 영상 정보 수신 장치.
  21. 하나 이상의 양자화 단계 크기에 따라 영상에 관한 정보의 양자화를 포함하는 부호화 처리에 의해 부호화된 영상을 처리하는 영상 처리 방법에 있어서,
    상기 영상을 이의 표시 성분의 세트로 변환하고, 상기 하나 이상의 양자화 단계 크기의 각각이 상기 성분 중 각 하나와 연관되게 하는 단계 및,
    상기 성분 중에서 선택된 것을 상기 세트로부터 제거하고, 선택된 각 성분은 대응하는 한계값 이하의 절대값을 갖고, 한계값은 선택된 성분과 연관된 양자화 단계 크기의 함수가 되는 단계를 포함하는 영상 처리 방법.
  22. 제 21 항에 있어서, 상기 영상은 MPEG 구조에 따라 부호화되는 영상 처리 방법.
  23. 제 21 항에 있어서, 상기 영상은 블록 기초의 주파수 변환에 따라 변환되는 영상 처리 방법.
  24. 제 23 항에 있어서, 상기 블록 기초의 주파수 변환은 DCT를 포함하는 영상 처리 방법.
  25. 제 21 항에 있어서, 상기 하나 이상의 양자화 단계 크기는 시간에 따라 변하는 영상 처리 방법.
  26. 제 21 항에 있어서, 상기 한계값은 연관된 양자화 단계 크기의 반과 동일한 영상 처리 방법.
  27. 선택된 주파수 성분 세트로 나타내지는 하나 이상의 영상을 전송하기 위해 처리하는 영상 처리 방법에 있어서,
    상기 영상을 수정하고, 수정된 영상은 제 2 주파수 성분 세트로 나타내지고, 상기 제 2 세트내의 각 주파수 성분은 선택된 세트에 포함되게 하는 단계 및,
    하나 이상의 양자화 단계 크기에 따라 수정된 상기 영상에 관한 선택된 정보를 양자화하고, 하나 이상의 양자화 단계 크기 각각은 상기 제 2 세트내의 주파수 성분 중 각 하나와 연관되고, 상기 제 2 세트에서 0이 아닌 각 주파수 성분은 0이 아닌 주파수 성분과 연관된 양자화 단계 크기의 함수인 대응하는 한계값과 적어도 동일한 절대값을 갖게 하는 단계를 포함하는 영상 처리 방법.
  28. 제 27 항에 있어서, 상기 선택 정보는 수정된 영상과 그의 예측 버전 사이의 차이를 나타내는 예측 에러 정보를 포함하는 영상 처리 방법.
  29. 제 28 항에 있어서, 상기 예측 에러 정보는 이를 나타내는 DCT 계수를 포함하는 영상 처리 방법.
  30. 제 27 항에 있어서, 상기 하나 이상의 양자화 단계 크기는 시간에 따라 변하는 영상 처리 방법.
  31. 제 27 항에 있어서, 상기 한계값은 연관된 양자화 단계 크기의 반과 동일한 영상 처리 방법.
  32. 하나 이상의 영상에 관한 정보를 수신하는 영상 정보 수신 방법에 있어서,
    영상을 회복하는 단계와,
    하나 이상의 양자화 단계 크기에 따라 수신된 정보 중 적어도 일부를 역양자화하는 단계 및,
    상기 회복된 영상 중 선택된 주파수 성분을 그로부터 제거함으로서 회복된 영상을 수정하고, 선택된 각 주파수 성분은 하나 이상의 양자화 단계 크기 중 각 하나와 연관되고 대응하는 한계값 이하의 절대값을 갖고, 상기 한계값은 상기 선택된 성분과 연관된 상기 양자화 단계 크기의 함수가 되는 단계를 포함하는 영상 정보 수신 방법.
  33. 제 32 항에 있어서, 상기 수신된 정보 중 적어도 일부는 상기 영상과 그의 예측 버전 사이의 차이를 나타내는 예측 에러 정보를 포함하는 영상 정보 수신 방법.
  34. 제 32 항에 있어서, 상기 선택된 주파수 성분은 DCT 계수로 나타내지는 영상 정보 수신 방법.
  35. 제 32 항에 있어서, 상기 회복된 영상은 다수의 픽셀을 포함하고, 각블록이 소정의 수의 픽셀을 포함하는 다수의 블록으로 회복된 영상을 분할하는 단계를 부가로 포함하는 영상 정보 수신 방법.
  36. 제 35 항에 있어서, 각 블록은 상기 블록에서 하나 이상의 픽셀과 연관되는 영상 정보 수신 방법.
  37. 제 36 항에 있어서, 각각 블록과 연관된 하나 이상의 픽셀을 대치하기 위해 상기 하나 이상의 픽셀을 발생하도록 각 블록을 처리하는 단계를 부가로 포함하는 영상 정보 수신 방법.
  38. 제 37 항에 있어서, 상기 발생된 하나 이상의 픽셀은 수정된 상기 회복 영상을 구성하는 영상 정보 수신 방법.
KR1019990035820A 1998-08-28 1999-08-27 부호화-정합 필터 배열을 사용한 비디오 통신 시스템 및 방법 KR20000017586A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/141,949 US6459731B1 (en) 1998-08-28 1998-08-28 Technique for video communications using a coding-matched filter arrangement
US9/141,949 1998-08-28

Publications (1)

Publication Number Publication Date
KR20000017586A true KR20000017586A (ko) 2000-03-25

Family

ID=22497931

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019990035820A KR20000017586A (ko) 1998-08-28 1999-08-27 부호화-정합 필터 배열을 사용한 비디오 통신 시스템 및 방법

Country Status (6)

Country Link
US (1) US6459731B1 (ko)
EP (1) EP0987901A3 (ko)
JP (1) JP3532470B2 (ko)
KR (1) KR20000017586A (ko)
CA (1) CA2276870C (ko)
TW (1) TW444505B (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7190723B2 (en) * 2002-03-27 2007-03-13 Scientific-Atlanta, Inc. Digital stream transcoder with a hybrid-rate controller
KR100460876B1 (ko) * 2002-05-29 2004-12-09 현대자동차주식회사 전기자동차의 충전상태 검출방법
US7539248B2 (en) * 2004-04-29 2009-05-26 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7397853B2 (en) 2004-04-29 2008-07-08 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US20050243914A1 (en) * 2004-04-29 2005-11-03 Do-Kyoung Kwon Adaptive de-blocking filtering apparatus and method for mpeg video decoder
US7400679B2 (en) * 2004-04-29 2008-07-15 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7397854B2 (en) * 2004-04-29 2008-07-08 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7460596B2 (en) * 2004-04-29 2008-12-02 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7496141B2 (en) * 2004-04-29 2009-02-24 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
EP2004632B1 (en) * 2006-03-30 2014-03-12 Janssen R&D Ireland Hiv inhibiting 5-amido substituted pyrimidines
US20090304086A1 (en) * 2008-06-06 2009-12-10 Apple Inc. Method and system for video coder and decoder joint optimization
JP5334070B2 (ja) * 2009-02-13 2013-11-06 ブラックベリー リミテッド 画像処理における均衡ピクセル領域ひずみ分布を有する適合量子化
EP2396969A4 (en) * 2009-02-13 2012-12-12 Research In Motion Ltd MODIFIED ENTROPIC CODING FOR IMAGES AND VIDEOS
US8976856B2 (en) * 2010-09-30 2015-03-10 Apple Inc. Optimized deblocking filters

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4379949A (en) * 1981-08-10 1983-04-12 Motorola, Inc. Method of and means for variable-rate coding of LPC parameters
US5086488A (en) * 1989-08-19 1992-02-04 Mitsubishi Denki Kabushiki Kaisha Transform coding apparatus
JPH0767176B2 (ja) * 1990-11-28 1995-07-19 松下電器産業株式会社 符号化雑音除去フィルタ
US5333212A (en) 1991-03-04 1994-07-26 Storm Technology Image compression technique with regionally selective compression ratio
EP0535963B1 (en) * 1991-10-02 1998-06-10 Matsushita Electric Industrial Co., Ltd. Orthogonal transformation encoder
US5479211A (en) * 1992-04-30 1995-12-26 Olympus Optical Co., Ltd. Image-signal decoding apparatus
JP3245977B2 (ja) * 1992-06-30 2002-01-15 ソニー株式会社 ディジタル画像信号の伝送装置
US5724097A (en) * 1993-10-18 1998-03-03 Mitsubishi Denki Kabushiki Kaisha Adaptive quantization of video based on edge detection
US5534925A (en) 1994-05-02 1996-07-09 Cognitech Inc. Image compression by optimal reconstruction
US5754699A (en) * 1994-11-24 1998-05-19 Victor Company Of Japan, Ltd. Method of reducing mosquito noise generated during decoding process of image data and device for decoding image data using the same
JPH1051766A (ja) * 1996-08-05 1998-02-20 Mitsubishi Electric Corp 画像符号化データ変換装置
EP0848557A3 (en) 1996-11-15 1998-07-22 Texas Instruments Inc. Subband image encoding method

Also Published As

Publication number Publication date
CA2276870C (en) 2003-04-29
US6459731B1 (en) 2002-10-01
EP0987901A3 (en) 2002-01-23
EP0987901A2 (en) 2000-03-22
JP2000078578A (ja) 2000-03-14
CA2276870A1 (en) 2000-02-28
TW444505B (en) 2001-07-01
JP3532470B2 (ja) 2004-05-31

Similar Documents

Publication Publication Date Title
US6393060B1 (en) Video coding and decoding method and its apparatus
US8472729B2 (en) System and method for using pattern vectors for video and image coding and decoding
EP0561593B1 (en) Image compression apparatus
US5675666A (en) Image data compression method and apparatus with pre-processing to compensate for the blocky effect
US5719961A (en) Adaptive technique for encoder and decoder signal transformation
US6459731B1 (en) Technique for video communications using a coding-matched filter arrangement
US8085850B2 (en) Methods and apparatus for efficient encoding of image edges, motion, velocity, and detail
US6445823B1 (en) Image compression
Mohsenian et al. Edge-based subband VQ techniques for images and video
US6081552A (en) Video coding using a maximum a posteriori loop filter
JP4762486B2 (ja) マルチ・リゾルーション・ビデオ符号化および復号化
KR100198986B1 (ko) 블록킹 현상방지용 움직임 보상장치
US5861923A (en) Video signal encoding method and apparatus based on adaptive quantization technique
JPS63284974A (ja) 画像圧縮方式
Van Assche et al. Lossless compression of pre-press images using a novel colour decorrelation technique
KR100220583B1 (ko) 적응적 부호화기를 갖는 영상 부호화기
KR100229795B1 (ko) 개선된 영상 복호화 시스템
KR100287214B1 (ko) 동영상 부호화방법 및 장치
JPH06188742A (ja) 変換符号化／復号化装置
US5917946A (en) Method and apparatus for encoding an image signal having an object by using the shape thereof
Rabbani et al. An optimized image data compression technique utilized in the Kodak SV9600 still video transceiver
EP0848557A2 (en) Subband image encoding method
Guleryuz et al. Image compression with a geometrical entropy coder
Asai et al. A study of convex coders with an application to image coding
KR100209801B1 (ko) 윤곽선 정보를 이용한 영상신호 부호화 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application