KR20140074348A - 영상 복호화 장치 - Google Patents

영상 복호화 장치 Download PDF

Info

Publication number
KR20140074348A
KR20140074348A KR1020147009908A KR20147009908A KR20140074348A KR 20140074348 A KR20140074348 A KR 20140074348A KR 1020147009908 A KR1020147009908 A KR 1020147009908A KR 20147009908 A KR20147009908 A KR 20147009908A KR 20140074348 A KR20140074348 A KR 20140074348A
Authority
KR
South Korea
Prior art keywords
block
unit
intra prediction
mode
prediction
Prior art date
Application number
KR1020147009908A
Other languages
English (en)
Inventor
오수미
양문옥
Original Assignee
제닙 피티이.엘티디.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 제닙 피티이.엘티디. filed Critical 제닙 피티이.엘티디.
Publication of KR20140074348A publication Critical patent/KR20140074348A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/192—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

3개의 인트라 예측 모드들을 포함하는 MPM 그룹을 이용하여 현재 예측 유닛의 인트라 예측 모드를 유도하여 예측 블록을 생성하고, 양자화 계수 성분들을 역스캔하고, 양자화 블록을 역양자화하고 역변환하여 잔차 블록을 생성하고, 예측 블록과 잔차 블록을 이용하여 복원블록을 생성한다. 현재 블록의 사이즈는 변환 사이즈 정보에 따라 결정되고, 변환 사이즈 정보는 하나 이상의 분할 변환 유닛 플래그를 포함한다. 따라서, 인트라 예측의 거리가 짧아지고, 원본 블록과 유사한 예측 블록을 생성할 수 있어 잔차 블록의 부호화량이 감소된다. 또한 인접 인트라 예측 모드에 따라 MPM을 적응적으로 생성함으로써 인트라 예측 모드를 전송하기 위한 시그널링 비트수를 감소시킬 수 있다.

Description

영상 복호화 장치{IMAGE DECODING APPARATUS}
본 발명은 영상 복호화 장치에 관한 것으로, 보다 상세하게는 인트라 예측 모드에 변환 유닛과 동일한 사이즈의 예측 블록과 잔차 블록을 적응적으로 생성하는 장치에 관한 것이다.
H.264/MPEG-4 AVC에서는 하나의 픽쳐가 복수개의 매크로블록으로 분할되고, 인트라 예측 또는 인터 예측을 이용하여 예측 블록을 생성함으로써 각각의 매크로블록을 부호화한다. 원본 블록과 예측 블록의 차분값이 변환되어 변환블록이 생성되고, 양자화 파라미터 및 복수개의 미리 정해진 양자화 매트릭스들 중 하나의 양자화 매트릭스를 이용하여 상기 변환 블록이 양자화된다. 상기 양자화 블록의 양자화 계수는 미리 정해진 스캔 타입에 따라 스캔되어 엔트로피 부호화된다. 상기 양자화 파라미터는 매크로블록마다 조정되고, 양자화 파라미터 예측자로서 이전 양자화 파라미터를 이용하여 부호화된다.
한편, 부호화 효율을 향상시키기 위해 다양한 사이즈의 코딩 유닛을 사용들이 기술들이 소개되고 있다. 또한, 원본 블록에 보다 유사한 예측 블록을 생성하기 위해 인트라 예측모드의 수를 증가시키는 기술들도 소개되고 있다.
그러나, 인트라 예측 모드 수의 증가로 인해 인트라 예측 모드를 후호화하는데 요구되는 부호화 비트량이 증가하게 된다. 또한, 코딩 유닛의 사이즈가 커질수록, 원본 블록과 예측 블록 사이의 차분값이 증가하게 된다.
따라서, 인트라 예측 모드를 시그널링하기 위해 새로운 효과적인 방법이 요구된다. 또한, 원본 블록과 예측 블록의 차분값을 최소화하고, 잔차 블록의 부호화량을 최소화하기 위한 보다 효과적인 방법이 요구된다.
본 발명이 이루고자 하는 목적은 예측 유닛의 인트라 예측 모드를 유도하고, 변환 사이즈 정보를 이용하여 현재 블록의 사이즈를 결정하고, 상기 인트라 예측 모드에 따라 현재 블록의 예측 블록과 잔차 블록을 생성하고, 상기 예측 블록과 상기 잔차 블록을 이용하여 복원 블록을 생성하는 장치를 제공하는데 있다.
본 발명에 따른 영상 복호화 장치는 예측 유닛의 인트라 예측 모드를 유도하고, 변환 사이즈 정보를 이용하여 현재 블록의 사이즈를 결정하고, 상기 인트라 예측 모드에 따라 현재 블록의 예측 블록을 생성하고, 상기 인트라 예측 모드에 따라 현재 블록의 잔차 블록을 생성하고, 상기 예측 블록과 상기 잔차 블록을 이용하여 복원 블록을 생성하는 것을 특징으로 한다.
본 발명에 따른 장치에서는 3개의 인트라 예측 모드들을 포함하는 MPM 그룹을 이용하여 현재 예측 유닛의 인트라 예측 모드를 유도하여 예측 블록을 생성하고, 양자화 계수 성분들을 역스캔하고, 양자화 블록을 역양자화하고 역변환하여 잔차 블록을 생성하고, 예측 블록과 잔차 블록을 이용하여 복원블록을 생성한다. 현재 블록의 사이즈는 변환 사이즈 정보에 따라 결정되고, 변환 사이즈 정보는 하나 이상의 분할 변환 유닛 플래그를 포함한다. 따라서, 인트라 예측의 거리가 짧아지고, 원본 블록과 유사한 예측 블록을 생성할 수 있어 잔차 블록의 부호화량이 감소된다. 또한 인접 인트라 예측 모드에 따라 MPM을 적응적으로 생성함으로써 인트라 예측 모드를 전송하기 위한 시그널링 비트수를 감소시킬 수 있다.
도 1은 본 발명에 따른 영상 부호화 장치를 나타내는 블록도이다.
도 2는 본 발명에 따른 영상 복호화 장치를 나타내는 블록도이다.
도 3은 본 발명에 따른 인트라 예측 모드에서의 복원 블록을 생성하는 과정을 설명하는 순서도이다.
도 4는 본 발명에 따른 현재 예측 유닛의 인트라 예측 모드를 복원하는 과정을 설명하는 순서도이다.
도 5는 본 발명에 따른 인트라 예측 모드들을 설명하는 개념도이다.
도 6은 본 발명에 따른 예측 블록을 생성하는 방법을 설명하는 순서도이다.
도 7은 본 발명에 따른 현재 블록의 참조화소들의 위치를 설명하는 개념도이다.
도 8은 본 발명에 따른 잔차 블록을 생성하는 과정을 설명하는 순서도이다.
도 9는 본 발명에 따른 양자화 파라미터를 복호화하는 방법을 설명하는 순서도이다.
도 10은 본 발명에 따른 복원 블록을 생성하는 장치를 설명하는 블록도이다.
이하, 본 발명의 여러가지 실시예들을 예시적인 도면을 참조하여 상세히 설명한다. 본 발명은 다양한 변경을 가할수 있고 여러 가지 실시예를 가질 수 있는 바, 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
도 1은 본 발명에 따른 영상 부호화 장치(100)를 나타내는 블록도이다.
도 1을 참조하면, 본 발명에 따른 영상 부호화 장치(100)는 픽쳐 분할부(101), 변환부(103), 양자화부(104), 스캐닝부(105), 엔트로피 부호화부(106), 역양자화부(107), 역변환부(108), 후처리부(110), 픽쳐 저장부(111), 인트라 예측부(112), 인터 예측부(113),감산부(102) 및 가산부(109)를 포함한다.
픽쳐 분할부(101)는 픽쳐 또는 슬라이스를 복수개의 LCU(Largest Coding Unit)들로 분할하고, 상기 각각의 LCU를 하나 이상의 코딩 유닛으로 분할한다. 픽쳐 분할부(101)는 각 코딩 유닛의 예측 모드, 예측 유닛의 사이즈 및 변환 유닛의 사이즈를 결정한다.
하나의 LCU는 하나 또는 복수개의 코딩 유닛(coidng unit)을 포함한다. 상기 LCU는 분할 구조를 나타내기 위해 재귀적 쿼드 트리 구조(recursive quadtree structure)를 갖는다. 코딩 유닛의 최대 사이즈 및 최소 사이즈를 나타내는 정보가 시퀀스 파라미터 셋(sequence parameter set)에 포함된다. 상기 분할 구조는 하나 또는 복수개의 분할 코딩 유닛 플래그(split_cu_flag)들을 이용하여 표현된다. 코딩 유닛은 2Nx2N의 사이즈를 갖는다.
코딩 유닛은 하나 또는 복수개의 예측 유닛(prediction unit)을 포함한다. 인트라 예측에서는 상기 예측 유닛의 사이즈는 2Nx2N 또는 NxN이다. 인터 예측에서는 상기 예측 유닛의 사이즈는 2Nx2N, 2NxN, Nx2N 또는 NxN이다. 인터 예측에서 예측 유닛이 비대칭 파티션(asymmetric partition)이면, 상기 예측 유닛의 사이즈는 hNx2N, (2-h)Nx2N, 2NxhN 및 2Nx(2-h)N 중의 하나일 수 있다. 여기서 h는 1/2이다.
코딩 유닛은 하나 또는 복수개의 변환 유닛(transform unit)을 포함한다. 변환 유닛은 분할 구조를 나타내기 위해 재귀적 쿼드 트리 구조(recursive quadtree structure)를 갖는다. 분할 구조는 하나 또는 복수개의 분할 변환 유닛 플래그(split_tu_flag)들에 의해 표현된다. 변환 유닛의 최대 사이즈 및 최소 사이즈를 나타내는 정보가 시퀀스 파라미터 셋에 포함된다.
인트라 예측부(112)는 현재 예측 유닛의 인트라 예측모드를 결정하고, 상기 인트라 예측 모드를 이용하여 예측 블록을 생성한다. 예측 블록은 변환 유닛과 동일한 사이즈를 갖는다.
인터 예측부(113)는 픽쳐 저장부(111)에 저장되어 있는 하나 이상의 참조 픽쳐들을 이용하여 현재 예측 유닛의 움직임 정보들을 결정하고, 상기 예측 유닛의 예측 블록을 생성한다. 상기 움직임 정보들은 하나 이상의 참조 픽쳐 인덱스들과 하나 이상의 움직임 벡터들을 포함한다.
변환부(103)는 원본 블록과 예측 블록을 이용하여 생성되는 잔차 신호들을 변환하여 변환 블록을 생성한다. 잔차 신호들은 변환 유닛 단위로 변환된다. 변환 타입은 예측 모드 및 변환 유닛의 사이즈에 따라 결정된다. 변환 타입은 DCT 기반 정수 변환 또는 DST 기반 정수 변환이다. 예를 들어, 인터 예측에서는 DCT 기반 정수 변환이 사용된다. 인트라 예측에서는 상기 변환 유닛의 사이즈가 미리 정해진 사이즈보다 작으면, DST 기반 정수 변환을 사용하고, 그렇지 않으면 DCT 기반 정수 변환을 사용한다.
양자화부(104)는 상기 변환 블록을 양자화하기 위한 양자화 파라미터를 결정한다. 양자화 파라미터는 양자화 스텝 사이즈이다. 양자화 파라미터는 양자화 유닛마다 결정된다. 상기 기준 사이즈는 양자화 유닛의 최소 사이즈이다. 양자화 유닛의 사이즈는 코딩 유닛의 허용 가능한 사이즈들 중 하나이다. 코딩 유닛의 사이즈가 양자화 유닛의 최소 사이즈보다 크거나 같으면, 상기 코딩 유닛이 양자화 유닛이 된다. 복수개의 코딩 유닛이 최소 양자화 유닛에 포함될 수도 있다. 상기 양자화 유닛의 최소 사이즈는 픽쳐마다 결정되고, 상기 양자화 유닛의 최소 사이즈를 특정하는 정보는 픽쳐 파라미터 셋에 포함된다.
양자화부(104)는 양자화 파라미터 예측자를 생성하고, 양자화 파라미터로부터 양자화 파라미터 예측자를 빼서 차분 양자화 파라미터를 생성한다. 상기 차분 양자화 파라미터는 부호화되어 코딩 유닛 신텍스(syntax)에 포함된다.
상기 양자화 파라미터 예측자는 인접 코딩 유닛들의 양자화 파라미터들 및 이전 코딩 유닛의 양자화 파라미터를 이용하여 다음과 같이 생성된다.
좌측 양자화 파라미터, 상측 양자화 파라미터 및 이전 양자화 파라미터를 상기 순서대로 검색된다. 2개 이상의 양자화 파라미터들이 이용가능한 경우, 상기 순서로 검색되는 처음 2개의 이용 가능한 양자화 파라미터의 평균값이 양자화 파라미터 예측자로 설정되고, 하나의 양자화 파라미터만이 이용 가능한 경우에는 상기 이용 가능한 양자화 파라미터가 양자화 파라미터 예측자로 설정된다. 즉, 상기 좌측 및 상측 양자화 파라미터들이 모두 이용 가능하면, 상기 좌측 및 상측 양자화 파라미터들의 평균값이 상기 양자화 파라미터 예측자로 설정된다. 상기 좌측 및 상측 양자화 파라미터들 중에서 하나만이 이용 가능하면, 상기 이용 가능한 양자화 파라미터와 상기 이전 양자화 파라미터의 평균값이 상기 양자화 파라미터 예측자로 설정된다. 상기 좌측 및 상측 양자화 파라미터들이 모두 이용 가능하지 않으면, 상기 이전 양자화 파라미터가 상기 양자화 파라미터 예측자로 설정된다. 상기 평균값은 반올림한 평균값이다.
양자화부(104)는 양자화 매트릭스 및 양자화 파라미터를 이용하여 변환 블록을 양자화하여 양자화 블록을 생성한다. 양자화 블록은 역양자화부(107)와 스캐닝부(105)로 제공된다.
스캐닝부(105)는 스캔 패턴을 결정하고, 상기 스캔 패턴을 상기 양자화 블록에 적용한다. 엔트로피 부호화를 위해 CABAC(Context adaptive bianry arithmetic coding)이 사용될 경우, 상기 스캔 패턴은 다음과 같이 결정된다.
인트라 예측에서는 스캔 패턴은 상기 인트라 예측 모드 및 상기 변환 유닛의 사이즈에 의해 결정된다. 변환 유닛의 사이즈, 변환 블록의 사이즈 및 양자화 블록의 사이즈는 동일하다. 대각선 스캔(diagonal scan), 수직 스캔(vertical scan) 및 수평 스캔(horizontal scan) 중에서 스캔 패턴이 결정된다. 양자화 블록의 양자화된 변환 계수들은 중요 플래그들(significant flags), 계수 부호들(coefficient signs) 및 계수 레벨들(coefficient levels)로 분리된다. 상기 스캔 패턴이 중요 플래그들, 계수 부호들 및 계수 레벨들에 각각 적용된다. 상기 중요 플래그는 대응하는 양자화 변환 계수가 0인지 아닌지를 나타낸다. 상기 계수 부호는 0이 아닌 양자화 변환 계수의 부호를 나타낸다. 상기 계수 레벨은 0이 아닌 양자화 변환 계수의 절대값을 나타낸다.
변환 유닛의 사이즈가 제1 사이즈보다 작거나 같으면, 수직 모드 및 상기 수직 모드에 인접한 미리 정해진 개수의 인트라 예측 모드들에서는 수평 스캔이 선택되고, 수평 모드 및 상기 수평 모드에 인접한 미리 정해진 개수의 인트라 예측 모드들에서는 수직 스캔이 선택되고, 나머지의 인트라 예측 모드들에서는 대각선 스캔이 선택된다. 변환 유닛의 사이즈가 상기 제1 사이즈보다 크면, 대각선 스캔이 이용된다. 상기 제1 사이즈는 8x8이다.
인터 예측에서는 변환 유닛의 사이즈에 관계없이 미리 정해진 스캔 패턴이 사용된다. CABAC이 엔트로피 코딩에 사용되면, 상기 미리 정해진 스캔 패턴은 대각선 스캔이다.
변환 유닛의 사이즈가 제2 사이즈보다 크면, 상기 양자화 블록은 메인 서브셋과 복수개의 잔여 서브셋들로 분할되고, 상기 결정된 스캔 패턴이 각 서브셋에 적용된다. 각 서브셋의 중요 플래그들, 계수 부호들 및 계수 레벨들이 각각 상기 결정된 스캔 패턴에 따라 스캔된다. 메인 서브셋은 DC 계수를 포함하고, 잔여 서브셋들은 상기 메인 서브셋이 커버하는 영역 이외의 영역을 커버한다. 상기 제2 사이즈는 4x4이다. 서브셋의 사이즈는 4x4 블록일수도 있고, 스캔 패턴에 따라 변경될 수 있다. 상기 서브셋은 16개의 변환 계수들을 포함한다.
서브셋들을 스캔하기 위한 스캔 패턴은 상기 각 서브셋의 양자화된 변환 계수들을 스캔하기 위한 스캔 패턴과 동일하다. 각 서브셋의 양자화된 변환 계수들은 역방향으로 스캔된다. 상기 서브셋들도 역방향으로 스캔된다.
0이 아닌 마지막 계수 위치(last non-zero coefficient position)가 부호화되어 복호기로 전송된다. 0이 아닌 마지막 계수 위치는 변환 유닛 내에서의 0이 아닌 마지막 양자화된 변환 계수의 위치를 나타낸다. 넌제로 서브셋 플래그(non-zero subset flag)가 메인 서브셋과 마지막 서브셋 이외의 각 서브셋에 대해 설정된다. 상기 마지막 서브셋은 0이 아닌 마지막 계수를 커버한다. 넌제로 서브셋 플래그는 서브셋이 0이 아닌 계수들을 포함하는지 여부를 나타낸다.
역양자화부(107)는 양자화 블록의 양자화된 변환 계수들을 역양자화한다.
역변환부(108)는 역양자화 블록을 역변환하여 공간 영역이 잔차 신호들을 생성한다.
가산부(109)는 잔차 블록과 예측 블록을 더하여 복원 블록을 생성한다.
후처리부(110)는 복원된 픽쳐에서 발생하는 블록킹 아티펙트를 제거하기 위한 디블록킹 필터링 과정을 수행한다.
픽쳐 저장부(111)는 후처리부(110)로부터 후처리된 영상을 수신하고, 픽쳐 단위로 상기 영상을 저장한다. 픽쳐는 프레임 또는 필드일 수 있다.
엔트로피 부호화부(106)는 스캐닝부(105)로부터 수신되는 1차원 계수 정보, 인트라 예측부(112)로부터 수신되는 인트라 예측 정보, 인터 예측부(113)로부터 수신되는 움직임 정보 등을 엔트로피 부호화한다.
도 2는 본 발명에 따른 영상 복호화 장치(200)를 나타내는 블록도이다.
본 발명에 따른 영상 복호화 장치(200)는 엔트로피 복호화부(201), 역스캐닝부(202), 역양자화부(203), 역변환부(204), 가산부(205), 후처리부(206), 픽쳐 저장부(207), 인트라 예측부(208) 및 인터 예측부(209)를 포함한다.
엔트로피 복호화부(201)는 수신된 비트 스트림에서 인트라 예측 정보, 인터 예측 정보 및 1차원 계수 정보를 추출한다. 엔트로피 복호화부(201)는 인터 예측 정보를 인터 예측부(209)로 전송하고, 인트라 예측 정보를 인트라 예측부(208)로 전송하고, 상기 계수 정보를 역스캐닝부(202)로 전송한다.
역스캐닝부(202)는 역스캔 패턴을 사용하여 양자화 블록을 생성한다. CABAC이 엔트로피 부호화 방법으로 사용되면, 상기 역스캔 패턴은 다음과 같이 결정된다.
인트라 예측에서는, 인트라 예측 모드 및 변환 유닛의 사이즈에 의해 역스캔 패턴이 결정된다. 역스캔 패턴은 대각선 스캔, 수직 스캔 및 수평 스캔 중에서 선택된다. 상기 선택된 역스캔 패턴이 중요 플래그들, 계수 부호들 및 계수 레벨들에 각각 적용되어 양자화 블록을 생성한다.
변환 유닛의 사이즈가 상기 제1 사이즈보다 작거나 같으면, 수직 모드 및 상기 수직 모드에 인접한 미리 정해진 개수의 인트라 예측 모드들에서는 수평 스캔이 선택되고, 수평 모드 및 상기 수평 모드에 인접한 미리 정해진 개수의 인트라 예측 모드들에서는 수직 스캔이 선택되고, 나머지의 인트라 예측 모드들에서는 대각선 스캔이 선택된다. 상기 변환 유닛의 사이즈가 상기 제1 사이즈보다 크면 대각선 스캔이 이용된다. 상기 제1 사이즈는 8x8이다.
변환 유닛의 사이즈가 상기 제1 사이즈보다 크면, 모든 인트라 예측 모드들에 대각선 스캔이 적용된다.
인터 예측에서는 대각선 스캔이 사용된다.
변환 유닛의 사이즈가 제2 사이즈보다 크면, 상기 결정된 스캔 패턴에 따라 중요 플래그들, 계수 부호들 및 계수 레벨들이 서브셋 단위로 역스캔되어 서브셋들이 생성되고, 상기 서브셋들은 역스캔되어 양자화 블록을 생성한다. 상기 제2 사이즈는 4x4이다. 서브셋의 사이즈는 4x4 블록일수도 있으나, 스캔 패턴에 따라 결정되는 비정방형 블록일 수도 있다. 상기 비정방형 블록은 16개의 변환 계수들을 포함한다. 예를 들어, 상기 서브셋의 사이즈는 수평스캔시 8x2, 수직 스캔시 2x8, 대각선 스캔시 4x4이다.
각 서브셋을 생성하기 위해 사용되는 역스캔 패턴은 양자화 블록을 생성하기 위해 사용되는 역스캔 패턴과 동일한다. 중요 플래그들, 계수 부호들 및 계수 레벨들은 역방향으로 역스캔된다. 서브셋들도 역방향으로 역스캔된다.
0이 아닌 마지막 계수 위치(last non-zero position) 및 넌제로 서브셋 플래그들이 부호화기로부터 수신된다. 0이 아닌 마지막 계수 위치 및 상기 역스캔 패턴에 따라 부호화된 서브셋들의 수가 결정된다. 넌제로 서브셋 플래그는 생성될 서브셋을 선택하기 위해 사용된다. 메인 서브셋과 마직막 서브셋은 상기 역스캔 패턴에 따라 생성된다.
역양자화부(203)는 엔트로피 복호화부(201)로부터 차분 양자화 파라미터를 수신하고, 양자화 파라미터 예측자를 생성한다. 양자화 파라미터 예측자는 도 1의 양자화부(104)에 의한 동작과 동일한 과정을 통해 생성된다. 그리고나서, 역양자화부(203)는 상기 차분 양자화 파라미터와 상기 양자화 파라미터 예측자를 더하여 현재 코딩 유닛의 양자화 파라미터를 생성한다. 현재 코딩 유닛의 사이즈가 최소 양자화 유닛의 사이즈보다 크거나 같고, 현재 코딩 유닛의 차분 양자화 파라미터가 부호기로부터 수신되지 않으면, 상기 차분 양자화 파라미터는 0으로 설정된다.
역양자화부(203)는 양자화 블록을 역양자화한다.
역변환부(204)는 상기 역양자된 블록을 역변환하여 잔차 블록을 복원한다. 역변환 타입은 예측 모드 및 변환 유닛이 사이즈에 따라 결정된다. 역 변환 타입은 DCT 기반 정수 변환 또는 DST 기반 정수 변환이다. 예를 들어, 인터 예측에서는 DCT 기반 정수 변환이 사용된다. 인트라 예측에서는, 상기 변환 유닛의 사이즈가 미리 정해진 사이즈보다 작으면 DST 기반 정수 변환이 사용되고, 그렇지 않으면 DCT 기반 정수 변환이 사용된다.
인트라 예측부(208)는 수신된 인트라 예측 정보를 이용하여 현재 예측 유닛의 인트라 예측 모드를 복원하고, 상기 복원된 인트라 예측 모드에 따라 예측 블록을 생성한다.
인터 예측부(209)는 수신된 인터 예측 정보를 이용하여 현재 예측 유닛의 움직임 정보를 복원하고, 상기 움직임 정보를 이용하여 예측 블록을 생성한다.
후처리부(206)는 도 1의 후처리부(110)와 동일하게 동작한다.
픽쳐 저장부(207)는 후처리부(206)로부터 후처리된 영상을 수신하고, 픽쳐 단위로 상기 영상을 저장한다. 픽쳐는 프레임 또는 필드일 수 있다.
가산부(205)는 복원된 잔차 블록과 예측 블록을 더하여 복원 블록을 생성한다.
도 3은 본 발명에 따른 인트라 예측 모드에서의 복원 블록을 생성하는 과정을 설명하는 순서도이다.
먼저, 현재 예측 유닛의 인트라 예측 모드를 유도한다(S1100).
도 4는 본 발명에 따른 현재 예측 유닛의 인트라 예측 모드를 복원하는 과정을 설명하는 순서도이다.
수신된 비트스트림으로부터 현재 예측 유닛의 인트라 예측 파라미터들이 추출된다(S1110).
상기 인트라 예측 파라미터들은 모드 그룹 지시자 및 예측 모드 인덱스를 포함한다. 상기 모드 그룹 지시자는 현재 예측 유닛의 인트라 예측 모드가 MPM 그룹(most probable mode group)에 속하는지를 나타내는 플래그이다. 상기 플래그가 1이면, 현재 예측 유닛의 인트라 예측 모드가 MPM 그룹에 속한다. 상기 플래그가 0이면, 현재 예측 유닛의 인트라 예측 모드가 잔여 모드 그룹(residual mode group)에 속한다. 상기 잔여 모드 그룹은 상기 MPM 그룹에 속하는 인트라 예측 모드들 이외의 모드 인트라 예측 모드들을 포함한다. 상기 예측 모드 인덱스는 상기 모드 그룹 지시자에 의해 특정되는 그룹 내에서의 현재 예측 유닛의 인트라 예측 모드를 특정한다.
인접 예측 유닛들의 인트라 예측 모드들을 이용하여 MPM 그룹이 구성된다(S1120). 상기 MPM 그룹의 인트라 예측 모드들은 좌측 인트라 예측 모드 및 상측 인트라 예측 모드들에 의해 적응적으로 결정된다. 상기 좌측 인트라 예측 모드는 좌측에 인접한 예측 유닛의 인트라 예측 모드이고, 상기 상측 인트라 예측 모드는 상측에 인접한 예측 유닛의 인트라 예측 모드이다. 상기 MPM 그룹은 3개의 인트라 예측 모드들로 구성된다.
상기 좌측 또는 상측에 인접한 예측 유닛이 존재하지 않으면, 상기 좌측 또는 상측의 인접 예측 유닛들의 인트라 예측 모드는 이용 가능하지 않은 것으로 설정된다. 예를 들어, 현재 예측 유닛이 픽쳐의 좌측 또는 상측 경계에 위치하면, 좌측 또는 상측에 인접한 예측 유닛이 존재하지 않는다. 좌측 또는 상측에 인접한 예측 유닛이 다른 슬라이스 또는 다른 타일에 속하면, 좌측 또는 상측에 인접한 예측 유닛의 인트라 예측 모드들은 이용 가능하지 않은 것으로 설정된다. 좌측 또는 상측에 인접한 예측 유닛이 인터 부호화되면, 좌측 또는 상측에 인접한 예측 유닛의 인트라 예측 모드가 이용 가능하지 않은 것으로 설정된다. 상측 예측 유닛이 다른 LCU에 속하면, 상기 상측 예측에 인접한 예측 유닛의 인트라 예측 모드가 이용 가능하지 않은 것으로 설정된다.
도 5는 본 발명에 따른 인트라 예측 모드들을 설명하는 개념도이다. 도 5에 도시된 바와 같이, 인트라 예측 모드들의 수는 35개이다. DC 모드와 플래너 모드가 비방향성 모드들이고, 나머지들이 방향성 모드들이다.
좌측 인트라 예측 모드 및 상측 인트라 예측 모드가 모두 이용 가능하고 서로 다른 경우에는, 상기 좌측 인트라 예측 모드 및 상기 상측 인트라 예측 모드가 상기 MPM 그룹에 포함되고 1개의 추가 인트라 예측 모드가 상기 MPM 그룹에 추가된다. 둘 중 모드 번호가 작은 인트라 예측 모드에 인덱스 0이 할당하고, 나머지 하나에 인덱스 1이 할당된다. 또는, 좌측 인트라 예측 모드에 인덱스 0이 할당되고 상측 인트라 예측 모드에 인덱스 1이 할당될 수도 있다. 상기 추가 인트라 예측 모드는 상기 좌측 및 상측 인트라 예측 모드들에 의해 다음과 같이 결정된다.
좌측 및 상측 인트라 예측 모드들 중 하나가 비방향성 모드(non-directional mode)이고 다른 하나가 방향성 모드(directional mode)이면, 나머지 하나의 비방향성 모드가 상기 MPM 그룹에 추가된다. 예를 들어, 상기 좌측 및 상측 인트라 예측 모드들 중 하나가 DC 모드이면, 플래너 모드가 상기 MPM 그룹에 추가되고, 상기 좌측 및 상측 인트라 예측 모드들 중 하나가 플래너 모드이면, DC 모드가 상기 MPM 그룹에 추가된다. 좌측 및 상측 인트라 예측 모드들이 모두 비방향성 모드들이면, 수직 모드가 상기 MPM 그룹에 추가된다. 좌측 및 상측 인트라 예측 모드들이 모두 방향성 모드들이면, DC 모드 또는 플래너 모드가 상기 MPM 그룹에 추가된다.
좌측 인트라 예측 모드 및 상측 인트라 예측 모드들 중 하나만 이용 가능한 경우에는, 상기 이용 가능한 인트라 예측 모드가 상기 MPM 그룹에 포함되고, 2개의 추가 인트라 예측 모드들이 상기 MPM 그룹에 추가된다. 상기 2개의 추가 인트라 예측 모드들은 상기 이용 가능한 인트라 예측 모드에 의해 다음과 같이 결정된다.
상기 이용 가능한 인트라 예측 모드가 비방향성 모드이면, 나머지 하나의 비방향성 모드와 수직 모드가 상기 MPM 그룹에 추가된다. 예를 들어, 상기 이용 가능한 인트라 예측 모드가 DC 모드이면, 플래너 모드와 수직 모드가 상기 MPM 그룹에 추가된다. 상기 이용 가능한 인트라 예측 모드가 플래너 모드이면, DC 모드와 수직 모드가 상기 MPM 그룹에 추가된다. 상기 이용 가능한 인트라 예측 모드가 방향성 모드이면, 2개의 비방향성 모드(DC 모드 및 플래너 모드)가 상기 MPM 그룹에 추가된다.
좌측 인트라 예측 모드 및 상측 인트라 예측 모드가 모두 이용 가능하고 서로 같으면, 상기 이용 가능한 인트라 예측 모드가 MPM 그룹에 포함되고, 2개의 추가 인트라 예측 모드들이 상기 MPM 그룹에 추가된다. 상기 추가되는 2개의 인트라 예측 모드는 상기 이용 가능한 인트라 예측 모드에 의해 다음과 같이 결정된다.
상기 이용 가능한 인트라 예측 모드가 방향성 모드이면, 2개의 인접 방향성 모드들이 상기 MPM 그룹에 추가된다. 예를 들어, 상기 이용 가능한 인트라 예측 모드가 모드 23이면, 좌측 인접 모드(모드 1)와 우측 인접 모드(모드 13)이 상기 MPM 그룹에 추가된다. 상기 이용 가능한 인트라 예측 모드가 모드 30이면, 2개의 인접 모드들(모드 2와 모드 16)이 상기 MPM 그룹에 추가된다. 상기 이용 가능한 인트라 예측 모드가 비방향성 모드이면, 나머지 하나의 비방향성 모드와 수직 모드가 상기 MPM 그룹에 추가된다. 예를 들어, 상기 이용 가능한 인트라 예측 모드가 DC 모드이면, 플래너 모드와 수직 모드가 상기 MPM 그룹에 추가된다.
좌측 인트라 예측 모드 및 상측 인트라 예측 모드가 모두 이용가능하지 않는 경우에는, 3개의 추가 인트라 예측 모드들이 상기 MPM 그룹에 추가된다. 상기 3개의 인트라 예측 모드들은 DC 모드, 플래너 모드 및 수직 모드이다. DC 모드, 플래너 모드 및 수직 모드의 순서 또는 플래너 모드, DC 모드 및 수직 모드의 순서로 인덱스 0, 1 및 2가 상기 3개의 인트라 예측 모드에 할당된다.
상기 모드 그룹 지시자가 MPM 그룹을 나타내는지를 결정한다(S1130).
상기 모드 그룹 지시자가 상기 MPM 그룹을 나타내면, 상기 예측 모드 인덱스에 의해 특정되는 MPM 그룹 내의 인트라 예측 모드가 현재 예측 유닛의 인트라 예측 모드로 설정된다(S1140).
상기 모드 그룹 지시자가 상기 MPM 그룹을 나타내지 않으면, MPM 그룹 내의 3개의 인트라 예측 모드들이 모드 번호 순서대로 재정렬된다(S1150). MPM 그룹의 3개의 인트라 예측 모드들 중에서, 가장 작은 모드 번호를 갖는 인트라 예측 모드가 첫번째 후보자로 설정되고, 중간 모드 번호를 갖는 인트라 예측 모드가 두번째 후보자로 설정되고, 가장 큰 모드 번호를 갖는 인트라 예측 모드가 세번째 후보자로 설정된다.
상기 예측 모드 인덱스를 첫번째 후보자와 비교한다(S1160). 상기 예측 모드 인덱스가 상기 MPM그룹 내의 첫번째 후보자의 모드번호보다 크거나 같으면, 상기 예측 모드 인덱스의 값이 1만큼 증가한다. 그렇지 않으면, 상기 예측 모드 인덱스의 값은 유지된다.
상기 예측 모드 인덱스를 두번째 후보자와 비교한다(S1170). 상기 예측 모드 인덱스가 상기 MPM그룹 내의 두번째 후보자의 모드번호보다 크거나 같으면, 상기 예측 모드 인덱스의 값이 1만큼 증가한다. 그렇지 않으면, 상기 예측 모드 인덱스의 값은 유지된다.
상기 예측 모드 인덱스를 세번째 후보자와 비교한다(S1180). 상기 예측 모드 인덱스가 상기 MPM그룹 내의 세번째 후보자의 모드번호보다 크거나 같으면, 상기 예측 모드 인덱스의 값이 1만큼 증가한다. 그렇지 않으면, 상기 예측 모드 인덱스의 값은 유지된다.
상기 최종 예측 모드 인덱스가 현재 예측 유닛의 인트라 예측 모드의 모드 번호로 설정된다(S1190).
다음으로, 예측 블록을 생성하기 위해 현재 블록이 사이즈가 결정된다(S1200).
현재 블록의 사이즈는 변환 블록의 사이즈와 동일하다. 현재 블록의 사이즈는 예측 유닛의 사이즈와 변환 사이즈 정보에 의해 결정된다. 현재 블록의 예측 블록과 잔차 블록의 사이즈는 변환 유닛의 사이즈와 동일하다. 변환 사이즈 정보는 분할 구조를 나타내기 위한 하나 또는 복수개의 분할 플래그를 포함한다.
변환 유닛의 사이즈가 현재 예측 유닛이 사이즈와 같으면, 현재 예측 유닛이 현재 블록으로 설정된다.
변환 유닛의 사이즈가 현재 예측 유닛의 사이즈보다 작으면, 예측 유닛은 복수개의 서브블록을 이루어진다. 각 서브블록이 현재 블록으로 설정된다. 이 경우, 단계들 S1300, S1400 및 S1500이 예측 유닛의 첫번째 서브블록에 대해 수행된다. 다음으로, 단계들 S1300, S1400 및 S1500이 상기 예측 유닛 내의 나머지 서브블록들에 대해 복호화 순서대로 반복적으로 수행된다. 동일한 인트라 예측 모드가 상기 예측 유닛 내의 모든 서브블록들에 이용된다.
다음으로, 상기 인트라 예측 모드에 따라 예측 블록이 생성된다(S1300).
도 6은 본 발명에 따른 예측 블록을 생성하는 과정을 설명하는 순서도이다.
현재 블록의 참조 화소들이 모두 이용가능한지를 판단하고, 하나 이상의 참조화소들이 이용가능하지 않으면 참조화소들을 생성한다(S1210). 현재 블록은 현재 예측 유닛 또는 현재 예측 유닛의 서브블록이다. 상기 현재 블록의 사이즈는 변환 유닛의 사이즈이다.
도 7은 본 발명에 따른 현재 블록의 참조화소들의 위치를 설명하는 블록도이다. 도 7에 도시된 바와 같이, 현재 블록의 참조화소들은 (x=0, ..., 2N-1_, y=-1)에 위치하는 상측 참조화소들과, (x=-1, y=0, ..., 2M-1)에 위치하는 좌측 참조화소들과, (x=-1, y=-1)에 위치하는 코너 참조화소로 구성된다. N은 현재 블록의 가로의 길이이고, M은 현재 블록의 세로의 길이이다.
하나 이상이 참조화소들이 이용 가능하지 않으면, 상기 하나 이상의 참조화소들이 다음과 같이 생성된다.
모든 참조화소들이 이용 가능하지 않으면, 상수값으로 대체된다. 상기 상수값은 모든 참조화소들이 2L-1이고, L의 값은 휘도 화소의 값을 표현하는데 사용되는 비트들의 수이다.
이용 가능한 참조화소들이 이용 가능하지 않은 참조화소의 한쪽 방향에만 존재하면, 상기 이용 가능하지 않은 참조화소의 값은 상기 이용 가능하지 않은 참조화소에 가장 가까운 위치의 참조 화소의 값으로 대체된다.
이용 가능한 참조화소들이 이용 가능하지 않은 참조화소의 양쪽 방향에 모두 존재하면, 미리 정해진 방향으로 상기 이용 가능하지 않은 참조화소에 가장 가까운 위치의 참조화소의 값으로 대체된다.
상기 인트라 예측 모드 및 현재 블록의 사이즈에 기초하여 상기 참조화소들이 적응적으로 필터링된다(S1220). 현재 블록의 사이즈는 변환 블록의 사이즈이다.
DC 모드에서는 참조화소들이 필터링되지 않는다. 수직 모드 및 수평 모드에서도 참조화소들이 필터링되지 않는다. 상기 수직 모드 및 수평 모드 이외의 방향성 모드들에서는 참조화소들이 상기 현재 블록의 사이즈에 따라 적응적으로 필터링된다.
현재 블록의 사이즈가 4x4이면, 모든 인트라 예측 모드들에서 상기 참조화소들이 필터링되지 않는다. 8x8, 16x16 및 32x32의 사이즈에서는, 참조화소가 필터링되어야 하는 인트라 예측 모드의 수가 현재 블록의 사이즈가 커질수록 증가한다.
상기 복원된 인트라 예측 모드에 따라 참조 화소들을 이용하여 현재 블록의 예측 블록이 생성된다(S1230).
DC 모드에서는 (x=0, ..., N-1, y=-1)에 위치하는 N개의 참조 화소들과, (x=-1, y=0, ..., M-1)에 위치하는 M개의 참조화소들을 평균하여 예측화소들이 생성된다. 참조화소에 접하는 예측 블록의 예측 화소는 하나 또는 2개의 상기 예측 화소에 접하는 참조화소들을 이용하여 필터링된다.
수직 모드에서는 수직 참조 화소의 값을 복사하여 예측화소들이 생성된다. 좌측 참조화소에 접하는 예측 화소들은 상기 좌측 인접 참조화소와 코너 참조 화소를 이용하여 필터링된다.
수평 모드에서도 수평 참조 화소의 값을 복사하여 예측화소들이 생성된다. 상측 참조화소에 접하는 예측 화소들은 상기 상측 인접 참조화소와 코너 참조 화소를 이용하여 필터링된다.
다음으로, 상기 인트라 예측 모드에 따라서 잔차 블록이 생성된다(S1400).
도 8은 본 발명에 따른 잔차 블록을 생성하는 과정을 설명하는 순서도이다.
부호화된 잔차 신호들은 엔트로피 복호화되어 양자화 계수 정보를 생성한다(S1410). 엔트로피 코딩에 CABAC이 사용되면, 상기 양자화된 계수 정보들은 중요 플래그들, 계수 부호들 및 계수 레벨들을 포함한다. 상기 중요 플래그는 대응하는 양자화 변환 계수가 0인지 아닌지를 나타낸다. 상기 계수 부호는 0이 아닌 양자화 변환 계수의 부호를 나타내고, 상기 계수 레벨은 0이 아닌 양자화 변환 계수의 절대값을 나타낸다.
역스캔 패턴이 결정되고 상기 역스캔 패턴에 따라 양자화 블록이 생성된다(S1420). 이 단계는 도 2의 역스캔부(220)에 의해 수행된다. 따라서, 역스캔부(220)의 동작과 동일하게 역스캔 패턴이 결정되고 양자화 블록이 생성된다.
상기 양자화 블록은 양자화 파라미터를 이용하여 역양자화된다(S1430).
도 9는 본 발명에 따른 양자화 파라미터의 유도하는 과정을 설명하는 순서도이다.
양자화 유닛의 최소 사이즈가 유도된다(S1431). 양자화 유닛의 최소 사이즈는 LCU의 사이즈 또는 LCU의 서브블록의 사이즈이다. 양자화 유닛의 최소 사이즈는 픽쳐마다 결정된다. 양자화 유닛의 최소 사이즈의 깊이를 특정하는 파라미터(cu_qp_delta_enabled_info)가 PPS로부터 추출된다. 양자화 유닛의 최소 사이즈는 픽쳐마다 다음과 같이 유도된다.
Log2(MinQUSize) = Log2(MaxCUSize)-cu_qp_deltal_enabled_info
MinQUSize는 양자화 유닛의 최소 사이즈이다. MaxCUSize는 LCU의 사이즈이다. 양자화 유닛의 최소 사이즈를 유도하기 위해 하나의 파라미터만이 사용된다.
현재 코딩 유닛의 차분 양자화 파라미터(dQP)가 복원된다(S1432). dQP는 양자화 유닛마다 복원된다. 예를 들어, 현재 코딩 유닛의 사이즈가 상기 양자화 유닛의 최소 사이즈보다 크거나 같으면, 현재 코딩 유닛에 대해 dQP가 복원된다. 현재 코딩 유닛이 부호화된 dQP를 포함하지 않으면, dQP는 0으로 설정된다. 양자화 유닛이 복수개의 코딩 유닛을 포함하면, 복호화 순서에서 0이 아닌 계수를 적어도 하나 갖는 최초의 코딩 유닛이 부호화된 dQP를 포함한다.
상기 부호화된 dQP는 산술복호화되어 빈 스트링을 생성하고, 상기 빈 스트링은 dQP로 변환된다. 상기 빈 스트링은 dQP가 0인지 아닌지를 나타내는 빈을 포함한다. dQP가 0이 아니면, 상기 빈 스트링은 dQP의 부호를 나타내는 빈과 dQP의 절대값을 나타내는 빈 스트링을 포함한다.
현재 코딩 유닛의 상기 양자화 파라미터 예측자가 생성된다(S1433). 상기 양자화 파라미터 예측자는 도 2의 역양자화부(230)의 동작과 동일하게 생성된다.
양자화 유닛이 복수개의 코딩 유닛을 포함하면, 복호화 순서상 첫번째 코딩 유닛의 양자화 파라미터 예측자가 생성되고, 상기 생성된 양자화 파라미터 예측자가 상기 양자화 유닛내의 모든 양자화 유닛들에 사용된다.
dQP와 상기 양자화 파라미터 예측자를 이용하여 양자화 파라미터가 생성된다(S1434).
한편, 사용자 정의 양자화 매트릭스도 복원된다. 사용자 정의 양자화 매트릭스들의 셋이 부호기로부터 시퀀스 파라미터 셋 또는 픽쳐 파라미터 셋을 통해 수신된다. 상기 사용자 정의 양자화 매트릭스는 역 DPCM을 이용하여 복원된다. 상기 DPCM에 대각선 스캔이 사용된다. 상기 사용자 정의 양자화 매트릭스의 크기가 8x8보다 크면, 상기 사용자 정의 양자화 매트릭스는 수신된 8x8 양자화 매트릭스의 계수들을 업 샘플링하여 복원된다. 상기 사용자 정의 양자화 매트릭스의 DC 계수는 시퀀스 파라미터 셋 또는 픽쳐 파라미터 셋으로부터 추출될 수 있다. 예를 들어, 상기 사용자 정의 양자화 매트릭스의 사이즈가 16x16이면, 수신된 8x8 양자화 매트릭스의 계수들이 1:4 업샘플링을 사용하여 업샘플링된다.
상기 역양자화 블록을 역변환하여 잔차 블록이 생성된다(S1440). 역변환 타입은 예측 모드 및 변환 유닛의 사이즈에 따라 결정된다. 변환 타입은 DCT 기반 정수 변환 또는 DST 기반 정수 변환이다. 인트라 예측에서는 상기 변환 유닛의 사이즈가 미리 정해진 사이즈보다 작으면, DST 기반 정수 변환을 사용하고, 그렇지 않으면 DCT 기반 정수 변환을 사용한다.
다음으로, 상기 예측 블록과 상기 잔차 블록을 가산하여 복원 블록이 생성된다(S1500).
도 10은 본 발명에 따른 복원 블록을 생성하는 장치(300)를 설명하는 블록도이다.
도 10에 도시된 바와 같이, 본 발명에 따른 장치(300)는 인트라 예측 모드 유도부(310), 예측 사이즈 결정부(320), 예측 블록 생성부(330), 잔차 블록 생성부(340) 및 복원 블록 생성부(350)를 포함한다.
*인트라 예측 모드 유도부(310)는 현재 예측 유닛의 인트라 예측 모드를 유도한다. 인트라 예측 모드 유도부(310)는 도 4에 도시된 과정과 동일한 과정으로 인트라 예측 모드를 유도한다.
예측 사이즈 결정부(320)는 현재 예측 유닛의 사이즈와 변환 사이즈 정보를 이용하여 현재 블록의 사이즈를 결정한다. 현재 블록의 사이즈는 변환 유닛의 사이즈와 동일하다. 현재 블록의 예측 블록 및 잔차 블록은 변환 유닛의 사이즈를 갖는다. 상기 변환 사이즈 정보에 기초하여 현재 예측 유닛 또는 현재 예측 유닛의 서브블록이 현재 블록으로 설정된다.
예측 블록 생성부(330)는 상기 인트라 예측 모드를 이용하여 현재 블록의 예측 블록을 생성한다, 예측 블록 생성부(330)는 참조화소 생성기(331), 참조화소 필터(332) 및 예측 블록 생성기(333)를 포함한다.
참조화소 생성기(331)는 하나 이상의 참조화소들이 이용가능하지 않으면 참조화소들을 생성한다. 모든 참조화소들이 이용 가능하지 않으면, 모든 참조화소들이 2L-1의 값으로 대체된다. L의 값은 휘도 화소의 값을 표현하는데 사용되는 비트들의 수이다. 이용 가능한 참조화소들이 이용 가능하지 않은 참조화소의 한쪽 방향에만 존재하면, 상기 이용 가능하지 않은 참조화소의 값은 상기 이용 가능하지 않은 참조화소에 가장 가까운 위치의 참조 화소의 값으로 대체된다. 이용 가능한 참조화소들이 이용 가능하지 않은 참조화소의 양쪽 방향에 모두 존재하면, 미리 정해진 방향으로 상기 이용 가능하지 않은 참조화소에 가장 가까운 위치의 참조화소의 값으로 대체된다.
참조화소 필터(332)는 상기 인트라 예측 모드 및 변환 유닛의 사이즈에 기초하여 상기 참조화소들을 적응적으로 필터링한다.
DC 모드에서는 참조화소들이 필터링되지 않는다. 수직 모드 및 수평 모드에서도 참조화소들이 필터링되지 않는다. 상기 수직 모드 및 수평 모드 이외의 방향성 모드들에서는 참조화소들이 상기 현재 블록의 사이즈에 따라 적응적으로 필터링된다.
현재 블록의 사이즈가 4x4이면, 모든 인트라 예측 모드들에서 상기 참조화소들이 필터링되지 않는다. 8x8, 16x16 및 32x32의 사이즈에서는, 참조화소가 필터링되어야 하는 인트라 예측 모드의 수가 현재 블록의 사이즈가 커질수록 증가한다. 예를 들어, 수직 모드 및 상기 수직모드에 인접하는 미리 정해진 개수의 인트라 예측 모드들에서는 참조화소들이 필터링되지 않는다. 수평 모드 및 상기 수평 모드에 인접한 상기 미리 정해진 개수의 인트라 예측모드드에서는 참조화소들이 필터링되지 않는다. 상기 미리 정해진 개수는 0에서 7 중 하나이고 현재 블록의 사이즈가 커질수록 감소한다.
예측블록 생성기(333)는 상기 인트라 예측 모드에 따라 참조 화소들을 이용하여 현재 블록의 예측 블록을 생성한다.
DC 모드에서는, (x=0, ..., N-1, y=-1)에 위치하는 N개의 참조 화소들과, (x=-1, y=0, ..., M-1)에 위치하는 M개의 참조화소들을 평균하여 예측 블록의 예측 화소들을 생성한다. 그리고, 참조 화소에 접하는 예측 화소들은 상기 예측 화소에 접하는 하나 또는 두개의 참조화소들을 이용하여 필터링된다.
수직 모드에서는, 수직 참조 화소의 값을 복사하여 예측 화소를 생성된다. 그리고, 좌측 참조화소에 접하는 예측 화소들은 좌측 인접 참조화소와 코너 참조 화소를 이용하여 필터링된다.
수평 모드에서는, 수평 참조 화소의 값을 복사하여 예측 화소를 생성된다. 그리고, 상측 참조화소에 접하는 예측 화소들은 좌측 인접 참조화소와 코너 참조 화소를 이용하여 필터링된다.
잔차 블록 생성부(340)는 상기 인트라 예측 모드를 이용하여 현재 블록의 잔차 블록을 생성한다. 도 8에 도시된 과정과 동일한 과정이 상기 잔차 블록 생성부(340)에 의해 행해진다.
복원 블록 생성부(350) 상기 예측 블록과 상기 잔차 블록을 가산하여 현재 블록의 복원 블록을 생성한다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
104 : 양자화부

Claims (2)

  1. 영상 복호화 장치에 있어서,
    현재 예측 유닛의 좌측 및 상측 인트라 예측 모드들에 의해 결정되는 3개의 인트라 예측 모드들을 포함하는 MPM 그룹을 이용하여 현재 예측 유닛의 인트라 예측 모드를 유도하고, 현재 블록의 예측 블록을 생성하는 인트라 예측부;
    양자화 계수 성분들을 역스캔하여 양자화 블록을 생성하는 역스캐닝부;
    양자화 파라미터를 이용하여 상기 양자화 블록을 역양자화하여 변환 블록을 생성하는 역양자화부;
    상기 변환 블록을 역변환하여 잔차 블록을 생성하는 역변환부; 및
    상기 예측 블록과 상기 잔차 블록을 이용하여 복원블록을 생성하는 가산부;를 포함하고,
    상기 현재 블록의 사이즈는 변환 사이즈 정보에 따라 결정되고, 상기 변환 사이즈 정보는 하나 이상의 분할 변환 유닛 플래그를 포함하는 것을 특징으로 하는 장치.
  2. 제1항에 있어서, 모드 그룹 지시자가 MPM 그룹을 나타내지 않으면 인트라 예측 모드 인덱스와 상기 MPM 그룹 내의 3개의 인트라 예측 모드들을 비교하여 현재 예측 유닛의 인트라 예측 모드를 결정하는 것을 특징으로 하는 장치.
KR1020147009908A 2011-11-04 2012-11-02 영상 복호화 장치 KR20140074348A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020110114609 2011-11-04
KR1020110114609A KR20130049525A (ko) 2011-11-04 2011-11-04 잔차 블록 복원을 위한 역변환 방법
PCT/CN2012/083994 WO2013064099A1 (en) 2011-11-04 2012-11-02 Method of generating reconstructed block

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020147009904A Division KR20140070598A (ko) 2011-11-04 2012-11-02 복원 블록 생성 방법

Publications (1)

Publication Number Publication Date
KR20140074348A true KR20140074348A (ko) 2014-06-17

Family

ID=48191360

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020110114609A KR20130049525A (ko) 2011-11-04 2011-11-04 잔차 블록 복원을 위한 역변환 방법
KR1020147009908A KR20140074348A (ko) 2011-11-04 2012-11-02 영상 복호화 장치
KR1020147009907A KR20140066760A (ko) 2011-11-04 2012-11-02 영상 복호화 장치
KR1020147009904A KR20140070598A (ko) 2011-11-04 2012-11-02 복원 블록 생성 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020110114609A KR20130049525A (ko) 2011-11-04 2011-11-04 잔차 블록 복원을 위한 역변환 방법

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020147009907A KR20140066760A (ko) 2011-11-04 2012-11-02 영상 복호화 장치
KR1020147009904A KR20140070598A (ko) 2011-11-04 2012-11-02 복원 블록 생성 방법

Country Status (29)

Country Link
US (8) US9014262B2 (ko)
EP (5) EP3379492A1 (ko)
JP (6) JP5789343B2 (ko)
KR (4) KR20130049525A (ko)
CN (8) CN107770535B (ko)
AU (5) AU2012331601B2 (ko)
BR (4) BR122020014282B1 (ko)
CA (7) CA2913566C (ko)
CY (1) CY1120400T1 (ko)
DK (1) DK2774122T3 (ko)
ES (2) ES2881980T3 (ko)
HR (1) HRP20181016T1 (ko)
HU (2) HUE054637T2 (ko)
IL (5) IL231705A (ko)
IN (1) IN2014CN03908A (ko)
LT (1) LT2774122T (ko)
MX (7) MX340475B (ko)
MY (6) MY190530A (ko)
NO (1) NO2774122T3 (ko)
PE (1) PE20142032A1 (ko)
PL (2) PL3346447T3 (ko)
PT (1) PT2774122T (ko)
RS (1) RS57282B1 (ko)
RU (5) RU2710995C2 (ko)
SG (2) SG11201400674SA (ko)
SI (1) SI2774122T1 (ko)
TW (6) TWI558170B (ko)
WO (1) WO2013064099A1 (ko)
ZA (2) ZA201600849B (ko)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5972888B2 (ja) 2011-09-29 2016-08-17 シャープ株式会社 画像復号装置、画像復号方法および画像符号化装置
MX353235B (es) 2011-09-29 2018-01-08 Sharp Kk Star Dispositivo de decodificación de imágenes, método de decodificación de imágenes y dispositivo de codificación de imágenes.
KR20240014614A (ko) * 2011-10-18 2024-02-01 엘지전자 주식회사 인트라 예측 방법 및 그 장치
EP3783898A1 (en) * 2011-10-24 2021-02-24 Innotive Ltd Methods for image encoding and decoding using intra prediction
HUE051695T2 (hu) * 2011-10-24 2021-03-29 Innotive Ltd Képdekódoló készülék
KR20130049522A (ko) 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
US10277915B2 (en) * 2011-11-07 2019-04-30 Qualcomm Incorporated Signaling quantization matrices for video coding
KR20130050407A (ko) 2011-11-07 2013-05-16 오수미 인터 모드에서의 움직임 정보 생성 방법
CN108184121A (zh) 2011-12-05 2018-06-19 Lg 电子株式会社 帧内预测的方法和设备
CN108712650A (zh) 2012-06-29 2018-10-26 韩国电子通信研究院 视频解码方法、视频编码方法和计算机可读介质
US9380307B2 (en) * 2012-11-19 2016-06-28 Qualcomm Incorporated Method and system for intra base layer (BL) transform in video coding
US11470339B2 (en) * 2013-08-27 2022-10-11 Qualcomm Incorporated Residual prediction for intra block copying
CN104219531B (zh) * 2014-09-29 2018-02-06 北方工业大学 基于线状帧内块拷贝的hevc屏幕内容编码
JP6671339B2 (ja) * 2015-02-27 2020-03-25 Kddi株式会社 符号化装置及び復号装置
US9769499B2 (en) * 2015-08-11 2017-09-19 Google Inc. Super-transform video coding
WO2017030418A1 (ko) * 2015-08-19 2017-02-23 엘지전자(주) 다중 그래프 기반 모델에 따라 최적화된 변환을 이용하여 비디오 신호를 인코딩/ 디코딩하는 방법 및 장치
US10547854B2 (en) * 2016-05-13 2020-01-28 Qualcomm Incorporated Neighbor based signaling of intra prediction modes
KR20220129685A (ko) * 2016-09-05 2022-09-23 엘지전자 주식회사 영상 부호화/복호화 방법 및 이를 위한 장치
WO2018061550A1 (ja) * 2016-09-28 2018-04-05 シャープ株式会社 画像復号装置及び画像符号化装置
US10506228B2 (en) 2016-10-04 2019-12-10 Qualcomm Incorporated Variable number of intra modes for video coding
US10728578B2 (en) 2017-03-06 2020-07-28 Sony Corporation Bias minimization for successive image reconstruction based on embedded codec circuitry
RU2746706C1 (ru) 2017-04-13 2021-04-19 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ и устройство кодирования/декодирования изображений
WO2018205914A1 (en) * 2017-05-10 2018-11-15 Mediatek Inc. Method and apparatus of reordering motion vector prediction candidate set for video coding
KR20230152835A (ko) * 2017-10-18 2023-11-03 삼성전자주식회사 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
GB2567861A (en) 2017-10-27 2019-05-01 Sony Corp Image data encoding and decoding
WO2019172676A1 (ko) 2018-03-08 2019-09-12 삼성전자 주식회사 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
EP3777144A4 (en) * 2018-03-30 2021-12-22 Hulu, LLC SIGNALING OF INTRA PREDICTION MODE FOR VIDEO ENCODING
US10893285B2 (en) * 2018-06-29 2021-01-12 FG Innovation Company Limited Device and method for coding video data based on one or more reference lines
US11516506B2 (en) * 2018-10-05 2022-11-29 Lg Electronics Inc. Method and apparatus for processing image service
US11516507B2 (en) * 2018-10-12 2022-11-29 Intellectual Discovery Co., Ltd. Image encoding/decoding methods and apparatuses
US11159789B2 (en) 2018-10-24 2021-10-26 City University Of Hong Kong Generative adversarial network based intra prediction for video coding
CN111263156B (zh) * 2019-02-20 2022-03-25 北京达佳互联信息技术有限公司 视频解码方法、视频编码方法及装置
CN117241014A (zh) * 2019-06-05 2023-12-15 华为技术有限公司 Mpm列表构建方法、色度块的帧内预测模式获取方法及装置
CN114270827A (zh) * 2019-06-24 2022-04-01 Lg电子株式会社 利用色度块的最大变换大小设定的图像编码/解码方法和设备及发送比特流的方法
EP3965416B1 (en) 2020-09-08 2022-08-03 Axis AB Method and device for intra-coding an image frame

Family Cites Families (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7236524B2 (en) * 2002-05-28 2007-06-26 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode communication
JP5017086B2 (ja) * 2002-07-15 2012-09-05 日立コンシューマエレクトロニクス株式会社 動画像復号化方法
JP2006005438A (ja) * 2004-06-15 2006-01-05 Sony Corp 画像処理装置およびその方法
KR100621581B1 (ko) * 2004-07-15 2006-09-13 삼성전자주식회사 기초 계층을 포함하는 비트스트림을 프리디코딩,디코딩하는 방법, 및 장치
CN100348051C (zh) * 2005-03-31 2007-11-07 华中科技大学 一种增强型帧内预测模式编码方法
KR100678911B1 (ko) * 2005-07-21 2007-02-05 삼성전자주식회사 방향적 인트라 예측의 적용을 확장하여 비디오 신호를인코딩하고 디코딩하는 방법 및 장치
KR101311402B1 (ko) * 2006-03-23 2013-09-25 삼성전자주식회사 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
CN101087427B (zh) * 2006-06-06 2011-04-06 北京大学深圳研究生院 一种h.264标准的帧内预测模式选择方法
KR100927733B1 (ko) * 2006-09-20 2009-11-18 한국전자통신연구원 잔여계수의 상관성에 따라 변환기를 선택적으로 이용한부호화/복호화 장치 및 그 방법
US8275039B2 (en) 2006-11-07 2012-09-25 Samsung Electronics Co., Ltd. Method of and apparatus for video encoding and decoding based on motion estimation
TW200830881A (en) * 2007-01-10 2008-07-16 Beyond Innovation Tech Co Ltd Method for processing images
JP2008193627A (ja) * 2007-01-12 2008-08-21 Mitsubishi Electric Corp 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法
JP5026092B2 (ja) * 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
US8233537B2 (en) * 2007-03-19 2012-07-31 Texas Instruments Incorporated Efficient implementation of H.264 4 by 4 intra prediction on a VLIW processor
EP2076049A4 (en) * 2007-03-28 2011-09-14 Panasonic Corp DECODING CIRCUIT, DECODING PROCESS, CODING CIRCUIT, AND CODING METHOD
US20090147849A1 (en) * 2007-12-07 2009-06-11 The Hong Kong University Of Science And Technology Intra frame encoding using programmable graphics hardware
KR100940444B1 (ko) * 2007-12-18 2010-02-10 한국전자통신연구원 공간적 에지 검출을 이용한 인트라 예측 모드 구성 방법
US20090161757A1 (en) * 2007-12-21 2009-06-25 General Instrument Corporation Method and Apparatus for Selecting a Coding Mode for a Block
US8542730B2 (en) * 2008-02-22 2013-09-24 Qualcomm, Incorporated Fast macroblock delta QP decision
KR101591825B1 (ko) * 2008-03-27 2016-02-18 엘지전자 주식회사 비디오 신호의 인코딩 또는 디코딩 방법 및 장치
US8897359B2 (en) * 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
US8634456B2 (en) * 2008-10-03 2014-01-21 Qualcomm Incorporated Video coding with large macroblocks
US8514942B2 (en) * 2008-12-31 2013-08-20 Entropic Communications, Inc. Low-resolution video coding content extraction
WO2010131903A2 (en) * 2009-05-12 2010-11-18 Lg Electronics Inc. Method and apparatus for processing a video signal
CN104853204A (zh) * 2009-07-01 2015-08-19 汤姆森特许公司 用于视频编码器和解码器的方法和装置
CN101621692B (zh) * 2009-07-27 2011-04-20 宁波大学 一种基于预测模式的h.264/avc视频信息隐藏方法
KR101452860B1 (ko) * 2009-08-17 2014-10-23 삼성전자주식회사 영상의 부호화 방법 및 장치, 영상 복호화 방법 및 장치
KR101507344B1 (ko) * 2009-08-21 2015-03-31 에스케이 텔레콤주식회사 가변 길이 부호를 이용한 인트라 예측모드 부호화 방법과 장치, 및 이를 위한기록 매체
KR20110065089A (ko) * 2009-12-09 2011-06-15 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
KR101487687B1 (ko) * 2010-01-14 2015-01-29 삼성전자주식회사 큰 크기의 변환 단위를 이용한 영상 부호화, 복호화 방법 및 장치
US8902978B2 (en) * 2010-05-30 2014-12-02 Lg Electronics Inc. Enhanced intra prediction mode signaling
CN101854551B (zh) * 2010-06-08 2012-08-15 浙江大学 帧内预测模式编解码方法及装置
US9661338B2 (en) * 2010-07-09 2017-05-23 Qualcomm Incorporated Coding syntax elements for adaptive scans of transform coefficients for video coding
US9378185B2 (en) * 2010-09-30 2016-06-28 Texas Instruments Incorporated Transform and quantization architecture for video coding and decoding
US20120230418A1 (en) * 2011-03-08 2012-09-13 Qualcomm Incorporated Coding of transform coefficients for video coding
US9667987B2 (en) 2011-03-10 2017-05-30 Futurewei Technologies, Inc. Using multiple prediction sets to encode extended unified directional intra mode numbers for robustness
US9654785B2 (en) * 2011-06-09 2017-05-16 Qualcomm Incorporated Enhanced intra-prediction mode signaling for video coding using neighboring mode
GB2494468B (en) 2011-09-12 2014-01-15 Canon Kk Method and device for encoding or decoding information representing prediction modes
US9363511B2 (en) * 2011-09-13 2016-06-07 Mediatek Singapore Pte. Ltd. Method and apparatus for Intra mode coding in HEVC
CN107181956B (zh) 2011-10-07 2020-02-21 英迪股份有限公司 对视频信号进行解码的方法
HUE051695T2 (hu) * 2011-10-24 2021-03-29 Innotive Ltd Képdekódoló készülék
HUE056519T2 (hu) * 2011-10-24 2022-02-28 Innotive Ltd Eljárás és készülék intra predikciósmód dekódolására
EP3783898A1 (en) * 2011-10-24 2021-02-24 Innotive Ltd Methods for image encoding and decoding using intra prediction
KR20130049522A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
KR20130049523A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
KR20130049524A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법

Also Published As

Publication number Publication date
LT2774122T (lt) 2018-06-11
CA2976066C (en) 2019-12-03
IL247674A0 (en) 2016-11-30
CN107770534B (zh) 2020-08-04
US9497463B2 (en) 2016-11-15
JP5789343B2 (ja) 2015-10-07
CA2976066A1 (en) 2013-05-10
ZA201600847B (en) 2017-05-31
MX356330B (es) 2018-05-24
EP3364373A1 (en) 2018-08-22
CA2913567C (en) 2017-09-26
CN107734334A (zh) 2018-02-23
US9497462B2 (en) 2016-11-15
CA2849028C (en) 2016-01-26
RU2016142728A (ru) 2018-12-17
EP3379492A1 (en) 2018-09-26
US20150189274A1 (en) 2015-07-02
AU2012331601B2 (en) 2016-02-18
TW202037158A (zh) 2020-10-01
CN107770534A (zh) 2018-03-06
US9344728B2 (en) 2016-05-17
CN107682696B (zh) 2020-06-23
US20170041603A1 (en) 2017-02-09
RU2016142729A (ru) 2018-12-17
CA3111640C (en) 2023-10-31
BR122020014282B1 (pt) 2021-07-20
AU2016203216A1 (en) 2016-06-09
RU2711467C2 (ru) 2020-01-17
IL247675B (en) 2018-04-30
CN107682697A (zh) 2018-02-09
CN107682697B (zh) 2020-06-09
CA3212893A1 (en) 2013-05-10
RU2016142729A3 (ko) 2019-11-29
AU2016203214A1 (en) 2016-06-09
CA2913567A1 (en) 2013-05-10
AU2016203217B2 (en) 2017-12-14
CA3057770A1 (en) 2013-05-10
RU2604340C2 (ru) 2016-12-10
EP3346447B1 (en) 2021-04-28
RU2014111828A (ru) 2015-12-10
JP6367413B2 (ja) 2018-08-01
US20150189275A1 (en) 2015-07-02
RU2016142727A (ru) 2018-12-18
CN107682696A (zh) 2018-02-09
BR122020014298B1 (pt) 2021-07-20
PE20142032A1 (es) 2014-12-17
MX340477B (es) 2016-07-08
US10015489B2 (en) 2018-07-03
JP6116626B2 (ja) 2017-04-19
CN107613293A (zh) 2018-01-19
MX340475B (es) 2016-07-08
NO2774122T3 (ko) 2018-09-08
CN107809640A (zh) 2018-03-16
AU2016203215B2 (en) 2017-12-14
MY190516A (en) 2022-04-26
US9014262B2 (en) 2015-04-21
TWI699992B (zh) 2020-07-21
CN107770535A (zh) 2018-03-06
US10623732B2 (en) 2020-04-14
RU2016142725A (ru) 2018-12-17
EP3364372A1 (en) 2018-08-22
PT2774122T (pt) 2018-07-03
AU2016203216B2 (en) 2017-12-14
JP2015195616A (ja) 2015-11-05
BR122020014293B1 (pt) 2021-07-20
AU2016203217A1 (en) 2016-06-09
US20200228799A1 (en) 2020-07-16
ES2881980T3 (es) 2021-11-30
CN107770535B (zh) 2020-07-14
IL247674B (en) 2019-09-26
DK2774122T3 (en) 2018-07-16
KR20140070598A (ko) 2014-06-10
IL231705A (en) 2016-09-29
CA2913566C (en) 2018-04-10
CN107734334B (zh) 2020-07-24
CN107613293B (zh) 2020-10-20
TWI715506B (zh) 2021-01-01
MX2014003912A (es) 2014-07-28
IL231705A0 (en) 2014-05-28
CN103096067A (zh) 2013-05-08
HUE037565T2 (hu) 2018-09-28
TWI558170B (zh) 2016-11-11
ES2669502T3 (es) 2018-05-28
US20180288412A1 (en) 2018-10-04
RU2016142728A3 (ko) 2019-10-31
MY190515A (en) 2022-04-26
JP2015195615A (ja) 2015-11-05
IL247673B (en) 2018-04-30
MX2018006177A (es) 2023-03-06
BR122020014288B1 (pt) 2021-07-13
EP2774122B1 (en) 2018-04-11
SI2774122T1 (en) 2018-06-29
CA3111640A1 (en) 2013-05-10
RU2710995C2 (ru) 2020-01-14
RU2016142725A3 (ko) 2019-12-02
IL247676A (en) 2017-10-31
ZA201600849B (en) 2017-05-31
AU2012331601A1 (en) 2014-04-10
AU2016203214B2 (en) 2018-01-18
MX340476B (es) 2016-07-08
JP2014534751A (ja) 2014-12-18
JP6116625B2 (ja) 2017-04-19
RU2710996C2 (ru) 2020-01-14
SG11201400674SA (en) 2014-04-28
JP2017130969A (ja) 2017-07-27
HUE054637T2 (hu) 2021-09-28
TW201644274A (zh) 2016-12-16
AU2016203215A1 (en) 2016-06-09
US20150195530A1 (en) 2015-07-09
US20150189273A1 (en) 2015-07-02
RU2711306C2 (ru) 2020-01-16
WO2013064099A1 (en) 2013-05-10
MY190530A (en) 2022-04-27
TW202013959A (zh) 2020-04-01
JP2015195614A (ja) 2015-11-05
CN107809640B (zh) 2020-06-09
PL2774122T3 (pl) 2018-09-28
US20140247868A1 (en) 2014-09-04
TWI603610B (zh) 2017-10-21
MY170819A (en) 2019-08-30
JP6118374B2 (ja) 2017-04-19
TW201921926A (zh) 2019-06-01
EP2774122A4 (en) 2015-07-29
US10917640B2 (en) 2021-02-09
PL3346447T3 (pl) 2021-11-29
KR20130049525A (ko) 2013-05-14
TW201743608A (zh) 2017-12-16
CA2849028A1 (en) 2013-05-10
TWI684350B (zh) 2020-02-01
MY190529A (en) 2022-04-27
SG10201607196UA (en) 2016-10-28
EP2774122A1 (en) 2014-09-10
JP6101316B2 (ja) 2017-03-22
CA2913566A1 (en) 2013-05-10
TW201342936A (zh) 2013-10-16
CA3057770C (en) 2021-04-27
TWI650001B (zh) 2019-02-01
EP3346447A1 (en) 2018-07-11
KR20140066760A (ko) 2014-06-02
HRP20181016T1 (hr) 2018-11-02
CN103096067B (zh) 2017-11-28
CY1120400T1 (el) 2019-07-10
RS57282B1 (sr) 2018-08-31
US9503726B2 (en) 2016-11-22
JP2015195617A (ja) 2015-11-05
RU2016142727A3 (ko) 2019-10-31
MX340474B (es) 2016-07-08
MY190514A (en) 2022-04-26
IN2014CN03908A (ko) 2015-10-16

Similar Documents

Publication Publication Date Title
JP6367413B2 (ja) 復元ブロック生成方法
KR101472971B1 (ko) 양자화 블록을 생성하는 방법
KR20140090155A (ko) 영상 복호화 장치
KR20140066240A (ko) 영상 부호화 장치

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application