KR20210013662A - 평면 간 예측 - Google Patents

평면 간 예측 Download PDF

Info

Publication number
KR20210013662A
KR20210013662A KR1020217002778A KR20217002778A KR20210013662A KR 20210013662 A KR20210013662 A KR 20210013662A KR 1020217002778 A KR1020217002778 A KR 1020217002778A KR 20217002778 A KR20217002778 A KR 20217002778A KR 20210013662 A KR20210013662 A KR 20210013662A
Authority
KR
South Korea
Prior art keywords
arrangement
simple connection
information
coding parameters
regions
Prior art date
Application number
KR1020217002778A
Other languages
English (en)
Other versions
KR102355155B1 (ko
Inventor
하이너 키르히호퍼
마르틴 윈켄
하이코 슈바르츠
데트레브 마르페
토마스 위건드
Original Assignee
지이 비디오 컴프레션, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=43305051&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20210013662(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 지이 비디오 컴프레션, 엘엘씨 filed Critical 지이 비디오 컴프레션, 엘엘씨
Priority to KR1020227001860A priority Critical patent/KR102405997B1/ko
Publication of KR20210013662A publication Critical patent/KR20210013662A/ko
Application granted granted Critical
Publication of KR102355155B1 publication Critical patent/KR102355155B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

더 나은 율 왜곡 비율은, 디코더에 평면 간 예측 정보를 시그널링하기 위한 필요로부터 기인한 추가적인 오버헤드에 불구하고, 리던던시 감소의 목적을 위한 이용에 사용되는 다른 평면들의 코딩 파라미터들 간의 연관관계를 만듬에 의해 성취된다. 특히, 평면 간 예측을 사용하거나, 복수의 평면들 각각을 위해 수행하지 않도록 결정된다. 추가적으로 또는 대신에, 결정은 하나의 세컨더리 평면을 고려한 블록 기반으로 이루어진다.

Description

평면 간 예측{INTER-PLANE PREDICTION}
본 발명은 평면으로 제공된 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 위한 코딩 기법들에 관한 것으로, 각 평면은 비디오 또는 스틸 픽쳐(still pictures)들에서와 같이 정보 샘플들의 배열로 포함한다.
이미지와 비디오 코딩에 있어서, 픽쳐들 또는 픽쳐들을 위한 샘플 배열들의 특정한 집합들은 보통 특정한 코딩 파라미터들과 연관된 블록들로 분해된다. 픽쳐들은 보통 다중 샘플 배열들로 구성된다. 게다가, 픽쳐는 또한 추가적인 보조의(auxiliary) 샘플 배열들과 연관되고, 이는 예를 들어, 투명도 정보 또는 깊이 맵들을 명시할 수 있다. 픽쳐의 샘플 배열들(보조의 샘플 배열들을 포함하여)은 적어도 하나의 소위 평면 그룹들로 그룹될 수 있으며, 여기서, 각 평면 그룹은 적어도 하나의 샘플 배열들로 구성된다. 픽쳐의 평면 그룹들은 독립적으로 또는 픽쳐가 하나 이상의 평면 그룹들과 연관된 경우, 동일한 픽쳐의 다른 평면 그룹들로부터 예측과 함께 코딩될 수 있다. 각 평면 그룹은 보통 블록들로 분해된다. 블록들(또는 샘플 배열들의 상응하는 블록들)은 인터-픽쳐(inter-picture) 예측 또는 인트라-픽쳐(intra-picture) 예측에 의해 예측된다. 블록들은 다른 사이즈들을 가질 수 있고, 사각 또는 직사각형일 수 있다. 블록들로의 픽쳐의 분할은 구문에 의해 고정되거나, 또는 그것은 비트스트림내에 시그널링될 수 있다. 미리 정의된 사이즈들의 블록들로 세부분할하는 신호인 구문 요소(syntax element)들이 종종 전송된다. 이와 같은 구문 요소들은, 즉, 예측의 목적을 위하여, 블록이 더 작은 블록들로 세부분할되는지 및 코딩 파라미터들과 어떻게 연관되는지 나타낸다. 블록(또는 샘플 배열들에 상응하는 블록들)의 모든 샘플들을 위하여, 연관된 코딩 파라미터들의 디코딩이 어떤 방식으로 특정된다. 예를 들어, 블록 안에 모든 샘플들은, 참조 인덱스들(이미 코딩된 픽쳐들의 집합에서 참조 픽쳐를 식별하는), 움직임 파라미터들(참조 픽쳐와 현재 픽쳐 사이에서 블록들의 움직임을 위한 측정을 명시하는), 인터폴레이션 필터, 인트라 예측 모드들 등을 명시하는 파라미터들과 같은 예측 파라미터들의 동일한 집합을 이용하여 예측될 수 있다. 움직임 파라미터들은 수평 및 수직 성분을 가진 변위 벡터들에 의해 표현되거나, 6개의 요소들로 구성된 아핀(affine) 움직임 파라미터들과 같은 고차의 움직임 파라미터들에 의해 표현될 수 있다. 또한, 특정 예측 파라미터들의 하나 이상의 집합(참조 인덱스들 및 움직임 파라미터들과 같이)은 단일의 블록에 연관된다. 그러한 경우에, 이들 특정 예측 파라미터들의 각 집합을 위하여, 블록(또는 샘플 배열들의 상응하는 블록들)을 위한 단일의 중간의(intermediate) 예측 신호가 생성되고, 최종 예측 신호가 상기 중간의 신호들을 겹치는 것을 포함하는 결합에 의해 만들어진다. 상응하는 가중치 파라미터들 및 잠재적으로 또한 일정한 오프셋(offset)(가중된 합에 추가된)은 픽쳐, 또는 참조 픽쳐, 또는 참조 픽쳐들의 집합들을 위해 고정되거나, 또는 그들은 상응하는 블록을 위한 예측 파라미터들의 집합에 포함될 수 있다. 원본 블록들(또는 샘플 배열들의 상응하는 블록들)과 그들의 예측 신호들간의 차이는, 또한, 잔차 신호(residual signal)로서 참조되고, 보통 변환되고 양자화된다. 종종, 2차원 변환이 잔차 신호(또는 잔차 블록을 위해 상응하는 샘플 배열들)에 적용된다. 변환 코딩을 위하여, 블록들(또는 샘플 배열들에 상응하는 블록들)은, 예측 파라미터들의 특정한 집합이 사용되도록, 변환이 적용되기 전에 더 나뉘어질 수 있다. 변환 블록들은 예측을 위하여 사용되는 블록과 동일하거나 또는 더 작을 수 있다. 변환 블록은 예측을 위하여 사용되는 블록들의 하나 이상을 포함하는 것이 가능하다. 각각 다른 변환 블록들은 다른 사이즈들을 가질 수 있고, 변환 블록들은 사각 또는 직사각형으로 표현될 수 있다. 변환 후에, 결과로 초래된 변환 계수들은 양자화되고 소위 변환 계수 레벨들이 획득된다. 예측 파라미터들뿐 아니라 변환 계수 레벨들, 그리고, 만약 존재하면, 세부분할 정보가 엔트로피 코딩된다.
이미지, 비디오 코딩 표준에 있어서, 블록들로 세부분할하는 픽쳐(또는 평면 그룹)를 위해 구문에 의해 제공된 가능성들은 매우 제한적이다. 보통, 그것은 미리 정의된 사이즈의 블록이 더 작은 블록들로 세부분할될 수 있는지( 및 잠재적으로 어떻게)를 단지 명시할 수 있다. 예를 들어, H.264에서 가장 큰 블록 사이즈는 16×16이다. 16×16 블록들은 또한 매크로블록들로서 나타나고 각 픽쳐는 첫 단계에서 매크로블록들로 나뉠 수 있다. 각 16×16 매크로블록을 위하여, 그것이 16×16 블록으로서, 또는 두 개의 16×8 블록들로서, 또는 두 개의 8×16 블록들로서, 또는 네 개의 8×8 블록들로서 코딩될 지에 대해 시그럴링될 수 있다. 만약, 16×16 블록이 네 개의 8×8 블록으로 세부분할되면, 이들 8×8 블록들의 각각은 하나의 8×8 블록으로서, 또는 두 개의 8×4 블록들로서, 또는 두 개의 4×8 블록들로서, 또는 네 개의 4×4 블록들로서 코딩될 수 있다. 최신의 이미지 및 비디오 코딩 표준들에서 블록들로의 분할을 명시하기 위한 가능성들의 작은 집합은 세부분할 정보를 시그널링하기 위한 부가 정보를 작게 유지할 수 있는 이점이 있으나, 다음에서 설명하는 바와 같이 블록들을 위한 예측 파라미터들을 전송하기 위하여 요구되는 비트율이 중요할 수 있다는 단점을 가진다. 예측 정보를 시그널링하기 위한 부가 정보 율은 보통 블록을 위한 전체의 비트율의 중요한 총계를 나타낼 수 있다. 그리고 코딩 효율은, 부가 정보가 감소할 때, 증가할 수 있고, 예를 들어, 더 큰 블록 사이즈들을 사용함에 의해 성취될 수 있다. 비디오 시퀀스의 실제 이미지들 또는 픽쳐들은 특정한 특성들과 함께 임의로 형상화된 객체(object)들로 구성된다. 예를 들면, 이와 같은 객체들 또는 객체들의 부분들은 특유의 텍스쳐 또는 특유의 음직임에 의해 특징될 수 있다. 그리고 일반적으로, 예측 파라미터들의 동일한 집합이 이와 같은 객체 또는 객체의 부분에 적용될 수 있다. 그러나, 객체의 경계는 보통 큰 예측 블록들(즉, H.264에서 16×16 매크로블록들)을 위해 가능한 블록 경계와 일치하지 않는다. 인코더는 보통 특정한 율-왜곡(rate-distortion) 비용 측정의 최소에서 결과되는 세부분할(가능성들의 제한된 집합 사이에서)을 결정한다. 임의적으로 형상화된 객체들을 위하여 이것은 많은 작은 블록들로 결과될 수 있다. 그리고, 이러한 작은 블록들의 각각은, 전송이 필요한, 예측 파라미터들의 집합과 연관되기 때문에, 부가 정보율은 전체 비트율의 중요한 부분이 될 수 있다. 그러나 작은 블록들의 몇몇은 여전히 동일한 객체의 영역들 또는 객체의 부분을 나타내기 때문에, 획득된 블록들의 개수를 위한 예측 파라미터들은 동일하거나 매우 유사하다.
즉, 세부분할 또는 픽쳐를 더 작은 부분들 또는 타일들 또는 블록들로 타일링(tiling)하는 것은 코딩 효율 및 코딩 복잡도에 상당한 영향을 준다. 상술한 개요와 같이. 픽쳐/비디오 매체에 이러한 코딩 파라미터들의 더 좋은 적응성을 가능하게 함에 의해, 더 작은 블록들의 높은 개수로 픽쳐의 세부분할은 코딩 파라미터들의 공간적으로 더 좋은 설정을 가능하게 한다. 반면에, 더 좋은 입상도(granularity)에서 코딩 파라미터들을 세팅하는 것은, 필수적인 설정들 상에 디코더에 알리기 위해 필수적인 부가 정보 총계에 높은 부담을 준다. 심지어, 인코더가 픽쳐/비디오를 공간적으로 블록들로 세부분할하는 어떤 자유가, 가능한 코딩 파라미터 설정들의 총계를 엄청나게 증가시키고, 그렇게 함으로써 일반적으로 가장 좋은 율/왜곡으로 이어지는 코딩 파라미터 설정을 위한 탐색이 심지어 더 어려워지도록 할 수 있다.
평면에 제공된, 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 코딩하기 위한 코딩 기법을 제공하기 위한 목적은, 각 평면은 정보 샘플들의 배열을 포함하고, 더 나은 율 왜곡 비율(rate distortion ratio)을 달성할 수 있다.
이러한 목적은 청구항 1 또는 11에 따른 디코더, 청구항 18 또는 19에 따른 인코더, 청구항 16, 17, 20 및 21의 어떤 청구항들에 따른 방법들, 청구항 24에 따른 컴퓨터 프로그램 및 청구항 22 또는 23에 따른 데이터 스트림에 의해 성취된다.
여러 평면들의 코딩 파라미터들 사이의 연관성이 디코더에 평면 간 예측 정보를 시그럴링하는 필요로부터 기인하는 추가적인 오버헤드에 불구하고 리던던시(redundancy) 감소의 목적을 위한 이용을 가능하도록 만들 때, 더 나은 율 왜곡 비율이 성취되는 것이 본 발명의 근본적인 아이디어이다. 특히, 평면 간 예측을 이용하거나 복수의 평면들 각각을 위해 수행되도록 하지 않도록 결정될 수 있다. 추가적으로 또는 대신에, 결정은 하나의 세컨더리 평면을 고려한 블록 기반으로 수행될 수 있다.
실시예에 따르면, 공간적으로 샘플링된 정보 신호를 나타내는 정보 샘플들의 배열은, 트리 루트(tree root) 영역들의 재귀적인 다중-분할에 의한 다른 사이즈들의 더 작은 단순 연결 영역(simply connected region)들 내로 트리 루트 영역들의 적어도 하나의 부분집합(subset)에서, 데이터-스트림에서 추출된 멀티-트리-세부분할(muli-tree-sub-division) 정보에 따라, 다음 세부분할와 함께 공간적으로 트리 루트 영역 안에 처음으로 있다. 율-왜곡 의미에서 너무 정밀한 세부분할 및 너무 거친 세부분할 간의 좋은 절충을 발견하기 위하여, 타당한 코딩 복잡도에서, 정보 샘플들의 배열이 공간적으로 세부분할된 트리 루트 영역들의 최대 영역 사이즈는, 데이터 스트림 안에 포함되고 디코딩 측에서 데이터 스트림에서 추출된다. 따라서, 디코더는 데이터 스트림으로부터 최대 영역 사이즈 및 멀티-트리-세부분할 정보를 추출하는 추출부, 트리 루트 영역들의 부분집합을 재귀적인 다중-분할에 의한 다른 사이즈들의 더 작은 단순 연결 영역들 내로 트리 루트 영역들의 적어도 하나의 부분집합에서, 멀티-트리-세부분할 정보에 따라, 공간적으로 샘플링된 정보 신호로 표현되는 정보 샘플들의 배열을 최대 영역 사이즈 및 세부분할의 트리 루트 영역들로 공간적으로 나누는 세부 분할부(sub-divider); 및 더 작은 단순 연결 영역들로 세부분할을 이용하여 데이터 스트림으로부터 정보 샘플들의 배열을 복원하는 복원부를 포함할 수 있다.
실시예에 따르면, 데이터 스트림은 또한, 트리 루트 영역들의 부분집합이 재귀적 다중 분할되도록 하여 상향 조정한 최대 계층을 포함한다. 이러한 조치에 의해, 다중-트리-세부분할 정보의 시그널링은 코딩을 위하여 더 쉽고 비트를 덜 필요로 한다.
게다가, 복원부는, 중간의(intermediate) 세부분할에 따른 입상도(granularity)에서 하나 이상의 다음의 조치들을 수행한다.: 적어도, 사용될 인트라 및 인터 예측 모드, 사이의 예측 모드의 결정; 스펙트랄(spectral)에서 공간 도메인으로 변환, 인터-예측을 위한 파라미터들의 수행 및/또는 설정; 인트라 예측을 위한 파라미터들의 수행 및/또는 수행.
게다가, 추출부는, 데이터 스트림으로부터 깊이-우선 횡단 순서(depth-first traversal order)에서 분할된 트리블록들의 리프(leaf) 영역들과 연관된 구문 요소들을 추출할 수 있다. 이러한 조치에 의해, 추출부는, 너비-우선 횡단 순서(breadth-first traversal order)를 이용하는 것보다 더 높은 가능성을 가진 이미 코딩된 인접한 리프 영역들의 구문 요소들의 통계를 이용할 수 있다.
다른 실시예에 따르면, 추가 세부 분할부는, 심지어 더 작은 단순 연결 영역들 내에 더 작은 단순 연결 영역들의 적어도 하나의 부분집합에서, 추가(further) 멀티-트리 세부분할 정보에 따라, 세부분할하기 위하여 사용된다. 두번째-단계 세부분할은 스펙트랄로부터 공간적 도메인으로 재변환을 수행하는 복원부에 의해 사용되는데 반하여, 첫-단계 세부분할은 정보 샘플들의 영역의 예측을 수행하기 위한 복원부에 의해 사용될 수 있다. 예측 세부분할에 상대적으로 종속적인 잔여의 세부분할을 정의하는 것은 비트를 덜 소비하는 전체적인 세부분할의 코딩을 제공하고, 다른 한편으로, 종속으로부터 기인한 잔여 세부분할을 위한 제한 또는 자유는 일반적으로 코딩 효율에 미세한 부정적인 영향을 단지 가지며, 비슷한 움직임 보상 파라미터들은 가진 픽쳐의 부분들은 비슷한 스펙트랄 특성들을 가진 부분보다 크다.
다른 실시예에 따르면, 추가 최대 영역 사이즈는 데이터 스트림 안에 포함되고, 추가 최대 영역 사이즈는, 심지어 더 작은 단순 연결 영역 내에 추가 멀티-트리 세부분할 정보에 따른 트리 루트 세부 영역들의 적어도 하나의 부분집합에서 세부분할하기 이전에 더 작은 단순 연결 영역들이 처음으로 분할된 트리 루트 세부 영역들의 사이즈를 정의한다. 이것은, 차례 차례로, 한편으로 예측 세부분할 및 다른 한편으로 잔여 세부분할의 최대 영역 사이즈들의 독립적인 설정할 수 있고, 이리하여, 더 나은 율/왜곡 절충을 발견할 수 있다.
본 발명의 다른 실시예에 따르면, 데이터 스트림은, 다중-트리 세부분할 정보를 형성하는 구문 요소들의 제 2 부분집합으로부터 분리된 구문 요소들의 제 1 부분집합을 포함하고, 여기서, 샘플들의 배열의 중간의 세부분할을 획득하도록 다중-트리 세부분할의 더 작은 단순 연결 영역들에 공간적으로 인접하게, 구문 요소들의 제 1 부분집합에 따라, 디코딩 측에서 병합부(merger)가 결합할 수 있다. 복원부는 중간의 세부분할을 사용하여 샘플들의 배열을 복원할 수 있다. 이러한 조치에 의해, 인코더는, 최적의 율/왜곡 절충을 발견하면서 정보 샘플들의 배열 특성의 공간적인 분포에 효과적인 세부분할을 맞추기 더 쉽다. 예를 들어, 만약에 최대 영역 사이즈가 높으면, 트리 루트 영역들이 더 확장됨에 기인하여 멀티-트리 세부분할 정보가 더 복잡하게 될 수 있다. 다른 한편으로, 그러나, 만약 최대 영역 사이즈가 작다면, 인접한 트리 루트 영역들은 비슷한 특성들을 가진 정보 콘텐츠에 연관되어 이러한 트리 루트 영역들은 또한 함께 처리될 수 있다. 병합은 전술한 극단들 사이의 이러한 갭(gap)을 채우고, 그렇게 함으로써, 입상도(granularity)의 거의 최적의 세부분할을 할 수 있다. 인코더의 관점에서, 구문 요소들의 병합은, 인코더가 잘못되게 너무 정밀한 세부분할을 사용하기 때문에, 더 여유 있거나 계산적으로 덜 복잡한 인코딩 절차를 허용할 수 있고, 병합 구문 요소들을 설정하기 이전에 설정된 구문 요소들의 단지 작은 부분에 맞추거나 맞추지 않고 구문 요소들을 나중에 병합하도록 설정함에 의해, 이러한 에러는 나중에 보상될 수 있다.
다른 실시예에 따르면, 최대 영역 사이즈 및 멀티-트리-세부분할 정보는 예측 세부분할보다 오히려 잔여의 세부분할을 위하여 사용될 수 있다.
공간적으로 샘플링된 정보 신호를 나타내는 정보 샘플들의 배열의 쿼드트리(quadtree) 세부분할의 단순 연결 영역들을 다루기 위한 깊이-우선 횡단 순서는 너비-우선 횡단 순서보다 오히려 실시예에 따라 사용된다. 깊이-우선 횡단 순서를 사용함에 의해, 각 단순 연결 영역은, 이미 횡단된 인접한 단순 연결 영역들을 가질 더 높은 확률을 가져 이러한 인접한 단순 연결 영역들에 대한 정보가 각 현재 단순 연결 영역을 복원할 때 긍정적으로 이용된다.
정보 샘플들의 배열이, 다른 사이즈들의 더 작은 단순 연결 영역들 내에 트리 루트 영역들의 적어도 하나의 부부집합에서 다음의 세부분할을 가진 제로-차(zero-order) 계층 사이즈의 트리 루트 영역들의 규칙적인 배열로 처음으로 나뉠 때, 복원부는, 지그재그(zigzag) 스캔 순서에서 다음 트리 루트 영역으로 더 진행되지 전에 깊이-우선 횡단 순서에서 단순 연결된 리프 영역들을 다루면서, 각각의 트리 루트 영역이 분할되도록, 트리 루트 영역들을 스캔하기 위하여 지그재그 스캔을 사용할 수 있다. 게다가, 깊이-우선 횡단 순서에 일치하여, 동일한 계층적 레벨의 단순 연결된 리프 영역들이 지그재그 스캔 순서로 횡단될 수 있다. 이리하여, 인접한 단순 연결된 리프 영역들을 가질 증가된 가능성이 유지된다.
실시예에 따라, 비록 멀티-트리 구조의 노드들과 연관된 플래그(flags)들이 연속하여 깊이-우선 횡단 순서로 배열되더라도, 플래그들의 연속한 코딩은, 멀티-트리 구조의 동일한 계층적 레벨 안에 놓인 멀티-트리 구조의 노드들과 연관된 플래그들을 위한 동일하고, 그러나 멀티-트리 구조의 다른 계층적 레벨들에 놓인 멀티-트리 구조의 노드들의 위해 다른, 확률 추정 문맥(contexts)들을 사용하고, 그렇게 함으로써 제공되어진 문맥들의 개수들과 다른 한편으로 플래그들의 실제적인 심볼 통계에 적응 사이의 좋은 절충을 허용할 수 있다.
실시예에 따르면, 사용되는 미리 결정된 플래그를 위한 확률 추정 문맥들은, 또한, 깊이-우선 횡단 순서에 일치하는 미리 결정된 플래그를 처리하고, 미리 결정된 플래그에 상응한 지역에 미리 결정된 상대 위치 관계를 가진 트리 루트 영역의 지역들에 상응하는 플래그들에 의존한다. 진행되어온 측면에 근본하는 아이디어와 비슷하게, 깊이-우선 횡단 순서의 사용은, 이미 코딩된 플래그들이 미리 결정된 플래그에 상응하는 인접한 지역에 상응하는 플래그들을 포함하여 이러한 지식이 미리 결정된 플래그를 위해 사용되는 문맥에 더 잘 적응하여 사용될 높은 확률을 보장한다.
미리 결정된 플래그를 위한 문맥을 설정하기 위해 사용되는 플래그들은, 미리 결정된 플래그에 상응하는 지역의 맨 위 및/또는 왼쪽에 놓인 지역에 상응할 수 있다. 게다가, 문맥을 선택하기 위해 사용되는 플래그들은 미리 결정된 플래그가 연관된 노드로서 동일한 계층적 레벨에 속하는 플래그들로 제한될 수 있다.
실시예에 따르면, 코딩된 시그널링은, 가장 높은 계층적 레벨의 표시 및 가장 높은 계층적 레벨과 일치하지 않은 멀티-트리 구조의 노드들과 연관된 플래그들의 시퀀스를 포함하고, 각각의 플래그는 연관된 노드들이 중간의 노드인지 자식 노드인지 명시하고, 연속적으로 디코딩되고, 깊이-우선 또는 너비-우선 첫번째 횡단 순서로, 데이터 스트림으로부터 플래그들의 시퀀스가 발생하고, 가장 높은 계층적 레벨의 노드들을 스킵하고 동일한 리프 노드들을 자동적으로 정하면서, 그렇게 함으써 코딩율을 감소시킨다.
다른 실시예에 따르면, 멀티-트리 구조의 코딩된 시그널링은 가장 높은 계층적 레벨의 표시를 포함할 수 있다. 이러한 조치에 의해, 가장 높은 계층적 레벨의 블록들의 추가적인 분할이 그래도 배제됨에 따라 가장 높은 계층적 레벨보다 다른 계층적 레벨들에 플래그들의 존재를 제한할 수 있다.
리프(leaf) 노드들의 세컨더리 세부분할의 부분인 공간적 멀티-트리 세부분할과 프라이머리(primary) 멀티-트리 세부분할의 분할되지 않은 트리 루트 영역들의 경우에, 세컨더리(secondary) 세부분할의 코딩 플래그들을 위해 사용되는 문맥은, 문맥이 동일한 사이즈의 지역들과 연관된 플래그들을 위해 동일하도록 선택될 수 있다.
다른 실시예에 따르면, 정보 샘플들의 배열이 세부분할된 단순 연결 영역들의 바람직한 병합 또는 그룹핑은, 데이터의 감소된 총량을 가지고 코딩된다. 이러한 목적을 위하여, 단순 연결 영역들을 위하여, 미리 결정된 단순 연결 영역에 미리 결정된 상대적인 지역적 관계를 가진 복수의 단순 연결 영역들 안에서 단순 연결 영역들의, 미리 결정된 단순 연결 영역을 위하여, 미리 결정된 상대적인 위치적 관계는 어떤 식별을 가능하게 정의된다. 즉, 만약 개수가 제로라면, 미리 결정된 단순 연결 영역을 위한 병합 표시기(indicator)는 데이터 스트림 안에서 부재할 수 있다. 더 나아가, 만약 미리 결정된 상대적인 지역 관계를 가진 단순 연결 영역들의 개수가 하나라면, 단순 연결 영역의 코딩 파라미터들은, 어떤 추가 구문 요소를 위한 필요없이 미리 결정된 단순 연결 영역을 위한 코딩 파라미터들을 위한 예측을 위하여 적용되거나 또는 사용될 수 있다. 그렇지 않으면, 즉, 미리 결정된 단순 연결 영역들에 대하여 미리 결정된 상대적인 지역 관계를 가진 단순 연결 영역들의 개수가 하나보다 크다면, 비록 이러한 식별된 단순 연결 영역들과 연관된 코딩 파라미터들이 서로 각각 동일하더라고, 추가 구문 요소의 도입이 억제될 수 있다.
실시예에 따르면, 인접한 단순 연결 영역들의 코딩 파라미터들이 서로 각각이 일치하지 않는다면, 참조 이웃 식별자는 미리 결정된 단순 연결 영역에 미리 결정된 상대적인 지역 관계를 가진 단순 연결 영역들의 개수의 진부분집합(proper subset)을 식별할 수 있고, 이러한 진부분집합은 코딩 파라미터들을 적용하거나, 미리 결정된 단순 연결 영역의 코딩 파라미터들을 예측할 때 사용된다.
다른 실시예에 따르면, 재귀적인 다중-분할에 의한 다른 사이즈들의 복수의 단순 연결 영역들로 2차원 정보 신호의 공간적 샘플링을 나타내는 샘플들의 지역의 공간적인 세부분할은 데이터 스트림에 포함된 구문 요소들의 제 1 부분집합에 따라 수행되고, 복수의 단순 연결 영역의 결합인, 단순 연결 영역들의 분리된 집합들로 샘플들의 배열의 중간 수준의 세부분할을 획득하기 위하여, 제 1 부분집합으로부터 분리된 데이터 스트림 안에서 구문 요소들의 제 2 부분집합에 따른 공간적으로 인접한 단순 연결 영역들의 결합에 의해 뒤이어 수행된다. 중간의 세부분할은, 데이터 스트림으로부터 샘플들의 배열을 복원할 때 사용된다. 이것은 너무 정밀한 세부분할은 뒤이은 병합에 의해 보상될 수 있다는 사실에 기인하여, 세부분할에 대한 최적화가 덜 중요할 수 있다. 더욱이, 세부분할과 병합의 결합은, 구문 요소들의 분리된 집합들의 사용에 의한 세부분할 및 병합의 연속이, 2차원 정보 신호의 실제적인 문맥에 효과적이거나 중간 수준의 세부분할의 더 좋은 적용을 가능하게 하도록 재귀적인 다중-분할의 방식에 의해 불가능한 중간의 세부분할을 성취할 수 있다. 장점들을 비교하면, 병합을 상세하게 표시하기 위한 구문 요소들의 추가적인 부분집합으로부터 기인한 추가적인 오버헤드는 무시할 수 있다.
본 발명의 또 다른 실시예에 따른 디코더는, 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하며, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 적어도 하나의 배열은 루마(luma) 정보 샘플들의 프라이머리(primary) 배열이고, 적어도 다른 하나의 배열은 크로마(chroma) 정보 샘플들의 세컨더리(secondary) 배열이다.
여기서, 본 실시예에 따른 디코더는, 정보 샘플들의 각각의 배열이, 블록들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로, 세부분할된 블록들과 연관된 페이로드 데이터를 처리함에 의해 정보 샘플들의 각 배열을 복원하고, 상기 데이터 스트림으로부터 루마 정보 샘플들의 상기 프라이머리 배열의 블록들을 위한 인트라 예측 모드들을 도출하고, 상기 데이터 스트림으로부터 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 평면 간 교환 정보(inter-plane interchange information)를 도출하고, 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 상기 평면 간 교환 정보에 기반하여, 루마 정보 샘플들의 상기 프라이머리 배열의 상응하는 블록들의 인트라 예측 모드들로부터 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드를 완전히 추론하거나, 추가적인 부가 정보 없이 루마 정보 샘플들의 상기 프라이머리 배열의 상응하는 블록들의 인트라 예측 모드들에 기반하여 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드들을 도출하도록, 결정한다.
이때, 상기 인트라 예측 모드들은, 각각의 블록 내에서 연장하는 경계들에 따르는 각도를 나타낼 수 있다.
여기서, 디코더는, 정보 샘플들의 배열을 다양한 사이즈의 크로마 정보 샘플들 및 루마 정보 샘플들의 블록들로 세부분할할 수 있다.
또한, 수평 방향을 따르는 픽쳐의 공간 해상도는 상기 프라이머리 배열과 상기 세컨더리 배열 사이에서 차이가 있을 수 있으며, 수직 방향을 따르는 픽쳐의 공간 해상도는 상기 프라이머리 배열과 상기 세컨더리 배열 사이에서 차이가 없을 수 있다.
본 발명의 또 다른 실시예에 따른 디코딩 방법은, 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하며, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 적어도 하나의 배열은 루마(luma) 정보 샘플들의 프라이머리(primary) 배열이고, 적어도 다른 하나의 배열은 크로마(chroma) 정보 샘플들의 세컨더리(secondary) 배열이다.
상기 디코딩 방법은, 정보 샘플들의 각각의 배열이, 블록들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로, 세부분할된 블록들과 연관된 페이로드 데이터를 처리함에 의해 정보 샘플들의 각 배열을 복원하는 단계, 상기 데이터 스트림으로부터 루마 정보 샘플들의 상기 프라이머리 배열의 블록들을 위한 인트라 예측 모드들을 도출하는 단계, 상기 데이터 스트림으로부터 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 평면 간 교환 정보(inter-plane interchange information)를 도출하는 단계, 및 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 상기 평면 간 교환 정보에 기반하여, 루마 정보 샘플들의 상기 프라이머리 배열의 상응하는 블록들의 인트라 예측 모드들로부터 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모들을 완전히 추론하거나, 추가적인 부가 정보 없이 루마 정보 샘플들의 상기 프라이머리 배열의 상응하는 블록들의 인트라 예측 모드들에 기반하여 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드들을 도출하도록, 결정하는 단계를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 인코더는, 평면들에서 장면의 픽쳐들의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 생성하는 인코더로서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 적어도 하나의 배열은 루마(luma) 정보 샘플들의 프라이머리(primary) 배열이고, 적어도 다른 하나의 배열은 크로마(chroma) 정보 샘플들의 세컨더리(secondary) 배열일 수 있다.
여기서, 상기 인코더는, 정보 샘플들의 각각의 배열을 위하여, 정보 샘플들의 각각의 배열이 세부분할되는 블록들과 연관된 페이로드 데이터, 루마 정보 샘플들의 상기 프라이머리 배열의 블록들을 위한 인트라 예측 모드들, 및 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 평면 간 교환 정보(inter-plane interchange information), 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드들이 루마 정보 샘플들의 상기 프라이머리 배열의 상응하는 블록들을 위한 인트라 예측 모드들로서 동일한지 여부, 또는 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드들이 추가적인 부가 정보 없이 루마 정보 배열들의 상기 프라이머리 배열의 상응하는 블록들을 위한 인트라 예측 모드들로부터 도출되는지 여부를 결정하는 상기 평면 간 교환 정보를 결정하고, 루마 정보 샘플들의 상기 프라이머리 배열의 블록들과 연관된 인트라 예측 모드들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입할 수 있다.
상기 인코더에 따르면 예측 파라미터들이 인트라 예측될 예측 세부-영역 내에서 연장하는 경계들을 따르는 각도의 표시를 포함할 수 있다.
또한, 수평 방향을 따르는 픽쳐의 공간 해상도는 상기 프라이머리 배열과 상기 세컨더리 배열 사이에서 차이가 있을 수 있으며, 수직 방향을 따르는 픽쳐의 공간 해상도는 상기 프라이머리 배열과 상기 세컨더리 배열 사이에서 차이가 없을 수 있다.
본 발명의 또 다른 실시예에 따른 데이터 스트림 생성 방법은, 평면들에서 장면의 픽쳐들의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 생성하는 방법으로서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 적어도 하나의 배열은 루마(luma) 정보 샘플들의 프라이머리(primary) 배열이고, 적어도 다른 하나의 배열은 크로마(chroma) 정보 샘플들의 세컨더리(secondary) 배열일 수 있다.
상기 데이터 스트림 생성 방법은, 정보 샘플들의 각각의 배열을 위하여, 정보 샘플들의 각각의 배열이 세부분할되는 블록들과 연관된 페이로드 데이터, 루마 정보 샘플들의 상기 프라이머리 배열의 블록들을 위한 인트라 예측 모드들, 및 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 평면 간 교환 정보(inter-plane interchange information), 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드들이 루마 정보 샘플들의 상기 프라이머리 배열의 상응하는 블록들을 위한 인트라 예측 모드들로서 동일한지 여부, 또는 크로마 정보 샘플들의 상기 세컨더리 배열의 블록들을 위한 인트라 예측 모드들이 추가적인 부가 정보 없이 루마 정보 배열들의 상기 프라이머리 배열의 상응하는 블록들을 위한 인트라 예측 모드들로부터 도출되는지 여부를 결정하는 상기 평면 간 교환 정보를 결정하는 단계, 및 루마 정보 샘플들의 상기 프라이머리 배열의 블록들과 연관된 인트라 예측 모드들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하는 단계를 포함할 수 있다.
본 발명의 또 다른 실시예에 따라 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 디코더에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 디코더는, 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열이 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하고; 데이터 스트림으로부터 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들을 도출하고; 상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하고, 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에따라, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합(proper subset) 또는 각 단순 연결 영역에 대해, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하거나; 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하고, 그리고 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정할 수 있다.
상기 디코더는, 상기 데이터 스트림으로부터 세부분할 정보를 도출하고, 상기 세부분할 정보에 따라 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할할 수 있다.
상기 디코더는 또한, 상기 단순 연결 영역들이 다양한 사이즈가 되도록 상기 정보 샘플들의 배열들을 상기 단순 연결 배열들로 세부분할할 수 있다.
상기 디코더는, 상기 단순연결 영역들로의 상기 세부분할이 상기 제 1 및 제 2 배열들에 대해 다르도록 상기 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할할 수 있다.
상기 디코더는 또한, 상기 단순 연결 영역들과 연관된 상기 페이로드 데이터를 프로세싱함에 있어, 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들 안에서 정보 샘플들을 예측할 수 있다.
여기서, 상기 단순 연결 영역들과 연관된 코딩 파라미터들은, 아래의 코딩 파라미터들 중 하나 이상을 포함할 수 있다.
적어도 인트라 예측 및 인터 예측 중에서, 개별 단순 연결 영역을 위해 어떤 예측 사용되는지 명시하는 블록 예측 모드들,
인트라 예측 신호가 어떻게 생성되는지 명시하는 인트라 예측 모드들,
개별 단순 연결 영역을 위한 최종 예측 신호를 생성하기 위해 몇 개의 예측 신호들이 결합되는지 명시하는 식별자,
움직임-보상된 예측을 위해 어떤 참조 픽쳐(들)이 쓰이는지 명시하는 참조 인덱스들,
상기 참조 픽쳐(들)을 사용하여 어떻게 상기 예측 신호(들)이 생성되는지 명시하는 움직임 파라미터들과,
예측 신호를 생성하기 위해 상기 참조 픽쳐(들)이 어떻게 필터링되는지 명시하는 식별자; 및
개별 단순 연결 영역이 어떻게 심지어 더 작은 단순 연결 영역들로 세부분할되는지 명시하는 세부분할 정보
상기 디코더는, 상기 제 2 배열의 상기 단순 연결 영역들의 현재 진부분집합 또는 상기 현재 단순 연결 영역 내에서 미리 결정된 정보 샘플을 선택함에 의해 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 결정하고, 상기 제 1 배열의 상기 단순 연결 영역들 중에서, 상기 제 1 배열 안에 미리 결정된 정보 샘플의 위치에 가장 가깝거나, 안에 존재하는 정보 샘플을 포함하는 단순 연결 영역을, 상기 국부적으로 상응하는 단순 연결 영역으로서 지정할 수 있다.
상기 디코더는, 상기 제 1 배열의 상기 단순 연결 영역들 중에서 상기 제 1 배열 내의 상기 제 2 배열의 상기 단순 연결 영역들의 현재 진부분집합 또는 상기 현재 단순 연결 영역에 의해 점유되는 지역과 최대 범위에서 공간적으로 오버랩하는 단순 연결 영역을, 상기 국부적으로 상응하는 단순 연결 영역으로서 지정함으로써, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 결정할 수 있다.
상기 디코더는, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파리미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하는 데 있어, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 어떠한 잔차 데이터를 도출하지 않고 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터, 상기 제 1 및 상기 제 2 배열들 사이의 공간적인 해상도 및 공간적인 위상 관계에서의 차이점을 고려한 단순한 복사 또는 적응에 의해, 완전히 추론할 수 있다.
상기 디코더는, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파리미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하는 데 있어, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측으로서 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들을 사용하고, 상기 데이터 스트림으로부터 도출된 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위하여 상기 예측과 잔차 데이터를 결합할 수 있다.
본 발명의 또 다른 측면에 따른 디코더는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 디코더로서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리(primary) 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리(secondary) 배열들이며,
상기 디코더는, 정보 샘플들의 개별 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 개별 배열과 연관된 페이로드 데이터를 처리함에 의해 정보 샘플들의 각 배열을 복원하고; 상기 데이터 스트림으로부터 상기 프라이머리 배열과 연관된 코딩 파라미터들을 도출하고, 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 도출하고, 상기 세컨더리 배열들을 위한 상기 평면 간 교환 정보에 따라, 각각의 개별적인 세컨더리 배열에 대해, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터, 적어도 부분적으로, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 상기 페이로드 데이터를 디코딩할지; 또는 상기 프라이머리 배열의 상기 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 각각의 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 상기 무시된 코딩 파라미터들과 무관한 개별 제 2 배열을 위한 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 페이로드 데이터를 디코딩할지, 결정할 수 있다.
여기서, 정보 샘플들의 상기 배열들은, 여러 밝기 요소들, 색상 요소들, 그리고/또는 픽쳐의 깊이 또는 투명도 요소들과 같은 비(non)-밝기/비(non)-색상 요소들을 나타낼 수 있다.
상기 디코더는, 상기 데이터 스트림으로부터 평면 지정(appointment) 정보를 도출하고, 상기 평면 지정 정보에 따라 정보 샘플들의 배열들을 프라이머리 및 부차적 배열로 지정할 수 있다.
상기 장면은 시간-변화하고 각 평면은 상기 장면의 픽쳐들의 시퀀스의 픽쳐마다 정보 샘플들의 적어도 하나의 배열을 가진 시간-샘플링된 방법에서 여러 공간적으로 샘플링된 정보의 개별 하나를 나타내는 정보 샘플들의 배열들의 시퀀스들을 포함하고, 상기 디코더는 상기 평면 지정 정보의 도출을 수행하고, 픽쳐들, 또는 픽쳐들의 그룹들에 상응하는 시간 입상도(time granularity)에서 지정을 수행하거나, 유도와 지정을 초기화를 위해 단지 한번 수행할 수 있다.
또한, 상기 장면은 시간-변화하고 각 평면은 상기 장면의 픽쳐들의 시퀀스의 픽쳐마다 정보 샘플들의 적어도 하나의 배열을 이용한 시간-샘플링된 방법에서 여러 공간적으로 샘플링된 정보 요소들의 개별 하나를 나타내는 정보 샘플들의 배열들의 시퀀스들을 포함하고, 상기 디코더는 상기 평면 간 교환 정보의 도출을 수행하고, 픽쳐들이 세부분할된 세부 영역들, 픽쳐들, 또는 픽쳐들의 그룹들에 상응하는 시간 입상도로 결정을 수행할 수 있다.
본 발명의 또 다른 측면에 따른 디코딩 방법은, 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 방법에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고,
상기 방법은, 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열이 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하는 단계; 데이터 스트림으로부터 정보 샘플들의 상기 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들을 도출하는 단계; 및 상기 데이터 스트림으로부터 정보 샘플들의 상기 배열들의 제 2 배열의 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하는 단계를 포함할 수 있다.
이때, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 평면 간 교환 정보에 따라, 상기 제 2 배열의 단순 연결 영역들의 진부분집합(proper subset) 또는 각 단순 연결 영역에 대해, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩할지; 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하고, 그리고 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩할지, 결정할 수 있다.
본 발명의 또 다른 측면에 따른 디코딩 방법은, 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 방법에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며,
상기 방법은, 정보 샘플들의 개별 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 개별 배열과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하는 단계; 상기 데이터 스트림으로부터 상기 프라이머리 배열과 연관된 코딩 파라미터들을 도출하는 단계; 및 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 도출하는 단계를 포함할 수 있다.
여기서, 상기 세컨더리 배열들을 위한 상기 평면 간 교환 정보에 따라, 각 개별적인 세컨더리 배열에 대해, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터, 적어도 부분적으로, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 상기 페이로드 데이터를 디코딩할지; 또는 상기 프라이머리 배열의 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 상기 무시된 코딩 파라미터들과 무관한 개별 제 2 배열을 위해 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 페이로드 데이터를 디코딩할지, 결정할 수 있다.
본 발명의 또 다른 측면에 따른 인코더는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 인코더에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고,
상기 인코더는, 정보 샘플들의 각 배열을 위하여, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들과 연관된 페이로드 데이터 및 상기 단순 연결 영역들 및 정보 샘플들의 각 배열을 복원하기 위하여 상기 페이로드 데이터가 복원됨에 의한 미리 정해진 방식과 연관된 코딩 파라미터들과, 상기 제 2차 배열의 상기 단순 연결 영역들의 진부분집합 또는 상기 단순 연결 영역의 입상도(granularity)로 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 결정하고; 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하고; 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보가, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들이, 적어도 부분적으로, 평면 간 교환 정보에 따라, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정을 수행하고, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 것을 피하고, 또는 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터의 예측에 기반한 복원이 가능한 상기 데이터 스트림으로 삽입하거나; 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 상기 데이터 스트림으로 그대로 삽입할 수 있다.
본 발명의 또 다른 측면에 따른 인코더는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 인코더에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며,
상기 인코더는, 정보 샘플들의 각 배열을 위하여, 페이로드 데이터와 정보 샘플들의 개별 배열을 복원하기 위하여 상기 페이로드 데이터를 복원함에 의한 방식을 미리 정하는 코딩 파라미터들 및 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 결정하고; 상기 프라이머리 배열 및 상기 평면 간 교환 정보와 연관된 싱기 코딩 파라미터들을 상기 데이터 스트림에 삽입하고; 상기 평면 간 교환 정보가 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이, 적어도 부분적으로, 상기 평면 간 교환 정보에 따라, 상기 프라이머리 배열의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정을 수행하고, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 것을 피하거나, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 프라이머리 배열의 상기 코딩 파라미터들로부터의 예측에 기반한 복원이 가능한 상기 데이터 스트림에 삽입하거나; 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 그대로 삽입할 수 있다.
본 발명의 또 다른 측면에 따른 데이터 스트림 생성 방법은 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 방법에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고,
상기 방법은, 정보 샘플들의 각 배열을 위하여, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들과 연관된 페이로드 데이터와, 상기 단순 연결 영역들 및 정보 샘플들의 각각의 배열을 복원하기 위하여 상기 페이로드 데이터가 복원됨에 의한 미리 정해진 방식과 연관된 코딩 파라미터들과, 상기 제 2차 배열의 상기 단순 연결 영역들의 진부분집합 또는 상기 단순 연결 영역의 입상도(granularity)로 정보 샘플들의 상기 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 결정하는 단계; 및 정보 샘플들의 상기 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하는 단계를 포함하되,
상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보가 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들이, 적어도 부분적으로, 평면 간 교환 정보에 따라, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정이 수행되고, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 상기 데이터 스트림에 삽입하지 않고, 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 제 2 배열의 상기 단순 연결 영역들의 각각의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 위한 예측 잔차가 상기 데이터 스트림에 삽입되거나; 또는 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파리미터들이 상기 데이터 스트림에 그대로 삽입될 수 있다.
본 발명의 또 다른 측면에 따른 데이터 스트림 생성 방법은 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 방법에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며,
상기 방법은, 정보 샘플들의 각 배열을 위하여, 페이로드 데이터와 정보 샘플들의 개별 배열을 복원하기 위하여 상기 페이로드 데이터를 복원함에 의한 방식을 미리 정하는 코딩 파라미터들 및, 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 결정하는 단계; 및 상기 프라이머리 배열 및 상기 평면 간 교환 정보와 연관된 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 단계를 포함하되,
상기 평면 간 교환 정보가 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이, 적어도 부분적으로, 상기 평면 간 교환 정보에 따라, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정이 수행되고, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하지 않고, 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 데이터 스트림에 삽입하거나; 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이 상기 데이터 스트림에 그대로 삽입될 수 있다.
본 발명의 또 다른 측면에 따른 데이터 스트림은, 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 데이터 스트림은, 정보 샘플들의 각 배열이 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 프로세싱함으로써 정보 샘플들의 각각의 배열의 복원이 가능토록 하며,
상기 데이터 스트림은, 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들; 및 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 포함하되,
상기 제 2 배열의 상기 단순 연결 영역을 위한 상기 평면 간 교환 정보에 따라, 상기 제 2 배열의 상기 단순 배열 영역들의 진부분집합 또는 각 단순 연결 영역에 대해, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들의 부재, 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 제 2 배열의 상기 단순 연결 영역들의 각각의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측 잔차; 또는, 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 그대로 포함할 수 있다.
본 발명의 또 다른 측면에 따른 데이터 스트림은 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림에 관한 것으로, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 데이터 스트림은, 정보 샘플들의 각 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열과 연관된 페이로드 데이터를 프로세싱함으로써 정보 샘플들의 각각의 배열의 복원을 가능케하고,
상기 데이터 스트림은, 상기 프라이머리 배열과 연관된 상기 코딩 파라미터들; 및 각 세컨더리 배열을 위한 평면 간 교환 정보를 포함하되,
상기 세컨더리 배열들 위한 상기 평면 간 교환 정보에 따라, 각 개별적인 세컨더리 배열에 대해, 상기 데이터 스트림 내에서 개별 세컨더리 배열을 위한 상기 코딩 파라미터들의 부재 또는 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능토록 하는, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차; 또는, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 그대로 포함할 수 있다.
본 발명의 실시예에 따른 방법 및 장치를 이용할 경우, 평면들의 코딩 파라미터들 간의 연관관계를 통하여 리던던시를 감소시킬 수 있다.
또한, 본 발명에 따른 평면 간 예측을 통하여 더 나은 율 왜곡 비율을 성취할 수 있다.
본 발명의 바람직한 실시예는 다음의 도면들에 대해 설명한다.
도 1은 본 발명의 실시예에 따른 인코더의 블록도이다.
도 2는 본 발명의 실시예에 따른 디코더의 블록도이다.
도 3a 내지 3c는 쿼드트리 세부분할을 위한 실시예를 도식적으로 나타내는 것으로, 도 3a는 제 1 계층적 레벨을, 도 3b는 제 2 계층적 레벨을, 도 3c는 제 3 계층적 레벨을 나타낸다.
도 4는 본 발명의 실시예에 따라 도 3a 내지 도 3b의 실시예에 따른 쿼드트리 세부분할을 위한 트리 구조를 도식적으로 나타낸다.
도 5a 및 도 5b는 도 3a 내지 도 3c의 쿼드트리 세부분할 및 리프 블록들을 인덱싱하는 인덱스들을 가진 트리 구조를 도식적으로 설명한다.
도 6a 및 도 6b는 다른 실시예들 각각에 따라, 도 4의 트리 구조를 나타내는 플래그들의 이진 일련들 또는 시퀀스들 및 도 3a 내지 도 3c의 쿼드트리 세부분할을 도식적으로 나타낸다.
도 7은 실시예에 따라 데이터 스트림 추출부에 의해 수행되는 단계들을 나타내는 흐름도이다.
도 8은 다른 실시예에 따른 데이터 스트림 추출부의 기능을 나타내는 흐름도이다.
도 9a 및 도9b는 실시예에 따라 강조되는 미리 결정된 블록을 위한 인접한 후보 블록들을 가진 쿼드트리 세부분할들을 설명하는 도면이다.
도 10은 다른 실시예에 따라 데이터 스트림 추출부의 기능을 나타내는 흐름도이다.
도 11은 실시예에 따라 평면들 및 평면 그룹들로부터 픽쳐의 구성을 설명하고, 평면 간 적용/예측을 사용한 코딩을 설명하는 도면이다.
도 12a 및 도 12b는 실시예에 따라 계승 기법(inheritance scheme)을 설명하기 위한 서브트리 구조 및 상응하는 세부분할을 도식적으로 설명한다.
도 12c 및 도 12d는 실시예에 따라 각각, 적응 및 예측을 가진 계승 기법을 설명하기 위한 서브트리 구조를 도식적으로 설명한다.
도 13은 실시예에 따라 인코더에 의한 계승 기법의 실현을 수행하는 단계를 나타내는 흐름도이다.
도 14a 및 도 14b는 실시예에 따라 인터-예측과 관련된 계승 기법을 실행하는 가능성을 설명하기 위한 프라이머리 세부분할 및 세컨더리 세부분할을 나타낸다.
도 15는 실시예에 따라 계승 기법과 관련된 디코딩 절차를 설명하는 블록도이다.
도 16은 인트라 예측을 되도록 하는 세부 영역들과 함께, 실시예에 따라 멀티트리 세부분할의 세부 영역들 중에서 스캔 순서를 도식적으로 설명한다.
도 17은 실시예에 따른 디코더의 블록도이다.
도 18a 내지 도 18c는 다른 실시예에 따른 세부분할들의 다른 가능들을 설명하는 도면이다.
후보 블록들의 집합이 비어있지 않은 경우, 병합 플래그라고 불리는 하나의 플래그는 현재 블록이 어떤 후보 블록들과 병합되는지 여부를 명시하기 위해 시그널링 된다. 만일 병합 플래그가 (“거짓”을 위한) 0과 동일한 경우, 그 블록은 그것의 후보 블록들 중 하나와 병합되지 않으며, 그리고 모든 코딩 파라미터들은 정상적으로 전송된다. 만일 병합 플래그가 (“참”을 위한) 1과 동일한 경우, 다음에서 적용된다. 후보 블록들의 집합이 하나 및 오직 하나의 블록을 포함하는 경우, 후보 블록은 병합을 위해 사용된다. 그렇지 않으면, 후보 블록들의 집합은 정확하게 두 개의 블록들을 포함한다. 만일 이들 두 개의 블록들에 대한 예측 파라미터들이 동일한 경우, 이들 예측 파라미터들은 현재 블록을 위해 사용된다. 그렇지 않으면(두 개의 블록들이 서로 다른 예측 파라미터들을 가지면), merge_left_flag라고 불리는 플래그는 시그널링 된다. 만일 merge_left_flag가 (“참”을 위한) 1과 동일한 경우, 현재 블록의 상기 좌상단(top-left) 샘플 위치에 대한 왼쪽 이웃하는 샘플 위치를 포함하는 블록은 후보 블록들의 집합에서 벗어나 선택된다. 만일 merge_left_flag가 (“거짓”을 위한) 0과 동일한 경우, 다른 (즉, 위쪽 이웃하는) 블록은 후보 블록들의 집합에서 벗어나 선택된다. 선택된 블록의 예측 파라미터들은 현재 블록을 위해 사용된다.
병합에 관해 상기에서 설명한 몇몇의 실시예들을 요약하면, 참조는 입력(116)으로 들어가는 데이터 스트림(22)으로부터 병합 정보를 추출하기 위해 추출부(102)에 의해 수행되는 단계들을 도시하는 도 10으로 만들어 진다.
프로세스는 현재 샘플 집합 또는 블록을 위한 샘플 집합들 또는 후보 블록들을 확인하는 것과 함께 450에서 시작된다. 블록들을 위한 코딩 파라미터들은 특정 하나의 차원 순서로 데이터 스트림(22) 내에서 전송되는 것을 회상해야 하고, 따라서 도 10은 현재 머무른 샘플 집합 또는 블록을 위해 상기 병합 정보를 되찾는 것의 프로세스를 언급한다.
전에 언급된 것으로서, 상기 확인 및 단계 450은 이웃 양상들을 기반으로 이전에 디코딩된 블록들, 즉 블록들의 인과 관계 집합, 중 확인을 포함할 수 있을 것이다. 예를 들어, 그것들의 이웃하는 블록들은 후보로 지정될 수 있을 것이며, 이는 공간 또는 시간에서 현재 블록 X에 대해 하나 이상의 기하학적으로 미리 결정된 샘플들에 이웃하는 특정 이웃하는 샘플들을 포함한다. 추가적으로, 확인에 대한 상기 단계는 두 단계들을 포함할 수 있을 것이며, 즉 방금 언급한 것처럼, 즉 후보 블록들의 프라이머리 집합을 야기하는 이웃 기반의, 확인에 관계한 제1 단계 및 단계 450 전에 데이터 스트림으로부터 이미 디코딩된 적이 있는 현재 블록 X에 대한 코딩 파라미터들의 진부분집합에 위한 특정 관계를 처리하는 것에 대한 이미 전송된 코딩 파라미터들에 따라 단지 그것들의 블록들이 후보들로 지정되는 제2 단계를 포함한다.
다음으로, 상기 프로세스 단계들의 단계 452로, 그 곳에서는 후보 블록들의 수가 0보다 큰지 여부에 관해 결정된다. 만일 이러한 경우, merge_flag는 단계 454에서 데이터 스트림으로부터 추출된다. 추출에 대한 단계 454는 엔트로피 디코딩을 수반할 수 있을 것이다. 단계 454에서 merge_flag의 엔트로피 디코딩을 위한 문맥은, 예를 들어, 후보 블록들의 집합 또는 후보 블록들의 프라이머리 집합에 속하는 구문 요소들을 기반으로 결정될 수 있을 것이며, 여기서 구문 요소들의 의존성은 관심(interest)에 대한 집합에 속하는 블록들이 병합된 적이 있거나 또는 그렇지 않음에 대한 정보로 제한된다. 선택된 문맥에 대한 가능성 추정은 적응될 수 있을 것이다.
그러나, 만일 후보 블록들의 수가 452 대신에 0이 되는 것으로 결정된 경우, 도 10의 프로세스는 단계 456으로 계속 진행하며, 그 곳에서는 현재 블록의 상기 코딩 파라미터들은 비트 스트림으로부터 추출되며, 또는 상기에서 언급된 두 단계 확인 경우에 그 대안으로, 추출부(102) 후에 남겨진 코딩 파라미터들은 도 3c에 도시된 순서(350)와 같이 블록 스캔 순서로 다음 블록에 대한 프로세싱으로 계속 진행한다.
단계 454로 돌아가서, 상기 프로세스는 단계 454에서 추출 후에, 추출된 merge_flag가 현재 블록에 대한 병합의 발생 또는 부재를 암시하는지 여부에 관한 확인과 함께 단계 458을 진행한다. 만일 병합이 발생하지 않은 경우, 상기 프로세스는 앞서 언급된 단계 456으로 진행한다. 그렇지 않으면, 후보 블록들의 수가 그것과 동일한지 여부에 관한 확인을 포함하는 단계 460으로 진행한다. 만일 이러한 경우, 후보 블록들 중 특정 후보 블록에 대한 표시의 전송은 필요하지 않으며, 따라서, 도 10의 상기 프로세스는 현재 블록의 병합 파트너가 오직 후보 블록으로 설정되는 것에 따라 단계 462을 진행하며, 여기서 단계 464 후에 병합된 파트너 블록의 코딩 파라미터는 현재 블록의 남겨진 코딩 파라미터 또는 코딩 파라미터들의 적응 또는 예측을 위해 사용된다. 적응의 경우, 현재 블록에 대한 코딩 파라미터들이 없음은 병합 파트너 블록으로부터 단지 복사된다. 다른 경우, 즉 예측의 경우, 단계 464는 데이터 스트림으로부터 잔차 데이터의 추출을 추가적으로 수반할 수 있을 것이며, 병합 파트너 블록으로부터 획득된 이들의 결여된 코딩 파라미터들과 그 잔차 데이터의 결합 및 현재 블록의 결여된 코딩 파라미터들의 예측 잔차에 관련한 잔차 데이터이다.
그러나, 만일 후보 블록들의 수가 단계 460에서 그것보다 크게 되는 것으로 결정되는 경우, 도 10의 상기 프로세스는 단계 466으로 나아가며, 그 곳에서 코딩 파라미터들의 관심 부분 또는 코딩 파라미터들 - 즉 현재 블록을 위한 데이터 스트림 내에서 아직 이전된 적이 없는 부분에 관련한 그것의 세부 부분(subpart) - 이 서로 동일한지 여부에 관한 확인이 수행된다. 만일 이러한 경우, 이들의 공통 코딩 파라미터들은 병합 참조(reference)와 같이 설정되며, 또는 후보 블록들은 단계 468에서 병합 파트너들과 같이 설정되며, 그리고 각각의 흥미 코딩 파라미터들은 단계 464에서 적응 또는 예측을 위해 사용된다.
병합 파트너들 그 자체가 블록이었던 적이 있을 수 있으며, 병합은 블록을 위해 시그널링되었음을 주의해야 한다. 이러한 경우, 단계 464에서 적응된 또는 예측대로 획득된 코딩 파라미터들에 대한 병합 파라미터는 사용된다.
그러나, 그렇지 않으면, 즉, 코딩 파라미터들이 동일하지 않은 경우, 도 10의 상기 프로세스는 단계 470으로 진행하며, 그 곳에는 추가적인 구문 요소는 데이터 스트림(즉, 그 merge_left_flag)으로부터 추출된다. 문맥들의 분리 집합은 그 플래그의 엔트로피-디코딩을 위해 사용될 수 있을 것이다. merge_left_flag의 엔트로피 디코딩을 위해 사용되는 문맥들의 집합은 단지 하나의 문맥을 또한 포함할 수 있을 것이다. 단계 480 후, merge_left_flag에 의해 표시되는 후보 블록은 단계 472에서 병합 파트너로 설정되며, 그리고 단계 464에서 적응 또는 예측을 위해 사용된다. 단계 464 후, 추출부(102)는 블록 순서로 다음 블록에 대한 처리로 진행한다.
당연히, 많은 대안들이 존재한다. 예를 들어, 결합된 구문 요소는 병합 프로세스를 시그널링하는 결합된 구문 요소들 전에 설명된 merge_left_flag 및 분리 구문 요소들 merge_flag 대신에 상기 데이터 스트림 내에서 전송될 수 있을 것이다. 추가적으로, 앞서 언급된 merge_left_flag는 두 개의 후부 블록들이 동일한 예측 파라미터들을 가지거나 또는 가지지 않는 것에 관계 없이 데이터 스트림 내에서 전송될 수 있으며, 그로 인해 도 10의 프로세스 수행을 위한 계산상의 오버헤드는 감소한다.
예를 들어, 도 9b에 관하여 이미 언급된 것으로서, 두 개의 블록들보다 많은 것은 후보 블록들의 집합으로 포함될 수 있을 것이다. 추가적으로 병합 정보(즉, 블록이 병합되는지 여부를 시그널링하는 정보, 그리고 만일 블록이 병합되는 경우, 그것은 후보 블록과 병합됨)는 하나 이상의 구문 요소들에 의해 시그널링될 수 있을 것이다. 제1 구문 요소는, 블록이 상기에서 설명된 merge_flag와 같은 어떤 후보 블록들과 병합되는지 여부를 명시할 수 있다. 만일 후보 블록들의 집합이 비어있지 않은 경우, 플래그는 오직 전송될 수 있을 것이다. 제2 구문 요소는, 앞서 언급된 merge_left_flag와 같은 병합을 위해 사용되는 후보 블록들 중 어떤 것에 대한 신호를 보낼 수 있을 것이며, 그러나 일반적으로 두 개의 후보 블록보다 적어도 두 개 이상 중에서 선택을 표시한다. 만일 제1 구분 요소가 현재 블록이 후보 블록들 중 하나와 병합되는 것에 대한 신호를 보내는 경우, 제2 구문 요소는 오직 전송될 수 있을 것이다. 만일 후보 블록들 중 집합이 하나 이상의 후보 블록을 포함하는 경우 및/또는 후보 블록들 중 어떤 것이 후보 블록들 중 다른 어떤 것과 다른 예측 파라미터들을 가지는 경우, 제2 구문 요소는 추가적으로 오직 전송될 수 있을 것이다. 구문는 얼마나 많은 후보 블록들이 주어지는지 및/또는 어떻게 다른 예측 파라미터들이 후보 블록들에 연관되는지에 의존할 수 있을 것이다.
사용되는 후보 블록들 중 어떤 블록들의 시그널링을 위한 구문는, 인코더 및 디코더 측에서 동시적으로 및/또는 병렬적으로 설정될 수 있을 것이다. 예를 들어, 만일 단계 450에서 확인된 후보 블록들을 위한 3개의 선택들이 존재하는 경우, 예를 들어, 단계 470에서, 오직 이들 3개의 선택들이 엔트로피 코딩을 위해 고려되고 사용 가능하도록 구문가 선택된다. 즉, 그것의 심볼 알파벳이 후보 블록들 존재의 선택들만큼 많은 요소들을 단지 가지도록 구문 요소는 선택된다. 모든 다른 선택들의 가능성들은 0으로 고려될 수 있으며, 그리고 엔트로피-코딩/디코딩은 인코더 및 디코더에서 동시에 조절될 수 있을 것이다.
추가적으로, 단계 464에 관하여 이미 언급된 것으로서, 병합 프로세스의 결과로서 추론되는 예측 파라미터들은 현재 블록들에 연관되는 예측 파라미터들의 완전한 집합을 표현할 수 있을 것이며, 또는 그들은 블록의 하나의 가정(hypothesis)을 위한 예측 파라미터들과 같은 이들 예측 파라미터들의 부분집합을 표현할 수 있을 것이며, 멀티-가정 예측은 이를 위해 사용된다.
상기에서 언급된 것으로서, 병합 정보에 관련된 구문 요소들은 문맥 모델링을 사용하여 엔트로피-코딩될 수 있다. 문맥 요소들은 (유사한 구문 요소들 또는) 상기에서 설명된 merge_left_flag 및 merge_flag로 구성될 수 있을 것이다. 구체적인 예에서, 문맥들 또는 3개의 문맥 모델들에서 벗어난 그것은, 예를 들어, 단계 454에서 merge_flag의 코딩/디코딩을 위해 사용될 수 있다. 사용된 문맥 모델 인덱스 merge_flag_ctx는 다음과 같이 획득될 수 있을 것이다. 만일 후보 블록의 집합이 두 개의 요소들을 포함하는 경우, merge_flag_ctx의 값은 두 개의 후보 블록들에 대한 merge_flag의 값들의 합과 동일하다. 그러나, 만일 후보 블록들의 집합이 하나의 요소를 포함하는 경우, merge_flag_ctx의 값은 그 하나의 후보 블록에 대한 merge_flag의 값의 2배와 동일할 수 있을 것이다. 이웃하는 후보 블록들의 각 merge_flag가 1 이거나 또는 0일 수 있는 것처럼, 3개의 문맥들은 merge_flag를 위해 사용 가능하다. merge_left_flag는 단지 하나의 가능성 모델을 사용하여 코딩될 수 있을 것이다.
그러나, 대안적인 실시예에 따라, 다른 문맥 모델들이 사용될 수 있을 것이다. 예를 들어, 비-이진(non-binary) 구문 요소들은 빈스(bins)라고 불리는 이진 심볼들의 시퀀스상에서 매핑될 수 있을 것이다. 다른 구문 요소들 또는 구문 요소들의 빈스(bins)가 고정된 문맥 모델로 코딩될 수 있는 반면, 병합 정보를 정의하는 구문 요소들의 빈스(bins) 또는 몇몇의 구문 요소들을 위한 문맥 모델들은, 이웃하는 블록들에 대한 이미 전송된 구문 요소들 또는 후보 블록들의 수 또는 다른 측정들을 기반으로 획득될 수 있을 것이다.
상술한 블록들의 병합의 설명에 따르면, 후보 블록들의 집합은 다음의 정정(후보 블록들은 각각 움직임-보상 또는 인터 예측을 사용하는 블록들로 제한된다)과 함께 상술한 실시예들 중 하나와 같은 방법으로 얻어질 수 있다. 오직 그것들은 후보 블록들의 집합의 요소들이 될 수 있다. 상기 시그널링 및 병합 정보의 문맥 모델링은 상술한 바와 같이 될 수 있다.
위에서 설명된 멀티트리 세부분할 실시예들의 조합으로의 전환 및 지금 설명된 병합 관점에서, 만일 픽쳐가 쿼드트리-기반의 세부분할 구조의 사용에 의해 다양한 사이즈의 정사각형 블록들로 나누어지는 경우, 예를 들어, merge_flag 및 merge_left_flag 또는 병합을 명시한 다른 구문(syntax) 요소들은 쿼드트리 구조의 각각의 리프 노드를 위해 전송되는 예측 파라미터들과 함께 인터리빙(interleave)될 수 있다. 도 9a를 예를 들어, 다시 고려해보자. 도 9a는 다양한 사이즈의 예측 블록들 안의 픽쳐의 쿼드트리-기반의 세부분할에 대한 예를 나타낸다. 가장 큰 사이즈의 위쪽 두 개의 블록들은 소위 트리블록들, 즉, 그것들은 최대 가능한 사이즈의 예측 블록들이다. 도 9a 내의 다른 블록들은 그들의 상응하는 트리블록의 세부분할과 같은 것을 얻는다. 현재 블록은 "X"로 표시되어 있다. 모든 음영진(shaded) 블록들은 현재 블록 전에 인코딩/디코딩되어, 상기 모든 음영진 블록들은 인과적 블록들의 집합을 형성한다. 실시예들 중에 하나를 위해 후보 블록들의 집합의 획득의 명세서 내에서 분석되고, 현재 블록의 좌상단(top-left) 샘플 포지션의 샘플들과 직접적으로 이웃하는 방향(즉, 위쪽 또는 왼쪽)을 포함하는 블록들만 후보 블록들의 집합의 멤버들이 될 수 있다. 따라서, 현재 블록은 블록 "A" 또는 블록 "B"와 함께 병합될 수 있다. merge_flag가 0("false"를 위한)과 같으면, 현재 블록 "X"는 다른 2개의 블록들과 함께 병합되지 않는다. "A" 및 "B" 블록들이 동일한 예측 파라미터들을 가지는 경우, 상기 두개의 블록들의 병합은 같은 결과를 이끌어 낼 것이므로, 구별이 될 필요가 없다. 따라서, 이 경우, merge_left_flag는 전송되지 않는다. 반대로, 블록 "A" 및 블록"B"가 다른 예측 파라미터들을 가지는 경우, 1("true"를 위한)과 같은 merge_left_flag는 블록 "X"와 "B"를 병합할 것임에 비하여, 0("false"를 위한) 과 같은 merge_left_flag는 블록 "X"와 "A"를 병합할 것이다. 다른 실시예에서, 추가로 이웃하는(이미 전송된) 블록들은 병합을 위해 후보들을 표시한다.
도 9b에는 다른 실시예가 도시된다. 여기서, 상기 현재 블록 "X" 및 왼쪽 이웃 블록 "B"는 트리블록들이며, 즉, 그들은 최대 허용된 블록 사이즈를 가진다. 위쪽 이웃하는 블록 "A"의 사이즈는 트리블록 사이즈의 1/4이다. 인과적 블록들의 집합의 요소인 블록들은 음영되어 있다. 본 발명의 일 실시예에 따르면, 현재 블록 "X"는 다른 위쪽 이웃하는 블록들과는 병합할 수 없고, 오직 "A" 또는 "B" 2개의 블록들과만 병합될 수 있다. 다른 실시예에서는, 추가로 이웃하는(이미 전송된) 블록들은 병합을 위해 후보들을 표시한다.
본 출원의 실시예에 따라 픽쳐의 다른 샘플 배열들을 다루는 방법 측면에 관한 설명을 계속하기 전에, 멀티트리 세부분할, 상기 하나의 방향(hand)에서의 시그널링, 다른 방향(hand)에서의 병합 측면에 관한 위에서의 논의가 서로로부터 독립적으로 이용될 수 있는 이점을 제공하는 측면들을 명확하게 해준다. 즉, 이미 상술한 바와 같이, 멀티트리 세부분할과 병합의 조합은 구체적인 이점들을 가지나, 이점들은 또한, 예를 들어 병합 특징이 구체화되는 대안들로부터 생긴다. 그러나, 세부 분할부(30, 104a)에 의해 수행되는 세부분할은 쿼드트리 또는 멀티트리 세부분할에 기초되지 않고, 오히려 매크로블록들의 레귤러 구획을 더 작은 구획으로 매크로 블록 세부분할화하는 것과 상응한다. 반대로, 순서대로, 비트스트림 내의 최대 트리블록 사이즈 지시의 전송에 따른 멀티트리 세부분할의 조합 및 블록들의 상응하는 코딩 파라미터 운반하는 깊이-우선(depth-first) 횡단 순서의 사용에 따른 멀티트리 세부분할의 사용은 동시 또는 동시가 아닌 상태로 사용되는 병합 특징으로부터 독립적인 이점이 있다. 일반적으로, 병합의 이점들은, 블록의 세부분할의 허용뿐만 아니라 세부분할 후 얻어진 2개 또는 더 많은 블록들의 병합을 허용하는 방법에서 샘플 배열 코딩들의 구문(syntax)이 확장되는 때에 코딩 효율이 증가될 수 있다는 것을 고려해 볼 때에 직관적으로 이해될 수 있다. 결과적으로, 병합은 같은 예측 파라미터들로 코딩되어 있는 블록들의 그룹을 얻는다. 블록들의 그룹을 위한 예측 파라미터들은 오직 한번 코딩될 필요가 있다. 더욱이, 샘플들의 집합들의 병합에 관하여, 고려된 샘플들의 집합들은 직사각형 또는 정사각형의 블록들일 수 있고, 샘플들의 병합된 집합들의 경우는 직사각형 및/또는 정사각형의 블록들의 컬렉션(collection)을 나타냄을 알아야한다. 그러나, 그 대신에, 샘플들의 고려된 집합들은 임의대로 구체화된 픽쳐 영역들이고, 샘플들의 병합된 집합들은 임의로 구체화된 픽쳐 영역들의 컬렉션을 나타낸다.
다음 설명은 픽쳐마다 적어도 하나의 샘플 배열이 있는 경우에 픽쳐의 다른 샘플 배열들을 핸들링하는데 초점을 맞추고, 다름 부연 설명 내의 몇 가지 관점들의 개요는 사용된 세부분할의 종류로부터 독립적인 즉, 멀티트리 세부분할 또는 멀티트리 세부분할이 아닌 것에 기초한 세부분할으로부터 독립적이고, 사용되거나 사용되지 않은 병합으로부터 독립적인 이점들이 있다. 픽쳐의 다른 샘플 배열들의 핸들링에 관한 구체적인 실시예들을 설명하는 것을 시작하기 이전에, 이러한 실시예들의 메인 이슈는 픽쳐 마다 다른 샘플의 핸들링의 필드 내의 짧은 소개의 방법에 의해 동기화된다.
다음 논의는 이미지 또는 비디오 코딩 어플리케이션 내의 픽쳐의 다른 샘플 배열들의 블록들 사이에 코딩 파라미터들에 초점을 맞추고, 특히, 다음의 논의는 예를 들어 그러나 비배타적으로 도1 및 도 2의 인코더 및 디코더 또는 다른 이미지 또는 비디오 코딩 환경 내 픽쳐의 다른 샘플 배열들 사이의 적응적인 예측 코딩 파라미터들의 방법에 초점을 맞춘다. 상술한 바와 같이 샘플 배열들은 투명도 데이터 또는 깊이 맵들과 같은 추가 정보와 함께 픽쳐와 관련된 샘플 배열들 또는 다른 컬러 요소들과 관련된 샘플 배열들을 나타낼 수 있다. 픽쳐의 컬러 요소들과 관련된 샘플 배열들은 또한, 컬러 평면들로 언급된다. 다음에 설명된 기술은 평면 간 채택/예측에 관련되고, 평면 간 채택/예측은 블록 기초(block-based) 이미지, 비디오 인코더들, 디코더들에 사용될 수 있고, 평면 간 채택/예측으로 인해 픽쳐를 위한 샘플 배열들의 블록들의 프로세싱 순서는 임의적일 수 있다.
이미지 및 비디오 코더들은 컬러 픽쳐들(스틸 이미지들 또는 비디오 시퀀스의 픽쳐들 중 하나)을 코딩하기 위해 전형적으로 디자인 된다. 컬러 픽쳐는 다른 컬러 요소들을 위한 샘플 배열을 나타내는 멀티플 컬러 평면들로 구성된다. 주로, 컬러 픽쳐들은 루마(luma) 평면 및 컬러 차이 요소들을 구체화하는 2개의 크로마(chroma) 평면들로 구성되는 샘플 배열들의 집합으로 코딩된다. 몇개의 어플리케이션 지역들에서, 코딩된 샘플 배열들의 집합이 3개의 주요색인 빨간색, 녹색 및 파란색을 위한 샘플 배열들을 나타내는 3개의 컬러 평면들로 구성되는 것은 일반적이다. 추가적으로, 향상된 컬러 표현을 위해, 컬러 픽쳐는 3가지 컬러 평면들 보다 많은 것으로 구성될 수 있다. 더욱이, 픽쳐는 상기 픽쳐를 위한 추가 정보를 상세화하는 예비 샘플 배열들과 관련될 수 있다. 예를 들어, 예비 샘플 배열들은 관련된 컬러 샘플 배열들을 위한 투명도(상세한 디스플레이 목적들에 적합한)를 상세화하는 샘플 배열들 또는 깊이 맵(렌더링 멀티플 뷰들에 적합한, 예를 들어, 3-D 디스플레이들)을 상세화하는 샘플 배열들일 수 있다.
종래의 이미지 및 비디오 코딩 표준(예를 들어, H.264)에서, 상기 컬러 평면들은 함께 코딩되고, 그것으로 인해 매크로 블록 및 서브-매크로블록 예측 모드들, 참조 인덱스들 및 움직임 벡터들과 같은 특별한 코딩 파라미터들은 블록의 모든 컬러 요소들을 위해 사용된다. 루마(luma) 평면은 특별한 코딩 파라미터들이 비트스트림에서 상세화하는 목적인 프라이머리 컬러 평면으로 고려되고, 크로마(chroma) 평면은 상응하는 코딩 파라미터들이 프라이머리 루마(luma) 평면으로부터 추론되는 목적인 세컨더리 평면들로 고려될 수 있다. 각각의 루마(luma) 블록은 픽쳐에서 같은 지역을 표현하는 2개의 크로마(chroma) 블록들과 관련이 있다. 사용된 크로마(chroma) 샘플링 포맷에 따라, 크로마(chroma) 샘플 배열들은 블록을 위한 루마(luma) 샘플 배열보다 더 작을 수 있다. 하나의 루마(luma) 및 2개의 크로마(chroma) 요소들로 구성되는 각각의 매크로블록을 위해, 더 작은 블록들 안에 있는 같은 구획이 사용된다(매크로블록이 세부분할된 경우). 루마(luma) 샘플들의 블록 및 크로마(chroma) 샘플들(자신이 매크로블록 또는 매크로블록의 서브블록이 될 수 있는)의 2개의 블록들로 구성되는 각각의 블록을 위해, 참조 인덱스들, 움직임 파라미터들, 및 때때로 인트라 예측 모드들과 같은 예측 파라미터 집합들이 이용될 수 있다. 종래 비디오 코딩 표준(H.264 내의 4:4:4 프로파일들)의 상세한 프로파일들에서, 픽쳐의 다른 컬러 평면들을 독립적으로 코딩하는 것은 가능하다. 그러한 구성에서, 매크로블록 구획, 예측 모드들, 참조 인덱스들, 및 움직임 파라미터들은 매크로블록 또는 서브블록의 컬러 요소를 위해 분리하여 선택될 수 있다. 종래의 코딩 표준들에서, 모든 컬러 패널들은 특별한 코딩 파라미터들(세부분할 정보 및 예측 파라미터들과 같은)의 같은 집합을 함께 사용하여 코딩되거나, 모든 컬러 패널들은 서로서로 완전히 독립적으로 코딩된다.
상기 컬러 평면들이 함께 코딩되면, 세부분할의 하나의 집합 및 예측 파라미터들은 하나의 블록의 모든 컬러 요소들을 위해 사용되어야 한다. 이것은 보조 정보가 작게 유지되는 것을 확실하게 하지만, 다른 컬러 요소들을 위한 다른 블록 분해들 및 예측 파라미터들의 사용이 더 작은 율-왜곡(rate-distortion) 비용을 야기할 수 있기 때문에, 그것은 독립 코딩과 비교해 볼 때 코딩 효율의 감소를 야기할 수 있다. 예와 같이, 다른 움직임 벡터 또는 크로마(chroma) 요소들을 위한 참조 프레임의 사용은 크로마(chroma) 요소들을 위한 잔차 신호의 에너지를 현저히 줄여줄 수 있고, 그들의 전반적인 코딩 효율을 현저히 증가시킬 수 있다. 컬러 평면들이 독립적으로 코딩되면, 블록 구획, 참조 인덱스들 및 움직임 파라미터들과 같은 코딩 파라미터들은 각각의 컬러 요소들 위한 코딩 효율을 최적화하기 위해 각각의 컬러 요소들을 위하여 개별적으로 선택될 수 있다. 그러나, 컬러 요소들 사이의 반복을 이용하는 것은 가능하지 않다. 특별한 코딩 파라미터들의 멀티플 전송은 증가된 보조 정보 비율(병합 코딩과 비교한)을 야기할 수 있고, 이러한 증가된 보조 정보 율은 전반적인 코딩 효율에 부정적인 효과를 가질 수 있다. 또한, 최신의 비디오 코딩 표준(예를 들어, H.264)에서 예비 샘플 배열들을 위한 지원은 코딩 파라미터들의 그들 자신의 집합을 이용할 때 예비 샘플 배열들이 코딩되는 경우에 제한된다.
따라서, 지금까지 설명된 모든 실시예에서, 상기 픽쳐 평면들은 상술된 바와 같이 핸들링 될 수 있지만, 하나의 블록에서 결정할 수 있는 경우, 예를 들어, 같은 코딩 파라미터들과 함께 하나의 블록을 위한 모든 샘플 배열들이 코딩될 수 있거나 없는 경우 또는 다른 코딩 파라미터들이 사용되거나 사용될 수 없는 경우, 상술된 바와 같이 멀티플 샘플 배열들(다른 컬러 평면들 및/또는 예비의 샘플 배열들과 관련될 수 있는)의 코딩을 위한 전반적인 코딩 효율은 증가될 수 있다. 다음의 평면 간 예측(inter-plane prediction)의 기본 아이디어는 예를 들어, 하나의 블록 기초로 적응적 결정을 허용하는 것이다. 인코더는 예를 들어 율-왜곡(rate-distortion) 기준에 기초하여, 특별한 블록을 위한 샘플 배열들의 모든 또는 몇몇이 같은 코딩 파라미터들을 사용하여 코딩되는지 코딩되지 않는지 또는 다른 샘플 배열들을 위한 다른 코딩 파라미터들이 사용되는지 사용되지 않는지를 선택할 수 있다. 이러한 선택은 상세한 코딩 파라미터들이 다른 샘플 배열의 이미 코딩되어 함께 배치된(co-located) 블록으로부터 추론된 경우 또는 추론되지 않은 경우 샘플 배열의 특별한 블록을 위해 시그널링에 의해 수행될 수 있다. 샘플 배열 그룹들 또는 평면 그룹들로 또한 참조된 그룹들 내의 픽쳐를 위한 다른 샘플 배열들을 조정하는 것은 가능하다. 각각의 평면 그룹은 픽쳐의 적어도 하나의 샘플 배열들을 포함할 수 있다. 그리고, 다른 코딩 파라미터들 예를 들어 전송 계수 레벨들은 상기 평면 그룹 내에 있는 각각의 샘플 배열들을 위해 개별적으로 전송됨에 비해, 평면 그룹 안쪽의 샘플 배열들의 블록들은 같은 선택된 코딩 파라미터들 예를 들어, 세부분할 정보, 예측 모드들, 및 잔차 코딩 모드들을 공유한다. 하나의 평면 그룹은 프라이머리 평면 그룹으로 코딩되고, 즉, 어떠한 코딩 파라미터들도 다른 평면 그룹들로부터 추론 또는 예측되지 않는다. 제2의 평면 그룹의 각각의 블록을 위해, 선택된 코딩 파라미터들의 새로운 집합이 전송되는지 전송되지 않는지 또는 상기 선택된 코딩 파라미터들이 프라이머리 또는 다른 세컨더리 평면 그룹으로부터 추론 또는 예측되는지 예측되지 않는지는 적응적으로 선택될 수 있다. 특별한 블록을 위한 선택된 코딩 파라미터들이 추론되는지 또는 예측되는지에 대한 결정들은 비트스트림에 포함된다. 평면 간 예측은 보조 정보 비율과 멀티플 샘플 배열들로 구성된 픽쳐의 최신 코딩과 관련된 예측 품질 사이의 절충 선택에서 더 큰 자유로움을 허용한다. 이점은 멀티플 샘플 배열들로 구성된 픽쳐의 종래 코딩과 관련된 향상된 코딩 효율이다.
인트라-평면(intra-plane) 채택/예측은 이미지 또는 비디오 코더를 확장할 수 있고, 예를 들어 상술된 실시예들과 같이, 코딩 파라미터들의 선택된 집합이 같은 픽쳐 내의 다른 샘플 배열들의 이미 코딩되어 함께 배치된 블록들로부터 추론 또는 예측되는지 안 되는지 또는 블록을 위한 코딩 파라미터들의 선택된 집합이 같은 픽쳐 내의 다른 샘플 배열들의 함께 위치된 블록들의 참조 없이 독립적으로 코딩되는지 안 되는지는 컬러 샘플 배열의 블록 또는 예비 샘플 배열 또는 컬러 샘플 배열의 집합 및/또는 예비 샘플 배열들에 의해 적응적으로 선택될 수 있다. 코딩 파라미터들의 선택된 집합이 샘플 배열의 블록 또는 멀티플 샘플 배열들의 블록을 위해 추론 또는 예측되는지에 대한 결정들은 비트스트림에 포함될 수 있다. 픽쳐와 관련된 다른 샘플 배열들은 같은 사이즈를 가질 필요가 없다.
상술한 바와 같이, 픽쳐(샘플 배열들은 컬러 요소들 및/또는 예비 샘플 배열들을 나타낸다)와 관련된 샘플 배열들은 2개 이상의 이른바 평면 그룹들로 조정될 수 있고, 각각의 평면 그룹은 적어도 하나의 샘플 배열들로 구성된다. 특별한 평면 그룹 내에 포함된 샘플 배열들은 같은 사이즈를 가질 필요가 없다. 평면 그룹으로의 조정은 각각의 샘플 배열이 개별적으로 코딩되는 경우를 포함한다.
보다 상세하게, 일 실시예에 따르면, 어떻게 블록이 예측되는지 명시하는 코딩 파라미터들이 같은 픽쳐를 위해 다른 평면 그룹의 이미 코딩되어 함께 배치된 블록으로부터 추론 또는 예측되는지 여부 또는 이러한 코딩 파라미터들이 블록을 위해 개별적으로 코딩되는지 여부는 하나의 평면 그룹의 각각의 블록을 위해 적응적으로 선택된다. 어떻게 블록이 예측되는지 명시하는 코딩 파라미터들은 적어도 하나의 다음의 코딩 파라미터들: 블록을 위해 어떤 예측이 사용되는지 명시하는 블록 예측 모드들(인트라 예측, 싱글 움직임 벡터 및 참조 픽쳐를 이용하는 인터 예측, 2개의 움직임 벡터들 및 참조 픽쳐들을 이용하는 인터 예측, 고차-모드(higher-mode)를 이용하는 인터 예측, 즉, 비-변형(non-translational) 움직임 모델 및 하나의 싱글 참조 픽쳐, 멀티플 움직임 모델들 및 참조 픽쳐들을 이용하는 인터 예측), 어떻게 하나의 인트라 예측 신호가 생성되는지 명시하는 인트라 예측 모드들, 얼마나 많은 예측 신호들이 블록을 위한 마지막 예측 신호를 생성하기 위해 병합되는지 구체화하는 식별자, 어떤 참조 픽쳐(들)가 움직임-보상 예측을 위해 이용되는지 구체화하는 참조 인덱스들, 참조 픽쳐(들)를 이용할 때 어떻게 예측 신호(들)이 생성되는지 구체화하는 움직임 파라미터들(예를 들어, 변위벡터(displacement vectors) 또는 어파인(affine) 움직임 파라미터들), 움직임-보상 예측 신호들을 생성하기 위해 어떻게 참조 픽쳐(들)가 필터링되는지 구체화하는 식별자를 포함한다. 일반적으로, 하나의 블록은 오직 상기 언급된 코딩 파라미터들의 부분집합과 관련될 수 있다. 예를 들어, 만일 블록 예측 모드가 하나의 블록이 인트라 예측된 것으로 명시하면, 블록을 위한 코딩 파라미터들은 추가적으로 인트라 예측 모들들을 포함할 수 있으나, 코딩 파라미터들 예를 들어 참조 인덱스 및 어떻게 인터 예측 신호가 생성되는지 명시하는 움직임 파라미터들은 명시되지 않고; 또는 만일 블록 예측 모드가 인터 예측을 명시하면, 상기 관련된 코딩 파라미터들은 참조 인덱스들 및 움직임 파라미터들을 추가적으로 포함할 수 있으나, 인트라 예측 모드들은 명시되지 않는다.
둘 이상의 평면 그룹들 중 하나는 프라이머리(primary) 평면 그룹과 같은 비트스트림 내에서 코딩 또는 지시될 수 있다. 이 프라이머리 평면 그룹의 모든 블록들을 위해, 어떻게 예측 신호가 생성되는지 명시하는 코딩 파라미터들은 같은 픽쳐의 다른 평면 그룹에 대한 참조 없이 전송된다. 남아있는 평면 그룹들은 제2 평면 그룹들로 코딩된다. 세컨더리(secondary) 평면 그룹들의 각각의 블록을 위해, 적어도 하나의 구문 요소들은 전송되어, 어떻게 블록이 예측되는지 명시하기 위한 코딩 파라미터들이 다른 평면 그룹들의 함께 배치된 블록으로부터 추론 또는 예측되는지 추론 또는 예측되지 않는지 또는 이러한 코딩 파라이터들의 새로운 집합이 블록을 위해 전송되는지 전송되지 않는지에 관한 신호를 보낸다. 하나 이상의 구문 요소들 중 하나는 평면 간 예측 플래그 또는 평면 간 예측 파라미터로 참조될 수 있다. 만일 구문 요소들이 상응하는 코딩 파라미터들이 추론 또는 예측되지 않도록 신호를 보내면, 블록을 위한 상응하는 코딩 파라미터들의 새로운 집합은 비트스트림 내에서 전송된다. 만일 구문 요소들이 상응하는 코딩 파라미터들이 추론 또는 예측되도록 신호를 보내면, 블록을 위한 참조 평면 그룹의 할당은 멀티플 방법으로 구성될 수 있다. 일 실시예에서, 특별한 참조 평면 그룹은 각각의 제2 평면 그룹으로 할당된다; 이 할당은 고정될 수 있고 또는 높은-레벨 구문 구조들 예를 들어, 파라미터 집합들, 엑세스 유닛 헤더, 픽쳐 헤더, 또는 슬라이스 헤더 내에서 신호가 보내질 수 있다.
제2 실시예에서, 참조 평면 그룹의 할당은 비트스트림 안쪽에서 코딩될 수 있고, 참조 평면 그룹의 할당은 선택된 코딩 파라미터들이 추론되는지 또는 예측되는지 또는 개별적으로 코딩되는지를 명시하기 위해 블록에 대해 코딩되는 적어도 하나의 구문 요소들에 의해 신호가 보내질 수 있다.
평면 간 예측 및 다음의 상세한 실시예들에 관하여 언급된 가능성들을 용이하게 하기 위해, 참조는 3 개의 샘플 배열들(502, 504, 506)로 구성된 픽쳐(500)를 분명하게 나타내는 도 11로 표현된다. 더 쉬운 이해를 돕기 위해, 샘플 배열들(502-506)의 오직 서브-부분들은 도 11에 나타내져 있다. 샘플 배열들은 그들이 서로서로에 대하여 공간적으로 등록된 것처럼 나타내져 있어, 샘플 배열들(502-506)은 508방향을 따라 서로서로 놓여져 있고, 508방향을 따라 샘플 배열들(502-506)의 샘플들의 투사는 모든 이러한 샘플 배열들(502-506)의 샘플들이 서로서로 정확하게 공간적으로 위치되는 것을 야기한다. 즉, 평면 502 및 506은 서로서로 그들의 공간적인 해상도를 적응시키고 서로를 등록시키기 위해 수평 및 수직 방향을 따라 펼쳐져 있다.
일 실시예에 따르면, 픽쳐의 모든 샘플 배열들은 공간적인 장면의 같은 부분에 속하고, 거기서 수직 및 수평 방향에 따른 해상도는 상기 개별적인 샘플 배열들(502-506) 사이에서 다를 수 있다. 더욱이, 도 11에서는, 상기 샘플 배열들(502, 504)은 하나의 평면 그룹(510)에 속하는 것으로 고려됨에 비해, 상기 샘플 배열(506)은 다른 평면 그룹(512)에 속하는 것으로 고려된다. 더욱이, 도 11은 샘플 배열(504)의 수평 축을 따른 공간적인 해상도가 샘플 배열(502)의 수평 방향 내에서의 분해에 2배가 되는 전형적인 경우를 도시한다. 더욱이, 샘플 배열(504)은 프라이머리 배열(504)과 관련된 종속 배열을 구성하는 샘플 배열(502)과 관련된 프라이머리 배열을 구성하도록 고려된다. 이 경우 상술한 바와 같이, 도 11의 예에 따라, 도 1의 세부 분할부(30)에 의해 결정된 바와 같이 샘플 배열(504)을 블록들로 세부분할하는 것은 종속 배열(502)에 의해 채택되고, 프라이머리 배열(504)의 수직 방향 내에서 이등분의 해상도인 샘플 배열(502)의 수직 해상도 때문에, 각각의 블록은 2개의 수평인 병치 블록들로 이등분되며, 샘플 배열(502) 내의 샘플 포지션들의 유닛들 내에 측정될 때 정사각형 블록들을 다시 이등분한다.
도 11에 현재 나타낸 바와 같이, 샘플 배열(506)을 위해 선택된 세부분할은 다른 평면 그룹(510)의 세부분할과 다르다. 상술한 바와 같이, 세부 분할부(30)은 픽셀 배열(506)의 세부분할을 개별적으로 선택 또는 평면 그룹(510)을 위해 세부분할으로부터 독립적으로 선택할 수 있다. 물론, 샘플 배열(506)의 해상도는 평면 그룹(510)의 평면들(502, 504)의 해상도와 다를 수 있다.
개별적인 샘플 배열들(502-506)을 인코딩할 때, 인코더(10)는 예를 들어 위에 설명된 방법으로 평면 그룹 내의 프라이머리 배열(504)의 코딩과 함께 시작할 수 있다. 도 11의 블록들은, 예를 들어 상기 언급된 예측 블록들일 수 있다. 그 대신에, 상기 블록들은 잔차 블록들 또는 소정 코딩 파라미터들을 정의하기 위한 입상도(granularity)를 정의하는 다른 블록들이다. 상기 평면 간 예측은 도 11에 도시되어 있을 지라도, 쿼드트리 또는 멀티트리 세부분할에 제한되지 않는다.
프라이머리 배열(504)을 위한 구문 요소의 전송 후에, 인코더(10)는 프라이머리 배열(504)이 종속 평면(502)를 위한 참조 평면이라고 선언하는 것을 결정한다. 상기 어소시에이션이 샘플 배열(504)은 정보가 순서대로 또한 상기 비트스트림(22)의 부분일 수 있는 평면 그룹(510)의 프라이머리 배열을 형성한다는 사실로부터 명확할 수 있고, 인코더(10) 및 추출부(30) 각각은 상기 비트스트림(22)을 통해 이러한 결정에 대한 신호를 보낼 수 있다. 이 경우, 삽입부(18)인 샘플 배열(502) 내의 각각의 블록을 위해 또는 삽입부(18)와 함께 인코더(10)의 다른 모듈은 비트스트림 내의 이 블록의 코딩 파라미터들의 이동을 억제할 수 있고, 프라이머리 배열(504) 내에서 함께 배치된 블록의 코딩 파라미터들 대신 사용되는 그 블록을 대신하기 위해 상기 비트스트림 내에서 신호를 보내는 것을 결정할 수 있고, 또는 프라이머리 배열(504) 내의 함께 배치된 블록의 코딩 파라미터들은 비트스트림 내의 샘플 배열(502)의 현재 블록을 위해 오직 잔차 데이터를 전송하는 것과 함께 샘플 배열(502)의 현재 블록의 코딩 파라미터들을 위한 예측과 같이 사용될 수 있다. 부정적인 결정의 경우, 상기 코딩 파라미터들은 대게 데이터 스트림 내에서 전송된다. 상기 결정은 각각의 블록을 위해 데이터 스트림(22) 내에서 신호가 보내진다. 디코더 측에서, 상기 추출부(102)는 샘플 배열(502)의 각각의 블록의 코딩 파라미터들을 얻기 위해 각 블록을 위한 이 평면 간 예측 정보를 적절히 사용하고, 즉 프라이머리 배열(504)의 함께 배치된 블록의 코딩 파라미터들을 추론함으로써, 또는 그 대신에, 데이터 스트림으로부터 그 블록을 위한 잔차 데이터를 추출하고 상기 평면 간 채택/예측 정보가 평면 간 채택/예측을 제안하는 경우 프라이머리 배열(504)의 함께 배치된 블록의 코딩 파라미터들로부터 획득된 예측과 함께 이 잔차 데이터를 병합하고, 또는 프라이머리 배열(504)로부터 대개 독립된 샘플 배열(502)의 현재 블록의 코딩 파라미터들을 추출할 수 있다.
상술한 바와 같이, 참조 평면들은 평면 간 예측이 현재 관심(interest)인 블록과 같이 같은 평면 그룹 내에 존재하도록 제한되지 않는다. 따라서, 상술한 바와 같이, 평면 그룹(510)은 프라이머리 평면 그룹 또는 세컨더리 평면 그룹(510)을 위한 참조 평면 그룹을 나타낼 수 있다. 이 경우, 상기 비트스트림은 참조 평면 그룹(510) 또는 프라이머리 평면 그룹의 평면(502, 504)의 함께 배치된 매크로블록들의 코딩 파라미터들의 이미 언급된 채택/예측이 수행되는지 안되는지에 관해 샘플 배열(506)의 각각의 블록을 위해 지시하는 구문 요소를 포함할 수 있고, 채택/예측이 수행되지 않는 경우에 샘플 배열(506)의 현재 블록의 코딩 파라미터들은 대게 전송될 수 있다.
평면 그룹 안쪽의 평면들을 위한 세부분할 및/또는 예측 파라미터들은 같을 수 있으며, 즉, 그들은 하나의 그룹(하나의 평면의 모든 제2 평면들은 같은 평면 그룹 안쪽의 프라이머리 평면으로부터 세부분할 정보 및/또는 예측 파라미터들을 추론한다)을 위해 오직 한번 코딩되기 때문에, 그리고 적응적 예측 또는 세부분할 정보 및/또는 예측 파라미터들의 간섭은 평면 그룹들 사이에서 수행된다.
참조 평면 그룹은 프라이머리 평면 그룹이 될 수 있고, 또는 세컨더리 평면 그룹이 될 수도 있다.
하나의 평면 그룹 내의 다른 평면들의 블록들 사이에 함께 배치(co-location)는 쉽게 이해될 수 있고, 동시에 프라이머리 샘플 배열(504)의 세부분할은 종속 샘플 배열(502)에 의해 공간적으로 채택될 수 있으며, 채택된 리프 블록들을 정사각형 블록들로 만들기 위해 방금 설명된 블록들의 서브-구획은 제외한다. 다른 평면 그룹들 사이의 평면 간 채택/예측의 경우, 함께 배치(co-loaction)는 이러한 평면 그룹들의 세부분할 간에 더 큰 자유를 허용하는 것에 관한 방법으로 정의될 수 있다. 참조 평면 그룹이 정해졌을 때, 참조 평면 그룹 안쪽에 함께 배치된 블록은 결정된다. 함께 배치된 블록 및 참조 평면 그룹의 획득은 다음과 유사한 프로세스에 의해 수행될 수 있다. 제2 평면 그룹(512)의 샘플 배열(506) 중 하나의 현재 블록(516) 내의 특별한 샘플(514)은 선택된다. 같은 것은 도 11의 514로 나타낸 현재 블록(516)의 좌상단 샘플일 수 있고, 현재 블록(516)의 가운데 또는 현재 블록 안쪽의 다른 샘플에 가까운 현재 블록(516) 내의 샘플일 수 있다. 샘플 배열(502) 안쪽의 선택된 샘플(515)의 배치 및 참조 평면 그룹(510)의 502 및 504는 계산된다. 샘플 배열들(502, 504) 내의 샘플의 위치들은 각각 도 11의 518 및 520으로 나타내진다. 실질적으로 사용되는 참조 평면 그룹(510) 내의 평면들(502, 504)은 미리 결정되거나 또는 비트스트림 내에서 신호가 보내질 수 있다. 위치들(518 및 520)에 가장 가까운 참조 평면 그룹(510)의 상응하는 샘플 배열(502 또는 504) 내의 샘플은 각각 결정되고, 이러한 샘플을 포함하는 블록은 각각의 샘플 배열(502 및 504) 내에 함께-배치된 블록으로 각각 선택된다. 도 11의 경우, 이것들은 각각 522 및 524 블록들이다. 다른 평면 안에 함께 배치된 블록의 결정을 위한 대체의 기법은 이후에 설명된다.
일 실시예에서, 현재 블록(516)을 위한 예측을 명시하는 코딩 파라미터들은 전송되는 추가 보조 정보 없이 같은 픽쳐(500)의 다른 평면 그룹(510) 내에 함께 배치된 블록(522/524)의 상응하는 예측 파라미터들을 이용하여 완벽히 추론될 수 있다. 상기 추론은 상응하는 코딩 파라미터들의 단순 복제 또는 현재(512)와 참조 평면 그룹(510) 사이의 차이점이 고려된 코딩 파라미터들의 적응으로 구성될 수 있다. 예를 들어, 이러한 적응은 루마(luma) 및 크로마(chroma) 샘플 배열들 사이의 위상 차이를 고려하기 위해 움직임 파라미터 정정(예를 들어, 치환 벡터 정정)의 추가로 구성될 수 있고, 또는 적응은 루마(luma) 및 크로마(chroma) 샘플 배열들의 다른 해상도를 고려하기 위해 움직임 파라미터들의 정확한 변조로 구성될 수 있다. 다른 실시예에 있어서, 예측 신호 생성을 명시하기 위한 적어도 하나의 추론된 코딩 파라미터들은 현재 블록(516)을 위해 직접적으로 사용되지 않고, 현재 블록(516)을 위한 상응하는 코딩 파라미터들을 위한 예측으로 사용되며, 현재 블록(516)을 위한 이러한 코딩 파라미터들의 개선은 비트스트림(22)에서 전송된다. 예를 들어, 추론된 움직임 파라미터들은 직접적으로 사용되지 않고, 그러나 현재 블록(516)을 위해 사용되는 움직임 파라미터들과 추론된 움직임 파라미터들 사이의 편차를 명시하는 움직임 파라미터 차이들(예를 들어, 치환 벡터 차이)은 비트스트림에서 코딩되며; 디코더 측에서, 실제로 사용되는 움직임 파라미터들은 추론된 움직임 파라미터들 및 상기 전송된 움직임 파라미터 차이들의 병합에 의해 획득된다.
다른 실시예에 따르면, 블록의 세부분할, 예를 들어 예측 블록들(즉, 예측 파라미터들의 같은 집합이 사용되는 샘플들의 블록들)로 전술한 예측 세부분할의 트리블록들은 같은 픽쳐 즉, 도 6a 또는 도 6b에 따른 비트 시퀀스를 위한 다른 평면 그룹의 이미 코딩된 함께 배치된 블록으로부터 적응적으로 추론 또는 예측된다. 실시예에 따르면, 복수의 평면 그룹들 중 하나는 프라이머리 평면 그룹으로 코딩된다. 이 프라이머리 평면 그룹의 모든 블록을 위해, 세부분할 정보는 같은 픽쳐의 다른 평면 그룹들을 참조함 없이 전송된다. 남은 평면 그룹들은 제2 평면 그룹들로 코딩된다. 제2 평면 그룹들의 블록들을 위해, 적어도 하나의 구문 요소들은 전송되어 세부분할 정보가 다른 평면 그룹들의 함께 배치된 블록으로부터 추론 또는 예측 되는지 안되는지 또는 세부분할 정보가 비트스트림에서 전송되든지 안되는지 신호를 보낸다. 하나 이상의 구문 요소들 중 하나는 평면 간 예측 플래그 또는 평면 간 예측 파라미터로 참조될 수 있다. 세부분할 정보가 추론 또는 예측되지 않음을 구문 요소들이 신호를 보내면, 블록을 위한 세부분할 정보는 같은 픽쳐의 다른 평면 그룹들의 참조 없이 비트스트림 내에서 전송될 수 있다. 세부분할 정보가 추론 또는 예측됨을 구문 요소들이 신호를 보내면, 소위 참조 평면 그룹 내의 함께 배치된 블록은 결정된다. 블록을 위한 참조 평면 그룹의 할당은 멀티플한 방법으로 구성된다. 일 실시예에 있어서, 특정한 참조 평면 그룹은 각각의 제2 평면 그룹으로 할당되며; 이러한 할당은 고정될 수 있고 또는 이러한 할당은 파라미터 집합들, 엑세스 유닛 헤더, 픽쳐 헤더 또는 슬라이스 헤더와 같은 고차-레벨 구문 구조들에서 신호가 보내질 수 있다. 제2 실시예에 있어서, 참조 평면 그룹의 할당은 비트스트림 내에서 코딩되고 세부분할 정보가 추론 또는 예측되는지 개별적으로 코딩되는지 명시하기 위한 블록을 위해 코딩되는 적어도 하나의 구문 요소들에 의해 신호가 보내질 수 있다. 참조 평면 그룹은 프라이머리 평면 그룹 또는 다른 세컨더리 평면 그룹일 수 있다. 참조 평면 그룹이 주어지면, 참조 평면 그룹 안쪽의 함께 배치된 블록은 결정된다. 함께 배치된 블록은 현재 블록과 같이 같은 이미지 지역과 상응하는 참조 평면 그룹 내의 블록이거나, 또는 현재 블록과 함께 이미지 지역의 가장 큰 부분을 공유하는 참조 평면 그룹의 안쪽에 있는 블록을 나타내는 블록이다. 함께 배치된 블록은 더 작은 예측 블록들로 구획될 수 있다.
다른 실시예에 있어서, 현재 블록을 위한 세부분할 정보, 예를 들어 도 6a 또는 도 6b에 따른 쿼드트리-기반 세부분할 정보는, 추가 보조 정보의 전송 없이 같은 픽쳐의 다른 평면 그룹 내의 함께 배치된 블록의 세부분할 정보를 사용하여 완전히 추론된다. 특별한 예에 있어서, 함께 배치된 블록이 2개 또는 4개의 예측 블록들로 구획되면, 현재 블록은 예측을 목표로 2개 또는 4개의 서브블록들로 구획될 수 있다. 다른 특별한 예에 있어서, 함께 배치된 블록이 4개의 서브블록들로 구획되고, 이러한 서브블록들 중 하나가 4개의 더 작은 서브블록들로 더 구획되면, 현재 블록 또한 4개의 서브블록들로 구획되고 이러한 서브블록들 중 하나(더 분배된 함께 배치된 블록의 서브블록에 상응하는 하나) 또한 4개의 더 작은 서브블록들로 구획된다. 다른 실시예에 있어서, 추론된 세부분할 정보는 직접 현재 블록으로 사용되지는 않으나, 추론된 세부분할 정보는 현재 블록을 위한 실제 세부분할 정보를 위한 예측으로 사용되고, 상응하는 개선된 정보는 비트스트림 내에서 전송된다. 예를 들어, 함께 배치된 블록으로부터 추론된 세부분할 정보는 더 개선될 수 있다. 더 작은 블록들로 구획되지 않은 함께 배치된 블록 내의 서브블록과 상응하는 각각의 서브블록을 위해, 구문 요소는 서브블록이 현재 평면 그룹 내에서 더 분해되는지를 구체화하는 비트스트림 내에서 코딩될 수 있다. 구문 요소의 전송은 서브블록의 사이즈에 의해 제약을 받을 수 있다. 또는, 구문 요소의 전송은 비트스트림 내에서 신호가 보내질 수 있어 참조 평면 그룹 내에서 더 구획된 서브블록은 현재 평면 그룹 내의 더 작은 블록들로 더 구획되지 않는다.
다른 실시예에 있어서, 예측 블록들 안의 블록의 세부분할 및 어떻게 그 서브블록들이 예측되는지 명시하는 코딩 파라미터들은 같은 픽쳐를 위해 다른 평면 그룹의 이미 코딩된 함께 배치된 블록으로부터 적응적으로 추론 또는 예측될 수 있다. 본 발명의 일 실시예에 있어서, 복수의 평면 그룹들 중 하나는 프라이머리 평면 그룹으로 코딩된다. 이러한 프라이머리 평면 그룹의 모든 블록들을 위해, 세부분할 정보 및 예측 파라미터들은 같은 픽쳐의 다른 평면 그룹들의 참조 없이 전송된다. 잔여 평면 그룹들은 세컨더리 평면 그룹들로 코딩된다. 세컨더리 평면 그룹들의 블록들을 위해, 적어도 하나의 구문 요소들은 전송되어 세부분할 정보 및 예측 파라미터들이 다른 평면 그룹들의 함께 배치된 블록으로부터 추론 또는 예측되는지 되지 않는지 또는 세부분할 정보 및 예측 파라미터들은 비트스트림에서 전송되는지 안되는지 신호를 보낸다. 하나 이상의 구문 요소들 중 하나는 평면 간 예측 플래그 또는 평면 간 예측 파라미터로 참조될 수 있다. 만일 구문 요소들이 세부분할 정보 및 예측 파라미터들이 추론 또는 예측되지 않는다는 신호를 보내면, 블록을 위한 세부분할 정보 및 결과 서브블록들을 위한 예측 파라미터들은 같은 픽쳐의 다른 평면 그룹들은 참조하지 않고 비트스트림에서 전송된다. 만일 구문 요소들이 세부분할 정보 및 예측 파라미터들이 추론 또는 예측된다는 신호를 보내면, 소위 참조 평면 그룹 내의 함께 배치된 블록은 결정된다. 블록을 위한 참조 평면 그룹의 할당은 멀티플 방법들로 구성될 수 있다. 하나의 실시예에 있어서, 특정한 참조 평면 그룹은 각각의 제2 평면 그룹으로 할당되고; 이러한 할당은 고정될 수 있고 또는 예를 들어 파라미터 집합들, 엑세스 유닛 헤더, 또는 이러한 할당은 슬라이스 헤더와 같은 고차-레벨 구문 구조들 내에서 신호를 보낼 수 있다. 제2 실시예에 있어서, 참조 평면 그룹의 할당은 비트스트림 안쪽에서 코딩되고, 세부분할 정보 및 예측 파라미터들이 추론 또는 예측 또는 개별적으로 코딩되는지 안되는지 명시하기 위한 블록을 위해 코딩되는 적어도 하나의 구문 요소들에 의해 신호가 보내질 수 있다. 참조 평면 그룹은 프라이머리 평면 그룹일 수 있고 또는 다른 세컨더리 평면 그룹일 수 있다. 주어진 참조 평면 그룹에서, 참조 평면 그룹 안쪽의 함께 배치된 블록은 결정된다. 함께 배치된 블록은 현재 블록처럼 같은 이미지 지역에 상응하는 참조 평면 그룹 내의 블록일 수 있고, 또는 현재 블록과 함께 이미지 지역의 가장 큰 부분을 공유하는 참조 평면 그룹의 안쪽의 블록을 나타내는 블록일 수 있다. 함께 배치된 블록은 더 작은 예측 블록들로 구획될 수 있다. 일 실시예에 있어서, 현재 블록을 위한 세부분할 정보와 결과 서브블록들을 위한 예측 파라미터들은 추가 보조 정보의 전송 없이 같은 픽쳐의 다른 평면 그룹 내의 함께 배치된 블록의 세부분할 정보 및 상응하는 서브블록들의 예측 파라미터들을 사용할 때 완전히 추론된다. 특별한 실시예에 있어서, 만일 함께 배치된 블록이 2개 또는 4개의 예측 블록들로 구획되면, 현재 블록은 또한 예측의 목적을 위한 2개 또는 4개의 서브블록들로 구획될 수 있고 현재 블록의 서브블록들을 위한 예측 파라미터들은 위에 설명된 바와 같이 얻어진다. 다른 특별한 실시예에 있어서, 만일 함께 배치된 블록이 4개의 서브블록들로 구획되고, 이 서브블록들 중 하나는 4개의 더 작은 서브블록들로 더 구획되며, 현재 블록은 4개의 서브블록들로 또한 구획되며, 이러한 서브블록들(더 분해된 함께 배치된 블록의 서브블록과 상응하는) 중 하나는 4개의 더 작은 서브블록들로 또한 구획되고, 더 구획되지 않는 모든 것을 위한 예측 파라미터들은 위에 설명된 바와 같이 추론된다. 다른 실시예에 있어서, 세부분할 정보는 참조 평면 그룹 내의 함께 배치된 블록의 세부분할 정보에 기초하여 완전히 추론되지만, 서브블록을 위한 추론된 예측 파라미터들은 서브블록들의 실제 예측 파라미터들을 위한 예측으로 오직 사용된다. 실제 예측 파라미터들과 추론된 예측 파라미터들 사이의 편차들은 비트스트림에서 코딩된다. 다른 실시예에 있어서, 추론된 세부분할 정보는 현재 블록을 위한 실제 세부분할 정보을 위한 예측으로 사용되고 차이는 비트스트림에서 전송되지만(위에 설명된 바와 같이), 예측 파라미터들은 완전히 추론된다. 다른 실시예에 있어서, 추론된 세부분할 정보 및 추론된 예측 파라미터들은 예측으로 사용되고, 실제 세부분할 정보 및 예측 파라미터들 및 그들의 추론된 값들 사이의 차이들은 비트스트림에서 전송된다.
다른 실시예에 있어서, 잔차 코딩 모드들(예를 들어 변환 형태)이 같은 픽쳐를 위한 다른 평면 그룹의 이미 코딩되어 함께 배치된 블록으로부터 추론 또는 예측되는지 되지 않는지 또는 잔차 코딩 모드들이 블록을 위해 개별적으로 코딩되는지 코딩되지 않는지는 평면 그룹의 블록을 위해 적응적으로 선택될 수 있다. 이러한 실시예는 위에 설명된 바와 같이 예측 파라미터들의 적응적 추론/예측을 위한 실시예와 유사하다.
일 실시예에 있어서, 변환 블록들(즉, 2차 변환이 적용된 샘플들의 블록들)로의 블록(즉, 예측 블록)의 세부분할은 같은 픽쳐를 위한 다른 평면 그룹의 이미 코딩되어 함께 배치된 블록으로부터 적응적으로 추론 또는 예측될 수 있다. 이 실시예는 위에 설명된 바와 같이 예측 블록들로의 세부분할의 적응적 추론/예측을 위한 실시예와 유사하다.
다른 실시예에 있어서, 변환 블록들로의 블록의 세부분할 및 결과 전송 블록들을 위한 잔차 코딩 모드들(즉, 변환 형태들)은 같은 픽쳐를 위한 다른 평면 그룹의 이미 코딩되어 함께 배치된 블록으로부터 적응적으로 추론 또는 예측될 수 있다. 이러한 실시예는 위에 설명된 예측 블록들로의 세부분할의 적응적 추론/예측을 위한 실시예 및 결과 예측 블록들을 위한 예측 파라미터들과 유사하다.
다른 실시예에 있어서, 예측 블록들로의 블록의 세부분할, 관련된 예측 파라미터들, 예측 블록들의 세부분할 정보, 및 변환 블록들을 위한 잔차 코딩 모드들은 같은 픽쳐를 위한 다른 평면 그룹의 이미 코딩되어 함께 배치된 블록으로부터 적응적으로 추론 또는 예측된다. 이러한 실시예는 위에 설명된 실시예들의 조합을 나타낸다. 언급된 코딩 파라미터들의 오직 몇 가지가 추론 또는 예측되는 것 또한 가능하다.
그래서, 평면 간 채택/예측은 이전에 설명된 코딩 효율을 증가시킬 수 있다. 그러나, 평면 간 채택/예측의 방법에 의한 코딩 효율 이득은 멀티트리-기반의 세부분할들 이외에 사용된 다른 블록 세부분할들의 경우 이용할 수 있고, 구현되거나 구현되지 않은 블록 병합으로부터 개별적일 수 있다.
평면 간 채택/예측에 관한 상술된 실시예들은 픽쳐의 컬러 평면들을 분할하는 이미지 및 비디오 인코더들 및 디코더들에 적용할 수 있고, 만일 적용하는 경우, 예비 샘플 배열들이 블록들 안에 있는 픽쳐와 결합하고, 이러한 블록들을 코딩 파라미터들로 연상한다. 각각의 블록을 위해, 코딩 파라미터들의 집합은 비트스트림에 포함될 수 있다. 예를 들어, 이러한 코딩 파라미터들은 어떻게 블록이 디코더에서 예측 또는 디코딩될 수 있는지 설명하는 파라미터들일 수 있다. 특별한 실시예들에 있어서, 코딩 파라미터들은 매크로블록 또는 블록 예측 모드들, 서브-분리 정보, 인트라 예측 모드들, 움직임-보상 예측에 사용된 참조 인덱스들, 움직임 파라미터들 예를 들어 치환 벡터들, 잔차 코딩 모드들, 변환 계수 등을 나타낼 수 있다. 픽쳐와 관련된 다른 샘플 배열들은 다른 사이즈들을 가질 수 있다.
다음은, 예를 들어, 도 1 내지 도 8에 관한 위에 설명된 트리-기초 구획 기법 내에서 코딩 파라미터들의 강화된 시그널링을 위한 기법이 설명된다. 병합 및 평면 간 채택/예측, 강화된 시그널링 기법들의 효과들 및 이득들, 다음에서 계층으로 불리는 다른 기법들은 아래의 설명된 기법들이 상기 실시예들의 하나 또는 조합과 결합 가능할지라도, 상기 실시예들로부터 독립적으로 설명된다.
일반적으로, 계층으로 불리는 다음에 설명된 트리-기반의 구획 기법 내에서의 코딩 보조 정보를 위한 향상된 코딩 기법은 코딩 파라미터 처리의 종래 기법들과 관련된 다음의 이점들을 가능하게 한다.
종래 이미지 및 비디오코딩에서, 픽쳐들 또는 픽쳐들을 위한 샘플 배열들의 특별한 집합들은 특별한 코딩 파라미터들과 관련된 블록들로 대게 분해된다. 픽쳐들은 대게 멀티플 샘플 배열들로 구성된다. 게다가, 예를 들어, 투명도 정보 또는 깊이 맵들을 명시하는 픽쳐는 추가 예비 샘플 배열들과 또한 관련될 수 있다. 픽쳐의 샘플 배열들(예비 샘플 배열들을 포함하는)은 하나 이상의 소위 평면 그룹들로 그룹화될 수 있고, 하나 이상의 소위 평면 그룹들 중 각각의 평면 그룹은 적어도 하나의 샘플 배열들로 구성될 수 있다. 픽쳐의 평면 그룹들은 독립적으로 코딩될 수 있고 또는, 만일 픽쳐가 하나 이상의 평면 그룹과 관련이 있으면, 같은 픽쳐의 다른 평면 그룹들로부터 예측과 함께 코딩될 수 있다. 각각의 평면 그룹은 대게 블록들로 분해된다. 블록들(또는 샘플 배열들의 블록들에 상응하는)은 인터-픽쳐 예측 또는 인트라-픽쳐 예측에 의해 예측된다. 블록들은 다른 사이즈들을 가질 수 있고 정사각형 또는 직사각형일 수 있다. 픽쳐의 블록들로의 구획화는 구문에 의해 고정될 수 있고, 또는 비트스트림 안쪽에서 신호가 보내질 수 있다(가장 적은 부분으로). 종종 구문 요소들은 미리 정의된 사이즈의 블록들을 위해 세부분할 신호가 전송된다. 구문 요소들은 어떻게 블록이 더 작은 블록들로 세부분할되고, 코딩 파라미터들 즉 예측을 목적으로 관련되는지 명시할 수 있다. 관련된 코딩 파라미터들의 디코딩 블록의 모든 샘플들(또는 샘플 배열들의 상응하는 블록들)은 확실한 방법으로 구체화된다. 예를 들면, 블록의 모든 샘플들은 예를 들어 참조 인덱스들(이미 코딩된 픽쳐들의 집합 내에 참조 픽쳐를 확인하는), 움직임 파라미터들(참조 픽쳐와 현재 픽쳐 사이의 블록들의 움직임을 측정하는 것을 명시하는), 삽입 필터를 구체화하기 위한 파라미터들, 인트라 예측 모드들 등등의 예측 파라미터들의 같은 집합을 사용하여 예측된다. 움직임 파라미터들은 수평 및 수직 요소 또는 더 높은 차원의 움직임 파라미터들 예를 들어 6개의 요소들로 구성되는 변환 움직임 파라미터들과 같이 치환 벡터들에 의해 나타낼 수 있다. 특별한 예측 파라미터들(예를 들어 참조 인덱스들 및 움직임 파라미터들)의 적어도 하나의 집합은 싱글 블록과 관련된다. 이 경우, 이러한 특별한 예측 파라미터들의 각각의 집합을 위해, 블록(또는 샘플 배열들의 상응하는 블록들)을 위한 싱글 중간 예측 신호는 생성되고, 마지막 예측 신호는 중간 예측 신호들을 포개놓은 것을 포함하는 조합에 의해 만들어진다. 상응하는 가중 파라미터들 및 잠재적인 불변의 오프셋(offset)(가중된 합으로 추가되는)은 픽쳐, 또는 참조 픽쳐, 또는 참조 픽쳐들의 집합으로 고정될 수 있고, 또는 상응하는 블록을 위하 예측 파라미터들의 집합 내에 포함될 수 있다. 최초 블록들(또는 샘플 배열들의 상응하는 블록들) 사이의 차이 및 그들의 예측 신호들은 또한, 잔차 신호로 참조하고,대게 변환 및 양자화된다. 종종, 2차 변환은 잔차 신호(또는 잔차 블록을 위한 상응하는 샘플)로 적용된다.
변환 코딩을 위해, 예측 파라미터들의 특별한 집합을 위해 사용된 블록들(또는 샘플 배열들의 상응하는 블록들)은 변환을 적용하기 전에 더 쪼개질 수 있다. 변환 블록들은 예측을 위해 사용되는 블록들과 같거나 또는 더 작을 수 있다. 변환 블록이 예측을 위해 사용되는 적어도 하나의 블록을 포함하는 것 또한 가능하다. 다른 변환 블록들은 다른 사이즈들을 가질 수 있고, 변환 블록들은 정사각형 또는 직사각형 블록들을 나타낼 수 있다. 변환 후에, 결과 변환 계수는 양자화되고, 소위 변환 계수 레벨들은 얻어진다. 변환 계수 레벨들과 예측 파라미터들 및, 만일 나타내는, 세부분할 정보는 엔트로피 코딩된다.
몇몇의 이미지 및 비디오 코딩 표준에 있어서, 픽쳐(또는 평면 그룹)의 구문에 의해 제공되는 블록들로의 세부분할의 가능성은 매우 제한적이다. 대게, 어느 편인지 또는 잠재적으로 어떻게 미리 정의된 사이즈의 블록이 더 작은 블록들로 세부분할 될 수 있는지 단지 구체화될 수 있다. 예를 들면, H.264에서 가장 큰 블록 사이즈는 16x16이다. 16x16 블록들은 매크로 블록들로 또한 참조되고, 각각의 픽쳐는 제1 단계 내의 매크로블록들로 구획된다. 각각의 16x16 매크로블록을 위해, 각각의 16x16 매크로블록들은 16x16블록으로 코딩, 또는 2개의 16x8 블록들로 코딩, 또는 2개의 8x16 블록들로 코딩, 또는 4개의 8x8 블록들로 코딩되는지 신호가 보내질 수 있다. 만일 16x16 블록이 4개의 8x8 블록으로 세부분할되면, 각각의 8x8 블록들은 하나의 8x8 블록, 또는 2개의 8x4블록들, 또는 2개의 4x8 블록들, 또는 4개의 4x4 블록들로 코딩될 수 있다. 최신의 이미지 및 비디오 코딩 표준들에 있어서 구획의 블록들로의 명시를 위한 가능성들의 작은 집합은 세부분할 정보를 시그널링하기 위한 보조 정보 율이 작게 유지될 수 있는 이점이 있으나 블록들을 위한 예측 파라미터들의 전송을 위해 요구되는 비트율이 다음에 설명되는 바와 같이 중요하게 된다는 단점이 있다. 예측 정보를 시그널링하기 위한 보조 정보 율은 대게 블록을 위한 전반적인 비트율의 중요한 양을 나타낸다. 그리고, 코딩 효율은 이러한 보조 정보가 감소될 때 증가할 수 있고, 예를 들어, 더 큰 블록 사이즈들을 사용함으로써 수행될 수 있다. 실제 이미지들 또는 비디오 시퀀스의 픽쳐들은 구체적인 속성들과 함께 임의의 모양인 오브젝트들로 구성될 수 있다. 예를 들어, 오브젝트들 또는 오브젝트들의 부분들은 유일한 텍스처 또는 유일한 움직임에 의해 특징을 나타낼 수 있다. 그리고 대게, 예측 파라미터들의 같은 집합은 오브젝트 또는 오브젝트의 부분을 위해 적용될 수 있다. 그러나 오브젝트 경계들은 대게 큰 예측 블록들(예를 들어, H.264 내의 16x16 매크로블록들)을 위한 가능한 블록 경계들과 일치하지 않는다. 인코더는 대게 특별한 비율-왜곡 비용의 최소화 내의 결과들을 측정하는 세부분할(가능성들의 제한된 집합들 사이)을 결정한다. 임의의 모양인 오브젝트들을 위해 인코더는 작은 블록들의 큰 수를 야기할 수 있다. 이러한 작은 블록들의 각각은 전송될 필요가 있는 예측 파라미터들의 집합과 관련되기 때문에, 보조 정보 율은 전반적인 비트율의 중요한 부분이 될 수 있다. 그러나, 작은 블록들의 몇몇은 같은 오브젝트 또는 오브젝트의 부분을 여전히 나타내므로, 많은 수의 얻어진 블록들을 위한 예측 파라미터들은 같거나 매우 유사하다. 직관적으로, 코딩 효율은 블록을 세부분할하는 것을 허용하는 방법 및 세부분할 후 얻어진 블록들 사이의 코딩 파라미터를 공유하는 방법에 의해 구문가 확장될 때 증가될 수 있다. 트리-기초 세부분할에서, 주어진 블록의 집합을 위한 코딩 파라미터들의 공유는 코딩 파라미터들의 할당 또는 트리-기초 계층 내의 적어도 하나의 부모 모드들을 위한 그것의 부분들에 의해 수행될 수 있다. 결과적으로, 공유된 파라미터들 또는 그것의 부분들은 세부분할 후 얻어진 블록들을 위한 코딩 파라미터들의 실제 선택을 신호로 보내는데 필요한 보조 정보를 감소시키기 위해 사용될 수 있다. 감소는 다음의 블록들을 위한 파라미터들의 시그널링을 생략하는 것 또는 다음의 블록들을 위한 파라미터들의 예측 및/또는 문맥(context) 모델링을 위한 공유된 파라미터(들)을 사용함으로써 수행될 수 있다.
아래 설명되는 계층 기법의 기본적인 아이디어는 블록들의 트리-기반의 계층에 따른 정보 공유에 의해 코딩 파라미터들을 전송하기 위해 요구되는 비트율을 감소시키는 것이다. 공유 정보는 비트스트림(세부분할 정보에 부가하여) 안쪽에서 신호가 보내진다. 계층 기법의 이점은 코딩 파라미터들을 위해 감소된 보조 정보로부터 야기된 증가된 코딩 효율이다.
보조 정보 비율을 감소시키기 위해, 아래 설명된 실시예에 따라, 샘플들의 특별한 집합들을 위한 각각의 코딩 파라미터들, 즉, 직사각형 또는 정사각형 블록들 또는 임의의 모양인 영역들 또는 다른 샘플들의 모음을 나타내는 멀티트리 세부분할의 단순 연결 영역들은 효율적인 방법 내에서 데이터 스트림 안쪽에서 신호가 보내진다. 아래에 설명된 계층 기법은 코딩 파라미터들이 완전히 각각의 이러한 샘플들의 집합들을 위해 비트스트림 내에 명시적으로 포함될 필요가 없도록 한다. 코딩 파라미터들은 어떻게 샘플들의 상응하는 집합이 이미 코딩된 샘플들을 이용하여 예측되는지 명시하는 예측 파라미터들을 나타낼 수 있다. 많은 가능성들 및 예들은 상술 되었으며 여기에 적용될 수도 있다. 위에 나타낸 바와 같이, 아래에 더 설명될 바와 같이, 다음의 계층 기법이 관계되면, 샘플 집합들로의 픽쳐의 샘플 배열들의 트리-기초 구획은 구문에 의해 고정될 수 있고, 또는 비트스트림 안쪽에 있는 세부분할 정보의 상응에 의해 신호가 보내질 수 있다. 샘플 집합들을 위한 코딩 파라미터들은 상술된 바와 같이 구문에 의해 주어진 미리 결정된 순서로 전송될 수 있다.
계층 기법에 따르면, 디코더 또는 디코더의 추출부(102)는 개별적으로 단순히 연결된 영역의 코딩 파라미터 또는 구체적인 방법에서의 샘플 집합들의 정보를 얻는 것으로 구성될 수 있다. 특별히, 코딩 파라미터들 또는 이것들의 부분들 예를 들어 예측의 목적으로 도와주는 그러한 파라미터들은 인코더 또는 삽입부(18)에 의해 결정되는 트리 구조에 따른 공유 그룹과 함께 주어진 트리-기초 구획 기법을 따라 블록들 사이에서 각각 공유된다. 특별한 실시예에서, 구획 트리의 주어진 내부 노드의 모든 자식 노드들을 위한 코딩 파라미터들의 공유는 구체적인 2진-값 공유 플래그의 사용에 의해 나타내진다. 다른 접근에 있어서, 코딩 파라미터들의 개선들은 각각의 노드를 위해 전송될 수 있어 블록들의 트리-기초 계층을 따른 파라미터들의 축적된 개선들은 주어진 리프 노드에서 블록의 모든 샘플 집합들에 적용될 수 있다. 다른 실시예에 있어서, 블록들의 트리-기초 계층을 따라 내부 노드들을 위해 전송된 코딩 파라미터들의 부분들은 문맥-적응 엔트로피 인코딩 및 코딩 파라미터의 디코딩 또는 주어진 리프 노드에서 블록을 위한 코딩 파라미터의 부분들을 위해 사용될 수 있다.
도 12a 및 도 12b는 쿼드트리-기반의 구획을 이용한 구체적인 경우를 위한 계층의 기초 아이디어를 나타낸다. 그러나, 위에 몇 번 나타낸 바와 같이, 다른 멀티트리 세부분할 기법들은 또한 사용될 수 있다. 도 12a에 트리 구조가 나타나 있지만 도 12a에 상응하는 트리 구조의 상응하는 공간 구획(partitioning)은 도 12b에 나타나 있다. 그 안에 나타내진 구획은 도 3a 내지 도3c에 관해 나타내진 것과 유사하다. 일반적으로 말하면, 계층 기법은 트리 구조 내 여러 비-리프 레이어(non-leaf layer)들에서 노드들로 보조 정보가 부여되도록 허용할 수 있다. 트리 내 여러 레이어들에서의 노드들, 예를 들어 도 12a의 트리 내 내부 노드들 또는 그들의 루트 노드로의 보조 정보 부여에 따라, 도 12b에 나타낸 블록들의 트리 계층 내에서 서로 다른 정도의 보조 정보의 공유가 얻어질 수 있다. 예를 들어, 도 12a의 경우에서 모두 같은 부모 노드를 가지는 레이어 4 내의 모든 리프 노드들이 보조 정보를 공유하는 것으로 결정된 경우, 사실상 이것은, 156a 내지 156d로 나타낸 도 12b 내의 가장 작은 블록들이 이 보조 정보를 공유하고 모든 이러한 작은 블록들(156a 내지 156d)에 대해 보조 정보를 더 이상 완전히 즉, 4번 전송할 필요가 없음을 의미하며, 이것은 인코더를 위한 선택사항으로 남겨진다. 하지만, 도 12a의 계층 레벨 1(레이어 2)의 전체 영역, 즉, 서브블록들 154a, 154b 및 154d와 이미 언급된 더 작은 서브블록 156a 내지 156d을 포함하는 트리 블록(150)의 상위 우측의 1/4 부분은 코딩 파라미터들이 공유되는 영역으로 제공하는 것 또한 가능하다. 따라서, 보조 정보를 공유하는 지역은 증가한다. 증가의 다음 레벨은 레이어 1의 모든 서브블록들을 합계일 수 있는데, 즉, 서브블록들 152a, 152c 및 152d 및 이전에 언급된 더 작은 블록들일 수 있다. 즉, 이 경우, 전체 트리 블록은 보조 정보를 공유하는 이 트리 블록(150)의 모든 서브블록들과 함께 그에 할당된 보조 정보를 가질 것이다.
다음의 계층 설명에서, 다음의 표시법이 실시예를 설명하기 위해 사용된다:
a. 현재 리프 노드의 복원된 샘플들: r
b. 이웃 리프들의 복원된 샘플들: r
c. 현재 리프 노드의 예측부: p
d. 현재 리프 노드의 잔차: Res
e. 현재 리프 노드의 복원된 잔차: Rec Res
f. 스케일링 및 역변환: SIT
g. 공유 플래그: f
계승의 첫 번째 실시예로서, 내부 노드들에서의 인트라-예측 신호화(signalization)로 설명될 수 있다. 보다 정확하게는, 예측의 목적을 위해 트리-기반의 블록 구획의 내부 노드들에서의 인트라-예측 모드들을 신호로 알리는 방법이 설명된다. 루트 노드에서 리프 노드들로 트리를 가로지른 것에 의해, 내부 노드들(루트 노드를 포함하는)은 상응하는 자식 노드들에 의해 이용될 보조 정보의 부분들을 운반할 수 있다. 보다 구체적으로 설명하면, 공유 플래그 f 는 다음 의미와 함께 내부 노드들을 위해 전송된다:
· 만일 f 가 1(“true”)의 값을 가지면, 주어진 내부 노드의 모든 자식 노드들은 같은 인트라-예측 모드를 공유한다. 게다가 값 1을 가지는 공유 플래그 f 와 더불어, 내부 노드는 또한 모든 자식 노드들을 위해 사용되는 인트라-예측 모드 파라미터들을 신호한다. 결과적으로, 모든 후속하는 자식 노드들은 어떤 예측 모드 정보뿐 아니라 어떤 공유 플래그들도 운반하지 않는다. 모든 관계된 리프 노드들의 복원을 위해, 디코더는 상응하는 내부 노드로부터 인트라-예측 모드를 적용한다.
· 만일 f 가 0(“false”)의 값을 가지면, 내부 노드에 상응하는 자식 노드들은 같은 인트라-예측 모드를 공유하지 않고 내부 노드인 각각의 자식 노드는 별개의 공유 플래그를 나른다.
도 12c는 위에 설명된 바와 같이 내부 노드들에서의 인트라-예측 신호화를 도시한다. 레이어 1 내의 내부 노드는 공유 플래그 및 인트라-예측 모드 정보에 의해 주어진 보조 정보를 운반하고, 자식 노드들은 어떤 보조 정보도 운반하지 않는다.
계승의 제2 실시예로서, 인터-예측 개선이 설명될 수 있다. 보다 정확하게 설명하면, 예를 들어 움직임 벡터들에 의해 주어진 것과 같은 움직임 파라미터들의 개선 목적을 위해 트리-기반 블록 구획(partitioning)의 내부 모드들에서 인터-예측 모드들의 보조 정보를 시그널링하는 방법이 설명된다. 루트 노드에서 리프 노드들까지 트리를 횡단함으로써, 내부 노드들(루트 노드를 포함하는)은 상응하는 자식 노드들에 의해 개선될 보조 정보 부분들을 운반할 수 있다. 보다 상세하게, 공유 플래그 f 는 아래의 의미와 함께 내부 노드들을 위해 전송된다:
· 만일 f 가 1(“true”) 값을 가지면, 주어진 내부 노드의 모든 자식 모드들은 같은 움직임 벡터 참조를 공유한다. 값 1을 가진 공유 플래그 f 과 더불어, 내부 노드는 또한 움직임 벡터 및 참조 인덱스를 신호한다. 결론적으로, 모든 후속하는(subsequent) 자식 노드들은 공유 플래그들을 더 운반하지 않을 수 있으나, 계승된 움직임 벡터 참조의 개선은 운반할 수 있다. 모든 관계된 리프 노드들의 복원을 위해, 디코더는 주어진 리프 노드에서 움직임 벡터 개선을, 값 1을 가진 공유 플래그 f 를 갖는 상응하는 내부 부모 노드에 속하는 계승된 움직임 벡터 참조에 추가한다. 이것은 주어진 리프 노드에서 움직임 벡터 개선이 이 리프 노드에서 움직임-보상된 예측을 위해 적용될 실제 움직임 벡터와 그 상응하는 내부 부모 노드의 움직임 벡터 참조 사이의 차이임을 의미한다.
· 만일 f 가 0(“false”) 값을 가지면, 상응하는 내부 노드의 자식 노드들이 동일한 인터-예측 모드를 필수적으로 공유하지 않고 상응하는 내부 노드로부터 움직임 파라미터들을 사용함으로써 자식 노드들에서 움직임 파라미터들의 개선이 수행되지 않으며, 내부 노드인 각 자식 노드는 별개의 공유 플래그를 운반한다.
도 12d는 상술한 바와 같이 움직임 파라미터 개선을 나타낸다. 레이어 1 내 내부 노드는 공유 플래그 및 보조 정보를 운반하고 있다. 리프 노드들인 자식 노드들은 오직 움직임 파라미터 개선들을 운반하고, 예를 들어, 레이어 2 내의 내부 자식 노드는 보조 정보를 운반하지 않는다.
이제 도 13이 참조된다. 도 13은, 데이터 스트림으로부터 멀티-트리 세부분할에 의해 다른 사이즈들의 리프 영역들로 세부분할되는, 공간적 예시(example) 정보 신호를 나타내는 정보 샘플들의 배열을 복원하는 데 있어, 도 2의 디코더와 같은 디코더의 동작의 모드를 나타내는 흐름도를 도시한다. 상술한 바와 같이, 각 리프 영역은 멀티-트리 세부 분할의 계층 레벨들의 시퀀스 중 하나의 계층 레벨과 연관되어 있다. 예를 들어, 도 12b에 나타낸 모든 블록들은 리프 영역들이다. 예를 들어, 리프 영역(156c)은 계층 레벨 4(또는 레벨 3)과 관련된다. 각각의 리프 영역은 거기서의 코딩 파라미터들과 관련된다. 이러한 코딩 파라미터들의 예들은 전술하였다. 각각의 리프 영역을 위한 코딩 파라미터들은 구문 요소들의 각각의 집합에 의해 표현된다.
각각의 구문 요소는 구문 요소 유형들의 집합 중 하나의 개별적 구문 요소 유형(type)의 구문 요소이다. 이러한 구문 요소 유형은 예를 들어, 예측 모드, 움직임 벡터 요소, 인트라-예측 모드의 지시 또는 이와 유사한 것일 수 있다. 도 13에 따르면, 디코더는 다음의 단계들을 수행한다.
단계 550에서, 계승 정보(inheritance information)가 데이터 스트림으로부터 추출된다. 도 2의 경우, 추출부(102)가 단계 550를 책임진다. 계승 정보는 계승이 정보 샘플들의 현재 배열을 위해 사용되었는지 또는 사용되지 않았는지에 관해 나타낸다. 다음의 설명은 예를 들어, 인터-에일리어스(alias), 공유 플래그 f 및 프라이머리(primary) 및 세컨더리(secondary) 부분으로 분리된 멀티트리 구조의 시그널링과 같은 계승 정보를 위한 몇 가지 가능성들을 드러낼 것이다.
정보 샘플들의 배열은 이미 픽쳐의 서브부분일 수 있고, 예들 들어 트리블록, 즉 예를 들어 도 12b의 트리블록(150)일 수 있다. 따라서, 계승 정보는 계승이 구체적인 트리블록(150)을 위해 사용 또는 사용되지 않는지에 관해 나타낸다. 이와 같은 계승 정보는 예를 들어 예측 세부분할의 모든 트리 블록들을 위해 데이터 스트림으로 삽입될 수 있다.
또한, 계승 정보는, 만일 계승이 사용되는 것으로 표시되는 경우, 리프 영역들의 집합으로 구성되고, 리프 영역들의 집합이 연관되는 각 계층적 레벨들보다 더 낮은, 멀티-트리 세부분할의 계층적 레벨들의 시퀀스 중 하나의 계층적 레벨과 대응하는, 정보 샘플들의 배열의 적어도 하나의 계승 영역을 나타낸다. 즉, 계승 정보는 계승이 트리블록(150)과 같은 현재 샘플 배열에 대해 사용 또는 사용되지 않는지에 관해 나타낸다. 만일 사용된다면, 계승 정보는, 그 내에서 코딩 파라미터들을 공유하는, 이러한 트리블록(150)의 적어도 하나의 계승 영역 또는 서브 영역을 나타낸다. 따라서, 계승 영역은 리프 영역이 아닐 수 있다. 도 12b의 예에서, 이러한 계승 영역은 예를 들어, 서브블록들(156a, 156b)에 의해 형성되는 영역일 수 있다. 대안적으로, 계승 영역은 더 클 수 있으며, 또한 추가적으로 서브블록들(154a, 154b 및 154d)을 포함할 수 있고, 심지어 대안적으로, 계승 영역과 관련된 코딩 파라미터들을 공유하는 모든 리프 블록들을 가지는 트리블록(150) 그 자신일 수 있다.
하지만, 둘 이상의 계승 영역이 하나의 샘플 배열 또는 트리 블록(150) 내에서 각각 정의될 수 있음이 주지되어야 한다. 예를 들어, 좌하단의 서브블록(152c)이 더 작은 블록들로 구획되는 것을 상상해보라. 이 경우, 서브블록(152c)은 또한, 계승 영역을 형성할 수 있다.
단계 552에서, 계승 정보가 계승이 사용되는지 또는 사용되지 않는지에 관해 체크된다. 만일 사용되는 경우, 도 13의 과정은 554로 진행되고, 단계 554에서 미리 결정된 적어도 하나의 구문 요소를 포함하는 계승 부분집합이 인터-계승(inter-inheritance) 영역마다 데이터 스트림으로부터 추출된다. 다음의 단계 556에서, 이러한 계승 부분집합은 구문 요소들의 집합 내 구문 요소들의 상응하는 계승 부분집합에 복사되거나, 또는 예측으로서 사용될 수 있고, 상기 구문 요소들은 각각의 적어도 하나의 계승 영역이 구성되는 리프 영역들의 집합과 관련된 코딩 파라미터들을 나타낸다. 즉, 계승 정보 내에서 표시된 각각의 계승 영역에 대해, 데이터 스트림은 구문 요소들의 계승 부분집합을 포함한다. 달리 말하면, 계승은 계승에 이용할 수 있는 적어도 하나의 특정 구문 요소 유형 또는 구문 요소 카테고리에 관련된다. 예를 들어, 예측 모드 또는 인터-예측 모드 또는 인트라-예측 모드 구문 요소가 계승이 될 수 있다. 예를 들어, 계승 영역을 위해 데이터 스트림 이내에 포함된 계승 부분집합은 인터-예측 모드 구문 요소를 포함할 수 있다. 계승 부분집합은 또한 구문 요소들을 포함할 수 있고, 구문 요소 유형들은 앞서 언급된 고정된 구문 요소 유형의 값에 의존하고, 고정된 구문 요소 유형은 계승 기법에 관련된다. 예를 들어, 계승 부분집합의 고정된 요소인 인터-예측 모드의 경우, 움직임 보상을 정의하는 구문 요소들 예를 들어 움직임-벡터 요소들은 구문에 의해 계승 부분집합 내에 포함될 수 있고 또는 포함되지 않을 수 있다. 예를 들어, 트리블록(150)의 상위 우측 1/4, 즉, 서브블록(152b)은 계승 영역이고, 인터-예측 모드 만으로 이러한 계승 영역을 위해 표시될 수 있거나 또는 움직임 벡터들 및 움직임 벡터 인덱스들과 함께 인터-예측 모드를 위해 지시될 수 있다.
계승 부분집합에 포함된 모든 구문 요소들은 계승 영역, 즉, 리프 블록들(154a, 154b, 154d 및 156a 내지 156d) 내의 리프 블록들의 상응하는 코딩 파라미터들을 위해 복사되거나 또는 예측으로서 사용된다. 예측이 사용되는 경우, 잔차들이 개별적인 리프 블록들을 위해 전송된다.
트리블록(150)을 위한 계승 정보 전송의 하나의 가능성은 이미 언급된 공유 플래그 f 의 전송이다. 이 경우, 단계 550에서 계승 정보의 추출은, 다음을 포함한다. 특별히, 디코더는 멀티-트리 세부분할의 적어도 하나의 계층적 레벨의 소정 계승 집합에 상응하는 비-리프 영역들을 위해 추출 및 체크를 포함할 수 있고, 각각의 계승 플래그 또는 공유 플래그가 계승을 지시하는지 하지 않는지에 관해 더 낮은 계층적 레벨부터 더 높은 계층적 레벨까지의 계층적 레벨 차수, 데이터 스트림으로부터 공유 플래그 f 를 사용한다. 예를 들어, 계층적 레벨들의 계승 집합은 도 12a의 레이어들 1 내지 3에 의해 형성될 수 있다. 따라서, 리프 노드가 아니며 소정 레이어 1 내지 레이어 3 이내에 놓여진 서브트리 구조의 소정 노드들에 대해 데이터 스트림 내에서 그와 관련된 공유 플래그를 가질 수 있다. 디코더는 깊이-우선 또는 넓이-우선 횡단 순서와 같은, 레이어 1으로부터 레이어 3까지의 순서로 공유 플래그들을 추출할 수 있다. 공유 플래그들 중 하나가 1과 같으면 곧, 디코더는 상응하는 계승 영역 내에 포함되는 리프 블록들이 단계 554에서 이어서 추출된 계승 부분집합을 공유하는 것을 안다. 현재 노드의 자식 노드들을 위해, 계승 플래그들의 체크는 더 이상 필요하지 않다. 즉, 이러한 자식 노드들을 위한 계승 플래그들은, 이러한 노드들의 영역이 구문 요소들의 계승 부분집합이 공유되는 계승 영역에 이미 속하는 것이 당연하기 때문에, 데이터 스트림 내에서 전송되지 않는다.
공유 플래그들 f 는 쿼드트리 세부분할을 시그널링한 이미 언급된 비트들과 인터리빙될 수 있다. 예를 들어, 세부분할 플래그들과 공유 플래그들을 포함한 인터리브 비트 시퀀스는 다음과 같을 수 있다:
10001101(0000)000,
이것은, 2개의 배치된 공유 플래그들을 이용해 도 6a 에서 도시된 것과 동일한 세부분할 정보이고, 2개의 배치된 공유 플래그들은 도 3c의 좌하단 트리블록(150)의 1/4 이내의 모든 서브-블록들이 코딩 파라미터들을 공유하는 것을 나타내기 위해 언더라인에 의해 강조 표시되었다.
계승 영역을 나타내는 계승 정보를 정의하기 위한 다른 방법은 2개의 세부분할들의 사용일 수 있고, 2개의 세부분할들은 예측 및 잔차 세부분할에 관해 각각 위에 설명된 것처럼 서로 종속적으로 정의된다. 일반적으로 말하면, 프라이머리 세부분할의 리프 블록은 계승 영역을 형성할 수 있고, 계승 영역은 구문 요소들의 계승 부분집합들이 공유되는 영역들을 정의하는 반면, 종속 세부분할은 구문 요소들의 계승 부분집합이 복사 또는 예측으로서 사용되기 위한 이러한 계승 영역들 내의 블록들을 정의한다.
예를 들어, 예측 트리의 확장으로서 잔차 트리를 고려해보자. 또한, 예측 블록들이 잔차 코딩의 목적을 위해 더 작은 블록들로 분리될 수 있는 경우를 고려해보자. 예측-관련 쿼드트리의 리프 노드에 상응하는 각각의 예측 블록들을 위해, 잔차 코딩을 위해 상응하는 세부분할은 적어도 하나의 종속 쿼드트리(들)에 의해 결정된다.
이 경우, 내부 노드들에서 소정 예측 신호를 이용하는 것보다, 우리는 이미 설명된 일정한 예측 모드(예측 관련 트리의 상응하는 리프 노드에 의해 신호가 보내지는) 그러나 개선된 참조 샘플들의 사용이라는 의미에서 예측 트리의 개선은 또한 구체화하는 방법과 같은 잔차 트리를 고려한다. 다음 예시는 이러한 경우를 도시한다.
예를 들어, 도 14a 및 도 14b는 프라이머리 세부분할의 하나의 명시적인 리프 노드를 위해 하이라이트를 준 이웃하는 참조 샘플들을 이용한 인트라 예측을 위한 쿼드트리 구획을 나타내고, 반면에 도 14b는 개선된 참조 샘플들과 함께 같은 예측 리프 노드를 위한 잔차 쿼드트리 세부분할을 나타낸다. 도 14b에 나타난 모든 서브블록들은 도 14a에 하이라이트를 준 각각의 리프 블록을 위해 데이터 스트림 이내에 포함된 같은 인터 예측 파라미터들을 공유한다. 따라서, 도 14a는 인트라 예측을 위한 종래 쿼드트리 구획을 위한 예를 나타내고, 여기서 하나의 명시적 리프 노드를 위한 참조 샘플들이 표현된다. 하지만, 본 발명의 바람직한 일 실시예에 따르면, 개별적인 인트라 예측 신호는 예를 들어, 4(b)에 회색의 그림자진 줄무늬로 나타내지는 잔차 트리 내 이미 복원된 리프 노드들의 이웃 샘플들을 이용함으로써 잔차 트리 내의 각각의 리프 노드를 위해 계산된다. 그런 후, 주어진 잔차 리프 노드의 복원된 신호는 양자화된 잔차 신호를 이러한 예측 신호에 추가하는 보통의 방법으로 얻는다. 이러한 복원된 신호는 다음의 예측 프로세스를 위해 참조 신호로서 사용된다. 예측을 위한 디코딩 순서는 잔차 디코딩 순서와 같을 수 있다.
도 15에 도시된 바와 같이 디코딩 프로세스에서, 각각의 잔차 리프 노드를 위해, 예측 신호 p는 참조 샘플들 r’을 이용해 실제 인트라-예측 모드(예측 관련 쿼트드리 리프 노드에 의해 표시된 바와 같이)에 따라 계산된다.
SIT 프로세스 후,
Figure pat00001
복원된 신호 r 은 다음 예측 계산 프로세스를 위해 계산되고 저장된다:
Figure pat00002
예측을 위한 디코딩 순서는 도 16에 도시된 잔차 디코딩 순서와 같다.
각 잔차 리프 노드는 이전 문단에서 설명된 것과 같이 디코딩된다. 복원된 신호 r 은 도 16에 도시된 바와 같은 버퍼에 저장된다. 이 버퍼로부터, 참조 샘플들 r’는 다음의 예측 및 디코딩 프로세스를 위해 선택될 것이다.
위에 약술된 관점들의 다른 부분집합들의 조합을 이용해, 도 1 내지 도 16에 관한 상세한 실시예들을 설명하였으며, 본 출원의 다른 실시예들이 어떤 특정 관점에서의 초점이 이미 상술되었는지, 그러나 어떤 실시예들이 상술된 실시예들의 몇 가지 일반화를 나타내는지 설명된다. 특히, 도 1 및 도 2의 프레임 워크에 대하여 상술한 실시예들은 본 출원의 많은 관점들과 주로 결합되고, 상술한 실시예들은 다른 출원 또는 다른 코딩 필드들에 이용될 때 또한 이점이 있을 수 있다. 상기 논의 중에 주로 언급된 바와 같이, 예를 들어 멀티트리 세부분할은 병합 없이 및/또는 평면 간 채택/예측 없이 및/또는 계승 없이 사용될 수 있다. 예를 들어, 가장 큰 블록 사이즈의 전송, 깊이-우선 횡단 순서, 각각의 세부분할 플래그의 계층적 레벨에 따른 문맥 채택 및 보조 정보 비트율을 저장하기 위한 비트스트림 내의 최대 계층적 레벨의 전송, 이러한 모든 관점들은 서로 독립적으로 유리하다. 평면 간 이용 기법을 고려할 때도 이것은 또한 사실이다. 평면 간 활용은 픽쳐가 단순 연결 영역들로 세부분할되는 정확한 방법과는 유용하게 독립적이며, 병합 기법 및/또는 계승의 사용으로부터 유용하게 독립적이다. 같은 것은 병합 및 계승과 함께 포함된 이점들을 위해 적용한다.
따라서, 다음에 설명된 실시예들은 평면 간 채택/예측에 관한 관점들에 관하여 이미 언급된 실시예들을 일반화한다. 다음의 실시예들은 상술된 실시예들의 일반화들이고, 상술된 많은 자세한 사항들은 다음에 설명된 실시예들과 결합되는 것으로 생각될 수 있다.
도 17은 평면들에서 장면의 픽쳐의 여러 공간적인 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하기 위한 디코더의 모듈들을 나타낸다. 상기 디코더는 도 2에 도시된 것과 상응한다. 특히, 모듈(700)은 잔차 데이터 또는 스펙트랄 분해 데이터와 같은 페이로드 프로세싱에 의해 정보 샘플들의 배열(502-506)의 복원에 책임이 있고, 정보 샘플들의 각각의 배열(502-506)이 예측 파라미터들과 같이 단순 연결 영역들과 관련된 코딩 파라미터들에 의해 미리 정해진 방식으로 세부분할된 단순 연결 영역들과 연관된다. 예를 들어, 이 모듈은 도 2의 디코더의 경우 블록(102)의 옆에 있는 모든 블록들에 의해 이용된다. 그러나, 도 17의 디코더는 하이브리드 디코더일 필요가 없다. 인터 및/또는 인트라 예측은 사용되지 않는다. 동일한 것이 변환 코딩에 적용되는데, 즉, 잔차는 스펙트럴 분해 2차 변환에 의하는 것보다 오히려 공간적 도메인 내에서 코딩될 수 있다.
다른 모듈(702)은 데이터 스트림으로부터 정보 샘플들의 배열들의 배열(506) 같은 제1 배열의 단순 연결 영역들과 관련된 코딩 파라미터들을 얻는 데 책임이 있다. 따라서, 모듈(702)은 모듈(700)의 업무의 속행을 위한 준비인 업무를 정의한다. 도 2의 경우, 추출부(102)는 모듈(702)의 업무를 위한 책임을 진다. 배열(506) 자신은 평면 간 채택/예측의 방법에 의해 얻어진 그밖에 관련된 코딩 파라미터들에 대한 제2 배열일 수 있다.
다음 모듈(704)은 데이터 스트림으로부터 정보 샘플들의 배열들의 제2 배열(504)의 단순 연결 영역들을 위한 평면 간 교환 정보(inter-plane interchange information)를 얻기 위한 것이다. 도 2의 경우, 추출부(102)는 모듈(702)의 업무를 위한 책임을 진다.
다음 모듈(706)은 제2 배열의 단순 연결 영역들 위한 평면 간 교환 정보에 따라 제2 배열의 단순 연결 영역들의 진부분집합 또는 각각의 단순 연결 영역들을 결정하고, 다음 모듈들(708, 710)은 동작할 것이다. 도 2의 경우, 추출부(102)는 모듈(706)의 업무를 수행하기 위해 세부 분할부(104)와 함께 협력한다. 세부 분할부는 단순 연결 영역들이 횡단하는 순서를 제어하고, 즉, 평면 간 교환 정보의 어느 부분이 단순 연결 영역들의 어느 것과 관련되는지, 추출부(102)는 실제 추출을 수행한다. 상기 더 상세한 실시예에서, 평면 간 교환 정보는 평면 간 채택/예측이 일어날 것인지에 관해 개별적으로 각각의 단순 연결 영역을 위해 정의한다. 그러나, 이것은 케이스가 될 필요는 없다. 만일 결정이 단순 연결 영역들의 진부분집합의 유닛들 내에서 수행되면 또한 유용하다. 예를 들어, 평면 간 교환 정보는 적어도 하나의 이웃하는 단순 연결 영역들로 구성된 각각의 적어도 하나의 더 큰 단순 연결 영역들을 정의할 수 있다.
모듈(708)은 제2 배열(540)의 단순 연결 영역들의 진부부집합 또는 각각의 단순 연결 영역을 위한 코딩 파라미터들을 얻기 위한 것이고, 업무가 수행되는 제1 배열(506)의 단순 연결 영역에 국부적으로 상응하는 코딩 파라미터들로부터 적어도 부분적으로, 도 2의 경우 함께 배치 관계를 얻는데 책임이 있는 세부 분할부(104)와 협력하는 추출부, 및 각각의 단순 연결 영역 또는 얻어진 코딩 파라미터들에 의해 미리 결정된 방식으로 제2 배열의 단순 연결 영역들의 진부분집합과 관련된 페이로드 데이터의 디코딩, 어느 업무든 순서대로 도 2의 106 내지 114의 다른 모듈들에 의해 수행된다.
모듈(708)에 대신해, 모듈(710)이 제1 배열(506)의 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하는 한편, 각각의 단순 연결 영역 또는 도 2의 태스크 추출부(102)가 책임을 지는 데이터 스트림으로부터 제2 배열(504)의 단순 연결 영역들의 진부분집합을 위한 코딩 파라미터들을 도출하고, 데이터 스트림으로부터 도출된 관련 코딩 파라미터들에 의해 미리 정해진 방식으로 각각의 단순 연결 영역과 관련된 페이로드 데이터 또는 제2 배열의 단순 연결 영역들의 진부분집합을 디코딩하는데, 이러한 업무들은, 순서대로, 단순 연결 영역들 사이에서 함께 배치된 관계 및 접하는 것을 관리하는 데 항상 책임이 있는 세부 분할부(104)의 제어하에서, 도 2 즉 106 내지 114 내의 다른 모듈들에 의해 수행된다.
도 1 내지 도 16에 관해 상기 설명된 바와 같이, 정보 샘플들의 배열들은 비디오의 픽쳐 또는 스틸 픽쳐 또는 그것에 관한 컬러 요소를 필수적으로 나타내지 않는다. 샘플 배열들은 또한 소정 장면의 깊이 맵 또는 투명도 맵과 같은 다른 2차원적으로 샘플링된 물리적(physical) 데이터를 나타낼 수 있다.
복수의 단순 연결 영역들 각각과 관련된 페이로드 데이터는 이미 상술된 바와 같이, 공간적인 도메인 내의 잔차 도메인 또는 변환 계수들과 잔차 블록에 상응하는 변환 블록 이내의 중요한 변환 계수들의 위치들을 식별하는 중요 맵과 같은 변환 도메인을 포함한다. 일반적으로 말하면, 페이로드 데이터는 예를 들어 공간적인 도메인 또는 스펙트랄 도메인 내 중 하나의 연관된 단순 연결 영역으로 공간적으로 설명된 데이터일 수 있고, 직접적 또는 그것에 관한 예측의 몇 가지 종류의 잔차와 같은 데이터일 수 있다. 순서대로 상기 코딩 파라미터들은 예측 파라미터들로 제한되지 않는다. 코딩 파라미터들은 페이로드 데이터를 변환하기 위해 사용되는 변환을 나타낼 수 있고 또는 정보 샘플들의 배열을 복원할 때 개별적으로 단순 연결 영역들의 복원에 사용되는 필터로 정의할 수 있다.
상술된 바와 같이, 정보 샘플들의 배열이 세부분할되는 단순 연결 영역들은 멀티트리-세부분할으로부터 생길 수 있고, 정사각형 또는 직사각형 모양일 수 있다. 또한, 샘플 배열의 세부분할을 위해 상세하게 설명된 실시예는 오직 상세한 실시예들일 수 있고, 다른 세부분할 또한 사용될 수 있다. 몇 가지 가능성들이 도 18a 내지 도 18c에 나타내진다. 예를 들어, 도 18a는 샘플 배열(606)이 멀티트리 구조가 다른 사이즈들의 서브블록들(610)에 따라 세부분할되는 것들 중 몇몇과 함께 서로 인접한 비-오버랩핑(non-overlapping) 트리블록들(608)의 정규의 2차 배열로 세부분할되는 것을 나타낸다. 상술한 바와 같이, 쿼드트리 세부분할이 도 18a에 도시된 바와 같을지라도, 소정 다른 수의 자식 노드들 내의 각각의 부모 노드의 구획 또한 가능하다. 도 18b는 샘플 배열이 전체 픽셀 배열(606)의 위에 직접적인 멀티트리 세부분할 적용에 의해 다른 사이즈들의 서브블록들로 세부분할되는 것에 관한 실시예를 나타낸다. 즉, 전체 픽셀 배열(606)은 트리블록으로 다루어진다. 도 18c는 다른 실시예를 나타낸다. 이 실시예에 따르면, 샘플 배열은 서로 인접한 정사각형 또는 직사각형의 매크로 블록들의 정규 2차 배열로 구조화될 수 있고, 이러한 매크로블록들(612) 각각은 어떤 매크로블록(612)이 구획화되지 않은 상태로 남겨지는지 또는 구획 정보에 따라 지시된 사이즈의 블록들의 정규 2차 배열로 구획화되는지에 따라 구획 정보와 함께 개별적으로 관련된다. 보이는 바와 같이, 도 18a 내지 도 18c의 모든 세부분할은, 도 18a 내지 도 18c의 실시예에 따라, 비-오버랩핑인 샘플 배열(606)을 예시적인 단순 연결 영역들로 세부분할화하는 것을 나타내다. 그러나, 몇몇의 대체들은 가능하다. 예를 들어, 블록들은 서로 오버랩될 수 있다. 그러나, 오버랩핑은 각각의 블록이 다른 주변의 블록에 의해 겹치지 않는 부분을 가지는 범위가 제한될 수 있고, 또는 블록들의 각각의 샘플은 미리 결정된 방향을 따른 현재 블록의 병렬로 배열된 주변의 블록들 사이의 하나의 블록에 의해 최대로 오버래핑될 수 있다. 후자는 왼쪽 및 오른쪽 이웃 블록들이 완전히 덮은 현재 블록에 관해 현재 블록을 오버랩할 수 있는 것을 의미하지만, 그들은 서로를 오버레이(overlay)하지 않으며, 같은 것은 수직 및 대각선 방향에서 주변들을 위해 적용할 수 있다. 도 17에 대한 다른 대안으로서, 모듈(706) 내에서의 적절한 결정 및, 평면 간 채택/예측이 수행되는 범위는 평면들일 수 있다. 따라서, 다른 실시예에 따라, 2개 이상의 평면들이 있으며, 하나의 프라이머리 평면 및 2개의 가능한 세컨더리 평면들, 그리고 모듈(706)은 결정하고, 데이터 스트림 내의 평면 간 교환 정보는 개별적으로 각각의 가능한 1차 평면을 위해 평면 간 채택/예측이 각각의 평면을 위해 적용될 수 있는지에 관해 지시한다. 만일, 적용될 수 있는 경우, 추가적인 핸들링이 상술한 바와 같이 단순 연결 영역 방식으로 수행될 수 있고, 그러나 평면 간 교환 정보는 존재하며, 평면 간 교환 정보에 의해 지시된 평면들 내에서, 처리될 것이다.
본 발명에 따른 다양한 실시예들
본 발명의 일 실시예는 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 디코더를 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 상기 디코더는, 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열이 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하고; 상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들을 도출하고; 상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하고, 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에따라, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합(proper subset) 또는 각 단순 연결 영역에 대해, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하거나; 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하고, 그리고 상기 데이터 스트림으로*터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정할 수 있다.
여기에서, 상기 디코더는, 상기 데이터 스트림으로부터 세부분할 정보를 도출하고, 상기 세부분할 정보에 따라 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할할 수 있다.
여기에서, 상기 디코더는, 상기 단순 연결 영역들이 다양한 사이즈가 되도록 상기 정보 샘플들의 배열들을 상기 단순 연결 배열들로 세부분할할 수 있다.
여기에서, 상기 디코더는, 상기 단순연결 영역들로의 상기 세부분할이 상기 제 1 및 제 2 배열들에 대해 다르도록 상기 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할할 수 있다.
여기에서, 상기 디코더는, 상기 단순 연결 영역들과 연관된 상기 페이로드 데이터를 프로세싱함에 있어, 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들 안에서 정보 샘플들을 예측할 수 있다.
여기에서, 상기 단순 연결 영역들과 연관된 코딩 파라미터들은, 아래의 코딩 파라미터들: 적어도 인트라 예측 및 인터 예측 중에서, 개별 단순 연결 영역을 위해 어떤 예측 사용되는지 명시하는 블록 예측 모드들, 인트라 예측 신호가 어떻게 생성되는지 명시하는 인트라 예측 모드들, 개별 단순 연결 영역을 위한 최종 예측 신호를 생성하기 위해 몇 개의 예측 신호들이 결합되는지 명시하는 식별자, 움직임-보상된 예측을 위해 어떤 참조 픽쳐(들)이 쓰이는지 명시하는 참조 인덱스들, 상기 참조 픽쳐(들)을 사용하여 어떻게 상기 예측 신호(들)이 생성되는지 명시하는 움직임 파라미터들과, 예측 신호를 생성하기 위해 상기 참조 픽쳐(들)이 어떻게 필터링되는지 명시하는 식별자; 및 개별 단순 연결 영역이 어떻게 심지어 더 작은 단순 연결 영역들로 세부분할되는지 명시하는 세부분할 정보, 중 하나 이상을 포함할 수 있다.
여기에서, 상기 디코더는, 상기 제 2 배열의 상기 단순 연결 영역들의 현재 진부분집합 또는 상기 현재 단순 연결 영역 내에서 미리 결정된 정보 샘플을 선택함에 의해 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 결정하고, 상기 제 1 배열의 상기 단순 연결 영역들 중에서, 상기 제 1 배열 안에 미리 결정된 정보 샘플의 위치에 가장 가깝거나, 안에 존재하는 정보 샘플을 포함하는 단순 연결 영역을, 상기 국부적으로 상응하는 단순 연결 영역으로서 지정할 수 있다.
여기에서, 상기 디코더는, 상기 제 1 배열의 상기 단순 연결 영역들 중에서 상기 제 1 배열 내의 상기 제 2 배열의 상기 단순 연결 영역들의 현재 진부분집합 또는 상기 현재 단순 연결 영역에 의해 점유되는 지역과 최대 범위에서 공간적으로 오버랩하는 단순 연결 영역을, 상기 국부적으로 상응하는 단순 연결 영역으로서 지정함으로써, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 결정할 수 있다.
여기에서, 상기 디코더는, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파리미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하는 데 있어, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 어떠한 잔차 데이터를 도출하지 않고 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터, 상기 제 1 및 상기 제 2 배열들 사이의 공간적인 해상도 및 공간적인 위상 관계에서의 차이점을 고려한 단순한 복사 또는 적응에 의해, 완전히 추론할 수 있다.
여기에서, 상기 디코더는, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파리미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하는 데 있어, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측으로서 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들을 사용하고, 상기 데이터 스트림으로부터 도출된 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위하여 상기 예측과 잔차 데이터를 결합할 수 있다.
여기에서, 정보 샘플들의 배열들의 상기 제 1 배열은 밝기 또는 색상 요소와 관련되고, 정보 샘플들의 배열들의 상기 제 2 배열은 깊이 맵이고, 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들은 아래와 같은 코딩 파라미터들: 움직임 보상 예측에 의해 상기 제 1 및 상기 제 2 배열들을 복원하기 위해 사용되는 움직임 파라미터들, 및 상기 제 1 및 상기 제 2 배열들의 개별 단순 연결 영역들이 어떻게 더 작은 단순 연결 영역들로 세부분할되는지를 명시하는 세부분할 정보, 중 하나 이상을 포함할 수 있다.
여기에서, 각 정보 요소는 여러 색상 요소들, 깊이 맵 및 투명도 데이터로 구성되는 그룹으로부터 선택되고, 상기 디코더는 상기 단순 연결 영역들이 다양한 사이즈이고 상기 단순 연결 영역들로의 멀티-트리 기반의 세부분할이 상기 제 1 및 제 2 배열들에 대해 다르도록, 상기 데이터 스트림으로부터 세부분할 정보를 도출하고 멀티-트리 기반의 세부분할의 사용에 의해 상기 세부분할 정보에 따라 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 디코더를 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리(primary) 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리(secondary) 배열들이며, 상기 디코더는, 정보 샘플들의 개별 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 개별 배열과 연관된 페이로드 데이터를 처리함에 의해 정보 샘플들의 각 배열을 복원하고; 상기 데이터 스트림으로부터 상기 프라이머리 배열과 연관된 코딩 파라미터들을 도출하고, 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 도출하고, 상기 세컨더리 배열들을 위한 상기 평면 간 교환 정보에 따라, 각각의 개별적인 세컨더리 배열에 대해, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터, 적어도 부분적으로, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 상기 페이로드 데이터를 디코딩할지; 또는 상기 프라이머리 배열의 상기 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 각각의 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 상기 무시된 코딩 파라미터들과 무관한 개별 제 2 배열을 위한 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 페이로드 데이터를 디코딩할지, 결정할 수 있다.
여기에서, 정보 샘플들의 상기 배열들은, 여러 밝기 요소들, 색상 요소들, 및/또는 상기 픽쳐의 깊이 또는 투명도 요소들과 같은 비(non)-밝기/비(non)-색상 요소들을 나타낼 수 있다.
여기에서, 상기 디코더는, 상기 데이터 스트림으로부터 평면 지정(appointment) 정보를 도출하고, 상기 평면 지정 정보에 따라 정보 샘플들의 배열들을 프라이머리 및 세컨더리(secondary) 배열로 지정할 수 있다.
여기에서, 상기 장면은 시간-변화하고, 각 평면은 상기 장면의 픽쳐들의 시퀀스의 픽쳐마다 정보 샘플들의 적어도 하나의 배열을 이용한 시간-샘플링된 방법으로 여러 공간적으로 샘플링된 정보 요소들의 개별 하나를 나타내는 정보 샘플들의 배열들의 시퀀스를 포함하고, 상기 디코더는 픽쳐들, 또는 픽쳐들의 그룹들에 상응하는 시간 입상도(time granularity)로 상기 평면 지정 정보의 도출 및 지정을 수행하거나, 상기 도출 및 지정을 초기화를 위해 단지 한번 수행할 수 있다.
여기에서, 상기 장면은 시간-변화하고, 각 평면은 상기 장면의 픽쳐들의 시퀀스의 픽쳐마다 정보 샘플들의 적어도 하나의 배열을 이용한 시간-샘플링된 방법으로 여러 공간적으로 샘플링된 정보 요소들의 개별 하나를 나타내는 정보 샘플들의 배열들의 시퀀스를 포함하고, 상기 디코더는 상기 평면 간 교환 정보의 도출 및 결정을 픽쳐들이 세부분할된 세부 영역들, 픽쳐들, 또는 픽쳐들의 그룹들에 상응하는 시간 입상도로 수행할 수 있다.
여기에서, 정보 샘플들의 배열들의 상기 제 1 배열은 밝기 또는 색상 요소와 관련되고, 정보 샘플들의 배열들의 상기 제 2 배열은 깊이 맵이고, 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들은 아래와 같은 코딩 파라미터들: 움직임 보상 예측에 의해 상기 제 1 및 상기 제 2 배열들을 복원하기 위해 사용되는 움직임 파라미터들, 및 상기 제 1 및 상기 제 2 배열들의 개별 단순 연결 영역들이 어떻게 심지어 더 작은 단순 연결 영역들로 세부분할되는지를 명시하는 세부분할 정보, 중 하나 이상을 포함할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 방법을 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 상기 방법은, 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열이 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하는 단계; 데이터 스트림으로부터 정보 샘플들의 상기 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들을 도출하는 단계; 및 상기 데이터 스트림으로부터 정보 샘플들의 상기 배열들의 제 2 배열의 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하는 단계를 포함하되, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 평면 간 교환 정보에 따라, 상기 제 2 배열의 단순 연결 영역들의 진부분집합(proper subset) 또는 각 단순 연결 영역에 대해, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩할지; 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하고, 그리고 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩할지, 결정할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 방법을 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 방법은, 정보 샘플들의 개별 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 개별 배열과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하는 단계; 및 상기 데이터 스트림으로부터 상기 프라이머리 배열과 연관된 코딩 파라미터들을 도출하는 단계; 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 도출하는 단계를 포함하되, 상기 세컨더리 배열들을 위한 상기 평면 간 교환 정보에 따라, 각 개별적인 세컨더리 배열에 대해, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터, 적어도 부분적으로, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 상기 페이로드 데이터를 디코딩할지; 또는 상기 프라이머리 배열의 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 상기 무시된 코딩 파라미터들과 무관한 개별 제 2 배열을 위해 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 페이로드 데이터를 디코딩할지, 결정할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 인코더를 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 상기 인코더는, 정보 샘플들의 각 배열을 위하여, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들과 연관된 페이로드 데이터 및 상기 단순 연결 영역들 및 정보 샘플들의 각 배열을 복원하기 위하여 상기 페이로드 데이터가 복원됨에 의한 미리 정해진 방식과 연관된 코딩 파라미터들과, 상기 제 2차 배열의 상기 단순 연결 영역들의 진부분집합 또는 상기 단순 연결 영역의 입상도(granularity)로 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 결정하고; 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하고; 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보가, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들이, 적어도 부분적으로, 평면 간 교환 정보에 따라, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정을 수행하고, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 것을 피하고, 또는 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터의 예측에 기반한 복원이 가능한 상기 데이터 스트림으로 삽입하거나; 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 상기 데이터 스트림으로 그대로 삽입할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 인코더를 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 인코더는, 정보 샘플들의 각 배열을 위하여, 페이로드 데이터와 정보 샘플들의 개별 배열을 복원하기 위하여 상기 페이로드 데이터를 복원함에 의한 방식을 미리 정하는 코딩 파라미터들 및 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 결정하고; 상기 프라이머리 배열 및 상기 평면 간 교환 정보와 연관된 싱기 코딩 파라미터들을 상기 데이터 스트림에 삽입하고; 상기 평면 간 교환 정보가 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이, 적어도 부분적으로, 상기 평면 간 교환 정보에 따라, 상기 프라이머리 배열의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정을 수행하고, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 것을 피하거나, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 프라이머리 배열의 상기 코딩 파라미터들로부터의 예측에 기반한 복원이 가능한 상기 데이터 스트림에 삽입하거나; 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 그대로 삽입할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 방법을 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 상기 방법은, 정보 샘플들의 각 배열을 위하여, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들과 연관된 페이로드 데이터와, 상기 단순 연결 영역들 및 정보 샘플들의 각각의 배열을 복원하기 위하여 상기 페이로드 데이터가 복원됨에 의한 미리 정해진 방식과 연관된 코딩 파라미터들과, 상기 제 2차 배열의 상기 단순 연결 영역들의 진부분집합 또는 상기 단순 연결 영역의 입상도(granularity)로 정보 샘플들의 상기 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 결정하는 단계; 및 정보 샘플들의 상기 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하는 단계를 포함하되, 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보가 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들이, 적어도 부분적으로, 평면 간 교환 정보에 따라, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정이 수행되고, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 상기 데이터 스트림에 삽입하지 않고, 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 제 2 배열의 상기 단순 연결 영역들의 각각의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 위한 예측 잔차가 상기 데이터 스트림에 삽입되거나; 또는 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파리미터들이 상기 데이터 스트림에 그대로 삽입될 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 방법을 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 방법은, 정보 샘플들의 각 배열을 위하여, 페이로드 데이터와 정보 샘플들의 개별 배열을 복원하기 위하여 상기 페이로드 데이터를 복원함에 의한 방식을 미리 정하는 코딩 파라미터들 및, 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 결정하는 단계; 및 상기 프라이머리 배열 및 상기 평면 간 교환 정보와 연관된 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 단계를 포함하되, 상기 평면 간 교환 정보가 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이, 적어도 부분적으로, 상기 평면 간 교환 정보에 따라, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정이 수행되고, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하지 않고, 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 데이터 스트림에 삽입하거나; 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이 상기 데이터 스트림에 그대로 삽입될 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 상기 데이터 스트림은, 정보 샘플들의 각 배열이 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 프로세싱함으로써 정보 샘플들의 각각의 배열의 복원이 가능토록 하며, 상기 데이터 스트림은, 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들; 및 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 포함하되, 상기 제 2 배열의 상기 단순 연결 영역을 위한 상기 평면 간 교환 정보에 따라, 상기 제 2 배열의 상기 단순 배열 영역들의 진부분집합 또는 각 단순 연결 영역에 대해, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들의 부재, 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 제 2 배열의 상기 단순 연결 영역들의 각각의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측 잔차; 또는, 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 그대로 포함할 수 있다.
본 발명의 일 실시예는 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 제공한다. 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 데이터 스트림은, 정보 샘플들의 각 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열과 연관된 페이로드 데이터를 프로세싱함으로써 정보 샘플들의 각각의 배열의 복원을 가능케하고, 상기 데이터 스트림은, 상기 프라이머리 배열과 연관된 상기 코딩 파라미터들; 및 각 세컨더리 배열을 위한 평면 간 교환 정보를 포함하되, 상기 세컨더리 배열들 위한 상기 평면 간 교환 정보에 따라, 각 개별적인 세컨더리 배열에 대해, 상기 데이터 스트림 내에서 개별 세컨더리 배열을 위한 상기 코딩 파라미터들의 부재 또는 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능토록 하는, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차; 또는, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 그대로 포함할 수 있다.
본 발명의 일 실시예는 컴퓨터에서 동작할 때, 청구항 19, 20, 23 및 24 중 어느 한 항에 따른 방법을 수행하는 프로그램 코드를 가진 컴퓨터 프로그램을 저장한 컴퓨터로 읽을 수 있는 디지털 저장 매체를 제공한다.
본 발명의 일 실시예는 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 디코더를 제공한다. 각 정보 요소는 여러 색상 요소들, 깊이 맵 및 투명도 데이터로 구성되는 그룹으로부터 선택되고, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 디코더는, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들을, 상기 단순 연결 영역들과 연관된 세부분할 정보를 사용하는 멀티-트리 기반의 세부분할의 사용에 의해 단순 연결 세부 영역들로 세부분할하고; 상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리하고, 이러한 단순 연결 세부 영역들이 어떻게 예측되는지 또는 이러한 단순 연결 세부 영역들을 위해 사용되는 잔차 코딩 모드를 명시함으로써 정보 샘플들의 각 배열을 복원하고; 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 세부분할 정보와 상기 데이터 스트림으로부터 상기 제 1 배열의 상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고; 상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하고, 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에 따라, 각 단순 연결 영역에 대해, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역을 위한 도출로써 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 세부분할 정보로부터 개별 단순 연결 영역에 대해, 또는 상기 데이터 스트림으로부터 구문 요소인 어떤 조건을 만족시키는 사이즈의 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역에 대해, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 개별 단순 연결 영역의 세부 영역이 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 개별 영역들로 더 분해될지 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 상기 제 2 배열의 개별 단순 연결 영역의 세부 영역이 비-분해되어 남고 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 하나를 직접적으로 표현할지 명시하는 상기 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 페이로드 데이터를 디코딩하거나; 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 세부분할 정보를 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역에 대한 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정할 수 있다.
본 발명의 일 실시예는 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 방법을 제공한다. 각 정보 요소는 여러 색상 요소들, 깊이 맵 및 투명도 데이터로 구성되는 그룹으로부터 선택되어지고, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 방법은, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들을, 상기 단순 연결 영역들과 연관된 세부분할 정보를 사용하는 멀티-트리 기반의 세부분할의 사용에 의해 단순 연결 세부 영역들로 세부분할하는 단계; 상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리하고, 이러한 단순 연결 세부 영역들이 어떻게 예측되는지 또는 이러한 단순 연결 세부 영역들을 위해 사용되는 잔차 코딩 모드를 명시함으로써 정보 샘플들의 각 배열을 복원하는 단계; 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 세부분할 정보와 상기 데이터 스트림으로부터 상기 제 1 배열의 상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하는 단계; 상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하는 단계를 포함하고, 상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에 따라, 각 단순 연결 영역에 대해, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역을 위한 도출로써 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 세부분할 정보로부터 개별 단순 연결 영역에 대해, 또는 상기 데이터 스트림으로부터 구문 요소인 어떤 조건을 만족시키는 사이즈의 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역에 대해, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 개별 단순 연결 영역의 세부 영역이 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 개별 영역들로 더 분해될지 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 상기 제 2 배열의 개별 단순 연결 영역의 세부 영역이 비-분해되어 남고 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 하나를 직접적으로 표현할지 명시하는 상기 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 페이로드 데이터를 디코딩하거나; 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 세부분할 정보를 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역에 대한 상기 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정할 수 있다.
비록 어떤 실시예는 장치의 문맥에서 기술되었지만, 이와 같은 측면은 또한 대응하는 방법을 표현함이 명백하며, 이때, 블록이나 장치가 방법의 단계 또는 방법의 단계의 특징에 대응한다. 유사하게, 방법의 단계의 맥락에서 기술된 측면은 대응하는 블록이나 아이템 또는 대응하는 장치의 특징의 기술을 표현한다. 방법의 일부 또는 전체 단계는 하드웨어 장치, 예를 들면, 마이크로프로세서, 프로그램 가능한 컴퓨터, 또는 전자 회로에 의해 (또는 사용하여) 실행될 수 있다. 몇몇 실시예에서, 하나 이상의 가장 중요한 단계가 장치에 의해 실행될 수 있다.
발명의 인코딩된/압축된 신호들은 디지털 저장 매체에 저장되거나 무선 전송 매체나 인터넷 같은 유선 전송 매체와 같은 전송 매체 상에 전송될 수 있다.
특정 구현 요건에 따라, 본 발명의 실시예는 하드웨어 또는 소프트웨어로 구현될 수 있다. 구현은 디지털 저장 매체, 예를 들면 플로피 디스크, DVD, 블루-레이, CD, ROM, PROM, EPROM, EEPROM, 또는 플레시 메모리와 같이, 내부에 전자적으로 판독 가능한 제어 신호를 갖고, 각 방법이 수행되는 프로그래머블 컴퓨터 시스템과 같이 협업하는(또는 협업할 수 있는), 저장매체를 사용하여 수행될 수 있다. 따라서, 디지털 저장매체는 컴퓨터에서 판독 가능할 수 있다.
본 발명에 따른 몇몇 실시예는 전자적으로 판독 가능한 제어 신호를 갖는 데이터 캐리어를 포함하며, 이는 프로그래머블 컴퓨터 시스템과 협업하여, 여기 기술된 방법이 수행되도록 할 수 있다.
일반적으로, 본 발명의 실시예들은 프로그램 코드를 갖는 컴퓨터 프로그램 제품으로 구현될 수 있고, 프로그램 코드는 컴퓨터 프로그램 제품이 컴퓨터에서 수행될 때 상기 방법들 중의 하나를 수행하도록 동작할 수 있다. 프로그램 코드는 예를 들면, 기계 판독가능한 캐리어 상에 저장된다.
다른 실시예들은 여기 기술된 방법들 중의 하나를 수행하는 컴퓨터 프로그램을 포함하며, 이는 기계 판독 가능한 캐리어 상에 저장된다.
즉, 본 발명의 방법의 실시예는, 따라서, 컴퓨터 프로그램이 컴퓨터 상에서 수행될 때, 여기 기술된 방법들 중의 하나를 수행하는 프로그램 코드를 갖는 컴퓨터 프로그램이다.
본 발명의 방법의 다른 실시예들은, 따라서, 데이터 캐리어(또는 디지털 저장 매체, 도는 컴퓨터-판독가능한 매체)이며, 이는 여기 기술된 방법들 중의 하나를 수행하는 컴퓨터 프로그램을 기록하여 포함한다.
본 발명의 또 다른 실시예들은, 따라서, 데이터 스트림 또는 여기 기술된 방법들 중의 하나를 수행하는 컴퓨터 프로그램을 표현하는 일련의 신호이다. 데이터 스트림과 일련의 신호는 예를 들면 데이터 통신 연결, 예를 들면 인터넷, 을 통해 수송되도록 구성될 수 있다.
또 다른 실시예는 처리 수단, 예를 들면 컴퓨터, 또는 여기 기술된 방법들 중의 하나를 수행하도록 적용된, 프로그래머블 논리 장치를 포함한다.
또 다른 실시예는 여기 기술된 방법들 중의 하나를 수행하는 컴퓨터 프로그램이 설치된 컴퓨터를 포함한다.
어떤 실시예에서, 프로그래머블 논리 장치(예를 들면 필드 프로그래머블 게이트 배열)는 여기 기술된 방법의 기능성 일부 또는 전부를 수행하도록 사용될 수 있다. 어떤 실시예에서, 필드 프로그래머블 게이트 배열은 마이크로프로세서와 협업하여 여기 기술된 방법들 중의 하나를 수행할 수 있다. 일반적으로, 상기 방법은 어느 하드웨어 장치에 의해서도 바람직하게 수행될 수 있다.
상술한 실시예들은 단지 본 발명의 사상을 보여줄 뿐이다. 여기 기술된 배열과 세부사항에 대한 수정 및 변경들이 당업자들에게 명백함이 이해되어야 한다. 하기의 특허 청구범위의 영역에 의해서만 제한되며 상술된 실시예의 기술이나 설명의 방법에 의해서 표현되는 특정 사항에 의하여 제한되지 않음이 의도된다.

Claims (29)

  1. 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 디코더에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 디코더는,
    단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열이 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하고;
    상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들을 도출하고;
    상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하고,
    상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에따라, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합(proper subset) 또는 각 단순 연결 영역에 대해,
    상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하거나; 또는
    상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하고, 그리고 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정하는, 디코더.
  2. 청구항 1에 있어서, 상기 디코더는,
    상기 데이터 스트림으로부터 세부분할 정보를 도출하고, 상기 세부분할 정보에 따라 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할하는, 디코더.
  3. 청구항 1에 있어서, 상기 디코더는,
    상기 단순 연결 영역들이 다양한 사이즈가 되도록 상기 정보 샘플들의 배열들을 상기 단순 연결 배열들로 세부분할하는, 디코더.
  4. 청구항 1에 있어서, 상기 디코더는,
    상기 단순연결 영역들로의 상기 세부분할이 상기 제 1 및 제 2 배열들에 대해 다르도록 상기 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할하는, 디코더.
  5. 청구항 1에 있어서, 상기 디코더는,
    상기 단순 연결 영역들과 연관된 상기 페이로드 데이터를 프로세싱함에 있어, 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들 안에서 정보 샘플들을 예측하는, 디코더.
  6. 청구항 1에 있어서, 상기 단순 연결 영역들과 연관된 코딩 파라미터들은, 아래의 코딩 파라미터들:
    적어도 인트라 예측 및 인터 예측 중에서, 개별 단순 연결 영역을 위해 어떤 예측 사용되는지 명시하는 블록 예측 모드들,
    인트라 예측 신호가 어떻게 생성되는지 명시하는 인트라 예측 모드들,
    개별 단순 연결 영역을 위한 최종 예측 신호를 생성하기 위해 몇 개의 예측 신호들이 결합되는지 명시하는 식별자,
    움직임-보상된 예측을 위해 어떤 참조 픽쳐(들)이 쓰이는지 명시하는 참조 인덱스들,
    상기 참조 픽쳐(들)을 사용하여 어떻게 상기 예측 신호(들)이 생성되는지 명시하는 움직임 파라미터들과,
    예측 신호를 생성하기 위해 상기 참조 픽쳐(들)이 어떻게 필터링되는지 명시하는 식별자; 및
    개별 단순 연결 영역이 어떻게 심지어 더 작은 단순 연결 영역들로 세부분할되는지 명시하는 세부분할 정보,
    중 하나 이상을 포함하는, 디코더.
  7. 청구항 1에 있어서, 상기 디코더는,
    상기 제 2 배열의 상기 단순 연결 영역들의 현재 진부분집합 또는 상기 현재 단순 연결 영역 내에서 미리 결정된 정보 샘플을 선택함에 의해 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 결정하고, 상기 제 1 배열의 상기 단순 연결 영역들 중에서, 상기 제 1 배열 안에 미리 결정된 정보 샘플의 위치에 가장 가깝거나, 안에 존재하는 정보 샘플을 포함하는 단순 연결 영역을, 상기 국부적으로 상응하는 단순 연결 영역으로서 지정하는, 디코더.
  8. 청구항 1에 있어서, 상기 디코더는,
    상기 제 1 배열의 상기 단순 연결 영역들 중에서 상기 제 1 배열 내의 상기 제 2 배열의 상기 단순 연결 영역들의 현재 진부분집합 또는 상기 현재 단순 연결 영역에 의해 점유되는 지역과 최대 범위에서 공간적으로 오버랩하는 단순 연결 영역을, 상기 국부적으로 상응하는 단순 연결 영역으로서 지정함으로써, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 결정하는, 디코더.
  9. 청구항 1에 있어서, 상기 디코더는,
    상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파리미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하는 데 있어, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 어떠한 잔차 데이터를 도출하지 않고 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터, 상기 제 1 및 상기 제 2 배열들 사이의 공간적인 해상도 및 공간적인 위상 관계에서의 차이점을 고려한 단순한 복사 또는 적응에 의해, 완전히 추론하는, 디코더.
  10. 청구항 1에 있어서, 상기 디코더는,
    상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파리미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하는 데 있어, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측으로서 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들을 사용하고, 상기 데이터 스트림으로부터 도출된 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위하여 상기 예측과 잔차 데이터를 결합하는, 디코더.
  11. 청구항 1에 있어서,
    정보 샘플들의 배열들의 상기 제 1 배열은 밝기 또는 색상 요소와 관련되고,
    정보 샘플들의 배열들의 상기 제 2 배열은 깊이 맵이고,
    상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들은 아래와 같은 코딩 파라미터들:
    움직임 보상 예측에 의해 상기 제 1 및 상기 제 2 배열들을 복원하기 위해 사용되는 움직임 파라미터들, 및
    상기 제 1 및 상기 제 2 배열들의 개별 단순 연결 영역들이 어떻게 더 작은 단순 연결 영역들로 세부분할되는지를 명시하는 세부분할 정보,
    중 하나 이상을 포함하는, 디코더.
  12. 청구항 1에 있어서,
    각 정보 요소는 여러 색상 요소들, 깊이 맵 및 투명도 데이터로 구성되는 그룹으로부터 선택되고,
    상기 디코더는 상기 단순 연결 영역들이 다양한 사이즈이고 상기 단순 연결 영역들로의 멀티-트리 기반의 세부분할이 상기 제 1 및 제 2 배열들에 대해 다르도록, 상기 데이터 스트림으로부터 세부분할 정보를 도출하고 멀티-트리 기반의 세부분할의 사용에 의해 상기 세부분할 정보에 따라 정보 샘플들의 배열들을 상기 단순 연결 영역들로 세부분할하는, 디코더.
  13. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 디코더에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리(primary) 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리(secondary) 배열들이며, 상기 디코더는,
    정보 샘플들의 개별 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 개별 배열과 연관된 페이로드 데이터를 처리함에 의해 정보 샘플들의 각 배열을 복원하고;
    상기 데이터 스트림으로부터 상기 프라이머리 배열과 연관된 코딩 파라미터들을 도출하고,
    상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 도출하고,
    상기 세컨더리 배열들을 위한 상기 평면 간 교환 정보에 따라, 각각의 개별적인 세컨더리 배열에 대해,
    상기 프라이머리 배열의 상기 코딩 파라미터들로부터, 적어도 부분적으로, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 상기 페이로드 데이터를 디코딩할지; 또는
    상기 프라이머리 배열의 상기 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 각각의 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 상기 무시된 코딩 파라미터들과 무관한 개별 제 2 배열을 위한 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 페이로드 데이터를 디코딩할지, 결정하는, 디코더.
  14. 청구항 13에 있어서, 정보 샘플들의 상기 배열들은,
    여러 밝기 요소들, 색상 요소들, 및/또는 상기 픽쳐의 깊이 또는 투명도 요소들과 같은 비(non)-밝기/비(non)-색상 요소들을 나타내는, 디코더.
  15. 청구항 13에 있어서, 상기 디코더는,
    상기 데이터 스트림으로부터 평면 지정(appointment) 정보를 도출하고, 상기 평면 지정 정보에 따라 정보 샘플들의 배열들을 프라이머리 및 세컨더리(secondary) 배열로 지정하는, 디코더.
  16. 청구항 15에 있어서,
    상기 장면은 시간-변화하고, 각 평면은 상기 장면의 픽쳐들의 시퀀스의 픽쳐마다 정보 샘플들의 적어도 하나의 배열을 이용한 시간-샘플링된 방법으로 여러 공간적으로 샘플링된 정보 요소들의 개별 하나를 나타내는 정보 샘플들의 배열들의 시퀀스를 포함하고, 상기 디코더는 픽쳐들, 또는 픽쳐들의 그룹들에 상응하는 시간 입상도(time granularity)로 상기 평면 지정 정보의 도출 및 지정을 수행하거나, 상기 도출 및 지정을 초기화를 위해 단지 한번 수행하는, 디코더.
  17. 청구항 13에 있어서,
    상기 장면은 시간-변화하고, 각 평면은 상기 장면의 픽쳐들의 시퀀스의 픽쳐마다 정보 샘플들의 적어도 하나의 배열을 이용한 시간-샘플링된 방법으로 여러 공간적으로 샘플링된 정보 요소들의 개별 하나를 나타내는 정보 샘플들의 배열들의 시퀀스를 포함하고, 상기 디코더는 상기 평면 간 교환 정보의 도출 및 결정을 픽쳐들이 세부분할된 세부 영역들, 픽쳐들, 또는 픽쳐들의 그룹들에 상응하는 시간 입상도로 수행하는, 디코더.
  18. 청구항 1에 있어서,
    정보 샘플들의 배열들의 상기 제 1 배열은 밝기 또는 색상 요소와 관련되고,
    정보 샘플들의 배열들의 상기 제 2 배열은 깊이 맵이고,
    상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들은 아래와 같은 코딩 파라미터들:
    움직임 보상 예측에 의해 상기 제 1 및 상기 제 2 배열들을 복원하기 위해 사용되는 움직임 파라미터들, 및
    상기 제 1 및 상기 제 2 배열들의 개별 단순 연결 영역들이 어떻게 심지어 더 작은 단순 연결 영역들로 세부분할되는지를 명시하는 세부분할 정보,
    중 하나 이상을 포함하는, 디코더.
  19. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 방법에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 방법은,
    단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열이 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하는 단계;
    데이터 스트림으로부터 정보 샘플들의 상기 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들을 도출하는 단계; 및
    상기 데이터 스트림으로부터 정보 샘플들의 상기 배열들의 제 2 배열의 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하는 단계를 포함하되,
    상기 제 2 배열의 상기 단순 연결 영역들의 상기 평면 간 교환 정보에 따라, 상기 제 2 배열의 단순 연결 영역들의 진부분집합(proper subset) 또는 각 단순 연결 영역에 대해,
    상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 적어도 부분적으로, 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩할지; 또는
    상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 상기 단순 연결 영역들의 상기 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 도출하고, 그리고 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩할지, 결정하는, 디코딩 방법.
  20. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 표현하는 데이터 스트림을 디코딩하는 방법에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 방법은,
    정보 샘플들의 개별 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 개별 배열과 연관된 페이로드 데이터를 처리함으로써 정보 샘플들의 각 배열을 복원하는 단계; 및
    상기 데이터 스트림으로부터 상기 프라이머리 배열과 연관된 코딩 파라미터들을 도출하는 단계;
    상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 도출하는 단계를 포함하되,
    상기 세컨더리 배열들을 위한 상기 평면 간 교환 정보에 따라, 각 개별적인 세컨더리 배열에 대해,
    상기 프라이머리 배열의 상기 코딩 파라미터들로부터, 적어도 부분적으로, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 상기 페이로드 데이터를 디코딩할지; 또는
    상기 프라이머리 배열의 코딩 파라미터들을 무시하고, 상기 데이터 스트림으로부터 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 도출하고, 상기 무시된 코딩 파라미터들과 무관한 개별 제 2 배열을 위해 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 세컨더리 배열과 연관된 페이로드 데이터를 디코딩할지, 결정하는, 디코딩 방법.
  21. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 인코더에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 인코더는,
    정보 샘플들의 각 배열을 위하여, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들과 연관된 페이로드 데이터 및 상기 단순 연결 영역들 및 정보 샘플들의 각 배열을 복원하기 위하여 상기 페이로드 데이터가 복원됨에 의한 미리 정해진 방식과 연관된 코딩 파라미터들과, 상기 제 2차 배열의 상기 단순 연결 영역들의 진부분집합 또는 상기 단순 연결 영역의 입상도(granularity)로 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 결정하고;
    정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하고;
    상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보가, 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들이, 적어도 부분적으로, 평면 간 교환 정보에 따라, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정을 수행하고,
    상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 것을 피하고, 또는 상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터의 예측에 기반한 복원이 가능한 상기 데이터 스트림으로 삽입하거나;
    상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 상기 데이터 스트림으로 그대로 삽입하는, 인코더.
  22. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 인코더에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 인코더는,
    정보 샘플들의 각 배열을 위하여, 페이로드 데이터와 정보 샘플들의 개별 배열을 복원하기 위하여 상기 페이로드 데이터를 복원함에 의한 방식을 미리 정하는 코딩 파라미터들 및 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 결정하고;
    상기 프라이머리 배열 및 상기 평면 간 교환 정보와 연관된 싱기 코딩 파라미터들을 상기 데이터 스트림에 삽입하고;
    상기 평면 간 교환 정보가 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이, 적어도 부분적으로, 상기 평면 간 교환 정보에 따라, 상기 프라이머리 배열의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정을 수행하고,
    개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 것을 피하거나, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 프라이머리 배열의 상기 코딩 파라미터들로부터의 예측에 기반한 복원이 가능한 상기 데이터 스트림에 삽입하거나; 또는
    개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 그대로 삽입하는, 인코더.
  23. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 방법에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 방법은,
    정보 샘플들의 각 배열을 위하여, 정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들과 연관된 페이로드 데이터와, 상기 단순 연결 영역들 및 정보 샘플들의 각각의 배열을 복원하기 위하여 상기 페이로드 데이터가 복원됨에 의한 미리 정해진 방식과 연관된 코딩 파라미터들과, 상기 제 2차 배열의 상기 단순 연결 영역들의 진부분집합 또는 상기 단순 연결 영역의 입상도(granularity)로 정보 샘플들의 상기 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 결정하는 단계; 및
    정보 샘플들의 상기 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 코딩 파라미터들 및 상기 평면 간 교환 정보를 상기 데이터 스트림에 삽입하는 단계를 포함하되,
    상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보가 상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들이, 적어도 부분적으로, 평면 간 교환 정보에 따라, 상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정이 수행되고,
    상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 상기 데이터 스트림에 삽입하지 않고, 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 제 2 배열의 상기 단순 연결 영역들의 각각의 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 위한 예측 잔차가 상기 데이터 스트림에 삽입되거나; 또는
    상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파리미터들이 상기 데이터 스트림에 그대로 삽입되는, 데이터 스트림 생성 방법.
  24. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 생성하는 방법에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 방법은,
    정보 샘플들의 각 배열을 위하여, 페이로드 데이터와 정보 샘플들의 개별 배열을 복원하기 위하여 상기 페이로드 데이터를 복원함에 의한 방식을 미리 정하는 코딩 파라미터들 및, 상기 데이터 스트림으로부터 각 세컨더리 배열을 위한 평면 간 교환 정보를 결정하는 단계; 및
    상기 프라이머리 배열 및 상기 평면 간 교환 정보와 연관된 코딩 파라미터들을 상기 데이터 스트림에 삽입하는 단계를 포함하되,
    상기 평면 간 교환 정보가 개별 세컨더리 배열을 위한 상기 코딩 파라미터들이, 적어도 부분적으로, 상기 평면 간 교환 정보에 따라, 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 도출되는지 또는 도출되지 않는지에 관하여 나타내도록 상기 결정이 수행되고,
    개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 상기 데이터 스트림에 삽입하지 않고, 또는 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차를 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 데이터 스트림에 삽입하거나; 또는
    개별 세컨더리 배열을 위한 상기 코딩 파라미터들이 상기 데이터 스트림에 그대로 삽입되는, 데이터 스트림 생성 방법.
  25. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 데이터 스트림은, 정보 샘플들의 각 배열이 단순 연결 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 세부분할된 상기 단순 연결 영역들과 연관된 페이로드 데이터를 프로세싱함으로써 정보 샘플들의 각각의 배열의 복원이 가능토록 하며, 상기 데이터 스트림은,
    정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 상기 코딩 파라미터들; 및
    정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 포함하되,
    상기 제 2 배열의 상기 단순 연결 영역을 위한 상기 평면 간 교환 정보에 따라, 상기 제 2 배열의 상기 단순 배열 영역들의 진부분집합 또는 각 단순 연결 영역에 대해,
    상기 제 2 배열의 상기 단순 연결 영역들의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들의 부재, 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능하게, 상기 제 2 배열의 상기 단순 연결 영역들의 각각의 진부분집합 또는 개별 단순 연결 영역을 위한 상기 코딩 파라미터들을 위한 예측 잔차; 또는,
    상기 제 2 배열의 상기 단순 연결 영역들의 개별 진부분집합 또는 개별 단순 연결 영역을 위한 코딩 파라미터들을 그대로 포함하는, 데이터 스트림.
  26. 평면들에서 장면의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림에 있어서, 각 평면은 정보 샘플들의 배열을 포함하고, 정보 샘플들의 상기 배열의 적어도 하나는 정보 샘플들의 프라이머리 배열이고, 그것의 적어도 다른 두 개는 정보 샘플들의 세컨더리 배열들이며, 상기 데이터 스트림은, 정보 샘플들의 각 배열과 또한 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 정보 샘플들의 각 배열과 연관된 페이로드 데이터를 프로세싱함으로써 정보 샘플들의 각각의 배열의 복원을 가능케하고, 상기 데이터 스트림은,
    상기 프라이머리 배열과 연관된 상기 코딩 파라미터들; 및
    각 세컨더리 배열을 위한 평면 간 교환 정보를 포함하되,
    상기 세컨더리 배열들 위한 상기 평면 간 교환 정보에 따라, 각 개별적인 세컨더리 배열에 대해,
    상기 데이터 스트림 내에서 개별 세컨더리 배열을 위한 상기 코딩 파라미터들의 부재 또는 상기 프라이머리 배열의 상기 코딩 파라미터들로부터 예측에 기반한 복원이 가능토록 하는, 개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 위한 예측 잔차; 또는,
    개별 세컨더리 배열을 위한 상기 코딩 파라미터들을 그대로 포함하는, 데이터 스트림.
  27. 컴퓨터에서 동작할 때, 청구항 19, 20, 23 및 24 중 어느 한 항에 따른 방법을 수행하는 프로그램 코드를 가진 컴퓨터 프로그램을 저장한 컴퓨터로 읽을 수 있는 디지털 저장 매체.
  28. 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 디코더에 있어서, 각 정보 요소는 여러 색상 요소들, 깊이 맵 및 투명도 데이터로 구성되는 그룹으로부터 선택되고, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 디코더는,
    정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들을, 상기 단순 연결 영역들과 연관된 세부분할 정보를 사용하는 멀티-트리 기반의 세부분할의 사용에 의해 단순 연결 세부 영역들로 세부분할하고;
    상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리하고, 이러한 단순 연결 세부 영역들이 어떻게 예측되는지 또는 이러한 단순 연결 세부 영역들을 위해 사용되는 잔차 코딩 모드를 명시함으로써 정보 샘플들의 각 배열을 복원하고;
    정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 세부분할 정보와 상기 데이터 스트림으로부터 상기 제 1 배열의 상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고;
    상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하고,
    상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에 따라, 각 단순 연결 영역에 대해,
    상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역을 위한 도출로써 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 세부분할 정보로부터 개별 단순 연결 영역에 대해, 또는 상기 데이터 스트림으로부터 구문 요소인 어떤 조건을 만족시키는 사이즈의 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역에 대해, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 개별 단순 연결 영역의 세부 영역이 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 개별 영역들로 더 분해될지 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 상기 제 2 배열의 개별 단순 연결 영역의 세부 영역이 비-분해되어 남고 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 하나를 직접적으로 표현할지 명시하는 상기 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 페이로드 데이터를 디코딩하거나; 또는
    상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 세부분할 정보를 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역에 대한 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정하는, 디코더.
  29. 평면(plane)들에서 장면(scene)의 픽쳐의 여러 공간적으로 샘플링된 정보 요소들을 나타내는 데이터 스트림을 디코딩하는 방법에 있어서, 각 정보 요소는 여러 색상 요소들, 깊이 맵 및 투명도 데이터로 구성되는 그룹으로부터 선택되어지고, 각 평면은 정보 샘플들의 배열을 포함하고, 상기 방법은,
    정보 샘플들의 각 배열이 세부분할된 단순 연결 영역들을, 상기 단순 연결 영역들과 연관된 세부분할 정보를 사용하는 멀티-트리 기반의 세부분할의 사용에 의해 단순 연결 세부 영역들로 세부분할하는 단계;
    상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 상기 단순 연결 영역들과 연관된 페이로드 데이터를 처리하고, 이러한 단순 연결 세부 영역들이 어떻게 예측되는지 또는 이러한 단순 연결 세부 영역들을 위해 사용되는 잔차 코딩 모드를 명시함으로써 정보 샘플들의 각 배열을 복원하는 단계;
    정보 샘플들의 배열들의 제 1 배열의 상기 단순 연결 영역들과 연관된 세부분할 정보와 상기 데이터 스트림으로부터 상기 제 1 배열의 상기 단순 연결 영역들의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하는 단계;
    상기 데이터 스트림으로부터 정보 샘플들의 배열들의 제 2 배열의 상기 단순 연결 영역들을 위한 평면 간 교환 정보를 도출하는 단계를 포함하고,
    상기 제 2 배열의 상기 단순 연결 영역들을 위한 상기 평면 간 교환 정보에 따라, 각 단순 연결 영역에 대해,
    상기 제 1 배열의 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역을 위한 도출로써 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 상기 세부분할 정보로부터 개별 단순 연결 영역에 대해, 또는 상기 데이터 스트림으로부터 구문 요소인 어떤 조건을 만족시키는 사이즈의 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 각 단순 연결 세부 영역에 대해, 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 개별 단순 연결 영역의 세부 영역이 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 개별 영역들로 더 분해될지 또는 상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역의 개별 단순 연결 세부 영역에 상응하여, 상기 제 2 배열의 개별 단순 연결 영역의 세부 영역이 비-분해되어 남고 개별 단순 연결 영역의 상기 단순 연결 세부 영역들의 하나를 직접적으로 표현할지 명시하는 상기 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 도출된 상기 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 페이로드 데이터를 디코딩하거나; 또는
    상기 제 1 배열의 상기 국부적으로 상응하는 단순 연결 영역을 위한 세부분할 정보를 무시하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역에 대한 상기 세부분할 정보를 도출하고, 상기 데이터 스트림으로부터 상기 제 2 배열의 개별 단순 연결 영역의 상기 단순 연결 세부 영역들과 연관된 상기 코딩 파라미터들을 도출하고, 상기 데이터 스트림으로부터 도출된 상기 연관된 코딩 파라미터들에 의해 미리 정해진 방식으로 개별 단순 연결 영역과 연관된 상기 페이로드 데이터를 디코딩하도록, 결정하는, 디코딩 방법.
KR1020217002778A 2010-04-13 2010-04-13 평면 간 예측 KR102355155B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020227001860A KR102405997B1 (ko) 2010-04-13 2010-04-13 평면 간 예측

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020207004435A KR102210983B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
PCT/EP2010/054840 WO2011127966A1 (en) 2010-04-13 2010-04-13 Inter-plane prediction

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020207004435A Division KR102210983B1 (ko) 2010-04-13 2010-04-13 평면 간 예측

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020227001860A Division KR102405997B1 (ko) 2010-04-13 2010-04-13 평면 간 예측

Publications (2)

Publication Number Publication Date
KR20210013662A true KR20210013662A (ko) 2021-02-04
KR102355155B1 KR102355155B1 (ko) 2022-01-24

Family

ID=43305051

Family Applications (15)

Application Number Title Priority Date Filing Date
KR1020187018013A KR101962084B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020237036590A KR20230151089A (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020217001014A KR102282803B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020147014050A KR101592802B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020227044832A KR102595454B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020227018228A KR102481529B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020127029512A KR101447796B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020197007867A KR102080450B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020207004435A KR102210983B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020207013818A KR102205041B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020177017431A KR101874272B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020147037039A KR101584480B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020217002778A KR102355155B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020227001860A KR102405997B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020167002671A KR101752458B1 (ko) 2010-04-13 2010-04-13 평면 간 예측

Family Applications Before (12)

Application Number Title Priority Date Filing Date
KR1020187018013A KR101962084B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020237036590A KR20230151089A (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020217001014A KR102282803B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020147014050A KR101592802B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020227044832A KR102595454B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020227018228A KR102481529B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020127029512A KR101447796B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020197007867A KR102080450B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020207004435A KR102210983B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020207013818A KR102205041B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020177017431A KR101874272B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020147037039A KR101584480B1 (ko) 2010-04-13 2010-04-13 평면 간 예측

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020227001860A KR102405997B1 (ko) 2010-04-13 2010-04-13 평면 간 예측
KR1020167002671A KR101752458B1 (ko) 2010-04-13 2010-04-13 평면 간 예측

Country Status (12)

Country Link
US (9) US10873749B2 (ko)
EP (3) EP3709641A1 (ko)
JP (1) JP5846611B2 (ko)
KR (15) KR101962084B1 (ko)
CN (9) CN102939750B (ko)
BR (5) BR122020007921B1 (ko)
DK (1) DK2559240T3 (ko)
ES (1) ES2746182T3 (ko)
HU (1) HUE045579T2 (ko)
PL (1) PL2559240T3 (ko)
PT (1) PT2559240T (ko)
WO (1) WO2011127966A1 (ko)

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5039142B2 (ja) 2006-10-25 2012-10-03 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン 品質スケーラブルな符号化方法
CN106231328B (zh) 2010-04-13 2020-06-12 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
LT3697089T (lt) 2010-04-13 2022-01-10 Ge Video Compression, Llc Paveldėjimas ėminių masyvo multimedžio poskaidinyje
CN102939750B (zh) 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
KR102480988B1 (ko) 2010-04-13 2022-12-26 지이 비디오 컴프레션, 엘엘씨 샘플 영역 병합
EP2580912B1 (en) 2010-07-09 2017-01-25 Samsung Electronics Co., Ltd Method for decoding video by using block merging
ES2785606T3 (es) * 2010-07-20 2020-10-07 Ntt Docomo Inc Dispositivo de decodificación predictiva de imágenes, método de decodificación predictiva de imágenes
US9532059B2 (en) 2010-10-05 2016-12-27 Google Technology Holdings LLC Method and apparatus for spatial scalability for video coding
EP2606647A1 (en) * 2010-10-05 2013-06-26 General instrument Corporation Method and apparatus for feature based video coding
CN105812817B (zh) * 2010-11-23 2019-07-12 Lg电子株式会社 由编码装置和解码装置执行的间预测方法
KR102292708B1 (ko) 2011-01-07 2021-08-23 엘지전자 주식회사 영상 정보 부호화 방법 및 복호화 방법과 이를 이용한 장치
JP5982734B2 (ja) 2011-03-11 2016-08-31 ソニー株式会社 画像処理装置および方法
MX2013013508A (es) * 2011-06-23 2014-02-27 Panasonic Corp Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
AU2012277220B2 (en) 2011-06-30 2016-08-11 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN106851295B (zh) 2011-07-11 2019-10-18 太阳专利托管公司 编码方法及编码装置
MX353235B (es) 2011-09-29 2018-01-08 Sharp Kk Star Dispositivo de decodificación de imágenes, método de decodificación de imágenes y dispositivo de codificación de imágenes.
JP5972888B2 (ja) 2011-09-29 2016-08-17 シャープ株式会社 画像復号装置、画像復号方法および画像符号化装置
EP3691262B1 (en) * 2011-11-11 2023-10-25 GE Video Compression, LLC Effective partition coding with high degree of partitioning freedom
EP4161078A1 (en) 2011-11-11 2023-04-05 GE Video Compression, LLC Effective wedgelet partition coding using spatial prediction
WO2013068562A1 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Effective wedgelet partition coding
ES2664746T3 (es) 2011-11-11 2018-04-23 Ge Video Compression, Llc Predicción eficaz usando codificación de particiones
GB2502047B (en) * 2012-04-04 2019-06-05 Snell Advanced Media Ltd Video sequence processing
LT3793200T (lt) 2012-04-13 2023-02-27 Ge Video Compression, Llc Vaizdo kodavimas su maža delsa
WO2013157817A1 (ko) * 2012-04-16 2013-10-24 삼성전자 주식회사 트리 구조의 부호화 단위에 기초한 다시점 비디오 부호화 방법 및 그 장치, 트리 구조의 부호화 단위에 기초한 다시점 비디오 복호화 방법 및 그 장치
FR2992815A1 (fr) * 2012-06-27 2014-01-03 France Telecom Procede de codage d'un bloc courant d'une premiere composante d'image par rapport a un bloc de reference d'au moins une deuxieme composante d'image, dispositif de codage et programme d'ordinateur correspondant
CA3095638C (en) 2012-06-29 2023-11-14 Ge Video Compression, Llc Video data stream concept
FR2993084A1 (fr) * 2012-07-09 2014-01-10 France Telecom Procede de codage video par prediction du partitionnement d'un bloc courant, procede de decodage, dispositifs de codage et de decodage et programmes d'ordinateur correspondants
WO2014008951A1 (en) * 2012-07-13 2014-01-16 Huawei Technologies Co., Ltd. Apparatus for coding a bit stream representing a three-dimensional video
US9699450B2 (en) * 2012-10-04 2017-07-04 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
CN116708768A (zh) 2013-01-04 2023-09-05 Ge视频压缩有限责任公司 高效可伸缩编码概念
WO2014111547A1 (en) * 2013-01-18 2014-07-24 Canon Kabushiki Kaisha Method, device, and computer program for encapsulating partitioned timed media data
JP5719401B2 (ja) * 2013-04-02 2015-05-20 日本電信電話株式会社 ブロックサイズ決定方法、映像符号化装置、及びプログラム
US9749627B2 (en) 2013-04-08 2017-08-29 Microsoft Technology Licensing, Llc Control data for motion-constrained tile set
ES2665908T3 (es) 2013-04-08 2018-04-30 Ge Video Compression, Llc Predicción inter-componente
WO2014166119A1 (en) * 2013-04-12 2014-10-16 Mediatek Inc. Stereo compatibility high level syntax
US9800895B2 (en) * 2013-06-27 2017-10-24 Qualcomm Incorporated Depth oriented inter-view motion vector prediction
JP6315911B2 (ja) 2013-07-09 2018-04-25 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US20150063455A1 (en) * 2013-09-02 2015-03-05 Humax Holdings Co., Ltd. Methods and apparatuses for predicting depth quadtree in three-dimensional video
WO2015055832A1 (en) 2013-10-18 2015-04-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multi-component picture or video coding concept
US10368097B2 (en) * 2014-01-07 2019-07-30 Nokia Technologies Oy Apparatus, a method and a computer program product for coding and decoding chroma components of texture pictures for sample prediction of depth pictures
FR3030976B1 (fr) 2014-12-22 2018-02-02 B<>Com Procede de codage d'une image numerique, procede de decodage, dispositifs et programmes d'ordinateurs associes
CN105872539B (zh) * 2015-02-08 2020-01-14 同济大学 图像编码方法和装置及图像解码方法和装置
CN106358042B (zh) * 2015-07-17 2020-10-09 恩智浦美国有限公司 使用视频图像的帧间预测的并行解码器
CN105120295B (zh) * 2015-08-11 2018-05-18 北京航空航天大学 一种基于四叉树编码分割的hevc复杂度控制方法
EP4072141A1 (en) * 2016-03-24 2022-10-12 Intellectual Discovery Co., Ltd. Method and apparatus for encoding/decoding video signal
EP3497932A4 (en) * 2016-08-15 2020-03-25 Nokia Technologies Oy VIDEO CODING AND DECODING
US10609423B2 (en) 2016-09-07 2020-03-31 Qualcomm Incorporated Tree-type coding for video coding
US10110914B1 (en) * 2016-09-15 2018-10-23 Google Llc Locally adaptive warped motion compensation in video coding
WO2018061550A1 (ja) * 2016-09-28 2018-04-05 シャープ株式会社 画像復号装置及び画像符号化装置
KR102511611B1 (ko) * 2016-10-14 2023-03-20 세종대학교산학협력단 영상 부호화 방법/장치, 영상 복호화 방법/장치 및 비트스트림을 저장한 기록 매체
CN116489396A (zh) 2016-10-14 2023-07-25 世宗大学校产学协力团 影像解码/编码方法、传送比特流的方法及记录介质
US11057624B2 (en) 2016-10-14 2021-07-06 Industry Academy Cooperation Foundation Of Sejong University Image encoding method/device, image decoding method/device, and recording medium in which bitstream is stored
EP3528498A1 (en) 2016-11-21 2019-08-21 Panasonic Intellectual Property Corporation of America Coding device, decoding device, coding method, and decoding method
CN116347077A (zh) 2016-11-21 2023-06-27 松下电器(美国)知识产权公司 计算机可读介质
CN116170583A (zh) * 2017-01-16 2023-05-26 世宗大学校产学协力团 影像编码/解码方法
EP3358754A1 (en) * 2017-02-02 2018-08-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Antenna array codebook with beamforming coefficients adapted to an arbitrary antenna response of the antenna array
JP6680260B2 (ja) * 2017-04-28 2020-04-15 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
KR102509823B1 (ko) 2017-12-27 2023-03-14 삼성전자주식회사 그리드 기반의 평면 추정 방법 및 장치
WO2019142834A1 (ja) * 2018-01-19 2019-07-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元データ符号化方法、三次元データ復号方法、三次元データ符号化装置、及び三次元データ復号装置
US11108841B2 (en) 2018-06-19 2021-08-31 At&T Intellectual Property I, L.P. Apparatus, storage medium and method for heterogeneous segmentation of video streaming
EP3588800A1 (en) 2018-06-29 2020-01-01 FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. Antenna array codebook with beamforming coefficients adapted to an arbitrary antenna response of the antenna array
US11265579B2 (en) * 2018-08-01 2022-03-01 Comcast Cable Communications, Llc Systems, methods, and apparatuses for video processing
WO2020066680A1 (ja) * 2018-09-28 2020-04-02 ソニー株式会社 画像処理装置および方法
CN110505486B (zh) * 2019-08-23 2022-09-02 绍兴文理学院 一种对高概率运动矢量映射的编码及解码方法
CN110602502B (zh) * 2019-08-23 2022-08-16 绍兴文理学院 一种运动矢量编码和解码的方法
WO2021061026A1 (en) * 2019-09-25 2021-04-01 Huawei Technologies Co., Ltd. Method and apparatus of simplified geometric merge mode for inter prediction
US11223836B2 (en) * 2019-12-02 2022-01-11 Tencent America LLC Method and apparatus for point cloud coding
MX2022011798A (es) * 2020-03-27 2022-10-07 Beijing Dajia Internet Information Tech Co Ltd Metodos y dispositivos para escalacion residual que depende de la prediccion para codificacion de video.
US11425368B1 (en) * 2021-02-17 2022-08-23 Adobe Inc. Lossless image compression using block based prediction and optimized context adaptive entropy coding
US11917283B2 (en) * 2021-10-27 2024-02-27 Tencent America LLC Split rendering for lightfield/immersive media using edge-cloud architecture and peer-to-peer streaming
US20230308651A1 (en) * 2022-03-22 2023-09-28 Tencent America LLC Systems and methods for regularization-free multi-hypothesis arithmetic coding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130020890A (ko) * 2010-04-13 2013-03-04 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 샘플 영역 병합
KR20130027504A (ko) * 2010-04-13 2013-03-15 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 이미지들의 멀티-트리 서브-디비젼을 이용한 비디오 코딩
KR20130084314A (ko) * 2010-11-04 2013-07-24 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 블록 병합 및 스킵 모드를 지원하는 화상 코딩
KR20130095292A (ko) * 2010-10-08 2013-08-27 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 블록 분할 및 블록 병합을 지원하는 픽처 코딩

Family Cites Families (248)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2633468B1 (fr) * 1988-06-24 1990-11-09 France Etat Procede de codage de donnees d'assistance a la reconstruction d'images electroniques animees sous-echantillonnees
US5842033A (en) 1992-06-30 1998-11-24 Discovision Associates Padding apparatus for passing an arbitrary number of bits through a buffer in a pipeline system
US7095783B1 (en) 1992-06-30 2006-08-22 Discovision Associates Multistandard video decoder and decompression system for processing encoded bit streams including start codes and methods relating thereto
US5809270A (en) 1992-06-30 1998-09-15 Discovision Associates Inverse quantizer
US6408097B1 (en) 1993-08-30 2002-06-18 Sony Corporation Picture coding apparatus and method thereof
US5446806A (en) 1993-11-15 1995-08-29 National Semiconductor Corporation Quadtree-structured Walsh transform video/image coding
CA2145361C (en) 1994-03-24 1999-09-07 Martin William Sotheran Buffer manager
DE69527525T2 (de) 1995-08-21 2003-04-03 Alcatel Sa Verfahren zur Schachtelung von Datenrahmen, Übertragungsfehlerkorrekturanordnung und Modulator damit
WO1997015146A1 (en) 1995-10-18 1997-04-24 Philips Electronics N.V. Method of encoding video images
WO1997017797A2 (en) 1995-10-25 1997-05-15 Sarnoff Corporation Apparatus and method for quadtree based variable block size motion estimation
TW346571B (en) 1996-02-06 1998-12-01 Matsushita Electric Ind Co Ltd Data reception apparatus, data transmission apparatus, information processing system, data reception method
US6005981A (en) 1996-04-11 1999-12-21 National Semiconductor Corporation Quadtree-structured coding of color images and intra-coded images
DE19615493A1 (de) 1996-04-19 1997-10-23 Philips Patentverwaltung Verfahren zur Bildsegmentierung
CN100539695C (zh) 1996-05-28 2009-09-09 松下电器产业株式会社 图像预测编码/解码装置和方法以及记录媒体
US6639945B2 (en) 1997-03-14 2003-10-28 Microsoft Corporation Method and apparatus for implementing motion detection in video compression
US6057884A (en) 1997-06-05 2000-05-02 General Instrument Corporation Temporal and spatial scaleable coding for video object planes
US6269192B1 (en) 1997-07-11 2001-07-31 Sarnoff Corporation Apparatus and method for multiscale zerotree entropy encoding
CN1882092B (zh) 1998-03-10 2012-07-18 索尼公司 利用编码历史信息的编码转换系统
US6067574A (en) 1998-05-18 2000-05-23 Lucent Technologies Inc High speed routing using compressed tree process
US6269175B1 (en) 1998-08-28 2001-07-31 Sarnoff Corporation Method and apparatus for enhancing regions of aligned images using flow estimation
US6563953B2 (en) 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US7085319B2 (en) 1999-04-17 2006-08-01 Pts Corporation Segment-based encoding system using segment hierarchies
JP2000350207A (ja) 1999-06-08 2000-12-15 Matsushita Electric Ind Co Ltd 低解像度ビデオ復号化のための一般化直交変換方法および装置
FI116992B (fi) 1999-07-05 2006-04-28 Nokia Corp Menetelmät, järjestelmä ja laitteet audiosignaalin koodauksen ja siirron tehostamiseksi
MXPA02004015A (es) 1999-10-22 2003-09-25 Activesky Inc Un sistema de video orientado a los objetos.
JP3957937B2 (ja) 1999-12-21 2007-08-15 キヤノン株式会社 画像処理装置及び方法並びに記憶媒体
WO2001054418A1 (en) 2000-01-21 2001-07-26 Nokia Corporation A motion estimation method and a system for a video coder
FI116819B (fi) 2000-01-21 2006-02-28 Nokia Corp Menetelmä kuvien lähettämiseksi ja kuvakooderi
US6910001B2 (en) 2000-03-22 2005-06-21 Schlumberger Technology Corp. Distributed multiresolution geometry modeling system and method
US6785423B1 (en) * 2000-05-26 2004-08-31 Eastman Kodak Company Producing a compressed digital image organized into layers having information relating to different viewing conditions and resolutions
JP2004503964A (ja) 2000-06-14 2004-02-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ カラービデオ符号化及び復号方法
WO2002009438A2 (en) 2000-07-25 2002-01-31 Koninklijke Philips Electronics N.V. Video encoding method using a wavelet decomposition
AUPR063400A0 (en) 2000-10-06 2000-11-02 Canon Kabushiki Kaisha Xml encoding scheme
US7450641B2 (en) 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
US7929610B2 (en) 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
JP2003018602A (ja) 2001-04-24 2003-01-17 Monolith Co Ltd 画像データ符号化および復号のための方法および装置
US6987866B2 (en) * 2001-06-05 2006-01-17 Micron Technology, Inc. Multi-modal motion estimation for video sequences
US7483581B2 (en) 2001-07-02 2009-01-27 Qualcomm Incorporated Apparatus and method for encoding digital image data in a lossless manner
JP2003018604A (ja) 2001-07-04 2003-01-17 Matsushita Electric Ind Co Ltd 画像信号符号化方法、画像信号符号化装置および記録媒体
EP2819411B1 (en) 2001-09-14 2018-08-29 NTT DoCoMo, Inc. Coding method and decoding method
US6950469B2 (en) 2001-09-17 2005-09-27 Nokia Corporation Method for sub-pixel value interpolation
JP2005506775A (ja) 2001-10-16 2005-03-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオ符号化方法及び対応する送信可能なビデオ信号
US7228001B2 (en) 2001-11-16 2007-06-05 Ntt Docomo, Inc. Image encoding method, image decoding method, image encoder, image decode, program, computer data signal, and image transmission system
RU2237284C2 (ru) 2001-11-27 2004-09-27 Самсунг Электроникс Ко., Лтд. Способ генерирования структуры узлов, предназначенных для представления трехмерных объектов с использованием изображений с глубиной
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
EP1324615A1 (en) 2001-12-28 2003-07-02 Deutsche Thomson-Brandt Gmbh Transcoding MPEG bitstreams for adding sub-picture content
KR20030065606A (ko) 2002-01-30 2003-08-09 양송철 개인 자동독립코드를 이용한 멀티트리구조의 보너스 적립순환 시스템과 그 방법
CN101132528B (zh) 2002-04-12 2011-08-03 三菱电机株式会社 元数据再生、分发、检索装置、元数据再生成条件设定装置
JP4130780B2 (ja) 2002-04-15 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
US20030198290A1 (en) 2002-04-19 2003-10-23 Dynamic Digital Depth Pty.Ltd. Image encoding system
US7433526B2 (en) 2002-04-30 2008-10-07 Hewlett-Packard Development Company, L.P. Method for compressing images and image sequences through adaptive partitioning
CN1666532A (zh) 2002-07-02 2005-09-07 松下电器产业株式会社 图像编码方法和图像解码方法
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
US6975773B1 (en) 2002-07-30 2005-12-13 Qualcomm, Incorporated Parameter selection in data compression and decompression
US7266247B2 (en) 2002-09-30 2007-09-04 Samsung Electronics Co., Ltd. Image coding method and apparatus using spatial predictive coding of chrominance and image decoding method and apparatus
JP3950777B2 (ja) 2002-09-30 2007-08-01 キヤノン株式会社 画像処理方法、画像処理装置および画像処理プログラム
JP2004135252A (ja) 2002-10-09 2004-04-30 Sony Corp 符号化処理方法、符号化装置及び復号化装置
US7254533B1 (en) 2002-10-17 2007-08-07 Dilithium Networks Pty Ltd. Method and apparatus for a thin CELP voice codec
EP1431919B1 (en) 2002-12-05 2010-03-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding three-dimensional object data by using octrees
AU2004217221B2 (en) 2003-03-03 2009-09-03 Agency For Science, Technology And Research Fast mode decision algorithm for intra prediction for advanced video coding
US7366352B2 (en) 2003-03-20 2008-04-29 International Business Machines Corporation Method and apparatus for performing fast closest match in pattern recognition
US7643558B2 (en) 2003-03-24 2010-01-05 Qualcomm Incorporated Method, apparatus, and system for encoding and decoding side information for multimedia transmission
GB2454195A (en) 2007-10-30 2009-05-06 Sony Corp Address generation polynomial and permutation matrix for DVB-T2 16k OFDM sub-carrier mode interleaver
BRPI0408835A (pt) 2003-03-28 2006-04-04 Digital Accelerator Corp método e aparelho de codificação de quadro residual de movimento com base em transformada com base supercompleta para compressão de vìdeo
HUP0301368A3 (en) 2003-05-20 2005-09-28 Amt Advanced Multimedia Techno Method and equipment for compressing motion picture data
KR100624429B1 (ko) * 2003-07-16 2006-09-19 삼성전자주식회사 칼라 영상을 위한 비디오 부호화/복호화 장치 및 그 방법
US7333544B2 (en) 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
US7010044B2 (en) 2003-07-18 2006-03-07 Lsi Logic Corporation Intra 4×4 modes 3, 7 and 8 availability determination intra estimation and compensation
FR2858741A1 (fr) 2003-08-07 2005-02-11 Thomson Licensing Sa Dispositif et procede de compression d'images numeriques
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
CN1322472C (zh) 2003-09-08 2007-06-20 中国人民解放军第一军医大学 基于小波变换的预测四叉树图像压缩及解压方法
TW200518481A (en) 2003-10-29 2005-06-01 Nec Corp Decoder and encoder of arithmetic code, encoding apparatus and decoding apparatus having intermediate buffer inserted between reverse binary converter and binary converter
KR20050045746A (ko) 2003-11-12 2005-05-17 삼성전자주식회사 계층 구조의 가변 블록 크기를 이용한 움직임 추정 방법및 장치
EP1534018B1 (en) 2003-11-21 2008-11-12 Samsung Electronics Co., Ltd. Apparatus and method for generating coded block pattern for alpha channel image and alpha channel image encoding/decoding apparatus and method using the same
US7418455B2 (en) 2003-11-26 2008-08-26 International Business Machines Corporation System and method for indexing weighted-sequences in large databases
KR100556911B1 (ko) 2003-12-05 2006-03-03 엘지전자 주식회사 무선 동영상 스트리밍 서비스를 위한 동영상 데이터의 구조
US7362809B2 (en) 2003-12-10 2008-04-22 Lsi Logic Corporation Computational reduction in motion estimation based on lower bound of cost function
US7599435B2 (en) 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7649539B2 (en) * 2004-03-10 2010-01-19 Microsoft Corporation Image formats for video capture, processing and display
CN1691087B (zh) 2004-04-26 2011-07-06 图形安全系统公司 用于解码数字编码图像的系统和方法
DE602005021926D1 (de) 2004-04-28 2010-07-29 Panasonic Corp Stream-Erzeugungsvorrichtung für bewegliche Bilder, Kodierungsvorrichtung für bewegliche Bilder, Multiplex-Vorrichtung für bewegliche Bilder und Decodierungsvorrichtung für bewegliche Bilder
CN1281065C (zh) 2004-05-20 2006-10-18 复旦大学 基于树状结构的等级树集合划分视频图像压缩方法
EP1754378A1 (en) 2004-05-25 2007-02-21 Koninklijke Philips Electronics N.V. Method and device for encoding digital video data
US20060002474A1 (en) 2004-06-26 2006-01-05 Oscar Chi-Lim Au Efficient multi-block motion estimation for video compression
CN1750656B (zh) 2004-06-27 2012-04-18 苹果公司 编码和解码图像
US7292257B2 (en) 2004-06-28 2007-11-06 Microsoft Corporation Interactive viewpoint video system and process
CN1268136C (zh) 2004-07-02 2006-08-02 上海广电(集团)有限公司中央研究院 基于图像切片结构的帧场自适应编码方法
KR100657268B1 (ko) 2004-07-15 2006-12-14 학교법인 대양학원 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
CN101124589A (zh) 2004-08-09 2008-02-13 图形安全系统公司 通过使用多级图像编码和解码来认证对象的系统和方法
CN1589022A (zh) 2004-08-26 2005-03-02 中芯联合(北京)微电子有限公司 多模式运动估计中由朝向树决定的宏块分割模式选择方法
DE102004059993B4 (de) 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
CN101416149A (zh) 2004-10-21 2009-04-22 索尼电子有限公司 以高级视频编解码器文件格式支持保真度范围扩展
CN1780278A (zh) 2004-11-19 2006-05-31 松下电器产业株式会社 子载波通信系统中自适应调制与编码方法和设备
US20060120454A1 (en) * 2004-11-29 2006-06-08 Park Seung W Method and apparatus for encoding/decoding video signal using motion vectors of pictures in base layer
KR100703734B1 (ko) 2004-12-03 2007-04-05 삼성전자주식회사 Dct 업샘플링을 이용한 다 계층 비디오 인코딩/디코딩방법 및 장치
CN101073265B (zh) 2004-12-03 2012-08-22 汤姆森许可贸易公司 可缩放视频编码方法
KR101138392B1 (ko) * 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
US7970219B2 (en) 2004-12-30 2011-06-28 Samsung Electronics Co., Ltd. Color image encoding and decoding method and apparatus using a correlation between chrominance components
US20060153295A1 (en) * 2005-01-12 2006-07-13 Nokia Corporation Method and system for inter-layer prediction mode coding in scalable video coding
US20060153300A1 (en) 2005-01-12 2006-07-13 Nokia Corporation Method and system for motion vector prediction in scalable video coding
CN101204092B (zh) 2005-02-18 2010-11-03 汤姆森许可贸易公司 从低分辨率图像导出高分辨率图像的编码信息的方法以及实施所述方法的编码和解码设备
JP5213456B2 (ja) 2005-02-18 2013-06-19 トムソン ライセンシング 高分解能ピクチャの符号化情報を低分解能ピクチャから導き出す方法、並びにその方法を実現する符号化及び復号化装置
JP4504230B2 (ja) 2005-03-02 2010-07-14 株式会社東芝 動画像処理装置、動画像処理方法、及び動画像処理プログラム
TWI259727B (en) 2005-03-09 2006-08-01 Sunplus Technology Co Ltd Method for rapidly determining macroblock mode
US7961963B2 (en) 2005-03-18 2011-06-14 Sharp Laboratories Of America, Inc. Methods and systems for extended spatial scalability with picture-level adaptation
EP1711018A1 (en) * 2005-04-08 2006-10-11 Thomson Licensing Method and apparatus for encoding video pictures, and method and apparatus for decoding video pictures
US20060233262A1 (en) 2005-04-13 2006-10-19 Nokia Corporation Signaling of bit stream ordering in scalable video coding
KR101246915B1 (ko) 2005-04-18 2013-03-25 삼성전자주식회사 동영상 부호화 또는 복호화 방법 및 장치
KR100763181B1 (ko) 2005-04-19 2007-10-05 삼성전자주식회사 기초계층과 향상계층의 데이터를 바탕으로 예측 정보를코딩하여 코딩율을 향상시키는 방법 및 장치
KR100746007B1 (ko) * 2005-04-19 2007-08-06 삼성전자주식회사 엔트로피 코딩의 컨텍스트 모델을 적응적으로 선택하는방법 및 비디오 디코더
US8150151B2 (en) 2005-05-12 2012-04-03 Bracco Imaging S.P.A. Method for coding pixels or voxels of a digital image and a method for processing digital images
US7548853B2 (en) 2005-06-17 2009-06-16 Shmunk Dmitry V Scalable compressed audio bit stream and codec using a hierarchical filterbank and multichannel joint coding
WO2007000657A1 (en) * 2005-06-29 2007-01-04 Nokia Corporation Method and apparatus for update step in video coding using motion compensated temporal filtering
JP2007043651A (ja) 2005-07-05 2007-02-15 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法及び動画像復号プログラム
JP4444180B2 (ja) * 2005-07-20 2010-03-31 株式会社東芝 テクスチャ符号化装置、テクスチャ復号化装置、方法、およびプログラム
BRPI0613657B1 (pt) 2005-07-21 2019-05-07 Thomson Licensing Método e aparelho para o prognóstico ponderado para uma codificação de vídeo redimensionável
CN101815224A (zh) * 2005-07-22 2010-08-25 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
US9113147B2 (en) 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
CN101313579B (zh) 2005-09-29 2010-11-03 意大利电信股份公司 可伸缩视频编码方法
EP1949702A2 (en) 2005-10-12 2008-07-30 Thomson Licensing Methods and apparatus for weighted prediction in scalable video encoding and decoding
WO2007047736A2 (en) 2005-10-19 2007-04-26 Thomson Licensing Multi-view video coding using scalable video coding
KR100763196B1 (ko) * 2005-10-19 2007-10-04 삼성전자주식회사 어떤 계층의 플래그를 계층간의 연관성을 이용하여부호화하는 방법, 상기 부호화된 플래그를 복호화하는방법, 및 장치
KR100873636B1 (ko) 2005-11-14 2008-12-12 삼성전자주식회사 단일 부호화 모드를 이용하는 영상 부호화/복호화 방법 및장치
CN101129063B (zh) 2005-11-18 2010-05-19 索尼株式会社 编码设备和方法、解码设备和方法以及传输系统
KR100717055B1 (ko) 2005-11-18 2007-05-10 삼성전자주식회사 Cabac 복호기에서 복수의 이진 값들을 파이프라인방식에 의하여 복호화하는 방법 및 이를 위한 복호화 장치
EP1969853A1 (en) 2006-01-05 2008-09-17 Thomson Licensing Inter-layer motion prediction method
GB0600141D0 (en) 2006-01-05 2006-02-15 British Broadcasting Corp Scalable coding of video signals
KR20070074453A (ko) * 2006-01-09 2007-07-12 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
KR100904442B1 (ko) 2006-01-09 2009-06-24 엘지전자 주식회사 영상 신호의 레이어 간 예측 방법
US8315308B2 (en) 2006-01-11 2012-11-20 Qualcomm Incorporated Video coding with fine granularity spatial scalability
US8861585B2 (en) 2006-01-20 2014-10-14 Qualcomm Incorporated Method and apparatus for error resilience algorithms in wireless video communication
US7929608B2 (en) 2006-03-28 2011-04-19 Sony Corporation Method of reducing computations in intra-prediction and mode decision processes in a digital video encoder
GB2449036B (en) 2006-03-31 2011-08-24 Intel Corp Layered decoder and method for performing layered decoding
US7916934B2 (en) 2006-04-04 2011-03-29 Mitsubishi Electric Research Laboratories, Inc. Method and system for acquiring, encoding, decoding and displaying 3D light fields
CN101047733B (zh) 2006-06-16 2010-09-29 华为技术有限公司 短信处理方法以及装置
EP2047687B1 (en) 2006-08-02 2018-05-16 Thomson Licensing DTV Adaptive geometric partitioning for video encoding
US20080086545A1 (en) 2006-08-16 2008-04-10 Motorola, Inc. Network configuration using configuration parameter inheritance
WO2008027192A2 (en) 2006-08-25 2008-03-06 Thomson Licensing Methods and apparatus for reduced resolution partitioning
US8428144B2 (en) * 2006-09-07 2013-04-23 Lg Electronics Inc. Method and apparatus for decoding/encoding of a video signal
CN100471275C (zh) 2006-09-08 2009-03-18 清华大学 用于h.264/avc编码器的运动估计方法
CN100486336C (zh) 2006-09-21 2009-05-06 上海大学 基于h.264压缩域运动对象实时分割方法
US9014280B2 (en) 2006-10-13 2015-04-21 Qualcomm Incorporated Video coding with adaptive filtering for motion compensated prediction
US20080095238A1 (en) * 2006-10-18 2008-04-24 Apple Inc. Scalable video coding with filtering of lower layers
US7775002B2 (en) 2006-11-10 2010-08-17 John Puchniak Portable hurricane and security window barrier
CN101401430B (zh) 2006-11-17 2012-02-29 Lg电子株式会社 用于解码/编码视频信号的方法及装置
EP1933564A1 (en) * 2006-12-14 2008-06-18 Thomson Licensing Method and apparatus for encoding and/or decoding video data using adaptive prediction order for spatial and bit depth prediction
JP4999864B2 (ja) 2006-12-28 2012-08-15 日本電信電話株式会社 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記憶媒体
EP2106666B1 (en) * 2007-01-08 2019-06-12 Nokia Technologies Oy Improved inter-layer prediction for extended spatial scalability in video coding
EP2105025B1 (en) 2007-01-11 2021-04-07 InterDigital VC Holdings, Inc. Methods and apparatus for using syntax for the coded_block_flag syntax element and the coded_block_pattern syntax element for the cavlc 4:4:4 intra, high 4:4:4 intra, and high 4:4:4 predictive profiles in mpeg-4 avc high level coding
JP5026092B2 (ja) 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
JP2008193627A (ja) 2007-01-12 2008-08-21 Mitsubishi Electric Corp 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法
US8718139B2 (en) 2007-01-12 2014-05-06 Mitsubishi Electric Corporation Image decoding device and image decoding method
CN101018333A (zh) * 2007-02-09 2007-08-15 上海大学 空域可分级信噪比精细可分级视频编码方法
JP2010135863A (ja) 2007-03-28 2010-06-17 Toshiba Corp 画像符号化方法及び装置
WO2008127597A2 (en) 2007-04-12 2008-10-23 Thomson Licensing Method and apparatus for context dependent merging for skip-direct modes for video encoding and decoding
US20100202512A1 (en) * 2007-04-16 2010-08-12 Hae-Chul Choi Color video scalability encoding and decoding method and device thereof
TW200845723A (en) * 2007-04-23 2008-11-16 Thomson Licensing Method and apparatus for encoding video data, method and apparatus for decoding encoded video data and encoded video signal
US20090165041A1 (en) 2007-12-21 2009-06-25 Penberthy John S System and Method for Providing Interactive Content with Video Content
CN100515087C (zh) 2007-05-30 2009-07-15 威盛电子股份有限公司 决定二相邻的宏区块是否位于相同条带区域的方法和装置
KR100906243B1 (ko) * 2007-06-04 2009-07-07 전자부품연구원 Rgb 색 공간 신호의 영상 부호화 방법
CN100496129C (zh) 2007-06-05 2009-06-03 南京大学 基于h.264多路视频转码复用的方法
CN101321283B (zh) 2007-06-10 2010-04-07 华为技术有限公司 兼容不同大小块变换的编解码方法及编解码器
BRPI0810517A2 (pt) 2007-06-12 2014-10-21 Thomson Licensing Métodos e aparelho suportando estrutura de sintaxe de vídeo de multipasso para dados de seção
JP2008311781A (ja) 2007-06-12 2008-12-25 Ntt Docomo Inc 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、動画像符号化プログラム及び動画像復号化プログラム
CN101325714B (zh) 2007-06-13 2010-10-27 华为技术有限公司 变换数据处理方法和装置以及编码、解码方法和装置
JP4551948B2 (ja) 2007-06-13 2010-09-29 シャープ株式会社 線状光源装置、面発光装置、面状光源装置、および、液晶表示装置
WO2008154041A1 (en) 2007-06-14 2008-12-18 Thomson Licensing Modifying a coded bitstream
US8488668B2 (en) 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
US8085852B2 (en) 2007-06-26 2011-12-27 Mitsubishi Electric Research Laboratories, Inc. Inverse tone mapping for bit-depth scalable image coding
US20090003449A1 (en) 2007-06-28 2009-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
CN100534186C (zh) 2007-07-05 2009-08-26 西安电子科技大学 基于码率预分配的jpeg2000自适应率控制系统及方法
US8458612B2 (en) 2007-07-29 2013-06-04 Hewlett-Packard Development Company, L.P. Application management framework for web applications
TWI338869B (en) 2007-08-03 2011-03-11 Via Tech Inc Method and apparatus for block-based digital encoded picture
CN101119493B (zh) 2007-08-30 2010-12-01 威盛电子股份有限公司 区块式数字编码图像的译码方法及装置
KR20090030681A (ko) 2007-09-20 2009-03-25 삼성전자주식회사 영상처리장치, 디스플레이장치, 디스플레이 시스템 및 그제어방법
JP4461165B2 (ja) 2007-09-26 2010-05-12 株式会社東芝 画像処理装置、方法およびプログラム
US8374446B2 (en) * 2007-09-28 2013-02-12 Vsevolod Yurievich Mokrushin Encoding and decoding of digital signals based on compression of hierarchical pyramid
KR101403343B1 (ko) 2007-10-04 2014-06-09 삼성전자주식회사 부화소 움직임 추정을 이용한 인터 예측 부호화, 복호화방법 및 장치
BRPI0818344A2 (pt) 2007-10-12 2015-04-22 Thomson Licensing Métodos e aparelhos para codificação e decodificação de vídeo de partições de modo bi-preditivo geometricamente particionadas
WO2009051719A2 (en) 2007-10-16 2009-04-23 Thomson Licensing Methods and apparatus for video encoding and decoding geometically partitioned super blocks
US7777654B2 (en) 2007-10-16 2010-08-17 Industrial Technology Research Institute System and method for context-based adaptive binary arithematic encoding and decoding
CN101676744B (zh) 2007-10-31 2012-07-11 北京航空航天大学 一种复杂背景低信噪比下弱小目标高精度跟踪方法
US8270472B2 (en) 2007-11-09 2012-09-18 Thomson Licensing Methods and apparatus for adaptive reference filtering (ARF) of bi-predictive pictures in multi-view coded video
US8553781B2 (en) 2007-12-07 2013-10-08 Thomson Licensing Methods and apparatus for decoded picture buffer (DPB) management in single loop decoding for multi-view video
US8540158B2 (en) 2007-12-12 2013-09-24 Yiwu Lei Document verification using dynamic document identification framework
US20090154567A1 (en) 2007-12-13 2009-06-18 Shaw-Min Lei In-loop fidelity enhancement for video compression
US8126054B2 (en) * 2008-01-09 2012-02-28 Motorola Mobility, Inc. Method and apparatus for highly scalable intraframe video coding
KR20100105877A (ko) 2008-01-11 2010-09-30 톰슨 라이센싱 비디오 및 깊이 코딩
US8155184B2 (en) 2008-01-16 2012-04-10 Sony Corporation Video coding system using texture analysis and synthesis in a scalable coding framework
EP2245596B1 (en) * 2008-01-21 2017-07-12 Telefonaktiebolaget LM Ericsson (publ) Prediction-based image processing
CN101919254B (zh) * 2008-01-21 2013-01-23 艾利森电话股份有限公司 基于预测的图像处理
KR101291196B1 (ko) * 2008-01-25 2013-07-31 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8711948B2 (en) * 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
US8179974B2 (en) 2008-05-02 2012-05-15 Microsoft Corporation Multi-level representation of reordered transform coefficients
US20100220469A1 (en) 2008-05-23 2010-09-02 Altair Engineering, Inc. D-shaped cross section l.e.d. based light
TWI373959B (en) 2008-06-09 2012-10-01 Kun Shan University Of Technology Wavelet codec with a function of adjustable image quality
KR101517768B1 (ko) 2008-07-02 2015-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
KR20100018810A (ko) 2008-08-07 2010-02-18 전자부품연구원 초고화질 영상 부호화, 복호화 방법 및 장치 및 컴퓨터로판독가능한 기록매체
US8406307B2 (en) 2008-08-22 2013-03-26 Microsoft Corporation Entropy coding/decoding of hierarchically organized data
EP2161936A1 (en) 2008-09-04 2010-03-10 Panasonic Corporation Locally adaptive filters for video coding controlled by local correlation data
US8750379B2 (en) 2008-09-11 2014-06-10 General Instrument Corporation Method and apparatus for complexity-scalable motion estimation
JP5422168B2 (ja) 2008-09-29 2014-02-19 株式会社日立製作所 動画像符号化方法および動画像復号化方法
US8634456B2 (en) 2008-10-03 2014-01-21 Qualcomm Incorporated Video coding with large macroblocks
US20100086031A1 (en) 2008-10-03 2010-04-08 Qualcomm Incorporated Video coding with large macroblocks
US8619856B2 (en) 2008-10-03 2013-12-31 Qualcomm Incorporated Video coding with large macroblocks
US8503527B2 (en) 2008-10-03 2013-08-06 Qualcomm Incorporated Video coding with large macroblocks
CN101404774B (zh) 2008-11-13 2010-06-23 四川虹微技术有限公司 运动搜索中宏块划分模式的选择方法
JP5001964B2 (ja) 2009-02-18 2012-08-15 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、方法およびプログラム、並びに、画像復号装置、方法およびプログラム
CN101493890B (zh) 2009-02-26 2011-05-11 上海交通大学 基于特征的动态视觉注意区域提取方法
WO2010131903A2 (en) 2009-05-12 2010-11-18 Lg Electronics Inc. Method and apparatus for processing a video signal
US8810562B2 (en) 2009-05-19 2014-08-19 Advanced Micro Devices, Inc. Hierarchical lossless compression
WO2011011542A1 (en) 2009-07-21 2011-01-27 Integrated Device Technology, Inc. A method and system for detection and enhancement of video images
KR101456498B1 (ko) 2009-08-14 2014-10-31 삼성전자주식회사 계층적 부호화 단위의 스캔 순서를 고려한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101624649B1 (ko) 2009-08-14 2016-05-26 삼성전자주식회사 계층적인 부호화 블록 패턴 정보를 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101452860B1 (ko) 2009-08-17 2014-10-23 삼성전자주식회사 영상의 부호화 방법 및 장치, 영상 복호화 방법 및 장치
CN104602013B (zh) 2009-10-01 2017-10-31 Sk电信有限公司 视频编码装置和方法
KR101457418B1 (ko) 2009-10-23 2014-11-04 삼성전자주식회사 계층적 부호화 단위의 크기에 따른 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
US8594200B2 (en) 2009-11-11 2013-11-26 Mediatek Inc. Method of storing motion vector information and video decoding apparatus
JP5475409B2 (ja) 2009-11-20 2014-04-16 三菱電機株式会社 動画像符号化装置および動画像符号化方法
WO2011063397A1 (en) * 2009-11-23 2011-05-26 General Instrument Corporation Depth coding as an additional channel to video sequence
US8315310B2 (en) 2010-01-08 2012-11-20 Research In Motion Limited Method and device for motion vector prediction in video transcoding using full resolution residuals
US20110170608A1 (en) 2010-01-08 2011-07-14 Xun Shi Method and device for video transcoding using quad-tree based mode selection
US20120300850A1 (en) 2010-02-02 2012-11-29 Alex Chungku Yie Image encoding/decoding apparatus and method
KR20110135471A (ko) 2010-06-11 2011-12-19 (주)휴맥스 블록 병합을 이용한 영상 부호화/복호화 장치 및 방법
KR101529992B1 (ko) 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
KR101847072B1 (ko) 2010-04-05 2018-04-09 삼성전자주식회사 영상 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101750046B1 (ko) 2010-04-05 2017-06-22 삼성전자주식회사 트리 구조에 따른 부호화 단위에 기반한 인루프 필터링을 수반하는 비디오 부호화 방법과 그 장치 및 복호화 방법과 그 장치
US20110249743A1 (en) 2010-04-09 2011-10-13 Jie Zhao Super-block for high performance video coding
US8942282B2 (en) 2010-04-12 2015-01-27 Qualcomm Incorporated Variable length coding of coded block pattern (CBP) in video compression
CN105872562B (zh) 2010-04-13 2019-05-17 Ge视频压缩有限责任公司 跨平面预测
CN102939750B (zh) 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
LT3697089T (lt) 2010-04-13 2022-01-10 Ge Video Compression, Llc Paveldėjimas ėminių masyvo multimedžio poskaidinyje
CN106028045B (zh) 2010-04-13 2019-06-25 Ge视频压缩有限责任公司 解码数据流的方法、生成数据流的方法及其解码器
US20120170648A1 (en) 2011-01-05 2012-07-05 Qualcomm Incorporated Frame splitting in video coding
CN103119944B (zh) 2011-05-20 2017-04-12 太阳专利托管公司 用于使用色彩平面间预测对视频进行编码和解码的方法和装置
MY170940A (en) 2011-06-16 2019-09-19 Ge Video Compression Llc Entropy coding of motion vector differences
US20150229957A1 (en) * 2012-09-24 2015-08-13 Qualcomm Incorporated Depth map coding
ES2665908T3 (es) 2013-04-08 2018-04-30 Ge Video Compression, Llc Predicción inter-componente
US9264728B2 (en) 2014-01-10 2016-02-16 Sony Corporation Intra-plane and inter-plane predictive method for Bayer image coding
US9783149B2 (en) 2014-07-22 2017-10-10 Autoliv Development Ab Side airbag device
US10820007B2 (en) 2015-01-21 2020-10-27 Samsung Electronics Co., Ltd. Method and apparatus for decoding inter-layer video, and method and apparatus for encoding inter-layer video
CN106325631B (zh) 2015-07-10 2023-03-07 宸鸿科技(厦门)有限公司 一种具有压力侦测的触控显示模组及其驱动方法
WO2018124957A1 (en) 2016-12-30 2018-07-05 Telefonaktiebolaget Lm Ericsson (Publ) Decoded picture buffer management for handling cross-picture data prediction
CN113597760A (zh) 2019-01-02 2021-11-02 北京字节跳动网络技术有限公司 视频处理的方法
WO2020216175A1 (en) 2019-04-20 2020-10-29 Beijing Bytedance Network Technology Co., Ltd. Signaling of syntax elements for joint coding of chrominance residuals
CN117499625A (zh) 2019-09-01 2024-02-02 北京字节跳动网络技术有限公司 视频编解码中预测权重的对准
CN115606184A (zh) 2020-04-01 2023-01-13 抖音视界有限公司(Cn) 对量化参数增量的信令通知的控制
US20220103847A1 (en) 2020-09-29 2022-03-31 Lemon Inc. Dependent random access point indication in video bitstreams

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130020890A (ko) * 2010-04-13 2013-03-04 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 샘플 영역 병합
KR20130027504A (ko) * 2010-04-13 2013-03-15 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 이미지들의 멀티-트리 서브-디비젼을 이용한 비디오 코딩
KR20130095292A (ko) * 2010-10-08 2013-08-27 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 블록 분할 및 블록 병합을 지원하는 픽처 코딩
KR20130084314A (ko) * 2010-11-04 2013-07-24 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 블록 병합 및 스킵 모드를 지원하는 화상 코딩

Also Published As

Publication number Publication date
KR20220080010A (ko) 2022-06-14
BR122020010438B1 (pt) 2021-08-31
KR20160017135A (ko) 2016-02-15
EP2559240A1 (en) 2013-02-20
KR101962084B1 (ko) 2019-03-25
BR112012026400A2 (pt) 2018-03-13
KR102080450B1 (ko) 2020-02-21
KR101447796B1 (ko) 2014-10-07
KR20210008152A (ko) 2021-01-20
US10873749B2 (en) 2020-12-22
KR101874272B1 (ko) 2018-07-03
US11765362B2 (en) 2023-09-19
KR20170076811A (ko) 2017-07-04
KR20200019270A (ko) 2020-02-21
CN106412608A (zh) 2017-02-15
KR20180075705A (ko) 2018-07-04
KR20140071506A (ko) 2014-06-11
CN102939750A (zh) 2013-02-20
US11611761B2 (en) 2023-03-21
BR122020007921B1 (pt) 2021-08-03
CN106412607B (zh) 2020-09-01
KR102405997B1 (ko) 2022-06-07
CN105959703A (zh) 2016-09-21
US20200366906A1 (en) 2020-11-19
CN106412608B (zh) 2019-10-08
KR101584480B1 (ko) 2016-01-14
BR122020007923B1 (pt) 2021-08-03
JP5846611B2 (ja) 2016-01-20
CN106067983B (zh) 2019-07-12
CN105959703B (zh) 2019-06-04
CN106101724A (zh) 2016-11-09
US20160309169A1 (en) 2016-10-20
CN106412607A (zh) 2017-02-15
CN106067984A (zh) 2016-11-02
CN106412606B (zh) 2020-03-27
US20210029365A1 (en) 2021-01-28
KR102481529B1 (ko) 2022-12-23
US20180288422A1 (en) 2018-10-04
KR20230003429A (ko) 2023-01-05
US10848767B2 (en) 2020-11-24
KR20200055810A (ko) 2020-05-21
US10855991B2 (en) 2020-12-01
KR20130006690A (ko) 2013-01-17
BR122020007922B1 (pt) 2021-08-31
CN106067984B (zh) 2020-03-03
ES2746182T3 (es) 2020-03-05
JP2013528023A (ja) 2013-07-04
KR20230151089A (ko) 2023-10-31
KR20190032634A (ko) 2019-03-27
HUE045579T2 (hu) 2020-01-28
KR20220012428A (ko) 2022-02-03
KR102205041B1 (ko) 2021-01-19
DK2559240T3 (da) 2019-10-07
US20200084458A1 (en) 2020-03-12
BR112012026400B1 (pt) 2021-08-10
CN106067983A (zh) 2016-11-02
CN106101724B (zh) 2019-09-06
KR102595454B1 (ko) 2023-10-27
CN102939750B (zh) 2016-07-06
US10855990B2 (en) 2020-12-01
EP2559240B1 (en) 2019-07-10
US20230345012A1 (en) 2023-10-26
US10855995B2 (en) 2020-12-01
PL2559240T3 (pl) 2020-01-31
KR102210983B1 (ko) 2021-02-02
PT2559240T (pt) 2019-10-15
EP3614667A1 (en) 2020-02-26
KR101752458B1 (ko) 2017-07-03
WO2011127966A1 (en) 2011-10-20
EP3709641A1 (en) 2020-09-16
CN106067985A (zh) 2016-11-02
CN106412606A (zh) 2017-02-15
KR102355155B1 (ko) 2022-01-24
US20210176473A1 (en) 2021-06-10
US20130034171A1 (en) 2013-02-07
KR101592802B1 (ko) 2016-02-05
CN106067985B (zh) 2019-06-28
KR20150015026A (ko) 2015-02-09
KR102282803B1 (ko) 2021-07-28
US11765363B2 (en) 2023-09-19
US20190089962A1 (en) 2019-03-21

Similar Documents

Publication Publication Date Title
KR102210983B1 (ko) 평면 간 예측
KR102159896B1 (ko) 샘플 배열 멀티트리 세부분할에서 계승
KR102166520B1 (ko) 샘플 영역 병합

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant