KR20130119489A

KR20130119489A - 고효율 비디오 코딩 (ｈｅｖｃ) 에서 코딩된 유닛들에 대한 양자화 파라미터 변화들의 시그널링

Info

Publication number: KR20130119489A
Application number: KR1020137022440A
Authority: KR
Inventors: 마르타 카르체비츠; 라잔 엘 조쉬
Original assignee: 퀄컴 인코포레이티드
Priority date: 2011-01-24
Filing date: 2012-01-12
Publication date: 2013-10-31
Also published as: UA109048C2; CA2824506A1; SG191404A1; KR101540529B1; CN103329529A; WO2012102867A1; JP2014506752A; EP2668783A1; BR112013018737A2; RU2546590C2; IL227286A0; TWI520580B; TW201246938A; CA2824506C; AU2012209501B2; IL227286A; CN103329529B; AU2012209501A1; MY165722A; RU2013139174A

Abstract

일 실시예에서, 본 개시물은 비디오 데이터를 디코딩하는 방법을 설명한다. 이 방법은 인코딩된 비디오 데이터의 코딩된 유닛 (CU) 을 수신하는 단계를 포함한다. CU 는 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛들 (CUs) 로 파티셔닝되며, 이 방법은 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대해 예측 양자화 파라미터에 관련된 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하는 단계를 포함한다. 하나 이상의 신택스 엘리먼트들은 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩된다.

Description

고효율 비디오 코딩 (ＨＥＶＣ) 에서 코딩된 유닛들에 대한 양자화 파라미터 변화들의 시그널링 {SIGNALING QUANTIZATION PARAMETER CHANGES FOR CODED UNITS IN HIGH EFFICIENCY VIDEO CODING (HEVC)}

본 출원은 2011년 1월 24일에 출원된 미국 특허 가출원 제61/435,750호의 이점을 주장하며, 이 미국 특허 가출원은 참조로서 본 명세서에 포함된다.

분야

본 개시물은 비디오 데이터를 압축하는 데 이용되는 비디오 인코딩 기법들에 관한 것이며, 더 구체적으로는, 부상 중인 고효율 비디오 코딩 (HEVC) 표준에 부합하는 비디오 코딩 기법들에 관한 것이다.

디지틸 비디오 능력들은, 디지털 텔레비전들, 디지털 직접 브로드캐스트 시스템들, 무선 전화 핸드셋들과 같은 무선 통신 디바이스들, 무선 브로드캐스트 시스템들, 개인 디지털 정보 단말기들 (PDAs), 랩톱 또는 데스크톱 컴퓨터들, 태블릿 컴퓨터들, 디지털 카메라들, 디지털 리코딩 디바이스들, 비디오 게이밍 디바이스들, 비디오 게임 콘솔들, 개인 멀티미디어 플레이어들 등을 포함하는 광범위한 비디오 디바이스들 내에 포함될 수 있다. MPEG 과 ITU-T 사이의 공동 작업인 JCTVC (Joint Collaborative Team-Video Coding) 에 의해 개발되고 있는 고효율 비디오 코딩 (High Efficiency Video Coding: HEVC) 표준과 같은 새로운 비디오 코딩 표준들이 개발되고 있다. 부상 중인 HEVC 표준은 때때로 H.265 라고 지칭된다.

본 개시물은, 부상 중인 HEVC 표준에서 정의되는 바와 같이, 비디오 블록과 관련된 양자화 파라미터 (QP) 를 정의하는 신택스 엘리먼트들을 인코딩하는 기법들을 설명한다. 특히, 부상하는 HEVC 표준에 부합하여, 비디오 블록은, 그 자체가 쿼드트리 파티셔닝 방식에 따라 보다 작은 코딩된 유닛들 (CUs) 로 세분될 수도 있고 가능하게는 모션 추정 및 모션 보상을 목적으로 예측 유닛들 (PUs) 로 더 파티셔닝될 수도 있는 최대 코딩 유닛 (LCU) 을 포함할 수도 있다. 더 구체적으로, 본 개시물은, LCU 에 대한 양자화 파라미터의 변화들 (즉, 델타들)(즉, 델타 QP) 을 인코딩하는 기법들을 설명한다. 이 경우에 있어서, 델타 QP 는 (예컨대, 예측 값이 비디오 데이터의 인코딩된 비트스트림의 이전 LCU 의 QP 를 포함할 수도 있는) LCU 에 대한 QP 의 예측 값에 대해 LCU 에 대한 QP 의 변화를 정의할 수도 있다. 델타 QP 는, 모든 LCU 에 대해 (즉, LCU 당 1 회) 또는 가능하게는 몇몇 특정 타입들의 LCUs 에 대해서만 결정, 인코딩 및 전송될 수도 있다. 그럼에도 불구하고, 본 개시물이 주로 LCU 레벨에서의 델타 QP 시그널링에 대해 설명하고 있지만, 그 기법들은 델타 QP 가 보다 작은 CUs (예컨대, 양자화 변화들이 허용 및/또는 지원되는 정도로 충분히 크게 사이징된 CUs) 에 대해 결정, 인코딩 및 전송되는 경우들에 또한 적용 가능할 수도 있다.

보다 더 구체적으로, 본 개시물은 인코딩된 비트스트림 내에서 델타 QPs 를 시그널링하는 것과 관련된 타이밍 및 변위 뿐 아니라 비트스트림으로부터의 델타 QPs 의 디코딩과 관련된 타이밍의 실시예들을 설명한다. 예를 들어, 델타 QPs 는 비트스트림에서 다음의 경우에 인코딩 및 시그널링될 수도 있다:

1) 주어진 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것으로 결정된 뒤, 그리고

2) 비제로 변환 계수들의 시그널링 전.

디코더는, 비제로 변환 계수들이 존재할 때, 유사한 방식으로, 예컨대 주어진 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것임을 확신하게 하는 표시들 또는 신택스 엘리먼트들의 뒤 그리고 변환 계수들의 앞에서 발생하는 인코딩된 비트스트림 내의 포지션 (즉, 인코딩된 비디오 데이터 내의 포지션) 으로부터 델타 QPS 를 디코딩할 수도 있다.

일 실시예에서, 본 개시물은 비디오 데이터를 디코딩하는 방법을 설명한다. 이 방법은, 인코딩된 비디오 데이터의 CU 를 수신하는 단계로서, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되는, CU 를 수신하는 단계, 및 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대한 예측 양자화 파라미터에 대해 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하는 단계를 포함한다. 특히, 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 후 그리고 CU 에 대한 변환 계수들 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩된다. 하나 이상의 신택스 엘리먼트들은, CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 CU 와 함께 포함되지 않는다.

다른 실시예에서, 본 개시물은 비디오 데이터를 인코딩하는 방법을 설명한다. 이 방법은, CU 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 CU 에 대한 양자화 파라미터의 변화를 결정하는 단계로서, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되는, 양자화 파라미터의 변화를 결정하는 단계, 및 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하는 단계를 포함한다. 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 비트스트림에서 인코딩된다. 하나 이상의 신택스 엘리먼트들을 인코딩하는 것은, CU 가 어떠한 변환 계수들도 포함하지 않는다면 회피된다.

다른 실시예에서, 본 개시물은 비디오 데이터를 디코딩하는 비디오 디코딩 디바이스를 설명한다. 이 비디오 디코딩 디바이스는, 인코딩된 비디오 데이터의 CU 를 수신하되, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되며, CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대한 예측 양자화 파라미터에 대해 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하는 비디오 디코더를 포함한다. 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들의 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩된다. 하나 이상의 신택스 엘리먼트들은 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 CU 와 함께 포함되지 않는다.

다른 실시예에서, 본 개시물은 비디오 데이터를 인코딩하는 비디오 인코딩 디바이스를 설명한다. 이 비디오 인코딩 디바이스는, CU 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 CU 에 대한 양자화 파라미터의 변화를 결정하되, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되며, CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하는 비디오 인코더를 포함한다. 하나 이상의 신택스 엘리먼트들은 CU 가 적어도 몇몇 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 비트스트림에서 인코딩된다. 하나 이상의 신택스 엘리먼트들을 인코딩하는 것은, CU 가 어떠한 변환 계수들도 포함하지 않는다면 회피된다.

다른 실시예에서, 본 개시물은 비디오 데이터를 디코딩하는 디바이스를 설명하며, 이 디바이스는, 인코딩된 비디오 데이터의 CU 를 수신하는 수단으로서, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되는, 수신하는 수단, 및 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대한 예측 양자화 파라미터에 대해 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하는 수단을 포함한다. 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 후 그리고 CU 에 대한 변환 계수들 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩된다. 하나 이상의 신택스 엘리먼트들은, CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 CU 와 함께 포함되지 않는다.

다른 실시예에서, 본 개시물은 비디오 데이터를 인코딩하는 디바이스를 설명하며, 이 디바이스는, CU 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 CU 에 대한 양자화 파라미터의 변화를 결정하는 수단으로서, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되는, 결정하는 수단, 및 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하는 수단을 포함한다. 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 비트스트림에서 인코딩된다. 인코딩하는 수단은, CU 가 어떠한 변환 계수들도 포함하지 않는다면 하나 이상의 신택스 엘리먼트들을 인코딩하는 것을 회피한다.

본 개시물에서 설명되는 기법들은 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 임의의 조합으로 구현될 수도 있다. 예를 들어, 다양한 기법들이 하나 이상의 프로세서들에 의해 구현 또는 실행될 수도 있다. 여기서 사용되는 바와 같이, 프로세서는 마이크로프로세서, 주문형 반도체 (ASIC), 필드 프로그래밍가능 게이트 어레이 (FPGA), 디지털 신호 프로세서 (DSP), 또는 다른 등가의 집적 또는 이산 로직 회로를 지칭할 수도 있다. 소프트웨어는 하나 이상의 프로세서들에 의해 실행될 수도 있다. 그 기법들을 실행하는 명령들을 포함하는 소프트웨어는, 컴퓨터 판독가능 매체에 초기에 저장될 수도 있고, 프로세서에 의해 로딩 및 실행될 수도 있다.

따라서, 본 개시물은 또한 프로세서로 하여금 본 개시물에서 설명되는 임의의 기법들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독가능 저장 매체들을 고려한다. 몇몇 경우들에 있어서, 컴퓨터 판독가능 저장 매체는, 제조자들에게 판매될 수도 있고 및/또는 디바이스에서 사용될 수도 있는 컴퓨터 프로그램 저장 제품의 일부를 형성할 수도 있다. 컴퓨터 프로그램 제품은 컴퓨터 판독가능 매체를 포함할 수도 있으며, 몇몇 경우들에 있어서는 또한 패키징 재료들을 포함할 수도 있다.

일 실시예에서, 본 개시물은 명령들을 포함하는 컴퓨터 판독가능 매체를 설명하며, 명령들은, 실행 시, 프로세서로 하여금 비디오 데이터를 디코딩하게 하되, 명령들이 프로세서로 하여금 비디오 데이터를 디코딩하게 하되, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되게 하며, CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대한 예측 양자화 파라미터에 대해 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체를 설명한다. 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들의 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩된다. 하나 이상의 신택스 엘리먼트들은 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 CU 와 함께 포함되지 않는다.

다른 실시예에서, 본 개시물은 명령들을 포함하는 컴퓨터 판독가능 매체를 설명하며, 명령들은, 실행 시, 프로세서로 하여금 비디오 데이터를 인코딩하게 하되, 명령들이 프로세서로 하여금 CU 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 CU 에 대한 양자화 파라미터의 변화를 결정하게 하고, CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되며, CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하게 한다. 하나 이상의 신택스 엘리먼트들은, CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 비트스트림에서 인코딩된다. 명령들은, 프로세서로 하여금 CU 가 어떠한 변환 계수들도 포함하지 않는다면 하나 이상의 신택스 엘리먼트들을 인코딩하지 않게 한다.

본 개시물의 하나 이상의 양태들의 세부사항들은 첨부한 도면 및 아래의 설명에서 기술된다. 본 개시물에서 설명되는 다른 특징들, 목적들, 및 이점들은 설명 및 도면과 청구범위로부터 명백해질 것이다.

도 1 은 본 개시물의 기법들 중 하나 이상을 구현할 수도 있는 비디오 인코딩 및 디코딩 시스템을 예시한 블록도이다.
도 2 는 본 개시물의 기법들에 부합하는 코딩된 유닛들 (CUs) 의 쿼드트리 파티셔닝을 예시한 개념도이다.
도 3 은 본 개시물의 기법들을 구현할 수도 있는 비디오 인코더를 예시한 블록도이다.
도 4 는 본 개시물의 기법들을 구현할 수도 있는 비디오 인코더를 예시한 블록도이다.
도 5 내지 도 8 은 본 개시물에 부합하는 기법들을 예시한 흐름도들이다.

본 개시물은, 현재 개발 하에 있는 부상 중인 HEVC 표준 또는 유사한 표준들에서 정의되는 바와 같이, 비디오 블록과 관련된 양자화 파라미터 (QP) 를 정의하는 신택스 엘리먼트들을 인코딩하는 기법들을 설명한다. 특히, 부상하는 HEVC 표준에 부합하여, 비디오 블록은, 그 자체가 쿼드트리 파티셔닝 방식에 따라 보다 작은 코딩된 유닛들 (CUs) 로 세분될 수도 있고 가능하게는 모션 추정 및 모션 보상을 목적으로 예측 유닛들 (PUs) 로 더 파티셔닝될 수도 있는 최대 코딩 유닛 (LCU) 을 포함할 수도 있다. 더 구체적으로, 본 개시물은, LCU (또는 양자화 변화들이 지원될 정도로 충분히 크게 사이징된 몇몇 다른 CU) 에 대한 양자화 파라미터의 변화들 (즉, 델타들)(즉, 델타 QP) 을 인코딩하는 기법들을 설명한다. 이 경우에 있어서, 델타 QP 는 LCU 에 대한 QP 의 예측 값에 대해 LCU 에 대한 QP 의 변화를 정의할 수도 있다. 예를 들어, LCU 에 대한 예측 QP 값은 단순히 이전 LCU (즉, 비트스트림에서 이전에 코딩됨) 의 QP 일 수도 있다. 대안으로, 예측 QP 값은 규칙들에 기초하여 결정될 수도 있다. 예를 들어, 규칙들은 다른 LCUs 또는 CUs 의 하나 이상의 다른 QP 값들, 또는 이용되어야 하는 평균 QP 값을 식별할 수도 있다.

델타 QP 는, 모든 LCU 에 대해 (즉, LCU 당 1 회) 또는 가능하게는 몇몇 특정 타입들의 LCUs 에 대해서만 결정, 인코딩 및 전송될 수도 있다. 대안으로, 델타 QP 는 LCU 의 하나 이상의 보다 작은 CUs, 예컨대 8×8 CUs 또는 다른 사전 정의된 최소 사이즈와 같은 몇몇 임계 최소 사이즈를 충족하는 CUs 에 대해 결정, 인코딩 및 전송될 수도 있다. 따라서, 본 기법들이 주로 LCU 레벨에서의 델타 QP 시그널링에 관해 설명되고 있지만, 유사한 기법들이 또한 몇몇 CU 레벨 (예컨대, 양자화 변화들이 허용 및/또는 지원될 정도로 충분히 크게 사이징된 CUs) 에서의 델타 QP 시그널링에도 적용될 수 있다. 또한, 본 기법들이 주로 HEVC 에 관해 설명되고 있지만, 본 기법들은 HEVC 의 것과 유사한 비디오 블록 파티셔닝 방식을 이용하는 다른 표준들에도 마찬가지로 적용될 수 있다.

보다 구체적으로, 본 개시물은 비트스트림 내에서 델타 QPs 를 인코딩 및 시그널링하는 것과 관련된 타이밍 뿐 아니라 델타 QPs 의 디코딩과 관련된 타이밍에 관한 것이다. 구체적으로, 델타 QPs 는 다음의 경우에 비트스트림에서 시그널링될 수도 있다:

1) 주어진 LCU 가 잔여 데이터에 대한 적어도 몇몇 비제로 변환 계수들을 포함할 것인지의 결정을 허용하는 신택스 엘리먼트들 뒤, 그리고

2) 변환 계수들 앞.

본 개시물의 많은 양태들은 델타 QP 가 LCU 레벨에서만 변할 수 있다는 가정 하에 기록된다. 그러나, 델타 QP 가 CU 레벨에서 시그널링될 수 있는 경우들에까지 동일한 기법들이 확장될 수 있다. 이 경우에 있어서, QP 를 변화시키기 위해 특정 사이즈 (예컨대, 8×8 이상) 를 충족 또는 초과하는 CUs 만이 허용될 수도 있도록 하는 사이즈 규제들이 존재할 수도 있다.

디코더는, 유사한 방식으로, 즉 주어진 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 변환 계수들 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 델타 QPs 를 디코딩할 수도 있다. CUs 를 인코딩하는 데 시용되는 예측 모드는 코딩된 유닛이 변환 계수들을 포함할 수 있는지의 여부를 나타낼 수도 있다. 예를 들어, 몇몇 코딩 모드들 (예컨대, SKIP 모드) 은 임의의 잔여 정보를 포함하지 않는 비디오 블록들을 인코딩하는데, 이는 그러한 비디오 블록들이 어떠한 비제로 변환 계수들도 포함할 수 없다는 것을 의미한다. 또한, 몇몇 코딩 모드들에 대해, 코딩된 블록 플래그들 (CBF) 은 비제로 변환 계수들의 형태로 LCU 내의 변환 유닛들 (TUs) 이 임의의 잔여 데이터를 포함하는지를 나타내는 비트-플래그들을 포함할 수도 있다. 비제로 변환 계수들이 (CBFs 에 의해 나타내진 바와 같이) 존재한다면, 관련 LCU 에 대해 델타 QP 가 정의될 수도 있다. 반면, LCU 에 대해 (하나 이상의 CBFs 에 의해 나타내진 바와 같이) 어떠한 비제로 변환 계수들도 존재하지 않는다면, 그 LCU 에 대해 델타 QP 의 임의의 인코딩이 회피될 수 있다.

몇몇 실시예들에서, 본 개시물은 인코딩 타이밍 및 디코딩 타이밍에 관한 것이다. 그러나, 다른 실시예들에서, 본 개시물은 인코딩된 비트스트림 내에서의 델타 QP 신택스 엘리먼트들의 포지셔닝에 관한 것이다. 따라서, 본 개시물은 비트 스트림 내에서의 델타 QP 신택스 엘리먼트들을 적절히 포지셔닝하도록 하는 비트스트림의 인코딩 뿐 아니라 인코딩된 비디오 데이터 (즉, 인코딩된 비트스트림) 내의 적절한 포지션으로부터의 델타 QP 신택스 엘리먼트들을 디코딩하는 디코딩 기법들과 관한 것이다.

도 1 은 본 개시물의 기법들을 구현할 수도 있는 예시적인 비디오 인코딩 및 디코딩 시스템 (10) 을 예시한 블록도이다. 도 1 에 도시된 바와 같이, 시스템 (10) 은 인코딩된 비디오를 통신 채널 (15) 을 통해 목적지 디바이스 (16) 로 송신하는 소스 디바이스 (12) 를 포함한다. 소스 디바이스 (12) 및 목적지 디바이스 (16) 는 광범위한 디바이스들 중 임의의 것을 포함할 수도 있다. 몇몇 경우들에 있어서, 소스 디바이스 (12) 및 목적지 디바이스 (16) 는 소위 셀룰러 또는 위성 무선전화들과 같은 무선 통신 디바이스 핸드셋들을 포함할 수도 있다. 그러나, 양자화 파라미터의 변화들 (즉, 델타 QP) 의 인코딩, 디코딩 및 통신에 전반적으로 적용되는 본 개시물의 기법들은, 반드시 무선 애플리케이션들 또는 설비들로 제한되는 것은 아니며, 비디오 인코딩 및/또는 디코딩 기능을 포함하는 비무선 디바이스들에 적용될 수도 있다. 소스 디바이스 (12) 및 목적지 디바이스 (16) 는 단지 본 명세서에서 설명되는 기법들을 지원할 수 있는 코딩 디바이스들의 실시예들에 불과하다.

도 1 의 예에서, 소스 디바이스 (12) 는 비디오 소스 (20), 비디오 인코더 (22), 변조기/복조기 (모뎀)(23) 및 송신기 (24) 를 포함할 수도 있다. 목적지 디바이스 (16) 는 수신기 (26), 모뎀 (27), 비디오 디코더 (28), 및 디스플레이 디바이스 (30) 를 포함할 수도 있다. 본 개시물에 따르면, 소스 디바이스 (12) 의 비디오 인코더 (22) 는 LCU 의 양자화된 변환 계수들에 적용되는 양자화의 레벨을 통신시키기 위해 비디오 인코딩 프로세스 동안 LCUs (또는 가능하게는 양자화 변환들을 허용할 정도로 충분히 큰 CUs) 에 대한 델타 QP 를 인코딩하도록 구성될 수도 있다. 신택스 엘리먼트들은 인코딩된 비트스트림 내의 델타 QP 를 시그널링하도록 비디오 인코더 (22) 에서 생성될 수도 있다. 본 개시물은 LCU 가 어떠한 비제로 변환 계수들도 갖지 않는다면 델타 QP 가 전반적으로 무관하다는 것을 인식한다. 이러한 경우들에 있어서, 델타 QP 의 인코딩은 함께 회피될 수 있고, 이에 의해 데이터 압축을 개선할 수 있다.

소스 비디오 (12) 의 비디오 인코더 (22) 는 본 개시물의 기법들을 이용하여 비디오 소스 (20) 로부터 수신된 비디오 데이터를 인코딩할 수도 있다. 비디오 소스 (20) 는 비디오 카메라와 같은 비디오 캡처 디바이스, 이전에 캡처된 비디오를 포함하는 비디오 아카이브, 비디오 콘텐츠로부터의 비디오 소스 또는 다른 비디오 소스를 포함할 수도 있다. 다른 대안으로서, 비디오 소스 (20) 는 소스 비디오와 같은 컴퓨터 그래픽 기반 데이터, 또는 라이브 비디오, 아카이브된 비디오, 및 컴퓨터 생성 비디오의 조합을 생성할 수도 있다. 몇몇 경우들에 있어서, 비디오 소스 (20) 가 비디오 카메라이면, 소스 디바이스 (12) 및 목적지 디바이스 (16) 는 소위 카메라 폰들 또는 비디오 폰들을 형성할 수도 있다. 각각의 경우에 있어서, 캡처된, 사전 캡처된, 또는 컴퓨터 생성 비디오가 비디오 인코더 (22) 에 의해 인코딩될 수도 있다. 본 개시물의 기법들은 서버 컴퓨터들, 디지털 직접 브로드캐스트 시스템들, 무선 브로드캐스트 시스템들, 미디어 플레이어들, 디지털 텔레비전들, 데스크톱 또는 랩톱 컴퓨터들, 태블릿 컴퓨터들, 핸드헬드 컴퓨터들, 게이밍 콘솔들, 셋톱 박스들, 무선 전화 핸드셋들과 같은 무선 통신 디바이스들, 개인 디지털 정보 단말기들 (PDAs), 디지털 카메라들, 디지털 리코딩 디바이스들, 비디오 게이밍 디바이스들, 개인용 멀티미디어 플레이어들, 또는 비디오 인코딩이나 비디오 디코딩이나 이들 양측 모두를 지원하는 다른 디바이스들과 같은 임의의 인코딩 또는 디코딩 디바이스에 동등하게 적용 가능하다. 본 기법들은 비디오 스트리밍의 소스에서 비디오를 인코딩하거나, 또는 비디오 스트리밍의 목적지에서 비디오를 디코딩하거나, 또는 양측 모두를 수행하는 비디오 스트리밍 애플리케이션들에서 이용될 수도 있다.

도 1 의 소스 내지 목적지의 실시예에서, 일단 비디오 데이터가 비디오 인코더 (22) 에 의해 인코딩되면, 인코딩된 비디오 정보는, 예컨대 코드 분할 다중 액세스 (CDMA), 직교 주파수 분할 다중화 (OFDM) 또는 임의의 다른 통신 표준 또는 기법과 같은 통신 표준에 따라 모뎀 (23) 에 의해 변조될 수도 있다. 인코딩 및 변조된 데이터는 그 후에 송신기 (24) 를 통해 목적지 디바이스 (16) 로 송신될 수 있다. 모뎀 (23) 은 다양한 믹서들, 필터들, 증폭기들 또는 신호 변조를 위해 설계된 다른 콤포넌트들을 포함할 수도 있다. 송신기 (24) 는, 증폭기들, 필터들, 및 하나 이상의 안테나들을 포함하는, 데이터 송신용으로 설계된 회로들을 포함할 수도 있다. 목적지 디바이스 (16) 의 수신기 (26) 는 채널 (15) 을 통해 정보를 수신하고, 모뎀 (27) 은 그 정보를 복조한다. 또한, 기법들은 디바이스들 사이에서의 데이터 통신의 임의의 요건들로 제한되지 않으며, 데이터를 인코딩하고 저장하는 인코딩 디바이스들 또는 인코딩된 비디오를 수신하고 사용자에게로의 프레젠테이션을 위해 비디오 데이터를 디코딩하는 디코딩 디바이스들에 적용될 수 있다.

비디오 디코더 (28) 에 의해 수행되는 비디오 디코딩 프로세스는 비디오 인코더 (22) 에 의해 수행되는 인코딩 기법들에 대한 역 기법들을 포함할 수도 있다. 구체적으로, 비디오 디코더 (28) 는 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함하는 경우에만 LCU 에 대한 QP 의 예측 값에 대해 LCU 에 대한 QP 의 변화 (델타) 를 나타내도록 LCU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩할 수도 있다. 이 경우에 있어서, 하나 이상의 신택스 엘리먼트들을 디코딩하는 것은, LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 LCU 에 대한 변환 계수들 앞에서 발생하는 인코딩된 비디오 데이터를 갖는 포지션으로부터 발생한다. 델타 QP 를 나타내는 하나 이상의 신택스 엘리먼트들은 LCU 가 어떠한 비제로 변환 계수들을 포함하지 않는다면 LCU 와 함께 포함되지 않는다.

통신 채널 (15) 은 무선 주파수 (RF) 스펙트럼 또는 하나 이상의 물리적 송신 라인들과 같은 임의의 무선 또는 유선 통신 매체, 또는 무선 및 유선 매체들의 임의의 조합을 포함할 수도 있다. 통신 채널 (15) 은 근거리 통신 네트워크, 광역 통신 네트워크, 또는 인터넷과 같은 글로벌 네트워크와 같은 패킷 기반 네트워크의 일부를 형성할 수도 있다. 통신 채널 (15) 은, 전반적으로, 소스 디바이스 (12) 로부터 목적지 디바이스 (16) 로 비디오 데이터를 송신하기 위한, 임의의 적합한 통신 매체 또는 상이한 통신 매체들의 집합을 나타낸다.

비디오 인코더 (22) 및 비디오 디코더 (28) 는, 실질적으로, 현재 개발 하에 부상 중인 HEVC 표준과 같은 비디오 압축 표준에 따라 동작할 수도 있다. 그러나, 본 개시물의 기법들은 또한 몇몇 옛 표준들 또는 신규의 또는 부상 중인 표준들을 포함하는 다양한 다른 비디오 코딩 표준들의 콘텍스트에서 적용될 수도 있다.

도 1 에는 도시되지 않았지만, 몇몇 경우들에 있어서, 비디오 인코더 (22) 및 비디오 디코더 (28) 는 각각 오디오 인코더 및 디코더와 통합될 수도 있으며, 적합한 MUX-DEMUX 유닛들 또는 다른 하드웨어 및 소프트웨어를 포함하여, 공통 데이터 스트림 또는 개별 데이터 스트림들에서의 오디오 및 비디오 양측 모두의 인코딩을 처리할 수도 있다. 적용 가능하다면, MUX-DEMUX 유닛들은 ITU H.223 멀티플렉서 프로토콜, 또는 사용자 데이터그램 프로토콜 (UDP) 과 같은 다른 프로토콜들을 준수할 수도 있다.

비디오 인코더 (22) 및 비디오 디코더 (28) 는 각각 하나 이상의 마이크로프로세서들, 디지털 신호 프로세서들 (DSPs), 주문형 반도체들 (ASICs), 필드 프로그래밍가능 게이트 어레이들 (FPGAs), 이산 로직, 소프트웨어, 하드웨어, 펌웨어 또는 이들의 조합들로서 구현될 수도 있다. 비디오 인코더 (22) 및 비디오 디코더 (28) 각각은 하나 이상의 인코더들 또는 디코더들 내에 포함될 수도 있으며, 어느 쪽이든 각자의 모바일 디바이스, 가입자 디바이스, 브로드캐스트 디바이스, 서버 등에서 조합형 인코더/디코더 (CODEC) 의 일부로서 통합될 수도 있다. 본 개시물에서, 용어 코더는 인코더, 디코더, 또는 CODEC 을 지칭하며, 용어들 코더, 인코더, 디코더 및 CODEC 모두는 본 개시물에 부합하는 비디오 데이터의 코딩 (인코딩 및/또는 디코딩) 을 위해 설계된 특정 머신들을 지칭한다.

몇몇 경우들에 있어서, 디바이스들 (12, 16) 은 실질적으로 대칭인 방식으로 동작할 수도 있다. 예를 들어, 각각의 디바이스들 (12, 16) 은 비디오 인코딩 및 디코딩 콤포넌트들을 포함할 수도 있다. 이러한 이유로, 시스템 (10) 은, 예컨대 비디오 스트리밍, 비디오 플레이백, 비디오 브로드캐스팅, 또는 비디오 전화를 위한, 비디오 디바이스들 (12, 16) 사이의 단방향 또는 양방향 송신을 지원할 수도 있다.

인코딩 프로세스 동안, 비디오 인코더 (22) 는 다수의 코딩 기법들 또는 동작들을 실행할 수도 있다. 일반적으로, 비디오 인코더 (22) 는 HEVC 표준에 부합하여 비디오 데이터의 블록들에 대해 동작한다. HEVC 에 부합하여, 비디오 블록들은 코딩된 유닛들 (CUs) 이라고 지칭되며, 많은 CUs 가 개별 비디오 프레임들 (또는 슬라이스들과 같은, 비디오의 다른 독립적으로 정의된 유닛들) 내에 존재한다. 프레임들, 슬라이스들, 프레임들의 부분들, 픽처 그룹들, 또는 다른 데이터 구조들은 복수의 CUs 를 포함하는 비디오 정보의 유닛들로서 정의될 수도 있다. CUs 는 HEVC 표준에 부합하는 변화하는 사이즈들을 가질 수도 있고, 비트스트림은 최대 사이즈의 CU 와 같은 최대 코딩 유닛들 (LCUs) 을 정의할 수도 있다. 델타 QP 시그널링은 LCUs 와 연관된 신택스 엘리먼트들에서 발생할 수도 있지만, 본 개시물은 또한 CU 레벨 (예컨대 양자화가 조절 가능하게 되는 몇몇 임계 사이즈 요건을 충족 또는 초과하는 CUs) 에서의 델타 QP 시그널링을 고려한다.

HEVC 표준을 이용하여, LCUs 는 쿼드트리 파티셔닝 방식에 따라 더욱더 작은 CUs 로 분할될 수도 있으며, 그 방식에서 정의되는 상이한 CUs 는 소위 예측 유닛들 (PUs) 로 더 파티셔닝될 수도 있다. LCUs, CUs, 및 PUs 는 본 개시물의 의미 내의 모든 비디오 블록들이다. 다른 타입들의 비디오 블록들이 또한 HEVC 표준에 부합하게 사용될 수도 있다.

비디오 인코더 (22) 는 코딩되는 비디오 블록 (예컨대, LCU 내의 CU 의 PU) 이 예측 블록을 식별하기 위해 하나 이상의 예측 후보들과 비교되는 예측 코딩을 수행할 수도 있다. 이 예측 코딩 프로세스는 인트라 (이 경우에는 동일한 비디오 프레임 또는 슬라이스 내의 이웃 인트라 데이터에 기초하여 예측 데이터가 생성된다) 또는 인터 (이 경우에는 이전 또는 후속 프레임들 또는 슬라이스들 내의 비디오 데이터에 기초하여 예측 데이터가 생성된다) 일 수도 있다.

예측 블록을 생성한 후, 코딩되는 현재 비디오 블록과 예측 블록 사이의 차이들이 잔여 블록으로서 코딩되며, 예측 신택스 (예컨대, 인터 코딩의 경우에 있어서 모션 벡터, 또는 인트라 코딩의 경우에 있어서 예측 모드) 가 예측 블록을 식별하는 데 사용된다. CU 에 대응하는 잔여 샘플들은 "잔여 쿼드 트리" (RQT) 라고 알려진 쿼드트리 구조를 이용하여 보다 작은 유닛들로 세분될 수도 있다. RQT 의 잎 노드들은 변환 유닛들 (TUs) 이라고 지칭될 수도 있다. TUs 는 변환될 수도 있고 양자화될 수도 있다. 변환 기법들은 DCT 프로세스 또는 개념적으로 유사한 프로세스, 정수 변환들, 웨이블릿 변환들, 또는 다른 타입들의 변환들을 포함할 수도 있다. DCT 프로세스에서, 일 실시예로서, 변환 프로세스는 픽셀 값들 (예컨대, 잔여 값들) 의 세트를 변환 계수들로 변환하는데, 이는 주파수 도메인에서 픽셀 값들의 에너지를 나타낼 수도 있다.

양자화는 변환 계수들에 적용될 수도 있으며, 일반적으로 임의의 주어진 변환 계수와 관련된 비트들의 수를 제한하는 프로세스를 수반한다. 더 구체적으로, 양자화는 LCU 레벨에서 정의된 양자화 파라미터 (QP) 에 따라 적용될 수도 있다. 따라서, 동일한 레벨의 양자화는 LCU 내의 CUs 의 TUs 에서 모든 변환 계수들에 적용될 수도 있다. 그러나, QP 자체를 시그널링하는 것이 아니라, QP 에서의 변화 (즉, 델타) 가 LCU 로 시그널링될 수도 있다. 델타 QP 는 이전에 통신된 LCU 의 QP 또는 이전 QPs 및/또는 하나 이상의 규칙들에 의해 정의된 QP 와 같은 LCU 에 대한 QP 의 예측 값에 대해 LCU 에 대한 양자화 파라미터의 변화를 정의한다. 본 개시물은 (예컨대, 잔여 데이터가 존재할 것이라는 표시 뒤의) 인코딩된 비트스트림 내의 델타 QP 를 시그널링하는 타이밍에 관련되며, 이 기법들은 주어진 LCU 에 대해 비제로 변환 계수들이 포함되지 않는 경우들에 있어서 델타 QP 의 시그널링을 제거할 수 있으며, 이는 HEVC 표준에서의 압축을 개선할 수 있다.

변환 및 양자화에 이어서, 양자화 및 변환된 잔여 비디오 블록들에 대해 엔트로피 코딩이 수행될 수도 있다. 델타 QPs, 예측 벡터들, 코딩 모드들, 필터들, 오프셋들, 또는 다른 정보와 같은 신택스 엘리먼트들이 또한 엔트로피 코딩된 비트스트림에 포함될 수도 있다. 일반적으로, 엔트로피 코딩은 양자화된 변환 계수들의 시퀀스 및/또는 다른 신택스 정보를 총체적으로 압축하는 하나 이상의 프로세스들을 포함한다. 2 차원 비디오 블록들로부터 계수들의 하나 이상의 직렬화된 1 차원 벡터들을 정의하도록, 양자화된 변환 계수들에 대해 스캐닝 기법들이 수행될 수도 있다. 그 후, 스캐닝된 계수들은, 예컨대 콘텐츠 적응적 가변 길이 코딩 (CAVLC), 콘텍스트 적응적 이진 산술 코딩 (CABAC), 또는 다른 엔트로피 코딩 프로세스를 통해, 임의의 신택스 정보와 함께 엔트로피 코딩된다.

인코딩 프로세스의 일부로서, 인코딩된 비디오 블록들은 후속 비디오 블록들의 후속 예측 기반 코딩에 사용되는 비디오 데이터를 생성하기 위해 디코딩될 수도 있다. 이것은 종종 인코딩 프로세스의 디코딩 루프라고 지칭되며, 디코더 디바이스에 의해 수행되는 디코딩을 일반적으로 미믹 (mimic) 한다. 인코더 또는 디코더의 디코딩 루프에서, 필터링 기법들은 비디오 품질을 개선하도록, 그리고 예컨대 픽셀 경계들을 평활화하고 가능하게는 디코딩된 비디오로부터 아티팩트들을 제거하도록 하는 데 이용될 수도 있다. 이 필터링은 인-루프일 수도 있고 또는 포스트-루프일 수도 있다. 인-루프 필터링을 이용하여, 재구성된 비디오 데이터의 필터링이 코딩 루프에서 일어나며, 이는 필터링된 데이터가 후속 이미지 데이터의 예측 시의 후속 사용을 위해 인코더 또는 디코더에 의해 저장되는 것을 의미한다. 대조적으로, 포스트-루프 필터링을 이용하여, 재구성된 비디오 데이터의 필터링은 코딩 루프 외에서 일어나며, 이는 데이터의 필터링되지 않은 버전들이 후속 이미지 데이터의 예측 시의 후속 사용을 위해 인코더 또는 디코더에 의해 저장되는 것을 의미한다. 루프 필터링 다음에는 종종 개별 디블록 필터링 프로세스가 이어지는데, 이는 일반적으로 비디오 블록 경계들에서 나타나는 블로키니스 아티팩트들 (blockiness artifacts) 을 제거하기 위해 인접 비디오 블록들의 경계들에 있는 또는 그 근처에 있는 픽셀들에 필터링을 적용한다.

변환 계수들의 인코딩이 발생하는 스테이지 전에 임의의 비제로 변환 계수들의 부재가 CU 에 대해 결정될 수 있는 적어도 2 개의 시나리오들이 존재한다. 일 실시예로서, LCU 내의 CUs 에서의 잔여 데이터의 존재 (예컨대, TUs 에서 비제로 변환 계수들의 존재) 는 코딩된 블록 플래그들 (CBFs) 에 의해 식별될 수 있다. CBFs 는 본질적으로 CUs 에 대해 임의의 잔여 데이터 (예컨대, TUs 내의 비제로 변환 계수들) 이 존재하는지를 식별하는 표시자들 (예컨대, 1-비트 플래그들) 이다. 이 경우에 있어서, LCU 에 대한 CBFs 가, CUs 중 어느 것도 임의의 잔여 데이터를 갖지 않는다는 것을 나타낸다면, 양자화는 무관하다. 따라서, 이 경우에 있어서, 그 LCU 에 대한 임의의 델타 QP 를 인코딩 및 시그널링하는 것이 함께 회피될 수 있다. 디코더는, LCU 에 대한 CBFs 가, CUs 중 어느 것도 임의의 비제로 변환 계수들을 갖지 않는다는 것을 나타낸다면, 비트스트림이 그 LCU 에 대한 어떠한 델타 QP 도 포함하지 않을 것임을 알도록 프로그래밍될 수 있다. 따라서, 델타 QP 를 정의하는 하나 이상의 신택스 엘리먼트들은 하나 이상의 CBFs 뒤의 인코딩된 비디오 데이터 (즉, 인코딩된 비트스트림) 에 포지셔닝될 수도 있다.

변환 계수들의 인코딩이 일어나는 스테이지 이전에 CU 에 대해 임의의 비제로 변환 계수들의 부재가 결정되는 다른 시나리오는 CU 의 코딩 모드가 CU 를 임의의 잔여 데이터가 부족한 것으로 정의하는 경우이다. 이 시나리오의 일 실시예는 소위 SKIP 모드이다. 예를 들어, 코딩 모드들 (예컨대, SKIP, MERGE SKIP, 또는 다른 유사한 모드들) 은, 무엇이든, 어떠한 잔여 데이터도 포함하지 않을 수도 있다. 이러한 경우에는, 그 CU 에 대해 델타 QP 정보를 포함할 필요가 없는데, 이는 CU 에 양자화에 의해 영향받을 임의의 비제로 변환 계수들이 부족할 것이기 때문이다. 따라서, 델타 QP 를 정의하는 하나 이상의 신택스 엘리먼트들은, 존재한다면, 주어진 CU 에 사용되는 인코딩 모드들을 정의하는 하나 이상의 신택스 엘리먼트들 뒤의 인코딩된 비디오 데이터 (즉, 인코딩된 비트스트림) 에 포지셔닝될 수도 있다.

다시, 현재 개발 하에 있는 부상 중인 HEVC 표준은 비디오 블록들에 대해 새로운 용어들 및 블록 사이즈들을 도입한다. 구체적으로, HEVC 는 쿼드트리 포지셔닝 방식에 따라 파티셔닝될 수 있는 코딩된 유닛들 (CUs) 을 지칭한다. "LCU" 는 주어진 상황에서 지원되는 최대 사이징된 코딩된 유닛 (예컨대, "최대 코딩 유닛") 을 지칭한다. LCU 사이즈는 자체가 비트스트림의 일부로서, 예컨대 시퀀스 레벨 신택스로서 시그널링될 수도 있다. LCU 는 보다 작은 CUs 로 파티셔닝될 수 있다. CUs 는 예측의 목적으로 PUs 로 파티셔닝될 수도 있다. PUs 는 정사각형 또는 직사각형 형상들을 가질 수도 있다. 변환들은 부상 중인 HEVC 표준으로 정해지는 것이 아니라 주어진 CU 와 동일한 사이즈 또는 가능하게는 보다 작은 사이즈일 수도 있는 TU 사이즈들에 따라 정의된다. CU 에 대응하는 잔여 데이터의 TUs 로의 스플릿은 전술한 바와 같이 RQT 에 의해 제어된다.

HEVC 표준에 따른 비디오 블록들을 예시하기 위해, 도 2 는 쿼드트리 파티셔닝 방식에 따라 보다 작은 CUs 로 파티셔닝되는 깊이 64 X 64 의 LCU 를 개념적으로 도시한다. "스플릿 플래그들" 이라고 지칭되는 엘리먼트들은 임의의 주어진 CU 가 4 개 더 많은 CUs 로 자체 세분되는지를 나타내는 CU-레벨 신택스로서 포함될 수도 있다. 도 2 에서, CU₀ 는 LCU 를 포함할 수도 있으며, CU₁ 내지 CU₄ 는 LCU 의 서브-CUs 를 포함할 수도 있다.

다시, 코딩된 블록 플래그들 (CBFs) 은 임의의 주어진 CU 가 비제로 변환 계수들을 포함하는지를 나타내도록 LCU 에 대해 정의될 수도 있다. 주어진 LCU 에 대한 CBFs 가, 하나 이상의 CUs 가 어떠한 비제로 변환 계수들도 포함하지 않는 것을 나타낸다면, 그 CU 에 대한 임의의 변환 계수들을 전송하는 것은 불필요하다. 또한, 본 개시물과 부합하여, CBFs 가, LCU 에 변환 계수들이 부족하다는 것을 나타낼 때 그 LCU 에 대한 임의의 델타 QP 를 전송하는 것도 역시 불필요하다. 또한, CUs 에 대한 코딩 모드 (또는 코딩 모드들의 조합) 와 CBFs 가, 주어진 LCU 에 임의의 비제로 변환 계수들이 부족한 것을 나타낸다면, LCU 에 대한 임의의 델타 QP 를 인코딩, 전송 또는 디코딩하는 것은 불필요할 수도 있다. 이러한 경우들에 있어서, 델타 QP 시그널링의 이러한 제거는 부상 중인 HEVC 표준과 부합하여 데이터 압축을 개선할 수 있다.

도 3 은 본 개시물과 부합하는 비디오 인코더 (50) 를 예시한 블록도이다. 비디오 인코더 (50) 는 디바이스 (20) 의 비디오 인코더 (22) 또는 상이한 디바이스의 비디오 인코더에 대응할 수도 있다. 도 3 에 도시된 바와 같이, 비디오 인코더 (50) 는 예측 모듈 (32), 쿼드트리 파티션 유닛 (31), 가산기들 (48, 51), 및 메모리 (34) 를 포함한다. 비디오 인코더 (50) 는 또한 변환 유닛 (38) 및 양자화 유닛 (40) 뿐 아니라 역양자화 유닛 (42) 및 역변환 유닛 (44) 을 포함한다. 비디오 인코더 (50) 는 또한 엔트로피 코딩된 유닛 (46), 및 디블록 필터들 및 포스트 루프 및/또는 인 루프 필터들을 포함할 수도 있는 필터 유닛 (47) 을 포함한다. 인코딩 방식을 정의하는 인코딩된 비디오 데이터 및 신택스 정보는 비트스트림에 대해 엔트로피 인코딩을 수행하는 엔트로피 인코딩된 유닛 (46) 에 통신될 수도 있다.

예측 모듈 (32) 은 양자화 파라미터 (QP) 에서의 임의의 변화들 (델타들) 을 정의하고 시그널링하도록 쿼드트리 파티션 유닛 (31) 및 양자화 유닛 (40) 과 결합하여 동작할 수도 있다. 양자화 유닛 (40) 은, 그러한 샘플들이 존재한다면, (예컨대, 델타 QP 및 예측 QP 에 의해 정의된 바와 같은) QP 를 변환된 잔여 샘플들에 적용할 수도 있다. 그러나, 몇몇 경우들에 있어서는, 어떠한 잔여 데이터도 전체 LCU 에 대해 존재하지 않을 수도 있다. 이러한 경우들에 있어서, 델타 QP 시그널링은 그 LCU 에 대해 회피될 수 있다.

본 개시물에 따르면, 비디오 인코더 (50) 는 LCU 에 대한 예측 QP 에 대해 인코딩된 비디오 데이터의 LCU 에 대한 양자화 파라미터의 변화를 결정할 수도 있다. 예측 QP 는, 예를 들어, 이전 LCU 의 QP 를 포함할 수도 있으며, 또는 더 많은 규칙들에 기초할 수도 있다. LCU 및 이전 LCU 는 각각 쿼드트리 파티셔닝 방식에 따라 블록-사이징된 코딩된 유닛들 (CUs) 의 세트로 파티셔닝될 수도 있다. 비디오 인코더 (50) 는 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함하는 경우에만 주어진 LCU 에 대한 양자화 파라미터의 변화를 나타내도록 LCU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩할 수도 있으며, 여기서 하나 이상의 신택스 엘리먼트들을 인코딩하는 것은 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 결정 뒤에 그리고 LCU 에 대한 변환 계수들을 인코딩하기 전에 일어난다. 또한, 비디오 인코더 (50) 는 LCU 가 어떠한 변환 계수들도 포함하지 않는다면 하나 이상의 신택스 엘리먼트들을 인코딩하는 것을 회피할 수도 있다. 따라서, 하나 이상의 신택스 엘리먼트들은, LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 LCU 에 대한 변환 계수들 앞의 비트스트림에서 인코딩될 수도 있다.

델타 QP 시그널링은 LCU 레벨에서 일어날 수도 있고, 또는 가능하게는 LCUs 의 그룹에 대해 또는 LCU 내의 CU 에 대해서와 같은 다른 신택스 층에서 일어날 수도 있다. 예를 들어, 다른 실시예에서, 델타 QP 는 8 X 8 의 CU 사이즈 또는 그보다 큰 사이즈로 시그널링될 수도 있다. 델타 QP 가 시그널링될 수 있는 CU 사이즈는 이용되는 비디오 코딩 표준에 의해 정의될 수도 있다. 어떠한 경우에서든, 본 개시물에 따르면, 델타 QPs 는 주어진 LCU (또는 CU) 가 적어도 몇몇 비제로 변환 계수들 (예컨대, 비제로 잔여 데이터) 을 포함할 것이 확실하게 된 후에만, 그리고 변환 계수들 앞의 비트스트림에서 인코딩될 수도 있다. 이러한 방식으로, (SKIP 모드 비디오 블록들에 대해, 또는 CBFs 가 어떠한 비제로 변환 계수들도 존재하지 않는다는 것을 나타내는 블록들에 대해서) 와 같이, LCU 에 대해 잔여 데이터가 부족하다면, 델타 QP 의 인코딩은 데이터 압축을 개선하도록 회피될 수 있다.

일반적으로, 인코딩 프로세스 동안, 비디오 인코더 (50) 는 입력 비디오 데이터를 수신한다. 예측 모듈 (32) 은 비디오 블록들 (예컨대, CUs 및 PUs) 에 대해 예측 코딩 기법들을 수행한다. 쿼드트리 파티션 유닛 (31) 은 도 2 를 참조하여 전술한 HEVC 파티셔닝에 따라 LCU 를 보다 작은 CU's 및 PU's 로 해체할 수도 있다. 인터 코딩에 대해, 예측 모듈 (32) 은 예측 블록을 정의하기 위해 CUs 또는 PUs 를 하나 이상의 비디오 참조 프레임들 또는 슬라이스들 (예컨대, 참조 데이터의 하나 이상의 "리스트") 내의 다양한 예측 후보들과 비교한다. 인트라 코딩에 대해, 예측 모듈 (32) 은 동일한 비디오 프레임 또는 슬라이스 내의 이웃 데이터에 기초하여 예측 블록을 생성한다. 예측 모듈 (32) 은 예측 블록을 출력하고, 가산기 (48) 는 코딩되는 CU 또는 PU 로부터 예측 블록을 감산하여 잔여 블록을 생성한다. CU 에 대응하는 잔여 블록은 잔여 쿼드트리 (RQT) 구조를 이용하여 TUs 로 더 세분될 수도 있다.

인터 코딩에 대해, 예측 모듈 (32) 은, 예측 블록을 지정하고 모션 벡터에 기초하여 예측 블록을 생성하는 모션 벡터를 식별하는 모션 추정 및 모션 보상 유닛들을 포함할 수도 있다. 일반적으로, 모션 추정은 모션을 추정하는 모션 벡터를 생성하는 프로세스로 간주된다. 예를 들어, 모션 벡터는 현재 프레임 내에서 코딩되는 현재 블록에 대한 예측 프레임 내의 예측 블록의 변위를 나타낼 수도 있다. 모션 보상은 일반적으로 모션 추정에 의해 결정된 모션 벡터에 기초하여 예측 블록을 페치 (fetch) 하거나 또는 생성하는 프로세스로 간주된다. 몇몇 경우들에 있어서, 인터-코딩에 대한 모션 보상은 서브픽셀 분해능에 대한 내삽을 포함할 수도 있으며, 이는 그러한 서브픽셀 분해능에 대한 비디오 블록들의 모션을 추정하도록 하는 모션 추정 프로세스를 허용한다.

예측 모듈 (32) 이 예측 블록을 출력한 후, 그리고 가산기 (48) 가 잔여 블록을 생성하도록 코딩되는 비디오 블록으로부터 예측 블록을 감산한 후, 변환 유닛 (38) 은 잔여 블록에 변환을 적용한다. CU 에 대응하는 잔여 샘플들은 RQT 구조를 이용하여 다양한 사이즈들의 TUs 로 더 파티셔닝된다. 변환은 ITU H.264 표준 또는 HEVC 표준에 의해 정의된 것과 같은 이산 코사인 변환 (DCT) 또는 개념적으로 유사한 변환을 포함할 수도 있다. 소위 "버터플라이" 구조들이 변환들을 수행하도록 정의될 수도 있고, 또는 매트릭스 기반 곱셈이 또한 사용될 수 있다. 웨이블릿 변환들, 정수 변환들, 서브대역 변환들 또는 다른 타입들의 변환들이 또한 이용될 수 있다. 어떠한 경우이든, 변환 유닛은 잔여 블록에 변환을 적용하여, 잔여 변환 계수들의 블록을 생성한다. 변환은, 일반적으로, 픽셀 도메인으로부터 주파수 도메인으로 잔여 정보를 변환할 수도 있다.

그 후, 양자화 유닛 (40) 은 잔여 변환 계수들을 양자화하여 비트 레이트를 더욱 감소시킨다. 양자화 유닛 (40) 은, 예를 들어 각각의 계수들을 코딩하는 데 사용되는 비트들의 수를 제한할 수도 있다. 구체적으로, 양자화 유닛 (40) 은 (예컨대, 델타 QP 를 이전 LCU 의 QP 또는 몇몇 다른 알려진 QP 와 조합함으로써) 적용할 양자화 레벨을 정의하도록 LCU 에 대해 선택된 델타 QP 를 적용할 수도 있다. 양자화가 변환 계수들에 대해 수행된 후, 엔트로피 코딩된 유닛 (46) 은 데이터를 스캔 및 엔트로피 인코딩할 수도 있다.

CAVLC 는 ITU H.264 표준 및 부상 중인 HEVC 표준에 의해 지원되는 한 가지 타입의 엔트로피 코딩 기법이며, 이는 벡터화된 단위로 엔트로피 코딩된 유닛 (46) 에 의해 적용될 수도 있다. CAVLC 는 계수들 및/또는 신택스 엘리먼트들의 직렬화된 "런들 (runs)" 을 효과적으로 압축하는 방식으로 가변 길이 코딩 (VLC) 테이블들을 이용한다. CABAC 는 ITU H.264 표준 또는 HEVC 표준에 의해 지원되는 다른 타입의 엔트로피 코딩 기법이며, 이는 벡터화된 단위로 엔트로피 코딩된 유닛 (46) 에 의해 적용될 수도 있다. CABAC 는, 이진화, 콘텍스트 모델 선택, 및 이진 산술 코딩을 포함하는 여러 스테이지들을 수반할 수도 있다. 이 경우에 있어서, 엔트로피 코딩된 유닛 (46) 은 CABAC 에 따라 계수들 및 신택스 엘리먼트들을 코딩한다. 많은 다른 타입들의 엔트로피 코딩 기법들이 또한 존재하며, 새로운 엔트로피 코딩 기법들이 마찬가지로 미래에 부상할 것이다. 본 개시물은 임의의 특정 엔트로피 코딩 기법으로 제한되지는 않는다.

엔트로피 인코딩된 유닛 (46) 에 의한 엔트로피 코딩에 이어서, 인코딩된 비디오는 다른 디바이스로 송신될 수도 있고, 또는 추후의 송신 또는 취출을 위해 아카이브될 수도 있다. 또한, 인코딩된 비디오는 엔트로피 코딩된 벡터들 및 다양한 신택스 정보 (LCUs 에 대한 델타 QP 를 정의하는 신택스 정보를 포함함) 를 포함할 수도 있다. 이러한 정보는 디코딩 프로세스를 적절히 구성하도록 디코더에 의해 사용될 수 있다. 역양자화 유닛 (42) 및 역변환 유닛 (44) 은 각각 역양자화 및 역변환을 적용하여, 픽셀 도메인에서 잔여 블록을 재구성한다. 합산기 (51) 는 재구성된 잔여 블록을 예측 모듈 (32) 에 의해 생성된 예측 블록에 가산하여, 메모리 (34) 에의 저장을 위한 재구성된 비디오 블록을 생성한다. 그러나, 이러한 저장 이전에, 필터 유닛 (47) 이 비디오 블록에 필터링을 적용하여 비디오 품질을 개선할 수도 있다. 필터 유닛 (47) 에 의해 적용되는 필터링은 아티팩트들을 감소시킬 수도 있고, 픽셀 경계들을 평활화할 수도 있다. 또한, 필터링은 코딩되는 비디오 블록들에 대한 긴밀한 매칭들을 포함하는 예측 비디오 블록들을 생성함으로써 압축을 개선할 수도 있다.

본 개시물에 따르면, 델타 QP 신택스 정보는 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함하는 경우에만 그 LCU 에 대해 포함된다. 그렇지 않은 경우, 델타 QP 신택스 정보는 그 LCU 에 대해 비트스트림으로부터 제거될 수 있다. 또한, 예측 모듈 (32) 및 쿼드트리 파티션 유닛 (31) 이, LCU 가 어떠한 비제로 변환 계수들도 포함하지 않는 것을 결정하고 시그널링하는 적어도 2 개의 시나리오들이 존재한다.

일 실시예로서, LCU 내의 CUs 에서 비제로 잔여 데이터의 존재 (예컨대, TUs 내의 비제로 변환 계수들의 존재) 는 CBFs 에 의해 식별될 수 있다. 또한, CBFs 는 본질적으로 CUs 에 대해 TUs 의 임의의 비제로 변환 계수들이 존재하는지를 식별하는 표시자들 (예컨대, 1-비트 플래그들) 이다. 이 경우에 있어서, LCU 에 대해 인코딩된 CBFs 가, CUs 중 어느 것도 임의의 잔여 데이터를 갖지 않는 것 (예컨대, LCU 내의 CUs 중 어느 것도 임의의 비제로 변환 계수들을 갖지 않는 것) 을 나타낸다면, 양자화는 무관한다. 따라서, 이 경우에 있어서, 그 LCU 에 대해 임의의 델타 QP 를 인코딩 및 시그널링하는 것이 함께 회피될 수 있다.

변환 계수들의 인코딩이 발생하는 스테이지 이전에 LCU 에 대해 임의의 비제로 변환 계수들의 부재가 결정될 수 있는 다른 시나리오는 LCU 의 코딩 모드가 LCU 를 임의의 잔여 데이터가 부족한 것으로 정의하는 경우이다. 이 시나리오의 일 실시예는 소위 SKIP 모드이다. 예를 들어, (SKIP 모드와 같은) 코딩 모드들은, 무엇이든, 어떠한 잔여 데이터도 포함하지 않을 수도 있으며, 그에 따라 비제로 변환 계수들이 부족하다. 따라서, 쿼드트리 파티션 유닛 (31) 이 전체 LCU 를 하나의 블록으로 파티셔닝하고 예측 모듈 (32) 이 그 전체 LCU 에 대해 SKIP 모드를 구현한다면, 임의의 델타 QP 가 그 LCU 에 대한 비트스트림으로부터 제거될 수 있다. 이 경우에 있어서, 주어진 LCU 에 대한 데이터는 (이전 비디오 프레임의 공동 위치된 LCU 와 같은) 다른 LCU 로부터의 데이터로부터 상속되거나 또는 채택될 수도 있다. 어떠한 잔여 데이터도 그 LCU 에 포함되지 않으므로, 비디오 인코더 (예컨대, 쿼드트리 파티션 유닛 (31) 및/또는 예측 모듈 (32)) 는 그 LCU 에 대한 임의의 QP 의 인코딩 및 시그널링을 회피할 수 있다.

도 4 는 본 명세서에서 설명되는 방식으로 인코딩되는 비디오 시퀀스를 디코딩하는 비디오 디코더 (60) 의 일 실시예를 예시한 블록도이다. 본 개시물의 기법들은 몇몇 실시예들에서 비디오 디코더 (60) 에 의해 수행될 수도 있다. 구체적으로, 비디오 디코더 (60) 는 인코딩된 비디오 데이터의 LCU 를 수신하며, 여기서 LCU 는 쿼드트리 파티셔닝 방식에 따라 블록 사이징된 CUs 의 세트로 파티셔닝되고, LCU 가 적어도 몇몇 비제로 변환 계수들을 포함하는 경우에만 그 LCU 에 대한 예측 양자화 파라미터에 대해 그 LCU 에 대한 양자화 파라미터의 변화를 나타낸다. 따라서, 비디오 디코더 (60) 는 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시를 디코딩한 뒤에 그리고 LCU 에 대한 변환 계수들을 디코딩하기 전에 하나 이상의 신택스 엘리먼트들을 디코딩한다. 하나 이상의 신택스 엘리먼트들은 LCU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 LCU 와 함께 포함되지 않는다. 비트스트림 자체는 마찬가지로 신택스 엘리먼트들의 이러한 순서를 반영할 수도 있다. 즉, 하나 이상의 신택스 엘리먼트들은 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩될 수도 있다. 디코더는 다양한 신택스 엘리먼트들이 비트스트림 내의 어디에서 예상되는지를 알도록 구성될 수도 있다.

비디오 디코더 (60) 에서 수신된 비디오 시퀀스는 이미지 프레임들의 인코딩된 세트, 프레임 슬라이스들의 세트, 공통으로 코딩된 픽처 그룹 (GOPs), 또는 인코딩된 LCUs 및 신택스 정보를 포함하여 그러한 LCUs 를 어떻게 디코딩할지를 정의하는 비디오 정보의 매우 다양한 유닛들을 포함할 수도 있다. LCUs 를 디코딩하는 프로세스는 델타 QP 를 디코딩하는 것을 포함할 수도 있지만, 이는 주어진 LCU 가 실제로 비제로 변환 계수들을 포함한다는 결정 이후에만 (이전이 아님) 이어진다. 주어진 LCU 가 비제로 변환 계수들을 포함하지 않는다면, LCU 신택스 데이터는 임의의 델타 QP 를 포함하지 않는데, 이는 비제로 변환 계수들의 존재가 없다면 양자화가 무관하기 때문이다. 또한, 인코딩된 비디오 데이터 (즉, 비트스트림 자체) 는 마찬가지로 신택스 엘리먼트들의 이러한 순서를 반영할 수도 있다. 즉, 하나 이상의 신택스 엘리먼트들은 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩될 수도 있다. 전술한 바와 같이, 디코더는 다양한 신택스 엘리먼트들이 비트스트림 내의 어디에서 예상되는지를 알도록 구성될 수도 있다.

비디오 디코더 (60) 는 도 2 의 엔트로피 인코딩된 유닛 (46) 에 의해 수행되는 인코딩의 역 디코딩 기능을 수행하는 엔트로피 디코딩된 유닛 (52) 을 포함한다. 구체적으로, 엔트로피 디코딩된 유닛 (52) 은 CAVLC 또는 CABAC 디코딩, 또는 비디오 인코더 (50) 에 의해 사용되는 임의의 다른 타입의 엔트로피 디코딩을 수행할 수도 있다. 비디오 디코더 (60) 는 또한 예측 모듈 (54), 역양자화 유닛 (56), 역변환 유닛 (58), 메모리 (62) 및 합산기 (64) 를 포함한다. 특히, 비디오 인코더 (50) 와 같이, 비디오 디코더 (60) 는 예측 모듈 (54) 및 필터 유닛 (57) 을 포함한다. 비디오 디코더 (60) 의 예측 모듈 (54) 은 모션 보상 엘리먼트들 및 가능하게는 모션 보상 프로세스에서 서브픽셀 내삽을 위한 하나 이상의 내삽 필터들을 포함할 수도 있다. 필터 유닛 (57) 은 합산기 (64) 의 출력을 필터링할 수도 있으며, 루프 필터링에 적용되는 필터 계수들을 정의하는 엔트로피 디코딩된 필터 정보를 수신할 수도 있다.

인코딩된 비디오 데이터를 수신하면, 엔트로피 디코딩된 유닛 (52) 은 (도 3 에서 인코더 (50) 의) 엔트로피 인코딩된 유닛 (46) 에 의해 수행되는 인코딩에 대한 역 디코딩을 수행한다. 디코더에서, 엔트로피 디코딩된 유닛 (52) 은 LCU's 및 LCU's 와 관련된 대응 파티셔닝을 결정하도록 비트스트림을 분석한다. 몇몇 실시예들에서, 임의의 LCU 는 델타 QP 를 포함할 수도 있지만, 그 LCU 가 비제로 변환 계수들을 포함하는 경우에만 그러하다. 따라서, 엔트로피 디코딩된 유닛 (52) 은 델타 QP 가 존재할 때 델타 QP 를 역양자화 유닛 (56) 에 포워딩할 수도 있다. (예컨대, 쿼드트리 파티셔닝 유닛 (53) 에 의한) 델타 QP 의 이러한 디코딩은 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 LCU 에 대한 변환 계수 앞에서 발생하는 인코딩된 비디오 데이터 내의 포지션으로부터 발생한다. 이 방식으로, (예컨대, LCU 가 SKIP 모드에서 인코딩되기 때문에 또는 그 LCU 의 CBFs 가 어떠한 잔여 데이터도 존재하지 않음을 나타내기 때문에) LCU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면, 델타 QP 의 디코딩은 필요하지 않거나 수행되지 않는데, 이는 어떠한 델타 QP 도 그 LCU 에 대해 포함되지 않기 때문이다.

또한, 본 개시물은 델타 QPs 를 인코딩, 시그널링 및 디코딩하는 것과 관련된 타이밍에 관한 것이다. 또한, 본 개시물은 비트스트림 내에서 신택스 엘리먼트들의 순서에 관한 것이다. 구체적으로, 델타 QPs 는 다음 경우에 비트스트림에서 인코딩 및 시그널링될 수도 있다 (그리고, 그에 따라 수신 및 디코딩될 수도 있다):

1) 주어진 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이 확실하게 된 후, 및

2) 변환 계수들의 시그널링 전 (또는 인코딩 전 또는 디코딩 전).

부상 중인 HEVC 표준의 테스트 모델에서, 델타 QPs 는 비제로 변환 계수들을 포함하는 임의의 LCUs 에 대해 전송된다. 사실상, 많은 비디오 코딩 모드들이 잔여 데이터 (즉, 코딩되고 있는 비디오 블록 내의 픽셀들과 예측 블록 사이의 잔차를 나타내는 계수들, 모션 벡터에 의해 또는 인트라 코딩 모드에 의해 식별될 수도 있음) 의 인코딩을 지원한다. 그러나, 몇몇 코딩 모드들 (예컨대, SKIP 모드) 은 잔여 데이터를 허용하지 않는다.

또한, 전술한 바와 같이, 때때로, LCUs 에는 코딩 모드와는 무관하게 잔여 데이터가 부족할 수도 있다. 예를 들어, 임의의 타입의 LCU (예컨대, 표준 양방향 방식으로 인코딩된 하나의 LCU) 는 어떠한 잔여 데이터도 포함하지 않을 수도 있고, 그에 따라 어떠한 비제로 변환 계수들도 포함하지 않을 수도 있다. 예를 들어, 비디오 블록에 대한 모션 벡터가, 코딩되는 현재 비디오 블록과 동일한 예측 데이터를 식별한다면, 잔여 데이터는 예측 코딩 프로세스에서 생성되지 않을 수도 있다. 모든 LCU 에 대해, 코딩된 블록 플래그들 (CBFs) 은 비제로 변환 계수들이 LCU 내의 각각의 CU 에 대한 비트스트림에 포함되는지를 나타내도록 인코딩될 수도 있다. CBFs 는 또한 임의의 비제로 변환 계수들이 주어진 LCU 의 블록들에 대한 루미넌스 도메인 및/또는 크로미넌스 도메인에 존재하는지를 나타낼 수도 있다.

LCU 의 잔여 계수들의 최종 블록 뒤의 델타 QPs 를 인코딩 및 시그널링하는 것은 또한 LCU 의 상이한 CUs 의 병렬 디코딩에 대한 문제들을 생성할 수 있다. 이것은 양자화 파라미터가 LCU 에 대해 변경되었을 수도 있지만, LCU 의 모든 변환 계수들이 디코더에서 수신된 뒤가 될 때까지 양자화 파라미터가 변했는지의 여부를 디코더가 알지 못하기 때문이다. 이들 및 다른 이유들로, 본 개시물은 델타 QPs가 LCUs 에 대한 비트스트림에서 다음의 경우에 인코딩 및 디코딩되어야 한다는 것을 제안한다:

1) 주어진 LCU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 것이 확실하게 된 후, 및

2) 비트스트림 내의 변환 계수들의 인코딩 및 시그널링 전.

몇몇 실시예들에서, 이것은, (CBFs 가 적어도 하나의 비제로 변환 계수가 존재한다는 것을 나타낸다면) 델타 QPs 가 LCU 에 대한 코딩된 블록 플래그들 (CBFs) 뒤이지만 임의의 변환 계수들 앞에 있는 비트스트림에서 전송된다는 것을 의미한다. 이러한 경우에 있어서, 비제로 변환 계수들의 존재를 나타내는 하나의 CBF 가 LCU 에 대해 전송되자마자, 그러나 임의의 나머지 CBFs 는 그 LCU 에 대해 전송되기 전에 델타 QP 가 전송된다.

간단히 말해서, LCU 의 말미에 델타 QP 를 배치하는 것은 디코딩 시에 지연을 도입할 수 있으며, 델타 QP 정보가 LCU 의 시작부에 포함된다면, 예컨대 LCU 가 하나의 SKIP CU, 다수의 SKIP CU's 로 파티셔닝될 때 또는 LCU 가 어떠한 비제로 변환 계수들도 포함하지 않는 것을 CBFs 가 나타낼 때, 델타 QP 가 불필요하게 시그널링되는 경우들이 존재할 수도 있다. 따라서, 디코더 지연을 감소시킬 뿐 아니라 불필요한 델타 QP 시그널링을 절감하기 위해, 본 개시물은 인코딩된 비트스트림 내에서 다음의 경우에 델타 QP 시그널링을 수행한다:

2) 비트스트림 내의 변환 계수들의 시그널링 전.

대안의 실시예에서, 델타 QP 시그널링은 비제로 변환 계수들을 갖는 제 1 CU 뒤 (예컨대, LCU 내의 제 1 CU 의 하나 이상의 TUs 뒤) 에 발생할 수도 있다.

도 5 는 본 개시물에 부합하는 디코딩 기법을 예시한 흐름도이다. 도 5 는 도 4 의 비디오 디코더 (60) 의 관점으로 설명될 것이지만, 다른 디바이스들이 유사한 기법들을 수행할 수도 있다. 도 5 에 도시된 바와 같이, 엔트로피 디코딩된 유닛 (52) 은 LCU 를 수신하고 (501), LCU 가 비제로 변환 계수들을 포함하는지의 하나 이상의 표시들을 디코딩한다 (502). 또한, 이들 표시들의 2 개의 실시예들은 CBFs 및 코딩 모드이다. CBFs 가 어떠한 비제로 변환 계수들도 존재하지 않는 것으로 나타낸다면 또는 코딩 모드가 변환 계수들이 부족한 모드이면, 엔트로피 디코딩된 유닛 (52) 은 그 LCU 에 대해 델타 QP 가 포함되지 않는다는 것을 알도록 구성될 수 있다. 따라서, LCU 에 비제로 변환 계수들이 부족하면 ("아니오", 503), 엔트로피 디코딩된 유닛 (52) 은 델타 QP 에 대한 임의의 신택스 엘리먼트들의 디코딩을 회피한다 (506). 그러나, LCU 가 비제로 변환 계수들을 포함하면 ("예", 503), 엔트로피 디코딩된 유닛 (52) 은 델타 QP 에 대한 신택스 엘리먼트들을 디코딩하고 (504), 델타 QP 값을 역양자화 유닛 (56) 에 포워딩한다. 이 후자의 경우에 있어서, 비디오 디코더 (60) 는 변환 계수들을 디코딩하며 (505), 이것은 변환 계수들을 역양자화하도록 비트스트림에 포함되었던 델타 QP 를 적용하는 역양자화 유닛 (56) 을 포함할 수도 있다.

도 6 은 본 개시물과 부합하는 디코딩 기법을 예시한 다른 흐름도이다. 도 6 은 도 4 의 비디오 디코더 (60) 의 관점으로 설명될 것이지만, 다른 디바이스들이 유사한 기법들을 수행할 수도 있다. 도 6 에 도시된 바와 같이, 엔트로피 디코딩된 유닛 (52) 은 LCU 를 수신한다 (601). 엔트로피 디코딩된 유닛 (52) 은 LCU 내의 CUs 의 모드들을 디코딩하고 (602), CU's 가 잔여 데이터를 포함하는지를 결정하도록 코딩된 블록 플래그들 (CBFs) 을 디코딩한다 (603). 단계들 602 및 603 은 또한 도치될 수 있다. 또한, 단계 603 은 단계 602 에서 결정된 코딩 모드가 어떠한 비제로 변환 계수들도 존재하지 않는 것을 나타내는 경우에 스킵될 수도 있는데, 이는 SKIP 모드에 대한 경우일 수도 있다. 본질적으로, 단계들 602 및 603 은 모드 및 CBFs 를 정의하는 LCU 신택스 정보의 분석을 포함할 수도 있다. 이 때, 엔트로피 디코딩된 유닛 (52) 은 CU's (또는 전체 LCU) 또는 CBFs 의 코딩 모드들 중 어느 하나가 비제로 변환 계수들의 존재를 나타내는 경우에만 LCU 에 대한 델타 QP 를 디코딩한다 (604). 또한, 모든 CBF 플래그들이 어떠한 잔여 데이터도 존재하지 않는다는 것을 나타내도록 설정될 때 또는 LCU 에 대해 사용되는 모든 코딩 모드들이 (SKIP 모드와 같이) 비제로 변환 계수들이 부족한 모드들이면, 임의의 비제로 변환 계수들의 부재가 식별될 수 있다. 그 후, 디코더 (60) 는 LCU 를 디코딩하며 (605), 이것은 델타 QP 를 적용하여 역양자화를 위해 QP 를 정의하는 역양자화 유닛 (56) 을 포함할 수도 있지만, 이는 LCU 에 대해 델타 QP 가 존재하는 경우에서만이다.

도 7 은 본 개시물과 부합하는 인코딩 기법을 예시한 흐름도이다. 도 7 은 도 3 의 비디오 인코더 (50) 의 관점으로 설명될 것이지만, 다른 디바이스들이 유사한 기법들을 수행할 수도 있다. 도 7 에 도시된 바와 같이, 쿼드트리 파티션 유닛 (31) 은 LCU 를 파티셔닝한다 (701). 구체적으로, 쿼드트리 파티션 유닛 (31) 은 도 2 를 참조하여 전술한 HEVC 파티셔닝에 따라 LCU 를 보다 작은 CU's 및 PU's 로 파과할 수도 있다. 인코더 (50) 는 LCU 가 비제로 변환 계수들을 포함하는지의 하나 이상의 표시들을 인코딩한다 (702). 구체적으로, 예측 모듈 (32) 및/또는 쿼드트리 파티션 유닛 (31) 은 LCU 의 CUs 에 대한 인코딩 모드들을 선택 및 인코딩할 수도 있으며, 이는 그 코딩 모드 동안 잔여 데이터가 존재할 수도 있는지를 나타낼 수도 있다. 또한, 예측 모듈 (32) 및/또는 쿼드트리 파티션 유닛 (31) 은 변환 유닛 (38) 과 상호작용하여 LCU 에 대한 CBFs 를 생성할 수도 있는데, 이는 몇몇 코딩 모드들 동안 LCU 의 임의의 CUs 가 비제로 변환 계수들을 포함하는지를 나타낸다. 이 모든 정보는 엔트로피 코딩된 유닛 (46) 에 의해 엔트로피 코딩될 수도 있다.

LCU 에 대해 비제로 변환 계수들이 존재하면 ("예", 703) 인코더 (50) 는 양자화 유닛 (40) 및 역양자화 유닛 (42) 에 의해 LCU 에 대한 예측 QP 에 대해 그 LCU 에 대한 QP 를 정의하도록 하는 데 사용될 수도 있는 델타 QP 를 정의하는 신택스를 인코딩한다 (704). 다른 신택스 정보와 같이, 델타 QP 를 정의하는 이 신택스는 엔트로피 인코딩된 유닛 (46) 에 의해 엔트로피 코딩될 수도 있다. 변환 계수들 자체는 LCU 에 대해 비제로 변환 계수들이 존재하는지의 결정 (703) 이후에 인코딩된다 (705). 따라서, 비제로 변환 계수들이 LCU 에 대해 존재하지 않는다면 ("아니오", 703), 인코더 (50) 는 델타 QP 를 정의하는 신택스의 인코딩을 회피한다 (706). 이 경우에 있어서, 대응하는 비디오 디코더 (예컨대, 도 4 의 디코더 (60)) 는 비제로 변환 계수들이 부족한 임의의 LCU 에 또한 임의의 델타 QP 가 부족하다는 것을 알도록 구성될 수 있으며, 따라서 디코더는 그에 따라 비트스팀을 분석할 수 있다.

도 8 은 본 개시물과 부합하는 인코딩 기법을 예시한 다른 흐름도이다. 도 8 은 도 3 의 비디오 인코더 (50) 의 관점으로 설명될 것이지만, 다른 디바이스들이 유사한 기법들을 수행할 수도 있다. 도 8 에 도시된 바와 같이, 쿼드트리 파티션 유닛 (31) 은 LCU 를 파티셔닝한다 (801). 구체적으로, 쿼드트리 파티션 유닛 (31) 은 도 2 를 참조하여 전술한 HEVC 파티셔닝에 따라 LCU 를 보다 작은 CU's 및 PU's 로 파과할 수도 있다. 예측 모듈 (32) 은 LCU 의 CUs 에 대한 모드들을 선택 및 인코딩한다 (802). 인코딩 프로세스의 일부로서, 예측 모듈 (32) 은 또한 잔여 데이터를 지원할 수 있는 모드들에서 인코딩된 임의의 CUs 에 대해 비제로 변환 계수들이 존재하는지를 결정할 수도 있다 (803). 그 후, 예측 모듈 (32) 및/또는 쿼드트리 파티션 유닛 (31) 은 변환 유닛 (38) 과 상호작용하여 LCU 에 대한 CBFs 를 생성할 수도 있으며 (804), 이는 몇몇 코딩 모드들 동안 LCU 의 임의의 CUs 가 비제로 변환 계수들을 포함하는지를 나타낸다. 이 모든 정보는 엔트로피 코딩된 유닛 (46) 에 의해 엔트로피 코딩될 수도 있다. 델타 QP 는 LCU 의 CUs 및/또는 LCU 에 대한 CBFs 의 모드들이 잔여 데이터의 존재를 나타내는 경우에만 정의 (엔트로피 코딩된 유닛 (46) 에 의해 인코딩) 된다 (805).

도 5 내지 도 8 은 전반적으로 인코딩 및 디코딩의 순서를 예시하지만, 본 개시물은 인코딩된 비트스트림 내의 신택스 엘리먼트들의 순서를 보다 일반적으로 설명한다. 예를 들어, 언급된 바와 같이, 본 개시물은 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대한 예측 양자화 파라미터에 대해 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 포함하는 비트스트림을 설명한다. 또한, 본 개시물은 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 하나 이상의 신택스 엘리먼트들의 배치를 설명한다.

또 다른 실시예들에서, 본 개시물은 저장된 데이터 구조를 포함하는 컴퓨터 판독가능 매체를 고려하며, 여기서 데이터 구조는 본 개시물에 일치하는 인코딩된 비트스트림을 포함한다. 구체적으로, 인코딩된 비트스트림은 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 CU 에 대한 예측 양자화 파라미터에 대해 CU 에 대한 양자화 파라미터의 변화를 나타내도록 CU 에 대한 하나 이상의 신택스 엘리먼트들을 포함할 수도 있고, 하나 이상의 신택스 엘리먼트들은 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 CU 에 대한 비트스트림으로부터 배제될 수도 있다. 존재한다면, 하나 이상의 신택스 엘리먼트들은 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤 그리고 CU 에 대한 변환 계수들 앞의 인코딩된 비트스트림 내에 포지셔닝될 수도 있다.

본 개시물의 기법들은 무선 핸드셋을 포함하는 다양한 디바이스들 또는 장치들, 및 집적회로 (IC) 또는 ICs 의 세트 (즉, 칩셋) 으로 구현될 수도 있다. 임의의 콤포넌트들, 모듈들 또는 유닛들이 기능적 양태들을 강조하기 위해 제공되어 설명되었으며, 반드시 상이한 하드웨어 유닛들에 의한 구현을 요구하는 것은 아니다.

따라서, 여기서 설명된 기법들은 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 임의의 조합으로 구현될 수도 있다. 모듈들 또는 콤포넌트들로서 설명된 임의의 특징들은 통합형 로직 디바이스에서 함께 구현될 수도 있고 또는 별개이지만 상호 동작 가능한 로직 디바이스들로서 개별적으로 구현될 수도 있다. 소프트웨어로 구현된다면, 기법들은, 실행 시, 전술한 방법들 중 하나 이상을 수행하는 명령들을 포함하는 컴퓨터 판독가능 매체에 의해 적어도 부분적으로 구현될 수도 있다. 컴퓨터 판독가능 데이터 저장 매체는 패키징 재료들을 포함할 수도 있는 컴퓨터 프로그램 제품의 일부를 형성할 수도 있다.

전술한 컴퓨터 판독가능 매체들은 SDRAM (synchronous dynamic random access memory) 과 같은 RAM (random access memory), ROM (read-only memory), NVRAM (non-volatile random access memory), EEPROM (electrically erasable programmable read-only memory), FLASH 메모리, 자기적 또는 광학적 데이터 저장 매체들 등과 같은 유형적 컴퓨터 판독가능 저장 매체를 포함할 수도 있다. 기법들은, 추가로 또는 대안으로, 명령들 또는 데이터 구조들의 형태로 코드를 전달 또는 통신하고 컴퓨터에 의해 액세스, 판독, 및/또는 실행될 수 있는 컴퓨터 판독가능 통신 매체에 의해 적어도 부분적으로 구현될 수도 있다.

명령들은 하나 이상의 DSPs (digital signal processors), 범용 마이크로프로세서들, ASICs (application specific integrated circuits), FPGAs (field programmable logic arrays), 또는 다른 등가의 집적 또는 이산 로직 회로와 같은 하나 이상의 프로세서들에 의해 실행될 수도 있다. 여기서 사용된 바와 같이, 용어 "프로세서" 는 전술한 구조 또는 본 명세서에서 설명된 기법들의 구현에 적합한 임의의 다른 구조 중 임의의 것을 지칭할 수도 있다. 추가로, 몇몇 양태들에서, 여기서 설명된 기능은 인코딩 및 디코딩용으로 구성된 전용 하드웨어 모듈들 또는 소프트웨어 모듈들 내에 제공될 수도 있고 또는 결합형 인코더-디코더 (CODEC) 에 포함될 수도 있다. 또한, 기법들은 하나 이상의 회로들 또는 로직 엘리먼트들로 충분히 구현될 수도 있다.

본 개시물의 다양한 양태들이 설명되었다. 본 개시물이 주로 LCU 레벨에서의 델타 QP 시그널링에 대한 것이었지만, 기법들은 또한 델타 QP 가 보다 작은 CUs, 예컨대 양자화 변화들이 허용 및/또는 지원될 정도로 충분히 크게 사이징된 CUs 에 대해 결정, 인코딩 및 전송되는 경우들에 적용 가능할 수도 있다. 이들 및 다른 양태들은 다음 청구범위의 범주 내에 있다.

Claims

비디오 데이터를 디코딩하는 방법으로서,
인코딩된 비디오 데이터의 코딩된 유닛 (CU) 을 수신하는 단계로서, 상기 CU 는 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되는, 상기 코딩된 유닛 (CU) 을 수신하는 단계; 및
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 CU 에 대한 예측 양자화 파라미터에 대해 상기 CU 에 대한 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하는 단계를 포함하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 상기 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되고,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 상기 CU 와 함께 포함되지 않는, 비디오 데이터를 디코딩하는 방법.
제 1 항에 있어서,
상기 CU 는 상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU) 을 포함하는, 비디오 데이터를 디코딩하는 방법.
제 1 항에 있어서,
상기 CU 는 최대 코딩된 유닛 (LCU) 보다 작은 CU 를 포함하고,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 데이터를 디코딩하는 방법.
제 1 항에 있어서,
제 1 LCU 및 상기 제 1 LCU 와 관련된 하나 이상의 신택스 엘리먼트들을 디코딩하여 상기 제 1 LCU 에 대한 예측 양자화 파라미터에 대해 상기 제 1 LCU 에 대한 양자화 파라미터의 변화를 나타내는 단계; 및
제 2 LCU 를 디코딩하는 단계를 더 포함하며,
상기 하나 이상의 신택스 엘리먼트들은 상기 제 2 LCU 가 어떠한 비제로 변환 계수들도 포함하지 않기 때문에 상기 제 2 LCU 와 함께 포함되지 않는, 비디오 데이터를 디코딩하는 방법.
제 1 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 에 대한 상기 예측 양자화 파라미터에 대해 상기 양자화 파라미터의 변화를 나타내는 델타 양자화 파라미터를 포함하는, 비디오 데이터를 디코딩하는 방법.
제 1 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 LCU 에 대한 하나 이상의 코딩된 블록 플래그들 (CBFs) 뒤, 그리고
(b) 상기 LCU 의 상기 CU들의 임의의 변환 계수들 앞
의 상기 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되며,
상기 CBFs 는 상기 LCU 의 상기 CU들이 비제로 변환 계수들을 포함하는지를 정의하는, 비디오 데이터를 디코딩하는 방법.
제 6 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 LCU 의 상기 CU들과 관련된 코딩 모드들을 정의하는 하나 이상의 신택스 엘리먼트들 뒤에서 발생하는 상기 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되는, 비디오 데이터를 디코딩하는 방법.
`비디오 데이터를 인코딩하는 방법으로서,
코딩 유닛 (CU) 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 상기 CU 에 대한 양자화 파라미터의 변화를 결정하는 단계로서, 상기 CU 는 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되는, 상기 결정하는 단계; 및
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하는 단계를 포함하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 비트스트림에서 인코딩되고,
상기 하나 이상의 신택스 엘리먼트들을 인코딩하는 것은 상기 CU 가 어떠한 변환 계수들도 포함하지 않는다면 회피되는, 비디오 데이터를 인코딩하는 방법.
제 8 항에 있어서,
상기 CU 는 상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU) 을 포함하는, 비디오 데이터를 인코딩하는 방법.
제 8 항에 있어서,
상기 CU 는 최대 코딩된 유닛 (LCU) 보다 작은 CU 를 포함하고,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 데이터를 인코딩하는 방법.
제 8 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 예측 양자화 파라미터에 대해 상기 양자화 파라미터의 변화를 나타내는 델타 양자화 파라미터를 포함하는, 비디오 데이터를 인코딩하는 방법.
제 8 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 에 대한 상기 변환 계수들 중 임의의 변환 계수 앞의 상기 비트스트림에서 인코딩되는, 비디오 데이터를 인코딩하는 방법.
제 8 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 LCU 에 대한 하나 이상의 코딩된 블록 플래그들 (CBFs) 뒤, 그리고
(b) 상기 LCU 의 상기 CU들의 임의의 변환 계수들 앞
의 상기 비트스트림에서 인코딩되며,
상기 CBFs 는 상기 LCU 의 상기 CU들이 비제로 변환 계수들을 포함하는지를 정의하는, 비디오 데이터를 인코딩하는 방법.
제 13 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 LCU 의 상기 CU들과 관련된 인코딩 모드들을 정의하는 하나 이상의 신택스 엘리먼트들 뒤의 비트스트림에서 인코딩되는, 비디오 데이터를 인코딩하는 방법.
제 8 항에 있어서,
상기 CU 는 LCU 를 포함하고,
비제로 변환 계수들을 포함하는 LCU 마다 상기 하나 이상의 신택스 엘리먼트들을 한번 인코딩하는 단계를 더 포함하는, 비디오 데이터를 인코딩하는 방법.
비디오 데이터를 디코딩하는 비디오 디코딩 디바이스로서,
비디오 디코더를 포함하고,
상기 비디오 디코더는,
인코딩된 비디오 데이터의 코딩 유닛 (CU) 을 수신하되, 상기 CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되고;
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 CU 에 대한 예측 양자화 파라미터에 대해 상기 CU 에 대한 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되고,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 상기 CU 와 함께 포함되지 않는, 비디오 디코딩 디바이스.
제 16 항에 있어서,
상기 CU 는 상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU) 을 포함하는, 비디오 디코딩 디바이스.
제 16 항에 있어서,
상기 CU 는 최대 코딩된 유닛 (LCU) 보다 작은 CU 를 포함하고,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 디코딩 디바이스.
제 16 항에 있어서,
상기 비디오 디코더는,
상기 제 1 LCU 및 상기 제 1 LCU 와 관련된 하나 이상의 신택스 엘리먼트들을 디코딩하여, 상기 제 1 LCU 에 대한 예측 양자화 파라미터에 대해 상기 제 1 LCU 에 대한 양자화 파라미터의 변화를 나타내고;
제 2 LCU 를 디코딩하며,
상기 하나 이상의 신택스 엘리먼트들은 상기 제 2 LCU 가 어떠한 비제로 변환 계수들도 포함하지 않기 때문에 상기 제 2 LCU 와 함께 포함되지 않는, 비디오 디코딩 디바이스.
제 16 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 에 대한 상기 예측 양자화 파라미터에 대해 상기 양자화 파라미터의 변화를 나타내는 델타 양자화 파라미터를 포함하는, 비디오 디코딩 디바이스.
제 16 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 LCU 에 대한 하나 이상의 코딩된 블록 플래그들 (CBFs) 뒤, 그리고
(b) 상기 LCU 의 상기 CU들의 임의의 변환 계수들 앞
의 상기 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되며,
상기 CBFs 는 상기 LCU 의 상기 CU들이 비제로 변환 계수들을 포함하는지를 정의하는, 비디오 디코딩 디바이스.
제 21 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 LCU 의 상기 CU들과 관련된 코딩 모드들을 정의하는 하나 이상의 신택스 엘리먼트들 뒤에서 발생하는 상기 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되는, 비디오 디코딩 디바이스.
제 16 항에 있어서,
상기 비디오 디코딩 디바이스는:
집적회로;
마이크로프로세서; 및
비디오 디코더를 포함하는 무선 통신 디바이스
중 하나 이상을 포함하는, 비디오 디코딩 디바이스.
비디오 데이터를 인코딩하는 비디오 인코딩 디바이스로서,
비디오 인코더를 포함하며,
상기 비디오 인코더는,
코딩 유닛 (CU) 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 상기 CU 에 대한 양자화 파라미터의 변화를 결정하되, 상기 CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되고;
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 비트스트림에서 인코딩되고,
상기 하나 이상의 신택스 엘리먼트들을 인코딩하는 것은 상기 CU 가 어떠한 변환 계수들도 포함하지 않는다면 회피되는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 CU 는 상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU) 을 포함하는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 CU 는 최대 코딩된 유닛 (LCU) 보다 작은 CU 를 포함하고,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 예측 양자화 파라미터에 대해 상기 양자화 파라미터의 변화를 나타내는 델타 양자화 파라미터를 포함하는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 에 대한 상기 변환 계수들 중 임의의 변환 계수 앞의 상기 비트스트림에서 인코딩되는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 LCU 에 대한 하나 이상의 코딩된 블록 플래그들 (CBFs) 뒤, 그리고
(b) 상기 LCU 의 상기 CU들의 임의의 변환 계수들 앞
의 상기 비트스트림에서 인코딩되며,
상기 CBFs 는 상기 LCU 의 상기 CU들이 비제로 변환 계수들을 포함하는지를 정의하는, 비디오 인코딩 디바이스.
제 29 항에 있어서,
상기 하나 이상의 신택스 엘리먼트들은 상기 LCU 의 상기 CU들과 관련된 인코딩 모드들을 정의하는 하나 이상의 신택스 엘리먼트들 뒤의 상기 비트스트림에서 인코딩되는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 비디오 인코더는 비제로 변환 계수들을 포함하는 LCU 마다 상기 하나 이상의 신택스 엘리먼트들을 한번 인코딩하는, 비디오 인코딩 디바이스.
제 24 항에 있어서,
상기 비디오 인코딩 디바이스는:
집적회로;
마이크로프로세서; 및
비디오 인코더를 포함하는 무선 통신 디바이스
중 하나 이상을 포함하는, 비디오 인코딩 디바이스.
비디오 데이터를 디코딩하는 디바이스로서,
인코딩된 비디오 데이터의 코딩 유닛 (CU) 을 수신하는 수단으로서, 상기 CU 는 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되는, 상기 코딩된 유닛 (CU) 을 수신하는 수단; 및
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 CU 에 대한 예측 양자화 파라미터에 대해 상기 CU 에 대한 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하는 수단을 포함하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되고,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 상기 CU 와 함께 포함되지 않는, 비디오 데이터를 디코딩하는 디바이스.
제 33 항에 있어서,
상기 CU 는,
상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU); 및
상기 LCU 보다 작은 CU
중 하나를 포함하고,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 데이터를 디코딩하는 디바이스.
제 33 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 LCU 에 대한 적어도 하나의 코딩된 블록 플래그 (CBF) 의 뒤;
(b) 상기 LCU 에 대한 임의의 변환 계수들의 앞; 그리고
(c) 상기 LCU 의 상기 CU들과 관련된 인코딩 모드들 이후의 상기 인코딩된 비디오 데이터 내
의 포지션으로부터 디코딩되는, 비디오 데이터를 디코딩하는 디바이스.
비디오 데이터를 인코딩하는 디바이스로서,
코딩 유닛 (CU) 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 상기 CU 에 대한 양자화 파라미터의 변화를 결정하는 수단으로서, 상기 CU 는 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되는, 상기 결정하는 수단; 및
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하는 수단을 포함하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 비트스트림에서 인코딩되고,
상기 인코딩하는 수단은 상기 CU 가 어떠한 변환 계수들도 포함하지 않는다면 상기 하나 이상의 신택스 엘리먼트들을 인코딩하는 것을 회피하는, 비디오 데이터를 인코딩하는 디바이스.
제 36 항에 있어서,
상기 CU 는,
상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU); 및
상기 LCU 보다 작은 CU
중 하나를 포함하며,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 데이터를 인코딩하는 디바이스.
제 36 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들을 인코딩하는 수단은:
(a) 상기 LCU 에 대한 적어도 하나의 코딩된 블록 플래그 (CBF) 뒤;
(b) 상기 LCU 에 대한 임의의 변환 계수들 앞; 그리고
(c) 상기 LCU 의 상기 CU들과 관련된 인코딩 모드들을 정의하는 신택스 엘리먼트들 뒤
의 상기 인코딩된 비트스트림에서 상기 하나 이상의 신택스 엘리먼트들을 인코딩하는, 비디오 데이터를 인코딩하는 디바이스.
실행 시, 프로세서로 하여금 비디오 데이터를 디코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체로서,
상기 명령들은, 상기 프로세서로 하여금,
인코딩된 비디오 데이터의 코딩 유닛 (CU) 을 수신하게 하되, 상기 CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되고;
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 CU 에 대한 예측 양자화 파라미터에 대해 상기 CU 에 대한 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 디코딩하게 하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 상기 인코딩된 비디오 데이터 내의 포지션으로부터 디코딩되고,
상기 하나 이상의 신택스 엘리먼트들은 상기 CU 가 어떠한 비제로 변환 계수들도 포함하지 않는다면 상기 CU 와 함께 포함되지 않는, 비디오 데이터를 디코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체.
제 39 항에 있어서,
상기 CU 는,
상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU); 및
상기 LCU 보다 작은 CU
중 하나를 포함하며,
상기 CU 는 양자화 변화들이 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 데이터를 디코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체.
제 39 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 LCU 에 대한 적어도 하나의 코딩된 블록 플래그 (CBF) 뒤;
(b) 상기 LCU 에 대한 임의의 변환 계수들 앞; 그리고
(c) 상기 LCU 의 상기 CU들과 관련된 인코딩 모드들을 정의하는 하나 이상의 신택스 엘리먼트들 뒤의 상기 인코딩된 비트스트림 내
의 포지션으로부터 디코딩되는, 비디오 데이터를 디코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체.
실행 시, 프로세서로 하여금 비디오 데이터를 인코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체로서,
상기 명령들은, 상기 프로세서로 하여금:
코딩 유닛 (CU) 에 대한 예측 양자화 파라미터에 대해 인코딩된 비디오 데이터의 상기 CU 에 대한 양자화 파라미터의 변화를 결정하게 하되, 상기 CU 가 쿼드트리 파티셔닝 방식에 따라 블록 사이즈로 코딩된 유닛 (CU) 들의 세트로 파티셔닝되고;
상기 CU 가 임의의 비제로 변환 계수들을 포함하는 경우에만 상기 양자화 파라미터의 변화를 나타내도록 상기 CU 에 대한 하나 이상의 신택스 엘리먼트들을 인코딩하게 하며,
상기 하나 이상의 신택스 엘리먼트들은:
(a) 상기 CU 가 적어도 몇몇 비제로 변환 계수들을 포함할 것이라는 표시 뒤, 그리고
(b) 상기 CU 에 대한 상기 변환 계수들 앞
의 비트 스트림에서 인코딩되고,
상기 명령들은, 상기 프로세서로 하여금, 상기 CU 가 어떠한 변환 계수들도 포함하지 않는다면 상기 하나 이상의 신택스 엘리먼트들을 인코딩하는 것을 회피하게 하는, 비디오 데이터를 인코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체.
제 42 항에 있어서,
상기 CU 는,
상기 쿼드트리 파티셔닝 방식에 따라 상기 블록 사이징된 CU들의 세트로 파티셔닝되는 최대 코딩된 유닛 (LCU); 및
상기 LCU 보다 작은 CU
중 하나를 포함하며,
상기 CU 는 양자화 변화가 허용되는 임계 사이즈를 충족하거나 또는 초과하는, 비디오 데이터를 인코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체.
제 42 항에 있어서,
상기 CU 는 LCU 를 포함하고,
상기 명령들은, 상기 프로세서로 하여금,
(a) 상기 LCU 에 대한 적어도 하나의 코딩된 블록 플래그 (CBF) 뒤;
(b) 상기 LCU 에 대한 임의의 변환 계수들 앞; 그리고
(c) 상기 LCU 의 상기 CU들과 관련된 인코딩 모드들을 정의하는 신택스 엘리먼트들 뒤
의 상기 인코딩된 비트스트림에서 상기 하나 이상의 신택스 엘리먼트들을 인코딩하게 하는, 비디오 데이터를 인코딩하게 하는 명령들을 포함하는 컴퓨터 판독가능 매체.