KR101804652B1 - 스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측 - Google Patents

스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측 Download PDF

Info

Publication number
KR101804652B1
KR101804652B1 KR1020157031507A KR20157031507A KR101804652B1 KR 101804652 B1 KR101804652 B1 KR 101804652B1 KR 1020157031507 A KR1020157031507 A KR 1020157031507A KR 20157031507 A KR20157031507 A KR 20157031507A KR 101804652 B1 KR101804652 B1 KR 101804652B1
Authority
KR
South Korea
Prior art keywords
reference picture
list
candidate
motion vector
prediction unit
Prior art date
Application number
KR1020157031507A
Other languages
English (en)
Other versions
KR20150138352A (ko
Inventor
시아오유 시우
유웬 헤
얀 예
용 헤
Original Assignee
브이아이디 스케일, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 브이아이디 스케일, 인크. filed Critical 브이아이디 스케일, 인크.
Publication of KR20150138352A publication Critical patent/KR20150138352A/ko
Application granted granted Critical
Publication of KR101804652B1 publication Critical patent/KR101804652B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

향상 계층(EL)에서, 시간적 후보(들)는 통합 모드 및 비-통합 모드로 유도할 수 있다. 현재의 예측 유닛(PU)의 참조 인덱스와 동일-위치의 PU의 참조 목록의 선택은, 통합 모드에 대한 EL의 시간적 후보를 구성할 때 공동으로 고려할 수 있다. 이러한 선택은, 움직임 벡터(MV) 스케일링 동작을 회피할 수 있도록 이뤄질 수 있다. 선택한 움직임 벡터 예측 후보는 공간 움직임 벡터 예측 후보의 위치 앞의 위치에 통합 후보 목록에 더할 수 있다. 선택한 움직임 벡터 예측 후보는 공간 움직임 벡터 예측 후보 대신에 통합 후보 목록에 더할 수 있다.

Description

스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측{ENHANCED TEMPORAL MOTION VECTOR PREDICTION FOR SCALABLE VIDEO CODING}
관련 출원에 대한 상호 참조
본 출원은 2013년 4월 2일에 출원된 미국 특허 가출원 제61/807,639호의 이익을 청구하며, 그 내용은 참고로 본 명세서에 전체적으로 병합되어 있다.
비디오 코딩 시스템은 종종, 디지털 비디오 신호를 압축하여 예컨대 소비된 저장 공간을 감소시키며 및/또는 그러한 신호와 관련된 송신 대역폭 소비를 감소시키는데 사용된다. 예컨대, 블록-기반 하이브리드 비디오 코딩 시스템이 광범위하게 배치되어 빈번하게 사용되고 있다.
스케일러빌러티(scalability)는 예컨대 고효율 비디오 코딩(HEVC; high efficiency video coding)과 같은 스케일러블 비디오 코딩 시스템에서 구현할 수 있다. 스케일러빌러티는 하나 이상의 부분 비트 스트림의 송신 및/또는 디코딩을 가능케 할 수 있으며, 부분 비트 스트림의 속도에 비해 실질적으로 높을 수 있는 복구 품질을 보유하면서도 더 낮은 시간적 및/또는 공간적 해상도 및/또는 감소한 충실도를 비디오 서비스에 제공할 수 있다.
그러나 예컨대 시간적 움직임 벡터 예측자 및/또는 참조 목록 선택의 생성과 같은 알려져 있는 스케일러블 비디오 코딩 시스템의 프로세스의 성능은 비효율성을 보일 수 있다.
향상 계층(EL; enhancement layer) 코딩에서, 시간적 후보(들)를 통합 모드 및 비-통합 모드로 유도할 수 있다. 현재의 예측 유닛(PU; prediction unit)의 참조 인덱스 및 동일-위치의 PU의 참조 목록의 선택은, EL의 시간적 후보를 구성할 때 공동으로 고려할 수 있다. 선택(들)은, 움직임 벡터(MV; motion vector) 스케일링 동작을 회피할 수 있도록 이뤄질 수 있다. 여기서 사용된 바와 같이, 코딩은 인코딩과 디코딩을 포함할 수 있다. 선택된 움직임 벡터 예측 후보가 공간적 MV 예측 후보의 위치 앞의 위치에서 통합 후보 목록에 더해질 수 있다. 선택된 MV 예측 후보는 공간적 움직임 벡터 예측 후보 대신에 통합 후보 목록에 더해질 수 있다. 시간적 후보(들)가 EL 비디오 코딩의 후보 목록에 위치할 수 있다. EL 통합 모드에서, 시간적 후보가 공간적 후보 앞에 위치할 수 있다. EL 비-통합 모드에서, 시간적 후보는 EL 비디오 코딩의 후보 목록에 포함될 수 있다.
동일-위치의 PU의 참조 목록은, 움직임 벡터 스케일링 동작이 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 특정한 후보 참조 픽쳐 목록을 사용하는 것과 관련되는지를 기반으로 하여 선택할 수 있다. 예컨대, 동일-위치의 PU와 관련된 후보 참조 픽쳐 목록과 현재의 PU와 관련된 참조 픽쳐 목록을 얻을 수 있다. 후보 참조 픽쳐 목록을 검사하여, 움직임 벡터 스케일링 동작(들)이 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 특정한 후보 참조 픽쳐 목록을 사용하는 것과 관련될 수 있는지를 결정할 수 있으며, 움직임 벡터 예측 참조 픽쳐 목록은 이 검사를 기반으로 하여 후보 참조 픽쳐 목록으로부터 선택할 수 있다.
후보 참조 픽쳐 목록이 주어지면, 움직임 벡터 스케일링 동작은, 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐가 동일-위치의 PU와 관련된 후보 참조 픽쳐 목록에서의 참조 픽쳐로서 현재의 픽쳐 순서 카운트(POC) 값을 갖는 조건에서, 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않을 수 있다고 결정될 수 있다. 움직임 벡터 스케일링 동작은, 후보 참조 픽쳐 목록이 현재의 PU와 관련된 참조 픽쳐 목록과 동일한 참조 목록 인덱스를 갖는 조건에서 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않을 수 있다고 결정할 수 있다. 움직임 벡터 스케일링 동작은, 후보 참조 픽쳐 목록이 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐와 현재의 PU와 관련된 픽쳐 사이의 POC 거리와 동일한, 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하는 조건에서, 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않을 수 있다고 결정할 수 있다. 움직임 벡터 스케일링 동작이 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련될 수 있다는 결정을 기반으로 하여, 다른 후보 참조 픽쳐 목록을 고려할 수 있다.
현재의 PU의 참조 인덱스는, 움직임 벡터 스케일링 동작이 현재의 PU에 대한 움직임 벡터 예측 후보로서 참조 픽쳐 목록에서 특정한 참조 픽쳐를 사용하는 것과 관련될 수 있는지를 기반으로 하여 선택할 수 있다. 예컨대, 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐를 검사하여, 움직임 벡터 스케일링 동작(들)이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 특정한 참조 픽쳐를 사용하는 것과 관련될 수 있는지를 결정할 수 있다. 움직임 벡터 예측 후보는 이 검사를 기반으로 하여 참조 픽쳐 목록에서의 참조 픽쳐로부터 선택할 수 있다. 예컨대, 참조 픽쳐는, 움직임 벡터 스케일링 동작이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련될 수 없다는 결정을 기반으로 하여 벡터 예측 후보로서 선택될 수 있다.
현재의 PU의 참조 픽쳐 목록에서의 주어진 참조 픽쳐에서, 이 참조 픽쳐가 동일-위치의 PU의 참조 픽쳐와 동일한 POC 값을 갖는다면, 움직임 벡터 스케일링 동작은 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련되지 않을 수 있다고 결정될 수 있다. 참조 픽쳐가, 동일-위치의 PU의 참조 픽쳐와 동일-위치의 PU와 관련된 픽쳐 사이의 POC 거리와 동일한, 현재의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는다면, 움직임 벡터 스케일링 동작은 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련되지 않을 수 있다고 결정될 수 있다. 움직임 벡터 스케일링 동작이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련될 수 있다는 결론을 기반으로 하여, 움직임 벡터 예측 후보에 대해 현재의 PU와 관련된 참조 픽쳐 목록으로부터 다른 참조 픽쳐가 고려될 수 있다.
비디오 코딩 방법은, 현재의 PU와 관련되며 목표 참조 픽쳐를 포함하는 참조 픽쳐 목록을 얻는 단계; 현재의 PU와 동일-위치에 있는 동일-위치의 PU와 관련된 다수의 후보 참조 픽쳐 목록을 얻는 단계; 및 목표 참조 픽쳐와 관련된 픽쳐 순서 카운트(POC)를 기반으로 하여 다수의 후보 참조 픽쳐 목록으로부터 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록을 선택하는 단계를 포함할 수 있다. 예컨대, 목표 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐를 포함하는 후보 참조 픽쳐 목록을 움직임 벡터 예측 참조 픽쳐 목록으로서 선택할 수 있다. 예컨대, 목표 참조 픽쳐와 현재의 PU와 관련된 픽쳐 사이의 POC 거리와 동일한, 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하는 후보 참조 픽쳐 목록을 움직임 벡터 예측 참조 픽쳐 목록으로서 선택할 수 있다.
후보 참조 픽쳐 목록은 제1 후보 참조 픽쳐 목록과 제2 후보 참조 픽쳐 목록을 포함할 수 있다. 예컨대, 제1 후보 참조 픽쳐 목록이 목표 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐를 포함하는지를 결정할 수 있다. 움직임 벡터 예측 참조 픽쳐 목록을 이 결정을 기반으로 하여 선택할 수 있다. 제1 후보 참조 픽쳐 목록은, 제1 후보 참조 픽쳐 목록이 목표 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐를 포함하는 조건에서 선택될 수 있으며, 제2 후보 참조 픽쳐 목록은, 제1 후보 참조 픽쳐 목록이 목표 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐를 포함하지 않는 조건에서 이 선택에 고려될 수 있다. 예컨대, 제1 후보 참조 픽쳐 목록이 현재의 PU와 관련된 픽쳐와 목표 참조 픽쳐 사이의 POC 거리와 동일한, 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하는지를 결정할 수 있다. 움직임 벡터 예측 참조 픽쳐 목록을 이 결정을 기반으로 하여 선택할 수 있다. 제1 후보 참조 픽쳐 목록은, 현재의 PU와 관련된 픽쳐와 목표 참조 픽쳐 사이의 POC 거리와 동일한, 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함한다는 조건에서 선택될 수 있으며, 제2 후보 참조 픽쳐 목록은, 현재의 PU와 관련된 픽쳐와 목표 참조 픽쳐 사이의 POC 거리와 동일한, 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하지 않는다는 조건에서 이 선택에 고려될 수 있다. 디폴트 후보 참조 픽쳐 목록은, 후보 참조 픽쳐 목록이 현재의 PU와 관련된 픽쳐와 목표 참조 픽쳐 사이의 POC 거리와 동일한, 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하지 않는다는 조건에서 선택될 수 있다.
현재의 PU와 관련된 참조 픽쳐 목록은 다수의 참조 픽쳐를 포함할 수 있다. 비디오 코딩 방법은, 동일-위치의 PU의 참조 픽쳐와 관련된 POC를 기반으로 하여 현재의 PU와 관련된 참조 픽쳐 목록으로부터 움직임 벡터 예측 후보를 선택하는 단계; 및 선택한 움직임 벡터 예측 후보를 기반으로 하여 움직임 벡터 예측을 실행하는 단계를 포함할 수 있다. 예컨대, 동일-위치의 PU의 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐를 움직임 벡터 예측 후보로서 선택할 수 있다. 예컨대, 동일-위치의 PU의 참조 픽쳐와 동일-위치의 PU와 관련된 픽쳐 사이의 POC 거리와 동일한, 현재의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 움직임 벡터 예측 후보로서 선택할 수 있다.
제1 참조 픽쳐는 현재의 PU와 관련된 참조 픽쳐 목록으로부터 회수할 수 있다. 참조 픽쳐와 현재의 PU와 관련된 픽쳐 사이의 제1 POC 거리와, 동일-위치의 PU의 참조 픽쳐와 동일-위치의 PU와 관련된 픽쳐 사이의 제2 POC 거리를 계산할 수 있다. 움직임 벡터 예측에 대한 움직임 벡터 예측 후보는, 제1 POC 거리와 제2 POC 거리의 비교를 기반으로 하여 선택할 수 있다. 예컨대, 제1 참조 픽쳐는, 제1 POC 거리가 제2 POC 거리와 같다는 조건에서 움직임 벡터 예측 후보로서 선택할 수 있다. 제1 참조 픽쳐와 현재의 PU 사이의 제1 POC 거리는 참조 픽쳐와 관련된 POC 값과 현재의 PU와 관련된 현재의 픽쳐와 관련된 POC 값 사이의 차이를 포함할 수 있다.
비디오 코딩 방법은 현재의 PU와 관련되고 다수의 참조 픽쳐를 포함하는 참조 픽쳐 목록을 얻는 단계; 현재의 PU와 동일-위치인 동일-위치의 PU의 참조 픽쳐와 관련된 픽쳐 순서 카운트(POC)를 기반으로 하여 참조 픽쳐 목록으로부터 움직임 벡터 예측 후보를 선택하는 단계; 및 선택한 움직임 벡터 예측 후보를 기반으로 하여 움직임 벡터 예측을 실행하는 단계를 포함할 수 있다. 예컨대, 동일-위치의 PU의 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐를 움직임 벡터 예측 후보로서 선택할 수 있다.
도 1은 스케일러블 비디오 코딩 계층간 예측 메커니즘의 예를 도시한다.
도 2는 스케일러블 비디오 코딩 계층간 예측 메커니즘의 예를 도시한다.
도 3은 하이브리드 단일 계층 비디오 인코더의 예의 동작을 도시한다.
도 4는 하이브리드 단일 계층 비디오 디코더의 예의 동작을 도시한다.
도 5는 움직임 정보의 공간 후보의 예의 위치 예를 도시한다.
도 6은 시간적 움직임 벡터 예측의 프로세스의 예를 도시하는 흐름도이다.
도 7은 동일-위치의 블록의 참조 픽쳐 목록 선택의 프로세스의 예를 도시하는 흐름도이다.
도 8은 시간적 움직임 벡터 예측기(TVMP) 유도 프로세스의 예를 도시한다.
도 9는 동일-위치의 블록의 참조 목록 선택의 프로세스의 예를 도시하는 흐름도이다.
도 10은 TVMP 유도 프로세스의 예를 도시한다.
도 11은 현재 예측 유닛의 참조 인덱스 선택의 프로세스의 예를 도시하는 흐름도이다.
도 12는 향상 계층 통합 후보 목록의 구성 프로세스의 예를 도시한다.
도 13은 어드밴스 움직임 벡터 예측(AVMP) 후보 목록 구성의 프로세스의 예를 도시하는 흐름도이다.
도 14는 움직임 벡터 예측 후보 목록 구성의 프로세스의 예를 도시하는 흐름도이다.
도 15는 시퀀스 파라미터 설정 신택스의 예를 도시하는 표이다.
도 16은 슬라이스 헤더 신택스의 예를 도시하는 표이다.
도 17a은 하나 이상의 개시된 실시예들이 구현될 수 있는 통신 시스템의 예의 시스템 도를 도시한다.
도 17b은 도 17a에 예시된 통신 시스템 내에서 사용될 수 있는 무선 송수신 유닛(WTRU)의 예의 시스템 도를 도시한다.
도 17c는, 도 17a에 예시된 통신 시스템 내에서 사용될 수 있는 무선 액세스 네트워크의 예 및 코어 네트워크의 예의 시스템 도를 도시한다.
도 17d은, 도 17a에 예시된 통신 시스템 내에서 사용될 수 있는 무선 액세스 네트워크의 예 및 코어 네트워크의 예의 시스템 도를 도시한다.
도 17e은 도 17a에 예시된 통신 시스템 내에서 사용될 수 있는 무선 액세스 네트워크의 예 및 코어 네트워크의 예의 시스템 도를 도시한다.
도 1은, 기본 계층(BL; base layer)과 향상 계층(EL; enhancement layer)을 포함하는 두 개의 계층을 갖는 스케일러블 비디오 코딩 계층간 예측(ILP; inter-layer prediction) 메커니즘의 예를 예시한다. 본 명세서에서 사용될 때, BL은 비디오 스트림의 최저 계층, 향상 계층보다 더 낮은 계층 및/또는 기타를 포함할 수 있다. 기본 계층 및 향상 계층은 상이한 해상도를 갖는 두 개의 인접한 공간적 스케일러블 계층을 나타낼 수 있다. 기본 계층은 향상 계층에서의 픽쳐보다 더 낮은 해상도를 갖는 픽쳐를 포함할 수 있다. 그러한 계층간 예측 메커니즘은 스케일러블 비디오 코딩 시스템의 효율을 개선할 수 있다. 그러한 메커니즘은 스케일러블 비디오 코딩 구조의 다수의 계층에 적용할 수 있다. 기본 또는 향상 계층 중 하나 또는 둘 모두 내에서, 예컨대 표준 H.264 인코더에서처럼 (도 1에서 점선으로 나타낸) 움직임-보상된 예측 및/또는 인트라-예측을 사용할 수 있다. 계층간 예측은, 예컨대 향상 계층의 코딩 효율을 개선하기 위해, 공간적 텍스쳐, 움직임 벡터 예측자, 참조 픽쳐 인덱스들 및/또는 잔류 신호와 같은 기본 계층 정보를 활용할 수 있다. 주어진 향상 계층을 디코딩할 때, 스케일러블 비디오 코딩 시스템은 하나 이상의 더 낮은 계층(예컨대, 현재의 계층의 의존적 계층)으로부터 참조 픽쳐를 충분히 재구성할 수 없을 수 있다.
도 2는 스케일러블 비디오 코딩 계층간 예측 메커니즘을 도시한다. 도 2에 도시한 바와 같이, BL 픽쳐는 EL의 비디오 공간 해상도와 매칭하도록 상향-샘플링될 수 있다. 예컨대 EL 비디오를 예측하기 위해, 하나 이상의 상향-샘플링된 계층간 참조(ILR; inter layer reference) 픽쳐를 참조 픽쳐로서 사용할 수 있다. EL 비디오의 예측은, 예컨대 상향-샘플링된 BL 신호로부터의 움직임-보상된 예측에 의해, EL 신호(예컨대, 현재의 EL 신호) 내의 시간적 예측에 의해 및/또는 시간적 EL 예측 신호에 의한 그러한 상향-샘플링된 BL 신호의 평균에 의해 형성할 수 있다. 이러한 접근법에 따라, 하나 이상의 더 낮은 계층의 픽쳐를 재구성할 수 있다(예컨대, 충분히 재구성할 수 있다). 그러한 메커니즘은 두 개보다 많은 계층을 갖는 스케일러블 코딩을 비디오 코딩하기 위해 배치할 수 있다.
도 3은, 예컨대 하이브리드 비디오 인코딩 시스템과 같은 블록-기반 비디오 인코더의 예를 예시하는 블록도이다. 인코더는 단일-계층 인코더일 수 있다. 인코더는 (인트라 예측으로 지칭할 수 있는) 공간적 예측 및/또는 (인트라 예측 및/또는 움직임 보상된 예측으로 지칭할 수 있는) 시간적 예측을 사용할 수 있어서 입력 비디오 신호를 예측할 수 있다. 인코더는, 속도 및/또는 왜곡 사양의 조합과 같은 참조을 기반으로 하여 예측 형태를 선택할 수 있는 모드 결정 로직을 포함할 수 있다. 인코더는 예측 잔류 신호(예컨대, 입력 신호와 예측 신호 사이의 차이 신호)를 변환 및/또는 양자화할 수 있다. 양자화한 잔류 신호는, 모드 정보(예컨대, 인트라 또는 인터 예측, 움직임 정보, 예측 모드 등)와 함께, 엔트로피 코더에서 더 압축될 수 있으며, 출력 비트 스트림에 패키징될 수 있다. EL 비디오의 경우, EL 인코더는, BL 인코더와 실질적으로 유사한 방식으로 동작할 수 있다. EL 비디오의 예측을 위해 참조 픽쳐를 제공할 수 있는 EL 디코딩된 픽쳐 버퍼(EL DPB)는 EL 참조 픽쳐를 포함할 수 있으며 및/또는 의존 계층의 DPB로부터 생성한 ILR 픽쳐(예컨대, BL DPB의 픽쳐)를 포함할 수 있다.
도시한 바와 같이, 입력 비디오 신호(302)는 블록 단위로 처리할 수 있다. 비디오 블록 유닛은 16×16 픽셀을 포함한다. 그러한 블록 단위를 매크로블록(MB; macroblock)이라고 칭할 수 있다. 고효율 비디오 코딩(HEVC; High Efficiency Video Coding)에서, (예컨대, "코딩 유닛" 즉 CU(coding unit)라고 칭할 수 있는) 확장된 블록 크기를, 고 해상도(예컨대, 1080p 이상) 비디오 신호를 효율적으로 압축하는데 사용할 수 있다. HEVC에서, CU는 64×64 픽셀까지 일 수 있다. CU는 예측 유닛(PU)으로 분할할 수 있으며, 이 유닛에는 별도의 예측 방법을 적용할 수 있다.
입력 비디오 블록(예컨대, MB 또는 CU)의 경우, 공간적 예측(360) 및/또는 시간적 예측(362)이 실행될 수 있다. 공간적 예측(예컨대, "인트라 예측")은 동일한 비디오 픽쳐/슬라이스에서의 이미 코딩된 이웃한 블록으로부터의 픽셀을 사용하여 현재의 비디오 블록을 예측할 수 있다. 공간적 예측은 비디오 신호에 고유한 공간적 중복을 감소시킬 수 있다. 시간적 예측(예컨대, "인터 예측" 또는 "움직임 보상된 예측")은 이미 코딩된 비디오 픽쳐(예컨대, "참조 픽쳐"라고 칭할 수 있음)로부터의 픽셀을 사용하여 현재의 비디오 블록을 예측할 수 있다. 시간적 예측은 비디오 신호에 고유한 시간적 중복을 감소시킬 수 있다. 비디오 블록에 대한 시간적 예측 신호는 하나 이상의 움직임 벡터에 의해 신호화할 수 있으며, 이러한 벡터는 참조 픽쳐에서의 현재의 블록과 그 예측 블록 사이의 움직임 양 및/또는 방향을 나타낼 수 있다. 다수의 참조 픽쳐가 (예컨대, H.264/AVC 및/또는 HEVC의 경우에서와 같이) 지원된다면, 각 비디오 블록마다, 그 참조 픽쳐 인덱스를 또한 전달할 수 있다. 참조 인덱스는, 시간적 예측 신호가, 참조 픽쳐 저장부(364)(예컨대, "디코딩된 픽쳐 버퍼" 또는 DPB로 칭할 수 있음)에서 어떤 참조 픽쳐로부터 오는지를 식별하는데 사용할 수 있다.
공간적 및/또는 시간적 예측 후, 인코더의 모드 결정 블록(380)은 예측 모드를 선택할 수 있다. 예측 블록은 현재의 비디오 블록(316)에서 뺄 수 있다. 예측 잔류 신호는 304에서 변환될 수 있으며 및/또는 306에서 양자화될 수 있다. 양자화된 잔류 계수는 310에서 역 양자화될 수 있으며 및/또는 312에서 역 변환될 수 있어서, 재구성된 잔류 신호를 형성하며, 이러한 재구성된 잔류 신호는 예측 블록(326)에 다시 더해질 수 있어서, 재구성된 비디오 블록을 형성할 수 있다.
디블로킹 필터, 샘플 적응 오프셋 및/또는 적응 루프 필터와 같은 (그러나 이들로 제한되지는 않음) - 인-루프 필터링이, 재구성된 비디오 블록이 참조 픽쳐 저장부(364)에 저장되고 및/또는 장래의 비디오 블록을 코딩하는데 사용되기 전에, 이러한 비디오 블록에 366에서 적용될 수 있다. 출력 비디오 비트 스트림(320)을 형성하기 위해, 코딩 모드(예컨대, 인터 예측 모드 또는 인트라 예측 모드), 예측 모드 정보, 움직임 정보 및/또는 양자화된 잔류 계수를 엔트로피 코딩 유닛(308)에 전달할 수 있어서 압축하고 및/또는 패키징하여 비트 스트림을 형성할 수 있다.
도 4는 블록-기반의 비디오 디코더의 예를 예시하는 블록도이다. 디코더는, 예컨대 도 3에 도시한 인코더에 의해 발생된 비트 스트림을 수신할 수 있으며, 디스플레이될 비디오 신호를 재구성할 수 있다. 비디오 디코더에서, 비트 스트림은 엔트로피 디코더에 의해 파싱될 수 있다. 하나 이상의 잔류 계수는, 예컨대 재구성된 잔류 신호를 얻기 위해, 역 양자화될 수 있고 및/또는 역 변환될 수 있다. 코딩 모드 및/또는 예측 정보는, 예컨대, 공간적 예측 및/도는 시간적 예측을 사용하여 예측 신호를 얻는데 사용될 수 있다. 예측 신호 및 재구성된 잔류 신호는 함께 더해질 수 있어서, 재구성된 비디오를 얻을 수 있다. 재구성된 비디오는, 예컨대 DPB에 저장되기 전에 루프 필터링을 통해 처리될 수 있어서 디스플레이될 수 있고 및/또는 하나 이상의 장래의 비디오 신호를 예측하는데 사용될 수 있다.
비디오 비트 스트림(402)은 엔트로피 디코딩 유닛(408)에서 언패키징 및/또는 엔트로피 디코딩될 수 있다. 코딩 모드 및/또는 예측 정보는 공간적 예측 유닛(460)(예컨대, 인트라 코딩된다면) 및/또는 시간적 예측 유닛(462)(예컨대, 인터 코딩된다면)에 전달될 수 있어서, 예측 블록을 형성할 수 있다. 인터 코딩된다면, 예측 정보는 예측 블록 크기, 하나 이상의 움직임 벡터(예컨대, 움직임의 방향 및 양을 나타낼 수 있음) 및/또는 하나 이상의 참조 인덱스(예컨대, 예측 신호가 어떤 참조 픽쳐로부터 얻게 되는지를 나타낼 수 있음)를 포함할 수 있다.
움직임 보상된 예측은 시간적 PU(462)에 의해 적용될 수 있어서 시간적 예측 블록을 형성할 수 있다. 잔류 신호 변환 계수는 역 양자화 유닛(410) 및 역 변환 유닛(412)에 전달될 수 있어서, 잔류 신호 블록을 재구성할 수 있다. 예측 블록 및 잔류 신호 블록은 426에서 함께 더할 수 있다. 재구성된 블록은 참조 픽쳐 저장부(464)에 저장되기 전에 인-루프 필터링을 겪을 수 있다. 참조 픽쳐 저장부(464)의 재구성된 비디오는 디스플레이 디바이스를 구동하는데 사용될 수 있고 및/또는 장래의 비디오 블록을 예측하는데 사용될 수 있다. 디코딩된 비디오(420)는 디스플레이 상에 디스플레이할 수 있다.
단일 계층 비디오 인코더는 단일 비디오 시퀀스 입력을 받아 단일 계층 디코더에 송신되는 단일 압축된 비트 스트림을 생성할 수 있다. 비디오 코덱은 (예컨대, 위성, 케이블 및 지상 송신 채널을 통해 TV 신호를 전달하는 것과 같은 - 이것들로 제한되지 않음 -) 디지털 비디오 서비스용으로 설계할 수 있다. 이종 환경에서 배치되는 비디오 중심 응용에 의해, 다층 비디오 코딩 기술은 비디오 코딩 표준의 확장으로서 개발될 수 있어서 여러 응용을 가능케 할 수 있다. 예컨대, 스케일러블 비디오 코딩 기술은 하나보다 많은 비디오 계층을 취급하도록 설계될 수 있으며, 여기서 각 계층은 특정한 공간 해상도, 시간 해상도, 충실도 및/또는 뷰의 비디오 신호를 재구성하도록 디코딩될 수 있다. 단일 계층 인코더 및 디코더가 도 3 및 도 4를 참조하여 기재되더라도, 본 명세서에서 기재한 개념은 예컨대 다층 또는 스케일러블 코딩 기술을 위해 다층 인코더 및 디코더를 활용할 수 있다. 도 3 및 도 4의 인코더 및/또는 디코더는 본 명세서에서 기재한 기능 중 어떤 기능을 실행할 수 있다. 예컨대, 도 3 및 도 4의 인코더 및/또는 디코더는 향상 계층 PU의 MV를 사용하여 향상 계층(예컨대, 향상 계층 픽쳐) 상에서 시간적 움직임 벡터 예측(TMVP)을 실행할 수 있다.
도 3 및 도 4에 도시된 바와 같이, 움직임 보상된 예측은 픽쳐 사이의 중복을 활용할 수 있다. 움직임 보상된 예측에서, 인터-코딩된 블록마다, 움직임 정보는 각각의 인터-코딩된 블록마다 하나 이상의 참조 픽쳐의 대응하는 매칭 블록(들)을 추적하는데 사용될 수 있다. 실시예에서, 움직임 정보는 각각의 인터-코딩된 블록마다 하나 이상의 참조 픽쳐의 대응하는 매칭 블록(들)을 추적하는데 사용될 수 있다. 인터-코딩된 블록을 예측 유닛(PU)이라고 칭할 수 있다. 움직임 정보는 현재의 PU와 그 매칭 블록 사이의 수평 및/또는 수직 변위를 기재하는 하나 이상의 움직임 벡터(MV)를 포함할 수 있다. MV는 하나의 참조 픽쳐 인덱스에 대응할 수 있다. 움직임 정보는 하나 또는 두 개의 참조 픽쳐 인덱스를 포함할 수 있다. B 슬라이스의 경우에, 움직임 정보는 어떤 참조 픽쳐 목록이 각각의 참조 인덱스와 관련되는지에 대한 식별을 포함할 수 있다.
스케일러블 비디오 코딩 시스템(예컨대, HEVC-호환 시스템)은 통합 모드 및 비-통합 모드와 같은 PU(예컨대, 각각의 PU)의 움직임 정보를 코딩하기 위한 두 개의 모드를 포함할 수 있다. 두 개의 모두의 그러한 사용은 비트 스트림으로 움직임 정보를 나타내는데 사용된 오버헤드를 감소시킬 수 있다. 통합 모드에서, PU의 움직임 정보는 공간 및 시간 이웃 블록으로부터 (예컨대, 직접적으로 또는 간접적으로) 유도할 수 있다. 경쟁 기반의 방식은 이용 가능한 후보 중에서 최상의 이웃한 블록을 선택하도록 적용할 수 있다. 최상 후보의 인덱스는 디코더에서 PU의 움직임 정보를 재설정하기 위해 전달될 수 있다. 인터-코딩된 PU가 비-통합 모드에서 코딩된다면, MV는 예컨대 어드밴스드 움직임 벡터 예측(AMVP; advanced motion vector prediction) 기술을 사용하여 유도한 MV 예측자를 사용하여 차동적으로 코딩될 수 있다. AMVP 기술의 사용으로 인해 인코더는 공간 및 시간 이웃 후보로부터 MV 예측자를 선택할 수 있다. MV 예측자와 실제 MV 사이의 차이, 및/또는 예측자의 인덱스를 디코더에 송신할 수 있다.
통합 및 비-통합 모드 둘 모두에서의 스케일러블 비디오 코딩의 효율은 시간적 후보를 형성하는 방법을 개선함으로써 향상될 수 있다. 예컨대, 시간적 후보를 형성하는 방법은 두 개의 공간 계층을 갖는 스케일러블 시스템과 기저의 단일-계층 코딩 표준(예컨대, 알려진 HEVC)을 위해 개선될 수 있다. 개선된 시간적 후보 형성은 다른 스케일러블 코딩 시스템에 적용될 수 있으며, 이러한 코딩 시스템은 다른 타입의 기저의 단일-계층 코덱을 사용할 수 있으며, 두 개보다 많은 계층을 가질 수 있으며 및/또는 다른 타입의 스케일러빌러티를 지원할 수 있다.
비디오 코딩 시스템의 예에서, 통합 모드에서의 가능 후보의 세트는 하나 이상의 공간 이웃 후보, 하나 이상의 시간 이웃 후보 및/또는 하나 이상의 생성된 후보를 포함할 수 있다. 도 5는 움직임 정보의 다섯 개의 공간 후보의 예의 위치를 도시한다. 통합 후보의 목록을 구성하기 위해, 다섯 개의 공간 후보를 점검할 수 있으며, 예컨대, 순서, A1, B1, B0, A0 및 B2에 따라 상기 목록에 더해질 수 있다. 공간 위치에 위치한 블록이 인트라-코딩되거나 현재의 슬라이스의 경계 밖에 있다면, 이용 불가능한 것으로서 고려할 수 있다. 예컨대 후보가 동일한 움직임 정보를 갖는 중복된 항목을 목록으로부터 배제할 수 있다.
유효한 공간적 후보를 통합 후보 목록에 삽입한 후, 시간적 후보는 예컨대 TMVP 기술을 사용하여 동일-위치의 참조 픽쳐의 동일-위치의 블록의 움직임 정보로부터 생성할 수 있다. 동일-위치의 참조 픽쳐는 예컨대 그 참조 픽쳐 목록과 목록에서의 그 참조 픽쳐 인덱스를 전달함으로써 비트 스트림으로 (예컨대, 명시적으로 또는 암시적으로) 신호화될 수 있다. 최대 개수의 통합 후보(N)(예컨대, N=5의 디폴트)가 예컨대 슬라이스 헤더에 신호화될 수 있다. 통합 후보(예컨대, 공간적 및/또는 시간적 후보)의 개수가 N보다 크다면, 목록은 제1 N-1개의 공간 후보(들) 및 시간적 후보로 제한될 수 있다. 통합 후보의 개수가 N보다 작다면, 하나 이상의 조합된 후보 및/또는 0 움직임 후보가 예컨대 개수가 N에 도달할 때까지 후보 목록에 더해질 수 있다. 조합된 후보는 공간적 후보와 시간적 후보의 움직임 정보를 조합함으로써 생성될 수 있다.
비-통합 모드에서, 비디오 코딩 시스템의 예는 어드밴스드 움직임 벡터 예측(AMVP)을 실행할 수 있으며, 이로 인해, 현 (예컨대, 현재의) PU가 공간적 및 시간적 후보로부터 그 MV 예측자를 선택할 수 있다. 실시예에서, 공간적 움직임 후보의 선택은, 예컨대 그 이용 가능성에 따라 도 5에 도시한 다섯 개의 공간적 후보 중에서 최대 두 개의 공간적 움직임 후보로 제한될 수 있다. 예시하기 위해, 제1 공간적 후보를 좌측 위치(A1 및 A0)의 세트로부터 선택할 수 있다. 제2 공간적 후보는 상부 위치(B1, B0 및 B2)의 세트로부터 선택할 수 있다. 두 개의 세트에서 나타낸 바와 같은 동일한 순서로 검색을 진행할 수 있다. 후보 목록에의 더함은 이용 가능한 및 고유한 공간적 후보로 제한될 수 있다. 이용 가능한 및 고유한 공간적 후보의 개수가 두 개미만일 때, TMVP 프로세스를 사용하여 생성된 시간적 MV 예측자 후보가 목록에 더해질 수 있다. 목록이 여전히 두 개미만의 후보를 포함한다면, MV 예측자 후보의 개수가 2와 같을 때까지, 0 MV 예측자가 예컨대 반복해서 더해질 수 있다.
본 명세서에서 사용된 바와 같이, currPic는 코딩된 현재의 픽쳐를 포함할 수 있다. currPU는 코딩된 현재의 블록/예측 유닛을 포함할 수 있다. currPU는 코딩된(예컨대, 인코딩되거나 디코딩된) 현재의 픽쳐의 일부분일 수 있다. colPU는 동일-위치의 블록/PU를 포함할 수 있다. colPU는, currPic와 동일-위치인 픽쳐의 일부분일 수 있다. currPic와 동일-위치인 픽쳐는 colPic로 칭할 수 있다. colPic는 currPic와는 상이한 계층 상에 있을 수 있으며, currPic와 시정렬될 수 있다. listCol은, 예컨대 TMVP에 대해 선택될 수 있는 동일-위치의 블록/PU와 관련된 참조 목록, 동일-위치의 블록/PU와 관련된 잠정적으로-선택된/설정된 참조 목록과 같은 동일-위치의 블록/PU와 관련된 참조 목록을 포함할 수 있다. listColDefault는 동일-위치의 블록의 디폴트 참조 목록을 포함할 수 있다. LX는, 예컨대 미리 결정된 참조 픽쳐 목록, 미리 설정된 참조 픽쳐 목록 등과 같이 코딩된 현재의 블록/PU와 관련된 참조 픽쳐 목록을 포함할 수 있다. refPicCol은 동일-위치의 블록과 관련된 잠정적으로-설정된 참조 목록에서의 참조 픽쳐를 포함할 수 있다. colPocDiff는, 동일-위치의 블록 및 동일-위치의 참조 픽쳐와 관련된 참조 목록에서의 참조 픽쳐로부터의 POC 거리를 포함할 수 있다. colPocDiff는, 예컨대, 동일-위치의 블록과 관련된 잠정적으로-설정된 참조 목록에서의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리와 같은, 동일-위치의 참조 픽쳐로부터 동일-위치의 블록과 관련된 참조 목록에서의 참조 픽쳐까지의 POC 거리를 포함할 수 있다. currPocDiff는, 예컨대, 참조 픽쳐 목록에서의 참조 픽쳐와 코딩된 현재의 픽쳐 사이의 POC 거리와 같이, 현재의 블록과 관련된 참조 픽쳐 목록에서의 참조 픽쳐로부터 코딩된 현재의 픽쳐까지의 POC 거리 또는 코딩된 현재의 픽쳐로부터 현재의 블록과 관련된 참조 픽쳐 목록에서의 참조 픽쳐까지의 POC 거리를 포함할 수 있다. refPic는, 코딩된 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐를 포함할 수 있다. refIdxLX는 코딩된 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐의 인덱스를 포함할 수 있다.
도 6은 통합 모드 및/또는 비-통합 모드에 대해 시간적 후보를 생성하는데 사용될 수 있는 TMVP 프로세스의 예를 도시한다. LX와 같은 입력 참조 목록과, 현재의 PU(currPU)의 refIdxLX(예컨대, X는 0 또는 1임)와 같은 참조 인덱스가 주어진다면, 동일-위치의 블록(colPU)은, 동일-위치의 참조 픽쳐에서의 currPU의 영역 바로 외부의 오른쪽-아래 블록의 이용 가능성을 점검함으로써 식별할 수 있다. 오른족-아래 블록이 이용 불가능하다면, 동일-위치의 참조 픽쳐의 currPU의 중앙 위치에서의 블록을 사용할 수 있다.
참조 목록(listCol)은 하나 이상의 참조 픽쳐를 포함할 수 있다. 참조 픽쳐는 참조 인덱스(refIdxLX)를 통해 칭할 수 있다.
colPU의 참조 목록(listCol)은, 예컨대 현재의 픽쳐의 참조 픽쳐의 픽쳐 순서 카운트(POC)를 기반으로 하여 결정할 수 있다. 현재의 픽쳐의 참조 목록은 동일-위치의 참조 픽쳐의 위치를 찾는데 사용될 수 있다. 예컨대, 참조 목록(listCol)은 colPU의 refIdxCol과 같은 동일-위치의 PU와 관련된 참조 인덱스와 mvCol과 같은 대응하는 MV를 회수하는데 사용될 수 있다. (예컨대, refIdxLX로 나타낼 수 있는) currPU의 참조 픽쳐의 장 및/또는 단기간 특징은 (refIdxCol에 의해 나타낸) colPU의 참조 픽쳐의 장 및/또는 단기간 특징에 비교할 수 있다. 두 개의 참조 픽쳐 중 하나가 장기간 픽쳐인 반면, 다른 하나는 단기간 픽쳐라면, 시간적 후보는 이용 불가능하다고 고려될 수 있다. 예컨대, 시간적 후보는 mvCol과 예측된 MV(mvLX) 사이의 큰 POC 거리차로 인해 이용 불가능한 것으로 고려할 수 있다. 두 개의 참조 픽쳐 중 둘 모두가 장기간 픽쳐라면, mvLX는 mvCol인 것으로 설정될 수 있다(예컨대, 직접적으로 설정될 수 있다). 두 개의 참조 픽쳐 중 둘 모두가 단기간 픽쳐라면, mvLX는 mvCol의 스케일링된 버전인 것으로 설정될 수 있다.
도 6에 도시한 바와 같이, currPocDiff는 currPU의 참조 픽쳐와 현재의 픽쳐 사이의 POC 차이로서 표시할 수 있으며, colPocDiff는 colPU의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 차이로서 표시할 수 있다. currPocDiff 및 colPocDiff가 주어진다면, currPU의 예측된 MV(mvLX)가 mvCol로부터 계산할 수 있다. 예컨대, 예측된 MV(mvLX)는 다음과 같이 계산할 수 있다:
Figure 112015106412149-pct00001
(1)
통합 모드에서, 시간적 후보는 참조 픽쳐 목록의 제1 참조 픽쳐로부터 얻을 수 있다. 예컨대, 시간적 후보에 대한 참조 인덱스는 0과 같게 설정될 수 있다. 시간적 후보(refIdxLX)에 대한 참조 인덱스는 0과 같을 수 있어서, 시간적 통합 후보를 목록(LX)의 제1 참조 픽쳐로부터 얻는다.
colPU의 참조 목록(listCol)은, 동일-위치의 참조 픽쳐를 포함하는 currPic의 참조 목록(refPicListCol)뿐만 아니라 현재의 픽쳐(currPic)의 참조 픽쳐의 POC를 기반으로 하여 선택할 수 있으며, refPicListCol은 슬라이스 헤더에서 신호화될 수 있다.
도 7은 listCol과 같은 동일-위치의 PU에 대한 참조 픽쳐 목록을 선택하는 프로세스의 예를 도시한다. currPic의 참조 픽쳐 목록에서의 모든 픽쳐(pic)의 POC 넘버가 currPic의 POC 넘버 이하라면, listCol은 입력 참조 목록(LX)과 같게 설정될 수 있다(예컨대, X는 0 또는 1임). currPic의 적어도 하나의 참조 픽쳐 목록에서의 적어도 하나의 참조 픽쳐(pic)가 currPic의 POC 넘버보다 큰 POC 넘버를 갖는다면, 참조 픽쳐의 목록(listCol)은 currPic의 현재의 픽쳐의 상이한 참조 목록(refPicListCol)으로 설정될 수 있다. 움직임 필드 매핑 기술을 ILR 픽쳐의 움직임 필드를 유도하는데 사용할 수 있다. 참조 인덱스 기반의 SHVC 솔루션은, EL에서의 TMVP 유도를 위해 동일-위치의 참조 픽쳐로서 ILR 픽쳐를 사용할 수 있다. 따라서, refPicListCol은, ILR 픽쳐를 포함한 현재의 픽쳐의 참조 목록과 같게 설정될 수 있다. ILR 픽쳐가 참조 목록(L0 및 L1) 모두에 포함된다면, refPicListCol은 L0으로 설정될 수 있다.
도 2에 도시한 스케일러블 비디오 코딩(예컨대, SHVC)의 인덱스 기반 프레임워크의 예에 따라, ILR 픽쳐는 동일-위치의 참조 픽쳐로서 선택될 수 있어서, 통합 모드 및 비-통합 모드 모두에 대한 시간적 후보를 유도할 수 있다.
예컨대, 통합 모드에서, 참조 인덱스는 0으로 고정될 수 있으며, 대응하는 EL 참조 픽쳐는, ILR 픽쳐의 동일-위치의 블록의 참조 인덱스에 의해 나타낸 참조 픽쳐의 POC와는 상이한 POC를 가질 수 있다. MV 스케일링 동작은 동일-위치의 블록의 MV에 적용할 수 있어서, 현재의 PU의 예측된 MV를 계산할 수 있다. 스케일링 동작은 MV 예측자의 정확도를 감소시킬 수 있으며 EL 비디오의 코딩 효율을 낮출 수 있다. 참조 목록 선택 프로세스는, 예컨대 도 7에 도시된 바와 같이, 동일-위치의 블록의 최상의 참조 목록을 선택하지 않을 수 있으며, 이점은 결국, 불필요할 수 있는, EL 통합 모드에서의 시간적 후보를 구성할 때 MV 스케일링 동작을 초래할 수 있다.
현재의 PU의 참조 인덱스와 동일-위치의 PU의 참조 목록의 선택은, 통합 모드에 대한 EL의 시간적 후보를 구성할 때 공동으로 고려할 수 있어서, MV 스케일링 동작을 회피할 수 있다. 이점은 예측된 MV의 정확도를 개선할 수 있다.
동일-위치의 블록/PU의 참조 목록은, LX와 같이, 코딩될 현재의 PU의 입력 참조 목록에 따라 선택할 수 있다. 도 8은 EL 통합 모드에 대한 TMVP 유도 프로세스의 예를 예시한다. 예시한 TMVP 유도 프로세스는 예컨대 양방향을 사용할 수 있다. 도 8에서, EL 참조 픽쳐는 실전으로 에워싸고, ILR 픽쳐는 점선으로 에워싼다. 시간적 EL 통합 후보(LX)의 입력 참조 목록이 제1 참조 목록이라고 가정할 수 있다. 예컨대, LX를 L0과 같다고 하자. 도 6에 도시한 통합 모드의 TMVP 프로세스의 예에 따라, 입력 참조 인덱스(refIdxLX)는 0으로 설정될 수 있다.
현재의 EL 픽쳐(POC3)에 대해, 참조 목록(L0)에는 두 개의 EL 시간적 참조 픽쳐(POC0 및 POC2)와 하나의 ILR 픽쳐(POC3)가 있을 수 있으며, 참조 목록(L1)에는 두 개의 EL 시간적 참조 픽쳐(POC4 및 POC8)가 있을 수 있다. ILR 픽쳐가 TMVP에 대한 동일-위치의 참조 픽쳐로서 사용됨에 따라, 예컨대 refPicListCol과 같이 EL TMVP의 동일-위치의 픽쳐에 대해 사용된 참조 목록을 L0과 같게 설정할 수 있다. 도 8에서, 현재의 픽쳐(POC3)보다 큰 POC를 갖는 두 개의 EL 시간적 참조 픽쳐(POC4 및 POC8)가 있다. 도 7에 도시한 프로세스에 따라, colPU의 참조 목록(listCol)은 L1과 같을 수 있다. 결국, EL DPB에서 동일한 참조 픽쳐를 나타내는 두 개의 항목 - 각각 하나는 currPU의 목록(LX)으로부터이며 다른 하나는 colPU의 목록(listCol)으로부터 임 - 을 찾을 수 없을 수 있다. colPU의 MV, 즉 myCol은 currPU의 예측된 MV(mvLX)를 생성하도록 스케일링될 수 있다.
동일-위치의 블록의 참조 목록은 적응적으로 선택할 수 있어서, MV 스케일링은 예컨대 EL 통합 모드에 대한 TMVP 유도 동안 생략할 수 있다. 동일-위치의 PU의 참조 목록은, 움직임 벡터 스케일링 동작이 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 특정한 후보 참조 픽쳐 목록을 사용하는 것과 관련될 수 있는지를 기반으로 하여 선택할 수 있다. 동일-위치의 PU와 관련된 후보 참조 픽쳐 목록을 얻을 수 있다. 예컨대, 도 8을 참조하여, L0 및 L1은 동일-위치의 PU와 관련된 후보 참조 픽쳐 목록으로서 얻을 수 있다. L0은 동일-위치의 블록(colPU)의 참조 목록(listCol)으로서 잠정적으로 선택할 수 있다. currPU의 예측된 MV(mvLX)와 colPU의 MV(mvCol)은 POC0을 가르킬 수 있다. 현재의 PU와 관련된 참조 픽쳐 목록을 얻을 수 있다. 예컨대, 도 8을 참조하면, LX는 현재의 PU와 관련된 참조 픽쳐 목록으로서 얻을 수 있다. 도시한 바와 같이, 시간적 EL 통합 후보(LX)의 참조 목록을 L0으로 설정할 수 있다.
후보 참조 픽쳐 목록은, 움직임 벡터 스케일링 동작(들)이 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 특정한 후보 참조 픽쳐를 사용하는 것과 관련될 수 있는지를 결정하도록 검사할 수 있으며, 움직임 벡터 예측 참조 픽쳐 목록이 이 검사를 기반으로 하여 후보 참조 픽쳐 목록으로부터 선택할 수 있다. MV 스케일링 동작을 TMVP에 대해 우회할 때, mvLX의 MV 예측 정확도를 증가시킬 수 있다. 후보 참조 픽쳐 목록은, 움직임 벡터 스케일링 동작(들)이 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않을 수 있다는 결정을 기반으로 하여 움직임 벡터 후보 참조 픽쳐 목록으로서 선택할 수 있다.
움직임 벡터 예측 참조 픽쳐 목록은 POC 거리를 기반으로 하여 선택할 수 있다. 후보 참조 픽쳐 목록이 주어진다면, 움직임 벡터 스케일링 동작은, 후보 참조 픽쳐 목록이 현재의 PU와 관련된 픽쳐와 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐 사이의 POC 거리와 동일한 동일-위치의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하는 조건에서 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐로서 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않을 수 있다고 결정할 수 있다. 잠정적으로 설정된 참조 목록에서의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리와 동일한 현재의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐를 찾는다면, 잠정적으로 설정된 참조 목록은 동일-위치의 블록의 참조 목록으로서 선택할 수 있다. 예컨대, cuffPocDiff와 같은 현재의 픽쳐에 대한 POC 거리가 colPocDiff와 같을 수 있는 cuffPU의 목록(LX)에서 참조 픽쳐를 발견할 때까지, 동일-위치의 블록과 관련된 참조 목록에서의 참조 픽쳐를 검사할 수 있다. 참조 목록에서의 참조 픽쳐는 참조 목록으로부터 유도할 수 있다. 예컨대, 도 7을 참조하여 기재한 선택 프로세스를 사용할 수 있다. 본 명세서에서 기재한 POC 거리 조건을 만족하는 동일-위치의 블록의 참조 픽쳐를 발견하지 못할 수 있다는 조건에서, 도 7에 도시한 프로세스에 따라 유도한 참조 목록을 사용할 수 있다.
도 9는 동일-위치의 블록에 대한 참조 목록 선택의 프로세스의 예를 도시한다. 910에서, 동일-위치의 블록(colPU)의 디폴트 참조 목록(listColDefault)을 얻을 수 있다. 디폴트 참조 목록은 랜덤하게 결정할 수 있거나, 제1 참조 목록으로 설정될 수 있거나, 본 명세서에서 기재한 프로세스를 기반으로 하여 결정할 수 있다. 912에서, 동일-위치의 블록(colPU)의 참조 목록(listCol)은 잠정적으로 디폴트 참조 목록(listColDefault)으로 설정할 수 있다. j와 같은 인덱스를 0으로 설정할 수 있다. 915에서, refPicCol과 같이 잠정적으로 설정된 listCol에서의 참조 픽쳐를 인덱스(j)를 통해 얻을 수 있다. 예컨대, refPicCol은 목록(listCol)에서 j번째 참조 픽쳐로 설정할 수 있다. 참조 픽쳐(refPicCol)와 동일-위치의 참조 픽쳐(colPic) 사이의 POC 거리(예컨대, POC 넘버, 방향 거리 및/또는 절대 거리의 차이)를 계산할 수 있다. 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리를 colPocDiff로 칭할 수 있다.
918에서, 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리는 currPU의 참조 픽쳐 목록(LX)에서의 참조 픽쳐(들)와 동일-위치의 참조 픽쳐 사이의 POC 거리와 비교할 수 있다. currPocDiff와 같이, currPU의 참조 픽쳐 목록(LX)에서의 참조 픽쳐(pic)와 현재의 픽쳐 사이의 POC 거리를 계산할 수 있다. currPU의 참조 픽쳐 목록(LX)에서 하나보다 많은 참조 픽쳐가 있을 때, 참조 픽쳐와 현재의 픽쳐 사이의 POC 거리를 계산할 수 있다. 현재의 PU의 참조 목록에서의 참조 픽쳐 중 하나 이상이 colPocDiff와 동일한 현재의 픽쳐로부터의 거리를 갖는다면, 950에서, 현재 잠정적으로 설정된 listCol은 동일-위치의 블록에 대한 참조 목록으로서 선택할 수 있으며, listCol로 그 다음 단계로 진행할 수 있다. 920에서, 동일-위치의 블록의 참조 목록에서의 그 다음 참조 픽쳐를 식별할 수 있다. 예컨대, 인덱스(j)는 1만큼 증분할 수 있어서, 목록(listCol)에서의 j번째 참조 픽쳐를 그 다음 참조 픽쳐를 참조할 수 있다.
922에서, 동일-위치의 블록의 잠정적으로 설정된 본 참조 목록에서의 참조 픽쳐가 검사되었는지를 결정할 수 있다. 이제 검사되어야 하는 동일-위치의 블록의 잠정적으로 설정된 본 참조 목록에서의 참조 픽쳐(들)가 있다면, 이 목록에서의 그 다음 참조 픽쳐를 915 내지 922에서 검사할 수 있다. 동일-위치의 블록의 참조 목록에서의 참조 픽쳐가 검사되었다면, 동일-위치의 블록과 관련된 그 다음 참조 목록을 고려한다. 예컨대, 인덱스(j)의 값을 동일-위치의 블록의 참조 목록에서의 참조 픽셀의 최대수와 비교할 수 있다. 만약 j가 동일-위치의 블록의 참조 목록에서의 참조 픽쳐의 최대수 미만이라면, 단계(915 내지 922)는, 동일-위치의 블록의 참조 목록에서의 다른 참조 픽쳐가 검사될 수 있도록 반복될 수 있다. j가 동일-위치의 블록의 참조 목록에서의 참조 픽쳐의 최대수 이상이라면, 925 내지 930에서, 동일-위치 블록(colPU)의 참조 목록(listCol)은 동일-위치 블록(colPU)과 관련된 다른 참조 목록에 잠정적으로 설정될 수 있다.
움직임 벡터 스케일링 동작이, 공동 위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후부 참조 픽쳐 목록을 사용하는 것과 관련될 수 있다는 결정을 기반으로 하여, colPU와 관련된 다른 후보 참조 픽쳐 목록을 고려할 수 있다.
도 9에 도시한 바와 같이, 925 내지 930에서, 동일-위치의 블록의 참조 목록은 동일-위치의 블록과 관련된 다른 참조 목록에 잠정적으로 설정될 수 있다. 예컨대, 동일-위치의 블록과 관련된 두 개의 참조 목록(L0 및 L1)일 수 있다. 925에서, 잠정적으로 설정된 본 참조 목록(listCol)이 L0인지를 점검할 수 있다. 아니라면, 928에서, 참조 목록(listCol)은 잠정적으로 L0으로 설정될 수 있다. 잠정적으로 설정된 본 참조 목록(listCol)이 L0이라면, 930에서, 참조 목록(listCol)은 동일-위치와 관련된 다른 참조 목록(L1)으로 잠정적으로 설정될 수 있다. 인덱서(j)는 0으로 재설정될 수 있다.
932 내지 940에서, 잠정적으로 설정된 참조 목록에서의 참조 픽쳐는 예컨대 915 내지 922에 관해 본 명세서에서 기재한 바와 같이 검사할 수 있다. 잠정적으로 설정된 참조 목록에서의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리와 동일한 현재의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐가 발견된다면, 잠정적으로 설정된 참조 목록은 동일-위치의 블록의 참조 목록으로서 선택할 수 있다.
동일-위치의 블록과 관련된 참조 목록에서의 참조 픽쳐를 검사한다면, 그리고 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리와 동일한 현재의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐를 식별하지 않는다면, 동일-위치의 블록의 참조 목록은 동일-위치의 블록과 관련된 디폴트 참조 목록으로 설정할 수 있다. 예컨대, 940에서, 인덱스(j)가 동일-위치의 블록의 참조 목록에서의 참조 픽쳐의 최대수 이상이라면, 동일-위치의 블록(colPU)의 참조 목록(listCol)은 942에서 동일-위치의 블록(colPU)과 관련된 디폴트 참조 목록(listColDefault)으로 설정할 수 있다. 950에서, 프로세스는 동일-위치의 블록의 선택된 참조 목록(listCol)으로 그 다음 단계로 진행할 수 있다.
후보 참조 픽쳐 목록이 주어진다면, 움직임 벡터 스케일링 동작은, 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐가 동일-위치의 PU와 관련된 후보 참조 픽쳐 목록에서의 참조 픽쳐와 동일한 픽쳐 순서 카운트(POC)를 갖는다는 조건에서 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련될 수 있다고 결정할 수 있다. ILR 픽쳐가 EL TMVP의 동일-위치의 참조 픽쳐로서 사용될 대, 후보 참조 픽쳐 목록이 현재의 PU와 관련된 참조 픽쳐 목록과 동일한 참조 픽쳐 인덱스를 갖는 조건에서 동일-위치의 PU와 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않을 수 있다고 결정할 수 있다.
동일-위치의 블록에 대한 참조 목록은 현재의 블록의 입력 참조 목록을 기반으로 하여 선택할 수 있다. 예컨대, 동일-위치의 블록에 대한 참조 목록은 현재의 PU의 입력 참조 목록과 같게 설정할 수 있다. 예컨대, ILR 픽쳐가 EL TMVP의 동일-위치의 참조 픽쳐에 대해 사용된다는 조건에서, 동일-위치의 블록의 참조 목록은 현재의 PU의 입력 참조 목록과 같게 설정할 수 있다. 참조 인덱스-기반의 SHVC 솔루션의 경우, ILR 픽쳐는 EL TMVP 프로세스에 대한 동일-위치의 참조 픽쳐로서 사용할 수 있다. 도 8에 도시한 바와 같이, ILR 픽쳐가 ILR 픽쳐를 제외하고 동일-위치의 픽쳐로서 선택되어 동일-위치의 블록의 위치를 찾을 때, 목록(L0 및 L1)에서 코딩된 현재의 EL 픽쳐의 남은 시간적 참조 픽쳐는 ILR 픽쳐의 POC와 동일한 POC를 가질 수 있다. 이점은, 예컨대 BL 및 EL이 동일한 예측 구조를 가질 때 사실일 수 있다. 이점은 일반적인 응용의 경우일 수 있다. currPU 및 colPU가 TMVP 유도에 대해 동일한 참조 픽쳐 목록을 사용한다면(예컨대, listCol = LX), MV 스케일링 동작은 생략될 가능성이 더욱 있을 수 있다.
예컨대, 본 명세서에서 기재한 예에 따라, 동일-위치의 블록의 유도한 참조 목록이 주어진다면, 현재의 PU의 참조 인덱스는, MV 스케일링이 TMVP에 대해 생략될 수 있도록 조정될 수 있다. 이점은 MV 예측자의 정확도를 개선할 수 있다.
예컨대, 도 6에 도시한 TMVP 유도 프로세스에 따라, 현재의 PU의 참조 목록(LX)에 대한 입력 참조 인덱스(refIdxLX)는 통합 모드에 대해 0으로 설정할 수 있다. 생성된 시간적 통합 후보의 목록(LX)에서의 대응하는 예측 성분은 LX의 제1 항목에서 위치지정된 참조 픽쳐로부터 얻을 수 있다. 목록(LX)에서 0과 같은 refIdxLX은, 현재의 픽쳐로의 POC 거리(currPocDiff)가 목록(listCol)에서의 동일-위치의 블록의 참조 픽쳐와 동일-위치의 픽쳐 자체 사이의 POC 거리(colPocDiff)와 같지 않을 수 있다. 결국, 예컨대, 수학식 (1)에서 표현한 바와 같이, MV 스케일링을 적용할 수 있다.
실시예에서, 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐가, MV 스케일링이 우회될 수 있도록 선택될 수 있다. 예컨대, 현재의 블록/PU와 관련된 참조 픽쳐 목록(LX)에서의 참조 픽쳐(refPic)는, 동일-위치의 블록과 관련된 참조 목록에서의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리(colPocDiff)를 기반으로 하여 선택할 수 있다. 현재의 PU의 참조 픽쳐의 인덱스(refIdxLX)는 목록(LX)에서의 다른 항목으로 조정될 수 있어서, currPocDiff는 colPocDiff와 같을 수 있다.
도 10은, ILR 픽쳐가 코딩된 현재의 픽쳐의 목록(L1)으로 이동할 수 있다는 것을 제외하고, 도 8에 도시한 것과 실질적으로 유사할 수 있는 TVMP 유도 프로세스의 예를 도시한다. 예컨대, refPicListCol은 L1으로 설정할 수 있다. 동일-위치의 블록/PU와 관련된 참조 목록(listCol)은 L0으로 설정할 수 있다. colPU의 MV(mvCol)은, colPU의 목록(listCol)에서의 제2 항목에 위치할 수 있는 참조 픽쳐(POC2)를 가리킬 수 있다. 참조 인덱스(refIdxLX)는 MV 스케일링이 생략될 수 있도록 조정될 수 있다. 도 10에 도시한 예에서, MV 스케일링은, 참조 인덱스(refIdxLX)가 0이며 참조 픽쳐가 POC0일 때 실행될 수 있는 반면; 참조 인덱스(refIdxLX)가 POC2의 참조 픽쳐에 대응할 수 있는 1로 조정될 때, MV 스케일링은 우회할 수 있다.
스케일러블 비디오 코딩 시스템에서, 코딩되고 있는 현재의 EL 픽쳐의 하나 이상의 참조 픽쳐는 장기간 픽쳐일 수 있다. 통합 모드에서 0과 같은 디폴트 참조 인덱스가 장기간 참조 픽쳐에 대응할 수 있는 반면, 동일-위치의 블록의 MV는 단기간 픽쳐를 가리킬 수 있는 가능성이 있을 수 있다. TMVP 후보는 이용 불가능한 것으로 고려할 수 있다. 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐의 인덱스는, 추가 코딩 효율을 달성할 수 있도록 설정할 수 있다.
현재의 PU의 참조 인덱스는, 움직임 벡터 스케일링 동작이 현재의 PU에 대한 움직임 벡터 예측 후보로서 참조 픽쳐 목록에서의 특정한 참조 픽쳐를 사용하는 것과 관련될 수 있는지를 기반으로 하여 선택할 수 있다. 예컨대, 현재의 PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐는, 움직임 벡터 스케일링 동작(들)이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 특정한 참조 픽쳐를 사용하는 것과 관련될 수 있는지를 결정하도록 검사할 수 있다. 움직임 벡터 예측 후보는 이러한 검사를 기반으로 하여 참조 픽쳐 목록에서의 참조 픽쳐로부터 선택할 수 있다. 예컨대, 참조 픽쳐는, 움직임 벡터 스케일링 동작이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련되지 않을 수 있다는 결정을 기반으로 하여 벡터 예측 후보로서 선택할 수 있다.
현재의 PU의 참조 픽쳐 목록에서의 주어진 참조 픽쳐의 경우, 이 참조 픽쳐가 동일-위치의 PU와 관련된 픽쳐와 동일-위치의 PU의 참조 픽쳐 사이의 POC 거리와 동일한 현재의 PU와 관련된 픽쳐로부터의 POC 거리를 갖는다면, 움직임 벡터 스케일링 동작이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련되지 않을 수 있다고 결정할 수 있다.
현재의 블록/PU와 관련된 참조 픽쳐에서의 참조 픽쳐는 동일-위치의 블록과 관련된 참조 목록에서의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리를 기반으로 선택할 수 있다. currPU의 입력 참조 목록(LX)의 참조 픽쳐의 POC를 검사할 수 있으며, 참조 인덱스(refIdxLX)는, MV 스케일링 동작을 우회할 수 있어서(예컨대, 필요로 하지 않을 수 있어서) TMVP 후보를 생성할 수 있는 참조 픽쳐를 나타내는 인덱스와 같게 설정할 수 있다. 예컨대, currPocDiff = colPocDiff를 결과적으로 얻게 할 수 있는 참조 인덱스(refIdxLX)를 선택할 수 있다. 이 조건을 만족하는 LX에서의 참조 인덱스(refIdxLX)가 식별되지 않는다면, 인덱스 값(0)과 같은 디폴트 참조 인덱스를 사용할 수 있다.
도 11은 EL 통합 모드에 대한 TMVP 후보에 대한 참조 인덱스 선택의 프로세스의 예를 도시한다. 도시한 바와 같이, 1110에서, 하나 이상의 값을 얻을 수 있다. 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐의 디폴드 인덱스(refIdxLX)를 얻을 수 있다. 예컨대, 디폴트(refIdxLX)는 0으로 설정할 수 있다. 현재의 블록/PU와 관련된 참조 픽쳐 목록(LX)을 얻을 수 있다. 동일-위치 블록과 동일-위치의 참조 픽쳐와 관련된 참조 목록에서의 참조 픽쳐로부터의 POC 거리(colPocDiff)를 결정할 수 있다. 1120에서, 인덱스(i)와 같은 인덱스는 0으로 설정하는 것과 같이 재설정할 수 있다. 인덱스는 현재의 블록/PU와 관련된 참조 픽쳐 목록(LX)에서의 특정한 참조 픽쳐를 지칭하는데 사용될 수 있다. 1130에서, refPic와 같은, LX 내의 참조 픽쳐를 인덱스(i)를 통해 얻을 수 있다. 코딩된 현재의 픽쳐(currPic)와 참조 픽쳐(refPic) 사이의 POC 거리(예컨대, POC 넘버, 방향 거리 및/또는 절대 거리에서의 차이)를 계산할 수 있다. 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐와 현재의 픽쳐 사이의 POC 거리를 currPocDiff로 칭할 수 있다.
1140에서, 현재의 블록과 관련된 참조 픽쳐 목록에서의 참조 픽쳐와 현재의 픽쳐 사이의 POC 거리는 동일-위치의 블록과 관련된 참조 목록에서의 참조 픽쳐와 동일-위치의 참조 픽쳐 사이의 POC 거리와 비교할 수 있다. 예컨대, currPocDiff가 colPocDiff와 같거나 이와 실질적으로 유사한지를 결정할 수 있다. currPocDiff가 colPocDiff와 같거나 이와 실질적으로 유사하다는 조건에서, 1145에서, 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 참조 픽쳐의 인덱스(refIdxLX)를 인덱스(i)의 현재의 값으로 설정할 수 있다. currPocDiff가 colPocDiff와 같지 않거나 이와 실질적으로 상이하다는 조건에서, 1150에서, 인덱스(i)는 1만큼 증분할 수 있어서, 목록(LX)에서의 i번째 참조 픽쳐는 이 목록에서의 그 다음 참조 픽쳐를 지칭할 수 있다.
움직임 벡터 예측 후보에 대한 현재의 PU와 관련된 참조 픽쳐 목록으로부터 다른 참조 픽쳐를, 움직임 벡터 스케일링 동작이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련될 수 있다는 결정을 기반으로 할 수 있다.
1160에서, currPU의 입력 참조 목록(LX)에서의 참조 픽쳐가 검사되었는지를 결정할 수 있다. 이제 검사해야 하는 currPU의 입력 참조 목록(LX)에 참조 픽쳐(들)가 있다면, 이 목록에서의 그 다음 참조 픽쳐는 1130 내지 1160에서 검사할 수 있다. currPU의 입력 참조 목록(LX)에서의 참조 픽쳐가 검사되었다면, 디폴트 참조 인덱스를 선택할 수 있다. 예컨대, 인덱스(i)의 값은 현재의 블록의 참조 목록에서의 참조 픽쳐의 최대수와 비교할 수 있다. i가 동일-위치의 블록의 참조 목록에서의 참조 값의 최대수 미만이라면, 단계(1130 내지 1160)는, 현재의 블록의 참조 모록에서의 다른 참조 픽쳐를 검사할 수 있도록 반복할 수 있다. i가 현재의 블록의 참조 목록에서의 참조 픽쳐의 최대수 이상이라면, 디폴트 참조 인덱스를 선택할 수 있다. 예컨대, 디폴트 참조 인덱스(0)는 현재의 블록/PU와 관련된 참조 픽쳐 목록(refIdxLX)에서의 참조 픽쳐의 값을 설정하는데 사용될 수 있다. 1170에서, 프로세스는 현재의 블록/PU와 관련된 참조 픽쳐 목록에서의 선택된 참조 픽쳐(예컨대, 참조 인덱스(refIdxLX)와 관련된 참조 픽쳐)로 그 다음 단계로 진행할 수 있다.
현재의 PU의 참조 픽쳐 목록에서의 주어진 참조 픽쳐의 경우, 참조 픽쳐가 동일-위치의 PU의 참조 픽쳐와 동일한 POC 값을 갖는다면, 움직임 벡터 스케일링 동작이 움직임 벡터 예측을 실행하기 위한 움직임 벡터 예측 후보로서 참조 픽쳐를 사용하는 것과 관련되지 않을 수 있다고 결정할 수 있다. 예컨대, refIdxLX는, ILR 픽쳐가 동일-위치의 참조 픽쳐로서 사용될 때 동일-위치의 PU의 참조 픽쳐와 동일한 POC 값을 갖는 참조 픽쳐에 대응하는 인덱스로 설정할 수 있다.
본 명세서에서 기재한 동일-위치의 블록의 참조 목록 선택의 프로세스의 예는 현재의 PU의 참조 인덱스 선택의 프로세스의 예에 대해 독립적으로 실행할 수 있다. 동일-위치의 블록의 참조 목록 선택의 프로세스의 예는, EL 통합 모드에 대한 TMVP 후보를 생성하기 위해 현재의 PU의 참조 인덱스 선택의 프로세스의 예와 결합될 수 있다. 동일-위치의 블록의 참조 목록 선택의 프로세스의 예는 EL 통합 모드에 대한 TMVP 후보를 생성하기 위해 현재의 PU의 참조 인덱스 선택의 프로세스의 예와 결합될 수 있다.
현재의 EL 픽쳐의 움직임 필드와 그 ILR 픽쳐의 움직임 픽쳐 사이에 높은 유사성이 있다면, 시간적 후보는 현재의 PU의 움직임을 예측하는데 공간적 후보보다 더욱 정확할 수 있다. 통합 모드와 비-통합 모드 둘 모두의 후보 목록을 구성하는 순서가 공간적 후보 이후에 시간적 후보를 놓은 것을 포함하는 스케일러블 비디오 코딩 시스템에서, 시간적 후보의 인덱스를 인코딩하기 위한 많은 비트 소비를 초래할 수 있다. 비-통합 모드에서, 시간적 후보는, 유효한 공간적 후보의 수가 2와 같을 때, 후보 목록으로부터 배제할 수 있다.
시간적 후보가 통합 모드에서 EL에 대한 MV 예측을 위해 공간적 후보 앞에 놓을 수 있다. 이점은, 예컨대 현재의 EL 픽쳐의 움직임 필드와 그 대응하는 ILR 픽쳐의 움직임 필드 사이의 상관(예컨대, 높은 상관)으로 인해, 통합 후보 인덱스를 신호화하는 것과 관련된 오버헤드를 절약할 수 있다.
EL 통합 후보 목록은 생성한 시간적 후보를 사용하여 구성할 수 있다. 통합 모드에 대한 후보 목록의 후보 순서의 예에 따라, TMVP 후보는 공간적 후보 뒤에 놓일 수 있다. 동일-위치의 픽쳐가 ILR 픽쳐일 때, 시간적 후보는 공간적 후보보다는 실제 EL MV의 더욱 정확한 MV 예측자를 제공할 수 있다. 실시예에서, 동일-위치의 픽쳐가 ILR 픽쳐인 조건에서, 시간적 후보는 공간적 후보 앞에 놓일 수 있다. TMVP 후보는, TMVP 후보가 EL 통합 모드에 대한 인코더 및/또는 디코더에 의해 선택될 가능성이 더욱 있을 수 있도록, 놓일 수 있다.
통합 후보 목록은, EL 통합 모드의 신호화 오버헤드를 감소시킬 수 있도록 EL 비디오 코딩에 대해 구성할 수 있다. 도 12는 EL 통합 모드에 대한 EL 통합 모드에 대한 EL 통합 후보 목록에 대한 구성 프로세스의 예를 도시한다. TMVP 후보는 통합 후보 목록에서 제1 후보로서 더해질 수 있다. TMVP 후보는, 예컨대 도 7 내지 도 9에 관해 기재한 동일-위치의 블록의 참조 목록 선택의 프로세스의 예에 따라 및/또는 도 6에 도시한 통합 모드의 TMVP 프로세스의 예에 따라 유도할 수 있다.
공간적 후보의 이용 가능성을 점검할 수 있어서 예컨대 순서(A1, B1, B0, A0 및 B2)에 따라 통합 목록에 더할 수 있다. 전지작업(pruning)이 예컨대 각각의 공간적 후보와 TMVP 후보 사이에 실행될 수 있으며, 이 작업은 어떤 중복된 항목을 제거할 수 있어서, 고유한 후보를 보관한다. 하나의 TMVP 후보 및 하나 이상의 공간적 후보(예컨대, 최대 네 개의 공간적 후보)를 통합 목록에 포함할 수 있다. 시간적 및 공간적 후보의 수가 통합 후보의 최대수에 도달하지 않을 때, 양방향-예측성 후보 및/또는 0-움직임 후보를 예컨대 통합 목록의 끝에 더할 수 있다.
시간적 후보는 비-통합 모드에서의 EL에 대한 MV 예측을 위한 EL 비디오 코딩의 후보 목록에 포함시킬 수 있다. MV 예측의 효율성은, 현재의 EL 픽쳐의 움직임 필드와 그 대응하는 ILR 픽쳐의 움직임 필드 사이의 상관(예컨대, 높은 산관)으로 인해, 개선될 수 있다.
스케일러블 비디오 코딩에서의 효율성 개선은, 예컨대 EL 비-통합 모드에 대해, 시간적 움직임 벡터 예측자(TVMP) 또는 시간적 후보가 어떻게 생성되는지에 따라 실현할 수 있다. 비-통합 모드에 대한 현재의 후보 목록에 따라, TMVP 후보는, 이용 가능한 공간 후보의 수가 2미만일 때, AMVP 후보 목록과 같은 움직임 벡터 예측 후보 목록에 포함할 수 있다. 실시예에서, TMVP 후보는, 이용 가능한 공간적 후보의 수가 2미만일 때에만 AMVP 후보 목록에 포함할 수 있다. ILR 픽쳐가 EL TMVP에 대한 동일-위치의 픽쳐로서 사용될 때, 시간적 후보는 공간적 후보보다 더욱 효율적일 수 있다. 실시예에서, ILR 픽쳐가 EL TMVP에 대한 동일-위치의 픽쳐로서 사용된다는 조건에서, TMVP 후보는 AMVP 후보 목록에 포함할 수 있다. 예컨대, ILR 픽쳐가 EL TMVP에 대한 동일-위치의 픽쳐로서 사용된다는 조건에서, TMVP 후보는 이용 가능한 공간적 후보의 수에 상관없이 AMVP 후보 목록에 포함할 수 있다.
AMVP 목록이나 어떤 다른 적절한 후보 목록과 같은 EL 움직임 벡터 예측에 대한 후보 목록은, TMVP 후보가 이 목록에 포함될 수 있도록 구성할 수 있다. 선택한 움직임 벡터 예측 후보는 공간적 움직임 벡터 예측 후보의 위치 앞의 위치에 통합 후보 목록에 더할 수 있다. 선택한 움직임 벡터 예측 후보는 공간적 움직임 벡터 예측 후보 대신에 통합 후보 목록에 더할 수 있다.
도 13은 움직임 벡터 예측 후보 목록 구성 프로세스의 예를 도시한다. 움직임 벡터 예측 후보 목록은 AMVP 후보 목록을 포함할 수 있다. TMVP 후보는, ILR 픽쳐가 EL 코딩에 대한 동일-위치의 픽쳐로서 사용될 때 AMVP 후보 목록의 제1 후보로서 더할 수 있다. TMVP 후보의 이용 가능성에 따라, 예컨대 도 5에 도시한 바와 같이, 다섯 개의 공간적 후보 중 하나나 둘을 선택할 수 있어서 이 목록에 더할 수 있다.
도시된 바와 같이, 1310에서, 시간적 후보가 이용 가능한지를 결정할 수 있다. 시간적 후보가 이용 가능하다는 조건에서, 시간적 후보를 1320에서 움지임 벡터 예측 후보 목록에 더할 수 있다. 1330에서, 공간적 후보(들)를 움직임 벡터 예측 후보 목록에 더할 수 있다. 예컨대, 제1 공간적 후보는 움직임 벡터 예측 후보 목록에서 시간적 후보 이후에 놓일 수 있다. 시간적 후보(들)가 이용 불가능하다는 조건에서, 공간적 후보는 1340에서 AMVP 후보 목록에 더할 수 있다. 1350에서, 움직임 벡터 예측 후보 목록이 가득 차 있는지를 결정할 수 있다. 예컨대, 시간적 및 공간적 후보의 수가 미리 결정된 후보 목록 크기 미만인지를 결정할 수 있다. 미리 결정된 후보 목록 크기는 2, 3, 4 또는 어떤 다른 적절한 수일 수 있다. 움직임 벡터 예측 후보 목록이 가득 차지 않는다는 조건에서, 1360에서, 0 후보를 후보 목록에 더할 수 있다. 1370에서, 이 프로세스는 움직임 벡터 예측 후보 목록으로 그 다음 단계로 진행할 수 있다. 움직임 벡터 예측 후보 목록이 가득 차있다는 조건에서, 이 프로세스는 움직임 벡터 예측 후보 목록으로 그 다음 단계로 진행할 수 있다.
도 12를 참조하면, 제1 공간적 후보는 좌측 위치(A1 및 A0)의 쌍으로부터 선택할 수 있다. 제2 공간적 후보는 상부 위치(B1, B0 및 B2)의 세트로부터 선택할 수 있다. 예에서, 제2 공간적 후보는, TMVP 후보 및 제1 공간 후보 중 하나 또는 둘 모두가 이용 불가능하다면 그리고 그러한 경우에만 후보 목록에 더할 수 있다. 고유한 시간적 및 공간적 후보의 수가 2미만이라면, 0 후보를 목록의 끝에 더할 수 있다.
도 14는 움직임 벡터 예측 후보 목록 구성의 예를 도시한다. 도시한 바와 같이, 1410에서, 공간적 후보(들)를 움직임 벡터 예측 후보 목록에 더할 수 있다. 1420에서, 공간적 후보(들)가 움직임 벡터 예측 후보 목록을 채웠는지를 결정할 수 있다. 예컨대, 공간적 후보(들)의 수가 2미만인지를 결정할 수 있다. 공간적 후보(들)가 움직임 벡터 예측 후보 목록을 채우지 않았다는 조건에서, 1430에서, 시간적 후보(들)가 움직임 벡터 예측 후보 목록의 끝에 더해질 수 있다. 공간적 후보(들)가 움직임 벡터 예측 후보 목록을 채웠다는 조건에서, 시간적 후보(들)가 움직임 벡터 예측 후보 목록의 공간 후보(들) 중 하나 이상을 교체하도록 더해질 수 있다. 예컨대, 제2 공간적 후보는 시간적 후보로 교체할 수 있다. 1450에서, 움직임 벡터 예측 후보 목록이 가득 차있는지를 결정할 수 있다. 예컨대, 시간적 및 공간적 후보의 수가 미리 결정된 후보 목록 크기 미만인지를 결정할 수 있다. 미리 결정된 후보 목록 크기는 2, 3, 4 또는 어떤 다른 적절한 수일 수 있다. 움직임 벡터 예측 후보 목록이 가득 차 있지 않다는 조건에서, 1460에서, 0 후보를 후보 목록에 더할 수 있다. 1470에서, 이 프로세스는 움직임 벡터 예측 후보 목록으로 그 다음 단계로 진행할 수 있다. 움직임 벡터 예측 후보 목록이 가득 차 있다는 조건에서, 1470에서, 이 프로세스는 움직임 벡터 예측 후보 목록으로 그 다음 단계로 진행할 수 있다.
움직임 벡터 예측 후보 목록 구성 프로세스의 예시한 예에 따라, 예컨대 도 5에 도시한 바와 같이, 다섯 개의 공간적 후보 중 두 개의 공간적 후보를 선택할 수 있어서, 이 목록에 더할 수 있다. 제1 공간적 후보가 좌측 위치(A1 및 A0)로부터 얻을 수 있으며, 제2 공간적 후보는 상부 위치(B1, B0 및 B2)로부터 얻을 수 있다. 시간적 후보를 예컨대 이용 가능한 공간적 후보의 수에 상관없이 이 목록에 더할 수 있다. 목록에서 이용 가능한 공간 후보가 없거나 단 하나가 있다면, 시간적 후보를 이 목록의 끝에 더할 수 있다. 이용 가능한 두 개의 공간적 후보가 있다면, 시간적 후보는, 예컨대 마지막 공간적 후보를 교체하여 이 목록에 더할 수 있다. 후보의 수가 2가 될 때까지, 0 후보를 예컨대 반복해서 더할 수 있다.
예컨대, 통합 모드에 대한 동일-위치의 블록에 대한 참조 목록 선택의 프로세스의 예와 비-통합 모드에 대한 AMVP 후보 목록 구성 프로세스의 예와 같이 스케일러블 비디오 코딩 시스템의 코딩 효율을 향상시키기 위한 프로세스의 예는, 예컨대 EL 비디오 인코더 및/또는 디코더에 대한 비트 스트림에서 신호화함으로써, 시퀀스 레벨 및/또는 픽쳐/슬라이스 레벨에서 EL 비디오 코딩에 대해 가능하고 및/또는 불가능할 수 있다.
예에서, 시퀀스 레벨 및/또는 픽쳐/슬라이스 레벨 플래그를 비트 스트림에 포함시킬 수 있어서, TMVP 후보를 생성하기 위한 변경된 프로세스나 TMVP 후보를 생성하기위한 디폴트 프로세스가 EL 통합 모드 및/또는 비-통합 모드에 적용될 것인지를 나타낼 수 있다. 시퀀스 레벨 신호화의 경우, 플래그가, 비디오 파라미터 세트(VPS), 시퀀스 파라미터 세트(SPS) 및/또는 픽쳐 파라미터 세트(PPS)와 같은 하나 이상의 파라미터 세트에 더해질 수 있다.
도 15는 두 개의 플래그를 SPS에 더함으로써 시퀀스 레벨 신호화의 예를 기재하는 표이다. 예컨대, sps_tmvp_merge_modified_flag와 같은 플래그는, 예컨대 본 명세서에서 기재한 통합 모드에 대한 동일-위치의 블록에 대한 참조 목록 선택의 프로세스(들)의 예와 같은 변경된 통합 TMVP 후보 생성 프로세스가 현재의 계층의 슬라이스를 인코딩하는데 적용될 것인지를 나타낼 수 있다. sps_tmvp_merge_modified_flag를 1로 설정하면, 변경된 통합 TMVP 후보 생성 프로세스가 nuh_layer_id에 의해 식별한 현재의 계층에서의 슬라이스를 인코딩하는데 적용될 것임을 명시할 수 있다. sps_tmvp_merge_modified_flag를 0으로 설정하면, nuh_layer_id에 의해 식별한 현재의 계층에서의 현재의 슬라이스를 인코딩하는데 사용된 통합 TMVP 후보 생성 프로세스가 변경되지 않음을 명시할 수 있다. sps_tmvp_merge_modified_flag가 없을 때(예컨대, 신호화되지 않을 때), 이것이 0인 것으로 유추할 수 있다.
예컨대, sps_tmvp_merge_modified_flag와 같은 파라미터는 예컨대 본 명세서에서 기재한 비-통합 모드에 대한 움직임 벡터 예측 후보 목록 구성 프로세스(들)의 예와 같은 변경된 비통합 TMVP 후보 생성 프로세스가 nuh_layer_id에 의해 식별한 현재의 계층에서의 슬라이스를 인코딩하는데 적용될 것인지를 나타내기 위해 신호화 시에 포함시킬 수 있다. sps_tmvp_merge_modified_flag을 1로 설정하는 것은, 예컨대 비-통합 모드에 대한 AMVP 후보 목록 구성 프로세스의 예와 같은 변경된 비통합 TMVP 후보 생성 프로세스가 nuh_layer_id에 의해 식별한 현재의 계층에서의 슬라이스를 인코딩하는데 적용될 것임을 명시할 수 있다. sps_tmvp_merge_modified_flag를 0으로 설정하는 것은, nuh_layer_id에 의해 식별한 현재의 계층에서의 슬라이스를 인코딩하는데 사용한 비통합 TMVP 후보 생성 프로세스가 변경되지 않음을 명시할 수 있다. sps_tmvp_merge_modified_flag가 없을 때(예컨대, 신호화되지 않을 때), 이것은 0인 것으로 유추할 수 있다.
도 16은 두 개의 플래그를 슬라이스 헤더에 더함으로써 픽쳐 및/또는 슬라이스 레벨 신호화의 예를 기재하는 표이다. 예컨대, slice_tmvp_merge_modified_flag와 같은 파라미터는, 예컨대 본 명세서에서 기재한 통합 모드에 대한 동일-위치의 블록에 대한 참조 목록 선택의 프로세스(들)과 같은 변경된 통합 TMVP 후보 생성 프로세스가 현재의 슬라이스를 인코딩하도록 적용될지를 나타내도록 신호화될 수 있다. slice_tmvp_merge_modified_flag를 1이 되게 설정하는 것은, 변경된 통합 TMVP 후보 생성 프로세스가 현재의 슬라이스를 인코딩하도록 적용됨을 명시할 수 있다. slice_tmvp_merge_modified_flag를 0이 되게 설정하는 것은, 현재의 슬라이스를 인코딩하는데 사용되는 통합 TMVP 후보 생성 프로세스가 변경되지 않음을 명시할 수 있다. slice_tmvp_merge_modified_flag가 없을 때(예컨대, 신호화되지 않을 때), 이것은 0인 것으로 유추할 수 있다.
slice_tmvp_non_merge_modified_flag와 같은 파라미터가, 예컨대 본 명세서에서 기재한 비-통합 모드에 대한 움직임 벡터 예측 후보 목록 구성 프로세스(들)의 예와 같은 변경된 비통합 TMVP 후보 생성 프로세스가 현재의 슬라이스를 인코딩하도록 적용될지를 나타내도록 신호화될 수 있다. slice_tmvp_non_merge_modified_flag가 1이 되게 설정하는 것은, 변경된 비통합 TMVP 후보 생성 프로세스가 현재의 슬라이스를 인코딩하도록 적용될 것임을 명시할 수 있다. slice_tmvp_non_merge_modified_flag가 0이 되게 설정하는 것은, 비통합 TMVP 후보 생성 프로세스가 변경되지 않음을 명시할 수 있다. slice_tmvp_non_merge_modified_flag가 없을 때(예컨대, 신호화되지 않을 때), 이것은 0인 것으로 유추할 수 있다.
아래는, 예컨대, 통합 모드에 대한 동일-위치의 블록에 대한 참조 목록 선택의 프로세스의 예와 비-통합 모드에 대한 AMVP 후보 목록 구성 프로세스의 예와 같은 스케일러블 비디오 코딩 시스템의 코딩 효율을 향상시키기 위한 전술한 프로세스의 예의 구현의 예이다.
통합 모드에 대한 루마(luma) 움직임 벡터에 대한 유도 프로세스
이 프로세스는 merge_flag[xPb][yPb]가 1이 될 때만 불러오며, (xPb, yPb)는 현재의 픽쳐의 상단-좌측 루마에 대한 현재의 루마 예측 블록의 상단-좌측 샘플을 명시한다.
이 프로세스로의 입력은 다음과 같다:
- 현재의 픽쳐의 상단-좌측 루마 샘플에 대한 현재의 루마 코딩 블록의 상단-좌측 샘플의 루마 위치(xCb, yCb),
- 현재의 픽쳐의 상단-좌측 루마 샘플에 대한 현재의 루마 예측 블록의 상단-좌측 샘플의 루마 위치(xPb, yPb),
- 현재의 루마 코딩 블록의 크기를 명시하는 변수(nCbS),
- 루마 예측 블록의 폭과 높이를 명시하는 두 개의 변수(nPbW 및 nPbH),
- 현재의 코딩 유닛 내에서 현재의 예측 유닛의 인덱스를 명시하는 변수(partIdx).
이 프로세스의 출력은 다음과 같다:
- 루마 움직임 벡터(mvL0 및 mvL1),
- 참조 인덱스(refIdxL0 및 refIdxL1),
- 예측 목록 활용 플래그(predFlagL0 및 predFlagL1).
위치(xOrigP, yOrigP)와 변수(nOrigPbW 및 nOrigPbH)는 (xPb, yPb), nPbW, 및 nPbH의 값을 다음과 같이 저장하도록 유도한다:
(xOrigP, yOrigP)은 (xPb, yPb)가 되게 설정한다
nOrigPbW = nPbW
nOrigPbH = nPbH
Log2ParMrgLevel이 2보다 크고 nCbS가 8이 될 때, (xPb, yPb), nPbW, nPbH, 및 partIdx는 다음과 같이 변경된다:
(xPb, yPb) = (xCb, yCb)
nPbW = nCbS
nPbH = nCbS
partIdx = 0
주의 - Log2ParMrgLevel이 2보다 크고 nCbS가 8이 될 때, 현재의 코딩 유닛의 예측 유닛이 단일 통합 후보 목록을 공유하며, 이 목록은 2N×2N 예측 유닛의 통합 후보 목록과 같다.
움직임 벡터(mvL0 및 mvL1), 참조 인덱스(refIdxL0 및 refIdxL1), 및 예측 활용 플래그(predFlagL0 및 predFlagL1)는 다음 순서의 단계에 의해 유도한다:
1. 이웃한 예측 유닛 파티션으로부터 후보를 통합하기 위한 유도 프로세스를 루마 코딩 블록 위치(xCb, yCb), 코딩 블록 크기(nCbS), 루마 예측 블록 위치(xPb, yPb), 루마 예측 블록 폭(nPbW), 루마 예측 블록 높이(nPbH), 및 파티션 인덱스(partIdx)를 입력으로 하여 불러오며, 출력은 이용 가능성 플래그(availableFlagA0, availableFlagA1, availableFlagB0, availableFlagB1, 및 availableFlagB2), 참조 인덱스(refIdxLXA0, refIdxLXA1, refIdxLXB0, refIdxLXB1, 및 refIdxLXA2), 예측 목록 활용 플래그(predFlagLXA0, predFlagLXA1, predFlagLXB0, predFlagLXB1, 및 predFlagLXB2) 및 움직임 벡터(mvLXA0, mvLXA1, mvLXB0, mvLXB1, 및 mvLXB2)이며 X는 0 또는 1이다.
2. 시간적 통합 후보에 대한 참조 인덱스(refIdxLXCol)는 - X는 0 또는 1임 - 0이 되게 설정된다.
3. nuh_layer_id가 0이 되면, 플래그 통합 EL은 0으로 설정하며, 그 밖에는 1로 설정한다.
4. 시간 루마 움직임 벡터 예측에 대한 유도 프로세스는 루마 위치(xPb, yPb), 루마 예측 블록 폭(nPbW), 루마 예측 블록 높이(nPbH), 변수(mergeEL) 및 변수(refIdxL0Col)를 입력으로 하여 불러오며, 출력은 이용 가능성 플래그(availableFlagL0Co1), 변경된 refIdxL0Col 및 시간 움직임 벡터(mvL0Col)이다. 변수(availableFlagCol, predFlagL0Col 및 predFlagL1Col)는 다음과 같이 유도한다:
availableFlagCol = availableFlagL0Col
predFlagL0Col = availableFlagL0Col
predFlagL1Col = 0
5. slice_type가 B가 될 때, 시간적 루마 움직임 벡터 예측에 대한 유도 프로세스는 루마 위치(xPb, yPb), 루마 예측 블록 폭(nPbW), 루마 예측 블록 높이(nPbH), 변수(mergeEl) 및 변수(refIdxL1Col)를 입력으로 하여 불러오며, 출력은 이용 가능성 플래그(availableFlagL1Col), 변경된 refIdxL0Col 및 시간 움직임 벡터(mvL0Col)이다. 변수(availableFlagCol 및 predFlagL0Col)는 다음과 같이 유도한다:
availableFlagCol = availableFlagL0Col∥availableFlagL1Col
predFlagL1Col = availableFlagL1Col
6. 통합 후보 목록(mergeCanList)은 다음과 같이 구성된다:
- mergeEL이 0이 되면, mergeCandList는 다음과 같이 구성된다.
i = 0
if(availableFlagA1)
mergeCandList[i++] = A1
if(availableFlagB1)
mergeCandList[i++] = B1
if(availableFlagB0)
mergeCandList [i++] = B0
if(availableFlagA0)
mergeCandList[i++] = A0
if(availableFlagB2)
mergeCandList[i++] = B2
if(availableFlagCol)
mergeCandList[i++] = Col
- 그 밖에, mergeCandList는 다음과 같이 구성된다.
i = 0
if(availableFlagCol)
mergeCandList[i++] = Col
if(availableFlagA1 && A1이 Col이 아니다)
mergeCandList[i++] = A1
if(availableFlagB1 && B1이 Col이 아니다)
mergeCandList[i++] = B1
if(availableFlagBO && BO이 Col이 아니다)
mergeCandList[i++] = BO
if(availableFlagAO && AO이 Col이 아니다)
mergeCandList[i++] = AO
if(availableFlagB2 && B2가 Col이 아니다)
mergeCandList[i++] = B2
7. 변수(numCurrMergeCand 및 numOrigMergeCand)는 mergeCandList에서 통합 후보의 수와 같게 설정한다.
8. slice_type이 B가 될 때, 결합된 양방향-예측 통합 후보에 대한 유도 프로세스는, mergeCandList, 참조 인덱스(refIdxL0N 및 refIdxL1N), 예측 목록 활용 플래그(predFlagL0N 및 predFlagL1N), megerCandList에서 모든 후보(N)의 움직임 벡터(mvL0N 및 mvL1N), numCurrMergeCand 및 numOringMergeCand을 입력으로 하여 불러오며, 출력은 mergeCandList, numCurrMergeCand, 참조 인덱스(refIdxL0combCandk 및 refIdxL1combCandk), 예측 목록 활용 플래그(predFlagL0combCandk 및 predFlagL1combCandk), 및 mergeCandList에 더해지는 움직임 벡터(mvL0combCandk 및 mvL1combCandk)에 할당된다. 더해진 후보의 수(numCombMergeCand)는 (numCurrMergeCand - numOrigMergeCand)가 되게 설정한다. numCombMergeCand가 0보다 클 때, k의 범위는 0에서부터 numCombMergeCand-1까지이다(경계값 포함).
9. 0 움직임 벡터 통합 후보에 대한 유도 프로세스는, mergeCandList, 참조 인덱스(refIdxL0N 및 refIdxL1N), 예측 목록 활용 플래그(predFlagL0N 및 predFlagL1N), numCurrMergeCand에서의 모든 후보(N)의 움직임 벡터(mvL0N 및 mvL1N), 및 numCurrMergeCand를 입력으로 하여 불러오며, 출력은 mergeCandList, numCurrMergeCand, 참조 인덱스(refIdxL0zeroCandm 및 refIdxL1zeroCandm), 예측 목록 활용 플래그(predFlagL0zeroCandm 및 predFlagL1zeroCandm), 및 mergeCandList에 더해진 모든 새로운 후보(zeroCandm)의 움직임 벡터(mvL0zeroCandm 및 mvL1zeroCandm)에 할당된다. 더해진 후보의 수(numZeroMergeCand)는 (numCurrMergeCand - numOrigMergeCand - numCombMergeCand)가 되게 설정한다. numZeroMergeCand가 0보다 클 때, m의 범위는 0에서부터 numZeroMergeCand-1이다(경계값 포함).
10. 다음의 할당이 이뤄지며, N은 통합 후보 목록(mergeCandList에서의 위치(merge_idx[xOrigP][yOrigP]에서의 후보이며(N = mergeCandList[merge_idx[xOrigP][yOrigP]]) 및 X는 0 또는 1로 교체한다:
mvLX[0] = mvLXN[0]
mvLX[1] = mvLXN[1]
refIdxLX = refIdxLXN
predFlagLX = predFlagLXN
11. predFlagL0이 1이 되고 predFlagL1이 1이 되며, (nOrigPbW + nOrigPbH)는 12가 되며, 다음이 적용된다:
refIdxL1 = -1
predFlagL1 = 0
루마 움직임 벡터 예측에 대한 유도 프로세스
이 프로세스로의 입력은 다음과 같다:
- 현재의 픽쳐의 상단-좌측 루마 샘플에 대한 현재의 루마 코딩 블록의 상단-좌측 샘플의 루마 위치(xCb, yCb),
- 현재의 루마 코딩 블록의 크기를 명시하는 변수(nCbS),
- 현재의 픽쳐의 상단-좌측 루마 샘플에 대한 현재의 루마 예측 블록의 상단-좌측 샘플의 루마 위치(xPb, yPb),
- 루마 예측 블록의 폭과 높이를 명시하는 두 개의 변수(nPbW 및 nPbH),
- 현재의 예측 유닛 파티션의 참조 인덱스(refIdxLX) - X는 0 또는 1임 - ,
- 현재의 코딩 유닛 내에서 현재의 예측 유닛의 인덱스를 명시하는 변수(partIdx).
이 프로세스의 출력은 움직임 벡터(mvLX)의 예측(mvpLX)이며, X는 0 또는 1이다.
움직임 벡터 예측자(mvpLX)는 다음의 순서의 단계로 유도한다:
1. 이웃한 예측 유닛 파티션으로부터의 움직임 벡터 예측자 후보에 대한 유도 프로세스는, 루마 코딩 블록 위치(xCb, yCb), 코딩 블록 크기(nCbS), 루마 예측 블록 위치(xPb, yPb), 루마 예측 블록 폭(nPbW), 루마 예측 블록 높이(nPbH), refIdxLX - X는 0 또는 1 - , 및 파티션 인덱스(partIdx)를 입력으로 하여, 그리고 이용 가능성 플래그(availableFlagLXN) 및 움직임 벡터(mvLXN) - N은 A 또는 B로 교체함 - 를 출력으로 하여 불러온다.
2. availableFlagLXA 및 availableFlagLXB 둘 모두가 1이 되며, mvLXA이 mvLXB가 아니라면, availableFlagLXCol은 0이 되게 설정한다. 그렇지 않다면, 시간적 루마 움직임 벡터 예측에 대한 유도 프로세스는, 루마 예측 블록 위치(xPb, yPb), 루마 예측 블록 폭(nPbW), 루마 예측 블록 높이(nPbH), 및 1이 되게 설정된 플래그(mergeEL) 그리고 refIdxLX - X는 0 또는 1임 - 를 입력으로 하여 그리고 이용 가능성 플래그(availableFlagLXCol), 변경된 refIdxLX 및 시간적 움직임 예측자(mvLXcOL)인 출력으로 불러온다.
3. nuh_layer_id가 0이 된다면 플래그(amvpEL)는 0으로 설정하며, 그렇지 않다면 1로 설정한다.
4. 움직임 벡터 예측자 후보 목록(mvpListLX)은 다음과 같이 구성한다:
- If amvpEL이 0이라면,
i = 0
if(availableFiagLXA)
mvpListLX [i++] = mvLXA
if(availableFlagLXB)
mvpListLX [i++] = mvLXB
if(availableFlagLXCol)
mvpListLX[i++] = mvLXCol
- 그렇지 않다면,
i = 0
if(availableFlagLXCol)
mvpListLX [i++] = mvLXCol
if(availableFiagLXA && A이 Col이 아니라면)
mvpListLX [i++] = mvLXA
if(availableFlagLXB && B이 Col이 아니라면)
mvpListLX [i++] = mvLXB
- 그렇지 않다면,
i = 0
if(availableFiagLXA)
mvpListLX [i++] = mvLXA
if(availableFlagLXB)
mvpLisiLX[i++] = mvLXB
if(availableFlagLXCol)
if(availableFlagLXA && ! availableFlagLXB && Col이 A가 아니라면)
imvpListLX [i++] = mvLXCol
else if(! availableFlagLXA && availableFlagLXB && Col이 B가 아니라면)
mvpListLX [i++] = mvLXCol
if(availableFlagLXA && availableFlagLXB && Col이 A가 아니라면 && Col이 B가 아니라면)
mvpListLX [1] = mvLXCol
5. 움직임 벡터 예측자 목록은 다음과 같이 변경한다:
- mvLXA 및 mvLXB가 동일한 값을 가질 때, mvLXB는 목록에서 제거하고, 변수(numMvpCandLX)는 mvpListLX 내의 요소의 수가 되게 설정한다.
- numMvpCandLX가 2미만일 때, 다음의 관계가 numMvpCandLx가 2가 될 때까지 반복해서 적용된다:
mvpListLX[numMvpCandLX][0] = 0
mvpListLX[numMvpCandLX][1] = 0
numMvpCandLX = numMvpCandLX +1
- numMvpCandLX가 2보다 클 때, 움직임 벡터 예측자 후보(mvpListLX[idx]) - idx는 1보다 큼 - 는 목록에서 제거한다.
mvpListLX[mvp_lX_flag[xPb][yPb]의 움직임 벡터는 mvpLX에 할당된다.
시간적 루마 움직임 벡터 예측에 대한 유도 프로세스
이 프로세스에 대한 입력은 다음과 같다:
- 현재의 픽쳐의 상단-좌측 루마 샘플에 대한 현재의 루마 예측 블록의 상단-좌측 샘플을 명시하는 루마 위치(xPb, yPb),
- 루마 예측 블록의 폭과 높이를 명시하는 두 개의 변수(nPbW 및 nPbH),
- 플래그(mergeEL),
- 참조 인덱스(refIdxLX) - X는 0 또는 1임 - .
이 프로세스의 출력은 다음과 같다:
- 움직임 벡트 예측(mvLXCol),
- 이용 가능성 플래그(availableFlagLXCol),
- 변경된 참조 인덱스(refIdxLX).
변수(currPb)는 루마 위치(xPb, yPb)에서의 현재의 루마 예측 블록을 명시한다. 변수(mvLXCol 및 availableFlagLXCol) 및 변경된 refIdxLX는 다음과 같이 유도한다:
- slice_temporal_mvp_enabled_flag가 0이 되면, mvLXCol의 두 성분은 0이 되게 설정하고, availableFlagLXCol은 0이 되게 설정한다.
- 그렇지 않다면, 다음 순서의 단계를 적용한다:
1. slice_type, collated_from_10_flag, 및 collated_ref_idx의 값에 따라, 병치된 픽쳐를 명시하는 변수(colPic)는 다음과 같이 유도한다:
- slice_type이 B가 되고, collocated_from_10_flag가 0이면, colPic는 RefPicList1[collocated_ref_idx]가 되게 설정된다.
- 그렇지 않다면(slice_type이 B가 되고, collocated_from_10_flag가 1이거나 slice_type이 P이면), colPic는 RefPicList0[collocated_ref_idx]가 되게 설정된다.
2. 하부 오른쪽 병치된 움직임 벡터는 다음과 같이 유도한다:
xColBr = xPb + nPbW
yColBr = yPb + nPbH
- yPb >> CtbLog2SizeY가 yColBr >> CtbLog2SizeY이면, yColBr은 pic_height_in_luma_samples미만이며, xColBr은 pic_width_in_luma_samples미만이고, 다음을 적용한다:
- 변수(colPb)는 colPic에 의해 명시한 병치된 픽쳐 내부에서 ((xColBr >> 4) <<4, (yColBr >> 4) << 4)에 의해 주어진 변경된 위치를 포함하는 루마 예측 블록을 명시한다.
- 루마 위치(xColPb, yColPb)가, colPic에 의해 명시한 병치된 픽쳐의 상부-좌측 루마 샘플에 대한 colPb에 의해 명시한 병치된 루마 예측 블록의 상부-좌측 샘플이 되게 설정한다.
- 병치된 움직임 벡터에 대한 유도 프로세스는, currPb, colPic, colPb, (xColPb, yColPb) 및 mergeEl과 refIdxLX를 입력으로 하여 불러내며, 출력은 myLXCol, availableFlagLXCol 및 refIdxLX의 변경된 버전에 할당된다.
- 그렇지 않다면, mvLXCol의 두 성분은 0이 되게 설정되고 available FlagLXCol은 0이 되게 설정한다.
3. availaleFlagLXCol이 0일 때, 중앙의 병치된 움직임 벡터는 다음과 같이 유도한다:
xColCtr = xPb + (nPbW >> 1)
yColCtr = yPb + (nPbH >> 1)
- 변수(colPb)는 colPic 내부에서 ((xColCtr >> 4) <<4, (yColCtr >> 4) << 4)에 의해 주어진 변경된 위치를 포함하는 루마 예측 블록을 명시한다.
- 루마 위치(xColPb, yColPb)가, colPic에 의해 명시한 병치된 픽쳐의 상부-좌측 루마 샘플에 대한 colPb에 의해 명시한 병치된 루마 예측 블록의 상부-좌측 샘플이 되게 설정한다.
병치된 움직임 벡터에 대한 유도 프로세스는, currPb, colPic, colPb, (xColPb, yColPb) 및 mergeEl과 refIdxLX를 입력으로 하여 불러내며, 출력은 myLXCol, availableFlagLXCol 및 refIdxLX의 변경된 버전에 할당된다.
병치된 움직임 벡터에 대한 유도 프로세스
이 프로세스에 대한 입력은 다음과 같다:
- 현재의 예측 블록을 명시하는 변수(currPb),
- 병치된 픽쳐를 명시하는 변수(colPic),
- colPic에 의해 명시한 병치된 픽쳐 내부에서 병치된 예측 블록을 명시하는 변수(colPic),
- colPic에 의해 명시한 병치된 픽쳐의 상부-좌측 루마 샘플에 대한 colPb에 의해 명시한 병치된 루마 예측 블록의 상부-좌측 샘플을 명시하는 루마 위치(xColPb, yColPb),
- 플래그(mergeEL),
- 참조 인덱스(refIdxLX) - X는 0 또는 1임 - .
이 프로세스의 출력은 다음과 같다:
- 움직임 벡터 예측(mvLXCol),
- 이용 가능성 플래그(availableFlagLXCol),
- 변경된 참조 인덱스(refIdxLX).
변수(currPic)는 현재의 픽쳐를 명시한다.
어레이(predFlagLXcOL[x][y], mvLXCol[x][y], 및 refIdxLXCol[x][y]는 colPic, predFlagLXcOL[x][y], mvLXCol[x][y], 및 refIdxLXCol[x][y]에 의해 명시한 병치된 픽쳐의 대응하는 어레이가 되게 설정하며, X는 이 프로세스를 불러내는 X의 값이다.
변수(mvLXCol 및 availableFlagLXCol)는 다음과 같이 유도한다:
- colPb가 인트라 예측 모드로 코딩된다면, myLXCol의 두 성분은 0이 되게 설정하고 availableFlagLXCol은 0이 되게 설정된다.
- 그렇지 않다면, 움직임 벡터(mvCol), 참조 인덱스(refIdxCol) 및 참조 목록 식별자(ListCol)은 다음과 같이 유도한다:
- predFlagLOCol[xColPb][yColPb]이 0이라면, mvCol, refIdxCol, 및 listCol은 각각 mvLlCol[xColPb][yColPb], refIdxLlCol[xColPb][yColPb], 및 L1이 되게 설정한다.
- 그렇지 않다면, predFlagLOCol[xColPb][yColPb]가 1이고, predFlagLlCol[xColPb][yColPb]가 0이라면, mvCol, refIdxCol, 및 listCol은 각각 mvL0Col[xColPb][yColPb], refIdxL0Col[xColPb][yColPb], and L0이 되게 설정한다.
- 그렇지 않다면(predFlagLOCol[xColPb][yColPb]이 1이고 predFlagLl Col[xColPb][yColPb]이 1이면), 다음의 할당이 이뤄진다:
- DiffPicOrderCnt(aPic, currPic)가 현재의 슬라이스의 모든 참조 픽쳐 목록의 모든 픽쳐(aPic)에 대해 0이하라면, mvCol, refIdxCol, 및 listCol은 각각 mvLXCol[xColPb][yColPb], refIdxLXCol[xCoiPb][yColPb] 및 LX가 되게 설정된다.
- 그렇지 않다면, mvCol, refIdxCol 및 listCol은 각각 mvLNCOL[xColPb][yColPb], refIdxLNCol[xColPb][yColPb], 및 LN이 되게 설정한다.
- mergeEL이 1일 때, mvCol, refIdxCol 및 listCol은 다음과 같이 변경한다.
- 변수(mvColNew, refIdxColNew 및 listColNew)는 각각 mvCol, refIdxCol 및 listCol이 되게 설정하고, 플래그(bNoScalingListFlag)는 0이 되게 설정한다. 다음의 내용이, bNoScalingListFlag가 1이 될 때까지, listCol에서부터 1-listCol까지 참조 목록(LY)에 적용된다.
- currPic의 목록(LX)에서의 픽쳐(aPic)에 대해 DiffPicOrderCni(aPic, currPic)이 DiffPicOrderCnt(refPicListLYCol[refIdxLYCol[xColPb][yColPb]] colPic)이 된다면, mvColNew, refIdxColNew 및 listColNew는 각각 mvLYCol [xColPb][yColPb], refIdxLYCol[xColPb][yColPb] 및 LY가 되게 설정되며 bNo ScalingListFlag는 1이 되게 설정된다.
- bNoScalingListFlag가 1이라면, mvCol, refIdxCol 및 listCol은 각각 mvColNew, refIdxColNew 및 listColNew가 되게 설정된다.
- 그렇지 않다면, mvCol, refIdxCol 및 listCol은 변경하지 않는다.
- mergeEL이 1이라면, mvCol, refIdxCol 및 listCol은 각각 mvLXCol[xColPb] [yColPb], refIdxLXCol[xColPb] [yColPb] 및 LX가 되게 설정된다.
그리고, mergeEL이 1일 때, 참조 인덱스(refIdxLX)는 다음과 같이 변경된다.
- 변수(refIdxNew)가 refIdxLX가 되게 설정되고, 플래그(bNoScalingFlag)가 0이 되게 설정된다. 0에서부터 num_ref_idx_lx_active_minus1까지의 refIdxTemp에 대해, bNoScalingFlag가 1이 될 때까지 다음의 내용이 반복해서 적용된다.
- DiffPicOrderCnt(currPic, RefPicListX[refIdxTemp])이 DiffPicOrderCnt(colPic, refPicListCol[refIdxCol])이며, LongTermRefPic(currPic, currPb, refIdxTemp, ListX)이 LongTermRefPic(colPic, colPb, refIdxCol, listCol)일 때, refIdxNew는 refIdxTemp가 되게 설정되고, bNoScalingFlag는 1이 되게 설정된다.
- bNoScalingFlag가 1이면, refIdxLX는 refIdxNew가 되게 설정된다.
- 그렇지 않다면, refIdxLX는 변경되지 않는다.
그리고 mvLXCol 및 availableFlagLXCol은 다음과 같이 유도한다:
- LongTermRefPic(currPic, eurrPb, refIdxLX, LX)이 LongTermRefPic(colPic, colPb, refIdxCol, listCol)가 아니라면, mvLXCol의 두 성분은 0이 되게 설정하며, availableFlagLXCol은 0이 되게 설정된다.
- 그렇지 않다면, 변수(availableFlagLXCol) 1이 되게 설정되면, refPicListCoff[refIdxCol]은, 픽쳐(picPic)에서의 예측 블록(currPb)을 포함한 슬라이스의 참조 픽쳐 목록(refIdxCol)의 픽셀인 것으로 설정되며, 다음의 내용이 적용된다:
colPocDiff = DiffPicQrderCnt(colPic, refPicListCol[refIdxCol])
currPocDiff = DiffPicOrderCnt(currPic, RefPicListX[refIdxLX])
- RefPicListX[refldxLX]이 장시간 참조 픽쳐이거나, colPocDiff가 currPocDiff라면, mvLXCol은 다음과 같이 유도한다:
mvLXCol = mvCol
- 그렇지 않다면, mvLXCol은 다음과 같이 움직임 벡터(mvCol)의 스케일링된 버전으로서 유도한다:
tx = (16384 + (Abs(td) >> 1)) / td
distScaleFactor = Clip3(-4096, 4095, (tb * tx + 32) >> 6)
mvLXCol = Clip3(-32768, 32767, Sign(distScaleFactor * mvCol) *
((Abs(distScaleFactor * mvCol) + 127) >> 8))
여기서, td와 tb는 다음과 같이 유도한다:
td = C1ip3(-128, 127, colPocDiff)
tb = Clip3(-128, 127, currPocDiff)
예컨대, 비-통합 모드에 대한 AMVP 후보 목록 구성 프로세스의 예와 통합 모드에 대한 동일-위치의 블록에 대한 참조 목록 선택의 프로세스의 예와 같은, 스케일러블 비디오 코딩 시스템의 코딩 효율을 향상시키기 위한 앞서 기재한 프로세스의 예는, 도 17a 내지 도 17e에 예시한 무선 통신 시스템(1200)의 예와 같은 무선 통신 시스템과, 그 구성요소에서의 전송 비디오에 따라 구현될 수 있다.
도 17a는, 하나 이상의 개시한 실시예가 구현될 수 있는 통신 시스템(1200)의 도면이다. 예컨대, 무선 네트워크(예컨대, 통신 시스템(1200의 하나 이상의 구성요소를 포함하는 무선 네트워크)는, 무선 네트워크 너머로(예컨대, 무선 네트워크와 관련된 벽이 있는 정원 너머로) 연장하는 운반자에게 QoS 특징이 할당될 수 있도록 구성될 수 있다.
통신 시스템(1200)은, 음성, 데이터, 비디오, 메시지, 방송 등과 같은 콘텐츠를 다수의 무선 유저에게 제공하는 다중 액세스 시스템일 수 있다. 통신 시스템(1200)은, 다수의 무선 유저가 무선 대역폭을 포함한 시스템 자원의 공유를 통해 그러한 콘텐츠에 액세스하게 할 수 있다. 예컨대, 통신 시스템(1200)은 코드분할다중접속(CDMA), 주파수분할다중접속(FDMA), 직교 FDMA(OFDMA), 단일-캐리어 FDMA(SCFDMA) 등과 같은 하나 이상의 채널 액세스 방법을 사용할 수 있다.
도 17a에 도시한 바와 같이, 통신 시스템(1200)은, 다수의 WTRU, 예컨대 WTRU(1202a, 1202b, 1202c 및 1202d)와 같은 적어도 하나의 무선 송수신 유닛(WTRU), 무선 액세스 네트워크(RAN)(1204), 코어 네트워크(1206), 공공 교환 전화 네트워크(PSTN)(1208), 인터넷(1210) 및 기타 네트워크(1212)를 포함할 수 있지만, 개시한 실시예가 임의의 수의 WTRU, 기지국, 네트워크 및/또는 네트워크 요소를 고려함을 이해해야 한다. WTRU(1202a, 1202b, 1202c 및 1202d) 각각은 무선 환경에서 동작 및/또는 통신하도록 구성된 어떠한 타입의 디바이스일 수 있다. 예를 들어, WTRU(1202a, 1202b, 1202c 및 1202d)는 무선 신호를 송수신하도록 구성될 수 있으며, 유저 장비(UE), 모바일 스테이션, 고정 또는 이동 가입자 유닛, 삐삐, 휴대 전화, 개인보조단말장치(PDA), 스마트폰, 랩탑, 넷북, 개인용 컴퓨터, 무선 센서, 가전제품 등을 포함할 수 있다.
통신 시스템(1200)은 또한 기지국(1214a)과 기지국(1214b)을 포함할 수 있다. 기지국(1214a 및 1214b) 각각은 WTRU(1202a, 1202b, 1202c 및 1202d) 중 적어도 하나와 무선 인터페이스하여 코어 네트워크(1206), 인터넷(1210) 및/또는 네트워크(1212)와 같은 하나 이상의 통신 네트워크로의 액세스를 용이하게 하도록 구성된 어떤 타입의 디바이스일 수 있다. 예를 들어, 기지국(1214a 및 1214b)은 기본 트랜시버 국(BTS), Node-B, eNode-B, 홈 Node B, 홈 eNode B, 사이트 제어기, 액세스 포인트(AP), 무선 라우터 등일 수 있다. 기지국(1214a 및 1214b) 각각은 단일 요소로서 도시하지만, 기지국(1214a 및 1214b)은 임의의 수의 상호연결된 기지국 및/또는 네트워크 요소를 포함할 수 있음을 이해해야 한다.
기지국(1214a)은 RAN(1204)의 일부분일 수 있으며, RAN(1204)은 또한 기지국 제어기(BSC), 무선 네트워크 제어기(RNC), 중계기 노드 등과 같은 다른 기지국 및/또는 네트워크 요소(미도시)를 포함할 수 있다. 기지국(1214a) 및/또는 기지국(1214b)은, 셀(미도시)로 지칭할 수 있는 특정한 지리적 영역 내에서 무선 신호를 송수신하도록 구성될 수 있다. 셀은 셀 섹터로 더 나눌 수 있다. 예컨대, 기지국(1214a)과 관련된 셀은 세 개의 섹터로 나눌 수 있다. 따라서, 일 실시예에서, 기지국(1214a)은 세 개의 트랜시버, 즉 셀의 각 섹터마다 하나씩을 포함할 수 있다. 다른 실시예에서, 기지국(1214a)은 다중-입력 다중 출력(MIMO) 기술을 사용할 수 있으며, 그에 따라 셀의 각 섹터마다 다중 트랜시버를 활용할 수 있다.
기지국(1214a 및 1214b)은 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b, 1202c 및 1202d) 중 하나 이상과 통신할 수 있으며, 이러한 인터페이스(1216)는 어던 적절한 무선 통신 링크(예컨대, 무선 주파수(RF), 마이크로파, 적외선(IR), 자외선(UV), 가시광선 등)일 수 있다. 무선 인터페이스(1216)는 어떤 적절한 무선 액세스 기술(RAT)를 사용하여 구축할 수 있다.
더욱 상세하게, 앞서 주목한 바와 같이, 통신 시스템(1200)은 다중 액세스 시스템일 수 있으며, CDMA, TDMA, FDMA, OFDMA, SC-FDMA 등과 같은 하나 이상의 채널 액세스 방식을 사용할 수 있다. 예컨대, RAN(1204에서의 기지국(1214a)과 WTRU(1202a, 1202b, 및 1202c)는 범용 이동 원격통신 시스템(UMTS) 지상 무선 액세스(UTRA)와 같은 무선 기술을 구현할 수 있으며, 이러한 기술은 광대역 CDMA(WCDMA)를 사용하여 무선 인터페이스(1216)를 구축할 수 있다. WCDMA는 고속 패킷 액세스(HSPA) 및/또는 이발브드 HSPA(HSPA+)와 같은 통신 프로토콜을 포함할 수 있다. HSPA는 고속 다운링크 패킷 액세스(HSDPA) 및/또는 고속 업링크 패킷 액세스(HSUPA)를 포함할 수 있다.
다른 실시예에서, 기지국(1214a)과 WTRU(1202a, 1202b, 및 1202c)는 이발브드 UMTS 지상 무선 액세스(E-UTRA)와 같은 무선 기술을 구현할 수 있으며, 이러한 기술은 롱텀 에볼류션(LTE) 및/또는 LTE-어드밴스드(LTE-A)를 사용하여 무선 인터페이스(1216)를 구축할 수 있다.
다른 실시예에서, 기지국(1214a)과 WTRU(1202a, 1202b, 및 1202c)는, IEEE 802.6(즉, 마이크로파 액세스용 전세계 상호운용성(WiMAX)), CDMA2000, CDMA2000 1X, CDMA2000 EV-DO, 중간 표준 2000(IS-2000), 중간 표준 95(IS-95), 중간 표준856(IS-856), 세계 무선 통신 글로벌 시스템(GSM), GSM 에벌루션용 인핸스드 데이터 속도(EDGE), GSM EDGE(GERAN) 등과 같은 무선 기술을 구현할 수 있다.
도 17a의 기지국(1214b)은 예컨대 무선 라우터, 홈 Node B, 홈 eNode B 또는 액세스 포인트일 수 있으며, 사업장, 가정, 차량, 학교 등과 같은 국부적 영역에서의 무선 연결성을 용이하게 하기 위한 어떤 적절한 RAT를 활용할 수 있다. 일 실시예에서, 기지국(1214b)과 WTRU(1202c 및 1202d)는 IEEE 802.11과 같은 무선 기술을 구현할 수 있어서, 무선 근거리 네트워크(WLAN)를 구축할 수 있다. 다른 실시예에서, 기지국(1214b)과 WTRU(1202c 및 1202d)는 IEEE 802.15와 같은 무선 기술을 구현할 수 있어서, 무선 개인 근거리 네트워크(WPAN)을 구축할 수 있다. 또 다른 실시예에서, 기지국(1214b)과 WTRU(1202c 및 1202d)는 셀룰러-기반의 RAT(예컨대, WCDMA, CDMA2000, GSM, LTE, LTE-A 등)를 활용할 수 있어서, 피코셀 또는 펨토셀을 구축할 수 있다. 도 17a에 도시한 바와 같이, 기지국(1214b)은 이터넷(1210)으로의 직접 연결을 가질 수 있다. 따라서, 기지국(1214b)은 코어 네트워크(1206)를 통해 인터넷(1210)에 액세스할 필요는 없을 수 있다.
RAN(1204)은 코어 네트워크(1206)와 통신할 수 있으며, 이러한 코어 네트워크는, 음성, 데이터, 응용 및/또는 보이스 오버 인터넷 프로토콜(VoIp) 서비스를 WTRU(1202a, 1202b, 1202c 및 1202d) 중 하나 이상에 제공하도록 구성된 어떤 타입의 네트워크일 수 있다. 예컨대, 코어 네트워크(1206)는 통화 제어, 과금 서비스, 이동 위치-기반 서비스, 선납입 통화, 인터넷 연결, 비디오 배포 등을 제공할 수 있으며 및/또는 사용자 인증과 같은 하이-레벨 보안 기능을 실행할 수 있다. 도 17a에 도시하지 않을지라도, RAN(1204) 및/또는 코어 네트워크(1206)는, RAN(1204)과 동일한 RAT 또는 상이한 RAT를 사용하는 다른 RAN과 직접 또는 간접 통신할 수 있다. 예컨대, E-UTRA 무선 기술을 활용하고 있을 수 있는 RAN(1204)에 연결되는 것 외에, 코어 기술(1206)은 또한, GSM 무선 기술을 사용하는 다른 RAN(미도시)과 통신할 수 있다.
코어 네트워크(1206)는 또한 WTRU(1202a, 1202b, 1202c 및 1202d)에 대한 게이트웨이로서 역할을 할 수 있어서, PSTN(1208, 인터넷(1210) 및/또는 기타 네트워크(1212)에 액세스할 수 있다. PSTN(1208)은, 재래식 전화 서비스(POTS)를 제공하는 회로-전환 전화 네트워크를 포함할 수 있다. 인터넷(1210)은, TCP/IP 인터넷 프로토콜 슈트(suite)에서 송신 제어 프로토콜(TCP), 유저 데이터그램 프로토콜(UDP) 및 인터넷 프로토콜(IP)와 같은 공통 통신 프로토콜 상호 연결된 컴퓨터 네트워크 및 디바이스의 세계 시스템을 포함할 수 있다. 네트워크(1212)는 다른 서비스 제공자가 소유하고 및/또는 동작시키는 유무선 통신 네트워크를 포함할 수 있다. 예컨대, 네트워크(1212)는, RAN(1204)과 동일한 RAT 또는 상이한 RAT을 사용할 수 있는 하나 이상의 RAN에 연결된 다른 코어 네트워크를 포함할 수 있다.
통신 시스템(1200)에서의 WTRU(1202a, 1202b, 1202c 및 1202d) 중 일부나 모두는 다중 모드 성능을 포함할 수 있다. 즉, WTRU(1202a, 1202b, 1202c 및 1202d)는 상이한 무선 링크를 통해 상이한 무선 네트워크와 통신하기 위한 다중 트랜시버를 포함할 수 있다. 예컨대, 도 17a에 도시한 WTRU(1202c)는, 셀룰러-기반의 무선 기술을 사용할 수 있는 기지국(1214a) 및 IEEE 802 무선 기술을 사용할 수 있는 기지국(1214b)과 통신하도록 구성할 수 있다.
도 17b는 WTRU(1202)의 예의 시스템 도이다. 도 17b에 도시한 바와 같이, WTRU(1202)는 프로세서(1218, 트랜시버(1220), 송수신 요소(1222), 스피커/마이크(1224), 키패드(1226), 디스플레이/터치패드(1228), 탈착 불가능한 메모리(1230), 탈착 가능한 메모리(1232), 전원(1234), GPS 칩셋(1236) 및 기타 주변장치(1238)를 포함할 수 있다. WTRU(1202)가, 실시예와 일관성을 유지하면서도 전술한 요소의 어떤 하위-조합을 포함할 수 있음을 이해해야 한다.
프로세서(1218)는 범용 프로세서, 전용 프로세서, 종래의 프로세서, 디지털 신호 프로세서(DSP), 다수의 마이크로프로세서, DSP 코어와 관련되는 하나 이상의 마이크로프로세서, 제어기, 마이크로제어기, 주문형 집적회로(ASIC), 필드 프로그램 가능 게이트 어레이(FPGA) 회로, 어떤 다른 타입의 집적회로(IC), 고체 머신 등일 수 있다. 프로세서(1218)는 신호 코딩, 데이터 처리, 전력 제어, 입출력 처리 및/또는 WTRU(1202)가 무선 환경에서 동작할 수 있게 하는 어떤 다른 기능을 실행할 수 있다. 프로세서(1218)는 트랜시버(1220)에 결합될 수 있으며, 트랜시버(1220)는 송수신 요소(1222)에 결합될 수 있다. 도 17b는 프로세서(1218)와 트랜시버(1220)를 별도의 구성요소로서 도시하지만, 프로세서(1218)와 트랜시버(1220)는 전자 패키지나 칩에 함께 집적할 수 있다.
송수신 요소(1222)는 무선 인터페이스(1216)를 통해서 기지국(예컨대, 기지국(1214a))에 신호를 송신하거나 기지국으로부터 신호를 수신하도록 구성할 수 있다. 예컨대, 일 실시예에서, 송수신 요소(1222)는 RF 신호를 송수신하도록 구성한 안테나일 수 있다. 다른 실시예에서, 송수신 요소(1222)는 예컨대 IR, UV 또는 가시광선 신호를 송수신하도록 구성된 이미터/검출기일 수 있다. 또 다른 실시예에서, 송수신 요소(1222)는 RF와 광 신호 둘 모두를 송신하고 수신하도록 구성될 수 있다. 송수신 요소(1222)는 무선 신호의 어떤 조합을 송수신하도록 구성할 수 있다.
게다가, 송수신 요소(1222)는 도 17b에서는 단일 요소로 도시하더라도, WTRU(1202)는 임의의 수의 송수신 요소(1222)를 포함할 수 있다. 더욱 상세하게, WTRU(1202)는 MIMO 기술을 사용할 수 있다. 따라서, 일 실시예에서, WTRU(1202)는 무선 인터페이스(1216)를 통해 무선 신호를 송신하고 수신하기 위한 둘 이상의 송수신 요소(1222)(예컨대, 다수의 안테나)를 포함할 수 있다.
트랜시버(1220)는, 송수신 요소(1222)에 의해 송신될 신호를 변조하고, 송수신 요소(1222)에 의해 수신되는 신호를 복조하도록 구성할 수 있다. 앞서 주목한 바와 같이, WTRU(1202)는 다중-모드 성능을 가질 수 있다. 따라서, 트랜시버(1220)는, WTRU(1202)가 예컨대 UTRA 및 IEEE 802.11과 같은 다수의 RAT를 통해 통신할 수 있게 하기 위해 다중 트랜시버를 포함할 수 있다.
WTRU(1202)의 프로세서(1218)는 스피커/마이크(1224), 키패드(1226) 및/또는 디스플레이/터치패드(1228)(예컨대, 액정 디스플레이(LCD) 디스플레이 유닛 또는 유기 발과 다이오드(OLED) 디스플레이 유닛)에 결합될 수 있으며, 이들 구성요소로부터 유저 입력 데이터를 수신할 수 있다. 프로세서(1218)는 또한 유저 데이터를 스피커/마이크(1224), 키패드(1226) 및/또는 디스플레이/터치패드(1228)에 출력할 수 있다. 게다가, 프로세서(1218)는, 탈착 불가능한 메모리(1230) 및/또는 탈착 가능한 메모리(1232)와 같은 어떤 타입의 적절한 메모리로부터 정보에 액세스할 수 있으며, 그러한 메모리에 데이터를 저장할 수 있다. 탈착 불가능한 메모리(1230)는 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 하드 디스크 또는 어떤 다른 타입의 메모리 저장 디바이스를 포함할 수 있다. 탈착 가능한 메모리(1232)는 가입자 신원 모듈(SIM) 카드, 메모리 스틱, 보안 디지털(SD) 메모리 카드 등을 포함할 수 있다. 다른 실시예에서, 프로세서(1218)는 서버나 가정용 컴퓨터(미도시) 상에서와 같이 WTRU(1202) 상에 물리적으로 위치하고 있지 않는 메모리로부터 정보에 액세스할 수 있으며, 그러한 메모리에 데이터를 저장할 수 있다.
프로세서(1218)는 전원(1234)으로부터 전력을 받을 수 있으며, WTRU(1202) 내의 다른 컴포넌트들에 전력을 분산 및/또는 제어하도록 구성될 수 있다. 전원(1234)은 WTRU(1202)에 전원을 공급할 수 있는 임의의 적합한 디바이스일 수 있다. 예를 들어, 전원(1234)은 하나 이상의 건전지(예를 들어, NiCd, NiAn, NiMH, Li 이온 등), 태양 전지, 연료 전지 등을 포함할 수 있다.
프로세서(1218)는 GPS 칩셋(1236)에 또한 결합될 수 있으며, 이러한 GPS 칩셋(1236)은 WTRU(1202)의 현 위치에 관한 위치 정보(예컨대, 경도와 위도)를 제공하도록 구성할 수 있다. GPS 칩셋(1236)으로부터의 정보 외에 또는 그 대신에, WTRU(1202)는 무선 인터페이스(1216)를 통해 기지국(예컨대, 기지국(1214a 및 1214b))으로부터 위치 정보를 수신할 수 있으며 및/또는 둘 이상의 인근 기지국으로부터 수신하는 신호의 타이밍을 기반으로 하여 그 위치를 결정할 수 있다. WTRU(1202)는 실시예와 일관성을 유지하면서도 어떤 적절한 위치-결정 방법에 의해 위치 정보를 얻을 수 있다.
프로세서(1218)는 다른 주변장치(1238)에 또한 결합될 수 있으며, 이러한 주변장치(1238)는, 추가 특성, 기능 및/또는 유무선 연결성을 제공하는 하나 이상의 소프트웨어 및/또는 하드웨어를 포함할 수 있다. 예컨대, 주변장치(1238)는 가속도계, e-나침반, 위성 트랜시버, 디지털 카메라(사진 또는 비디오용), 범용 직렬 버스(USB) 포트, 진동 디바이스, 텔레비전 트랜시버, 핸즈프리 헤드셋, 블루투쓰® 모듈, 주파수 변조된(FM) 무선 유닛, 디지털 음악 재생기, 미디어 재생기, 비디오 게임 재생기 모듈, 인터넷 브라우저 등을 포함할 수 있다.
도 17c는, 각각 RAN(1204) 및 코어 네트워크(1206)의 구현의 예를 포함하는 RAN(1204a) 및 코어 네트워크(1206a)를 포함하는 통신 시스템(1200)의 실시예의 시스템 도이다. 앞서 주목한 바와 같이, 예컨대 RAN(1204a)와 같은 RAN(1204)은 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b 및 1202c)와 통신하기 위한 UTRA 무선 기술을 사용할 수 있다. RAN(1204a)은 또한 코어 네트워크(1206a)와 통신할 수 있다. 도 17c에 도시한 바와 같이, RAN(1204a)은, 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b 및 1202c)와 통신하기 위한 하나 이상의 트랜시버를 각각 포함할 수 있는 Node-B(1240a, 1240b 및 1240c)를 포함할 수 있다. Node-B(1240a, 1240b 및 1240c)는 각각 RAN(1204a) 내에서 특정 셀(미도시됨)과 관련될 수 있다. RAN(1204a)은 또한 RNC(1242a 및 1242b)를 포함할 수 있다. RAN(1204a)은 실시예와의 일관성을 유지하면서도 어떤 수의 Node-B와 RNC를 포함할 수 있다.
도 17c에 도시된 바와 같이, Node-B(1240a 및 1240b)는 RNC(1242a)와 통신할 수 있다. 또한, Node-B(1240c)는 RNC(1242b)와 통신할 수 있다. Node-B(1240a, 1240b 및 1240c)는 Iub 인터페이스를 통해 각각의 RNC(1242a 및 1242b)와 통신할 수 있다. RNC(1242a 및 1242b)는 Iur 인터페이스를 통해 서로와 통신할 수 있다. RNC(1242a 및 1242b) 각각은 연결되는 각각의 Node-B(1240a, 1240b 및 1240c)를 제어하도록 구성될 수 있다. 게다가, RNC(1242a 및 1242b) 각각은, 외부 루프 전력 제어, 부하 제어, 승인 제어, 패킷 스케줄링, 핸드오버 제어, 매크로다이버시티, 보안 기능, 데이터 암호화 등과 같은 다른 기능을 실행하거나 지원하도록 구성될 수 있다.
도 17c에 도시한 코어 네트워크(1206a)는 미디어 게이트웨이(MGW)(1244), 이동 교환 센터(MSC)(1246), 서빙 GPRS 지원 노드(SGSN)(1248) 및/또는 게이트웨이 GPRS 지원 노드(GGSN)(1250)를 포함할 수 있다. 전술한 요소 각각은 코어 네트워크(1206a)의 일부분으로서 도시하지만, 이들 요소 중 어느 하나는 코어 네트워크 운영자가 아닌 개체가 소유할 수 있으며 및/또는 그러한 개체에 의해 동작할 수 있음을 이해해야 한다.
RAN(1204a)에서의 RNC(1242a)는 IuCS 인터페이스를 통해 코어 네트워크(1206a)에서 MSC(1246)에 연결될 수 있다. MSC(1246)는 MGW(1244)에 연결될 수 있다. MSC(1246) 및 MGW(1244)는 PSTN(1208)과 같은 회로-전환 네트워크로의 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있어서, WTRU(1202a, 1202b 및 1202c)와 종래의 지상-회선 통신 디바이스의 통신을 용이하게 할 수 있다.
RAN(1204a)에서의 RNC(1242a)는 IuPS 인터페이스를 통해 코어 네트워크(1206a)에서 SGSN(1248)에 연결될 수 있다. SGSN(1248)는 GGSN(1250)에 연결될 수 있다. SGSN(1248) 및 GGSN(1250)는 인터넷(1210)과 같은 패킷-전환 네트워크로의 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있어서, WTRU(1202a, 1202b 및 1202c)와 IP-작동 가능한 디바이스 사이의 통신을 용이하게 할 수 있다.
앞서 주목한 바와 같이, 코어 네트워크(1206a)는 또한 네트워크(1212)에 연결될 수 있으며, 네트워크(1212)는 다른 서비스 제공자가 소유하고 및/또는 그러한 제공자에 의해 동작하는 다른 유무선 네트워크를 포함할 수 있다.
도 17d는, 각각 RAN(1204)과 코어 네트워크(1206)의 구현의 예를 포함하는 RAN(1204b)과 코어 네트워크(1206b)를 포함하는 통신 시스템(1200)의 실시예의 시스템 도이다. 앞서 주목한 바와 같이, 예컨대 RAN(1204b)과 같은 RAN(1204)은 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b 및 1202c)와 통신하기 위한 E-UTRA 무선 기술을 사용할 수 있다. RAN(1204b)은 또한 코어 네트워크(1206b)와 통신할 수 있다.
RAN(1204b)은 eNode-B(1240d, 1240e 및 1240f)를 포함할 수 있지만, RAN(1240b)은 실시예와 일관성을 유지하면서도 어떤 수의 eNode-B를 포함할 수 있다. eNode-B(1240d, 1240e 및 1240f)는 각각 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b 및 1202c)와 통신하기 위한 하나 이상의 트랜시버를 포함할 수 있다. 일 실시예에서, eNode-B(1240d, 1240e 및 1240f)는 MIMO 기술을 구현할 수 있다. 따라서 예컨대, eNode-B(1240d)는 다수의 안테나를 사용할 수 있어서, WTRU(1202a)에 무선 신호를 송신할 수 있고 WTRU(1202a)로부터 무선 신호를 수신할 수 있다.
eNode-B(1240d, 1240e 및 1240f) 각각은 특정 셀(미도시됨)과 관련될 수 있으며, 무선 자원 관리 결정, 핸드오버 결정, 업링크 및/또는 다운링크에서의 유저의 스케줄링 등을 관리하도록 구성될 수 있다. 도 17d에 도시한 바와 같이, eNode-B(1240d, 1240e 및 1240f)는 X2 인터페이스를 통해 서로와 통신할 수 있다.
도 17d에 도시한 코어 네트워크(1206b)는 이동성 관리 게이트웨이(MME)(1243), 서빙 게이트웨이(1245) 및 패킷 데이터 네트워크(PDN) 게이트웨이(1247)를 포함할 수 있다. 전술한 요소 각각은 코어 네트워크(1206b)의 일부분으로서 도시하지만, 이들 요소 중 어떤 하나는 코어 네트워크 운영자가 아닌 개체가 소유할 수 있으며 및/또는 그러한 개체가 동작할 수 있음을 이해해야 한다.
MME(1243)는 S1 인터페이스를 통해 RAN(1204b)에서 eNode-B(1240d, 1240e 및 1240f)의 각각에 연결될 수 있으며, 제어 노드로서 역할을 할 수 있다. 예컨대, MME(1243)는 WTRU(1202a, 1202b 및 1202c) 등의 초기 부착 동안 WTRU(1202a, 1202b 및 1202c)의 유저를 인증하고, 운반자 활성화/활성화해제하며, 특정한 서빙 게이트웨이를 선택하는 역할을 담당할 수 있다. MME(1243)는 또한, GSM 또는 WCDMA와 같은 다른 무선 기술을 사용하는 다른 RAN(미도시돔)과 RAN(1204b) 사이에서 전환하기 위한 제어 플레인 기능을 제공할 수 있다.
서빙 게이트웨이(1245)는 S1 인터페이스를 통해 RAN(1204b)에서의 eNode B(1240d, 1240e 및 1240f) 각각에 연결될 수 있다. 서빙 게이트웨이(1245)는 일반적으로 WTRU(1202a, 1202b 및 1202c) 내외로 유저 데이터 패킷을 라우팅 및 전송할 수 있다. 서빙 게이트웨이(1245)는 또한 인터-eNode B 핸드오버 동안 유저 플레인을 앵커링하는 기능, 다운링크 데이터가 WTRU(1202a, 1202b 및 1202c)에 이용 가능할 때 페이징을 트리거하는 기능, WTRU(1202a, 1202b 및 1202c) 등의 콘텐츠를 관리하고 저장하는 기능과 같은 다른 기능을 실행할 수 있다.
서빙 게이트웨이(1245)는 또한 PDN 게이트웨이(1247)에 연결될 수 있으며, 이 게이트웨이(1247)는 인터넷(1210)과 같은 패킷-교환 네트워크에 대한 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있어서, WTRU(1202a, 1202b 및 1202c)와 IP-작동 가능 디바이스 사이의 통신을 용이하게 할 수 있다.
코어 네트워크(1206b)는 기타 네트워크와의 통신을 용이하게 할 수 있다. 예컨대, 코어 네트워크(1206b)는 PSTN(1208)과 같은 회로-교환 네트워크에 대한 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있어서, WTRU(1202a, 1202b 및 1202c)와 종래의 지상-회선 통신 디바이스 사이의 통신을 용이하게 할 수 있다. 예컨대, 코어 네트워크(1206b)는, 코어 네트워크(1206b)와 PSTN(1208) 사이의 인터페이스로서 역할하는 IP 게이트웨이(예컨대, IP 멀티미디어 서브시스템(IMS) 서버)를 포함할 수 있거나 이러한 IP 게이트웨이와 통신할 수 있다. 게다가, 코어 네트워크(1206b)는, 다른 서비스 제공자가 소유하고 및/또는 그러한 제공자에 의해 동작하는 다른 유무선 네트워크를 제공할 수 있는 네트워크(1212)에 대한 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있다.
도 17e는, 각각 RAN(1204)과 코어 네트워크(1206)의 구현의 예를 포함하는 RAN(1204c)과 코어 네트워크(1206c)를 포함하는 통신 시스템(1200)의 실시예의 시스템 도이다. 예컨대, RAN(1204c)과 같은 RAN(1204)은, IEEE 802.16 무선 기술을 사용하여 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b 및 1202c)와 통신하는 액세스 서비스 네트워크(ASN)일 수 있다. 본 명세서에서 기재한 바와 같이, WTRU(1202a, 1202b 및 1202c), RAN(1204c) 및 코어 네트워크(1206c) 사이의 통신 링크는 참조점으로서 규정할 수 있다.
도 17e에 도시한 바와 같이, RAN(1204c)은 기지국(1240g, 1240h 및 1240i)과 ASN 게이트웨이(1241)를 포함하지만, RAN(1204c)은, 실시예와 일관성을 유지하면서도 어떤 수의 기지국과 ASN 게이트웨이를 포함할 수 있다. 기지국(1202a, 1202b 및 1202c)은 각각 RAN(1204c)에서의 특정 셀(미도시됨)과 관련될 수 있으며, 각각 무선 인터페이스(1216)를 통해 WTRU(1202a, 1202b 및 1202c)와 통신하기 위한 하나 이상의 트랜시버를 포함할 수 있다. 일 실시예에서, 기지국(1240g, 1240h 및 1240i)은 MIMO 기술을 구현할 수 있다. 따라서, 예컨대 기지국(1240g)은 다수의 안테나를 사용하여 WTRU(1202a)에 무선 신호를 송신하고 WTRU(1202a)로부터 무선 신호를 수신할 수 있다. 기지국(1240g, 1240h 및 1240i)은 핸드오프 트리거 기능, 터널 구축 기능, 무선 자원 관리 기능, 트래픽 분류 기능, 서비스 품질(QoS) 정책 강화 기능 등과 같은 이동성 관리 기능을 제공할 수 있다. ASN 게이트웨이(1241)는, 페이징, 가입자 프로필의 캐싱, 코어 네트워크(1206c)로의 라우팅 등의 책임을 담당할 수 있다.
WTRU(1202a, 1202b 및 1202c)와 RAN(1204c) 사이의 무선 인터페이스(1216)는, IEEE 802.16 규격을 구현하는 R1 참조점으로서 규정할 수 있다. 게다가, WTRU(1202a, 1202b 및 1202c) 각각은 코어 네트워크(1206c)와의 논리적 인터페이스(미도시됨)를 구축할 수 있다. WTRU(1202a, 1202b 및 1202c)와 코어 네트워크(1206c) 사이의 논리적 인터페이스는, 인증, 인가, IP 호스트 구성 관리 및/또는 이동성 관리에 사용될 수 있는 R2 참조점으로서 규정될 수 있다.
기지국(1240g, 1240h 및 1240i) 각각 사이의 통신 링크는, 기지국 사이의 데이터 전송과 WTRU 핸드오버를 용이하게 하기 위한 프로토콜을 포함하는 R8 참조점으로서 규정할 수 있다. 기지국(1240g, 1240h 및 1240i)과 ASN 게이트웨이(1241) 사이의 통신 링크는 R6 참조점으로서 규정될 수 있다. R6 참조점은, WTRU(1202a, 1202b 및 1202c) 각각과 관련된 이동성 이벤트를 기반으로 한 이동성 관리를 용이하게 하기 위한 프로토콜을 포함할 수 있다.
도 17e에 도시된 바와 같이, RAN(1204c)은 코어 네트워크(1206c)에 연결될 수 있다. RAN(1204c)과 코어 네트워크(1206c) 사이의 통신 링크는, 예컨대 데이터 전송 및 이동성 관리 성능을 용이하게 하기 위한 프로토콜을 포함하는 R3 참조점으로서 규정될 수 있다. 코어 네트워크(1206c)는 이동 IP 홈 에이전트(MIP-HA)(1244), 인증, 인가, 어카운팅(AAA) 서버(1256) 및 게이트웨이(1258)를 포함할 수 있다. 전술한 요소 각각이 코어 네트워크(1206c)의 일부분으로서 도시하지만, 이들 요소 중 어떤 요소는 코어 네트워크 운영자가 아닌 개체가 소유할 수 있고 및/또는 그러한 개체에 의해 동작할 수 있다.
MIP-HA는 IP 어드레스 관리의 책임을 담당할 수 있으며, WTRU(1202a, 1202b 및 1202c)가 상이한 ASN 및/또는 상이한 코어 네트워크 사이에서 로밍할 수 있다. MIP-HA(1254)는 인터넷(1210)과 같은 패킷-교환된 네트워크에 대한 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있어서, WTRU(1202a, 1202b 및 1202c)와 IP-작동 가능한 디바이스와의 통신을 용이하게 할 수 있다. AAA 서버(1256)는 유저 인증과 유저 서비스 지원의 책임을 담당할 수 있다. 게이트웨이(1258)는 기타 네트워크와의 상호작용을 용이하게 할 수 있다. 예컨대, 게이트웨이(1258)는, PSTN(1208)과 같은 회로-교환된 네트워크에 대한 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있어서, WTRU(1202a, 1202b 및 1202c)과 종래의 지상-회선 통신 디바이스 사이의 통신을 용이하게 할 수 있다. 게다가, 게이트웨이(1258)는, 다른 서비스 제공자가 소유하고 및/또는 그러한 제공자에 의해 동작하는 다른 유무선 네트워크를 포함할 수 있는 네트워크(1212)에 대한 액세스를 WTRU(1202a, 1202b 및 1202c)에 제공할 수 있다.
도 17e에 도시하지 않을지라도, RAN(1204c)은 다른 ASN에 연결될 수 있으며, 코어 네트워크(1206c)는 다른 코어 네트워크에 연결될 수 있음을 이해해야 한다. RAN(1204c)과 다른 ASN 사이의 통신 링크는, RAN(1204c)과 다른 ASN 사이의 WTRU(1202a, 1202b 및 1202c)의 이동성을 조정하기 위한 프로토콜을 포함할 수 있는 R4 참조점으로서 규정될 수 있다. 코어 네트워크(1206c)와 다른 코어 네트워크 사이의 통신 링크는, 가정 코어 네트워크와 방문한 코어 네트워크 사이의 상호작용을 용이하게 하기 위한 프로토콜을 포함할 수 있는 R5 참조점으로서 규정할 수 있다.
특성과 요소는 특정한 조합으로 앞서 기재하더라도, 당업자는, 각각의 특성 또는 요소가 단독으로 또는 다른 특성 및 요소와 어떤 식으로 조합되어 사용될 수 있음을 이해할 것이다. 게다가, 본 명세서에서 기재한 방법은, 컴퓨터 또는 프로세서에 의해 수행하기 위해 컴퓨터로 판독 가능한 매체에 통합되어 있는 컴퓨터 프로그램, 소프트웨어, 또는 펌웨어에 구현될 수 있다. 컴퓨터로 판독 가능한 매체의 예는 (유무선 연결을 통해 송신된) 전자 신호와 컴퓨터로 판독 가능한 저장 매체를 포함한다. 컴퓨터로 판독 가능한 저장 매체의 예는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 레지스터, 캐시 메모리, 반도체 메모리 디바이스, 내부 하드디스크 및 탈착 가능한 디스크와 같은 자기 매체, 광자기 매체 및 CD-ROM 디스크 및 디지털 다용도 디스크(DVD)와 같은 광학 매체를 포함하지만, 이들로 제한되지 않는다. 소프트웨어와 관련되는 프로세서는 WTRU, WTRU, 단말, 기지국, RNC 또는 어떤 호스트 컴퓨터에 사용하기 위한 무선 주파수 트랜시버를 구현하는데 사용될 수 있다. 본 명세서에서 기재한 특성 및/또는 요소는, 하나 이상의 실시예의 예에 따라 본 명세서에서 기재한 특성 및/또는 요소와 조합하여 사용될 수 있다.

Claims (36)

  1. 비디오 코딩 방법에 있어서,
    현재의 예측 유닛과 관련된 참조 픽쳐 목록(reference picture list)을 얻는 단계;
    복수의 후보 참조 픽쳐 목록들로부터, 상기 현재의 예측 유닛과 동일-위치에(co-located) 있는 동일-위치의 예측 유닛과 관련된 후보 참조 픽쳐 목록을 얻는 단계;
    상기 현재의 예측 유닛과 관련된 상기 참조 픽쳐 목록에서의 참조 픽쳐들이 상기 동일-위치의 예측 유닛과 관련된 상기 후보 참조 픽쳐 목록에서의 참조 픽쳐들과 동일한 픽쳐 순서 카운트(POC; picture order count) 값들을 갖는 경우에, 움직임 벡터 스케일링 동작(motion vector scaling operation)이, 상기 동일-위치의 예측 유닛과 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 상기 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않는 것으로 결정하는 단계; 및
    상기 결정에 기초하여, 상기 후보 참조 픽쳐 목록을 상기 움직임 벡터 예측 참조 픽쳐 목록으로서 선택하는 단계를 포함하는, 비디오 코딩 방법.
  2. 비디오 코딩 방법에 있어서,
    현재의 예측 유닛과 관련된 참조 픽쳐 목록을 얻는 단계;
    복수의 후보 참조 픽쳐 목록들로부터, 상기 현재의 예측 유닛과 동일-위치에 있는 동일-위치의 예측 유닛과 관련된 후보 참조 픽쳐 목록을 얻는 단계;
    상기 후보 참조 픽쳐 목록이 상기 현재의 예측 유닛과 관련된 상기 참조 픽쳐 목록과 동일한 참조 목록 인덱스를 갖는 경우에, 움직임 벡터 스케일링 동작이, 상기 동일-위치의 예측 유닛과 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 상기 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않는 것으로 결정하는 단계; 및
    상기 결정에 기초하여, 상기 후보 참조 픽쳐 목록을 상기 움직임 벡터 예측 참조 픽쳐 목록으로서 선택하는 단계를 포함하는, 비디오 코딩 방법.
  3. 비디오 코딩 방법에 있어서,
    현재의 예측 유닛과 관련된 참조 픽쳐 목록을 얻는 단계;
    복수의 후보 참조 픽쳐 목록들로부터, 상기 현재의 예측 유닛과 동일-위치에 있는 동일-위치의 예측 유닛과 관련된 후보 참조 픽쳐 목록을 얻는 단계;
    상기 후보 참조 픽쳐 목록이, 상기 현재의 예측 유닛과 관련된 픽쳐와 상기 현재의 예측 유닛과 관련된 상기 참조 픽쳐 목록에서의 참조 픽쳐 사이의 POC 거리와 동일한, 상기 동일-위치의 예측 유닛과 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하는 경우에, 움직임 벡터 스케일링 동작이, 상기 동일-위치의 예측 유닛과 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 상기 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않는 것으로 결정하는 단계; 및
    상기 결정에 기초하여, 상기 후보 참조 픽쳐 목록을 상기 움직임 벡터 예측 참조 픽쳐 목록으로서 선택하는 단계를 포함하는, 비디오 코딩 방법.
  4. 제1항, 제2항, 또는 제3항에 있어서, 상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록은 복수의 참조 픽쳐들을 포함하며, 상기 방법은,
    상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록으로부터 참조 픽쳐를 가져오는(retrieving) 단계;
    상기 참조 픽쳐가 상기 동일-위치의 예측 유닛의 참조 픽쳐와 동일한 POC 값을 갖는다는 조건에 기초하여, 움직임 벡터 스케일링 동작이, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 사용하는 것과 관련되지 않는 것으로 결정하는 단계; 및
    상기 결정에 기초하여, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 선택하는 단계를 더 포함하는, 비디오 코딩 방법.
  5. 제1항, 제2항, 또는 제3항에 있어서, 상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록은 복수의 참조 픽쳐들을 포함하며, 상기 방법은,
    상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록으로부터 참조 픽쳐를 가져오는 단계;
    상기 참조 픽쳐가, 상기 동일-위치의 예측 유닛과 관련된 픽쳐와 상기 동일-위치의 예측 유닛의 참조 픽쳐 사이의 POC 거리와 동일한, 상기 현재의 예측 유닛과 관련된 픽쳐로부터의 POC 거리를 갖는다는 조건에 기초하여, 움직임 벡터 스케일링 동작이, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 사용하는 것과 관련되지 않는 것으로 결정하는 단계; 및
    상기 결정에 기초하여, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 선택하는 단계를 더 포함하는, 비디오 코딩 방법.
  6. 제5항에 있어서, 공간 움직임 벡터 예측 후보의 위치 이전의 위치에서 상기 참조 픽쳐를 통합 후보 목록(merging candidate list)에 추가하는 단계를 더 포함하는, 비디오 코딩 방법.
  7. 제5항에 있어서, 상기 참조 픽쳐를, 공간 움직임 벡터 예측 후보 대신에 통합 후보 목록에 추가하는 단계를 더 포함하는, 비디오 코딩 방법.
  8. 제5항에 있어서, 상기 동일-위치의 예측 유닛과 관련된 픽쳐와 상기 동일-위치의 예측 유닛의 참조 픽쳐 사이의 POC 거리는, 상기 동일-위치의 예측 유닛과 관련된 동일-위치의 픽쳐와 관련된 POC 값과 상기 동일-위치의 예측 유닛의 참조 픽쳐와 관련된 POC 값 사이의 차이를 포함하는 것인, 비디오 코딩 방법.
  9. 제5항에 있어서,
    상기 참조 픽쳐와 상기 현재의 예측 유닛과 관련된 픽쳐 사이의 제1 POC 거리를 계산하는 단계; 및
    상기 동일-위치의 예측 유닛의 참조 픽쳐와 상기 동일-위치의 예측 유닛과 관련된 픽쳐 사이의 제2 POC 거리를 계산하는 단계를 더 포함하는, 비디오 코딩 방법.
  10. 제4항에 있어서, 공간 움직임 벡터 예측 후보의 위치 이전의 위치에서 상기 참조 픽쳐를 통합 후보 목록에 추가하는 단계를 더 포함하는, 비디오 코딩 방법.
  11. 제4항에 있어서, 상기 참조 픽쳐를, 공간 움직임 벡터 예측 후보 대신에 통합 후보 목록에 추가하는 단계를 더 포함하는, 비디오 코딩 방법.
  12. 비디오 코딩을 위한 무선 송수신 유닛(WTRU; wireless transmit/receive unit)에 있어서,
    프로세서를 포함하며, 상기 프로세서는,
    현재의 예측 유닛과 관련된 참조 픽쳐 목록을 얻고;
    복수의 후보 참조 픽쳐 목록들로부터, 상기 현재의 예측 유닛과 동일-위치에 있는 동일-위치의 예측 유닛과 관련된 후보 참조 픽쳐 목록을 얻고;
    상기 현재의 예측 유닛과 관련된 상기 참조 픽쳐 목록에서의 참조 픽쳐들이 상기 동일-위치의 예측 유닛과 관련된 상기 후보 참조 픽쳐 목록에서의 참조 픽쳐들과 동일한 픽쳐 순서 카운트 값들을 갖는 경우에, 움직임 벡터 스케일링 동작이, 상기 동일-위치의 예측 유닛과 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 상기 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않는 것으로 결정하며;
    상기 결정에 기초하여, 상기 후보 참조 픽쳐 목록을 상기 움직임 벡터 예측 참조 픽쳐 목록으로서 선택하도록 구성되는 것인 무선 송수신 유닛(WTRU).
  13. 비디오 코딩을 위한 무선 송수신 유닛(WTRU)에 있어서,
    프로세서를 포함하며, 상기 프로세서는,
    현재의 예측 유닛과 관련된 참조 픽쳐 목록을 얻고;
    복수의 후보 참조 픽쳐 목록들로부터, 상기 현재의 예측 유닛과 동일-위치에 있는 동일-위치의 예측 유닛과 관련된 후보 참조 픽쳐 목록을 얻고;
    상기 후보 참조 픽쳐 목록이 상기 현재의 예측 유닛과 관련된 상기 참조 픽쳐 목록과 동일한 참조 목록 인덱스를 갖는 경우에, 움직임 벡터 스케일링 동작이, 상기 동일-위치의 예측 유닛과 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 상기 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않는 것으로 결정하며;
    상기 결정에 기초하여, 상기 후보 참조 픽쳐 목록을 상기 움직임 벡터 예측 참조 픽쳐 목록으로서 선택하도록 구성되는 것인 무선 송수신 유닛(WTRU).
  14. 비디오 코딩을 위한 무선 송수신 유닛(WTRU)에 있어서,
    프로세서를 포함하며, 상기 프로세서는,
    현재의 예측 유닛과 관련된 참조 픽쳐 목록을 얻고;
    복수의 후보 참조 픽쳐 목록들로부터, 상기 현재의 예측 유닛과 동일-위치에 있는 동일-위치의 예측 유닛과 관련된 후보 참조 픽쳐 목록을 얻고;
    상기 후보 참조 픽쳐 목록이, 상기 현재의 예측 유닛과 관련된 픽쳐와 상기 현재의 예측 유닛과 관련된 상기 참조 픽쳐 목록에서의 참조 픽쳐 사이의 POC 거리와 동일한, 상기 동일-위치의 예측 유닛과 관련된 픽쳐로부터의 POC 거리를 갖는 참조 픽쳐를 포함하는 경우에, 움직임 벡터 스케일링 동작이, 상기 동일-위치의 예측 유닛과 관련된 움직임 벡터 예측 참조 픽쳐 목록으로서 상기 후보 참조 픽쳐 목록을 사용하는 것과 관련되지 않는 것으로 결정하며;
    상기 결정에 기초하여, 상기 후보 참조 픽쳐 목록을 상기 움직임 벡터 예측 참조 픽쳐 목록으로서 선택하도록 구성되는 것인, 무선 송수신 유닛(WTRU).
  15. 제12항, 제13항, 또는 제14항에 있어서, 상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록은 복수의 참조 픽쳐들을 포함하며, 상기 프로세서는 또한,
    상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록으로부터 참조 픽쳐를 가져오고,
    상기 참조 픽쳐가 상기 동일-위치의 예측 유닛의 참조 픽쳐와 동일한 POC 값을 갖는다는 조건에 기초하여, 움직임 벡터 스케일링 동작이, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 사용하는 것과 관련되지 않는 것으로 결정하고,
    상기 결정에 기초하여, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 선택하도록 구성되는 것인, 무선 송수신 유닛(WTRU).
  16. 제12항, 제13항, 또는 제14항에 있어서, 상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록은 복수의 참조 픽쳐를 포함하며, 상기 프로세서는 또한,
    상기 현재의 예측 유닛과 관련된 참조 픽쳐 목록으로부터 참조 픽쳐를 가져오고,
    상기 참조 픽쳐가, 상기 동일-위치의 예측 유닛과 관련된 픽쳐와 상기 동일-위치의 예측 유닛의 참조 픽쳐 사이의 POC 거리와 동일한, 상기 현재의 예측 유닛과 관련된 픽쳐로부터의 POC 거리를 갖는다는 조건에 기초하여, 움직임 벡터 스케일링 동작이, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 사용하는 것과 관련되지 않는 것으로 결정하고,
    상기 결정에 기초하여, 움직임 벡터 예측을 실행하기 위해 상기 참조 픽쳐를 선택하도록 구성되는 것인, 무선 송수신 유닛(WTRU).
  17. 제16항에 있어서, 상기 동일-위치의 예측 유닛과 관련된 픽쳐와 상기 동일-위치의 예측 유닛의 참조 픽쳐 사이의 POC 거리는, 상기 동일-위치의 예측 유닛과 관련된 동일-위치의 픽쳐와 관련된 POC 값과 상기 동일-위치의 예측 유닛의 참조 픽쳐와 관련된 POC 값 사이의 차이를 포함하는 것인, 무선 송수신 유닛(WTRU).
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
KR1020157031507A 2013-04-02 2014-04-02 스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측 KR101804652B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361807639P 2013-04-02 2013-04-02
US61/807,639 2013-04-02
PCT/US2014/032605 WO2014165555A1 (en) 2013-04-02 2014-04-02 Enhanced temporal motion vector prediction for scalable video coding

Publications (2)

Publication Number Publication Date
KR20150138352A KR20150138352A (ko) 2015-12-09
KR101804652B1 true KR101804652B1 (ko) 2017-12-04

Family

ID=50729821

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157031507A KR101804652B1 (ko) 2013-04-02 2014-04-02 스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측

Country Status (7)

Country Link
US (2) US10057594B2 (ko)
EP (2) EP3490259B1 (ko)
JP (3) JP6149151B2 (ko)
KR (1) KR101804652B1 (ko)
CN (2) CN105122803B (ko)
TW (1) TWI652936B (ko)
WO (1) WO2014165555A1 (ko)

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11438609B2 (en) 2013-04-08 2022-09-06 Qualcomm Incorporated Inter-layer picture signaling and related processes
CN104363451B (zh) 2014-10-27 2019-01-25 华为技术有限公司 图像预测方法及相关装置
WO2016143972A1 (ko) * 2015-03-11 2016-09-15 엘지전자(주) 비디오 신호의 인코딩/디코딩 방법 및 장치
WO2017147765A1 (en) * 2016-03-01 2017-09-08 Mediatek Inc. Methods for affine motion compensation
CN109314785B (zh) * 2016-04-08 2023-06-30 韩国电子通信研究院 用于导出运动预测信息的方法和装置
KR102435500B1 (ko) * 2016-10-06 2022-08-23 세종대학교산학협력단 비디오 신호의 복호화 방법 및 이의 장치
WO2018066874A1 (ko) * 2016-10-06 2018-04-12 세종대학교 산학협력단 비디오 신호의 복호화 방법 및 이의 장치
WO2019089933A1 (en) * 2017-11-01 2019-05-09 Vid Scale, Inc. Sub-block motion derivation and decoder-side motion vector refinement for merge mode
CN111919449A (zh) 2018-03-27 2020-11-10 韦勒斯标准与技术协会公司 使用运动补偿的视频信号处理方法及设备
CN110662053B (zh) 2018-06-29 2022-03-25 北京字节跳动网络技术有限公司 使用查找表的视频处理方法、装置和存储介质
EP3791589A1 (en) 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Which lut to be updated or no updating
CN110662059B (zh) 2018-06-29 2021-04-20 北京字节跳动网络技术有限公司 使用查找表存储先前编码的运动信息并用其编码后续块的方法和装置
CA3105330C (en) 2018-06-29 2023-12-05 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and amvp
TWI744662B (zh) 2018-06-29 2021-11-01 大陸商北京字節跳動網絡技術有限公司 更新查閱資料表（lut）的條件
KR20240005240A (ko) 2018-06-29 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut에서의 모션 후보들의 검사 순서
TWI723445B (zh) 2018-06-29 2021-04-01 大陸商北京字節跳動網絡技術有限公司 查找表的更新：fifo、約束的fifo
CA3101730A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Partial/full pruning when adding a hmvp candidate to merge/amvp
CN110677666B (zh) 2018-07-02 2022-06-14 北京字节跳动网络技术有限公司 Lamvr中取整和修剪的顺序
KR20230169474A (ko) 2018-08-29 2023-12-15 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 서브블록 기반 시간적 모션 벡터 예측을 사용한 비디오 코딩의 방법 및 장치
GB2590310B (en) 2018-09-12 2023-03-22 Beijing Bytedance Network Tech Co Ltd Conditions for starting checking HMVP candidates depend on total number minus K
WO2020058954A1 (en) 2018-09-23 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. Representation of affine model
WO2020075053A1 (en) 2018-10-08 2020-04-16 Beijing Bytedance Network Technology Co., Ltd. Generation and usage of combined affine merge candidate
CN111083487A (zh) * 2018-10-22 2020-04-28 北京字节跳动网络技术有限公司 仿射模式的运动信息的存储
WO2020084473A1 (en) 2018-10-22 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Multi- iteration motion vector refinement
WO2020098644A1 (en) 2018-11-12 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Bandwidth control methods for inter prediction
CN117319644A (zh) 2018-11-20 2023-12-29 北京字节跳动网络技术有限公司 基于部分位置的差计算
CN113056920A (zh) * 2018-11-22 2021-06-29 北京字节跳动网络技术有限公司 基于子块的帧间预测的协调方法
KR20240000647A (ko) * 2018-12-28 2024-01-02 고도 가이샤 아이피 브릿지 1 동화상 부호화 장치, 동화상 부호화 방법, 동화상 부호화 프로그램, 동화상 복호 장치, 동화상 복호 방법, 동화상 복호 프로그램, 기록 매체, 전송 방법 및 기록 방법
KR20240010576A (ko) 2019-01-10 2024-01-23 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut 업데이트의 호출
WO2020143824A1 (en) 2019-01-13 2020-07-16 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and shared merge list
CN113330739A (zh) 2019-01-16 2021-08-31 北京字节跳动网络技术有限公司 Lut中的运动候选的插入顺序
FI3912357T3 (fi) * 2019-02-20 2023-12-19 Beijing Dajia Internet Information Tech Co Ltd Rajoitettu liikevektorin derivaatio pitkän aikavälin referenssikuville videokoodauksessa
WO2020177756A1 (en) * 2019-03-06 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Size dependent inter coding
US10742972B1 (en) * 2019-03-08 2020-08-11 Tencent America LLC Merge list construction in triangular prediction
MX2021010830A (es) * 2019-03-11 2021-12-15 Vid Scale Inc Codificación de vectores de movimiento en modo de fusión simétrica.
CN115643400B (zh) * 2019-03-12 2023-06-20 北京达佳互联信息技术有限公司 用于视频解码的方法、装置和存储介质
WO2020192611A1 (en) 2019-03-22 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools
US10904558B2 (en) * 2019-04-26 2021-01-26 Tencent America LLC Method and apparatus for motion compensation for 360 video coding
WO2020236991A1 (en) * 2019-05-20 2020-11-26 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatuses for video coding using triangle partition
WO2020233660A1 (en) 2019-05-21 2020-11-26 Beijing Bytedance Network Technology Co., Ltd. Syntax-based motion candidate derivation in sub-block merge mode
EP3963889A4 (en) 2019-06-04 2023-01-25 Beijing Bytedance Network Technology Co., Ltd. CONDITIONAL IMPLEMENTATION OF A MOVEMENT CANDIDATE LIST CONSTRUCTION PROCESS
CN117395397A (zh) 2019-06-04 2024-01-12 北京字节跳动网络技术有限公司 使用临近块信息的运动候选列表构建
CN117354507A (zh) 2019-06-06 2024-01-05 北京字节跳动网络技术有限公司 视频编解码的运动候选列表构建
WO2021008513A1 (en) 2019-07-14 2021-01-21 Beijing Bytedance Network Technology Co., Ltd. Transform block size restriction in video coding
US11303847B2 (en) 2019-07-17 2022-04-12 Home Box Office, Inc. Video frame pulldown based on frame analysis
EP3997877A4 (en) 2019-08-13 2023-05-24 Beijing Bytedance Network Technology Co., Ltd. MOTION ACCURACY IN SUBBLOCK-BASED INTERPREDICTION
CN117336482A (zh) 2019-08-20 2024-01-02 北京字节跳动网络技术有限公司 变换跳过模式的信令通知
WO2021047631A1 (en) 2019-09-13 2021-03-18 Beijing Bytedance Network Technology Co., Ltd. Derivation of collocated motion vectors
WO2021052507A1 (en) 2019-09-22 2021-03-25 Beijing Bytedance Network Technology Co., Ltd. Sub-picture coding and decoding of video
CN117596389A (zh) 2019-09-28 2024-02-23 北京字节跳动网络技术有限公司 视频编解码中的几何分割模式
JP2022541687A (ja) * 2019-10-10 2022-09-26 ベイジン、ターチア、インターネット、インフォメーション、テクノロジー、カンパニー、リミテッド 三角分割を用いたビデオ符号化の方法および装置
EP4333431A1 (en) 2019-10-18 2024-03-06 Beijing Bytedance Network Technology Co., Ltd. Syntax constraints in parameter set signaling of subpictures
CN111372083B (zh) * 2020-03-19 2023-03-31 宁波大学 一种基于层间处理的shvc视频加密方法
US20240080451A1 (en) * 2022-09-02 2024-03-07 Tencent America LLC Systems and methods for temporal motion vector prediction candidate derivation

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012006889A1 (en) 2010-07-12 2012-01-19 Mediatek Inc. Method and apparatus of temporal motion vector prediction
WO2014050675A1 (ja) 2012-09-28 2014-04-03 ソニー株式会社 画像処理装置および方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ZA200805337B (en) * 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
RU2443074C2 (ru) * 2006-07-06 2012-02-20 Томсон Лайсенсинг Способ и устройство для отделения номера кадра и/или счетчика очередности изображения (рос) для мультивидового видеокодирования и видеодекодирования
KR101768207B1 (ko) 2010-01-19 2017-08-16 삼성전자주식회사 축소된 예측 움직임 벡터의 후보들에 기초해 움직임 벡터를 부호화, 복호화하는 방법 및 장치
KR101752418B1 (ko) * 2010-04-09 2017-06-29 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US8824558B2 (en) * 2010-11-23 2014-09-02 Mediatek Inc. Method and apparatus of spatial motion vector prediction
US9008181B2 (en) 2011-01-24 2015-04-14 Qualcomm Incorporated Single reference picture list utilization for interprediction video coding
AU2012216026B2 (en) * 2011-02-10 2016-04-28 Sun Patent Trust Moving picture coding method, moving picture coding apparatus, moving picture decoding method, moving picture decoding apparatus, and moving picture coding and decoding apparatus
KR20130037161A (ko) * 2011-10-05 2013-04-15 한국전자통신연구원 스케일러블 비디오 코딩을 위한 향상된 계층간 움직임 정보 예측 방법 및 그 장치
US20130177084A1 (en) * 2012-01-10 2013-07-11 Qualcomm Incorporated Motion vector scaling in video coding
US9491458B2 (en) * 2012-04-12 2016-11-08 Qualcomm Incorporated Scalable video coding prediction with non-causal information
US20130272412A1 (en) * 2012-04-12 2013-10-17 Qualcomm Incorporated Common motion information candidate list construction process
US9420285B2 (en) * 2012-04-12 2016-08-16 Qualcomm Incorporated Inter-layer mode derivation for prediction in scalable video coding
US9998726B2 (en) * 2012-06-20 2018-06-12 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
WO2014005280A1 (en) * 2012-07-03 2014-01-09 Mediatek Singapore Pte. Ltd. Method and apparatus to improve and simplify inter-view motion vector prediction and disparity vector prediction
US9325990B2 (en) * 2012-07-09 2016-04-26 Qualcomm Incorporated Temporal motion vector prediction in video coding extensions
US9491461B2 (en) * 2012-09-27 2016-11-08 Qualcomm Incorporated Scalable extensions to HEVC and temporal motion vector prediction
WO2014072571A1 (en) * 2012-10-01 2014-05-15 Nokia Corporation Method and apparatus for scalable video coding
US9699450B2 (en) * 2012-10-04 2017-07-04 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
US9800857B2 (en) * 2013-03-08 2017-10-24 Qualcomm Incorporated Inter-view residual prediction in multi-view or 3-dimensional video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012006889A1 (en) 2010-07-12 2012-01-19 Mediatek Inc. Method and apparatus of temporal motion vector prediction
WO2014050675A1 (ja) 2012-09-28 2014-04-03 ソニー株式会社 画像処理装置および方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
I-K. Kim, et al. Restricted usage of motion vectors for long-term reference picture in motion vector prediction process. JCT-VC of ITU-T and ISO/IEC. JCTVC-J0302. Ver.2, Jul. 11, 2012. pp.1-14
T. Sugio, et al. Parsing Robustness for Merge/AMVP. JCT-VC of ITU-T and ISO/IEC. JCTVC-F470. Ver.6, Jul. 22, 2011. pp.1-33

Also Published As

Publication number Publication date
CN105122803A (zh) 2015-12-02
CN109982094A (zh) 2019-07-05
TW201507442A (zh) 2015-02-16
EP2982116A1 (en) 2016-02-10
US20160050430A1 (en) 2016-02-18
US20180343463A1 (en) 2018-11-29
JP6463799B2 (ja) 2019-02-06
US10057594B2 (en) 2018-08-21
JP2019068472A (ja) 2019-04-25
JP6149151B2 (ja) 2017-06-14
CN105122803B (zh) 2019-01-08
EP3490259B1 (en) 2021-10-13
JP2017195609A (ja) 2017-10-26
JP2016521486A (ja) 2016-07-21
EP3490259A1 (en) 2019-05-29
KR20150138352A (ko) 2015-12-09
WO2014165555A1 (en) 2014-10-09
TWI652936B (zh) 2019-03-01

Similar Documents

Publication Publication Date Title
KR101804652B1 (ko) 스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측
US11343519B2 (en) Method and apparatus of motion vector prediction for scalable video coding
JP6307650B2 (ja) スケーラブルビデオ符号化のための動き情報シグナリング
KR102539009B1 (ko) 스크린 콘텐츠 코딩을 위한 인트라 블록 카피 모드
TWI625052B (zh) 多層視訊編碼以片段為基礎之跨越模式傳訊
JP2017532885A (ja) 時間ブロックベクトル予測を用いたイントラブロックコピー符号化
KR102658290B1 (ko) 스크린 콘텐츠 코딩을 위한 인트라 블록 카피 모드

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant