KR20180030996A - 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법 - Google Patents

인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법 Download PDF

Info

Publication number
KR20180030996A
KR20180030996A KR1020187003779A KR20187003779A KR20180030996A KR 20180030996 A KR20180030996 A KR 20180030996A KR 1020187003779 A KR1020187003779 A KR 1020187003779A KR 20187003779 A KR20187003779 A KR 20187003779A KR 20180030996 A KR20180030996 A KR 20180030996A
Authority
KR
South Korea
Prior art keywords
prediction mode
image unit
syntax element
current image
bandwidth
Prior art date
Application number
KR1020187003779A
Other languages
English (en)
Other versions
KR102127488B1 (ko
Inventor
샨 리우
시아오종 쉬
Original Assignee
미디어텍 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 미디어텍 인크. filed Critical 미디어텍 인크.
Priority to KR1020207018060A priority Critical patent/KR102264767B1/ko
Publication of KR20180030996A publication Critical patent/KR20180030996A/ko
Application granted granted Critical
Publication of KR102127488B1 publication Critical patent/KR102127488B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

인터 예측 모드 및 인트라 블록 복사(IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 시스템을 위한 방법 및 시스템이 개시된다. 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내기 위한, 비트스트림 내의 구문 엘리먼트가 결정된다. 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한 경우, 루프 필터링된 버전의 재구축된 현재 이미지 단위와 비 루프 필터 버전의 재구축된 현재 이미지 단위가 저장되어 참조 데이터로서 사용되는 것이 허용된다. 그렇지 않은 경우, 하나의 버전의 재구축된 현재 이미지 단위만이 참조 데이터로서 저장된다. 다른 방법에 따르면, 양방향 예측 모드는 대역폭이 기존의 최악의 경우를 초과하는 특정 예측 모드에 대해 단일 예측 모드로 변환된다.

Description

인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법
본 발명은 2015년 7월 27일에 출원된 미국 가특허출원 제62/197,197호 및 2015년 10월 23일에 출원된 미국 가특허출원 제62/245,372호에 대한 우선권을 청구한다. 이 미국 가특허출원들은 그 전체가 본 명세서에서 참조로서 병합된다.
본 발명은 인트라 블록 복사(intra-block copy; IntraBC) 모드 및 인터 예측(inter prediction) 모드를 포함하는 코딩 모드들을 사용하는 비디오 코딩에 관한 것이다. 특히, 본 발명은 대역폭 집약적(bandwidth-intensive) 예측 모드가 사용될 때 픽처(picture) 버퍼 요건을 감소시키고 대역폭 문제를 극복하기 위한 기술에 관한 것이다.
고효율 비디오 코딩(High Efficiency Video Coding; HEVC)은 최근 해에 개발된 새로운 코딩 표준이다. 고효율 비디오 코딩(HEVC) 시스템에서, H.264/AVC의 고정 크기 매크로블록은 코딩 단위(coding unit; CU)라고 불리어지는 플렉시블 블록(flexible block)으로 대체된다. CU에서의 픽셀들은 코딩 효율을 향상시키기 위해 동일한 코딩 파라미터를 공유한다. CU는 HEVC에서 코딩 트리 단위(coded tree unit; CTU)라고도 불리어지는 가장 큰 CU(largest CU; LCU)로 시작할 수 있다. 코딩 단위의 개념 외에도, 예측 단위(prediction unit; PU)의 개념이 또한 HEVC에 도입되었다. CU 계층 트리의 분할이 행해지면, 각각의 리프(leaf) CU는 예측 유형 및 PU 파티션에 따라 하나 이상의 예측 단위(PU)로 더 분할된다. HEVC는 또한 슬라이스 구조를 지원하는데, 여기서는 픽처가 슬라이스들로 분할되고 각 슬라이스는 자체 코딩 파라미터 또는 구성을 사용할 수 있다.
고효율 비디오 코딩(High Efficiency Video Coding; HEVC) 표준 개발과 함께, HEVC의 확장의 개발도 시작되었다. HEVC 확장에는 4:2:2 및 4:4:4와 같이 비 4:2:0(non-4:2:0) 색채 포맷을 대상으로 하는 범위 확장(RExt)과 샘플 당 12, 14, 및 16비트와 같은 더 높은 비트 깊이 비디오가 포함된다. RExt를 활용할 가능성이 높는 응용예들 중 하나는 유선 또는 무선 연결을 통한 스크린 공유이다. 스크린 콘텐츠의 특정한 특성으로 인해, 코딩 툴이 개발되어 왔으며 상당한 코딩 효율성 증가를 나타내었다.
인트라 블록 복사 예측
고효율 비디오 코딩(HEVC) 표준을 위한 스크린 콘텐츠 코딩의 현재 개발에서, 스크린 콘텐츠에 대한 코딩 효율성의 향상으로 인해 일부 툴들이 채택되었다. 인트라 블록들의 경우, 종래 접근법에 따른 인트라 예측은 이웃하는 블록들로부터의 재구축된 픽셀들에 기초한 예측을 사용하여 수행된다. 인트라 예측은 수직 모드, 수평 모드 및 다양한 각도 예측 모드를 포함하는 인트라 모드들의 세트로부터 인트라 모드를 선택할 수 있다. HEVC 스크린 콘텐츠 코딩의 경우에서는, 인트라 블록 복사(IntraBC)라고 불리우는 새로운 인트라 코딩 모드가 사용되어 왔다. IntraBC 기술은 2013년 4월 18일~26일에 한국의 인천에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 13차 회의에서 비디오 코딩 연합 작업팀(Joint Collaborative Team on Video Coding; JCT-VC)의 AHG8: 인트라 모션(motion) 보정을 이용한 비디오 코딩에서 발표된 문서 JCTVC-M0350(이하, JCTVC-M0350이라고 칭함)에서 부다가비(Budagavi)가 처음 제안하였다. 현재 코딩 단위(coding unit; CU)(110)가 인트라 블록 복사 모드를 사용하여 코딩되는 JCTVC-M0350에 따른 예시가 도 1에 도시되어 있다. 예측 블록(120)은 현재 CU 및 변위 벡터(112)로부터 위치된다. 이 예시에서, 검색 영역은 현재 코딩 트리 단위(coding tree unit; CTU), 좌측 CTU, 및 좌측의 좌측 CTU로 제한된다. 예측 블록은 이미 재구축된 영역으로부터 획득된다. 그 후, 블록 벡터(block vector; BV)라고도 불리우는 변위 벡터 및 현재 CU에 대한 잔차(residual)가 코딩된다. HEVC는 CTU 및 CU 블록 구조를 비디오 데이터를 코딩하기 위한 기본 단위로서 채택하고 있다는 것은 잘 알려져 있다. 각각의 픽처(picture)는 CTU로 분할되고, 각각의 CTU는 CU로 단독 분할된다. 예측 단계 동안, 각각의 CU는 예측 프로세스를 수행하기 위한 예측 단위(prediction unit; PU)로 불리우는 복수의 블록들로 분할될 수 있다. 각각의 CU에 대한 예측 잔차가 형성된 후, 각각의 CU와 연관된 잔차는 복수의 블록들로 분할되는데, 이러한 블록들을 변환을 적용할 변환 단위(transform unit; TU)라고 부른다.
JCTVC-M0350에서, 인트라 MC는 적어도 다음 영역들에서 인터 예측에 사용된 모션 보정과는 상이하다:
Figure pct00001
MV는 인트라 MC에 대해 1D(즉, 수평 또는 수직)로 제한되는 반면에, 인터 예측은 2D 모션 추정을 사용한다.
Figure pct00002
이진화(binarization)는 인트라 MC에 대해 고정 길이인 반면에, 인터 예측은 지수 골롬(exponential-Golomb)을 사용한다.
Figure pct00003
인트라 MC는 MV가 수평인지 또는 수직인지 여부를 시그널링하기 위해 새로운 구문(syntax) 엘리먼트를 도입시킨다.
JCTVC-M0350에 기초한, 일부 수정안들이 2013년 7월 25일부터 8월 2일까지 오스트리아의 비엔나에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 14차 회의에서 비디오 코딩 연합 작업팀(Joint Collaborative Team on Video Coding; JCT-VC)의 비-RCE3: 2D MV를 이용한 인트라 모션 보정에서 발표된 문서 JCTVC-N0256(이하, JCTVC-N0256이라고 칭함)에서 팡(Pang) 등에 의해 개시되어 있다. 첫째로, 인트라 MC는 2D MV를 지원하도록 확장되므로, 두 MV 성분들은 동시에 0이 아니게 될 수 있다. 이것은 MV가 엄격하게 수평 또는 수직으로 제한되는 원래의 접근법보다 인트라 MC에 대해 많은 유연성을 제공한다.
JCTVC-N0256에서는, 2개의 BV 코딩 방법들이 개시되어 있다:
Figure pct00004
방법 1 - 블록 벡터 예측. 좌측 또는 상부 BV가 BV 예측자로서 선택되고 그 결과로 생성된 모션 벡터 차이(motion vector difference; BVD)가 코딩된다. 플래그는 BVD가 0인지 여부를 표시하는데 사용된다. BVD가 0이 아닌 경우, BVD의 잔여 절대 레벨을 코딩하기 위해 3차수 지수 골롬 코드를 사용한다. 부호를 코딩하는데 다른 플래그가 사용된다.
Figure pct00005
방법 2: 블록 벡터 예측 없음. BV는 HEVC 내의 BVD에 사용되는 지수 골롬 코드를 사용하여 코딩된다.
JCTVC-N0256에서 개시된 다른 차이점은 2D IntraBC가 파이프라인 친화적 접근법과 더 결합된다는 것이다:
1. 보간 필터가 사용되지 않는다.
2. BV 검색 영역이 제한된다. 두 가지 경우들이 개시된다:
a. 검색 영역은 현재 CTU와 좌측 CTU이거나, 또는
b. 검색 영역은 현재 CTU와 좌측 CTU의 최우측의 4개 열 샘플들이다.
JCTVC-N0256에서 제안된 방법들 중에서, 2D IntraBC, 보간 필터의 제거, 현재 CTU 및 좌측 CTU에 대한 검색 영역 제약이 HEVC RExt 표준 드래프트의 새 버전에서 채택되었다.
기존의 SCC 드래프트 표준(SCM)에서의 IntraBC
JCTVC-T0227(2015년 2월 10일~18일에 스위스의 제네바에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 20차 회의에서 비디오 코딩 연합 작업팀(Joint Collaborative Team on Video Coding; JCT-VC)의 비 CE2 테스트1: 인트라 블록 복사 및 인터 시그널링 통합, 팡(Pang) 등이 발표함, 문서: JCTVC-T0227)에서는, IntraBC 모드가 인터 코딩 모드와 통합된다. 달리 말하면, 현재 픽처는 참조 픽처로서 취급되어 하나 또는 둘 다의 참조 픽처 리스트들(즉, 리스트 L0 및 리스트 L1)에 삽입된다. 블록 벡터 예측 및 코딩은 인터 모션 벡터 예측 및 코딩과 동일한 방식으로 취급된다. 이러한 통합은 코덱 설계를 단순화시킨다.
적응형 모션 해상도
JCTVC-S0085(2014년 10월 17일~24일까지 프랑스의 스트라스부르에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 19차 회의에서의 비디오 코딩 연합 작업팀(Joint Collaborative Team on Video Coding; JCT-VC)의 스크린 콘텐츠에 대한 적응형 모션 벡터 해상도, 리(Li) 등이 발표함, 문서: JCTVC-S0085)에서, 슬라이스 내의 MV의 해상도를 표시하기 위해 각각의 슬라이스마다 플래그 "use_integer_mv_flag"가 이용된다. 이 플래그가 1이면, 이 슬라이스 내의 모든 디코딩된 모션 벡터들은 완전수 픽셀(integer-pel) 해상도를 사용하여 표현되며; 그렇지 않은 경우, 모션 벡터들은 HEVC 표준에서 규정된 바와 같이 쿼터 픽셀(quarter-pel) 해상도를 사용하여 표현된다.
현재의 SCC 드래프트 표준(SCM)에서의 메모리 대역폭 고려사항
블록을 재구축할 때, 참조 블록은 예측을 위해 이용될 필요가 있다. 모션 벡터가 분율(fractional) 위치를 가리키는 경우, 보간 목적으로 참조 블록 주변에 있는 픽셀이 또한 더 많이 필요하다. 필요한 경우 외부 메모리로부터 참조 블록 및 그 주변 픽셀을 검색할 때, 데이터 가져오기가 사용된 메모리 패턴에 따라 대량으로 수행될 것이다. 예를 들어, 사용된 메모리 패턴이 4x4 샘플 블록인 경우, 액세스 데이터의 최소 단위는 한 픽셀만이 필요한 경우에도 4x4 픽셀일 것이다. 따라서, 직접 관련된 픽셀들보다 많은 데이터가 검색되어야 하며 추가적인 처리를 위해 온칩 메모리/버퍼에 전송되어야 할 것이다. 이들 데이터는 모두 메모리 대역폭 소비와 관련이 있다. HEVC에서, 최악의 경우의 메모리 대역폭 소비는 8x8 양방향 예측 모드(bi-prediction mode)에서 양자의 모션 벡터들이 분율 픽셀 MV를 가질 때이다. IntraBC 모드가 사용될 때, 인터 예측 모드에 대한 필터링된 버전의 현재 픽처에 더하여, 필터링되지 않은 버전의 현재 픽처가 외부 메모리에 저장될 필요가 있다. 이것은 HEVC에 대해 추가 비용으로서 간주된다.
JCTVC-U0078(2015년 6월 19일~6월 26일에 폴란드의 바르샤바에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 21차 회의에서 비디오 코딩 연합 작업팀(JCT-VC)의 CE2: 인트라 블록 복사 예측 제약에 관한 테스트 5, 라파카(Rapaka) 등이 발표함, 문서: JCTVC-U0078)에서는, IntraBC를 사용할 때 8x8 양방향 예측 모드 사용에 대해 몇가지 제약이 부과된다. 예를 들어, IntraBC에 대한 시퀀스 파라미터 세트(sequence Parameter Set; SPS) 플래그가 온 상태에 있고 슬라이스 헤더 플래그 use_integer_mv_flag(슬라이스 내의 MV의 해상도를 나타냄)가 오프 상태에 있는 경우 8x8 양방향 예측 모드 사용은 디스에이블(disable)된다.
현재의 SCC 드래프트 표준(SCM)에서의 디코딩된 픽처 버퍼
HEVC에서, 모든 참조 픽처들은 디코딩 픽처 버퍼(decoded picture buffer; DPB)로 지칭되는 버퍼에 저장된다. 이것은 픽처를 디코딩할 때마다 행해지고, 루프 필터링(loop-filtering) 연산 후의 현재 디코딩된 픽처(이를 필터링된 버전의 현재 디코딩된 픽처라고 칭함)는 DPB에 넣어진다. IntraBC의 경우, 그 참조 픽처는 루프 필터 이전의 현재 디코딩된 픽처(필터링되지 않은 버전의 현재 디코딩된 픽처라고 칭함)이며, 이는 HEVC 버전 1과 비교하여 DPB에 저장될 추가 픽처이다. JCTVC-U0181(2015년 6월 19일~6월 26일에 폴란드의 바르샤바에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 21차 회의에서 비디오 코딩 연합 작업팀(JCT-VC)의 필터링된 그리고 필터링되지 않은 현재 디코딩된 픽처들의 저장에 관하여, 쉬(Xu) 등이 발표함, 문서: JCTVC- U0181)에서는, 필터링된 버전 및 필터링되지 않은 버전의 현재 디코딩된 픽처들 둘 다가 픽처 버퍼 관리를 위해 DPB에 넣어진다. 현재 픽처의 디코딩이 완료된 후에는, 필터링되지 않은 버전의 현재 픽처는 폐기될 것이고, 이 픽처를 위한 저장 버퍼는 해제될 것이다.
상기 두 개의 버전들의 현재 디코딩된 픽처가 동일한 경우를 고려한다. 이것은 현재 픽처에 대해 어떠한 루프 필터(디블록킹 또는 SAO)도 사용되지 않을 때 발생한다. JCTVC-U1005(2015년 6월 19일~6월 26일에 폴란드의 바르샤바에서 개최된 ITU-T SG 16 WP 3 및 ISO/IEC JTC 1/SC 29/WG 11의 21차 회의에서 비디오 코딩 연합 작업팀(JCT-VC)의 고효율 비디오 코딩(HEVC) 스크린 콘텐츠 코딩: 드래프트 3, 조시(Joshi) 등이 발표함, 문서: JCTVC-U1005)에서 기술된 현재의 HEVC SCC 작업 드래프트에서는, 현재 픽처가 참조 픽처로서 이용되는지 여부를 확인하기 위해 TwoVersionsOfCurrDecPicFlag이라고 칭해지는 변수가 이용된다. 현재 픽처가 참조 픽처로서 이용되는 경우, 픽처에서의 루프 필터들의 이용으로 인해 두 개의 상이한 버전들의 현재 픽처가 존재할 수 있다. JCTVC-U1005에서 규정된 DPB 관리는 다음과 같이 요약된다:
1) 루프 필터의 호출 후 현재 디코딩된 픽처는 DPB에 저장된다. 이 픽처는, 현재 픽처의 디코딩 완료시, "단기 참조용으로 이용됨"으로서 표시된다. 디코딩이 완료되면, 이 픽처는 나중에 사용하기 위해 DPB에 저장된다.
2) TwoVersionsOfCurrDecPicFlag 플래그가 1일 때, 루프 필터의 호출 이전의 현재 디코딩된 픽처는 DPB에서 별도의 버퍼에 저장된다. 이 픽처는 "장기 참조용으로 이용됨"으로서 표시되고, IntraBC 보정에 사용된다. 디코딩이 완료되면, 이 픽처는 DPB로부터 제거된다.
현재 픽처가 참조 픽처일 때의 디코딩된 픽처 버퍼 관리의 변경으로, 디코딩된 픽처 버퍼 관리의 기능이 적절히 동작하는 것을 보장하기 위해 몇몇의 제약들이 부과될 필요가 있다.
본 발명은 전술한 문제점을 해결하기 위한 방법을 개시한다.
인터 예측 모드 및 인트라 블록 복사(IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 시스템을 위한 방법 및 시스템이 개시된다. 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내기 위한, 비트스트림 내의 변수가 결정된다. 두 개의 버전들의 재구축된 현재 이미지 단위가 필요하다는 것을 변수가 나타내는 경우, 루프 필터링된 버전의 재구축된 현재 이미지 단위와 비 루프 필터 버전의 재구축된 현재 이미지 단위가 저장되어 참조 데이터로서 사용되는 것이 허용된다. 두 개의 버전들의 재구축된 현재 이미지 단위가 필요하지 않다고 변수가 나타내는 경우, 하나의 버전의 재구축된 현재 이미지 단위만을 참조 데이터로서 저장한다. 루프 필터링된 버전의 재구축된 현재 이미지 단위는 디블로킹 필터링된 버전, 샘플 적응 오프셋(Sample Adaptive Offset; SAO) 필터링된 버전 또는 디블로킹 필터링된 버전과 SAO 필터링된 버전 둘 다의 재구축된 현재 이미지 단위에 대응한다.
재구축된 현재 이미지 단위는 재구축된 현재 픽처에 대응할 수 있다. 변수는 비트스트림의 픽처 레벨의 하나 이상의 구문(syntax) 엘리먼트에 기초하여 결정될 수 있고, 상기 하나 이상의 구문 엘리먼트는, IntraBC 모드가 현재 픽처에 대해 인에이블(enable)되어 있는지 여부를 나타내는 제1 구문 엘리먼트, SAO(샘플 적응 오프셋)이 인에이블되어 있는지 여부를 나타내는 제2 구문 엘리먼트, 디블록킹 필터가 디스에이블되어 있는지 여부를 나타내는 제3 구문 엘리먼트, 및 디블로킹 필터 오버라이드(override)가 인에이블되어 있는지 여부를 나타내는 제4 구문 엘리먼트를 포함하는 구문 엘리먼트들의 그룹으로부터 선택된다. 예를 들어, 현재 픽처에 대해 IntraBC 모드가 인에이블되어 있다는 것을 제1 구문 엘리먼트가 나타내고, 다음의 세가지 조건들 중 어느 하나가 참인 경우(즉, 이 세가지 조건들은, SAO가 인에이블되어 있다는 것을 제2 구문 엘리먼트가 나타내는 것, 디블록킹 필터가 디스에이블되어 있다는 것을 제3 구문 엘리먼트가 나타내는 것, 및 디블록킹 필터 오버라이드가 인에이블되어 있다는 것을 제4 구문 엘리먼트가 나타내는 것), 두 개의 버전들의 재구축된 현재 이미지 단위를 허용하도록 변수가 결정된다.
다른 실시예에서, 재구축된 현재 이미지 단위는 재구축된 현재 슬라이스에 대응한다. 변수는 비트스트림의 픽처 레벨, 슬라이스 레벨, 또는 픽처 레벨과 슬라이스 레벨 둘 다의 하나 이상의 구문 엘리먼트에 기초하여 결정될 수 있다. 하나 이상의 구문 엘리먼트는, IntraBC 모드가 현재 픽처에 대해 인에이블되어 있는지 여부를 나타내는 비트스트림의 픽처 레벨의 제1 구문 엘리먼트, 현재 루마(luma) 슬라이스에 대해 루마 SAO가 인에이블되어 있는지 여부를 나타내는 슬라이스 레벨의 제2 구문 엘리먼트, 크로마(chroma) 루마 슬라이스에 대해 크로마 SAO 필터가 인에이블되어 있는지 여부를 나타내는 슬라이스 레벨의 제3 구문 엘리먼트, 및 현재 슬라이스에 대해 디블로킹 필터가 디스에이블되어 있는지 여부를 나타내는 슬라이스 레벨의 제4 구문 엘리먼트를 포함하는 구문 엘리먼트들의 그룹으로부터 선택될 수 있다. 예를 들어, IntraBC 모드가 현재 픽처에 대해 인에이블되어 있다는 것을 비트스트림의 픽처 레벨의 제1 구문 엘리먼트가 나타내고, 현재 루마 슬라이스에 대해 루마 SAO가 인에이블되어 있다는 것을 슬라이스 레벨의 제2 구문 엘리먼트가 나타내고, 크로마 루마 슬라이스에 대해 크로마 SAO 필터가 인에이블되어 있다는 것을 슬라이스 레벨의 제3 구문 엘리먼트가 나타내며, 현재 슬라이스에 대해 디블로킹 필터가 디스에이블되어 있다는 것을 슬라이스 레벨의 제4 구문 엘리먼트가 나타내는 경우, 두 개의 버전들의 재구축된 현재 이미지 단위를 허용하도록 변수가 결정될 수 있다.
몇가지 예측 모드들에 대한 고 대역폭 문제를 극복하기 위해 인터 예측 모드 및 인트라 블록 복사(IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 시스템을 위한 다른 방법 및 시스템이 개시된다. 본 방법은 대역폭 집약적 예측 모드가 허용되는지 여부를 결정한다. 대역폭 집약적 예측 모드가 허용되지 않는 경우, 본 방법은 또한 고 대역폭 양방향 예측 모드가 사용되는지 여부를 결정한다. 고 대역폭 양방향 예측 모드가 사용되는 경우, 필요한 대역폭을 감소시키기 위해 고 대역폭 양방향 예측 모드는 단방향 예측 모드(uni-prediction mode)로 변환된다.
대역폭 집약적 예측 모드는 8x8 양방향 예측 모드에 대응할 수 있다. 고 대역폭 양방향 예측 모드는 리스트 0으로부터의 모션 정보만을 사용하여 단방향 예측 모드로 변환될 수 있다. 하나의 예시에서, 고 대역폭 양방향 예측 모드는 다음의 조건들이 참일 때 단방향 예측 모드로 변환된다: 현재 픽처 내의 현재 블록이 8×8 양방향 예측 모드에 의해 코딩될 것, 두 개의 버전들의 현재 픽처가 인에이블될 것, 8x8 양방향 예측 모드에 의해 코딩된 현재 블록의 모션 벡터들이 완전수 값(integer value)을 갖지 않을 것, 및 8x8 양방향 예측 모드에 의해 코딩된 현재 블록의 모션 벡터들이 동일하지 않을 것.
도 1은 인트라 블록 복사(IntraBC) 모드의 일례를 도시하며, 여기서 현재 블록은 현재 픽처 내의 참조 블록에 의해 예측된다.
도 2는 본 발명의 실시예에 따른 IntraBC 모드(인트라 블록 복사 모드) 및 인터 예측 모드를 포함하는 코딩 모드들을 사용하는 예시적인 코딩 시스템의 흐름도를 도시하며, 여기서 구문 엘리먼트는 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내는데 이용된다.
도 3은 본 발명의 실시예에 따른 IntraBC 모드(인트라 블록 복사 모드) 및 인터 예측 모드를 포함하는 코딩 모드들을 사용하는 다른 예시적인 코딩 시스템의 흐름도를 도시하며, 여기서 대역폭을 감소시키기 위해 고 대역폭 양방향 예측 모드는 단방향 예측 모드로 변환된다.
이하의 설명은 본 발명을 수행하기 위한 최상의 구상 모드에 관한 것이다. 본 설명은 본 발명의 일반적인 원리들을 설명할 목적으로 기술된 것이며, 본 발명의 범위를 한정하는 의미로 받아들여서는 안된다. 본 발명의 범위는 첨부된 청구항들에 대한 참조에 의해 최상으로 결정된다.
앞서 언급했듯이, 인트라 블록 복사 모드를 사용하면 참조 픽처를 위한 추가적인 저장 요건과 추가적인 메모리 대역폭을 불러일으킬 수 있다. 본 발명은 참조 픽처를 위한 추가적인 저장 요건 및/또는 추가적인 메모리 대역폭을 감소시키는 다양한 방법을 개시한다.
IntraBC 모드의 사용의 시그널링
본 발명에 따른 하나의 방법은 IntraBC가 사용될 때 그리고 필터링되지 않은 버전의 현재 픽처와 필터링된 버전의 현재 픽처 사이에 차이가 없는 경우 일부 특정 예측 모드들을 사용하는 것으로부터의 제약을 제거한다.
IntraBC 모드가 사용되는지 여부를 나타내기 위해, 본 방법의 제1 실시예에 따라 현재 픽처가 활성 참조 픽처 리스트(즉, 리스트 0 또는 리스트 1)에 있는지를 나타내기 위해 두 개의 변수들이 시그널링된다. 예를 들어, 이 두 개의 변수들은 각각 리스트 0과 리스트 1에 대해 CurrPicInList0Flag 및 CurrPicInList1Flag로 명명될 수 있다. 두 개의 변수들을 유도하기 위한 예시적인 프로세스가 다음과 같이 도시되며, 여기서 임의의 참조 픽처가 현재 픽처인지를 결정하기 위해 리스트 0 및 리스트 1 내의 참조 픽처가 검사된다:
[표 1]
Figure pct00006
본 방법의 제2 실시예에서, 두 개의 버전들의 재구축된 현재 픽처를 유지하는 것이 필요한지를 결정하기 위해 변수 TwoVersCurrDecPicFlag가 사용된다. 이 두 개의 버전들은 루프 필터링된 버전과 비 루프 필터 버전을 포함하며, 여기서 루프 필터링된 버전은 디블로킹 필터링된 버전, 샘플 적응 오프셋(SAO) 필터링된 버전 또는 디블로킹 필터링된 버전과 SAO 필터링된 버전 둘 다의 재구축된 현재 이미지 단위에 대응한다. 예를 들어, 이 두 개의 버전들이 상이한 경우, 이 두 개의 버전들의 현재 픽처가 필요하다. 두 개의 버전들의 현재 픽처를 유지하는 것이 필요한지 여부는 현재 픽처에서의 루프 필터의 사용을 검사함으로써 유도될 수 있다. 루프 필터를 사용하지 않으면, 두 버전 간에 차이가 없다. 예시적인 유도 프로세스가 [표 2]에서 도시되어 있으며, 여기서 구문 엘리먼트 pps_curr_pic_as_ref_enabled_flag는 IntraBC가 픽처에 대해 인에이블되어 있는지 여부를 나타내는 픽처 레벨 IntraBC 플래그이다. 구문 엘리먼트 sample_adaptive_offset_enabled_flag는 SAO(샘플 적응 오프셋)가 인에이블되어 있는지 여부를 나타내기 위한 것이고, 구문 엘리먼트 pps_deblocking_filter_disabled_flag는 디블로킹 필터가 디스에이블되어 있는지 여부를 나타내는 픽처 레벨 플래그이며, 구문 엘리먼트 deblocking_filter_override_enabled_flag는 디블로킹 필터 오버라이드가 인에이블되어 있는지 여부를 나타내기 위한 것이다. 그러나, 플래그는 또한 시퀀스 레벨 플래그일 수 있다.
[표 2]
Figure pct00007
이 방법의 제3 실시예에서, 변수 TwoVersCurrDecSliceFlag는 두 개의 버전들의 현재 픽처를 유지하는 것이 필요한지를 결정하는데 사용된다. 예를 들어, 이 두 개의 버전들이 상이한 경우, 이 두 개의 버전들의 현재 픽처가 필요하다. 두 개의 버전들의 현재 픽처를 유지하는 것이 필요한지 여부는 현재 픽처에서의 루프 필터의 사용을 검사함으로써 유도될 수 있다. 루프 필터를 사용하지 않으면, 두 버전 간에 차이가 없다. 예시적인 유도 프로세스가 [표 3]에서 도시되어 있으며, 여기서 구문 엘리먼트 pps_curr_pic_as_ref_enabled_flag는 IntraBC가 픽처에 대해 인에이블되어 있는지 여부를 나타내는 픽처 레벨 IntraBC 플래그이다. 플래그는 IntraBC 사용을 위한 슬라이스 또는 시퀀스 레벨 플래그로 대체될 수도 있다. 구문 엘리먼트 slice_sao_luma_flag는 현재 루마 슬라이스에 대해 루마 SAO(샘플 적응 오프셋)가 인에이블되어 있는지 여부를 나타내는 슬라이스 레벨 플래그이다. 구문 엘리먼트 slice_sao_chroma_flag는 현재 크로마 슬라이스에 대해 크로마 SAO가 인에이블되어 있는지 여부를 나타내는 슬라이스 레벨 플래그이다. 구문 엘리먼트 slice_deblocking_filter_disabled_flag는 현재 슬라이스에 대해 디블록킹 필터가 디스에이블되어 있는지 여부를 나타내는 슬라이스 레벨 플래그이다.
[표 3]
Figure pct00008
본 발명의 다른 양태는 메모리 대역폭 집약적 모드의 사용을 디스에이블시키는 조건을 결정한다. 특별히, 8x8 양방향 예측 모드가 이러한 모드 중 하나로서 간주된다.
제1 예시에서, IntraBC 사용의 시그널링은 픽처 레벨 또는 슬라이스 레벨로 행해진다. 각각의 픽처 또는 슬라이스는 IntraBC를 사용할지 여부를 결정할 수 있다. IntraBC가 픽처 또는 슬라이스에 대해 사용되지 않으면, 이 픽처 또는 슬라이스에 대해 8x8 양방향 예측 모드의 사용을 제한할 필요가 없다. IntraBC가 현재 픽처 또는 슬라이스에 대해 인에이블되어 있지만, 현재 픽처 또는 슬라이스 내의 모든 모션 벡터들(블록 벡터를 포함함)이 완전수 해상도를 사용하는 경우, 이 픽처 또는 슬라이스에 대해 8x8 양방향 예측 모드의 사용을 제한할 필요가 없다. 현재 픽처 또는 슬라이스 내의 모션 벡터들(블록 벡터를 포함함)의 완전수 해상도는 구문 엘리먼트 use_integer_mv_flag가 1인 것으로 나타날 수 있다.
메모리 대역폭 집약적 모드들의 사용을 디스에이블시키는 조건들의 하나의 예시적인 결정은 다음과 같이 도시되며, 여기서, 구문 엘리먼트 inter_pred_idc가 2인 것은 양방향 모드를 나타내고, nPbW 및 nPbH는 예측 단위(PU)의 폭과 높이를 각각 나타낸다:
구문 엘리먼트 pps_curr_pic_as_ref_enabled_flag가 1이고 use_integer_mv_flag가 0인 경우, 디코딩된 블록에 대해 다음 중 적어도 하나가 참이 아닐 것을 요구한다:
Figure pct00009
inter_pred_idc[x0][y0]은 2이다,
Figure pct00010
nPbW는 8이다,
Figure pct00011
nPbH는 8이다.
제2 예시에서, IntraBC 사용의 시그널링은 픽처 레벨, 슬라이스 헤더 또는 시퀀스 레벨로 행해진다. 현재 픽처가 활성 참조 픽처 리스트 0 내에 있지도 않고 활성 참조 픽처 리스트 1 내에 있지도 않은 경우, 픽처 내의 슬라이스들에 대해 IntraBC 모드가 사용되지 않을 것이다. 따라서, 이 픽처에서 8x8 양방향 예측 모드의 사용을 제한할 필요가 없다.
메모리 대역폭 집약적 모드의 사용을 디스에이블시키는 조건들의 하나의 예시적인 결정은 다음과 같이 도시된다:
구문 엘리먼트 use_integer_mv_flag가 0이고, CurrPicInList0Flag 또는 CurrPicInList1Flag 중 어느 하나가 1인 경우, 디코딩된 블록에 대해 다음 중 적어도 하나가 참이 아닐 것을 요구한다:
Figure pct00012
inter_pred_idc[x0][y0]은 2이다,
Figure pct00013
nPbW는 8이다,
Figure pct00014
nPbH는 8이다.
제3 실시예에서, 필터링 동작들은 픽처 레벨에서 측정된다. 이 경우, 디블로킹 필터 및 SAO 필터가 전체 픽처에 대해 디스에이블될 때, 필터링된 현재 픽처와 필터링되지 않은 현재 픽처 사이에는 차이가 없다. 따라서, 필터링되지 않은 현재 픽처는 필터링된 현재 픽처와 동일하기 때문에, 필터링되지 않은 현재 픽처를 메모리에 별도로 기록할 필요가 없다. 따라서, 이 픽처에서 8x8 양방향 예측 모드의 사용을 제한할 필요가 없다.
메모리 대역폭 집약적 모드의 사용을 디스에이블시키는 조건들의 하나의 예시적인 결정은 다음과 같이 도시된다:
구문 엘리먼트 use_integer_mv_flag가 0이고 TwoVersCurrDecPicFlag가 1인 경우, 디코딩된 블록에 대해 다음 중 적어도 하나가 참이 아닐 것을 요구한다:
Figure pct00015
inter_pred_idc[x0][y0]은 2이다,
Figure pct00016
nPbW는 8이다,
Figure pct00017
nPbH는 8이다.
제4 실시예에서, 필터링 동작들은 슬라이스 레벨에서 측정된다. 이 경우, 디블로킹 필터 및 SAO 필터가 전체 슬라이스에 대해 디스에이블될 때, 필터링된 현재 슬라이스와 필터링되지 않은 현재 슬라이스 사이에는 차이가 없다. 따라서, 필터링되지 않은 현재 슬라이스는 필터링된 현재 픽처와 동일하기 때문에, 필터링되지 않은 현재 픽처를 메모리에 별도로 기록할 필요가 없다. 따라서, 이 슬라이스에서 8x8 양방향 예측 모드의 사용을 제한할 필요가 없다.
메모리 대역폭 집약적 모드의 사용을 디스에이블시키는 조건들의 하나의 예시적인 결정은 다음과 같이 도시된다:
구문 엘리먼트 use_integer_mv_flag가 0이고 TwoVersCurrDecSliceFlag가 1인 경우, 디코딩된 블록에 대해 다음 중 적어도 하나가 참이 아닐 것을 요구한다:
Figure pct00018
inter_pred_idc[x0][y0]은 2이다,
Figure pct00019
nPbW는 8이다,
Figure pct00020
nPbH는 8이다.
상기 모든 예시들에서, "use_integer_mv_flag가 0이다"의 조건은 제거될 수 있다. 이것은, 다른 조건들을 갖춘 경우에, 슬라이스 내의 모션 벡터의 해상도에 관계없이 8x8 양방향 예측 모드가 사용될 수 없다는 것을 의미한다.
상기 모든 예시들에서, 디스에이블된 고 대역폭 양방향 예측 모드(예컨대, 8x8 양방향 예측 모드)는 8x4 또는 4x8 단방향 예측 모드, 비대칭 모션 파티션(asymmetric motion partition; AMP) 모드 등과 같은 다른 메모리 대역폭 집약적 모드들로 대체될 수 있다. 대안적으로, 두 개 버전들의 재구축된 현재 이미지 단위가 필요하다는 것을 변수 TwoVersCurrDecPicFlag 또는 TwoVersCurrDecSliceFlag가 나타내는 경우, 고 대역폭 양방향 예측 모드(예컨대, 8x8 양방향 예측 모드)는 리스트 0으로부터의 모션 정보만을 사용함으로써 단방향 예측 모드로 변환된다.
현재 픽처가 참조 픽처일 때의 예측 모드 사용에 대한 제약
다른 방법에 따르면, 특정 예측 모드(본 발명개시에서는 대역폭 집약적 예측 모드라고 칭함)의 데이터 요건이 기존의 최악의 경우를 초과할 때, 이 예측 모드는 사용이 금지된다. 예를 들어, 양방향성 예측(또는 양방향 예측)은 그러한 예측 모드의 후보이다. 이것은 양방향 예측 모드에 대한 모션 벡터들 둘 다가 완전수 값이 아니고 이들 두 개의 MV들에 의해 지시된 예측 샘플 블록들이 상이한 경우에 특히 들어맞는다. 또한, 이것은 IntraBC에 대한 루프 필터 처리 이후의 현재 픽처에서의 재구축 샘플들의 기록/저장 이외에, 루프 필터 처리 이전에 현재 픽처에서 재구축된 샘플들을 기록/저장할 필요가 있을 때 들어맞는다. 상기 모든 조건들이 충족되면, 본 방법에 따라, 디코딩된 양방향 예측 모드는 단방향 예측 모드로 변환된다. 예를 들어, 이것은 제1 리스트로부터의 모션 정보만을 사용하고 제2 리스트로부터의 모션 정보를 빼버림(즉, L0을 유지하지만 L1을 빼버림)으로써 달성될 수 있다. 이러한 방식으로, 데이터 액세스 요건은 감소된다. HEVC에서, 8x8 루마 블록 크기를 갖는 양방향 예측 모드는 가장 집약적인 데이터 액세스 요건을 갖는 그러한 예측 모드인 것으로 간주된다.
일 실시예에서, 변환(즉, 8x8 양방향 예측 모드로부터 8x8 단방향 예측 모드로의 변환)은 인터 코딩된 MV가 유도되고 저장된 후에, JCTVC-U1005의 8.5.3.2에 명시된 바와 같이 "모션 벡터 성분 및 참조 인덱스에 대한 유도 프로세스"를 위한 디코딩 프로세스에서 수행된다. 두 변수들에 대한 예시적인 유도가 다음과 같이 도시되며, 여기서 변수 EightByEightBiPredHasNoIntegerMv는 8x8 양방향 예측 블록이 완전수 MV를 갖지 않는지 여부를 나타내고, 변수 EightByEightBiPredNotIdenticalMv는 8x8 양방향 예측 블록의 MV가 동일하지 않은지 여부를 나타낸다:
EightByEightBiPredHasNoIntegerMv = !( ( mvL0 & 0x3 == 0 )
||( mvL1 & 0x3 == 0 ) ), 및
EightByEightBiPredNotIdenticalMv = !( ( mvL0 == mvL1 ) &&
( DiffPicOrderCnt( RefPicList0[ refIdxL0 ], RefPicList1[ refIdxL1 ] ) == 0 ) ).
일 실시예에서, 양방향 예측을 단방향 예측으로 변환할지 여부를 결정하기 위해 조건들의 세트가 검사될 수 있다. 예를 들어, 현재 블록이 8x8 양방향 예측 모드에 의해 코딩되는 경우, 두 개의 버전들의 현재 픽처가 인에이블되고, 8x8 양방향 예측 블록은 완전수 값을 갖지 않으며, 8x8 양방향 예측 코딩된 현재 블록의 모션 벡터들은 동일하지 않으며, 양방향 예측은 단방향 예측으로 변환될 수 있다. 따라서, 다음 조건들 모두가 참일 때, 양방향 예측은 단방향 예측으로 변환될 수 있다:
- predFlagL0은 1이다,
- predFlagL1은 1이다,
- nPbSw는 8이다,
- nPbSh는 8이다,
- TwoVersionsOfCurrDecPicFlag는 1이다,
- EightByEightBiPredHasNoIntegerMv가 1이다,
- EightByEightBiPredNotIdenticalMv가 1이다.
상기 조건들에서, predFlagL0 및 predFlagL1은 각각 리스트 0 및 리스트 1에 대한 예측 리스트 이용 플래그들이다. 플래그가 1일 때, 이는 대응하는 예측 리스트가 사용되고 있음을 나타낸다.
양방향 예측으로부터 단방향 예측으로의 변환은 refIdxL1 = -1 및 predFlagL1 = 0을 설정함으로써 수행될 수 있다. 달리 말하면, 리스트 0으로부터의 모션 정보만이 사용될 것이고 리스트 1로부터의 모션 정보는 사용되지 않는다.
다른 실시예에서, 상기 모든 조건들이 충족되면, 양방향 예측 모드는 허용되지 않으며, 대응하는 구문은 비트스트림에서 나타나지 않을 것이다. HEVC에서, 8x8 루마 블록 크기를 갖는 양방향 예측 모드는 가장 집약적인 데이터 액세스 요건을 갖는 그러한 예측 모드인 것으로 간주된다.
일 실시예에서, 8x8 양방향 예측의 사용을 허용하지 않는 것에 의한 제약은 다음과 같이 변수 EightByEightBiPredHasNoIntegerMv 및 변수 EightByEightBiPredNotIdenticalMv에 기초하여 결정될 수 있다:
EightByEightBiPredHasNoIntegerMv = !( ( mvL0 & 0x3 == 0 )
|| ( mvL1 & 0x3 == 0 ) ), 및
EightByEightBiPredNotIdenticalMv = !( ( mvL0 == mvL1 ) &&
( DiffPicOrderCnt( RefPicList0[ refIdxL0 ], RefPicList1[ refIdxL1 ] ) == 0 ) ).
일 실시예에서, 다음의 조건들 중 적어도 하나가 참이 아닐 것이 비트스트림 적합성에 대한 요건이다:
- predFlagL0은 1이다,
- predFlagL1은 1이다,
- nPbSw는 8이다,
- nPbSh는 8이다,
- TwoVersionsOfCurrDecPicFlag는 1이다,
- EightByEightBiPredHasNoIntegerMv가 1이다,
- EightByEightBiPredNotIdenticalMv가 1이다.
상기 조건들의 경우, 이 조건들 중 어느 것도 참이 아닌 경우, 이는 현재 블록에 대해 최악의 대역폭 상황이 발생하고 있지 않음을 의미한다. 예를 들어, predFlagL0이 1이 아닌 경우, 리스트 0은 사용되지 않는다. 이는 양방향 예측이 사용되지 않음을 의미한다. nPbSw가 8이 아닌 경우, 이는 블록이 8x8이 아님을 의미한다.
도 2는 본 발명의 실시예에 따른 IntraBC 모드(인트라 블록 복사 모드) 및 인터 예측 모드를 포함하는 코딩 모드들을 사용하는 예시적인 코딩 시스템의 흐름도를 도시하며, 여기서 하나 이상의 구문 엘리먼트는 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내는데 이용된다. 본 시스템은 단계(210)에서 도시된 바와 같이 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내기 위한, 비트스트림 내 변수를 결정하며, 여기서 변수는 하나 이상의 구문 엘리먼트에 기초하여 결정된다. 단계(220)에서 두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 결정하기 위해 상기 변수가 검사된다. 그 결과가 "예"이면, 단계(230)가 수행된다. 그 결과가 "아니오"이면, 단계(240)가 수행된다. 단계(230)에서, 루프 필터링된 버전의 재구축된 현재 이미지 단위와 비 루프 필터 버전의 재구축된 현재 이미지 단위 둘 다가 저장되어 참조 데이터로서 사용되는 것이 허용된다. 단계(240)에서, 하나의 버전의 재구축된 현재 이미지 단위만이 참조 데이터로서 저장된다.
도 3은 본 발명의 실시예에 따른 IntraBC 모드(인트라 블록 복사 모드) 및 인터 예측 모드를 포함하는 코딩 모드들을 사용하는 다른 예시적인 코딩 시스템의 흐름도를 도시하며, 여기서 대역폭을 감소시키기 위해 고 대역폭 양방향 예측 모드가 단방향 예측 모드로 변환된다. 본 시스템은 단계(310)에서 도시된 바와 같이 대역폭 집약적 예측 모드가 허용되는지 여부를 결정한다. 하나의 예시에서, 두 개의 버전들의 현재 픽처가 인에이블되어 있지 않으면, 대역폭 집약적 예측 모드가 허용된다. 다른 예시에서, 현재 블록의 모션 벡터들이 수평 또는 수직 방향으로 완전수 값을 갖는 경우, 대역폭 집약적 예측 모드가 허용된다. 단계(320)에서 대역폭 집약적 예측 모드가 허용되는지 여부가 검사된다. 그 결과가 "예"이면, 본 프로세스는 종료된다. 그 결과가 "아니오"이면, 단계(330)가 수행된다. 단계(330)에서, 본 시스템은 고 대역폭 양방향 예측 모드가 사용되는지의 여부를 결정한다. 단계(340)에서, 고 대역폭 양방향 예측 모드가 사용되는지 여부가 검사된다. 그 결과가 "아니오"이면, 본 프로세스는 종료된다. 그 결과가 "예"이면, 단계(350)가 수행된다. 단계(350)에서, 고 대역폭 양방향 예측 모드는 단방향 예측 모드로 변환된다.
도시된 흐름도는 본 발명에 따른 비디오 코딩의 예시를 설명하기 위한 것이다. 본 업계의 당사자는 본 발명의 사상으로부터 이탈하지 않고서 본 발명을 실시하기 위해 각각의 단계를 수정하거나, 단계들을 재배열하거나, 단계를 분리시키거나, 또는 단계들을 결합할 수 있다. 본 발명개시에서는, 본 발명의 실시예들을 구현하기 위한 예시들을 설명하기 위해 특정 구문 및 시맨틱스가 사용되었다. 당업자는 본 발명의 사상을 벗어나지 않으면서 본 구문과 시맨틱스를 등가적인 구문 및 시맨틱스로 대체하여 본 발명을 실시할 수 있다.
상기 설명은 본 업계의 당업자가 특정 적용예의 상황 및 그 요건에서 제공될 때 본 발명을 실시할 수 있도록 제공된 것이다. 설명된 실시예들에 대한 다양한 수정들이 본 업계의 당업자에게는 명백할 것이며, 여기서 정의된 일반 원리들은 다른 실시예들에 적용될 수 있다. 그러므로, 본 발명은 여기서 도시되고 설명된 특정 실시예들로 제한되는 것을 의도하지 않지만, 여기서 개시된 신규한 특징들 및 원리들에 부합하는 최광의의 범위를 따라야 한다. 상기 상세한 설명에서는, 본 발명의 완전한 이해를 제공하기 위해 다양한 특정 세부사항들이 진술된다. 그럼에도 불구하고, 본 발명이 실시될 수 있다는 것이 본 업계의 당업자에 의해 이해될 것이다.
위에서 설명된 본 발명의 실시예들은 다양한 하드웨어, 소프트웨어 코드들, 또는 이들의 조합으로 구현될 수 있다. 예를 들어, 본 발명의 실시예는 여기서 설명된 프로세싱을 수행하기 위해 비디오 압축 칩 내에 병합된 하나 이상의 회로 회로들, 또는 비디오 압축 소프트웨어 내에 병합된 프로그램 코드일 수 있다. 여기서 설명된 프로세싱을 수행하기 위해 본 발명의 실시예는 또한 DSP(Digital Signal Processor) 상에서 실행될 프로그램 코드일 수 있다. 본 발명은 또한 컴퓨터 프로세서, 디지털 신호 프로세서, 마이크로프로세서, 또는 FPGA(field programmable gate array)에 의해 수행될 복수의 기능들을 수반할 수 있다. 이러한 프로세서들은 본 발명에 의해 구체화된 특정 방법들을 정의하는 머신 판독가능 소프트웨어 코드 또는 펌웨어 코드를 실행함으로써 본 발명에 따른 특정 태스크들을 수행하도록 구성될 수 있다. 소프트웨어 코드 또는 펌웨어 코드는 상이한 프로그래밍 언어들 및 상이한 포맷들 또는 스타일들로 개발될 수 있다. 소프트웨어 코드는 또한 상이한 타겟 플랫폼들에 대해 컴파일링될 수 있다. 하지만, 소프트웨어 코드들의 상이한 코드 포맷들, 스타일들 및 언더들과, 본 발명에 따른 태스크들을 수행하기 위해 코드를 구성하는 다른 방법들은 본 발명의 사상과 범위로부터 이탈하지 않을 것이다.
본 발명은 본 발명의 사상 또는 본질적인 특징으로부터 이탈하지 않고서 다른 특정 형태들로 구체화될 수 있다. 설명된 예시들은 모든 측면들에서 예시적인 것으로서만 간주되어야 하며 제한적인 것으로서는 간주되지 않아야 한다. 따라서, 본 발명의 범위는 상술한 설명에 의해서라기 보다는 첨부된 청구항들에 의해서 나타내어진다. 본 청구항들의 의미 및 범위 내에 속하는 모든 변경들이 본 발명의 범위 내에 포함된다.

Claims (20)

  1. 인터 예측(Inter prediction) 모드 및 인트라 블록 복사(Intra Block Copy; IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법에 있어서,
    두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내기 위한 변수를 결정하는 단계;
    상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위가 필요하다는 것을 상기 변수가 나타내는 경우, 루프 필터링된(loop-filtered) 버전의 상기 재구축된 현재 이미지 단위와 비 루프 필터 버전의 상기 재구축된 현재 이미지 단위가 저장되어 참조 데이터로서 사용되도록 허용하는 단계; 및
    상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위가 필요하지 않다는 것을 상기 변수가 나타내는 경우, 하나의 버전의 상기 재구축된 현재 이미지 단위만을 상기 참조 데이터로서 저장하는 단계
    를 포함하는 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  2. 제1항에 있어서,
    상기 루프 필터링된 버전의 상기 재구축된 현재 이미지 단위는 디블로킹 필터링된 버전, 샘플 적응 오프셋(Sample Adaptive Offset; SAO) 필터링된 버전, 또는 상기 디블로킹 필터링된 버전과 상기 SAO 필터링된 버전 둘 다의 상기 재구축된 현재 이미지 단위에 대응하는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  3. 제1항에 있어서,
    상기 재구축된 현재 이미지 단위는 재구축된 현재 픽처(picture)에 대응하는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  4. 제1항에 있어서,
    상기 변수는 비트스트림의 픽처 레벨의 하나 이상의 구문(syntax) 엘리먼트에 기초하여 결정되며, 상기 하나 이상의 구문 엘리먼트는, IntraBC 모드가 현재 픽처에 대해 인에이블(enable)되어 있는지 여부를 나타내는 제1 구문 엘리먼트, SAO(샘플 적응 오프셋)가 인에이블되어 있는지 여부를 나타내는 제2 구문 엘리먼트, 디블록킹 필터가 디스에이블되어 있는지 여부를 나타내는 제3 구문 엘리먼트, 및 디블로킹 필터 오버라이드(override)가 인에이블되어 있는지 여부를 나타내는 제4 구문 엘리먼트를 포함하는 구문 엘리먼트들의 그룹으로부터 선택되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  5. 제4항에 있어서,
    현재 픽처에 대해 상기 IntraBC 모드가 인에이블되어 있다는 것을 상기 제1 구문 엘리먼트가 나타내고, 세 개의 조건들 중 어느 하나가 참인 경우, 상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위를 허용하도록 상기 변수가 결정되며, 상기 세 개의 조건들은, 상기 SAO가 인에이블되어 있다는 것을 상기 제2 구문 엘리먼트가 나타내는 것, 상기 디블록킹 필터가 디스에이블되어 있다는 것을 상기 제3 구문 엘리먼트가 나타내는 것, 및 상기 디블록킹 필터 오버라이드가 인에이블되어 있다는 것을 상기 제4 구문 엘리먼트가 나타내는 것에 대응하는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  6. 제1항에 있어서,
    상기 재구축된 현재 이미지 단위는 재구축된 현재 슬라이스(slice)에 대응하는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  7. 제1항에 있어서,
    상기 변수는 비트스트림의 픽처 레벨, 슬라이스 레벨, 또는 상기 픽처 레벨과 상기 슬라이스 레벨 둘 다의 하나 이상의 구문 엘리먼트에 기초하여 결정되며, 상기 하나 이상의 구문 엘리먼트는, 상기 IntraBC 모드가 현재 픽처에 대해 인에이블되어 있는지 여부를 나타내는 상기 비트스트림의 상기 픽처 레벨의 제1 구문 엘리먼트, 현재 루마(luma) 슬라이스에 대해 루마 SAO(샘플 적응 오프셋)가 인에이블되어 있는지 여부를 나타내는 상기 슬라이스 레벨의 제2 구문 엘리먼트, 현재 크로마(chroma) 슬라이스에 대해 크로마 SAO가 인에이블되어 있는지 여부를 나타내는 상기 슬라이스 레벨의 제3 구문 엘리먼트, 및 현재 슬라이스에 대해 디블로킹 필터가 디스에이블되어 있는지 여부를 나타내는 상기 슬라이스 레벨의 제4 구문 엘리먼트를 포함하는 구문 엘리먼트들의 그룹으로부터 선택되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  8. 제7항에 있어서,
    상기 변수는, 상기 IntraBC 모드가 상기 현재 픽처에 대해 인에이블되어 있다는 것을 상기 비트스트림의 상기 픽처 레벨의 상기 제1 구문 엘리먼트가 나타내고, 상기 현재 루마 슬라이스에 대해 상기 루마 SAO가 인에이블되어 있다는 것을 상기 슬라이스 레벨의 상기 제2 구문 엘리먼트가 나타내고, 상기 현재 크로마 슬라이스에 대해 상기 크로마 SAO가 인에이블되어 있다는 것을 상기 슬라이스 레벨의 상기 제3 구문 엘리먼트가 나타내며, 상기 현재 슬라이스에 대해 상기 디블로킹 필터가 디스에이블되어 있다는 것을 상기 슬라이스 레벨의 상기 제4 구문 엘리먼트가 나타내는 경우, 상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위를 허용하도록 결정되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  9. 제1항에 있어서,
    상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위가 필요하다는 것을 상기 변수가 나타내는 경우, 고 대역폭 양방향 예측 모드를 단방향 예측 모드로 변환하는 단계인 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  10. 제9항에 있어서,
    상기 고 대역폭 양방향 예측 모드는 8x8 양방향 예측 모드에 대응하는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  11. 제10항에 있어서,
    상기 고 대역폭 양방향 예측 모드는 리스트 0으로부터의 모션(motion) 정보만을 사용하여 상기 단방향 예측 모드로 변환되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  12. 인터 예측 모드 및 인트라 블록 복사(IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 코딩 시스템에 있어서, 하나 이상의 전자 회로를 포함하고, 상기 하나 이상의 전자 회로는,
    두 개의 버전들의 재구축된 현재 이미지 단위가 필요한지 여부를 나타내기 위한, 비트스트림 내의 구문 엘리먼트를 결정하고;
    상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위가 필요하다는 것을 상기 구문 엘리먼트가 나타내는 경우, 루프 필터링된 버전의 상기 재구축된 현재 이미지 단위와 비 루프 필터 버전의 상기 재구축된 현재 이미지 단위가 저장되어 참조 데이터로서 사용되도록 허용하며;
    상기 두 개의 버전들의 상기 재구축된 현재 이미지 단위가 필요하지 않다고 상기 구문 엘리먼트가 나타내는 경우, 하나의 버전의 상기 재구축된 현재 이미지 단위만을 상기 참조 데이터로서 저장하도록 구성된 것인 코딩 모드들을 이용하는 비디오 코딩 시스템.
  13. 인터 예측 모드 및 인트라 블록 복사(IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법에 있어서,
    대역폭 집약적(bandwidth-intensive) 예측 모드가 허용되는지 여부를 결정하는 단계;
    상기 대역폭 집약적 예측 모드가 허용되지 않는 경우:
    고 대역폭 양방향 예측 모드가 사용되는지 여부를 결정하는 단계; 및
    상기 고 대역폭 양방향 예측 모드가 사용되는 경우, 상기 고 대역폭 양방향 예측 모드를 단방향 예측 모드로 변환하는 단계
    를 포함하는 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  14. 제13항에 있어서,
    상기 고 대역폭 양방향 예측 모드는 8x8 양방향 예측 모드에 대응하는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  15. 제14항에 있어서,
    상기 고 대역폭 양방향 예측 모드는 리스트 0으로부터의 모션 정보만을 사용하여 상기 단방향 예측 모드로 변환되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  16. 제14항에 있어서,
    현재 픽처 내의 현재 블록이 상기 8×8 양방향 예측 모드에 의해 코딩되고, 두 개의 버전들의 상기 현재 픽처가 인에이블되고, 상기 8x8 양방향 예측 모드에 의해 코딩된 상기 현재 블록의 모션 벡터들이 완전수 값(integer value)을 갖지 않으며, 상기 8x8 양방향 예측 모드에 의해 코딩된 상기 현재 블록의 모션 벡터들이 동일하지 않은 경우, 상기 고 대역폭 양방향 예측 모드는 상기 단방향 예측 모드로 변환되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  17. 제13항에 있어서,
    상기 두 개의 버전들의 현재 픽처가 인에이블되어 있지 않은 경우, 상기 대역폭 집약적 예측 모드가 허용되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  18. 제13항에 있어서,
    현재 블록의 모션 벡터들이 수평 또는 수직 방향으로 완전수 값을 갖는 경우, 상기 대역폭 집약적 예측 모드가 허용되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  19. 제13항에 있어서,
    상기 고 대역폭 양방향 예측 모드는 리스트 0으로부터의 모션 정보만을 사용하여 상기 단방향 예측 모드로 변환되는 것인 코딩 모드들을 이용하는 비디오 코딩 시스템의 방법.
  20. 인터 예측 모드 및 인트라 블록 복사(IntraBC) 모드를 포함하는 코딩 모드들을 이용하는 비디오 코딩 시스템에 있어서, 하나 이상의 전자 회로를 포함하고, 상기 하나 이상의 전자 회로는,
    대역폭 집약적 예측 모드가 허용되는지 여부를 결정하고;
    상기 대역폭 집약적 예측 모드가 허용되지 않는 경우:
    고 대역폭 양방향 예측 모드가 사용되는지 여부를 결정하며;
    상기 고 대역폭 양방향 예측 모드가 사용되는 경우, 상기 고 대역폭 양방향 예측 모드를 단방향 예측 모드로 변환하도록 구성된 것인 코딩 모드들을 이용하는 비디오 코딩 시스템.
KR1020187003779A 2015-07-27 2016-07-26 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법 KR102127488B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020207018060A KR102264767B1 (ko) 2015-07-27 2016-07-26 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562197197P 2015-07-27 2015-07-27
US62/197,197 2015-07-27
US201562245372P 2015-10-23 2015-10-23
US62/245,372 2015-10-23
PCT/CN2016/091674 WO2017016468A1 (en) 2015-07-27 2016-07-26 Method of system for video coding using intra block copy mode

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020207018060A Division KR102264767B1 (ko) 2015-07-27 2016-07-26 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법

Publications (2)

Publication Number Publication Date
KR20180030996A true KR20180030996A (ko) 2018-03-27
KR102127488B1 KR102127488B1 (ko) 2020-06-30

Family

ID=57884476

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020207018060A KR102264767B1 (ko) 2015-07-27 2016-07-26 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법
KR1020187003779A KR102127488B1 (ko) 2015-07-27 2016-07-26 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020207018060A KR102264767B1 (ko) 2015-07-27 2016-07-26 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법

Country Status (7)

Country Link
US (1) US11146794B2 (ko)
EP (1) EP3318060B1 (ko)
KR (2) KR102264767B1 (ko)
CN (2) CN107852490B (ko)
AU (1) AU2016299036B2 (ko)
CA (1) CA2993104C (ko)
WO (1) WO2017016468A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020185043A1 (ko) * 2019-03-13 2020-09-17 엘지전자 주식회사 Ibc 예측을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2020184990A1 (ko) * 2019-03-11 2020-09-17 엘지전자 주식회사 Ibc 예측을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2020184991A1 (ko) * 2019-03-11 2020-09-17 엘지전자 주식회사 Ibc 모드를 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10638137B2 (en) * 2018-03-07 2020-04-28 Tencent America LLC Method and apparatus for video coding
KR20210016581A (ko) 2018-06-05 2021-02-16 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Ibc 및 atmvp 간의 상호 작용
KR102701593B1 (ko) 2018-06-21 2024-08-30 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 칼라 컴포넌트 간의 서브 블록 mv 상속
WO2019244117A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Unified constrains for the merge affine mode and the non-merge affine mode
EP3824631A4 (en) * 2018-07-18 2022-07-06 HFI Innovation Inc. METHOD AND APPARATUS FOR MOTION COMPENSATION BANDWIDTH REDUCTION FOR VIDEO CODING SYSTEM USING MULTIHYPOTHEC
CN117768651A (zh) 2018-09-24 2024-03-26 北京字节跳动网络技术有限公司 处理视频数据的方法、装置、介质、以及比特流存储方法
US11509919B2 (en) * 2018-10-17 2022-11-22 Tencent America Reference sample memory size restrictions for intra block copy
CN111083489B (zh) 2018-10-22 2024-05-14 北京字节跳动网络技术有限公司 多次迭代运动矢量细化
EP3861723A4 (en) 2018-11-10 2022-04-20 Beijing Bytedance Network Technology Co., Ltd. ROUNDS IN PAIRS OF MEDIUM CANDIDATE BILLS
WO2020098643A1 (en) 2018-11-12 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Simplification of combined inter-intra prediction
CN117319644A (zh) 2018-11-20 2023-12-29 北京字节跳动网络技术有限公司 基于部分位置的差计算
EP4307681A3 (en) 2018-11-29 2024-04-03 Beijing Bytedance Network Technology Co., Ltd. Interaction between intra block copy mode and inter prediction tools
CN111385570B (zh) * 2018-12-28 2021-11-02 杭州海康威视数字技术股份有限公司 编码方法、解码方法及装置
CN113574867B (zh) * 2019-01-12 2022-09-13 北京字节跳动网络技术有限公司 Mv精度约束
CN113366853B (zh) 2019-02-02 2024-08-02 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的缓冲区初始化
WO2020156547A1 (en) 2019-02-02 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Buffer resetting for intra block copy in video coding
CN117395439A (zh) * 2019-03-01 2024-01-12 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的基于方向的预测
CN113545068B (zh) 2019-03-01 2023-09-15 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的基于顺序的更新
KR20240132530A (ko) 2019-03-04 2024-09-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 인트라 블록 복사의 구현 형태
WO2020177756A1 (en) 2019-03-06 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Size dependent inter coding
KR20210131347A (ko) * 2019-03-06 2021-11-02 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크기에 따른 인터 코딩
CN111726630B (zh) * 2019-03-18 2024-03-15 华为技术有限公司 基于三角预测单元模式的处理方法及装置
CA3146016C (en) 2019-07-06 2024-05-07 Beijing Bytedance Network Technology Co., Ltd. Virtual prediction buffer for intra block copy in video coding
CN114175633B (zh) 2019-07-10 2023-12-29 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的样点标识
JP2022539887A (ja) 2019-07-11 2022-09-13 北京字節跳動網絡技術有限公司 映像符号化におけるイントラブロックコピーのためのビットストリーム適合性の制約
CN117241033A (zh) * 2019-08-06 2023-12-15 北京字节跳动网络技术有限公司 使用屏幕内容编码工具进行视频编码和解码
WO2021027774A1 (en) 2019-08-10 2021-02-18 Beijing Bytedance Network Technology Co., Ltd. Subpicture dependent signaling in video bitstreams
CN114342400B (zh) 2019-09-02 2024-06-28 北京字节跳动网络技术有限公司 基于色彩格式的编解码模式确定
CN114365488A (zh) * 2019-09-09 2022-04-15 北京字节跳动网络技术有限公司 视频编解码块的递归划分
CN114631317B (zh) 2019-10-18 2024-03-15 北京字节跳动网络技术有限公司 子图片的参数集信令中的语法约束
EP4055822A1 (en) * 2019-11-07 2022-09-14 InterDigital VC Holdings France, SAS Encoding and decoding methods and apparatus
IL296930A (en) * 2020-03-31 2022-12-01 Ericsson Telefon Ab L M Video processing using syntax elements
EP4128767A4 (en) * 2020-04-01 2024-05-01 HFI Innovation Inc. METHOD AND APPARATUS FOR SIGNALING SLICE PARTITION INFORMATION FOR IMAGE AND VIDEO CODING
US11917141B2 (en) * 2020-05-20 2024-02-27 Qualcomm Incorporated High-level deblocking filter (DBF), adaptive loop filter (ALF) and sample adaptive offset (SAO) control, and adaptation parameter set (APS) number constraint in video coding
US11683514B2 (en) * 2020-12-22 2023-06-20 Tencent America LLC Method and apparatus for video coding for machine
WO2024152957A1 (en) * 2023-01-19 2024-07-25 Mediatek Inc. Multiple block vectors for intra template matching prediction

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140076508A (ko) * 2012-12-10 2014-06-20 한국전자통신연구원 비디오 부호화 방법 및 비디오 복호화 방법과 이를 이용하는 장치

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003518882A (ja) * 1999-12-28 2003-06-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Ｓｎｒスケーラブルビデオ符号化方法及び対応する復号化方法
US8204122B2 (en) * 2007-07-23 2012-06-19 Lsi Corporation Compressed non-reference picture reconstruction from post-processed reference pictures
US9648334B2 (en) * 2011-03-21 2017-05-09 Qualcomm Incorporated Bi-predictive merge mode based on uni-predictive neighbors in video coding
US9426463B2 (en) * 2012-02-08 2016-08-23 Qualcomm Incorporated Restriction of prediction units in B slices to uni-directional inter prediction
US20130272409A1 (en) * 2012-04-12 2013-10-17 Qualcomm Incorporated Bandwidth reduction in video coding through applying the same reference index
US20130315296A1 (en) * 2012-05-22 2013-11-28 Broadcom Corporation Systems and methods for adaptive selection of video encoding resources
US10904551B2 (en) * 2013-04-05 2021-01-26 Texas Instruments Incorporated Video coding using intra block copy
US9503715B2 (en) * 2013-08-30 2016-11-22 Qualcomm Incorporated Constrained intra prediction in video coding
AU2013228045A1 (en) * 2013-09-13 2015-04-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
GB2519514A (en) * 2013-10-11 2015-04-29 Canon Kk Method and apparatus for displacement vector component prediction in video coding and decoding
CA2928753C (en) * 2013-11-14 2019-09-17 Mediatek Singapore Pte. Ltd. Method of video coding using prediction based on intra picture block copy
CN110087089B (zh) * 2013-11-27 2023-03-10 寰发股份有限公司 用于颜色视频数据的视频编解码方法
US20150189333A1 (en) * 2013-12-27 2015-07-02 Industrial Technology Research Institute Method and system for image processing, decoding method, encoder, and decoder
CN104135662B (zh) * 2014-08-19 2017-04-26 哈尔滨工业大学 用于在有限带宽和发射速率条件下对视频文件的改进型h.264压缩编码方法
US9877024B2 (en) * 2015-03-06 2018-01-23 Qualcomm Incorporated Low complexity sample adaptive offset (SAO) coding
WO2016196843A1 (en) * 2015-06-03 2016-12-08 Apple Inc. Techniques for resource conservation during performance of intra block copy prediction searches

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140076508A (ko) * 2012-12-10 2014-06-20 한국전자통신연구원 비디오 부호화 방법 및 비디오 복호화 방법과 이를 이용하는 장치

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020184990A1 (ko) * 2019-03-11 2020-09-17 엘지전자 주식회사 Ibc 예측을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2020184991A1 (ko) * 2019-03-11 2020-09-17 엘지전자 주식회사 Ibc 모드를 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
US11997300B2 (en) 2019-03-11 2024-05-28 Lg Electronics Inc. Method and apparatus for video encoding/decoding using IBC mode, and method for transmitting bitstream
WO2020185043A1 (ko) * 2019-03-13 2020-09-17 엘지전자 주식회사 Ibc 예측을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
US12058342B2 (en) 2019-03-13 2024-08-06 Lg Electronics Inc. Image encoding/decoding method and device using IBC prediction, and method for transmitting bitstream

Also Published As

Publication number Publication date
US20200084454A1 (en) 2020-03-12
CA2993104A1 (en) 2017-02-02
AU2016299036B2 (en) 2019-11-21
WO2017016468A1 (en) 2017-02-02
CN112887711B (zh) 2023-06-30
KR102264767B1 (ko) 2021-06-14
CA2993104C (en) 2021-03-02
EP3318060A4 (en) 2019-01-16
KR102127488B1 (ko) 2020-06-30
CN112887711A (zh) 2021-06-01
CN107852490A (zh) 2018-03-27
EP3318060A1 (en) 2018-05-09
EP3318060B1 (en) 2021-05-26
CN107852490B (zh) 2021-01-26
KR20200078689A (ko) 2020-07-01
US11146794B2 (en) 2021-10-12
AU2016299036A1 (en) 2018-02-22

Similar Documents

Publication Publication Date Title
KR102264767B1 (ko) 인트라 블록 복사 모드를 이용한 비디오 코딩을 위한 시스템의 방법
US10897631B2 (en) Methods of constrained intra block copy for reducing worst case bandwidth in video coding
US11297352B2 (en) Method of deblocking for intra block copy in video coding
KR102164062B1 (ko) 인트라 블록 복사 모드를 위한 디코딩된 픽처 버퍼의 방법 및 시스템
KR102649520B1 (ko) 조합된 인트라-인터 예측의 개선된 가중 처리
US10356438B2 (en) Method and apparatus of error handling for video coding using intra block copy mode
JP7482220B2 (ja) サブピクチャのパラメータセットシグナリングにおける構文制約
KR102696718B1 (ko) 조합된 인트라-인터 예측의 확장된 적용
KR20170084251A (ko) 모션 벡터 및 블록 벡터 해상도 제어의 방법
JP7322290B2 (ja) ビデオビットストリームにおけるサブピクチャシグナリングのための構文
JP2022548580A (ja) 映像符号化における重み付けサンプルの双予測
WO2020012448A2 (en) Shape dependent interpolation order
CN118614060A (zh) 利用自适应混合的几何分区模式的方法和设备
CN118592024A (zh) 利用预定义模式顺序进行几何分区模式拆分模式重排序的方法和设备
CN118614059A (zh) 利用拆分模式重排序的几何分区模式的方法和设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant