KR20150113522A - 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치 - Google Patents

템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치 Download PDF

Info

Publication number
KR20150113522A
KR20150113522A KR1020140037577A KR20140037577A KR20150113522A KR 20150113522 A KR20150113522 A KR 20150113522A KR 1020140037577 A KR1020140037577 A KR 1020140037577A KR 20140037577 A KR20140037577 A KR 20140037577A KR 20150113522 A KR20150113522 A KR 20150113522A
Authority
KR
South Korea
Prior art keywords
unit
coding unit
prediction
template matching
current coding
Prior art date
Application number
KR1020140037577A
Other languages
English (en)
Other versions
KR102319384B1 (ko
Inventor
심동규
조현호
Original Assignee
인텔렉추얼디스커버리 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔렉추얼디스커버리 주식회사 filed Critical 인텔렉추얼디스커버리 주식회사
Priority to KR1020140037577A priority Critical patent/KR102319384B1/ko
Priority to CN201910636821.7A priority patent/CN110312128B/zh
Priority to US15/127,465 priority patent/US20170134726A1/en
Priority to CN201580024588.7A priority patent/CN106464870B/zh
Priority to PCT/KR2015/000507 priority patent/WO2015152507A1/ko
Publication of KR20150113522A publication Critical patent/KR20150113522A/ko
Priority to KR1020210142731A priority patent/KR102366528B1/ko
Application granted granted Critical
Publication of KR102319384B1 publication Critical patent/KR102319384B1/ko
Priority to KR1020220021234A priority patent/KR102464786B1/ko
Priority to KR1020220145153A priority patent/KR20220154068A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 영상 복호화 장치 및 방법에 대해 개시한다. 보다 상세하게, 영상 복호화 장치는, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함하고, 상기 플래그 정보는 상기 현재 코딩 유닛의 크기가 상기 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우 이용되는 것이다.

Description

템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치 {METHOD AND APPARATUS FOR INTRA PICTURE CODING BASED ON TEMPLATE MATCHING}
본 발명은 영상 처리 기술에 관한 것으로서, 보다 상세하게는 영상 부호화/복호화함에 있어서 템플릿 매칭 기반의 예측 모드로 화면 내 픽쳐의 블록을 부호화/복호화하는 방법 및 장치에 관한 것이다.
최근 고해상도, 고화질 영상에 대한 요구가 증가함에 따라 차세대 영상 서비스를 위한 고효율의 비디오 압축 기술에 대한 필요성이 대두되었다. 이러한 시장의 요구에 따라, MPEG (Moving Picture Expert Group)과 VCEG (Video Coding Expert Group)은 2010년 JCT-VC (Joint Collaborative Team on Video Coding)를 구성한 후 HEVC (High Efficiency Video Coding)라는 차세대 비디오 표준 기술의 개발을 시작하였다. 2013년 1월 HEVC version1 표준 기술의 개발이 완료되었으며, HEVC는 종래에 가장 높은 압축 효율을 갖는 것으로 알려진 H.264/AVC High 프로파일에 비하여 동일 주관적 화질 기준으로 약 50%의 압축 효율 향상을 달성하였다.
최근 JCT-VC는 HEVC version1의 표준화 이후 4:0:0, 4:2:2, 4:4:4 컬러 포맷 및 최대 16비트까지의 비트 심도 (bit-depth)를 지원하기 위한 확장 표준 기술로 range extension 을 개발하고 있다. 또한, JCT-VC는 HEVC를 기반으로 스크린 콘텐츠를 효과적으로 부호화하기 위한 비디오 압축 기술을 개발하기 위하여 2014년 1월 Joint Call for Proposal를 발행하였다.
한편, 한국공개특허 제2010-0132961호(발명의 명칭: 템플릿 매칭을 이용한 영상 부호화 방법 및 장치, 그리고 복호화 방법 및 장치)에서는 부호화 대상 블록의 템플릿을 결정하는 단계, 결정된 템플릿과 정합 탐색을 수행하는 정합 탐색 대상 영상을 결정하는 단계, 결정된 정합 탐색 대상 영상 및 템플릿을 이용하여 최적 예측 블록을 결정하는 단계, 및 최적 예측 블록과 부호화 대상 블록을 이용하여 잔여 블록을 생성하는 단계를 포함하는 기술에 대해 개시하고 있다.
본 발명의 일부 실시예는 템플릿 매칭 기반의 예측 부호화/복호화 기술의 사용 여부에 대한 정보를 소정의 블록 또는 영역 단위에서 효과적으로 기술할 수 있도록 하는 장치 및 방법을 제공하는 데에 그 목적이 있다.
또한, 본 발명의 일부 실시예는 화면 내 픽쳐(intra picture)에서 일부 블록이 템플릿 매칭 기반의 예측 모드로 부호화/복호화되는 경우, 스킵 모드(skip mode) 기술을 사용할 수 있도록 하는 장치 및 방법을 제공하는 데에 다른 목적이 있다.
또한, 본 발명의 일부 실시예는 템플릿 매칭 기반의 예측과 비 템플릿 매칭 기반의 예측이 함께 사용되는 경우, 디블록킹 필터링 과정에서의 경계 강도를 결정할 수 있는 장치 및 방법을 제공하는 데에 또 다른 목적이 있다.
또한, 본 발명의 일부 실시예는 임의의 코딩 유닛 내에서 템플릿 매칭 기반의 예측 모드와 비 템플릿 매칭 기반의 예측 모드가 동시에 수행될 수 있도록 하는 장치 및 방법을 제공하는 데에 또 다른 목적이 있다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치는, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함하고, 상기 플래그 정보는 상기 현재 코딩 유닛의 크기가 상기 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우 이용되는 것이다.
또한, 본 발명의 다른 실시예에 따른 영상 복호화 장치는, 서로 공간적으로 인접하는 복수 개의 코딩 트리 유닛에 대한 영역 플래그 정보를 이용하여 상기 코딩 트리 유닛에 대한 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정하고, 상기 예측 모드를 수행하는 것으로 결정된 코딩 트리 유닛 내 각각의 코딩 유닛이 상기 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 추가 플래그 정보를 이용하여 상기 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함한다.
또한, 본 발명의 또 다른 실시예에 따른 영상 복호화 장치는, 스킵 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함하고, 상기 스킵 플래그 정보는 상기 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나가 인트라 부호화된 것이고, 상기 현재 코딩 유닛이 상기 템플릿 매칭 기반의 예측 모드로 부호화된 것이고, 상기 현재 코딩 유닛에 대한 블록 벡터와 상기 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일하며, 상기 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는 경우 이용되는 것이다.
또한, 본 발명의 또 다른 실시예에 따른 영상 복호화 장치는, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하고, 상기 현재 코딩 유닛의 에지 경계에 대한 디블록킹 필터링을 위한 경계 강도를 결정하는 템플릿 매칭 예측부를 포함하고, 상기 현재 코딩 유닛, 및 상기 현재 코딩 유닛과 상기 에지 경계를 기준으로 인접한 인접 코딩 유닛 각각에 대한 예측 모드, 잔차 신호, 및 블록 벡터에 따라 상기 현재 코딩 유닛과 상기 인접 코딩 유닛 간의 경계 강도가 다르게 결정된다.
또한, 본 발명의 일 실시예에 따른 영상 복호화 방법은, 현재 코딩 유닛의 크기가 템플릿 매칭 기반의 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우, 상기 현재 코딩 유닛이 상기 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계를 포함한다.
또한, 본 발명의 다른 실시예에 따른 영상 복호화 방법은, 서로 공간적으로 인접하는 복수 개의 코딩 트리 유닛에 대한 영역 플래그 정보를 이용하여 상기 코딩 트리 유닛에 대한 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정하는 단계; 및 상기 예측 모드를 수행하는 것으로 결정된 코딩 트리 유닛 내 각각의 코딩 유닛이 상기 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 추가 플래그 정보를 이용하여 상기 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계를 포함한다.
또한, 본 발명의 또 다른 실시예에 따른 영상 복호화 방법은, 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나가 인트라 부호화된 것이고, 상기 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것이고, 상기 현재 코딩 유닛에 대한 블록 벡터와 상기 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일하며, 상기 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는 경우, 스킵 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계를 포함한다.
또한, 본 발명의 또 다른 실시예에 따른 영상 복호화 방법은, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계; 및 상기 현재 코딩 유닛의 에지 경계에 대한 디블록킹 필터링을 위한 경계 강도를 결정하는 단계를 포함하고, 상기 현재 코딩 유닛, 및 상기 현재 코딩 유닛과 상기 에지 경계를 기준으로 인접한 인접 코딩 유닛 각각에 대한 예측 모드, 잔차 신호, 및 블록 벡터에 따라 상기 현재 코딩 유닛과 상기 인접 코딩 유닛 간의 경계 강도가 다르게 결정된다.
전술한 본 발명의 과제 해결 수단에 의하면, 코딩 유닛의 크기와 관련된 소정의 조건을 만족하는 경우 슬라이스, 슬라이스 세그먼트, 픽쳐 내 기 복호화된 영역으로부터 템플릿 매칭 기반의 복호화를 수행함으로써, 관련된 비트의 전송량을 적절히 제어하여 부호화/복호화 효율을 최적화시킬 수 있다.
또한, 전술한 일부 실시예에 의하면, 영역 플래그 정보를 이용함으로써, 자막과 영상 영역이 구분되는 스크린 컨텐츠 분야에서 코딩 효율 향상을 위해 유용하게 사용될 수 있을 것이다.
또한, 전술한 일부 실시예에 의하면, 기존의 화면 간 예측(inter-prediction) 기반의 예측 모드에서 사용되던 스킵 모드를 템플릿 매칭 기반의 예측 모드에 적용시킴으로써, 영상 부호화/복호화 효율을 증대시킬 수 있다.
또한, 전술한 일부 실시예에 의하면, 예측 모드, 잔차 신호, 및 블록 벡터에 따라 현재 코딩 유닛과 인접 코딩 유닛 간의 경계 강도가 다르게 결정됨으로써, 보다 효율적인 디블록킹 필터링을 수행할 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상 복호화 장치를 전체적으로 도시한 블록도이다.
도 2a는 코딩 트리 유닛 내의 코딩 유닛 단위에서 수행되는 템플릿 매칭 기반의 예측 부호화/복호화를 도시한 예시도이다.
도 2b는 코딩 유닛 단위에서 기술되는 템플릿 매칭 사용 여부에 대한 신택스 요소의 예시도이다.
도 3a는 픽쳐 파라미터 셋과 코딩 유닛 레벨에서 기술되는 신택스 요소의 예시도이다.
도 3b는 템플릿 매칭 예측부 내에서 코딩 유닛의 크기를 판단하기 위한 세부 구성을 도시한 블록도이다.
도 4a는 템플릿 매칭 기반의 예측 모드로 부호화를 수행하는 영상 부호화 장치의 세부 구성을 도시한 블록도이다.
도 4b는 템플릿 매칭 기반의 예측 모드로 복호화를 수행하는 영상 복호화 장치의 세부 구성을 도시한 블록도이다.
도 5a는 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한 경우 템플릿 매칭 사용 여부에 대한 신택스 요소의 예시도이다.
도 5b는 코딩 유닛의 크기에 따라 코딩 유닛 또는 예측 유닛 단위로 복호화를 수행하는 영상 복호화 장치의 동작을 간략하게 도시한 도면이다.
도 6은 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한 경우 코딩 유닛 내 각각의 예측 유닛 중 템플릿 매칭 기반의 예측 모드로 부호화된 예측 유닛이 먼저 복호화되는 예시도이다.
도 7은 도 6에 도시된 코딩 유닛에서 템플릿 매칭 기반의 예측 모드에 의해 기 복호화된 영역을 참조하여 화면 내 예측 모드로 부호화된 예측 유닛이 복호화되는 예시도이다.
도 8a는 코딩 트리 유닛의 행 단위로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 8b는 코딩 트리 유닛의 열 단위로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 9a는 코딩 트리 유닛의 시작 위치와 연속하는 코딩 트리 유닛의 개수를 기초로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 9b는 코딩 트리 유닛으로 이루어진 임의의 사각형 영역을 기초로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 10a는 현재 코딩 유닛을 스킵 모드로 부호화하는 알고리즘을 도시한 예시도이다.
도 10b는 현재 코딩 유닛을 스킵 모드로 부호화하기 위한 세부 구성을 도시한 블록도이다.
도 10c는 현재 코딩 유닛을 스킵 모드로 복호화하기 위한 세부 구성을 도시한 블록도이다.
도 11은 에지 경계에서 디블록킹 필터링을 수행하기 위해 경계 강도를 결정하는 일 예에 따른 알고리즘을 도시한 도면이다.
도 12는 에지 경계에서 디블록킹 필터링을 수행하기 위해 경계 강도를 결정하는 다른 예에 따른 알고리즘을 도시한 도면이다.
도 13은 본 발명의 일 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
도 14는 본 발명의 다른 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
도 15는 본 발명의 또 다른 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
도 16은 본 발명의 또 다른 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본원 명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함" 한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다. 본원 명세서 전체에서 사용되는 정도의 용어 "~(하는) 단계" 또는 "~의 단계"는 "~ 를 위한 단계"를 의미하지 않는다.
또한, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
덧붙여, 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 기술되고, 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다. 이러한 각 구성부의 통합된 실시 예 및 분리된 실시 예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
이하에서는, 본 발명에서 제안하는 영상 복호화 장치에 대해 도 1을 참고하여 설명하기로 한다. 도 1은 본 발명의 일 실시예에 따른 영상 복호화 장치를 전체적으로 도시한 블록도이다.
참고로, 영상 부호화 과정과 영상 복호화 과정은 많은 부분에서 서로 대응되므로, 이 기술 분야에 속한 기술자라면 후술될 영상 복호화 과정에 대한 설명을 통해 영상 부호화 과정도 쉽게 이해할 수 있을 것이다.
도 1을 참조하면, 본 발명에서 제안하는 영상 복호화 장치는 엔트로피 복호화부(100), 역영자화부(110), 역변환부(120), 화면 간 예측부(130), 템플릿 매칭 예측부(140), 화면 내 예측부(150), 합산부(155), 디블록킹 필터부(160), 샘플 적응적 오프셋(SAO)부(170), 참조 영상 버퍼(180)를 포함할 수 있다.
엔트로피 복호화부(100)는 입력된 비트스트림을 복호화하여 신택스 요소(syntax elements) 및 양자화된 계수 등과 같은 복호화 정보를 출력한다.
이때, 신택스 요소에 포함된 예측 모드 정보는 어떠한 예측 모드에 의해 각각의 코딩 유닛이 부호화된 것인지 혹은 복호화될 것인지에 대한 정보이다. 본 발명의 경우 화면내 예측, 화면간 예측, 및 템플릿 매칭 기반 예측 중 어느 하나의 예측 모드가 수행될 수 있다.
역양자화부 (110) 및 역변환부 (120)는 양자화된 계수를 수신하여 역양자화 및 역변환을 차례대로 수행하고, 잔차 신호(residual signal)를 출력한다.
화면 간 예측부(130)는 인코더로부터 전송된 움직임 벡터와 복원 영상 버퍼(180)에 저장되어 있는 복원 영상을 이용하여 움직임 보상을 수행함으로써, 화면간 예측 기반의 예측 신호를 생성한다.
화면 내 예측부(150)는 복호화되는 현재 블록과 인접하는 기 복호화된 주변 블록의 화소 값을 이용하여 공간적 예측을 수행함으로써, 화면내 예측 기반의 예측 신호를 생성한다.
템플릿 매칭 예측부(140)는 복호화되는 현재 픽쳐 또는 슬라이스 내 기 복호화된 영역으로부터 템플릿 매칭 기반의 보상을 수행함으로써, 화면내 블록 복사 기반의 예측 신호를 생성한다. 템플릿 매칭 기반의 보상은 화면간 예측과 유사하게 블록 단위로 이루어지고, 템플릿 매칭을 위한 움직임 벡터(이하 '블록 벡터'라 지칭함)에 대한 정보가 신택스 요소 내에 기술된다.
화면 간 예측부(130), 템플릿 매칭 예측부(140), 또는 화면 내 예측부(150)로부터 출력된 예측 신호는 합산부(155)를 통해 잔차 신호와 합해지고, 그에 따라 블록 단위로 생성된 복원 신호는 복원된 영상을 포함한다.
복원된 블록 단위의 영상은 디블록킹 필터부(160)와 SAO 수행부(170)로 전달된다. 디블록킹 필터링 및 샘플 적응적 오프셋이 적용된 복원 픽쳐는 복원 픽쳐 버퍼(180)에 저장되며, 화면간 예측부(130)에서 참조 픽쳐로써 사용될 수 있다.
도 2a는 코딩 트리 유닛 내의 코딩 유닛 단위에서 수행되는 템플릿 매칭 기반의 예측 부호화/복호화를 도시한 예시도이다.
도 2a를 참조하면, 현재 부호화/복호화되는 코딩 유닛(200)을 포함하는 현재 코딩 트리 유닛(CTU(n))과 이미 부호화/복호화된 영역을 포함하는 이전 코딩 트리 유닛(CTU(n-1))이 도시되어 있다. 코딩 유닛(200)에 대해 템플릿 매칭 기반의 예측 부호화/복호화가 수행되는 경우, 현재 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 내 이미 복원된 영역으로부터 템플릿 매칭이 수행된다.
템플릿 매칭이 수행된 블록에 대한 정보는 해당 예측 블록(220)에 대한 위치 정보(210)인 블록 벡터로서 표현된다. 이러한 블록 벡터는 주변 블록의 벡터로부터 예측된 후 차분 값만이 기술될 수 있다.
도 2b는 코딩 유닛 단위에서 기술되는 템플릿 매칭 사용 여부에 대한 신택스 요소의 예시도이다.
도 2b를 참조하면, 현재 코딩 유닛(250)이 템플릿 매칭 기반의 예측 모드로 부호화 된 경우, 이에 대한 정보는 코딩 유닛 단위의 플래그 형태(260)로 기술될 수 있다. 현재 코딩 유닛(250)에 대한 intra_bc_flag 값이 1인 경우 해당 코딩 유닛은 템플릿 매칭 기반 예측을 이용하여 부호화되었다는 것을 의미할 수 있고, 해당 값이 0인 경우 해당 코딩 유닛은 화면내 예측 또는 화면간 예측 기반의 예측 모드로 부호화될 수 있다.
한편, 본 발명의 일 실시예에 따른 영상 복호화 장치는 템플릿 매칭 예측부를 포함할 수 있다.
템플릿 매칭 예측부는 현재 코딩 유닛(복호화되는 코딩 유닛)이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정할 수 있다.
이때, 플래그 정보는 현재 코딩 유닛의 크기가 템플릿 매칭 기반의 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우 신택스 요소에 기술되어 이용될 수 있다.
또한, 템플릿 매칭 예측부는 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나 내에서 이미 복호화된 영역으로부터 템플릿 매칭 기반의 예측 신호를 생성할 수 있다.
도 3a는 픽쳐 파라미터 셋과 코딩 유닛 레벨에서 기술되는 신택스 요소의 예시도이다.
도 3a를 참조하면, 코딩 유닛 레벨에서 템플릿 매칭 기반의 예측 부호화의 수행 여부는 플래그(intra_bc_flag; 320)를 통해 기술된다. 이때, 해당 플래그 비트를 보다 효율적으로 표현하기 위하여 시퀀스 파라미터 셋, 픽쳐 파라미터 셋, 슬라이스 헤더와 같은 상위 수준의 신택스에서 템플릿 매칭이 수행될 수 있는 코딩 유닛의 크기 정보가 기술될 수 있다.
즉, 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건에 대한 정보는 현재 코딩 유닛이 포함된 시퀀스를 위한 시퀀스 파라미터 셋, 현재 코딩 유닛이 포함된 픽쳐 그룹 또는 픽쳐를 위한 픽쳐 파라미터 셋, 또는 현재 코딩 유닛이 포함된 슬라이스 또는 슬라이스 세그먼트를 위한 슬라이스 헤더에 포함될 수 있다.
픽쳐 파라미터 셋에서 기술되는 "log2_min_bc_size_minus2" 신택스 요소 (300)는 해당 픽쳐 파라미터 셋을 참조하는 슬라이스 세그먼트에서 템플릿 매칭 기반의 예측 부호화가 수행될 수 있는 코딩 유닛의 최소 크기를 기술하는 신택스 요소이다. "log2_diff_max_min_bc_size" 신택스 요소 (310)는 템플릿 매칭 기반의 예측 부호화가 수행될 수 있는 코딩 유닛의 최소 크기와 최대 크기의 차이 값에 관한 신택스 요소이다.
이러한 신택스 요소가 명시적으로 기술되지 않는 경우, 템플릿 매칭 기반의 예측 부호화가 수행될 수 있는 코딩 유닛의 최소 크기는 현재 슬라이스의 코딩 유닛의 최소 크기와 동일하며, 템플릿 매칭 기반의 예측 부호화가 수행될 수 있는 코딩 유닛의 최대 크기는 현재 슬라이스의 코딩 유닛의 최대 크기와 동일하다.
즉, 템플릿 매칭 기반의 예측 모드에 의해 부호화된 것인지 여부를 나타내는 플래그 정보는 현재 코딩 유닛의 크기가 현재 코딩 유닛이 포함된 슬라이스의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우 신택스 요소 내에 기술될 수 있다.
픽쳐 파라미터 또는 슬라이스 세그먼트 헤더와 같은 상위 수준 신택스에서 템플릿 매칭 기반의 예측 부호화가 수행될 수 있는 코딩 유닛의 최소 및 최대 크기가 기술되는 경우, 부호화/복호화되는 코딩 유닛의 크기가 템플릿 매칭 기반의 예측 수행이 가능한 크기인 경우(범위 조건을 만족하는 경우)에만 템플릿 매칭이 수행되며, 이 경우 "intra_bc_flag" 신택스 요소 (320)를 통해 코딩 유닛 단위의 템플릿 매칭 수행 여부가 추가로 기술될 수 있다.
도 3b는 템플릿 매칭 예측부 내에서 코딩 유닛의 크기를 판단하기 위한 세부 구성을 도시한 블록도이다.
템플릿 매칭 예측부는 템플릿 코딩 유닛 크기 파라미터 파싱부(350), 템플릿 코딩 유닛 크기 결정부 (360), 및 템플릿 코딩 유닛 플래그 파싱부 (370)를 포함할 수 있고, 템플릿 매칭 기반으로 코딩된 코딩 유닛의 크기 정보를 기술하여 블록 단위의 플래그 비트의 기술을 최소화시킬 수 있다.
임의의 픽쳐의 일부 코딩 유닛이 템플릿 매칭 기반으로 코딩된 경우, 템플릿 매칭 기반의 예측 모드가 수행될 수 있는 코딩 유닛의 최소 및 최대 크기에 대한 정보가 상위 수준의 신택스를 통해서 기술된다.
템플릿 코딩 유닛 크기 파라미터 파싱부(350)는 이러한 코딩 유닛의 최소 및 최대 크기에 대한 정보를 복호화할 수 있다.
템플릿 코딩 유닛 크기 결정부(360)는 템플릿 코딩 유닛 크기 파라미터 파싱부 (350)에서 복호화된 정보에 기초하여, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 내에서 템플릿 매칭 기반의 예측 모드로 부호화되기 위한 코딩 유닛의 최대 크기 및 최소 크기를 결정할 수 있다. 이때, 코딩 유닛의 최대 크기와 최소 크기 간의 차분 값이 이용될 수 있다.
템플릿 코딩 유닛 플래그 파싱부(370)는 복호화되는 코딩 유닛의 크기가 템플릿 매칭 기반의 예측 수행이 가능한 크기인 경우(범위 조건을 만족하는 경우)에만 템플릿 매칭 기반의 예측 모드에 의해 부호화된 것인지 여부를 블록 단위로 나타내는 플래그 정보를 파싱할 수 있다.
도 4a는 템플릿 매칭 기반의 예측 모드로 부호화를 수행하는 영상 부호화 장치의 세부 구성을 도시한 블록도이다.
템플릿 매칭 예측부는 필터 적용부(420), 보간 필터링부(425), 움직임 탐색부(430), 및 움직임 보상부(435)를 포함할 수 있고, 템플릿 매칭 기반의 코딩시 이미 부호화된 영역에 대한 에러율을 감소화시킬 수 있다.
도 4a를 참조하면, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(400)내에서 기 부호화된 영역(410)을 참조하여 현재 블록(415)에 대한 템플릿 매칭 기반의 예측 부호화가 수행된다.
필터 적용부(420)는 픽쳐, 슬라이스, 또는 슬라이스 세그먼트에서 기 부호화된 영역(410) 내의 에러를 최소화시키기 위한 필터링을 수행한다. 예를 들어, 저 지연 필터, 디블록킹 필터, 샘플 적응적 오프셋 등이 사용될 수 있다.
보간 필터링부(425)는 템플릿 매칭 기반의 예측시 보다 정밀한 탐색을 수행할 수 있도록 보간을 수행한다.
움직임 탐색부(430)는 보간된 영역에서 부호화되는 현재 블록과 가장 유사한 블록을 탐색하고, 움직임 보상부(435)는 템플릿 매칭을 통해 탐색된 블록에 대한 예측 값을 생성한다.
도 4b는 템플릿 매칭 기반의 예측 모드로 복호화를 수행하는 영상 복호화 장치의 세부 구성을 도시한 블록도이다.
템플릿 매칭 예측부는 필터 적용부(470), 보간 필터링부(480), 및 움직임 보상부(490)를 포함할 수 있고, 템플릿 매칭 기반의 코딩시 이미 복호화된 영역에 대한 에러율을 감소시킬 수 있으며, 위 구성들에 의해 보상된 영역을 참조하여 템플릿 매칭 기반의 예측 모드를 수행할 수 있다.
도 4b를 참조하면, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(450)내에서 기 복호화된 영역(460)을 참조하여 현재 블록(465)에 대한 템플릿 매칭 기반의 예측 복호화가 수행된다.
필터 적용부(470)는 픽쳐, 슬라이스, 또는 슬라이스 세그먼트에서 기 복호화된 영역(460) 내의 에러를 최소화시키기 위한 필터링을 수행한다. 예를 들어, 저 지연 필터, 디블록킹 필터, 샘플 적응적 오프셋 등이 사용될 수 있다.
보간 필터링부(480)는 템플릿 매칭 기반의 움직임 보상을 위해 기 복호화된 영역(460)에 대해 보간을 수행하고, 움직임 보상부(490)는 전송된 블록 벡터의 위치 정보로부터 예측 값을 생성한다.
즉, 움직임 보상부는 이미 복호화된 영역 내 현재 코딩 유닛과 대응되는 영역의 위치 정보인 블록 벡터를 기초로 템플릿 매칭 기반의 예측 신호를 생성할 수 있다.
도 5a는 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한 경우 템플릿 매칭 사용 여부에 대한 신택스 요소의 예시도이다.
부호화/복호화하려는 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(500) 내 코딩 유닛은 템플릿 매칭 기반 예측 부호화의 수행 여부를 나타내는 플래그 정보를 가질 수 있다. 이러한 플래그 정보는 코딩 유닛 단위로 기술될 수 있다.
다만, 현재 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한 경우, 플래그 정보(510)는 현재 코딩 유닛 내 각각의 예측 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타낼 수 있다.
또한, 현재 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한 경우, 현재 코딩 유닛 내 각각의 예측 유닛에 대한 예측 신호는 템플릿 매칭 예측부, 화면간 예측부 및 화면내 예측부 중 적어도 어느 하나에 의해 선택적으로 생성될 수 있다. 즉, 예측 유닛 단위로 화면 내 예측, 화면 간 예측, 또는 템플릿 매칭 기반의 예측이 선택적으로 적용될 수 있다. 덧붙여, 화면간 예측부는 현재 코딩 유닛에 대한 움직임 벡터 및 참조 영상을 기초로 현재 코딩 유닛에 대한 화면간 예측 기반의 예측 신호를 생성할 수 있고, 화면내 예측부는 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 부호화 정보를 기초로 현재 코딩 유닛에 대한 화면내 예측 기반의 예측 신호를 생성할 있다.
도 5b는 코딩 유닛의 크기에 따라 코딩 유닛 또는 예측 유닛 단위로 복호화를 수행하는 영상 복호화 장치의 동작을 간략하게 도시한 도면이다.
도 5b를 참조하면, 영상 복호화 장치는 최소 크기의 코딩 유닛 확인부(550), 예측 유닛 단위의 템플릿 매칭 여부 플래그 파싱부(560), 코딩 유닛 단위의 템플릿 매칭 여부 플래그 파싱부(570), 블록 디코딩부(575), 템플릿 블록 디코딩부(580), 및 비 템플릿 블록 디코딩부 (590)를 포함할 수 있고, 코딩 유닛의 크기에 따라 템플릿 매칭 기반 부호화 또는 비 템플릿 매칭 기반 부호화를 수행할 수 있다.
최소 크기의 코딩 유닛 확인부(550)는 현재 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한가를 확인할 수 있다.
만약 코딩하려는 현재 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 상이하다면, 코딩 유닛 단위의 템플릿 매칭 여부 플래그 파싱부(570)를 통해 코딩 유닛 단위로 템플릿 매칭 기반의 코딩 수행 여부에 관한 플래그 정보가 파싱될 수 있다.
이러한 경우, 블록 디코딩부(575)는 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 코딩 유닛 단위로 나타내는 플래그 정보에 따라 각 코딩 유닛에 대한 템플릿 매칭 기반의 복호화 또는 비 템플릿 매칭 기반의 복호화를 수행할 수 있다.
만약 코딩하려는 현재 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일하다면, 예측 유닛 단위의 템플릿 매칭 여부 플래그 파싱부(560)를 통해 예측 유닛 단위로 템플릿 매칭 기반의 코딩 수행 여부에 관한 플래그 정보가 파싱될 수 있다.
이러한 경우, 템플릿 블록 디코딩부(580)는 현재 코딩 유닛 내에서 템플릿 매칭 기반의 예측 모드로 부호화된 예측 유닛을 z-스캔 순서에 따라 템플릿 매칭 기반의 예측 복호화를 수행할 수 있고, 화면 내 예측부 또는 화면 간 예측부와 같은 비 템플릿 블록 코딩부(590)도 비 템플릿 매칭 기반의 예측 모드로 부호화된 나머지 예측 유닛을 z-스캔 순서에 따라 예측 복호화를 수행할 수 있다. 이때, 일부 예측 유닛과 나머지 예측 유닛은 파싱된 플래그 정보에 따라 결정될 수 있다.
아울러, 도 6은 코딩 유닛의 크기가 코딩 유닛의 최소 크기와 동일한 경우 코딩 유닛 내 각각의 예측 유닛 중 템플릿 매칭 기반의 예측 모드로 부호화된 예측 유닛이 먼저 복호화되는 예시도이다.
도 6을 참조하면, 복호화되는 현재 코딩 유닛(600)의 크기가 코딩 유닛의 최소 크기와 동일한 경우, 예측 유닛 단위로 템플릿 매칭 기반 부호화의 수행 여부에 대한 플래그 정보(intra_bc_flag)가 기술될 수 있다.
현재 코딩 유닛(610)이 네 개의 예측 블록(PU)으로 분할된 경우, 각각의 예측 블록 중 해당 플래그 정보(intra_bc_flag)가 '1'인 예측 블록은 z-스캔 순서(620)에 따라 템플릿 매칭 기반의 예측 모드로 복호화될 수 있고, 이어서 해당 플래그 정보(intra_bc_flag)가 '0'인 예측 블록은 z-스캔 순서(620)에 따라 비 템플릿 매칭 기반의 예측 모드로 복호화될 수 있다.
즉, 상술한 템플릿 매칭 예측부는 z-스캔 순서에 따라 각각의 예측 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정할 수 있고, 현재 코딩 유닛 내에서 예측 유닛 단위로 각각의 예측 유닛 중 일부에 대한 예측 신호를 생성할 수 있다.
도 7은 도 6 에 도시된 코딩 유닛에서 템플릿 매칭 기반의 예측 모드에 의해 기 복호화된 영역을 참조하여 화면 내 예측 모드로 부호화된 예측 유닛이 복호화되는 예시도이다.
도 7을 참조하면, 최소 크기의 현재 코딩 유닛 내에서 예측 유닛 단위로 템플릿 매칭 수행 여부가 플래그 정보(intra_bc_flag) 형태로 기술된 경우, 현재 코딩 유닛 내 일부 예측 유닛(PU0, PU3)은 템플릿 매칭 기반의 예측 모드로 복호화될 수 있다. 그 이후에, 코딩 유닛 내 나머지 예측 유닛(PU1, PU3)은 기존의 화면 내 예측 또는 화면 간 예측 모드로 복호화될 수 있다. 각각의 예측 유닛에 대한 예측 신호의 생성은 예측 유닛 단위로 z-스캔 순서(720)에 따라 이루어질 수 있다.
특히, 소정의 예측 유닛(700)이 화면 내 예측 모드로 복호화되는 경우, 템플릿 매칭 기반의 예측 모드로 기 복호화된 영역(빗금친 영역)을 포함하는 참조 영역(710)이 참조될 수 있다. 즉, 상술한 화면 내 예측부는 해당 코딩 유닛 내에서 템플릿 매칭 예측부에 의해 이미 복호화된 영역을 기초로 화면내 예측 기반의 예측 신호를 생성할 수 있다.
지금까지 상술한 본 발명의 일 실시예에 따른 영상 복호화 장치는 현재 코딩 유닛의 크기에 대한 소정의 조건을 포함함으로써, 관련된 비트의 전송량을 적절히 제어하여 부호화/복호화 효율을 최적화시킬 수 있다.
한편, 본 발명의 다른 실시예에 따른 영상 복호화 장치는 템플릿 매칭 예측부를 포함할 수 있다.
템플릿 매칭 예측부는 서로 공간적으로 인접하는 복수 개의 코딩 트리 유닛에 대한 영역 플래그 정보를 이용하여 상기 코딩 트리 유닛에 대한 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정할 수 있다.
또한, 템플릿 매칭 예측부는, 템플릿 매칭 기반의 예측 모드를 수행하는 것으로 결정된 코딩 트리 유닛 내 각각의 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정할 수 있다.
구체적으로, 해당 예측 신호를 생성할 것으로 결정한 경우, 템플릿 매칭 예측부는 각각의 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나 내에서 이미 복호화된 영역으로부터 템플릿 매칭 기반의 예측 신호를 생성할 수 있다.
아울러, 템플릿 매칭 예측부는 코딩 트리 유닛의 행 또는 열 단위로 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정할 수 있는데, 이에 대하여 도 8a 및 도 8b를 참고하여 설명하기로 한다.
도 8a는 코딩 트리 유닛의 행 단위로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 8a를 참조하면, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(800) 내 코딩 트리 유닛의 행 단위로 템플릿 매칭 기반의 예측 모드를 수행할 것인지에 대한 영역 플래그 정보(810, 820)인 "intra_block_copy_henabled_flag"가 기술된다.
예를 들어, "intra_block_copy_henabled_flag" 값이 1로 기술된 2번째 행의 코딩 트리 유닛 내 모든 코딩 유닛의 경우, 템플릿 매칭 기반의 예측 복호화의 수행 여부에 관한 플래그 정보가 코딩 유닛 단위로 추가기술된다.
반면에, "intra_block_copy_henabed_flag" 값이 0으로 기술된 4번째 행의 코딩 트리 유닛 내 모든 코딩 유닛의 경우, 템플릿 매칭 기반의 예측 복호화의 수행 여부에 관한 플래그 정보가 전혀 기술되지 않는다.
도 8b는 코딩 트리 유닛의 열 단위로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 8b를 참조하면, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(830) 내 코딩 트리 유닛의 열 단위로 템플릿 매칭 기반의 예측 모드를 수행할 것인지에 대한 영역 플래그 정보(840, 850)인 "intra_block_copy_venabled_flag"가 기술된다.
예를 들어, "intra_block_copy_venabled_flag" 값이 1로 기술된 5번째 열의 코딩 트리 유닛 내 모든 코딩 유닛의 경우, 템플릿 매칭 기반의 예측 복호화의 수행 여부에 관한 플래그 정보가 코딩 유닛 단위로 추가 기술된다.
반면에, "intra_block_copy_henabed_flag" 값이 0으로 기술된 8번째 열의 코딩 트리 유닛 내 모든 코딩 유닛의 경우, 템플릿 매칭 기반의 예측 복호화의 수행 여부에 관한 플래그 정보가 전혀 기술되지 않는다.
또한, 템플릿 매칭 예측부는 소정의 코딩 트리 유닛의 위치에 대한 인덱스 정보 및 소정의 코딩 트리 유닛을 시작점으로 하여 연속으로 위치하는 코딩 트리 유닛의 개수 정보를 기초로, 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정할 수 있는데, 이에 대하여 도 9a를 참고하여 설명하기로 한다.
도 9a는 코딩 트리 유닛의 시작 위치와 연속하는 코딩 트리 유닛의 개수를 기초로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 9a를 참조하면, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(900) 내에서 일부 영역이 템플릿 매칭 기반의 예측 모드로 부호화된 경우, 일부 영역을 나타내기 위하여 소정의 코딩 트리 유닛의 위치에 대한 인덱스 정보(start_idx; 910) 및 그 위치를 시작점으로 하여 연속으로 위치하는 코딩 트리 유닛의 개수 정보(ibc_run; 920)가 동시에 기술될 수 있다.
이와 같이, 템플릿 매칭 기반의 예측 모드로 부호화된 영역의 경우, 인덱스 정보(910) 및 개수 정보(920)를 통해 해당 영역 내 코딩 유닛 단위로 템플릿 매칭 기반의 예측 모드로 복호화를 수행할지 여부에 대한 플래그 정보가 추가 기술될 수 있다.
뿐만 아니라, 템플릿 매칭 예측부는 소정의 코딩 트리 유닛의 위치에 대한 인덱스 정보, 및 소정의 코딩 트리 유닛을 꼭지점으로 갖는 사각형의 가로변과 세로변에 각각 위치하는 코딩 트리 유닛의 개수 정보를 기초로, 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정할 수 있는데, 이에 대하여 도 9b를 참고하여 설명하기로 한다.
도 9b는 코딩 트리 유닛으로 이루어진 임의의 사각형 영역을 기초로 템플릿 매칭 기반의 예측 복호화의 수행 여부를 기술한 구조에 대한 예시도이다.
도 9b를 참조하면, 픽쳐, 슬라이스, 또는 슬라이스 세그먼트(930) 내에서 일부 사각형 영역이 템플릿 매칭 기반의 예측 모드로 부호화된 경우, 사각형 영역을 나타내기 위하여 해당 사각형 영역에서 가장 좌상단에 위치하는 코딩 트리 유닛에 대한 인덱스 정보(start_idx; 940), 및 해당 사각형의 가로변과 세로변에 각각 위치하는 코딩 트리 유닛의 개수 정보(region_width, region_height; 950, 960)가 동시에 기술될 수 있다.
이와 같이, 템플릿 매칭 기반의 예측 모드로 부호화된 사각형 영역의 경우, 인덱스 정보(940) 및 개수 정보(950)를 통해 해당 영역 내 코딩 유닛 단위로 템플릿 매칭 기반의 예측 모드로 복호화를 수행할지 여부에 대한 플래그 정보가 추가 기술될 수 있다.
덧붙여, 템플릿 매칭 예측부는 도 4a 및 도 4b를 참고하여 이미 상술한 것처럼, 필터 적용부, 보간 필터링부, 및 움직임 보상부를 포함할 수 있다.
필터 적용부는 이미 복호화된 영역에 대한 필터링을 수행하고, 보간 필터링부는 이미 복호화된 영역에 대한 보간을 수행한다.
움직임 보상부는 현재 픽쳐의 이미 복호화된 영역 내 각각의 코딩 유닛과 대응되는 영역의 위치 정보인 블록 벡터를 기초로 템플릿 매칭 기반의 예측 신호를 생성할 수 있다.
지금까지 설명한 본 발명의 다른 실시예에 따른 영상 복호화 장치는 영역 플래그 정보를 이용함으로써, 자막과 영상 영역이 구분되는 스크린 컨텐츠 분야에서 코딩 효율 향상을 위해 유용하게 사용될 수 있을 것이다.
한편, 본 발명의 또 다른 실시예에 따른 영상 복호화 장치는 템플릿 매칭 예측부를 포함할 수 있다.
템플릿 매칭 예측부는 스킵(Skip) 플래그 정보를 이용하여 현재 코딩 유닛 에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정할 수 있다.
이때, 스킵 플래그 정보는 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나가 인트라 부호화된 것이고, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것이고, 현재 코딩 유닛에 대한 블록 벡터와 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일하며, 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는 경우, 신택스 요소 내에 기술되어 이용될 수 있다.
스킵 플래그 정보와 관련하여 도 10a 내지 도 10c를 참고하여 설명하기로 한다.
도 10a는 현재 코딩 유닛을 스킵 모드로 부호화하는 알고리즘을 도시한 예시도이다.
도 10a를 참조하면, 다음 조건(1000)들을 만족하는 경우, 현재 코딩 유닛이 스킵 모드로 부호화된다는 것을 나타내는 스킵 플래그 정보가 생성될 수 있다.
해당 조건(1000)의 경우, 현재 코딩 유닛을 포함하는 슬라이스가 인트라 부호화된 것인지 여부, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드(Intra block copy, IBC)로 부호화된 것인지 여부, 현재 코딩 유닛에 대한 블록 벡터와 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일한지 여부, 및 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는지 여부가 포함될 수 있다.
이러한 조건(1000)을 모두 만족하는 경우(1010), 화면 내 픽쳐에서 부호화되는 현재 코딩 유닛이 스킵 모드로 설정된다는 것을 나타내는 스킵 플래그 정보(intra_cu_skip_flag=1)가 생성될 수 있고, 그로 인해 현재 코딩 유닛에 대한 신택스 요소는 최소로 시그널링될 수 있다.
이러한 조건(1000) 중 어느 하나라도 불만족하는 경우(1020), 부호화되는 현재 코딩 유닛이 스킵 모드로 설정되지 않는다는 것을 나타내는 스킵 플래그 정보(intra_cu_skip_flag=0)가 생성될 수 있고, 그로 인해 현재 코딩 유닛에 대한 신택스 요소는 기존처럼 블록 벡터, 차분 계수, 블록의 분할 정보 등으로 기술될 수 있다.
도 10b는 현재 코딩 유닛을 스킵 모드로 부호화하기 위한 세부 구성을 도시한 블록도이다.
영상 부호화 장치 내 템플릿 매칭 예측부는 화면 내 픽쳐 스킵 모드 판단부(1030) 및 화면 내 픽쳐 스킵 모드 플래그 삽입부(1040)를 포함하고, 화면 내 픽쳐의 일부 코딩 유닛을 스킵 모드로 부호화할 수 있다.
화면 내 픽쳐 스킵 모드 판단부(1030)는 화면 내 픽쳐에서 부호화되는 현재 코딩 유닛이 스킵 모드의 조건을 만족하는지에 대해 판단할 수 있다.
만약 현재 코딩 유닛을 스킵 모드로 부호화하는 것이 비트율 왜곡 최적화 관점에서 최적으로 판단되는 경우, 화면 내 픽쳐 스킵 모드 플래그 삽입부(1040)는 현재 코딩 유닛이 스킵 모드로 부호화되었다는 것을 나타내는 스킵 플래그 정보를 삽입할 수 있다.
만약 현재 코딩 유닛을 스킵 모드로 부호화하는 것이 비트율 왜곡 최적화 관점에서 최적이 아니라고 판단되는 경우, 화면 내 픽쳐 스킵 모드 플래그 삽입부(1040)는 현재 코딩 유닛이 스킵 모드로 부호화되지 않았다는 것을 나타내는 스킵 플래그 정보를 삽입할 수 있다.
도 10c는 현재 코딩 유닛을 스킵 모드로 복호화하기 위한 세부 구성을 도시한 블록도이다.
영상 복호화 장치 내 템플릿 매칭 예측부는 화면 내 픽쳐 스킵 모드 플래그 파싱부(1050) 및 블록 단위 디코딩부(1060)를 포함하고, 화면 내 픽쳐가 스킵 모드 또는 기존의 예측 모드로 코딩된 코딩 유닛을 선택적으로 디코딩할 수 있다.
화면 내 픽쳐 스킵 모드 플래그 파싱부(1050)는 코딩 유닛 단위로 스킵 플래그 정보의 비트를 파싱할 수 있다. 스킵 플래그 정보는 화면 내 픽쳐의 각각의 코딩 유닛이 스킵 모드로 부호화된 것인지를 나타내는 정보이다.
현재 코딩 유닛이 화면 내 픽쳐 스킵 모드로 코딩된 경우, 블록 단위 디코딩부(1060)는 스킵 모드에 따라 현재 코딩 유닛을 복호화할 수 있다.
현재 코딩 유닛이 화면 내 픽쳐스킵 모드로 코딩되지 않은 경우, 블록 단위 디코딩부(1060)는 기존의 화면 내 예측 또는 화면 간 예측 기반의 예측 모드를 수행하여 영상을 복원할 수 있다.
이처럼, 기존의 화면 간 예측 기반의 예측 모드에서 사용되던 스킵 모드를 화면 내 픽쳐에서템플릿 매칭 기반의 예측 모드를 위해 적용시킴으로써, 영상 부호화/복호화 효율을 증대시킬 수 있다.
한편, 본 발명의 또 다른 실시예에 따른 영상 복호화 장치는 템플릿 매칭 예측부를 포함할 수 있다.
템플릿 매칭 예측부는 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정할 수 있다.
또한, 템플릿 매칭 예측부는 현재 코딩 유닛 내의에지 경계에 대한 디블록킹 필터링을 위한 경계 강도를 결정할 수 있다.
이때, 현재 코딩 유닛, 및 현재 코딩 유닛과 에지 경계를 기준으로 인접한 인접 코딩 유닛 각각에 대한 예측 모드, 잔차 신호, 및 블록 벡터에 따라 현재 코딩 유닛과 인접 코딩 유닛 간의 경계 강도가 다르게 결정될 수 있다.
경계 강도의 결정과 관련하여 도 11 및 도 12를 참고하여 설명하기로 한다.
도 11은 에지 경계에서 디블록킹 필터링을 수행하기 위해 경계 강도를 결정하는 일 예에 따른 알고리즘을 도시한 도면이다.
도 11을 참조하면, 블록이 화면 내 예측, 화면 간 예측, 또는 템플릿 매칭 기반 예측으로 코딩될 때 블록의 에지 경계에서 디블록킹 필터링을 수행한다. 블록의 에지 경계에서 필터링의 수행은 블록 경계에서 도 11을 통해 계산되는 경계 강도 (Boundary strength; Bs)값을 사용한다.
블록 경계를 기준으로 왼쪽 또는 위쪽에 위치하는 블록을 P, 오른쪽 또는 아래쪽에 위치하는 블록을 Q라 할 때 두 블록에 대한 코딩 모드를 먼저 판단(1100)한다. P 또는 Q 블록이 하나라도 기존의 화면 내 예측으로 코딩 된 경우 (1110) 경계 강도 값은 2로 결정된다. 그렇지 않은 경우 (1120), P와 Q 블록에 0이 아닌 차분 계수가 없고 인접하는 위치에서 두 블록이 보상되었는지를 판단(1130)한다. 이 두 조건을 모두 만족하는 경우 (1150) 두 블록 경계 간에는 불 연속이 존재하지 않으므로 경계 강도 값은 0으로 결정된다. 그렇지 않은 경우에는 (1140) 경계 강도 값이 1로 결정된다.
계산된 경계 강도 값은 디블록킹 필터링 수행 과정에서 필터링의 강도 등을 결정할 때 사용된다.
도 12는 에지 경계에서 디블록킹 필터링을 수행하기 위해 경계 강도를 결정하는 다른 예에 따른 알고리즘을 도시한 도면이다.
도 12를 참조하면, 에지 경계를 기준으로 인접하는 두 블록 P와 Q의 부호화 모드, 움직임 정보, 차분 계수 여부 등을 통해 블록 경계 강도를 결정한다.
P와 Q가 모두 화면 내 예측으로 부호화된 경우(1210), 경계 강도는 2로 결정된다. P가 화면 내 예측으로 부호화되고 Q가 화면 간 예측으로 부호화된 경우 또는 그 반대로 P가 화면 간 예측으로 부호화되고 Q가 화면 내 예측으로 부호화 된 경우 (1220)에도 경계 강도는 2로 결정된다.
P와 Q블록이 화면 간 예측으로 부호화되고 두 블록 모드에 0이 아닌 차분 계수가 없고 두 블록의 움직임 벡터가 정수 픽셀 단위에서 일치하는 경우(1230), 경계 강도 값은 0으로 결정된다. P와 Q블록이 화면 간 예측으로 부호화되고 두 블록의 움직임 벡터가 정수 픽셀 단위에서 일치하지 않은 경우(1240), 경계 강도 값이 1로 결정된다.
P 블록이 화면 내 예측, Q블록이 템플릿 매칭 기반의 부호화 모드인 IBC (Intra block copy)로 부호화된 경우 또는 그 반대로 P 블록이 IBC로 Q 블록이 기존의 화면 내 예측으로 부호화된 경우(1250), 블록 경계에서의 경계 강도 값은 2로 결정된다.
P 블록이 화면 간 예측, Q 블록이 IBC로 부호화 된 경우 또는 그 반대로 P 블록이 IBC, Q 블록이 화면 간 예측으로 부호화된 경우(1260), 블록 경계에서의 경계 강도 값은 1로 결정된다.
P 와 Q 블록이 모두 IBC로 부호화되고 두 블록 모두에 0이 아닌 차분 계수가 존재하지 않으며, 두 블록의 블록 벡터가 정수 단위에서 일치하는 경우(1270), 블록 사이의 에지 경계 강도 값은 0으로 결정된다.
P와 Q 블록이 모두 IBC로 부호화되고 두 블록의 블록 벡터가 정수 단위에서 일치하지 않는 경우(1280), 블록 사이의 에지 경계 강도 값은 1로 결정된다.
이처럼 예측 모드, 잔차 신호, 및 블록 벡터에 따라 현재 코딩 유닛과 인접 코딩 유닛 간의 경계 강도가 다르게 결정됨으로써, 보다 효율적인 디블록킹 필터링을 수행할 수 있다.
한편, 이하에서는 영상 복호화 방법에 대해 도 13 내지 도 16을 참조하여 설명하기로 한다. 이를 위하여 이미 상술한 영상 복호화 장치를 활용할 수 있지만, 이에 한정되는 것은 아니다. 다만, 설명의 편의를 위해 영상 복호화 장치를 활용하여 영상을 복호화하는 방법에 대해 설명하기로 한다.
본 발명의 일 실시예에 따른 영상 복호화 방법은 도 13에 도시된 것처럼 다음과 같은 단계로 이루어질 수 있다. 도 13은 본 발명의 일 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
우선, 현재 코딩 유닛의 크기가 템플릿 매칭 기반의 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는지 판단한다(S1310).
상술한 범위 조건을 만족하는 경우, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정한다(S1320).
상술한 범위 조건을 불만족하는 경우, 현재 코딩 유닛에 대하여 비 템플릿 매칭 기반의 예측 복호화가 수행된다(S1330).
또한, 본 발명의 다른 실시예에 따른 영상 복호화 방법은 도 14에 도시된 것처럼 다음과 같은 단계로 이루어질 수 있다. 도 14는 본 발명의 다른 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
우선, 서로 공간적으로 인접하는 복수 개의 코딩 트리 유닛에 대한 영역 플래그 정보를 이용하여 코딩 트리 유닛에 대한 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정한다(S1410).
이어서, 템플릿 매칭 기반의 예측 모드를 수행하는 것으로 결정된 코딩 트리 유닛 내 각각의 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 추가 플래그 정보를 이용하여 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정한다(S1420).
또한, 본 발명의 또 다른 예에 따른 영상 복호화 방법은 도 15에 도시된 것처럼 다음과 같은 단계로 이루어질 수 있다. 도 15는 본 발명의 또 다른 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
우선, 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나가 인트라 부호화된 것이고, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것이고, 현재 코딩 유닛에 대한 블록 벡터와 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일하며, 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는지 판단한다(S1510).
위와 같은 조건들을 만족하는 경우, 스킵 플래그 정보를 이용하여 화면 내 픽쳐 내의 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정한다(S1520).
아울러, 본 발명의 또 다른 예에 따른 영상 복호화 방법은 도 16에 도시된 것처럼 다음과 같은 단계로 이루어질 수 있다. 도 16은 본 발명의 또 다른 실시예에 따른 영상 복호화 방법을 설명하기 위한 순서도이다.
우선, 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정한다(S1610).
이어서, 현재 코딩 유닛의 에지 경계에 대한 디블록킹 필터링을 위한 경계 강도를 결정한다(S1620).
이때, 현재 코딩 유닛, 및 현재 코딩 유닛과 에지 경계를 기준으로 인접한 인접 코딩 유닛 각각에 대한 예측 모드, 잔차 신호, 및 블록 벡터에 따라 현재 코딩 유닛과 인접 코딩 유닛 간의 경계 강도가 다르게 결정될 수 있다.
한편, 도 1, 도 3b, 도 4a, 도 4b, 도 5b, 도 10b, 및 도 10c에서 도시된 각각의 구성요소는 일종의 '모듈'로 구성될 수 있다. 상기 '모듈'은 소프트웨어 또는 Field Programmable Gate Array(FPGA) 또는 주문형 반도체(ASIC, Application Specific Integrated Circuit)과 같은 하드웨어 구성요소를 의미하며, 모듈은 어떤 역할들을 수행한다. 그렇지만 모듈은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. 모듈은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 실행시키도록 구성될 수도 있다. 구성요소들과 모듈들에서 제공되는 기능은 더 작은 수의 구성요소들 및 모듈들로 결합되거나 추가적인 구성요소들과 모듈들로 더 분리될 수 있다.
본 발명의 장치 및 방법은 특정 실시예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.
아울러, 본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
350: 템플릿 코딩 유닛 크기 파라미터 파싱부
360: 템플릿 코딩 유닛 크기 결정부
370: 템플릿 코딩 유닛 플래그 파싱부

Claims (21)

  1. 영상 복호화 장치에 있어서,
    현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함하고,
    상기 플래그 정보는 상기 현재 코딩 유닛의 크기가 상기 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우 이용되는 것인, 영상 복호화 장치.
  2. 제 1 항에 있어서,
    상기 템플릿 매칭 예측부는 상기 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나 내에서 이미 복호화된 영역으로부터 상기 템플릿 매칭 기반의 예측 신호를 생성하는 영상 복호화 장치.
  3. 제 2 항에 있어서,
    상기 템플릿 매칭 예측부는
    상기 이미 복호화된 영역에 대한 필터링을 수행하는 필터 적용부;
    상기 이미 복호화된 영역에 대한 보간을 수행하는 보간 필터링부; 및
    상기 이미 복호화된 영역 내 상기 현재 코딩 유닛과 대응되는 영역의 위치 정보인 블록 벡터를 기초로 상기 템플릿 매칭 기반의 예측 신호를 생성하는 움직임 보상부를 포함하는 영상 복호화 장치.
  4. 제 1 항에 있어서,
    상기 범위 조건에 대한 정보는 상기 현재 코딩 유닛이 포함된 시퀀스를 위한 시퀀스 파라미터 셋, 상기 현재 코딩 유닛이 포함된 픽쳐 그룹 또는 픽쳐를 위한 픽쳐 파라미터 셋, 또는 상기 현재 코딩 유닛이 포함된 슬라이스 또는 슬라이스 세그먼트를 위한 슬라이스 헤더에 포함되는 것인, 영상 복호화 장치.
  5. 제 1 항에 있어서,
    상기 플래그 정보는 상기 현재 코딩 유닛의 크기가 상기 현재 코딩 유닛이 포함된 슬라이스의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우 이용되는 것인, 영상 복호화 장치.
  6. 제 1 항에 있어서,
    상기 현재 코딩 유닛의 크기가 상기 코딩 유닛의 최소 크기와 동일한 경우,
    상기 플래그 정보는 상기 현재 코딩 유닛 내 각각의 예측 유닛이 상기 예측 모드로 부호화된 것인지를 나타내는 것인, 영상 복호화 장치.
  7. 제 6 항에 있어서,
    상기 템플릿 매칭 예측부는 z- 스캔 순서에 따라 상기 각각의 예측 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하고, 상기 현재 코딩 유닛 내에서 예측 유닛 단위로 상기 예측 유닛 중 일부에 대한 예측 신호를 생성하는 영상 복호화 장치.
  8. 제 1 항에 있어서,
    상기 현재 코딩 유닛에 대한 움직임 벡터 및 참조 영상을 기초로 상기 현재 코딩 유닛에 대한 화면간 예측 기반의 예측 신호를 생성하는 화면간 예측부; 및
    상기 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 부호화 정보를 기초로 상기 현재 코딩 유닛에 대한 화면내 예측 기반의 예측 신호를 생성하는 화면내 예측부를 더 포함하고,
    상기 현재 코딩 유닛의 크기가 상기 코딩 유닛의 최소 크기와 동일한 경우,
    상기 현재 코딩 유닛 내 각각의 예측 유닛에 대한 예측 신호는 상기 템플릿 매칭 예측부, 상기 화면간 예측부 및 상기 화면내 예측부 중 적어도 어느 하나에 의해 선택적으로 생성되는 것인, 영상 복호화 장치.
  9. 제 8 항에 있어서,
    상기 화면내 예측부는 상기 코딩 유닛 내에서 상기 템플릿 매칭 예측부에 의해 이미 복호화된 영역을 기초로 상기 화면내 예측 기반의 예측 신호를 생성하는 영상 복호화 장치.
  10. 영상 복호화 장치에 있어서,
    서로 공간적으로 인접하는 복수 개의 코딩 트리 유닛에 대한 영역 플래그 정보를 이용하여 상기 코딩 트리 유닛에 대한 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정하고,
    상기 예측 모드를 수행하는 것으로 결정된 코딩 트리 유닛 내 각각의 코딩 유닛이 상기 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 추가 플래그 정보를 이용하여 상기 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함하는 영상 복호화 장치.
  11. 제 10 항에 있어서,
    상기 템플릿 매칭 예측부는
    상기 각각의 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나 내에서 이미 복호화된 영역으로부터 상기 템플릿 매칭 기반의 예측 신호를 생성하는 영상 복호화 장치.
  12. 제 11 항에 있어서,
    상기 템플릿 매칭 예측부는
    상기 이미 복호화된 영역에 대한 필터링을 수행하는 필터 적용부;
    상기 이미 복호화된 영역에 대한 보간을 수행하는 보간 필터링부; 및
    상기 이미 복호화된 영역 내 상기 각각의 코딩 유닛과 대응되는 영역의 위치 정보인 블록 벡터를 기초로 상기 템플릿 매칭 기반의 예측 신호를 생성하는 움직임 보상부를 포함하는 영상 복호화 장치.
  13. 제 10 항에 있어서,
    상기 템플릿 매칭 예측부는
    상기 코딩 트리 유닛의 행 또는 열 단위로 상기 예측 모드를 수행할 것인지 여부를 결정하는 영상 복호화 장치.
  14. 제 10 항에 있어서,
    상기 템플릿 매칭 예측부는
    상기 소정의 코딩 트리 유닛의 위치에 대한 인덱스 정보 및 상기 소정의 코딩 트리 유닛을 시작점으로 하여 연속으로 위치하는 코딩 트리 유닛의 개수 정보를 기초로 상기 예측 모드를 수행할 것인지 여부를 결정하는 영상 복호화 장치.
  15. 제 10 항에 있어서,
    상기 템플릿 매칭 예측부는
    상기 소정의 코딩 트리 유닛의 위치에 대한 인덱스 정보, 및 상기 소정의 코딩 트리 유닛을 꼭지점으로 갖는 사각형의 가로변과 세로변에 각각 위치하는 코딩 트리 유닛의 개수 정보를 기초로 상기 예측 모드를 수행할 것인지 여부를 결정하는 영상 복호화 장치.
  16. 영상 복호화 장치에 있어서,
    스킵 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 템플릿 매칭 예측부를 포함하고,
    상기 스킵 플래그 정보는 상기 현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나가 인트라 부호화된 것이고,
    상기 현재 코딩 유닛이 상기 템플릿 매칭 기반의 예측 모드로 부호화된 것이고,
    상기 현재 코딩 유닛에 대한 블록 벡터와 상기 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일하며,
    상기 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는 경우 이용되는 것인, 영상 복호화 장치.
  17. 영상 복호화 장치에 있어서,
    현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하고,
    상기 현재 코딩 유닛의 에지 경계에 대한 디블록킹 필터링을 위한 경계 강도를 결정하는 템플릿 매칭 예측부를 포함하고,
    상기 현재 코딩 유닛, 및 상기 현재 코딩 유닛과 상기 에지 경계를 기준으로 인접한 인접 코딩 유닛 각각에 대한 예측 모드, 잔차 신호, 및 블록 벡터에 따라 상기 현재 코딩 유닛과 상기 인접 코딩 유닛 간의 경계 강도가 다르게 결정되는 영상 복호화 장치.
  18. 영상 복호화 방법에 있어서,
    현재 코딩 유닛의 크기가 템플릿 매칭 기반의 예측 모드로 부호화되기 위한 코딩 유닛의 최소 크기 및 최대 크기에 대한 범위 조건을 만족하는 경우,
    상기 현재 코딩 유닛이 상기 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계를 포함하는 영상 복호화 방법.
  19. 영상 복호화 방법에 있어서,
    서로 공간적으로 인접하는 복수 개의 코딩 트리 유닛에 대한 영역 플래그 정보를 이용하여 상기 코딩 트리 유닛에 대한 템플릿 매칭 기반의 예측 모드를 수행할 것인지 여부를 결정하는 단계; 및
    상기 예측 모드를 수행하는 것으로 결정된 코딩 트리 유닛 내 각각의 코딩 유닛이 상기 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 추가 플래그 정보를 이용하여 상기 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계를 포함하는 영상 복호화 방법.
  20. 영상 복호화 방법에 있어서,
    현재 코딩 유닛이 포함된 픽쳐, 슬라이스, 또는 슬라이스 세그먼트 중 어느 하나가 인트라 부호화된 것이고, 상기 현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것이고, 상기 현재 코딩 유닛에 대한 블록 벡터와 상기 현재 코딩 유닛과 공간적으로 인접한 인접 영역에 대한 블록 벡터가 동일하며, 상기 현재 코딩 유닛에 대한 잔차 신호가 존재하지 않는 경우,
    스킵 플래그 정보를 이용하여 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계를 포함하는 영상 복호화 방법.
  21. 영상 복호화 방법에 있어서,
    현재 코딩 유닛이 템플릿 매칭 기반의 예측 모드로 부호화된 것인지를 나타내는 플래그 정보를 이용하여 상기 현재 코딩 유닛에 대한 템플릿 매칭 기반의 예측 신호를 생성할 것인지 여부를 결정하는 단계; 및
    상기 현재 코딩 유닛의 에지 경계에 대한 디블록킹 필터링을 위한 경계 강도를 결정하는 단계를 포함하고,
    상기 현재 코딩 유닛, 및 상기 현재 코딩 유닛과 상기 에지 경계를 기준으로 인접한 인접 코딩 유닛 각각에 대한 예측 모드, 잔차 신호, 및 블록 벡터에 따라 상기 현재 코딩 유닛과 상기 인접 코딩 유닛 간의 경계 강도가 다르게 결정되는 영상 복호화 방법.
KR1020140037577A 2014-03-31 2014-03-31 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치 KR102319384B1 (ko)

Priority Applications (8)

Application Number Priority Date Filing Date Title
KR1020140037577A KR102319384B1 (ko) 2014-03-31 2014-03-31 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
CN201910636821.7A CN110312128B (zh) 2014-03-31 2015-01-19 视频编解码方法和非暂时性计算机可读记录介质
US15/127,465 US20170134726A1 (en) 2014-03-31 2015-01-19 Template-matching-based method and apparatus for encoding and decoding intra picture
CN201580024588.7A CN106464870B (zh) 2014-03-31 2015-01-19 用于对帧内画面进行编码和解码的基于模板匹配的方法和装置
PCT/KR2015/000507 WO2015152507A1 (ko) 2014-03-31 2015-01-19 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020210142731A KR102366528B1 (ko) 2014-03-31 2021-10-25 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020220021234A KR102464786B1 (ko) 2014-03-31 2022-02-18 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020220145153A KR20220154068A (ko) 2014-03-31 2022-11-03 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140037577A KR102319384B1 (ko) 2014-03-31 2014-03-31 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020210142731A Division KR102366528B1 (ko) 2014-03-31 2021-10-25 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150113522A true KR20150113522A (ko) 2015-10-08
KR102319384B1 KR102319384B1 (ko) 2021-10-29

Family

ID=54240787

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020140037577A KR102319384B1 (ko) 2014-03-31 2014-03-31 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020210142731A KR102366528B1 (ko) 2014-03-31 2021-10-25 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020220021234A KR102464786B1 (ko) 2014-03-31 2022-02-18 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020220145153A KR20220154068A (ko) 2014-03-31 2022-11-03 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020210142731A KR102366528B1 (ko) 2014-03-31 2021-10-25 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020220021234A KR102464786B1 (ko) 2014-03-31 2022-02-18 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
KR1020220145153A KR20220154068A (ko) 2014-03-31 2022-11-03 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치

Country Status (4)

Country Link
US (1) US20170134726A1 (ko)
KR (4) KR102319384B1 (ko)
CN (2) CN110312128B (ko)
WO (1) WO2015152507A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018070568A1 (ko) * 2016-10-13 2018-04-19 디지털인사이트주식회사 복호화기 기반의 화면 내 예측 모드 추출 기술을 사용하는 비디오 코딩 방법 및 장치
WO2024019503A1 (ko) * 2022-07-19 2024-01-25 엘지전자 주식회사 템플릿 매칭 핸들링을 위한 영상 부호화/복호화 방법, 비트스트림을 전송하는 방법 및 비트스트림을 저장한 기록 매체

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180006411A (ko) * 2015-06-07 2018-01-17 엘지전자 주식회사 디블록킹 필터링을 수행하는 방법 및 장치
WO2018021585A1 (ko) * 2016-07-26 2018-02-01 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측 방법 및 장치
WO2018119609A1 (zh) * 2016-12-26 2018-07-05 华为技术有限公司 一种基于模板匹配的编解码方法及装置
CN112106367B (zh) * 2018-03-30 2023-05-30 Vid拓展公司 基于编码和解码时延减少的基于模板的帧间预测技术
US10448026B1 (en) * 2018-07-09 2019-10-15 Tencent America LLC Method and apparatus for block vector signaling and derivation in intra picture block compensation
CN109561316A (zh) * 2018-10-26 2019-04-02 西安科锐盛创新科技有限公司 一种vr三维图像压缩方法
KR20230164752A (ko) * 2019-01-02 2023-12-04 엘지전자 주식회사 디블록킹 필터링을 사용하는 영상 코딩 방법 및 장치
US11109041B2 (en) * 2019-05-16 2021-08-31 Tencent America LLC Method and apparatus for video coding
CN110446045B (zh) * 2019-07-09 2021-07-06 中移（杭州）信息技术有限公司 视频编码方法、装置、网络设备及存储介质
CN114424533A (zh) * 2019-09-27 2022-04-29 Oppo广东移动通信有限公司 预测值的确定方法、解码器以及计算机存储介质
US11477450B2 (en) * 2019-12-20 2022-10-18 Zte (Uk) Limited Indication of video slice height in video subpictures
CN114339236B (zh) * 2020-12-04 2022-12-23 杭州海康威视数字技术股份有限公司 预测模式解码方法、电子设备及机器可读存储介质
CN117426096A (zh) * 2021-05-13 2024-01-19 抖音视界有限公司 用于视频处理的方法、设备和介质
US20230075788A1 (en) * 2021-09-01 2023-03-09 Tencent America LLC Template matching on ibc merge candidates
WO2024010377A1 (ko) * 2022-07-05 2024-01-11 한국전자통신연구원 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체
CN115002463B (zh) * 2022-07-15 2023-01-13 深圳传音控股股份有限公司 图像处理方法、智能终端及存储介质
WO2024075983A1 (ko) * 2022-10-04 2024-04-11 현대자동차주식회사 복수의 블록들 기반 인트라 템플릿 매칭 예측을 이용하는 비디오 코딩을 위한 방법 및 장치
WO2024083251A1 (en) * 2022-10-21 2024-04-25 Mediatek Inc. Method and apparatus of region-based intra prediction using template-based or decoder side intra mode derivation in video coding system

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100132973A (ko) * 2008-04-11 2010-12-20 톰슨 라이센싱 변위된 인트라 예측과 템플릿 매칭을 위한 디블록 필터링

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8214741B2 (en) * 2002-03-19 2012-07-03 Sharp Laboratories Of America, Inc. Synchronization of video and data
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
KR100678958B1 (ko) * 2005-07-29 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
KR101836981B1 (ko) * 2010-07-09 2018-03-09 한국전자통신연구원 템플릿 매칭을 이용한 영상 부호화 방법 및 장치, 그리고 복호화 방법 및 장치
US9838692B2 (en) * 2011-10-18 2017-12-05 Qualcomm Incorporated Detecting availabilities of neighboring video units for video coding
HUE040422T2 (hu) * 2011-10-31 2019-03-28 Hfi Innovation Inc Eljárás készülék egyszerûsített határerõsség-meghatározással mûködõ deblokkoló szûrõhöz
US9503715B2 (en) * 2013-08-30 2016-11-22 Qualcomm Incorporated Constrained intra prediction in video coding
WO2015053594A1 (ko) * 2013-10-12 2015-04-16 삼성전자 주식회사 인트라 블록 복사 예측을 이용한 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
US11109036B2 (en) * 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
MX2016004705A (es) * 2013-10-14 2016-07-18 Microsoft Technology Licensing Llc Caracteristicas del modo de prediccion copia de bloque interno para codificacion y decodificacion de imagen y video.
CA3050482C (en) * 2013-11-14 2021-02-16 Hfi Innovation Inc. Method of video coding using prediction based on intra picture block copy
US9554141B2 (en) * 2013-11-18 2017-01-24 Arris Enterprises, Inc. Intra block copy for intra slices in high efficiency video coding (HEVC)
US10291827B2 (en) * 2013-11-22 2019-05-14 Futurewei Technologies, Inc. Advanced screen content coding solution
WO2015078304A1 (en) * 2013-11-27 2015-06-04 Mediatek Singapore Pte. Ltd. Method of video coding using prediction based on intra picture block copy
US9883197B2 (en) * 2014-01-09 2018-01-30 Qualcomm Incorporated Intra prediction of chroma blocks using the same vector
US20150271515A1 (en) * 2014-01-10 2015-09-24 Qualcomm Incorporated Block vector coding for intra block copy in video coding
JP2017512026A (ja) * 2014-03-04 2017-04-27 マイクロソフト テクノロジー ライセンシング，エルエルシー イントラブロックコピー予測におけるブロック反転及びスキップモード
WO2015131326A1 (en) * 2014-03-04 2015-09-11 Microsoft Technology Licensing, Llc Encoder-side decisions for block flipping and skip mode in intra block copy prediction
WO2015139165A1 (en) * 2014-03-17 2015-09-24 Microsoft Technology Licensing, Llc Encoder-side decisions for screen content encoding
US9756354B2 (en) * 2014-03-17 2017-09-05 Qualcomm Incorporated Block vector predictor for intra block copying

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100132973A (ko) * 2008-04-11 2010-12-20 톰슨 라이센싱 변위된 인트라 예측과 템플릿 매칭을 위한 디블록 필터링

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018070568A1 (ko) * 2016-10-13 2018-04-19 디지털인사이트주식회사 복호화기 기반의 화면 내 예측 모드 추출 기술을 사용하는 비디오 코딩 방법 및 장치
WO2024019503A1 (ko) * 2022-07-19 2024-01-25 엘지전자 주식회사 템플릿 매칭 핸들링을 위한 영상 부호화/복호화 방법, 비트스트림을 전송하는 방법 및 비트스트림을 저장한 기록 매체

Also Published As

Publication number Publication date
CN106464870B (zh) 2019-08-09
KR102464786B1 (ko) 2022-11-08
KR102319384B1 (ko) 2021-10-29
WO2015152507A1 (ko) 2015-10-08
KR20210132631A (ko) 2021-11-04
KR102366528B1 (ko) 2022-02-25
CN110312128B (zh) 2022-11-22
KR20220026567A (ko) 2022-03-04
CN110312128A (zh) 2019-10-08
KR20220154068A (ko) 2022-11-21
CN106464870A (zh) 2017-02-22
US20170134726A1 (en) 2017-05-11

Similar Documents

Publication Publication Date Title
KR102366528B1 (ko) 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
US10419755B2 (en) Confusion of multiple filters in adaptive loop filtering in video coding
CN114556924B (zh) 视频处理中色度残差的联合编解码与滤波的方法、装置及介质
US11805268B2 (en) Two step cross-component prediction mode
WO2021073631A1 (en) Interplay between subpictures and in-loop filtering
TW201711461A (zh) 片級內部區塊複製及其他視訊寫碼改善
CN114902657A (zh) 视频编解码中的自适应颜色变换
CN114402601A (zh) 色度去块滤波的量化参数偏移
WO2021110116A1 (en) Prediction from multiple cross-components
CN113853791A (zh) 数字视频中的变换旁路编解码残差块
CN115211108A (zh) 环路滤波和视频片之间的相互作用
CN117544777A (zh) 用于视频编解码的跨分量自适应环路滤波
KR20220061969A (ko) 팔레트 모드에 대한 양자화 파라미터 도출
CN110771166B (zh) 帧内预测装置和方法、编码、解码装置、存储介质
WO2021219143A1 (en) Entropy coding for motion precision syntax
CN114503597B (zh) 视频编解码中的色度去方块方法
WO2022194197A1 (en) Separate Tree Coding Restrictions
US20230020259A1 (en) Intra Block Copy Buffer And Palette Predictor Update
CN115088192A (zh) 视频数据的基于字典的编解码

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
A107 Divisional application of patent
GRNT Written decision to grant