KR102616815B1 - 인트라 예측 방법 및 장치 - Google Patents

인트라 예측 방법 및 장치 Download PDF

Info

Publication number
KR102616815B1
KR102616815B1 KR1020237008798A KR20237008798A KR102616815B1 KR 102616815 B1 KR102616815 B1 KR 102616815B1 KR 1020237008798 A KR1020237008798 A KR 1020237008798A KR 20237008798 A KR20237008798 A KR 20237008798A KR 102616815 B1 KR102616815 B1 KR 102616815B1
Authority
KR
South Korea
Prior art keywords
mode
block
mpm candidate
intra prediction
mpm
Prior art date
Application number
KR1020237008798A
Other languages
English (en)
Other versions
KR20230040384A (ko
Inventor
박준영
전병문
박승욱
임재현
전용준
김정선
박내리
헨드리헨드리
김철근
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20230040384A publication Critical patent/KR20230040384A/ko
Application granted granted Critical
Publication of KR102616815B1 publication Critical patent/KR102616815B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Abstract

본 발명에 따른 영상 복호화 방법은, 현재 블록의 인트라 예측 모드로 사용될 MPM 후보를 지시하는 MPM 인덱스 정보를 수신하여 복호화하는 단계, 현재 블록에 대해 복수의 MPM 후보로 구성된 MPM 후보 리스트를 생성하는 단계, MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 복호화된 MPM 인덱스 정보가 지시하는 MPM 후보를 현재 블록의 인트라 예측 모드로 결정하는 단계 및 결정된 인트라 예측 모드를 기반으로 현재 블록에 대해 인트라 예측을 수행함으로써 현재 블록에 대응되는 예측 블록을 생성하는 단계를 포함한다.

Description

인트라 예측 방법 및 장치{METHOD AND DEVICE FOR INTRA PREDICTION}
본 발명은 영상 처리에 관한 것으로서, 보다 상세하게는 인트라 예측 방법 및 장치에 관한 것이다.
최근 HD(High Definition) 영상 및 UHD(Ultra High Definition) 영상과 같은 고해상도, 고품질의 영상에 대한 수요가 다양한 분야에서 증가하고 있다. 영상 데이터가 고해상도, 고품질이 될수록 기존의 영상 데이터에 비해 상대적으로 전송되는 정보량 또는 비트량이 증가하기 때문에 기존의 유무선 광대역 회선과 같은 매체를 이용하여 영상 데이터를 전송하거나 기존의 저장 매체를 이용해 영상 데이터를 저장하는 경우, 전송 비용과 저장 비용이 증가된다. 이러한 문제들을 해결하기 위해서 고효율의 영상 압축 기술들이 이용될 수 있다.
영상 압축 기술에는 현재 픽쳐의 이전 및/또는 이후 픽쳐로부터 현재 픽쳐에 포함된 픽셀값을 예측하는 인터 예측(inter prediction) 기술, 현재 픽쳐 내의 픽셀 정보를 이용하여 현재 픽쳐에 포함된 픽셀값을 예측하는 인트라 예측(intra prediction) 기술, 출현 빈도가 높은 값에 짧은 코드워드를 할당하고 출현 빈도가 낮은 값에 긴 코드워드를 할당하는 엔트로피 부호화 기술 등 다양한 기술이 존재한다. 이러한 영상 압축 기술을 이용해 영상 데이터가 효과적으로 압축되어 전송 또는 저장될 수 있다.
본 발명의 기술적 과제는 영상 부호화/복호화 효율을 향상시키고 복잡도를 감소시킬 수 있는 영상 부호화 방법 및 장치를 제공함에 있다.
본 발명의 다른 기술적 과제는 영상 부호화/복호화 효율을 향상시키고 복잡도를 감소시킬 수 있는 영상 복호화 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 영상 부호화/복호화 효율을 향상시키고 복잡도를 감소시킬 수 있는 인트라 예측 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 영상 부호화/복호화 효율을 향상시키고 복잡도를 감소시킬 수 있는 영상 정보 전송 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 영상 부호화/복호화 효율을 향상시키고 복잡도를 감소시킬 수 있는 MPM 후보 리스트 생성 방법 및 장치를 제공함에 있다.
본 발명의 일 실시 형태는 영상 복호화 방법이다. 상기 방법은, 현재 블록의 인트라 예측 모드(intra prediction mode)로 사용될 MPM(Most Probable Mode) 후보를 지시하는 MPM 인덱스(MPM index) 정보를 수신하여 복호화하는 단계, 상기 현재 블록에 대해, 복수의 MPM 후보로 구성된 MPM 후보 리스트(MPM candidate list)를 생성하는 단계, 상기 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 상기 복호화된 MPM 인덱스 정보가 지시하는 MPM 후보를 상기 현재 블록의 인트라 예측 모드로 결정하는 단계 및 상기 결정된 인트라 예측 모드를 기반으로 상기 현재 블록에 대해 인트라 예측을 수행함으로써, 상기 현재 블록에 대응되는 예측 블록을 생성하는 단계를 포함할 수 있다. 이 때, 상기 MPM 후보 리스트 생성 단계에서는, 상기 현재 블록의 좌측에 인접한 복원된 제1 블록에 대응하는 제1 MPM 후보 및 상기 현재 블록의 상단에 인접한 복원된 제2 블록에 대응하는 제2 MPM 후보를 결정하고, 상기 제1 MPM 후보 및 상기 제2 MPM 후보 중에서 적어도 하나를 상기 MPM 후보 리스트 내의 소정의 고정된 위치에 할당할 수 있다.
상기 MPM 후보 리스트 생성 단계에서는, 상기 제1 MPM 후보를 상기 제1 블록의 인트라 예측 모드로 결정할 수 있고 상기 제2 MPM 후보를 상기 제2 블록의 인트라 예측 모드로 결정할 수 있다.
상기 MPM 후보 리스트 생성 단계에서는, 상기 제1 블록이 가용하지 않은(unavailable) 경우 상기 제1 MPM 후보를 DC 모드로 결정할 수 있고, 상기 제2 블록이 가용하지 않은 경우 상기 제2 MPM 후보를 DC 모드로 결정할 수 있다.
상기 MPM 후보 리스트 생성 단계에서는, 상기 제1 MPM 후보와 상기 제2 MPM 후보가 서로 동일하지 않으면, 상기 제1 MPM 후보를 상기 MPM 후보 리스트 내의 1번째 위치에 할당할 수 있고, 상기 제2 MPM 후보를 상기 MPM 후보 리스트 내의 2번째 위치에 할당할 수 있다.
상기 MPM 후보 리스트 내의 1번째 위치에 할당되는 제1 MPM 후보에는 0의 인덱스 값이 할당될 수 있고, 상기 MPM 후보 리스트 내의 2번째 위치에 할당되는 제2 MPM 후보에는 1의 인덱스 값이 할당될 수 있다.
상기 MPM 후보 리스트는 3개의 MPM 후보로 구성될 수 있다.
상기 MPM 후보 리스트 생성 단계에서는, 상기 제1 MPM 후보 및 상기 제2 MPM 후보가 모두 플래너(Planar) 모드가 아니면 플래너 모드를 상기 MPM 후보 리스트 내의 3번째 위치에 제3 MPM 후보로서 할당할 수 있고, 상기 제1 상기 제1 MPM 후보 및 상기 제2 MPM 후보 중에서 하나가 플래너 모드인 경우, 제1 MPM 후보 및 상기 제2 MPM 후보가 모두 DC 모드가 아니면 DC 모드를 상기 MPM 후보 리스트 내의 3번째 위치에 제3 MPM 후보로서 할당할 수 있으며, 상기 제1 상기 제1 MPM 후보 및 상기 제2 MPM 후보 중에서 하나가 플래너 모드이고 다른 하나가 DC 모드이면 수직(vertical) 모드를 상기 MPM 후보 리스트 내의 3번째 위치에 제3 MPM 후보로서 할당할 수 있다.
상기 MPM 후보 리스트 내의 3번째 위치에 할당되는 제3 MPM 후보에는 2의 인덱스 값이 할당될 수 있다.
본 발명의 다른 실시 형태는 영상 복호화 장치이다. 상기 장치는, 현재 블록의 인트라 예측 모드(intra prediction mode)로 사용될 MPM(Most Probable Mode) 후보를 지시하는 MPM 인덱스(MPM index) 정보를 수신하여 복호화하는 엔트로피 복호화부, 상기 현재 블록에 대해 복수의 MPM 후보로 구성된 MPM 후보 리스트(MPM candidate list)를 생성하고, 상기 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 상기 복호화된 MPM 인덱스 정보가 지시하는 MPM 후보를 상기 현재 블록의 인트라 예측 모드로 결정하는 인트라 예측 모드 결정부 및 상기 결정된 인트라 예측 모드를 기반으로 상기 현재 블록에 대해 인트라 예측 수행함으로써, 상기 현재 블록에 대응되는 예측 블록을 생성하는 예측 블록 생성부를 포함할 수 있다. 이 때, 상기 인트라 예측 모드 결정부는, 상기 현재 블록의 좌측에 인접한 복원된 제1 블록에 대응하는 제1 MPM 후보 및 상기 현재 블록의 상단에 인접한 복원된 제2 블록에 대응하는 제2 MPM 후보를 결정하고, 상기 제1 MPM 후보 및 상기 제2 MPM 후보 중에서 적어도 하나를 상기 MPM 후보 리스트 내의 소정의 고정된 위치에 할당할 수 있다.
상기 인트라 예측 모드 결정부는, 상기 제1 MPM 후보를 상기 제1 블록의 인트라 예측 모드로 결정할 수 있고 상기 제2 MPM 후보를 상기 제2 블록의 인트라 예측 모드로 결정할 수 있다.
상기 인트라 예측 모드 결정부는, 상기 제1 블록이 가용하지 않은(unavailable) 경우 상기 제1 MPM 후보를 DC 모드로 결정할 수 있고, 상기 제2 블록이 가용하지 않은 경우 상기 제2 MPM 후보를 DC 모드로 결정할 수 있다.
상기 인트라 예측 모드 결정부는, 상기 제1 MPM 후보와 상기 제2 MPM 후보가 서로 동일하지 않으면, 상기 제1 MPM 후보를 상기 MPM 후보 리스트 내의 1번째 위치에 할당할 수 있고, 상기 제2 MPM 후보를 상기 MPM 후보 리스트 내의 2번째 위치에 할당할 수 있다.
상기 MPM 후보 리스트 내의 1번째 위치에 할당되는 제1 MPM 후보에는 0의 인덱스 값이 할당될 수 있고, 상기 MPM 후보 리스트 내의 2번째 위치에 할당되는 제2 MPM 후보에는 1의 인덱스 값이 할당될 수 있다.
상기 MPM 후보 리스트는 3개의 MPM 후보로 구성될 수 있다.
상기 인트라 예측 모드 결정부는, 상기 제1 MPM 후보 및 상기 제2 MPM 후보가 모두 플래너(Planar) 모드가 아니면 플래너 모드를 상기 MPM 후보 리스트 내의 3번째 위치에 제3 MPM 후보로서 할당할 수 있고, 상기 제1 상기 제1 MPM 후보 및 상기 제2 MPM 후보 중에서 하나가 플래너 모드인 경우, 제1 MPM 후보 및 상기 제2 MPM 후보가 모두 DC 모드가 아니면 DC 모드를 상기 MPM 후보 리스트 내의 3번째 위치에 제3 MPM 후보로서 할당할 수 있으며, 상기 제1 상기 제1 MPM 후보 및 상기 제2 MPM 후보 중에서 하나가 플래너 모드이고 다른 하나가 DC 모드이면 수직(vertical) 모드를 상기 MPM 후보 리스트 내의 3번째 위치에 제3 MPM 후보로서 할당할 수 있다.
상기 MPM 후보 리스트 내의 3번째 위치에 할당되는 제3 MPM 후보에는 2의 인덱스 값이 할당될 수 있다.
본 발명에 따른 영상 부호화 방법에 의하면, 영상 부호화/복호화 효율이 향상되고 복잡도가 감소될 수 있다.
본 발명에 따른 영상 복호화 방법에 의하면, 영상 부호화/복호화 효율이 향상되고 복잡도가 감소될 수 있다.
본 발명에 따른 인트라 예측 방법에 의하면, 영상 부호화/복호화 효율이 향상되고 복잡도가 감소될 수 있다.
본 발명에 따른 영상 정보 전송 방법에 의하면, 영상 부호화/복호화 효율이 향상되고 복잡도가 감소될 수 있다.
본 발명에 따른 MPM 후보 리스트 생성 방법에 의하면, 영상 부호화/복호화 효율이 향상되고 복잡도가 감소될 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상 부호화 장치를 개략적으로 도시한 블록도이다.
도 2는 본 발명의 일 실시예에 따른 영상 복호화 장치를 개략적으로 나타낸 블록도이다.
도 3은 본 발명이 적용되는 시스템에서 처리 유닛의 쿼드 트리 구조에 관한 일 예를 개략적으로 나타내는 도면이다.
도 4는 인트라 예측을 위해 사용되는 인트라 예측 모드의 예측 방향 및 각각의 예측 방향에 할당되는 예측 모드 번호의 실시예를 개략적으로 나타내는 도면이다.
도 5는 본 발명에 따른 인트라 예측 모드 정보 전송 방법의 일 실시예를 개략적으로 나타내는 흐름도이다.
도 6은 본 발명에 따른 인트라 예측 방법의 일 실시예를 개략적으로 나타내는 흐름도이다.
도 7은 MPM 후보를 결정하고 MPM 후보 리스트를 생성하는 과정의 실시예를 설명하기 위한 도면이다.
도 8은 본 발명에 따라 인트라 예측 모드 정보를 전송하는 부호화 장치의 일 실시예를 개략적으로 나타내는 블록도이다.
도 9는 본 발명에 따라 인트라 예측을 수행하는 복호화 장치의 일 실시예를 개략적으로 나타내는 블록도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니다. 본 명세서에서 사용하는 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명의 기술적 사상을 한정하려는 의도로 사용되는 것은 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
한편, 본 발명에서 설명되는 도면상의 각 구성들은 영상 부호화 장치/복호화 장치에서 서로 다른 특징적인 기능들에 관한 설명의 편의를 위해 독립적으로 도시된 것으로서, 각 구성들이 서로 별개의 하드웨어나 별개의 소프트웨어로 구현된다는 것을 의미하지는 않는다. 예컨대, 각 구성 중 두 개 이상의 구성이 합쳐져 하나의 구성을 이룰 수도 있고, 하나의 구성이 복수의 구성으로 나뉘어질 수도 있다. 각 구성이 통합 및/또는 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리범위에 포함된다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성 요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성 요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일 실시예에 따른 영상 부호화 장치를 개략적으로 도시한 블록도이다. 도 1을 참조하면, 영상 부호화 장치(100)는 픽쳐 분할부(105), 예측부(110), 변환부(115), 양자화부(120), 재정렬부(125), 엔트로피 부호화부(130), 역양자화부(135), 역변환부(140), 필터부(145) 및 메모리(150)를 구비한다.
픽쳐 분할부(105)는 입력된 픽쳐를 적어도 하나의 처리 단위 블록으로 분할할 수 있다. 이때, 처리 단위로서의 블록은 예측 유닛(Prediction Unit, 이하 'PU'라 함)일 수도 있고, 변환 유닛(Transform Unit, 이하 'TU'라 함)일 수도 있으며, 코딩 유닛(Coding Unit, 이하 'CU'라 함)일 수도 있다.
예측부(110)는 인터 예측을 수행하는 인터 예측부와 인트라 예측을 수행하는 인트라 예측부를 포함할 수 있다. 예측부(110)는, 픽쳐 분할부(105)에서 픽쳐의 처리 단위에 대하여 예측을 수행하여 예측 블록을 생성할 수 있다. 예측부(110)에서 픽쳐의 처리 단위는 CU일 수도 있고, TU일 수도 있고, PU일 수도 있다. 또한, 예측부(110)는 해당 처리 단위에 대하여 실시되는 예측이 인터 예측인지 인트라 예측인지를 결정하고, 각 예측 방법의 구체적인 내용(예컨대, 예측 모드 등)을 정할 수 있다. 이때, 예측이 수행되는 처리 단위와 예측 방법 및 예측 방법의 구체적인 내용이 정해지는 처리 단위는 다를 수 있다. 예컨대, 예측의 방법과 예측 모드 등은 CU 또는 PU 단위로 결정되고, 예측의 수행은 TU 단위로 수행될 수도 있다.
인터 예측을 통해서는 현재 픽쳐의 이전 픽쳐 및/또는 이후 픽쳐 중 적어도 하나의 픽쳐의 정보를 기초로 예측을 수행하여 예측 블록을 생성할 수 있다. 또한, 인트라 예측을 통해서는 현재 픽쳐 내의 픽셀 정보를 기초로 예측을 수행하여 예측 블록을 생성할 수 있다.
인터 예측의 방법으로서, 스킵(skip) 모드, 머지(merge) 모드, MVP(Motion Vector Prediction) 등이 이용될 수 있다. 인터 예측에서는 PU에 대하여, 참조 픽쳐가 선택되고 PU와 동일한 크기의 참조 블록이 선택될 수 있다. 참조 블록은 정수 픽셀 단위로 선택될 수 있다. 이어서, 현재 PU와의 잔차(residual) 신호가 최소화되며 움직임 벡터 크기 역시 최소가 되는 예측 블록이 생성될 수 있다.
예측 블록은 정수 샘플 단위로 생성될 수도 있고, 1/2 픽셀 단위 또는 1/4 픽셀 단위와 같이 정수 이하 픽셀 단위로 생성될 수도 있다. 이 때, 움직임 벡터 역시 정수 픽셀 이하의 단위로 표현될 수 있다. 예컨대 루마(luma) 샘플에 대해서는 1/4 픽셀 단위로, 크로마(chroma) 샘플에 대해서는 1/8 픽셀 단위로 표현될 수 있다.
인터 예측을 통해 선택된 참조 픽쳐의 인덱스, 움직임 벡터(ex. Motion Vector Predictor), 잔차 신호 등의 정보는 엔트로피 부호화되어 복호화 장치에 전달될 수 있다. 스킵 모드가 적용되는 경우에는 예측 블록이 복원 블록으로 사용될 수 있으므로, 잔차 신호가 생성, 변환, 양자화, 전송되지 않을 수 있다.
인트라 예측이 수행되는 경우에는, PU 단위로 예측 모드가 정해져서 PU 단위로 예측이 수행될 수 있다. 또한, PU 단위로 예측 모드가 정해지고 TU 단위로 인트라 예측이 수행될 수도 있다.
인트라 예측에서 예측부(110)는 PU에 대해 인트라 예측 모드를 결정하고 결정된 인트라 예측 모드를 기반으로 예측을 수행할 수 있다. 인트라 예측 모드는 33개의 방향성 예측 모드와 적어도 2개 이상의 비방향성 모드를 가질 수 있다. 비향성성 모드는 DC 예측 모드 및 플래너 모드(Planar 모드)을 포함할 수 있다.
인트라 예측에서는 참조 샘플에 필터가 적용된 후 예측 블록이 생성될 수 있다. 이때, 참조 샘플에 필터를 적용할 것인지는 현재 블록의 인트라 예측 모드 및/또는 사이즈에 따라 결정될 수 있다.
인트라 예측을 통해 선택된 인트라 예측 모드에 관한 정보는 엔트로피 부호화되어 복호화 장치에 전달될 수 있다.
PU는 다양한 사이즈/형태의 블록일 수 있으며, 예컨대 인터 예측의 경우에 PU는 2N×2N 블록, 2N×N 블록, N×2N 블록, 또는 N×N 블록 (N은 정수) 등일 수 있다. 인트라 예측의 경우에 PU는 2N×2N 블록 또는 N×N 블록 (N은 정수) 등일 수 있다. 이 때, N×N 블록 크기의 PU는 특정한 경우에만 적용하도록 설정될 수 있다. 예컨대 최소 크기 CU에 대해서만 NxN 블록 크기의 PU가 이용되도록 정해지거나 인트라 예측에 대해서만 이용되도록 정해질 수도 있다. 또한, 상술한 크기의 PU 외에, N×mN 블록, mN×N 블록, 2N×mN 블록 또는 mN×2N 블록 (m＜1) 등의 PU가 더 정의되어 사용될 수도 있다.
생성된 예측 블록과 원본 블록 사이의 잔차 값(잔차 블록 또는 잔차 신호)은 변환부(115)로 입력될 수 있다. 또한, 예측을 위해 사용한 예측 모드 정보, 움직임 벡터 정보 등은 잔차 값과 함께 엔트로피 부호화부(130)에서 부호화되어 복호화 장치에 전달될 수 있다.
변환부(115)는 변환 단위로 잔차 블록에 대한 변환을 수행하고 변환 계수를 생성할 수 있다. 변환부(115)에서의 변환 단위는 TU일 수 있으며, 쿼드 트리(quad tree) 구조를 가질 수 있다. 이 때, 변환 단위의 크기는 소정의 최대 및 최소 크기의 범위 내에서 정해질 수 있다. 변환부(115)는 잔차 블록을 DCT(Discrete Cosine Transform) 및/또는 DST(Discrete Sine Transform)를 이용하여 변환할 수 있다.
양자화부(120)는 변환부(115)에서 변환된 잔차 값들을 양자화하여 양자화 계수를 생성할 수 있다. 양자화부(120)에서 산출된 값은 역양자화부(135)와 재정렬부(125)에 제공될 수 있다.
재정렬부(125)는 양자화부(120)로부터 제공된 양자화 계수를 재정렬할 수 있다. 양자화 계수를 재정렬함으로써 엔트로피 부호화부(130)에서의 부호화 효율이 향상될 수 있다. 재정렬부(125)는 계수 스캐닝(Coefficient Scanning) 방법을 통해 2차원 블록 형태의 양자화 계수들을 1차원의 벡터 형태로 재정렬할 수 있다. 재정렬부(125)는 양자화부에서 전송된 계수들의 확률적인 통계를 기반으로 계수 스캐닝의 순서를 변경함으로써 엔트로피 부호화부(130)에서의 엔트로피 부호화 효율을 높일 수도 있다.
엔트로피 부호화부(130)는 재정렬부(125)에 의해 재정렬된 양자화 계수들에 대한 엔트로피 부호화를 수행할 수 있다. 엔트로피 부호화에는 예를 들어, 지수 골룸(Exponential Golomb), CAVLC(Context-Adaptive Variable Length Coding), CABAC(Context-Adaptive Binary Arithmetic Coding) 등과 같은 부호화 방법이 사용될 수 있다. 엔트로피 부호화부(130)는 재정렬부(125) 및 예측부(110)로부터 전달받은 CU의 양자화 계수 정보 및 블록 타입 정보, 예측 모드 정보, 분할 단위 정보, PU 정보 및 전송 단위 정보, 움직임 벡터 정보, 참조 픽쳐 정보, 블록의 보간 정보, 필터링 정보 등 다양한 정보를 부호화할 수 있다.
또한, 엔트로피 부호화부(130)는 필요한 경우에, 전송하는 파라미터 셋(parameter set) 또는 신택스에 일정한 변경을 가할 수도 있다.
엔트로피 부호화가 적용되는 경우, 높은 발생 확률을 갖는 심볼(symbol)에 낮은 값의 인덱스(index) 및 이에 대응하는 짧은 코드워드(codeword)가 할당되고, 낮은 발생 확률을 갖는 심볼에 높은 값의 인덱스 및 이에 대응하는 긴 코드워드가 할당될 수 있다. 따라서 부호화 대상 심볼들에 대한 비트량이 감소될 수 있고, 엔트로피 부호화에 의해 영상 압축 성능이 향상될 수 있다.
역양자화부(135)는 양자화부(120)에서 양자화된 값들을 역양자화하고, 역변환부(140)는 역양자화부(135)에서 역양자화된 값들을 역변환할 수 있다. 역양자화부(135) 및 역변환부(140)에서 생성된 잔차 값과 예측부(110)에서 예측된 예측 블록이 합쳐져 복원 블록(Reconstructed Block)이 생성될 수 있다.
도 1에서는 가산기를 통해서, 잔차 블록과 예측 블록이 합쳐져 복원 블록이 생성되는 것으로 설명하고 있다. 이때, 가산기를 복원 블록을 생성하는 별도의 유닛(복원 블록 생성부)으로 볼 수도 있다.
필터부(145)는 디블록킹 필터, SAO(Sample Adaptive Offset) 및/또는 ALF(Adaptive Loop Filter)를 복원된 픽쳐에 적용할 수 있다.
디블록킹 필터는 복원된 픽쳐에서 블록 간의 경계에 생긴 왜곡을 제거할 수 있다. SAO는 디블록킹 필터가 적용된 잔차 블록에 대하여, 픽셀 단위로 원본 영상과의 오프셋 차이를 복원하며, 밴드 오프셋(Band Offset), 에지 오프셋(Edge Offset) 등의 형태로 적용될 수 있다. ALF(Adaptive Loop Filter)는 디블록킹 필터 및/또는 SAO를 통해 블록이 필터링된 후 복원된 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. ALF는 고효율을 적용하는 경우에만 수행될 수도 있다.
한편, 인트라 예측에 사용되는 복원 블록에 대해서 필터부(145)는 필터링을 적용하지 않을 수도 있다.
메모리(150)는 필터부(145)를 통해 산출된 복원 블록 또는 픽쳐를 저장할 수 있다. 메모리(150)에 저장된 복원 블록 또는 픽쳐는 인터 예측을 수행하는 예측부(110)에 제공될 수 있다.
도 2는 본 발명의 일 실시예에 따른 영상 복호화 장치를 개략적으로 나타낸 블록도이다. 도 2를 참조하면, 영상 복호화 장치(200)는 엔트로피 복호화부(210), 재정렬부(215), 역양자화부(220), 역변환부(225), 예측부(230), 필터부(235) 및 메모리(240)를 포함할 수 있다.
영상 부호화 장치로부터 영상 비트스트림이 입력된 경우, 입력된 비트스트림은 영상 부호화 장치에서 영상 정보가 처리된 절차에 따라서 복호화될 수 있다.
예컨대, 영상 부호화 장치에서 엔트로피 부호화를 수행하기 위해 CAVLC 등의 가변 길이 부호화(Variable Length Coding: VLC, 이하 'VLC' 라 함)가 사용된 경우에, 엔트로피 복호화부(210)도 부호화 장치에서 사용한 VLC 테이블과 동일한 VLC 테이블로 구현하여 엔트로피 복호화를 수행할 수 있다. 또한, 영상 부호화 장치에서 엔트로피 부호화를 수행하기 위해 CABAC을 이용한 경우에, 엔트로피 복호화부(210)는 이에 대응하여 CABAC을 이용한 엔트로피 복호화를 수행할 수 있다.
엔트로피 복호화부(210)에서 복호화된 정보 중 예측 블록을 생성하기 위한 정보는 예측부(230)로 제공될 수 있고, 엔트로피 복호화부(210)에서 엔트로피 복호화가 수행된 잔차 값은 재정렬부(215)로 입력될 수 있다.
재정렬부(215)는 엔트로피 복호화부(210)에서 엔트로피 복호화된 비트스트림을 영상 부호화 장치에서 재정렬한 방법을 기초로 재정렬할 수 있다. 재정렬부(215)는 1차원 벡터 형태로 표현된 계수들을 다시 2차원의 블록 형태의 계수로 복원하여 재정렬할 수 있다. 재정렬부(215)는 부호화 장치에서 수행된 계수 스캐닝에 관련된 정보를 제공받고 부호화 장치에서 수행된 스캐닝 순서에 기초하여 역으로 스캐닝하는 방법을 통해 재정렬을 수행할 수 있다.
역양자화부(220)는 부호화 장치에서 제공된 양자화 파라미터와 재정렬된 블록의 계수값을 기초로 역양자화를 수행할 수 있다.
역변환부(225)는 영상 부호화 장치에서 수행된 양자화 결과에 대해, 부호화 장치의 변환부가 수행한 DCT 및 DST에 대해 역DCT 및/또는 역DST를 수행할 수 있다. 역변환은 부호화 장치에서 결정된 전송 단위 또는 영상의 분할 단위를 기초로 수행될 수 있다. 부호화 장치의 변환부에서 DCT 및/또는 DST는 예측 방법, 현재 블록의 크기 및/또는 예측 방향 등 복수의 정보에 따라 선택적으로 수행될 수 있고, 복호화 장치의 역변환부(225)는 부호화 장치의 변환부에서 수행된 변환 정보를 기초로 역변환을 수행할 수 있다.
예측부(230)는 엔트로피 복호화부(210)에서 제공된 예측 블록 생성 관련 정보와 메모리(240)에서 제공된 이전에 복호화된 블록 및/또는 픽쳐 정보를 기초로 예측 블록을 생성할 수 있다.
현재 CU 및/또는 현재 PU에 대한 예측 모드가 인트라 예측(intra prediction) 모드인 경우에, 예측부(230)는 현재 픽쳐 내의 픽셀 정보를 기초로 예측 블록을 생성하는 인트라 예측을 수행할 수 있다. 이 때, 예측부(230)는 PU에 대하여 인트라 예측 모드를 결정하고 결정된 인트라 예측 모드를 기반으로 예측을 수행할 수 있다. 여기서, 인트라 예측 모드는 부호화기로부터 수신되는 인트라 예측 모드 관련 정보가 확인된 경우, 이에 대응하여 유도될 수 있다.
현재 CU 및/또는 현재 PU에 대한 예측 모드가 인터 예측(inter prediction) 모드인 경우에, 예측부(230)는 현재 픽쳐의 이전 픽쳐 또는 이후 픽쳐 중 적어도 하나의 픽쳐에 포함된 정보를 기초로 현재 PU에 대한 인터 예측을 수행할 수 있다. 이때, 영상 부호화 장치에서 제공된 현재 PU의 인터 예측에 필요한 움직임 정보, 예컨대 움직임 벡터, 참조 픽쳐 인덱스 등에 관한 정보는 부호화 장치로부터 수신한 스킵 플래그, 머지 플래그 등을 확인하고 이에 대응하여 유도될 수 있다.
복원 블록은 예측부(230)에서 생성된 예측 블록과 역변환부(225)에서 제공된 잔차 블록을 이용해 생성될 수 있다. 도 2에서는 가산기에서 예측 블록과 잔차 블록이 합쳐져 복원 블록이 생성되는 것으로 설명하고 있다. 이때, 가산기를 복원 블록을 생성하는 별도의 유닛(복원 블록 생성부)로 볼 수도 있다.
스킵 모드가 적용되는 경우에는 잔차 신호가 전송되지 않으며 예측 블록이 복원 블록으로 사용될 수 있다.
복원된 블록 및/또는 픽쳐는 필터부(235)로 제공될 수 있다. 필터부(235)는 복원된 블록 및/또는 픽쳐에 디블록킹 필터링, SAO(Sample Adaptive Offset) 및/또는 ALF 등을 적용할 수 있다.
메모리(240)는 복원된 픽쳐 또는 블록을 저장하여 참조 픽쳐 또는 참조 블록으로 사용될 수 있도록 할 수 있고 또한 복원된 픽쳐를 출력부로 제공할 수 있다.
이하, 본 명세서에서 현재 블록은 현재 부호화, 복호화 및/또는 예측 과정이 수행되는 블록으로서, 상기 부호화, 복호화 및/또는 예측 과정이 수행될 때의 처리 단위에 대응하는 블록을 의미할 수 있다. 일례로, 현재 블록에 대해 예측 과정이 수행되는 경우, 상기 현재 블록은 현재 예측 유닛에 대응하는 예측 대상 블록에 해당될 수 있다. 그리고, 본 명세서에서는 예측에 의해 생성된 블록은 예측 블록이라 한다.
'유닛'은 부호화 및 복호화 등이 수행될 때의 처리 단위를 의미하므로 픽셀 및/또는 샘플의 집합을 나타내는 '블록'과 구별될 수도 있으나, 본 명세서에서는 설명의 편의상 '유닛'이 경우에 따라 상기 '유닛'에 대응하는'블록'을 지칭할 수도 있다. 일례로, 이하 본 명세서에서는 하나의 예측 유닛에 대응하는 예측 대상 블록이 예측 유닛으로 지칭될 수 있고, 하나의 부호화 유닛에 대응하는 부호화/복호화 대상 블록이 부호화 유닛으로 지칭될 수도 있다. 이러한 구별은 해당 기술 분야의 통상의 지식을 가진 자라면 명확하게 이해할 수 있을 것이다.
도 3은 본 발명이 적용되는 시스템에서 처리 유닛의 쿼드 트리 구조에 관한 일 예를 개략적으로 나타내는 도면이다.
부호화 유닛(Coding Unit: CU)은 픽쳐의 부호화/복호화가 수행되는 단위를 의미할 수 있다. 부호화 대상 픽쳐 내의 하나의 코딩 블록은 쿼드 트리 구조(Quad Tree Structure)를 기반으로 깊이(Depth)를 가지며 반복적으로 분할될 수 있다. 이 때, 더 이상 분할되지 않는 코딩 블록은 상기 부호화 유닛에 해당될 수 있으며, 부호화기는 상기 부호화 유닛에 대한 부호화 과정을 수행할 수 있다. 부호화 유닛은 64x64, 32x32, 16x16, 8x8 등의 여러 크기를 가질 수 있다.
여기서, 쿼드 트리 구조를 기반으로 반복적으로 분할되는 코딩 블록은 코딩 트리 블록(CTB: Coding Tree Block)으로 불릴 수 있다. 하나의 코딩 트리 블록은 추가로 분할되지 않을 수도 있으며, 이 경우 코딩 트리 블록 자체가 하나의 부호화 유닛에 해당될 수도 있다. 따라서, 코딩 트리 블록은 최대 크기의 부호화 유닛인 최대 부호화 유닛(Largest Coding Unit: LCU)에 대응될 수 있다. 한편, 코딩 트리 블록 내에서 가장 작은 크기를 갖는 부호화 유닛은 최소 부호화 유닛(Smallest Coding Unit: SCU)으로 불릴 수 있다.
도 3을 참조하면, 코딩 트리 블록(300)은 분할을 통해서 더 작은 부호화 유닛(310)들로 이루어진 계층적 구조를 가질 수 있으며, 코딩 트리 블록(300)의 계층적 구조는 크기 정보, 깊이 정보, 분할 플래그 정보 등을 기반으로 특정될 수 있다. 코딩 트리 블록의 크기에 관련된 정보, 분할 깊이 정보 및 분할 플래그 정보 등은 비트 스트림 상의 시퀀스 파라미터 셋(SPS: Sequence Parameter Set)에 포함되어 부호화기로부터 복호화기로 전송될 수 있다.
한편, 인터 예측과 인트라 예측 중에서 어떤 예측이 수행될 것인지는 부호화 유닛 단위로 결정될 수 있다. 인터 예측이 수행되는 경우에는 예측 유닛 단위로 인터 예측 모드 및 움직임 정보 등이 결정될 수 있고, 인트라 예측이 수행되는 경우에는 예측 유닛 단위로 인트라 예측 모드가 결정될 수 있다. 이 때, 상술한 바와 같이 예측이 수행되는 처리 단위와 예측 방법 및 구체적인 내용이 정해지는 처리 단위는 같을 수 있으나 서로 다를 수도 있다. 예컨대, 예측의 방법과 예측 모드 등은 예측 유닛 단위로 결정되고, 예측의 수행은 변환 유닛 단위로 수행될 수도 있다.
도 3을 참조하면, 하나의 부호화 유닛(310)은 하나의 예측 유닛으로 사용되거나 복수의 예측 유닛으로 분할될 수 있다. 인트라 예측(320)의 경우에 부호화 유닛(및/또는 예측 유닛)의 분할 모드(partitioning mode)는 2N×2N 또는 N×N (N은 정수)일 수 있다. 인터 예측(330)의 경우에 부호화 유닛(및/또는 예측 유닛)의 분할 모드는 2Nx2N, 2NxN, Nx2N, NxN, 2NxnU, 2NxnD, nLx2N 또는 nRx2N (N은 정수)일 수 있다. 상술한 분할 모드는 하나의 실시예에 해당되며, 부호화 유닛이 예측 유닛으로 분할되는 방식은 상기 실시예에 한정되지 않는다. 예를 들어, 인터 예측(330)의 경우에 부호화 유닛(및/또는 예측 유닛)의 분할 모드는 2Nx2N, 2NxN, Nx2N, NxN 네 가지만이 사용될 수도 있으며, 또는 상술한 8가지의 분할 모드 외에 다른 분할 모드가 추가로 사용될 수도 있다.
한편, 도 1 및 도 2의 실시예에서 상술한 바와 같이, 인트라 모드의 경우 예측부는 현재 픽쳐의 복원된 영역 내의 픽셀 정보를 기초로 예측을 수행하여 현재 블록에 대한 예측 블록을 생성할 수 있다. 예를 들어, 예측부는 현재 블록을 중심으로, 상단, 좌측, 좌측 상단 및/또는 우측 상단에 위치한 복원된 블록 내의 픽셀들을 이용하여 현재 블록 내의 픽셀 값을 예측할 수 있다.
도 4는 인트라 예측을 위해 사용되는 인트라 예측 모드의 예측 방향 및 각각의 예측 방향에 할당되는 예측 모드 번호의 실시예를 개략적으로 나타내는 도면이다.
인트라 예측은 현재 블록의 인트라 예측 모드를 기반으로 수행될 수 있다. 인트라 예측에 사용되는 각각의 인트라 예측 모드는 소정의 각도 및/또는 예측 방향을 가질 수 있으며, 각각의 인트라 예측 모드에는 소정의 예측 모드 번호가 할당될 수 있다. 인트라 예측 모드에는, 현재 블록의 픽셀 값 예측에 사용되는 참조 픽셀들의 위치 및/또는 예측 방식 등에 따라, 수직(vertical) 모드와 수평(horizontal) 모드를 포함하는 앵귤러(angular) 모드, DC 모드 및 플래너(planar) 모드 등이 있을 수 있다.
일 실시예로 도 4의 410을 참조하면, 플래너 모드에 할당되는 예측 모드 번호는 0이고, DC 모드에 할당되는 예측 모드 번호는 3일 수 있다. 또한, 수직 모드에 할당되는 예측 모드 번호는 1이고 수평 모드에 할당되는 예측 모드 번호는 2일 수 있다. 그리고, 나머지 예측 모드 번호들은 인트라 예측 모드의 각도 및/또는 예측 방향에 따라 수직 모드와 수평 모드를 제외한 나머지 앵귤러 모드에 하나씩 할당될 수 있다.
다른 실시예로 도 4의 420을 참조하면, 플래너 모드에 할당되는 예측 모드 번호는 0이고, DC 모드에 할당되는 예측 모드 번호는 1일 수 있다. 또한, 수직 모드에 할당되는 예측 모드 번호는 26이고 수평 모드에 할당되는 예측 모드 번호는 10일 수 있다. 그리고, 나머지 예측 모드 번호들은 인트라 예측 모드의 각도 및/또는 예측 방향에 따라 수직 모드와 수평 모드를 제외한 나머지 앵귤러 모드에 하나씩 할당될 수 있다.
수직 모드에서는 현재 블록에 인접한 블록 내의 픽셀 값을 사용하여 수직 방향으로 예측이 수행되고, 수평 모드에서는 현재 블록에 인접한 블록 내의 픽셀 값을 사용하여 수평 방향으로 예측이 수행될 수 있다. 또한, DC 모드에서는 고정된 하나의 값이 현재 블록 내의 픽셀들의 예측 값으로 사용될 수 있다. 여기서, 일례로 상기 고정된 하나의 값은 현재 블록 주변의 픽셀 값들의 평균에 의해 유도될 수 있다. 플래너 모드에서는 현재 블록 주변에 위치한 복수의 픽셀의 픽셀 값을 기반으로 소정의 연산에 의해 현재 블록 내에 위치한 예측 대상 픽셀의 예측 값이 도출될 수 있다. 이 때, 상기 예측 대상 픽셀의 예측에 사용되는 복수의 픽셀은 상기 예측 대상 픽셀의 위치에 따라 다르게 결정될 수 있다. 그리고 수직 모드와 수평 모드를 제외한 나머지 앵귤러 모드에서는 각각의 모드에 대해 미리 정해진 각도 및/또는 방향에 따라 예측이 수행될 수 있다.
예측부는 인트라 예측을 위하여 도 4의 410, 420에서와 같이 미리 정해진 예측 방향 및 예측 모드 번호를 사용할 수 있다. 이 때, 일 실시예로 현재 블록이 가질 수 있는 인트라 예측 모드의 개수는 상기 현재 블록의 크기에 따라 달라질 수 있다. 다른 실시예로 현재 블록이 가질 수 있는 인트라 예측 모드의 개수는 소정의 고정된 값일 수도 있다. 예를 들어 현재 블록이 가질 수 있는 인트라 예측 모드의 개수는 35개일 수 있으며, 상기 35개의 인트라 예측 모드는 상술한 플래너(planar), DC, 앵귤러(angular) 모드(여기서, 앵귤러 모드는 수직 모드 및 수평 모드를 포함할 수 있음) 등을 포함할 수 있다.
각각의 인트라 예측 모드의 예측 방향 및 각각의 인트라 예측 모드에 할당되는 예측 모드 번호는 상술한 실시예에 한정되어 적용되는 것은 아니며, 필요에 따라 도 4의 410, 420에서와는 다르게 정해질 수도 있다. 이하, 본 명세서에서는 설명의 편의상 다른 언급이 없는 경우 도 4의 410에 따른 예측 방향 및 예측 모드 번호를 갖는 인트라 예측 모드를 기반으로 인트라 예측이 수행된다고 가정한다. 그러나, 본 발명은 이에 한정되는 것은 아니며 도 4의 420에 따른 인트라 예측 모드가 사용되거나 다른 방식으로 예측 방향 및 예측 모드 번호가 정해지는 경우에도 동일하거나 유사한 방식으로 적용될 수 있다.
또한, 이하 본 명세서에서는 설명의 편의상 예측 모드 번호는 모드 번호 또는 모드 값으로 지칭될 수 있다.
상술한 바와 같이, 부호화기는 인트라 예측 모드를 결정한 후, 결정된 인트라 예측 모드에 관한 정보를 부호화하여 복호화기로 전송할 수 있다. 인트라 예측 모드에 관한 정보는 그 예측 모드를 나타내는 값 자체로 전송될 수도 있으나, 전송 효율을 높이기 위해 인트라 예측 모드에 대해 예측된 모드 값을 기반으로 인트라 예측 모드 정보를 전송하는 방법이 이용될 수 있다. 이하, 본 명세서에서 현재 블록의 인트라 예측 모드에 대한 예측 값으로 사용되는 예측 모드는 MPM(Most Probable Mode)이라 한다.
도 5는 본 발명에 따른 인트라 예측 모드 정보 전송 방법의 일 실시예를 개략적으로 나타내는 흐름도이다.
도 5를 참조하면, 부호화기는 MPM 후보 리스트(MPM candidate list)를 생성할 수 있다(S510). MPM 후보 리스트 생성 과정은 일례로 도 1에서 상술한 부호화 장치의 예측부에서 수행될 수 있다.
MPM 후보 리스트는 복수의 MPM 후보(MPM candidate)로 구성될 수 있다. 즉, 부호화기는 현재 블록에 인접한 복수의 주변 블록의 인트라 예측 모드를 기반으로 복수의 MPM 후보를 도출하여 MPM 후보 리스트에 할당할 수 있다. 이 때, 부호화기는 주변 블록의 인트라 예측 모드를 그대로 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있고, 소정의 조건에 따라 결정된 별개의 인트라 예측 모드를 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있다.
여기서 일례로 현재 블록 및 주변 블록은 각각 PU에 해당되는 블록일 수 있다.
MPM 후보 리스트를 구성하는 복수의 MPM 후보 각각에는 MPM 인덱스 값이 할당될 수 있다. 예컨대, MPM 후보 리스트의 1번째 MPM 후보에는 0의 인덱스 값이 할당될 수 있다. 또한, MPM 후보 리스트의 2번째 MPM 후보에는 1의 인덱스 값이 할당될 수 있다. 마찬가지로 MPM 후보 리스트의 n번째 MPM 후보(n은 자연수)에는 n-1의 인덱스 값이 할당될 수 있다.
여기서, 'n번째 MPM 후보'는 MPM 후보 리스트 내에서 n번째에 위치하는 MPM 후보를 의미할 수 있으며 또는 MPM 후보 리스트에 n번째로 할당되는 MPM 후보를 의미할 수도 있다. 따라서, MPM 후보 리스트 내에서 상대적으로 앞에 위치하는 MPM 후보 또는 MPM 후보 리스트에 상대적으로 먼저 할당되는 MPM 후보에는, 상대적으로 작은 인덱스 값이 할당되는 것으로 볼 수 있다. 예컨대, 1번째 MPM 후보에는 0의 인덱스 값이 할당되고 마지막 MPM 후보에는 가장 높은 인덱스 값이 할당될 수 있다. 이하, 본 명세서에서는 설명의 편의상 MPM 후보 리스트를 구성하는 MPM 후보 중에서 n-1의 인덱스 값이 할당되는 MPM 후보는 n번째 MPM 후보(n은 자연수)라 한다.
한편, 부호화기는 MPM 후보 리스트를 유도할 때 파싱 강건성(parsing robustness)을 보장하기 위해, MPM 후보 리스트에 포함되는 MPM 후보의 개수를 항상 일정하게 정해줄 수도 있다. 즉, 부호화기는 인트라 예측 모드를 부호화하기 위해 항상 소정의 고정된 개수의 MPM 후보를 이용할 수도 있다. 일례로, MPM 후보 리스트를 구성하는 MPM 후보의 개수는 2로 고정될 수 있다. 다른 예로, MPM 후보 리스트를 구성하는 MPM 후보의 개수는 3으로 고정될 수도 있다.
MPM 후보 리스트에 포함되는 MPM 후보의 개수가 고정된 경우, 주변 블록에 대응하여 도출되는 MPM 후보의 개수는 상기 고정된 개수보다 작을 수도 있다. 예를 들어, MPM 후보 리스트에 포함되는 MPM 후보의 개수가 3개로 고정되고 2개의 주변 블록이 MPM 후보 도출에 사용되는 경우를 가정한다. 이 때, 주변 블록에 대응하여 도출되는 MPM 후보의 개수는 2개일 수 있다. 또한 상기 2개의 주변 블록의 인트라 예측 모드가 서로 동일한 경우 주변 블록에 대응하여 도출되는 MPM 후보의 개수는 1개일 수도 있다. 이러한 경우, 부호화기는 추가 MPM 후보를 결정하고 결정된 추가 MPM 후보를 MPM 후보 리스트에 할당할 수 있다. 여기서, 추가로 도출되는 MPM 후보는 주변 블록에 대응하여 도출되는 MPM 후보를 제외한 나머지 인트라 예측 모드 중에서 선택될 수 있다.
MPM 후보를 결정하는 방법 및 MPM 후보를 MPM 후보 리스트에 할당하는 방법의 구체적인 실시예는 후술하기로 한다.
다시 도 5를 참조하면, 부호화기는 MPM 후보 리스트를 기반으로 인트라 예측 모드에 대한 정보를 생성하고 이를 부호화하여 복호화기로 전송할 수 있다(S520). 인트라 예측 모드에 대한 정보를 생성하는 과정은 일례로 도 1에서 상술한 부호화 장치의 예측부에서 수행될 수 있다. 또한, 인트라 예측 모드 정보를 부호화하여 전송하는 과정은 일례로 도 1에서 상술한 부호화 장치의 엔트로피 부호화부에서 수행될 수 있다.
부호화기는 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는지 여부, 즉 인트라 예측 모드의 예측 값이 그대로 현재 블록의 인트라 예측 모드로 사용되는지 여부를 판단함으로써, MPM 플래그 정보를 생성할 수 있다. 여기서, MPM 플래그는 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는지 여부를 나타내는 플래그에 해당될 수 있다. 일례로, MPM 플래그는 prev_intra_luma_pred_flag의 신택스 요소로 나타내어질 수 있다. 생성된 MPM 플래그 정보는 부호화 장치의 엔트로피 부호화부에서 부호화되어 복호화 장치로 전송될 수 있다.
MPM 후보 리스트에 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는 경우, 부호화기는 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 현재 블록의 인트라 예측 모드로 사용될 MPM 후보를 지시하는 MPM 인덱스 정보를 생성할 수 있다. 예컨대, MPM 인덱스 정보는 현재 블록의 인트라 예측 모드로 사용될 MPM 후보에 할당된 인덱스 값을 나타낼 수 있다. MPM 인덱스 정보는 일례로 mpm_idx의 신택스 요소로 나타내어질 수 있다. 생성된 MPM 인덱스 정보는 부호화 장치의 엔트로피 부호화부에서 부호화되어 복호화 장치로 전송될 수 있다.
MPM 후보 리스트에 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하지 않는 경우, 부호화기는 MPM 후보 리스트를 구성하는 복수의 MPM 후보 및 현재 블록의 인트라 예측 모드를 기반으로, 현재 블록의 인트라 예측 모드에 대응하는 리메이닝 모드(remaining mode)를 도출할 수 있다. 예컨대, 리메이닝 모드의 모드 값은 현재 블록의 인트라 예측 모드의 모드 값에서 현재 블록의 인트라 예측 모드보다 작은 모드 값을 갖는 MPM 후보의 개수를 뺀 값에 해당될 수 있다. 리메이닝 모드는 일례로 rem_intra_luma_pred_mode의 신택스 요소로 나타내어질 수 있다. 도출된 리메이닝 모드는 부호화 장치의 엔트로피 부호화부에서 부호화되어 복호화 장치로 전송될 수 있다.
도 5에서는 인트라 예측 모드에 관한 내용을 고려하여, 발명이 용이하게 이해될 수 있도록 부호화 장치의 동작을 개략적으로 설명하였으나, 이는 설명의 편의를 위한 것으로서, 본 발명에서 부호화 장치의 동작은 도 1에서 설명한 제 동작을 포함할 수 있다.
도 6은 본 발명에 따른 인트라 예측 방법의 일 실시예를 개략적으로 나타내는 흐름도이다.
도 6을 참조하면, 복호화기는 부호화기로부터 인트라 예측 모드 관련 정보를 수신하여 복호화할 수 있다(S610). 상기 복호화 과정은 일례로 도 2에서 상술한 복호화 장치의 엔트로피 복호화부에서 수행될 수 있다. 부호화기로부터 수신되는 인트라 예측 모드 관련 정보에는 MPM 플래그 정보, MPM 인덱스 정보 및/또는 리메이닝 모드 정보 등이 있을 수 있다.
다시 도 6을 참조하면, 복호화기는 MPM 후보 리스트를 생성할 수 있다(S620).
복호화기는 부호화기에서와 동일한 방식으로 MPM 후보를 도출하고 MPM 후보 리스트를 생성할 수 있다. MPM 후보 리스트 생성 과정은 일례로 도 2에서 상술한 복호화 장치의 예측부에서 수행될 수 있다.
MPM 후보 리스트는 복수의 MPM 후보(MPM candidate)로 구성될 수 있다. 즉, 복호화기는 현재 블록에 인접한 복수의 주변 블록의 인트라 예측 모드를 기반으로 복수의 MPM 후보를 도출하여 MPM 후보 리스트에 할당할 수 있다. 이 때, 복호화기는 주변 블록의 인트라 예측 모드를 그대로 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있고, 소정의 조건에 따라 결정된 별개의 인트라 예측 모드를 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있다. 여기서 일례로 현재 블록 및 주변 블록은 각각 PU에 해당되는 블록일 수 있다.
MPM 후보 리스트 생성에 관한 구체적인 내용은 도 5에서 상술한 부호화 장치에서의 MPM 후보 리스트 생성 과정에서와 동일하므로, 여기서는 이에 대한 구체적인 설명은 생략하기로 한다. 또한, MPM 후보를 결정하는 방법 및 MPM 후보를 MPM 후보 리스트에 할당하는 방법의 구체적인 실시예는 후술하기로 한다.
다시 도 6을 참조하면, 복호화기는 MPM 후보 리스트 및 인트라 예측 모드 관련 정보를 기반으로 현재 블록의 인트라 예측 모드를 도출할 수 있다(S630). 인트라 예측 모드 도출 과정은 일례로 도 2에서 상술한 복호화 장치의 예측부에서 수행될 수 있다.
복호화기는 부호화기로부터 수신된 MPM 플래그 정보를 기반으로 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는지 여부를 판단할 수 있다. MPM 플래그 정보에 대해서는 도 5에서 상술한 바 있으므로, 여기서는 이에 대한 구체적인 설명은 생략하기로 한다.
MPM 후보 리스트 내에 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는 경우, 복호화기는 MPM 인덱스 정보가 지시하는 MPM 후보를 현재 블록의 인트라 예측 모드로 결정할 수 있다. MPM 인덱스 정보에 대해서는 도 5에서 상술한 바 있으므로, 여기서는 이에 대한 구체적인 설명은 생략하기로 한다.
MPM 후보 리스트 내에 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하지 않는 경우, 복호화기는 MPM 후보 리스트 및 부호화기로부터 수신된 리메이닝 모드를 기반으로 현재 블록의 인트라 예측 모드를 도출할 수 있다. 예컨대, MPM 후보 리스트를 구성하는 MPM 후보의 개수가 N(N은 자연수)개이고, MPM 후보의 모드 값이 mode1, mode2,..., modeN이라 가정한다. modeX 에는 X 값이 작을 수록 더 작은 모드 값이 할당된다고 가정한다. X가 1부터 N-1일 때, 리메이닝 모드의 모드값이 modeX-(X-1)보다 크거나 같고 mode(X+1)-X 보다 작은 경우, 현재 블록의 인트라 예측 모드 값은 리메이닝 모드의 모드 값에 X를 더한 값으로 결정될 수 있다. 또한 X가 N일 때, 리메이닝 모드의 모드값이 modeN-(N-1)보다 크거나 같은 경우, 현재 블록의 인트라 예측 모드 값은 리메이닝 모드의 모드값에 N을 더한 값으로 결정될 수 있다.
다시 도 6을 참조하면, 복호화기는 현재 블록의 인트라 예측 모드를 기반으로 현재 블록에 대해 인트라 예측을 수행함으로써, 상기 현재 블록에 대응되는 예측 블록을 생성할 수 있다(S640).
도 6에서는 인트라 예측 모드에 관한 내용을 고려하여, 발명이 용이하게 이해될 수 있도록 복호화 장치의 동작을 개략적으로 설명하였으나, 이는 설명의 편의를 위한 것으로서, 본 발명에서 복호화 장치의 동작은 도 2에서 설명한 제 동작을 포함할 수 있다.
도 7은 MPM 후보를 결정하고 MPM 후보 리스트를 생성하는 과정의 실시예를 설명하기 위한 도면이다.
상술한 바와 같이, 부호화 장치 및 복호화 장치의 예측부는 현재 블록에 인접한 복수의 주변 블록의 인트라 예측 모드를 기반으로 복수의 MPM 후보를 도출하여 MPM 후보 리스트에 할당할 수 있다.
도 7의 710은 MPM 후보 도출에 사용되는 주변 블록의 실시예를 도시한다.
도 7의 710을 참조하면, 현재 블록의 좌측에 인접한 좌측 주변 블록(블록 A) 및 현재 블록의 상단에 인접한 상단 주변 블록(블록 B)이 MPM 후보 도출에 사용될 수 있다. 여기서, 현재 블록은 현재 예측 대상이 되는 블록으로서 PU에 해당되는 블록일 수 있다. 또한, 블록 A 및 블록 B도 각각 PU에 해당되는 블록일 수 있다.
도 7의 720은 MPM 후보 도출에 사용되는 주변 블록의 다른 실시예를 도시한다.
현재 블록 및 MPM 후보 도출에 사용되는 블록 A, 블록 B는 도 7의 710에서와 같이 서로 동일한 크기를 가질 수도 있으나, 서로 다른 크기를 가질 수도 있다. 예컨대, 도 7의 720에 도시된 바와 같이 현재 블록의 좌측 및/또는 상단에 인접하여 위치한 블록의 크기는 현재 블록의 크기와 다를 수 있다. 이 경우, 현재 블록의 좌측 및/또는 상단에 인접하여 위치한 블록의 개수는 하나 이상일 수 있다.
도 7의 720을 참조하면, 현재 블록의 좌측에 인접한 블록들 중에서 가장 상단에 위치한 블록(블록 A) 및 현재 블록의 상단에 인접한 블록들 중에서 가장 좌측에 위치한 블록(블록 B)이 MPM 후보 도출에 사용될 수 있다. 여기서, 현재 블록은 현재 예측 대상이 되는 블록으로서 PU에 해당되는 블록일 수 있다. 또한, 블록 A 및 블록 B도 각각 PU에 해당되는 블록일 수 있다.
도 7의 710 및 720에서 블록 A 및 블록 B는 각각 블록 A에 속한 픽셀 및 블록 B에 속한 픽셀의 위치로서 특정될 수 있다. 블록 A에 속한 픽셀의 위치 및 블록 B에 속한 픽셀의 위치는 일례로 현재 블록 내의 가장 좌측 상단 픽셀에 대한 상대적인 위치로서 결정될 수 있다. 예컨대, 현재 블록 내의 가장 좌측 상단 픽셀의 위치는 (xB, yB)라 한다. 이 때, 블록 A는 (xB-1, yB)에 해당되는 픽셀의 위치로서 특정될 수 있고, 블록 B는 (xB, yB-1)에 해당되는 픽셀의 위치로서 특정될 수 있다.
이하, 후술되는 실시예에서는 도 7의 710 및 도 7의 720에서와 같이, 현재 블록의 좌측에 인접한 블록 및 현재 블록의 상단에 인접한 블록을 기반으로 MPM 후보를 도출하고 MPM 후보 리스트를 생성하는 과정이 서술된다. 본 명세서에서는 설명의 편의를 위해 현재 블록의 좌측에 인접한 블록은 '블록 A'라 하고, 현재 블록의 상단에 인접한 블록은 '블록 B'라 한다. 또한 도 7의 실시예에서 블록 A 및 블록 B는 경우에 따라 주변 블록으로 지칭될 수도 있다.
블록 A 및 블록 B 중에서 인트라 모드에서 부호화/복호화가 수행된 블록은 인트라 예측 모드를 가질 수 있다. 본 명세서에서는 설명의 편의를 위해 블록 A의 인트라 예측 모드는 '모드 A'라 하고, 블록 B의 인트라 예측 모드는 '모드 B'라 한다.
현재 블록의 MPM 후보는 블록 A의 인트라 예측 모드인 모드 A 및 블록 B의 인트라 예측 모드인 모드 B 를 기반으로 유도될 수 있다. 이 때, 예측부는 블록 A에 대응하는 MPM 후보 및 블록 B에 대응하는 MPM 후보를 결정할 수 있고, 필요한 경우 추가의 MPM 후보를 결정할 수도 있다.
일례로, 블록 A에 대응하여 도출되는 MPM 후보는 블록 A의 인트라 예측 모드일 수 있고 블록 B에 대응하여 도출되는 MPM 후보는 블록 B의 인트라 예측 모드일 수 있다. 그러나, 소정의 조건에 따라 블록 A에 대응하는 MPM 후보는 블록 A의 인트라 예측 모드가 아닌 별개의 소정의 인트라 예측 모드로 결정될 수 있고, 블록 B에 대응하는 MPM 후보는 블록 B의 인트라 예측 모드가 아닌 별개의 소정의 인트라 예측 모드로 결정될 수도 있다.
이하, 본 명세서에서는 설명의 편의상 블록 A에 대응하여 도출되는 MPM 후보는 'MPM 후보 A'라 하고, 블록 B에 대응하여 도출되는 MPM 후보는 'MPM 후보 B'라 한다.
일 실시예로 도 7에서 MPM 후보 A는 모드 A 로 결정되고 MPM 후보 B는 모드 B 로 결정될 수 있다. 모드 A 및 모드 B 가 동일한 경우에는 MPM 후보 리스트에 할당되는 MPM 후보의 개수가 1개일 수 있다. 이 경우, 1개의 MPM 후보가 현재 블록의 인트라 예측 모드에 대한 예측 값으로 사용될 수 있다. 모드 A 및 모드 B가 동일하지 않은 경우에는 MPM 후보 리스트에 할당되는 MPM 후보의 개수가 2개일 수 있다. 이 경우, 부호화기는 현재 블록의 인트라 예측 모드로 사용될 MPM 후보를 지시하는 MPM 인덱스 정보를 부호화하여 복호화기로 전송할 수 있다. 복호화기는 전송된 MPM 인덱스 정보를 기?으로 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 모드 A인지 또는 모드 B인지를 결정할 수 있다.
한편, 상술한 바와 같이 예측부는 MPM 후보 리스트를 유도할 때 파싱 강건성(parsing robustness)을 보장하기 위해, MPM 후보의 개수를 항상 일정하게 정해줄 수도 있다. 즉, 예측부는 인트라 예측 모드를 부호화/복호화하기 위해 항상 소정의 고정된 개수의 MPM 후보를 이용할 수도 있다. 예컨대, MPM 후보 리스트를 구성하는 MPM 후보의 개수는 2로 고정될 수 있다. 다른 예로, MPM 후보 리스트를 구성하는 MPM 후보의 개수는 3으로 고정될 수도 있다.
이하, MPM 후보 리스트를 구성하는 MPM 후보의 개수가 2로 고정되는 경우 MPM 후보를 유도하고 MPM 후보 리스트를 생성하는 방법의 실시예들이 서술된다.
일 실시예로, 모드 A 및 모드 B가 모두 가용하지 않은(unavailable) 경우, 예측부는 MPM 후보 리스트에 할당되는 1번째 MPM 후보를 플래너 모드(예컨대, 도 4의 410에서와 같이 예측 모드 번호가 할당된 경우, 플래너 모드의 모드 값은 0일 수 있음)로 결정하고, MPM 후보 리스트에 할당되는 2번째 MPM 후보를 DC 모드(예컨대, 도 4의 410에서와 같이 예측 모드 번호가 할당된 경우, DC 모드의 모드 값은 3일 수 있음)로 결정할 수 있다. 여기서, 일례로 예측부는 MPM 후보 A를 플래너 모드로 결정하고 MPM 후보 B를 DC 모드로 결정한 후, MPM 후보 A 및 MPM 후보 B를 MPM 후보 리스트에 할당할 수 있다. 다른 예로 예측부는 MPM 후보 A 및 MPM 후보 B를 모두 유효하지 않은 것으로 처리하고 추가 MPM 후보로서 플래너 모드 및 DC 모드를 MPM 후보 리스트에 할당할 수도 있다.
모드 A 또는 모드 B가 가용하지 않은 경우에는, 주변 블록이 현재 픽쳐 및/또는 현재 슬라이스의 외부에 위치한 경우 및 주변 블록의 예측 모드가 인트라 모드가 아닌 경우 등이 있을 수 있다.
또한 모드 A 및 모드 B 중 하나만이 가용한(available) 경우, 예측부는 가용하지 않은 모드를 갖는 주변 블록에 대응되는 MPM 후보를 플래너 모드로 결정하거나, 가용하지 않은 모드를 갖는 주변 블록에 대응되는 MPM 후보를 유효하지 않은 것으로 처리하고 플래너 모드를 추가 MPM 후보로 결정할 수 있다. 이 때, 일례로 예측부는 플래너 모드를 1번째 MPM 후보로 MPM 후보 리스트에 할당하고, 모드 A 및 모드 B 중에서 가용한 인트라 예측 모드를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수 있다. 다만, 모드 A 및 모드 B 중에서 가용한 인트라 예측 모드가 플래너 모드인 경우, 중복성을 피하기 위해 DC 모드를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수도 있다.
또한 모드 A 및 모드 B가 모두 가용하고(available) 모드 A와 모드 B가 서로 동일한 경우, 예측부는 플래너 모드를 추가 MPM 후보로 결정할 수 있다. 모드 A 및 모드 B가 모두 가용한 경우에는 모드 A가 MPM 후보 A로 결정되고 모드 B가 MPM 후보 B로 결정될 수 있다. 또한, 모드 A와 모드 B가 동일하므로 MPM 후보 A와 MPM 후보 B는 서로 동일할 수 있다.
이 때, 일례로 예측부는 플래너 모드를 1번째 MPM 후보로 MPM 후보 리스트에 할당하고, 모드 A(및/또는 MPM 후보 A) 및/또는 모드 B(및/또는 MPM 후보 B)를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수 있다. 다만, 모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B)가 플래너 모드인 경우, 중복성을 피하기 위해 DC 모드를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수도 있다.
모드 A 및 모드 B가 모두 가용하고 모드 A와 모드 B가 서로 다른 경우, 예측부는 모드 A 및 모드 B를 MPM 후보로서 MPM 후보 리스트에 할당할 수 있다. 상술한 바와 같이 모드 A 및 모드 B가 모두 가용한 경우에는 모드 A가 MPM 후보 A로 결정되고 모드 B가 MPM 후보 B로 결정될 수 있다. 이 때, 일례로 모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B) 중에서 더 작은 모드 값을 갖는 인트라 예측 모드가 1번째 MPM 후보로 결정되고 모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B) 중에서 더 큰 모드 값을 갖는 인트라 예측 모드가 2번째 MPM 후보로 결정될 수 있다.
다른 예로서, 모드 A 및 모드 B가 모두 가용하고 모드 A와 모드 B가 서로 다른 경우, 예측부는 모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B)를 MPM 후보 리스트 내에서 소정의 고정된 위치에 할당할 수 있다. 즉, 모드 A 및 모드 B가 MPM 후보로 사용되는 경우, 모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B)에 할당되는 MPM 인덱스 값은 항상 소정의 고정된 값일 수 있다. 일례로, 예측부는 항상 모드 A(및/또는 MPM 후보 A)를 1번째 MPM 후보로 MPM 후보 리스트에 할당하고 모드 B(및/또는 MPM 후보 B)를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수 있다. 이 경우, 모드 A(및/또는 MPM 후보 A)에는 0의 인덱스 값이 할당되고 모드 B(및/또는 MPM 후보 B)에는 1의 인덱스 값이 할당될 수 있다. 다른 예로, 예측부는 항상 모드 B(및/또는 MPM 후보 B)를 1번째 MPM 후보로 MPM 후보 리스트에 할당하고 모드 A(및/또는 MPM 후보 A)를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수도 있다. 이 경우, 모드 B(및/또는 MPM 후보 B)에는 0의 인덱스 값이 할당되고 모드 (및/또는 MPM 후보 A)A에는 1의 인덱스 값이 할당될 수 있다.
모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B)가 MPM 후보 리스트 내에서 소정의 고정된 위치에 할당되는 경우에는, 모드 A(및/또는 MPM 후보 A) 및 모드 B(및/또는 MPM 후보 B) 중에서 더 작은 모드 값을 갖는 인트라 예측 모드가 1번째 MPM 후보로 결정되는 경우에 비해, 부호화기 및 복호화기의 계산량이 감소될 수 있다. 이는 모드 A(및/또는 MPM 후보 A)의 모드 값 및 모드 B(및/또는 MPM 후보 B)의 모드 값의 크기를 비교하는 연산 과정이 제거될 수 있기 때문이다.
다른 실시예로, 예측부는 MPM 후보의 개수가 2개로 고정된 MPM 후보 리스트를 유도할 때, 1번째 MPM을 플래너 모드로 고정할 수 있다. 즉, MPM 후보 리스트에 할당되는 1번째 MPM은 항상 플래너 모드로 결정될 수도 있다. 이 때 1번째 MPM인 플래너 모드에 할당되는 MPM 인덱스 값은 0일 수 있다.
이 때, 일례로 예측부는 모드 A를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수 있다. 모드 A가 가용하지 않거나 플래너 모드인 경우 예측부는 모드 B를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수 있다. 또한 모드 B도 가용하지 않거나 플래너 모드이면 DC 모드가 2번째 MPM 후보로 MPM 후보 리스트에 할당될 수 있다. 2번째 MPM 후보로 할당된 인트라 예측 모드에는 1의 MPM 인덱스 값이 할당될 수 있다. 이 경우, 상술한 실시예들에 비해 모드 B의 가용성(availability)을 체크하는 프로세스의 발생 회수가 감소될 수 있으며, 모드 A의 모드 값과 모드 B의 모드 값의 크기를 비교할 필요가 없으므로 부호화기 및 복호화기에서의 복잡도가 감소될 수 있다.
다른 예로 예측부는 1번째 MPM이 플래너 모드로 고정된 경우, 모드 A를 2번째 MPM 후보로 MPM 후보 리스트에 할당하되, 모드 A가 가용하지 않거나 플래너 모드인 경우에는 모드 B를 참조하는 대신 바로 DC 모드를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수도 있다. 이 경우, 모드 B의 가용성(availability)을 체크할 필요가 없으므로 상술한 실시예에 비해 부호화기 및 복호화기에서의 복잡도가 감소될 수 있다.
또 다른 예로 예측부는 1번째 MPM이 플래너 모드로 고정된 경우, 모드 A 또는 모드 B를 참조하는 대신 가장 최근에 부호화되거나 복호화된 블록의 인트라 예측 모드를 2번째 MPM 후보로 MPM 후보 리스트에 할당할 수도 있다. 또한, 가장 최근에 부호화되거나 복호화된 블록의 인트라 예측 모드가 가용하지 않거나 플래너 모드인 경우에는 DC 모드가 2번째 MPM 후보로 MPM 후보 리스트에 할당될 수 있다. 여기서, 가장 최근에 부호화되거나 복호화된 블록의 인트라 예측 모드가 가용하지 않은 경우로는 상기 블록이 인터 모드로 부호화되거나 복호화된 블록인 경우 등이 있을 수 있다. 상기 가장 최근에 부호화되거나 복호화된 블록은 일례로 PU에 해당될 수 있다. 이 경우에는, 모드 A의 가용성 및 모드 B의 가용성을 체크할 필요가 없으므로 부호화기 및 복호화기에서의 복잡도가 감소될 수 있다.
한편, 상술한 실시예들은 MPM 후보 리스트를 구성하는 MPM 후보의 개수가 2로 고정되는 경우를 기준으로 서술되었으나, 본 발명은 이에 한정되는 것은 아니다. 예컨대, 상술한 MPM 후보 도출 과정 및 이를 MPM 후보 리스트에 할당하는 과정은 MPM 후보 리스트를 구성하는 MPM 후보의 개수가 3으로 고정되는 경우에도 동일하거나 유사한 방식으로 적용될 수 있다. 다만, 상술한 실시예들에서는 두 개의 MPM 후보만이 유도되므로, MPM 후보 리스트를 구성하는 MPM 후보의 개수가 3으로 고정되는 경우에는 상기 두 개의 MPM 후보 외에 추가 MPM 후보가 더 유도될 수 있다. 이 때, 추가로 유도되는 MPM 후보에는 예컨대 플래너 모드, DC 모드 또는 수직 모드 등이 있을 수 있다.
이하, MPM 후보 리스트를 구성하는 MPM 후보의 개수가 3으로 고정되는 경우에 MPM 후보를 유도하고 MPM 후보 리스트를 생성하는 방법의 실시예가 서술된다. 후술되는 MPM 후보 리스트 생성 과정은 부호화 장치 및/또는 복호화 장치의 예측부에서 수행될 수 있다.
MPM 후보의 개수가 3으로 고정되는 경우 MPM 후보 리스트를 생성하는 방법에는 다양한 양태의 예시들이 포함될 수 있다. 후술되는 실시예에서 다양한 양태들을 나타내기 위한 모든 가능한 조합을 기술할 수는 없지만, 해당 기술 분야의 통상의 지식을 가진 자는 다른 조합이 가능함을 인식할 수 있을 것이다.
우선, 예측부는 현재 블록의 좌측에 인접한 블록 A를 기반으로 블록 A에 대응되는 MPM 후보 A를 결정할 수 있고, 현재 블록의 상단에 인접한 블록 B를 기반으로 블록 B에 대응되는 MPM 후보 B를 결정할 수 있다.
상술한 바와 같이 예측부는 주변 블록(예컨대, 블록 A 또는 블록 B)의 인트라 예측 모드를 그대로 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있으나, 소정의 조건에 따라 결정된 별개의 인트라 예측 모드를 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있다.
일례로, 주변 블록(예컨대, 블록 A 또는 블록 B)이 현재 블록이 속한 현재 픽쳐 및/또는 현재 슬라이스의 외부에 속한 블록인 경우, 상기 주변 블록의 인트라 예측 모드는 가용하지 않을 수 있다. 따라서, 이 경우 예측부는 상기 주변 블록에 대응되는 MPM 후보를 DC 모드로 설정할 수 있다. 예컨대, 블록 A가 현재 픽쳐 및/또는 현재 슬라이스의 외부에 속한 블록이면 MPM 후보 A는 DC 모드로 설정될 수 있다. 또한, 블록 B가 현재 픽쳐 및/또는 현재 슬라이스의 외부에 속한 블록이면 MPM 후보 B는 DC 모드로 설정될 수 있다.
또한, 주변 블록(예컨대, 블록 A 또는 블록 B)의 예측 모드가 인트라 모드가 아닌 경우, 즉 주변 블록이 인트라 모드로 부호화되거나 복호화된 블록이 아닌 경우에 상기 주변 블록은 인트라 예측 모드 정보를 갖지 않을 수 있다. 따라서, 이 경우 예측부는 상기 주변 블록에 대응되는 MPM 후보를 DC 모드로 설정할 수 있다. 예컨대, 블록 A의 예측 모드가 인트라 모드가 아니면, MPM 후보 A는 DC 모드로 설정될 수 있다. 또한, 블록 B 의 예측 모드가 인트라 모드가 아니면, MPM 후보 B는 DC 모드로 설정될 수 있다.
또한, 현재 블록의 상단에 인접한 블록 B가 현재 블록이 속한 현재 CTB(Coding Tree Block)의 외부에 위치하는 경우, 상기 블록 B에 대응되는 MPM 후보 B는 DC 모드로 설정될 수 있다.
상술한 경우들에 해당되지 않는 경우, 주변 블록(예컨대, 블록 A 또는 블록 B)에 대응되는 MPM 후보는 상기 주변 블록의 인트라 예측 모드로 결정될 수 있다. 예컨대, 이 경우 MPM 후보 A는 블록 A의 인트라 예측 모드인 모드 A로 설정되고 MPM 후보 B는 블록 B의 인트라 예측 모드인 모드 B로 설정될 수 있다.
상술한 과정에 의해 MPM 후보 A 및 MPM 후보 B가 결정되면, 예측부는 이를 기반으로 MPM 후보 리스트를 생성할 수 있다.
일례로, MPM 후보 A 와 MPM 후보 B 는 서로 동일할 수 있다. 이 때, 만일 MPM 후보 A가 플래너 모드 또는 DC 모드이면, MPM 후보 리스트에는 1번째 MPM 후보로 플래너 모드가 할당되고, 2번째 MPM 후보로 DC 모드가 할당되고, 3번째 MPM 후보로 수직 모드가 할당될 수 있다. 이 때, 플래너 모드에는 0의 MPM 인덱스 값이 할당될 수 있고, DC 모드에는 1의 MPM 인덱스 값이 할당될 수 있으며, 수직 모드에는 2의 MPM 인덱스 값이 할당될 수 있다.
또한 MPM 후보 A 와 MPM 후보 B 가 서로 동일하고 MPM 후보 A가 플래너 모드 및 DC 모드가 아니면, MPM 후보 리스트에는 MPM 후보 A가 1번째 MPM 후보로 할당되고, MPM 후보 A의 예측 방향과 가장 유사하거나 인접한 예측 방향을 갖는 두 개의 인트라 예측 모드가 2번째 및 3번째 MPM 후보로서 MPM 후보 리스트에 할당될 수 있다. 이 때, MPM 후보 A에는 0의 MPM 인덱스 값이 할당될 수 있고, 2번째 및 3번째 MPM 후보에는 각각 1 및 2의 MPM 인덱스 값이 할당될 수 있다.
다른 예로, MPM 후보 A 와 MPM 후보 B 는 서로 다를 수도 있다. 이 때, 예측부는 MPM 후보 A 및 MPM 후보 B를 MPM 후보 리스트 내에서 소정의 고정된 위치에 할당할 수 있다. 즉, MPM 후보 A 및 MPM 후보 B에 할당되는 MPM 인덱스 값은 항상 소정의 고정된 값일 수 있다. 상술한 바와 같이, MPM 후보 A 및 MPM 후보 B를 MPM 후보 리스트 내에서 소정의 고정된 위치에 할당하는 경우, MPM 후보 A 와 MPM 후보 B 의 모드 값의 크기를 비교하는 연산 과정이 제거될 수 있으므로, 복잡도가 감소될 수 있다.
예컨대, 예측부는 MPM 후보 A를 1번째 MPM 후보로서 MPM 후보 리스트에 할당하고 MPM 후보 B를 2번째 MPM 후보로서 MPM 후보 리스트에 할당할 수 있다. 이 때, MPM 후보 A에는 0의 인덱스 값이 할당되고 MPM 후보 B에는 1의 인덱스 값이 할당될 수 있다.
또한, MPM 후보 A 와 MPM 후보 B 가 서로 다른 경우, 예측부는 추가로 하나의 인트라 예측 모드를 3번째 MPM 후보로서 MPM 후보 리스트에 할당할 수 있다. 이 때, 추가로 할당된 3번째 MPM 후보에는 2의 인덱스 값이 할당될 수 있다.
예컨대, MPM 후보 A 와 MPM 후보 B 가 모두 플래너 모드가 아닌 경우, MPM 후보 리스트에 3번째 MPM 후보로 추가로 할당되는 인트라 예측 모드는 플래너 모드일 수 있다. 그렇지 않으면(MPM 후보 A 와 MPM 후보 B 중에서 하나가 플래너 모드이면), MPM 후보 A 와 MPM 후보 B 가 모두 DC 모드가 아닌 경우, MPM 후보 리스트에 3번째 MPM 후보로 추가로 할당되는 인트라 예측 모드는 DC 모드일 수 있다. 그렇지 않으면(MPM 후보 A 와 MPM 후보 B 중에서 하나는 플래너 모드이고 다른 하나는 DC 모드인 경우), MPM 후보 리스트에 3번째 MPM 후보로 추가로 할당되는 인트라 예측 모드는 수직 모드일 수 있다.
상술한 실시예에서, 예컨대 도 4의 420에서와 같이 예측 모드 번호가 할당된 경우, 플래너 모드의 모드 값은 0일 수 있고 DC 모드의 모드 값은 1일 수 있으며 수직 모드의 모드 값은 26일 수 있다.
상술한 실시예들에 따른 MPM 후보 리스트 생성 과정은 부호화 장치 및 복호화 장치에 동일하게 적용될 수 있다. MPM 후보 리스트가 생성되면, 도 5에서 상술한 바와 같이 인트라 예측 모드 정보의 생성에 사용될 수 있다. 또한, 복호화 장치에서 생성된 MPM 후보 리스트는 도 6에서 상술한 바와 같이 현재 블록의 인트라 예측 모드 결정에 사용될 수 있다.
도 8은 본 발명에 따라 인트라 예측 모드 정보를 전송하는 부호화 장치의 일 실시예를 개략적으로 나타내는 블록도이다.
도 8의 실시예에서, 부호화 장치(800)는 예측부(810) 및 엔트로피 부호화부(820)를 포함할 수 있다. 또한, 예측부는 MPM 후보 리스트 생성부(813) 및 인트라 예측 모드 정보 생성부(816)를 더 포함할 수 있다.
도 8의 실시예에서 MPM 후보 리스트 생성 과정 및 인트라 예측 모드 정보 생성 과정은 별도의 구성에서 수행되는 것으로 설명되지만, 이는 설명의 편의와 발명의 이해를 위한 것으로, 본 발명은 이에 한정되지 않는다. 예컨대, MPM 후보 리스트 생성 과정 및 인트라 예측 모드 정보 생성 과정은 예측부에서 수행되는 일련의 프로세스의 일부에 해당될 수 있다. 뿐만 아니라, MPM 후보 리스트 생성부(813) 및/또는 인트라 예측 모드 정보 생성부(816)는 부호화 장치 내에 별도의 구성으로서 포함될 수도 있다.
도 8을 참조하면, MPM 후보 리스트 생성부(813)는 복수의 MPM 후보로 구성된 MPM 후보 리스트를 생성할 수 있다.
MPM 후보 리스트 생성부(813)는 현재 블록에 인접한 적어도 하나의 주변 블록의 인트라 예측 모드를 기반으로 적어도 하나의 MPM 후보를 유도하여 MPM 후보 리스트에 할당할 수 있다. 이 때, MPM 후보 리스트 생성부(813)는 주변 블록의 인트라 예측 모드를 그대로 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있고, 소정의 조건에 따라 결정된 별개의 인트라 예측 모드를 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있다. 여기서 일례로 현재 블록 및 주변 블록은 각각 PU에 해당되는 블록일 수 있다.
MPM 후보 리스트 생성 과정의 실시예들은 도 5 내지 도 7의 실시예에서 상술한 바 있으므로, 여기서는 이에 대한 구체적인 설명은 생략하기로 한다.
다시 도 8을 참조하면, 인트라 예측 모드 정보 생성부(816)는 MPM 후보 리스트를 기반으로 인트라 예측 모드에 대한 정보를 생성할 수 있다.
인트라 예측 모드 정보 생성부(816)에서 생성되는 인트라 예측 모드 관련 정보에는 MPM 플래그 정보, MPM 인덱스 정보 및 리메이닝 모드 정보 등이 있을 수 있다. 부호화 장치에서 생성되는 인트라 예측 모드 관련 정보에 대한 구체적인 실시예는 도 5에서 상술한 바 있으므로, 여기서는 이에 대한 구체적인 설명은 생략하기로 한다.
다시 도 8을 참조하면, 엔트로피 부호화부(820)는 인트라 예측 모드에 대한 정보에 대해 엔트로피 부호화를 수행할 수 있다. 또한, 엔트로피 부호화부(820)는 엔트로피 부호화된 정보를 복호화 장치로 전송할 수 있다. 여기서, 전송 과정은 엔트로피 부호화부(820)에서 수행되는 것으로 설명되지만, 이는 설명의 편의를 위한 것으로, 본 발명은 이에 한정되지 않는다. 예컨대, 전송 과정은 부호화 장치 내에 별도의 구성으로 포함되는 전송부를 통해 수행될 수도 있다.
도 8에서는 인트라 예측 모드에 관한 내용을 고려하여, 발명이 용이하게 이해될 수 있도록 부호화 장치의 동작 및 구성을 개략적으로 설명하였으나, 이는 설명의 편의를 위한 것으로서, 본 발명에서 부호화 장치의 동작 및 구성은 도 1에서 설명한 제 동작 및 구성을 포함할 수 있다.
도 9는 본 발명에 따라 인트라 예측을 수행하는 복호화 장치의 일 실시예를 개략적으로 나타내는 블록도이다.
도 9의 실시예에서, 복호화 장치(900)는 엔트로피 복호화부(910) 및 예측부(920)를 포함할 수 있다. 또한, 예측부는 MPM 후보 리스트 생성부(923), 인트라 예측 모드 결정부(926) 및 예측 블록 생성부(929)를 더 포함할 수 있다.
도 9의 실시예에서 MPM 후보 리스트 생성 과정, 인트라 예측 모드 결정 과정 및 예측 블록 생성 과정은 별도의 구성에서 수행되는 것으로 설명되지만, 이는 설명의 편의와 발명의 이해를 위한 것으로, 본 발명은 이에 한정되지 않는다. 예컨대, MPM 후보 리스트 생성 과정, 인트라 예측 모드 결정 과정 및 예측 블록 생성 과정은 각각 예측부에서 수행되는 일련의 프로세스의 일부에 해당될 수 있다. 뿐만 아니라, MPM 후보 리스트 생성부(923) 및/또는 인트라 예측 모드 결정부(926)는 복호화 장치 내에 별도의 구성으로서 포함될 수도 있다.
도 9를 참조하면, 엔트로피 복호화부(910)는 부호화 장치로부터 인트라 예측 모드에 대한 정보를 수신하여 엔트로피 복호화할 수 있다. 부호화 장치로부터 수신되는 인트라 예측 모드 관련 정보에는 MPM 플래그 정보, MPM 인덱스 정보 및/또는 리메이닝 모드 정보 등이 있을 수 있다. 여기서, 수신 과정은 엔트로피 복호화부(910)에서 수행되는 것으로 설명되지만, 이는 설명의 편의를 위한 것으로, 본 발명은 이에 한정되지 않는다. 예컨대, 수신 과정은 복호화 장치 내에 별도의 구성으로 포함되는 수신부를 통해 수행될 수도 있다.
다시 도 9를 참조하면, MPM 후보 리스트 생성부(923)는 복수의 MPM 후보로 구성된 MPM 후보 리스트를 생성할 수 있다. 이 때, MPM 후보 리스트 생성부(923)는 부호화 장치에서와 동일한 방식으로 MPM 후보를 도출하고 MPM 후보 리스트를 생성할 수 있다.
MPM 후보 리스트 생성부(923)는 현재 블록에 인접한 적어도 하나의 주변 블록의 인트라 예측 모드를 기반으로 적어도 하나의 MPM 후보를 유도하여 MPM 후보 리스트에 할당할 수 있다. 이 때, MPM 후보 리스트 생성부(923)는 주변 블록의 인트라 예측 모드를 그대로 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있고, 소정의 조건에 따라 결정된 별개의 인트라 예측 모드를 상기 주변 블록에 대응되는 MPM 후보로 사용할 수도 있다. 여기서 일례로 현재 블록 및 주변 블록은 각각 PU에 해당되는 블록일 수 있다.
MPM 후보 리스트 생성 과정의 실시예들은 부호화 장치에서의 MPM 후보 리스트 생성 과정과 동일하며 도 5 내지 도 7의 실시예에서 상술한 바 있으므로, 여기서는 이에 대한 구체적인 설명은 생략하기로 한다.
다시 도 9를 참조하면, 인트라 예측 모드 결정부(926)는 MPM 후보 리스트 및 인트라 예측 모드 관련 정보를 기반으로 현재 블록의 인트라 에측 모드를 결정할 수 있다.
인트라 예측 모드 결정부(926)는 부호화 장치로부터 수신된 MPM 플래그 정보를 기반으로 MPM 후보 리스트를 구성하는 복수의 MPM 후보 중에서 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는지 여부를 판단할 수 있다. MPM 후보 리스트 내에 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하는 경우, 인트라 예측 모드 결정부(926)는 MPM 인덱스 정보가 지시하는 MPM 후보를 현재 블록의 인트라 예측 모드로 결정할 수 있다. MPM 후보 리스트 내에 현재 블록의 인트라 예측 모드로 사용될 MPM 후보가 존재하지 않는 경우, 인트라 예측 모드 결정부(926)는 MPM 후보 리스트 및 부호화 장치로부터 수신된 리메이닝 모드 정보를 기반으로 현재 블록의 인트라 예측 모드를 결정할 수 있다.
다시 도 9를 참조하면, 예측 블록 생성부(929)는 현재 블록의 인트라 예측 모드를 기반으로 현재 블록에 대해 인트라 예측을 수행함으로써, 상기 현재 블록에 대응되는 예측 블록을 생성할 수 있다.
도 9에서는 인트라 예측 모드에 관한 내용을 고려하여, 발명이 용이하게 이해될 수 있도록 복호화 장치의 동작 및 구성을 개략적으로 설명하였으나, 이는 설명의 편의를 위한 것으로서, 본 발명에서 복호화 장치의 동작 및 구성은 도 2에서 설명한 제 동작 및 구성을 포함할 수 있다.
상술한 실시예들에서, 방법들은 일련의 단계 또는 블록으로써 순서도를 기초로 설명되고 있지만, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 상술한 실시예들은 다양한 양태의 예시들을 포함한다. 따라서, 본 발명은 이하의 특허청구범위 내에 속하는 모든 다른 교체, 수정 및 변경을 포함한다고 할 것이다.
지금까지 본 발명에 관한 설명에서 일 구성 요소가 타 구성 요소에 "연결되어" 있다거나 "접속되어"있다고 언급된 때에는, 상기 일 다른 구성 요소가 상기 타 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 상기 두 구성 요소 사이에 다른 구성 요소가 존재할 수도 있다고 이해되어야 한다. 반면에, 일 구성 요소가 타 구성 요소에 "직접 연결되어"있다거나 "직접 접속되어"있다고 언급된 때에는, 두 구성 요소 사이에 다른 구성요소가 존재하지 않는 것으로 이해되어야 한다.

Claims (3)

  1. 현재 블록의 인트라 예측 모드로 사용될 후보 모드를 지시하는 인덱스 정보를 수신하는 단계;
    상기 현재 블록에 대한 레지듀얼 샘플과 관련된 정보를 수신하는 단계;
    상기 현재 블록에 대한 복수의 후보 모드들을 포함하는 후보 모드 리스트를 구성하는 단계;
    상기 후보 모드 리스트를 구성하는 복수의 후보 모드들 중에서 상기 인덱스 정보에 의해 지시되는 후보 모드를 상기 현재 블록의 인트라 예측 모드로 결정하는 단계; 및
    상기 결정된 인트라 예측 모드를 기반으로 상기 현재 블록에 대한 인트라 예측을 수행하여 예측 샘플을 도출하는 단계를 포함하되,
    상기 레지듀얼 샘플과 관련된 정보를 기반으로 상기 현재 블록에 대한 상기 레지듀얼 샘플을 도출하는 단계;
    상기 예측 샘플과 상기 레지듀얼 샘플을 기반으로 상기 현재 블록에 대한 복원 샘플을 도출하는 단계; 및
    상기 복원 샘플에 대해 디블록킹 필터링을 적용하는 단계를 포함하되,
    상기 후보 모드 리스트를 구성하는 단계는,
    상기 현재 블록의 좌측에 인접한 제1 블록에 대응하는 제1 인트라 모드 및 상기 현재 블록의 상측에 인접한 제2 블록에 대응하는 제2 인트라 모드를 결정하고,
    상기 후보 모드 리스트의 상기 복수의 후보 모드들 중 첫번째 순서의 후보 모드 및 두번째 순서의 후보 모드를 결정하되,
    상기 제1 인트라 모드가 플래너 모드이고 상기 제2 블록이 가용하지 않음을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 플래너 모드로 결정되고 상기 두번째 순서의 후보 모드는 DC 모드로 결정되고,
    상기 제1 블록 및 상기 제2 블록 둘 다 가용하지 않음을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 플래너 모드로 결정되고 상기 두번째 순서의 후보 모드는 상기 DC 모드로 결정되고,
    상기 제1 인트라 모드가 상기 제2 인트라 모드와 다름을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 제1 인트라 모드로 결정되고, 상기 두번째 순서의 후보 모드는 상기 제2 인트라 모드로 결정되는 것을 특징으로 하는 영상 복호화 방법.
  2. 현재 블록에 대한 복수의 후보 모드들을 포함하는 후보 모드 리스트를 구성하는 단계;
    상기 후보 모드 리스트를 구성하는 상기 복수의 후보 모드들 중에서 상기 현재 블록의 인트라 예측 모드를 결정하는 단계;
    상기 인트라 예측 모드를 기반으로 상기 현재 블록에 대한 인트라 예측을 수행하여 예측 샘플을 도출하는 단계;
    상기 현재 블록의 상기 인트라 예측 모드를 나타내는 인덱스 정보를 생성하는 단계;
    상기 예측 샘플을 기반으로 레지듀얼 샘플을 도출하는 단계;
    상기 레지듀얼 샘플과 관련된 정보를 생성하는 단계; 및
    상기 인덱스 정보 및 상기 레지듀얼 샘플과 관련된 정보를 포함하는 비트스트림을 생성하는 단계를 포함하되,
    상기 후보 모드 리스트를 구성하는 단계는,
    상기 현재 블록의 좌측에 인접한 제1 블록에 대응하는 제1 인트라 모드 및 상기 현재 블록의 상측에 인접한 제2 블록에 대응하는 제2 인트라 모드를 결정하고,
    상기 후보 모드 리스트의 상기 복수의 후보 모드들 중 첫번째 순서의 후보 모드 및 두번째 순서의 후보 모드를 결정하되,
    상기 제1 인트라 모드가 플래너 모드이고 상기 제2 블록이 가용하지 않음을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 플래너 모드로 결정되고 상기 두번째 순서의 후보 모드는 DC 모드로 결정되고,
    상기 제1 블록 및 상기 제2 블록 둘 다 가용하지 않음을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 플래너 모드로 결정되고 상기 두번째 순서의 후보 모드는 상기 DC 모드로 결정되고,
    상기 제1 인트라 모드가 상기 제2 인트라 모드와 다름을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 제1 인트라 모드로 결정되고, 상기 두번째 순서의 후보 모드는 상기 제2 인트라 모드로 결정되는 것을 특징으로 하는 영상 부호화 방법.
  3. 영상 부호화 방법에 의해 생성된, 인코딩된 영상 정보를 저장하는 컴퓨터로 판독 가능한 저장 매체에 있어서, 상기 영상 부호화 방법은:
    현재 블록에 대한 복수의 후보 모드들을 포함하는 후보 모드 리스트를 구성하는 단계;
    상기 후보 모드 리스트를 구성하는 상기 복수의 후보 모드들 중에서 상기 현재 블록의 인트라 예측 모드를 결정하는 단계;
    상기 인트라 예측 모드를 기반으로 상기 현재 블록에 대한 인트라 예측을 수행하여 예측 샘플을 도출하는 단계;
    상기 현재 블록의 상기 인트라 예측 모드를 나타내는 인덱스 정보를 생성하는 단계;
    상기 예측 샘플을 기반으로 레지듀얼 샘플을 도출하는 단계;
    상기 레지듀얼 샘플과 관련된 정보를 생성하는 단계; 및
    상기 인덱스 정보 및 상기 레지듀얼 샘플과 관련된 정보를 포함하는 비트스트림을 생성하는 단계를 포함하되,
    상기 후보 모드 리스트를 구성하는 단계는,
    상기 현재 블록의 좌측에 인접한 제1 블록에 대응하는 제1 인트라 모드 및 상기 현재 블록의 상측에 인접한 제2 블록에 대응하는 제2 인트라 모드를 결정하고,
    상기 후보 모드 리스트의 상기 복수의 후보 모드들 중 첫번째 순서의 후보 모드 및 두번째 순서의 후보 모드를 결정하되,
    상기 제1 인트라 모드가 플래너 모드이고 상기 제2 블록이 가용하지 않음을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 플래너 모드로 결정되고 상기 두번째 순서의 후보 모드는 DC 모드로 결정되고,
    상기 제1 블록 및 상기 제2 블록 둘 다 가용하지 않음을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 플래너 모드로 결정되고 상기 두번째 순서의 후보 모드는 상기 DC 모드로 결정되고,
    상기 제1 인트라 모드가 상기 제2 인트라 모드와 다름을 기반으로, 상기 첫번째 순서의 후보 모드는 상기 제1 인트라 모드로 결정되고, 상기 두번째 순서의 후보 모드는 상기 제2 인트라 모드로 결정되는 것을 특징으로 하는 저장 매체.
KR1020237008798A 2011-12-05 2012-12-05 인트라 예측 방법 및 장치 KR102616815B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201161567055P 2011-12-05 2011-12-05
US61/567,055 2011-12-05
KR1020227011450A KR102511107B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
PCT/KR2012/010490 WO2013085282A1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020227011450A Division KR102511107B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20230040384A KR20230040384A (ko) 2023-03-22
KR102616815B1 true KR102616815B1 (ko) 2023-12-21

Family

ID=48574569

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020207033291A KR102271872B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
KR1020217019966A KR102386837B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
KR1020147008843A KR102182628B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
KR1020237008798A KR102616815B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
KR1020227011450A KR102511107B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치

Family Applications Before (3)

Application Number Title Priority Date Filing Date
KR1020207033291A KR102271872B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
KR1020217019966A KR102386837B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치
KR1020147008843A KR102182628B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020227011450A KR102511107B1 (ko) 2011-12-05 2012-12-05 인트라 예측 방법 및 장치

Country Status (5)

Country Link
US (7) US9554136B2 (ko)
EP (1) EP2760206A4 (ko)
KR (5) KR102271872B1 (ko)
CN (5) CN108174206A (ko)
WO (1) WO2013085282A1 (ko)

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL2942954T3 (pl) * 2011-10-24 2021-03-08 Innotive Ltd Aparat do dekodowania obrazu
WO2013085282A1 (ko) 2011-12-05 2013-06-13 엘지전자 주식회사 인트라 예측 방법 및 장치
US20150049821A1 (en) * 2013-08-16 2015-02-19 Qualcomm Incorporated In-loop depth map filtering for 3d video coding
MY181411A (en) * 2013-12-19 2020-12-21 Samsung Electronics Co Ltd Video encoding method and device involving intra prediction, and video decoding method and device
CN106134192B (zh) * 2014-03-25 2020-08-11 株式会社索思未来 图像解码装置、图像解码方法及集成电路
KR20170026276A (ko) * 2015-08-28 2017-03-08 주식회사 케이티 비디오 신호 처리 방법 및 장치
KR20170058837A (ko) 2015-11-19 2017-05-29 한국전자통신연구원 화면내 예측모드 부호화/복호화 방법 및 장치
EP4192009A1 (en) * 2015-11-19 2023-06-07 LX Semicon Co., Ltd. Method and apparatus for encoding/decoding intra prediction mode
CN105306953A (zh) * 2015-12-10 2016-02-03 腾讯科技（深圳）有限公司 图像编码方法和装置
CN106878752B (zh) * 2015-12-11 2022-03-04 北京三星通信技术研究有限公司 一种视频编码模式的编解码方法和装置
WO2017099385A1 (ko) * 2015-12-11 2017-06-15 삼성전자 주식회사 인트라 스킵 모드의 예측 방법을 나타내는 정보의 부호화 방법 및 장치, 복호화 방법 및 장치
WO2017176030A1 (ko) * 2016-04-06 2017-10-12 주식회사 케이티 비디오 신호 처리 방법 및 장치
FR3051309A1 (fr) * 2016-05-10 2017-11-17 Bcom Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image
US10547854B2 (en) * 2016-05-13 2020-01-28 Qualcomm Incorporated Neighbor based signaling of intra prediction modes
CN117201807A (zh) * 2016-08-01 2023-12-08 韩国电子通信研究院 图像编码/解码方法和装置以及存储比特流的记录介质
CA3037685C (en) 2016-09-20 2023-03-28 Bae Keun Lee Method and apparatus for processing video signal
US10506228B2 (en) 2016-10-04 2019-12-10 Qualcomm Incorporated Variable number of intra modes for video coding
CN109792521A (zh) * 2016-10-04 2019-05-21 韩国电子通信研究院 用于对图像进行编码/解码的方法和设备以及存储比特流的记录介质
KR20180046876A (ko) * 2016-10-28 2018-05-09 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US10911756B2 (en) * 2016-10-28 2021-02-02 Electronics And Telecommunications Research Institute Video encoding/decoding method and apparatus, and recording medium in which bit stream is stored
CN117041564A (zh) 2016-11-29 2023-11-10 成均馆大学校产学协力团 影像编码/解码方法、装置以及对比特流进行存储的记录介质
WO2018216862A1 (ko) * 2017-05-24 2018-11-29 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측에 따른 영상 디코딩 방법 및 장치
US10523934B2 (en) 2017-05-31 2019-12-31 Mediatek Inc. Split based motion vector operation reduction
EP3422717A1 (en) * 2017-06-26 2019-01-02 Thomson Licensing Method and apparatus for most probable mode (mpm) sorting and signaling in video encoding and decoding
CN111373755B (zh) 2017-11-16 2024-04-26 英迪股份有限公司 图像编码/解码方法和装置以及存储比特流的记录介质
WO2019096221A1 (en) * 2017-11-17 2019-05-23 Fg Innovation Ip Company Limited Device and method for coding video data based on adjusted intra mode list
WO2019129166A1 (en) * 2017-12-29 2019-07-04 Fg Innovation Ip Company Limited Device and method for coding video data based on mode list including different mode groups
US10771781B2 (en) * 2018-03-12 2020-09-08 Electronics And Telecommunications Research Institute Method and apparatus for deriving intra prediction mode
EP3777164A4 (en) * 2018-03-29 2021-03-17 Huawei Technologies Co., Ltd. IMAGE ENCODING AND DECODING, IMAGE ENCODER AND IMAGE DECODER
CN111937381A (zh) * 2018-04-01 2020-11-13 金起佰 使用帧内预测的图像编码/解码方法和装置
SG11202009345QA (en) * 2018-05-10 2020-10-29 Samsung Electronics Co Ltd Video encoding method and apparatus, and video decoding method and apparatus
US10778971B2 (en) * 2018-06-01 2020-09-15 Tencent America LLC Method and apparatus for video coding
WO2019245551A1 (en) * 2018-06-20 2019-12-26 Realnetworks, Inc. Intra-picture prediction in video coding systems and methods
FR3081657A1 (fr) * 2018-06-27 2019-11-29 Orange Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image.
CN112514379A (zh) * 2018-07-14 2021-03-16 Lg电子株式会社 图像编码系统中基于包括帧内预测信息的图像信息解码图像的方法及其设备
EP3821626A4 (en) 2018-08-09 2021-08-04 Huawei Technologies Co., Ltd. HISTORY-BASED INTRA MODE CODING PROCESS AND APPARATUS
CA3106487A1 (en) * 2018-08-27 2020-03-05 Huawei Technologies Co., Ltd. Method and apparatus for intra prediction
EP3811623A1 (en) * 2018-10-09 2021-04-28 Huawei Technologies Co., Ltd. Devices and methods for image and video coding
CN109547782B (zh) * 2018-11-28 2021-03-19 北京达佳互联信息技术有限公司 Mpm候选列表构建方法、装置、电子设备及存储介质
CN111263144B (zh) * 2018-11-30 2022-07-01 杭州海康威视数字技术股份有限公司 一种运动信息确定方法及其设备
CN113330742A (zh) * 2018-12-28 2021-08-31 韩国电子通信研究院 视频编码/解码方法、设备以及存储有比特流的记录介质
WO2020140217A1 (zh) * 2019-01-02 2020-07-09 Oppo广东移动通信有限公司 帧内预测方法及装置、计算机可读存储介质
CN116527893A (zh) * 2019-01-08 2023-08-01 Lg电子株式会社 解码设备、编码设备和数据发送设备
WO2020145620A1 (ko) * 2019-01-09 2020-07-16 엘지전자 주식회사 Mpm 리스트를 사용하는 인트라 예측 기반 영상 코딩 방법 및 장치
WO2020175918A1 (ko) * 2019-02-26 2020-09-03 엘지전자 주식회사 단일화된 mpm 리스트를 사용하는 인트라 예측 기반 영상 코딩 방법 및 장치
CN110267036B (zh) * 2019-03-11 2020-07-10 杭州海康威视数字技术股份有限公司 一种滤波方法及设备
US11405638B2 (en) * 2019-03-17 2022-08-02 Tencent America LLC Method and apparatus for video coding by determining intra prediction direction based on coded information of neighboring blocks
CN114128265A (zh) * 2019-06-13 2022-03-01 Lg 电子株式会社 简化mip模式映射的图像编码/解码方法和设备，以及发送比特流的方法
CN112188193A (zh) * 2019-07-01 2021-01-05 富士通株式会社 视频编码方法及装置、电子设备
CN113794883B (zh) * 2019-08-23 2022-12-23 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN116671103A (zh) * 2021-03-11 2023-08-29 Oppo广东移动通信有限公司 帧内预测方法、编码器、解码器以及存储介质
US11805245B2 (en) * 2021-08-16 2023-10-31 Mediatek Inc. Latency reduction for reordering prediction candidates

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7289672B2 (en) * 2002-05-28 2007-10-30 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode estimation
JP2006005438A (ja) * 2004-06-15 2006-01-05 Sony Corp 画像処理装置およびその方法
CN100348051C (zh) * 2005-03-31 2007-11-07 华中科技大学 一种增强型帧内预测模式编码方法
JP4722125B2 (ja) * 2005-04-01 2011-07-13 パナソニック株式会社 画像復号化装置及び画像復号化方法
CN101087427B (zh) * 2006-06-06 2011-04-06 北京大学深圳研究生院 一种h.264标准的帧内预测模式选择方法
KR100940444B1 (ko) * 2007-12-18 2010-02-10 한국전자통신연구원 공간적 에지 검출을 이용한 인트라 예측 모드 구성 방법
KR101306834B1 (ko) 2008-09-22 2013-09-10 에스케이텔레콤 주식회사 인트라 예측 모드의 예측 가능성을 이용한 영상 부호화/복호화 장치 및 방법
KR101128580B1 (ko) 2009-04-09 2012-03-23 한국전자통신연구원 화면내 예측 시스템에서 최적 모드를 예측하는 장치 및 방법
KR101507344B1 (ko) * 2009-08-21 2015-03-31 에스케이 텔레콤주식회사 가변 길이 부호를 이용한 인트라 예측모드 부호화 방법과 장치, 및 이를 위한기록 매체
CN101854551B (zh) * 2010-06-08 2012-08-15 浙江大学 帧内预测模式编解码方法及装置
US9654785B2 (en) * 2011-06-09 2017-05-16 Qualcomm Incorporated Enhanced intra-prediction mode signaling for video coding using neighboring mode
KR20110111339A (ko) * 2011-08-23 2011-10-11 한국전자통신연구원 화면내 예측 시스템에서 최적 모드를 예측하는 장치 및 방법
KR101611409B1 (ko) * 2011-09-28 2016-04-14 한국전자통신연구원 인트라 예측 모드 부호화/복호화 방법 및 장치
HUE055825T2 (hu) * 2011-10-18 2021-12-28 Lg Electronics Inc Eljárás intra predikcióra, valamint hozzá való készülék
CN104935942B (zh) 2011-10-24 2016-08-24 英孚布瑞智有限私人贸易公司 对帧内预测模式进行解码的方法
KR20130049525A (ko) * 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법
WO2013085282A1 (ko) * 2011-12-05 2013-06-13 엘지전자 주식회사 인트라 예측 방법 및 장치
WO2014107083A1 (ko) * 2013-01-07 2014-07-10 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US10368977B2 (en) 2015-12-29 2019-08-06 Cook Medical Technologies Llc Endograft with at least two branch portions

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Mei Guo, et., al, "CE 14 Subtest 1 : The Most Probable Mode Signaling for Luma", Joint collaborative team on viedo coding of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 5th meeting, 16-23, March, 2011,*
Toru Kumakura, et., al, "Fixing the number of mpm candidates", Joint collaborative team on viedo coding of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 6th meeting, 14-22, July, 2011, JCTVC-F340.*
Wei-Jung Chien, et., al, "Parsing friendly intra mode coding", Joint collaborative team on viedo coding of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 6th meeting, 14-22, July, 2011, JCTVC-F459.*

Also Published As

Publication number Publication date
CN108174205A (zh) 2018-06-15
US11375206B2 (en) 2022-06-28
US10887605B2 (en) 2021-01-05
US10368077B2 (en) 2019-07-30
US20230217031A1 (en) 2023-07-06
CN103891283B (zh) 2018-03-16
US20160044310A1 (en) 2016-02-11
US20210092407A1 (en) 2021-03-25
CN108235008A (zh) 2018-06-29
KR20140098054A (ko) 2014-08-07
US20220295078A1 (en) 2022-09-15
CN108174206A (zh) 2018-06-15
CN103891283A (zh) 2014-06-25
KR102386837B1 (ko) 2022-04-14
US20170142422A1 (en) 2017-05-18
EP2760206A1 (en) 2014-07-30
US9554136B2 (en) 2017-01-24
WO2013085282A1 (ko) 2013-06-13
US11627326B2 (en) 2023-04-11
KR102511107B1 (ko) 2023-03-17
CN108184121A (zh) 2018-06-19
US20180131945A1 (en) 2018-05-10
KR102271872B1 (ko) 2021-07-01
KR20200133023A (ko) 2020-11-25
US9866843B2 (en) 2018-01-09
KR20220047681A (ko) 2022-04-18
KR20230040384A (ko) 2023-03-22
EP2760206A4 (en) 2015-06-03
KR102182628B1 (ko) 2020-11-24
US20190349591A1 (en) 2019-11-14
KR20210082558A (ko) 2021-07-05
US11924441B2 (en) 2024-03-05

Similar Documents

Publication Publication Date Title
KR102616815B1 (ko) 인트라 예측 방법 및 장치
KR102498289B1 (ko) 인터 예측 방법 및 그 장치
KR102512333B1 (ko) 인트라 예측 방법 및 그 장치
KR101718954B1 (ko) 영상 부호화/복호화 방법 및 그 장치

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant