KR20170125155A - 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치 - Google Patents

화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치 Download PDF

Info

Publication number
KR20170125155A
KR20170125155A KR1020160054610A KR20160054610A KR20170125155A KR 20170125155 A KR20170125155 A KR 20170125155A KR 1020160054610 A KR1020160054610 A KR 1020160054610A KR 20160054610 A KR20160054610 A KR 20160054610A KR 20170125155 A KR20170125155 A KR 20170125155A
Authority
KR
South Korea
Prior art keywords
intra
interpolation filter
filter
prediction
current block
Prior art date
Application number
KR1020160054610A
Other languages
English (en)
Inventor
안용조
심동규
류호찬
Original Assignee
인텔렉추얼디스커버리 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔렉추얼디스커버리 주식회사 filed Critical 인텔렉추얼디스커버리 주식회사
Priority to KR1020160054610A priority Critical patent/KR20170125155A/ko
Priority to EP17789837.6A priority patent/EP3451668A4/en
Priority to CN202111349451.2A priority patent/CN114189682A/zh
Priority to CN202111347572.3A priority patent/CN114189678A/zh
Priority to CN202111349439.1A priority patent/CN114189681A/zh
Priority to CN202111347573.8A priority patent/CN114189679A/zh
Priority to EP21171150.2A priority patent/EP3968634A1/en
Priority to CN202111347576.1A priority patent/CN114189680A/zh
Priority to PCT/KR2017/004192 priority patent/WO2017188652A1/ko
Priority to US16/096,704 priority patent/US11368682B2/en
Priority to CN201780038491.0A priority patent/CN109417637B/zh
Publication of KR20170125155A publication Critical patent/KR20170125155A/ko
Priority to US17/747,309 priority patent/US11882275B2/en
Priority to US18/351,775 priority patent/US20230362365A1/en
Priority to KR1020230109695A priority patent/KR20230126694A/ko
Priority to US18/537,375 priority patent/US20240205393A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H04N19/615Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 비디오 압축 기술 중 화면 내 예측의 참조 화소 생성을 위한 보간 필터 방법 및 장치에 관한 것이다.

Description

화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치{VIDEO CODING METHOD AND APPARATUS USING INTERPOLATION FILTER FOR INTRA PREDICTION}
본 발명은 영상 처리기술에 관한 것으로서, 보다 상세하게는 비디오압축 기술에서 화면 내 예측 (intra prediction)을 수행하는 방법 및 장치에 관한 것이다.
최근 고해상도, 고화질 비디오에 대한 요구가 증가함에 따라 차세대 비디오 서비스를 위한 고효율 비디오 압축 기술에 대한 필요성이 대두되었다. 이러한 필요성에 기반하여 H.264/AVC 비디오 압축 표준을 공동으로 표준화 했던 MPEG과 VCEG은 JCT-VC (Joint Collaborative Team on Video Coding)을 결성하여 2013년 1월 최신 국제 비디오 압축 표준인 HEVC에 대한 표준화를 완료하였다.
비디오 압축 기술에서 화면 내 예측 (intra prediction)은 H.264/AVC, HEVC와 같은 비디오 압축에서 사용되는 알고리즘으로 동일한 픽쳐 내의 이미 복원된 화소 정보를 이용하여 예측을 수행하는 방법이다. 화면 내 예측의 성능은 화면 내 예측을 수행하는 예측 방향성, 예측 모드의 갯수, 참조 화소의 생성등에 따라 부호화 성능이 좌우된다. H.264/AVC는 최대 9개의 화면 내 예측 모드 및 8개의 방향성을 이용하여 화면 내 예측을 수행하며, HEVC에서는 최대 35개의 화면 내 예측 모드 및 33개의 방향성을 이용하여 화면 내 예측을 수행한다. 화면 내 예측 모드 갯수의 증가 및 화면 내 예측 모드의 방향성 증가를 통하여 HEVC는 H.264/AVC 대비 높은 화면 내 예측 성능 향상을 보인다. 즉, 화면 내 예측에 사용되는 예측 방향성 및 참조 화소 생성 방법 및 장치는 화면 내 예측 부호화 성능을 향상시키는데 주요한 영향을 미친다.
본 발명은 다양해지는 화면 내 예측 방향성에 따른 참조 화소의 보간 필터 적용 및 선택적 보간 필터 적용을 통하여 기존의 비디오 압축 기술 대비 부호화 효율을 향상시키는 방법 및 장치를 제공하는 것을 그 목적으로 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상기 과제를 해결하기 위하여 본 발명의 실시예에 따른 비디오 코딩 방법 및 장치는 화면 내 예측 화소 보간 필터 수행 여부 정보 획득부, 상기 획득된 화면 내 예측 화소 보간 필터 수행 여부가 참인 경우에 대하여 화면 내 예측 화소 보간 필터를 수행하는 화면 내 예측 보간 필터부, 및 상기 화면 내 예측 화소 보간 필터 수행을 통해 보간된 화소와 현재 블록의 화면 내 예측 모드에 따라 참조 화소를 생성하는 참조 화소 생성부를 포함한다.
상기 과제를 해결하기 위하여 본 발명의 실시예에 따른 비디오 코딩 방법 및 장치는 화면 내 예측 화소 보간 필터를 수행함에 있어 현재 블록의 크기에 따라 적어도 하나의 필터 종류를 선택하는 블록 크기에 따른 보간 필터 결정부, 상기 선택된 필터 종류와 현재 블록의 화면 내 예측 모드의 방향성에 따라 보간 필터의 필터 계수를 선택하는 방향성에 따른 보간 필터 결정부, 상기 결정되 필터 계수를 이용하여 보간 필터를 수행하는 화면 내 예측 보간 필터 수행부를 포함한다.
상기 과제를 해결하기 위하여 본 발명의 실시예에 따른 비디오 코딩 방법 및 장치는 화면 내 예측 화소 보간 필터를 수행함에 있어 현재 블록의 화면 내 예측 모드의 방향성에 따라 적어도 하나의 필터 종류와 필터 계수를 선택하는 방향성에 따른 보간 필터 결정부, 상기 결정된 필터 계수를 이용하여 보간 필터를 수행하는 화면 내 예측 보간 필터 수행부를 포함한다.
본 발명은 부호화 효율 향상을 위하여 비디오 압축 기술에서 사용하는 특정 방향성을 갖는 화면 내 예측 모드의 참조 화소 생성을 위한 향상된 보간 필터를 적용하는 방법 및 장치를 제공하는 것을 그 목적으로 한다.
본 발명의 일 실시예에 따르면, 기존의 특정 방향성을 갖는 화면 내 예측 모드의 참조 화소 생성을 위한 선형 보간 필터를 사용하는 방법 대비 향상된 보간 필터, 블록 크기에 적응적인 필터의 종류 선택, 화면 내 예측 방향성에 따른 보간 필터 계수의 사용을 이용하여 화면 내 예측 성능을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 비디오 부호화 장치의 구성을 나타내는 블록도를 도시한다.
도 2는본 발명의 일 실시예에 따른 비디오복호화 장치의 구성을 나타내는 블록도를 도시한다.
도 3은 본 발명의 일 실시예에 따른 선형 필터를 이용한 화면 내 예측을 위한 보간 필터 적용의 일 예를 나타내는 개념도를 도시한다.
도 4는 본 발명의 일 실시예에 따른 적응적 화면 내 예측 보간 필터 여부 및 필터의 종류를 명시하는 신택스의 일 예를 나타내는 표를 도시한다.
도 5는 본 발명의 일 실시예에 따른 화면 내 예측 수행에 대한 순서도를 도시한다.
도 6은 본 발명의 일 실시예에 따른 화면 내 예측 화소 생성에 대한 순서도를 도시한다.
도 7은 본 발명의 일 실시예에 따른 화면 내 예측 화소 보간 필터 수행에 대한 순서도를 도시한다.
도 8은 본 발명의 일 실시예에 따른 다수 개의 탭을 사용하는 화면 내 예측 화소 보간 필터의 일 예를 나타내는 개념도를 도시한다.
하기는 본 명세서에 첨부된 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다.
또한, 본 명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.
본 명세서 전체에서 사용되는 정도의 용어 ~(하는) 단계 또는 ~의 단계는 ~를 위한 단계를 의미하지 않는다.
또한, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
덧붙여, 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 기술되고, 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다.이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
이하 본 명세서에 기재된 본 발명의 다양한 실시예들에서, 화면 내 예측의 참조 화소는 화면 내 예측 수행을 위해 비디오 부호화 및 복호화 단계에서 참조하는 화소를 지칭하며, 화면 내 예측 참조 화소를 위한 보간 필터는 비디오 부호화 및 복호화 단계에서 화면 내 예측의 참조 화소를 정수 정밀도를 갖는 인접한 참조 화소들 사이에 위치하는 실수 정밀도를 갖는 참조 화소를 생성하기 위한 필터를 지칭한다. 전술한 화면 내 예측의 참조 화소 및 보간 필터는 공간적으로 인접하지 않은 참조 화소를 이용하는 화면 내 예측 부호화 및 복호화에서의 참조 화소 및 이를 위한 보간 필터를 모두 포함하여 포괄적으로 지칭할 수 있다.
이하 본 발명의 일 실시예에 따라 제안하는 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치에 대하여 도 7을 참조하여 구체적으로 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 비디오 부호화 방법 및 장치의 구성을 나타내는 블록도를 도시한다.
일 실시예에 따른 비디오 부호화 방법 및 장치는 화면 간 예측부(120), 화면 내 예측부(125), 감산부(130), 변환부(140), 양자화부(150), 엔트로피 부호화부(160), 역변환부(145), 역양자화부(155), 가산부(135), 인루프 필터부(180), 복원 픽쳐 버퍼(190)를 포함할 수 있다.
화면 간 예측부(120)는 입력 영상(110)과 복원 픽쳐 버퍼(190)에 저장되어 있는 복원 영상을 이용하여 움직임 예측을 수행하여 예측 신호를 생성한다.
화면 내 예측부(125)는 부호화되는 현재 블록과 인접하는 기-복원된 주변 블록의 화소 값을 이용하여 공간적 예측을 수행하여 예측 신호를 생성한다.
감산부(130)는 입력 영상과 화면 간 예측부(120) 혹은 화면 내 예측부(125)를 통해 생성된 예측 신호를 이용하여 잔차 신호(residual signal)를 생성한다.
변환부(140) 및 양자화부(150)는 감산부(130)을 통해 생성된 잔차 신호에 대하여 변환 및 양자화를 수행하여 양자화된 계수(quantized coefficient)를 생성한다.
엔트로피 부호화부(160)는 비디오 부호화기에 정의된 신택스 요소(syntax elements) 및 양자화된 계수 등과 같은 부호화 정보에 대하여 엔트로피 부호화를 수행하여 비트스트림을 출력한다.
역변환부(145) 및 역양자화부(155)는 양자화 계수를 수신하여 역양자화 및 역변환을 차례대로 수행하고, 복원된 잔차 신호를 생성한다.
가산부(135)는 화면 간 예측부(120) 혹은 화면 내 예측부(125)를 통해 생성된 예측 신호와 복원된 잔차 신호를 이용하여 복원 신호를 생성한다.
복원 신호는 인루프 필터부(180)로 전달된다. 필터링이 적용된 복원 픽쳐는 복원 픽쳐 버퍼(190)에 저장되며, 화면 간 예측부(120)에서 참조 픽쳐로 사용될 수 있다.
도 2는 본 발명의 일 실시예에 따른 비디오 복호화 장치 및 방법의 구성을 나타내는 블록도를 도시한다.
일 실시예에 따른 비디오 복호화 장치 및 방법은 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 화면 내 예측부(240), 화면 간 예측부(250), 가산부(260), 인루프 필터부(270), 복원 픽쳐 버퍼(280)를 포함할 수 있다.
엔트로피 복호화부(210)는 입력된 비트스트림(200)을 복호화하여 신택스 요소(syntax elements) 및 양자화된 계수 등과 같은 복호화 정보를 출력한다.
역양자화부(220) 및 역변환부 (230)는 양자화 계수를 수신하여 역양자화 및 역변환을 차례대로 수행하고, 잔차 신호(residual signal)를 출력한다.
화면 내 예측부(240)는 복호화되는 현재 블록과 인접하는 기-복호화된 주변 블록의 화소 값을 이용하여 공간적 예측을 수행하여 예측 신호를 생성한다.
화면 간 예측부(250)는 비트스트림으로부터 추출된 움직임 벡터와 복원 픽쳐 버퍼(280)에 저장되어 있는 복원 영상을 이용하여 움직임 보상을 수행하여 예측 신호를 생성한다.
화면 내 예측부(240)와 화면 내 예측부(250)로부터 출력된 예측 신호는 가산부(260)를 통해 잔차 신호와 합해지고, 그에 따라 블록 단위로 생성된 복원 신호는 복원된 영상을 포함한다.
복원된 영상은 인루프 필터부(270)로 전달된다. 필터링이 적용된 복원 픽쳐는 복원 픽쳐 버퍼(280)에 저장되며, 화면 간 예측부(250)에서 참조 픽쳐로 사용될 수 있다.
도 3은 본 발명의 일 실시예에 따른 선형 필터를 이용한 화면 내 예측을 위한 보간 필터 적용의 일 예를 나타내는 개념도를 도시한다.
일 실시예에 따른 선형 필터를 이용한 화면 내 예측을 위한 보간 필터 적용은 현재 블록 (310)내의 위치 정보를 기반으로 현재 블록의 화면 내 예측 모드의 방향성에 따라 정수 정밀도를 갖는 참조 화소 (331, 332) 사이의 보간된 참조 화소 (320)를 생성하기 위한 방법 및 장치를 포함한다.
현재 블록 (310)내의 위치 정보를 기반으로 화면 내 예측 모드의 방향성에 따라 참조 화소에 대한 보간이 필요한 화면 내 예측 모드인 경우, 정수 정밀도를 갖는 참조 화소 (331, 332) 사이의 보간된 참조 화소 (320)를 생성하여 화면 내 예측을 수행한다.
일 실시예에 따른 선형 필터를 이용한 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 전술한 보간된 참조 화소의 생성을 위하여 현재 블록 (310)내의 화소 위치 정보를 토대로 두 정수 정밀도의 참조 화소 P0 (331)과P1 (332)의 위치와 두 정수 정밀도의 참조 화소 P0 (331)과 P1 (332) 사이에서의 보간된 참조 화소 (320)의 위치 정보, 즉, 실수 정밀도의 위치 정보를 획득하는 단계를 포함한다.
두 정수 정밀도의 참조 화소 P0 (331)과 P1 (332) 사이를 다수개의 실수 정밀도를 갖는 보간 화소 위치로 분할하고, 현재 블록의 화면 내 예측 모드의 방향성에 따라 보간 화소 위치를 결정한다. 도 3에서는 두 정수 정밀도의 참조 화소 P0 (331)과 P1 (332) 사이를 32개의 실수 정밀도를 갖는 보간 화소 위치로 분할한 예 (340)를 나타낸다. 이때, 보간된 참조화소 (320)의 위치는 13/32를 나타내며, 이 위치를 기반으로 P0와 P1에 선형 필터를 적용한 화소 보간을 수행한다.
도 4는 본 발명의 일 실시예에 따른 적응적 화면 내 예측 보간 필터 여부 및 필터의 종류를 명시하는 신택스의 일 예를 나타내는 표를 도시한다.
일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 적응적 화면 내 예측 보간 필터의 수행 여부에 대하여 VPS (Video Parameter Set), SPS (Sequence Parameter Set), PPS (Picture Parameter Set), 또는 슬라이스 헤더 중 적어도 하나에서 플래그 형태로 전송하는 것을 포함한다.
일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 화면 내 예측 보간 필터의 종류를 SPS (Sequence Parameter Set), PPS (Picture Parameter Set), 또는 슬라이스 헤더 중 적어도 하나에서 전송하는 것을 포함한다.
일 실시예에 따르면 적응적 화면 내 예측 보간 필터의 수행 여부는 플래그 형태로 전송될 수 있으며, 도 4에서는 적응적 화면 내 예측 보간 필터의 수행 여부를 SPS에서 전송하는 일 예를 나타낸다. 또한, 화면 내 예측 보간 필터의 종류는 적응적 화면 내 예측 보간 필터의 수행 여부에 따라서 혹은 화면 내 예측 보간 필터가 기본적으로 사용되는 경우 단독으로 전송될 수 있다. 화면 내 예측 보간 필터의 종류는 선형 보간 필터 (linear interpolation filter), 입방체 보간 필터 (Cubic interpolation filter), 가우시안 보간 필터 (Gaussian interpolation filter) 등을 포함한다. 이때, 일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 전술한 다수개의 보간 필터 종류 중 적어도 하나의 보간 필터 종류를 선택하여 사용하는 것을 포함한다.
도 5는 본 발명의 일 실시예에 따른 화면 내 예측 수행에 대한 순서도를 도시한다.
일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 화면 내 예측을 수행함에 있어, 참조 화소 패딩부 (520), 모드-의존적 화면 내 예측 화소 필터부 (530), 화면 내 예측 화소 생성부 (540), 및 화면 내 예측 복원부 (550)를 포함한다.
일 실시예에 따른 참조 화소 패딩부 (520)는 화면 내 예측을 수행함에 있어, 현재 블록과 공간적으로 인접한 복원 화소 중 복원되지 않은 화소 혹은 참조 불가능한 화소를 판단하고, 이에 대하여 이미 복원된 화소 혹은 참조 가능한 화소를 이용하여 현재 블록에서 참조하는 모든 위치의 화소를 패딩하는 것을 포함한다.
일 실시예에 따른 모드-의존적 화면 내 예측 화소 필터부 (540)는 현재 블록의 화면 내 예측 모드에 따라 현재 블록의 정수 정밀도를 갖는 참조 화소에 대하여 필터링을 수행하는 것을 포함한다. 이때, 수행하는 필터링 연산은 정수 정밀도를 갖는 참조 화소들만을 이용하여 정수 정밀도의 필터링이 수행된 화소를 생성하기 위한 목적을 갖는다.
일 실시예에 따른 화면 내 예측 화소 생성부 (540)는 현재 블록의 화면 내 예측 모드에 따라 화면 내 예측 참조 화소를 생성한다. 이때, 현재 블록의 화면 내 예측 참조 화소를 생성하기 위하여 화면 내 예측 모드에 따라 화면 내 예측 화소 보간 필터 수행을 수행하여 참조 화소를 생성하는 것을 포함한다.
일 실시예에 따른 화면 내 예측 복원부 (550)는 화면 내 예측 화소 생성부 (540)을 통해 생성된 화면 내 예측 참조 화소들과 현재 블록의 복원된 차분 신호를 합산하여 화면 내 예측의 복원 화소를 생성하는 것을 포함한다.
도 6은 본 발명의 일 실시예에 따른 화면 내 예측 화소 생성에 대한 순서도를 도시한다.
일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 화면 내 예측 화소를 생성함에 있어, 화면 내 예측 화소 보간 필터 수행 판단부 (620), 화면 내 예측 화소 보간 필터 수행부 (630), 모드에 따른 참조 화소 생성부 (640)을 포함한다.
일 실시예에 따른 화면 내 예측 화소 보간 필터 수행 판단부 (620)는 화면 내 예측 화소 보간 필터 수행 여부와 현재 블록의 화면 내 예측 모드를 이용하여 현재 블록에 대한 화면 내 예측 화소 보간 필터 수행을 판단하는 것을 포함한다. 화면 내 예측 화소 보간 필터 수행을 하지 않는 경우이거나 혹은 DC, Planar, Horizontal, Vertical 모드 및 정수 정밀도의 화소에서 참조를 수행하는 방향성 모드에 대해서는 화면 내 예측 화소 보간 필터를 수행하지 않는 것을 포함한다.
일 실시예에 따른 화면 내 예측 화소 보간 필터 수행부 (630)는 DC, Planar, Horizontal, Vertical 모드 및 정수 정밀도의 화소에서 참조를 수행하는 방향성 모드를 제외한 나머지 방향성을 갖는 모드에 대하여 화면 내 예측 화소 보간 필터를 수행하는 것을 포함한다. 또한, 화면 내 블록 카피의 경우, 화면 내의 이미 복원된 영역에 대한 위치 정보를 나타내는 벡터가 정수 정밀도가 아닌 실수 정밀도를 나타내는 위치를 의미할 때 화면 내 예측 화소 보간 필터를 수행하는 것을 포함한다.
도 7은 본 발명의 일 실시예에 따른 화면 내 예측 화소 보간 필터 수행에 대한 순서도를 도시한다.
일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 화면 내 예측 화소 보간 필터를 수행함에 있어, 블록 크기에 따른 보간 필터 결정부 (720), 방향성에 따른 보간 필터 결정부 (730), 보간 필터 수행부 (740)을 포함한다.
일 실시예에 따른 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 화면 내 예측 화소 보간 필터를 수행함에 있어, 방향성에 따른 보간 필터 결정부 (730), 보간 필터 수행부 (740)을 포함한다.
일 실시예에 따른 블록 크기에 따른 보간 필터 결정부 (720)는 현재 부호화 및 복호화하는 블록의 크기에 따라 적어도 하나 이상의 화면 내 예측을 위한 보간 필터를 결정하는 것을 포함한다. 일 예로 4x4 블록과 8x8 블록에서는 동일한 종류의 보간 필터를 사용하고, 16x16 블록과 32x32 블록, 그 이상의 크기를 갖는 블록에서는 4x4 블록과 8x8 블록과 다른 종류의 보간 필터를 사용하는 것을 포함할 수 있다. 또한, 모든 블록 크기에서 동일한 종류의 보간 필터를 사용할 수도 있으며, 혹은 모든 블록 크기에서 서로 다른 종류의 보간 필터를 사용하는 것을 포함할 수 있다. 전술한 보간 필터의 종류라 함은 보간 필터 계수의 형태, 필터에 사용되는 필터 탭의 갯수에 따른 종류를 지칭한다.
일 실시예에 따른 방향성에 따른 보간 필터 결정부 (730)는 현재 블록의 화면 내 예측 모드의 방향성에 따라 보간에 사용하는 필터의 계수를 결정하는 것을 포함한다. 방향성에 따른 보간 필터 결정부 (730)에서 사용하는 보간 필터의 종류는 블록 크기에 따른 보간 필터 결정부 (720)에서 결정된 보간 필터의 종류를 포함하고, 블록 크기에 따른 보간 필터가 동일한 경우에는 이미 지정된 보간 필터를 사용하되 현재 블록의 화면 내 예측 모드의 방향성에 따라서만 보간에 사용하는 필터의 계수를 결정하는 것을 포함한다. 또한, 현재 블록의 화면 내 예측 모드의 방향성에 따라서만 보간에 사용하는 필터의 종류를 달리하는 것을 포함한다.
도 8은 본 발명의 일 실시예에 따른 다수 개의 탭을 사용하는 화면 내 예측 화소 보간 필터의 일 예를 나타내는 개념도를 도시한다.
일 실시예에 따른 다수 개의 탭을 사용하는 화면 내 예측 화소 보간 필터를 사용하는 비디오 코딩 방법 및 장치에서는 보간 필터의 탭 수를 블록의 크기, 화면 내 예측 모드의 방향성, 혹은 전술한 정보를 바탕으로 시그널링된 정보 중 적어도 하나의 정보에 따라 적응적으로 사용하는 것을 포함한다.
일 실시예에 따른 다수 개의 탭을 사용하는 화면 내 예측 화소 보간 필터를 사용하는 비디오 코딩 방법 및 장치에서는 현재 블록 (810)내의 위치 정보를 기반으로 현재 블록의 화면 내 예측 모드의 방향성에 따라 정수 정밀도를 갖는 참조 화소 (831, 832, 833, 834) 사이의 보간된 참조 화소 (820)를 생성하기 위한 방법 및 장치를 포함한다.
현재 블록 (810)내의 위치 정보를 기반으로 화면 내 예측 모드의 방향성에 따라 참조 화소에 대한 보간이 필요한 화면 내 예측 모드인 경우, 정수 정밀도를 갖는 참조 화소 (831, 832, 833, 834) 사이의 보간된 참조 화소 (820)를 생성하여 화면 내 예측을 수행한다.
일 실시예에 따른 4개의 탭수를 갖는 보간 필터를 이용한 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 전술한 보간된 참조 화소의 생성을 위하여 현재 블록 (810)내의 화소 위치 정보를 토대로 네 정수 정밀도의 참조 화소 P0 (831),P1 (832), P2 (833), P3 (834)의 위치와 두 정수 정밀도의 참조 화소 P1 (832),P2 (833) 사이에서의 보간된 참조 화소 (820)의 위치 정보, 즉, 실수 정밀도의 위치 정보를 획득하는 단계를 포함한다. 네 정수 정밀도의 참조 화소 P0 (831), P1 (832), P2 (833), P3 (834)의 위치와 현재 블록 (810)내의 화소 위치 정보, 화면 간 예측 방향성을 이용하여 결정된 필터 탭 계수를 이용하여 보간 필터를 수행하여 보간된 참조 화소 (820)을 획득한다.
일 실시예에 따른 다수 개의 탭을 사용하는 화면 내 예측 화소 보간 필터를 사용하는 비디오 코딩 방법 및 장치에서는 현재 블록 (840)내의 위치 정보를 기반으로 현재 블록의 화면 내 예측 모드의 방향성에 따라 정수 정밀도를 갖는 참조 화소 (861, 862, 863, 864, 865, 866) 사이의 보간된 참조 화소 (850)를 생성하기 위한 방법 및 장치를 포함한다.
현재 블록 (840)내의 위치 정보를 기반으로 화면 내 예측 모드의 방향성에 따라 참조 화소에 대한 보간이 필요한 화면 내 예측 모드인 경우, 정수 정밀도를 갖는 참조 화소(861, 862, 863, 864, 865, 866) 사이의 보간된 참조 화소 (850)를 생성하여 화면 내 예측을 수행한다.
일 실시예에 따른 여섯개의 탭수를 갖는 보간 필터를 이용한 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치는 전술한 보간된 참조 화소의 생성을 위하여 현재 블록 (840)내의 화소 위치 정보를 토대로 여섯개의 정수 정밀도의 참조 화소 P0 (861), P1 (862), P2 (863), P3 (864), P4 (865), P5 (866)의 위치와 두 정수 정밀도의 참조 화소 P1 (862), P3 (864) 사이에서의 보간된 참조 화소 (850)의 위치 정보, 즉, 실수 정밀도의 위치 정보를 획득하는 단계를 포함한다. 여섯개의 정수 정밀도의 참조 화소 P0 (861), P1 (862), P2 (863), P3 (864), P4 (865), P5 (866)의 위치와 현재 블록 (840)내의 화소 위치 정보, 화면 간 예측 방향성을 이용하여 결정된 필터 탭 계수를 이용하여 보간 필터를 수행하여 보간된 참조 화소 (850)을 획득한다.

Claims (6)

  1. 비디오 부호화 및 복호화 방법에 있어서,
    화면 내 예측 화소 보간 필터 수행 여부 정보를 획득하는 단계;
    상기 획득된 화면 내 예측 화소 보간 필터 수행 여부가 참인 경우에 대하여 화면 내 예측 화소 보간 필터를 수행하는 단계; 및
    상기 화면 내 예측 화소 보간 필터 수행을 통해 보간된 화소와 현재 블록의 화면 내 예측 모드에 따라 참조 화소를 생성하는 단계를 포함하는 것을 특징으로 하는 비디오 부호화 및 복호화 방법.
  2. 제 1항에 있어서,
    화면 내 예측 화소 보간 필터를 수행하는 단계는
    현재 블록의 크기에 따라 적어도 하나의 필터 종류를 선택하는 단계;
    상기 선택된 필터 종류와 현재 블록의 화면 내 예측 모드의 방향성에 따라 보간 필터의 필터 계수를 선택하는 단계; 및
    상기 결정된 필터 계수를 이용하여 보간 필터를 수행하는 단계를 포함하는 것을 특징으로 하는 비디오 부호화 및 복호화 방법.
  3. 제 1항에 있어서,
    화면 내 예측 화소 보간 필터를 수행하는 단계는
    현재 블록의 화면 내 예측 모드의 방향성에 따라 적어도 하나의 필터 종류와 필터 계수를 선택하는 단계; 및
    상기 결정된 필터 계수를 이용하여 보간 필터를 수행하는 단계를 포함하는 것을 특징으로 하는 비디오 부호화 및 복호화 방법.
  4. 비디오 부호화 및 복호화 장치에 있어서,
    화면 내 예측 화소 보간 필터 수행 여부 정보를 획득하는 단계;
    상기 획득된 화면 내 예측 화소 보간 필터 수행 여부가 참인 경우에 대하여 화면 내 예측 화소 보간 필터를 수행하는 단계; 및
    상기 화면 내 예측 화소 보간 필터 수행을 통해 보간된 화소와 현재 블록의 화면 내 예측 모드에 따라 참조 화소를 생성하는 단계를 포함하는 것을 특징으로 하는 비디오 부호화 및 복호화 장치.
  5. 제 1항에 있어서,
    화면 내 예측 화소 보간 필터를 수행하는 단계는
    현재 블록의 크기에 따라 적어도 하나의 필터 종류를 선택하는 단계;
    상기 선택된 필터 종류와 현재 블록의 화면 내 예측 모드의 방향성에 따라 보간 필터의 필터 계수를 선택하는 단계; 및
    상기 결정된 필터 계수를 이용하여 보간 필터를 수행하는 단계를 포함하는 것을 특징으로 하는 비디오 부호화 및 복호화 장치.
  6. 제 1항에 있어서,
    화면 내 예측 화소 보간 필터를 수행하는 단계는
    현재 블록의 화면 내 예측 모드의 방향성에 따라 적어도 하나의 필터 종류와 필터 계수를 선택하는 단계; 및
    상기 결정된 필터 계수를 이용하여 보간 필터를 수행하는 단계를 포함하는 것을 특징으로 하는 비디오 부호화 방법 및 복호화 장치.
KR1020160054610A 2016-04-26 2016-05-03 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치 KR20170125155A (ko)

Priority Applications (15)

Application Number Priority Date Filing Date Title
KR1020160054610A KR20170125155A (ko) 2016-05-03 2016-05-03 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치
CN202111347576.1A CN114189680A (zh) 2016-04-26 2017-04-19 图像解码方法、图像编码方法以及传输比特流的方法
PCT/KR2017/004192 WO2017188652A1 (ko) 2016-04-26 2017-04-19 영상 부호화/복호화 방법 및 장치
CN202111347572.3A CN114189678A (zh) 2016-04-26 2017-04-19 图像解码方法、图像编码方法以及传输比特流的方法
CN202111349439.1A CN114189681A (zh) 2016-04-26 2017-04-19 图像解码方法、图像编码方法以及传输比特流的方法
CN202111347573.8A CN114189679A (zh) 2016-04-26 2017-04-19 图像解码方法、图像编码方法以及传输比特流的方法
EP21171150.2A EP3968634A1 (en) 2016-04-26 2017-04-19 Method and device for encoding/decoding image
EP17789837.6A EP3451668A4 (en) 2016-04-26 2017-04-19 METHOD AND DEVICE FOR CODING / DECODING AN IMAGE
CN202111349451.2A CN114189682A (zh) 2016-04-26 2017-04-19 图像解码方法、图像编码方法以及传输比特流的方法
US16/096,704 US11368682B2 (en) 2016-04-26 2017-04-19 Method and device for encoding/decoding image
CN201780038491.0A CN109417637B (zh) 2016-04-26 2017-04-19 用于编码/解码图像的方法和设备
US17/747,309 US11882275B2 (en) 2016-04-26 2022-05-18 Method and device for encoding/decoding image
US18/351,775 US20230362365A1 (en) 2016-04-26 2023-07-13 Method and device for encoding/decoding image
KR1020230109695A KR20230126694A (ko) 2016-05-03 2023-08-22 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치
US18/537,375 US20240205393A1 (en) 2016-04-26 2023-12-12 Method and device for encoding/decoding image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160054610A KR20170125155A (ko) 2016-05-03 2016-05-03 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020230109695A Division KR20230126694A (ko) 2016-05-03 2023-08-22 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20170125155A true KR20170125155A (ko) 2017-11-14

Family

ID=60387637

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020160054610A KR20170125155A (ko) 2016-04-26 2016-05-03 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치
KR1020230109695A KR20230126694A (ko) 2016-05-03 2023-08-22 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020230109695A KR20230126694A (ko) 2016-05-03 2023-08-22 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치

Country Status (1)

Country Link
KR (2) KR20170125155A (ko)

Also Published As

Publication number Publication date
KR20230126694A (ko) 2023-08-30

Similar Documents

Publication Publication Date Title
JP6371797B2 (ja) 映像復号化装置
KR101947142B1 (ko) 스킵 모드를 이용한 영상 복호화 방법 및 이러한 방법을 사용하는 장치
EP2755388B1 (en) Method, device, and program for encoding and decoding image
DK3280145T3 (en) PROCEDURE FOR ENCODING AND DEVICE FOR DECODING PICTURE THROUGH INTRAPHIC PREDICTION.
KR20110115987A (ko) 영상 부호화/복호화 장치 및 방법
KR20100018810A (ko) 초고화질 영상 부호화, 복호화 방법 및 장치 및 컴퓨터로판독가능한 기록매체
KR20180042899A (ko) 적응적 보간 필터를 사용하는 비디오 코딩 방법 및 장치
JP2024099785A (ja) 復号化、符号化、符号化復号化方法、装置及びその機器
KR20180039323A (ko) 다양한 블록 분할 구조를 결합하여 사용하는 비디오 코딩 방법 및 장치
KR20180040824A (ko) 복호화기 기반의 화면 내 예측 모드 추출 기술을 사용하는 비디오 코딩 방법 및 장치
KR20170113724A (ko) 컨텍스트 모델의 적응적 초기화를 사용하는 cabac 부호화 방법 및 장치, 그리고 cabac 복호화 방법 및 장치
KR20170125155A (ko) 화면 내 예측을 위한 보간 필터를 사용하는 비디오 코딩 방법 및 장치
KR20180040827A (ko) 부호화 유닛의 그룹을 사용하는 비디오 코딩 방법 및 장치
KR20140093869A (ko) 인트라 예측 방법 및 장치, 그리고 영상 처리 장치
KR20180041833A (ko) 화면 내 예측에 대한 참조 모드 리스트를 사용하는 비디오 코딩 방법 및 장치
KR20190065620A (ko) 양방향 필터를 사용하는 비디오 코딩 방법 및 장치
KR20140079519A (ko) 평균 양자화 파라메터를 이용한 양자화 파라메터 부호화 방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application
E601 Decision to refuse application
E801 Decision on dismissal of amendment
A107 Divisional application of patent