KR102634646B1 - 적응적인 영상 부호화 방법 및 장치 - Google Patents

적응적인 영상 부호화 방법 및 장치 Download PDF

Info

Publication number
KR102634646B1
KR102634646B1 KR1020230056069A KR20230056069A KR102634646B1 KR 102634646 B1 KR102634646 B1 KR 102634646B1 KR 1020230056069 A KR1020230056069 A KR 1020230056069A KR 20230056069 A KR20230056069 A KR 20230056069A KR 102634646 B1 KR102634646 B1 KR 102634646B1
Authority
KR
South Korea
Prior art keywords
block
current block
encoding
reference block
screen
Prior art date
Application number
KR1020230056069A
Other languages
English (en)
Other versions
KR20230066527A (ko
Inventor
임성창
김종호
김휘용
최해철
정세윤
김진웅
이진호
이하현
조숙희
최진수
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20230066527A publication Critical patent/KR20230066527A/ko
Priority to KR1020240016459A priority Critical patent/KR20240023064A/ko
Application granted granted Critical
Publication of KR102634646B1 publication Critical patent/KR102634646B1/ko

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

영상 부호화 방법 및 장치가 제공된다. 영상의 화면 간 예측을 수행을 위하여 컴퓨터에 의해 실행되는 프로그램을 기록하는 기록매체에 있어서, 상기 프로그램은, 참조 블록 식별자를 기반으로, 이전에 복원된 하나의 복원 블록을 복호화 대상 블록의 참조 블록으로 결정하는 단계, 상기 참조 블록의 움직임 정보를 기반으로 상기 복호화 대상 블록에 적용되는 움직임 정보를 결정하는 단계, 및 상기 결정된 움직임 정보를 기반으로 상기 복호화 대상 블록에 대한 복호화를 수행하는 단계를 포함하되, 상기 참조 블록 식별자는 상기 참조 블록으로 사용될 복원 블록을 지시할 수 있다.

Description

적응적인 영상 부호화 방법 및 장치{METHOD AND APPARATUS FOR ADAPTIVE IMAGE DECODING}
영상 부호화 장치 및 방법에 연관되어, 보다 특정하게는 적응적 영상 부호화를 사용하는 장치 및 방법에 연관된다.
영상을 부호화하는 방법에 있어서, 종래의 P_SKIP(P_스킵) 및 B_SKIP 모드에서는 주변 블록의 움직임 벡터 및 참조 영상 색인을 이용하여, 부호화 대상 블록의 움직임 벡터 및 참조 영상 색인이 결정되었다.
그러나, 상기 주변 블록의 움직임 벡터 또는 참조 영상 색인이 존재하지 않은 경우, 움직임 벡터 (0, 0) 또는 참조 영상 색인 0으로 P_SKIP 또는 B_SKIP이 수행되었다.
이러한 수행은 결과적으로 부호화 대상 블록 주변의 영상이 갖는 국부적인 특성을 제대로 이용하지 못하는 단점이 있다.
일반적으로, 부호화 대상 블록 주변의 블록과 부호화 대상 블록 간에는 높은 상관성이 존재한다. 문맥 모델(context model)은 상기 상관성에 대한 가정에 기반하며, 영상 부호화 표준에 널리 반영되어 사용된다.
영상 부호화 표준에서는 화면 간 슬라이스에서 화면 내 부호화를 지원한다. 특정 환경에서는 화면 간 슬라이스에서 화면 내 부호화된 매크로 블록(macro block; MB)의 비중이 화면 간 부호화된 매크로 블록의 비중보다 훨씬 높은 경우도 있다.
본 발명의 일 실시예에 따른 화면 간 예측을 수행하는 영상 부호화 방법은 참조 블록 식별자를 기반으로, 이전에 복원된 하나의 복원 블록을 부호화 대상 블록의 참조 블록으로 결정하는 단계, 상기 참조 블록의 움직임 정보를 기반으로 상기 부호화 대상 블록에 적용되는 움직임 정보를 결정하는 단계, 및 상기 결정된 움직임 정보를 기반으로 상기 부호화 대상 블록에 대한 부호화를 수행하는 단계를 포함하되, 상기 참조 블록 식별자는 상기 참조 블록으로 사용될 복원 블록을 지시할 수 있다.
상기 참조 블록 식별자는 이전에 복원된 적어도 하나의 복원 블록을 포함하는 참조 블록 후보 세트에서 하나의 참조 블록 후보를 지시할 수 있다.
상기 참조 블록으로 결정되는 복원 블록은, 현재 영상 내에서 상기 부호화 대상 블록에 가장 근접한 복원된 블록들 중 하나일 수 있다.
상기 참조 블록으로 결정되는 복원 블록은, 이전에 복원된 영상 내에서 상기 부호화 대상 블록에 대응되는 위치의 복원된 블록일 수 있다.
상기 움직임 정보 결정 단계에서는, 상기 참조 블록이 상기 부호화 대상 블록이 속한 슬라이스의 경계 외부에 위치하는 경우, 상기 참조 블록의 움직임 정보를 상기 부호화 대상 블록에 적용되는 움직임 정보로 결정하지 않을 수 있다.
상기 참조 블록의 움직임 정보 및 상기 부호화 대상 블록에 적용되는 움직임 정보는 각각 움직임 벡터를 포함하고, 상기 움직임 정보 결정 단계에서는, 상기 참조 블록의 움직임 벡터를 상기 부호화 대상 블록에 적용되는 움직임 벡터로 결정하고, 상기 부호화 수행 단계에서는, 상기 결정된 움직임 벡터를 기반으로 상기 부호화 대상 블록에 대한 부호화를 수행할 수 있다.
상기 참조 블록의 움직임 정보 및 상기 부호화 대상 블록에 적용되는 움직임 정보는 각각 참조 영상 색인을 포함하고, 상기 움직임 정보 결정 단계에서는, 상기 참조 블록의 참조 영상 색인을 상기 부호화 대상 블록에 적용되는 참조 영상 색인으로 결정하고, 상기 부호화 수행 단계에서는, 상기 결정된 참조 영상 색인을 기반으로 상기 부호화 대상 블록에 대한 부호화를 수행할 수 있다.
상기 참조 블록의 움직임 정보 및 상기 부호화 대상 블록에 적용되는 움직임 정보는 각각 예측 방향 정보를 포함하고, 상기 예측 방향 정보는 상기 화면 간 예측이 L0 예측인지 또는 L1 예측인지 여부를 지시하는 정보를 포함하고, 상기 움직임 정보 결정 단계에서는, 상기 참조 블록의 예측 방향 정보를 상기 부호화 대상 블록에 적용되는 예측 방향 정보로 결정하고, 상기 부호화 수행 단계에서는, 상기 결정된 예측 방향 정보를 기반으로 상기 부호화 대상 블록에 대한 부호화를 수행할 수 있다.
상기 예측 방향 정보는 상기 화면 간 예측이 쌍예측인지 여부를 지시하는 정보를 더 포함하고, 상기 쌍예측은 L0 예측 및 L1 예측이 모두 수행되는 화면 간 예측일 수 있다.
상기 참조 블록 결정 단계 이전에 부호화 방식 지시자를 기반으로 상기 부호화 대상 블록에 대응하는 부호화 모드를 결정하는 단계를 더 포함하고, 상기 부호화 방식 지시자는 상기 부호화 대상 블록에 대응하는 부호화 모드를 지시하고, 이후 단계의 수행 여부는 상기 결정된 부호화 모드에 따라 결정될 수 있다.
본 발명의 일측에 따르면, 복수의 블록들을 포함하는 제1 슬라이스를 대상으로 상기 제1 슬라이스 내의 상기 복수의 블록들을 복원하는 단계, 상기 복원된 복수의 블록들 중에서 적어도 하나의 블록을 참조 블록으로 결정하는 단계, 상기 참조 블록의 부호화 파라미터를 판별하는 단계, 상기 부호화 파라미터에 기반하여 상기 제1 슬라이스 내의 부호화 대상 블록을 적응적으로 부호화 하는 단계를 포함하는, 영상 부호화 방법이 제공된다.
상기 참조 블록은 상기 복원된 복수의 블록들 및 상기 부호화 대상 블록 간의 화소값 유사도에 기반하여 결정될 수 있다.
상기 참조 블록은 블록 간 부호화 파라미터 유사도에 기반하여 결정될 수 있고, 상기 부호화 파라미터는 화면 내 예측 모드, 화면 간 예측 모드, 이동 벡터, 참조 영상 색인, 부호화 블록 패턴, 양자화 파라미터, 블록 크기, 블록 파티션 정보 및 매크로 블록 타입 중 하나 이상에 대한 실시예, 통계적인 실시예 및 조합된 실시예 중 하나 이상을 포함할 수 있다.
상기 블록 간 부호화 파라미터의 유사도는 상기 부호화 파라미터 중 하나 이상의 조합을 통해 결정될 수 있다.상기 참조 블록은 상기 부호화 대상 블록에 대한 상대적인 위치에 따라 결정될 수 있다.
상기 참조 블록은 상기 복원된 복수의 블록들 중 상기 부호화 대상 블록과 가장 근접한 하나 이상의 블록일 수 있다.
상기 참조 블록은 이전에 복원된 영상 내에서 상기 부호화 대상 블록에 영상 내 블록 위치가 대응하는 복원 블록일 수 있다.
상기 상대적인 위치는 상기 제1 슬라이스 내에서의 고정된 위치, 상기 제1 슬라이스 내에서 변경될 수 있는 위치 및 슬라이스 단위로 변경될 수 있는 위치 중 하나 이상인일 수 있다.
상기 참조 블록의 부호화 파라미터를 판별하는 단계는, 상기 참조 블록의 움직임 정보를 상기 참조 블록의 부호화 파라미터로서 적용하는 단계를 포함할 수 있고, 상기 부호화 파라미터에 기반하여 상기 제1 슬라이스 내의 부호화 대상 블록을 적응적으로 부호화 하는 단계는, 상기 참조 블록의 움직임 정보에 기반하여 상기 부호화 대상 블록을 부호화하는 단계를 포함할 수 있다.
상기 부호화 파라미터는 상기 참조 블록의 휘도 및 화면 내 예측 방향을 포함할 수 있다, 상기 참조 블록이 화면 내 부호화된 경우 상기 부호화 대상 블록은 상기 참조 블록의 휘도 및 화면 내 예측 방향으로 부호화되거나 상기 참조 블록의 휘도 및 화면 내 예측 방향과 유사한 예측 방향을 갖는 화면 내 예측 방향으로만 부호화될 수 있다.
상기 부호화 파라미터는 움직임 벡터를 포함할 수 있고, 상기 참조 블록이 화면 간 부호화된 경우 상기 부호화 대상 블록은 상기 참조 블록의 움직임 벡터로 부호화되거나 상기 참조 블록의 움직임 벡터와 유사한 움직임 벡터로만 부호화될 수 있다.
상기 부호화 파라미터는 참조 영상 색인을 포함할 수 있고, 상기 참조 블록이 화면 간 부호화된 경우 상기 부호화 대상 블록은 상기 참조 블록의 참조 영상 색인으로 부호화되거나 상기 참조 블록의 참조 영상 색인과 유사한 참조 영상 색인으로만 부호화될 수 있다.
상기 부호화 파라미터는 예측 방향을 포함할 수 있고, 상기 참조 블록이 화면 간 부호화된 경우 상기 부호화 대상 블록은 상기 참조 블록의 예측 방향으로 부호화될 수 있다.
상기 참조 블록은 복수 개일 수 있고, 상기 참조 블록의 부호화 파라미터를 판별하는 단계는, 블록의 영상 내 상대적인 위치 또는 절대적인 위치에 의해 상기 복수 개의 참조 블록들이 결정되었을 경우, 상기 복수 개의 참조 블록들 중 상기 제1 슬라이스의 경계를 넘어서 위치하는 블록을 상기 참조 블록에서 제외하는 단계를 포함할 수 있다.
상기 영상 부호화 방법은, 상기 부호화 파라미터에 기반하여 상기 참조 블록의 특성을 판별하는 단계를 더 포함할 수 있고, 상기 특성 중 공간적 중복성이 시간적 중복성보다 더 높은 경우 상기 부호화 대상 블록은 상기 부호화 파라미터에 기반하여 적응적으로 부호화될 수 있다.
상기 부호화 대상 블록의 주변 블록들 중 다수가 화면 내 부호화된 경우 상기 시간적인 중복성보다 상기 공간적인 중복성이 더 높은 것으로 판단될 수 있다.
상기 부호화의 부호화 모드는 적응적으로 부호화되는 모드 및 적응적으로 부호화되지 않는 모드 간의 경쟁에 따라 선택된 부호화 모드로 결정될 수 있다.
상기 선택된 부호화 모드는 부호화 방식 지시자에 의해 복호화기로 시그널링될 수 있다.
상기 영상 부호화 방법은, 어떤 참조 블록이 선택되었는지에 대한 참조 블록 식별자를 복호화기로 전송하는 단계를 더 포함할 수 있다.
본 발명의 다른 일측에 따르면, 복수의 블록들을 포함하는 제1 슬라이스를 대상으로 상기 제1 슬라이스 내의 상기 복수의 블록들을 복원하는 단계, 상기 복원된 복수의 블록들 중에서 적어도 하나의 블록을 참조 블록으로 결정하는 단계, 상기 참조 블록의 부호화 파라미터를 판별하는 단계 및 상기 부호화 파라미터에 기반하여 상기 제1 슬라이스 내의 복호화 대상 블록을 적응적으로 복호화 하는 단계를 포함하는, 영상 복호화 방법이 제공된다.
상기 제1 슬라이스 내의 복호화 대상 블록을 적응적으로 복호화 하는 단계는, 생략된 부호화 파라미터 정보를 상기 참조 블록으로부터 도출하는 단계를 포함할 수 있다.
상기 생략된 부호화 파라미터 정보는 어떤 참조 블록이 선택되었는지를 나타내는 참조 블록 식별자를 사용함으로써 상기 참조 블록으로부터 도출될 수 있다.
본 발명의 또 다른 일측에 따르면, 데이터를 저장하는 저장부, 슬라이스 및 상기 슬라이스 내의 블록들에 대한 데이터를 입력 받아 저장하는 버퍼 및 상기 버퍼로부터 슬라이스 및 슬라이스 내의 블록들에 대한 데이터를 입력 받고, 참조 블록을 결정하고, 상기 참조 블록의 부호화 파라미터를 판별하고, 상기 참조 블록의 특성을 판별하고, 상기 슬라이스 내의 부호화 대상 블록을 적응적으로 부호화하는 제어부를 포함하고, 상기 저장부는 상기 제어부로부터 상기 제어부의 작동에 필요한 데이터를 전송 받고, 상기 제어부의 요청에 따라 저장해 놓은 상기 데이터를 상기 제어부로 전송하는, 영상 부호화 장치가 제공된다.
본 발명의 또 다른 일측에 따른 화면 내 예측을 수행하는 영상 복호화 방법은 이전에 복원된 하나의 참조 블록이 갖는 인트라 예측 모드를 기반으로 복호화 대상 블록의 인트라 예측 모드를 결정하는 단계, 상기 결정된 인트라 예측 모드를 기반으로 상기 복호화 대상 블록에 대한 복호화를 수행하는 단계를 포함하되, 상기 참조 블록은, 현재 영상 내에서 상기 복호화 대상 블록에 가장 근접한 복원된 블록들 중 하나일 수 있다.
상기 인트라 예측 모드 결정 단계에서는, 참조 블록 식별자를 기반으로 상기 복호화 대상 블록의 인트라 예측 모드를 결정하고, 상기 참조 블록 식별자는 상기 참조 블록이 갖는 인트라 예측 모드를 지시할 수 있다.
상기 참조 블록 식별자는 상기 참조 블록의 인트라 예측 모드를 포함하는 인트라 예측 모드 후보 세트에서 하나의 인트라 예측 모드 후보를 지시할 수 있다.
상기 인트라 예측 모드 결정 단계에서는, 상기 참조 블록의 인트라 예측 모드를 상기 복호화 대상 블록에 적용되는 인트라 예측 모드로 결정하고, 상기 복호화 수행 단계에서는, 상기 결정된 인트라 예측 모드를 기반으로 상기 복호화 대상 블록에 대한 복호화를 수행할 수 있다.
상기 인트라 예측 모드 결정 단계에서는, 상기 참조 블록이 상기 복호화 대상 블록이 속한 슬라이스의 경계 외부에 위치하는 경우, 상기 참조 블록의 인트라 예측 모드를 상기 복호화 대상 블록에 적용되는 인트라 예측 모드로 결정하지 않울 수 있다.
상기 인트라 예측 모드 결정 단계 이전에 부호화 방식 지시자를 기반으로 상기 복호화 대상 블록에 대응하는 부호화 모드를 결정하는 단계를 더 포함하고, 상기 부호화 방식 지시자는 상기 복호화 대상 블록에 대응하는 부호화 모드를 지시하고, 이후 단계의 수행 여부는 상기 결정된 부호화 모드에 따라 결정될 수 있다.
본 발명의 다른 실시예에 따른 화면 내 예측을 수행하는 영상의 복호화를 위하여 컴퓨터에 의해 실행되는 프로그램을 기록하는 기록매체에 있어서, 상기 프로그램은, 이전에 복원된 하나의 참조 블록이 갖는 인트라 예측 모드를 기반으로 복호화 대상 블록의 인트라 예측 모드를 결정하는 단계, 상기 결정된 인트라 예측 모드를 기반으로 상기 복호화 대상 블록에 대한 복호화를 수행하는 단계를 포함하되, 상기 참조 블록은, 현재 영상 내에서 상기 복호화 대상 블록에 가장 근접한 복원된 블록들 중 하나일 수 있다.
상기 인트라 예측 모드 결정 단계에서는, 참조 블록 식별자를 기반으로 상기 복호화 대상 블록의 인트라 예측 모드를 결정하고, 상기 참조 블록 식별자는 상기 참조 블록이 갖는 인트라 예측 모드를 지시할 수 있다.
상기 참조 블록 식별자는 상기 참조 블록의 인트라 예측 모드를 포함하는 인트라 예측 모드 후보 세트에서 하나의 인트라 예측 모드 후보를 지시할 수 있다.
상기 인트라 예측 모드 결정 단계에서는, 상기 참조 블록의 인트라 예측 모드를 상기 복호화 대상 블록에 적용되는 인트라 예측 모드로 결정하고, 상기 복호화 수행 단계에서는, 상기 결정된 인트라 예측 모드를 기반으로 상기 복호화 대상 블록에 대한 복호화를 수행할 수 있다.
상기 인트라 예측 모드 결정 단계에서는, 상기 참조 블록이 상기 복호화 대상 블록이 속한 슬라이스의 경계 외부에 위치하는 경우, 상기 참조 블록의 인트라 예측 모드를 상기 복호화 대상 블록에 적용되는 인트라 예측 모드로 결정하지 않을 수 있다.
상기 인트라 예측 모드 결정 단계 이전에 부호화 방식 지시자를 기반으로 상기 복호화 대상 블록에 대응하는 부호화 모드를 결정하는 단계를 더 포함하고, 상기 부호화 방식 지시자는 상기 복호화 대상 블록에 대응하는 부호화 모드를 지시하고, 이후 단계의 수행 여부는 상기 결정된 부호화 모드에 따라 결정될 수 있다.
영상을 부호화함에 있어, 부호화 대상 블록의 부호화 파라미터를 참조 블록으로부터 적응적으로 선택하여, 영상 압축 성능을 향상시킬 수 있다.
국부적인 영상 특성 상 시간적인 중복성보다 공간적인 중복성이 더 높은 경우, 부호화 대상 블록을 화면 내 부호화하여 영상 압축 성능을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상 부호화 방법을 도시한다.
도 2는 부호화의 대상이 되는 슬라이스 및 블록의 일 예를 도시한다.
도 3은 본 발명의 일 실시예에 따른 영상 부호화 장치를 도시한다.
도 4는 본 발명의 일 예에 따른 현재 슬라이스 내의 복원된 블록들, 복원된 블록들 중 참조 블록 및 현재 블록을 도시한다.
도 5는 본 발명의 일 예에 따른 현재 슬라이스 내의 복원된 블록들, 복원된 블록들 중 복수의 참조 블록들 및 복수의 참조 블록들 중 하나의 참조 블록 및 현재 블록을 도시한다.
도 6은 본 발명의 일 예에 따른 현재 영상 내의 현재 블록, 이전에 복원된 영상 내의 복원된 블록들 및 복원된 블록들 중 현재 블록과 동일한 영상 내 블록 위치에 존재하는 참조 블록을 도시된다.
도 7은 본 발명의 일 예에 따른 참조 블록의 휘도 및 색차 화면 내 예측 방향에 따른 현재 블록의 화면 내 부호화를 도시한다.
도 8은 본 발명의 일 예에 따른 참조 블록의 잔여 신호 유무에 따른 현재 블록의 화면 내 부호화 일 예가 도시한다.
도 9는 본 발명의 일 예에 따른 참조 블록의 화면 간 매크로 블록 파티션에 따른 현재 블록의 화면 간 부호화를 도시한다.
도 10은 본 발명의 일 예에 따른 참조 블록의 움직임 벡터에 따른 현재 블록의 화면 간 부호화를 도시한다.
도 11은 본 발명의 일 예에 따른 참조 블록의 참조 영상 색인에 따른 현재 블록의 화면 간 부호화를 도시한다.
도 12는 본 발명의 일 예에 따른 참조 블록의 참조 영상 리스트에 따른 현재 블록의 화면 간 부호화를 도시한다.
도 13은 본 발명의 일 예에 따른 참조 블록의 예측 방향에 따른 현재 블록의 화면 간 부호화를 도시한다.
본 명세서에서 사용되는 용어들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하에서, 본 발명의 일부 실시예를, 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
화면 간 슬라이스에서 부호화 대상 블록의 주변 블록들 중 다수가 화면 내 부호화된 경우, 국부적인 영상 특성 상 시간적인 중복성보다 공간적인 중복성이 더 큰 것으로 판단될 수 있다. 이러한 경우 부호화 대상 블록이 화면 내 부호화되는 것이 더 효율적일 수 있으며, 이러한 부호화를 통해 영상 압축 성능이 향상될 수 있다.
따라서, 화면 간 슬라이스에서 국부적인 영상 특성으로 인해 시간적 중복성보다 공간적 중복성이 더 클 경우, 주변 블록의 부호화 파라미터에 따른 적응적인 화면 내 부호화가 수행될 수 있다.
도 1은 본 발명의 일 실시예에 따른 적응적 영상 부호화 방법을 도시한다.
상기의 방법은 슬라이스 내의 블록을 부호화하기 위한 것이다. 이하, 부호화의 대상이 되는 블록을 현재 블록으로 칭하고, 현재 블록이 속한 슬라이스를 현재 슬라이스로 칭한다.
본 발명의 실시예들에서, 블록은 영상 부호화 및 복호화의 단위를 의미한다.
영상 부호화 및 복호화에서, 부호화 또는 복호화 단위는 하나의 영상이 세분화 된 블록으로 분할됨으로써 부호화 또은 복호화될 때, 상기의 분할된 단위를 의미한다. 따라서, 부호화 또는 복호화 단위는, 블록, 매크로 블록, 부호화 유닛(coding unit) 또는 예측 유닛(prediction unit) 등으로 불릴 수 있다. 하나의 블록은 크기가 더 작은 하위 블록으로 더 분할될 수 있다.
우선, 현재 슬라이스는 복수의 블록들을 포함한다, 현재 슬라이스 내에는 하나 이상이 복원(reconstruct)된 블록이 존재한다. 복원된 블록은 후술할 단계(S110 내지 S140) 등을 통해 이미 복원된 블록이다. 후술할 단계(S110 내지 S140)를 통해 현재 블록이 복원되면, 다음으로 부호화의 대상이 될 블록을 위해 현재 블록도 복원된 블록 중 하나가 될 수 있다.
이후, 현재 블록을 부호화하기 위한 참조 블록(referencing block)이 결정된다(S110).
현재 슬라이스의 이미 복원된 블록들 중 적어도 하나 이상의 블록이 참조 블록으로 결정된다.
하기의 도 2에서, 현재 슬라이스(210) 내의 복원된 블록들(220), 복원된 블록들(220) 중에서 선택된 참조 블록(240) 및 현재 블록(230)의 일 예가 도시된다.
참조 블록은 블록 간 화소값 유사도에 기반하여 결정될 수 있다. 화소값 유사도는 SAD(sum of absolute differences), SATD(sum of absolute transformed difference) 또는 SSD(sum of the squared differences) 등의 영상 부호화에서 일반적으로 사용되는 블록들 간 화소값 유사도 측정 방법에 의해 측정될 수 있다. 이때, 화소값 유사도가 가장 높은 블록이 참조 블록으로 결정될 수 있다.
화소값 유사도는 블록들 간에 1 대 1로 판단될 수 있다. 즉, 복원된 블록들 및 현재 블록 간에 1 대 1로 화소값 유사도가 판단될 수 있다.
화소값 유사도는 블록들 간에 다(多) 대 1로 판단될 수 있다. 블록들의 화소값 가중치 조합과 다른 단일 블록의 화소값이 비교의 대상이 될 수 있다. 즉, 복원된 블록들 및 현재 블록 간에 다 대 1로 화소값 유사도가 판단될 수 있다.
화소값 유사도는 블록들 간에 다(多) 대 다(多)로 판단될 수 있다. 복수 개의 블록들의 화소값 가중치 조합 및 복수 개의 다른 블록들의 화소값 가중치 조합이 비교의 대상이 될 수 있다. 즉, 다수의 복원된 블록들 및 현재 블록을 포함한 다수의 블록들 간에 다 대 다로 화소값 유사도가 판단될 수 있다.
참조 블록은 블록 간 부호화 파라미터 유사도를 이용하여 결정될 수 있다.
부호화 파라미터는 화면의 부호화를 위한 정보로서, 예컨대 화면 내 예측 모드(intra prediction mode), 화면 간 예측 모드(inter prediction mode), 이동(움직임) 벡터(motion vector), 참조 영상 색인(reference image index), 부호화 블록 패턴(coded block pattern), 양자화 파라미터(quantization parameter), 블록 크기(block size), 블록 파티션 정보(block partition information), 매크로 블록 타입(macro block type) 등에 대한 각각의 실시예, 통계적인 실시예 및 조합된 실시예를 포함한다.
화면 간 부호화 모드 및 화면 간 예측 방식은 블록 매칭 알고리즘(Block Matching Algorithm), P_SKIP 모드(mode), B_SKIP 모드 및 다이렉트(direct) 모드를 포함한다.
이때, P_SKIP 모드, B_SKIP 모드 및 다이렉트 모드는, 특정 블록에 대한 부호화 시, 움직임 벡터 및 참조 영상 색인을 포함하는 움직임 정보를 부호화기와 복호화기에서 동일한 방법으로 유도함으로써 해당 블록의 움직임 정보로서 이용하는 방법들의 특정 예를 의미한다. 본 발명의 실시예들은 부호화기 및 복호화기에서 동일한 방법으로 움직임 정보를 유도하고, 상기의 움직임 정보를 사용하는 방법에 적용될 수 있다.
화면 내 부호화 모드는 화면 내(intra) 4x4 모드, 화면 내 8x8 모드, 화면 내 16x16 모드 및 화면 내 32x32 모드를 포함한다.
이때, 화면 내 부호화 모드는 화면 내 부호화 시 화면 내 부호화 블록의 분할된 크기를 나타낸다. 각 분할된 크기의 블록에서는 다양한 화면 내 예측 방식을 사용할 수 있다.
화면 내 예측 방식은 H.264/AVC(advanced video coding)에 기반한 선 예측(line prediction), 이동된 화면 내 예측(displaced intra prediction; DIP), 탬플릿 매칭(template matching; TM) 및 가중치 부여된 선 예측(weighted line prediction)을 포함한다.
화면 내 예측 방향은 H.264/AVC(advanced video coding)에 기반한 선 예측 방향 및 가중치 부여된 선 예측의 방향을 포함한다.
화면 간 매크로 블록 파티션은 예측 부호화 시에 분할된 예측 블록의 크기를 나타낸다. 화면 간 매크로 블록 파티션은 64x64, 64x32, 32x64, 32x32, 32x16, 16x32, 16x16, 16x8, 8x16, 8x8, 8x4, 4x8 및 4x4를 포함한다. 화소값 유사도는 SAD, SATD 또는 SSD에 의해 측정된 값을 포함한다.
참조 블록 내 부호화 파라미터들은 현재 블록을 부호화하기 위해 현재 블록의 부호화 파라미터로 그대로 이용될 수 있고, 또는 일부만이 이용될 수 있다.
블록 간 부호화 파라미터의 유사도는 예측 종류(예컨대, 화면 내 또는 화면 간)의 동일성, 예측 방향의 유사성, 예측 모드의 유사성 및 블록 크기의 유사성 등을 의미한다. 블록들 간에 서로 동일한 화면 내 예측 모드를 사용하거나, 유사한 크기의 이동 벡터를 사용하거나, 동일한 양자화 파라미터, 동일한 블록 크기 또는 동일한 블록 파티션 정보를 사용할 경우, 이러한 블록들 간에는 부호화 파라미터의 유사도가 높다고 판단될 수 있다.
블록 간 부호화 파라미터 유사도는 부호화 파라미터 중 하나 이상의 파라미터들의 조합을 통해 결정될 수 있다. 또한, 참조 블록은 복수 개의 선택된 참조 블록들의 부호화 파라미터로부터 계산된 식을 이용하여 결정될 수 있다.
선택된 참조 블록들의 부호화 파라미터들의 조합을 이용한 계산식을 통하여 나온 결과가 가상 블록의 부호화 파라미터로 정해질 수 있으며, 가상 블록이 참조 블록이 될 수 있다.
참조 블록의 결정을 위해, 현재 슬라이스의 복원된 블록들 중 현재 블록과 화소값의 유사도가 높은 블록을 참조 블록으로 결정하여, 참조 블록의 화소값을 현재 블록의 화소값으로 사용하는 이동된 화면 간 예측 방법이 사용될 수 있다.
참조 블록의 결정을 위해, 현재 슬라이스의 복원된 블록들의 주변 화소들과 현재 블록의 주변 복원된 화소들의 화소값 유사도를 판별하여 화소값 유사도가 높은 블록을 참조 블록으로 결정하고, 참조 블록의 화소값을 부호화 대상 블록의 화소값으로 사용하는 탬플릿 매칭 방법이 사용될 수 있다.
화면 내 부호화 블록들을 통해 현재 슬라이스에서의 화소값을 예측하기 위하여 DIP 또는 TM이 이용될 경우, DIP 또는 TM을 통하여 부호화 블록들이 갖는 이동 벡터(displacement vector)에 대한 중간값이 예측될 수 있고, 예측의 결과가 가상 블록의 부호화 파라미터로 정해질 수 있다.
현재 블록을 부호화하는데 있어서, DIP 또는 TM이 그대로 이용될 수 있으며, 또는 전술된 또는 후술될 다른 방법을 사용하여 복원된 블록들 중에서 참조 블록이 결정될 수 있다.
또한, 화면 간 부호화 블록들이 이전 슬라이스로부터 화소값을 예측하는 움직임 예측(block matching algorithm)이 사용되었을 경우, 부호화된 블록이 갖는 움직임 벡터에 대한 중간값이 예측되면, 상기의 중간값 예측을 통하여 나온 결과를 가상 블록의 부호화 파라미터로 정할 수 있다. 가상 블록이 참조 블록으로 결정될 수 있다.
참조 블록은 영상 내 절대적 위치에 따라 결정될 수 있으며, 현재 블록에 대한 상대적인 위치에 따라 결정될 수 있다.
현재 블록에 대한 상대적인 위치에 따라 참조 블록이 결정되는 경우에는, 현재 블록과 가장 근접한 복호화된 블록이 참조 블록으로 결정될 수 있다. 이때, 현재 블록에 대한 참조 블록으로 현재 블록과 가장 근접한 복호화된 블록들 중 적어도 하나 이상의 블록이 참조 블록으로 결정될 수 있다.
예컨대, 현재 블록에 대한 상대적인 위치는 현재 블록에 근접한 복원된 블록의 위치를 의미할 수 있다. 즉, 현재 블록과 블록 경계가 맞닿아 있는 복원된 블록을 근접한 복원된 블록이라고 할 수 있다.
하기의 도 4에서, 현재 슬라이스(410) 내의 복원된 블록들(420), 복원된 블록들(420) 중 참조 블록(440) 및 현재 블록(430)의 일 예가 도시된다.
하기의 도 5에서, 현재 슬라이스(510) 내의 복원된 블록들(520), 복원된 블록들(520) 중 다수의 참조 블록(540), 다수의 참조 블록 중 하나의 참조 블록(550) 및 현재 블록(530)의 일 예가 도시된다.
또한, 현재 블록에 대한 상대적인 위치에 따라 참조 블록이 결정되는 경우에는, 이전에 복원된 영상 내에서 현재 블록에 영상 내 블록 위치가 대응하는 복원 블록이 참조 블록으로 결정될 수 있다.
이때, 현재 영상의 현재 블록 및 이전에 복원된 영상 내의 참조 블록의 영상 내 블록 위치가 서로 동일한 경우, 양 블록의 영상 내 블록 위치들은 서로 대응한다고 볼 수 있다. 이전에 복원된 영상 내 참조 블록이 현재 블록과 동일한 영상 내 블록 위치를 갖는 경우, 이전에 복원된 영상 내 참조블록을 동일위치 블록(collocated block)이라고 할 수 있다.
하기의 도 6에서, 현재 영상(610) 내의 현재 블록(630), 이전에 복원된 영상(620) 내의 복원된 블록들(640) 및 상기 복원된 블록들 중 현재 블록과 동일한 영상 내 블록 위치에 존재하는 참조 블록(650)의 일 예가 도시된다.
상대적인 위치는 하나의 슬라이스 내에서 고정될 수 있으며, 변경될 수도 있다. 또한 상대적인 위치는 슬라이스 단위로 변경될 수 있다.
참조 블록은 전술된 상기 화소값 유사도, 부호화 파라미터 유사도, 계산된 식, 절대적 위치 및 상대적 위치 중 적어도 하나를 이용하여 결정될 수 있다.
적응적 스킵 모드(adaptive skip mode)가 사용될 경우, 현재 블록에 대하여 특정한 상대적인 위치에 존재하는 블록이 참조 블록으로 결정된다. 이 때, 영상의 상관성을 고려하여, 현재 블록과 가장 근접한 복호화된 블록이 참조 블록으로 결정된다.
이후, 참조 블록의 부호화 파라미터가 판별된다(S120).
우선, 상기 참조 블록이 화면 내(intra) 부호화되었는지 또는 화면 간(inter) 부호화되었는지 판별된다.
전술한 참조 블록 결정 단계(S110)에서 단 하나의 블록이 참조 블록으로 결정된 경우, 상기 블록의 부호화 파라미터만이 판별되고, 복수 개의 블록들이 참조 블록으로 결정된 경우 상기 복수 개의 참조 블록들이 함께 고려되어 상기 참조 블록들 간의 동일한 부호화 파라미터 또는 유사한 부호화 파라미터가 판별된다.
참조 블록이 화면 내 부호화 된 경우, 화면 내 부호화 모드(mode), 휘도(luminance) 화면 내 예측 방향(prediction direction), 휘도 화면 내 예측 방식, 색차(chrominance) 화면 내 예측 방향, 색차 화면 내 예측 방식, 변환 방법(transform), 이동 벡터, 부호화 블록 패턴(coded block pattern), 잔여 신호(residual signal) 유무 및 계수 스캔(coefficient scan) 방법 등이 판별될 부호화 파라미터로서 포함된다.
참조 블록이 화면 간 부호화 된 경우, 화면 간 부호화 모드, 화면 간 매크로 블록 파티션(partition), 움직임 벡터(motion vector), 참조 영상 색인(reference picture list), 참조 영상 리스트(reference picture list), 예측 방향(prediction direction), 적응적 보간 필터(adaptive interpolation filter), 잔여 신호 유무 및 계수 스캔 방법 등이 판별될 부호화 파라미터로서 포함된다.
참조 블록 결정 단계(S110)에서, 블록의 영상 내 상대적인 위치 또는 절대적인 위치에 의해 상기 참조 블록이 결정되었을 경우, 참조 블록 중 일부는 영상 또는 슬라이스의 경계를 넘어서 위치할 수 있다. 이러한 경계 밖에 위치한 참조 블록은 부호화 파라미터 판별 단계에서 제외될 수 있다.
특정 부호화 방법이 사용될 경우, 부호화 파라미터 판별 단계(S120)는 생략될 수 있다.
예컨대, 움직임 정보만을 생략해서 부호화하는 방법이 현재 블록에 적용될 경우, 부호화 파라미터 판별 단계(S120)가 생략될 수 있다. (또는, 부호화 파라미터 판별 단계(S120)에서, 참조 블록의 움직임 정보가 참조 블록의 부호화 파라미터로 결정될 수 있다.)
또한, 현재 블록을 부호화하기 위해, 참조 블록(referencing block)이 결정된 후(S110), 참조 블록의 움직임 정보를 현재 블록에 적용함으로써 현재 블록이 부호화될 수 있다(S140).
적응적 스킵 모드에서는 결정된 참조 블록들이 화면 내 부호화되었는지 또는 화면 간 부호화되었는지 판별되고, 결정된 참조 블록들이 영상 및 슬라이스의 경계 밖에 존재하는지 판별된 후, 참조 블록의 부호화 파라미터가 판별될 수 있다.
이후, 참조 블록의 부호화 파라미터에 기반하여 참조 블록의 특성이 판별된다(S130).
참조 블록의 특성 중 공간적 중복성이 시간적 중복성보다 더 높은 것으로 판별된 경우, 현재 블록은 부호화 파라미터에 기반하여 적응적으로 부호화될 수 있다.
화면 간 슬라이스에서 현재 블록의 주변 블록들 중 다수가 화면 내 부호화된 경우, 국부적인 영상 특성 상 시간적인 중복성보다 공간적인 중복성이 더 높은 것으로 판단될 수 있다.
특정 부호화 방법이 사용될 경우, 참조 블록의 특성 판별 단계(S130)는 생략될 수 있다.
예컨대, 움직임 정보만을 생략해서 부호화하는 방법이 현재 블록에 적용될 경우, 부호화 파라미터 판별 단계(S120) 및 참조 블록의 특성 판별 단계(S130)는 생략될 수 있고, 현재 블록을 부호화하기 위해 참조 블록(referencing block)이 결정된 후(S110), 참조 블록의 움직임 정보를 현재 블록에 적용함으로써 현재 블록이 부호화될 수 있다(S140).
이후, 현재 블록은 상기 참조 블록의 판별된 부호화 파라미터를 이용하여 적응적으로 부호화된다(S140).
상기 파라미터에 따라, 특정 시그널링(signaling) 정보에 대해서 특정 부호화 또는 복호화가 수행되거나, 특정 시맨틱(semantic)으로 시그널링 정보가 정의된다.
예컨대, 참조 블록 A, A' 및 A'' 등 중 하나 이상이 B라는 조건을 만족시키는 부호화 파라미터를 갖는 경우, 상기 현재 블록의 신텍스(syntax) C는 시맨틱 D를 갖거나 복호화 절차(decoding process) E를 수행하도록 정의된다. 참조 블록 A, A' 및 A'' 등 중 하나 이상이 B'라는 조건을 만족시키는 부호화 파라미터를 갖는 경우, 상기 현재 블록의 신텍스 C는 시맨틱 D'를 갖거나 복호화 절차 E'를 수행하도록 정의된다. 이 경우, 신텍스는 비트스트림의 요소가 되는 것으로, 신텍스 엘러먼트(syntax element) 혹은 구문 요소를 의미한다.
참조 블록이 화면 내 부호화된 경우, 현재 블록에 대해 화면 내 부호화만 수행될 수도 있다. 화면 간 부호화에 필요한 신텍스, 시맨틱 및 복호화 절차는 화면 내 부호화에 이용될 수 있다.
참조 블록의 부호화 파라미터에 따른 현재 블록의 화면 내 부호화의 일 예가 하기의 표 1에 기술된다.
참조 블록의
부호화 파라미터
현재 블록의 부호화
화면 내 부호화 모드


화면 간 부호화에 필요한 신텍스가 화면 내 부호화 모드를 늘려서 시그널링하는데 사용될 수 있다. 시맨틱은 화면 내 부호화 모드에 대한 시맨틱으로 정의될 수 있고, 복호화 절차는 상기 화면 내 부호화 모드에 대한 복호화 절차로 정의될 수 있다.
화면 간 부호화에 필요한 신텍스가 화면 내 매크로 블록 파티션을 늘려서 시그널링하는데 사용될 수 있다. 시맨틱은 화면 내 매크로 블록 파티션에 대한 시맨틱으로 정의될 수 있고, 복호화 절차는 매크로 블록 파티션에 대한 복호화 절차로 정의될 수 있다.
화면 간 부호화에 필요한 신텍스가 화면 내 예측 방향을 늘려서 시그널링하는데 사용될 수 있다. 시맨틱은 상기 화면 내 예측 방향에 대한 시맨틱으로 정의될 수 있고, 복호화 절차는 상기 화면 내 예측 방향에 대한 복호화 절차로 정의될 수 있다.
참조 블록이 화면 내 부호화되었다면, 참조 블록의 화면 내 부호화 모드에 따라서 현재 블록이 참조 블록의 화면 내 부호화 모드로 부호화될 수 있다. 참조 블록의 화면 내 부호화 모드로 현재 블록을 부호화하는 경우에는, 현재 블록의 화면 내 부호화 모드로서 상기 참조 블록의 화면 내 부호화 모드가 사용된다. 따라서, 현재 블록의 화면 내 부호화 모드가 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다.
휘도 및 색차 화면 내 예측 방향 참조 블록이 화면 내 부호화되었다면, 상기 참조 블록의 휘도 및 화면 내 예측 방향으로 부호화될 수 있으며, 상기 참조 블록의 휘도 및 화면 내 예측 방향과 유사한 예측 방향을 갖는 화면 내 예측 방향으로만 부호화될 수도 있다. 참조 블록의 휘도 및 화면 내 예측 방향으로 현재 블록을 부호화하는 경우에는, 현재 블록의 휘도 및 화면 내 예측 방향으로서 참조 블록의 휘도 및 화면 내 예측 방향을 사용하게 된다. 따라서, 현재 블록의 휘도 및 화면 내 예측 방향이 복호화기로 시그널링되지 않을 수 있으며, 이를 통해 부호화 효율이 향상될 수 있다.
잔여 신호 참조 블록의 잔여 신호가 부호화되지 않았다면, 현재 블록의 잔여 신호도 부호화되지 않을 수 있다. 신텍스인 CBP(coded block pattern)을 부호화하는데 필요한 비트가 절약될 수 있다. 이때, 참조 블록의 잔여 신호 부호화 유무에 따라, 현재 블록의 부호화 블록 패턴(CBP)을 시그널링하지 않고, 잔여 신호도 부호화하지 않음으로써, 현재 블록의 부호화 효율이 향상될 수 있다.
참조 블록의 부호화 파라미터에 따른 현재 블록의 화면 내 부호화 방법이 부호화기에서 사용될 경우, 복호화기는 생략된 부호화 파라미터 정보를 참조 블록으로부터 도출할 수 있으며, 도출된 정보를 현재 복호화 대상 블록에 적용하여 현재 블록에서 생략된 부호화 파라미터 정보를 올바르게 사용할 수 있다. 이때, 필요한 경우, 부호화기는 어떤 참조 블록이 선택되었는지에 대한 참조 블록 식별자를 복호화기로 전송할 수 있고, 복호화기는 해당 참조 블록으로부터 생략된 부호화 파라미터 정보를 도출해 낼 수 있다.하기의 도 7에서, 참조 블록의 휘도 및 색차 화면 내 예측 방향에 따른 현재 블록의 화면 내 부호화의 일 예가 도시된다.
하기의 도 8에서, 참조 블록의 잔여 신호 유무에 따른 현재 블록의 화면 내 부호화의 일 예가 도시된다.
참조 블록이 화면 간 부호화된 경우, 현재 블록에 대해 화면 간 부호화만이 수행될 수도 있다. 화면 내 부호화에 필요한 신텍스, 시맨틱 및 복호화 절차는 화면 간 부호화에 이용될 수 있다.
참조 블록의 부호화 파라미터에 따른 현재 블록의 화면 간 부호화의 일 예가 하기의 표 2에 기술된다.
참조 블록의
부호화 파라미터
현재 블록의 부호화
화면 간 부호화 모드



화면 내 부호화에 필요한 신텍스가 화면 간 부호화 모드를 늘려서 시그널링하는데 사용될 수 있다. 시맨틱은 화면 간 부호화 모드에 대한 시맨틱으로 정의될 수 있고, 복호화 절차는 화면 간 부호화 모드에 대한 복호화 절차로 정의될 수 있다.
화면 내 부호화에 필요한 신텍스가 화면 간 매크로 블록 파티션을 늘려서 시그널링하는데 사용될 수 있다. 시맨틱은 화면 간 매크로 블록 파티션에 대한 시맨틱으로 정의될 수 있고, 복호화 절차는 매크로 블록 파티션에 대한 복호화 절차로 정의될 수 있다.
화면 내 부호화에 필요한 신텍스가 화면 간 예측 방식을 늘려서 시그널링하는데 사용될 수 있다. 시맨틱은 화면 간 예측 방식에 대한 시맨틱으로 정의될 수 있고, 복호화 절차는 화면 간 예측 방식에 대한 복호화 절차로 정의될 수 있다.
참조 블록이 화면 간 부호화되었다면, 참조 블록의 화면 간 부호화 모드에 따라서 현재 블록이 참조 블록의 화면 간 부호화 모드로 부호화될 수 있다. 참조 블록의 화면 간 부호화 모드로 현재 블록을 부호화하는 경우에는, 현재 블록의 화면 간 부호화 모드로서 참조 블록의 화면 간 부호화 모드가 사용된다. 따라서, 현재 블록의 화면 간 부호화 모드가 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다
참조 블록이 화면 간 부호화되었다면, 참조 블록의 화면 간 매크로 블록 파티션에 따라서 현재 블록은 참조 블록의 화면 간 매크로 블록 파티션으로 부호화될 수 있다. 또한, 현재 블록은 화면 간 매크로 블록 파티션과 유사한 매크로 블록 파티션을 갖는 화면 간 매크로 블록 파티션으로만 부호화될 수도 있다.
참조 블록의 화면 간 매크로 블록 파티션으로 현재 블록이 부호화되는 경우에는, 현재 블록의 화면 간 매크로 블록 파티션으로서 참조 블록의 화면 간 매크로 블록 파티션이 사용된다. 따라서, 현재 블록의 화면 간 매크로 블록 파티션이 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다.
움직임 벡터 참조 블록이 화면 간 부호화되었다면, 참조 블록의 움직임 벡터에 따라서 현재 블록은 참조 블록의 움직임 벡터로 부호화될 수 있다. 또한, 현재 블록은 움직임 벡터와 유사한 움직임 벡터(즉, 양 움직임 벡터들 간의 크기 차이가 크지 않음.)로만 부호화될 수도 있다. 참조 블록의 움직임 벡터로 현재 블록을 부호화하는 경우에는, 현재 블록의 움직임 벡터로서 상기 참조 블록의 움직임 벡터가 사용된다. 따라서, 현재 블록의 움직임 벡터가 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다.
참조 영상 색인(reference picture index) 참조 블록이 화면 간 부호화되었다면, 참조 블록의 참조 영상 색인에 따라서 현재 블록은 참조 블록의 참조 영상 색인으로 부호화될 수 있다. 또한, 현재 블록은 참조 영상 색인과 유사한 참조 영상 색인(즉, 참조 영상 색인들 간의 차이가 크지 않음.)으로만 부호화될 수도 있다. 참조 블록의 영상 색인으로 현재 블록을 부호화하는 경우에는, 현재 블록의 참조 영상 색인으로서 참조 블록의 참조 영상 색인이 사용된다. 따라서, 현재 블록의 참조 영상 색인이 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다.
참조 영상 리스트(reference picture list) 참조 블록이 화면 간 부호화되었다면, 참조 블록의 참조 영상 리스트에 따라서 현재 블록은 상기 참조 블록의 참조 영상 리스트로 부호화될 수 있다. 참조 블록의 참조 영상 리스트로 현재 블록이 부호화되는 경우에는, 현재 블록의 참조 영상 리스트로서 참조 블록의 참조 영상 리스트가 사용된다. 따라서, 현재 블록의 참조 영상 리스트가 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다
예측 방향(prediction direction) 참조 블록이 화면 간 부호화되었다면, 참조 블록의 예측 방향에 따라서 현재 블록은 참조 블록의 예측 방향으로 부호화될 수 있다. 참조 블록의 예측 방향으로 현재 블록이 부호화되는 경우에는, 현재 블록의 예측 방향으로서 상기 참조 블록의 예측 방향이 사용된다. 따라서, 현재 블록의 예측 방향이 복호화기로 시그널링되지 않을 수 있으며, 이에 의해 부호화 효율이 향상될 수 있다.
보간 필터 참조 블록이 특정 보간 필터를 이용하여 참조 블록의 움직임 예측/보상이 수행되었다면, 참조 블록의 보간 필터의 형태 및 종류에 따라, 해당 보간 필터를 이용하여 현재 블록의 움직임 예측/보상이 수행되며, 부호화가 수행된다.
잔여 신호 참조 블록의 잔여 신호가 부호화되지 않았다면, 현재 블록의 잔여 신호도 부호화되지 않을 수 있다. 신텍스인 CBP(coded block pattern)을 부호화하기 위해 필요한 비트가 절약될 수 있다. 이때, 현재 블록에 대해서, 참조 블록의 잔여 신호 부호화 유무(CBP)에 따라, 현재 블록의 부호화 블록 패턴을 시그널링하지 않고, 잔여 신호도 부호화하지 않음으로써, 부호화 효율이 향상될 수 있다.
부호화기가 참조 블록의 부호화 파라미터에 따른 현재 블록의 화면 간 부호화 방법을 사용한 경우, 복호화기는 생략된 부호화 파라미터 정보를 참조 블록으로부터 도출할 수 있다. 복호화기는 상기의 도출된 정보를 현재 복호화 대상 블록에 적용함으로써 현재 블록에서 생략된 부호화 파라미터 정보를 올바르게 사용할 수 있다.이때, 필요할 경우, 부호화기는 어떤 참조 블록이 선택되었는지를 나타내는(또는, 어떤 참조 블록이 선택되었는지에 대한 정보를 포함하는) 참조 블록 식별자를 복호화기로 전송할 수 있다. 참조 블록 식별자를 사용함으로써, 복호화기는 식별된 참조 블록으로부터 생략된 부호화 파라미터 정보를 도출해 낼 수 있다.
하기의 도 9에서, 참조 블록의 화면 간 매크로 블록 파티션에 따른 현재 블록의 화면 간 부호화의 일 예가 도시된다.
하기의 도 10에서, 참조 블록의 움직임 벡터에 따른 현재 블록의 화면 간 부호화의 일 예가 도시된다.
하기의 도 11에서, 참조 블록의 참조 영상 색인에 따른 현재 블록의 화면 간 부호화의 일 예가 도시된다.
하기의 도 12에서, 참조 블록의 참조 영상 리스트에 따른 현재 블록의 화면 간 부호화의 일 예가 도시된다.
하기의 도 13에서, 참조 블록의 예측 방향에 따른 현재 블록의 화면 간 부호화의 일 예가 도시된다.
참조 블록들 내의 화소값들의 선형 조합이 현재 블록의 예측 블록으로 이용될 수 있다.
참조 블록 A, A' 및 A'' 등 중 하나 이상이 조건 B를 만족시키는 부호화 파라미터를 갖는 경우, 현재 블록의 예측 블록 G는 하기의 수학식 1에 따른 선형 조합을 통해 생성될 수 있다.
여기서 예측 블록 F는 참조 블록의 화소값이다. 예측 블록 F'는 현재 블록의 부호화 파라미터에 의해 생성된 예측 블록이다. a 및 b는 가중치이다.
참조 블록의 복원된 화소값 및 현재 블록의 부호화 파라미터에 따라, 가중치 합에 의해 예측 블록 G가 생성된다. 생성된 예측 블록 G가 현재 블록의 예측 블록으로서 이용된다.
제약된 후보 모드 세트가 현재 블록의 부호화 가능한 파라미터로 사용될 수 있다. 참조 블록 A, A' 및 A'' 등 중 적어도 하나가 조건 B를 만족시키는 부호화 파라미터를 갖는 경우, 후보 모드 세트 C로 현재 블록의 부호화 가능한 파라미터가 제약될 수 있다. 상기의 세트는 매크로 블록 타입, 서브(sub) 매크로 블록 타입, 화면 간 매크로 블록 파티션, 움직임 벡터, 참조 영상 색인, 참조 영상 리스트 및 예측 방향 등을 포함한다.
예컨대, 참조 블록이 화면 내 부호화되었고, 현재 블록이 화면 내 부호화된 경우, 상기 현재 블록의 부호화 파라미터가 화면 내 부호화 파라미터로 제약될 수 있다.
상기 제약은 화면 간 부호화 파라미터에 사용되는 신텍스, 시맨틱 및 복호화 절차를 제거하여 부호화 효율을 향상시킨다.
현재 블록의 부호화 모드는 경쟁에 따른 최적의 부호화 모드로 결정될 수 있다.
예컨대, 참조 블록 A, A' 및 A'' 등 중 적어도 하나가 조건 B를 만족시키는 부호화 파라미터를 갖는 경우, 현재 블록은 참조 블록에 따라 적응적으로 부호화되는 절차 없이 1) 기존 부호화 파라미터의 신텍스, 시맨틱 및 복호화 절차 및 2) 참조 블록에 따라 적응적으로 부호화되는 모드 간의 율-왜곡 최적화, 왜곡 관점 및 율 관점에서의 경쟁을 통해 결정되는 최적의 부호화 모드로 부호화될 수 있다.
한편, 참조 블록의 부호화 파라미터에 따라 적응적으로 부호화되는 모드 및 적응적으로 부호화되지 않는 모드 간의 경쟁이 수행될 수 있다. 상기 경쟁을 통해 현재 블록의 부호화 모드가 선택될 수 있다.
이 경우, 현재 블록은 전술된 첫 번째 부호화 모드(즉, 참조 블록의 부호화 파라미터에 따른 적응적 부호화 모드)로 부호화되는지 또는 전술된 두 번째 부호화 모드(즉, 비적응적 부호화 모드)로 부호화되는지에 대한 추가적인 부호화 방식 지시자 및 신텍스를 복호화기로 전송할 수 있다. 복호화기는 전송된 추가적인 부호화 방식 지시자 및 신텍스를 사용하여 현재 블록을 올바른 모드로 복호화할 수 있다.
즉, 참조 블록의 부호화 파라미터를 이용하는 적응적인 부호화 방법 및 참조 블록의 부호화 파라미터를 이용하지 않는 비적응적 부호화 방법 중 어떠한 부호화 방법이 부호화기에 적합한지 선택된다. 선택된 방법(즉, 부호화 모드)에 대한 정보는 복호화기로 시그널링된다.
예컨대, 부호화기에서 율-왜곡 관점에서 최소의 율-왜곡 비용을 보이는 부호화 방법이 선택될 수 있다. 또한, 선택된 부호화 방법이 복호화기에서 복호화될 수 있도록, 선택된 부호화 방식에 대한 부호화 방식 지시자가 복호화기로 전송될 수 있다.
현재 블록의 부호화 모드는 참조 블록의 부호화 파라미터의 조건에 따라 추가적인 신텍스, 시맨틱 및 복호화 절차를 가질 수 있다.
예컨대, 참조 블록 A, A' 및 A'' 등 중 적어도 하나가 조건 B를 만족시키는 부호화 파라미터를 갖는 경우, 현재 블록의 부호화 모드는 추가적인 신텍스 C, 상기 C에 대한 시맨틱 D 및 상기 C에 대한 복호화 절차 E를 가질 수 있다.
현재 블록의 부호화 모드는 참조 블록의 부호화 파라미터에 무관하게 추가적인 신텍스, 시맨틱 및 복호화 절차를 가질 수 있다.
예컨대, 참조 블록의 부호화 파라미터에 무관하게, 현재 블록의 부호화 모드는 추가적인 신텍스 C, 상기 C에 대한 시맨틱 D 및 상기 C에 대한 복호화 절차 E를 가질 수 있다.
현재 블록의 부호화 모드가 스킵(skip)으로 부호화될 때 화면 간 예측 블록의 예측 방법의 일 예가 하기의 표 3에 기술되었다.
파라미터 예측 블록의 이용 방법
참조 영상 색인 현재 블록의 부호화 모드에 참조 영상 색인에 대한 신텍스, 시맨틱 및 복호화 절차가 추가될 수 있으며, 참조 영상으로부터 화면 간 예측 블록이 예측될 수 있다.
참조 블록 중 어느 하나의 블록이 갖는 참조 영상 색인에 따라, 참조 블록의 참조 영상 색인에 의해 참조 영상으로부터 화면 간 예측 블록이 예측될 수 있다.
움직임 벡터 현재 블록의 부호화 모드에 움직임 벡터에 대한 신텍스, 시맨틱 및 복호화 절차가 추가될 수 있으며, 움직임 벡터로부터 화면 간 예측 블록이 예측될 수 있다.
따라서, 현재 블록이 화면 간 슬라이스에 속하며, 참조 블록 중 하나 이상이 화면 내 부호화된 경우, 현재 블록의 부호화 모드는 화면 내 부호화 모드이지만, 움직임 벡터 및 참조 영상 색인을 갖게 된다. 이 경우, 현재 블록의 예측 블록은 1) 현재 블록의 화면 내 부호화 파라미터로부터 생성된 화면 내 예측 블록 및 2) 현재 블록의 화면 간 부호화 파라미터들 중 움직임 벡터 및 참조 영상 색인으로부터 생성된 화면 간 예측 블록의 가중치의 합으로써 생성될 수 있다.적응적 스킵 모드(adaptive skip mode)가 사용될 경우, 화면 간 슬라이스에서 P_SKIP 모드 또는 B_SKIP 모드 또는 다이렉트 모드로 현재 블록이 부호화될 때, 현재 블록은 참조 블록의 부호화 파라미터에 따라 적응적으로 부호화될 수 있다.
예컨대, 참조 블록 중 일부 또는 전부가 화면 내 부호화된 경우, 현재 블록의 부호화 방법의 일 예가 하기의 표 4에서 설명된다.
현재 블록의
파라미터
예측 블록의 이용 방법
부호화 모드
현재 블록의 부호화 모드를 P_SKIP 모드 또는 B_SKIP 모드로 시그널링하되, 참조 블록의 화면 내 부호화 모드가 그대로 이용될 수 있고, 참조 블록의 화면 내 부호화 모드와 가장 유사한 화면 내 부호화 모드가 이용될 수 있다.
현재 블록의 부호화 모드를 P_SKIP 모드 또는 B_SKIP 모드로 시그널링하되, 참조 블록의 복원된 픽셀을 이용하여 현재 블록이 화면 내 부호화될 수 있다.
화면 내 예측 방향 현재 블록의 부호화 모드를 P_SKIP 모드 또는 B_SKIP 모드로 시그널링하되, 현재 블록의 화면 내 예측 방향은 참조 블록의 화면 내 예측 방향이 그대로 이용될 수 있고, 또는 참조 블록의 화면 내 예측 방향과 가장 유사한 예측 방향이 이용될 수 있다.
잔여 신호 현재 블록의 부호화 모드를 P_SKIP 모드 또는 B_SKIP 모드로 시그널링하되, 참조 블록의 잔여 신호 유무에 따라 상기 현재 블록의 잔여 신호가 부호화되거나 부호화되지 않을 수 있다.
도 2는 본 발명의 일 예에 따른 현재 슬라이스 내의 복원된 블록들, 복원된 블록들 중에서 선택된 참조 블록 및 현재 블록을 도시한다.현재 슬라이스(210) 내의 복원된 블록들(220), 상기 복원된 블록들(220) 중에서 선택된 참조 블록(240) 및 현재 블록(230)이 도시되었다.
도 3은 본 발명의 일 실시예에 따른 영상 부호화 장치를 도시한다.
상기 영상 부호화 장치(300)는 제어부(310), 저장부(320) 및 버퍼(330)를 포함한다.
상기 제어부(310)는 상기 버퍼(330) 및 상기 저장부(320)로부터 슬라이스 및 슬라이스 내의 블록들에 대한 데이터를 입력 받는다. 상기 제어부(310)는 전술한 본 발명의 실시예에 따라 참조 블록의 결정, 상기 참조 블록의 부호화 파라미터의 판별, 상기 참조 블록의 특성의 판별 및 상기 현재 블록의 적응적 부호화를 수행한다. 상기 제어부(310)는 전술한 상기 결정, 상기 판별, 상기 부호화 등의 수행을 위해 필요한 데이터를 상기 저장부(320)에 저장한다.
상기 저장부(320)는 상기 제어부(310)로부터 상기 제어부(310)의 작동에 필요한 데이터를 전송 받는다. 상기 저장부(320)는 상기 제어부(310)의 요청에 따라 저장해 놓은 상기 데이터를 상기 제어부(310)로 전송한다.
한편, 상기 버퍼(330)는 외부로부터 슬라이스 및 상기 슬라이스 내의 블록들에 대한 데이터를 입력 받아 저장한다.
상기 장치는 부호화 방법에만 한정되는 것은 아니며, 부호화 과정과 동일한 목적을 지닌 복호화기에 상기 부호화 단계를 이용하여 상기 부호화 방법에 따라 적응적 복호화 방법에도 적용 가능하다.
도 4는 본 발명의 일 예에 따른 현재 슬라이스 내의 복원된 블록들, 복원된 블록들 중 참조 블록 및 현재 블록을 도시한다.
현재 슬라이스(410) 내의 복원된 블록들(420)이 도시되었고, 복원된 블록들(420) 중 참조 블록(440) 및 현재 블록(430)이 도시되었다.
도 5는 본 발명의 일 예에 따른 현재 슬라이스 내의 복원된 블록들, 복원된 블록들 중 복수의 참조 블록들 및 복수의 참조 블록들 중 하나의 참조 블록 및 현재 블록을 도시한다.
현재 슬라이스(510) 내의 복원된 블록들(520)이 도시되었고, 복원된 블록들(520) 중 복수의 참조 블록들(540)이 도시되었다, 또한, 복수의 참조 블록들(540) 중 하나의 참조 블록(550) 및 현재 블록(530)이 도시되었다.
도 6은 본 발명의 일 예에 따른 현재 영상 내의 현재 블록, 이전에 복원된 영상 내의 복원된 블록들 및 복원된 블록들 중 현재 블록과 동일한 영상 내 블록 위치에 존재하는 참조 블록을 도시된다.
현재 영상(610) 내의 현재 블록(630), 이전에 복원된 영상(620) 내의 복원된 블록들(640)이 도시되었다. 또한, 복원된 블록들(640) 중에서 현재 블록(630)과 동일한 영상 내 블록 위치에 존재하는 참조 블록(650)이 도시되었다.
도 7은 본 발명의 일 예에 따른 참조 블록의 휘도 및 색차 화면 내 예측 방향에 따른 현재 블록의 화면 내 부호화를 도시한다.
현재 슬라이스(710) 내의 복원된 블록들(720), 상기 복원된 블록들(720) 중 참조 블록들(730 및 732), 현재 블록(740)이 도시되었다.
참조 블록들(730 및 732)의 휘도 및 색차 화면 내 예측 방향(750 및 752)가 도시되었고, 현재 블록(740)의 휘도 및 색차 화면 내 예측 방향(760)이 도시되었다.
참조 블록들(730 및 732) 중 상단 블록(732)의 휘도 및 색차 화면 내 예측 방향(752)이 현재 블록(740)의 휘도 및 색차 화면 내 예측 방향(760)으로 사용된다. 즉, 상기 상단 블록(730)의 휘도 및 색차 화면 내 예측 방향(752)에 따라 현재 블록(740)이 부호화된다.
현재 블록(740)의 휘도 및 색차 화면 내 예측 방향(760)은 복호화기로 전송되지 않는다. 이때, 현재 블록(740)의 참조 블록이 상단 블록(752)임이 참조 블록 식별자를 통해 복호화기로 알려진다. 복호화기는 참조 블록 식별자를 통해 상단 블록(732)이 현재 블록(740)의 참조 블록임을 식별할 수 있다.
도 8은 본 발명의 일 예에 따른 참조 블록의 잔여 신호 유무에 따른 현재 블록의 화면 내 부호화 일 예가 도시한다.
현재 슬라이스(810) 내의 복원된 블록들(820), 상기 복원된 블록들(820) 중 참조 블록들(830 및 832), 현재 블록(840), 참조 블록들(830 및 832)의 잔여 신호 유무(850 및 852) 및 현재 블록의 잔여 신호 유무(860)가 도시되었다.
참조 블록들(830 및 832) 모두는 잔여 신호가 부호화되지 않았다. 따라서, 현재 블록(840)은 잔여 신호가 존재하지 않게 부호화된다. 또한, 잔여 신호 유무를 나타내는 현재 블록(840)의 CBP 신텍스는 전송되지 않는다.
이때, 잔여 신호가 존재하면 CBP=1, 잔여 신호가 존재하지 않으면 CBP=0이다.
CBP 신텍스가 전송되지 않은 경우, 복호화기는 잔여 신호가 존재하지 않는 것으로 유추할 수 있다. 또한, 부호화기는 참조 블록 식별자를 통해 현재 블록(840)에서 2개의 참조 블록들(830 및 832)을 이용하였음을 복호화기로 전송할 수 있다.
도 9는 본 발명의 일 예에 따른 참조 블록의 화면 간 매크로 블록 파티션에 따른 현재 블록의 화면 간 부호화를 도시한다.
현재 슬라이스(910) 내의 복원된 블록들(920), 상기 복원된 블록들(920) 중 참조 블록들(930 및 932), 현재 블록(940), 참조 블록(932)의 화면 간 매크로 블록 파티션(950) 및 현재 블록(940)의 화면 간 매크로 블록 파티션(960)이 도시되었다.
참조 블록들(930 및 932) 중 상단 블록(932)의 화면 간 매크로 블록 파티션(950)이 현재 블록(940)의 화면 간 매크로 블록 파티션(960)으로 사용된다. 즉, 상단 블록(932)의 화면 간 매크로 블록 파티션(950)에 따라 현재 블록(940)이 부호화된다.
현재 블록(940)의 화면 간 매크로 블록 파티션(960)은 복호화기로 전송되지 않는다. 상단 블록(932)이 현재 블록(940)의 참조 블록임이 참조 블록 식별자를 통해 복호화기로 알려 진다. 복호화기는 참조 블록 식별자를 통해 상단 블록(932)이 현재 블록(940)의 참조 블록임을 식별할 수 있다.
도 10은 본 발명의 일 예에 따른 참조 블록의 움직임 벡터에 따른 현재 블록의 화면 간 부호화를 도시한다.
현재 슬라이스(1010) 내의 복원된 블록들(1020), 상기 복원된 블록들(1020) 중 참조 블록들(1030 및 1032), 현재 블록(1040), 참조 블록(1032)의 움직임 벡터(1050) 및 현재 블록(1040)의 움직임 벡터(1060)가 도시되었다.
참조 블록(1030 및 1032)들 중 상단 블록(1032)의 움직임 벡터(1050)가 현재 블록(1040)의 움직임 벡터(1060)로 사용된다. 즉, 상단 블록(1032)의 움직임 벡터(1050)에 따라 현재 블록(1040)이 부호화된다.
현재 블록(1040)의 움직임 벡터(1060)는 복호화기로 전송되지 않는다. 상단 블록(1032)이 현재 블록(940)의 참조 블록임이 참조 블록 식별자를 통해 복호화기로 알려 진다. 복호화기는 참조 블록 식별자를 통해 상단블록(1032)이 현재 블록(1040)의 참조 블록임을 식별할 수 있다.
도 11은 본 발명의 일 예에 따른 참조 블록의 참조 영상 색인에 따른 현재 블록의 화면 간 부호화를 도시한다.
현재 슬라이스(1110) 내의 복원된 블록들(1120), 상기 복원된 블록들(1120) 중 참조 블록(1130 및 1132), 현재 블록(1140), 참조 블록(1130 및 1132)의 참조 영상 색인(1150) 및 현재 블록의 참조 영상 색인(1160)이 도시되었다.
참조 블록들(1130 및 1132) 중 상단 블록(1132)의 참조 영상 색인(1150)이 현재 블록(1140)의 참조 영상 색인(1160)으로 사용된다. 즉, 상단 블록(1132)의 참조 영상 색인(1160)에 따라 현재 블록(1140)이 부호화된다.
현재 블록(1140)의 참조 영상 색인(1160)은 복호화기로 전송되지 않는다. 상단 블록(1132)이 현재 블록(1140)의 참조 블록임이 참조 블록 식별자를 통해 복호화기로 알려 진다. 복호화기는 참조 블록 식별자를 통해 상단 블록(1132)이 현재 블록(1140)의 참조 블록임을 식별할 수 있다.
도 12는 본 발명의 일 예에 따른 참조 블록의 참조 영상 리스트에 따른 현재 블록의 화면 간 부호화를 도시한다.
현재 슬라이스(1210) 내의 복원된 블록들(1220), 상기 복원된 블록들(1220) 중 참조 블록(1230 및 1232), 현재 블록(1240), 참조 블록의 참조 영상 리스트(1250) 및 현재 블록의 참조 영상 리스트(1260)가 도시되었다.
참조 블록들(1230 및 1232) 중 상단 블록(1232)의 참조 영상 리스트(1250)가 현재 블록(1240)의 참조 영상 리스트(1260)로 사용된다. 즉, 상단 블록(1232)의 참조 영상 리스트(1250)에 따라 현재 블록(1240)이 부호화된다.
현재 블록(1240)의 참조 영상 리스트(1260)는 복호화기로 전송되지 않는다. 상단 블록(1232)이 현재 블록(1240)의 참조 블록임이 참조 블록 식별자를 통해 복호화기로 알려 진다. 복호화기는 참조 블록 식별자를 통해 상단 블록(1232)이 현재 블록(1240)의 참조 블록임을 식별할 수 있다.
도 13은 본 발명의 일 예에 따른 참조 블록의 예측 방향에 따른 현재 블록의 화면 간 부호화를 도시한다.
현재 슬라이스(1310) 내의 복원된 블록들(1320), 상기 복원된 블록들(1320) 중 참조 블록(1330 및 1332), 현재 블록(1340), 참조 블록의 예측 방향(1350) 및 현재 블록의 예측 방향(1360)이 도시되었다.
참조 블록들(1330 및 1332) 중 상단 블록(1332)의 예측 방향(1350)이 현재 블록(1340)의 예측 방향(1360)으로 사용된다. 즉, 상단 블록(1332)의 예측 방향(1350)에 따라 현재 블록(1340)이 부호화된다.
현재 블록(1340)의 예측 방향(1360)은 복호화기로 전송되지 않는다. 상단 블록(1332)이 현재 블록(1340)의 참조 블록임이 참조 블록 식별자를 통해 복호화기로 알려 진다. 복호화기는 참조 블록 식별자를 통해 상단 블록(1332)이 현재 블록(1340)의 참조 블록임을 식별할 수 있다.
본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
310: 제어부
320: 저장부
330: 버퍼

Claims (3)

  1. 영상 복호화 방법에 있어서,
    참조 블록에 대한 코딩 파라미터에 기초하여 현재 블록에 대한 코딩 파라미터를 결정하는 단계; 및
    상기 현재 블록에 대한 코딩 파라미터에 따라 상기 현재 블록을 복호화 하는 단계를 포함하고,
    상기 현재 블록에 대한 코딩 파라미터는 상기 현재 블록에 대한 문맥 모델을 포함하고,
    상기 참조 블록에 대한 코딩 파라미터는 스킵 모드에 관련된 정보를 포함하고,
    상기 참조 블록은 상기 현재 블록에 인접한 적어도 하나의 블록을 포함하고,
    상기 현재 블록에 대한 코딩 파라미터를 결정함에 있어, 상기 참조 블록에 대한 코딩 파라미터를 사용할지 여부는 상기 참조 블록이 픽처의 경계 내부에 위치하는지 여부를 기초로 결정되고,
    상기 현재 블록은 부호화 유닛인 것을 특징으로 하는 영상 복호화 방법.
  2. 영상 부호화 방법에 있어서,
    현재 블록에 대한 부호화를 수행하여 현재 블록의 정보를 생성하는 단계를 포함하고,
    상기 현재 블록의 정보를 포함하는 비트스트림을 사용하는 상기 현재 블록의 복호화에 있어서,
    현재 블록에 대한 코딩 파라미터에 따라 상기 현재 블록의 복호화가 수행되고,
    상기 현재 블록에 대한 코딩 파라미터는 참조 블록에 대한 코딩 파라미터에 기초하여 결정되고,
    상기 현재 블록에 대한 코딩 파라미터는 상기 현재 블록에 대한 문맥 모델을 포함하고,
    상기 참조 블록에 대한 코딩 파라미터는 스킵 모드에 관련된 정보를 포함하고,
    상기 참조 블록은 상기 현재 블록에 인접한 적어도 하나의 블록을 포함하고,
    상기 현재 블록에 대한 코딩 파라미터를 결정함에 있어, 상기 참조 블록에 대한 코딩 파라미터를 사용할지 여부는 상기 참조 블록이 픽처의 경계 내부에 위치하는지 여부를 기초로 결정되고,
    상기 현재 블록은 부호화 유닛인 것을 특징으로 하는 영상 부호화 방법.
  3. 영상 부호화 방법에 의해 생성되는 비트스트림을 저장하는 비일시적 기록매체에 있어서, 상기 영상 부호화 방법은,
    현재 블록에 대한 부호화를 수행하여 현재 블록의 정보를 생성하는 단계를 포함하고,
    상기 현재 블록의 정보를 포함하는 비트스트림을 사용하는 상기 현재 블록의 복호화에 있어서,
    상기 현재 블록에 대한 코딩 파라미터는 참조 블록에 대한 코딩 파라미터에 기초하여 결정되고,
    현재 블록에 대한 코딩 파라미터에 따라 상기 현재 블록의 복호화가 수행되고,
    상기 현재 블록에 대한 코딩 파라미터는 상기 현재 블록에 대한 문맥 모델을 포함하고,
    상기 참조 블록은 상기 현재 블록에 인접한 적어도 하나의 블록을 포함하고,
    상기 현재 블록에 대한 코딩 파라미터를 결정함에 있어, 상기 참조 블록에 대한 코딩 파라미터를 사용할지 여부는 상기 참조 블록이 픽처의 경계 내부에 위치하는지 여부를 기초로 결정되고,
    상기 현재 블록은 부호화 유닛인 것을 특징으로 하는 비일시적 기록 매체.
KR1020230056069A 2009-12-16 2023-04-28 적응적인 영상 부호화 방법 및 장치 KR102634646B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020240016459A KR20240023064A (ko) 2009-12-16 2024-02-02 적응적인 영상 부호화 방법 및 장치

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20090125305 2009-12-16
KR1020090125305 2009-12-16
KR1020100050034A KR20110068792A (ko) 2009-12-16 2010-05-28 적응적 영상 부호화 장치 및 방법
KR1020100050034 2010-05-28
KR1020220106424A KR102528914B1 (ko) 2009-12-16 2022-08-24 적응적인 영상 부호화 방법 및 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020220106424A Division KR102528914B1 (ko) 2009-12-16 2022-08-24 적응적인 영상 부호화 방법 및 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020240016459A Division KR20240023064A (ko) 2009-12-16 2024-02-02 적응적인 영상 부호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20230066527A KR20230066527A (ko) 2023-05-16
KR102634646B1 true KR102634646B1 (ko) 2024-02-07

Family

ID=44400968

Family Applications (32)

Application Number Title Priority Date Filing Date
KR1020100050034A KR20110068792A (ko) 2009-12-16 2010-05-28 적응적 영상 부호화 장치 및 방법
KR1020100127500A KR101234008B1 (ko) 2009-12-16 2010-12-14 적응적 영상 부호화 장치 및 방법
KR1020120072445A KR101425180B1 (ko) 2009-12-16 2012-07-03 적응적 영상 부호화 장치 및 방법
KR1020120130490A KR101423735B1 (ko) 2009-12-16 2012-11-16 적응적 영상 부호화 장치 및 방법
KR1020130078966A KR20130090863A (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 장치 및 방법
KR1020130078965A KR101425186B1 (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 장치 및 방법
KR1020130078940A KR101691902B1 (ko) 2009-12-16 2013-07-05 적응적 영상 복호화 방법 및 컴퓨터로 판독 가능한 기록매체
KR1020130078967A KR101569034B1 (ko) 2009-12-16 2013-07-05 적응적 영상 복호화를 위한 컴퓨터 판독 가능한 기록매체
KR1020130078944A KR101691901B1 (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 방법 및 컴퓨터로 판독 가능한 기록매체
KR1020130078931A KR101423738B1 (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 장치 및 방법
KR1020160010149A KR101678408B1 (ko) 2009-12-16 2016-01-27 적응적인 영상 부호화 방법 및 장치
KR1020160010152A KR101678409B1 (ko) 2009-12-16 2016-01-27 적응적인 영상 부호화 방법 및 장치
KR1020160105475A KR101722988B1 (ko) 2009-12-16 2016-08-19 적응적인 영상 부호화 방법 및 장치
KR1020170039125A KR101835834B1 (ko) 2009-12-16 2017-03-28 적응적인 영상 부호화 방법 및 장치
KR1020180024800A KR101933029B1 (ko) 2009-12-16 2018-02-28 적응적인 영상 부호화 방법 및 장치
KR1020180062006A KR101946916B1 (ko) 2009-12-16 2018-05-30 적응적인 영상 부호화 방법 및 장치
KR1020180080821A KR102104586B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080820A KR102107091B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080818A KR102104585B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080813A KR102104582B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080815A KR102104583B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080817A KR102104584B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180120385A KR102007291B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020180120366A KR102007290B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020180120404A KR102007292B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020180120346A KR102007289B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020200050848A KR102219511B1 (ko) 2009-12-16 2020-04-27 적응적인 영상 부호화 방법 및 장치
KR1020210021568A KR102332672B1 (ko) 2009-12-16 2021-02-18 적응적인 영상 부호화 방법 및 장치
KR1020210163888A KR102437751B1 (ko) 2009-12-16 2021-11-25 적응적인 영상 부호화 방법 및 장치
KR1020220106424A KR102528914B1 (ko) 2009-12-16 2022-08-24 적응적인 영상 부호화 방법 및 장치
KR1020230056069A KR102634646B1 (ko) 2009-12-16 2023-04-28 적응적인 영상 부호화 방법 및 장치
KR1020240016459A KR20240023064A (ko) 2009-12-16 2024-02-02 적응적인 영상 부호화 방법 및 장치

Family Applications Before (30)

Application Number Title Priority Date Filing Date
KR1020100050034A KR20110068792A (ko) 2009-12-16 2010-05-28 적응적 영상 부호화 장치 및 방법
KR1020100127500A KR101234008B1 (ko) 2009-12-16 2010-12-14 적응적 영상 부호화 장치 및 방법
KR1020120072445A KR101425180B1 (ko) 2009-12-16 2012-07-03 적응적 영상 부호화 장치 및 방법
KR1020120130490A KR101423735B1 (ko) 2009-12-16 2012-11-16 적응적 영상 부호화 장치 및 방법
KR1020130078966A KR20130090863A (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 장치 및 방법
KR1020130078965A KR101425186B1 (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 장치 및 방법
KR1020130078940A KR101691902B1 (ko) 2009-12-16 2013-07-05 적응적 영상 복호화 방법 및 컴퓨터로 판독 가능한 기록매체
KR1020130078967A KR101569034B1 (ko) 2009-12-16 2013-07-05 적응적 영상 복호화를 위한 컴퓨터 판독 가능한 기록매체
KR1020130078944A KR101691901B1 (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 방법 및 컴퓨터로 판독 가능한 기록매체
KR1020130078931A KR101423738B1 (ko) 2009-12-16 2013-07-05 적응적 영상 부호화 장치 및 방법
KR1020160010149A KR101678408B1 (ko) 2009-12-16 2016-01-27 적응적인 영상 부호화 방법 및 장치
KR1020160010152A KR101678409B1 (ko) 2009-12-16 2016-01-27 적응적인 영상 부호화 방법 및 장치
KR1020160105475A KR101722988B1 (ko) 2009-12-16 2016-08-19 적응적인 영상 부호화 방법 및 장치
KR1020170039125A KR101835834B1 (ko) 2009-12-16 2017-03-28 적응적인 영상 부호화 방법 및 장치
KR1020180024800A KR101933029B1 (ko) 2009-12-16 2018-02-28 적응적인 영상 부호화 방법 및 장치
KR1020180062006A KR101946916B1 (ko) 2009-12-16 2018-05-30 적응적인 영상 부호화 방법 및 장치
KR1020180080821A KR102104586B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080820A KR102107091B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080818A KR102104585B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080813A KR102104582B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080815A KR102104583B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180080817A KR102104584B1 (ko) 2009-12-16 2018-07-11 적응적인 영상 부호화 방법 및 장치
KR1020180120385A KR102007291B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020180120366A KR102007290B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020180120404A KR102007292B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020180120346A KR102007289B1 (ko) 2009-12-16 2018-10-10 적응적인 영상 부호화 방법 및 장치
KR1020200050848A KR102219511B1 (ko) 2009-12-16 2020-04-27 적응적인 영상 부호화 방법 및 장치
KR1020210021568A KR102332672B1 (ko) 2009-12-16 2021-02-18 적응적인 영상 부호화 방법 및 장치
KR1020210163888A KR102437751B1 (ko) 2009-12-16 2021-11-25 적응적인 영상 부호화 방법 및 장치
KR1020220106424A KR102528914B1 (ko) 2009-12-16 2022-08-24 적응적인 영상 부호화 방법 및 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020240016459A KR20240023064A (ko) 2009-12-16 2024-02-02 적응적인 영상 부호화 방법 및 장치

Country Status (9)

Country Link
US (8) US10419752B2 (ko)
EP (5) EP2515538A4 (ko)
JP (12) JP5593397B2 (ko)
KR (32) KR20110068792A (ko)
CN (10) CN103402092B (ko)
DK (1) DK3591970T3 (ko)
FI (1) FI3591970T3 (ko)
PT (1) PT3591970T (ko)
WO (1) WO2011074896A2 (ko)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110068792A (ko) * 2009-12-16 2011-06-22 한국전자통신연구원 적응적 영상 부호화 장치 및 방법
KR101929026B1 (ko) 2011-01-07 2018-12-13 엘지전자 주식회사 영상 정보 부호화 방법 및 복호화 방법과 이를 이용한 장치
MX2014000159A (es) * 2011-07-02 2014-02-19 Samsung Electronics Co Ltd Metodo y aparato para la codificacion de video, y metodo y aparato para la decodificacion de video acompañada por inter prediccion utilizando imagen co-localizada.
RU2622849C1 (ru) * 2011-09-09 2017-06-20 Кт Корпорейшен Способ и устройство декодирования видеосигнала
US9204171B1 (en) 2011-09-28 2015-12-01 Electronics And Telecommunications Research Institute Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
US9148663B2 (en) 2011-09-28 2015-09-29 Electronics And Telecommunications Research Institute Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
US9204148B1 (en) 2011-09-28 2015-12-01 Electronics And Telecommunications Research Institute Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
KR20130034566A (ko) * 2011-09-28 2013-04-05 한국전자통신연구원 제한된 오프셋 보상 및 루프 필터를 기반으로 하는 영상 부호화 및 복호화 방법 및 그 장치
JP5514372B2 (ja) 2011-10-05 2014-06-04 パナソニック株式会社 符号化方法および符号化装置
CN107483945B (zh) * 2011-11-08 2021-05-14 株式会社Kt 利用解码装置对视频信号进行解码的方法
CN104247427B (zh) * 2011-11-11 2018-10-12 Ge视频压缩有限责任公司 用于编码和解码的设备和方法
EP2777286B1 (en) 2011-11-11 2017-01-04 GE Video Compression, LLC Effective wedgelet partition coding
PT2777285T (pt) 2011-11-11 2017-12-01 Ge Video Compression Llc Codificação de partição adaptativa
CN107566835B (zh) 2011-12-23 2020-02-28 韩国电子通信研究院 图像解码方法、图像编码方法和记录介质
EP2800370A4 (en) * 2011-12-28 2015-08-19 Jvc Kenwood Corp VIDEO CODING DEVICE, VIDEO PROCESSING AND VIDEO PROGRAM, AND DEVICE, METHOD AND PROGRAM FOR VIDEO CODING
RU2609753C2 (ru) * 2012-07-11 2017-02-02 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ и устройство для обработки видеосигнала
JP5798539B2 (ja) * 2012-09-24 2015-10-21 株式会社Nttドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測復号装置及び動画像予測復号方法
RU2623905C1 (ru) * 2012-11-08 2017-06-29 Кт Корпорейшен Способ декодирования видеосигнала
RU2619199C1 (ru) * 2012-11-08 2017-05-12 Кт Корпорейшен Способ декодирования видеосигнала
US20140192866A1 (en) * 2013-01-09 2014-07-10 Mitsubishi Electric Research Laboratories, Inc. Data Remapping for Predictive Video Coding
GB2516426B (en) * 2013-07-17 2015-10-07 Gurulogic Microsystems Oy Encoder, decoder and method of operation using interpolation
US9838712B2 (en) * 2014-03-17 2017-12-05 Hfi Innovation Inc. Method of signaling for depth-based block partitioning
KR20160017467A (ko) 2014-08-06 2016-02-16 (주) 카피앤패이스트 비디오 컨텐츠와 관련된 상품 정보 제공 방법 및 장치
KR101676788B1 (ko) * 2014-10-17 2016-11-16 삼성전자주식회사 멀티코어 시스템 기반 비디오 병렬 복호화 방법 및 그 장치
US20160286224A1 (en) * 2015-03-26 2016-09-29 Thomson Licensing Method and apparatus for generating color mapping parameters for video encoding
KR102345475B1 (ko) * 2016-01-05 2022-01-03 한국전자통신연구원 잔차 신호에 대한 예측 방법 및 장치
US20190037217A1 (en) * 2016-02-16 2019-01-31 Samsung Electronics Co., Ltd. Video encoding method and apparatus, and decoding method and apparatus therefor
KR20170108367A (ko) * 2016-03-17 2017-09-27 세종대학교산학협력단 인트라 예측 기반의 비디오 신호 처리 방법 및 장치
EP3439303B1 (en) * 2016-04-28 2020-12-30 LG Electronics Inc. -1- Inter prediction mode-based image processing method and apparatus therefor
CN117041547A (zh) 2016-04-29 2023-11-10 世宗大学校产学协力团 用于对图像信号进行编码/解码的方法和设备
CN109479142B (zh) * 2016-04-29 2023-10-13 世宗大学校产学协力团 用于对图像信号进行编码/解码的方法和设备
EP3301929A1 (en) * 2016-09-30 2018-04-04 Thomson Licensing Method and apparatus for encoding and decoding a large field of view video
KR101873993B1 (ko) * 2016-11-18 2018-07-05 전자부품연구원 적응적 샘플 오프셋 파라미터 예측 방법 및 이를 위한 장치
US11025903B2 (en) * 2017-01-13 2021-06-01 Qualcomm Incorporated Coding video data using derived chroma mode
CN117425006A (zh) * 2017-03-22 2024-01-19 韩国电子通信研究院 使用参考块的预测方法和装置
TWI678917B (zh) * 2017-06-07 2019-12-01 聯發科技股份有限公司 用於視訊編解碼的畫面內-畫面間預測的方法及裝置
WO2019112394A1 (ko) * 2017-12-07 2019-06-13 한국전자통신연구원 채널들 간의 선택적인 정보 공유를 사용하는 부호화 및 복호화를 위한 방법 및 장치
CN116389731A (zh) * 2017-12-22 2023-07-04 数码士有限公司 视频信号处理方法和设备
JP7350757B2 (ja) * 2018-02-15 2023-09-26 アリス エンタープライジズ エルエルシー テンプレートマッチングのための可変テンプレートサイズ
CN112602329B (zh) * 2018-06-21 2023-08-11 瑞典爱立信有限公司 用于360度视频解码的块置乱
CA3108468A1 (en) 2018-08-06 2020-02-13 Electronics And Telecommunications Research Institute Image encoding/decoding method and device, and recording medium storing bitstream
US20200162737A1 (en) 2018-11-16 2020-05-21 Qualcomm Incorporated Position-dependent intra-inter prediction combination in video coding
US11652984B2 (en) * 2018-11-16 2023-05-16 Qualcomm Incorporated Position-dependent intra-inter prediction combination in video coding
GB2580036B (en) * 2018-12-19 2023-02-01 British Broadcasting Corp Bitstream decoding
CN113273210B (zh) * 2019-01-01 2024-04-16 Lg电子株式会社 用于编译关于合并数据的信息的方法和装置
CN110677647B (zh) * 2019-09-27 2024-02-09 腾讯科技(深圳)有限公司 视频解码、编码方法和装置、存储介质与解码器、编码器
CN111586416A (zh) * 2020-06-02 2020-08-25 浙江大华技术股份有限公司 视频编码方法、装置、编码器及存储装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006005438A (ja) 2004-06-15 2006-01-05 Sony Corp 画像処理装置およびその方法
US20060269153A1 (en) 2005-05-11 2006-11-30 Fang Shi Temporal error concealment for bi-directinally predicted frames
JP2009111733A (ja) 2007-10-30 2009-05-21 Nippon Telegr & Teleph Corp <Ntt> 画像符号化方法、画像符号化装置、及び画像符号化プログラム
US20090304084A1 (en) 2008-03-19 2009-12-10 Nokia Corporation Combined motion vector and reference index prediction for video coding

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH104556A (ja) * 1996-06-17 1998-01-06 Oki Electric Ind Co Ltd 動きベクトル検出装置及び動きベクトル検出方法
WO2002054779A2 (de) * 2001-01-08 2002-07-11 Siemens Aktiengesellschaft Verfahren zur header-kompression bei einer video-codierung
EP3122045B1 (en) 2001-11-06 2018-01-24 Panasonic Intellectual Property Corporation of America Moving picture coding method and moving picture decoding method
JP2004088722A (ja) 2002-03-04 2004-03-18 Matsushita Electric Ind Co Ltd 動画像符号化方法および動画像復号化方法
FI114679B (fi) * 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
US7170937B2 (en) * 2002-05-01 2007-01-30 Texas Instruments Incorporated Complexity-scalable intra-frame prediction technique
US7289672B2 (en) * 2002-05-28 2007-10-30 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode estimation
JP2004023458A (ja) 2002-06-17 2004-01-22 Toshiba Corp 動画像符号化/復号化方法及び装置
JP5017086B2 (ja) * 2002-07-15 2012-09-05 日立コンシューマエレクトロニクス株式会社 動画像復号化方法
JP4363326B2 (ja) 2002-07-15 2009-11-11 株式会社日立製作所 動画像復号化方法
US7263481B2 (en) * 2003-01-09 2007-08-28 Dilithium Networks Pty Limited Method and apparatus for improved quality voice transcoding
JP2004304724A (ja) 2003-04-01 2004-10-28 Sony Corp 画像処理装置とその方法、並びに符号化装置
US20050013494A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation In-loop deblocking filter
US7567617B2 (en) 2003-09-07 2009-07-28 Microsoft Corporation Predicting motion vectors for fields of forward-predicted interlaced video frames
JP4213646B2 (ja) 2003-12-26 2009-01-21 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム。
WO2006020019A1 (en) * 2004-07-15 2006-02-23 Qualcomm Incorporated H.264 spatial error concealment based on the intra-prediction direction
CN100455021C (zh) * 2004-09-30 2009-01-21 华为技术有限公司 帧内预测模式的选择方法
KR20060063608A (ko) * 2004-12-06 2006-06-12 엘지전자 주식회사 영상신호의 엔코딩/디코딩시에 영상블록에 대한 레지듀얼예측을 수행하는 방법 및 장치
US7813432B2 (en) * 2004-12-30 2010-10-12 Intel Corporation Offset buffer for intra-prediction of digital video
CA2590705A1 (en) * 2005-01-14 2006-07-20 Sungkyunkwan University Methods of and apparatuses for adaptive entropy encoding and adaptive entropy decoding for scalable video encoding
US7684491B2 (en) * 2005-03-31 2010-03-23 Intel Corporation Reference data buffer for intra-prediction of digital video
JP2006304107A (ja) 2005-04-22 2006-11-02 Ntt Electornics Corp 符号化装置、及び、この符号化装置に適用されるプログラム
WO2007029945A1 (en) 2005-09-06 2007-03-15 Samsung Electronics Co., Ltd. Method and apparatus for enhancing performance of entropy coding, video coding method and apparatus using the method
KR100736086B1 (ko) * 2005-09-06 2007-07-06 삼성전자주식회사 엔트로피 코딩의 성능 향상 방법 및 장치, 상기 방법을이용한 비디오 코딩 방법 및 장치
WO2007080491A1 (en) * 2006-01-09 2007-07-19 Nokia Corporation System and apparatus for low-complexity fine granularity scalable video coding with motion compensation
KR100934677B1 (ko) * 2006-01-12 2009-12-31 엘지전자 주식회사 다시점 비디오의 처리
WO2007136094A1 (ja) * 2006-05-24 2007-11-29 Panasonic Corporation 動画像復号装置
EP2056606A1 (en) 2006-07-28 2009-05-06 Kabushiki Kaisha Toshiba Image encoding and decoding method and apparatus
JP4763549B2 (ja) * 2006-08-18 2011-08-31 富士通セミコンダクター株式会社 フレーム間予測処理装置、画像符号化装置、及び画像復号化装置
KR20080035390A (ko) 2006-10-19 2008-04-23 삼성전자주식회사 영상 예측 모드 결정 방법 및 장치
CN101554058B (zh) * 2006-11-07 2011-09-21 三星电子株式会社 基于帧内预测进行编码和解码的方法和装置
US8942505B2 (en) 2007-01-09 2015-01-27 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filter representation
KR101365569B1 (ko) * 2007-01-18 2014-02-21 삼성전자주식회사 인트라 예측 부호화, 복호화 방법 및 장치
KR101365575B1 (ko) * 2007-02-05 2014-02-25 삼성전자주식회사 인터 예측 부호화, 복호화 방법 및 장치
KR101083051B1 (ko) 2007-03-13 2011-11-16 노키아 코포레이션 비디오 부호화 및 복호화를 위한 시스템 및 방법
EP2129134B1 (en) 2007-03-20 2018-06-27 Fujitsu Limited Time-varying image encoding method and device, and time-varying image decoding device
US8019804B2 (en) 2007-03-26 2011-09-13 City University Of Hong Kong Method and apparatus for calculating an SSD and encoding a video signal
KR101366241B1 (ko) 2007-03-28 2014-02-21 삼성전자주식회사 영상 부호화, 복호화 방법 및 장치
EP2140684B1 (en) 2007-04-12 2018-08-15 Thomson Licensing DTV Method and apparatus for context dependent merging for skip-direct modes for video encoding and decoding
WO2008139721A1 (ja) 2007-05-07 2008-11-20 Panasonic Corporation 復号化装置及び復号化方法
JP2008283490A (ja) 2007-05-10 2008-11-20 Ntt Docomo Inc 動画像符号化装置、方法及びプログラム、並びに動画像復号化装置、方法及びプログラム
US8488668B2 (en) 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
JP4709187B2 (ja) 2007-07-10 2011-06-22 日本電信電話株式会社 符号化パラメータ決定方法、符号化パラメータ決定装置、符号化パラメータ決定プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2009055519A (ja) 2007-08-29 2009-03-12 Sony Corp 符号化処理装置、符号化処理方法、復号処理装置、及び、復号処理方法
BRPI0818444A2 (pt) * 2007-10-12 2016-10-11 Qualcomm Inc codificação adaptativa de informação de cabeçalho de bloco de vídeo
JP5004180B2 (ja) 2007-11-07 2012-08-22 Kddi株式会社 動画像符号化装置および復号装置
KR101228020B1 (ko) 2007-12-05 2013-01-30 삼성전자주식회사 사이드 매칭을 이용한 영상의 부호화 방법 및 장치, 그복호화 방법 및 장치
KR100951301B1 (ko) 2007-12-17 2010-04-02 한국과학기술원 비디오 부호화에서의 화면간/화면내 예측 부호화 방법
CN101483780B (zh) * 2008-01-07 2011-08-24 华为技术有限公司 一种帧内dc预测的方法及装置
EP2232874B1 (en) 2008-01-08 2012-12-05 Telefonaktiebolaget L M Ericsson (publ) Adaptive filtering
CN101500161B (zh) * 2008-01-31 2012-03-21 华为技术有限公司 基于自适应块变换的帧内预测方法及装置
KR101431545B1 (ko) 2008-03-17 2014-08-20 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
CN102210153A (zh) * 2008-10-06 2011-10-05 Lg电子株式会社 用于处理视频信号的方法和设备
EP2182732A1 (en) 2008-10-28 2010-05-05 Panasonic Corporation Switching between scans in image coding
JP5158003B2 (ja) 2009-04-14 2013-03-06 ソニー株式会社 画像符号化装置と画像符号化方法およびコンピュータ・プログラム
CN101572818B (zh) * 2009-06-01 2010-12-01 北京邮电大学 一种帧内预测模式的预测方法
US20100309975A1 (en) 2009-06-05 2010-12-09 Apple Inc. Image acquisition and transcoding system
HUE039661T2 (hu) 2009-09-10 2019-01-28 Guangdong Oppo Mobile Telecommunications Corp Ltd Gyorsítási technikák a torzítás-optimalizált kvantáláshoz
JPWO2011061880A1 (ja) * 2009-11-19 2013-04-04 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
KR20110068792A (ko) 2009-12-16 2011-06-22 한국전자통신연구원 적응적 영상 부호화 장치 및 방법
US9172968B2 (en) 2010-07-09 2015-10-27 Qualcomm Incorporated Video coding using directional transforms
US10298939B2 (en) 2011-06-22 2019-05-21 Qualcomm Incorporated Quantization in video coding
JP6896481B2 (ja) * 2017-03-30 2021-06-30 フリー株式会社 法人税申告書の作成装置、作成方法、及びそのためのプログラム
JP2018169970A (ja) * 2017-03-30 2018-11-01 キヤノン株式会社 表示装置および表示方法、コンピュータプログラム、記憶媒体、情報処理装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006005438A (ja) 2004-06-15 2006-01-05 Sony Corp 画像処理装置およびその方法
US20060269153A1 (en) 2005-05-11 2006-11-30 Fang Shi Temporal error concealment for bi-directinally predicted frames
JP2009111733A (ja) 2007-10-30 2009-05-21 Nippon Telegr & Teleph Corp <Ntt> 画像符号化方法、画像符号化装置、及び画像符号化プログラム
US20090304084A1 (en) 2008-03-19 2009-12-10 Nokia Corporation Combined motion vector and reference index prediction for video coding

Also Published As

Publication number Publication date
PT3591970T (pt) 2024-03-28
KR20180082414A (ko) 2018-07-18
KR20180082413A (ko) 2018-07-18
JP2014239510A (ja) 2014-12-18
WO2011074896A2 (ko) 2011-06-23
US11812012B2 (en) 2023-11-07
EP2661085A3 (en) 2013-11-20
EP3591970A1 (en) 2020-01-08
KR102107091B1 (ko) 2020-05-06
KR20130092524A (ko) 2013-08-20
CN105208386A (zh) 2015-12-30
KR101425180B1 (ko) 2014-08-06
KR101722988B1 (ko) 2017-04-05
KR102007291B1 (ko) 2019-08-05
US10419752B2 (en) 2019-09-17
US20200304781A1 (en) 2020-09-24
KR101423735B1 (ko) 2014-08-06
CN105376566A (zh) 2016-03-02
KR20110068792A (ko) 2011-06-22
KR20130093052A (ko) 2013-08-21
US20140010283A1 (en) 2014-01-09
CN103402093B (zh) 2016-03-09
KR101423738B1 (ko) 2014-08-06
KR102104582B1 (ko) 2020-04-24
DK3591970T3 (da) 2024-03-25
KR20160017012A (ko) 2016-02-15
EP3297281A1 (en) 2018-03-21
CN105208386B (zh) 2018-07-10
US20220021873A1 (en) 2022-01-20
KR20180082412A (ko) 2018-07-18
KR102007290B1 (ko) 2019-08-05
KR102104586B1 (ko) 2020-04-24
KR20180113963A (ko) 2018-10-17
JP2019017090A (ja) 2019-01-31
CN105208384B (zh) 2018-10-09
KR102104584B1 (ko) 2020-04-24
CN105208385B (zh) 2018-07-10
JP2019017088A (ja) 2019-01-31
KR20220123198A (ko) 2022-09-06
KR20180113959A (ko) 2018-10-17
KR101678408B1 (ko) 2016-11-22
KR20130092525A (ko) 2013-08-20
KR20180082411A (ko) 2018-07-18
KR20180113961A (ko) 2018-10-17
KR20180061131A (ko) 2018-06-07
KR101835834B1 (ko) 2018-04-19
JP2023033648A (ja) 2023-03-10
CN103402093A (zh) 2013-11-20
KR20180082416A (ko) 2018-07-18
CN105187837B (zh) 2019-03-08
CN105208384A (zh) 2015-12-30
KR20160017011A (ko) 2016-02-15
JP2021002892A (ja) 2021-01-07
KR20200047493A (ko) 2020-05-07
KR102104585B1 (ko) 2020-04-24
CN103402092B (zh) 2017-10-31
KR102528914B1 (ko) 2023-05-03
KR101691902B1 (ko) 2017-01-04
US10708580B2 (en) 2020-07-07
KR101569034B1 (ko) 2015-11-16
US20240022714A1 (en) 2024-01-18
JP2019017089A (ja) 2019-01-31
US11659159B2 (en) 2023-05-23
KR102104583B1 (ko) 2020-04-24
JP2016086434A (ja) 2016-05-19
KR102219511B1 (ko) 2021-02-24
KR102007292B1 (ko) 2019-08-05
CN105187837A (zh) 2015-12-23
KR102007289B1 (ko) 2019-08-05
CN105208383A (zh) 2015-12-30
KR20120090898A (ko) 2012-08-17
KR20120139642A (ko) 2012-12-27
EP2515538A2 (en) 2012-10-24
KR101678409B1 (ko) 2016-11-22
KR20130093053A (ko) 2013-08-21
JP2013514714A (ja) 2013-04-25
KR101425186B1 (ko) 2014-08-06
KR20180082415A (ko) 2018-07-18
KR102332672B1 (ko) 2021-12-01
CN105430412A (zh) 2016-03-23
WO2011074896A3 (ko) 2011-11-17
US20210409687A1 (en) 2021-12-30
US11805243B2 (en) 2023-10-31
JP2019017087A (ja) 2019-01-31
CN105376566B (zh) 2019-03-08
KR20130090863A (ko) 2013-08-14
EP2661085A2 (en) 2013-11-06
JP5593397B2 (ja) 2014-09-24
JP2013215007A (ja) 2013-10-17
KR20180113962A (ko) 2018-10-17
US20120263229A1 (en) 2012-10-18
CN103402092A (zh) 2013-11-20
CN105430412B (zh) 2019-03-08
KR20210020984A (ko) 2021-02-24
US20180234678A1 (en) 2018-08-16
CN102656887B (zh) 2015-11-25
KR20210148039A (ko) 2021-12-07
EP3591970B1 (en) 2024-03-06
CN102656887A (zh) 2012-09-05
KR102437751B1 (ko) 2022-08-29
KR20230066527A (ko) 2023-05-16
EP4351141A2 (en) 2024-04-10
KR20110068897A (ko) 2011-06-22
KR20170037927A (ko) 2017-04-05
US20240022715A1 (en) 2024-01-18
KR101933029B1 (ko) 2018-12-27
KR101691901B1 (ko) 2017-01-04
KR20130090864A (ko) 2013-08-14
KR20160102943A (ko) 2016-08-31
KR20180023940A (ko) 2018-03-07
FI3591970T3 (fi) 2024-03-26
JP2014239511A (ja) 2014-12-18
CN105208385A (zh) 2015-12-30
KR101234008B1 (ko) 2013-02-18
KR101946916B1 (ko) 2019-02-11
KR20240023064A (ko) 2024-02-20
JP2014225911A (ja) 2014-12-04
US10728541B2 (en) 2020-07-28
EP2515538A4 (en) 2013-11-27

Similar Documents

Publication Publication Date Title
KR102634646B1 (ko) 적응적인 영상 부호화 방법 및 장치

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right