KR20200019201A - 크로마 예측 방법 및 디바이스 - Google Patents

크로마 예측 방법 및 디바이스 Download PDF

Info

Publication number
KR20200019201A
KR20200019201A KR1020207001173A KR20207001173A KR20200019201A KR 20200019201 A KR20200019201 A KR 20200019201A KR 1020207001173 A KR1020207001173 A KR 1020207001173A KR 20207001173 A KR20207001173 A KR 20207001173A KR 20200019201 A KR20200019201 A KR 20200019201A
Authority
KR
South Korea
Prior art keywords
block
transient
processed
chroma
processing information
Prior art date
Application number
KR1020207001173A
Other languages
English (en)
Other versions
KR102352085B1 (ko
Inventor
하이타오 양
훙 장
산 류
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Priority to KR1020227001147A priority Critical patent/KR20220011216A/ko
Publication of KR20200019201A publication Critical patent/KR20200019201A/ko
Application granted granted Critical
Publication of KR102352085B1 publication Critical patent/KR102352085B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

본 출원은 비디오 인코딩/디코딩 과정에서의 크로마 예측의 정확도를 개선하고 재구성된 이미지의 품질을 개선하기 위한 크로마 예측 방법 및 디바이스를 제공한다. 이 방법은: 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계 - 제1 처리 정보는 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하고, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시함 -; 상기 처리될 이미지 블록의 루마 정보에 기초하여 상기 처리될 이미지 블록의 과도 루마 블록을 재구성하는 단계 - 상기 과도 루마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제1 처리 정보를 이용하여 결정됨 -; 및 상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하는 단계를 포함하고, 상기 과도 루마 블록의 해상도는 상기 과도 크로마 블록의 해상도와 동일하고, 상기 과도 크로마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보를 이용하여 결정된다.

Description

크로마 예측 방법 및 디바이스
본 출원은 2017년 7월 17일자로 중국 특허청에 출원되고 발명의 명칭이 "크로마 예측 방법 및 디바이스"인 중국 특허 출원 제201710582094.1호에 대한 우선권을 주장하며, 이는 그 전체가 인용에 의해 여기에 포함된다.
본 출원은 이미지 처리 분야에 관한 것으로, 더 구체적으로는, 크로마 예측 방법 및 디바이스에 관한 것이다.
디지털 비디오 압축 인코딩 및 디코딩 기술들은 방송 분야, 통신 분야, 저장 분야, 및 멀티미디어 서비스 분야에 널리 적용된다. 수집 디바이스에 의해 획득된 원래 비디오 콘텐츠는 비교적 많은 양의 데이터를 가지며, 저장 및 송신에 적합하지 않다. 따라서, 원래 데이터를 압축하기 위해 효율적인 비디오 압축 인코딩 기술이 사용될 필요가 있다. 전체 이미지에 대해 다운샘플링이 수행될 때 일부 세부사항들이 손실될 수 있다. 결과적으로, 비디오 인코딩/디코딩 과정에서의 크로마 예측은 충분히 정확하지 않고, 재구성된 이미지가 흐려진다.
따라서, 어떻게 비디오 인코딩/디코딩 과정에서의 크로마 예측의 정확도를 개선하고 재구성된 이미지의 품질을 개선할지가 해결되어야 할 시급한 문제이다.
본 출원은 비디오 인코딩/디코딩 과정에서의 크로마 예측의 정확도를 개선하고 재구성된 이미지의 품질을 개선하기 위한 크로마 예측 방법 및 디바이스를 제공한다.
제1 방면에 따르면, 크로마 예측 방법이 제공되는데, 이는: 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계 - 상기 제1 처리 정보는 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되고, 상기 제2 처리 정보는 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용됨 -;
상기 처리될 이미지 블록의 루마 정보에 기초하여 상기 처리될 이미지 블록의 과도 루마 블록을 재구성하는 단계 - 상기 과도 루마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제1 처리 정보를 이용하여 결정됨 -; 및
상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하는 단계를 포함하고, 상기 과도 루마 블록의 해상도는 상기 과도 크로마 블록의 해상도와 동일하고, 상기 과도 크로마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보를 이용하여 결정된다.
따라서, 본 출원에서, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 상기 제1 처리 정보, 및 상기 제2 처리 정보가 먼저 획득된다. 그 후 상기 처리될 이미지 블록의 루마 정보에 기초하여 상기 처리될 이미지 블록의 과도 루마 블록이 재구성된다. 그 후, 상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록이 획득된다. 상기 처리될 이미지 블록의 과도 루마 블록은 상기 처리될 이미지 블록의 크로마를 예측하기 위해 사용되고, 이미지 블록 레벨에서 이미지 처리 방식이 수행된다. 따라서, 이미지의 상이한 구역들에서의 이미지 블록 특성이 더 양호하게 적응되고, 비디오 인코딩/디코딩 과정에서의 크로마 예측의 정확도가 개선될 수 있고, 재구성된 이미지의 품질이 개선될 수 있다.
옵션으로, 제1 방면의 구현에서, 상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함한다.
이 경우, 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 샘플링 방식은 상기 제1 처리 정보를 이용하여 알게 될 수 있다. 상이한 처리될 이미지 블록들은 상이한 루마 특성들을 가질 수 있다. 이미지 품질 손실을 감소시키도록, 상이한 처리될 이미지 블록들의 루마 성분들을 처리하기 위해 상이한 샘플링 방식들이 선택된다.
옵션으로, 제1 방면의 구현에서, 상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함한다.
이 경우, 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 샘플링 방식은 상기 제2 처리 정보를 이용하여 알게 될 수 있다. 상이한 처리될 이미지 블록들은 상이한 크로마 특성들을 가질 수 있다. 이미지 품질 손실을 감소시키도록, 상이한 처리될 이미지 블록들의 크로마 성분들을 처리하기 위해 상이한 샘플링 방식들이 선택된다.
옵션으로, 제1 방면의 구현에서, 상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하는 것은:
상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록의 해상도를 결정하는 단계;
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 상이할 때, 상기 과도 루마 블록의 해상도를 조정하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하고, 상기 조정된 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하거나, 또는
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 동일할 때, 상기 과도 루마 블록의 해상도를 유지하고, 상기 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계; 및
상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하는 단계를 포함한다.
이 경우, 상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록이 획득된다. 비디오 이미지의 공간 영역 상관성을 이용하여, 비디오의 공간 중복성을 제거하고, 그에 의해 인코딩을 위해 필요한 비트 레이트를 감소시킨다.
옵션으로, 상기 과도 루마 블록의 해상도를 조정하는 것은:
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도보다 낮을 때, 상기 과도 크로마 블록의 해상도에 기초하여 상기 과도 루마 블록에 대해 다운샘플링을 수행하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하는 단계; 또는
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도보다 높을 때, 상기 과도 크로마 블록의 해상도에 기초하여 상기 과도 루마 블록에 대해 업샘플링을 수행하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하는 단계를 포함한다.
이 경우, 과도 크로마 블록의 해상도에 기초하여 과도 루마 블록에 대해 업샘플링 또는 다운샘플링 조정을 수행하여, 조정된 과도 루마 블록의 해상도가 과도 크로마 블록의 해상도와 동일하게 한다.
옵션으로, 상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 동일할 때, 상기 과도 루마 블록의 해상도를 유지하고, 상기 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계는:
상기 과도 크로마 블록의 샘플링 포인트의 위치가 상기 과도 루마 블록의 샘플링 포인트의 위치와 상이할 때, 상기 과도 크로마 블록의 샘플링 포인트의 위치 및 상기 과도 루마 블록의 샘플링 포인트의 위치에 기초하여 상기 과도 루마 블록에 대해 보간 연산을 수행하여, 수정된 과도 루마 블록을 획득하는 단계; 및
상기 수정된 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계를 포함한다.
옵션으로, 제1 방면의 구현에서, 상기 과도 루마 블록의 해상도를 조정하는 것은:
상기 과도 루마 블록의 수평 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수평 해상도가 상기 과도 크로마 블록의 수평 해상도와 동일하게 하는 단계; 및
상기 과도 루마 블록의 수직 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수직 해상도가 상기 과도 크로마 블록의 수직 해상도와 동일하게 하는 단계를 포함한다.
옵션으로, 제1 방면의 구현에서, 상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하는 단계는:
상기 목표 블록의 재구성된 픽셀 값, 상기 목표 블록의 인접한 재구성된 픽셀 값, 및 상기 과도 크로마 블록의 인접한 재구성된 픽셀 값에 기초하여 상기 과도 크로마 블록의 예측 픽셀 값을 획득하는 단계를 포함한다.
이 경우, 상기 목표 블록의 재구성된 픽셀 값, 상기 목표 블록의 인접한 재구성된 픽셀 값, 및 상기 과도 크로마 블록의 인접한 재구성된 픽셀 값에 기초하여 상기 과도 크로마 블록의 예측 픽셀 값을 획득한다. 비디오 이미지의 공간 영역 상관성을 이용하여, 비디오의 공간 중복성을 제거하고, 그에 의해 인코딩을 위해 필요한 비트 레이트를 감소시킨다.
옵션으로, 제1 방면의 구현에서, 이 방법은:
상기 제1 처리 정보에 기초하여 상기 과도 루마 블록에 대해 제1 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 루마 블록을 획득하는 단계를 추가로 포함하고, 상기 제1 업샘플링 처리는 상기 제1 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 루마 성분에 대해 수행되는 다운샘플링 처리의 역처리이다.
옵션으로, 제1 방면의 구현에서, 이 방법은:
상기 처리될 이미지 블록의 크로마 정보 및 상기 예측 블록에 기초하여 상기 과도 크로마 블록을 재구성하는 단계; 및
상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록에 대해 제2 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 크로마 블록을 획득하는 단계를 추가로 포함하고, 상기 제2 업샘플링 처리는 상기 제2 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 크로마 성분에 대해 수행되는 다운샘플링 처리의 역처리이다.
옵션으로, 제1 방면의 구현에서, 이 방법은 상기 처리될 이미지 블록을 디코딩하기 위해 사용되고, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계는:
비트스트림으로부터 상기 루마 정보 및 상기 크로마 정보를 획득하는 단계; 및
상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 제2 처리 정보를 획득하는 단계;
상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하는 단계;
상기 비트스트림으로부터 상기 제2 처리 정보 및 상기 사전설정된 제1 처리 정보를 획득하는 단계; 또는
상기 사전설정된 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하는 단계를 포함한다.
옵션으로, 제1 방면의 구현에서, 이 방법은 상기 처리될 이미지 블록을 인코딩하기 위해 사용되고, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계는:
적어도 하나의 후보 제1 처리 정보 및 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들을 별도로 계산하는 단계;
최소 인코딩 비용들에 대응하는 후보 제1 처리 정보 및 후보 제2 처리 정보를 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정하는 단계; 및
상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보에 기초하여 상기 처리될 이미지 블록을 인코딩하여, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보를 획득하는 단계를 포함한다.
이 경우, 상기 적어도 하나의 후보 제1 처리 정보 및 상기 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들이 결정되고, 상기 최소 코딩 비용들에 대응하는 상기 후보 제1 처리 정보 및 상기 후보 제2 처리 정보가 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정된다. 이는 현재 처리될 이미지를 인코딩하기 위해 필요한 비트 레이트를 감소시키고, 저장 공간 및 네트워크 리소스들을 감소시킨다.
옵션으로, 제1 방면의 구현에서, 이 방법은:
상기 목표 제1 처리 정보, 상기 목표 제2 처리 정보, 상기 목표 루마 정보, 및 상기 목표 크로마 정보를 비트스트림으로 인코딩하는 단계를 추가로 포함한다.
제2 방면에 따르면, 획득 모듈 및 재구성 모듈을 포함하는 크로마 예측 디바이스가 제공된다. 상기 획득 모듈 및 상기 재구성 모듈은 제1 방면 또는 제1 방면의 임의의 옵션 구현에 따른 방법을 수행할 수 있다.
제3 방면에 따르면, 메모리, 트랜시버, 및 프로세서를 포함하는 크로마 예측 디바이스가 제공된다. 상기 메모리는 제1 방면 또는 제1 방면의 임의의 옵션 구현을 수행하도록 지시하기 위해 사용될 수 있는 프로그램 코드를 저장한다. 상기 트랜시버는 상기 프로세서에 의해 구동된 후에 특정 신호를 수신하고 송신하도록 구성된다. 상기 코드가 실행될 때, 상기 프로세서는 상기 방법에서 단말 디바이스에 의해 수행되는 동작들을 구현할 수 있다.
제4 방면에 따르면, 컴퓨터 저장 매체가 제공된다. 컴퓨터 저장 매체는 프로그램 코드를 저장하고, 프로그램 코드는 제1 방면 또는 제1 방면의 임의의 옵션 구현에서의 방법의 수행을 지시하기 위해 사용될 수 있다.
도 1은 본 출원에 따른 비디오 인코딩/디코딩 시스템의 개략 블록도이다.
도 2는 본 출원에 따른 크로마 예측 방법의 개략 흐름도이다.
도 3은 본 출원에 따른 YCbCr 샘플링 포맷 4:4:4에 기초한 위치의 개략도이다.
도 4는 본 출원에 따른 YCbCr 샘플링 포맷 4:2:2에 기초한 위치의 개략도이다.
도 5는 본 출원에 따른 YCbCr 샘플링 포맷 4:2:0에 기초한 위치의 개략도이다.
도 6은 본 출원에 따른 인코딩 절차의 개략도이다.
도 7은 본 출원에 따른 디코딩 절차의 개략도이다.
도 8은 본 출원에 따른 크로마 예측 디바이스의 개략 블록도이다.
도 9는 본 출원에 따른 크로마 예측 디바이스의 개략 블록도이다.
도 10은 본 출원에 따른 비디오 인코딩/디코딩 장치 또는 전자 디바이스의 개략 블록도이다.
도 11은 본 출원에 따른 비디오 인코딩을 위한 장치의 개략도이다.
이하에서는 첨부 도면들을 참조하여 본 출원에서의 기술적 해결책들을 설명한다.
도 1은 본 출원의 실시예에 따른 비디오 인코딩/디코딩 시스템(100)의 개략 블록도이다. 도 1에 도시된 바와 같이, 비디오 인코딩/디코딩 시스템(100)은 소스 장치(12)와 목적지 장치(14)를 포함한다. 소스 장치(12)는 인코딩된 비디오 데이터를 생성한다. 따라서, 소스 장치(12)는 비디오 인코딩 장치 또는 비디오 인코딩 디바이스라고 지칭될 수 있다. 목적지 장치(14)는 소스 장치(12)에 의해 생성된 인코딩된 비디오 데이터를 디코딩할 수 있다. 따라서, 목적지 장치(14)는 비디오 디코딩 장치 또는 비디오 디코딩 디바이스라고 지칭될 수 있다. 소스 장치(12) 및 목적지 장치(14)는 비디오 인코딩/디코딩 장치 또는 비디오 인코딩/디코딩 디바이스의 실시예일 수 있다. 소스 장치(12) 및 목적지 장치(14)는 데스크톱 컴퓨터, 모바일 컴퓨팅 장치, 노트북(예를 들어, 랩톱) 컴퓨터, 태블릿 컴퓨터, 셋톱 박스, 스마트폰과 같은 핸드헬드 폰, 텔레비전, 카메라, 디스플레이 장치, 디지털 미디어 플레이어, 비디오 게임 콘솔, 차량내 컴퓨터, 및 유사한 장치를 포함하는 광범위의 장치들을 포함할 수 있다.
목적지 장치(14)는 채널(16)을 통해 소스 장치(12)로부터 인코딩된 비디오 데이터를 수신할 수 있다. 채널(16)은 소스 장치(12)로부터 목적지 장치(14)로 인코딩된 비디오 데이터를 이동시킬 수 있는 하나 이상의 매체 및/또는 장치를 포함할 수 있다. 실시예에서, 채널(16)은 소스 장치(12)가 인코딩된 비디오 데이터를 목적지 장치(14)에 실시간으로 직접 송신할 수 있게 하는 하나 이상의 통신 매체를 포함할 수 있다. 이 실시예에서, 소스 장치(12)는 통신 표준(예를 들어, 무선 통신 프로토콜)에 따라 인코딩된 비디오 데이터를 변조할 수 있고, 변조된 비디오 데이터를 목적지 장치(14)에 송신할 수 있다. 하나 이상의 통신 매체는 무선 및/또는 유선 통신 매체, 예를 들어, 무선 주파수(RF) 스펙트럼 또는 하나 이상의 물리 송신 라인을 포함할 수 있다. 하나 이상의 통신 매체는 패킷 기반 네트워크(예컨대 로컬 영역 네트워크, 광역 네트워크, 또는 글로벌 네트워크(예를 들어, 인터넷))의 일부를 형성할 수 있다. 하나 이상의 통신 매체는 라우터, 스위치, 기지국, 또는 소스 장치(12)로부터 목적지 장치(14)로의 통신을 촉진하는 다른 디바이스를 포함할 수 있다.
다른 실시예에서, 채널(16)은 소스 장치(12)에 의해 생성된 인코딩된 비디오 데이터를 저장하는 저장 매체를 포함할 수 있다. 이 실시예에서, 목적지 장치(14)는 디스크 액세스 또는 카드 액세스를 통해 저장 매체에 액세스할 수 있다. 저장 매체는 블루레이 디스크, DVD, CD-ROM, 플래시 메모리, 또는 인코딩된 비디오 데이터를 저장하도록 구성된 다른 적합한 디지털 저장 매체와 같은 복수의 유형의 로컬 액세스 가능한 데이터 저장 매체를 포함할 수 있다.
다른 실시예에서, 채널(16)은 소스 장치(12)에 의해 생성된 인코딩된 비디오 데이터를 저장하는 파일 서버 또는 다른 중간 저장 장치를 포함할 수 있다. 이 실시예에서, 목적지 장치(14)는, 스트리밍 송신 또는 다운로딩을 통해, 파일 서버 또는 다른 중간 저장 장치에 저장된 인코딩된 비디오 데이터에 액세스할 수 있다. 파일 서버는 인코딩된 비디오 데이터를 저장하고 인코딩된 비디오 데이터를 목적지 장치(14)에 송신할 수 있는 서버의 유형일 수 있다. 이 실시예에서 파일 서버는 웹 서버 (예를 들어, 웹사이트를 위해 사용되는), 파일 전송 프로토콜(FTP) 서버, 네트워크 부가 스토리지(Network Attached Storage, NAS) 장치 및 로컬 디스크 드라이브를 포함한다.
목적지 장치(14)는 표준 데이터 연결(예를 들어, 인터넷 연결)을 통해 인코딩된 비디오 데이터에 액세스할 수 있다. 데이터 연결의 예시적인 유형은 파일 서버에 저장된 인코딩된 비디오 데이터에 액세스하기 위해 사용되는 무선 채널(예를 들어, (Wireless Fidelity, Wi-Fi) 연결), 유선 연결(예를 들어, 디지털 가입자 회선(Digital Subscriber Line, DSL), 케이블 모뎀), 또는 이들의 조합을 포함한다. 인코딩된 비디오 데이터는 스트리밍 송신, 다운로딩 송신, 또는 이들의 조합을 통해 파일 서버로부터 송신될 수 있다.
본 출원의 기술은 무선 시나리오에 적용되는 것으로 제한되지 않는다. 예를 들어, 본 기술은 다음의 응용들과 같은 복수의 멀티미디어 응용에서 비디오들의 인코딩/디코딩을 지원하기 위해 적용될 수 있다: 공중 텔레비전 방송, 무선 텔레비전 송신, 및 위성 텔레비전 송신, 스트리밍 비디오 송신(예를 들어, 인터넷을 통한), 데이터 저장 매체에 저장된 비디오 데이터의 인코딩, 데이터 저장 매체에 저장된 비디오 데이터의 디코딩, 또는 다른 응용들. 일부 실시예들에서, 비디오 인코딩/디코딩 시스템(10)은 스트리밍 비디오 송신, 비디오 재생, 비디오 방송, 및/또는 비디오 통화와 같은 응용들을 지원하기 위해 단방향성 또는 양방향성 비디오 송신을 지원하도록 구성될 수 있다.
도 1의 예에서, 소스 장치(12)는 비디오 소스(18), 비디오 인코더(20), 및 출력 인터페이스(22)를 포함한다. 일부 실시예들에서, 출력 인터페이스(22)는 변조기/복조기(모뎀) 및/또는 송신기를 포함할 수 있다. 비디오 소스(18)는 비디오 캡처 장치(예를 들어, 비디오 카메라), 이전에 캡처된 비디오 데이터를 포함하는 비디오 아카이브, 비디오 콘텐츠 제공자로부터 비디오 데이터를 수신하도록 구성된 비디오 입력 인터페이스, 및/또는 비디오 데이터를 생성하도록 구성된 컴퓨터 그래픽 시스템, 또는 전술한 비디오 데이터 소스들의 조합을 포함할 수 있다.
비디오 인코더(20)는 비디오 소스(18)로부터의 비디오 데이터를 인코딩할 수 있다. 일부 실시예들에서, 소스 장치(12)는 출력 인터페이스(22)를 통해 인코딩된 비디오 데이터를 목적지 장치(14)에 직접 송신한다. 대안적으로, 인코딩된 비디오 데이터는 저장 매체 또는 파일 서버에 저장될 수 있어서, 목적지 장치(14)는 후속하여 디코딩 및/또는 재생을 위해 인코딩된 비디오 데이터에 액세스한다.
도 1의 예에서, 목적지 장치(14)는 입력 인터페이스(28), 비디오 디코더(30), 및 디스플레이 장치(32)를 포함한다. 일부 실시예들에서, 입력 인터페이스(28)는 수신기 및/또는 모뎀을 포함한다. 입력 인터페이스(28)는 채널(16)을 통해 인코딩된 비디오 데이터를 수신할 수 있다. 디스플레이 장치(32)는 목적지 장치(14)와 통합될 수 있거나 목적지 장치(14) 외부에 위치할 수 있다. 디스플레이 장치(32)는 통상적으로 디코딩된 비디오 데이터를 디스플레이한다. 디스플레이 장치(32)는 복수의 유형의 디스플레이 장치들, 예를 들어, 액정 디스플레이(Liquid Crystal Display, LCD), 플라즈마 디스플레이, 유기 발광 다이오드(Organic Light-Emitting Diode, OLED) 디스플레이, 또는 다른 유형의 디스플레이 장치들을 포함할 수 있다.
비디오 인코더(20) 및 비디오 디코더(30)는 비디오 압축 표준(예를 들어, 고효율 비디오 인코딩 및 디코딩 표준 H.265)에 따라 동작하고, HEVC 테스트 모델(HM)에 따를 수 있다.
본 출원을 더 잘 이해하기 위해, 본 출원은 도 1에 도시된 시스템과 동일하거나 유사한 시스템을 예로서 이용하여 도 2 내지 도 11을 참조하여 이하에서 설명된다.
도 2는 본 출원에 따른 크로마 예측 방법(200)의 개략 흐름도이다. 도 2에 도시된 바와 같이, 다음의 내용이 방법(200)에 포함된다.
210. 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득한다 - 제1 처리 정보는 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되고, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용된다.
옵션으로, 처리될 이미지 블록의 크로마 성분이 독립적으로 처리될 때, 이 방법은 제3 처리 정보를 획득하는 단계를 추가로 포함한다. 제2 처리 정보는 처리될 이미지 블록의 제1 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용된다. 제3 처리 정보는 처리될 이미지 블록의 제1 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용된다.
구체적으로, 처리될 이미지 블록의 컬러 정보는 YCbCr 컬러 공간을 이용하여 표현되는데, 여기서 Y는 루마 성분이라고도 지칭되는 루마를 표현하고; Cb 및 Cr은 크로마를 표현하고, 픽셀의 색조 및 채도를 표현하기 위해 사용되고, Cb 및 Cr은 집합적으로 크로마 성분이라고 지칭된다. 이 경우, 루마 Y는 입력 신호들 RGB를 이용하여 확립되고, 방법은 RGB(적색, 녹색, 및 청색) 신호들을 특정 비율에 따라 함께 중첩시키는 것이고; Cb는 입력 RGB 신호들의 청색 부분과 신호 루마 값 간의 차이를 표현하고, Cr은 입력 RGB 신호들의 적색 부분과 신호 루마 값 간의 차이를 표현한다.
전체로서 크로마 성분들 Cb 및 Cr에 대해 다운샘플링 처리가 수행될 때, 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 하나의 처리 정보가 사용된다. 예를 들어, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용된다. 크로마 성분들 Cb 및 Cr에 대해 다운샘플링 처리가 독립적으로 수행될 때, 처리될 이미지 블록의 크로마 성분 Cb에 대해 사용되는 다운샘플링 처리 방식 및 처리될 이미지 블록의 크로마 성분 Cr에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 2개의 처리 정보가 각각 사용될 수 있다. 예를 들어, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분 Cb에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되고, 제3 처리 정보는 처리될 이미지 블록의 크로마 성분 Cr에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용된다.
옵션으로, 상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함한다.
구체적으로, 제1 처리 정보는 식별자 정보를 반송한다. 식별자 정보는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되는지를 지시하기 위해 사용될 수 있다. 예를 들어, 식별자 정보가 0일 때, 이는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하고; 식별자 정보가 1일 때, 이는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행된다는 것을 지시한다.
옵션으로, 제1 처리 정보 내의 식별자 정보가 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행된다는 것을 지시할 때, 제1 처리 정보는 인덱스 정보를 추가로 포함한다. 인덱스 정보는 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용된다. 예를 들어, 인덱스 정보가 1일 때, 이는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터가 필터 1인 것을 지시하고; 인덱스 정보가 2일 때, 이는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터가 필터 2인 것을 지시한다.
옵션으로, 인덱스 정보는 또한 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용될 수 있다. 인덱스 정보가 0일 때, 이는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시한다. 처리될 이미지 블록의 루마 성분에 대해 2:1 다운샘플링이 수행된다면, 인덱스 정보는 1이다. 처리될 이미지 블록의 루마 성분에 대해 4:1 다운샘플링이 수행된다면, 인덱스 정보는 2이다.
옵션으로, 제1 처리 정보는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용된다. 처리될 이미지 블록에 대해 업샘플링을 수행하는 필터는 제1 처리 정보에 의해 지시되고 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터에 기초하여 결정된다.
구체적으로, 업샘플링 필터와 다운샘플링 필터 간의 관계가 미리 확립될 수 있다. 예를 들어, 다운샘플링 필터 1은 업샘플링 필터 1에 대응하고, 다운샘플링 필터 2는 다운샘플링 필터 2에 대응한다. 제1 처리 정보가 다운샘플링 필터 1이면, 이미지에 대해 업샘플링을 수행하기 위해 업샘플링 필터와 다운샘플링 필터 간의 미리 확립된 관계 및 제1 처리 정보에 기초하여 업샘플링 필터 1이 선택된다. 대안적으로, 제1 처리 정보는 필터의 모델, 탭의 수, 또는 계수 중 적어도 하나일 수 있다. 다운샘플링 필터의 모델은 3-lobe Lanczos 필터, bilinear 필터, bicubic 필터, Gauss 필터 등일 수 있다. 업샘플링 필터는, DCTIF 필터, 쌍선형 보간 필터, sinc 필터 등일 수 있다.
이 경우, 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 샘플링 방식은 상기 제1 처리 정보를 이용하여 알게 될 수 있다. 상이한 처리될 이미지 블록들은 상이한 루마 특성들을 가질 수 있다. 이미지 품질 손실을 감소시키도록, 상이한 처리될 이미지 블록들의 루마 성분들을 처리하기 위해 상이한 샘플링 방식들이 선택된다.
옵션으로, 상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함한다.
구체적으로, 제2 처리 정보는 식별자 정보를 반송한다. 식별자 정보는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되는지를 지시하기 위해 사용될 수 있다. 예를 들어, 식별자 정보가 0일 때, 이는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하고; 식별자 정보가 1일 때, 이는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행된다는 것을 지시한다.
옵션으로, 제2 처리 정보 내의 식별자 정보가 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행된다는 것을 지시할 때, 제2 처리 정보는 인덱스 정보를 추가로 포함한다. 인덱스 정보는 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용된다. 예를 들어, 인덱스 정보가 1일 때, 이는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터가 필터 1인 것을 지시하고; 인덱스 정보가 2일 때, 이는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터가 필터 2인 것을 지시한다.
옵션으로, 인덱스 정보는 또한 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용될 수 있다. 인덱스 정보가 0일 때, 이는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시한다. 처리될 이미지 블록의 크로마 성분에 대해 2:1 다운샘플링이 수행된다면, 인덱스 정보는 1이다. 처리될 이미지 블록의 크로마 성분에 대해 4:1 다운샘플링이 수행된다면, 인덱스 정보는 2이다.
옵션으로, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용된다. 처리될 이미지 블록에 대해 업샘플링을 수행하는 필터는 제2 처리 정보에 의해 지시되고 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터에 기초하여 결정된다.
구체적으로, 업샘플링 필터와 다운샘플링 필터 간의 관계가 미리 확립될 수 있다. 예를 들어, 다운샘플링 필터 3은 업샘플링 필터 3에 대응하고, 다운샘플링 필터 4는 다운샘플링 필터 4에 대응한다. 제1 처리 정보가 다운샘플링 필터 3이면, 이미지에 대해 업샘플링을 수행하기 위해 업샘플링 필터와 다운샘플링 필터 간의 미리 확립된 관계 및 제1 처리 정보에 기초하여 업샘플링 필터 3이 선택된다. 대안적으로, 제1 처리 정보는 필터의 모델, 탭의 수, 또는 계수 중 적어도 하나일 수 있다. 다운샘플링 필터의 모델은 3-lobe Lanczos 필터, bilinear 필터, bicubic 필터, Gauss 필터 등일 수 있다. 업샘플링 필터는, DCTIF 필터, 쌍선형 보간 필터, sinc 필터 등일 수 있다.
이 경우, 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 샘플링 방식은 상기 제2 처리 정보를 이용하여 알게 될 수 있다. 상이한 처리될 이미지 블록들은 상이한 크로마 특성들을 가질 수 있고, 이미지 품질 손실을 감소시키도록, 상이한 처리될 이미지 블록들의 크로마 성분들을 처리하기 위해 상이한 샘플링 방식들이 선택된다.
220. 처리될 이미지 블록의 루마 정보에 기초하여 처리될 이미지 블록의 과도 루마 블록을 재구성한다 - 과도 루마 블록의 해상도는 처리될 이미지 블록의 샘플링 포맷 및 제1 처리 정보를 이용하여 결정된다.
구체적으로, 처리될 이미지 블록의 루마 성분을 분석하기 위한 양자화 계수가 획득되고, 양자화 계수에 대해 역양자화를 수행하여 변환 계수를 획득하고, 변환 계수에 대해 역변환을 수행하여 처리될 이미지 블록의 루마 성분의 재구성 잔차를 획득한다. 처리될 이미지 블록의 루마 성분의 인접한 재구성된 픽셀에 기초하여 처리될 이미지 블록의 루마 성분의 예측 픽셀이 생성된다. 예측 픽셀 및 재구성 잔차를 더하여, 처리될 이미지 블록의 과도 루마 블록을 획득한다. 처리될 이미지 블록의 과도 루마 블록은 처리될 이미지 블록의 재구성된 픽셀이다.
인간의 눈은 루마 신호보다 크로마 신호에 덜 민감하기 때문에, 통상적으로 응용 동안 이미지의 크로마에 대해 다운샘플링이 수행된다. 이 방법을 이용하여, 데이터를 압축하도록, 이미지 내의 컬러를 표현하는 정보가 사람에 의해 인지되지 않고 제거될 수 있다. 흔한 YCbCr 샘플링 포맷들은 4:4:4, 4:2:2, 및 4:2:0이다.
도 3은 본 출원에 따른 YCbCr 샘플링 포맷 4:4:4에 기초한 위치의 개략도이다. 각각의 픽셀 위치는 Y, Cb, 및 Cr 성분들을 갖는다. 구체적으로, 수평 방향 또는 수직 방향에 관계없이, 4개의 Y 루마 샘플링 포인트마다 4개의 Cb 크로마 샘플링 포인트 및 4개의 Cr 크로마 샘플링 포인트에 대응한다. 이 포맷에서는, 크로마 성분 및 루마 성분이 동일한 공간 해상도를 갖는다. 이 포맷은 비디오 소스 디바이스가 고품질 비디오 신호를 처리할 때 적용가능하다.
도 4는 본 출원에 따른 YCbCr 샘플링 포맷 4:2:2에 기초한 위치의 개략도이다. 수평 방향으로, 2개의 Y 루마 샘플링 포인트마다 하나의 Cb 크로마 샘플링 포인트 및 하나의 Cr 크로마 샘플링 포인트에 대응한다. 이미지가 디스플레이될 때, Cb 및 Cr이 없는 샘플링 포인트 위치는 주위의 인접한 Cb 및 Cr 샘플링 포인트들을 이용하여 보간 계산을 통해 획득된다. 이 포맷에서는, 크로마 성분 및 루마 성분이 동일한 수직 해상도를 갖는다. 그러나, 크로마 성분의 수평 해상도는 루마 성분의 수평 해상도의 단지 절반이다. 이는 컬러 텔레비전에 대한 표준 포맷이다.
도 5는 본 출원에 따른 YCbCr 샘플링 포맷 4:2:0에 기초한 위치의 개략도이다. 수평 및 수직 방향 둘 다에서 크로마 성분에 대해 2:1 샘플링이 수행된다. 구체적으로, 4개의 Y 샘플링 포인트마다 하나의 Cb 샘플링 포인트 및 하나의 Cr 샘플링 포인트에 대응한다. 이 포맷에서는, 수평 및 수직 방향 둘 다에서의 크로마 성분의 해상도는 수평 및 수직 방향 둘 다에서의 루마 성분의 해상도의 1/2이다. 이는 비디오 인코딩에서 자주 사용되는 포맷이다.
예를 들어, 현재 처리될 이미지 블록의 원래 해상도가 8x8(이는 여기서 단지 예로서 사용되고, 실제 해상도는 상당히 높음)이면, 처리될 이미지 블록의 샘플링 포맷은 4:2:0이다. 제1 처리 정보는 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행된다는 것을 지시하고, 수평 방향 및 수직 방향 둘 다에서의 다운샘플링 레이트들은 2:1이다. 다운샘플링 포인트들은 좌측 샘플링 포인트 및 상위 샘플링 포인트이고, 처리될 이미지 블록의 과도 루마 블록의 해상도는 4x4이다.
230. 과도 루마 블록의 해상도, 처리될 이미지 블록의 샘플링 포맷, 및 제2 처리 정보에 기초하여 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득한다 - 과도 루마 블록의 해상도는 과도 크로마 블록의 해상도와 동일하고, 과도 크로마 블록의 해상도는 처리될 이미지 블록의 샘플링 포맷 및 제2 처리 정보를 이용하여 결정된다.
옵션으로, 상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하는 것은:
상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록의 해상도를 결정하는 단계;
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 상이할 때, 상기 과도 루마 블록의 해상도를 조정하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하고, 상기 조정된 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하거나, 또는
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 동일할 때, 상기 과도 루마 블록의 해상도를 유지하고, 상기 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계; 및
상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하는 단계를 포함한다.
이 경우, 상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록이 획득된다. 비디오 이미지의 공간 영역 상관성을 이용하여, 비디오의 공간 중복성을 제거하고, 그에 의해 인코딩을 위해 필요한 비트 레이트를 감소시킨다.
옵션으로, 상기 과도 루마 블록의 해상도를 조정하는 것은:
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도보다 낮을 때, 상기 과도 크로마 블록의 해상도에 기초하여 상기 과도 루마 블록에 대해 다운샘플링을 수행하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하는 단계; 또는
상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도보다 높을 때, 상기 과도 크로마 블록의 해상도에 기초하여 상기 과도 루마 블록에 대해 업샘플링을 수행하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하는 단계를 포함한다.
구체적으로, 과도 크로마 블록의 해상도가 8x8이고 과도 루마 블록의 해상도가 16x16일 때, 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도보다 낮다. 이 경우, 과도 크로마 블록의 해상도에 기초하여 과도 루마 블록에 대해 다운샘플링이 수행되고, 여기서 다운샘플링 레이트는 2:1이고, 다운샘플링 이후의 과도 루마 블록의 해상도는 8x8이고, 과도 크로마 블록의 해상도와 동일하다.
과도 크로마 블록의 해상도가 16x16이고 과도 루마 블록의 해상도가 8x8일 때, 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도보다 높다. 이 경우, 과도 크로마 블록의 해상도에 기초하여 과도 루마 블록에 대해 업샘플링이 수행되고, 여기서 업샘플링 레이트는 1:2이고, 업샘플링 이후의 과도 루마 블록의 해상도는 16x16이고, 과도 크로마 블록의 해상도와 동일하다.
예를 들어, 처리될 이미지 블록의 YCbCr 샘플링 포맷은 4:2:0이다. 처리될 이미지 블록의 루마 성분에 대해 원래 해상도 인코딩이 수행되고, 2:1의 샘플링 레이트를 이용하여 크로마 성분에 대해 다운샘플링이 수행된 후에 처리될 이미지 블록의 크로마 성분에 대해 인코딩이 수행된다(샘플링 포인트들은 좌측 샘플링 포인트 및 상위 샘플링 포인트이다). 도 5로부터 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도와 상이하고, 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도보다 낮다는 것을 알 수 있다. 이 경우, 과도 크로마 블록의 해상도에 기초하여 과도 루마 블록에 대해 다운샘플링이 수행되고, 여기서 다운샘플링 레이트는 4:1이고, 다운샘플링 이후의 과도 루마 블록의 해상도는 과도 크로마 블록의 해상도와 동일하다.
다른 예로서, 처리될 이미지 블록의 YCbCr 샘플링 포맷은 4:2:0이다. 4:1의 샘플링 레이트를 이용하여 루마 성분에 대해 다운샘플링이 수행된 후에 처리될 이미지 블록의 루마 성분에 대해 인코딩이 수행되고(샘플링 포인트들은 좌측 샘플링 포인트 및 상위 샘플링 포인트이다), 처리될 이미지 블록의 크로마 성분에 대해 원래 해상도 인코딩이 수행된다. 도 5로부터 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도와 상이하고, 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도보다 높다는 것을 알 수 있다. 이 경우, 과도 크로마 블록의 해상도에 기초하여 과도 루마 블록에 대해 업샘플링이 수행되고, 여기서 업샘플링 레이트는 1:2이고, 업샘플링 이후의 과도 루마 블록의 해상도는 과도 크로마 블록의 해상도와 동일하다.
제1 세대 인코딩 이미지 블록의 루마 성분 및 크로마 성분에 대해 다운샘플링 인코딩 모드가 적응적으로 선택될 수 있다는 것을 이해해야 한다. 각각의 이미지 블록에 대해 4개의 가능한 인코딩 모드가 존재한다: 루마 및 크로마 원래 해상도 인코딩, 루마 및 크로마 다운샘플링, 루마 다운샘플링 및 크로마 원래 해상도 인코딩, 및 루마 원래 해상도 인코딩 및 크로마 다운샘플링.
옵션으로, 상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 동일할 때, 상기 과도 루마 블록의 해상도를 유지하고, 상기 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계는:
상기 과도 크로마 블록의 샘플링 포인트의 위치가 상기 과도 루마 블록의 샘플링 포인트의 위치와 상이할 때, 상기 과도 크로마 블록의 샘플링 포인트의 위치 및 상기 과도 루마 블록의 샘플링 포인트의 위치에 기초하여 상기 과도 루마 블록에 대해 보간 연산을 수행하여, 수정된 과도 루마 블록을 획득하는 단계; 및
상기 수정된 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계를 포함한다.
예를 들어, 처리될 이미지 블록의 YCbCr 샘플링 포맷은 4:2:0이다. 2:1의 샘플링 레이트를 이용하여 루마 성분에 대해 다운샘플링이 수행된 후에 처리될 이미지 블록의 루마 성분에 대해 인코딩이 수행되고(샘플링 포인트들은 좌측 샘플링 포인트 및 상위 샘플링 포인트이다), 처리될 이미지 블록의 크로마 성분에 대해 원래 해상도 인코딩이 수행된다. 도 5로부터 과도 크로마 블록의 해상도는 과도 루마 블록의 해상도와 동일하지만, 과도 크로마 블록의 샘플링 포인트의 위치는 과도 루마 블록의 샘플링 포인트의 위치와 상이하다는 것을 알 수 있다.
과도 크로마 블록의 샘플링 포인트의 위치 및 과도 루마 블록의 샘플링 포인트의 위치에 기초하여 과도 루마 블록의 재구성된 루마 성분 픽셀에 대해 보간 연산을 수행하여, 수정된 과도 루마 블록의 루마 성분의 재구성된 픽셀을 획득한다. 수정된 과도 루마 블록은 과도 크로마 블록의 목표 블록으로서 이용된다.
본 출원의 이 실시예에서, 인코딩될 이미지 블록의 YCbCr 포맷이 4:2:0인 것은 단지 예로서 사용된다는 것을 이해해야 한다. 대안적으로, 인코딩될 이미지 블록의 YCbCr 포맷은 4:4:4 또는 4:2:2일 수 있다. 인코딩될 이미지 블록의 YCbCr 포맷은 본 출원에서 제한되지 않는다.
본 출원의 이 실시예에서, 다운샘플링 및 업샘플링 레이트에 대한 샘플링 레이트 2:1 또는 4:1은 단지 예로서 사용된다는 것을 이해해야 한다. 대안적으로, 다운샘플링 레이트 및 업샘플링 레이트는 다른 샘플링 레이트일 수 있다. 샘플링 레이트는 본 출원에서 제한되지 않는다.
수평 방향 및 수직 방향으로의 다운샘플링에 대한 샘플링 레이트들이 동일하다는 것은 단지 예로서 사용된다는 것을 추가로 이해해야 한다. 수평 방향으로의 다운샘플링 레이트 및 수직 방향으로의 다운샘플링 레이트가 동일한지는 본 출원에서 제한되지 않는다.
옵션으로, 상기 과도 루마 블록의 해상도를 조정하는 것은:
상기 과도 루마 블록의 수평 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수평 해상도가 상기 과도 크로마 블록의 수평 해상도와 동일하게 하는 단계; 및
상기 과도 루마 블록의 수직 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수직 해상도가 상기 과도 크로마 블록의 수직 해상도와 동일하게 하는 단계를 포함한다.
구체적으로, 상기 과도 루마 블록의 해상도를 조정하는 것은 상기 과도 루마 블록의 수평 해상도 및 상기 과도 루마 블록의 수직 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수평 해상도가 상기 과도 크로마 블록의 수평 해상도와 동일하고, 상기 조정된 과도 루마 블록의 수직 해상도가 상기 과도 크로마 블록의 수직 해상도와 동일하게 하는 것을 포함한다.
옵션으로, 상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하는 단계는:
상기 목표 블록의 재구성된 픽셀 값, 상기 목표 블록의 인접한 재구성된 픽셀 값, 및 상기 과도 크로마 블록의 인접한 재구성된 픽셀 값에 기초하여 상기 과도 크로마 블록의 예측 픽셀 값을 획득하는 단계를 포함한다.
구체적으로, 차세대 비디오 표준의 연구 과정에서, 새로운 크로마 예측 기술, 즉, 크로스 컴포넌트 선형 모델 예측(cross-component linear model prediction, CCLM)이 제안된다. 이 기술에서, 크로마 픽셀은 현재 이미지 블록의 재구성된 루마 픽셀을 이용하여 예측되고, 루마 성분과 크로마 성분 간의 중복성이 제거될 수 있다. CCLM은 먼저 현재 인코딩될 이미지 블록의 인접한 재구성된 루마 픽셀 값 및 인접한 재구성된 크로마 픽셀 값에 기초하여 현재 인코딩될 이미지 블록의 루마/크로마 상관성 모델을 확립한다. 상관성 모델은 선형 모델이고, 파라미터 α 및 β에 의해 표현된다. 현재 인코딩될 이미지 블록의 확립된 루마/크로마 상관성 모델 및 현재의 인코딩될 이미지 블록의 재구성된 루마 픽셀 값에 기초하여 현재 인코딩될 이미지 블록의 예측 크로마 픽셀 값이 생성된다.
먼저, 인코딩될 이미지 블록의 루마/크로마 상관성 모델이 확립되고, 다시 말해서, 파라미터 α 및 β의 값들이 결정되고, 목표 블록의 인접한 재구성된 픽셀 값 및 과도 크로마 블록의 인접한 재구성된 픽셀 값이 획득된다. 목표 블록의 인접한 재구성된 픽셀 값은 상위 행에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀 값 및 좌측 열에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀 값을 포함한다. 과도 크로마 블록의 인접한 재구성된 픽셀 값은 상위 행에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀 값 및 좌측 열에 있고 목표 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀 값을 포함한다.
상위 행에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀의 샘플링 포인트의 해상도 및 위치는 상위 행에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀의 샘플링 포인트의 해상도 및 위치와 동일하다. 좌측 열에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀의 샘플링 포인트의 해상도 및 위치는 좌측 열에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀의 샘플링 포인트의 해상도 및 위치와 동일하다.
상위 행에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀의 샘플링 포인트의 해상도 및 위치가 상위 행에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀의 샘플링 포인트의 해상도 및 위치와 상이하다면, 상위 행에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀의 샘플링 포인트 및 해상도를 조정하여, 상위 행에 있고 목표 블록에 인접한 조정된 이미지 블록의 재구성된 루마 픽셀의 샘플링 포인트의 해상도 및 위치가 상위 행에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀의 샘플링 포인트의 해상도 및 위치와 동일하게 해야 한다는 것을 이해해야 한다. 조정은 업샘플링, 다운샘플링, 또는 샘플링 포인트의 위치에 기초하여 수행되는 보간 연산일 수 있다. 마찬가지로, 좌측 열에 있고 좌측 열에서 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀의 샘플링 포인트의 해상도 및 위치, 및 좌측 열에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀의 샘플링 포인트의 해상도 및 위치가 조정된다.
상위 행에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀 값 및 상위 행에 있고 과도 크로마 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀 값, 및 좌측 열에 있고 목표 블록에 인접한 이미지 블록의 재구성된 루마 픽셀 값 및 좌측 열에 있고 목표 블록에 인접한 이미지 블록의 재구성된 크로마 픽셀 값에 기초하여 파라미터 α 및 β의 값들이 결정된다.
그 후, 확립된 루마/크로마 상관성 모델에 기초하여 그리고 목표 블록의 재구성된 픽셀 값에 기초하여 과도 크로마 블록의 예측 픽셀 값이 획득된다.
목표 블록의 재구성된 픽셀 값은 참고 픽셀
Figure pct00001
로서 사용되고, 참고 픽셀
Figure pct00002
및 α 및 β의 값들을 수학식 1에 대입하여 과도 크로마 블록의 예측 픽셀 값을 획득한다:
Figure pct00003
이 경우, 상기 목표 블록의 재구성된 픽셀 값, 상기 목표 블록의 인접한 재구성된 픽셀 값, 및 상기 과도 크로마 블록의 인접한 재구성된 픽셀 값에 기초하여 상기 과도 크로마 블록의 예측 픽셀 값을 획득한다. 비디오 이미지의 공간 영역 상관성을 이용하여, 비디오의 공간 중복성을 제거하고, 그에 의해 인코딩을 위해 필요한 비트 레이트를 감소시킨다.
옵션으로, 방법은:
상기 제1 처리 정보에 기초하여 상기 과도 루마 블록에 대해 제1 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 루마 블록을 획득하는 단계를 추가로 포함하고, 상기 제1 업샘플링 처리는 상기 제1 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 루마 성분에 대해 수행되는 다운샘플링 처리의 역처리이다.
구체적으로, 상기 제1 처리 정보는 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시한다. 처리될 이미지 블록의 재구성된 루마 블록을 획득하기 위해, 과도 루마 블록에 대해 업샘플링 처리가 수행된다. 업샘플링 처리 방식은 다운샘플링의 역 과정이다.
예를 들어, 처리될 이미지 블록의 루마 성분에 대해 2:1 다운샘플링 처리 방식이 수행된다. 과도 루마 블록이 획득된 후에, 1:2의 업샘플링 레이트를 이용하여 과도 루마 블록에 대해 업샘플링을 수행하여, 처리될 이미지 블록의 재구성된 루마 블록을 획득한다.
업샘플링 동안 샘플링 포인트의 위치와 다운샘플링 동안 샘플링 포인트의 위치가 또한 역인 것을 포함하여, 업샘플링 처리 방식 및 다운샘플링이 역이라는 것을 이해해야 한다.
옵션으로, 방법은:
상기 처리될 이미지 블록의 크로마 정보 및 상기 예측 블록에 기초하여 상기 과도 크로마 블록을 재구성하는 단계; 및
상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록에 대해 제2 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 크로마 블록을 획득하는 단계를 추가로 포함하고, 상기 제2 업샘플링 처리는 상기 제2 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 크로마 성분에 대해 수행되는 다운샘플링 처리의 역처리이다.
구체적으로, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시한다. 처리될 이미지 블록의 재구성된 크로마 블록을 획득하기 위해, 과도 크로마 블록에 대해 업샘플링 처리가 수행된다. 업샘플링 처리 방식은 다운샘플링의 역 과정이다.
옵션으로, 이 방법은 상기 처리될 이미지 블록을 디코딩하기 위해 사용되고, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계는:
비트스트림으로부터 상기 루마 정보 및 상기 크로마 정보를 획득하는 단계; 및
상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 제2 처리 정보를 획득하는 단계;
상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하는 단계;
상기 비트스트림으로부터 상기 제2 처리 정보 및 상기 사전설정된 제1 처리 정보를 획득하는 단계; 또는
상기 사전설정된 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하는 단계를 포함한다.
구체적으로, 제1 처리 정보 및 제2 처리 정보는 이미지 구역의 식별자 정보를 포함한다. 식별자 정보는 제1 처리 정보 및 제2 처리 정보의 사용 범위를 지시하기 위해 사용된다. 이 범위는 이미지 구역의 일부, 이미지 블록, 또는 이미지 서브-블록을 포함할 수 있다.
옵션으로, 이 방법은 상기 처리될 이미지 블록을 인코딩하기 위해 사용되고, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계는:
적어도 하나의 후보 제1 처리 정보 및 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들을 별도로 계산하는 단계;
최소 인코딩 비용들에 대응하는 후보 제1 처리 정보 및 후보 제2 처리 정보를 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정하는 단계; 및
상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보에 기초하여 상기 처리될 이미지 블록을 인코딩하여, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보를 획득하는 단계를 포함한다.
이 경우, 상기 적어도 하나의 후보 제1 처리 정보 및 상기 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들이 결정되고, 상기 최소 코딩 비용들에 대응하는 상기 후보 제1 처리 정보 및 상기 후보 제2 처리 정보가 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정된다. 이는 현재 처리될 이미지를 인코딩하기 위해 필요한 비트 레이트를 감소시키고, 저장 공간 및 네트워크 리소스들을 감소시킨다.
옵션으로, 방법은:
상기 목표 제1 처리 정보, 상기 목표 제2 처리 정보, 상기 목표 루마 정보, 및 상기 목표 크로마 정보를 비트스트림으로 인코딩하는 단계를 추가로 포함한다.
따라서, 본 출원에서, 먼저, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 상기 제1 처리 정보, 및 상기 제2 처리 정보가 획득되고; 그 후, 상기 처리될 이미지 블록의 루마 정보에 기초하여 상기 처리될 이미지 블록의 과도 루마 블록이 재구성되고; 상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록이 획득된다. 상기 처리될 이미지 블록의 과도 루마 블록은 상기 처리될 이미지 블록의 크로마를 예측하기 위해 사용되고, 이미지 블록 레벨에서 이미지 처리 방식이 수행된다. 따라서, 이미지의 상이한 구역들에서의 이미지 블록 특성이 더 양호하게 적응되고, 비디오 인코딩/디코딩 과정에서의 크로마 예측의 정확도가 개선될 수 있고, 재구성된 이미지의 품질이 개선될 수 있다.
본 출원에서의 크로마 예측 방법을 더 잘 이해하기 위해, 이하에서는 인코더 측 및 디코더 측의 관점으로부터 본 출원에서의 크로마 예측 방법을 별도로 설명한다.
도 6은 본 출원에 따른 인코딩 절차의 개략도이다. 도 6에 도시된 바와 같이, 다음의 내용이 주로 포함된다.
601. 이미지를 입력하고, 이미지를 이미지 블록들로 분할하고, 현재 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하여, 초기 신호를 획득한다.
602. 초기 신호로부터 예측 신호를 빼서, 현재 처리될 이미지 블록의 루마 성분의 잔차 신호를 획득한다.
예측 신호는 현재 처리될 이미지 블록의 인접한 재구성된 픽셀에 기초하여 현재 처리될 이미지 블록의 루마 성분의 재구성된 픽셀이 생성되고 참고 픽셀로서 사용될 때 획득되는 예측 신호라는 점에 유의해야 한다. 다음의 단계들이 포함된다: 603. 현재 처리될 이미지 블록의 인접한 재구성된 픽셀에 기초하여 생성된 현재 처리될 이미지 블록의 루마 성분의 양자화 계수에 대해 역양자화를 수행하여, 변환 계수를 획득하고; 변환 계수에 대해 역변환을 수행하여, 현재 처리될 이미지 블록의 루마 성분의 잔차 신호를 획득한다. 604. 예측 신호 및 잔차 신호가 더해진 후에 필터링을 수행한다. 605. 현재 처리될 이미지 블록의 루마 성분의 재구성된 픽셀을 획득한다.
606. 현재 처리될 이미지 블록의 루마 성분의 잔차 신호에 대해 공간 변환 동작을 수행하여, 변환 계수를 획득하고, 그 후 변환 계수에 대해 양자화 동작을 수행하여, 양자화 계수를 획득한다.
607. 가변 길이 인코딩 또는 이진 인코딩과 같은 엔트로피 인코딩 기술을 이용하여 양자화 계수에 대해 엔트로피 인코딩을 수행하여, 압축된 비트스트림을 획득한다.
인코딩 동안, 전술한 절차에서 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 이해해야 한다. 원래 해상도 인코딩을 수행하여 원래 해상도 인코딩 비용들을 획득한다. 현재 처리될 이미지 블록의 원래 해상도 인코딩 비용들이 다운샘플링 인코딩 비용들과 비교되고, 작은 인코딩 비용들로 인코딩 방식에 대응하는 압축된 비트스트림이 선택된다.
처리될 이미지 블록의 크로마 성분이 인코딩될 때, 처리될 이미지 블록의 루마 성분의 재구성된 픽셀을 이용하여 처리될 이미지 블록의 크로마 성분이 예측될 수 있다. 예측 동안에, 처리될 이미지 블록의 크로마 성분의 해상도는 처리될 이미지 블록의 루마 성분의 해상도와 동일하게 보장될 필요가 있다는 점에 유의해야 한다. 처리될 이미지 블록의 크로마 성분의 해상도가 처리될 이미지 블록의 루마 성분의 해상도와 상이하다면, 크로마 성분의 해상도에 기초하여 루마 성분의 해상도를 조정하여, 처리될 이미지 블록의 조정된 루마 성분의 해상도가 처리될 이미지 블록의 크로마 성분의 해상도와 동일하게 해야 한다. 또한, 처리될 이미지 블록의 루마 성분의 재구성된 픽셀에 기초하여 처리될 이미지 블록의 크로마 성분이 예측될 수 있다.
도 7은 본 출원에 따른 디코더 측에서의 절차의 개략도이다. 도 7에 도시된 바와 같이, 다음의 내용이 주로 포함된다.
701. 엔트로피 디코딩을 통해 현재 비트스트림으로부터, 현재 처리될 이미지 블록에 대해 다운샘플링 인코딩 모드가 사용되는지(여기서는 현재 처리될 이미지 블록에 대해 다운샘플링 모드가 사용되는 것으로 가정됨) 및 변환/양자화 계수의 루마 성분을 획득한다.
702. 현재 처리될 이미지 블록의 루마 성분의 양자화 계수에 대해 역양자화를 수행하여, 변환 계수를 획득하고; 변환 계수에 대해 역변환을 수행하여, 현재 처리될 이미지 블록의 루마 성분의 잔차 신호를 획득한다.
703. 현재 처리될 이미지 블록의 루마 성분의 인접한 재구성된 픽셀에 기초하여 현재 처리될 이미지 블록의 루마 성분의 예측 픽셀을 생성한다.
704. 예측 신호 및 잔차 신호가 더해진 후에 필터링을 수행한다.
705. 현재 처리될 이미지 블록의 루마 성분의 재구성된 이미지를 획득한다. 재구성된 루마 성분의 해상도가 낮다는 점에 유의해야 한다. 현재 저해상도 재구성된 루마 픽셀에 대해 업샘플링을 추가로 수행하여, 현재 처리될 이미지 블록의 원래 해상도 루마 성분의 재구성된 픽셀을 획득할 필요가 있다. 업샘플링 과정 및 다운샘플링 과정은 역이다.
비트스트림으로부터 분석을 통해, 현재 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않다는 것이 획득될 때, 즉 현재 처리될 이미지 블록의 크로마 성분의 해상도가 원래 해상도일 때, 현재 처리될 이미지 블록의 크로마 성분의 잔차 신호가 동일한 과정을 통해 획득된다. 그 후, 저해상도 루마 재구성에 루마/크로마 상관성 모델을 적용하여, 처리될 이미지 블록의 원래 해상도 크로마 성분의 예측을 획득하고; 현재 처리될 이미지 블록의 원래 해상도 크로마 성분의 예측 및 잔차 신호가 더해진 후에 획득된 신호에 기초하여 필터링을 수행하여, 현재 처리될 이미지 블록의 원래 해상도 크로마 성분의 재구성을 획득한다.
도 8은 본 출원에 따른 크로마 예측 디바이스(800)의 개략 블록도이다. 도 8에 도시된 바와 같이, 크로마 예측 디바이스(800)는:
처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하도록 구성된 획득 모듈(810) - 제1 처리 정보는 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되고, 제2 처리 정보는 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용됨 -; 및
처리될 이미지 블록의 루마 정보에 기초하여 처리될 이미지 블록의 과도 루마 블록을 재구성하도록 구성된 재구성 모듈(820)을 포함하고, 과도 루마 블록의 해상도는 처리될 이미지 블록의 샘플링 포맷 및 제1 처리 정보를 이용하여 결정된다.
상기 획득 모듈(810)은 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하도록 추가로 구성되고, 상기 과도 루마 블록의 해상도는 상기 과도 크로마 블록의 해상도와 동일하고, 상기 과도 크로마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보를 이용하여 결정된다.
옵션으로, 결정 모듈(810) 및 송신 모듈(820)은 본 출원에서의 크로마 예측 방법(200)에서의 동작들을 수행하도록 구성된다. 간결함을 위해, 세부사항들은 여기서 다시 설명되지 않는다
옵션으로, 크로마 예측 디바이스(800)는 처리될 이미지 블록을 디코딩하도록 구성된다. 획득 모듈(810)은: 비트스트림으로부터 루마 정보 및 크로마 정보를 획득하고, 비트스트림으로부터 제1 처리 정보 및 제2 처리 정보를 획득하거나, 비트스트림으로부터 제1 처리 정보 및 사전설정된 제2 처리 정보를 획득하거나, 비트스트림으로부터 제2 처리 정보 및 사전설정된 제1 처리 정보를 획득하거나, 사전설정된 제1 처리 정보 및 제2 처리 정보를 획득하도록 구체적으로 구성된다.
옵션으로, 크로마 예측 디바이스(800)는 처리될 이미지 블록을 인코딩하도록 구성된다. 획득 모듈(810)은:
적어도 하나의 후보 제1 처리 정보 및 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들을 별도로 계산하고;
최소 인코딩 비용들에 대응하는 후보 제1 처리 정보 및 후보 제2 처리 정보를 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정하고;
상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보에 기초하여 상기 처리될 이미지 블록을 인코딩하여, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보를 획득하도록 구체적으로 구성된다.
크로마 예측 디바이스(800)는 방법 실시예에서의 크로마 예측 디바이스에 대응하고, 대응하는 모듈이 대응하는 단계를 수행한다. 세부사항들에 대해서는, 대응하는 방법 실시예를 참조한다.
도 9는 본 출원에 따른 크로마 예측 디바이스(900)의 개략 블록도이다. 도 9에 도시된 바와 같이, 크로마 예측 디바이스(900)는:
프로그램을 저장하도록 구성된 메모리(910) - 프로그램은 코드를 포함함 -;
다른 디바이스와 통신하도록 구성된 트랜시버(920); 및
메모리(910) 내의 프로그램 코드를 실행하도록 구성된 프로세서(930)를 포함한다.
옵션으로, 코드가 실행될 때, 프로세서(930)는 방법(200)의 동작들을 구현할 수 있다. 간결함을 위해, 세부사항들은 여기서 다시 설명되지 않는다. 트랜시버(920)는 프로세서(930)에 의해 구동된 후에 구체적으로 신호를 송신 및 수신하도록 구성된다.
크로마 예측 디바이스(900)는 방법 실시예에서의 크로마 예측 디바이스에 대응하고, 대응하는 모듈이 대응하는 단계를 수행한다. 세부사항들에 대해서는, 대응하는 방법 실시예를 참조한다.
도 10은 본 출원에 따른 비디오 인코딩/디코딩 장치 또는 전자 디바이스(1000)의 개략 블록도이다. 이 장치 또는 전자 디바이스는 본 발명의 실시예들에서 코덱에 통합될 수 있다. 도 11은 본 출원의 실시예에 따른 비디오 인코딩을 위한 장치의 개략도이다. 이하에서는 도 10 및 도 11에서의 유닛들을 설명한다.
전자 디바이스(1000)는, 예를 들어, 무선 통신 시스템에서의 이동 단말기 또는 사용자 장비일 수 있다. 본 출원의 실시예들은 비디오 이미지를 인코딩하고 디코딩하거나, 인코딩하거나, 디코딩할 필요가 있을 수 있는 임의의 전자 디바이스 또는 임의의 장치 상에서 구현될 수 있다는 것을 이해해야 한다.
장치(1000)는 디바이스를 수용하고 보호하도록 구성된 하우징(30)을 포함할 수 있다. 장치(1000)는 액정 디스플레이 형식의 디스플레이(32)를 추가로 포함할 수 있다. 본 출원의 다른 실시예에서, 디스플레이는 이미지 또는 비디오를 디스플레이하기 위해 사용되는 임의의 적절한 디스플레이 기술일 수 있다. 장치(1000)는 작은 키보드(34)를 추가로 포함할 수 있다. 본 출원의 다른 실시예에서, 임의의 적절한 데이터 또는 사용자 인터페이스 메커니즘이 사용될 수 있다. 예를 들어, 사용자 인터페이스는 가상 키보드로서 구현될 수 있거나, 데이터 입력 시스템은 터치 감응 디스플레이의 일부로서 구현될 수 있다. 장치는 마이크로폰(36) 또는 임의의 적절한 오디오 입력을 포함할 수 있고, 오디오 입력은 디지털 또는 아날로그 신호 입력일 수 있다. 장치(1000)는 다음의 오디오 출력 디바이스를 추가로 포함할 수 있다. 본 출원의 이 실시예에서의 오디오 출력 디바이스는 헤드셋(38), 라우드스피커, 아날로그 오디오 출력 연결, 또는 디지털 오디오 출력 연결 중 어느 하나일 수 있다. 장치(1000)는 배터리(40)를 추가로 포함할 수 있다. 본 출원의 다른 실시예에서, 디바이스는 태양 전지, 연료 전지, 또는 클록 메커니즘 생성기와 같은 임의의 적절한 이동 에너지 디바이스에 의해 전력을 공급받을 수 있다. 장치는 다른 디바이스와의 근거리 시선 통신을 위해 사용되는 적외선 포트(42)를 추가로 포함할 수 있다. 다른 실시예에서, 장치(1000)는 블루투스 무선 연결 또는 USB/파이어와이어 유선 연결과 같은 임의의 적절한 근거리 통신 해결책을 추가로 포함할 수 있다.
장치(1000)는 장치(1000)를 제어하도록 구성되는 제어기(56) 또는 프로세서를 포함할 수 있다. 제어기(56)는 메모리(58)에 연결될 수 있다. 본 출원의 이 실시예에서, 메모리는 이미지 데이터 및 오디오 데이터를 저장할 수 있고, 및/또는 제어기(56) 상에서 구현되는 명령어를 저장할 수 있다. 제어기(56)는 오디오 및/또는 비디오 데이터 인코딩 및 디코딩을 구현하거나, 또는 제어기(56)에 의해 구현되는 보조 인코딩 및 디코딩을 구현하도록 구성되는 코덱 회로(54)에 더 연결될 수 있다.
장치(1000)는 사용자 정보를 제공하고 네트워크 인증 및 인가를 위해 사용되는 사용자 인증 정보를 제공하도록 구성되는, UICC 및 UICC 판독기와 같은, 스마트 카드(46) 및 카드 판독기(48)를 추가로 포함할 수 있다.
장치(1000)는 무선 인터페이스 회로(52)를 추가로 포함할 수 있다. 무선 인터페이스 회로는 제어기에 연결되고, 셀룰러 통신 네트워크, 무선 통신 시스템, 또는 무선 로컬 영역 네트워크와 통신하기 위해 사용되는 무선 통신 신호를 생성하도록 구성된다. 장치(1000)는 안테나(44)를 추가로 포함할 수 있다. 안테나는 무선 인터페이스 회로(52)에 연결되고, 다른(또는 복수의) 장치들에, 무선 인터페이스 회로(52)에 의해 생성된 무선 주파수 신호를 송신하도록 구성되고, 다른(또는 복수의) 장치들로부터 무선 주파수 신호를 수신하도록 구성된다.
본 출원의 일부 실시예들에서, 장치(1000)는 단일 프레임들을 기록 또는 검출할 수 있는 카메라를 포함하고, 코덱(54) 또는 제어기는 그 단일 프레임들을 수신하고 처리한다. 본 출원의 일부 실시예들에서, 장치는 송신 및/또는 저장 전에 다른 디바이스로부터 처리될 비디오 이미지 데이터를 수신할 수 있다. 본 출원의 일부 실시예들에서, 장치(1000)는 인코딩/디코딩을 위해 무선 또는 유선 연결을 통해 이미지를 수신할 수 있다.
본 기술분야의 통상의 기술자들은 본 명세서에 개시된 실시예들을 참조하여 설명된 예들에서의 유닛들 및 알고리즘 단계들이 전자 하드웨어 또는 컴퓨터 소프트웨어와 전자 하드웨어의 조합에 의해 구현될 수 있다는 것을 인식할 수 있다. 기능들이 하드웨어에 의해 수행되는지 또는 소프트웨어에 의해 수행되는지는 기술적 해결책의 설계 제약 조건 및 특정 응용에 의존한다. 본 기술분야의 통상의 기술자들은 각각의 특정 응용에 대해 설명된 기능들을 구현하기 위해 상이한 방법들을 이용할 수 있지만, 그 구현이 본 출원의 범위를 넘어서는 것으로 간주되어서는 안 된다.
설명의 편의 및 간결성을 위해, 전술한 내용에서 설명된 시스템, 장치, 및 유닛의 특정 작업 과정들이 전술한 방법 실시예들에서의 대응하는 과정들을 참조한다는 것을 본 기술분야의 통상의 기술자들은 명확하게 이해할 수 있다. 세부사항들은 여기서 다시 설명되지 않는다
본 출원에서 제공된 여러 실시예들에서, 개시된 시스템, 장치, 및 방법은 다른 방식으로 구현될 수도 있다는 것을 이해해야 한다. 예를 들어, 설명된 장치 실시예는 예에 불과하다. 예를 들어, 유닛 구분은 논리적 기능 구분에 불과하고 실제 구현에서는 다른 구분일 수 있다. 예를 들어, 복수의 유닛 또는 컴포넌트가 조합 또는 통합되어 다른 시스템으로 될 수 있거나, 또는 일부 특징들이 무시되거나 수행되지 않을 수 있다. 또한, 디스플레이되거나 논의된 상호 결합들 또는 직접 결합들 또는 통신 연결들은 일부 인터페이스들을 통해 구현될 수 있다. 장치들 또는 유닛들 간의 간접 결합들 또는 통신 연결들은 전자적, 기계적, 또는 다른 형식들로 구현될 수 있다.
분리된 부분들로서 설명된 유닛들은 물리적으로 분리되어 있을 수 있거나 그렇지 않을 수 있고, 유닛들로서 디스플레이된 부분들은 물리적 유닛들일 수 있거나 그렇지 않을 수 있고, 하나의 위치에 위치할 수 있거나, 또는 복수의 네트워크 유닛 상에 분산될 수 있다. 유닛들의 일부 또는 전부는 본 출원에서의 실시예들의 해결책들의 목적들을 달성하기 위해 실제 요구들에 기초하여 선택될 수 있다.
또한, 본 출원의 실시예들에서의 기능 유닛들이 하나의 처리 유닛으로 집적될 수 있거나, 또는 그 유닛들 각각이 물리적으로 단독으로 존재할 수 있거나, 또는 둘 이상의 유닛이 하나의 유닛으로 집적될 수 있다.
기능들이 소프트웨어 기능 유닛의 형식으로 구현되고 독립적인 제품으로서 판매되거나 사용될 때, 기능들은 컴퓨터 판독가능 저장 매체에 저장될 수 있다. 그러한 이해에 기초하여, 본질적으로 본 출원의 기술적 해결책들, 또는 종래 기술에 기여하는 부분, 또는 기술적 해결책들의 일부는 소프트웨어 제품의 형식으로 구현될 수 있다. 컴퓨터 소프트웨어 제품은 저장 매체에 저장되고, 컴퓨터 디바이스(개인용 컴퓨터, 서버, 네트워크 디바이스 등일 수 있음)에게 본 출원의 실시예들에서 설명된 방법들의 단계들의 전부 또는 일부를 수행하도록 지시하기 위한 여러 명령어들을 포함한다. 전술한 저장 매체는 USB 플래시 드라이브, 이동식 하드 디스크, 판독 전용 메모리(Read-Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크 및 광학 디스크와 같은, 프로그램 코드를 저장할 수 있는 다양한 매체를 포함한다.
전술한 설명들은 본 출원의 특정 구현들에 불과하고, 본 출원의 보호 범위는 그것으로 제한되지 않는다. 본 출원에 개시된 기술적 범위 내에서 본 기술분야의 통상의 기술자들에 의해 용이하게 안출되는 임의의 변형 또는 치환은 본 출원의 보호 범위 내에 속할 것이다. 따라서, 본 출원의 보호 범위는 청구항들의 보호 범위에 따라야 한다.

Claims (22)

  1. 크로마 예측 방법으로서,
    처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계 - 상기 제1 처리 정보는 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되고, 상기 제2 처리 정보는 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용됨 -;
    상기 처리될 이미지 블록의 루마 정보에 기초하여 상기 처리될 이미지 블록의 과도 루마 블록을 재구성하는 단계 - 상기 과도 루마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제1 처리 정보를 이용하여 결정됨 -; 및
    상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하는 단계를 포함하고, 상기 과도 루마 블록의 해상도는 상기 과도 크로마 블록의 해상도와 동일하고, 상기 과도 크로마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보를 이용하여 결정되는, 방법.
  2. 제1항에 있어서,
    상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
    상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함하는, 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
    상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함하는, 방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하는 것은:
    상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록의 해상도를 결정하는 단계;
    상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 상이할 때, 상기 과도 루마 블록의 해상도를 조정하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하고, 상기 조정된 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하거나, 또는
    상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 동일할 때, 상기 과도 루마 블록의 해상도를 유지하고, 상기 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하는 단계; 및
    상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하는 단계를 포함하는, 방법.
  5. 제4항에 있어서,
    상기 과도 루마 블록의 해상도를 조정하는 것은:
    상기 과도 루마 블록의 수평 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수평 해상도가 상기 과도 크로마 블록의 수평 해상도와 동일하게 하는 단계; 및
    상기 과도 루마 블록의 수직 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수직 해상도가 상기 과도 크로마 블록의 수직 해상도와 동일하게 하는 단계를 포함하는, 방법.
  6. 제4항 또는 제5항에 있어서,
    상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하는 단계는:
    상기 목표 블록의 재구성된 픽셀 값, 상기 목표 블록의 인접한 재구성된 픽셀 값, 및 상기 과도 크로마 블록의 인접한 재구성된 픽셀 값에 기초하여 상기 과도 크로마 블록의 예측 픽셀 값을 획득하는 단계를 포함하는, 방법.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 방법은:
    상기 제1 처리 정보에 기초하여 상기 과도 루마 블록에 대해 제1 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 루마 블록을 획득하는 단계를 추가로 포함하고, 상기 제1 업샘플링 처리는 상기 제1 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 루마 성분에 대해 수행되는 다운샘플링 처리의 역처리인, 방법.
  8. 제1항 내지 제7항 중 어느 한 항에 있어서,
    상기 방법은:
    상기 처리될 이미지 블록의 크로마 정보 및 상기 예측 블록에 기초하여 상기 과도 크로마 블록을 재구성하는 단계; 및
    상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록에 대해 제2 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 크로마 블록을 획득하는 단계를 추가로 포함하고, 상기 제2 업샘플링 처리는 상기 제2 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 크로마 성분에 대해 수행되는 다운샘플링 처리의 역처리인, 방법.
  9. 제1항 내지 제8항 중 어느 한 항에 있어서,
    상기 방법은 상기 처리될 이미지 블록을 디코딩하기 위해 사용되고, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계는:
    비트스트림으로부터 상기 루마 정보 및 상기 크로마 정보를 획득하는 단계; 및
    상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 제2 처리 정보를 획득하는 단계;
    상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하는 단계;
    상기 비트스트림으로부터 상기 제2 처리 정보 및 상기 사전설정된 제1 처리 정보를 획득하는 단계; 또는
    상기 사전설정된 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하는 단계를 포함하는, 방법.
  10. 제1항 내지 제8항 중 어느 한 항에 있어서,
    상기 방법은 상기 처리될 이미지 블록을 인코딩하기 위해 사용되고, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하는 단계는:
    적어도 하나의 후보 제1 처리 정보 및 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들을 별도로 계산하는 단계;
    최소 인코딩 비용들에 대응하는 후보 제1 처리 정보 및 후보 제2 처리 정보를 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정하는 단계; 및
    상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보에 기초하여 상기 처리될 이미지 블록을 인코딩하여, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보를 획득하는 단계를 포함하는, 방법.
  11. 제10항에 있어서,
    상기 방법은:
    상기 목표 제1 처리 정보, 상기 목표 제2 처리 정보, 상기 목표 루마 정보, 및 상기 목표 크로마 정보를 비트스트림으로 인코딩하는 단계를 추가로 포함하는, 방법.
  12. 크로마 예측 디바이스로서,
    처리될 이미지 블록의 루마 정보 및 크로마 정보, 제1 처리 정보, 및 제2 처리 정보를 획득하도록 구성된 획득 모듈 - 상기 제1 처리 정보는 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되고, 상기 제2 처리 정보는 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용됨 -; 및
    상기 처리될 이미지 블록의 루마 정보에 기초하여 상기 처리될 이미지 블록의 과도 루마 블록을 재구성하도록 구성된 재구성 모듈을 포함하고, 상기 과도 루마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제1 처리 정보를 이용하여 결정되고,
    상기 획득 모듈은 상기 과도 루마 블록의 해상도, 상기 처리될 이미지 블록의 샘플링 포맷, 및 상기 제2 처리 정보에 기초하여 상기 처리될 이미지 블록의 과도 크로마 블록의 예측 블록을 획득하도록 추가로 구성되고, 상기 과도 루마 블록의 해상도는 상기 과도 크로마 블록의 해상도와 동일하고, 상기 과도 크로마 블록의 해상도는 상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보를 이용하여 결정되는, 디바이스.
  13. 제12항에 있어서,
    상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
    상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제1 처리 정보가 상기 처리될 이미지 블록의 루마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함하는, 디바이스.
  14. 제12항 또는 제13항에 있어서,
    상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 사용되는 다운샘플링 처리 방식을 지시하기 위해 사용되는 것은:
    상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링이 수행되지 않는다는 것을 지시하기 위해 사용되거나; 또는 상기 제2 처리 정보가 상기 처리될 이미지 블록의 크로마 성분에 대해 다운샘플링을 수행하는 필터를 지시하기 위해 사용되는 것을 포함하는, 디바이스.
  15. 제12항 내지 제14항 중 어느 한 항에 있어서,
    상기 획득 모듈은:
    상기 처리될 이미지 블록의 샘플링 포맷 및 상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록의 해상도를 결정하고;
    상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 상이할 때, 상기 과도 루마 블록의 해상도를 조정하여, 상기 조정된 과도 루마 블록의 해상도가 상기 과도 크로마 블록의 해상도와 동일하게 하고, 상기 조정된 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하거나, 또는
    상기 과도 크로마 블록의 해상도가 상기 과도 루마 블록의 해상도와 동일할 때, 상기 과도 루마 블록의 해상도를 유지하고, 상기 과도 루마 블록을 상기 과도 크로마 블록의 목표 블록으로서 이용하고;
    상기 과도 크로마 블록의 목표 블록에 기초하여 상기 과도 크로마 블록의 예측 블록을 획득하도록 구체적으로 구성되는, 디바이스.
  16. 제15항에 있어서,
    상기 획득 모듈은:
    상기 과도 루마 블록의 수평 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수평 해상도가 상기 과도 크로마 블록의 수평 해상도와 동일하게 하고;
    상기 과도 루마 블록의 수직 해상도를 조정하여, 상기 조정된 과도 루마 블록의 수직 해상도가 상기 과도 크로마 블록의 수직 해상도와 동일하게 하도록 구체적으로 구성되는, 디바이스.
  17. 제15항 또는 제16항에 있어서,
    상기 획득 모듈은:
    상기 목표 블록의 재구성된 픽셀 값, 상기 목표 블록의 인접한 재구성된 픽셀 값, 및 상기 과도 크로마 블록의 인접한 재구성된 픽셀 값에 기초하여 상기 과도 크로마 블록의 예측 픽셀 값을 획득하도록 구체적으로 구성되는, 디바이스.
  18. 제12항 내지 제17항 중 어느 한 항에 있어서,
    상기 디바이스는:
    상기 제1 처리 정보에 기초하여 상기 과도 루마 블록에 대해 제1 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 루마 블록을 획득하도록 구성된 처리 모듈을 추가로 포함하고, 상기 제1 업샘플링 처리는 상기 제1 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 루마 성분에 대해 수행되는 다운샘플링 처리의 역처리인, 디바이스.
  19. 제12항 내지 제18항 중 어느 한 항에 있어서,
    상기 처리 모듈은:
    상기 처리될 이미지 블록의 크로마 정보 및 상기 예측 블록에 기초하여 상기 과도 크로마 블록을 재구성하고;
    상기 제2 처리 정보에 기초하여 상기 과도 크로마 블록에 대해 제2 업샘플링 처리를 수행하여, 상기 처리될 이미지 블록의 재구성된 크로마 블록을 획득하도록 추가로 구성되고, 상기 제2 업샘플링 처리는 상기 제2 처리 정보에 의해 지시되고 상기 처리될 이미지 블록의 크로마 성분에 대해 수행되는 다운샘플링 처리의 역처리인, 디바이스.
  20. 제12항 내지 제19항 중 어느 한 항에 있어서,
    상기 디바이스는 상기 처리될 이미지 블록을 디코딩하도록 구성되고, 상기 획득 모듈은:
    비트스트림으로부터 상기 루마 정보 및 상기 크로마 정보를 획득하고;
    상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 제2 처리 정보를 획득하거나;
    상기 비트스트림으로부터 상기 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하거나;
    상기 비트스트림으로부터 상기 제2 처리 정보 및 상기 사전설정된 제1 처리 정보를 획득하거나; 또는
    상기 사전설정된 제1 처리 정보 및 상기 사전설정된 제2 처리 정보를 획득하도록 구체적으로 구성되는, 디바이스.
  21. 제12항 내지 제19항 중 어느 한 항에 있어서,
    상기 디바이스는 상기 처리될 이미지 블록을 인코딩하도록 구성되고, 상기 획득 모듈은:
    적어도 하나의 후보 제1 처리 정보 및 적어도 하나의 후보 제2 처리 정보를 이용하여 결정되는 상기 처리될 이미지 블록의 인코딩 비용들을 별도로 계산하고;
    최소 인코딩 비용들에 대응하는 후보 제1 처리 정보 및 후보 제2 처리 정보를 상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보로서 결정하고;
    상기 획득된 제1 처리 정보 및 상기 획득된 제2 처리 정보에 기초하여 상기 처리될 이미지 블록을 인코딩하여, 상기 처리될 이미지 블록의 루마 정보 및 크로마 정보를 획득하도록 구체적으로 구성되는, 디바이스.
  22. 제21항에 있어서,
    상기 디바이스는:
    상기 목표 제1 처리 정보, 상기 목표 제2 처리 정보, 상기 목표 루마 정보, 및 상기 목표 크로마 정보를 비트스트림으로 컴파일하도록 구성된 기입 모듈을 추가로 포함하는, 디바이스.
KR1020207001173A 2017-07-17 2018-05-22 크로마 예측 방법 및 디바이스 KR102352085B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020227001147A KR20220011216A (ko) 2017-07-17 2018-05-22 크로마 예측 방법 및 디바이스

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710582094.1 2017-07-17
CN201710582094.1A CN109274969B (zh) 2017-07-17 2017-07-17 色度预测的方法和设备
PCT/CN2018/087836 WO2019015389A1 (zh) 2017-07-17 2018-05-22 色度预测的方法和设备

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020227001147A Division KR20220011216A (ko) 2017-07-17 2018-05-22 크로마 예측 방법 및 디바이스

Publications (2)

Publication Number Publication Date
KR20200019201A true KR20200019201A (ko) 2020-02-21
KR102352085B1 KR102352085B1 (ko) 2022-01-17

Family

ID=65015986

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020207001173A KR102352085B1 (ko) 2017-07-17 2018-05-22 크로마 예측 방법 및 디바이스
KR1020227001147A KR20220011216A (ko) 2017-07-17 2018-05-22 크로마 예측 방법 및 디바이스

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020227001147A KR20220011216A (ko) 2017-07-17 2018-05-22 크로마 예측 방법 및 디바이스

Country Status (7)

Country Link
US (2) US11082709B2 (ko)
EP (2) EP3633995B1 (ko)
JP (2) JP7011031B2 (ko)
KR (2) KR102352085B1 (ko)
CN (1) CN109274969B (ko)
TW (1) TWI663880B (ko)
WO (1) WO2019015389A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022191553A1 (ko) * 2021-03-08 2022-09-15 현대자동차주식회사 행렬 기반 크로스 컴포넌트 예측을 이용하는 비디오 코딩방법 및 장치

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG11202004389VA (en) * 2017-11-17 2020-06-29 Fraunhofer Ges Forschung Apparatus and method for encoding or decoding directional audio coding parameters using quantization and entropy coding
EP3861738A4 (en) 2018-11-06 2022-01-26 Beijing Bytedance Network Technology Co., Ltd. POSITION-BASED INTRA PREDICTION
CN113170122B (zh) 2018-12-01 2023-06-27 北京字节跳动网络技术有限公司 帧内预测的参数推导
AU2019391197B2 (en) 2018-12-07 2023-05-25 Beijing Bytedance Network Technology Co., Ltd. Context-based intra prediction
BR112021014853A2 (pt) 2019-02-22 2021-10-05 Beijing Bytedance Network Technology Co., Ltd. Método e aparelho para processar e codificar dados de vídeo, e, mídias de armazenamento e registro legíveis por computador não transitórias
AU2020226566A1 (en) 2019-02-24 2021-08-19 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for intra prediction
WO2020180119A1 (ko) * 2019-03-06 2020-09-10 엘지전자 주식회사 Cclm 예측에 기반한 영상 디코딩 방법 및 그 장치
CN111698501B (zh) * 2019-03-11 2022-03-01 杭州海康威视数字技术股份有限公司 解码方法及装置
CN117880494A (zh) * 2019-03-24 2024-04-12 北京字节跳动网络技术有限公司 用于帧内预测的参数推导的条件
WO2020192180A1 (zh) * 2019-03-25 2020-10-01 Oppo广东移动通信有限公司 图像分量的预测方法、编码器、解码器及计算机存储介质
JP2022546898A (ja) 2019-06-25 2022-11-10 エスゼット ディージェイアイ テクノロジー カンパニー リミテッド ビデオ画像処理方法、装置、および記憶媒体
CN110267043B (zh) * 2019-06-28 2023-02-07 广东中星微电子有限公司 解码方法、解码装置和电子设备
CN110557621B (zh) * 2019-08-27 2022-06-14 咪咕文化科技有限公司 参数获取方法、像素点对选择方法及相关设备
CN110677676B (zh) * 2019-09-27 2024-02-09 腾讯科技(深圳)有限公司 视频编码方法和装置、视频解码方法和装置及存储介质
BR112022012484A2 (pt) * 2019-12-30 2022-09-06 Huawei Tech Co Ltd Método e aparelho de filtragem para predição de modelo linear de componente cruzado
CN113497937B (zh) * 2020-03-20 2023-09-05 Oppo广东移动通信有限公司 图像编码方法、图像解码方法及相关装置
WO2021086237A2 (en) * 2020-04-01 2021-05-06 Huawei Technologies Co., Ltd. Method and apparatus of sample fetching and padding for downsampling filtering for cross-component linear model prediction
CN111784708B (zh) * 2020-07-03 2021-03-12 上海骏聿数码科技有限公司 图像防篡改检验方法和装置
CN114025168B (zh) * 2021-09-30 2023-08-04 浙江大华技术股份有限公司 视频图像的处理方法、处理设备、电子设备以及存储介质
CN114501007B (zh) * 2021-12-20 2024-01-09 杭州当虹科技股份有限公司 基于422视频的快速编码方法及编码器
EP4300955A1 (en) * 2022-06-29 2024-01-03 Beijing Xiaomi Mobile Software Co., Ltd. Encoding/decoding video picture data

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012175646A1 (en) * 2011-06-22 2012-12-27 Canon Kabushiki Kaisha Method and device for processing colour information in an image

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101159874A (zh) * 2004-09-08 2008-04-09 华为技术有限公司 基于帧内编码的图像色度预测方法
CN100359953C (zh) * 2004-09-08 2008-01-02 华为技术有限公司 基于帧内编码的图像色度预测方法
CN101394565B (zh) * 2008-10-20 2011-08-17 成都九洲电子信息系统有限责任公司 一种帧内预测方法
CN101742301B (zh) * 2008-11-24 2017-04-19 北京中星微电子有限公司 一种块模式编码方法及装置
US20110002554A1 (en) 2009-06-11 2011-01-06 Motorola, Inc. Digital image compression by residual decimation
US20110002391A1 (en) 2009-06-11 2011-01-06 Motorola, Inc. Digital image compression by resolution-adaptive macroblock coding
US9288500B2 (en) * 2011-05-12 2016-03-15 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
JP2013034162A (ja) 2011-06-03 2013-02-14 Sony Corp 画像処理装置及び画像処理方法
US9565428B2 (en) 2011-06-20 2017-02-07 Mediatek Singapore Pte. Ltd. Method and apparatus of chroma intra prediction with reduced line memory
US9693070B2 (en) * 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
SG10201408745YA (en) * 2011-06-28 2015-02-27 Samsung Electronics Co Ltd Prediction method and apparatus for chroma component of image using luma component of image
JP2014525176A (ja) 2011-07-12 2014-09-25 インテル コーポレイション 輝度に基づく色度イントラ予測
WO2013109631A1 (en) * 2012-01-19 2013-07-25 Magnum Semiconductor, Inc. Methods and apparatuses for providing an adaptive reduced resolution update mode
CN103220508B (zh) 2012-01-20 2014-06-11 华为技术有限公司 编解码方法和装置
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US10536710B2 (en) 2012-06-27 2020-01-14 Intel Corporation Cross-layer cross-channel residual prediction
ES2904919T3 (es) * 2013-03-29 2022-04-06 Jvckenwood Corp Dispositivo de decodificación de imagen, procedimiento de decodificación de imagen y programa de decodificación de imagen
KR101530774B1 (ko) * 2013-09-30 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
CN105230023B (zh) 2014-03-04 2019-10-18 微软技术许可有限责任公司 色彩空间、色彩采样率和/或比特深度的自适应切换
US10455249B2 (en) * 2015-03-20 2019-10-22 Qualcomm Incorporated Downsampling process for linear model prediction mode

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012175646A1 (en) * 2011-06-22 2012-12-27 Canon Kabushiki Kaisha Method and device for processing colour information in an image

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Mei Guo, et al. Intra Chroma LM Mode with Reduced Line Buffer, JCT-VC of ITU-T and ISO/IEC. JCTVC-F121, 2011-07-01, pp. 1-4 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022191553A1 (ko) * 2021-03-08 2022-09-15 현대자동차주식회사 행렬 기반 크로스 컴포넌트 예측을 이용하는 비디오 코딩방법 및 장치

Also Published As

Publication number Publication date
CN109274969A (zh) 2019-01-25
US11082709B2 (en) 2021-08-03
EP3633995A1 (en) 2020-04-08
JP2020526994A (ja) 2020-08-31
EP3633995B1 (en) 2022-04-06
CN109274969B (zh) 2020-12-22
WO2019015389A1 (zh) 2019-01-24
KR20220011216A (ko) 2022-01-27
KR102352085B1 (ko) 2022-01-17
EP3633995A4 (en) 2020-05-27
JP7461974B2 (ja) 2024-04-04
TWI663880B (zh) 2019-06-21
US20210297682A1 (en) 2021-09-23
US20200154118A1 (en) 2020-05-14
JP2022050585A (ja) 2022-03-30
JP7011031B2 (ja) 2022-01-26
TW201909623A (zh) 2019-03-01
EP4117286A1 (en) 2023-01-11

Similar Documents

Publication Publication Date Title
KR102352085B1 (ko) 크로마 예측 방법 및 디바이스
CN107566848B (zh) 编解码的方法及装置
CN106998470B (zh) 解码方法、编码方法、解码设备和编码设备
US11528507B2 (en) Image encoding and decoding method, apparatus, and system, and storage medium to determine a transform core pair to effectively reduce encoding complexity
US20200021822A1 (en) Image Filtering Method and Apparatus
US11290724B2 (en) Inter prediction method and apparatus, and terminal device
US20230070282A1 (en) Motion vector obtaining method and apparatus
US11109060B2 (en) Image prediction method and apparatus
US20230017934A1 (en) Image encoding and decoding methods and apparatuses
US10349084B2 (en) Video encoding method using inter-view prediction and device thereof, and video decoding method and device thereof
WO2018120230A1 (zh) 图像滤波方法、装置以及设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant