KR20140092799A - 영상 부호화/복호화 방법 및 장치 - Google Patents

영상 부호화/복호화 방법 및 장치 Download PDF

Info

Publication number
KR20140092799A
KR20140092799A KR20140087643A KR20140087643A KR20140092799A KR 20140092799 A KR20140092799 A KR 20140092799A KR 20140087643 A KR20140087643 A KR 20140087643A KR 20140087643 A KR20140087643 A KR 20140087643A KR 20140092799 A KR20140092799 A KR 20140092799A
Authority
KR
South Korea
Prior art keywords
current block
residual signal
block
signal
mode
Prior art date
Application number
KR20140087643A
Other languages
English (en)
Other versions
KR101809728B1 (ko
Inventor
김휘용
임성창
최진수
이진호
김진웅
김경용
박광훈
Original Assignee
한국전자통신연구원
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원, 경희대학교 산학협력단 filed Critical 한국전자통신연구원
Publication of KR20140092799A publication Critical patent/KR20140092799A/ko
Application granted granted Critical
Publication of KR101809728B1 publication Critical patent/KR101809728B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

영상 부호화/복호화 방법 및 장치가 개시된다. 상기 영상 복호화 방법은 현재 블록에 대한 잔여 신호(residual signal) 존재 유무 정보를 파싱하는 단계 및 상기 잔여 신호 존재 유무 정보를 기반으로 상기 현재 블록의 잔여 신호에 대한 스캔 방향(scanIdx)을 유도하여 상기 현재 블록의 잔여 신호를 획득하는 단계를 포함하며, 상기 잔여 신호 존재 유무 정보는, 상기 현재 블록에 잔여 신호가 존재하는지 여부를 지시하는 정보이며, 상기 잔여 신호 존재 유무 정보가 상기 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 상기 현재 블록이 0이 아닌 하나 이상의 변환 계수 레벨(transform coefficient level)을 포함할 수 있다.

Description

영상 부호화/복호화 방법 및 장치{METHOD AND APPARATUS FOR IMAGE ENCODING/DECODING}
본 발명은 영상의 부호화/복호화에 관한 것으로, 보다 상세하게는 잔여 신호에 대한 스캔 방법에 관한 것이다.
최근 HD(High Definition) 해상도(1280x1024 혹은 1920x1080)를 가지는 방송 서비스가 국내뿐만 아니라 세계적으로 확대되고 있다. 이에 따라 많은 사용자들이 고해상도, 고화질의 영상에 많이 익숙해지고 있으며 그에 발맞춰서 많은 기관에서는 차세대 영상기기에 대한 개발에 박차를 가하고 있다. 또한 HDTV와 더불어 HDTV의 4배 이상의 해상도를 갖는 UHD(Ultra High Definition)에 대한 관심이 증대되면서 동영상 표준화 단체들은 보다 높은 해상도, 고화질의 영상에 대한 압축기술의 필요성을 인식하게 되었다. 또한 현재 HDTV, 휴대전화, 블루레이 플레이어에 사용되는 H.264/AVC보다 높은 압축 효율을 통해 동일한 화질을 유지하면서도 주파수 대역이나 저장 측면에서 많은 이득을 얻을 수 있는 새로운 표준이 절실한 실정이다.
현재 MPEG(Moving Picture Experts Group)과 VCEG(Video Coding Experts Group)는 공동으로 차세대 비디오 코덱인 HEVC(High Efficiency Video Coding)를 표준화하고 있으며, UHD 영상까지 포함한 영상을 H.264/AVC 대비 2배의 압축효율로 부호화를 하는 것을 목표로 하고 있다. 이는 HD, UHD 영상뿐만 아니라 3D 방송 및 이동통신망에서도 현재보다 낮은 주파수로 고화질의 영상을 제공할 수 있다.
본 발명은 부호화/복호화 효율을 향상시킬 수 있는 영상 부호화/복호화 방법 및 장치를 제공한다.
본 발명은 부호화/복호화 효율을 향상시킬 수 있는 잔여 신호의 스캔 방법 및 장치를 제공한다.
본 발명의 일 양태에 따르면, 영상 복호화 방법이 제공된다. 상기 영상 복호화 방법은 현재 블록에 대한 잔여 신호(residual signal) 존재 유무 정보를 파싱하는 단계 및 상기 잔여 신호 존재 유무 정보를 기반으로 상기 현재 블록의 잔여 신호에 대한 스캔 방향(scanIdx)을 유도하여 상기 현재 블록의 잔여 신호를 획득하는 단계를 포함한다.
상기 잔여 신호 존재 유무 정보는, 상기 현재 블록에 잔여 신호가 존재하는지 여부를 지시하는 정보일 수 있다.
상기 잔여 신호 존재 유무 정보가 상기 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 상기 현재 블록이 0이 아닌 하나 이상의 변환 계수 레벨(transform coefficient level)을 포함할 수 있다.
변환 스킵 알고리즘이 적용된 블록은 변환 과정을 수행하지 않으므로, 기존의 변환 과정을 수행한 블록과 변환 스킵 블록은 서로 다른 변환 계수 특성을 지닌다. 따라서, 기존의 변환 과정을 수행한 블록에 적용하였던 변환 계수 스캔 방법이 아닌 변환 스킵 블록의 특성에 맞는 스캐닝 방향을 유도하는 방법 및 장치를 제공함으로써, 잔여 신호에 대한 부호화 및 복호화 효율을 높일 수 있다.
도 1은 본 발명이 적용되는 영상 부호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다.
도 2는 본 발명이 적용되는 영상 복호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다.
도 3은 영상을 부호화할 때 영상의 분할 구조를 개략적으로 나타내는 도면이다.
도 4는 코딩 유닛(CU)이 포함할 수 있는 예측 유닛(PU)의 형태를 도시한 도면이다.
도 5는 코딩 유닛(CU)이 포함할 수 있는 변환 유닛(TU)의 형태를 도시한 도면이다.
도 6은 인트라 예측 모드의 일예를 도시한 도면이다.
도 7은 변환 계수에 대한 상단 우측(Up-right) 스캔 방법의 일예를 나타내는 도면이다.
도 8은 인트라 예측 모드에 따른 스캔 방향을 결정하는 방법의 일 실시예를 나타내는 순서도이다.
도 9는 잔여 신호(잔여 영상)에 대한 주파수 변환 방식을 선택하는 방법의 일예를 나타내는 순서도이다.
도 10은 본 발명의 일 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 11은 본 발명의 다른 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 12는 본 발명이 적용될 수 있는 스캔 방향의 일예를 나타내는 도면이다.
도 13은 본 발명의 일 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 14는 본 발명의 다른 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 15는 휘도 블록과 색차 블록 간의 해상도 차이의 일예를 도시한 도면이다.
도 16은 휘도 블록과 색차 블록 간의 해상도 차이의 다른 예를 도시한 도면이다.
도 17은 본 발명의 일 실시예에 따른 부호화 장치를 개략적으로 도시한 블록도이다.
도 18은 본 발명의 일 실시예에 따른 복호화 장치를 개략적으로 도시한 블록도이다.
이하, 도면을 참조하여 본 발명의 실시 형태에 대하여 구체적으로 설명한다. 본 명세서의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 해당 설명을 생략할 수도 있다.
본 명세서에서 어떤 구성 요소가 다른 구성 요소에 연결되어 있다거나 접속되어 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있는 것을 의미할 수도 있고, 중간에 다른 구성 요소가 존재하는 것을 의미할 수도 있다. 아울러, 본 명세서에서 특정 구성을 포함한다고 기술하는 내용은 해당 구성 이외의 구성을 배제하는 것이 아니며, 추가적인 구성이 본 발명의 실시 또는 본 발명의 기술적 사상의 범위에 포함될 수 있음을 의미한다.
제1, 제2 등의 용어는 다양한 구성들을 설명하는데 사용될 수 있지만, 상기 구성들은 상기 용어에 의해 한정되지 않는다. 상기 용어들은 하나의 구성을 다른 구성으로부터 구별하는 목적으로 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성은 제2 구성으로 명명될 수 있고, 유사하게 제2 구성도 제1 구성으로 명명될 수 있다.
또한 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성 단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 포함한 것으로 각 구성부 중 적어도 두 개의 구성부가 하나의 구성부를 이루거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다. 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
또한, 일부의 구성 요소는 본 발명에서 본질적인 기능을 수행하는 필수적인 구성 요소는 아니고 단지 성능을 향상시키기 위한 선택적 구성 요소일 수 있다. 본 발명은 단지 성능 향상을 위해 사용되는 구성 요소를 제외한 본 발명의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 단지 성능 향상을 위해 사용되는 선택적 구성 요소를 제외한 필수 구성 요소만을 포함한 구조도 본 발명의 권리범위에 포함된다.
도 1은 본 발명이 적용되는 영상 부호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다.
도 1을 참조하면, 영상 부호화 장치(100)는 움직임 예측부(111), 움직임 보상부(112), 인트라 예측부(120), 스위치(115), 감산기(125), 변환부(130), 양자화부(140), 엔트로피 부호화부(150), 역양자화부(160), 역변환부(170), 가산기(175), 필터부(180) 및 참조 영상 버퍼(190)를 포함한다.
영상 부호화 장치(100)는 입력 영상에 대해 인트라(intra) 모드 또는 인터(inter) 모드로 부호화를 수행하고 비트스트림을 출력할 수 있다. 인트라 모드인 경우 스위치(115)가 인트라로 전환되고, 인터 모드인 경우 스위치(115)가 인터로 전환될 수 있다. 인트라 예측은 화면 내 예측, 인터 예측은 화면 간 예측을 의미한다. 영상 부호화 장치(100)는 입력 영상의 입력 블록에 대한 예측 블록을 생성한 후, 입력 블록과 예측 블록의 차분(residual)을 부호화할 수 있다. 이때, 입력 영상은 원 영상(original picture)를 의미할 수 있다.
인트라 모드인 경우, 인트라 예측부(120)는 현재 블록 주변의 이미 부호화/복호화된 블록의 픽셀값을 이용하여 공간적 예측을 수행하여 예측 블록을 생성할 수 있다.
인터 모드인 경우, 움직임 예측부(111)는, 움직임 예측 과정에서 참조 픽처 버퍼(190)에 저장되어 있는 참조 영상에서 입력 블록과 가장 매치가 잘 되는 영역을 찾아 움직임 벡터를 구할 수 있다. 움직임 보상부(112)는 움직임 벡터를 이용하여 움직임 보상을 수행함으로써 예측 블록을 생성할 수 있다. 여기서, 움직임 벡터는 인터 예측에 사용되는 2차원 벡터이며, 현재 부호화/복호화 대상 영상과 참조 영상 사이의 오프셋을 나타낼 수 있다.
감산기(125)는 입력 블록과 생성된 예측 블록의 차분에 의해 잔차 블록(residual block)을 생성할 수 있다.
변환부(130)는 잔차 블록에 대해 변환(transform)을 수행하여 변환 계수(transform coefficient)를 출력할 수 있다. 그리고 양자화부(140)는 입력된 변환 계수를 양자화 파라미터(quantization parameter, 또는 양자화 매개변수)에 따라 양자화하여 양자화된 계수(quantized coefficient)를 출력할 수 있다.
엔트로피 부호화부(150)는, 양자화부(140)에서 산출된 값들 또는 부호화 과정에서 산출된 부호화 파라미터 값 등을 기초로 엔트로피 부호화를 수행하여 비트스트림(bit stream)을 출력할 수 있다. 엔트로피 부호화가 적용되는 경우, 높은 발생 확률을 갖는 심볼(symbol)에 적은 수의 비트가 할당되고 낮은 발생 확률을 갖는 심볼에 많은 수의 비트가 할당되어 심볼이 표현됨으로써, 부호화 대상 심볼들에 대한 비트열의 크기가 감소될 수 있다. 따라서 엔트로피 부호화를 통해서 영상 부호화의 압축 성능이 높아질 수 있다. 엔트로피 부호화부(150)는 엔트로피 부호화를 위해 지수-골롬(Exponential-Golomb), CAVLC(Context-Adaptive Variable Length Coding), CABAC(Context-Adaptive Binary Arithmetic Coding)과 같은 부호화 방법을 사용할 수 있다.
도 1의 실시예에 따른 영상 부호화 장치(100)는 인터 예측 부호화, 즉 화면 간 예측 부호화를 수행하므로, 현재 부호화된 영상은 참조 영상으로 사용되기 위해 복호화되어 저장될 필요가 있다. 따라서 양자화된 계수는 역양자화부(160)에서 역양자화되고 역변환부(170)에서 역변환된다. 역양자화, 역변환된 계수는 가산기(175)를 통해 예측 블록과 더해지고 복원 블록이 생성된다.
복원 블록은 필터부(180)를 거치고, 필터부(180)는 디블록킹 필터(deblocking filter), SAO(Sample Adaptive Offset), ALF(Adaptive Loop Filter) 중 적어도 하나 이상을 복원 블록 또는 복원 픽처에 적용할 수 있다. 필터부(180)는 적응적 인루프(in-loop) 필터로 불릴 수도 있다. 디블록킹 필터는 블록 간의 경계에 생긴 블록 왜곡을 제거할 수 있다. SAO는 코딩 에러를 보상하기 위해 픽셀값에 적정 오프셋(offset) 값을 더해줄 수 있다. ALF는 복원된 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. 필터부(180)를 거친 복원 블록은 참조 픽처 버퍼(190)에 저장될 수 있다.
도 2는 본 발명이 적용되는 영상 복호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다.
도 2를 참조하면, 영상 복호화 장치(200)는 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인트라 예측부(240), 움직임 보상부(250), 가산기(255), 필터부(260) 및 참조 픽처 버퍼(270)를 포함한다.
영상 복호화 장치(200)는 부호화기에서 출력된 비트스트림을 입력 받아 인트라 모드 또는 인터 모드로 복호화를 수행하고 재구성된 영상, 즉 복원 영상을 출력할 수 있다. 인트라 모드인 경우 스위치가 인트라로 전환되고, 인터 모드인 경우 스위치가 인터로 전환될 수 있다.
영상 복호화 장치(200)는 입력 받은 비트스트림으로부터 복원된 잔차 블록(reconstructed residual block)을 얻고 예측 블록을 생성한 후 복원된 잔차 블록과 예측 블록을 더하여 재구성된 블록, 즉 복원 블록을 생성할 수 있다.
엔트로피 복호화부(210)는, 입력된 비트스트림을 확률 분포에 따라 엔트로피 복호화하여, 양자화된 계수(quantized coefficient) 형태의 심볼을 포함한 심볼들을 생성할 수 있다.
엔트로피 복호화 방법이 적용되는 경우, 높은 발생 확률을 갖는 심볼에 적은 수의 비트가 할당되고 낮은 발생 확률을 갖는 심볼에 많은 수의 비트가 할당되어 심볼이 표현됨으로써, 각 심볼들에 대한 비트열의 크기가 감소될 수 있다.
양자화된 계수는 역양자화부(220)에서 역양자화되고 역변환부(230)에서 역변환되며, 양자화된 계수가 역양자화/역변환 된 결과, 복원된 잔차 블록이 생성될 수 있다.
인트라 모드인 경우, 인트라 예측부(240)는 현재 블록 주변의 이미 복호화된 블록의 픽셀값을 이용하여 공간적 예측을 수행하여 예측 블록을 생성할 수 있다. 인터 모드인 경우, 움직임 보상부(250)는 움직임 벡터 및 참조 픽처 버퍼(270)에 저장되어 있는 참조 영상을 이용하여 움직임 보상을 수행함으로써 예측 블록을 생성할 수 있다.
잔차 블록과 예측 블록은 가산기(255)를 통해 더해지고, 더해진 블록은 필터부(260)를 거칠 수 있다. 필터부(260)는 디블록킹 필터, SAO, ALF 중 적어도 하나 이상을 복원 블록 또는 복원 픽쳐에 적용할 수 있다. 필터부(260)는 재구성된 영상, 즉 복원 영상을 출력할 수 있다. 복원 영상은 참조 픽처 버퍼(270)에 저장되어 인터 예측에 사용될 수 있다.
도 3은 영상을 부호화할 때 영상의 분할 구조를 개략적으로 나타내는 도면이다.
HEVC(High Efficiency Video Coding)에서는 영상을 효율적으로 분할하기 위해 코딩 유닛(Coding Unit; CU)으로 부호화를 수행한다.
도 3을 참조하면, HEVC에서는 영상(300)을 최대 코딩 유닛(Largest Coding Unit; LCU)(이하, LCU라 함) 단위로 순차적으로 분할한 후, LCU 단위로 분할 구조를 결정한다. 분할 구조는 LCU(310) 내에서 영상을 효율적으로 부호화하기 위한 코딩 유닛(이하, CU라 함)의 분포를 의미하며, 이러한 분포는 하나의 CU를 그 가로 크기 및 세로 크기의 절반으로 감소된 4개의 CU로 분할할지 여부에 따라 결정될 수 있다. 분할된 CU는 동일한 방식으로 분할된 CU에 대해서 그 가로 크기 및 세로 크기가 절반씩 감소된 4개의 CU로 재귀적으로 분할될 수 있다.
이때, CU의 분할은 미리 정의된 깊이까지 재귀적으로 분할될 수 있다. 깊이 정보는 CU의 크기를 나타내는 정보로써, 각 CU마다 저장되어 있다. 예컨대, LCU의 깊이는 0이고, SCU(Smallest Coding Unit)의 깊이는 미리 정의된 최대 깊이일 수 있다. 여기서, LCU는 상술한 바와 같이 최대 코딩 유닛 크기를 가지는 코딩 유닛이며, SCU(Smallest Coding Unit)는 최소 코딩 유닛 크기를 가지는 코딩 유닛이다.
LCU(310)로부터 가로 및 세로 크기의 절반으로 분할을 수행할 때마다 CU의 깊이는 1씩 증가한다. 각각의 깊이 별로, 분할을 수행하지 않는 CU의 경우에는 2Nx2N 크기를 가지며, 분할을 수행하는 CU의 경우에는 2Nx2N 크기의 CU에서 NxN 크기를 가지는 4개의 CU로 분할된다. N의 크기는 깊이가 1씩 증가할 때마다 절반으로 감소한다.
도 3을 참조하면, 최소 깊이가 0인 LCU의 크기는 64x64 화소이고, 최대 깊이가 3인 SCU의 크기는 8x8 화소일 수 있다. 이때, 64x64 화소의 CU(LCU)는 깊이 0으로, 32x32 화소의 CU는 깊이 1로, 16x16 화소의 CU는 깊이 2로, 8x8 화소의 CU(SCU)는 깊이 3으로 표현될 수 있다.
또한, 특정 CU를 분할할지에 대한 정보는 CU마다 1비트의 분할 정보를 통해 표현될 수 있다. 이 분할 정보는 SCU를 제외한 모든 CU에 포함될 수 있으며, 예컨대 CU를 분할하지 않을 경우에는 분할 정보에 0을 저장할 수 있고, CU를 분할할 경우에는 분할 정보에 1을 저장할 수 있다.
한편, LCU로부터 분할된 CU는 예측을 위한 기본 단위인 예측 유닛(Prediction Unit; PU 또는 Prediction Block; PB)과 변환을 위한 기본 단위인 변환 유닛(Transform Unit; TU 또는 Transform Block; TB)으로 구성될 수 있다.
도 4는 코딩 유닛(CU)이 포함할 수 있는 예측 유닛(PU)의 형태를 도시한 도면이다.
LCU로부터 분할된 CU 중 더 이상 분할되지 않는 CU는 하나 이상의 예측 유닛으로 분할되며 이 행위 자체 역시 분할(partition)(혹은 파티션)이라고 일컫는다. 예측 유닛(이하, PU라 함)은 예측을 수행하는 기본 단위로써, 스킵(skip) 모드, 인터(inter) 모드, 인트라(intra) 모드 중 어느 하나로 부호화되며, 각 모드에 따라서 다양한 형태로 파티션될 수 있다.
도 4를 참조하면, 스킵 모드의 경우, CU 내에서 파티션 없이, CU와 동일한 크기를 갖는 2Nx2N 모드(410)를 지원할 수 있다.
인터 모드의 경우, CU 내에서 8가지의 파티션된 형태, 예컨대 2Nx2N 모드(410), 2NxN 모드(415), Nx2N 모드(420), NxN 모드(425), 2NxnU 모드(430), 2NxnD 모드(435), nLx2N 모드(440), nRx2N 모드(445)를 지원할 수 있다.
인트라 모드의 경우, CU 내에서 2Nx2N 모드(410), NxN 모드(425)를 지원할 수 있다.
도 5는 코딩 유닛(CU)이 포함할 수 있는 변환 유닛(TU)의 형태를 도시한 도면이다.
변환 유닛(이하, TU라 함)은 CU 내에서 공간 변환과 양자화 과정을 위해 사용되는 기본 단위이다. TU는 정사각형 또는 직사각형 형태를 가질 수 있다. LCU로부터 분할된 CU 중 더 이상 분할되지 않는 CU는 하나 혹은 그 이상의 TU로 분할될 수 있다.
이때, TU의 분할 구조는 쿼드트리(quad-tree) 구조일 수 있다. 예컨대, 도 5에 도시된 바와 같이, 하나의 CU(510)가 쿼드트리 구조에 따라서 한번 혹은 그 이상 분할되어 다양한 크기의 TU들로 구성될 수 있다.
한편, HEVC에서는 H.264/AVC와 같이 화면 내 예측(이하, 인트라 예측) 부호화를 수행하며, 이때 현재 블록의 인트라 예측 모드(혹은 예측 방향성)에 따라 현재 블록의 주변에 위치한 주변 블록을 이용하여 예측 부호화를 수행한다. H.264/AVC는 9가지 방향성을 가지는 예측 모드를 가지는 반면, HEVC는 33 가지의 방향성 예측 모드와 3가지의 비방향성 예측 모드를 포함하는 총 36가지의 예측 모드를 가지고 부호화를 수행한다.
도 6은 인트라 예측 모드의 일예를 도시한 도면이다. 각 인트라 예측 모드에는 서로 다른 모드 번호가 할당될 수 있다.
도 6을 참조하면, 인트라 예측 모드는 총 36개의 예측 모드가 존재하며, 현재 블록의 픽셀 값을 예측하는데 사용되는 참조 픽셀들이 위치한 방향 및/또는 예측 방식에 따라 33가지의 방향성 모드와 3가지의 비방향성 모드를 포함할 수 있다.
3가지의 비방향성 모드에는 평면(Planar; Intra_Planar) 모드, 평균(DC; Intra_DC) 모드, 그리고 복원된 휘도 신호로부터 색차 신호를 예측하는 LM 모드(Intra_FromLuma)가 존재한다. 인트라 예측에서는 이 3가지의 비방향성 모드를 모두 사용할 수도 있고, 이중 일부만 사용할 수도 있다. 예컨대, 평면 모드와 평균 모드만 사용하고 LM 모드를 사용하지 않을 수 있다.
도 6에 도시된 바와 같은 36가지의 인트라 예측 모드에 대한 부호화는 휘도 신호 및 색차 신호에 각각 적용될 수 있다. 예를 들어, 휘도 신호의 경우, 36가지의 인트라 예측 모드 중 LM 모드는 제외하고 부호화될 수 있다. 색차 신호의 경우, 아래 표 1과 같이 3가지 방법으로 인트라 예측 모드를 부호화할 수 있다.
표 1은 색차 신호에 대한 인트라 예측 모드의 부호화 방법을 나타내는 일예이다.
Figure pat00001
표 1을 참조하여 3가지 색차 신호에 대한 인트라 예측 모드의 부호화 방법을 설명한다. 첫 번째 방법은, 휘도 신호의 인트라 예측 모드를 색차 신호의 인트라 예측 모드로 그대로 적용하는 유도된 모드(DM; Derived Mode)를 이용하는 방법이다. 두 번째 방법은, 실제 인트라 예측 모드를 적용하는 부호화 모드(EM; Explict Mode)를 이용하는 방법이다. EM 모드로 부호화되는 색차 신호의 인트라 예측 모드는 평면 모드(Planar), 평균 모드(DC), 수평모드(Hor), 수직 모드(Ver), 수직 방향에서 8번째 위치한 모드(Ver+8 혹은 34 번 모드)를 포함한다. 세 번째 방법은, 복원된 휘도 신호로부터 색차 신호를 예측하는 LM 모드를 이용하는 방법이다. 상술한 세 가지 모드의 부호화 방법 중에서 가장 효율이 좋은 것이 선택될 수 있다.
상술한 바와 같은 인트라 예측 모드를 이용하여 예측이 수행됨으로써 취득된 신호에 대한 예측 영상은 원본 영상과의 차이 값을 가질 수 있다. 이러한 예측 영상과 원본 영상 간의 차이 값을 가지는 차분 영상은 주파수 영역 변환과 양자화를 거친 후 엔트로피 부호화될 수 있다.
이때, 엔트로피 부호화의 효율을 높이고자 2차원 형태의 양자화된 영상의 계수를 1차원 형태로 재정렬할 수 있다. 이러한 양자화 계수의 재정렬 시, 기존의 H.264/AVC 와 같은 비디오 부호화 방법에서는 지그재그 스캔 방법을 사용하였으나, HEVC에서는 상단 우측 방향(Up-right) 스캔을 기본적으로 사용한다.
아울러, 주파수 영역 변환에는 정수 변환, 정수 이산 여현 변환(Discrete Cosine Transform; DCT), 정수 이산 정현 변환(Discrete Sine Transform; DST), 또는 인트라 예측 모드 종속적인 DCT/DST 등이 있을 수 있다.
도 7은 변환 계수에 대한 상단 우측(Up-right) 스캔 방법의 일예를 나타내는 도면이다.
임의의 크기를 가지는 블록에 대한 양자화 계수의 부호화 시, 임의의 크기를 가지는 블록은 4x4 크기의 서브 블록으로 나누어져 부호화를 수행할 수 있다.
도 7을 참조하면, 16x16 크기의 블록은 16개의 4x4 크기의 서브 블록으로 분할되어 부호화될 수 있다. 복호화 과정에서, 각 서브 블록에 변환 계수가 존재하는지 여부는 비트스트림으로부터 파싱된 플래그 정보를 통해 확인할 수 있다. 예컨대, 상기 플래그는 significant_coeff_group_flag(sigGrpFlag)일 수 있다. 만일, significant_coeff_group_flag 값이 1이면, 해당 4x4 서브 블록에 양자화된 변환 계수가 하나라도 존재하는 것을 의미하며, 반대로 significant_coeff_group_flag 값이 0이면, 해당 4x4 서브 블록에 양자화된 변환 계수가 존재하지 않는다는 것을 의미할 수 있다. 도 7에 도시된 4x4 서브 블록에 대한 스캔 방향(scan type 혹은 scan order) 및 significant_coeff_group_flag에 대한 스캔 방향은 모두 기본적으로 상단 우측 스캔 방향을 사용하였다.
도 7에서는 상단 우측 방향의 스캔 방법이 적용되는 것을 설명하였으나, 양자화 계수에 대한 스캔 방법에는 상단 우측 방향(Up-right), 수평 방향(Horizontal), 수직 방향(Vertical) 스캔이 있다. 예컨대, 인터 예측에서는 상단 우측 방향(Up-right) 스캔 방법을 기본적으로 사용할 수 있으며, 인트라 예측에서는 상단 우측 방향(Up-right), 수평 방향(Horizontal), 수직 방향(Vertical) 스캔을 선택적으로 사용할 수 있다.
인트라 예측에서의 스캔 방향은 인트라 예측 모드에 따라 다르게 선택될 수 있으며, 이는 휘도 신호 및 색차 신호에 모두 적용될 수 있다. 아래 표 2는 인트라 예측 모드에 따른 스캔 방향을 결정하는 방법의 일예를 나타낸다.
Figure pat00002
표 2에서, IntraPredModeValue는 인트라 예측 모드를 의미한다. 이때, 휘도 신호의 경우는 IntraPredMode 값에 해당하고, 색차 신호의 경우는 IntraPredModeC 값에 해당한다. log2TrafoSize는 현재 변환 블록의 크기를 log를 이용하여 나타낸 것을 의미한다. 예를 들어, IntraPredModeValue 값이 1이라는 것은 평균 모드(DC; Intra_DC)를 뜻하며, log2TrafoSize-2의 값이 1이라는 것은 8x8 크기의 블록을 의미한다.
또한, 표 2에서, 인트라 예측 모드(IntraPredModeValue)와 현재 변환 블록 크기(log2TrafoSize)에 의해 결정되는 숫자 0, 1, 2는 스캔 방향을 나타낸다. 예컨대, 상단 우측 스캔 방향(Up-right)은 0, 수평 스캔 방향(Horizontal)은 1, 수직 스캔 방향(Vertical)은 2로 나타낼 수 있다.
도 8은 인트라 예측 모드에 따른 스캔 방향을 결정하는 방법의 일 실시예를 나타내는 순서도이다.
도 8의 방법은 상술한 도 1의 부호화 장치 또는 상술한 도 2의 복호화 장치에서 수행될 수 있다. 도 8의 실시예에서는 설명의 편의를 위해 도 8의 방법이 부호화 장치에서 수행되는 것으로 설명하나, 이는 복호화 장치에서도 동일하게 적용될 수 있다.
도 8에서, IntraPredMode는 휘도 신호에 대한 인트라 예측 모드를 의미하며, IntraPredModeC는 색차 신호에 대한 인트라 예측 모드를 의미한다. IntraPredMode(C)는 신호의 성분에 따라 휘도 신호도 될 수 있으며 색차 신호도 될 수 있다.
도 8을 참조하면, 현재 블록이 인트라 예측 모드(intra)가 아니면(S800), 부호화 장치는 잔차 신호에 대한 스캔으로 상단 우측 방향 스캔을 사용하도록 결정한다(S860).
현재 블록이 인트라 예측 모드(intra)이고, 색차 신호에 대한 인트라 예측 모드(IntraPredModeC)가 LM 모드이면(S810), 부호화 장치는 잔차 신호에 대한 스캔으로 상단 우측 방향 스캔을 사용하도록 결정한다(S860).
현재 블록이 인트라 예측 모드(intra)이고, 색차 신호에 대한 인트라 예측 모드(IntraPredModeC)가 LM 모드가 아니면(S810), 부호화 장치는 현재 블록의 인트라 예측 모드(IntraPredMode(C))에 따라 잔차 신호에 대한 스캔 방향을 결정한다.
만일, 현재 블록의 인트라 예측 모드(IntraPredMode(C))의 모드 값이 6 이상이고 14 이하이면(S820), 부호화 장치는 잔차 신호에 대한 스캔으로 수직 방향 스캔을 사용하도록 결정한다(S840).
그렇지 않고(인트라 예측 모드(IntraPredMode(C))의 모드 값이 6 이상이고 14 이하가 아닌 경우), 현재 블록의 인트라 예측 모드(IntraPredMode(C))의 모드 값이 22 이상이고 30 이하이면(S830), 부호화 장치는 잔차 신호에 대한 스캔으로 수평 방향 스캔을 사용하도록 결정한다(S850).
그렇지 않으면, 즉 IntraPredMode(C))의 모드 값이 6 이상이고 14 이하, 그리고 22 이상이고 30 이하가 아닌 경우, 부호화 장치는 잔차 신호에 대한 스캔으로 상단 우측 방향 스캔을 사용하도록 결정한다(S860).
한편, 상술한 바와 같이, 원본 영상과 예측 영상 간의 차분 값(혹은 잔여 신호, residual)은 주파수 영역 변환과 양자화를 거친 후 엔트로피 부호화된다. 이때, 주파수 영역 변환으로 인한 부호화의 효율을 높이고자 정수 변환, 정수 이산 여현 변환(DCT), 정수 이산 정현 변환(DST), 또는 인트라 예측 모드 종속적인 DCT/DST 등을 블록의 크기에 따라 선택적, 적응적으로 적용하고 있다.
또한, 문서 영상이나 혹은 파워포인트의 프리젠테이션 영상과 같은 스크린 컨텐츠(screen contents)에서 부호화 효율을 높이기 위해서 변환 스킵(Transform SKIP) 알고리즘을 적용할 수 있다. 변환 스킵 알고리즘을 적용할 경우, 원본 영상과 예측 영상 간의 차분 값(혹은 잔여 신호, residual)은 주파수 변환 과정 없이 바로 양자화된 다음 엔트로피 부호화된다. 따라서, 이러한 변환 스킵 알고리즘이 적용된 블록에는 주파수 변환 과정을 건너뛰게 된다.
도 9는 잔여 신호(잔여 영상)에 대한 주파수 변환 방식을 선택하는 방법의 일예를 나타내는 순서도이다.
도 9의 방법은 상술한 도 1의 부호화 장치 또는 상술한 도 2의 복호화 장치에서 수행될 수 있다. 도 9의 실시예에서는 설명의 편의를 위해 도 9의 방법이 부호화 장치에서 수행되는 것으로 설명하나, 이는 복호화 장치에서도 동일하게 적용될 수 있다.
도 9를 참조하면, 현재 블록이 인트라 예측 모드(intra)로 부호화되었고 그리고 휘도 신호(luma)의 블록이 아니라면(S900), 부호화 장치는 현재 블록의 휘도 신호 및 색차 신호의 잔여 영상에 대한 주파수 변환 방식으로 정수 변환 혹은 DCT를 적용한다(S990).
그렇지 않다면(현재 블록이 인트라 예측 모드로 부호화되었고 그리고 휘도 신호의 블록이라면)(S900), 부호화 장치는 현재 블록의 휘도 신호에 대한 인트라 예측 모드(IntraPredMode)를 획득한다(S910).
부호화 장치는 현재 블록이 4x4 크기(iWidth == 4)의 블록인지를 확인한다(S920).
만일, 현재 블록이 4x4 크기(iWidth == 4)의 블록이 아니라면, 부호화 장치는 현재 블록의 휘도 신호 및 색차 신호의 잔여 영상에 대한 주파수 변환 방식으로 정수 변환 혹은 DCT을 적용한다(S990).
그렇지 않고 현재 블록이 4x4 크기(iWidth == 4)의 블록이라면, 부호화 장치는 현재 블록의 인트라 예측 모드를 검사한다.
만일, 현재 블록의 인트라 예측 모드의 모드 값이 2 이상이고 10 이하이면(S930), 부호화 장치는 현재 블록의 휘도 신호에 대한 주파수 변환 방식으로 수평방향은 DST을 적용하고 수직방향은 DCT을 적용한다(S960). 현재 블록의 색차 신호에 대한 주파수 변환 방식은 수평 및 수직 방향 모두에 DCT를 적용할 수 있다.
그렇지 않고 만일 현재 블록의 인트라 예측 모드의 모드 값이 0이거나 혹은 11 이상이고 25 이하이면(S940), 부호화 장치는 현재 블록의 휘도 신호에 대한 주파수 변환 방식으로 수평 및 수직 방향 모두에 DST을 적용한다(S970). 현재 블록의 색차 신호에 대한 주파수 변환 방식은 수평 및 수직 방향 모두에 DCT를 적용할 수 있다.
그렇지 않고 만일 현재 블록의 인트라 예측 모드의 모드 값이 26 이상이고 34 이하이면(S950), 부호화 장치는 현재 블록의 휘도 신호에 대한 주파수 변환 방식으로 수평 방향은 DCT을 적용하고 수직 방향은 DST을 적용한다(S980). 현재 블록의 색차 신호에 대한 주파수 변환 방식은 수평 및 수직 방향 모두에 DCT를 적용할 수 있다.
그렇지 않다면, 부호화 장치는 현재 블록의 휘도 신호 및 색차 신호의 잔여 영상에 대한 주파수 변환 방식으로 수평 및 수직 방향 모두에 DCT을 적용한다(S990).
상술한 도 9에서, iWidth는 변환 블록의 크기를 나타내는 지시자이며, 각 변환 블록의 크기에 따른 iWidth 값은 다음과 같이 할당될 수 있다.
예를 들어, 변환 블록의 크기가 64x64이면 iWidth는 64, 변환 블록의 크기가 32x32이면 iWidth는 32, 변환 블록의 크기가 16x16이면 iWidth는 16, 변환 블록의 크기가 8x8이면 iWidth는 8, 변환 블록의 크기가 4x4이면 iWidth는 4, 변환 블록의 크기가 2x2이면 iWidth는 2일 수 있다.
상술한 도 9의 내용과 관련하여, 스케일된 변환 계수를 위한 변환 과정(Transformation process for scaled transform coefficients)은 다음과 같다.
여기서, 입력은 다음과 같다.
- 현재 변환 블록의 너비 Width; nW
- 현재 변환 블록의 높이 Height; nH
- 요소(element) dij를 가진 스케일된 변환 계수의 배열; (nWxnH) array d
- 현재 블록에 대한 변환 스킵 적용 여부 정보
- 현재 블록의 휘도 신호 및 색차 신호에 대한 인덱스; cIdx
만일 cIdx 가 ‘0’ 이면 휘도 신호를 의미하고, cIdx가 ‘1’ 이거나 혹은 cIdx가 ‘2’이면 색차 신호를 의미한다. 또한 cIdx 가 ‘1’이면 색차 신호에서 Cb를 의미하고, cIdx 가 ‘2’이면 색차 신호에서 Cr을 의미한다.
여기서, 출력은 다음과 같다.
- 스케일된 변환 계수를 역변환하여 구해진 잔여 신호에 대한 배열; (nWxnH) array r
현재 블록에 대한 부호화 모드(PredMode)가 화면 내 예측 모드(Intra)이고, Log2(nW*nH) 값이 ‘4’와 같고 cIdx 값이 ‘0’이면, 휘도 신호의 화면 내 예측 모드에 따라 변수 horizTrType과 vertTrType은 아래 표 3를 통해 구해진다. 만일 그렇지 않다면, 변수 horizTrType과 vertTrType은 ‘0’으로 설정한다.
Figure pat00003
현재 블록의 잔여 영상은 아래와 같은 순서로 수행된다.
먼저, 만일 현재 블록에 대한 변환 스킵이 적용되었을 경우에는 다음을 적용한다.
1. 만일 cIdx가 ‘0’이라면 shift = 13 - BitDepthY 이고, 그렇지 않다면 shift = 13 - BitDepthC 이다.
2. 잔여 신호에 대한 배열 rij (i=0..(nW)-1, j=0..(nH)-1)는 다음과 같이 설정한다. 만일 shift가 ‘0’보다 크다면, rij = ( dij + (1 << ( shift - 1) ) ) >> shift 이고, 그렇지 않다면, rij = ( dij << ( -shift ) 이다.
만일 현재 블록에 대한 변환 스킵이 적용되지 않았을 경우에는 다음을 적용한다.
변수 horizTrType과 vertTrType 값을 가지고 스케일된 변환 계수에 대한 역변환 과정을 수행한다. 먼저 현재 블록의 크기(nW, nH)와 스케일된 변환 계수 배열(nWxnH array d), 변수 horizTrType을 입력 받아 수평 방향으로 1차원 역변환을 수행하여 배열(nWxnH array e)를 출력한다.
다음으로 배열(nWxnH array e)을 입력 받아 배열(nWxnH array g)를 다음 수학식 1과 같이 유도한다.
Figure pat00004
다음으로 현재 블록의 크기(nW, nH)와 배열(nWxnH array g), 변수 vertTrType을 입력 받아 수직 방향으로 1차원 역변환을 수행한다.
다음으로 cIdx에 따라 잔여 신호에 대한 배열 (nWxnH) array r을 다음 수학식 2와 같이 설정한다.
Figure pat00005
여기서, shift는 cIdx가 ‘0’일때는 shift = 20 - BitDepthY 이고 그렇지 않으며 shift = 20 - BitDepthC 값을 가지며, BitDepth는 현재 영상에 대한 샘플의 비트수(예를 들어, 8 비트)를 의미한다.
한편, 상술한 바와 같이, 변환 스킵 알고리즘이 적용된 블록(이하, 변환 스킵 블록)은 주파수 변환 과정을 수행하지 않는다. 따라서, 기존의 주파수 변환 과정을 수행한 블록과 변환 스킵 블록은 서로 다른 변환 계수 특성을 가지게 된다. 즉, 기존의 주파수 변환 과정을 수행한 블록에 적용하였던 변환 계수 스캔 방법을 변환 스킵 블록에 적용할 경우 부호화 효율을 감소시킬 수 있다. 따라서, 본 발명에서는 변환 스킵 블록에 적용 가능한 계수 스캔 방법을 제공한다.
[ 실시예1 ] 모든 변환 스킵 블록에 대하여 스캔 방향을 통일하는 방법 및 장치
도 10은 본 발명의 일 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 10의 방법은 상술한 도 1의 부호화 장치 또는 상술한 도 2의 복호화 장치에서 수행될 수 있다. 도 10의 실시예에서는 설명의 편의를 위해 도 10의 방법이 부호화 장치에서 수행되는 것으로 설명하나, 이는 복호화 장치에서도 동일하게 적용될 수 있다.
도 10을 참조하면, 현재 블록의 잔여 신호(혹은 변환 계수)에 대한 스캔 방향은 현재 잔여 신호가 변환 스킵 알고리즘이 적용된 것인지 여부에 따라 결정될 수 있다.
현재 블록의 잔여 신호(혹은 변환 계수)가 변환 스킵 블록일 경우(S1000), 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향(Scan Type)을 수평 방향(Horizontal) 스캔으로 결정한다(S1010).
그렇지 않다면, 즉 현재 블록의 잔여 신호가 변환 스킵 블록이 아닐 경우(S1000), 부호화 장치는 현재 블록의 인트라 예측 모드를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정한다(S1020). 예컨대, 현재 블록의 인트라 예측 모드를 기반으로 상단 우측 방향(Up-right), 수평 방향(Horizontal), 및 수직 방향(Vertical) 중 어느 하나로 유도될 수 있으며, 하나의 예시로 상술한 도 8의 방법이 적용될 수 있다.
상술한 도 10의 실시예에서는, 현재 블록이 변환 스킵 블록일 경우, 현재 블록의 잔여 신호에 대한 스캔 방향을 수평 방향 스캔으로 결정되는 것으로 설명하였으나, 이는 하나의 예시일 뿐이며 본 발명이 이에 한정되는 것은 아니다. 예컨대, 현재 블록이 변환 스킵일 경우, 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향 스캔 혹은 수직 방향 스캔으로 결정할 수도 있다.
도 11은 본 발명의 다른 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 11의 방법은 상술한 도 1의 부호화 장치 또는 상술한 도 2의 복호화 장치에서 수행될 수 있다. 도 11의 실시예에서는 설명의 편의를 위해 도 11의 방법이 부호화 장치에서 수행되는 것으로 설명하나, 이는 복호화 장치에서도 동일하게 적용될 수 있다.
도 11을 참조하면, 부호화 장치는 현재 블록에 잔여 신호(혹은 변환 계수)가 존재하는지 여부를 나타내는 정보를 파싱한다(S1100).
예를 들어, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보는 ‘cbf’일 수 있다. 만일 현재 블록에 잔여 신호가 존재하는 경우, 즉 현재 블록에 0이 아닌 하나 혹은 그 이상의 변환 계수를 포함하고 있을 경우 ‘cbf’값은 1일 수 있다. 그렇지 않은 경우(현재 블록에 잔여 신호가 존재하지 않는 경우), ‘cbf’값은 0일 수 있다.
만일, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보가 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 예컨대 cbf 값이 1인 경우(S1105), 다음 과정이 진행된다. 그렇지 않고, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보가 현재 블록에 잔여 신호가 존재하지 않는 것으로 지시하는 경우, 예컨대 cbf 값이 0인 경우(S1105), 도 11의 스캔 방향 유도 과정은 종료된다(S1110).
만일, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보가 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우(예컨대, cbf == 1), 부호화 장치는 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보를 파싱한다(S1115). 예를 들어, 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보는 ‘cu_qp_delta’ 변수일 수 있다.
여기서, 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보(예컨대, cu_qp_delta)는 현재 블록의 잔여 신호에 대한 스캔 방향을 유도하는 것과는 큰 상관성은 없다. 따라서, 단계 S1115는 생략하고 다음 단계 S1120을 수행할 수도 있다.
부호화 장치는 현재 블록의 크기에 대한 정보를 설정한다(S1120).
예를 들어, 현재 블록의 크기에 대한 정보는 ‘log2TrafoSize’변수를 이용하여 설정할 수 있다. log2TrafoSize는 현재 블록의 너비를 나타내는 ‘log2TrafoWidth’와 현재 블록의 높이를 나타내는 ‘log2TrafoHeight’의 합을 오른쪽 쉬프트(shift) 연산한 결과 값일 수 있다. 여기서, log2TrafoSize는 휘도 신호에 대한 TU 블록의 크기를 의미한다.
현재 블록의 크기를 나타내는 log2TrafoWidth와 log2TrafoHeight 중 하나라도 ‘1’이면(즉, 현재 블록의 너비와 높이가 2의 크기)(S1125), 부호화 장치는 현재 블록의 log2TrafoWidth와 log2TrafoHeight를 모두 2로 설정한다(S1130). 즉, 현재 블록의 너비와 높이가 4의 크기로 설정된다.
현재 블록을 포함하는 현재 픽처에 전체적으로 변환 스킵 알고리즘이 적용되었고(transform_skip_enabled_flag == 1), 그리고 변환 및 양자화를 수행하지 않는 모드가 아니고(!cu_tranquant_bypass_flag), 그리고 현재 블록의 부호화 모드가 인트라 예측 모드로 부호화되었고(PredMode == MODE_INTRA), 그리고 현재 블록의 log2TrafoWidth와 log2TrafoHeight가 모두 2일 경우(S1135), 부호화 장치는 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보, 예컨대 transform_skip_flag를 파싱한다(S1140).
만일, 현재 블록의 부호화 모드가 인트라 예측 모드로 부호화되었고(PredMode == MODE_INTRA), 그리고 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보가 현재 블록에 대해 변환을 적용하지 않음을 나타내는 경우, 예컨대 transform_skip_flag가 0일 경우(현재 블록이 변환 스킵 블록이 아닌 경우), 부호화 장치는 도 8에서 상술한 바와 같이 현재 블록의 인트라 예측 모드를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정할 수 있다(S1150~S1160).
예를 들어, 만일 현재 블록의 색 성분(colour component)을 지시하는 지시자인 cIdx의 값이 0일 경우(S1150), 즉 현재 블록이 휘도 신호일 경우, 현재 블록의 휘도 신호에 대한 인트라 예측 모드(IntraPredMode)를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정할 수 있다(S1155). 그렇지 않고, 현재 블록의 cIdx의 값이 0이 아닐 경우(S1150), 즉 현재 블록이 색차 신호일 경우, 현재 블록의 색차 신호에 대한 인트라 예측 모드(IntraPredModeC)를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정할 수 있다(S1160).
여기서, scanIdx는 현재 블록의 잔여 신호에 대한 스캔 방향을 지시하는 인덱스 값일 수 있다. 예컨대, scanIdx의 값이 0이면 상단 우측 방향, scanIdx의 값이 1이면 수평 방향, scanIdx의 값이 2이면 수직 방향을 지시할 수 있다. ScanType은 상술한 표 2의 인트라 예측 모드와 현재 블록의 크기에 의해 결정되는 스캔 방향을 나타내는 테이블일 수 있다. IntraPredMode는 휘도 신호에 대한 인트라 예측 모드를 의미하고, IntraPredModeC는 색차 신호에 대한 인트라 예측 모드를 의미한다.
단계 S1145에서, 만일 현재 블록의 부호화 모드가 인트라 예측 모드로 부호화되었고(PredMode == MODE_INTRA), 그리고 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보가 현재 블록에 대해 변환을 적용하는 것으로 나타내는 경우, 예컨대 transform_skip_flag가 1일 경우(현재 블록이 변환 스킵 블록인 경우), 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향, 수평 방향 및 수직 방향 중 어느 하나로 결정한다(S1165). 예컨대, scanIdx의 값을 0으로 설정하여, 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향으로 결정할 수 있다.
본 실시예에서는, 현재 블록이 변환 스킵 블록인 경우, 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향으로 설정하였으나, 이는 하나의 예시일 뿐이며 본 발명이 이에 한정되는 것은 아니다. 예컨대, 현재 블록이 변환 스킵일 경우, 현재 블록의 잔여 신호에 대한 스캔 방향을 수평 방향 스캔(scanIdx = 1) 혹은 수직 방향 스캔(scanIdx = 2)으로 설정할 수도 있다.
부호화 장치는 상기 결정된 스캔 방향을 이용하여 현재 블록에 대한 계수를 파싱한다(S1170).
도 12는 본 발명이 적용될 수 있는 스캔 방향의 일예를 나타내는 도면이다.
도 12의 (a)는 4x4 크기 블록에 대해 대각 스캔(혹은 상단 우측 방향 스캔)을 적용하는 일예를 도시하였다. 도 12의 (a)와 같은 순서로 4x4 크기 블록 내 잔여 신호(혹은 변환 계수)를 스캔할 수 있다.
물론, 도 12의 (a)에 도시된 대각 스캔 방향은 하나의 예시일 뿐이며, 본 발명이 이에 한정되는 것은 아니다. 예컨대, 도 12의 (a)에 도시된 4x4 크기 블록을 오른쪽으로 180도 회전한 경우의 대각 스캔 방향을 적용하여 잔여 신호를 스캔할 수도 있다.
도 12의 (b)는 4x4 크기 블록에 대해 수직 스캔을 적용하는 일예를 도시하였다. 도 12의 (b)와 같은 순서로 4x4 크기 블록 내 잔여 신호(혹은 변환 계수)를 스캔할 수 있다.
물론, 도 12의 (b)에 도시된 수직 스캔 방향은 하나의 예시일 뿐이며, 본 발명이 이에 한정되는 것은 아니다. 예컨대, 도 12의 (b)에 도시된 4x4 크기 블록을 오른쪽으로 180도 회전한 경우의 수직 스캔 방향을 적용하여 잔여 신호를 스캔할 수도 있다.
도 12의 (c)는 4x4 크기 블록에 대해 수평 스캔을 적용하는 일예를 도시하였다. 도 12의 (c)와 같은 순서로 4x4 크기 블록 내 잔여 신호(혹은 변환 계수)를 스캔할 수 있다.
물론, 도 12의 (c)에 도시된 수직 스캔 방향은 하나의 예시일 뿐이며, 본 발명이 이에 한정되는 것은 아니다. 예컨대, 도 12의 (c)에 도시된 4x4 크기 블록을 오른쪽으로 180도 회전한 경우의 수평 스캔 방향을 적용하여 잔여 신호를 스캔할 수도 있다.
상술한 도 10 및 도 11의 예를 TU(변환 유닛) 및 잔여 신호에 대한 부호화 문법(Syntax)에 반영하면 표 4 및 표 5와 같이 나타낼 수 있다.
표 4는 본 발명의 일 실시예에 따른 TU 부호화 문법을 나타낸 것이다.
Figure pat00006
표 4를 참조하면, transform_unit은 하나의 TU 블록의 계수에 대한 비트스트림을 나타낸다. 여기서 휘도 신호에 잔여 신호가 있는지 여부에 대한 정보(cbf_luma)와 색차 신호에 잔여 신호가 있는지 여부에 대한 정보(cbf_cb, cbf_cr)에 따라 TU 블록에 대한 잔여 신호의 부호화 정보(residual coding) 파싱 여부를 결정한다.
표 5는 본 발명의 일 실시예에 따른 잔여 신호 부호화 문법을 나타낸 것이다.
Figure pat00007
표 5를 참조하면, residual_coding은 하나의 TU 블록의 계수에 대한 비트스트림을 의미한다. 여기서, 하나의 TU 블록은 휘도 신호 혹은 색차 신호일 수 있다.
log2TrafoWidth는 현재 블록의 너비를 의미하고, log2TrafoHeight는 현재 블록의 높이를 의미한다. log2TrafoSize는 입력된 log2TrafoWidth와 log2TrafoHeight의 합을 오른쪽 쉬프트 연산한 결과를 의미하며, 휘도 신호에 대한 TU 블록 크기를 의미한다.
PredMode는 현재 블록에 대한 부호화 모드를 의미하며, 화면 내 부호화의 경우 인트라(intra)이며, 화면 간 부호화의 경우 인터(inter)이다.
scanIdx는 현재 TU 블록의 휘도 신호에 대한 스캔 방향을 지시하는 인덱스일 수 있다. 예컨대, scanIdx의 값이 0이면 상단 우측 방향, scanIdx의 값이 1이면 수평 방향, scanIdx의 값이 2이면 수직 방향을 지시할 수 있다.
ScanType은 상술한 표 2의 인트라 예측 모드와 현재 블록의 크기에 의해 결정되는 스캔 방향을 나타내는 테이블일 수 있다. 여기서 “ScanType=DIAG” 또는 “Up-right”로 되어 있는 것은 하나의 일 예이다.
IntraPredMode는 휘도 신호에 대한 인트라 예측 모드를 의미하고, IntraPredModeC는 색차 신호에 대한 인트라 예측 모드를 의미한다.
상술한 도 10 및 도 11의 실시예에서는 모든 변환 스킵 블록에 대하여 스캔 방향을 통일하는 방법에 대하여 설명하였다. 다시 말해, 변환 스킵 블록일 경우에는 동일한 스캔 방향을 적용하도록 하였다. 이하, 본 발명의 실시예에서는 변환 스킵 블록일 경우 스캔 방향을 재설정하는 방법에 대하여 설명한다.
[ 실시예2 ] 변환 스킵 블록에 대하여 스캔 방향을 유도하는 방법 및 장치
도 13은 본 발명의 일 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 13의 방법은 상술한 도 1의 부호화 장치 또는 상술한 도 2의 복호화 장치에서 수행될 수 있다. 도 13의 실시예에서는 설명의 편의를 위해 도 13의 방법이 부호화 장치에서 수행되는 것으로 설명하나, 이는 복호화 장치에서도 동일하게 적용될 수 있다.
도 13을 참조하면, 부호화 장치는 현재 블록의 인트라 예측 모드를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향(scan type)을 결정한다(S1300).
예컨대, 현재 블록의 인트라 예측 모드를 기반으로 상단 우측 방향(Up-right), 수평 방향(Horizontal), 및 수직 방향(Vertical) 중 어느 하나로 유도될 수 있으며, 하나의 예시로 상술한 도 8의 방법이 적용될 수 있다.
현재 블록의 잔여 신호(혹은 변환 계수)가 변환 스킵 블록일 경우(S1310), 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향을 재설정한다(S1330~S1370). 그렇지 않다면 도 13의 스캔 방향 유도 과정을 종료한다(S1320). 이때, 현재 블록의 잔여 신호에 대한 스캔 방향은 단계 S1300에서 결정된 스캔 방향이 적용된다.
만일 현재 블록의 잔여 신호가 변환 스킵 블록이고, 현재 블록의 인트라 예측 모드를 기반으로 결정된 스캔 방향이 수직 방향일 경우(S1330), 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향을 수평 방향으로 재설정한다(S1350).
그렇지 않고, 만일 현재 블록의 잔여 신호가 변환 스킵 블록이고, 현재 블록의 인트라 예측 모드를 기반으로 결정된 스캔 방향이 수평 방향일 경우(S1340), 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향을 수직 방향으로 재설정한다(S1360).
그렇지 않다면, 즉 현재 블록의 잔여 신호가 변환 스킵 블록이고, 현재 블록의 인트라 예측 모드를 기반으로 결정된 스캔 방향이 수직 및 수평 방향이 아닌 경우(S1340), 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향으로 재설정한다(S1370).
상술한 도 13의 실시예에 따른 변환 스킵 블록인지에 따라 스캔 방향을 재설정하는 방법은 다양하게 적용될 수 있다. 예를 들어, 도 13의 실시예에 따라 유도된 휘도 신호의 스캔 방향을 색차 신호에 동일하게 적용할 수 있다. 즉, 휘도 신호의 스캔 방향과 색차 신호의 스캔 방향이 동일하게 된다. 반대로 도 13의 실시예를 휘도 신호 및 색차 신호 각각에 대해 적용할 수 있다. 또는, 주변 블록의 스캔 방향을 통해 현재 블록의 스캔 방향을 결정할 수도 있다. 또는, 변환 스킵 블록일 경우에는 기존의 스캔 방향(예컨대, 수직 방향, 수평 방향, 상단 우측 방향)이 아닌 또 다른 종류의 스캔 방향을 사용할 수도 있다.
도 14는 본 발명의 다른 실시예에 따른 잔여 신호(혹은 변환 계수)에 대한 스캔 방향을 유도하는 방법을 나타내는 순서도이다.
도 14의 방법은 상술한 도 1의 부호화 장치 또는 상술한 도 2의 복호화 장치에서 수행될 수 있다. 도 14의 실시예에서는 설명의 편의를 위해 도 14의 방법이 부호화 장치에서 수행되는 것으로 설명하나, 이는 복호화 장치에서도 동일하게 적용될 수 있다.
도 14를 참조하면, 부호화 장치는 현재 블록에 잔여 신호(혹은 변환 계수)가 존재하는지 여부를 나타내는 정보를 파싱한다(S1400).
예를 들어, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보는 ‘cbf’일 수 있다. 만일 현재 블록에 잔여 신호가 존재하는 경우, 즉 현재 블록에 0이 아닌 하나 혹은 그 이상의 변환 계수를 포함하고 있을 경우 ‘cbf’값은 1일 수 있다. 그렇지 않은 경우(현재 블록에 잔여 신호가 존재하지 않는 경우), ‘cbf’값은 0일 수 있다.
만일, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보가 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 예컨대 cbf 값이 1인 경우(S1405), 다음 과정이 진행된다. 그렇지 않고, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보가 현재 블록에 잔여 신호가 존재하지 않는 것으로 지시하는 경우, 예컨대 cbf 값이 0인 경우(S1405), 현재 블록에 대한 다음 과정은 종료된다(S1410).
만일, 현재 블록에 잔여 신호가 존재하는지 여부를 나타내는 정보가 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 예컨대 cbf 값이 1인 경우, 부호화 장치는 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보를 파싱한다(S1415). 예를 들어, 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보는 ‘cu_qp_delta’ 변수일 수 있다.
여기서, 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보(예컨대, cu_qp_delta)는 현재 블록의 잔여 신호에 대한 스캔 방향을 유도하는 것과는 큰 상관성은 없다. 따라서, 단계 S1415는 생략하고 다음 단계 S1420을 수행할 수도 있다.
부호화 장치는 현재 블록의 크기에 대한 정보를 설정한다(S1420).
예를 들어, 현재 블록의 크기에 대한 정보는 ‘log2TrafoSize’변수를 이용하여 설정할 수 있다. log2TrafoSize는 현재 블록의 너비를 나타내는 ‘log2TrafoWidth’와 현재 블록의 높이를 나타내는 ‘log2TrafoHeight’의 합을 오른쪽 쉬프트(shift) 연산한 결과 값일 수 있다. 여기서, log2TrafoSize는 휘도 신호에 대한 TU 블록의 크기를 의미한다.
현재 블록의 크기를 나타내는 log2TrafoWidth와 log2TrafoHeight 중 하나라도 ‘1’이면(즉, 현재 블록의 너비와 높이가 2의 크기)(S1425), 부호화 장치는 현재 블록의 log2TrafoWidth와 log2TrafoHeight를 모두 2로 설정한다(S1430). 즉, 현재 블록의 너비와 높이가 4의 크기로 설정된다.
현재 블록을 포함하는 현재 픽처에 전체적으로 변환 스킵 알고리즘이 적용되었고(transform_skip_enabled_flag == 1), 그리고 변환 및 양자화를 수행하지 않는 모드가 아니고(!cu_tranquant_bypass_flag), 그리고 현재 블록의 부호화 모드가 인트라 예측 모드로 부호화되었고(PredMode == MODE_INTRA), 그리고 현재 블록의 log2TrafoWidth와 log2TrafoHeight가 모두 2일 경우(S1435), 부호화 장치는 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보, 예컨대 transform_skip_flag를 파싱한다(S1440).
만일, 현재 블록의 부호화 모드가 인트라 예측 모드로 부호화된 경우(PredMode == MODE_INTRA)(S1445), 부호화 장치는 도 8에서 상술한 바와 같이 현재 블록의 인트라 예측 모드를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정할 수 있다(S1450~S1460).
예를 들어, 만일 현재 블록의 색 성분(colour component)을 지시하는 지시자인 cIdx의 값이 0일 경우(S1450), 즉 현재 블록이 휘도 신호일 경우, 현재 블록의 휘도 신호에 대한 인트라 예측 모드(IntraPredMode)를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정할 수 있다(S1455). 그렇지 않고, 현재 블록의 cIdx의 값이 0이 아닐 경우(S1450), 즉 현재 블록이 색차 신호일 경우, 현재 블록의 색차 신호에 대한 인트라 예측 모드(IntraPredModeC)를 기반으로 현재 블록의 잔여 신호에 대한 스캔 방향을 결정할 수 있다(S1460).
여기서, scanIdx는 현재 블록의 잔여 신호에 대한 스캔 방향을 지시하는 인덱스 값일 수 있다. 예컨대, scanIdx의 값이 0이면 상단 우측 방향, scanIdx의 값이 1이면 수평 방향, scanIdx의 값이 2이면 수직 방향을 지시할 수 있다. ScanType은 상술한 표 2의 인트라 예측 모드와 현재 블록의 크기에 의해 결정되는 스캔 방향을 나타내는 테이블일 수 있다. IntraPredMode는 휘도 신호에 대한 인트라 예측 모드를 의미하고, IntraPredModeC는 색차 신호에 대한 인트라 예측 모드를 의미한다.
단계 S1445에서, 만일 현재 블록의 부호화 모드가 인트라 예측 모드로 부호화되지 않은 경우, 부호화 장치는 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향, 수평 방향 및 수직 방향 중 어느 하나로 결정한다(S1465). 예컨대, scanIdx의 값을 0으로 설정하여, 현재 블록의 잔여 신호에 대한 스캔 방향을 상단 우측 방향으로 결정할 수 있다.
부호화 장치는 현재 블록이 변환 스킵 블록인지 여부에 따라 상기 결정된 스캔 방향을 재설정한다(S1470).
예컨대, 상술한 도 13의 방법을 적용하여 상기 결정된 스캔 방향을 재설정할 수 있다. 만일, 현재 블록이 변환 스킵 블록일 경우(상기 파싱된 transform_skip_flag가 1일 경우), 부호화 장치는 상기 결정된 스캔 방향이 수직 방향이면 수평 방향으로 재설정하고, 상기 결정된 스캔 방향이 수평 방향이면 수직 방향으로 재설정할 수 있다.
부호화 장치는 상기 재설정된 스캔 방향을 이용하여 현재 블록에 대한 계수를 파싱한다(S1475).
상술한 도 13 및 도 14의 예를 TU(변환 유닛) 및 잔여 신호에 대한 부호화 문법(Syntax)에 반영하면 표 6 및 표 7과 같이 나타낼 수 있다.
표 6은 본 발명의 일 실시예에 따른 TU 부호화 문법을 나타낸 것이다.
Figure pat00008
표 6을 참조하면, transform_unit은 하나의 TU 블록의 계수에 대한 비트스트림을 나타낸다. 여기서 휘도 신호에 잔여 신호가 있는지 여부에 대한 정보(cbf_luma)와 색차 신호에 잔여 신호가 있는지 여부에 대한 정보(cbf_cb, cbf_cr)에 따라 TU 블록에 대한 잔여 신호의 부호화 정보(residual coding) 파싱 여부를 결정한다.
표 7은 본 발명의 일 실시예에 따른 잔여 신호 부호화 문법을 나타낸 것이다.
Figure pat00009
표 7을 참조하면, residual_coding은 하나의 TU 블록의 계수에 대한 비트스트림을 의미한다. 여기서, 하나의 TU 블록은 휘도 신호 혹은 색차 신호일 수 있다.
log2TrafoWidth는 현재 블록의 너비를 의미하고, log2TrafoHeight는 현재 블록의 높이를 의미한다. log2TrafoSize는 입력된 log2TrafoWidth와 log2TrafoHeight의 합을 오른쪽 쉬프트 연산한 결과를 의미하며, 휘도 신호에 대한 TU 블록 크기를 의미한다.
PredMode는 현재 블록에 대한 부호화 모드를 의미하며, 화면 내 부호화의 경우 인트라(intra)이며, 화면 간 부호화의 경우 인터(inter)이다.
scanIdx는 현재 TU 블록의 휘도 신호에 대한 스캔 방향을 지시하는 인덱스일 수 있다. 예컨대, scanIdx의 값이 0이면 상단 우측 방향, scanIdx의 값이 1이면 수평 방향, scanIdx의 값이 2이면 수직 방향을 지시할 수 있다.
ScanType은 상술한 표 2의 인트라 예측 모드와 현재 블록의 크기에 의해 결정되는 스캔 방향을 나타내는 테이블일 수 있다. 여기서 “ScanType=DIAG” 또는 “Up-right”로 되어 있는 것은 하나의 일 예이다.
IntraPredMode는 휘도 신호에 대한 인트라 예측 모드를 의미하고, IntraPredModeC는 색차 신호에 대한 인트라 예측 모드를 의미한다.
한편, 상술한 실시예들은 블록 크기 혹은 CU 깊이 혹은 TU 깊이 등에 따라 적용 범위를 달리할 수 있다. 이렇게 적용 범위를 결정하는 변수(예컨대, 블록의 크기 혹은 깊이 정보)는, 부호화기 및 복호화기가 미리 정해진 값을 사용하도록 설정할 수도 있고, 프로파일 또는 레벨에 따라 정해진 값을 사용하도록 할 수도 있고, 부호화기가 변수 값을 비트스트림에 기재하면 복호화기가 비트스트림으로부터 이 값을 구하여 사용할 수도 있다.
CU 깊이에 따라 적용 범위를 달리할 때는 표 8에 예시한 바와 같이, 다음 세가지 방법이 적용될 수 있다. 방법 A는 주어진 깊이 이상의 깊이에만 적용하는 방식, 방법 B는 주어진 깊이 이하에만 적용하는 방식, 방법 C는 주어진 깊이에만 적용하는 방식이다.
표 8은 CU(혹은 TU) 깊이에 따라 본 발명의 방법들을 적용하는 범위를 결정하는 방법의 일예를 나타낸 것이다. 표 8에서 O는 CU(혹은 TU)의 해당 깊이에 해당 방법을 적용하는 것을 의미하며, X는 CU(혹은 TU)의 해당 깊이에 해당 방법을 적용하지 않는 것을 의미한다.
Figure pat00010
표 8을 참조하면, CU(혹은 TU) 깊이가 2인 경우, 본 발명의 실시예들에 대해 방법 A, 방법 B, 방법 C를 모두 적용할 수 있다.
CU(혹은 TU)의 모든 깊이에 대하여 본 발명의 실시예들을 적용하지 않는 경우, 임의의 지시자(예를 들어, flag)를 사용하여 나타낼 수도 있고, CU 깊이의 최대값보다 하나 더 큰 값을 적용 범위를 나타내는 CU 깊이 값으로 시그널링 함으로써 표현할 수도 있다.
또한, 상술한 CU(혹은 TU) 깊이에 따라 본 발명의 방법들을 적용하는 범위를 결정하는 방법은, 상술한 본 발명의 실시예1(도 10 및 도 11), 상술한 본 발명의 실시예2(도 13 및 도 14)에 각각 혹은 조합하여 적용할 수 있다.
또한, 상술한 CU(혹은 TU) 깊이에 따라 본 발명의 방법들을 적용하는 범위를 결정하는 방법은, 휘도 신호와 색차 신호 간의 해상도가 다른 경우에도 적용할 수 있다. 이하, 도 15 및 도 16을 참조하여 휘도 신호와 색차 신호 간의 해상도가 다른 경우 주파수 변환 방식(혹은 스캔 방향)의 적용 범위를 결정하는 방법에 대해 설명한다.
도 15는 휘도 블록과 색차 블록 간의 해상도 차이의 일예를 도시한 도면이다.
도 15를 참조하면, 색차 신호가 휘도 신호의 1/4 크기라고 가정했을 때(예를 들어, 휘도 신호가 416x240 크기, 색차 신호가 208x120 크기), 8x8 크기의 휘도 블록(1510)은 4x4 크기의 색차 블록(1520)에 해당한다.
이 경우, 8x8 크기의 휘도 블록(1510)은 4개의 4x4 크기 휘도 블록이 있을 수 있으며, 4x4 크기 휘도 블록마다 각각 인트라 예측 모드를 가질 수 있다. 반면, 4x4 크기의 색차 블록(1520)은 2x2 크기의 색차 블록으로 나누어지지 않을 수 있다. 4x4 크기의 색차 블록(1520)은 하나의 인트라 예측 모드를 가질 수 있다.
이때, 4x4 크기의 색차 블록(1520)이 LM 모드(Intra_FromLuma)로 부호화 되었을 경우 혹은 4x4 크기의 색차 블록(1520)이 DM 모드(휘도 신호의 인트라 예측 모드를 색차 신호의 인트라 예측 모드로 그대로 사용하는 모드)로 부호화 되었을 경우, 4x4 크기의 색차 블록(1520)의 잔여 신호에 대한 주파수 변환 방식(혹은 스캔 방향)을 유도하기 위한 8x8 크기의 휘도 블록(1510)의 인트라 예측 모드는 4개의 4x4 크기 휘도 블록의 인트라 예측 모드 중 하나가 사용될 수 있다.
색차 신호의 잔여 신호에 대하여 선택적으로 주파수 변환 방식(혹은 스캔 방향)을 적용하기 위해서, 인트라 예측 모드를 유도하는 방법은 아래 1 내지 4 중 어느 하나와 같이 다양하게 적용될 수 있다.
1. 휘도 신호 블록 좌상단에 위치한 블록의 인트라 예측 모드를 사용할 수 있다.
2. 휘도 신호 블록 우상단 혹은 좌하단 혹은 우하단에 위치한 블록의 인트라 예측 모드를 사용할 수 있다.
3. 4가지 휘도 신호 블록들의 평균 값 혹은 중간 값을 사용할 수 있다.
4. 현재 블록의 4가지 휘도 신호 블록들과 현재 블록의 주변 블록들의 색차 신호 블록들의 인트라 예측 모드들을 이용한 평균 값 혹은 중간 값 등을 사용할 수 있다.
상술한 1 내지 4 방법 이외에도 다양한 방법으로 색차 신호에 대한 인트라 예측 모드를 유도할 수 있다.
도 16은 휘도 블록과 색차 블록 간의 해상도 차이의 다른 예를 도시한 도면이다.
도 16을 참조하면, 16x16 크기의 휘도 블록(1610)은 1개의 인트라 예측 모드를 가질 수 있다. 반면, 8x8 크기의 색차 블록(1620)은 4개의 4x4 크기 색차 블록으로 나누어질 수 있으며, 4x4 크기 색차 블록 각각에 대하여 인트라 예측 모드를 가질 수 있다.
이때, 8x8 크기의 색차 블록(1620)이 LM 모드(Intra_FromLuma)로 부호화 되었을 경우 혹은 8x8 크기의 색차 블록(1620)이 DM 모드(휘도 신호의 인트라 예측 모드를 색차 신호의 인트라 예측 모드로 그대로 사용하는 모드)로 부호화 되었을 경우, 16x16 크기의 휘도 블록(1610)의 인트라 예측 모드가 8x8 크기의 색차 블록(1620)의 잔여 신호에 대한 주파수 변환 방식(혹은 스캔 방향)을 유도하기 위해 사용될 수 있다. 혹은 8x8 크기의 색차 블록(1620)의 잔여 신호에 대한 주파수 변환 방식(혹은 스캔 방향)을 유도하기 위해 현재 블록의 주변 블록들(휘도 블록 혹은 색차 블록)로부터 인트라 예측 모드를 유도하여 사용할 수 있다.
상술한 주파수 변환 방식 혹은 스캔 방향의 적용 범위는 휘도 블록의 크기에 따라 색차 블록에 다르게 적용할 수 있으며, 또는 휘도 신호 영상 및 색차 신호 영상에 다르게 적용할 수도 있으며, 또는 수평 방향 및 수직 방향에 따라 다르게 적용할 수도 있다.
표 9는 블록 크기, 색차 신호 및 휘도 신호, 수직 방향 및 수평 방향 등에 따라 적용 범위를 결정하는 방법들의 조합을 개략적으로 나타낸 일예이다.
Figure pat00011
표 9의 방법들 중 방법 사 1을 살펴보면, 휘도 블록의 크기가 8(8x8, 8x4, 2x8 등)인 경우이고, 그리고 색차 블록의 크기가 4(4x4, 4x2, 2x4)인 경우, 본 발명의 실시예1(도 10 및 도 11) 혹은 본 발명의 실시예2(도 13 및 도 14)를 휘도 신호 및 색차 신호 및 수평 신호 및 수직 신호에 적용할 수 있다.
표 9의 방법들 중 방법 파 2를 살펴보면, 휘도 블록의 크기가 16(16x16, 8x16, 4x16 등)인 경우이고, 그리고 색차 블록의 크기가 4(4x4, 4x2, 2x4)인 경우, 본 발명의 실시예1(도 10 및 도 11) 혹은 본 발명의 실시예2(도 13 및 도 14)를 휘도 신호 및 색차 신호 및 수평 신호에 적용할 수 있고 수직 신호에는 적용하지 않을 수 있다.
도 17은 본 발명의 일 실시예에 따른 부호화 장치를 개략적으로 도시한 블록도이다.
도 17을 참조하면, 부호화 장치(1700)는 스캔 방향 도출부(1710) 및 스캐닝부(1720)를 포함한다.
스캔 방향 도출부(1710)는 현재 블록이 변환 스킵 블록인지 여부에 따라 현재 블록에 대한 잔여 신호의 스캔 방향을 도출한다.
여기서, 변환 스킵 블록은 현재 블록에 대해 변환을 적용하지 않은 블록으로, 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보, 예컨대 transform_skip_flag를 기반으로 특정될 수 있다.
현재 블록이 변환 스킵 블록인지 여부에 따라 현재 블록의 잔여 신호에 대한 스캔 방향을 도출하는 구체적인 방법은 본 명세서의 실시예들에서 상세히 설명한 바와 같다.
스캐닝부(1720)는 스캔 방향 도출부(1710)에 의해 도출된 스캔 방향을 현재 블록의 잔여 신호에 적용한다. 예컨대, 도 12에 도시된 스캔 방향과 같이 현재 블록의 잔여 신호를 스캔할 수 있다.
도 18은 본 발명의 일 실시예에 따른 복호화 장치를 개략적으로 도시한 블록도이다.
도 18을 참조하면, 복호화 장치(1800)는 스캔 방향 도출부(1810) 및 스캐닝부(1820)를 포함한다.
스캔 방향 도출부(1810)는 현재 블록이 변환 스킵 블록인지 여부에 따라 현재 블록에 대한 잔여 신호의 스캔 방향을 도출한다.
여기서, 변환 스킵 블록은 현재 블록에 대해 변환을 적용하지 않은 블록으로, 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보, 예컨대 transform_skip_flag를 기반으로 특정될 수 있다.
현재 블록이 변환 스킵 블록인지 여부에 따라 현재 블록의 잔여 신호에 대한 스캔 방향을 도출하는 구체적인 방법은 본 명세서의 실시예들에서 상세히 설명한 바와 같다.
스캐닝부(1820)는 스캔 방향 도출부(1810)에 의해 도출된 스캔 방향을 현재 블록의 잔여 신호에 적용한다. 예컨대, 도 12에 도시된 스캔 방향과 같이 현재 블록의 잔여 신호를 스캔할 수 있다.
상술한 실시예들에서, 방법들은 일련의 단계 또는 블록으로서 순서도를 기초로 설명되고 있으나, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 당해 기술 분야에서 통상의 지식을 가진 자라면 순서도에 나타난 단계들이 배타적이지 않고, 다른 단계가 포함되거나, 순서도의 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수 있음을 이해할 수 있을 것이다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호범위는 특허청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (7)

  1. 현재 블록에 대한 잔여 신호(residual signal) 존재 유무 정보를 파싱하는 단계; 및
    상기 잔여 신호 존재 유무 정보를 기반으로 상기 현재 블록의 잔여 신호에 대한 스캔 방향(scanIdx)을 유도하여 상기 현재 블록의 잔여 신호를 획득하는 단계를 포함하며,
    상기 잔여 신호 존재 유무 정보는, 상기 현재 블록에 잔여 신호가 존재하는지 여부를 지시하는 정보이며,
    상기 잔여 신호 존재 유무 정보가 상기 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 상기 현재 블록이 0이 아닌 하나 이상의 변환 계수 레벨(transform coefficient level)을 포함하는 것을 특징으로 하는 영상 복호화 방법.
  2. 제1항에 있어서,
    상기 잔여 신호 존재 유무 정보는,
    상기 현재 블록의 휘도(luma) 신호에 대한 잔여 신호가 존재하는지 여부를 지시하는 정보 및 상기 현재 블록의 색차(chroma) 신호에 대한 잔여 신호가 존재하는지 여부를 지시하는 정보를 포함하는 것을 특징으로 하는 영상 복호화 방법.
  3. 제1항에 있어서,
    상기 잔여 신호 존재 유무 정보가 상기 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 상기 현재 블록에 대한 양자화 단계의 차이 값을 나타내는 정보를 획득하는 단계를 포함하는 것을 특징으로 하는 영상 복호화 방법.
  4. 제1항에 있어서,
    상기 잔여 신호 존재 유무 정보가 상기 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 상기 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보를 획득하는 단계를 포함하는 것을 특징으로 하는 영상 복호화 방법.
  5. 제4항에 있어서,
    상기 현재 블록에 대해 변환을 적용할지 여부를 나타내는 정보는,
    상기 현재 블록을 포함하는 현재 픽처가 선택적으로 변환을 적용할 수 있도록 허용된 픽처이고, 상기 현재 블록이 포함된 부호화 블록이 변환 및 양자화를 수행하지 않는 모드가 아니고, 상기 현재 블록이 4x4 크기인 경우에 획득되는 것을 특징으로 하는 영상 복호화 방법.
  6. 제1항에 있어서,
    상기 현재 블록의 잔여 신호를 획득하는 단계에서는,
    상기 잔여 신호 존재 유무 정보가 상기 현재 블록에 잔여 신호가 존재하는 것으로 지시하는 경우, 상기 현재 블록의 인트라 예측 모드를 기반으로 상기 현재 블록의 잔여 신호에 대한 스캔 방향을 유도하며,
    상기 현재 블록의 잔여 신호에 대한 스캔 방향은 수직 스캔, 수평 스캔 및 상단 우측 스캔 중 어느 하나인 것을 특징으로 하는 영상 복호화 방법.
  7. 제6항에 있어서,
    상기 현재 블록의 잔여 신호를 획득하는 단계에서는,
    상기 현재 블록이 휘도(luma) 신호에 대한 블록일 경우, 상기 현재 블록의 휘도 신호에 대한 인트라 예측 모드를 기반으로 상기 현재 블록의 잔여 신호에 대한 스캔 방향을 유도하며,
    상기 현재 블록이 색차(chroma) 신호에 대한 블록일 경우, 상기 현재 블록의 색차 신호에 대한 인트라 예측 모드를 기반으로 상기 현재 블록의 잔여 신호에 대한 스캔 방향을 유도하는 것을 특징으로 하는 영상 복호화 방법.
KR1020140087643A 2012-06-29 2014-07-11 영상 부호화/복호화 방법 및 장치 KR101809728B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20120071446 2012-06-29
KR1020120071446 2012-06-29

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020130073067A Division KR101725818B1 (ko) 2012-06-29 2013-06-25 영상 부호화/복호화 방법 및 장치

Related Child Applications (3)

Application Number Title Priority Date Filing Date
KR1020170049700A Division KR101809731B1 (ko) 2012-06-29 2017-04-18 영상 부호화/복호화 방법 및 장치
KR1020170049699A Division KR101809730B1 (ko) 2012-06-29 2017-04-18 영상 부호화/복호화 방법 및 장치
KR1020170169703A Division KR102103004B1 (ko) 2012-06-29 2017-12-11 영상 부호화/복호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20140092799A true KR20140092799A (ko) 2014-07-24
KR101809728B1 KR101809728B1 (ko) 2017-12-15

Family

ID=50140254

Family Applications (19)

Application Number Title Priority Date Filing Date
KR1020130073067A KR101725818B1 (ko) 2012-06-29 2013-06-25 영상 부호화/복호화 방법 및 장치
KR1020140087607A KR101527444B1 (ko) 2012-06-29 2014-07-11 영상 부호화/복호화 방법 및 장치
KR1020140087643A KR101809728B1 (ko) 2012-06-29 2014-07-11 영상 부호화/복호화 방법 및 장치
KR1020140087655A KR101809729B1 (ko) 2012-06-29 2014-07-11 영상 부호화/복호화 방법 및 장치
KR1020170049700A KR101809731B1 (ko) 2012-06-29 2017-04-18 영상 부호화/복호화 방법 및 장치
KR1020170049699A KR101809730B1 (ko) 2012-06-29 2017-04-18 영상 부호화/복호화 방법 및 장치
KR1020170169703A KR102103004B1 (ko) 2012-06-29 2017-12-11 영상 부호화/복호화 방법 및 장치
KR1020200045502A KR20200043332A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045501A KR20200043331A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045505A KR20200043335A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045504A KR20200043334A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045503A KR20200043333A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020210039708A KR102323263B1 (ko) 2012-06-29 2021-03-26 영상 부호화/복호화 방법 및 장치
KR1020210148596A KR102635510B1 (ko) 2012-06-29 2021-11-02 영상 부호화/복호화 방법 및 장치
KR1020210148595A KR102635509B1 (ko) 2012-06-29 2021-11-02 영상 부호화/복호화 방법 및 장치
KR1020210148594A KR102635508B1 (ko) 2012-06-29 2021-11-02 영상 부호화/복호화 방법 및 장치
KR1020240017580A KR20240018565A (ko) 2012-06-29 2024-02-05 영상 부호화/복호화 방법 및 장치
KR1020240017578A KR20240023072A (ko) 2012-06-29 2024-02-05 영상 부호화/복호화 방법 및 장치
KR1020240017579A KR20240023073A (ko) 2012-06-29 2024-02-05 영상 부호화/복호화 방법 및 장치

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020130073067A KR101725818B1 (ko) 2012-06-29 2013-06-25 영상 부호화/복호화 방법 및 장치
KR1020140087607A KR101527444B1 (ko) 2012-06-29 2014-07-11 영상 부호화/복호화 방법 및 장치

Family Applications After (16)

Application Number Title Priority Date Filing Date
KR1020140087655A KR101809729B1 (ko) 2012-06-29 2014-07-11 영상 부호화/복호화 방법 및 장치
KR1020170049700A KR101809731B1 (ko) 2012-06-29 2017-04-18 영상 부호화/복호화 방법 및 장치
KR1020170049699A KR101809730B1 (ko) 2012-06-29 2017-04-18 영상 부호화/복호화 방법 및 장치
KR1020170169703A KR102103004B1 (ko) 2012-06-29 2017-12-11 영상 부호화/복호화 방법 및 장치
KR1020200045502A KR20200043332A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045501A KR20200043331A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045505A KR20200043335A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045504A KR20200043334A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020200045503A KR20200043333A (ko) 2012-06-29 2020-04-14 영상 부호화/복호화 방법 및 장치
KR1020210039708A KR102323263B1 (ko) 2012-06-29 2021-03-26 영상 부호화/복호화 방법 및 장치
KR1020210148596A KR102635510B1 (ko) 2012-06-29 2021-11-02 영상 부호화/복호화 방법 및 장치
KR1020210148595A KR102635509B1 (ko) 2012-06-29 2021-11-02 영상 부호화/복호화 방법 및 장치
KR1020210148594A KR102635508B1 (ko) 2012-06-29 2021-11-02 영상 부호화/복호화 방법 및 장치
KR1020240017580A KR20240018565A (ko) 2012-06-29 2024-02-05 영상 부호화/복호화 방법 및 장치
KR1020240017578A KR20240023072A (ko) 2012-06-29 2024-02-05 영상 부호화/복호화 방법 및 장치
KR1020240017579A KR20240023073A (ko) 2012-06-29 2024-02-05 영상 부호화/복호화 방법 및 장치

Country Status (11)

Country Link
US (20) US9497465B2 (ko)
EP (3) EP4216547A1 (ko)
KR (19) KR101725818B1 (ko)
CN (6) CN104488270B (ko)
DK (1) DK2869557T3 (ko)
ES (1) ES2961654T3 (ko)
FI (1) FI2869557T3 (ko)
HU (1) HUE063933T2 (ko)
PL (1) PL2869557T3 (ko)
TW (11) TWI619379B (ko)
WO (1) WO2014003423A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018128322A1 (ko) * 2017-01-03 2018-07-12 엘지전자(주) 영상 처리 방법 및 이를 위한 장치

Families Citing this family (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101503269B1 (ko) 2010-04-05 2015-03-17 삼성전자주식회사 영상 부호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치, 및 영상 복호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치
FI2869557T3 (fi) * 2012-06-29 2023-11-02 Electronics & Telecommunications Res Inst Menetelmä ja laite kuvien koodaamiseksi/dekoodaamiseksi
CN105684442B (zh) * 2013-07-23 2020-02-21 英迪股份有限公司 用于编码/解码图像的方法
CN109479138B (zh) * 2016-07-13 2023-11-03 韩国电子通信研究院 图像编码/解码方法和装置
CN117201809A (zh) * 2016-08-01 2023-12-08 韩国电子通信研究院 图像编码/解码方法和装置以及存储比特流的记录介质
US10368107B2 (en) * 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
EP3509306A4 (en) * 2016-08-31 2020-05-13 KT Corporation METHOD AND DEVICE FOR PROCESSING A VIDEO SIGNAL
CN116962679A (zh) 2016-08-31 2023-10-27 株式会社Kt 用于处理视频信号的方法和设备
WO2018066849A1 (ko) 2016-10-04 2018-04-12 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN115442607A (zh) * 2017-07-31 2022-12-06 韩国电子通信研究院 对图像编码和解码的方法及存储比特流的计算机可读介质
EP3700208A4 (en) 2017-10-18 2021-04-07 Electronics and Telecommunications Research Institute IMAGE ENCODING / DECODING METHOD AND DEVICE AND RECORDING MEDIUM WITH BITSTREAM STORED ON IT
WO2019112394A1 (ko) 2017-12-07 2019-06-13 한국전자통신연구원 채널들 간의 선택적인 정보 공유를 사용하는 부호화 및 복호화를 위한 방법 및 장치
CN117834922A (zh) 2018-01-17 2024-04-05 英迪股份有限公司 对视频进行解码或编码的方法和发送数据的方法
JP2021502771A (ja) * 2018-05-03 2021-01-28 エルジー エレクトロニクス インコーポレイティド 画像コーディングシステムにおいてブロックサイズに応じた変換を使用する画像デコード方法およびその装置
US11350118B2 (en) * 2018-05-30 2022-05-31 Digitalinsights Inc. Image encoding/decoding method and device
US11356702B2 (en) 2018-06-06 2022-06-07 Lg Electronics Inc. Method for performing transform index coding on basis of intra prediction mode, and device therefor
BR112021002464A2 (pt) * 2018-09-11 2021-05-04 Panasonic Intellectual Property Corporation Of America método de codificação de dados tridimensionais, método de decodificação de dados tridimensionais, dispositivo de codificação de dados tridimensionais, e dispositivo de decodificação de dados tridimensionais
FR3086485A1 (fr) * 2018-09-21 2020-03-27 Orange Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image.
US11303904B2 (en) * 2018-09-28 2022-04-12 Qualcomm Incorporated Rectangular block transform scaling
CN118301346A (zh) * 2018-10-05 2024-07-05 韩国电子通信研究院 图像编码/解码方法和设备以及存储比特流的记录介质
SG11202104319VA (en) * 2018-11-08 2021-05-28 Guangdong Oppo Mobile Telecommunications Corp Ltd Image signal encoding/decoding method and apparatus therefor
KR102462910B1 (ko) 2018-11-12 2022-11-04 한국전자통신연구원 배치 정규화 레이어의 웨이트들에 대한 양자화 방법 및 그 장치
WO2020105925A1 (ko) * 2018-11-23 2020-05-28 엘지전자 주식회사 영상 코딩 시스템에서 cclm 예측 기반 영상 디코딩 방법 및 그 장치
CN113170147B (zh) 2018-12-04 2023-04-18 华为技术有限公司 视频编码器、视频解码器、及对应方法
CN118741100A (zh) 2018-12-12 2024-10-01 数码士有限公司 使用当前图片参考的视频信号处理方法和设备
KR20230154085A (ko) 2018-12-17 2023-11-07 엘지전자 주식회사 고주파 제로잉을 기반으로 변환 계수 스캔 순서를 결정하는 방법 및 장치
KR20220027281A (ko) * 2018-12-21 2022-03-07 삼성전자주식회사 영상 부호화 방법 및 장치, 영상 복호화 방법 및 장치
US11523128B2 (en) 2018-12-27 2022-12-06 Lg Electronics Inc. Video decoding method and apparatus using residual rearrangement in video coding system
KR20200083321A (ko) * 2018-12-28 2020-07-08 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
KR102657248B1 (ko) * 2019-01-12 2024-04-25 (주)휴맥스 다중 변환 커널을 사용하는 비디오 신호 처리 방법 및 장치
KR102610233B1 (ko) 2019-01-15 2023-12-05 로즈데일 다이나믹스 엘엘씨 변환 스킵 플래그를 이용한 영상 코딩 방법 및 장치
KR20210118166A (ko) * 2019-01-28 2021-09-29 오피 솔루션즈, 엘엘씨 적응형 개수의 영역들을 갖는 기하학적 파티셔닝을 위한 모양 적응 이산 코사인 변환
EP3906681B1 (en) * 2019-02-01 2024-11-13 Beijing Bytedance Network Technology Co., Ltd. Interactions between in-loop reshaping and inter coding tools
WO2020162737A1 (ko) 2019-02-08 2020-08-13 주식회사 윌러스표준기술연구소 이차 변환을 이용하는 비디오 신호 처리 방법 및 장치
CN118870031A (zh) * 2019-02-19 2024-10-29 数码士有限公司 基于帧内预测的视频信号处理方法和设备
CN118694972A (zh) 2019-02-28 2024-09-24 数码士有限公司 基于帧内预测的视频信号处理方法和装置
BR112021016917A2 (pt) 2019-02-28 2021-11-03 Samsung Electronics Co Ltd Método de decodificação de vídeo, dispositivo de decodificação de vídeo, e método de codificação de vídeo
CN115052163B (zh) 2019-03-03 2024-04-09 华为技术有限公司 编码器、解码器和用于变换处理的对应方法
US11985348B2 (en) * 2019-03-11 2024-05-14 Electronics And Telecommunications Research Institute Intra block copy-based encoding/decoding method and device, and bitstream storage medium
US11153591B2 (en) * 2019-03-12 2021-10-19 Tencent America LLC Method and apparatus for color transform in VVC
US20220132156A1 (en) * 2019-03-13 2022-04-28 Hyundai Motor Company Image decoding device using differential coding
JP7417624B2 (ja) 2019-03-23 2024-01-18 北京字節跳動網絡技術有限公司 適応ループフィルタリングパラメータセットに対する制限
US20220217405A1 (en) * 2019-04-03 2022-07-07 Lg Electronics Inc. Video or image coding for modifying reconstructed picture
KR20210145755A (ko) * 2019-04-12 2021-12-02 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 행렬 기반 인트라 예측과 다른 코딩 툴들 사이의 상호작용
EP3932061A4 (en) 2019-04-23 2022-06-01 Beijing Bytedance Network Technology Co., Ltd. USING A SECONDARY TRANSFORMATION IN ENCODED VIDEO
KR102630415B1 (ko) 2019-04-24 2024-01-29 바이트댄스 아이엔씨 코딩 된 비디오의 양자화된 잔차 차동 펄스 코드 변조 표현의 제약
CN113728631B (zh) * 2019-04-27 2024-04-02 北京字节跳动网络技术有限公司 帧内子块分割和多变换选择
EP3942799A4 (en) * 2019-05-01 2022-06-08 ByteDance Inc. INTRACODED VIDEO USING QUANTIZED RESIDUAL PULSE CODE MODULATION ENCODING
KR20240091033A (ko) 2019-05-02 2024-06-21 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 다중 레퍼런스 필터를 사용한 인트라 비디오 코딩
CN113785568B (zh) 2019-05-02 2024-03-08 字节跳动有限公司 变换跳过模式下的信令通知
WO2020228672A1 (en) * 2019-05-10 2020-11-19 Beijing Bytedance Network Technology Co., Ltd. Context modeling of reduced secondary transforms in video
WO2020228718A1 (en) * 2019-05-13 2020-11-19 Beijing Bytedance Network Technology Co., Ltd. Interaction between transform skip mode and other coding tools
EP3954114A4 (en) 2019-05-13 2022-06-01 Beijing Bytedance Network Technology Co., Ltd. TRANSFORM JUMP MODE BLOCK SIZE SETTINGS
WO2020228761A1 (en) * 2019-05-14 2020-11-19 Beijing Bytedance Network Technology Co., Ltd. Filter selection for intra video coding
WO2020236723A1 (en) * 2019-05-19 2020-11-26 Bytedance Inc. Transform bypass coded residual blocks in digital video
WO2020233664A1 (en) 2019-05-22 2020-11-26 Beijing Bytedance Network Technology Co., Ltd. Sub-block based use of transform skip mode
US20220150527A1 (en) * 2019-05-22 2022-05-12 Lg Electronics Inc. Method and device for decoding image by using bdpcm in image coding system
WO2020239017A1 (en) 2019-05-31 2020-12-03 Beijing Bytedance Network Technology Co., Ltd. One-step downsampling process in matrix-based intra prediction
EP3963885A4 (en) 2019-06-05 2022-12-14 Beijing Bytedance Network Technology Co., Ltd. DETERMINING CONTEXT FOR MATRIX-BASED INTRAPREDICTION
CN113940076A (zh) * 2019-06-06 2022-01-14 北京字节跳动网络技术有限公司 应用隐式变换选择
CN113994666A (zh) 2019-06-06 2022-01-28 北京字节跳动网络技术有限公司 隐式选择变换候选
WO2020244656A1 (en) 2019-06-07 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Conditional signaling of reduced secondary transform in video bitstreams
KR20220024711A (ko) * 2019-06-20 2022-03-03 인터디지털 브이씨 홀딩스 프랑스 에스에이에스 다목적 비디오 코딩을 위한 무손실 모드
EP3989557A4 (en) 2019-06-24 2023-05-24 LG Electronics Inc. METHOD AND APPARATUS FOR ENCODING/DECODING VIDEO USING MAXIMUM SATURATION TRANSFORM BLOCK SIZE LIMITATION, AND BITSTREAM TRANSMISSION METHOD
JP7309929B2 (ja) * 2019-06-24 2023-07-18 エルジー エレクトロニクス インコーポレイティド クロマ成分符号化ブロックの最大変換サイズ制限を用いた画像符号化／復号化方法、装置、及びビットストリームを伝送する方法
CN114375578A (zh) * 2019-07-10 2022-04-19 Lg电子株式会社 用于残差编码的图像解码方法及其设备
CN117640934A (zh) * 2019-07-12 2024-03-01 Lg电子株式会社 图像编码方法、图像解码方法以及发送方法
WO2021023151A1 (en) * 2019-08-03 2021-02-11 Beijing Bytedance Network Technology Co., Ltd. Position based mode derivation in reduced secondary transforms for video
CN117376556A (zh) 2019-08-14 2024-01-09 北京字节跳动网络技术有限公司 位置相关帧内预测样点滤波
EP3997872A4 (en) * 2019-08-14 2022-10-26 Beijing Bytedance Network Technology Co., Ltd. WEIGHTING FACTORS FOR FILTERING PREDICTION SAMPLES IN INTRA MODE
WO2021032045A1 (en) 2019-08-17 2021-02-25 Beijing Bytedance Network Technology Co., Ltd. Context modeling of side information for reduced secondary transforms in video
AU2020334638B2 (en) 2019-08-22 2023-11-09 Lg Electronics Inc. Intra prediction device and method
CN114270842B (zh) * 2019-08-27 2024-08-20 现代自动车株式会社 利用差分编码的视频编码和解码
AU2020337710B2 (en) 2019-08-29 2024-01-11 Lg Electronics Inc. Apparatus and method for image coding based on filtering
JP7323709B2 (ja) * 2019-09-09 2023-08-08 北京字節跳動網絡技術有限公司 イントラブロックコピーの符号化および復号化
CN114223204B (zh) * 2019-09-19 2024-04-12 寰发股份有限公司 视频编解码的方法和装置
CN114651445B (zh) * 2019-09-21 2024-01-26 Lg电子株式会社 基于变换的视频编码方法及其装置
CN114731392A (zh) * 2019-09-21 2022-07-08 北京字节跳动网络技术有限公司 用于图像和视频编解码的高精度变换和量化
WO2021058277A1 (en) * 2019-09-23 2021-04-01 Interdigital Vc Holdings France, Sas Video encoding and decoding using block area based quantization matrices
CN114731435A (zh) * 2019-09-25 2022-07-08 Lg电子株式会社 用信号通知用于对应用bdpcm的块进行编码的残差编码方法的图像编码/解码方法和设备及发送比特流的方法
WO2021060905A1 (ko) 2019-09-25 2021-04-01 엘지전자 주식회사 변환에 기반한 영상 코딩 방법 및 그 장치
CN114731444B (zh) * 2019-09-27 2024-07-05 Sk电信有限公司 用于恢复色度块的残差块的方法及解码设备
EP4017009A4 (en) 2019-10-04 2022-11-23 LG Electronics Inc. TRANSFORMATION-BASED IMAGE CODING METHOD AND APPARATUS THEREOF
BR122023020425A2 (pt) * 2019-10-04 2024-02-27 Lg Electronics Inc Aparelho de decodificação/ codificação para decodificação/codificação de imagens e aparelho para transmissão de dados para uma imagem
MX2022003998A (es) * 2019-10-04 2022-04-26 Lg Electronics Inc Metodo de codificacion de imagenes a base de transformacion, y aparato para el mismo.
KR20220050203A (ko) * 2019-10-05 2022-04-22 엘지전자 주식회사 변환 스킵 및 팔레트 코딩 관련 고급 문법 요소 기반 영상 또는 비디오 코딩
EP4040792A4 (en) * 2019-10-05 2023-11-15 LG Electronics Inc. IMAGE OR VIDEO CODING BASED ON SIGNALING INFORMATION RELATED TO TRANSFORM SKIP AND PALETTE CODING
CN117412066A (zh) * 2019-10-05 2024-01-16 Lg电子株式会社 解码设备、编码设备和发送设备
CN114762342B (zh) * 2019-10-08 2024-02-13 Lg电子株式会社 基于变换的图像编码方法及其装置
CN114762341B (zh) * 2019-10-08 2024-01-16 Lg电子株式会社 用于基于变换的图像编码的方法和装置
WO2021071287A1 (ko) * 2019-10-08 2021-04-15 엘지전자 주식회사 변환에 기반한 영상 코딩 방법 및 그 장치
WO2021086022A1 (ko) 2019-10-28 2021-05-06 엘지전자 주식회사 적응적 색상 변환을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2021083188A1 (en) * 2019-10-28 2021-05-06 Beijing Bytedance Network Technology Co., Ltd. Syntax signaling and parsing based on colour component
MX2022005197A (es) * 2019-11-01 2022-07-04 Lg Electronics Inc Metodo a base de transformacion para codificar imagenes y dispositivo para el mismo.
BR112022009084A2 (pt) * 2019-11-11 2022-07-26 Lg Electronics Inc Método de codificação de imagem com base em uma transformada, e aparelho da mesma
MX2022005540A (es) * 2019-11-11 2022-08-15 Lg Electronics Inc Metodo de codificacion de imagenes a base de conversion, y dispositivo para el mismo.
CN115443659B (zh) * 2020-02-25 2024-08-06 Lg电子株式会社 与残差编码相关的图像解码方法以及用于其的装置
BR112022014908A2 (pt) * 2020-03-27 2022-10-04 Atins Inc Métodos de decodificação de vídeo e dispositivo de decodificação de vídeo
CN113473129B (zh) * 2020-03-30 2022-12-23 杭州海康威视数字技术股份有限公司 一种编码、解码方法及装置
CN114556943B (zh) * 2020-04-03 2024-08-23 Oppo广东移动通信有限公司 变换方法、编码器、解码器以及存储介质
US11770788B1 (en) * 2022-06-03 2023-09-26 Bloxtel Inc. Systems and methods for deployment of a decentralized electronic subscriber identity module

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2857849B2 (ja) 1995-04-19 1999-02-17 日精樹脂工業株式会社 射出成形機の入力装置
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
KR20040027047A (ko) 2002-09-27 2004-04-01 삼성전자주식회사 예측 스캐닝을 이용한 영상 부호화/복호화 방법 및 장치
JP4153410B2 (ja) * 2003-12-01 2008-09-24 日本電信電話株式会社 階層符号化方法及びその装置と、階層復号方法及びその装置と、階層符号化プログラム及びそのプログラムを記録した記録媒体と、階層復号プログラム及びそのプログラムを記録した記録媒体
KR100813963B1 (ko) * 2005-09-16 2008-03-14 세종대학교산학협력단 동영상의 무손실 부호화, 복호화 방법 및 장치
EP1956847B1 (en) * 2005-11-08 2018-01-03 Sun Patent Trust Moving picture coding method, moving picture decoding method, and apparatuses of the same
KR100772873B1 (ko) * 2006-01-12 2007-11-02 삼성전자주식회사 스무딩 예측을 이용한 다계층 기반의 비디오 인코딩 방법,디코딩 방법, 비디오 인코더 및 비디오 디코더
KR100744435B1 (ko) 2006-02-21 2007-08-01 (주)씨앤에스 테크놀로지 고속 동영상 압축을 위한 ｄｃｔ 및 양자화 과정 생략 방법
KR100927733B1 (ko) * 2006-09-20 2009-11-18 한국전자통신연구원 잔여계수의 상관성에 따라 변환기를 선택적으로 이용한부호화/복호화 장치 및 그 방법
US8428133B2 (en) * 2007-06-15 2013-04-23 Qualcomm Incorporated Adaptive coding of video block prediction mode
JP2009027541A (ja) 2007-07-20 2009-02-05 Ntt Docomo Inc 画像符号化装置、方法及びプログラム、並びに、画像復号装置、方法及びプログラム
US8848787B2 (en) * 2007-10-15 2014-09-30 Qualcomm Incorporated Enhancement layer coding for scalable video coding
US9445121B2 (en) * 2008-08-04 2016-09-13 Dolby Laboratories Licensing Corporation Overlapped block disparity estimation and compensation architecture
EP2373031A1 (en) * 2008-08-12 2011-10-05 Lg Electronics Inc. Method of decoding a video signal
KR101619972B1 (ko) * 2008-10-02 2016-05-11 한국전자통신연구원 이산 여현 변환/이산 정현 변환을 선택적으로 이용하는 부호화/복호화 장치 및 방법
US8483285B2 (en) * 2008-10-03 2013-07-09 Qualcomm Incorporated Video coding using transforms bigger than 4×4 and 8×8
US8634456B2 (en) * 2008-10-03 2014-01-21 Qualcomm Incorporated Video coding with large macroblocks
KR101543301B1 (ko) * 2008-10-15 2015-08-10 에스케이 텔레콤주식회사 동영상 부호화/복호화 장치 및 그를 위한 하이브리드 블록 움직임 보상/중첩 블록 움직임 보상 방법 및 장치
CN102210151A (zh) * 2008-11-07 2011-10-05 三菱电机株式会社 图像编码装置以及图像解码装置
JP5490404B2 (ja) 2008-12-25 2014-05-14 シャープ株式会社 画像復号装置
EP2413605B1 (en) * 2009-03-23 2016-02-17 NTT DoCoMo, Inc. Image predictive encoding device, image predictive encoding method, image predictive encoding program, image predictive decoding device, image predictive decoding method, and image predictive decoding program
US9635368B2 (en) * 2009-06-07 2017-04-25 Lg Electronics Inc. Method and apparatus for decoding a video signal
US9100648B2 (en) * 2009-06-07 2015-08-04 Lg Electronics Inc. Method and apparatus for decoding a video signal
US20120195515A1 (en) * 2009-08-26 2012-08-02 Tomohiro Ikai Image encoding device and image decoding device
KR101302660B1 (ko) * 2009-09-14 2013-09-03 에스케이텔레콤 주식회사 고해상도 동영상의 부호화/복호화 방법 및 장치
KR20110069740A (ko) * 2009-12-17 2011-06-23 에스케이 텔레콤주식회사 영상 부호화/복호화 방법 및 장치
US8792740B2 (en) * 2010-02-02 2014-07-29 Humax Holdings Co., Ltd. Image encoding/decoding method for rate-distortion optimization and apparatus for performing same
US9100661B2 (en) * 2010-04-05 2015-08-04 Samsung Electronics Co., Ltd. Method and apparatus for encoding video by using dynamic-range transformation, and method and apparatus for decoding video by using dynamic-range transformation
KR101791242B1 (ko) * 2010-04-16 2017-10-30 에스케이텔레콤 주식회사 영상 부호화/복호화 장치 및 방법
ES2546514T3 (es) * 2010-04-23 2015-09-24 M&K Holdings Inc. Aparato de codificación de imágenes
KR101379188B1 (ko) * 2010-05-17 2014-04-18 에스케이 텔레콤주식회사 인트라 블록 및 인터 블록이 혼합된 코딩블록을 이용하는 영상 부호화/복호화 장치 및 그 방법
US20110317757A1 (en) * 2010-06-25 2011-12-29 Qualcomm Incorporated Intra prediction mode signaling for finer spatial prediction directions
US9172968B2 (en) * 2010-07-09 2015-10-27 Qualcomm Incorporated Video coding using directional transforms
US9357229B2 (en) * 2010-07-28 2016-05-31 Qualcomm Incorporated Coding motion vectors in video coding
KR101373814B1 (ko) * 2010-07-31 2014-03-18 엠앤케이홀딩스 주식회사 예측 블록 생성 장치
US20120063515A1 (en) * 2010-09-09 2012-03-15 Qualcomm Incorporated Efficient Coding of Video Parameters for Weighted Motion Compensated Prediction in Video Coding
US8990094B2 (en) * 2010-09-13 2015-03-24 Qualcomm Incorporated Coding and decoding a transient frame
US20130188740A1 (en) * 2010-09-13 2013-07-25 Industry-Academic Coooperation Foundation Hanbat National University Method and apparatus for entropy encoding/decoding
CN102447896B (zh) 2010-09-30 2013-10-09 华为技术有限公司 图像残差块的处理方法、装置和系统
KR101483179B1 (ko) * 2010-10-06 2015-01-19 에스케이 텔레콤주식회사 주파수 마스크 테이블을 이용한 주파수변환 블록 부호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US9288496B2 (en) * 2010-12-03 2016-03-15 Qualcomm Incorporated Video coding using function-based scan order for transform coefficients
KR101763113B1 (ko) * 2010-12-06 2017-08-01 에스케이 텔레콤주식회사 노이즈성분을 위한 공간영역에서의 영상 부호화/복호화 방법 및 장치
US9049444B2 (en) * 2010-12-22 2015-06-02 Qualcomm Incorporated Mode dependent scanning of coefficients of a block of video data
US10992958B2 (en) 2010-12-29 2021-04-27 Qualcomm Incorporated Video coding using mapped transforms and scanning modes
WO2012134246A2 (ko) * 2011-04-01 2012-10-04 엘지전자 주식회사 엔트로피 디코딩 방법 및 이를 이용하는 디코딩 장치
US9445093B2 (en) * 2011-06-29 2016-09-13 Qualcomm Incorporated Multiple zone scanning order for video coding
US9008179B2 (en) * 2011-06-30 2015-04-14 Futurewei Technologies, Inc. Encoding of prediction residuals for lossless video coding
US20130003859A1 (en) * 2011-06-30 2013-01-03 Qualcomm Incorporated Transition between run and level coding modes
US9807426B2 (en) * 2011-07-01 2017-10-31 Qualcomm Incorporated Applying non-square transforms to video data
KR20130049525A (ko) * 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법
KR20130049524A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
US10277915B2 (en) * 2011-11-07 2019-04-30 Qualcomm Incorporated Signaling quantization matrices for video coding
US10390046B2 (en) * 2011-11-07 2019-08-20 Qualcomm Incorporated Coding significant coefficient information in transform skip mode
FI2869557T3 (fi) * 2012-06-29 2023-11-02 Electronics & Telecommunications Res Inst Menetelmä ja laite kuvien koodaamiseksi/dekoodaamiseksi
AU2012232992A1 (en) * 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
US10306229B2 (en) * 2015-01-26 2019-05-28 Qualcomm Incorporated Enhanced multiple transforms for prediction residual

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018128322A1 (ko) * 2017-01-03 2018-07-12 엘지전자(주) 영상 처리 방법 및 이를 위한 장치
RU2720066C1 (ru) * 2017-01-03 2020-04-23 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ обработки изображений и устройство для этого
US11394974B2 (en) 2017-01-03 2022-07-19 Lg Electronics Inc. Image processing method, and device for same
US11882286B2 (en) 2017-01-03 2024-01-23 Lg Electronics Inc. Image processing method, and device for same

Also Published As

Publication number Publication date
TW202215849A (zh) 2022-04-16
KR101809730B1 (ko) 2017-12-15
HUE063933T2 (hu) 2024-02-28
TW202141981A (zh) 2021-11-01
EP4216546A1 (en) 2023-07-26
US9723311B2 (en) 2017-08-01
US11399183B2 (en) 2022-07-26
US9635363B2 (en) 2017-04-25
CN108712650A (zh) 2018-10-26
KR101809728B1 (ko) 2017-12-15
US20160373748A1 (en) 2016-12-22
WO2014003423A4 (ko) 2014-02-27
TWI619379B (zh) 2018-03-21
US20160373746A1 (en) 2016-12-22
US20240283934A1 (en) 2024-08-22
KR20210134569A (ko) 2021-11-10
WO2014003423A1 (ko) 2014-01-03
KR20140098036A (ko) 2014-08-07
US11765356B2 (en) 2023-09-19
KR101809731B1 (ko) 2017-12-15
KR102635510B1 (ko) 2024-02-08
CN108712651A (zh) 2018-10-26
US9628799B2 (en) 2017-04-18
CN104488270A (zh) 2015-04-01
KR101527444B1 (ko) 2015-06-11
EP2869557A4 (en) 2016-07-06
TWI621353B (zh) 2018-04-11
DK2869557T3 (da) 2023-11-06
TW201717640A (zh) 2017-05-16
TWI684355B (zh) 2020-02-01
US9497465B2 (en) 2016-11-15
US20200382784A1 (en) 2020-12-03
ES2961654T3 (es) 2024-03-13
KR101809729B1 (ko) 2017-12-15
TW201820876A (zh) 2018-06-01
KR102103004B1 (ko) 2020-04-21
KR20240018565A (ko) 2024-02-13
US20200382787A1 (en) 2020-12-03
US20200382788A1 (en) 2020-12-03
KR20170044630A (ko) 2017-04-25
TW202112136A (zh) 2021-03-16
EP4216547A1 (en) 2023-07-26
US11770534B2 (en) 2023-09-26
KR20240023073A (ko) 2024-02-20
TW201709739A (zh) 2017-03-01
US20160373783A1 (en) 2016-12-22
US20210112249A1 (en) 2021-04-15
KR20210036333A (ko) 2021-04-02
EP2869557A1 (en) 2015-05-06
KR102323263B1 (ko) 2021-11-08
US12010312B2 (en) 2024-06-11
KR102635509B1 (ko) 2024-02-08
TW202428029A (zh) 2024-07-01
US11399184B2 (en) 2022-07-26
US11399186B2 (en) 2022-07-26
CN108712652A (zh) 2018-10-26
PL2869557T3 (pl) 2024-02-19
TWI751963B (zh) 2022-01-01
US20230199186A1 (en) 2023-06-22
US20240195974A1 (en) 2024-06-13
US10341661B2 (en) 2019-07-02
US20200382786A1 (en) 2020-12-03
KR20200043331A (ko) 2020-04-27
KR20170140145A (ko) 2017-12-20
FI2869557T3 (fi) 2023-11-02
KR20200043333A (ko) 2020-04-27
TW201635794A (zh) 2016-10-01
KR20200043334A (ko) 2020-04-27
US20220295065A1 (en) 2022-09-15
US20220295066A1 (en) 2022-09-15
CN104488270B (zh) 2018-05-18
KR20170044631A (ko) 2017-04-25
US20170289548A1 (en) 2017-10-05
EP2869557B1 (en) 2023-08-09
US20160373747A1 (en) 2016-12-22
US20150172658A1 (en) 2015-06-18
US20200382785A1 (en) 2020-12-03
KR101725818B1 (ko) 2017-04-11
US20240291989A1 (en) 2024-08-29
US20190273924A1 (en) 2019-09-05
US11399181B2 (en) 2022-07-26
KR20200043332A (ko) 2020-04-27
US11399185B2 (en) 2022-07-26
KR20200043335A (ko) 2020-04-27
TWI737549B (zh) 2021-08-21
TWI839662B (zh) 2024-04-21
US10827177B2 (en) 2020-11-03
CN108712649A (zh) 2018-10-26
KR20210134567A (ko) 2021-11-10
TW202015414A (zh) 2020-04-16
KR102635508B1 (ko) 2024-02-08
CN108632611A (zh) 2018-10-09
TWI563836B (en) 2016-12-21
US9641845B2 (en) 2017-05-02
TWI715361B (zh) 2021-01-01
US11399182B2 (en) 2022-07-26
KR20210134568A (ko) 2021-11-10
US11595655B2 (en) 2023-02-28
TWI619378B (zh) 2018-03-21
KR20140093205A (ko) 2014-07-25
KR20240023072A (ko) 2024-02-20
TW201415894A (zh) 2014-04-16
TWI596935B (zh) 2017-08-21
TW201709740A (zh) 2017-03-01
US20200382783A1 (en) 2020-12-03
KR20140004006A (ko) 2014-01-10

Similar Documents

Publication Publication Date Title
KR102323263B1 (ko) 영상 부호화/복호화 방법 및 장치
JP7198268B2 (ja) 画像復号化方法、画像符号化方法及びコンピュータ可読記録媒体
KR102424418B1 (ko) 비디오 신호 처리 방법 및 장치
KR102399795B1 (ko) 영상 부호화/복호화 방법 및 장치
KR20130124920A (ko) 영상 부호화/복호화 방법 및 장치

Legal Events

Date Code Title Description
A107 Divisional application of patent
A107 Divisional application of patent
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant