KR102185857B1 - 영상 부호화, 복호화 방법 및 장치 - Google Patents

영상 부호화, 복호화 방법 및 장치 Download PDF

Info

Publication number
KR102185857B1
KR102185857B1 KR1020140016864A KR20140016864A KR102185857B1 KR 102185857 B1 KR102185857 B1 KR 102185857B1 KR 1020140016864 A KR1020140016864 A KR 1020140016864A KR 20140016864 A KR20140016864 A KR 20140016864A KR 102185857 B1 KR102185857 B1 KR 102185857B1
Authority
KR
South Korea
Prior art keywords
value
residual block
transform
domain
block
Prior art date
Application number
KR1020140016864A
Other languages
English (en)
Other versions
KR20150095479A (ko
Inventor
정영범
권녕규
정요원
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140016864A priority Critical patent/KR102185857B1/ko
Priority to US14/616,902 priority patent/US9774871B2/en
Publication of KR20150095479A publication Critical patent/KR20150095479A/ko
Priority to US15/703,012 priority patent/US10609388B2/en
Application granted granted Critical
Publication of KR102185857B1 publication Critical patent/KR102185857B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/127—Prioritisation of hardware or computational resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264

Abstract

본 발명의 일 실시예에 따르면, 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 장치에 있어서, 상기 레지듀얼 블록의 공간 도메인에서의 제1 값을 계산하는 제1 값 계산부, 상기 제1 값의 크기에 따라 상기 레지듀얼 블록의 변환 도메인으로의 트랜스폼 여부를 결정하는 비교부, 및 상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 변환 도메인으로 트랜스폼하는 변환부를 포함하는 영상 부호화 장치가 제공된다.

Description

영상 부호화, 복호화 방법 및 장치{Method and apparatus for encoding and decoding image using modification of residual block}
본 발명은 영상 부호화, 복호화 방법 및 장치에 관한 것이다.
MPEG-1(Moving Picture Experts Group Phase 1), MPEG-2, MPEG-4 H.264/MPEG-4 AVC(Advanced Video coding)와 같은 영상 압축 방식에서는 영상을 부호화하기 위해 하나의 픽처를 복수의 매크로 블록들로 나눈다. 이후, 인터 예측(inter prediction) 또는 인트라 예측(intra prediction)을 이용해 각각의 매크로 블록을 예측 부호화한다. 인터 예측 또는 인트라 예측을 이용해 부호화하려는 현재 블록의 예측 블록을 생성하고, 현재 블록에서 예측 블록을 감산한 레지듀얼 블록만을 부호화하여 전송하는 것이다. 현재 블록에 포함된 각각의 픽셀들에 대한 픽셀 값을 그대로 부호화하지 아니하고, 예측 블록에 포함된 각각의 픽셀들에 대한 예측 값을 감산하여 부호화함으로써 부호화의 압축 효율을 향상시킨다.
레지듀얼 블록의 부호화는 주파수 영역으로의 변환(transform), 양자화 및 엔트로피 부호화 순으로 이루어지는데, HEVC(High Efficiency Video Coding) 표준에 따르면 주파수 영역으로의 변환은 생략(skip)될 수 있다. 기준 소프트웨어(Reference Software)를 이용하여 변환 생략 사용여부를 결정하는 경우, 율-왜곡 최적화(Rate-Distortion Optimization; RDO) 온(ON) 모드에서 압축 비용을 계산하게 되나, 이 경우 복잡한 복원(reconstruction) 과정을 모두 수행하여야 하는 문제점이 있다.
본 발명이 이루고자 하는 기술적인 과제는 개선된 영상 품질 및 RD 성능(Rate-Distortion performance)을 갖는 영상 부호화, 복호화 방법 및 장치를 제공하는 것이다.
본 발명의 일 실시예에 따르면, 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 방법에 있어서, 상기 레지듀얼 블록에 기초하여 제1 값을 생성하는 단계, 상기 제1 값을 제2 값과 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼(transform) 여부를 결정하는 단계, 및 상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 부호화하는 단계를 포함하는 영상 부호화 방법이 제공된다.
상기 영상 부호화 방법은 상기 레지듀얼 블록에 기초하여 상기 제2 값을 생성하는 단계를 더 포함하며, 상기 제1 값은 상기 레지듀얼 블록을 공간 도메인에서 제1 연산한 값이고, 상기 제2 값은 상기 레지듀얼 블록을 변환 도메인에서 제1 연산한 값일 수 있다.
상기 제1 값은 상기 레지듀얼 블록의 공간 도메인에서의 오차(difference) 값이며, 상기 제2 값은 상기 레지듀얼 블록의 변환 도메인에서의 오차(difference) 값일 수 있다.
상기 제1 값은 SAD(Sum of Absolute Differences)이고, 상기 제2 값은 SATD(Sum of Absolute Transformed Differences)일 수 있다.
상기 제1 값을 상기 제2 값과 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼(transform) 여부를 결정하는 단계는 수학식 1에 의해 결정되고, 상기 수학식 1은
Figure 112014014378417-pat00001
이며, 상기 DSD는 상기 제1 값이고, 상기 DTD는 상기 제2 값이며, 상기 α1, β1, α2 및 β2는 기설정된 값이며, 상기 수학식 1의 조건이 만족되지 않으면 상기 레지듀얼 블록을 트랜스폼하도록 결정하고, 상기 수학식 1의 조건이 만족되면 상기 레지듀얼 블록의 트랜스폼을 생략(skip)하도록 결정할 수 있다.
상기 제1 값은 상기 레지듀얼 블록의 공간 도메인에서의 분산이며, 상기 제2 값은 상기 레지듀얼 블록의 변환 도메인에서의 분산일 수 있다.
상기 제1 값 및 상기 제2 값을 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼(transform) 여부를 결정하는 단계는 상기 제1 값이 상기 제2 값보다 크면 상기 레지듀얼 블록의 트랜스폼을 생략하도록 결정하고, 상기 제1 값이 상기 제2 값보다 작으면 상기 레지듀얼 블록을 트랜스폼하도록 결정할 수 있다.
상기 변환 도메인은 상기 공간 도메인이 하다마드(Hadamard) 트랜스폼, DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform)에 따라 트랜스폼된 도메인일 수 있다.
상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 부호화하는 단계는 상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 트랜스폼하는 단계, 상기 트랜스폼된 레지듀얼 블록을 양자화하는 단계, 및 상기 양자화된 레지듀얼 블록을 엔트로피 코딩하는 단계를 포함할 수 있다.
본 발명의 다른 실시예에 따르면, 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 방법에 있어서, 상기 레지듀얼 블록의 공간 도메인에서의 제1 값을 계산하는 단계, 상기 제1 값을 기설정된 임계값과 비교하고, 비교 결과에 따라 상기 공간 도메인 및 변환 도메인 중 하나를 선택하는 단계, 및 상기 선택된 도메인에서 상기 레지듀얼 블록을 부호화하는 단계를 포함하는 영상 부호화 방법이 제공된다.
상기 제1 값은 분산일 수 있다.
상기 공간 도메인 및 상기 변환 도메인 중 하나를 선택하는 단계는 상기 제1 값이 상기 임계값보다 크면 상기 공간 도메인을 선택하고, 상기 제1 값이 상기 임계값보다 작으면 상기 변환 도메인을 선택할 수 있다.
상기 공간 도메인 및 상기 변환 도메인 중 하나를 선택하는 단계는 상기 제1 값이 상기 임계값보다 작으면 상기 레지듀얼 블록을 상기 변환 도메인으로 트랜스폼하도록 결정하고, 상기 제1 값이 상기 임계값보다 크면 상기 트랜스폼을 생략(skip)하도록 결정하는 단계를 포함할 수 있다.
상기 변환 도메인은 상기 공간 도메인이 하다마드(Hadamard) 트랜스폼, DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform)에 따라 트랜스폼된 도메인일 수 있다.
상기 선택된 도메인에서 상기 레지듀얼 블록을 부호화하는 단계는 상기 선택된 도메인에 따라 상기 레지듀얼 블록을 트랜스폼하는 단계, 상기 트랜스폼된 레지듀얼 블록을 양자화하는 단계, 및 상기 양자화된 레지듀얼 블록을 엔트로피 코딩하는 단계를 포함할 수 있다.
본 발명의 또 다른 실시예에 따르면, 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 장치에 있어서, 상기 레지듀얼 블록의 공간 도메인에서의 분산을 계산하는 공간 분산 계산부, 상기 레지듀얼 블록의 변환 도메인에서의 분산을 계산하는 변환 분산 계산부, 상기 공간 도메인에서의 분산 및 상기 변환 도메인에서의 분산을 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼 여부를 결정하는 비교부, 상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 상기 변환 도메인으로 트랜스폼하는 변환부, 상기 트랜스폼된 레지듀얼 블록을 양자화하는 양자화부, 및 상기 양자화된 레지듀얼 블록을 엔트로피 코딩하는 엔트로피 코딩부를 포함하는 영상 부호화 장치가 제공된다.
상기 변환부는 상기 공간 도메인에서의 분산이 상기 변환 도메인에서의 분산보다 크면 상기 레지듀얼 블록을 트랜스폼하지 않고, 상기 공간 도메인에서의 분산이 상기 변환 도메인에서의 분산보다 작으면 상기 레지듀얼 블록을 상기 변환 도메인으로 트랜스폼할 수 있다.
본 발명의 또 다른 실시예에 따르면, 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 장치에 있어서, 상기 레지듀얼 블록의 제1 도메인에서의 제1 값을 계산하는 제1 값 계산부, 상기 제1 값의 크기에 따라 상기 레지듀얼 블록의 상기 제1 도메인과 다른 제2 도메인으로의 트랜스폼 여부를 결정하는 비교부, 및 상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 상기 제2 도메인으로 트랜스폼하는 변환부를 포함하는 영상 부호화 장치가 제공된다.
상기 영상 부호화 장치는 상기 레지듀얼 블록의 상기 제2 도메인에서의 제2 값을 계산하는 제2 값 계산부를 더 포함하며, 상기 비교부는 상기 제1 값 및 상기 제2 값을 비교하고, 비교 결과에 따라 상기 트랜스폼 여부를 결정할 수 있다.
상기 제1 도메인은 공간 도메인이고, 상기 제2 도메인은 변환 도메인이며, 상기 제1 값은 SAD(Sum of Absolute Differences)이고, 상기 제2 값은 SATD(Sum of Absolute Transformed Differences)일 수 있다.
상기 제1 도메인은 공간 도메인이고, 상기 제2 도메인은 변환 도메인이며, 상기 제1 값 및 상기 제2 값은 분산일 수 있다.
상기 제1 값은 상기 레지듀얼 블록의 공간 도메인에서의 분산이고, 상기 비교부는 상기 제1 값 및 기설정된 제2 값의 크기를 비교하여 상기 트랜스폼 여부를 결정할 수 있다.
상기 영상 부호화 장치는 상기 트랜스폼된 레지듀얼 블록을 양자화하는 양자화부, 및 상기 양자화된 레지듀얼 블록을 엔트로피 코딩하는 엔트로피 코딩부를 더 포함할 수 있다.
본 발명의 또 다른 실시예에 따르면 상기 영상 부호화 장치를 포함하는 영상 복호화 장치가 제공된다.
본 발명의 또 다른 실시예에 따르면 상기 영상 부호화 장치를 포함하는 영상 처리 시스템이 제공된다.
본 발명의 실시예에 따르면 복잡한 복원 과정을 수행하지 않고 변환 생략 사용여부를 결정함으로써 영상 품질 및 RD 성능이 개선되는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 전자 시스템의 블록도이다.
도 2a는 도 1의 영상 부호화 장치의 일 실시예를 나타내는 블록도이다.
도 2b는 도 1의 영상 부호화 장치의 다른 실시예를 나타내는 블록도이다.
도 2c는 도 1의 영상 부호화 장치의 또 다른 실시예를 나타내는 블록도이다.
도 2d는 도 1의 영상 부호화 장치의 또 다른 실시예를 나타내는 블록도이다.
도 3은 도 2a 내지 도 2d의 변환 생략 결정부의 블록도이다.
도 4는 도 3의 변환 생략 결정부의 일 실시예를 나타내는 블록도이다.
도 5는 도 3의 변환 생략 결정부의 다른 실시예를 나타내는 블록도이다.
도 6은 도 3의 변환 생략 결정부의 또 다른 실시예를 나타내는 블록도이다.
도 7은 본 발명의 일 실시예에 따른 영상 복호화 장치의 블록도이다.
도 8은 본 발명의 실시예들에 따른 영상 부호화 방법을 나타내는 순서도이다.
도 9는 본 발명의 일 실시예에 따른 영상 부호화 방법을 나타내는 순서도이다.
도 10은 본 발명의 다른 실시예에 따른 영상 부호화 방법을 나타내는 순서도이다.
도 11은 도 1의 SoC를 포함하는 전자 시스템의 실시 예를 나타내는 블록도이다.
도 12는 도 2a 내지 도 2d의 영상 부호화 장치 중 하나를 포함하는 카메라 모듈의 블록도이다.
본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.
본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1구성요소는 제2구성요소로 명명될 수 있고, 유사하게 제2구성요소는 제1구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로써, 본 발명을 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 전자 시스템의 블록도이다.
도 1을 참조하면, 전자 시스템(10)은 이동 전화기, 스마트폰, 태블릿 컴퓨터(tablet computer), PDA(personal digital assistant), EDA(enterprise digital assistant), 디지털 스틸 카메라(digital still camera), 디지털 비디오 카메라(digital video camera), PMP(portable multimedia player), PDN(personal navigation device 또는 portable navigation device), 손으로 들고 다닐 수 있는 게임 콘솔(handheld game console), 또는 e-북(e-book)과 같이 손으로 들고 다닐 수 있는 장치(handheld device)로 구현될 수 있다.
전자 시스템(10)은 SoC(System-on Chip, 100), 메모리 장치(190) 및 디스플레이 장치(195)를 포함한다. SoC(100)는 중앙처리장치(Central Processing Unit; CPU, 110), ROM(Read Only Memory, 120), RAM(Random Access Memory, 130), 타이머(135), 그래픽 프로세싱 유닛(Graphics Processing Unit; GPU, 140), 클럭 관리부(Clock Management Unit; CMU, 145), 디스플레이 컨트롤러(Display Controller, 150), 코덱(Codec, 160), 메모리 인터페이스(Memory Interface, 170), 및 버스(180)를 포함한다. SoC(100)는 도시된 구성요소 외에도 다른 구성요소를 더 포함할 수 있다. 전자 시스템(10)은 또한 전원관리부(Power Management Unit; PMU, 175)를 더 포함할 수 있다.
도 1의 실시예에서는, PMU(175)는 SoC(100) 내에 구현되나, 다른 실시예에서는 PMU(175)가 SoC(100) 외부에 구현될 수 있다.
프로세서(processor)라고도 불릴 수 있는 CPU(110)는 메모리 장치(190)에 저장된 프로그램들 및/또는 데이터를 처리 또는 실행할 수 있다. 예컨대, CPU(110)는 클락 신호 발생기(미 도시)로부터 출력된 클락 신호에 응답하여 상기 프로그램들 및/또는 상기 데이터를 처리 또는 실행할 수 있다.
CPU(110)는 실시예에 따라 멀티-코어 프로세서(multi-core processor)로 구현될 수 있다. 상기 멀티-코어 프로세서는 두 개 또는 그 이상의 독립적인 실질적인 프로세서들('코어들(cores)'이라고 불림)을 갖는 하나의 컴퓨팅 컴포넌트(computing component)이고, 상기 프로세서들 각각은 프로그램 명령들(program instructions)을 읽고 실행할 수 있다. 상기 멀티-코어 프로세서는 다수의 가속기를 동시에 구동할 수 있으므로, 상기 멀티-코어 프로세서를 포함하는 데이터 처리 시스템은 멀티-가속(multi-acceleration)을 수행할 수 있다.
ROM(120), RAM(130), 및 메모리 장치(190)에 저장된 프로그램들 및/또는 데이터는 필요에 따라 CPU(110)의 메모리에 로드(load)될 수 있다.
ROM(120)은 영구적인 프로그램들 및/또는 데이터를 저장할 수 있다. ROM(120)은 EPROM(erasable programmable read-only memory) 또는 EEPROM(electrically erasable programmable read-only memory)으로 구현될 수 있다.
RAM(130)은 프로그램들, 데이터, 또는 명령들(instructions)을 일시적으로 저장할 수 있다. 예컨대, 메모리(120 또는 190)에 저장된 프로그램들 및/또는 데이터는 CPU(110)의 제어 또는 ROM(120)에 저장된 부팅 코드(booting code)에 따라 RAM(130)에 일시적으로 저장될 수 있다. RAM(130)은 실시예에 따라 DRAM(dynamic RAM) 또는 SRAM(static RAM)으로 구현될 수 있다.
GPU(140)는 메모리 컨트롤러(170)가 메모리 장치(190)로부터 리드(read)한 데이터를 디스플레이에 적합한 신호로 처리한다.
CMU(145)는 동작 클럭 신호를 생성하고 동작 클럭 신호 출력을 제어할 수 있다. CMU(145)는 위상 동기 루프 회로(Phase Locked Loop; PLL), 지연 동기 루프(Delayed Locked Loop; DLL), 수정자(crystal)등의 클럭 생성 장치 및 클럭 제어부를 포함할 수 있다. CMU(145)는 각 구성요소들(110, 120, 130, ... , 170)로 동작 클럭 신호를 공급할 수 있다.
메모리 인터페이스(170)는 메모리 장치(190)와 인터페이스하기 위한 블록이다. 메모리 인터페이스(170)는 메모리 장치(190)의 동작을 전반적으로 제어하며, 또한 호스트와 메모리 장치(190)간의 제반 데이터 교환을 제어한다. 예컨대, 메모리 인터페이스(170)는 호스트의 요청에 따라 메모리 장치(190)에 데이터를 쓰거나 메모리 장치(190)로부터 데이터를 독출한다.
여기서, 호스트는 CPU(110), GPU(140), 디스플레이 컨트롤러(150)와 같은 프로세싱 유닛일 수 있다.
메모리 장치(190)는 데이터를 저장하기 위한 저장 장소로서, OS(Operating System), 각종 프로그램들, 및 각종 데이터를 저장할 수 있다. 메모리 장치(190)는 DRAM일 수 있으나, 이에 한정되는 것은 아니다. 예컨대, 메모리 장치(190)는 비휘발성 메모리 장치(플래시 메모리, Phase-change RAM; PRAM, Magnetoresistive RAM; MRAM, Resistive RAM; ReRAM, 또는 Ferroelectric RAM; FeRAM 장치)일 수도 있다. 본 발명의 다른 실시예에서는 메모리 장치(190)는 SoC(100) 내부에 구비되는 내장 메모리일 수 있다.
각 구성 요소(110, 120, 130, 140, 150, 160, 170 및 175)는 버스(180)를 통하여 서로 통신할 수 있다.
디스플레이 디바이스(195)는 디스플레이 동기 신호를 생성하고, 상기 디스플레이 동기 신호에 따라 디스플레이 컨트롤러(150)로부터 출력된 출력 영상 신호를 디스플레이할 수 있다. 디스플레이 동기 신호는 수직동기 신호(Vertical Syncronization signal; VSYNC)일 수 있다. 디스플레이 디바이스(195)는 LCD(liquid crystal display), LED(light emitting diode), OLED(Organic LED), 또는 AMOLED(active-matrix OLED) 디바이스로 구현될 수 있다.
디스플레이 콘트롤러(150)는 디스플레이 디바이스(195)의 동작을 제어한다.
코덱(160)은 메모리(120, 130, 190) 또는 GPU(140)로부터 영상 신호를 수신하고, 영상 신호를 부호화 또는 복호화하여 출력할 수 있다. 코덱(160)은 영상 신호를 부호화하기 위한 영상 부호화 장치(encoder, 161) 및 영상 신호를 복호화하기 위한 영상 복호화 장치(decoder, 163)를 포함할 수 있다.
이하에서는 본 발명의 영상 부호화 장치(161) 및 영상 복호화 장치(163)가 SoC(100)의 코덱(160)에 포함되는 실시예에 대하여 설명하나, 본 발명의 범위가 이에 한정되는 것은 아니다. 다른 실시예에 따라, 영상 부호화 장치(161) 및 영상 복호화 장치(163) 중 하나만 SoC(100)에 포함될 수 있다. 또 다른 실시예에 따라, 영상 부호화 장치(161) 및 영상 복호화 장치(163) 중 적어도 하나는 도 1에 도시된 것과 다른 영상 처리 시스템에 포함될 수 있다.
도 2a는 도 1의 영상 부호화 장치의 일 실시예를 나타내는 블록도이다.
도 2a를 참조하면, 영상 부호화 장치(161a)는 예측부(202a), 프레임메모리(204), 감산부(205), 변환부(206), 양자화부(208), 엔트로피코딩부(210), 역양자화부(212), 역변환부(214), 가산부(215), 필터(216) 및 변환 생략 결정부(220)를 포함한다.
예측부(202a)는 인터 예측 또는 인트라 예측을 수행하여 부호화하려는 현재 블록(Fn)의 예측 블록(P)을 생성한다.
인터 예측의 경우 프레임메모리(204)에 저장되어 있는 참조 픽처(들)을 참조하여 현재 블록(Fn)과 유사한 블록을 검색하고, 검색된 블록이 현재 블록(Fn)의 예측 블록(P)이 된다. 인트라 예측의 경우에는 현재 블록(Fn)에 인접한 이전에 부호화된 블록들에 포함되어 있는 화소들을 이용하여 인트라 방향 예측(intra directional prediction)을 수행하여 현재 블록(Fn)의 예측 블록(P)을 생성한다.
감산부(205)는 현재 블록(Fn)에서 예측 블록(P)을 감산하여 레지듀얼 블록(Dn)을 생성한다.
변환부(206)는 레지듀얼 블록(Dn)을 주파수 영역으로 직교 변환(transform)할 수 있다. 즉 변환부(206)는 레지듀얼 블록에 포함된 각각의 픽셀에 대한 레지듀얼 값들을 변환하여 변환 계수를 생성할 수 있다.
예컨대 변환부(206)는 레지듀얼 블록에 포함된 각각의 픽셀에 대한 레지듀얼 값들을 이산 코사인 변환(discrete cosine transform; DCT)하여 이산 코사인 계수들을 생성할 수 있다. 그러나 본 발명의 변환이 DCT에 한정되는 것은 아니며 DCT 외에도 하다마드(Hadamard) 변환, DST(Discrete Sine Transform) 등이 이용될 수 있다.
양자화부(208)는 변환부(206)에서 생성된 이산 코사인 계수들을 소정의 양자화 계수(Qp)에 따라 양자화할 수 있다.
엔트로피코딩부(210)는 양자화된 이산 코사인 계수들(x)을 엔트로피 부호화하여 비트스트림에 삽입할 수 있다.
또한, 양자화된 이산 코사인 계수들(x)은 역양자화부(212)에서 역양자화된 후에, 역변환부(214)를 통해 레지듀얼 블록(Dn')으로 복원될 수 있다. 가산부(215)는 복원된 레지듀얼 블록(Dn')을 예측부(202a)에서 생성된 예측 블록(P)에 가산할 수 있다.
필터(216)는 가산된 블록(uF'n)을 디블록킹 필터링(deblocking filtering)하여 복원된 블록(F'n)을 생성할 수 있다. 복원된 블록(F'n)은 다음 블록의 인터 예측 또는 인트라 예측에 이용되기 위해 프레임메모리(204)에 저장될 수 있다.
변환 생략 결정부(220)는 감산부(205)에서 출력된 레지듀얼 블록(Dn)을 수신할 수 있다. 변환 생략 결정부(220)는 레지듀얼 블록(Dn)의 공간 도메인에서의 제1 값을 계산하고, 상기 제1 값의 크기에 따라 레지듀얼 블록(Dn)의 변환 도메인으로의 변환 여부를 결정할 수 있다.
일 실시예에 따라, 변환 생략 결정부(220)는 레지듀얼 블록(Dn)의 공간 도메인에서의 제1 값 및 제1 값에 상응하는 변환 도메인에서의 제2 값을 계산할 수 있다.
실시예에 따라 제1 값 및 제2 값은 왜곡(distortion) 값일 수 있다. 왜곡 값은 현재 블록(Fn) 및 예측 블록(P)의 차이에 기초하여 계산되는 값일 수 있다.
예컨대 제1 값은 SSD(Sum of Squared Differences) 또는 SAD(Sum of Absolute Differences)이고, 제2 값은 SATD(Sum of Absolute Transformed Differences)일 수 있다. 그러나 본 발명의 범위가 이에 한정되는 것은 아니며, 다른 실시예에 따라 제1 값 및 제2 값은 분산일 수 있다.
변환 생략 결정부(220)는 제1 값 및 제2 값을 비교할 수 있다.
다른 실시예에 따라, 변환 생략 결정부(220)는 레지듀얼 블록(Dn)의 공간 도메인에서의 제1 값을 적어도 하나의 기설정된 임계값과 비교할 수 있다.
실시예에 따라 제1 값은 분산일 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
변환 생략 결정부(220)는 비교 결과에 따라 변환 생략 신호(SK)를 생성할 수 있다. 변환 생략 신호(SK)는 레지듀얼 블록(Dn)의 변환 또는 역변환을 수행할지 여부에 관한 신호일 수 있다.
변환부(206)는 변환 생략 신호(SK)에 따라 변환을 생략하거나 변환을 수행할 수 있다. 변환이 생략되는 경우 레지듀얼 블록(Dn)은 공간 도메인에서 인코딩(예컨대 엔트로피코딩)될 수 있다. 변환이 생략되지 않는 경우 레지듀얼 블록(Dn)은 변환 도메인(예컨대 주파수 도메인)에서 인코딩될 수 있다. 이하에서는 레지듀얼 블록(Dn)의 인코딩이 수행되는 도메인을 코딩 도메인이라고 정의하기로 한다. 즉, 레지듀얼 블록(Dn)의 코딩 도메인은 공간 도메인 또는 변환 도메인일 수 있으며, 변환 생략 신호(SK)에 따라 결정될 수 있다.
실시예에 따라 엔트로피코딩부(210)는 변환 생략 신호(SK)를 엔트로피 부호화하여 비트스트림에 더 삽입할 수 있다.
역변환부(214) 또한 변환 생략 신호(SK)에 따라 역변환을 생략하거나 역변환을 수행할 수 있다.
도 2b는 도 1의 영상 부호화 장치의 다른 실시예를 나타내는 블록도이다. 도 2b의 영상 부호화 장치(161b)의 구성은 도 2a에 도시된 것과 대부분 동일하므로, 설명의 편의를 위해 이하에서 차이점을 위주로 설명한다.
도 2a 및 도 2b를 참조하면, 예측부(202b) 내에 변환 생략 결정부(220)가 포함될 수 있다.
예측부(202b)는 레지듀얼 블록(Dn)을 수신할 수 있다. 변환 생략 결정부(220)는 레지듀얼 블록(Dn)의 공간 도메인에서의 제1 값을 계산하고, 상기 제1 값의 크기에 따라 레지듀얼 블록(Dn)의 변환 도메인으로의 변환 여부를 결정하기 위한 변환 생략 신호(SK)를 생성할 수 있다.
도 2c는 도 1의 영상 부호화 장치의 또 다른 실시예를 나타내는 블록도이다. 도 2c의 영상 부호화 장치(161c)의 구성은 도 2a에 도시된 것과 대부분 동일하므로, 설명의 편의를 위해 이하에서 차이점을 위주로 설명한다.
도 2c를 참조하면, 변환 생략 결정부(220)는 변환부(206)에만 변환 생략 신호(SK)를 전달할 수 있다. 이후 변환부(206)에서 양자화부(208), 엔트로피 코딩부(210) 및 역양자화부(212)로 전달되는 신호에 변환 생략 여부 정보가 포함되어 전달될 수 있다.
도 2d는 도 1의 영상 부호화 장치의 또 다른 실시예를 나타내는 블록도이다. 도 2d의 영상 부호화 장치(161d)의 구성은 도 2b에 도시된 것과 대부분 동일하므로, 설명의 편의를 위해 이하에서 차이점을 위주로 설명한다.
도 2d를 참조하면, 변환 생략 결정부(220)는 변환부(206)에만 변환 생략 신호(SK)를 전달할 수 있다. 이후 변환부(206)에서 양자화부(208), 엔트로피 코딩부(210) 및 역양자화부(212)로 전달되는 신호에 변환 생략 여부 정보가 포함되어 전달될 수 있다.
도 3은 도 2a 내지 도 2d의 변환 생략 결정부의 블록도이다.
도 3을 참조하면, 변환 생략 결정부(220)는 비교값 생성부(221) 및 비교부(224)를 포함할 수 있다.
비교값 생성부(221)는 레지듀얼 블록(Dn)의 공간 도메인에서의 제1 값을 계산할 수 있다. 실시예에 따라 제1 값은 오차(difference) 또는 분산(variance)일 수 있으나, 본 발명의 실시예가 이에 한정되는 것은 아니다.
비교부(224)는 제1 값의 크기에 따라 레지듀얼 블록(Dn)의 변환 도메인으로의 변환 여부를 결정하기 위한 변환 생략 신호(SK)를 생성하여 출력할 수 있다.
실시예에 따라, 비교값 생성부(221)는 제1 값 및 제1 값과 비교하기 위한 제2 값을 비교부(224)로 출력할 수 있다. 비교부(224)는 제1 값 및 제2 값을 비교하고, 비교 결과에 따라 변환 생략 신호(SK)를 생성할 수 있다. 제2 값은 제1 값에 상응하는 레지듀얼 블록(Dn)의 변환 도메인에서의 값(예컨대 오차, 분산 등)이거나, 또는 기저장된 값일 수 있다.
도 4는 도 3의 변환 생략 결정부의 일 실시예를 나타내는 블록도이다.
도 2 및 도 4를 참조하면, 변환 생략 결정부(220a)는 비교값 생성부(221a) 및 비교부(224a)를 포함할 수 있다. 비교값 생성부(221a)는 공간 오차 계산부(222a) 및 변환 오차 계산부(226a)를 포함할 수 있다.
공간 왜곡 계산부(222a)는 레지듀얼 블록(Dn)의 공간 도메인에서의 공간 왜곡(DSD)을 계산할 수 있다. 공간 왜곡(DSD)은 SSD(Sum of Squared Differences) 또는 SAD(Sum of Absolute Differences)일 수 있다.
변환 왜곡 계산부(226a)는 레지듀얼 블록(Dn)의 변환 도메인에서의 변환 왜곡(DTD)을 계산할 수 있다. 변환 왜곡(DTD)은 SATD(Sum of Absolute Transformed Differences)일 수 있다.
변환 도메인은 공간 도메인이 하다마드(Hadamard) 변환, DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform)에 따라 변환된 도메인일 수 있다.
비교부(224a)는 공간 왜곡(DSD) 및 변환 왜곡(DTD)을 비교하고, 비교 결과에 따라 레지듀얼 블록(Dn)의 변환 도메인으로의 변환 여부를 결정할 수 있다. 예컨대 비교부(224a)는 비교 결과에 따라 변환 생략 여부를 나타내는 변환 생략 신호(SK)를 생성하여 출력할 수 있다.
비교부(224a)는 아래의 수학식 1에 따라 공간 왜곡(DSD) 및 변환 왜곡(DTD)을 비교하여 레지듀얼 블록(Dn)의 코딩 도메인을 결정할 수 있다.
Figure 112014014378417-pat00002
상기 수학식 1에서, α1, β1, α2 및 β2는 기설정된 값일 수 있다.
코딩 도메인은 상기 수학식 1의 조건이 만족되면 공간 도메인으로 결정되고, 수학식 1의 조건이 만족되지 않으면 변환 도메인으로 결정될 수 있다.
예컨대 비교부(224a)는 상기 수학식 1의 조건이 만족되지 않으면 변환 생략 신호(SK)를 제1 레벨로 설정하여 출력하고, 상기 수학식 1의 조건이 만족되면 변환 생략 신호(SK)를 제2 레벨로 설정하여 출력할 수 있다.
변환부(206)는 변환 생략 신호(SK)가 제1 레벨이면 레지듀얼 블록(Dn)을 변환 도메인으로 변환하여 출력하고, 변환 생략 신호(SK)가 제2 레벨이면 상기 변환을 생략(skip)하여, 변환되지 않은 레지듀얼 블록(Dn)을 출력할 수 있다.
도 5는 도 3의 변환 생략 결정부의 다른 실시예를 나타내는 블록도이다.
도 5를 참조하면, 변환 생략 결정부(220b)는 비교값 생성부(221b) 및 비교부(224b)를 포함할 수 있다. 비교값 생성부(221b)는 공간 분산 계산부(222b) 및 변환 분산 계산부(226b)를 포함할 수 있다.
공간 분산 계산부(222b)는 레지듀얼 블록(Dn)의 공간 도메인에서의 분산(VSD, 이하 공간 분산이라 칭함)을 계산할 수 있다.
변환 분산 계산부(226b)는 레지듀얼 블록(Dn)의 변환 도메인에서의 분산(VTD, 이하 변환 분산이라 칭함)을 계산할 수 있다.
변환 도메인은 공간 도메인이 하다마드(Hadamard) 변환, DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform)에 따라 변환된 도메인일 수 있다.
비교부(224b)는 공간 분산(VSD) 및 변환 분산(VTD)을 비교하고, 비교 결과에 따라 레지듀얼 블록(Dn)의 변환 도메인으로의 변환 여부를 결정할 수 있다. 예컨대 비교부(224a)는 비교 결과에 따라 변환 생략 여부를 나타내는 변환 생략 신호(SK)를 생성하여 출력할 수 있다.
비교부(224b)는 공간 분산(VSD)이 변환 분산(VTD)보다 작으면 레지듀얼 블록(Dn)을 변환 도메인으로 변환하도록 결정하고, 공간 분산(VSD)이 변환 분산(VTD)보다 크면 상기 변환을 생략하도록 결정할 수 있다.
도 6은 도 3의 변환 생략 결정부의 또 다른 실시예를 나타내는 블록도이다.
도 6을 참조하면, 변환 생략 결정부(220c)는 비교값 생성부(221c) 및 비교부(224c)를 포함할 수 있다. 비교값 생성부(221c)는 공간 분산 계산부(222c) 및 임계값 저장부(226c)를 포함할 수 있다.
공간 분산 계산부(222c)는 레지듀얼 블록(Dn)의 공간 도메인에서의 공간 분산(VSD)을 계산할 수 있다.
임계값 저장부(226c)는 기설정된 임계값(TH)을 저장할 수 있다. 실시예에 따라 임계값(TH)은 기저장된 값 또는 외부 입력에 의해 가변되는 값일 수 있다.
비교부(224c)는 분산(VSD)을 임계값(TH)과 비교하고, 비교 결과에 따라 레지듀얼 블록(Dn)의 코딩 도메인을 결정할 수 있다. 즉, 비교부(224c)는 비교 결과에 따라 레지듀얼 블록(Dn)의 주파수 영역으로의 변환 여부를 결정할 수 있다.
상기 코딩 도메인은 분산(VSD)이 임계값(TH)보다 크면 공간 도메인으로 결정되고, 분산(VSD)이 임계값(TH)보다 작으면 변환 도메인으로 결정될 수 있다.
비교부(224c)는 비교 결과에 따라 변환 생략 여부를 나타내는 변환 생략 신호(SK)를 생성하여 출력할 수 있다.
도 7은 본 발명의 일 실시예에 따른 영상 복호화 장치의 블록도이다.
도 7을 참조하면, 영상 복호화 장치(300)는 예측부(302), 프레임메모리(304), 엔트로피디코더(308), 역양자화부(310), 역변환부(312), 가산부(314) 및 필터(316)를 포함할 수 있다.
예측부(302)는 복호화하려는 현재 블록의 예측 블록(P)을 인터 예측 또는 인트라 예측을 수행하여 생성할 수 있다.
예측부(302)는 프레임메모리(304)에 저장되어 있는 참조 픽처(들) 또는 현재 블록에 인접한 이전에 부호화된 블록들에 포함되어 있는 화소들을 이용하여 인터 예측 또는 인트라 예측을 수행할 수 있다.
엔트로피디코더(308)는 외부로부터 비트스트림(BIT_STR)을 수신할 수 있다. 비트스트림(BIT_STR)는 변환 생략 여부에 관한 정보, 예컨대 부호화된 변환 생략 신호(SK)를 포함할 수 있다.
엔트로피디코더(308)는 비트스트림(BIT_STR)에 대하여 엔트로피 복호화를 수행하여 변환 계수를 생성할 수 있다.
역양자화부(310)는 엔트로피디코더(308)에서 엔트로피 복호화하여 생성된 변환 계수들을 역양자화할 수 있다.
역변환부(310)는 변환 생략 신호(SK)에 따라 역양자화부(310)에서 역양자화된 변환 계수들을 역변환하여 복원된 레지듀얼 블록(Dn')을 생성할 수 있다.
역변환부(310)는 변환 생략 신호(SK)가 제1 레벨이면 상기 역양자화된 변환 계수를 역변환하고, 변환 생략 신호(SK)가 제2 레벨이면 상기 역변환을 생략할 수 있다.
실시예에 따라, 상기 역변환은 하다마드(Hadamard) 변환, DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform) 중 하나의 역변환일 수 있다.
가산부(314)는 복원된 레지듀얼 블록(Dn') 및 예측부(302)가 생성한 예측 블록(P)을 가산하여 현재 블록(Fn')을 복원할 수 있다.
복원된 현재 블록(Fn')은 필터(316)에서 디블록킹 필터링된 후에 다음 픽처 또는 다음 블록의 예측에 이용되기 위해 프레임메모리(304)에 저장될 수 있다.
도 8은 본 발명의 일 실시예에 따른 영상 부호화 방법을 나타내는 순서도이다.
도 2a, 도 4 및 도 8을 참조하면, 예측부(202a) 및 감산부(205)는 현재 블록(Fn)의 예측 블록(P)을 생성하고, 현재 블록(Fn)에서 예측 블록(P)을 감산하여 현재 블록(Fn)의 레지듀얼 블록(Dn)을 생성할 수 있다(S11).
공간 오차 계산부(222a)는 레지듀얼 블록(Dn)의 공간 도메인에서의 공간 오차(DSD) 값을 계산할 수 있다(S13).
변환 오차 계산부(226a)는 레지듀얼 블록(Dn)의 변환 도메인에서의 변환 오차(DTD) 값을 계산할 수 있다(S15).
비교부(224a)는 공간 오차(DSD) 값 및 변환 오차(DTD) 값을 비교하고, 비교 결과에 따라 레지듀얼 블록(Dn)의 트랜스폼(transform) 여부를 결정할 수 있다(S17).
변환부(206)는 상기 트랜스폼 여부에 따라 레지듀얼 블록(Dn)을 변환 도메인으로 트랜스폼할 수 있다(S19).
도 9는 본 발명의 다른 실시예에 따른 영상 부호화 방법을 나타내는 순서도이다.
도 2a, 도 5 및 도 9를 참조하면, 예측부(202a) 및 감산부(205)는 현재 블록(Fn)의 예측 블록(P)을 생성하고, 현재 블록(Fn)에서 예측 블록(P)을 감산하여 현재 블록(Fn)의 레지듀얼 블록(Dn)을 생성할 수 있다(S21).
공간 분산 계산부(222b)는 레지듀얼 블록(Dn)의 공간 도메인에서의 공간 분산(VSD) 값을 계산할 수 있다(S23).
변환 분산 계산부(226b)는 레지듀얼 블록(Dn)의 변환 도메인에서의 변환 분산(VTD) 값을 계산할 수 있다(S25).
비교부(224b)는 공간 분산(VSD) 값 및 변환 분산(VTD) 값을 비교하고, 비교 결과에 따라 레지듀얼 블록(Dn)의 트랜스폼 여부를 결정할 수 있다(S27).
변환부(206)는 상기 트랜스폼 여부에 따라 레지듀얼 블록(Dn)을 변환 도메인으로 트랜스폼할 수 있다(S29).
도 10은 본 발명의 또 다른 실시예에 따른 영상 부호화 방법을 나타내는 순서도이다.
도 2a, 도 6 및 도 10를 참조하면, 예측부(202a) 및 감산부(205)는 현재 블록(Fn)의 예측 블록(P)을 생성하고, 현재 블록(Fn)에서 예측 블록(P)을 감산하여 현재 블록(Fn)의 레지듀얼 블록(Dn)을 생성할 수 있다(S31).
공간 분산 계산부(222c)는 레지듀얼 블록(Dn)의 공간 도메인에서의 공간 분산(VSD) 값을 계산할 수 있다(S33).
비교부(224c)는 공간 분산(VSD) 값을 기설정된 임계값(TH)과 비교하고, 비교 결과에 따라 레지듀얼 블록(Dn)의 트랜스폼 여부를 결정할 수 있다(S35).
변환부(206)는 상기 트랜스폼 여부에 따라 레지듀얼 블록(Dn)을 변환 도메인으로 트랜스폼할 수 있다(S37).
도 11은 도 1의 SoC를 포함하는 전자 시스템의 실시 예를 나타내는 블록도이다.
도 11을 참조하면, 전자 시스템은 PC(personal computer) 또는 데이터 서버(200), 랩탑(laptop) 컴퓨터(300) 또는 휴대용 장치(400)로 구현될 수 있다. 휴대용 장치(400)는 이동 전화기, 스마트 폰(smart phone), 태블릿 (tablet) PC, PDA(personal digital assistant), EDA(enterprise digital assistant), 디지털 스틸 카메라(digital still camera), 디지털 비디오 카메라(digital video camera), PMP(portable multimedia player), PDN(personal navigation device 또는 portable navigation device), 휴대용 게임 콘솔(handheld game console), 또는 e-북(e-book)으로 구현될 수 있다.
전자 시스템(200, 300, 400)은 SoC(100), 파워 소스(410), 저장 장치(420), 메모리(430), 입출력 포트들(440), 확장 카드(450), 네트워크 장치(460), 및 디스플레이(470)를 포함한다. 실시 예에 따라. 전자 시스템(200, 300, 400)은 카메라 모듈(480)을 더 포함할 수 있다.
SoC(100)는 도 1에 도시된 SoC(100)를 의미한다. SoC(100)는 구성 요소들(elements; 410~480) 중에서 적어도 하나의 동작을 제어할 수 있다.
파워 소스(410)는 구성 요소들(100 및 420~480) 중에서 적어도 하나로 동작 전압을 공급할 수 있다.
저장 장치(420)는 하드디스크 드라이브(hard disk drive) 또는 SSD(solid state drive)로 구현될 수 있다.
메모리(430)는 휘발성 메모리 또는 불휘발성 메모리로 구현될 수 있으며, 도 1의 메모리 장치(190)에 해당할 수 있다. 실시 예에 따라, 메모리(430)에 대한 데이터 액세스 동작, 예컨대, 리드 동작, 라이트 동작(또는 프로그램 동작), 또는 이레이즈 동작을 제어할 수 있는 메모리 컨트롤러는 프로세서(100)에 집적 또는 내장될 수 있다. 다른 실시 예에 따라, 상기 메모리 컨트롤러는 프로세서(100)와 메모리(430) 사이에 구현될 수 있다.
입출력 포트들(440)은 전자 시스템(200, 300, 400)으로 데이터를 전송하거나 또는 전자 시스템(200, 300, 400)으로부터 출력된 데이터를 외부 장치로 전송할 수 있는 포트들을 의미한다. 예컨대, 입출력 포트들(440)은 컴퓨터 마우스와 같은 포인팅 장치(pointing device)를 접속하기 위한 포트, 프린터를 접속하기 위한 포트, 또는 USB 드라이브를 접속하기 위한 포트일 수 있다.
확장 카드(450)는 SD(secure digital) 카드 또는 MMC(multimedia card)로 구현될 수 있다. 실시 예에 따라, 확장 카드(450)는 SIM(Subscriber Identification Module) 카드 또는 USIM(Universal Subscriber Identity Module) 카드일 수 있다.
네트워크 장치(460)는 전자 시스템(200, 300, 400)을 유선 네트워크 또는 무선 네트워크에 접속시킬 수 있는 장치를 의미한다.
디스플레이(470)는 저장 장치(420), 메모리(430), 입출력 포트들(440), 확장 카드(450), 또는 네트워크 장치(460)로부터 출력된 데이터를 디스플레이할 수 있다.
카메라 모듈(480)은 광학 이미지를 전기적인 이미지로 변환할 수 있는 모듈을 의미한다. 따라서, 카메라 모듈(480)로부터 출력된 전기적인 이미지는 저장 장치(420), 메모리(430), 또는 확장 카드(450)에 저장될 수 있다. 또한, 카메라 모듈 (480)로부터 출력된 전기적인 이미지는 디스플레이(420)를 통하여 디스플레이될 수 있다.
도 12는 도 2a 내지 도 2d의 영상 부호화 장치 중 하나를 포함하는 카메라 모듈의 블록도이다.
도 12를 참고하면, 카메라 모듈(500)은 이미지 센서(510), 영상신호 처리부(520), 제1 메모리 장치(530), 인코더(540), 스케일러(550), 제2 메모리 장치(560), 제어부(570), 및 시스템 버스(580)를 포함한다.
이미지 센서(510)는 렌즈를 통해 들어온 광학 신호를 전기적 신호로 변환하여 풀 사이즈(full size) 이미지 데이터를 발생한다. 이때, 상기 풀 사이즈 이미지 데이터라 함은 실제 픽셀 사이즈를 의미한다.
영상신호 처리부(520)는 이미지 센서(510)로부터 출력된 풀 사이즈 이미지 데이터를 보정한다.
예컨대, 영상신호 처리부(520)는 상기 이미지 데이터를 떨림 보정 또는 색조 보정을 하며, 상기 이미지 데이터의 화이트 밸런스를 맞춘다. 이때, 상기 떨림 보정을 위하여 DIS(Digital Image Stabilization) 방식, EIS(Electrical Image Stabilization) 방식 또는 OIS(Optical Image Stabilization) 방식이 사용될 수 있다.
제1 메모리 장치(530)는 상기 영상신호 처리부(520)로부터 시스템 버스(580)를 통해 상기 이미지 데이터를 주기적으로 입력받아 저장한다. 또한, 제1 메모리 장치(530)는 상기 이미지 데이터를 여러 포맷으로 저장할 수 있다. 예컨대, 상기 제1 메모리 장치(530)는 상기 이미지 데이터를, CMYK, HSV, CIE 또는 YUV(아날로그 전송 방식인 YPbPr 및 디지털 전송 방식인 YCbCr) 포맷 등으로 저장할 수 있다.
인코더(540)는 도 2a의 영상 부호화 장치(161a) 또는 도 2b의 영상 부호화 장치(161b)일 수 있다.
실시예에 따라 인코더(540)는 셔터 개방 시점(예컨대, 사용자가 셔터를 누르는 시점)에 제1 메모리 장치(530)에 저장된 상기 이미지 데이터를 시스템 버스(580)를 통해 입력받아 미리 정해진 포맷의 압축파일로 변환할 수 있으나 본 발명의 범위가 이에 한정되는 것은 아니다. 예컨대, 상기 인코더(540)는 상기 제1 메모리 장치(530)에 저장된 YCbCR 포맷을 JPEG 파일로 변환할 수 있다.
스케일러(550)는 제1 메모리 장치(530)로부터 출력된 이미지를 상기 시스템 버스(580)를 통해 입력받아 크기 조정을 한다. 이때, 스케일러(550)는 연결된 디스플레이 장치(600)에 출력되기에 적합한 크기로 상기 이미지를 크기 조정할 수 있다.
제2 메모리 장치(560)는 상기 셔터 개방 시점에 상기 인코더(540)에서 변환된 JPEG 파일을 저장한다. 이때, 제2 메모리 장치(560)는 제1 인터페이스부(미도시)를 통하여 별도의 메모리에 상기 JPEG 파일을 전송할 수 있다.
도 12에서는 상기 제2 메모리 장치(560)가 상기 카메라 모듈(500) 내에 포함되는 것으로 도시하였으나, 본 발명의 범위가 이에 한정되는 것은 아니다. 예컨대, 상기 제2 메모리 장치(560)는 별도의 저장장치(예컨대, 외부 NAND 플래시)에 해당할 수 있다.
제어부(570)는 제1 메모리 장치(530)에 저장된 이미지 데이터(예컨대, YCbCr 포맷 데이터)를 인코더(540)로 출력하도록 제어할 수 있다.
제어부(570)는 카메라 모듈(500)의 내부 또는 외부에 위치할 수 있고, 다용도입출력포트(GPIO, general purpose input/output) 또는 아날로그-디지털 컨버터(A/D convertor)를 통해 구현될 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
또한, 제어부(570)는 제1 메모리 장치(530)에 저장되는 여러 포맷의 이미지 데이터가 동시에 저장되도록 제어할 수 있다.
카메라 모듈(500)은 휴대폰 카메라, DSLR(Digital Single-Lens Reflex) 카메라 또는 SLR(Single-Lens Reflex) 카메라 등에 적용될 수 있다.
본 발명의 실시예에 따르면 복잡한 복원 과정을 수행하지 않고 변환 생략 사용여부를 결정함으로써 영상 품질 및 RD(Rate-Distortion performance) 성능이 개선되는 효과가 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.
컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 본 발명에 따른 객체 정보 추정 방법을 수행하기 위한 프로그램 코드는 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 전송될 수도 있다.
또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
본 발명은 도면에 도시된 일 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.
전자 시스템(1), SoC(100), 메모리 장치(190), 디스플레이 장치(195)
CPU(110), ROM(120), RAM(130), 타이머(135), GPU(140), CMU(145),
디스플레이 컨트롤러(150), 메모리 인터페이스(170), PMU(175), 버스(180)
코덱(160)

Claims (20)

  1. 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 방법에 있어서,
    상기 현재 블록에 기초하여 예측 블록을 생성하고, 그리고 상기 현재 블록 및 상기 생성된 예측 블록의 차이에 기초하여 상기 레지듀얼 블록을 생성하는 단계;
    상기 레지듀얼 블록에 기초하여 제1 값을 생성하는 단계;
    상기 제1 값을 제2 값과 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼(transform) 여부를 결정하는 단계; 및
    상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 부호화하는 단계를 포함하되,
    상기 제1 값은 상기 레지듀얼 블록의 공간 도메인에서의 오차(Difference) 값 또는 분산 중 어느 하나인 영상 부호화 방법.
  2. 제1항에 있어서, 상기 영상 부호화 방법은
    상기 레지듀얼 블록에 기초하여 상기 제2 값을 생성하는 단계를 더 포함하며,
    상기 제1 값은
    상기 레지듀얼 블록을 공간 도메인에서 제1 연산한 값이고,
    상기 제2 값은
    상기 레지듀얼 블록을 변환 도메인에서 제1 연산한 값인 영상 부호화 방법.
  3. 제2항에 있어서,
    상기 제2 값은
    상기 레지듀얼 블록의 변환 도메인에서의 오차(difference) 값인 영상 부호화 방법.
  4. 제3항에 있어서, 상기 제1 값은
    SAD(Sum of Absolute Differences)이고,
    상기 제2 값은
    SATD(Sum of Absolute Transformed Differences)인 영상 부호화 방법.
  5. 제3항에 있어서,
    상기 제1 값이 레지듀얼 블록의 공간 도메인에서의 오차 값인 경우,
    상기 제1 값을 상기 제2 값과 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼(transform) 여부를 결정하는 단계는
    수학식 1에 의해 결정되고,
    상기 수학식 1은
    Figure 112020050812170-pat00003

    이며,
    상기 DSD는 상기 제1 값이고, 상기 DTD는 상기 제2 값이며, 상기 α1, β1, α2 및 β2는 기설정된 값이며,
    상기 수학식 1의 조건이 만족되지 않으면 상기 레지듀얼 블록을 트랜스폼하도록 결정하고, 상기 수학식 1의 조건이 만족되면 상기 레지듀얼 블록의 트랜스폼을 생략(skip)하도록 결정하는 영상 부호화 방법.
  6. 제2항에 있어서,
    상기 제2 값은
    상기 레지듀얼 블록의 변환 도메인에서의 분산인 영상 부호화 방법.
  7. 제6항에 있어서,
    상기 제1 값이 분산인 경우,
    상기 제1 값 및 상기 제2 값을 비교하고, 비교 결과에 따라 상기 레지듀얼 블록의 트랜스폼(transform) 여부를 결정하는 단계는
    상기 제1 값이 상기 제2 값보다 크면 상기 레지듀얼 블록의 트랜스폼을 생략하도록 결정하고, 상기 제1 값이 상기 제2 값보다 작으면 상기 레지듀얼 블록을 트랜스폼하도록 결정하는 영상 부호화 방법.
  8. 제2항에 있어서, 상기 변환 도메인은
    상기 공간 도메인이 하다마드(Hadamard) 트랜스폼, DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform)에 따라 트랜스폼된 도메인인 영상 부호화 방법.
  9. 제1항에 있어서, 상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 부호화하는 단계는
    상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 트랜스폼하는 단계;
    상기 트랜스폼된 레지듀얼 블록을 양자화하는 단계; 및
    상기 양자화된 레지듀얼 블록을 엔트로피 코딩하는 단계를 포함하는 영상 부호화 방법.
  10. 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 방법에 있어서,
    상기 현재 블록에 기초하여 예측 블록을 생성하고, 그리고 상기 현재 블록 및 상기 생성된 예측 블록의 차이에 기초하여 상기 레지듀얼 블록을 생성하는 단계;
    상기 레지듀얼 블록의 공간 도메인에서의 제1 값을 계산하는 단계;
    상기 제1 값을 기설정된 임계값과 비교하고, 비교 결과에 따라 상기 공간 도메인 및 변환 도메인 중 하나를 선택하는 단계; 및
    상기 선택된 도메인에서 상기 레지듀얼 블록을 부호화하는 단계를 포함하되,
    상기 제1 값은 분산인 영상 부호화 방법.
  11. 삭제
  12. 제10항에 있어서, 상기 공간 도메인 및 상기 변환 도메인 중 하나를 선택하는 단계는
    상기 제1 값이 상기 임계값보다 크면 상기 공간 도메인을 선택하고, 상기 제1 값이 상기 임계값보다 작으면 상기 변환 도메인을 선택하는 영상 부호화 방법.
  13. 제10항에 있어서, 상기 공간 도메인 및 상기 변환 도메인 중 하나를 선택하는 단계는
    상기 제1 값이 상기 임계값보다 작으면 상기 레지듀얼 블록을 상기 변환 도메인으로 트랜스폼하도록 결정하고, 상기 제1 값이 상기 임계값보다 크면 상기 트랜스폼을 생략(skip)하도록 결정하는 단계를 포함하는 영상 부호화 방법.
  14. 현재 블록의 레지듀얼 블록을 부호화하는 SoC(System-on Chip) 기반의 영상 부호화 장치에 있어서,
    상기 레지듀얼 블록의 제1 도메인에서의 제1 값을 계산하는 제1 값 계산부;
    상기 제1 값의 크기에 따라 상기 레지듀얼 블록의 상기 제1 도메인과 다른 제2 도메인으로의 트랜스폼 여부를 결정하는 비교부; 및
    상기 트랜스폼 여부에 따라 상기 레지듀얼 블록을 상기 제2 도메인으로 트랜스폼하는 변환부를 포함하되,
    상기 제1 도메인은 공간 도메인이고,
    상기 제1 값은 오차(Difference) 값 또는 분산 중 어느 하나이고, 그리고
    상기 레지듀얼 블록은 상기 현재 블록에 기초하여 생성된 예측 블록 및 상기 현재 블록의 차에 기초하여 생성되는 영상 부호화 장치.
  15. 제14항에 있어서, 상기 영상 부호화 장치는
    상기 레지듀얼 블록의 상기 제2 도메인에서의 제2 값을 계산하는 제2 값 계산부를 더 포함하며,
    상기 비교부는
    상기 제1 값 및 상기 제2 값을 비교하고, 비교 결과에 따라 상기 트랜스폼 여부를 결정하는 영상 부호화 장치.
  16. 제15항에 있어서,
    상기 제2 도메인은
    변환 도메인이며,
    상기 제1 값은
    SAD(Sum of Absolute Differences)이고,
    상기 제2 값은
    SATD(Sum of Absolute Transformed Differences)인 영상 부호화 장치.
  17. 제15항에 있어서,
    상기 제2 도메인은
    변환 도메인이며,
    상기 제1 값 및 상기 제2 값은 분산인 영상 부호화 장치.
  18. 제14항에 있어서, 상기 제1 값이
    상기 레지듀얼 블록의 공간 도메인에서의 분산인 경우,
    상기 비교부는
    상기 제1 값 및 기설정된 제2 값의 크기를 비교하여 상기 트랜스폼 여부를 결정하는 영상 부호화 장치.
  19. 제14항에 있어서, 상기 영상 부호화 장치는
    상기 트랜스폼된 레지듀얼 블록을 양자화하는 양자화부; 및
    상기 양자화된 레지듀얼 블록을 엔트로피 코딩하는 엔트로피 코딩부를 더 포함하는 영상 부호화 장치.
  20. 제14항의 영상 부호화 장치를 포함하는 영상 처리 시스템.
KR1020140016864A 2014-02-13 2014-02-13 영상 부호화, 복호화 방법 및 장치 KR102185857B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140016864A KR102185857B1 (ko) 2014-02-13 2014-02-13 영상 부호화, 복호화 방법 및 장치
US14/616,902 US9774871B2 (en) 2014-02-13 2015-02-09 Method and apparatus for encoding and decoding image
US15/703,012 US10609388B2 (en) 2014-02-13 2017-09-13 Method and apparatus for encoding and decoding image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140016864A KR102185857B1 (ko) 2014-02-13 2014-02-13 영상 부호화, 복호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150095479A KR20150095479A (ko) 2015-08-21
KR102185857B1 true KR102185857B1 (ko) 2020-12-02

Family

ID=53776105

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140016864A KR102185857B1 (ko) 2014-02-13 2014-02-13 영상 부호화, 복호화 방법 및 장치

Country Status (2)

Country Link
US (2) US9774871B2 (ko)
KR (1) KR102185857B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150228106A1 (en) * 2014-02-13 2015-08-13 Vixs Systems Inc. Low latency video texture mapping via tight integration of codec engine with 3d graphics engine
CN113141505B (zh) * 2020-01-19 2023-09-15 阿里巴巴集团控股有限公司 一种视频数据编码方法以及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007503784A (ja) * 2003-05-20 2007-02-22 アーエムテー アドバンスド マルチメディア テクノロジー アクティエボラーグ ハイブリッドビデオ圧縮法
US20080151999A1 (en) * 2006-12-22 2008-06-26 Sony Corporation Bypass using sum of absolute transformed differences value (SATD) in a video coding process

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
KR100846769B1 (ko) 2002-02-19 2008-07-16 삼성전자주식회사 고정 연산량을 갖는 동영상 부호화 방법 및 그 장치
GB0229354D0 (en) 2002-12-18 2003-01-22 Robert Gordon The University Video encoding
US7944965B2 (en) 2005-12-19 2011-05-17 Seiko Epson Corporation Transform domain based distortion cost estimation
KR100771640B1 (ko) 2007-04-24 2007-10-30 주식회사세오 고속 모드 결정 기능을 구비한 ｈ.２６４ 인코더
KR101353301B1 (ko) * 2008-04-11 2014-01-21 에스케이 텔레콤주식회사 인트라 예측 모드 결정 방법 및 그 장치와 이를 이용한영상 부호화/복호화 방법 및 그 장치
US9288495B2 (en) * 2009-11-24 2016-03-15 Sk Telecom Co., Ltd. Adaptive secondary prediction-based image encoding/decoding method, device and recording medium
KR101130733B1 (ko) 2010-02-19 2012-03-28 연세대학교 산학협력단 매크로 블록의 부호화 모드 결정 방법 및 그 장치
KR101099257B1 (ko) 2010-03-12 2011-12-27 호서대학교 산학협력단 Ｈ.264/ａｖｃ에서 매크로 블록의 부호화 모드 고속 결정방법
GB2492333B (en) 2011-06-27 2018-12-12 British Broadcasting Corp Video encoding and decoding using transforms
MX358516B (es) 2011-10-19 2018-08-24 Kt Corp Método y aparato para codificar/decodificar imágenes.
US10390046B2 (en) 2011-11-07 2019-08-20 Qualcomm Incorporated Coding significant coefficient information in transform skip mode
KR20130055773A (ko) 2011-11-21 2013-05-29 한국전자통신연구원 부호화 방법 및 장치
US9148667B2 (en) * 2013-02-06 2015-09-29 Qualcomm Incorporated Intra prediction mode decision with reduced storage

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007503784A (ja) * 2003-05-20 2007-02-22 アーエムテー アドバンスド マルチメディア テクノロジー アクティエボラーグ ハイブリッドビデオ圧縮法
US20080151999A1 (en) * 2006-12-22 2008-06-26 Sony Corporation Bypass using sum of absolute transformed differences value (SATD) in a video coding process

Also Published As

Publication number Publication date
US9774871B2 (en) 2017-09-26
US20150229969A1 (en) 2015-08-13
US20180007369A1 (en) 2018-01-04
US10609388B2 (en) 2020-03-31
KR20150095479A (ko) 2015-08-21

Similar Documents

Publication Publication Date Title
US10291925B2 (en) Techniques for hardware video encoding
WO2017041551A1 (zh) 基于spice协议的图像传输方法及装置
KR102365685B1 (ko) 인코더의 작동 방법과 상기 인코더를 포함하는 장치들
KR102503900B1 (ko) 양자화 파라미터를 적응적으로 결정하는 인코더 및 이를 포함하는 애플리케이션 프로세서
US9055182B2 (en) Image coding apparatus, image coding method, and program
CN109672890B (zh) 视频编码器件及编码器
US20150189297A1 (en) Device and method for intra-encoding image blocks, storage medium carrying and use of a processing device for decoding intra-encoded image blocks
KR102185857B1 (ko) 영상 부호화, 복호화 방법 및 장치
US10412386B2 (en) System on chip and data processing system including the same
US10623779B2 (en) Method for processing image using dynamic range of color component, and device therefor
US8655088B2 (en) Image encoder, image decoder and method for encoding original image data
KR102423880B1 (ko) 인코더의 작동방법과 상기 인코더를 포함하는 시스템 온 칩의 작동 방법
CN102685483B (zh) 解码方法
TWI785073B (zh) 多重轉碼器編碼器及多重轉碼器編碼系統
US9729880B2 (en) Information processing apparatus, information processing method, and storage medium
US20230012862A1 (en) Bit-rate-based variable accuracy level of encoding
US20230010681A1 (en) Bit-rate-based hybrid encoding on video hardware assisted central processing units
WO2021054437A1 (ja) 画像処理装置および画像処理方法
US20230027742A1 (en) Complexity aware encoding
CN116233469A (zh) 低频不可分离变换和多重变换选择死锁预防
KR20160067580A (ko) 영상 데이터의 인코딩 방법, 상기 방법을 이용한 인코더, 및 상기 인코더를 포함하는 애플리케이션 프로세서
KR20160061172A (ko) 디코더, 상기 디코더를 포함하는 디코딩 시스템, 및 상기 디코더의 동작 방법
WO2016198364A1 (en) Method and device for obtaining color difference components for color picture data

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant