KR101893946B1 - 트랜스코딩 방법 및 장치 - Google Patents

트랜스코딩 방법 및 장치 Download PDF

Info

Publication number
KR101893946B1
KR101893946B1 KR1020160016535A KR20160016535A KR101893946B1 KR 101893946 B1 KR101893946 B1 KR 101893946B1 KR 1020160016535 A KR1020160016535 A KR 1020160016535A KR 20160016535 A KR20160016535 A KR 20160016535A KR 101893946 B1 KR101893946 B1 KR 101893946B1
Authority
KR
South Korea
Prior art keywords
prediction
frame image
prediction block
intra
macroblock
Prior art date
Application number
KR1020160016535A
Other languages
English (en)
Other versions
KR20170095043A (ko
Inventor
정동훈
Original Assignee
엔쓰리엔 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔쓰리엔 주식회사 filed Critical 엔쓰리엔 주식회사
Priority to KR1020160016535A priority Critical patent/KR101893946B1/ko
Publication of KR20170095043A publication Critical patent/KR20170095043A/ko
Application granted granted Critical
Publication of KR101893946B1 publication Critical patent/KR101893946B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction

Abstract

본 발명은 제 1 크기의 제 1 프레임 영상을 제 2 크기의 제 2 프레임 영상으로 트랜스코딩하는 장치를 개시하고 있다. 상기 장치는 상기 제 1 프레임 영상을 수신하여 디코딩을 수행하는 디코딩부 및 디코딩시의 인트라 및 인터 예측 정보를 수신하여 상기 제 2 프레임 영상으로 인코딩을 수행하는 인코딩부를 포함하되, 상기 인코딩부는 상기 제 1 프레임 영상의 (i) 매크로블록(MB: Macroblock) 정보 및 (ii) 예측 블록(PB: Prediction Block)의 인트라 또는 인터 예측 정보 중 적어도 하나에 가중치를 적용하여 산출된 값을 기반으로 상기 제 2 프레임 영상을 인코딩한다.

Description

트랜스코딩 방법 및 장치{TRANSCODING METHOD AND APPARATUS}
본 발명은 트랜스코딩 방법 및 장치에 관한 것으로, 보다 상세하게는, 개선된 속도로 동영상을 트랜스코딩할 수 있는 데이터 트랜스코딩 방법 및 장치에 관한 것이다.
트랜스코딩(transcoding)은 특정 코덱에서 다른 코덱으로 변환시에, 프레임 레이트의 변환시에, 또는 프레임의 크기 변환시에 사용되는 기술이다.
MPEG(Moving Picture Experts Group)은 여러 포맷의 코덱 기술을 제공하고 있다. 특정 MPEG의 코덱 기술을 통해 압축된 비디오 콘텐츠(예컨대, 영화, 스포츠, 콘서트 등)가 서로 다른 MPEG 코덱 기술을 사용하는 수신측으로 전송되어야 하는 경우, 최초 압축된 코덱 기술을 통해 비디오 콘텐츠를 디코딩하였다가, 다른 MPEG 코덱을 이용하여 인코딩하는 트랜스코딩 과정을 거쳐야 한다. 예컨대, MPEG-2로 압축 부호화된 비디오 콘텐츠를 MPEG-4 코덱으로 전송해야 한다면, MPEG-2 코덱을 통해 디코딩한 후, 다시 MPEG-4 코덱으로 압축부호화하여야 한다.
이러한 코덱 간 트랜스코딩 이외에 입력 비트스트림과 출력 비트스트림의 사이즈 변환을 위한 트랜스코딩이 존재한다. 이때도 역시, 디코딩 및 인코딩 과정을 포함할 수 있다. 이는 동일 코덱 간에 수행될 수도 있고, 서로 다른 코덱 간에 수행될 수도 있다.
다만, 이러한 사이즈 변환을 위한 트랜스코딩의 경우, 입력 비트스트림의 디코딩 및 출력 비트스트림의 인코딩이 개별적으로 수행됨으로 인해, 인트라/인터(intra/inter) 예측 부분이 차지하는 시간 및 비용(cost)이 많이 들고 트랜스코딩의 효율이 떨어지는 문제점이 있다.
상술한 문제점을 해결하기 위한 본 발명의 일 실시예에 따른 목적은 동영상 디코딩 과정에서 알 수 있는 매크로블록(MB: MacroBlock) 타입과 인트라/인터 예측값을 동영상 압축 과정에서 그대로 사용하여 트랜스코딩 시간을 줄일 수 있는 트랜스코딩 방법 및 장치를 제공하는 것이다.
상기한 목적을 달성하기 위한 본 발명의 일 양태에 따른 제 1 크기의 제 1 프레임 영상을 제 2 크기의 제 2 프레임 영상으로 트랜스코딩하는 장치는 상기 제 1 프레임 영상을 수신하여 디코딩을 수행하는 디코딩부 및 디코딩시의 인트라 및 인터 예측 정보를 수신하여 상기 제 2 프레임 영상으로 인코딩을 수행하는 인코딩부를 포함하되, 상기 인코딩부는 상기 제 1 프레임 영상의 (i) 매크로블록(MB: Macroblock) 정보 및 (ii) 예측 블록(PB: Prediction Block)의 인트라 또는 인터 예측 정보 중 적어도 하나에 가중치를 적용하여 산출된 값을 기반으로 상기 제 2 프레임 영상을 인코딩할 수 있다.
상기 인코딩부는 상기 제 2 프레임 영상의 예측 블록의 인코딩시 상기 산출된 값을 기반으로 별도의 인트라 및 인터 예측 과정을 생략하고 인코딩을 수행할 수 있다.
상기 제 2 프레임 영상의 매크로블록 타입은 상기 제 2 프레임 영상의 매크로블록 내에 포함되는 제 1 프레임 영상의 매크로블록의 타입 값의 가중 평균치를 기반으로 결정될 수 있다.
상기 제 2 프레임 영상의 예측 블록의 인트라 및 인터 예측값은 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 또는 예측 블록의 인트라 및 인터 예측값의 가중 평균치를 기반으로 결정될 수 있다.
상기 예측 블록이 인트라 예측 모드로 인코딩되는 경우, 상기 예측 블록의 인트라 예측 모드에 따른 벡터는 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 또는 예측 블록의 인트라 예측 모드에 따른 방향성을 갖는 벡터 값 및 상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출될 수 있다.
상기 예측 블록이 인터 예측 모드로 인코딩되는 경우, 상기 예측 블록의 모션 벡터(MV: Motion Vector)는, 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 또는 예측 블록의 모션 벡터 값 및 상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출될 수 있다.
상기 예측 블록내에 포함된 제 1 프레임 영상의 매크로 또는 예측 블록이 인트라 모드와 인터 모드의 블록을 함께 포함하는 경우, 상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 또는 예측 블록별로 차지하는 면적 비율에 따른 가중치가 높은 쪽의 예측 모드를 사용할 수 있다
상기 예측 블록은 매크로 블록일 수 있다.
상기한 목적을 달성하기 위한 본 발명의 일 양태에 따른 제 1 크기의 제 1 프레임 영상을 제 2 크기의 제 2 프레임 영상으로 트랜스코딩하는 방법은 디코딩부가 상기 제 1 프레임 영상을 수신하여 디코딩을 수행하는 단계 및 인코딩부가 디코딩시의 인트라 및 인터 예측 정보를 수신하여 상기 제 2 프레임 영상으로 인코딩을 수행하는 단계를 포함하되, 상기 인코딩 단계는 상기 제 1 프레임 영상의 (i) 매크로블록(MB: Macroblock) 정보 및 (ii) 예측 블록(PB: Prediction Block)의 인트라 또는 인터 예측 정보 중 적어도 하나에 가중치를 적용하여 산출된 값을 기반으로 상기 제 2 프레임 영상을 인코딩하는 단계를 포함할 수 있다.
상기 인코딩 단계는 상기 제 2 프레임 영상의 예측 블록의 인코딩시 상기 산출된 값을 기반으로 별도의 인트라 및 인터 예측 과정을 생략하고 인코딩을 수행하는 단계를 포함할 수 있다.
상기 제 2 프레임 영상의 매크로블록 타입은 상기 제 2 프레임 영상의 매크로블록 내에 포함되는 제 1 프레임 영상의 매크로블록의 타입 값의 가중 평균치를 기반으로 결정될 수 있다.
상기 예측 블록이 인트라 예측 모드로 인코딩되는 경우, 상기 예측 블록의 인트라 예측 모드에 따른 벡터는 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 또는 예측 블록의 인트라 예측 모드에 따른 방향성을 갖는 벡터 값 및 상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출될 수 있다.
상기 예측 블록이 인터 예측 모드로 인코딩되는 경우, 상기 예측 블록의 모션 벡터(MV: Motion Vector)는, 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 또는 예측 블록의 모션 벡터 값 및 상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출될 수 있다.
상기 예측 블록내에 포함된 제 1 프레임 영상의 매크로 또는 예측 블록이 인트라 모드와 인터 모드의 블록을 함께 포함하는 경우, 상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 또는 예측 블록별로 차지하는 면적 비율에 따른 가중치가 높은 쪽의 예측 모드를 사용할 수 있다
상기 예측 블록은 매크로 블록일 수 있다.
본 발명의 일 실시예에 따른 트랜스코딩 방법 및 장치에 따르면, 트랜스코딩의 상당 시간 및 비용을 차지하는 동영상 압축 과정에서의 인트라/인터 예측부분의 시간 및 비용을 절감하여 효율적인 디코딩 및 인코딩이 이루어지도록 하는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 트랜스코딩 장치의 구성을 개략적으로 나타낸 블록도,
도 2는 본 발명의 일 실시예에 따른 트랜스코딩 장치의 디코딩부의 구성을 구체적으로 나타낸 상세블록도,
도 3은 본 발명의 일 실시예에 따른 트랜스코딩 장치의 인코딩부의 구성을 구체적으로 나타낸 상세블록도,
도 4는 사이즈 변환을 위한 트랜스코딩을 위해 변환되는 블록 단위를 설명하기 위한 개념도,
도 5는 도 4의 좌측 상단 블록을 확대한 도면,
도 6은 매크로블록 타입을 설명하기 위한 도면,
도 7a 및 7b는 4x4 블록의 인트라 예측의 여러 모드에 따른 방향성 벡터를 나타낸 도면,
도 8a 및 8b는 16x16 블록의 인트라 예측의 여러 모드에 따른 방향성 벡터를 나타낸 도면이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일 실시예에 따른 트랜스코딩 장치의 구성을 개략적으로 나타낸 블록도이다. 도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 트랜스코딩 장치(100)는 디코딩부(110) 및 인코딩부(120)를 포함할 수 있다.
도 1을 참조하면, 디코딩부(110)는 트랜스코딩 대상 영상 프레임을 입력받아 특정 포맷에 맞게 디코딩한다. 디코딩부(110)는 HEVC(High Efficiency Video Coding: H.265), AVC(Advanced Video Coding: H.264), H.263, H.262, H.261, MPEG-1, MPEG-2, MPEG-4, WebM 코덱, VC-1, VP46, VP7, WMV, AMV, AVS 등의 코덱 기술을 통해 디코딩을 수행할 수 있다. 본 명세서에서는 H.264/AVC를 기준으로 설명한다. 즉, 본 발명의 실시예에서는, 동일한 코덱 표준에 사이즈 변경을 위한 트랜스코딩을 실시예로 설명하나 반드시 이에 한정되는 것은 아니다.
디코딩부(110)는 입력 영상의 디코딩시에 인트라 및/또는 인터 예측값들을 획득할 수 있다. 인트라/인터 예측 및 잔차값의 복원을 통해 디코딩을 수행할 수 있는데, 이러한 인트라/인터 예측값은 인코딩의 편의를 위해 인코딩부(120)로 전송될 수 있다. 도면에는 디코딩된 영상 프레임 비트스트림과 인트라/인터 예측 정보가 별도로 전송되는 것으로 표시되고 있으나, 반드시 그래야 하는 것은 아니고, 디코딩된 비트스트림에 포함되어 인코딩부(120)로 전송될 수도 있다.
인코딩부(120)는 디코딩된 비트스트림 프레임을 기반으로 특정 포맷 및 특정 사이즈로 인코딩을 수행할 수 있다. 이때, 인코딩 역시, 앞서 설명한 다수의 표준 기술을 기반으로 인코딩을 수행할 수 있다. 본 실시예에서는, H.264/AVC의 디코딩시의 예측정보를 받아 H.264/AVC 포맷으로 인코딩하는 것을 기준으로 설명한다. 즉, 디코딩부(110)로부터 H.264/AVC에 대한 인트라/인터 예측 값 및/또는 매크로블록 관련 정보를 수신하여 별도의 예측 과정을 수행하지 않고 원하는 포맷 및/또는 사이즈로 인코딩을 수행할 수 있다. 특히, 사이즈 변환시, 원본 사이즈보다 더 작은 사이즈로의 변환을 원할 때, 예컨대, 1280 x 720 사이즈에서 720 x 480 사이즈로 변환시, 변환된 사이즈에 따른 매크로블록(및/또는 예측 블록)은 변환 전 매크로블록을 다수 개 포함할 수 있다. 따라서, 이러한 경우, 변환 전 매크로블록의 타입 정보 및/또는 예측 블록의 예측 값을 그대로 사용할 수 없다. 이러한 경우에 적절하게 매크로블록 타입 정보 및/또는 인트라/인터 예측값을 활용하는 과정을 상세히 살펴본다.
본 명세서 상에서, 유닛(unit) 및/또는 블록(block)은 영상 인코딩 및 디코딩의 단위를 의미한다. 영상 인코딩 및 디코딩 시 인코딩 혹은 디코딩 단위는, 영상을 분할하여 인코딩 혹은 디코딩 할 때 그 분할된 단위를 의미하므로, 매크로 블록(MB: MacroBlock), 코딩 블록(CB: Coding Block), 예측 블록(PB: Prediction Block), 변환 블록(TB: Transform Block) 등으로 불릴 수 있다. 또한, 후술되는 실시예들에서 블록은 유닛으로도 지칭될 수 있다. 하나의 유닛은 크기가 더 작은 하위 유닛으로 더 분할될 수 있다.
도 2는 본 발명의 일 실시예에 따른 트랜스코딩 장치의 디코딩부의 구성을 구체적으로 나타낸 상세블록도이다. 도 2에 도시된 바와 같이, 상기 디코딩부(200)는 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인트라 예측부(240), 움직임 보상부(250), 가산기(255), 필터부(260) 및 참조 픽쳐 버퍼(270)를 포함한다.
디코딩부(200)는 인트라 모드 또는 인터 모드로 디코딩을 수행하고 재구성된 영상, 즉 복원 영상을 출력할 수 있다. 인트라 예측은 화면 내 예측, 인터 예측은 화면 간 예측을 의미한다. 인트라 모드인 경우 스위치가 인트라로 전환되고, 인터 모드인 경우 스위치가 인터로 전환될 수 있다. 디코딩부(200)는 입력 받은 비트스트림으로부터 잔차 블록(residual block)을 얻고 예측 블록을 생성한 후 잔차 블록과 예측 블록을 더하여 재구성된 블록, 즉 복원 블록을 생성할 수 있다.
엔트로피 복호화부(210)는, 입력된 비트스트림을 확률 분포에 따라 엔트로피 복호화하여, 양자화된 계수(quantized coefficient) 형태의 심볼을 포함한 심볼들을 생성할 수 있다. 엔트로피 복호화 방법은 상술한 엔트로피 부호화 방법과 유사하다.
엔트로피 복호화 방법이 적용되는 경우, 높은 발생 확률을 갖는 심볼에 적은 수의 비트가 할당되고 낮은 발생 확률을 갖는 심볼에 많은 수의 비트가 할당되어 심볼이 표현됨으로써, 각 심볼들에 대한 비트열의 크기가 감소될 수 있다. 따라서 엔트로피 복호화 방법을 통해서 영상 복호화의 압축 성능이 높아질 수 있다.
양자화된 계수는 역양자화부(220)에서 역양자화되고 역변환부(230)에서 역변환되며, 양자화된 계수가 역양자화/역변환 된 결과, 잔차 블록(residual block)이 생성될 수 있다.
인트라 모드인 경우, 인트라 예측부(240)는 현재 블록 주변의 이미 부호화된 블록의 픽셀값을 이용하여 공간적 예측을 수행하여 예측 블록을 생성할 수 있다. 이때, 본 발명의 일 실시예에 따르면, 인트라 예측부(240)는 인트라 예측 정보를 별도로 인코더측으로 전송하여, 인코더의 예측시 사용되도록 할 수 있다.
인터 모드인 경우, 움직임 보상부(250)는 모션 벡터(MV: Motion Vector) 및 참조 픽쳐 버퍼(270)에 저장되어 있는 참조 영상을 이용하여 움직임 보상을 수행함으로써 예측 블록을 생성할 수 있다. 움직임 보상부(250)는 모션 벡터 정보를 포함하는 인터 정보를 인코딩부 측으로 전송할 수 있다.
이렇게 전송되는 인터/인트라 예측 정보에는 매크로블록 및/또는 예측 블록의 타입과 관련된 정보가 포함될 수 있다.
잔차 블록과 예측 블록은 가산기(255)를 통해 더해지고, 더해진 블록은 필터부(260)를 거칠 수 있다. 필터부(260)는 디블록킹 필터, SAO, ALF 중 적어도 하나 이상을 복원 블록 또는 복원 픽쳐에 적용할 수 있다. 필터부(260)는 재구성된 영상, 즉 복원 영상을 출력할 수 있다. 복원 영상은 참조 픽쳐 버퍼(270)에 저장되어 인터 예측에 사용될 수 있다.
도 3은 본 발명의 일 실시예에 따른 트랜스코딩 장치의 인코딩부의 구성을 구체적으로 나타낸 상세블록도이다.도 3에 도시된 바와 같이, 인코딩부(300)는 움직임 예측부(311), 움직임 보상부(312), 인트라 예측부(320), 스위치(315), 감산기(325), 변환부(330), 양자화부(340), 엔트로피 부호화부(350), 역양자화부(360), 역변환부(370), 가산기(375), 필터부(380) 및 참조 픽쳐 버퍼(390)를 포함한다.
인코딩부(300)는 디코딩부(200)로부터 전송되는 인트라/인터 예측 정보 및 추가 블록 관련 정보를 기반으로 디코딩된 입력 영상에 대해 인트라(intra) 모드 또는 인터(inter) 모드로 인코딩를 수행하고 비트스트림을 출력할 수 있다. 이때, 변환된 프레임 사이즈를 반영하여 블록 크기를 크게 또는 작게 조정할 수 있다. 이를 위해 별도의 프레임 사이즈 컨버터(미도시)를 배치할 수 있다.
인트라 모드인 경우 스위치(315)가 인트라로 전환되고, 인터 모드인 경우 스위치(315)가 인터로 전환될 수 있다. 인코딩부(300)는 입력 영상의 입력 블록에 대한 예측 블록을 생성한 후, 입력 블록과 예측 블록의 차분(residual)을 부호화할 수 있다.
인트라 모드인 경우, 인트라 예측부(320)는 현재 블록 주변의 이미 부호화된 블록의 픽셀값을 이용하여 공간적 예측을 수행하여 예측 블록을 생성할 수 있다. 이때, 본 발명의 일 실시예에 따르면, 인트라 예측부(320)는 디코딩부(200)로부터 제공된 인트라 정보를 통해 해당 블록(예컨대, 매크로 블록 및/또는 예측 블록) 내에 포함되는 변환 전 프레임의 매크로블록 및/또는 예측 블록의 인트라 예측에 따른 벡터의 방향 값의 평균치를 계산할 수 있고, 이에 따라 예측 모드를 결정하는 등의 과정을 생략하고 계산된 평균치에 기반하여 해당 블록의 인트라 예측을 수행할 수 있다.
인터 모드인 경우, 움직임 예측부(311)는, 움직임 예측 과정에서 참조 픽쳐 버퍼(390)에 저장되어 있는 참조 영상에서 입력 블록과 가장 매치가 잘 되는 영역을 찾아 모션 벡터를 구할 수 있다. 다만, 본 발명의 일 실시예에 따르면, 디코딩부(200)로부터의 인터 정보(각 예측블록(또는 매크로블록)의 모션 벡터 값을 포함함)가 움직임 보상부(312)로 전달되어 움직임 예측부(311)의 움직임 예측 과정을 거치지 않고 변환 후 매크로블록 내에 포함된 변환 전 예측블록 및/또는 매크로블록의 모션벡터 값을 기반으로 움직임 보상이 수행될 수 있다. 따라서, 별도의 움직임 예측부(311)의 구성이 없어도 상관없다.
다만, 디코딩부(200)로부터의 인터 예측을 위한 모션 벡터 값은 바로 인코딩부(300)의 움직임 보상부(312)에 적용될 수 없는 경우가 있는데, 디코딩부(200)로부터의 모션 벡터값의 가중평균치를 산출하기 위해 움직임 예측부(311)가 존재할 수 있고, 움직임 예측부(311)는 수신되는 모션 벡터 값들의 가중평균치를 산출하여 움직임 보상부(312)로 전달하는 기능을 수행할 수 있다. 다만, 이러한 가중 평균치 계산은 움직임 보상부(312)에서 직접 수행할 수도 있다.
이렇게, 디코딩부(200)로부터의 인트라/인터 예측 정보를 이용하여 인코딩부(300)에서 인트라/인터 예측을 수행할 수 있도록 하기 위해서는, 인코딩부(300)에서 특정 블록의 매크로블록 타입을 결정하는 것이 중요할 수 있는데, 이를 위해 디코딩부(200)로부터의 인트라 및/또는 인터 예측 정보에는 상기 매크로블록 타입 정보가 포함될 수 있다. 또는 매크로블록 타입 정보는 별도로 인트라 예측부(320) 또는 움직임 보상부(312)로 제공될 수 있다.
움직임 보상부(312)는 이렇게 획득된 모션 벡터를 이용하여 움직임 보상을 수행함으로써 예측 블록을 생성할 수 있다. 여기서, 모션 벡터는 인터 예측에 사용되는 2차원 벡터이며, 현재 부호화/복호화 대상 영상과 참조 영상 사이의 오프셋을 나타낼 수 있다. 참조영상 픽처 값 등도 디코딩부로부터의 인터예측 정보에 포함되어 인코딩시에 그대로 사용가능하다.
감산기(325)는 입력 블록과 생성된 예측 블록의 차분에 의해 잔차 블록(residual block)을 생성할 수 있다. 변환부(330)는 잔차 블록에 대해 변환(transform)을 수행하여 변환 계수(transform coefficient)를 출력할 수 있다. 그리고 양자화부(340)는 입력된 변환 계수를 양자화 파라미터에 따라 양자화하여 양자화된 계수(quantized coefficient)를 출력할 수 있다.
엔트로피 부호화부(350)는, 양자화부(340)에서 산출된 값들 또는 부호화 과정에서 산출된 부호화 파라미터 값 등을 기초로 엔트로피 부호화를 수행하여 비트스트림(bit stream)을 출력할 수 있다.
엔트로피 부호화가 적용되는 경우, 높은 발생 확률을 갖는 심볼(symbol)에 적은 수의 비트가 할당되고 낮은 발생 확률을 갖는 심볼에 많은 수의 비트가 할당되어 심볼이 표현됨으로써, 부호화 대상 심볼들에 대한 비트열의 크기가 감소될 수 있다. 따라서 엔트로피 부호화를 통해서 영상 부호화의 압축 성능이 높아질 수 있다. 엔트로피 부호화부(350)는 엔트로피 부호화를 위해 지수 골룸(exponential golomb), CAVLC(Context-Adaptive Variable Length Coding), CABAC(Context-Adaptive Binary Arithmetic Coding)과 같은 부호화 방법을 사용할 수 있다.
도 3의 실시예에 따른 인코딩부(300)는 인터 예측 부호화, 즉 화면 간 예측 부호화를 수행하므로, 현재 부호화된 영상은 참조 영상으로 사용되기 위해 복호화되어 저장될 필요가 있다. 따라서 양자화된 계수는 역양자화부(360)에서 역양자화되고 역변환부(370)에서 역변환된다. 역양자화, 역변환된 계수는 가산기(375)를 통해 예측 블록과 더해지고 복원 블록이 생성된다.
복원 블록은 필터부(380)를 거치고, 필터부(380)는 디블록킹 필터(deblocking filter), SAO(Sample Adaptive Offset), ALF(Adaptive Loop Filter) 중 적어도 하나 이상을 복원 블록 또는 복원 픽쳐에 적용할 수 있다. 필터부(380)는 적응적 인루프(in-loop) 필터로 불릴 수도 있다. 디블록킹 필터는 블록 간의 경계에 생긴 블록 왜곡을 제거할 수 있다. SAO는 코딩 에러를 보상하기 위해 픽셀값에 적정 오프셋(offset) 값을 더해줄 수 있다. ALF는 복원된 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. 필터부(380)를 거친 복원 블록은 참조 픽쳐 버퍼(390)에 저장될 수 있다.
도 2 및 도 3의 실시예에서 상술한 바와 같이, 인코딩부(300) 및 디코딩부(200)는 현재 픽쳐 내의 픽셀 정보를 기초로 인트라 예측을 수행하여 예측 블록을 생성할 수 있다. 즉, 인트라 예측 수행 시에 인코딩부(300) 및 디코딩부(200)는 적어도 하나의 복원된 참조 픽셀을 기반으로 방향성 예측 및/또는 비방향성 예측을 수행할 수 있다. 여기서, 예측 블록은 인트라 예측 수행 결과 생성된 블록을 의미할 수 있다. 상기 예측 블록은 매크로블록(MB), 부호화 유닛(CU), 예측 유닛(PU) 및 변환 유닛(TU) 중에서 적어도 하나에 해당될 수 있다. 또한, 상기 예측 블록은 2x2, 4x4, 8x8, 16x16, 32x32 또는 64x64 등의 크기를 갖는 정사각형 모양의 블록일 수 있고, 2x8, 4x8, 2x16, 4x16, 8x16 등의 크기를 갖는 직사각형 모양의 블록일 수도 있다.
본 발명의 실시예에 따르면, 상기 예측 블록은 H.264/AVC의 실시예로써, 4x4 및/또는 16x16 블록을 예로 들어 설명한다.
다만, 위의 디코딩부(200) 및 인코딩부(300)는 H.265 및/또는 H.264 기반의 코덱 표준을 고려하여 설명되고 있으나, 각 표준에 맞게 일부 변형되어 디코딩 및 인코딩이 이루어질 수 있음은 당업자에게 있어서 자명한 사실이다.
도 4는 사이즈 변환을 위한 트랜스코딩을 위해 변환되는 블록 단위를 설명하기 위한 개념도이다.
도 4를 참조하면, 제 1 사이즈(원본 프레임의 사이즈)에서 제 2 사이즈(출력 프레임의 사이즈)로 동영상의 화상 크기를 변환시키는 트랜스코딩이 필요한 경우, 제 1 사이즈의 제 1 프레임은 제 2 사이즈의 제 2 프레임으로 변환되고, 제 2 프레임의 예측블록(이는 매크로블록일 수 있음) 내에는 복수 개의 제 1 프레임 매크로 블록이 포함될 수 있다. 도 4의 실시예에서는, 점선으로 표시되는 영상이 원본 화상(제 1 프레임)이고, 실선으로 표시된 영상이 크기가 줄어든(트랜스코딩된) 화상(제 2 프레임)이다. 특히, 도 4의 실시예에 따르면, 제 2 프레임 매크로블록(410)은 제 1 프레임의 16x16 매크로블록(420)도 포함하고 있고, 제 1 프레임의 4x4 매크로블록(430)도 포함하고 있다.
본 발명의 실시예에 따르면, 크기가 줄어든 제 2 프레임의 매크로블록(410)의 매크로블록 타입(type: 유형)은 그 안에 포함된 변환 전 매크로블록들(420, 430)의 매크로블록 타입의 가중 평균치로 결정될 수 있다. 이는 다음의 도 5를 통해 보다 상세히 설명한다.
도 5는 도 4의 좌측 상단 블록을 확대한 도면이다.
도 5를 참조하면, 제 2 프레임의 예측블록(510: 매크로블록일 수 있음, 이하 매크로블록으로 설명함)은 그 안에 복수 개의 제 1 프레임의 16x16의 매크로블록(520, 522, 524) 및 4x4의 매크로블록(526, 528, 530, 532)을 포함하고 있다. 이때, 제 2 프레임의 예측블록(510)의 매크로블록 타입은 변환 전 제 1 프레임의 매크로블록들(520, 522, 524, 526, 528, 530, 532)의 가중치 평균으로 결정될 수 있다. 이를 도 6을 참조하여 설명하면 다음과 같다.
매크로블록 타입 결정
도 6은 매크로블록 타입을 설명하기 위한 도면이다. 이는 H.264/AVC의 실시예를 든 것인데 반드시 이에 한정되는 것은 아니다.
도 6을 참조하면, 매크로블록 유형은 16x16, 16x8, 8x16 및 8x8이 존재할 수 있다. 그리고, 8x8인 경우, 서브 매크로블록의 유형으로 8x8, 4x8, 8x4, 4x4의 형태로 나뉘어질 수 있다.
인터 예측을 통한 움직임 보상의 경우, 이전에 부호화된 프레임으로부터 움직임을 추정하여 현재 블록을 예측할 수 있는데, 이 경우에는 움직임 보상을 위한 블록의 크기가 8x8 화소보다 클 경우, 참조픽처번호와 모션 벡터를 움직임 보상 블록마다 부호화할 수 있다. 본 발명의 일 실시예에 따르면, 디코딩부로부터의 인터예측 정보에는 매크로블록의 크기(타입 정보), 인터예측을 식별하는 정보, 및/또는 모션 벡터 정보가 포함될 수 있다. 이때 매크로블록 타입 정보와 관련하여, 움직임 보상 블록의 크기가 8x8 화소보다 작을 경우, 우선 서브 MB 타입에서 블록 타입을 표시하고, 서브 매크로블록마다 부호화할 수 있다. 이러한 원리에 의해, 디코딩부에서는 인터 예측의 경우, 매크로블록 타입 정보를 8x8보다 클 경우, 16x16, 16x8, 8x16 중 하나로 부호화하고, 8x8보다 작을 경우, 매크로블록 유형은 8x8로 하되, 서브 매크로블록 타입에서 4x8, 8x4, 4x4 중 하나로 표시하여 해당 매크로블록의 유형을 파악할 수 있도록 할 수 있다.
또한, 인트라 예측의 경우, 디코딩부로부터의 인트라 예측 정보에는 16x16 매크로블록의 화면 내 예측인지, 4x4 매크로블록의 화면내 예측인지에 대한 정보가 포함될 수 있다.
이렇듯, 인트라 및/또는 인터 정보에는 변환 전 제 1 프레임의 매크로블록 타입 정보가 포함될 수 있다. 또는 별도로 제공되는 매크로블록 타입 정보를 이용할 수도 있다.
다시 도 5로 돌아가서, 인코딩부는 변환 후 제 2 프레임에서의 매크로블록(510)의 타입을 변환 전 제 1 프레임에서의 매크로블록들(520, 522, 524, 526, 528, 530, 532)의 가중치 평균을 통해 구할 수 있고, 이 경우, 각 매크로블록들의 면적비율이 가중치로써 사용될 수 있다. 즉, 매크로블록(520)은 전체 매크로블록(510)에서 매크로블록(520)의 차지하는 면적 비율로써 가중치 값(w1)이 결정될 수 있다. 매크로블록(522)은 매크로블록(520)과 같은 16x16 매크로블록이나 매크로블록(510) 내에서 차지하는 면적(일부가 잘렸기 때문)은 다르기 때문에, 매크로블록(520)보다 작은 면적에 기반하여 가중치 값(w2)가 결정될 수 있다. 매크로블록(526)은 4x4 매크로블록으로 그 크기가 작고 그 면적에 해당하는 가중치 값(w4)을 가질 수 있다. 이러한 면적비에 따른 가중치 값은 추후 인트라 예측에서의 모드 결정뿐만 아니라 인터 모드에서의 모션벡터 결정에도 사용될 수 있다.
각 매크로블록의 가중치 값과 유형 정보 값을 곱하여 모든 매크로블록의 가중치와 유형 정보 값의 곱을 모두 더한 다음, 그 값을 평균 내서 해당 매크로블록의 타입을 결정할 수 있다.
또는, 동일한 타입을 나타내는 매크로블록들의 가중치 값의 합이 특정 임계값 이상을 나타내는 경우, 해당 타입을 변환 후 제 2 프레임의 매크로블록 타입으로 설정할 수 있다. 즉, 예컨대, 가중치 값의 합이 과반수가 넘는 특정 매크로블록 타입을 그대로 제 2 프레임의 매크로블록 타입으로 설정할 수 있다.
이러한 타입 결정을 위한 매카니즘에 대한 설정은 사용자 설정을 통해 설정할 수 있고, 추후 가변될 수도 있다.
인트라 예측
이하, 디코딩부로부터의 인트라 예측 정보에 따라 인트라예측을 수행하는 경우를 상세히 설명한다.
도 7a 및 7b는 4x4 블록의 인트라 예측의 여러 모드에 따른 방향성 벡터를 나타낸 도면이다.
도 7a 및 7b를 참조하면, 본 발명의 일 실시예에 따라 H.264/AVC로 디코딩되었고, H.264/AVC로 인코딩하여 사이즈를 줄여서 트랜스코딩이 필요한 경우를 가정한다. 인코딩부에서의 인트라 예측 모드의 경우, 도 7a 및 7b와 같이 각각의 예측 모드에 대해 방향성을 갖는 벡터로 인식할 수 있다. 즉, 예측 모드 0은 수직으로 하강하는 벡터로, 1은 좌에서 우로 수평으로 진행하는 벡터와 같이 방향성을 갖는 벡터로써 인식이 가능하다. 이때, 벡터의 방향만이 다를 뿐 스칼라량은 동일할 수 있다.
본 발명의 실시예에서는 인코딩되는 예측블록이 인트라 코딩되어야 하는 경우, 변환 후 특정 예측 블록 내에 포함되어 있던 제 1 프레임의 매크로블록들의 인트라 모드에 따른 방향성 벡터에 대해 변환 후 상기 예측블록 내에서 차지하는 비율의 곱을 기반으로 평균치를 산출하여 예측 모드의 방향성을 결정할 수 있다.
즉, 아래의 수학식을 통해 예측값을 산출할 수 있다.
Figure 112016014246895-pat00001
Figure 112016014246895-pat00002
은 변환된 제 2 프레임에서의 인트라 예측값 벡터를 나타내고,
Figure 112016014246895-pat00003
는 변환 전 원본 프레임, 즉 제 1 프레임에서의 인트라 예측값 벡터를 나타낸다. wn은 제 1 프레임에서의 해당 매크로블록의 면적에 따른 가중치 값을 나타낸다(도 5 참조).
이렇게 산출된 예측값 벡터는 실제 도 7a 및 7b에 따른 모드에 정확히 매칭되지 않을 수 있다. 이러한 벡터 값을 그대로 사용할 수 있다.
또는, 경우에 따라 산출된 벡터 값과 가장 유사한(또는 방향성이 가장 같은) 예측 모드로 근사값을 적용하여 사용할 수도 있다.
본 발명의 다른 실시예에 따르면, 예측모드 2(평균값예측)의 경우, 방향성을 갖는 벡터가 존재하지 않기 때문에 하나의 다른 모드만 존재하더라도 채택되지 못한다. 즉, 보통의 계산에서는 배제될 가능성이 높다. 이에, 임계비율을 두어 특정 비율 이상의 가중치 값에 해당하는 예측모드 2를 갖는 매크로블록이 존재하는 경우, 제 2 예측블록을 예측모드 2로 결정하도록 할 수 있다.
도 8a 및 8b는 16x16 블록의 인트라 예측의 여러 모드에 따른 방향성 벡터를 나타낸 도면이다. 도 8a 및 8b는 16x16 블록의 인트라 예측 모드로써 수직예측, 수평예측, 평균값예측 및 평면 예측 등의 예시를 나타낸다. 도 8a는 16x16 블록의 위도 신호 예측 모드를 나타내고, 도 8b는 색차신호 예측을 나타내는데, 색차신호의 경우, 8x8 화소 단위가 사용될 수 있다.
도 8a 및 8b에 따르면, 수평 예측 모드 및 수직 예측 모드의 경우 방향성 벡터를 갖기 때문에, 방향성 벡터로써 표현하여 가중치에 따른 평균값으로써 예측값이 산출될 수 있다.
다만, 예측모드 2(평균값 예측) 및 예측모드 3(평면 예측)의 경우 하나의 방향성 벡터로써 표현이 어려우므로, 이 경우에도, 방향성 벡터가 아닌 예측모드 값에 대한 면적 비율에 따른 가중치를 기반으로 특정 임계값이 넘는 경우, 해당 예측모드로 제 2 프레임의 예측블록의 예측모드가 결정될 수 있도록 할 수 있다.
예컨대, 예측모드 0의 면적 비율이 10%,예측모드 1의 면적 비율이 20%,예측모드 2의 면적 비율이 60%,예측모드 3의 면적 비율이 10%인 경우, 임계값을 50%로 설정하여 50%가 넘는 가중치를 갖는 예측모드 2가 제 2 프레임의 해당 예측블록의 예측모드로 결정되도록 할 수 있다.
또는 임계값 없이 가장 높은 면적비율에 따른 가중치를 갖는 예측모드가 해당 예측블록의 예측모드로 결정되도록 할 수 있다.
인터 예측
이하, 인터예측시 디코딩부로부터의 인터 예측 정보를 활용하여 인코딩부에서의 인터 예측을 수행하는 방법을 상세히 설명한다.
인터 예측의 경우, 다음의 수학식을 통해 예측값을 구할 수 있다.
Figure 112016014246895-pat00004
여기서,
Figure 112016014246895-pat00005
는 변환된 제 2 프레임에서의 모션 벡터를 나타내고,
Figure 112016014246895-pat00006
는 변환 전 원본 프레임, 즉 제 1 프레임에서의 모션 벡터를 나타낸다. wn은 제 1 프레임에서의 해당 매크로블록의 면적에 따른 가중치 값을 나타낸다(도 5 참조). 이때, 모션 벡터에서는 벡터 방향 값뿐만 아니라 스칼라량도 서로 다를 수 있고, 양 부분이 모두 고려될 수 있다.
본 발명의 실시예에 따르면, 제 2 프레임의 특정 예측 블록 내에 인트라 예측된 매크로블록 및 인터 예측된 매크로블록이 함께 존재하는 경우에는, 면적에 따른 가중치가 높은 쪽의 예측 모드를 사용할 수 있다. 즉, 인트라 예측된 블록의 면적 비율이 47%이고, 인터 예측된 블록의 면적비율이 53%인 경우, 인터 예측 모드로 예측을 수행하고, 이때, 디코딩부로부터의 모션 벡터 정보를 기반으로 제 1 프레임의 매크로블록의 각 모션 벡터 값에 면적에 따른 가중치를 곱한 평균 값으로 해당 제 2 프레임의 예측블록의 모션 벡터 값을 결정할 수 있다.
이상 도면 및 실시예를 참조하여 설명하였지만, 본 발명의 보호범위가 상기 도면 또는 실시예에 의해 한정되는 것을 의미하지는 않으며 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (18)

  1. 제 1 크기의 제 1 프레임 영상을 제 2 크기의 제 2 프레임 영상으로 트랜스코딩하는 장치에 있어서,
    상기 제 1 프레임 영상을 수신하여 디코딩을 수행하는 디코딩부; 및
    디코딩시의 인트라 및 인터 예측 정보를 수신하여 상기 제 2 프레임 영상으로 인코딩을 수행하는 인코딩부를 포함하되,
    상기 인코딩부는 상기 제 1 프레임 영상의 (i) 매크로블록(MB: Macroblock) 정보 및 (ii) 예측 블록(PB: Prediction Block)의 인트라 또는 인터 예측 정보 중 적어도 하나에 가중치를 적용하여 산출된 값을 기반으로 상기 제 2 프레임 영상을 인코딩하되,
    상기 제 2 프레임 영상의 예측 블록의 인트라 및 인터 예측값은 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 인트라 및 인터 예측 값의 가중 평균치를 기반으로 결정되고,
    상기 예측 블록이 인트라 예측 모드로 인코딩되는 경우, 상기 예측 블록의 인트라 예측 모드에 따른 벡터는:
    상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 인트라 예측 모드에 따른 방향성을 갖는 벡터 값; 및
    상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 블록 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출되며,
    상기 예측 블록 내에 포함되는, 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 인트라 예측 모드에 따른 벡터와 다른 방향성을 갖는 벡터도 상기 제 2 프레임 영상과 연관된 산출 결과로써 고려대상이 되는 것을 특징으로 하는 트랜스코딩 장치.
  2. 제 1 항에 있어서,
    상기 인코딩부는 상기 제 2 프레임 영상의 예측 블록의 인코딩시 상기 산출된 값을 기반으로 별도의 인트라 및 인터 예측 과정을 생략하고 인코딩을 수행하는 것을 특징으로 하는 트랜스코딩 장치.
  3. 제 1 항에 있어서,
    상기 제 2 프레임 영상의 매크로블록 타입은 상기 제 2 프레임 영상의 매크로블록 내에 포함되는 제 1 프레임 영상의 매크로블록의 타입 값의 가중 평균치를 기반으로 결정되는 것을 특징으로 하는 트랜스코딩 장치.
  4. 삭제
  5. 삭제
  6. 제 1 항에 있어서,
    상기 예측 블록이 인터 예측 모드로 인코딩되는 경우, 상기 예측 블록의 모션 벡터(MV: Motion Vector)는:
    상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 모션 벡터 값; 및
    상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 블록 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출되는 것을 특징으로 하는 트랜스코딩 장치.
  7. 제 1 항에 있어서,
    상기 예측 블록내에 포함된 제 1 프레임 영상의 매크로 블록 또는 예측 블록이 인트라 모드와 인터 모드의 블록을 함께 포함하는 경우,
    상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 블록 또는 예측 블록별로 차지하는 면적 비율에 따른 가중치가 높은 쪽의 예측 모드를 사용하는 것을 특징으로 하는 트랜스코딩 장치.
  8. 제 1 항에 있어서,
    상기 예측 블록은 매크로 블록인 것을 특징으로 하는 트랜스코딩 장치.
  9. 제 1 크기의 제 1 프레임 영상을 제 2 크기의 제 2 프레임 영상으로 트랜스코딩하는 방법에 있어서,
    디코딩부가 상기 제 1 프레임 영상을 수신하여 디코딩을 수행하는 단계; 및
    인코딩부가 디코딩시의 인트라 및 인터 예측 정보를 수신하여 상기 제 2 프레임 영상으로 인코딩을 수행하는 단계를 포함하되,
    상기 인코딩 단계는 상기 제 1 프레임 영상의 (i) 매크로블록(MB: Macroblock) 정보 및 (ii) 예측 블록(PB: Prediction Block)의 인트라 또는 인터 예측 정보 중 적어도 하나에 가중치를 적용하여 산출된 값을 기반으로 상기 제 2 프레임 영상을 인코딩하는 단계를 포함하되,
    상기 제 2 프레임 영상의 예측 블록의 인트라 및 인터 예측값은 상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 인트라 및 인터 예측 값의 가중 평균치를 기반으로 결정되고,
    상기 예측 블록이 인트라 예측 모드로 인코딩되는 경우, 상기 예측 블록의 인트라 예측 모드에 따른 벡터는:
    상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 인트라 예측 모드에 따른 방향성을 갖는 벡터 값; 및
    상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 블록 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출되며,
    상기 예측 블록 내에 포함되는, 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 인트라 예측 모드에 따른 벡터와 다른 방향성을 갖는 벡터도 상기 제 2 프레임 영상과 연관된 산출 결과로써 고려대상이 되는 것을 특징으로 하는 트랜스코딩 방법.
  10. 제 9 항에 있어서,
    상기 인코딩 단계는 상기 제 2 프레임 영상의 예측 블록의 인코딩시 상기 산출된 값을 기반으로 별도의 인트라 및 인터 예측 과정을 생략하고 인코딩을 수행하는 단계를 포함하는 것을 특징으로 하는 트랜스코딩 방법.
  11. 제 9 항에 있어서,
    상기 제 2 프레임 영상의 매크로블록 타입은 상기 제 2 프레임 영상의 매크로블록 내에 포함되는 제 1 프레임 영상의 매크로블록의 타입 값의 가중 평균치를 기반으로 결정되는 것을 특징으로 하는 트랜스코딩 방법.
  12. 삭제
  13. 삭제
  14. 제 9 항에 있어서,
    상기 예측 블록이 인터 예측 모드로 인코딩되는 경우, 상기 예측 블록의 모션 벡터(MV: Motion Vector)는:
    상기 예측 블록 내에 포함되는 제 1 프레임 영상의 매크로 블록 또는 예측 블록의 모션 벡터 값; 및
    상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 블록 또는 예측 블록별로 차지하는 면적 비율 값의 연산으로 산출되는 것을 특징으로 하는 트랜스코딩 방법.
  15. 제 9 항에 있어서,
    상기 예측 블록내에 포함된 제 1 프레임 영상의 매크로 블록 또는 예측 블록이 인트라 모드와 인터 모드의 블록을 함께 포함하는 경우,
    상기 예측 블록 내에서 상기 제 1 프레임 영상의 매크로 블록 또는 예측 블록별로 차지하는 면적 비율에 따른 가중치가 높은 쪽의 예측 모드를 사용하는 것을 특징으로 하는 트랜스코딩 방법.
  16. 제 9 항에 있어서,
    상기 예측 블록은 매크로 블록인 것을 특징으로 하는 트랜스코딩 방법.

  17. 제 1 항에 있어서,
    상기 예측 블록의 인트라 예측 모드에 따른 벡터 산출시, 하나의 방향성 벡터로써 표현이 되지 않는 인트라 예측 모드에 대해서는 예측모드 값에 대한 면적 비율 값에 따른 가중치를 기반으로 임계값과의 비교 결과에 따라 예측모드가 결정되는 것을 특징으로 하는 트랜스코딩 장치.
  18. 제 9 항에 있어서,
    상기 예측 블록의 인트라 예측 모드에 따른 벡터 산출시, 하나의 방향성 벡터로써 표현이 되지 않는 인트라 예측 모드에 대해서는 예측모드 값에 대한 면적 비율 값에 따른 가중치를 기반으로 임계값과의 비교 결과에 따라 예측모드가 결정되는 것을 특징으로 하는 트랜스코딩 방법.

KR1020160016535A 2016-02-12 2016-02-12 트랜스코딩 방법 및 장치 KR101893946B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160016535A KR101893946B1 (ko) 2016-02-12 2016-02-12 트랜스코딩 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160016535A KR101893946B1 (ko) 2016-02-12 2016-02-12 트랜스코딩 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20170095043A KR20170095043A (ko) 2017-08-22
KR101893946B1 true KR101893946B1 (ko) 2018-09-03

Family

ID=59757651

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160016535A KR101893946B1 (ko) 2016-02-12 2016-02-12 트랜스코딩 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101893946B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023163386A1 (ko) * 2022-02-24 2023-08-31 현대자동차주식회사 블록 경계 불연속성을 감소시키는 비디오 코딩을 위한 방법 및 장치

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100460950B1 (ko) * 2001-12-18 2004-12-09 삼성전자주식회사 트랜스코더 및 트랜스코딩 방법

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
W.C. Siu, et al. On the Architecture of H.264 to H.264 Homogeneous Transcoding Platform. IEEE Int. Conf. Neural Networks & Signal Processing. Jun. 2008, pp.654-659*
권상구 외 2명. H.264/AVC 컨텐츠의 공간해상도 트랜스코딩을 위한 고속 모드 결정 기법. 전자공학회 논문지. 2006년 5월. 제43권 SP편 제3호. pp.242-252
장기영. MPEG-2기반의 HD-to-SD 트랜스코더에서의 효율적 매크로블록 모드 결정 기법 연구. 연세대학교 대학원 석사 학위논문. 2005년 2월. pp.1-58*

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023163386A1 (ko) * 2022-02-24 2023-08-31 현대자동차주식회사 블록 경계 불연속성을 감소시키는 비디오 코딩을 위한 방법 및 장치

Also Published As

Publication number Publication date
KR20170095043A (ko) 2017-08-22

Similar Documents

Publication Publication Date Title
KR101431545B1 (ko) 영상의 부호화, 복호화 방법 및 장치
KR101246294B1 (ko) 영상의 인트라 예측 부호화, 복호화 방법 및 장치
KR101538704B1 (ko) 보간 필터를 적응적으로 사용하여 영상을 부호화 및 복호화하는 방법 및 장치
JP5413191B2 (ja) 動画像符号化方法及び装置並びに動画像復号装置
CN106170092B (zh) 用于无损编码的快速编码方法
KR101211665B1 (ko) 영상의 인트라 예측 부호화, 복호화 방법 및 장치
KR101814258B1 (ko) 영상 부호화 장치, 영상 복호 장치, 영상 부호화 방법 및 영상 복호 방법
KR101298598B1 (ko) 율-왜곡 최적화를 위한 영상 부호화/복호화 방법 및 이를 수행하는 장치
KR20110071231A (ko) 부호화 방법, 복호화 방법 및 장치
KR20140085548A (ko) 인트라-예측 비디오 코딩에서의 비-정방형 변환들
KR101357842B1 (ko) 인프라스트럭쳐 성능들 및 현재 조건들에 기초한 비디오 코딩 서브-블록 사이징
KR20170072637A (ko) 영상 부호화/복호화 방법 및 그 장치
JP5375938B2 (ja) 復号装置及び方法
KR20170114598A (ko) 적응적 색상 순서에 따른 색상 성분 간 예측을 이용한 동영상 부호화 및 복호화 방법 및 장치
KR20110090841A (ko) 가중치 예측을 이용한 영상 부호화/복호화 장치 및 방법
KR20140081681A (ko) 영상의 부호화 방법 및 이를 이용하는 장치
KR101418095B1 (ko) 예측 방향을 이용한 영상 부호화/복호화 장치 및 방법
KR101893946B1 (ko) 트랜스코딩 방법 및 장치
JP4924708B2 (ja) 復号装置及び方法
JP6528635B2 (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化用コンピュータプログラム
JP6030989B2 (ja) 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、それらのプログラム並びにプログラムを記録した記録媒体
KR102020953B1 (ko) 카메라 영상의 복호화 정보 기반 영상 재 부호화 방법 및 이를 이용한 영상 재부호화 시스템
KR20110067648A (ko) 영상 부호화/복호화 방법 및 이를 수행하는 장치
JP5375935B2 (ja) 符号化装置及び方法
JP4926912B2 (ja) 映像符号化装置及び方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
R401 Registration of restoration