KR20100021258A - Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법 - Google Patents

Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법 Download PDF

Info

Publication number
KR20100021258A
KR20100021258A KR1020080080079A KR20080080079A KR20100021258A KR 20100021258 A KR20100021258 A KR 20100021258A KR 1020080080079 A KR1020080080079 A KR 1020080080079A KR 20080080079 A KR20080080079 A KR 20080080079A KR 20100021258 A KR20100021258 A KR 20100021258A
Authority
KR
South Korea
Prior art keywords
bitstream
encoding
information
mode
prediction mode
Prior art date
Application number
KR1020080080079A
Other languages
English (en)
Other versions
KR101072728B1 (ko
Inventor
배태면
Original Assignee
에스케이 텔레콤주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이 텔레콤주식회사 filed Critical 에스케이 텔레콤주식회사
Priority to KR1020080080079A priority Critical patent/KR101072728B1/ko
Publication of KR20100021258A publication Critical patent/KR20100021258A/ko
Application granted granted Critical
Publication of KR101072728B1 publication Critical patent/KR101072728B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 장치에 있어서, 상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 비트스트림 분석부, 상기 비트스트림 분석부에서 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 부호화 모드 판단부, 상기 부호화 모드 판단부에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 해당 매크로블록을 부호화하는 부호화부로 구성된 것으로서, SVC 비트스트림을 H.264 비트스트림으로 변환 시, SVC 비트스트림의 부호화 정보를 활용함으로써 빠른 부호화를 수행할 수 있다.
트랜스코딩, 부호화, SVC, H.264, 매크로블록

Description

ＳＶＣ 비트스트림의 Ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법{Apparatus and Method for transcoding SVC bitstream into H.264 bitstream}
본 발명은 SVC(Scalable Video Coding) 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법에 관한 것으로, 더욱 상세하게는 SVC 비트스트림을 분석하여 부호화 정보를 추출하고, 그 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단한 후 그 부호화 모드와 맵핑된 H.264 부호화 모드로 해당 매크로블록을 부호화하여 상기 SVC 비트스트림을 H.264 비트스트림으로 변환하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법에 관한 것이다.
일반적으로 비디오 트랜스코딩이란 부호화된 비디오 스트림의 특성을 다른 특성으로 변환하는 것을 지칭한다. 이러한 비디오 스트림의 특성에는 비트율, 프레임율, 공간적 해상도 및 부호화 표준 등이 포함될 수 있다. 트랜스코딩을 입출력 비디오 스트림의 비디오 표준에 따라 분류하면 크게 동일한 비디오 표준 간의 트랜스코딩과 상이한 비디오 표준간의 트랜스코딩으로 나뉠 수 있다.
동일한 비디오 표준간의 트랜스코딩은 일반적으로 비트율 감소를 주목적으로 하며 이에는 양자화 계수의 변환을 통하여 비트율을 감소시키는 SNR 트랜스코딩과 프레임율의 변환을 수행하는 프레임율 트랜스코딩, 그리고 프레임의 공간적 크기 변환을 수행하는 공간적 해상도 트랜스코딩으로 나뉠 수 있다.
서로 상이한 비디오 표준간의 트랜스코딩은 서로 다른 영상 표준을 지원하는 단말기간의 전송 등과 같이 주로 영상 포맷 자체의 변환을 목적으로 하며, MPEG2에서 MPEG4 Part2로의 트랜스코딩, SVC(Scalable Video Coding) 비트스트림의 H.246 비트스트림으로의 트랜스코딩 등이 이에 속한다.
네트워크 단말기 분야의 발달과 함께 여러 단말기에서의 영상 콘텐츠 소비가 늘어나면서 이러한 트랜스코딩의 중요성은 더욱 증대되고 있다. 특히 현존하는 비디오 표준들 중 가장 높은 부호화 효율을 가지는 H.264 부호화 표준을 대상으로 하는 트랜스코딩 기법의 개발은 많은 이점을 가져올 수 있다.
최근 스케일러블 비디오 부호화(scalable video coding; SVC)가 이종 네트워크 및 단말기 환경에서의 비디오 전송을 위한 중요한 기술로 떠오르고 있다. 이와 관련하여 ISO/IEC MPEG 와 ITU-T VCEG의 JVT에서는 H.264를 확장한 SVC를 표준화하고 있다.
현재 표준화 되고 있는 SVC는 공간, 시간, 품질상의 스케일러빌러티를 가진 비트스트림을 제공하고 있으며, 사용자 단말이나 네트워크 상황에 따라 부호화된 비트스트림에서 특정 부분을 추출함으로써 공간적, 시간적, 그리고 화질이 다른 비트스트림을 만들 수 있다.
SVC에서는 공간적인 스케일러빌러티를 제공하기 위해 각각의 비디오 해상도에 따라 각 레이어별로 부호화를 하며, 이때 레이어간에 중복되는 데이터를 제거하기 위해 레이어 간 예측(이하 '인터레이어 예측(interlayer prediction)'이라 함)을 수행한다.
인터레이어 예측에는 인터레이어 텍스쳐 예측(inter-layer texture prediction), 인터레이어 움직임 예측(inter-layer motion prediction), 인터레이어 잔여 예측(inter-layer residual prediction)이 있으며, 기본 화질 레이어의 텍스쳐, 움직임, 잔여 데이터를 상위 공간 레이어의 해상도에 맞도록 계산(upsampling)하여 상위 공간 레이어의 텍스쳐, 움직임, 잔여의 예측 데이터로서 사용한다.
하나의 공간 해상도를 나타내는 레이어 내에서 움직임 예측이 사용되는 경우, 각 매크로 블록 또는 서브 블록에 대해 대응되는 움직임 모드가 하나 존재하고, 각 모드에 맞는 움직임 데이터가 존재한다.
상기와 같은 SVC는 bit-rate, resolution, frame rate의 scalability를 제공하기 위해 H.264를 기반으로 새로이 표준화된 codec이다. SVC는 layer기반의 코덱 구조를 기반으로 하여 base layer는 H.264, enhancement layer는 SNR, resolution, frame rate의 Scalability를 향상 시킬 수 있는 H.264의 scalable extension coding 방법을 이용하여 부호화된다.
그러나 SVC로 부호화된 비트스트림은 base layer의 경우 H.264 decoder로 decoding이 되지만, enhancement layer의 경우 기존의 H.264 decoder에서는 decoding이 되지 않는 호환성의 문제가 발생한다.
이를 해결하기 위해, SVC 비트스트림을 H.264 비트스트림으로 변환하기 위해서는 SVC 비트스트림을 decoding한 후, 새로이 H.264 encoder로 encoding을 수행해야 하는데, 이러한 과정은 시간이 많이 걸리는 단점이 있다.
본 발명의 목적은 SVC 비트스트림을 H.264 비트스트림으로 변환 시, 모든 비트스트림에 대해 새로이 부호화를 수행하지 않고 SVC 비트스트림의 부호화 정보를 활용하여 빠른 부호화를 수행 할 수 있도록 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법을 제공하는데 있다.
본 발명의 다른 목적은 SVC 비트스트림내에 포함되어 있는 움직임(motion) 정보 등의 부호화 정보를 H.264 부호화 시 부가 정보로 사용하여 화질 열화를 최소화함과 동시에 복잡도를 감소시킬 수 있는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법을 제공하는데 있다.
상기 목적들을 달성하기 위하여 본 발명의 일 측면에 따르면, SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 장치에 있어서, 상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 비트스트림 분석부, 상기 비트스트림 분석부에서 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 부호화 모드 판단부, 상기 부호화 모드 판단부에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 해당 매크로블록을 부호화하는 부호화부를 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치가 제공된다.
상기 부호화 정보는 매크로블록 파티션 정보, 움직임 정보, 인트라 예측 정 보, residual 정보 중 적어도 하나를 포함한다.
상기 부호화 모드 판단부는 상기 부호화 정보에 인터 레이어 예측 모드 및 움직임 정보가 표시된 경우 인터 레이어 움직임 예측 모드로 판단하고, 인터 레이어 예측 모드이면서 움직임 정보가 표시되어 있지 않고 인트라 예측 정보가 표시된 경우 인터 레이어 인트라 예측 모드라고 판단한다.
상기 부호화부는 상기 부호화 모드 판단부에서 판단된 부호화 모드가 H.264와 호환되는 경우 SVC의 해당 부호화 정보를 이용하여 동일한 부호화 모드로 부호화하고, 상기 판단된 부호화 모드가 인터 레이어 인트라 예측인 경우 H.264의 인트라 예측 모드로 부호화하되 인트라 예측은 새로이 수행하여 부호화하고, 상기 판단된 부호화 모드가 인터 레이어 움직임 예측인 경우 상기 SVC 비트스트림의 모션벡터와 참조 프레임 정보, 매크로블럭 파티션 정보를 이용하여 H.264의 인터 예측 모드로 부호화한다.
상기 부호화부에 의해 상기 SVC 비트스트림이 H.264의 비트스트림으로 변환된다.
본 발명의 다른 측면에 따르면, SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법에 있어서, (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계, (b)상기 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 단계, (c)상기 (b)단계에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 각 매크로블록을 부호화하는 단계를 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법이 제공된다.
상기 (b)단계는, 상기 부호화 정보에 인터 레이어 예측 모드 및 움직임 정보가 표시된 경우 인터 레이어 움직임 예측 모드로 판단하고, 인터 레이어 예측 모드이면서 움직임 정보가 표시되어 있지 않고 인트라 예측 정보가 표시된 경우 인터 레이어 인트라 예측 모드라고 판단한다.
상기 (c)단계는, 상기 (b)단계에서 판단된 부호화 모드가 H.264와 호환되는 경우 해당 부호화 정보를 이용하여 부호화하고, 상기 판단된 부호화 모드가 인터 레이어 인트라 예측인 경우 H.264의 인트라 예측 모드로 부호화하고, 상기 판단된 부호화 모드가 인터 레이어 움직임 예측인 경우 SVC 비트스트림의 모션벡터와 참조 프레임 정보, 매크로블럭 파티션 정보를 이용하여 H.264의 인터 예측 모드로 부호화한다.
상기 (c)단계에 의해 SVC 비트스트림이 H.264 비트스트림으로 트랜스코딩된다.
본 발명의 또 다른 측면에 따르면, SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법에 있어서, (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계, (b)상기 추출된 부호화 정보가 인터 레이어 예측 모드를 나타내는지를 판단하는 단계, (c)상기 (b)단계의 판단결과 인터 레이어 예측 모드를 나타내는 경우, 인터 레이어 움직임 예측 모드인지를 판단하는 단계, (d)상기 (c)단계의 판단결과 인터 레이어 움직임 예측 모드인 경우, 상기 부호화 정보의 모션 벡터를 이용하여 인터 예측 모드로 부호화하는 단계를 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법이 제공된다.
상기 (c)단계에서, 상기 (b)단계의 판단결과 인터 레이어 예측 모드를 나타내지 않은 경우 상기 SVC 비트스트림과 동일한 부호화 모드로 부호화하는 단계를 더 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법이 제공된다.
상기 SVC 비트스트림이 인트라 예측 모드로 부호화 된 경우 인트라 예측 모드로 부호화하고, 인터 예측 모드로 부호화 된 경우 인터 예측 모드로 부호화 한다.
상기 (c)단계에서 인터 레이어 움직임 예측 모드인지를 판단하는 것은, 하위 레이어 대응 매크로블럭의 움직임 정보에 움직임 예측 및 모션 벡터가 포함되어 있는 경우 인터 레이어 움직임 예측 모드로 판단하고, 하위 레이어의 대응 매크로블럭이 인트라 모드로 부호화되어 있는 경우 인터 레이어 인트라 예측 모드로 판단한다.
상기 (c)단계의 판단결과 인터 레이어 움직임 예측 모드가 아닌 경우, 인터 레이어 인트라 예측 모드로 판단하여 H.264의 인트라 예측 모드로 부호화하는 단계를 더 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법이 제공된다.
본 발명의 또 다른 측면에 따르면, SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 프로그램이 기록된 기록매체에 있어서, (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계, (b)상기 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 단계, (c)상기 (b)단계에서 판단된 부호 화 모드와 맵핑된 H.264 부호화 모드를 선택하여 각 매크로블록을 부호화하는 단계를 포함하는 프로그램이 기록된 기록매체가 제공된다.
본 발명의 또 다른 측면에 따르면, SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 프로그램이 기록된 기록매체에 있어서, (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계, (b)상기 추출된 부호화 정보가 인터 레이어 예측 모드를 나타내는지를 판단하는 단계, (c)상기 (b)단계의 판단결과 인터 레이어 예측 모드를 나타내는 경우, 인터 레이어 움직임 예측 모드인지를 판단하는 단계, (d)상기 (c)단계의 판단결과 인터 레이어 움직임 예측 모드인 경우, 상기 부호화 정보의 모션 벡터를 이용하여 인터 예측 모드로 부호화하는 단계를 포함하는 프로그램이 기록된 기록매체가 제공된다.
상술한 바와 같이 본 발명에 따르면, SVC 비트스트림을 H.264 비트스트림으로 변환 시, SVC 비트스트림의 부호화 정보를 활용함으로써 빠른 부호화를 수행할 수 있는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법을 제공할 수 있다.
또한, SVC 비트스트림내에 포함되어 있는 움직임(motion) 정보 등의 부호화 정보를 H.264 부호화시 부가 정보로 사용하여 화질 열화를 최소함과 동시에 복잡도를 감소시킬 수 있는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법을 제공할 수 있다.
본 발명의 전술한 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다.
도 1은 본 발명에 따른 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치를 나타낸 블럭도이다.
도 1을 참조하면, SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치는 SVC 비트스트림을 분석하여 매크로블록단위의 부호화 정보를 추출하는 비트스트림 분석부(100), 상기 비트스트림 분석부(100)에서 추출된 부호화 정보를 이용하여 해당 매크로블록의 부호화 모드를 판단하는 부호화 모드 판단부(110), 상기 부호화 모드 판단부(110)에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 해당 매크로블록을 부호화하는 부호화부(120)를 포함한다.
상기 비트스트림 분석부(100)에서 추출되는 부호화 정보는 매크로블록 파티션(partition) 정보, 움직임(motion) 정보, 인트라 예측(intra prediction) 정보, 잔여(residual) 정보 등을 포함한다. 여기서, 상기 움직임 정보는 모션 벡터, 움직임 예측 여부 등을 포함하고, 상기 인트라 예측 정보는 인트라 예측 여부 등을 포함한다.
상기 부호화 모드 판단부(110)는 상기 비트스트림 분석부(100)에서 추출된 부호화 정보를 이용하여 각 매크로블록이 부호화된 부호화 모드를 판단한다.
즉, 상기 부호화 모드 판단부(110)는 부호화 정보 내 움직임 정보에서 움직임 예측 여부를 이용하여 움직임 예측 모드인지를 판단하고, 인트라 예측 여부를 이용하여 인트라 예측 모드인지를 판단한다.
예를 들어 인터레이어 예측이고 하위레이어의 대응 매크로블럭의 움직임 정보에 움직임 예측, 모션 벡터가 포함되어 있는 경우 상기 부호화 모드 판단부(110)는 해당 매크로블럭은 인터 레이어 움직임 예측 모드로 부호화되었다고 판단하고, 인터레이어 예측이고 하위레이어의 대응 매크로블럭이 인트라 모드로 부호화되어 있는 경우 상기 부호화 모드 판단부(110)는 해당 매크로블럭이 인터 레이어 인트라 예측 모드로 부호화되었다고 판단한다.
상기 부호화부(120)는 상기 부호화 모드 판단부(110)에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 각 매크로블록을 부호화한다.
SVC 비트스트림이 둘 이상의 레이어를 가지는 경우, 상위 레이어는 하위 레이어의 정보를 이용하여 부호화하는 인터 레이어 예측을 이용하여 레이어간 redundancy를 제거한다. SVC의 인터 레이어 예측에는 움직임(motion), 잔여(residual), 텍스처(texture) 예측이 있으며, 이 모드는 H.264에는 없는 부호화모드이다.
따라서, 상기 부호화부(120)는 상기 부호화 모드 판단부(110)에서의 판단결과 인터 레이어 움직임 예측, 인터 레이어 잔여 예측, 인터 레이어 텍스처 예측 중 하나인 경우 H.264 부호화 모드에 의해 부호화되도록 한다.
즉, 상기 부호화 모드 판단부(110)에서 판단된 부호화 모드가 H.264와 호환 되는 경우 상기 부호화부(120)는 해당 부호화 정보를 그대로 이용하여 부호화한다.
또한, 상기 부호화 모드 판단부(110)에서 판단된 부호화 모드가 인터 레이어 인트라 예측인 경우, 상기 부호화부(120)는 H.264의 인트라 예측 모드를 이용하여 각 매크로블록을 부호화한다. 여기서, 상기 인터 레이어 인트라 예측은 인터 레이어 텍스처 예측을 말한다.
따라서, 상기 부호화부(120)는 인터 레이어 텍스처 예측인 경우 하위 공간 레이어의 텍스쳐를 인트라 예측을 위한 예측 데이터로 사용하여 H.264의 인트라 예측 모드로 각 매크로블록을 부호화한다.
또한, 상기 부호화 모드 판단부(110)에서 판단된 부호화 모드가 인터 레이어 움직임 예측인 경우, 상기 부호화부(120)는 SVC 비트스트림의 모션벡터와 참조 프레임 정보, 매크로블럭 partition정보는 동일하게 하고 H.264의 인터 예측을 이용하여 부호화한다.
상기와 같은 부호화부(120)의 부호화에 의해 SVC 비트스트림이 H.264의 비트스트림으로 변환된다.
도 2는 본 발명에 따른 SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법을 나타낸 흐름도이다.
도 2를 참조하면, 트랜스코딩 장치는 입력되는 SVC 비트스트림을 분석하여 매크로블록단위의 부호화 정보를 추출하고(S200), 상기 추출된 부호화 정보를 이용하여 해당 매크로블록의 부호화 모드를 판단한다(S202).
상기 부호화 정보는 매크로블록 파티션 정보, 움직임 정보, 인트라 예측 정보, residual 정보 등을 포함하는 것으로서, 상기 트랜스코딩 장치는 상기 부호화 정보를 이용하여 인터 레이어 예측 모드인지의 여부, 인터 레이어 예측 모드인 경우 움직임 예측, 텍스처 예측, 잔여 예측 모드인지의 여부 등을 판단한다.
그런 다음 상기 트랜스코딩 장치는 상기 S202에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 이용하여 해당 매크로블록을 부호화한다(S204). 그러면, 해당 매크로블록은 H.264 비트스트림으로 변환되게 된다.
상기와 같은 과정을 수행하는 트랜스코딩 장치의 동작에 대해 도 3을 참조하여 상세히 설명하기로 한다.
도 3은 본 발명에 따른 SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법을 나타낸 흐름도이다.
도 3을 참조하면, 트랜스코딩 장치는 SVC 비트스트림이 입력되면(S300), 상기 SVC 비트스트림을 분석하여 매크로블록단위의 부호화 정보를 추출하고(S301), 상기 추출된 부호화 정보를 이용하여 부호화 모드를 판단한다(S302).
상기 S302의 판단결과 인터 레이어 예측 모드인 경우(S304), 상기 트랜스코딩 장치는 인터 레이어 움직임 예측 모드인지를 판단한다(S306).
즉, 상기 트랜스코딩 장치는 상기 부호화 정보가 비디오 해상도에 따라 각 레이어별로 부호화된 인터레이어 예측(interlayer prediction)을 나타낸 경우, 상기 부호화 정보내 움직임 정보를 이용하여 인터 레이어 움직임 예측 모드인지를 판 단한다. 상기 트랜스코딩 장치는 상기 부호화 정보의 움직임 정보에 움직임 예측, 모션 벡터가 포함되어 있고, 인트라 예측 정보에 인트라 예측이 아닌 것으로 표시되어 있으면, 해당 매크로 블럭은 인터 레이어 움직임 예측 모드로 부호화되었다고 판단한다.
상기 S306의 판단결과 인터 레이어 움직임 예측 모드인 경우, 상기 트랜스코딩 장치는 상기 부호화 정보의 모션 벡터를 이용하여 해당 매크로블록을 H.264의 인터 예측 모드로 부호화한다(S308).
즉, 상기 트랜스코딩 장치는 해당 매크로블록의 부호화 모드가 인터 레이어 움직임 예측 모드이면, SVC 비트스트림의 모션 벡터와 참조 프레임 정보, 매크로블록 파티션 정보를 이용하여 인터 예측 모드로 부호화한다.
만약, 상기 S306의 판단결과 인터 레이어 움직임 예측 모드가 아니면, 상기 트랜스코딩 장치는 인터 레이어 인트라 예측 모드로 판단하여 해당 매크로블록을 H.264의 인트라 예측 모드로 부호화한다(S310).
즉, 상기 트랜스코딩 장치는 인터 레이어 인트라 예측 모드인 경우, 현재 블록의 예측값을 현재 픽처 내의 화소값들을 이용해 생성하는 인트라 예측을 수행한다. 현재 픽처 내의 이전에 부호화된 영역에 포함되어 있는 화소들을 이용해 현재 블록을 인트라 예측한다. 이때, 메모리에는 현재 픽처의 이전에 부호화된 영역에 포함되어 있는 블록들이 저장되어 있고, 상기 트랜스코딩 장치는 상기 메모리에 저장된 정보를 참조하여 인트라 예측을 수행한다.좀더 상세히 살펴보면, 상기 트랜스코딩 장치는 상기 S306의 판단결과 인터 레이어 움직임 예측 모드가 아니면, 인터 레이어 텍스처 예측을 말하는 인터 레이어 인트라 예측 모드라고 판단한다.
따라서, 상기 트랜스코딩 장치는 인터 레이어 텍스처 예측인 경우 하위 공간 레이어의 텍스쳐를 인트라 예측을 위한 예측 데이터로 사용하여 H.264의 인트라 예측 모드로 각 매크로블록을 부호화한다.
만약, 상기 S304의 판단결과 인터 레이어 예측 모드가 아니면, 상기 트랜스코딩 장치는 상기 SVC 비트스트림과 동일한 부호화 모드로 부호화한다(S312).
즉, 상기 S304의 판단결과 H.264와 호환되는 부호화 모드인 경우, 상기 트랜스 코딩 장치는 상기 SVC 비트스트림과 동일한 부호화 모드로 부호화를 수행한다.
예를 들어, 부호화 모드가 인트라 예측 모드인 경우, 상기 트랜스코딩 장치는 현재 블록의 예측값을 현재 픽처 내의 화소값들을 이용해 생성하는 인트라 예측을 수행한다. 현재 픽처 내의 이전에 부호화된 영역에 포함되어 있는 화소들을 이용해 현재 블록을 인트라 예측한다.
인터 레이어 잔여 예측이 수행된 경우, 잔여 정보에 대해서는 H.264 부호화방식으로 새로이 부호화 한다.
또한, 부호화 모드가 인터 예측 모드인 경우, 상기 트랜스코딩 장치는 현재 블록의 예측값을 참조 픽처(들)를 이용해 생성하는 인터 예측을 수행한다. H.264 표준안에서 트랜스코딩 장치는 참조 픽처(들) 내의 소정의 범위 안에서 검색하여 SAD(sum of absolute difference)등을 계산하여 현재 블록과 유사한 블록을 찾아내고, 검색된 유사한 블록을 현재 블록의 예측값으로 이용한다.
상기와 같은 과정에 의해 SVC 비트스트림을 H.264 비트스트림으로 변환 시, SVC 비트스트림의 부호화 정보를 활용함으로써 빠른 부호화를 수행 할 수 있다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
이상과 같이 본 발명에 따른 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치 및 방법은 SVC 비트스트림을 H.264 비트스트림으로 변환 시, SVC 비트스트림의 부호화 정보를 활용하여 빠른 부호화를 수행하고자 할 경우에 적용될 수 있다.
도 1은 본 발명에 따른 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치를 나타낸 블럭도이다.
도 2 및 도 3은 본 발명에 따른 SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법을 나타낸 흐름도.
<도면의 주요 부분에 대한 부호의 설명>
100 : 비트스트림 분석부 110 : 부호화 모드 판단부
120 : 부호화부

Claims (18)

  1. SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 장치에 있어서
    상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 비트스트림 분석부;
    상기 비트스트림 분석부에서 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 부호화 모드 판단부;및
    상기 부호화 모드 판단부에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 해당 매크로블록을 부호화하는 부호화부;
    를 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  2. 제1항에 있어서,
    상기 부호화 정보는 매크로블록 파티션 정보, 움직임 정보, 인트라 예측 정보, residual 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  3. 제1항에 있어서,
    상기 부호화 모드 판단부는 상기 부호화 정보에 인터 레이어 예측 모드 및 움직임 정보가 표시된 경우 인터 레이어 움직임 예측 모드로 판단하고, 인터 레이어 예측 모드이면서 움직임 정보가 표시되어 있지 않고 인트라 예측 정보가 표시된 경우 인터 레이어 인트라 예측 모드라고 판단하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  4. 제1항에 있어서,
    상기 부호화부는 상기 부호화 모드 판단부에서 판단된 부호화 모드가 H.264와 호환되는 경우 SVC의 해당 부호화 정보를 이용하여 동일한 부호화 모드로 부호화하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  5. 제1항에 있어서,
    상기 부호화부는 상기 부호화 모드 판단부에서 판단된 부호화 모드가 인터 레이어 인트라 예측인 경우 H.264의 인트라 예측 모드로 부호화하되 인트라 예측은 새로이 수행하여 부호화하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  6. 제1항에 있어서,
    상기 부호화부는 상기 부호화 모드 판단부에서 판단된 부호화 모드가 인터 레이어 움직임 예측인 경우 상기 SVC 비트스트림의 모션벡터와 참조 프레임 정보, 매크로블럭 파티션 정보를 이용하여 H.264의 인터 예측 모드로 부호화하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  7. 제1항에 있어서,
    상기 부호화부에 의해 상기 SVC 비트스트림이 H.264의 비트스트림으로 변환되는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 장치.
  8. SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법에 있어서,
    (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계;
    (b)상기 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 단계;및
    (c)상기 (b)단계에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 각 매크로블록을 부호화하는 단계;
    를 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  9. 제8항에 있어서,
    상기 (b)단계는,
    상기 부호화 정보에 인터 레이어 예측 모드 및 움직임 정보가 표시된 경우 인터 레이어 움직임 예측 모드로 판단하고, 인터 레이어 예측 모드이면서 움직임 정보가 표시되어 있지 않고 인트라 예측 정보가 표시된 경우 인터 레이어 인트라 예측 모드라고 판단하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으 로의 트랜스코딩 방법.
  10. 제8항에 있어서,
    상기 (c)단계는,
    상기 (b)단계에서 판단된 부호화 모드가 H.264와 호환되는 경우 SVC의 해당 부호화 정보를 이용하여 부호화하고, 인터 레이어 인트라 예측인 경우 H.264의 인트라 예측 모드로 부호화하며, 인터 레이어 움직임 예측인 경우 SVC 비트스트림의 모션벡터와 참조 프레임 정보, 매크로블럭 파티션 정보를 이용하여 H.264의 인터 예측 모드로 부호화하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  11. 제8항에 있어서,
    상기 (c)단계에 의해 SVC 비트스트림이 H.264 비트스트림으로 트랜스코딩되는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  12. SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 방법에 있어서,
    (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계;
    (b)상기 추출된 부호화 정보가 인터 레이어 예측 모드를 나타내는지를 판단하는 단계;
    (c)상기 (b)단계의 판단결과 인터 레이어 예측 모드를 나타내는 경우, 인터 레이어 움직임 예측 모드인지를 판단하는 단계;및
    (d)상기 (c)단계의 판단결과 인터 레이어 움직임 예측 모드인 경우, 상기 부호화 정보의 모션 벡터를 이용하여 인터 예측 모드로 부호화하는 단계;
    를 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  13. 제12항에 있어서,
    상기 (c)단계에서, 상기 (b)단계의 판단결과 인터 레이어 예측 모드를 나타내지 않은 경우 상기 SVC 비트스트림과 동일한 부호화 모드로 부호화하는 단계를 더 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  14. 제13항에 있어서,
    상기 SVC 비트스트림이 인트라 예측 모드로 부호화 된 경우 인트라 예측 모드로 부호화하고, 인터 예측 모드로 부호화 된 경우 인터 예측 모드로 부호화 하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  15. 제12항에 있어서,
    상기 (c)단계에서 인터 레이어 움직임 예측 모드인지를 판단하는 것은, 하위 레이어 대응 매크로블럭의 움직임 정보에 움직임 예측 및 모션 벡터가 포함되어 있는 경우 인터 레이어 움직임 예측 모드로 판단하고, 하위 레이어의 대응 매크로블 럭이 인트라 모드로 부호화되어 있는 경우 인터 레이어 인트라 예측 모드로 판단하는 것을 특징으로 하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  16. 제12항에 있어서,
    상기 (c)단계의 판단결과 인터 레이어 움직임 예측 모드가 아닌 경우, 인터 레이어 인트라 예측 모드로 판단하여 H.264의 인트라 예측 모드로 부호화하는 단계를 더 포함하는 SVC 비트스트림의 H.264 비트스트림으로의 트랜스코딩 방법.
  17. SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 프로그램이 기록된 기록매체에 있어서,
    (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계;
    (b)상기 추출된 부호화 정보를 이용하여 각 매크로블록의 부호화 모드를 판단하는 단계;및
    (c)상기 (b)단계에서 판단된 부호화 모드와 맵핑된 H.264 부호화 모드를 선택하여 각 매크로블록을 부호화하는 단계;
    를 포함하는 프로그램이 기록된 기록매체.
  18. SVC 비트스트림을 H.264 비트스트림으로 트랜스코딩하는 프로그램이 기록된 기록매체에 있어서,
    (a)상기 SVC 비트스트림을 분석하여 부호화 정보를 추출하는 단계;
    (b)상기 추출된 부호화 정보가 인터 레이어 예측 모드를 나타내는지를 판단하는 단계;
    (c)상기 (b)단계의 판단결과 인터 레이어 예측 모드를 나타내는 경우, 인터 레이어 움직임 예측 모드인지를 판단하는 단계;및
    (d)상기 (c)단계의 판단결과 인터 레이어 움직임 예측 모드인 경우, 상기 부호화 정보의 모션 벡터를 이용하여 인터 예측 모드로 부호화하는 단계;
    를 포함하는 프로그램이 기록된 기록매체.
KR1020080080079A 2008-08-14 2008-08-14 Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법 KR101072728B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080080079A KR101072728B1 (ko) 2008-08-14 2008-08-14 Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080080079A KR101072728B1 (ko) 2008-08-14 2008-08-14 Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100021258A true KR20100021258A (ko) 2010-02-24
KR101072728B1 KR101072728B1 (ko) 2011-10-11

Family

ID=42091068

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080080079A KR101072728B1 (ko) 2008-08-14 2008-08-14 Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101072728B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013141671A1 (ko) * 2012-03-23 2013-09-26 한국전자통신연구원 인터 레이어 인트라 예측 방법 및 장치
CN103546754A (zh) * 2012-07-16 2014-01-29 中国科学院声学研究所 从h.264/avc到svc空间可分级的转码方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100805805B1 (ko) 2006-12-04 2008-02-21 한국전자통신연구원 스케일러블 비디오 스트림의 동적 스케일러블 정보 처리장치 및 그 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013141671A1 (ko) * 2012-03-23 2013-09-26 한국전자통신연구원 인터 레이어 인트라 예측 방법 및 장치
CN103546754A (zh) * 2012-07-16 2014-01-29 中国科学院声学研究所 从h.264/avc到svc空间可分级的转码方法及系统
CN103546754B (zh) * 2012-07-16 2016-09-14 中国科学院声学研究所 从h.264/avc到svc空间可分级的转码方法及系统

Also Published As

Publication number Publication date
KR101072728B1 (ko) 2011-10-11

Similar Documents

Publication Publication Date Title
CN101601300B (zh) 用自适应增强层预测对位深度可分级视频数据进行编码和/或解码的方法和设备
AU2015230740B2 (en) Method and apparatus of scalable video coding
KR100725407B1 (ko) 방향적 인트라 잔차 예측에 따라 비디오 신호를 인코딩하고디코딩하는 방법 및 장치
US9860528B2 (en) Method and apparatus of scalable video coding
KR101345287B1 (ko) 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치
CN103229503B (zh) 图像编码设备、图像解码设备、图像编码方法、图像解码方法和程序
CN104813667B (zh) 用于可伸缩视频编码的帧间层预测方法及装置
KR101053628B1 (ko) 영상 신호의 스케일러블 인코딩 및 디코딩 방법
RU2371881C1 (ru) Способ моделирования информации кодирования видеосигнала для компрессии/декомпрессии информации
KR20070099390A (ko) 확장 매크로블록 스킵 모드를 이용한 인코딩/디코딩 방법및 장치
CN105828078A (zh) 视频编码装置、视频解码装置、视频编码方法以及视频解码方法
CN107087203A (zh) 图像解码方法及使用其的装置
CN104380745A (zh) 用于图层间与视图间编码的自适应帧内预测方法及其装置
CN100555332C (zh) 使用包括多个宏块的预测和非预测画面对画面序列编码的方法和装置
CN105103563A (zh) 在可伸缩视频编码中的量化矩阵信令和表示的方法和装置
CN102934445B (zh) 基于分段对图像编码和解码的方法和设备
KR101072728B1 (ko) Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법
US9167266B2 (en) Method for deriving motion for high resolution pictures from motion data of low resolution pictures and coding and decoding devices implementing said method
KR20080004392A (ko) 스케일러블 비디오 인코딩/디코딩 방법 및 그 장치
KR20140080569A (ko) 비트스트림 분석 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140926

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20151001

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20171012

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20191002

Year of fee payment: 9