KR20090037689A - 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치 - Google Patents

스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치 Download PDF

Info

Publication number
KR20090037689A
KR20090037689A KR1020070103163A KR20070103163A KR20090037689A KR 20090037689 A KR20090037689 A KR 20090037689A KR 1020070103163 A KR1020070103163 A KR 1020070103163A KR 20070103163 A KR20070103163 A KR 20070103163A KR 20090037689 A KR20090037689 A KR 20090037689A
Authority
KR
South Korea
Prior art keywords
base layer
encoding
codec
bitstream
image
Prior art date
Application number
KR1020070103163A
Other languages
English (en)
Other versions
KR101345287B1 (ko
Inventor
최웅일
조대성
김대희
김현문
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070103163A priority Critical patent/KR101345287B1/ko
Priority to US12/076,126 priority patent/US8160158B2/en
Publication of KR20090037689A publication Critical patent/KR20090037689A/ko
Priority to US13/417,847 priority patent/US8588313B2/en
Application granted granted Critical
Publication of KR101345287B1 publication Critical patent/KR101345287B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화 방법 및 장치에 관한 것으로, 그 부호화 방법은 다수의 코덱들 중 어느 하나를 사용하여 영상에 대한 기본 계층 비트 스트림을 생성하고, 기본 계층 비트 스트림 생성에 사용된 코덱이 확장 계층 부호화가 지원되는 코덱인지 여부를 판단한 후, 판단 결과에 따라 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림 생성에 사용된 부호화 정보를 추출하여, 추출된 부호화 정보를 이용하여 원 영상에 대한 확장 계층 비트스트림을 생성함으로써 기존의 다양한 코덱을 활용하면서 동시에 높은 화질의 서비스와 높은 부호화 효율을 제공하는 효과가 있다.

Description

스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화 방법 및 장치{Scalable video encoding method and apparatus and scalable video decoding method and apparatus}
본 발명은 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화 방법 및 장치에 관한 것이다.
스케일러블 영상 부호화(SVC:Scalable Video Coding)는 영상을 여러 개의 계층(layer)을 가진 비트스트림으로 부호화하는 것을 말한다. 그리고, 이러한 스케일러블 영상 부호화 비트스트림은 복호화부가 비트스트림 중 선택적으로 몇 개의 계층을 이용하여 복호화하는 것을 가능하게 해준다. 이러한 비트스트림은 기본 계층(base layer)과 하나 또는 그 이상의 확장 계층(enhancement layer)로 구성되는데, 기본 계층 비트스트림은 가장 기본이 되는 비트스트림으로, 이를 가지고는 최소한의 화질로 영상을 복원할 수 있고, 만일 기본 계층 비트스트림 이외에 확장 계층 비트스트림도 함께 이용하면 더 좋은 화질로 영상을 복원할 수 있다. 그리고 이때, 사용 가능한 전송대역폭이나 사용자의 단말기에 따라 기본 계층 비트스트림만을 복호화하거나, 아니면 기본 계층 비트스트림과 확장 계층 비트스트림을 모두 복 호화한다.
이러한 스케일러블 영상 부호화 기술은 MPEG-2, MPEG-4, H.263 및 H.264 등 다양한 영상 압축 표준들에 활용되고 있으며, 향후에는 더욱 다양한 영상 코덱들에 적용될 전망이다.
본 발명이 이루고자 하는 기술적 과제는 다수의 코덱들 중 어느 하나의 코덱을 기본 계층으로 하면서 각 코덱들이 공통으로 갖는 특성을 계층간 예측에 적용하여 부호화하는 스케일러블 영상 부호화 방법 및 장치를 제공하는데 있다. 본 발명이 이루고자 하는 다른 기술적인 과제는 임의의 코덱을 기본 계층으로 하면서 각 코덱들이 공통으로 갖는 특성을 계층간 예측에 적용하여 복호화하는 스케일러블 영상 복호화 방법 및 장치를 제공하는데 있다. 또한, 상기된 방법들을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공하는데 있다.
상기 기술적 과제를 이루기 위한 본 발명에 따른 스케일러블 영상 부호화 방법은 다수의 코덱들 중 어느 하나를 사용하여 영상에 대한 기본 계층 비트 스트림을 생성하는 단계; 상기 기본 계층 비트 스트림 생성에 사용된 코덱이 확장 계층 부호화가 지원되는 코덱인지 여부를 판단하는 단계; 상기 판단 결과에 따라 상기 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림 생성에 사용된 부호화 정보를 추출하는 단계; 및 상기 추출된 부호화 정보를 이용하여 원 영상에 대한 확장 계층 비트스트림을 생성하는 단계를 포함한다.
상기 또 기술적 과제를 이루기 위한 본 발명에 따른 스케일러블 영상 부호화 장치는 다수의 코덱들 중 어느 하나를 사용하여 영상에 대한 기본 계층 비트 스트림을 생성하는 기본 계층 부호화부; 상기 기본 계층 비트 스트림 생성에 사용된 코덱이 확장 계층 부호화가 지원되는 코덱인지 여부를 판단하는 코덱 판별부; 상기 판단 결과에 따라 상기 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림 생성에 사용된 부호화 정보를 추출하는 심볼 추출부; 및 상기 추출된 부호화 정보를 이용하여 원 영상에 대한 확장 계층 비트스트림을 생성하는 확장 계층 부호화부를 포함한다.
상기 또 기술적 과제를 이루기 위한 본 발명에 따른 스케일러블 영상 복호화 방법은 입력된 비트스트림을 기본 계층 비트스트림과 확장 계층 비트스트림으로 분리하는 단계; 상기 분리된 기본 계층 비트스트림의 부호화에 사용된 코덱이 확장 계층 복호화가 지원되는 코덱인지 여부를 판단하는 단계; 상기 판단 결과에 따라, 상기 분리된 기본 계층 비트스트림을 복호화하여 소정 정보를 추출하는 단계; 및 상기 추출된 소정 정보를 이용하여, 상기 분리된 확장 계층 비트스트림에 대하여 복호화를 수행하는 단계를 포함한다.
상기 또 다른 기술적 과제를 해결하기 위하여, 본 발명은 상기된 스케일러블 영상 복호화 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.
상기 기술적 과제를 이루기 위한 본 발명에 따른 스케일러블 영상 복호화 장치는 입력된 비트스트림을 기본 계층 비트스트림과 확장 계층 비트스트림을 분리하는 비트스트림 분리부; 상기 분리된 기본 계층 비트스트림에 사용된 코덱이 확장 계층 복호화가 지원되는 코덱인지 여부를 판단하는 코덱 판별부; 상기 판단 결과에 따라, 상기 분리된 기본 계층 비트스트림을 복호화하여 소정 정보를 추출하는 정보 추출부; 및 상기 추출된 소정 정보를 이용하여, 상기 분리된 확장 계층 비트스트림 에 대하여 복호화를 수행하는 확장 계층 복호화부를 포함한다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 스케일러블 영상 부호화 장치의 구성을 블록도로 도시한 것이다.
도 1에 도시된 바와 같이, 본 실시예에 따른 스케일러블 영상 부호화 장치(10)는 다운 스케일링부(110), 기본 계층 부호화부(120), 업 스케일링부(130), 감산부(140), 코덱 판별부(150), 심볼 추출부(160), 확장 계층 부호화부(170) 및 비트스트림 통합부(180)로 구성된다.
다운 스케일링부(110)는 입력되는 원 영상에 대하여, 화질을 조정하는 다운 스케일링을 수행한다. 특히, 다운 스케일링부(110)는 스케일러블 영상 부호화 장치(10)가 어떠한 스케일러빌리티(scalability)를 이용하여 원 영상을 부호화할 것인지에 따라 여러 가지의 다운 스케일링을 사용할 수 있다.
일 예로서, 다운 스케일링부(110)는 원 영상의 프레임을 수평 방향과 수직 방향으로 서브 샘플링함으로써 화면의 해상도를 낮출 수 있다. 다른 일 예로서, 다운 스케일링부(110)는 원 영상을 구성하는 프레임들 중 일부 프레임들을 제거함으로써 원 영상의 프레임률을 낮춘다. 또 다른 일 예로서, 다운 스케일링부(110)는 영상 포맷을 변환시키는 것도 가능한데, 원 영상이 4:4:4 영상 포맷인 경우, 색차 블럭에 대하여 다운 샘플링(down sampling)을 수행함으로써 원 영상을 4:2:2 혹은 4:2:0 영상 포맷으로 변환시킬 수 있다. 이때, 4:4:4 영상 포맷은 세 가지 성분인 휘도 성분 Y, 색차성분 Cb 및 Cr이 모든 픽셀의 위치에 각각의 성분이 존재하는 것을 의미하고, 4:2:2 영상 포맷은 색차 성분인 Cb, Cr 은 수평 방향으로는 휘도 성분 Y와 동일한 해상도를 갖지만, 수직 방향으로는 휘도 성분 Y의 1/2의 해상도는 가지는 것을 의미하고, 4:2:0 영상 포맷은 색차 성분인 Cb, Cr은 휘도 성분 Y에 비해 수평과 수직 방향으로 1/2의 해상도를 가지는 것을 의미한다. 또 다른 일 예로서, 다운 스케일링부(110)는 원 영상을 구성하는 화소들의 비트 깊이(bit depth)를 8비트에서 6비트로 변경하는 등의 비트 깊이를 줄일 수도 있다. 이러한 다운 스케일링부(110)에 의한 다운 스케일링은 스케일러블 영상 부호화 기술에 따라 여러 가지 다른 기능을 수행할 수 있으며, 본 실시예에 따른 다운 스케일링부(110)는 위에 열거한 방법에 제한되지 않는다. 그리고, 이러한 다운 스케일링부(110)는 경우에 따라 생략될 수 있는 구성 요소이다.
기본 계층 부호화부(120)는 다운 스케일링부(110)에 의해 다운 스케일링된 영상을 예측 부호화, 움직임 보상, 직교 변환, 양자화 및 엔트로피 부호화 등을 통해 부호화함으로써 기본 계층 비트스트림을 생성하고, 이 생성된 기본 계층 비트스트림을 복호화함으로써 기본 계층 복원 영상을 생성한다. 특히, 기본 계층 비트스트림의 생성을 위한 부호화를 수행하기 위해, 기본 계층 부호화부(120)는 H.264 baseline 프로파일, H.264 main 프로파일, VC-1 simple 프로파일, VC-1 advanced 프로파일, MPEG-4 part2 simple 프로파일, MPEG-4 part2 advanced simple 프로파일, MPEG-4 part2 main 프로파일 및 H.263 baseline 프로파일 등 중 기존 비디오 압축 표준과 호환되는 어느 하나의 토덱을 사용할 수 있다.
업 스케일링부(130)는 기본 계층 부호화부(120)에 의해 생성된 기본 계층 복원 영상에 대하여, 다운 스케일링부(110)의 다운 스케일링하는 과정의 반대 과정인 업 스케일링을 수행함으로써 업 스케일링된 복원 영상을 생성한다. 즉, 다운 스케일링부(110)에 의해 영상의 해상도가 낮아졌다면, 업 스케일링부(130)는 복원 영상에 대해 보간을 이용하여 복원 영상의 해상도를 다시 높인다. 그리고, 다운 스케일링부(110)에 의해 프레임률이 낮아졌다면, 업 스케일링부(130)는 복원 영상의 프레임들을 이용하여 새로운 프레임들을 생성한 후, 생성된 프레임들을 복원 영상의 프레임에 삽입함으로써 복원 영상의 프레임률을 높인다. 또한, 다운 스케일링부(110)에 의해 원 영상의 영상 포맷이 변환되었다면, 복원 영상의 영상 포맷을 원 영상의 영상 포맷에 맞게 변환한다. 그리고, 다운 스케일링부(110)에 의해 비트 깊이(bit depth)가 줄었다면, 업 스케일링부(130)는 비트 깊이를 다시 복원한다. 이러한 업 스케일링부(130)에 의한 업 스케일링은 스케일러블 영상 부호화 기술에 따라 여러 가지 다른 기능을 수행할 수 있으며, 본 실시예에 따른 업 스케일링부(130)는 위에 열거한 방법에 제한되지 않는다. 그리고, 이러한 업 스케일링부(130)는 다운 스케일링부(110)와 마찬가지로 경우에 따라 생략될 수 있는 구성 요소이다.
감산부(140)는 원 영상과 업 스케일링부(130)에 의해 생성된 업 스케일링된 복원 영상 간의 차이 영상을 구한다.
코덱 판별부(150)는 기본 계층 부호화부(120)에 사용된 코덱을 판별하여 상위 계층 비트스트림의 헤더어 기본 계층의 부호화에 사용된 코덱을 식별할 수 있게 하는 코덱 식별자를 기록한다. 특히, 도 2는 코덱 식별자에 따른 기본 계층 부호화부(120)에 의해 사용되는 코덱들의 일 예를 도시한 것으로서, 각각 코덱 식별자 1은 H.264 baseline, 코덱 식별자 2는 H.264 main, 코덱 식별자 3은 VC-1 simple, 코덱 식별자 4는 VC-1 advanced, 코덱 식별자 N은 H.263 baseline을 의미한다. 즉, 여기서 1~N까지 N가지 코덱의 경우 식별이 가능한 경우이며, 지원되지 않는 코덱의 경우 코덱 식별자 N+1로 기록한다. 이때 코덱 식별자를 기록하면서 기본 계층에 사용된 코덱이 지원되는 코덱, 즉, 심볼 추출이 가능한 코덱인지 여부를 판단한다.
심볼 추출부(160)는 코덱 판별부(150)의 판단 결과 기본 계층 부호화를 수행하는데 사용된 코덱이 확장 계층 부호화가 지원되는 코덱인 경우, 기본 계층 부호화부(120)에 의해 생성된 기본 계층 비트스트림을 엔트로피 복호화함으로써 기본 계층 비트스트림의 부호화에 사용된 심볼을 추출하고, 추출된 심볼을 확장 계층 부호화부(170)에 의해 사용될 수 있도록 보정한다. 이때, 심볼을 보정하는 것은 기본 계층에서 사용된 코덱에 따라 각 심볼의 특징이 서로 다를 수 있으며, 또한 특징이 서로 같다고 하더라도 스케일러블 부호화 특성상 기본 계층과 확장 계층 간에 프레임 크기나 매크로블록 내의 움직임 벡터의 개수 등의 부호화 환경에 있어서 차이가 날 수 있기 때문에, 기본 계층 비트스트림으로부터 추출된 심볼을 그대로 확장 계층에 사용할 수 없는 경우가 발생한다. 기본 계층 비트스트림으로부터 추출 가능한 심볼들은 기존 모든 비디오 포준이 공통적으로 갖는 신택스 정보에 해당하며, 일 예로 매크로블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴(CBP:Coded Block Pattern) 및 양자화된 변환 계수 값과 변환 계수 값을 역양자화한 잉여(residue) 정보 등이 될 수 있다. 이때, 매크로블록의 타입 정보는 현 매크로블록의 부호화 모드를 나타내는 것으로 매크로블록이 움직임 예측 및 보상이 적용되는 인터 모드(inter mode) 타입인지, 공간 예측이 적용되는 인트라 모드(intra mode)타입인지에 대한 정보를 말한다. 또한, 인터 모드 타입에 있어서는 경우에 따라 움직임 보상에 대한 정보, 예를 들어 16x16, 16x8, 8x16, 8x8 등 움직임 벡터의 블록 크기를 나타내기도 하고, 또는 순방향, 역방향, 양방향 및 다이렉트 모드 등 움직임 벡터의 방향이나 종류를 나타내기도 한다. 움직임 벡터는 프레임 간 예측에서 현재 매크로블록과 이에 대응하는 참조 매크로 블록 간의 변위를 말하며, 부호화 블록 패턴(CBP)은 매크로블록 내 양자화된 변환 계수가 존재하는 블록의 위치를 가리키는 것으로, 적어도 하나 이상의 양자화된 변환 계수가 매크로블록을 구성하는 블록 내에 있는지를 나타낸다.
이러한 심볼 추출부(160)는 도 3에 도시된 바와 같이, 제 1 스위치(312), 제 2 스위치(313), H.264 baseline 코덱을 이용하여 기본 계층 비트스트림을 복호화하는 제 1 비트스트림 복호화부(310-1), 제 1 심볼 보정부(311-1), H.264 main 코덱을 이용하여 기본 계층 비트스트림을 복호화하는 제 2 비트스트림 복호화부(310-2), 제 2 심볼 보정부(311-2), VC-1 simple 코덱을 이용하여 기본 계층 비트스트림을 복호화하는 제 3 비트스트림 복호화부(310-3), 제 3 심볼 보정부(311-3) ..., H.263 baseline 코덱을 이용하여 기본 계층 비트스트림을 복호화하는 제 N 비트스트림 복호화부(310-N) 및 제 N 심볼 보정부(311-N)로 구성된다.
이때, 일 예로서 기본 계층 부호화에 사용된 코덱이 VC-simple 인 경우를 중 심으로 심볼 추출부(160)에 대해 상세히 설명하기로 한다. 다음에 설명될 내용은 기본 계층 부호화부에 사용된 코덱이 H.264 baseline, H.264 main 및 VC-1 advanced 등에서도 모두 적용이 가능하다.
기본 계층 부호화에 사용된 코덱이 VC-1 simple 이면, 제 1 스위치(312)는 기본 계층 부호화부(120)을 제 3 비트스트림 복호화부(310-3)와 연결하고, 제 2 스위치(313)는 제 3 심볼 보정부(311-3)를 확장 계층 부호화부(170)와 연결한다. 그러면, 제 3 비트스트림 복호화부(310-3)가 기본 계층 비트스트림에 대해 엔트로피 복호화를 수행하여 기본 계층 비트스트림으로부터 매크로블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴 및 양자화된 변환 계수 값등의 심볼을 추출한다. 그리고, 제 3 심볼 보정부(311-3)는 이 추출된 심볼을 확장 계층 부호화부(170)에 의해 사용될 수 있도록 보정한다.
이러한 보정의 일 예로서, 기본 계층의 프레임의 크기와 확장 계층의 프레임의 크기가 다르다면, 제 3 심볼 보정부(311-3)는 도 4에 도시된 바와 같이 프레임들의 크기를 고려하여 추출된 기본 계층 매크로블록의 심볼을 확장 계층 매크로블록에 맞게 매핑함으로써 보정을 수행한다.
그리고, 제 3 비트스트림 복호화부(310-3)에 의해 추출된 심볼이 움직임 벡터인 경우, 이 움직임 벡터를 보정하는 방법의 일 예를 도 5a 내지 5c를 참조하여 상세히 설명한다.
만일, 확장 계층의 매크로블록 내의 움직임 벡터의 개수와 기본 계층의 매크로블록 내의 움직임 벡터의 개수가 동일하다면, 제 3 심볼 보정부(311-3)는 제 3 비트스트림 복호화부(310-3)에 의해 추출된 기본 계층의 움직임 벡터를 보정하지 않는다.
그러나, 도 5a 와 도 5b에 도시된 바와 같이, 확장 계층의 매크로블록 내의 움직임 벡터의 개수와 기본 계층의 매크로블록 내의 움직임 벡터의 개수가 서로 다르다면, 제 3 심볼 보정부(311-3)는 추출된 기본 계층의 움직임 벡터를 확장 계층의 매크로블록에 맞게 보정한다.
상세하게는, 확장 계층의 매크로블록 내의 움직임 벡터의 개수와 기본 계층의 매크로블록 내의 움직임 벡터의 개수가 다르다면, 추출된 기본 계층의 매크로블록 내의 움직임 벡터를 이용하여 확장 계층의 매크로블록 내의 움직임 벡터의 개수에 맞는 새로운 움직임 벡터를 구한다. 이 경우 일 예로서, 확장 계층 매크로블록 내의 움직임 벡터의 개수가 기본 계층 매크로블록 내의 움직임 벡터의 개수보다 많다면, 도 5a에 도시된 바와 같이 추출된 기본 계층 매크로블록 내의 움직임 벡터를 복사하여 대응하는 확장 계층 매크로블록 내의 움직임 벡터들로 할 수 있다. 반대로, 다른 일 예로서 확장 계층 매크로블록 내의 움직임 벡터의 개수가 기본 계층 매크로블록 내의 움직임 벡터의 개수보다 적다면, 도 5b에 도시된 바와 같이 추출된 움직임 벡터들의 평균을 계산하고, 이 평균을 확장 계층의 매크로블록의 움직임 벡터로 할 수 있다.
그리고, 확장 계층의 프레임의 크기와 기본 계층의 프레임의 크기가 다르다면, 이 프레임의 크기를 고려하여 확장 계층의 매크로블록의 움직임 벡터의 크기를 조절하는데, 예를 들면, 도 5c에 도시된 바와 같이 확장 계층의 프레임의 크기가 기본 계층의 프레임의 크기의 2배라면, 기본 계층에서 추출된 움직임 벡터에 2를 곱함으로써 확장 계층의 움직임 벡터를 구할 수 있다.
확장 계층 부호화부(170)는 심볼 추출부(160)로부터 추출된 심볼, 즉 기본 계층 부호화부(120)에 의해 기본 계층 비트스트림의 부호화에 사용된 정보를 이용하여 원 영상 또는 감산부(140)에 의해 구해진 원 영상과 업스케일링된 기본 계층의 복원 영상간의 차이 영상에 대한 부호화를 수행한다. 본 실시예에 따르면, 기본 계층 비트스트림의 부호화에 사용된 정보의 예로는 매크로블록의 타입 정보, 부호화 블록 패턴 정보, 움직임 벡터, 양자화된 변환 계수 등을 들 수 있다. 다만, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 상기된 정보들 외에 다른 정보가 더 포함될 수 있음을 이해할 수 있다.
보다 상세하게 설명하면, 확장 계층 부호화부(170)는 원 영상 또는 감산부(140)에 의해 구해진 차이 영상을 예측 부호화, 움직임 보상, 변환 및 양자화 등을 통해 부호화함으로써 움직임 벡터 및 양자화된 변환 계수 등을 포함하는 비트스트림을 생성한다. 그리고, 확장 계층 부호화부(170)는 심볼 추출부(160)로부터 추출된 매크로블록의 타입 정보와 부호화 블록 패턴 정보를 참조하여, 이와 같이 생성된 움직임 벡터 및 양자화된 변환 계수와 심볼 추출부(160)로부터 추출된 움직임 벡터 및 양자화된 변환 계수가 서로 대응되는지를 판단한다. 그리고, 확장 계층 부호화부(170)는 서로 대응되는 것으로 판단된 경우, 심볼 추출부(160)로부터 추출된 움직임 벡터 및 양자화된 변환 계수들을 예측치로 하여 예측부호화에 활용한다. 즉, 각 움직임 벡터들간의 감산 결과 및 양자화된 변환 계수들간의 감산 결과를 엔 트로피 부호화함으로써 확장 계층 비트스트림을 생성한다.
이때, 심볼 추출부(160)에 의해 추출된 움직임 벡터 및 양자화된 변환 계수가 확장 계층 부호화부(170)에 의해 생성된 움직임 벡터 및 양자화된 변환 계수와 비슷한 경우에는 더욱 부호화 효율이 향상될 수 있다.
비트스트림 통합부(180)는 기본 계층 부호화부(120)에 의해 생성된 기본 계층 비트스트림과 확장 계층 부호화부(170)에 의해 생성된 확장 계층 비트스트림을 통합함으로써 통합된 비트스트림을 생성한다.
상술한 바와 같이, 본 실시예에 따른 스케일러블 영상 부호화 장치는 기본 계층 비트스트림을 복호화하여 확장 계층 부호화에 필요한 정보를 추출하고, 이 추출된 정보를 이용하여 원 영상 혹은 원 영상과 복원 영상간의 차이 영상에 대하여 확장 계층 부호화를 수행함으로써 기존의 다양한 코덱들을 활용하면서 동시에 높은 화질의 서비스와 높은 부호화 효율을 제공한다.
도 6은 본 발명의 일 실시예에 따른 스케일러블 영상 복호화 장치의 구성을 블록도로 도시한 것이다.
도 6에 도시된 바와 같이, 본 실시예에 따른 스케일러블 영상 복호화 장치(60)는 비트스트림 식별부(610), 기본 계층 복호화부(620), 업 스케일링부(630),코덱 판별부(640), 심볼 추출부(650), 확장 계층 복호화부(660) 및 가산부(670)로 구성된다.
비트스트림 식별부(610)는 입력되는 비트스트림에 확장 계층 비트스트림이 포함되어 있는지 여부를 식별하고, 식별 결과 확장 계층 비트스트림이 포함되어 있 으면 비트스트림을 기본 계층 비트스트림과 확장 계층 비트스트림으로 분리한다.
기본 계층 복호화부(620)는 기본 계층 비트스트림을 복호화함으로써 기본 계층 복원 영상을 생성하고, 업 스케일링부(630)는 이 기본 계층 복원 영상에 업 스케일링을 수행함으로써 업 스케일링된 복원 영상을 생성한다. 특히, 기본 계층 복호화부(620)는 H.264 baseline 프로파일, H.264 main 프로파일, VC-1 simple 프로파일, VC-1 advanced 프로파일, MPEG-4 part2 simple 프로파일, MPEG-4 part2 advanced simple 프로파일, MPEG-4 part2 main 프로파일 및 H.263 baseline 프로파일 등 기존 비디오 압축 표준과 호환되는 어느 하나의 코덱을 사용할 수 있다.
코덱 판별부(640)는 확장 계층 비트스트림의 헤더를 파싱함으로써 기본 계층의 부호화에 사용된 코덱을 식별할 수 있게 하는 코덱 식별자를 추출하고, 이 추출된 코덱 식별자에 따른 코덱이 확장 계층 복호화가 지원되는 코덱인지 여부를 판단한다.
심볼 추출부(650)는 코덱 판별부(640)의 판단 결과 기본 계층 부호화를 수행하는데 사용된 코덱이 확장 계층 부호화시 활용 가능한 지원 코덱이면, 기본 계층 비트스트림을 엔트로피 복호화함으로써 기본 계층 비트스트림의 부호화에 사용된 심볼을 추출하고, 추출된 심볼을 확장 계층 복호화부(660)에 의해 사용될 수 있도록 보정한다. 이때의 심볼로는 매크로블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴 및 양자화된 변환 계수 등이 될 수 있다. 이러한 심볼 추출부(650)는 도 3에 도시된 바와 같이, 제 1 스위치(312), 제 2 스위치(313), H.264 baseline 코덱에 의한 기본 계층 비트스트림으로부터 심볼을 추출하는 제 1 비트스트림 복호화 부(310-1)와 제 1 심볼 보정부(311-1), H.264 main 코덱에 의한 기본 계층 비트스트림으로부터 심볼을 추출하는 제 2 비트스트림 복호화부(310-2)와 제 2 심볼 보정부(311-2), VC-1 simple 코덱에 의한 기본 계층 비트스트림으로부터 심볼을 추출하는 제 3 비트스트림 복호화부(310-3), 제 3 심볼 보정부(311-3) ... 및 H.263 baseline 코덱에 의한 기본 계층 비트스트림으로부터 심볼을 추출하는 제 N 비트스트림 복호화부(310-N), 제 N 심볼 보정부(311-N)로 구성되며, 이에 대한 설명은 도 1의 스케일러블 영상 부호화 장치(10)의 심볼 추출부(160)에서 설명한 바와 동일하므로 생략한다.
확장 계층 복호화부(660)는 심볼 추출부(650)에 의해 추출 및 보정된 매크로블록의 타입, 움직임 벡터, 부호화 블록 패턴 및 양자화된 변환 계수 등의 심볼을 예측 복호화하는데 이용하여, 확장 계층 비트스트림을 복호화함으로써 차이 영상을 복원한다.
가산부(670)는 확장 계층 복호화부(660)에 의해 복원된 차이 영상과 업 스케일링부(630)에 의해 업 스케일링된 복원 영상을 가산함으로써 최종 복원 영상을 생성한다.
도 7은 본 발명의 일 실시예에 따른 스케일러블 영상 부호화 방법을 흐름도로 도시한 것이다. 도 7을 참조하면, 본 실시예에 따른 스케일러블 영상 부호화 방법은 도 1에 도시된 스케일러블 영상 부호화 장치에서 시계열적으로 처리되는 단계들로 구성된다. 따라서, 이하 생략된 내용이라 하더라도 도 1에 도시된 스케일러블 영상 부호화 장치에 관하여 이상에서 기술된 내용은 본 실시예에 따른 스케일러블 영상 부호화 방법에도 적용된다.
710 단계에서 스케일러블 영상 부호화 장치(10)는 입력되는 원 영상에 대하여 화질을 조정하는 다운 스케일링을 수행한다. 스케일러블 영상 부호화 장치(10)가 어떠한 스케일러빌리티(scalability)를 이용하여 원 영상을 부호화할 것인지에 따라 화면의 해상도를 낮추는 방법, 원 영상의 프레임률을 낮추는 방법, 영상 포맷을 변환하는 방법 및 비트 깊이(bit depth)를 줄이는 방법 등의 여러 가지의 다운 스케일링을 수행할 수 있다.
720 단계에서 스케일러블 영상 부호화 장치(10)는 710 단계에서 다운스케일된 영상을 부호화함으로써 기본 계층 비트스트림을 생성하고, 이 생성된 기본 계층 비트스트림을 복호화함으로써 기본 계층 복원 영상을 생성한다. 이때, 기본 계층 비트스트림의 생성을 위한 부호화를 수행하기 위해, H.264 baseline 프로파일, H.264 main 프로파일, VC-1 simple 프로파일, VC-1 advanced 프로파일, MPEG-4 part2 simple 프로파일, MPEG-4 part2 advanced simple 프로파일, MPEG-4 part2 main 프로파일 및 H.263 baseline 프로파일 등 기존 비디오 압축 표준과 호환되는 어느 하나의 코덱을 사용할 수 있다.
730 단계에서 스케일러블 영상 부호화 장치(10)는 720 단계에서 생성된 기본 계층 복원 영상에 대하여 업 스케일링을 수행함으로써 업 스케일링된 복원 영상을 생성한다. 이때, 업 스케일링은 710 단계에서 다운 스케일링하는 것의 반대 과정을 수행하는 것을 말한다.
740 단계에서 스케일러블 영상 부호화 장치(10)는 원 영상과 730 단계에서 생성된 업 스케일링된 복원 영상 간의 차이 영상을 구한다.
750 단계에서 스케일러블 영상 부호화 장치(10)는 720 단계에서 사용된 기본 계층 코덱에 따라 확장 계층 부호화시 활용 가능한 지원 코덱인지 판단하고, 상위 계층 비트스트림의 헤더에 기본 계층의 부호화에 사용된 코덱을 식별할 수 있게 하는 코덱 식별자를 기록한다.
760 단계에서 스케일러블 영상 부호화 장치(10)는 750 단계에서의 판단 결과 추출된 코덱 식별자에 따른 코덱이 지원되는 코덱이면, 720 단계에서 생성된 기본 계층 비트스트림을 엔트로피 복호화함으로써 기본 계층 비트스트림의 부호화에 사용된 심볼을 추출하고, 추출된 심볼을 확장 계층 부호화하는데 사용될 수 있도록 보정한다. 이때의 심볼로는 매크로블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴(CBP:Coded Block Pattern) 및 양자화된 변환 계수 등이 될 수 있다.
770 단계에서 스케일러블 영상 부호화 장치(10)는 760 단계에서 추출 및 보정된 심볼을 예측 부호화하는데 이용하여, 740 단계에서 구한 차이 영상을 부호화함으로써 확장 계층 비트스트림을 생성한다.
780 단계에서 스케일러블 영상 부호화 장치(10)는 720 단계에서 생성된 기본 계층 비트스트림과 770 단계에서 생성된 확장 계층 비트스트림을 통합함으로써 통합된 비트스트림을 생성한다.
도 8은 본 발명의 일 실시예에 따른 스케일러블 영상 복호화 방법을 흐름도로 도시한 것이다. 도 8을 참조하면, 본 실시예에 따른 스케일러블 영상 복호화 방법은 도 6에 도시된 스케일러블 영상 복호화 장치에서 시계열적으로 처리되는 단계 들로 구성된다. 따라서, 이하 생략된 내용이라 하더라도 도 6에 도시된 스케일러블 영상 복호화 장치에 관하여 이상에서 기술된 내용은 본 실시예에 따른 스케일러블 영상 복호화 방법에도 적용된다.
810 단계에서 스케일러블 영상 복호화 장치(60)는 입력되는 비트스트림을 기본 계층 비트스트림과 확장 계층 비트스트림으로 분리한다.
820 단계에서 스케일러블 영상 복호화 장치(60)는 810 단계에서 분리된 기본 계층 비트스트림을 복호화함으로써 기본 계층 복원 영상을 생성한다.
830 단계에서 스케일러블 영상 복호화 장치(60)는 820 단계에서 생성된 기본 계층 복원 영상에 업 스케일링을 수행함으로써 업 스케일링된 복원 영상을 생성한다.
840 단계에서 스케일러블 영상 복호화 장치(60)는 810 단계에서 분리된 확장 계층 비트스트림의 헤더를 파싱함으로써 기본 계층의 부호화에 사용된 코덱을 식별할 수 있게 하는 코덱 식별자를 추출하고, 이 추출된 코덱 식별자에 따른 코덱이 확장 계층 복호화가 지원되는 코덱인지 여부를 판단한다.
850 단계에서 스케일러블 영상 복호화 장치(60)는 840 단계에서의 판단 결과 기본 계층 부호화를 수행하는데 사용된 코덱이 지원되는 코덱이면, 기본 계층 비트스트림을 엔트로피 복호화함으로써 기본 계층 비트스트림의 부호화에 사용된 심볼을 추출하고, 추출된 심볼을 확장 계층 복호화에 사용될 수 있도록 보정한다.
860 단계에서 스케일러블 영상 복호화 장치(60)는 840 단계에서 기본 계층 코덱이 지원 가능한 코덱으로 판단된 경우, 850 단계에서 추출 및 보정된 심볼을 예측 복호화하는데 이용하고, 기본 계층 코덱이 지원되지 않는 코덱으로 판단된 경우에는 심볼 추출 없이, 810 단계에서 분리된 확장 계층 비트스트림을 복호화함으로써 차이 영상을 복원한다.
870 단계에서 스케일러블 영상 복호화 장치(60)는 860 단계에서 복원된 차이 영상과 830 단계에서 생성된 업 스케일링된 복원 영상을 가산함으로써 최종 복원 영상을 생성한다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 스케일러블 영상 부호화 장치의 구성을 블록도로 도시한 것이다.
도 2는 코덱 식별자에 따른 기본 계층 부호화부(120)에 의해 사용되는 코덱들의 일 예를 도시한 것이다.
도 3은 본 발명의 일 실시예에 따른 심볼 추출부(160)의 보다 상세한 구성을 블록도로 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 제 3 심볼 보정부(311-3)가 기본 계층 프레임과 확장 계층 프레임의 크기를 고려하여 심볼을 추출하는 일 예를 도시한 것이다.
도 5a 내지 5c는 본 발명의 일 실시예에 따른 제 3 심볼 보정부(311-3)가 추출된 움직임 벡터를 보정하는 일 예를 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따른 스케일러블 영상 복호화 장치의 구성을 블록도로 도시한 것이다.
도 7은 본 발명의 일 실시예에 따른 스케일러블 영상 부호화 방법을 흐름도로 도시한 것이다.
도 8은 본 발명의 일 실시예에 따른 스케일러블 영상 복호화 방법을 흐름도로 도시한 것이다.

Claims (15)

  1. 다수의 코덱들 중 어느 하나를 사용하여 영상에 대한 기본 계층 비트 스트림을 생성하는 단계;
    상기 기본 계층 비트 스트림 생성에 사용된 코덱이 확장 계층 부호화에 활용 가능한 지원 코덱인지 여부를 판단하는 단계;
    상기 판단 결과에 따라 상기 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림 생성에 사용된 부호화 정보를 추출하는 단계; 및
    상기 추출된 부호화 정보를 이용하여 원 영상에 대한 확장 계층 비트스트림을 생성하는 단계를 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 방법.
  2. 제 1 항에 있어서, 상기 부호화 정보는
    매크로블록의 타입 정보, 부호화 블록 패턴 정보, 움직임 벡터, 양자화된 변환 계수 중 적어도 하나를 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 방법.
  3. 제 1 항에 있어서, 상기 판단하는 단계는
    상기 기본 계층 비트스트림을 파싱함으로써 부호화에 사용된 코덱의 종류를 판별하는 단계; 및
    상기 판별된 코덱의 종류가 확장 계층 부호화가 활용 가능한 지원 코덱에 해 당하는지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 방법.
  4. 제 1 항에 있어서, 상기 확장 계층 비트스트림을 생성하는 단계는
    상기 추출된 정보를 이용하여, 원 영상과 상기 원 영상으부터 복원된 영상과의 차이 영상에 대하여 부호화를 수행함으로써 확장 계층 비트스트림을 생성하는 것을 특징으로 하는 스케일러블 영상 부호화 방법.
  5. 제 1 항에 있어서,
    입력되는 원 영상을 다운스케일링하는 단계; 및
    상기 다운스케일링된 영상을 부호화함으로써 기본 계층 비트스트림을 생성하는 단계를 더 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 방법.
  6. 입력된 비트스트림을 기본 계층 비트스트림과 확장 계층 비트스트림으로 분리하는 단계;
    상기 분리된 기본 계층 비트스트림의 부호화에 사용된 코덱이 확장 계층 복호화에 활용 가능한 지원 코덱인지 여부를 판단하는 단계;
    상기 판단 결과에 따라, 상기 분리된 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림의 부호화에 사용된 정보를 추출하는 단계; 및
    상기 추출된 정보를 이용하여, 상기 분리된 확장 계층 비트스트림에 대하여 복호화를 수행하는 단계를 포함하는 것을 특징으로 하는 스케일러블 영상 복호화 방법.
  7. 제 6 항에 있어서, 상기 추출된 정보는
    블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴 및 양자화된 변환 계수 중 적어도 하나를 포함하는 것을 특징으로 하는 스케일러블 영상 복호화 방법.
  8. 다수의 코덱들 중 어느 하나를 사용하여 영상에 대한 기본 계층 비트스트림을 생성하는 기본 계층 부호화부;
    상기 기본 계층 비트스트림 생성에 사용된 코덱이 확장 계층 부호화에 활용 가능한 지원 코덱인지 여부를 판단하는 코덱 판별부;
    상기 판단 결과에 따라 상기 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림 생성에 사용된 부호화 정보를 추출하는 심볼 추출부; 및
    상기 추출된 부호화 정보를 이용하여 원 영상에 대한 확장 계층 비트스트림을 생성하는 확장 계층 부호화부를 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 장치.
  9. 제 8 항에 있어서, 상기 추출된 정보는
    블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴 및 양자화된 변환 계수 중 적어도 하나를 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 장치.
  10. 제 8 항에 있어서, 상기 코덱 판별부는
    상기 기본 계층 부호화에 사용된 코덱의 종류를 판별하고, 상기 판별된 코덱의 종류가 확장 계층 부호화에 활용 가능한 지원 코덱에 해당하는지 여부를 판단하는 것을 특징으로 하는 스케일러블 영상 부호화 장치.
  11. 제 8 항에 있어서, 상기 확장 계층 부호화부는
    상기 추출된 정보를 이용하여, 원 영상과 상기 원 영상으부터 복원된 영상과의 차이 영상에 대하여 부호화를 수행함으로써 확장 계층 비트스트림을 생성하는 것을 특징으로 하는 스케일러블 영상 부호화 장치.
  12. 제 8 항에 있어서,
    입력되는 원 영상을 다운스케일링하는 다운 스케일링부; 및
    상기 다운스케일링된 영상을 부호화함으로써 기본 계층 비트스트림을 생성하는 기본 계층 부호화부를 더 포함하는 것을 특징으로 하는 스케일러블 영상 부호화 장치.
  13. 입력된 비트스트림을 기본 계층 비트스트림과 확장 계층 비트스트림을 분리하는 비트스트림 분리부;
    상기 분리된 기본 계층 비트스트림에 사용된 코덱이 확장 계층 복호화에 활 용 가능한 지원 코덱인지 여부를 판단하는 코덱 판별부;
    상기 판단 결과에 따라, 상기 분리된 기본 계층 비트스트림을 복호화함으로써 상기 기본 계층 비트스트림의 부호화에 사용된 정보를 추출하는 정보 추출부; 및
    상기 추출된 정보를 이용하여, 상기 분리된 확장 계층 비트스트림에 대하여 복호화를 수행하는 확장 계층 복호화부를 포함하는 것을 특징으로 하는 스케일러블 영상 복호화 장치.
  14. 제 13 항에 있어서, 상기 추출된 정보는
    블록의 타입 정보, 움직임 벡터, 부호화 블록 패턴 및 양자화된 변환 계수 중 적어도 하나를 포함하는 것을 특징으로 하는 스케일러블 영상 복호화 장치.
  15. 제 6 항 내지 제 7 항 중에 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.
KR1020070103163A 2007-10-12 2007-10-12 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치 KR101345287B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020070103163A KR101345287B1 (ko) 2007-10-12 2007-10-12 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치
US12/076,126 US8160158B2 (en) 2007-10-12 2008-03-13 Scalable video coding method and apparatus and scalable video decoding method and apparatus
US13/417,847 US8588313B2 (en) 2007-10-12 2012-03-12 Scalable video coding method and apparatus and scalable video decoding method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070103163A KR101345287B1 (ko) 2007-10-12 2007-10-12 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090037689A true KR20090037689A (ko) 2009-04-16
KR101345287B1 KR101345287B1 (ko) 2013-12-27

Family

ID=40534163

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070103163A KR101345287B1 (ko) 2007-10-12 2007-10-12 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치

Country Status (2)

Country Link
US (2) US8160158B2 (ko)
KR (1) KR101345287B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013157828A1 (ko) * 2012-04-16 2013-10-24 한국전자통신연구원 복수의 계층을 지원하는 비트스트림의 디코딩 방법 및 이를 이용하는 장치
WO2014107069A1 (ko) * 2013-01-07 2014-07-10 한국전자통신연구원 영상 부호화/복호화 방법 및 장치
WO2015060699A1 (ko) * 2013-10-26 2015-04-30 삼성전자 주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
KR20160034926A (ko) * 2013-07-18 2016-03-30 퀄컴 인코포레이티드 비디오 정보의 스케일러블 코딩을 위한 디바이스 및 방법

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102224731A (zh) * 2009-09-22 2011-10-19 松下电器产业株式会社 图像编码装置、图像解码装置、图像编码方法及图像解码方法
EP3145189B1 (en) 2010-01-06 2019-06-19 Dolby Laboratories Licensing Corporation Complexity-adaptive scalable decoding and streaming for multi-layered video systems
SG10201710075SA (en) 2012-05-14 2018-01-30 Luca Rossato Decomposition of residual data during signal encoding, decoding and reconstruction in a tiered hierarchy
CN102740079B (zh) * 2012-07-12 2014-10-01 北方工业大学 基于hevc标准率失真优化的质量可伸缩编码
CN102740078B (zh) * 2012-07-12 2014-10-22 北方工业大学 基于hevc标准的自适应空间可伸缩编码
US9124899B2 (en) 2012-09-28 2015-09-01 Sharp Laboratories Of America, Inc. Motion derivation and coding for scaling video
KR102657912B1 (ko) * 2012-10-01 2024-04-15 지이 비디오 컴프레션, 엘엘씨 향상 레이어에서 변환 계수 블록들의 서브블록-기반 코딩을 이용한 스케일러블 비디오 코딩
US10375405B2 (en) * 2012-10-05 2019-08-06 Qualcomm Incorporated Motion field upsampling for scalable coding based on high efficiency video coding
CN103916670B (zh) * 2013-01-07 2017-08-04 华为技术有限公司 一种图像的编码、解码方法及装置
CN103281533B (zh) * 2013-05-14 2016-02-24 芯原微电子(北京)有限公司 用于可伸缩视频编码中增强层运动估计的设备和方法
US9560358B2 (en) * 2013-07-22 2017-01-31 Qualcomm Incorporated Device and method for scalable coding of video information
US9219924B2 (en) 2013-07-26 2015-12-22 Hong Kong Applied Science and Technology Research Institute Company Limited Spatial scalable video coding using non-scalable video CODEC
GB2544800A (en) * 2015-11-27 2017-05-31 V-Nova Ltd Adaptive bit rate ratio control
US10764588B2 (en) 2018-08-10 2020-09-01 Apple Inc. Deep quality enhancement of adaptive downscaled coding for image compression
KR20230165766A (ko) * 2021-04-02 2023-12-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 확장성 차원 정보(scalability dimension information)의 사용

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000511363A (ja) * 1994-07-14 2000-08-29 ジョンソン、グレイス、カンパニー 画像を圧縮するための方法及び装置
US6510177B1 (en) * 2000-03-24 2003-01-21 Microsoft Corporation System and method for layered video coding enhancement
US7380028B2 (en) * 2003-06-13 2008-05-27 Microsoft Corporation Robust delivery of video data
US20050254575A1 (en) * 2004-05-12 2005-11-17 Nokia Corporation Multiple interoperability points for scalable media coding and transmission
US20050259729A1 (en) * 2004-05-21 2005-11-24 Shijun Sun Video coding with quality scalability
WO2006108917A1 (en) * 2005-04-13 2006-10-19 Nokia Corporation Coding, storage and signalling of scalability information
KR100943914B1 (ko) * 2006-01-12 2010-03-03 엘지전자 주식회사 다시점 비디오의 처리 방법 및 장치
EP2100459B1 (en) * 2007-01-08 2019-04-03 Nokia Technologies Oy System and method for providing and using predetermined signaling of interoperability points for transcoded media streams

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10958918B2 (en) 2012-04-16 2021-03-23 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US10958919B2 (en) 2012-04-16 2021-03-23 Electronics And Telecommunications Resarch Institute Image information decoding method, image decoding method, and device using same
US10602160B2 (en) 2012-04-16 2020-03-24 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
US11949890B2 (en) 2012-04-16 2024-04-02 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US20230035462A1 (en) 2012-04-16 2023-02-02 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
US11490100B2 (en) 2012-04-16 2022-11-01 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US11483578B2 (en) 2012-04-16 2022-10-25 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
US10595026B2 (en) 2012-04-16 2020-03-17 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US12028538B2 (en) 2012-04-16 2024-07-02 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
WO2013157828A1 (ko) * 2012-04-16 2013-10-24 한국전자통신연구원 복수의 계층을 지원하는 비트스트림의 디코딩 방법 및 이를 이용하는 장치
US10116946B2 (en) 2013-01-07 2018-10-30 Electronics And Telecommunications Research Institute Image encoding/decoding method and device
US10455241B2 (en) 2013-01-07 2019-10-22 Electronics And Telecommunications Research Institute Image encoding/decoding method and device
WO2014107069A1 (ko) * 2013-01-07 2014-07-10 한국전자통신연구원 영상 부호화/복호화 방법 및 장치
US9843814B2 (en) 2013-01-07 2017-12-12 Electronics And Telecommunications Research Institute Image encoding/decoding method and device
US10841598B2 (en) 2013-01-07 2020-11-17 Electronics And Telecommunications Research Institute Image encoding/decoding method and device
KR20160034926A (ko) * 2013-07-18 2016-03-30 퀄컴 인코포레이티드 비디오 정보의 스케일러블 코딩을 위한 디바이스 및 방법
WO2015060699A1 (ko) * 2013-10-26 2015-04-30 삼성전자 주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
US10827197B2 (en) 2013-10-26 2020-11-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding multilayer video and method and apparatus for decoding multilayer video

Also Published As

Publication number Publication date
KR101345287B1 (ko) 2013-12-27
US20090097573A1 (en) 2009-04-16
US8588313B2 (en) 2013-11-19
US8160158B2 (en) 2012-04-17
US20120170661A1 (en) 2012-07-05

Similar Documents

Publication Publication Date Title
KR101345287B1 (ko) 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치
KR100725407B1 (ko) 방향적 인트라 잔차 예측에 따라 비디오 신호를 인코딩하고디코딩하는 방법 및 장치
KR100772883B1 (ko) 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
KR100791299B1 (ko) 다 계층 기반의 비디오 인코딩 방법 및 장치
KR100727969B1 (ko) 영상의 부호화 및 복호화 장치와, 그 방법, 및 이를수행하기 위한 프로그램이 기록된 기록 매체
KR100727970B1 (ko) 영상의 부호화 및 복호화 장치와, 그 방법, 및 이를수행하기 위한 프로그램이 기록된 기록 매체
KR101215614B1 (ko) 영상의 부호화 및 복호화 장치와, 그 방법, 및 이를수행하기 위한 프로그램이 기록된 기록 매체
JP7343668B2 (ja) Ｖｖｃにおける色変換のための方法及び機器
JP2008522537A (ja) 多階層基盤のビデオエンコーディング方法、デコーディング方法及び前記方法を利用した装置
KR20060088461A (ko) 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
KR20060085157A (ko) 베이스 레이어의 내부모드 블록의 예측정보를 이용하여영상신호를 엔코딩/디코딩하는 방법 및 장치
CN105850124B (zh) 使用量化误差的额外的控制编码、解码视频信号的方法和装置
JP6055098B2 (ja) 映像復号方法及びそれを利用する装置
JP7508705B2 (ja) イントラ予測モード向けのエントロピーコーディングのための方法、装置、及びコンピュータプログラム
EP1817911A1 (en) Method and apparatus for multi-layered video encoding and decoding
KR100883591B1 (ko) 베이스 레이어의 내부모드 블록의 예측정보를 이용하여영상신호를 엔코딩/디코딩하는 방법 및 장치
CN114731447B (zh) 用于视频解码的方法和设备
KR20120126500A (ko) 분산비디오 코덱 장치 및 이를 이용한 전경 영역 분할 보조정보 생성 방법
CN116584097A (zh) 联合运动矢量差编解码
CN115486077A (zh) 针对变换系数的符号图的改进熵编码
KR101072728B1 (ko) Ｓｖｃ 비트스트림의 ｈ.264 비트스트림으로의 트랜스코딩 장치 및 방법
CN113395524B (zh) 视频解码方法、装置和电子设备
CN115699738B (zh) 视频编解码方法设备、装置以及计算机可读存储介质
JP2012070249A (ja) 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、及びプログラム
CN117693934A (zh) 基于合并色度块的亮度色度预测

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161129

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171129

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee