KR100988622B1 - 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체 - Google Patents

영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체 Download PDF

Info

Publication number
KR100988622B1
KR100988622B1 KR1020080042837A KR20080042837A KR100988622B1 KR 100988622 B1 KR100988622 B1 KR 100988622B1 KR 1020080042837 A KR1020080042837 A KR 1020080042837A KR 20080042837 A KR20080042837 A KR 20080042837A KR 100988622 B1 KR100988622 B1 KR 100988622B1
Authority
KR
South Korea
Prior art keywords
parameter set
image
slice group
slice
images
Prior art date
Application number
KR1020080042837A
Other languages
English (en)
Other versions
KR20090116989A (ko
Inventor
오승균
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020080042837A priority Critical patent/KR100988622B1/ko
Priority to PCT/KR2008/005453 priority patent/WO2009136681A1/en
Publication of KR20090116989A publication Critical patent/KR20090116989A/ko
Application granted granted Critical
Publication of KR100988622B1 publication Critical patent/KR100988622B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Abstract

본 발명은 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그 기록 매체에 관한 것이다. 본 발명의 영상 부호화 방법은, 복수의 영상을 각각 슬라이스 그룹에 매핑하는 단계와, 슬라이스 그룹별로 부호화하는 단계를 포함한다. 이에 의해, 단일의 비트스트림이 형성되며, 효율적인 부호화, 복호화가 가능해진다.
영상, 슬라이스 그룹, 매핑, 부호화, 파라미터 세트

Description

영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그 기록 매체{Method for encoding and decoding image, apparatus for displaying image and recording medium thereof}
본 발명은 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그 기록 매체에 관한 것으로, 더욱 상세하게는 복수개의 영상을 슬라이스 그룹에 매핑하여 부호화 및 복호화하는 영상 부호화 방법, 복호화 방법, 및 그 기록 매체에 관한 것이다.
현재 방송되고 있는 1920x1080, 2K급의 고해상도(HD; High Definition)방송을 뛰어넘는 디지털 영상 기술인 디지털 시네마(Digital Cinema)와 초고해상도TV(UHDTV: Ultra-High Definition Television)에 대한 기술 개발과 논의가 진행되고 있다. 디지털 시네마는 최대 영상 해상도가 4096x2096, 4K급이고, 초고해상도 TV는 4K급 해상도에서 최대 7680x4320, 8K급의 해상도를 갖는다.
초고해상도 영상은 기존의 영상보다 더 많은 영상정보를 포함하고 있기 때문에 시청자로 하여금 더욱 현실감을 느끼게 해줌으로써 디지털 방송이 궁극적으로 추구하는 실감방송을 실현시킬 수 있는 중요한 요소라 할 수 있다.
이러한 초고해상도 영상은 데이터(data)를 압축하지 않는 경우에는 3~8Gbps, 압축 시에는 100~600Mbps 정도의 초당 처리량을 갖기 때문에 영상의 처리, 전송, 저장을 위해서는 데이터의 압축이 필수 불가결하다.
최근 통신기술의 눈부신 발전으로 핸드폰, PDA, 디지털TV, DMB등의 전자제품이 개발되었다. 이러한 전자제품에서 사용되는 데이터로는 음성, 정지영상, 동영상 등이 있는데, 이 중 동영상의 데이터(data)량은 전술한 바와 같이 매우 크다.
이에, 데이터의 크기를 줄일 수 있는 동영상 압축 표준들이 개발되어 H.261을 시작으로, SMPTE(Society of Motion Picture and Television Engineers)의 표준인 VC-1과, ITU-T와 ISO/IEC의 표준인 H.264/AVC까지 많은 발전을 이루었다.
도 1은 종래의 복수 영상 수신 및 복호화 시스템을 나타내는 도면이다.
도 1a는 두 개의 영상신호를 각기 다른 주파수 대역으로 전송하여, 이를 튜너부(tuner, 101,102)에서 개별 수신하고 각 비트스트림을 각 디코더(105,106)에서 디코딩을 한 후에 영상 신호 처리부(110)에서 디스플레이(display)를 위해 필요한 처리를 하는 예를 보여준다.
도 1b는 단일한 변조 주파수를 갖는 영상신호를 튜너부(103)에서 수신한 후에 역다중화부(104)에서 해당 비트스트림을 역다중화하고 각각의 개별 디코더(105,106)로 전송하여 영상을 디코딩한 후에 도 1a에서처럼 영상 신호 처리부(110)로 복원된 영상 신호를 보내 처리하도록 하는 시스템을 나타내는 도면이다.
종래 기술에서, 도 1a와 같이, 독립된 내용을 갖는 다중 영상 콘텐츠(contents)를 복수 채널을 통하여 전송하기 위해서는 복수 개의 튜너를 구비해야 하는 문제점이 있다. 또한, 도 1b와 같이, 복수 개의 튜너를 이용하지 않고 단일 주파수를 통해 전송하는 경우에는 다중화된 독립 비트스트림을 수신하고 역다중화에 의해 출력된 개별 비트스트림들을 추출한 후에 각 디코더를 통해 복원을 해야 하므로 역시 복수 개의 디코더를 구비해야 하고, 부가적으로 복수 영상 간의 관계에 대한 정보를 보내거나 이를 추정해야 하는 어려움이 있다.
본 발명의 목적은, 단일의 비트스트림이 형성하여, 효율적인 부호화, 복호화가 가능한 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그 기록 매체를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상 부호화 방법은, 복수의 영상을 각각 슬라이스 그룹에 매핑하는 단계와, 슬라이스 그룹별로 부호화하는 단계를 포함한다.
상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상 복호화 방법은, 입력되는 비트스트림으로부터 부호화된 복수개의 슬라이스 그룹을 추출하는 단계와, 추출된 슬라이스 그룹을 복호화하는 단계와, 슬라이스 그룹에 매핑된 영상을 추출하는 단계를 포함한다.
상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상 표시 장치는, 소정 영상을 디스플레이하는 디스플레이부와, 입력되는 단일의 비트스트림으로부터 복수개의 슬라이스 그룹을 추출하고, 각 추출된 슬라이스 그룹별로 복호화 동작을 수행하며, 각 슬라이스 그룹에 매핑된 영상을 추출하는 디코더와, 추출된 복수개의 영상을 단일 영상으로 합성하는 영상 신호 처리부를 포함한다.
한편, 본 발명의 실시예에 따른 기록 매체는, 상술한 영상 부호화 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 프로세서가 읽을 수 있는 기록 매체이다.
한편, 본 발명의 실시예에 따른 기록 매체는, 상술한 영상 복호화 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 프로세서가 읽을 수 있는 기록 매체이다.
본 발명에 따르면, 복수개의 영상을 슬라이스 그룹에 매핑하여 부호화 및 복호화를 수행하므로, 단일의 비트스트림이 형성되며, 효율적인 부호화, 복호화가 가능해진다. 또한, 단일 비트스트림에 따라 복수개의 튜너가 아닌 하나의 튜너 사용이 가능해지며, 또한, 다수의 디코더가 아닌 단일의 디코더 사용이 가능해져, 시스템 구성이 간단해질 수 있다.
이러한 방법은 영상 표준 관점에서 신택스의 추가 또는 보정을 통해, 이미 구성되어있는 시스템의 수정을 최소화할 수 있으며, 주변 분할 영상에 대한 정보 사용을 영상 압축 표준 내에서 지원하는 장점을 갖는다.
또한, 영상 표시 장치는, 영상 디스플레이 시에 복수개의 영상에 해당하는 번호를 부여하여 선택가능하도록 함으로써, 사용자 편의성을 증대시킬 수 있다. 나 아가, 복수개의 영상 중 선택되지 않은, 즉 디스플레이되지 않는 영상은 디코더에서 디코딩하지 않아도 되므로 전력 소모를 줄일 수 있는 장점도 있다.
이하에서는 첨부한 도면을 참조하여 본 발명에 따른 바람직한 실시예를 살펴본다.
도 2는 본 발명의 실시예에 따른 영상 부호화 방법을 도시한 순서도이며, 도 3은 도 2의 영상 부호화 방법을 설명하기 위한 도면이며, 도 4는 슬라이스 그룹의 예를 나타내는 도면이며, 도 5는 슬라이스 그룹 중 타입 2에서의 슬라이스 그룹의 위치 정보를 위한 신택스를 나타내는 도면이다.
도면을 참조하여 설명하면, 복수의 영상을 각각 슬라이스 그룹에 매핑한다(S210).
여기서 복수의 영상은 도 3a와 같이, 영화, 드라마, 스포츠, 쇼핑 등에 관한 별개의 콘텐츠 영상일 수 있다. 즉, 복수의 영상은 독립적인 영상일 수 있다. 한편, 복수의 영상은 도 3b와 같이, 서로 다른 시점(view)의 영상일 수도 있다.
한편, 도 3a와 도 3b에서는 복수의 영상으로서 4개의 고해상도 영상(고해상도 영상 0~3, 310)으로 분할하고 있으나, 그 개수는 이에 한정되지 않고 다양한 실시예가 가능하다.
이하에서는 슬라이스 그룹에 대해 도 4를 참조하여 설명한다.
영상 압축 표준인 H.264/AVC에서는 복수 개의 슬라이스를 포함할 수 있는 슬라이스 그룹의 개념이 도입되었다. 즉, 하나의 시퀀스(sequence)는 여러 개의 픽 쳐(picture)로 나뉠 수 있고, 다시 개별 픽쳐는 복수 개의 슬라이스 그룹으로 구성될 수 있다.
도 4는, H.264/AVC에서의 슬라이스 그룹의 일 예를 나타낸다. 타입 0(type 0)은 interleaved, 타입 1(type 1)은 dispersed, 타입 2(type 2)는 foreground/leftover, 타입 3(type 3)은 box-out, 타입 4(type 4)는 raster), 타입 5(type 5)는 wipe 형식을 나타낸다. 한편, 도면에서는 도시하지 않았지만, 타입 6(type 6)는 슬라이스 그룹의 맵(map)을 디코더(decoder)로 보내 임의의 구성 슬라이스를 표현하는 explicit 형식을 나타낸다.
H.264/AVC에서 슬라이스 그룹은, 본래 영상의 전송이나 기타 원인에 에러(error)가 발생하는 경우에 영상을 복원해내기 위한 에러 복원 방법으로 제안되었으나, 본 발명에서는 복수개의 영상을 슬라이스 그룹 단위로 매핑하여 처리하는 단위로 사용한다.
도 3은 복수의 영상을 도 4에 도시된 슬라이스 유형 중 타입 2(type 2)를 이용하여 슬라이스 그룹에 매핑한 것이라 할 수 있다. 즉, 고해상도 영상(고해상도 영상 0~3)은, 각각 슬라이스 그룹(슬라이스 그룹 0~3)에 매핑된다.
따라서, 슬라이스 유형 중 타입 2(type 2)의 신택스 요소(syntax elemenet)인 도 5의 "top_left"는 각 슬라이스 그룹의 좌,상단 위치 정보를 나타내며, "bottom_right"는 각 슬라이스 그룹의 우,하단 위치 정보를 나타낸다. 이러한, "top_left"은, 도 3의 각 슬라이스 그룹의 MBA0T,MBA1T,MBA2T,MBA3T에 대응하며, "bottom_right"은, 도 3의 각 슬라이스 그룹의 MBA0B,MBA1B,MBA2B,MBA3B에 대응한 다.
다음, 각 슬라이스 그룹 별로 부호화한다(S220).
슬라이스 그룹 별 부호화는, 영상 신호를 주파수 변환하는 주파수 변환, 변환된 신호를 양자화하는 양자화, 양자화된 신호의 엔트로피 부호화 및 디블록킹 필터링 등을 포함한다. 물론, 움직임 벡터에 따른 움직임 추정 및 보상도 포함할 수 있다. 여기서 주파수 변환 및 양자화는 하나의 프로세스를 통해 수행될 수도 있다.
결국, 복수의 영상을 각각 슬라이스 그룹에 매핑함으로써, 별도의 신택스 요소 없이 기존의 신택스 요소를 이용하여 간단히, 하나의 단일 비트스트림으로 부호화할 수 있게 된다.
종래에는 도 1a와 같이 복수의 튜너가 필요하거나, 역다중화기가 필요하였으나, 본 발명에서는, 단일의 비트스트림을 형성하므로, 다중화할 필요가 없어지며, 복수개의 프로세서가 필요 없게 된다.
한편, 복수개의 고해상도 영상(310,315)이 슬라이스 그룹 별로 부호화된 단일 비트스트림은 도 3과 같이 초고해상도 영상(320,325)을 구성할 수 있다. 초고해상도 영상(320,325)은 4096x2096의 4K급 내지 7680x4320의 8K급의 해상도를 가질 수 있다. 이 초고해상도 영상(320,325)은 각 고해상도 영상(310,315) 별로 추출되어 디스플레이 될 수 있다.
한편, 슬라이스 그룹 별 부호화 단계(S220)는, 슬라이스 그룹에 대응하는 적어도 하나의 파라미터 세트(parameter set)를 더 부호화할 수 있다.
일단, 도 3a를 참고하면, 초고해상도 영상(320)을 구성하고 있는 고해상도 영상(310)들은 서로 다른 종류의 콘텐츠들이다. 서로 다른 종류의 콘텐츠들을 하나의 비트스트림으로 생성하기 위해서는, 고해상도 영상(310)들을 압축된 상태가 아닌 raw 포맷으로 변환한 뒤에, 각 고해상도 영상(310)들을 초고해상도 영상으로 합성하여 모든 영상이 동일한 파라미터 세트(parameter set)를 갖도록 인코딩(encodig)하여야 한다. 여기서 파라미터 세트는, 시퀀스 파라미터 세트(sequence parameter set; SPS)와 픽쳐 파라미터 세트(picture parameter set; PPS)를 포함할 수 있다.
하지만, 이러한 방식은 각 구성 영상의 특성을 제대로 반영하지 못하며, 이 각각의 고해상도 영상(310)들이 압축되어 있는 상태라면, 이를 디코딩(decoding)하여 영상을 복원한 후에 동일한 파라미터 세트를 갖도록 인코딩해야 하는 번거로움이 있다.
따라서, 본 발명에서는 하나의 슬라이스 그룹에 매핑되는 고해상도 영상(310)들이 도 3a와 같이 개별적으로 인코딩되어 있는 독립 비트스트림인 경우, 각 슬라이스 그룹이 다른 슬라이스 그룹과 파라미터 세트를 공유하거나 다른 파라미터 세트를 참조할 수 있도록 한다. 다시 말하면, 하나의 초고해상도 영상의 한 픽쳐를 디코딩하기 위해서 사용하는 파라미터 세트의 개수가 최소로 1개에서 최대로 영상을 구성하고 있는 슬라이스 그룹의 개수까지 이용할 수 있도록 한다.
파라미터 세트와 슬라이스 그룹에 대한 대응 관계에 대해서는 도 6 내지 도 8을 참조하여 후술한다.
도 6은 본 발명과 관련하여 슬라이스 그룹과 파라미터 세트에 대한 대응 관 계의 일예를 보여주는 도면이다.
도면을 참조하여 설명하면, 슬라이스 그룹 마다 각각의 파라미터 세트가 대응할 수 있다.
예를 들어, 도 3a와 같이, 각기 다른 내용의 독립적인 영상(310)들은 각 영상의 특성과 그 영상의 공급자, 콘텐츠 공급자(contents provider)에 따라 구성 영상들에 대응되는 파라미터 세트들을 가질 수 있다. 따라서, 도 6과 같이 구성 영상들에 대응하는 슬라이스 그룹들이 개별 파라미터 세트를 참조할 수 있다.
한편, 도 6에서는 각 구성 영상들이 모두 다른 콘텐츠로 이루어져 다른 파라미터 세트를 갖는 경우를 나타내지만 영상의 특성과 파라미터 세트에 따라서 초고해상도 영상(320)을 구성하는 파라미터 세트의 수는 달라질 수 있다.
한편, 각 파라미터 세트는 슬라이스 그룹 내에서 사용되기 이전에 전송되어야 한다. 또한, 도 6에서는 슬라이스 그룹들의 순서가 1부터 4까지 차례대로 배열되었지만 파라미터 세트들의 전송 순서는 차례대로 이루어질 필요는 없으며 사용 이전에 전송되어 디코딩될 수 있기만 하면 된다.
초고해상도 영상을 구성하는 슬라이스 그룹들은, H.264/AVC와 같이 각 헤더(header)에서 각자가 참조하고 있는 픽쳐 파라미터 세트(PPS)의 ID(identification)을 가리키도록 하면, 픽쳐 파라미터 세트(PPS)에 대응하는 시퀀스 파라미터 세트(SPS) 또한 지정할 수 있게 된다.
도 6을 보면, 슬라이스 그룹#1는 PPS#1를 가리키고 있고 PPS#1는 SPS#1를 가리키고 있어 결국, 슬라이스 그룹#1는 SPS#1, PPS#1를 모두 참조할 수 있게 된다. 물론, 슬라이스 그룹#1이 PPS#1와 SPS#1를 동시에 가리키는 것도 가능하다.
한편, 도 6과 같이, 각 슬라이스 그룹 별로 독자적인 개별 파라미터 세트(SPS#1~SPS#4,PPS#1~PPS#4)를 참조하는 경우에 슬라이스 그룹 전체, 즉 복수 영상 전체의 구성을 위해서는 부가적인 정보를 필요로 하게 된다. 이를 본 발명에서는 합성 파라미터 세트라고 명명하며, 이에 대해서는 도 7을 참조하여 설명한다.
도 7은 본 발명과 관련하여 슬라이스 그룹과 파라미터 세트에 대한 대응 관계의 다른 예를 보여주는 도면이다.
도면을 참조하여 설명하면, 도 7은 각 슬라이스 그룹 별로 개별 파라미터 세트(SPS#1~SPS#4,PPS#1~PPS#4)에 대응한다는 점에서 도 6과 유사하나, 다만, 전체 영상, 즉 전체 슬라이스 그룹의 구성을 위한 부가적인 파라미터 세트를 더 포함한다는 점에서 그 차이가 있다. 즉, 도 7에서는 전체 영상, 즉 초고해상도 영상을 제어하는 합성 파라미터 세트로서 SPS#0와 PPS#0를 더 부가한다.
각 고해상도 영상에 매핑되는 슬라이스 그룹들은 영상을 복호화 하기 위해서 해당하는 개별 픽쳐 파라미터 세트(PPS#1~PPS#4)에 대응하는 개별 시퀀스 파라미터 세트(SPS#1~SPS#4)를 참고한다. 각 슬라이스 그룹들이 참조하고 있는 개별 픽쳐 파라미터 세트(PPS#1~PPS#4))에 대응하는 개별 시퀀스 파라미터 세트(SPS#1~SPS#4)는 해당 슬라이스 그룹만을 위한 것이기 때문에, 슬라이스 그룹들을 합성하여 초고해상도 영상을 구성하는 데는 정보가 부족하다. 따라서, 합성 파라미터 세트(SPS#0,PPS#0)에서는 초고해상도 영상의 제어를 위한 정보가 포함되고 슬라이스 그룹의 참조를 받지는 않는다.
한편, 합성 파라미터 세트 중 합성 시퀀스 파라미터 세트(SPS#0)는 다양한 정보를 포함할 수 있으며, 그 중에서 부호화되는 초고해상도 영상의 크기, 예를 들어 수평 방향의 매크로 블록 수와 수직 방향의 매크로 블록 수를 나타내는 정보를 포함할 수 있다.
수평 방향의 매크로블록 수를 나타내는 정보는 "pic_width_in_mbs_minus1"로 명명될 수 있으며, 수직 방향의 매크로블록 수를 나타내는 정보는 "pic_height_in_map_units_minus1"로 명명될 수 있다.
예를 들어, 초고해상도 영상이 3840x2176의 해상도를 갖고 프로그레시브(progressive)로 인코딩된 영상인 경우, 매크로 블록의 사이즈가 16X16이라면, 합성 시퀀스 파라미터 세트(SPS#0) 내의 "pic_width_in_mbs_minus1"과 "pic_height_in_map_units_minus1"은 각각 239와 135를 가질 수 있다.
한편, 도 3a에서처럼 초고해상도 영상이 가로, 세로 방향으로 동일한 크기의 고해상도 영상으로 분할되어 슬라이스 그룹에 각가 매핑된 경우라면, 각 개별 시퀀스 파라미터 세트(SPS#1~SPS#4)내의 "pic_width_in_mbs_minus1"과 "pic_height_in_map_units_minus1"은 각각 59와 33의 값을 가지게 된다.
즉, 고해상도 영상의 각 개별 시퀀스 파라미터 세트(SPS#1~SPS#4) 내의 "pic_width_in_mbs_minus1"+1 들의 합은, 합성 시퀀스 파라미터 세트(SPS#0) 내의 초고해상도 영상의 "pic_width_in_mbs_minus1"+1 와 같으며, 고해상도 영상의 각 개별 시퀀스 파라미터 세트(SPS#1~SPS#4) 내의 "pic_height_in_map_units_minus1"+1 들의 합은, 합성 시퀀스 파라미터 세 트(SPS#0) 내의 초고해상도 영상의 "pic_height_in_map_units_minus1"+1 와 같게 된다.
즉, 합성 시퀀스 파라미터 세트(SPS#0)는 초고해상도 영상을 제어하기 위해 필요한 정보, 예를 들어 가로, 세로 방향의 영상의 크기에 대한 정보를 포함할 수 있다. 이에 따라, 해당 초고해상도 영상이 몇 개의 슬라이스 그룹으로 이루어져 있는지를 알 수 있게 된다.
한편, 도 7에서는 각 부분 영상들이 각각 개별 픽쳐 파라미터 세트(PPS#1~PPS#4))에서 개별적으로 참조하고 있으나, 합성 픽쳐 파라미터 세트(PPS#0)의 다른 파라미터 정보들이 각 개별 픽쳐 파라미터 세트(PPS#1~PPS#4))와 연관하여 사용되지 않는다. 이는, 각 개별 픽쳐 파라미터 세트(PPS#1~PPS#4))에서의 정보 중 슬라이스 그룹 정보는 이미 합성 픽쳐 파라미터 세트(PPS#0)에서 슬라이스 그룹으로 나뉘어져 있기 때문이다.
한편, 도 3a와 같이, 복수의 영상, 즉 고해상도 영상이 독립적인 개체이기 때문에, 내부에서 인코딩되어 있는 매크로블록의 좌표 정보나 움직임 벡터(motion vector)도 초고해상도 영역이 아닌 고해상도 영상의 정보이다.
따라서, 독립적인 영상으로 이루어진 초고해상도 영상의 복원 시에는, 부분 영상들이 초고해상도 영상의 합성 파라미터 세트(SPS#0,PPS#0)를 참조하는지 아니면 개별 파라미터 세트(SPS#1~SPS#4,PPS#1~PPS#4)를 참조하는지 여부를 조사하여, 디코딩을 위한 파라미터 정보들과 참조 영상들을 통합하여 관리하던지 아니면 개별 관리를 하는 것이 바람직하다.
한편, 상술한 도 6 또는 도 7의 슬라이스 그룹과 파라미터 세트와의 관계는, 도 3a와 같이 서로 독립적인 내용의 영상 컨텐츠 뿐만이 아니라, 도 3b와 같이 각 부분 영상 간에 동기화가 이루어져 동일 파라미터를 사용하여 인코딩된 다시점 영상의 경우에도 적용되는 것이 가능하다. 즉, 복수의 슬라이스 그룹에 대해 개별적인 파라미터 세트를 사용할 수 있다.
도 8은 본 발명과 관련하여 슬라이스 그룹과 파라미터 세트에 대한 대응 관계의 다른 예를 보여주는 도면이다.
도면을 참조하여 설명하면, 각 슬라이스 그룹 각각에 파라미터 세트가 공통으로 대응한다는 점에서 도 7과 그 차이를 보인다. 즉, 슬라이스 그룹들이 모두 공통 픽쳐 파라미터 세트(PPS#1)에 대응하며, 공통 픽쳐 파라미터 세트(PPS#1)는 공통 슬라이스 픽쳐 파라미터(SPS#1)에 대응한다.
도 3과 같이, 초고해상도 영상이 복수의 영상으로 구성되지만 압축되지 않은 raw 영상 단계에서 초고해상도로 합성하여 압축된다면, 도면에 도시된 바와 같이, 단일한 참조 파라미터(SPS#1,PPS#1)를 갖는 것이 바람직하다. 이와 같은 경우에, 초고해상도 영상의 구성은 각 슬라이스 그룹의 매크로블록의 시작과 끝 어드레스(address)를 통해 전체 영상에서의 위치를 알 수 있으므로, 도 7에서 도시된, 초고해상도 영상의 구성을 위한 합성 파라미터 세트(SPS#0,PPS#0)가 별도로 필요하지 않게 된다.
도 9는 본 발명과 관련하여 초고해상도 영상을 구성하는 부분 영상들의 배치의 일예를 나타내는 도면이다.
도면을 참조하여 설명하면, MBH와 MBV는 각 영상에 대한 가로 및 세로 방향의 매크로 블록의 개수를 나타낸다. 특히, MBH0는 초고해상도 영상의 가로 방향의 매크로 블록의 개수를, MBV0는 초고해상도 영상의 세로 방향의 매크로 블록의 개수를 나타낸다.
초고해상도 영상은 복수의 부분 영상을 포함할 수 있다. 도면에서는, 부분 영상0 에서 부분 영상 7까지 8개의 부분 영상을 포함하는 것으로 도시한다. 부분 영상0 내지 부분 영상 7은 상술한 바와 같이, 각각의 슬라이스 그룹에 순차적으로 매핑되는 것으로 한다.
일단, 초고해상도 영상의 디스플레이를 위해서, 슬라이스 그룹의 번호에 따라, 좌측에서 우측으로, 상단에서 하단 순으로 각 부분 영상을 배치하는 것이 바람직하다. 또한, 각 슬라이스 그룹의 가로 방향의 매크로 블록의 개수의 합이 초고해상도 영상의 매크로 블록의 개수와 동일하도록 각 부분 영상을 배치하는 것이 바람직하다. 또한, 각 슬라이스 그룹의 가로 방향의 매크로 블록의 개수의 합이 초고해상도 영상의 매크로 블록의 개수와 동일하도록 각 부분 영상을 배치하는 것이 바람직하다.
도 7에서 설명한 바와 같이, 각 슬라이스 그룹들은 개별적인 파라미터 세트를 참조하고, 전체 초고해상도 영상을 표현을 위한 파라미터 세트가 존재하기 때문에, 일단, 부분영상 0을 디코딩하여 초고해상도 영상의 최상좌측에 위치시킨다.
다음에, 부분영상 1의 가로 방향의 MBH2와 MBH1의 합을 조사하여, MBH0와 비교한다. MBH2와 MBH1의 합이 MBH0와 동일하므로, 부분 영상 1을 부분영상 0의 가로 방향으로 위치시킨다.
다음에, 부분 영상 1과 가로 방향의 매크로 블록 수가 MBH2로 동일한, 부분 영상 2를 부분 영상 1의 하단에 위치시킨다. 즉, 부분 영상 1의 세로 방향의 매크로 블록수(MBV2)가 부분 영상 0의 세로 방향의 매크로 블록수(MBV1)보다 작으므로 부분 영상 2는 부분 영상 1의 바로 하단에 위치시킨다.
다음에, 부분 영상 3의 경우도 마찬가지로 부분 영상 2의 하단에 위치하게 된다. 이때, 부분 영상 1 내지 3의 세로 방향의 매크로 블록 수의 합(MBV2+MBV3+MBV4)이 부분 영상 0의 세로 방향의 매크로 블록 수(MBV1)와 같아 졌으므로, 이후의 부분 영상 4 내지 7은 부분 영상 0과 부분 영상 3의 하단에 위치하는 것으로 한다.
도 10은 파라미터 세트를 판별하기 위한 신택스를 보여주는 도면이다.
도면을 참조하여 설명하면, 초고해상도 영상을 위한 파라미터 세트인지 아니면 개별 영상을 위한 파라미터 세트인지의 여부는, 이를 나타내는 정보를 부호화함으로써 알 수 있다. 이러한 정보는 "reserved_zero_4bits"로 명명될 수 있다. 이 "reserved_zero_4bits"는 H.264/AVC 에서 사용되고 있지 않은 값으로서, 이를 이용하여 약속된 값을 디코딩함으로써, 해당 시퀀스 파라미터 세트(SPS)가 부분 영상을 위해 참조되는 파라미터 세트가 아니라는 것을 알 수 있다. 이에 따라, 이렇게 구분된 시퀀스 파라미터 세트(SPS)를 참조하는 픽쳐 파라미터 세트(PPS) 역시 초고해상도 영상의 구성을 위해 사용되는 파라미터 세트라는 것을 유추해낼 수도 있다.
한편, 또 다른 방법은 도 9에서 설명한 바와 같이, 해당 파라미터 세트 ID 참조 여부와 영상의 크기를 나타내는 파라미터의 값들로부터 유추할 수 있다.
도 11은 본 발명의 실시예에 따른 영상 복호화 방법을 도시한 순서도이다.
도면을 참조하여 설명하면, 먼저, 입력되는 비트스트림으로부터 부호화된 복수개의 슬라이스 그룹을 추출한다(S1110). 입력되는 비트스트림은 상술한 도 2의 방법에 의해 부호화된 단일의 비트스트림일 수 있다. 단일의 비트스트림 내에는 복호화된 복수개의 슬라이스 그룹이 포함될 수 있으며, 이를 각 슬라이스 그룹 별로 추출한다.
복수개의 슬라이스 그룹의 추출 동작은, 도 6 내지 도 8에서 설명한 바와 같이 슬라이스 그룹에 대응하는 파라미터 세트(SPS#0~SPS#4, PPS#0~PPS#4)와, 파라미터 세트가 슬라이스 그룹 전체를 위한 파라미터 세트인지 또는 개별 슬라이스 그룹을 위한 파라미터 세트인지 여부를 나타내는 정보인 도 10의 도 9의 "reserved_zero_4bits"를 이용하여 수행될 수 있다. 이를 위해, 디코더(1220)는, 비트스트림 내에 포함된 파라미터(SPS#0~SPS#4, PPS#0~PPS#4)와, "reserved_zero_4bits"를 슬라이스 그룹보다 먼저 복호화하는 것이 바람직하다.
다음에, 추출된 슬라이스 그룹을 복호화한다(S1120).
슬라이스 그룹별 복호화 동작은, 엔트로피 복호화, 역양자화, 역변환 및 디블럭킹 필터링, 움직임 보상 등을 포함함은 물론, 슬라이스 그룹의 위치를 나타내는 위치 정보인, 도 5의 "top_left", "bottom_right"의 복호화를 포함할 수 있다. 한편, 역양자화 및 역변환은 하나의 프로세스를 통해 수행될 수도 있다.
다음에, 슬라이스 그룹에 매핑된 분할 영상을 추출한다(S1130). 분할 영상의 추출은, 복호화된 "top_left", "bottom_right" 등을 참조하여, 도 3의 각 슬라이스 그룹의 MBA0T,MBA1T,MBA2T,MBA3T와 MBA0B,MBA1B,MBA2B,MBA3B에 의해 추출할 수 있다.
다음에, 도면에서는 도시하지 않았지만, 추출된 영상을 단일 영상으로 합성할 수 있다. 추출된 영상은 컨텐츠가 다른 독립적인 영상(도 3a) 또는 동일 영상의 시점(view)이 다른 영상(도 3b)일 수 있다. 이러한 추출된 복수개의 영상은, 단일 영상으로 합성될 수 있다. 또한, 복수개의 영상으로 이루어진 단일 영상에 각 복수개의 영상의 대한 영상 번호를 부가할 수도 있다. 이에 대해서는 도 13을 참조하여 후술한다.
도 12는 본 발명의 실시예에 따른 영상 표시 장치를 간략히 도시한 블록도이며, 도 13은 도 12의 설명에 참조되는 도면이다.
도면을 참조하여 설명하면, 도 12의 영상 표시 장치(1200)는 튜너(1210), 디코더(1220), 영상 신호 처리부(1230), 및 디스플레이부(1240)를 포함한다.
튜너(1210)는 비트스트림을 수신한다. 이 비트스트림은 도 2의 영상 부호화 방법에 의해 생성된 비트스트림일 수 있다. 즉, 복수개의 영상이 슬라이스 그룹에 매핑되어 부호화된 단일의 비트스트림일 수 있다.
디코더(1220)는 튜너(1210)에서 수신된 단일의 비트스트림을 전달받아, 단일의 비트스트림으로부터 복수개의 슬라이스 그룹을 추출하고, 각 추출된 슬라이스 그룹 별로 복호화 동작을 수행하며, 각 슬라이스 그룹에 매핑된 영상을 추출한다.
복수개의 슬라이스 그룹의 추출 동작은, 도 6 내지 도 8에서 설명한 바와 같 이 슬라이스 그룹에 대응하는 파라미터 세트(SPS#0~SPS#4, PPS#0~PPS#4)와, 파라미터 세트가 슬라이스 그룹 전체를 위한 파라미터 세트인지 또는 개별 슬라이스 그룹을 위한 파라미터 세트인지 여부를 나타내는 정보인 도 10의 도 9의 "reserved_zero_4bits"를 이용하여 수행될 수 있다. 이를 위해, 디코더(1220)는, 비트스트림 내에 포함된 파라미터(SPS#0~SPS#4, PPS#0~PPS#4)와, "reserved_zero_4bits"를 슬라이스 그룹보다 먼저 복호화하는 것이 바람직하다.
슬라이스 그룹별 복호화 동작은, 엔트로피 복호화, 역양자화, 역변환 및 디블럭킹 필터링, 움직임 보상 등을 포함함은 물론, 슬라이스 그룹의 위치를 나타내는 위치 정보인, 도 5의 "top_left", "bottom_right"의 복호화를 포함할 수 있다. 한편, 역양자화 및 역변환은 하나의 프로세스를 통해 수행될 수도 있다.
슬라이스 그룹에 매핑된 분할 영상의 추출은, 복호화된 "top_left", "bottom_right" 등을 참조하여, 도 3의 각 슬라이스 그룹의 MBA0T,MBA1T,MBA2T,MBA3T와 MBA0B,MBA1B,MBA2B,MBA3B에 의해 추출할 수 있다.
예를 들어, 디코더(1220)의 동작을 설명하면, 먼저 단일의 비트스트림 중 시퀀스 파라미터 세트(SPS)와 픽쳐 파라미터 세트(PPS)를 입력받는다. 도 10의 "reserved_zero_4bits"가 사용되지 않는 경우에는, 시퀀스 파라미터 세트(SPS) 내의 "pic_width_in_mbs_minus1"와 "pic_height_in_map_units_minus1"의 값을 다른 파라미터 세트의 값들과 비교하여, 초고해상도 영상을 위한 것과 부분 영상을 위한 것을 구분해낸다. "reserved_zero_4bit"를 사용하는 경우에는, 미리 정해진 "reserved_zero_4bit"의 코드워드(codeword)를 해석하여 해당 파라미터 세트가 초 고해상도 영상을 위한 것인지 아니면 부분 영상에 관한 것인지를 구분해낸다.
부분 영상들이 개별 파라미터 세트를 참조하고 있으면, 개별 파라미터 세트를 이용하여 디코딩을 수행하고, 최종적으로 초고해상도 영상의 출력시에는 초고해상도 영상을 위한 합성 파라미터 세트의 정보를 이용하여 부분 영상들을 조합하여 화면에 디스플레이한다. 만약, 복수개의 부분 영상들이 개별 파라미터 세트를 참조하지 않고 합성 파라미터 세트만을 참조하면, 픽쳐 파라미터 내의 슬라이스 그룹의 위치 정보를 이용하여 부분 영상들을 조합하여 화면에 디스플레이할 수도 있다.
한편, 디코더(1220)는 H.264/AVC 부호화 방식 이외의 다양한 방식으로 부호화된 입력 영상을 복호화할 수 있다. 예를 들어, MPEG(moving picture experts group)에서 제정한 MPEG 계열 부호화 방식, SMPTE(Society of Motion Picture and Television Engineers)에서 제정한 VC-1 등 다양한 부호화 방식으로 부호화된 입력 영상을 복호화할 수 있다.
영상 신호 처리부(1230)는, 입력되는 영상이 디스플레이부의 디스플레이되도록 다양한 신호 처리를 수행한다. 특히, 디코더(1220)로 부터 수신되는 추출된 복수개의 영상을 단일 영상으로 합성할 수 있다.
이를 위해 영상 신호 처리부(1230)는, 스케일러(미도시), OSD부(미도시), 메모리(미도시), 영상 전송부(미도시) 및 제어부(미도시)를 포함할 수 있다.
스케일러(미도시)는, 복호화된 영상의 크기 등을 조절하여 디스플레이부의 화면과 대응시키며, OSD부(미도시)는 디스플레이부(1240)의 화면에 임의의 그래픽, 문자 정보, 메뉴 등을 화면에 표시하도록 제어하며, 메모리(미도시)는 디코 더(1220)의 복호화 과정에서 참조 픽쳐를 저장하거나, 디스플레이부(1240)의 화면에 표시하기 위한 임의의 그래픽 또는 문자 정보를 저장할 수 있으며, 영상 전송부(미도시)는 메모리(미도시)에 저장된 임의의 그래픽 또는 문자 정보를 처리하고, 처리된 그래픽 또는 문자 정보가 부가된 영상을 디스플레이부로 전송하며, 제어부(미도시)는, 영상 신호 처리부(1230) 내의 전반적인 동작을 제어하며, 나아가 디코더(1220)의 동작도 제어할 수 있다.
영상 신호 처리부(1230)를 통과한 영상은 디스플레이부(1240)를 통해 디스플레이 되게 된다. 이 영상은, 복수개의 영상으로 구성된 단일의 초고해상도 영상일 수 있다 .즉, 도 3a와 같이 독립적인 복수의 영상으로 이루어진 단일의 초고해상도 영상일 수 있다.
한편, 초고해상도 영상을 구성하는 복수개의 부분 영상을 도 12와 같이 모두 디스플레이하는 것이 아니라, 도 13과 같이 일부의 부분 영상만을 표시할 수 있다.
이를 위해, 초고해상도 영상 내의 복수개의 부분 영상 각각에, 슬라이스 그룹의 번호 또는 각 영상을 구분할 수 있는 영상 번호가 표시될 수 있다. 이러한 영상 번호(1310) 표시는 도 12의 영상 신호 처리부(1230) 내의 OSD부(미도시)를 통해 수행될 수 있다.
이 영상 번호(1310)를 참조하여 복수개의 영상 중 어느 하나가 선택되는 경우, 영상 처리부(1230)는 선택된 영상이 디스플레이부(1240)를 통해 디스플레이되도록 제어한다.
도 13에서는 4가지의 영상 중에서 하나만을 선택된 경우에 해당 영상을 초고 해상도 영상 디스플레이부(1240)에 맞게 표시한 것을 나타내지만, 디스플레이부(1240)에 표시할 수 있는 영상의 개수와 표시하는 해상도는 제시한 예에 제한받지 않는다.
한편, 복수개의 영상 중 선택되지 않은 영상들에 해당하는 슬라이스 그룹은, 디코더(1220)에서 디코딩하지 않는 것도 가능하다. 이를 위해, 영상 처리부(1230)는, 디코더(1220)에 선택적으로 디코딩하도록 제어하는 제어 신호를 전달할 수 있다. 이를 통해, 불필요한 디코딩 과정을 생략함으로써 전력 소모를 줄일 수 있는 장점을 갖는다.
도 14는 본 발명의 실시예에 따른 영상 표시 장치를 간략히 도시한 블록도이다.
도면을 참조하여 설명하면, 도 14의 영상 표시 장치(1400)는 도 12의 영상 표시 장치(1200)와 거의 유사하나, 영산 신호 처리부(1430)를 통해 재생 가능하도록 처리된 영상이 복수개의 디스플레이부(1440-1~1440-4)를 통해 각각 디스플레이된다는 점에서 그 차이가 있다.
이 경우에도 초기에 초고해상도 영상 전체를 표시하였다가 사용자의 선택에 의해서 원하는 영상만을 디스플레이부에 표시할 수도 있고 전술한 예에서와 마찬가지로 초고해상도 영상의 일부 또는 전부를 디스플레이부를 통해 표시할 수 있다.
한편, 도 12와 도 14의 영상 신호 처리부(1230,1430)와 디스플레이부(1240,1440-1~1440-4)의 연결은 유선 또는 무선 인터페이스(interface)를 이용하는 것이 가능하다. 또한, 하나의 초고해상도 영상 비트스트림을 이용해 사용자의 주문에 의해 주문형 다중 영상 시스템의 구성이 가능하다. 복수 개의 튜너나 디코더를 구성하지 않고도 다수의 고해상도 영상에 대한 주문을 통해 셋톱 박스의 홈 미디어 서버(home media server)로서의 기능을 더욱 활용할 수 있다.
한편, 본 발명의 영상 부호화 방법 또는 복호화 방법은 각각 영상 부호화 장치 또는 영상 복호화 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
도 1은 종래의 복수 영상 수신 및 복호화 시스템을 나타내는 도면이다.
도 2는 본 발명의 실시예에 따른 영상 부호화 방법을 도시한 순서도이다.
도 3은 도 2의 영상 부호화 방법을 설명하기 위한 도면이다.
도 4는 슬라이스 그룹의 예를 나타내는 도면이다.
도 5는 슬라이스 그룹 중 타입 2에서의 슬라이스 그룹의 위치 정보를 위한 신택스를 나타내는 도면이다.
도 6은 본 발명과 관련하여 슬라이스 그룹과 파라미터 세트에 대한 대응 관계의 일예를 보여주는 도면이다.
도 7은 본 발명과 관련하여 슬라이스 그룹과 파라미터 세트에 대한 대응 관계의 다른 예를 보여주는 도면이다.
도 8은 본 발명과 관련하여 슬라이스 그룹과 파라미터 세트에 대한 대응 관계의 다른 예를 보여주는 도면이다.
도 9는 본 발명과 관련하여 초고해상도 영상을 구성하는 부분 영상들의 배치의 일예를 나타내는 도면이다.
도 10은 파라미터 세트를 판별하기 위한 신택스를 보여주는 도면이다.
도 11은 본 발명의 실시예에 따른 영상 복호화 방법을 도시한 순서도이다.
도 12는 본 발명의 실시예에 따른 영상 표시 장치를 간략히 도시한 블록도이다.
도 13은 도 12의 설명에 참조되는 도면이다.
도 14는 본 발명의 실시예에 따른 영상 표시 장치를 간략히 도시한 블록도이다.

Claims (30)

  1. 복수개의 영상을 각각 슬라이스 그룹에 매핑하는 단계; 및
    상기 슬라이스 그룹별로 부호화하는 단계;를 포함하며,
    상기 부호화 단계는, 상기 슬라이스 그룹에 대응하는 적어도 하나의 파라미터 세트를 부호화하며,
    상기 파라미터 세트는, 상기 슬라이스 그룹 전체의 수평 방향과 수직 방향의 매크로 블록 수를 나타내는 정보를 포함하는 합성 파라미터 세트를 구비하는 것을 특징으로 하는 영상 부호화 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 파라미터 세트는,
    상기 슬라이스 그룹에 각각 대응하는 개별 파라미터 세트를 더 구비하는 것을 특징으로 하는 영상 부호화 방법.
  4. 삭제
  5. 삭제
  6. 제1항에 있어서,
    상기 파라미터 세트는,
    상기 슬라이스 그룹 각각에 공통으로 대응하는 공통 파라미터 세트를 더 구비하는 것을 특징으로 하는 영상 부호화 방법.
  7. 제1항에 있어서,
    상기 파라미터 세트는 시퀀스 파라미터 세트와 픽쳐 파라미터 세트를 더 포함하는 것을 특징으로 하는 영상 부호화 방법.
  8. 제7항에 있어서,
    상기 슬라이스 그룹에 대응하여 상기 픽쳐 파라미터 세트가 부호화되며, 상기 픽쳐 파라미터에 대응하여 상기 시퀀스 파라미터 세트가 부호화되는 것을 특징으로 하는 영상 부호화 방법.
  9. 제1항에 있어서,
    상기 부호화 단계는,
    상기 파라미터 세트가 슬라이스 그룹 전체를 위한 파라미터 세트인지 또는 개별 슬라이스 그룹을 위한 파라미터 세트인지 여부를 나타내는 정보를 더 부호화하는 것을 특징으로 하는 영상 부호화 방법.
  10. 제1항에 있어서,
    상기 부호화 단계는,
    상기 각 슬라이스 그룹의 경계를 알려주는 위치 정보를 더 부호화하는 것을 특징으로 하는 영상 부호화 방법.
  11. 제10항에 있어서,
    상기 위치 정보는,
    상기 각 슬라이스 그룹의 좌측 및 상단 경계를 나타내는 좌상단 위치 정보; 및
    상기 각 슬라이스 그룹의 우측 및 하단 경계를 나타내는 우하단 위치 정보를 포함하는 것을 특징으로 하는 영상 부호화 방법.
  12. 제1항에 있어서,
    상기 복수개의 영상은, 서로 독립적인 영상 또는 서로 다른 시점(view)의 영상인 것을 특징으로 하는 영상 부호화 방법.
  13. 입력되는 비트스트림으로부터 부호화된 복수개의 슬라이스 그룹을 추출하는 단계;
    상기 추출된 슬라이스 그룹을 복호화하는 단계; 및
    상기 슬라이스 그룹에 매핑된 영상을 추출하는 단계;를 포함하며,
    상기 복호화 단계는, 상기 슬라이스 그룹에 대응하는 적어도 하나의 파라미터 세트를 복호화하며,
    상기 파라미터 세트는, 상기 슬라이스 그룹 전체의 수평 방향과 수직 방향의 매크로 블록 수를 나타내는 정보를 포함하는 합성 파라미터 세트를 구비하는 것을 특징으로 하는 영상 복호화 방법.
  14. 삭제
  15. 제13항에 있어서,
    상기 파라미터 세트는,
    상기 슬라이스 그룹에 각각 대응하는 개별 파라미터 세트를 더 구비하는 것을 특징으로 하는 영상 부호화 방법.
  16. 삭제
  17. 삭제
  18. 제13항에 있어서,
    상기 파라미터 세트는,
    상기 슬라이스 그룹 각각에 공통으로 대응하는 공통 파라미터 세트를 더 구비하는 것을 특징으로 하는 영상 복호화화 방법.
  19. 제13항에 있어서,
    상기 파라미터 세트는 시퀀스 파라미터 세트와 픽쳐 파라미터 세트를 더 포함하는 것을 특징으로 하는 영상 복호화 방법.
  20. 제19항에 있어서,
    상기 슬라이스 그룹에 대응하여 상기 픽쳐 파라미터 세트가 복호화되며, 상기 픽쳐 파라미터에 대응하여 상기 시퀀스 파라미터 세트가 복호화되는 것을 특징으로 하는 영상 복호화 방법.
  21. 제13항에 있어서,
    상기 복호화 단계는,
    상기 파라미터 세트가 슬라이스 그룹 전체를 위한 파라미터 세트인지 또는 개별 슬라이스 그룹을 위한 파라미터 세트인지 여부를 나타내는 정보를 더 복호화하는 것을 특징으로 하는 영상 복호화 방법.
  22. 제13항에 있어서,
    상기 복호화 단계는,
    상기 각 슬라이스 그룹의 경계를 알려주는 위치 정보를 더 복호화하는 것을 특징으로 하는 영상 복호화 방법.
  23. 제22항에 있어서,
    상기 위치 정보는,
    상기 각 슬라이스 그룹의 좌측 및 상단 경계를 나타내는 좌상단 위치 정보; 및
    상기 각 슬라이스 그룹의 우측 및 하단 경계를 나타내는 우하단 위치 정보를 포함하는 것을 특징으로 하는 영상 복호화 방법.
  24. 소정 영상을 디스플레이하는 디스플레이부;
    입력되는 단일의 비트스트림으로부터 복수개의 슬라이스 그룹을 추출하고, 각 추출된 슬라이스 그룹별로 복호화 동작을 수행하며, 각 슬라이스 그룹에 매핑된 영상을 추출하는 디코더; 및
    상기 추출된 복수개의 영상을 단일 영상으로 합성하는 영상 신호 처리부;를 포함하며,
    상기 디코더는, 상기 슬라이스 그룹에 대응하는 적어도 하나의 파라미터 세트를 복호화하며,
    상기 파라미터 세트는, 상기 슬라이스 그룹 전체의 수평 방향과 수직 방향의 매크로 블록 수를 나타내는 정보를 포함하는 합성 파라미터 세트를 구비하는 것을 특징으로 하는 영상 표시 장치.
  25. 제24항에 있어서,
    상기 영상 신호 처리부는, 상기 단일 영상 내에 상기 복수개의 영상에 대응하는 영상 번호를 표시하도록 제어하는 것을 특징으로 하는 영상 표시 장치.
  26. 제24항에 있어서,
    상기 복수개의 영상 중 어느 하나가 선택되는 경우, 상기 영상 처리부는, 상기 선택된 영상이 상기 디스플레이부에서 디스플레이되도록 제어하는 것을 특징으로 하는 영상 표시장치.
  27. 제26항에 있어서,
    상기 영상 신호 처리부는, 상기 선택된 영상에 해당하는 슬라이스 그룹만이 상기 디코더에서 복호화되도록 제어하는 것을 특징으로 하는 영상 표시 장치.
  28. 제24항에 있어서,
    상기 복수개의 영상 각각은 복수개의 디스플레이부에서 각각 디스플레이되는 것을 특징으로 하는 영상 표시 장치.
  29. 제1항, 제3항, 및 제6항 내지 제12항 중 어느 한 항의 영상 부호화 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 프로세서가 읽을 수 있는 기록매체.
  30. 제13항, 제15항, 및 제18항 내지 제23항 중 어느 한 항의 영상 복호화 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 프로세서가 읽을 수 있는 기록매체.
KR1020080042837A 2008-05-08 2008-05-08 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체 KR100988622B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080042837A KR100988622B1 (ko) 2008-05-08 2008-05-08 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체
PCT/KR2008/005453 WO2009136681A1 (en) 2008-05-08 2008-09-16 Method for encoding and decoding image, and apparatus for displaying image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080042837A KR100988622B1 (ko) 2008-05-08 2008-05-08 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체

Publications (2)

Publication Number Publication Date
KR20090116989A KR20090116989A (ko) 2009-11-12
KR100988622B1 true KR100988622B1 (ko) 2010-10-20

Family

ID=41601538

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080042837A KR100988622B1 (ko) 2008-05-08 2008-05-08 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체

Country Status (1)

Country Link
KR (1) KR100988622B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101053161B1 (ko) * 2009-07-22 2011-08-02 주식회사 엠씨넥스 Ｈ.264/ａｖｃ 압축 영역에서의 동영상 합성 방법 및 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070230567A1 (en) * 2006-03-28 2007-10-04 Nokia Corporation Slice groups and data partitioning in scalable video coding

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070230567A1 (en) * 2006-03-28 2007-10-04 Nokia Corporation Slice groups and data partitioning in scalable video coding

Also Published As

Publication number Publication date
KR20090116989A (ko) 2009-11-12

Similar Documents

Publication Publication Date Title
US11284110B2 (en) Coding and decoding of interleaved image data
US10448017B2 (en) Image processing device and image processing method for image decoding based on non-square quantization matrix
KR102161017B1 (ko) 화상 처리 장치 및 적어도 하나의 컴퓨터 판독가능한 기억 매체
KR101653724B1 (ko) 가상 레퍼런스 뷰
US20220400280A1 (en) Image coding method on basis of entry point-related information in video or image coding system
US20110085023A1 (en) Method And System For Communicating 3D Video Via A Wireless Communication Link
WO2009136681A1 (en) Method for encoding and decoding image, and apparatus for displaying image
CN114762336A (zh) 基于变换跳过和调色板编码相关信息的信令的图像或视频编码
KR100988622B1 (ko) 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체
WO2011089556A1 (en) Method for transporting information and/or application data inside a digital video stream, and relative devices for generating and playing such video stream
KR20230025429A (ko) 스케일러빌리티를 위한 서브-비트스트림 추출 기반 영상 코딩 장치 및 방법
KR20230017817A (ko) 멀티 레이어 기반 영상 코딩 장치 및 방법
CN116134821A (zh) 用于在图像/视频编码系统中处理高级语法的方法和设备
CN114762339A (zh) 基于变换跳过和调色板编码相关高级语法元素的图像或视频编码
KR20090103414A (ko) 비디오 부호화 방법, 복호화 방법, 부호화 장치, 및 복호화장치
CN114762349A (zh) 用于图像/视频编译的高级别语法信令方法和装置
CN114747215B (zh) 调色板编码或变换单元的基于量化参数信息的图像或视频编码
US20240146972A1 (en) Method and device for processing general constraint information in image/video coding system
WO2015098713A1 (ja) 画像復号装置および画像符号化装置
CN116057932A (zh) 基于层信息信令的图像编码设备和方法
WO2024061660A1 (en) Dynamic structures for volumetric data coding
CN115004708A (zh) 用于发信号通知图像信息的方法和设备
CN114762335A (zh) 基于变换跳过和调色板编码相关数据的图像或视频编码
CN114982242A (zh) 发信号通知图片分割信息的方法和设备
CN115004709A (zh) 用于发信号通知切片相关信息的方法和装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee