KR20080114450A - 블록 인터리브드 방식의 양안 영상 정보를 포함하는 양안식영상 비트스트림 생성 방법 및 장치 - Google Patents

블록 인터리브드 방식의 양안 영상 정보를 포함하는 양안식영상 비트스트림 생성 방법 및 장치 Download PDF

Info

Publication number
KR20080114450A
KR20080114450A KR1020070080329A KR20070080329A KR20080114450A KR 20080114450 A KR20080114450 A KR 20080114450A KR 1020070080329 A KR1020070080329 A KR 1020070080329A KR 20070080329 A KR20070080329 A KR 20070080329A KR 20080114450 A KR20080114450 A KR 20080114450A
Authority
KR
South Korea
Prior art keywords
block
image
view image
mixed
blocks
Prior art date
Application number
KR1020070080329A
Other languages
English (en)
Inventor
김용태
김재승
주성신
김대식
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US12/124,739 priority Critical patent/US8471893B2/en
Priority to PCT/KR2008/002914 priority patent/WO2009002018A1/en
Publication of KR20080114450A publication Critical patent/KR20080114450A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명의 양안식 영상 비트스트림 생성 방법은 기준 시점 영상 및 부가 시점 영상을 소정의 블록 사이즈로 분할하고, 기준 시점 영상의 블록 및 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상을 영상 비트스트림의 페이로드 영역에 기록하며, 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 혼합 영상의 현재 프레임에서 배열되는 순서에 대한 블록 결합 패턴 정보를 영상 비트스트림의 헤더 영역에 기록함으로써, 블록 기반의 양안식 영상 포맷을 쉽게 구현하고 양안식 영상을 효율적으로 압축하거나 저장하고 전송한다.
양안식 영상, 스테레오스코피, 블록 인터리브드 방식, 영상 압축

Description

블록 인터리브드 방식의 양안 영상 정보를 포함하는 양안식 영상 비트스트림 생성 방법 및 장치{Method and apparatus for generating stereoscopic image data using block-interleaved method}
본 발명은 양안식 영상 비트스트림을 생성하는 방법 및 장치에 관한 것으로, 더욱 상세하게는 기준 시점 영상 및 부가 시점 영상으로 구성된 양안식 영상을 효율적으로 압축하거나 전송하기 위하여 블록 단위로 양안식 영상 포맷을 생성하여 양안식 영상 비트스트림에 기록하는 방법과 장치 및 그 양안식 영상 비트스트림 구조에 관한 것이다.
현재 양안식 영상을 전송하기 위한 방법들이 많이 제안되었다. 예를 들면, 양안식 영상의 효율적인 전송을 위해, MPEG-2 MVP(Multi-view Video Profile)을 시작으로 MPEG-4 MAC(Multiple Auxiliary Component)를 이용한 깊이 맵(depth map) 전송 방법, MPEG-4 AVC/H.264의 MVC(Multi-view Video Coding) 등의 표준들이 제정되었다.
하지만 이 표준 기법들은 기존 2차원 코덱과의 호환성이 결여되어 있기 때문에 전술된 표준 기법으로 양안식 영상을 전송할 경우 기존의 2차원 재생 기기를 가 진 사용자들은 수신 데이터를 복호화하여 양안식 영상을 복원할 수 없는 문제점을 가지고 있다. 또한 현재 채널 용량(capacity)로는 전술된 표준 기법으로 3차원 영상을 전송하는데 많은 문제점이 발생할 것으로 예상된다.
따라서 양안식 영상을 한 장의 영상 포맷으로 조합하여 전송하는 기술이 개발되었다. 대표적으로 사이드 바이 사이드(Side by side) 기법과 탑 다운(Top down) 기법을 예로 들 수 있다. 전자의 기법은, 예를 들어 좌측 영상과 우측 영상의 가로 픽셀 수를 절반으로 축소하여, 축소된 좌측 영상과 축소된 우측 영상을 한 장의 혼합 영상의 좌우로 배열하는 기법이다. 후자의 기법은, 예를 들어 좌측 영상과 우측 영상의 세로 픽셀 수를 절반으로 축소하여, 축소된 좌측 영상과 축소된 우측 영상을 한 장의 혼합 영상의 상하에 배열하는 기법이다.
하지만 이 기법들에 의해 전송된 혼합 영상들은, 축소되는 과정에서 원래 좌우 영상의 절반의 해상도를 갖는다. 따라서 기존 2차원 재생 기기에서 좌우 영상의 절반씩만을 보여 주기 때문에 시청자가 거부감을 느낄 수 있다. 또한 혼합 영상을 압축하거나 전송할 때 양안식 영상의 좌우 영상의 상관도(correlation)을 고려하지 않기 때문에 압축 효율이 매우 저하된다.
좌우 영상을 픽셀단위로 조합하여 한 장의 영상 포맷을 구성하는 기법도 있다.
도 1a 는 양안식 영상의 전송을 위해 픽셀단위의 양안식 영상 포맷을 도시한다.
좌측 시점 영상 및 우측 시점 영상의 화소들을 격자 단위로 샘플링하여, 좌 측 영상 및 우측 영상이 겹치지 않도록 우측 영상을 한 화소만큼 이동시켜 샘플링하여 양안식 영상을 위한 한 장의 영상 포맷이 구성된다. 양안식 영상의 송수신 방법은 기존의 2차원 부호화기 및 복호화기를 이용한다. 두 장의 좌측 영상 및 우측 영상을 동일한 해상도의 한 장의 양안식 영상 포맷으로 구성하기 때문에 손실된 화소들이 발생한다.
도 1b 는 픽셀단위의 양안식 영상 포맷의 손실된 픽셀복원 장치를 도시한다.
디스플레이 장치가 원래 해상도의 영상을 재생하기 위해서는 도 1 의 양안식 영상 포맷 생성 단계에서 손실된 화소들이 복원되어야 한다. 따라서 픽셀단위로 샘플링된 영상을 방향별로 값을 추출하여, 각각의 방향성 화소값에 소정의 가중치를 곱하여 모두 더함으로써 원래의 좌우 영상을 복원한다.
양안식 영상 전송 기술로써, 좌우 영상을 필드 단위로 구성한 영상 포맷 기법이 있다.
도 2a 는 필드 단위의 양안식 영상 포맷을 도시한다. 먼저 입력된 좌우 영상을 세로로 한 라인씩 배치한 후 이를 순차적인 필드 단위의 포맷으로 만들어서 전송하고 수신 과정을 보여 준다.
도 2b 는 필드 단위의 양안식 영상 포맷의 송신단 및 수신단의 전체적인 블록도를 도시한다.
도 2b 는 양안식 영상 포맷을 구성하고 부호화하는 전처리부 및 수신된 영상 포맷을 복호화하여 양안식 영상을 복원하는 후처리부를 도시한다. 필드 단위로 변환된 좌우 영상은 엠펙(MPEG) 부호화기를 통해서 압축된다. 엠펙-1(MPEG-1)을 제외 한 나머지 엠펙(MPEG)은 필드 단위의 압축 방법을 지원하기 때문에, 블록 단위의 DCT를 수행하고 움직임 추정 및 변이 추정 기법을 수행할 때 압축 효율을 유지하는 구조를 갖는다.
도 1a 의 영상 포맷 기법은 좌우 영상을 픽셀단위로 조합하여 한 장의 영상 포맷을 구성한다. 따라서 픽셀간의 상관도가 적기 때문에 JPEG, MPEG 또는 H.26X 등이 영상 표준에 의한 DCT 부호화기의 성능이 떨어지고 압축 효율이 감소한다. 또한 도 1a 및 도 2a를 포함한 기존이 영상 포맷 기법은 양안식 영상의 전처리부 또는 후처리부에 대해 정의되어 있지 때문에 양안식 영상 포맷이 복호화될 경우 필드 단위로 좌우 영상이 번갈아 디스플레이 되므로, 시청자는 심각한 플리커 현상(flickering effect)를 겪을 수 있다.
본 발명이 해결하고자 하는 과제는, 양안식 영상의 효율적인 압축 또는 전송을 위해 양안식 영상의 기준 시점 영상 및 부가 시점 영상의 정보를 블록 단위로 조합한 혼합 영상 포맷을 구성하고, 혼합 영상 포맷이 기록된 양안식 영상 비트스트림을 생성하는 데 있다.
또한, 수신단에서 양안식 영상 비트스트림의 혼합 영상을 이용하여 기준 시점 영상 및 부가 시점 영상을 정확히 복원하기 위해, 헤더 정보에 혼합 영상 포맷의 구성 정보가 기록된 양안식 영상 비트스트림을 생성하는 방법 및 장치를 제안하는 데 있다.
따라서 상기 해결하고자 하는 과제를 달성하기 위해, 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 방법은 기준 시점 영상 및 부가 시점 영상을 소정의 블록 사이즈로 분할하는 단계, 기준 시점 영상의 블록 및 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상을 영상 비트스트림의 페이로드 영역에 기록하는 단계 및 혼합 영상에서 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 순서에 대한 블록 결합 패턴 정보를 영상 비트스트림의 헤더 영역에 기록하는 단계를 포함한다.
본 발명의 일 실시예는 혼합 영상의 프레임 별로 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보를 헤더 영역에 기록하는 단계를 포함한다.
일 실시예는 기준 시점 영상의 블록 및 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보를 헤더 영역에 기록하는 단계를 포함한다.
일 실시예의 블록 결합 패턴 정보는 혼합 영상이 가로축으로 N 개 및 세로축으로 M 개의 블록으로 분할되고, x는 0 ≤ x < N/2 범위의 정수이며, y는 0 ≤ y < M/2 범위의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치일 때, 혼합 영상의 (2x, 2y)번째 블록과 (2x+1, 2y+1)번째 블록은 각각, 기준 시점 영상의 블록 또는 부가 시점 영상의 블록 중 어느 하나의 시점 영상의 블록의 (2x, 2y)번째 블록과 (2x+1, 2y+1)번째 블록이고, 혼합 영상의 (2x, 2y+1)번째 블록과 (2x+1, 2y)번째 블록은 각각, 나머지 시점 영상의 블록의 (2x, 2y+1)번째 블록과 (2x+1, 2y)번째 블록인 블록 결합 패턴을 포함한다.
다른 실시예의 블록 결합 패턴 정보는 혼합 영상이 가로축으로 N 개 및 세로축으로 M 개의 블록으로 분할되고, x는 0 ≤ x < N/2 범위의 정수이며, y는 0 ≤ y < M 범위의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치일 때, 혼합 영상의 (2x, y)번째 블록은 기준 시점 영상의 블록 또는 부가 시점 영상의 블록 중 어느 하나의 시점 영상의 블록의 (2x, y)번째 블록이고, 혼합 영상의 (2x+1, y)번째 블록은 나머지 시점 영상의 블록의 (2x+1, y)번째 블록인 블록 결합 패턴을 포함한다.
일 실시예의 블록 결합 패턴 정보는 혼합 영상이 가로축으로 N 개 및 세로축으로 M 개의 블록으로 분할되고, x는 0 ≤ x < N 범위의 정수이며, y는 0 ≤ y < M/2 범위의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치일 때, 혼합 영상의 (x, 2y)번째 블록은 기준 시점 영상의 블록 또는 부가 시점 영상의 블록 중 어느 하나의 시점 영상의 블록의 (x, 2y)번째 블록이고, 혼합 영상의 (x, 2y+1)번째 블록은 나머지 시점 영상의 블록의 (x, 2y+1)번째 블록인 블록 결합 패턴을 포함한다.
일 실시예의 블록 결합 패턴 정보는 사용자가 선택한 임의의 블록 결합 패턴으로 기준 시점 영상의 블록 및 부가 시점 영상의 블록을 결합한 임의의 블록 결합 패턴을 포함한다.
바람직한 실시예의 블록 결합 패턴 정보는 혼합 영상의 제 1 위치의 블록에는 기준 시점 영상의 블록이 배치되고, 제 1 위치의 블록을 제외한 혼합 영상의 제 2 위치의 블록에는, 변이 추정을 통해 제 2 위치의 기준 시점 영상의 블록과 가장 유사도가 높은 부가 시점 영상의 블록이 배치된다.
바람직한 실시예의 프레임 배열 패턴 정보는 기준 시점 영상의 블록이 배열된 제 1 블록 위치 및 부가 시점 영상의 블록이 배열된 제 2 블록 위치가 혼합 영상의 프레임마다 동일한 위치에 유지되는 배열 순서를 포함한다.
일 실시예의 프레임 배열 패턴 정보는 기준 시점 영상의 블록이 배열된 제 1 블록 위치 및 부가 시점 영상의 블록이 배열된 제 2 블록 위치라고 할 때, 혼합 영상의 현재 프레임의 제 1 블록 위치가 혼합 영상의 다음 프레임의 제 2 블록 위치가 되고, 현재 프레임의 제 2 블록 위치가 다음 프레임의 제 1 블록 위치가 되는 배열 순서를 포함한다.
바람직한 실시예의 블록 사이즈 정보는 블록 사이즈 정보가 하나의 수로 결정된 경우, 블록의 가로 픽셀 개수와 세로 픽셀 개수가 하나의 수로 동일한 경우를 포함한다.
일 실시예의 블록 사이즈 정보는 블록의 가로 픽셀 개수 및 블록의 세로 픽셀 개수가 각각 결정되는 경우를 포함한다.
상기 해결하고자 하는 과제를 달성하기 위해, 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 장치는 기준 시점 영상 및 부가 시점 영상을 소정의 블록 사이즈로 분할하는 블록 분할부, 기준 시점 영상의 블록 및 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상을 영상 비트스트림의 페이로드 영역에 기록하는 혼합 영상 기록부 및 혼합 영상에서 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 순서에 대한 블록 결합 패턴 정보를 영상 비트스트림의 헤더 영역에 기록하는 블록 결합 패턴 정보 기록부를 포함한다.
상기 해결하고자 하는 과제를 달성하기 위해, 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 구조는 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 결합되어 구성된 혼합 영상이 기록된 페이로드 영역 및 혼합 영상에서 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 순서에 대한 블록 결합 패턴 정보, 혼합 영상의 프레임 별로 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보 및 기준 시점 영상의 블록 및 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보가 기록된 헤더 영역을 포함한다.
또한, 본 발명은 본 발명의 양안식 영상 비트스트림 생성 방법의 일 실시예를 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체를 포함한다.
본 발명의 양안식 영상 비트스트림 생성 방법 및 장치는 기준 시점 영상 및 부가 시점 영상의 정보를 블록 단위로 조합하여 혼합 영상 포맷을 구성함으로써, 양안식 영상의 원래의 해상도를 유지하면서 효율적으로 압축하거나 저장 또는 전송할 수 있는 효과가 있다.
또한, 혼합 영상의 한 프레임 내에서 기준 시점 영상의 블록 및 부가 시점 영상의 블록의 배열 패턴, 혼합 영상의 프레임 별로 기준 시점 영상의 블록 및 부가 시점 영상의 블록의 배열 패턴, 블록 사이즈 정보가 양안식 영상 비트스트림의 헤더 정보로 전송되므로, 수신단에서 양안식 영상 비트스트림의 혼합 영상 및 헤더 정보를 이용하여 기준 시점 영상 및 부가 시점 영상을 정확히 복원하는 효과가 있다.
또한, 혼합 영상의 한 프레임 내 블록 패턴 정보, 혼합 영상의 프레임별 배열 패턴 정보, 블록 사이즈 정보를 통해 정확한 블록 인터리브 방식이 구현 가능하므로, 기존의 2차원 영상 기기에서도 혼합 영상를 재생할 수 있다.
이하, 도 3 내지 도 9 를 참조하여, 본 발명의 양안식 영상 비트스트림 생성 방법, 장치 및 양안식 영상 비트스트림 구조를 상세히 설명한다.
도 3 은 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 장치의 블록도를 도시한다.
본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 장치(300)는 블록 분할부(310), 혼합 영상 기록부(320) 및 헤더 정보 기록부(330)를 포함한다. 헤더 정보 기록부(330)는 블록 결합 패턴 정보 기록부(340), 프레임 배열 패턴 정보 기록부(350) 및 블록 사이즈 정보 기록부(360)를 포함한다.
블록 분할부(310)는 주어진 기준 시점 영상 및 부가 시점 영상을 소정의 블록 사이즈로 분할하고, 블록 단위로 분할된 기준 시점 영상 및 부가 시점 영상을 혼합 영상 기록부(320)로 출력한다. 이 때 블록 사이즈는 4 × 4, 8 × 8과 같이 가로 픽셀 수와 세로 픽셀 수가 같은 블록 사이즈일 수도 있으며, 4 × 8, 16 × 8과 같이 가로 픽셀 수와 세로 픽셀 수가 다른 블록 사이즈일 수도 있다.
혼합 영상 기록부(320)는 블록 분할부(310)로부터 블록별로 분할된 기준 시점 영상 및 부가 시점 영상이 입력되고, 기준 시점 영상의 블록 및 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상을 양안식 영상 비트스트림의 페이로드 영역에 기록하여, 양안식 영상 비트스트림을 헤더 정보 기록부(330)로 출력한다.
헤더 정보 기록부(330)는 혼합 영상 기록부(320)로부터 블록 단위로 처리된 양안식 영상 비트스트림을 입력받고, 혼합 영상을 구성하기 위해 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 결합된 방법에 대한 정보를 양안식 영상 비트스트림의 헤더 영역에 기록하여 출력한다.
헤더 정보 기록부(330)에 기록되는 기준 시점 영상의 블록 및 부가 시점 영 상의 블록의 결합 정보는 블록 결합 패턴 정보 기록부(340), 프레임 배열 패턴 정보 기록부(350) 및 블록 사이즈 정보 기록부(360)에 의해 기록된다.
블록 결합 패턴 정보 기록부(340)는 혼합 영상 기록부(320)로부터 양안식 영상 비트스트림을 입력받고, 혼합 영상에서 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 순서에 대한 블록 결합 패턴 정보를 영상 비트스트림의 헤더 영역에 기록하고, 양안식 영상 비트스트림을 출력한다. 블록 결합 패턴 정보는 도 6a 및 도 6b를 참조하여 상세히 후술한다.
프레임 배열 패턴 정보 기록부(350)는 혼합 영상 기록부(320)로부터 양안식 영상 비트스트림을 입력받고, 혼합 영상의 프레임 별로 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보를 헤더 영역에 기록하고, 양안식 영상 비트스트림을 출력한다. 프레임 배열 패턴 정보는 도 7을 참조하여 상세히 후술한다.
블록 사이즈 정보 기록부(360)는 혼합 영상 기록부(320)로부터 양안식 영상 비트스트림을 입력받고, 기준 시점 영상의 블록 및 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보를 헤더 영역에 기록하고, 양안식 영상 비트스트림을 출력한다.
블록 사이즈 정보의 일 실시예는 블록 사이즈 정보가 하나의 수로 결정된 경우, 블록의 가로 픽셀 개수와 세로 픽셀 개수가 하나의 수로 동일하다. 따라서 정사각형의 블록이 정의된다.
블록 사이즈 정보의 일 실시예는 블록의 가로 픽셀 개수 및 세로 픽셀 개수 가 각각 설정되어, 정사각형 블록 뿐만 아니라 임의의 직사각형 블록도 정의될 수 있다.
도 4 은 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 구조를 도시한다.
본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림(400)은 헤더 영역(410) 및 페이로드 영역(450)을 포함한다. 헤더 영역(410)의 소정 영역에 블록 결합 패턴 정보 영역(420), 프레임 배열 패턴 정보 영역(430) 및 블록 사이즈 정보 영역(440)을 포함한다. 양안식 영상 비트스트림(400)은 본 발명의 일 실시예에 따른 양안식 영상 비트스트림 생성 장치(300)에 의해 생성된다.
헤더 영역(410)에는 헤더 정보 기록부(330)에 의해 페이로드 영역(450)에 기록될 데이터에 대한 각종 특성을 정의하는 헤더 정보가 기록된다. 예를 들면, 데이터의 크기, 실행 방법, 기록 시간, 획득 방법 등의 각종 특성들이 헤더 정보로 정의될 수 있다.
페이로드 영역(450)에는 혼합 영상 기록부(320)에 의해 기준 시점 영상 및 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상이 기록된다.
블록 결합 패턴 정보 영역(420)은 블록 결합 패턴 정보 기록부(340)에 의해 블록 결합 패턴 정보(StereoScopic_BlockPattern)가 기록된다.
프레임 배열 패턴 정보 영역(430)은 프레임 배열 패턴 정보 기록부(350)에 의해 프레임 배열 패턴 정보(StereoScopic_FramePattern)가 기록된다.
블록 사이즈 정보 영역(440)은 블록 사이즈 정보 기록부(360)에 의해 블록 사이즈 정보(StereoScopic_HorBlockSize, StereoScopic_VerBlockSize)가 기록된다.
블록 결합 패턴 정보(StereoScopic_BlockPattern), 프레임 배열 패턴 정보(StereoScopic_FramePattern) 및 블록 사이즈 정보(StereoScopic_HorBlockSize, StereoScopic_VerBlockSize)는 헤더 정보로써 소정의 숫자로 정의되어 각각 블록 결합 패턴 정보 영역(420), 프레임 배열 패턴 정보 영역(430) 및 블록 사이즈 정보 영역(440)에 기록된다.
도 5 는 본 발명에 일 실시예에 따른 양안식 영상이 블록 인터리브드 방식에 의해 결합된 혼합 영상을 도시한다.
도 5 는 본 발명의 양안식 영상 비트스트림 생성 장치(300)의 일 실시예에 따른 블록 분할부(310), 혼합 영상 기록부(320)의 작동 과정에 대한 이해를 돕기 위한 설명이다.
영상 510은 기준 시점 영상의 t-2, t-1 및 t번째 프레임을 도시한다.
영상 520은 부가 시점 영상의 시간 t-2, t-1 및 t번째 프레임을 도시한다.
영상 530은 기준 시점 영상 및 부가 시점 영상을 블록 단위로 조합하여 구성한 혼합 영상을 도시한다.
본 발명의 일 실시예는 기준 시점 영상으로 좌측 시점 영상(510)이 선택되고, 부가 시점 영상으로 우측 시점 영상(520)이 선택된다.
블록 분할부(310)는 기준 시점 영상(510) 및 부가 시점 영상(520)을 소정 사 이즈의 블록으로 나누고, 혼합 영상 기록부(320)는 기준 시점 영상(510) 및 부가 시점 영상(520)의 정보를 블록 단위로 조합하여 혼합 영상(530)을 생성한다.
혼합 영상 기록부(320)의 일 실시예는 혼합 영상(530)에 배열되는 기준 시점 영상(510)의 블록의 위치를 제 1 블록 위치라 할 때, 제 1 블록 위치의 기준 시점 영상(510)의 블록들을 혼합 영상(530)의 제 1 블록 위치에 배열한다.
혼합 영상 기록부(320)의 일 실시예는 혼합 영상(530)에 배열되는 부가 시점 영상(520)의 블록의 위치를 제 2 블록 위치라 할 때, 제 1 블록 위치의 부가 시점 영상(520)의 블록들을 혼합 영상(530)의 제 2 블록 위치에 배열한다.
혼합 영상 기록부(320)의 일 실시예는 혼합 영상(530)에 배열되는 부가 시점 영상(520)의 블록의 위치를 제 2 블록 위치라 할 때, 변이 추정을 통하여 제 2 블록 위치의 기준 시점 영상(510)의 블록들과 유사도가 가장 큰 부가 시점 영상(520)의 블록을 혼합 영상(530)의 제 2 블록 위치에 배열한다.
변이 추정을 통해 유사도가 가장 큰 블록을 찾아내는 방식의 일례는 기준 시점 영상의 블록과 SAD(Sum of Absolute Difference) 값이 가장 작은 부가 시점 영상의 블록을 찾는 방식에 의한다. 이외에도, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 사용할 수 있는 변이 추정 방식에 의해 부가 시점 영상(520)의 블록을 찾는 것이 가능하다.
이하, 도 6a 및 도 6b를 참조하여, 블록 결합 패턴 정보를 설명한다.
도 6a 는 블록 결합 패턴 정보의 실시예들에 따른 혼합 영상들을 도시한다.
도 6a를 참조하여, 혼합 영상 기록부(320)에서 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 결합되는 블록 결합 패턴을 설명한다.
블록 결합 패턴 610, 블록 결합 패턴 620 및 블록 결합 패턴 630은 각각 블록 결합 패턴의 일 실시예이다.
설명의 편의를 위해 기준 시점 영상, 부가 시점 영상 및 혼합 영상이 N 개의 행 및 M 개의 열의 블록으로 구분되고, x 는 x ≥ 0 의 정수이며, y는 y ≥ 0 의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치를 나타낸다고 가정한다.
블록 결합 패턴 610은 x < N/2 , y < M/2 인 경우, 혼합 영상(530)의 (2x, 2y)번째 블록 위치, (2x+1, 2y+1)번째 블록 위치에 기준 시점 영상(510)의 각각 해당 위치의 블록을 배치한다. 또한 나머지 블록 위치, 즉 혼합 영상(530)의 (2x, 2y+1)번째 블록 위치, (2x+1, 2y)번째 블록 위치에 부가 시점 영상(520)의 각각 해당 위치의 블록을 배치한다.
전술한 바와 같이 기준 시점 영상(510)의 블록이 배치된 블록 위치의 상측, 하측, 좌측 및 우측 블록 위치 그리고 이전 프레임 및 다음 프레임의 동일 위치 블록 위치에는 부가 시점 영상(520)의 블록이 배치된다. 따라서, 혼합 영상(530)에 동일 시점 영상의 블록이 연속적으로 배치되지 않는다.
불연속적인 블록의 배치는 임의의 블록의 인접 블록이 다른 시점 영상의 블록이 됨으로써 양안식 영상 복원 단계에서 주변 블록 정보를 이용할 수 있게 하기 위함이다. 따라서, 전술된 기준 시점 영상(510) 및 부가 시점 영상(520)에서 결정 되는 블록 위치는, 동일 시점의 블록이 불연속적으로 배치될 수 있는 한에서 다양한 실시예에 의해 변경될 수 있다.
블록 결합 패턴 620은 x < N , y < M/2 인 경우, 혼합 영상(530)의 (x, 2y)번째 블록 위치에 기준 시점 영상(510)의 각각 해당 위치의 블록을 배치한다. 또한 나머지 블록 위치, 즉 혼합 영상(530)의 (x, 2y+1)번째 블록 위치에 부가 시점 영상(520)의 각각 해당 위치의 블록을 배치한다.
블록 결합 패턴 630은 x < N/2, y < M 인 경우, 혼합 영상(530)의 (2x, y)번째 블록 위치에 기준 시점 영상(510)의 각각 해당 위치의 블록을 배치한다. 또한 나머지 블록 위치, 즉 혼합 영상(530)의 (2x+1, y)번째 블록 위치에 부가 시점 영상(520)의 각각 해당 위치의 블록을 배치한다.
본 발명의 일 실시예는 전술한 블록 결합 패턴 610, 620 및 630 에서 기준 시점 영상의 블록 위치 패턴 및 부가 시점 영상이 배치되는 블록 위치 패턴을 서로 바꿀 수 있다.
또한 일 실시예는 부가 시점 영상의 블록을 기준 시점 영상의 블록과의 변이 추정에 의해 결정할 수 있다.
도 6b 는 블록 결합 패턴 정보의 일 실시예를 나타내는 표를 도시한다.
StereoScopic_BlockPattern은 블록 결합 패턴 정보을 나타낸다.
Check pattern은 블록 결합 패턴 610을 나타낸다.
Vertical interleaving type은 블록 결합 패턴 620을 나타낸다.
Horizontal interleaving type은 블록 결합 패턴 630을 나타낸다.
User private은 사용자가 지정하는 블록 결합 패턴을 나타낸다.
도 6b는 혼합 영상을 구성하는 기준 시점 영상의 블록 및 부가 시점 영상의 블록의 블록 결합 패턴을 본 발명의 일 실시예에 따른 양안식 영상 비트스트림의 헤더 영역에 헤더 정보로써 기록하기 위해, 블록 결합 패턴 정보를 설정한 예시를 나타낸다.
즉, 혼합 영상이 블록 결합 패턴 610(Check pattern)의 패턴으로 구성된 경우 블록 결합 패턴 정보(StereoScopic_BlockPattern)는 0으로 설정되고, 혼합 영상이 블록 결합 패턴 620(Vertical interleaving type)의 패턴으로 구성된 경우 블록 결합 패턴 정보(StereoScopic_BlockPattern)는 1로 설정된다. 마찬가지로 혼합 영상이 블록 결합 패턴 630(Horizontal interleaving type)의 패턴으로 구성된 경우 블록 결합 패턴 정보(StereoScopic_BlockPattern)는 2로 설정된다.
블록 결합 패턴 610, 블록 결합 패턴 620 및 블록 결합 패턴 630 이외에 사용자가 지정한 임의의 블록 결합 패턴이 있다면 블록 결합 패턴 정보(StereoScopic_BlockPattern)를 3으로 설정하여, 블록 결합 패턴을 정의할 수 있다.
도 7 은 프레임 배열 패턴 정보의 실시예들을 나타낸다.
도 7을 참조하여, 혼합 영상 기록부(320) 및 프레임 배열 패턴 정보 기록부(350)의 동작 방법이 설명된다.
프레임 배열 패턴 710은 각각의 프레임마다 기준 시점 영상의 블록 및 부가 시점 영상의 블록의 배열 패턴이 동일한 경우를 나타낸다.
프레임 배열 패턴 720은 각각의 프레임마다 기준 시점 영상의 블록 및 부가 시점 영상의 블록의 배열 패턴이 변경되는 경우를 나타낸다.
혼합 영상 기록부(320)은 프레임 배열 패턴 710과 같이, 혼합 영상의 각각의 프레임마다 기준 시점 영상의 블록이 배치되는 제 1 블록 위치 및 부가 시점 영상의 블록이 배치되는 제 2 블록 위치를 동일하게 유지한다.
혼합 영상 기록부(320)은 프레임 배열 패턴 720과 같이, 혼합 영상의 현재 프레임의 제 1 블록 위치를 혼합 영상의 다음 프레임의 제 2 블록 위치로 변경하고, 현재 프레임의 제 2 블록 위치를 다음 프레임의 제 1 블록 위치로 변경한다. 따라서, 매 프레임마다 배열 패턴이 번갈아 바뀌며, 두 프레임 단위로 블록 배열 패턴이 동일하다.
프레임 배열 패턴 720과 같은 불연속적인 배열 패턴은 전술한 불연속적인 블록 결합 패턴과 마찬가지로, 양안식 영상의 복원 과정에서 주변 블록의 정보를 이용할 수 있기 위함이다.
프레임 배열 패턴 정보 기록부(350)은 혼합 영상이 프레임 배열 패턴 710으로 구성된 경우, 프레임 배열 패턴 정보(StereoScopic_FramePattern)를 0 으로 기록한다. 또한, 혼합 영상이 프레임 배열 패턴 720으로 구성된 경우, 프레임 배열 패턴 정보(StereoScopic_FramePattern)를 1 로 기록한다.
블록 사이즈 정보 기록부(360)는 기준 시점 영상, 부가 시점 영상 및 혼합 영상의 블록 사이즈에 대한 블록 사이즈 정보(StereoScopic_BlockSize)를 양안식 영상 비트스트림의 헤더 영역에 기록한다.
정사각형의 블록의 경우, 가로 픽셀의 개수 및 세로 픽셀의 개수가 동일하므로 블록 사이즈 정보(StereoScopic_BlockSize)를 하나의 수로 설정한다.
그러나 직사각형 블록의 경우, 블록의 가로 픽셀의 개수(StereoScopic_HorBlockSize) 및 세로 픽셀의 개수(StereoScopic_VerBlockSize)가 각각 설정된다.
도 8 은 본 발명의 블록 인터리브드 방식에 의한 실험 영상을 도시한다.
도 8 은 본 발명에서 정의한 블록 결합 패턴 정보, 프레임 배열 패턴 정보, 블록 사이즈 정보를 이용하여 구성한 혼합 영상을 도시한다.
블록 결합 패턴 정보(StereoScopic_BlockPattern)가 1(Vertical interleaving type), 블록 사이즈 정보(StereoScopic_BlockSize)가 16인 경우의 영상이다. 즉, 도 8은 가로, 세로 픽셀의 개수가 16개로 동일한 정사각형 블록으로 분할된 양안식 영상을 이용한 결과다.
또한, 전술한 변이 추정 방식에 의해 부가 시점 영상의 블록을 결정한 결과 블로킹 결합(Blocking artifact)가 최소화되었다. 도 8 과 같은 영상을 수신받은 복원단에서는 양안식 영상 비트스트림(400)의 블록 결합 패턴 정보(420), 프레임 배열 패턴 정보(430), 블록 사이즈 정보(440)을 이용하여 기준 시점 영상 및 부가 시점 영상을 분리할 수 있다.
도 9 은 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 방법의 흐름도를 도시한다.
단계 910에서, 기준 시점 영상 및 부가 시점 영상이 소정의 블록 사이즈로 분할된다.
단계 920에서, 기준 시점 영상의 블록 및 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상이 영상 비트스트림의 페이로드 영역에 기록된다.
단계 930에서, 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 혼합 영상의 현재 프레임에서 배열되는 순서에 대한 블록 결합 패턴 정보가 영상 비트스트림의 헤더 영역에 기록된다.
단계 940에서, 혼합 영상의 프레임 별로 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보가 헤더 영역에 기록된다.
단계 950에서, 기준 시점 영상의 블록 및 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보가 헤더 영역에 기록된다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기 록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1a 는 양안식 영상의 전송을 위해 픽셀단위의 양안식 영상 포맷을 도시한다.
도 1b 는 픽셀단위의 양안식 영상 포맷의 손실된 픽셀복원 장치를 도시한다.
도 2a 는 필드 단위의 양안식 영상 포맷을 도시한다.
도 2b 는 필드 단위의 양안식 영상 포맷의 송신단 및 수신단의 전체적인 블록도를 도시한다.
도 3 은 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 장치의 블록도를 도시한다.
도 4 은 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 구조를 도시한다.
도 5 는 본 발명에 일 실시예에 따른 양안식 영상이 블록 인터리브드 방식에 의해 결합된 혼합 영상을 도시한다.
도 6a 는 블록 결합 패턴 정보의 실시예들에 따른 혼합 영상들을 도시한다.
도 6b 는 블록 결합 패턴 정보의 일 실시예를 나타내는 표를 도시한다.
도 7 은 프레임 배열 패턴 정보의 실시예들을 나타낸다.
도 8 은 본 발명의 블록 인터리브드 방식에 의한 실험 영상을 도시한다.
도 9 은 본 발명의 바람직한 실시예에 따른 양안식 영상 비트스트림 생성 방법의 흐름도를 도시한다.

Claims (20)

  1. 기준 시점 영상 및 부가 시점 영상을 소정의 블록 사이즈로 분할하는 단계;
    상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상을 영상 비트스트림의 페이로드 영역에 기록하는 단계; 및
    상기 혼합 영상에서 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 배열되는 패턴에 대한 블록 결합 패턴 정보를 상기 영상 비트스트림의 헤더 영역에 기록하는 단계를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  2. 제 1 항에 있어서,
    상기 혼합 영상의 프레임 별로 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보를 상기 헤더 영역에 기록하는 단계를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  3. 제 1 항에 있어서,
    상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보를 상기 헤더 영역에 기록하는 단계를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  4. 제 1 항에 있어서, 상기 블록 결합 패턴 정보는
    상기 혼합 영상이 가로축으로 N 개 및 세로축으로 M 개의 블록으로 분할되고, x는 0 ≤ x < N/2 범위의 정수이며, y는 0 ≤ y < M/2 범위의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치일 때,
    상기 혼합 영상의 (2x, 2y)번째 블록과 (2x+1, 2y+1)번째 블록은 각각, 상기 기준 시점 영상의 블록 또는 상기 부가 시점 영상의 블록 중 어느 하나의 시점 영상의 블록의 (2x, 2y)번째 블록과 (2x+1, 2y+1)번째 블록이고,
    상기 혼합 영상의 (2x, 2y+1)번째 블록과 (2x+1, 2y)번째 블록은 각각, 나머지 시점 영상의 블록의 (2x, 2y+1)번째 블록과 (2x+1, 2y)번째 블록인 블록 결합 패턴을 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  5. 제 1 항에 있어서, 상기 블록 결합 패턴 정보는
    상기 혼합 영상이 가로축으로 N 개 및 세로축으로 M 개의 블록으로 분할되고, x는 0 ≤ x < N/2 범위의 정수이며, y는 0 ≤ y < M 범위의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치일 때,
    상기 혼합 영상의 (2x, y)번째 블록은 상기 기준 시점 영상의 블록 또는 상기 부가 시점 영상의 블록 중 어느 하나의 시점 영상의 블록의 (2x, y)번째 블록이고,
    상기 혼합 영상의 (2x+1, y)번째 블록은 나머지 시점 영상의 블록의 (2x+1, y)번째 블록인 블록 결합 패턴을 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  6. 제 1 항에 있어서, 상기 블록 결합 패턴 정보는
    상기 혼합 영상이 가로축으로 N 개 및 세로축으로 M 개의 블록으로 분할되고, x는 0 ≤ x < N 범위의 정수이며, y는 0 ≤ y < M/2 범위의 정수이며, (x, y)번째 블록은 가로축으로 x번째, 세로축으로 y번째에서의 블록 위치일 때,
    상기 혼합 영상의 (x, 2y)번째 블록은 상기 기준 시점 영상의 블록 또는 상기 부가 시점 영상의 블록 중 어느 하나의 시점 영상의 블록의 (x, 2y)번째 블록이고,
    상기 혼합 영상의 (x, 2y+1)번째 블록은 나머지 시점 영상의 블록의 (x, 2y+1)번째 블록인 블록 결합 패턴을 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  7. 제 1 항에 있어서, 상기 블록 결합 패턴 정보는
    사용자가 선택한 임의의 블록 결합 패턴으로 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록을 결합한 상기 임의의 블록 결합 패턴을 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  8. 제 1 항에 있어서, 상기 블록 결합 패턴 정보는
    상기 혼합 영상의 제 1 위치의 블록에는 상기 기준 시점 영상의 블록이 배치되고,
    상기 제 1 위치의 블록을 제외한 상기 혼합 영상의 제 2 위치의 블록에는, 변이 추정을 통해 상기 제 2 위치의 상기 기준 시점 영상의 블록과 가장 유사도가 높은 상기 부가 시점 영상의 블록이 배치되는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  9. 제 2 항에 있어서, 상기 프레임 배열 패턴 정보는
    상기 기준 시점 영상의 블록이 배열된 제 1 블록 위치 및 상기 부가 시점 영상의 블록이 배열된 제 2 블록 위치가 상기 혼합 영상의 상기 프레임마다 동일한 위치에 유지되는 배열 순서를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  10. 제 2 항에 있어서, 상기 프레임 배열 패턴 정보는
    상기 기준 시점 영상의 블록이 배열된 제 1 블록 위치 및 상기 부가 시점 영상의 블록이 배열된 제 2 블록 위치라고 할 때,
    상기 혼합 영상의 현재 프레임의 제 1 블록 위치가 상기 혼합 영상의 다음 프레임의 제 2 블록 위치가 되고, 상기 현재 프레임의 제 2 블록 위치가 상기 다음 프레임의 제 1 블록 위치가 되는 배열 순서를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  11. 제 3 항에 있어서, 상기 블록 사이즈 정보는
    상기 블록 사이즈 정보가 하나의 수로 결정된 경우, 상기 블록의 가로 픽셀 개수와 세로 픽셀 개수가 상기 하나의 수로 동일한 경우를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  12. 제 3 항에 있어서, 상기 블록 사이즈 정보는
    상기 블록의 가로 픽셀 개수 및 상기 블록의 세로 픽셀 개수가 각각 결정되는 경우를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 방법.
  13. 기준 시점 영상 및 부가 시점 영상을 소정의 블록 사이즈로 분할하는 블록 분할부;
    상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록을 결합하여 생성된 혼합 영상을 영상 비트스트림의 페이로드 영역에 기록하는 혼합 영상 기록부; 및
    상기 혼합 영상에서 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 배열되는 순서에 대한 블록 결합 패턴 정보를 상기 영상 비트스트림의 헤더 영역에 기록하는 블록 결합 패턴 정보 기록부를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 장치.
  14. 제 13 항에 있어서,
    상기 혼합 영상의 프레임 별로 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보를 상기 헤더 영역에 기록하는 프레임 배열 패턴 정보 기록부를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 장치.
  15. 제 13 항에 있어서,
    상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보를 상기 헤더 영역에 기록하는 블록 사이즈 정보 기록부를 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 생성 장치.
  16. 제 13 항에 있어서, 상기 블록 결합 패턴 정보는
    상기 기준 시점 영상 및 상기 부가 시점 영상의 각각의 블록이 상기 혼합 영상의 동일 블록 위치에 배열되고, 가로 방향, 세로 방향 또는 대각선 방향 중 어느 한 방향으로 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 번갈아 배열되는 경우를 나타내는 것을 특징으로 하는 양안식 영상 비트스트림 생성 장치.
  17. 제 14 항에 있어서, 상기 프레임 배열 패턴 정보는
    상기 혼합 영상의 현재 프레임에 상기 기준 시점 영상의 블록이 배열된 제 1 블록 위치 및 상기 부가 시점 영상의 블록이 배열된 제 2 블록 위치라고 할 때,
    상기 혼합 영상의 현재 프레임의 상기 제 1 블록 위치 및 상기 제 2 블록 위치가 상기 혼합 영상의 이전 프레임의 상기 제 1 블록 위치 및 상기 제 2 블록 위치와 서로 바뀌는지 여부에 관한 정보인 것을 특징으로 하는 양안식 영상 비트스트림 생성 장치.
  18. 제 13 항에 있어서, 상기 블록 사이즈 정보는
    상기 블록의 가로 픽셀 개수와 세로 픽셀 개수가 상기 하나의 수로 동일한 경우 및
    상기 블록의 가로 픽셀 개수 및 상기 블록의 세로 픽셀 개수가 각각 결정되는 경우 중 어느 하나의 경우를 나타내는 것을 특징으로 하는 양안식 영상 비트스트림 생성 장치.
  19. 기준 시점 영상의 블록 및 부가 시점 영상의 블록이 결합되어 구성된 혼합 영상이 기록된 페이로드 영역; 및
    상기 혼합 영상에서 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 배열되는 패턴에 대한 블록 결합 패턴 정보, 상기 혼합 영상의 프레임 별로 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록이 배열되는 패턴에 대한 프레임 배열 패턴 정보 및 상기 기준 시점 영상의 블록 및 상기 부가 시점 영상의 블록 사이즈에 대한 블록 사이즈 정보가 기록된 헤더 영역을 포함하는 것을 특징으로 하는 양안식 영상 비트스트림 구조.
  20. 제 1 항 내지 제 12 항 중 어느 하나의 양안식 영상 비트스트림 생성 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
KR1020070080329A 2007-06-26 2007-08-09 블록 인터리브드 방식의 양안 영상 정보를 포함하는 양안식영상 비트스트림 생성 방법 및 장치 KR20080114450A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US12/124,739 US8471893B2 (en) 2007-06-26 2008-05-21 Method and apparatus for generating stereoscopic image bitstream using block interleaved method
PCT/KR2008/002914 WO2009002018A1 (en) 2007-06-26 2008-05-26 Method and apparatus for generating stereoscopic image bitstream using block interleaved method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US94624107P 2007-06-26 2007-06-26
US60/946,241 2007-06-26

Publications (1)

Publication Number Publication Date
KR20080114450A true KR20080114450A (ko) 2008-12-31

Family

ID=40371537

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070080329A KR20080114450A (ko) 2007-06-26 2007-08-09 블록 인터리브드 방식의 양안 영상 정보를 포함하는 양안식영상 비트스트림 생성 방법 및 장치

Country Status (1)

Country Link
KR (1) KR20080114450A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019107953A1 (ko) * 2017-11-30 2019-06-06 삼성전자 주식회사 이미지 처리 방법 및 그 전자 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019107953A1 (ko) * 2017-11-30 2019-06-06 삼성전자 주식회사 이미지 처리 방법 및 그 전자 장치

Similar Documents

Publication Publication Date Title
US8471893B2 (en) Method and apparatus for generating stereoscopic image bitstream using block interleaved method
US8274551B2 (en) Method and apparatus for generating header information of stereoscopic image data
KR101450670B1 (ko) 블록 기반의 양안식 영상 포맷 생성 방법과 장치 및 양안식영상 복원 방법과 장치
US20090015662A1 (en) Method and apparatus for encoding and decoding stereoscopic image format including both information of base view image and information of additional view image
JP6644979B2 (ja) ３次元ビデオストリームに属する画像のカラーコンポーネントを用いることにより、深度マップを生成、格納、送信、受信および再生する方法およびデバイス
KR101396354B1 (ko) 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR20080114450A (ko) 블록 인터리브드 방식의 양안 영상 정보를 포함하는 양안식영상 비트스트림 생성 방법 및 장치
KR20090007190A (ko) 양안식 영상 정보를 모두 포함하는 양안식 영상 포맷부호화 방법 및 장치, 그리고 양안식 영상 포맷 복호화방법 및 장치

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination