KR20050076441A - 영상의 3차원 부호화 방법 - Google Patents

영상의 3차원 부호화 방법 Download PDF

Info

Publication number
KR20050076441A
KR20050076441A KR1020040004423A KR20040004423A KR20050076441A KR 20050076441 A KR20050076441 A KR 20050076441A KR 1020040004423 A KR1020040004423 A KR 1020040004423A KR 20040004423 A KR20040004423 A KR 20040004423A KR 20050076441 A KR20050076441 A KR 20050076441A
Authority
KR
South Korea
Prior art keywords
image
camera
previous time
temporal
encoding
Prior art date
Application number
KR1020040004423A
Other languages
English (en)
Other versions
KR100987775B1 (ko
Inventor
이영렬
Original Assignee
학교법인 대양학원
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 학교법인 대양학원, 삼성전자주식회사 filed Critical 학교법인 대양학원
Priority to KR1020040004423A priority Critical patent/KR100987775B1/ko
Priority to EP05721827A priority patent/EP1707010A4/en
Priority to PCT/KR2005/000182 priority patent/WO2005069630A1/en
Priority to CN200580000210A priority patent/CN100584004C/zh
Priority to US11/038,477 priority patent/US7817181B2/en
Publication of KR20050076441A publication Critical patent/KR20050076441A/ko
Application granted granted Critical
Publication of KR100987775B1 publication Critical patent/KR100987775B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05D—HINGES OR SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS
    • E05D15/00—Suspension arrangements for wings
    • E05D15/40—Suspension arrangements for wings supported on arms movable in vertical planes
    • E05D15/44—Suspension arrangements for wings supported on arms movable in vertical planes with pivoted arms and vertically-sliding guides
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05C—BOLTS OR FASTENING DEVICES FOR WINGS, SPECIALLY FOR DOORS OR WINDOWS
    • E05C17/00—Devices for holding wings open; Devices for limiting opening of wings or for holding wings open by a movable member extending between frame and wing; Braking devices, stops or buffers, combined therewith
    • E05C17/02—Devices for holding wings open; Devices for limiting opening of wings or for holding wings open by a movable member extending between frame and wing; Braking devices, stops or buffers, combined therewith by mechanical means
    • E05C17/04—Devices for holding wings open; Devices for limiting opening of wings or for holding wings open by a movable member extending between frame and wing; Braking devices, stops or buffers, combined therewith by mechanical means with a movable bar or equivalent member extending between frame and wing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME ASSOCIATED WITH SUBCLASSES E05D AND E05F, RELATING TO CONSTRUCTION ELEMENTS, ELECTRIC CONTROL, POWER SUPPLY, POWER SIGNAL OR TRANSMISSION, USER INTERFACES, MOUNTING OR COUPLING, DETAILS, ACCESSORIES, AUXILIARY OPERATIONS NOT OTHERWISE PROVIDED FOR, APPLICATION THEREOF
    • E05Y2201/00—Constructional elements; Accessories therefor
    • E05Y2201/60—Suspension or transmission members; Accessories therefor
    • E05Y2201/622—Suspension or transmission members elements
    • E05Y2201/684—Rails; Tracks
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME ASSOCIATED WITH SUBCLASSES E05D AND E05F, RELATING TO CONSTRUCTION ELEMENTS, ELECTRIC CONTROL, POWER SUPPLY, POWER SIGNAL OR TRANSMISSION, USER INTERFACES, MOUNTING OR COUPLING, DETAILS, ACCESSORIES, AUXILIARY OPERATIONS NOT OTHERWISE PROVIDED FOR, APPLICATION THEREOF
    • E05Y2900/00—Application of doors, windows, wings or fittings thereof
    • E05Y2900/10—Application of doors, windows, wings or fittings thereof for buildings or parts thereof
    • E05Y2900/13—Type of wing
    • E05Y2900/148—Windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

영상을 시간적 공간적 특성에 따라 3차원으로 적응적으로 부호화하는 방법이 개시된다. 본 발명에 따라, 3차원 영상 부호화 방법은, (a) 복수개의 카메라가 일렬로 존재할 때, 가장 중앙에 위치한 카메라에서 잡은 영상은 바로 이전시간에 상기 카메라에서 잡은 영상만을 참조하여 시간적 예측을 수행하는 단계; 및 (b) 그 외의 카메라에서 잡은 영상은 상기 이전시간의 영상과, 상기 카메라와 인접한 카메라에서 잡은 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계를 포함하는 것을 특징으로 한다. 이에 의해, 많은 수의 카메라를 사용하여 획득한 3차원 영상을 효율적으로 부호화 할 수 있다.

Description

영상의 3차원 부호화 방법{3 Dimensional coding method of video}
본 발명은 영상의 부호화에 관한 것으로, 보다 상세하게는 영상을 시간적, 공간적 특성에 따라 3차원으로 적응적으로 부호화하는 방법에 관한 것이다.
MPEG-4 Part 2 및 H.264(MPEG-4 AVC(Advanced Video Coding))에서의 영상 부호화 방법은 2차원 영상의 부호화에 대한 것으로, 부호화 효율을 높이는데 주로 초점이 맞추어져 있다. 그러나 실감통신이나 가상현실 등의 분야에서는 3차원 영상의 부호화와 재생방법이 필요하다. 따라서, 종래의 2차원 영상이 아닌 3차원 AV 데이터의 부호화에 대한 연구가 필요하다.
이에 따라, 영상 부호화에 관한 표준화 단체인 MPEG 에서는 3-D AV(3- Dimensional Audio Video) 코딩에 대한 표준을 제정하기 위한 노력을 기울이고 있으며, 이를 위해 3차원 비디오 부호화 및 전송에 관련한 3-D AV 부호화 AHG(Ad-hoc Group)이 구성되어 2003년 12월에 CFP(Call For Proposal)를 할 예정에 있으며, 따라서 아직까지 3차원 AV 데이터의 부호화에 관한 표준이 거의 진행되지 않고 있다.
따라서, 본 발명이 이루고자 하는 기술적 과제는 복수개의 카메라로부터 영상 데이터를 입력받아 영상을 3차원으로 부호화하는 3차원 영상 부호화 방법을 제공하는 것이다.
상기 기술적 과제는 본 발명에 따라, (a) 복수개의 카메라가 일렬로 존재할 때, 가장 중앙에 위치한 카메라에서 잡은 영상은 바로 이전시간에 상기 카메라에서 잡은 영상만을 참조하여 시간적 예측을 수행하는 단계; 및 (b) 그 외의 카메라에서 잡은 영상은 상기 이전시간의 영상과, 상기 카메라와 인접한 카메라에서 잡은 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법에 의해 달성된다.
상기 (b) 단계는, 그 외의 카메라에서 잡은 영상이 참조하는 상기 이전시간의 영상은, 소정의 참조픽처 개수만큼의 단계까지의 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 것을 특징으로 하는 것이 바람직하다.
또한, 상기 기술적 과제는 (a) 이전시간의 영상과 소정의 각을 이루며, 현재 부호화하고자 하는 영상의 중앙방향으로 인접한 카메라에서 이전시간에 잡은 영상을 참조하여 소정의 참조픽처 개수만큼의 단계까지의 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계; (b) 상기 소정의 각 방향으로 다음으로 인접한 영상을 참조하여 상기 소정의 참조픽처 개수만큼의 단계까지 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계; 및 (c) 상기 소정의 참조픽처 개수만큼의 단계에 이를 때까지 모든 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법에 의해서도 달성된다.
상기 소정의 각은, 인접한 카메라의 간격에 따라서 달라지는 것이 바람직하다.
또한 상기 기술적 과제는, 이차원적으로 배열되어 있는 카메라에서 잡은 복수개의 영상을 3차원 영상으로 부호화하는 방법에 있어서, (a) 이차원 카메라 배열중 가장 중심에 위치하는 카메라에서 잡은 영상을 부호화하는 단계; 및 (b) 상기 중심 카메라로부터의 거리가 가까운 순서대로 위치하는 카메라에서 잡은 영상을 부호화하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법에 의해서도 달성된다.
상기 (b) 단계는, 동일한 거리에 위치하는 카메라가 복수개 존재하는 경우에는 나선방향에 따라서 순차적으로 부호화를 수행하는 것이 바람직하다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설명한다.
도 1은 좌측시야영상(left view video)과 우측시야영상(right view video)을 이용하여 스테레오스코픽 비디오(steroscopic video)를 부호화하고 재생하는 것을 설명하는 도면이다.
도 1을 참조하면, MPEG-2 멀티뷰 프로파일(Multi-view profile)(13818-2)에서는 좌측시야영상과 우측시야영상을 이용하여 3차원 영상을 부호화할 때 두 영상간의 관련성(correlation)을 찾아 두 영상간의 차이를 네트워크의 상태에 따라 가변적으로 부호화하는 스케일러블 코덱(scalable codec)을 사용하여 3차원 영상을 부호화하고 재생함을 알 수 있다. 이 때 좌측영상을 기본계층영상(base layer video)으로, 우측영상을 향상계층영상(enhancement layer video)으로 정해 부호화한다. 기본계층영상은 그 자체만으로 부호화될 수 있는 영상을 말하고, 향상계층영상은 기본계층영상의 질을 높이기 위하여 네크워크의 상태가 좋을 때 추가적으로 부호화해서 보내는 영상이다. 이렇게 기본계층영상과 향상계층영상을 모두 사용하여 부호화하는 것을 스케일러블 코딩이라고 한다.
좌측시야영상은 제1 움직임 보상 DCT 부호화기(Motion compensated DCT encoder, 110)에 의해서 부호화된다. 우측시야영상은 좌측시야영상과의 차이를 추정하는 양안차 추정기(disparity estimator, 122)와 양안차 보상기(disparity compensator, 124)에 의해 계산된 두 영상간의 차이가 제2 움직임 보상 DCT 부호화기(126)에 의해 부호화된다. 좌측시야영상을 부호화하는 제1 움직임 보상 DCT 부호화기(110)를 기본계층영상 부호화기라고 하면, 우측시야영상과 좌측시야영상과의 양안차를 부호화하는 양안차 추정기(122), 양안차 보상기(124) 및 제2 움직임 보상 DCT 부호화기(126)를 향상계층영상 부호화기(120)라고 할 수 있다. 이렇게 부호화된 기본계층영상과 향상계층영상은 시스템 다중화기(system multiplexer, 130)에 의해 다중화되어 복호화기로 전송된다.
다중화된 신호는 시스템 역다중화기(system demultiplexer, 140)에 의해 좌측시야영상과 우측시야영상으로 나누어진다. 좌측시야영상은 제1 움직임 보상 DCT 복호화기(motion compensated DCT decoder, 150)에 의해 복호화된다. 양안차 영상은 좌측시야영상과의 양안차를 보상하는 양안차 보상기(disparity compensator, 162)와 제2 움직임 보상 DCT 복호화기(164)에 의해 우측시야영상으로 복원된다. 좌측시야영상을 복호화하는 제1 움직임 보상 DCT 복호화기(150)를 기본계층영상 복호화기라고 하면, 우측시야영상과 좌측시야영상과의 양안차를 찾아 우측시야영상을 복호화하는 양안차 보상기(162) 및 제2 움직임 보상 DCT 복호화기(164)를 향상계층영상 복호화기(160)라고 할 수 있다.
도 2a 내지 도 2b는 기본계층영상과 향상계층영상의 구성의 일실시예를 도시한 도면이다.
도 2a를 참조하면, 좌측시야영상인 기본계층영상은 MPEG-2 또는 MPEG-4에서의 영상 부호화에서와 동일하게 인트라 픽처(Intra picture, I 픽처라고도 한다. 212), 예측 픽처(Predictive picture, P 픽처라고도 한다, 218) 및 양방향 예측 픽처(Bi-directional picture, B 픽처라고도 한다, 214, 216)를 가지고 부호화를 수행한다. 반면, 우측시야영상인 향상계층영상은, 좌측시야영상인 I 픽처(212)를 참조하여 부호화하는 P 픽처(222)와, 우측시야영상의 P 픽처(222)와 좌측시야영상의 B 픽처(214)를 참조하여 부호화하는 B 픽처(224), 우측시야영상의 B 픽처(224)와 좌측시야영상의 B 픽처(216)를 참조하여 부호화하는 B 픽처(226) 및 우측시야영상의 B 픽처(226)와 좌측시야영상의 P 픽처(218)를 참조하여 부호화하는 B 픽처(228) 등으로 구성된다. 즉, 기본계층영상을 참조함하여 양안차를 부호화하는 것이다. 이때 화살표의 방향은 화살표가 가리키는 영상을 참조하여 현재 영상을 부호화한다는것을 의미한다. 향상계층영상을 어떤 픽처를 참조하도록 하는가는 여러가지 방법이 존재한다.
도 2b는 향상계층영상을 구성하는 다른 일실시예이다.
도 2b를 참조하면, 우측시야영상인 향상계층영상은 좌측시야영상인 B 픽처(232)를 참조하여 부호화하는 B 픽처(242)와, 우측시야영상의 B 픽처(242)와 좌측시야영상의 B 픽처(234)를 참조하여 부호화하는 B 픽처(244), 우측시야영상의 B 픽처(244)와 좌측시야영상의 P 픽처(236)를 참조하여 부호화하는 B 픽처(246) 등으로 구성될 수 있다.
도 3은 좌측시야영상과 우측시야영상을 데시메이션(decimation)하여 하나의 영상을 만들고 이를 인터폴레이션(interpolation)하여 좌측시야영상과 우측시야영상으로 재구성하는 것을 도시한 도면이다.
도 3을 참조하면, 움직임 부호화 및 양안차(disparity) 부호화를 사용하는 MPEG-2 MP(Main Profile)에서 스테레오 비디오 부호화를 수행하는 것을 알 수 있다. 스테레오 비디오 부호화시에 좌측시야영상과 우측시야영상을 수평으로 각각 1/2로 데시메이션한 후에 대역폭(bandwidth)을 1/2로 줄여서 두 개의 영상을 합쳐 하나의 영상을 만들어 이를 전송한다. 그리고, 복호기에서는 이 영상을 수신하여 좌측시야영상 및 우측시야영상으로 나누고 각각을 2배로 인터폴레이션하여 원래 영상을 복원한다.
도 4는 좌측시야영상과 우측시야영상으로 구성된 데시메이션 영상이 움직임 보상예측되는 일예를 설명하는 도면이다.
도 4를 참조하면, 향상계층영상인 RI, RB, RP 영상은 기본계층영상 LI, LB, LP와 인접한 향상계층영상을 참조하여 부호화될 수 있음을 알 수 있다. 여기서 RI는 우측시야영상중 I 픽처를, RB는 우측시야영상중 B 픽처를, RP는 우측시야영상중 P 픽처를 의미하고, LI는 좌측시야영상중 I 픽처를, LB는 좌측시야영상중 B 픽처를, LP는 좌측시야영상중 P 픽처를 의미한다.
그러나 이러한 부호화 방법은 양안차(disparity) 정보가 효율적으로 압축되지 않고, 좌측시야영상과 우측시야영상의 화질이 항상 0.5 ~ 1.5 dB가 차이가 난다는 문제점이 있다. 또한 여러개의 카메라가 존재하여 영상 데이터를 입력받고자 하는 경우에는 어려움이 있다.
도 5a는 일렬로 위치하고 있는 카메라로부터의 복수개의 영상 데이터를 받아 부호화하는 것을 설명하기 위한 도면이다.
도 5a를 참조하면, 여러대의 카메라가 일차원적인 라인상에 일렬로 위치하고 있다. 본 발명에서는 i축과 j축으로 구성되는 2차원상에 카메라가 존재한다고 가정하되 우선적으로 일차원적으로 카메라가 존재하는 경우를 설명하기 위하여 i=0인 경우를 예를 들어 설명하고 있다. i가 0이 아닌 경우는 이차원적으로 복수개의 카메라가 존재하는 경우로서, 도 7을 참조하여 후술한다.
도 5b는 장면의 전환에 따라 복수개의 카메라가 잡은 영상을 시간에 따라 도시한 도면이다.
카메라가 잡은 영상을 f(i, j, t)라고 한다. 이 때 (i, j)는 카메라의 위치이고, 도 5a 및 도 5b에서 카메라는 일차원적으로 일렬로 존재하므로 i=0인 경우이다, t는 시간을 의미한다. 예를 들어 f(0, 0, 0)은 맨처음 시간에 중심위치의 카메라가 잡은 영상이다. 카메라가 잡은 영상들을 시간축상에 나열하면 인접 카메라로부터의 다음시간 영상과의 각도 θ가 존재한다. 이 θ 정보도 부호화하는데 사용된다.
도 6a 내지 도 6b는 본 발명에 따른 3차원 영상의 부호화의 일예를 설명하기 위한 도면이다.
도 6a를 참조하면, 제1방향에서 볼 때 중앙위치 (0, 0, t)에 존재하는 카메라로부터의 영상들 f(0, 0, 0), f(0, 0, 1), f(0, 0, 2), f(0, 0, 3), f(0, 0, 4) 등은 기본계층영상으로 부호화됨을 알 수 있다. 즉, 바로 이전 시간의 기본계층영상만을 참조하여 시간적으로 예측되어 부호화된다. 이 때 최대 5장의 참조영상을 사용할 수 있다. 카메라 위치 (0, -1, t)상에서 영상들 f(0, -1, t)는 제1 향상계층영상으로 부호화된다. 부호화시에 기본계층영상에서 시간적으로 앞선 복호화된 영상들과 f(0, -1, t-1~t-5)의 참조영상으로부터 예측 부호화를 수행한다. 이때에도 기본계층으로 예측시에 최대 5장의 참조영상을 사용한다. 즉, 시간적-공간적으로 예측되어 부호화된다.
다른 계층의 영상도 동일하게 부호화된다. 즉, 카메라 위치 (0, -2, t)상에서 영상들 f(0, -2, t)는 제3 향상계층영상으로 부호화되며, 카메라 위치 (0, 1, t)상에서 영상들 f(0, 1, t)는 제2 향상계층영상으로 부호화되고, 카메라 위치 (0, 2, t)상에서 영상들 f(0, 2, t)는 제4 향상계층영상으로 부호화된다.
한편, 도 6b와 같이 향상계층영상을 부호화하는데 있어 인접한 기본계층영상을 참조하도록 할 수도 있다. 이렇게 하면 보다 많은 참조영상을 사용하므로 복원된 영상의 질이 높아진다.
도 7은 카메라가 2차원상으로 존재할 때 카메라의 위치와 부호화 순서를 도시한 도면이다.
도 7을 참조하면, 시간 t=0 일 때의 2차원적으로 위치하는 카메라의 위치를 도시한다. 카메라로부터의 영상을 부호화하는 순서는 중심에 존재하는 카메라로부터의 영상을 먼저 부호화한 후에, 중심에서 가장 가까운 거리(하나의 카메라가 떨어진 거리를 1로 한다)인 거리 = 1에 존재하는 카메라로부터의 영상 8개를 나선(spiral) 방향으로 순서대로 부호화한다. 그리고, 중심으로부터 거리가 2인 16개의 카메라로부터의 영상을 순서대로 부호화한다. 이를 순서대로 정리하면 다음과 같다.
① f(0,0) : distance=0
② f(1,0), f(1,1), f(0,1), f(-1,-1), f(-1,0), f(-1,-1), f(0,-1), f(1,-1) : distance=1
③ f(2,0), f(2,1), f(2,2),….. : distance=2
④ f(3,0), f(3,1),… : distance=3
상술한 순서대로 부호화하면 네크워크의 대역폭이 줄어들어 모든 카메라로부터의 영상을 부호화하여 전송할 수 없는 경우에 일부영상만을 전송하더라도, 바이리니어 인터폴레이션(bilinear interpolation)이나 싱크함수(sync function) 형태의 인터폴레이션 등을 이용하여 N 개의 카메라들로부터의 영상들을 공간적-시간적으로 예측(spatial-temporal prediction)하여 영상을 복원할 수 있다. 따라서, 부호화시에 (i, j, t) 위치에 존재하는 카메라로부터의 3차원 영상정보를 부호화하여 보내기만 하면, 네트워크의 대역폭에 따라서 일부 데이터만을 전송하더라도 복호화기에서 인터폴레이션하여 원래 영상을 복원할 수 있다.
본 발명의 부호화 방법을 f(0, 6, 6) 영상을 일예로 들어 설명하면 다음 순서와 같다.
① f(0,6,5), f(0,6,4), f(0,6,3), f(0,6,2), f(0,6,1) : j=6 상에서 시간적 예측(temporal prediction), 즉 시간적 움직임 예측/보상(motion estimation /compensation)을 수행한다. 이때 참조 픽처는 5개의 픽처로 정한다. 참조 픽처의 수는 상황에 따라 더 많을 수도, 더 적을 수도 있다.
② f(0,6,6)에서 중심 픽처를 향해 시간적-공간적 예측(temporal-spatial prediction)을 수행한다. 이때 미리 θ값을 정의하여 수행한다. 다시 말하면 θ값각도 내에 들어오는 모든 픽처에 대해 시간적-공간적 예측을 수행한다. 만일, θ=45도 라고 하면, 다음 순서대로 예측을 수행한다.
a) f(0,5,5), f(0,5,4), f(0,5,3), f(0,5,2), f(0,5,1)
b) f(0,4,4), f(0,4,3), f(0,4,2), f(0,4,1)
c) f(0,3,3), f(0,3,2), f(0,3,1)
d) f(0,2,2), f(0,2,1)
e) f(0,1,1)
즉, 위의 15개의 시간적-공간적 참조 픽처들에 대해 매크로 블록 단위의 움직임 예측 및 보상을 수행한다. 이미 미리 정의된 θ값에 따라 참조 픽처들이 결정된다.
③ 상술한 ① 및 ②의 시간적-공간적 예측 부호화중에서, 현재 부호화하는 매크로 블록에 대해 가장 유사한 매크로 블록을 참조 픽처에서 찾아 움직임 예측/보상(motion estimation/compensation) 및 잔차 변환 부호화(residual transform coding)를 수행한다.
복호화 방법은 상술한 방법에 의해 부호화된 영상을
한편, 전술한 3차원 영상 부호화 방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 3차원 영상 부호화 방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
전술한 바와 같이 본 발명에 따르면, 많은 수의 카메라를 사용하여 획득한 3차원 영상을 효율적으로 부호화 할 수 있으며, 영상의 화질도 우수한 효과가 있다.
도 1은 좌측시야영상(left view video)과 우측시야영상(right view video)을 이용하여 스테레오스코픽 비디오(steroscopic video)를 부호화하고 재생하는 것을 설명하는 도면,
도 2a 내지 도 2b는 기본계층영상과 향상계층영상의 구성의 일실시예를 도시한 도면,
도 3은 좌측시야영상과 우측시야영상을 데시메이션(decimation)하여 하나의 영상을 만들고 이를 인터폴레이션(interpolation)하여 좌측시야영상과 우측시야영상으로 재구성하는 것을 도시한 도면,
도 4는 좌측시야영상과 우측시야영상으로 구성된 데시메이션 영상이 움직임 보상예측되는 일예를 설명하는 도면,
도 5a는 일렬로 위치하고 있는 카메라로부터의 복수개의 영상 데이터를 받아 부호화하는 것을 설명하기 위한 도면,
도 5b는 장면의 전환에 따라 복수개의 카메라가 잡은 영상을 시간에 따라 도시한 도면,
도 6a 내지 도 6b는 본 발명에 따른 3차원 영상의 부호화의 일예를 설명하기 위한 도면,
도 7은 카메라가 2차원상으로 존재할 때 카메라의 위치와 부호화 순서를 도시한 도면이다.

Claims (10)

  1. (a) 복수개의 카메라가 일렬로 존재할 때, 가장 중앙에 위치한 카메라에서 잡은 영상은 바로 이전시간에 상기 카메라에서 잡은 영상만을 참조하여 시간적 예측을 수행하는 단계; 및
    (b) 그 외의 카메라에서 잡은 영상은 상기 이전시간의 영상과, 상기 카메라와 인접한 카메라에서 잡은 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  2. 제1항에 있어서, 상기 (b) 단계는
    그 외의 카메라에서 잡은 영상이 참조하는 상기 이전시간의 영상은, 소정의 참조픽처 개수만큼의 단계까지의 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  3. 제2항에 있어서,
    상기 소정의 참조픽처의 개수는 5인 것을 특징으로 하는 3차원 영상 부호화 방법.
  4. 제2항에 있어서, 상기 (b) 단계는
    상기 카메라와 인접한 카메라에서 잡은 현재시간의 영상들을 더 참조하여 시간적-공간적 예측을 수행하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  5. 제2항에 있어서, 상기 (b) 단계는
    상기 카메라와 인접한 카메라에서 잡은 이전시간의 영상과 현재 예측하고자하는 영상이 이루는 각도내에 드는 복수개의 모든 카메라로부터의 영상을 모두 참조하여 시간적-공간적 예측을 수행하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  6. (a) 이전시간의 영상과 소정의 각을 이루며, 현재 부호화하고자 하는 영상의 중앙방향으로 인접한 카메라에서 이전시간에 잡은 영상을 참조하여 소정의 참조픽처 개수만큼의 단계까지의 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계;
    (b) 상기 소정의 각 방향으로 다음으로 인접한 영상을 참조하여 상기 소정의 참조픽처 개수만큼의 단계까지 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계; 및
    (c) 상기 소정의 참조픽처 개수만큼의 단계에 이를 때까지 모든 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  7. 제6항에 있어서, 상기 소정의 각은
    인접한 카메라의 간격에 따라서 달라지는 것을 특징으로 하는 3차원 영상 부호화 방법.
  8. 이차원적으로 배열되어 있는 카메라에서 잡은 복수개의 영상을 3차원 영상으로 부호화하는 방법에 있어서,
    (a) 이차원 카메라 배열중 가장 중심에 위치하는 카메라에서 잡은 영상을 부호화하는 단계; 및
    (b) 상기 중심 카메라로부터의 거리가 가까운 순서대로 위치하는 카메라에서 잡은 영상을 부호화하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  9. 제8항에 있어서, 상기 (b) 단계는
    동일한 거리에 위치하는 카메라가 복수개 존재하는 경우에는 나선방향에 따라서 순차적으로 부호화를 수행하는 것을 특징으로 하는 3차원 영상 부호화 방법.
  10. (a) 복수개의 카메라가 일렬로 존재할 때, 가장 중앙에 위치한 카메라에서 잡은 영상은 바로 이전시간에 상기 카메라에서 잡은 영상만을 참조하여 시간적 예측을 수행하는 단계; 및
    (b) 그 외의 카메라에서 잡은 영상은 상기 이전시간의 영상과, 상기 카메라와 인접한 카메라에서 잡은 이전시간의 영상들을 참조하여 시간적-공간적 예측을 수행하는 단계를 포함하는 것을 특징으로 하는 3차원 영상 부호화 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020040004423A 2004-01-20 2004-01-20 영상의 3차원 부호화 방법 KR100987775B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020040004423A KR100987775B1 (ko) 2004-01-20 2004-01-20 영상의 3차원 부호화 방법
EP05721827A EP1707010A4 (en) 2004-01-20 2005-01-20 METHOD, MEDIUM AND APPARATUS FOR CODING AND / OR DECODING INTO 3 DIMENSIONS OF VIDEOS
PCT/KR2005/000182 WO2005069630A1 (en) 2004-01-20 2005-01-20 Method, medium, and apparatus for 3-dimensional encoding and/or decoding of video
CN200580000210A CN100584004C (zh) 2004-01-20 2005-01-20 用于视频的三维编码和/或解码的方法及装置
US11/038,477 US7817181B2 (en) 2004-01-20 2005-01-21 Method, medium, and apparatus for 3-dimensional encoding and/or decoding of video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040004423A KR100987775B1 (ko) 2004-01-20 2004-01-20 영상의 3차원 부호화 방법

Publications (2)

Publication Number Publication Date
KR20050076441A true KR20050076441A (ko) 2005-07-26
KR100987775B1 KR100987775B1 (ko) 2010-10-13

Family

ID=36751988

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040004423A KR100987775B1 (ko) 2004-01-20 2004-01-20 영상의 3차원 부호화 방법

Country Status (5)

Country Link
US (1) US7817181B2 (ko)
EP (1) EP1707010A4 (ko)
KR (1) KR100987775B1 (ko)
CN (1) CN100584004C (ko)
WO (1) WO2005069630A1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100584603B1 (ko) * 2004-08-03 2006-05-30 학교법인 대양학원 다시점 영상의 다이렉트 모드 움직임 예측 방법 및 장치
KR100815486B1 (ko) * 2006-08-18 2008-03-20 광주과학기술원 다시점 비디오의 인코더, 인코딩하는 방법, 및 이를 이용한 저장 매체
KR100893930B1 (ko) * 2006-12-04 2009-04-21 한국전자통신연구원 다시점 비디오 부호화를 위한 시간 직접예측 방법
WO2010090462A3 (en) * 2009-02-04 2010-11-04 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view image
US8644386B2 (en) 2005-09-22 2014-02-04 Samsung Electronics Co., Ltd. Method of estimating disparity vector, and method and apparatus for encoding and decoding multi-view moving picture using the disparity vector estimation method

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100732961B1 (ko) * 2005-04-01 2007-06-27 경희대학교 산학협력단 다시점 영상의 스케일러블 부호화, 복호화 방법 및 장치
WO2007047736A2 (en) * 2005-10-19 2007-04-26 Thomson Licensing Multi-view video coding using scalable video coding
EP1972141A4 (en) * 2006-01-07 2017-04-05 Electronics and Telecommunications Research Institute Method and apparatus for inter-viewing reference in multi-viewpoint video coding
KR101276847B1 (ko) 2006-01-12 2013-06-18 엘지전자 주식회사 다시점 비디오의 처리
KR100943912B1 (ko) * 2006-01-12 2010-03-03 엘지전자 주식회사 다시점 비디오의 처리 방법 및 장치
ZA200807142B (en) * 2006-03-29 2010-02-24 Thomson Licensing Multi view video coding method and device
US7643748B2 (en) * 2006-06-02 2010-01-05 James Cameron Platform for stereoscopic image acquisition
US20090290643A1 (en) * 2006-07-12 2009-11-26 Jeong Hyu Yang Method and apparatus for processing a signal
MY162861A (en) 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
WO2010147289A1 (en) * 2009-06-16 2010-12-23 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3d video processing method thereof
WO2011005624A1 (en) * 2009-07-04 2011-01-13 Dolby Laboratories Licensing Corporation Encoding and decoding architectures for format compatible 3d video delivery
US8457155B2 (en) * 2009-09-11 2013-06-04 Nokia Corporation Encoding and decoding a multi-view video signal
US8428122B2 (en) * 2009-09-16 2013-04-23 Broadcom Corporation Method and system for frame buffer compression and memory resource reduction for 3D video
US8665968B2 (en) * 2009-09-30 2014-03-04 Broadcom Corporation Method and system for 3D video coding using SVC spatial scalability
JP2011087195A (ja) * 2009-10-16 2011-04-28 Sony Corp 画像処理装置および画像処理方法
US9014276B2 (en) * 2009-12-04 2015-04-21 Broadcom Corporation Method and system for 3D video coding using SVC temporal and spatial scalabilities
EP2355510A1 (en) * 2009-12-21 2011-08-10 Alcatel Lucent Method and arrangement for video coding
EP3145189B1 (en) * 2010-01-06 2019-06-19 Dolby Laboratories Licensing Corporation Complexity-adaptive scalable decoding and streaming for multi-layered video systems
BR112012031218B1 (pt) * 2010-06-09 2021-11-23 Samsung Electronics Co., Ltd. Método de fornecer um serviço de fluxo contínuo de multimídia por intermédio de uma rede, método de receber um serviço de fluxo contínuo para receber multimídia por intermédio de uma rede, equipamento para fornecer um serviço de fluxo contínuo de multimídia por intermédio de uma rede, equipamento para receber um serviço de fluxo contínuo para receber multimídia por intermédio de uma rede, e meio de gravação legível por computador
CN103262532B (zh) 2010-07-19 2018-03-09 杜比实验室特许公司 用于经采样复用的图像和视频数据的增强方法
US20120075436A1 (en) * 2010-09-24 2012-03-29 Qualcomm Incorporated Coding stereo video data
WO2012047496A1 (en) * 2010-10-08 2012-04-12 Dolby Laboratories Licensing Corporation Scalable frame compatible multiview encoding and decoding methods
US10085017B2 (en) * 2012-11-29 2018-09-25 Advanced Micro Devices, Inc. Bandwidth saving architecture for scalable video coding spatial mode
KR101457888B1 (ko) * 2013-05-24 2014-11-04 주식회사 이에스엠연구소 기준점 보정을 이용한 3차원 영상 생성방법
US9998663B1 (en) 2015-01-07 2018-06-12 Car360 Inc. Surround image capture and processing
US10284794B1 (en) 2015-01-07 2019-05-07 Car360 Inc. Three-dimensional stabilized 360-degree composite image capture
KR101729164B1 (ko) * 2015-09-03 2017-04-24 주식회사 쓰리디지뷰아시아 멀티 구 교정장치를 이용한 멀티 카메라 시스템의 이미지 보정 방법
KR101729165B1 (ko) 2015-09-03 2017-04-21 주식회사 쓰리디지뷰아시아 타임 슬라이스 영상용 오차교정 유닛
US10623791B2 (en) 2018-06-01 2020-04-14 At&T Intellectual Property I, L.P. Field of view prediction in live panoramic video streaming
US10812774B2 (en) 2018-06-06 2020-10-20 At&T Intellectual Property I, L.P. Methods and devices for adapting the rate of video content streaming
US10616621B2 (en) 2018-06-29 2020-04-07 At&T Intellectual Property I, L.P. Methods and devices for determining multipath routing for panoramic video content
US10708494B2 (en) 2018-08-13 2020-07-07 At&T Intellectual Property I, L.P. Methods, systems and devices for adjusting panoramic video content
US11019361B2 (en) 2018-08-13 2021-05-25 At&T Intellectual Property I, L.P. Methods, systems and devices for adjusting panoramic view of a camera for capturing video content
DE102020004261A1 (de) * 2019-08-13 2021-02-18 Sew-Eurodrive Gmbh & Co Kg System, insbesondere Anlage, mit entlang eines Codierbereichs verfahrbarem Mobilteil und Verfahren zum Betreiben eines solchen Systems
US11748844B2 (en) 2020-01-08 2023-09-05 Carvana, LLC Systems and methods for generating a virtual display of an item

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06269025A (ja) 1993-03-16 1994-09-22 Fujitsu Ltd 多眼式立体映像の符号化方式
JPH0750856A (ja) 1993-08-06 1995-02-21 Fujitsu Ltd 多眼式立体映像のレベル補正回路
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
US5612735A (en) * 1995-05-26 1997-03-18 Luncent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing two disparity estimates
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
JPH09261653A (ja) * 1996-03-18 1997-10-03 Sharp Corp 多視点画像符号化装置
US5652616A (en) * 1996-08-06 1997-07-29 General Instrument Corporation Of Delaware Optimal disparity estimation for stereoscopic video coding
JP3931392B2 (ja) * 1997-08-25 2007-06-13 ソニー株式会社 立体画像用ビデオ信号生成装置、立体画像用ビデオ信号送出装置および立体画像用ビデオ信号受信装置
JP2001016609A (ja) 1999-06-05 2001-01-19 Soft Foo Deii:Kk Ｍｐｅｇデータを用いた立体映像生成装置及び方法
JP2001061164A (ja) 1999-08-19 2001-03-06 Toshiba Corp 立体映像信号伝送方法
US6567081B1 (en) * 2000-01-21 2003-05-20 Microsoft Corporation Methods and arrangements for compressing image-based rendering (IBR) data using alignment and 3D wavelet transform techniques
KR100375708B1 (ko) 2000-10-28 2003-03-15 전자부품연구원 3차원 입체영상을 위한 다시점 비디오 시스템 및영상제조방법
KR200232954Y1 (ko) 2001-03-16 2001-10-26 김영종 식탁을 구비한 냉장고
CN102025991B (zh) * 2001-09-14 2017-12-29 株式会社Ntt都科摩 编码方法、译码方法、编码装置、译码装置和图像处理系统
KR100424401B1 (ko) 2001-11-02 2004-03-24 전자부품연구원 검색기능을 포함한 3차원 입체영상을 위한 다시점영상통신 시스템
KR100481732B1 (ko) 2002-04-20 2005-04-11 전자부품연구원 다 시점 동영상 부호화 장치
KR100523930B1 (ko) * 2003-01-13 2005-10-26 전자부품연구원 다시점 영상의 압축/복원장치
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US7333544B2 (en) * 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
KR200337140Y1 (ko) 2003-10-10 2004-01-03 엘 앤드 케이 프리시젼 테크놀러지 컴파니 리미티드 기판-기판 커넥터
KR200383285Y1 (ko) 2004-12-01 2005-05-03 주식회사 덕흥물산 브레지어의 와이어
US7468745B2 (en) * 2004-12-17 2008-12-23 Mitsubishi Electric Research Laboratories, Inc. Multiview video decomposition and encoding

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100584603B1 (ko) * 2004-08-03 2006-05-30 학교법인 대양학원 다시점 영상의 다이렉트 모드 움직임 예측 방법 및 장치
US8644386B2 (en) 2005-09-22 2014-02-04 Samsung Electronics Co., Ltd. Method of estimating disparity vector, and method and apparatus for encoding and decoding multi-view moving picture using the disparity vector estimation method
KR100815486B1 (ko) * 2006-08-18 2008-03-20 광주과학기술원 다시점 비디오의 인코더, 인코딩하는 방법, 및 이를 이용한 저장 매체
KR100893930B1 (ko) * 2006-12-04 2009-04-21 한국전자통신연구원 다시점 비디오 부호화를 위한 시간 직접예측 방법
WO2010090462A3 (en) * 2009-02-04 2010-11-04 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view image
CN102308583B (zh) * 2009-02-04 2014-04-23 三星电子株式会社 对多视角图像进行编码和解码的设备和方法
US8798356B2 (en) 2009-02-04 2014-08-05 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view image

Also Published As

Publication number Publication date
US7817181B2 (en) 2010-10-19
KR100987775B1 (ko) 2010-10-13
CN1771734A (zh) 2006-05-10
US20050185712A1 (en) 2005-08-25
EP1707010A4 (en) 2011-05-18
WO2005069630A1 (en) 2005-07-28
CN100584004C (zh) 2010-01-20
EP1707010A1 (en) 2006-10-04

Similar Documents

Publication Publication Date Title
KR100987775B1 (ko) 영상의 3차원 부호화 방법
KR100760258B1 (ko) 범용적 다시점 동영상 부호화/복호화 장치 및 방법
KR100789753B1 (ko) 시간 및 시점간 참조영상 버퍼를 활용한 예측부호화/복호화장치 및 그 방법
KR100728009B1 (ko) 다시점 동영상을 부호화하는 방법 및 장치
KR100919885B1 (ko) 다시점 비디오의 스케일러블 코딩 및 디코딩 방법과, 코딩및 디코딩 장치
US8644386B2 (en) Method of estimating disparity vector, and method and apparatus for encoding and decoding multi-view moving picture using the disparity vector estimation method
KR100667830B1 (ko) 다시점 동영상을 부호화하는 방법 및 장치
JP5059766B2 (ja) 視差ベクトルの予測方法、その方法を利用して多視点動画を符号化及び復号化する方法及び装置
Ho et al. Overview of multi-view video coding
KR101227601B1 (ko) 시차 벡터 예측 방법, 그 방법을 이용하여 다시점 동영상을부호화 및 복호화하는 방법 및 장치
CN101243692B (zh) 对多视角视频进行编码的方法和设备
KR20070092566A (ko) 균일한 화질을 제공하는 다시점 영상 부호화 및 복호화방법 및 장치
KR101386651B1 (ko) 다시점 비디오 인코딩 및 디코딩 방법 및 이를 이용한 인코딩 및 디코딩 장치
EP3059969A1 (en) Method and apparatus for coding/decoding video comprising multi-view
KR20030001758A (ko) 움직임 및 시차 보상을 갖는 입체영상의 부호화/복호화장치 및 그 방법
KR20110118744A (ko) 쓰리디 티브이 동영상 부호화 방법, 복호화 방법
Faria et al. 3D Video Representation and Coding

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130927

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee