KR20050055163A - Video encoding/decoding apparatus and method using motion and disparity compensation for the asymmetric decimated left/right-view images - Google Patents

Video encoding/decoding apparatus and method using motion and disparity compensation for the asymmetric decimated left/right-view images Download PDF

Info

Publication number
KR20050055163A
KR20050055163A KR1020030088102A KR20030088102A KR20050055163A KR 20050055163 A KR20050055163 A KR 20050055163A KR 1020030088102 A KR1020030088102 A KR 1020030088102A KR 20030088102 A KR20030088102 A KR 20030088102A KR 20050055163 A KR20050055163 A KR 20050055163A
Authority
KR
South Korea
Prior art keywords
image
signal
frame
motion
video signal
Prior art date
Application number
KR1020030088102A
Other languages
Korean (ko)
Other versions
KR100587952B1 (en
Inventor
조숙희
윤국진
안충현
이수인
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020030088102A priority Critical patent/KR100587952B1/en
Publication of KR20050055163A publication Critical patent/KR20050055163A/en
Application granted granted Critical
Publication of KR100587952B1 publication Critical patent/KR100587952B1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

1. 청구범위에 기재된 발명이 속하는 기술분야1. TECHNICAL FIELD OF THE INVENTION

본 발명은 좌우영상의 비대칭적 축소에 의한 보상을 수행하는 영상 부호화/복호화 장치 및 그 방법에 관한 것임.The present invention relates to an image encoding / decoding apparatus and method for performing compensation by asymmetrical reduction of left and right images.

2. 발명이 해결하려고 하는 기술적 과제2. The technical problem to be solved by the invention

본 발명은 좌우 또는 상하로의 비대칭적 축소에 의하여 좌우영상을 Side-by-Side, Top-Down 의 형태로 된 2차원 표준 영상으로 전환한 다음, 이 전환된 영상에 대하여 부호화 및 복호화함으로써, 좌우영상에 대한 비대칭적 크기로의 전환에 의하여 동일 부호화율에서 좌우영상이 서로 다른 정도의 화질로 복원되도록 하기 위한 영상 부호화/복호화 장치 및 그 방법을 제공하고자 함.The present invention converts left and right images into two-dimensional standard images in the form of side-by-side and top-down by asymmetrical reduction of left and right or up and down, and then encodes and decodes the converted images. An object of the present invention is to provide an image encoding / decoding apparatus and method for reconstructing left and right images with different degrees of image quality at the same coding rate by switching to an asymmetric size for an image.

3. 발명의 해결 방법의 요지3. Summary of the Solution of the Invention

본 발명은, 영상 부호화 장치에 있어서, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 전처리수단; 및 상기 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 시간상 전후에 존재하는 프레임의 제2 영상을 이용하여 움직임 예측에 의해 움직임을 보상하여 부호화하기 위한 부호화수단을 포함함.The present invention provides a two-dimensional image encoding apparatus in which a stereoscopic image composed of left and right two frame images at the same time is reduced to an asymmetrical size so that the first and second images have different resolutions in a single frame. Preprocessing means for converting to a standard image; And motion-compensating the first image with respect to the first and second images having the image resolution of one frame reduced and converted to the asymmetric size, and the second image of the frame existing before and after the second image of the same frame in time. And encoding means for compensating and encoding the motion by the motion prediction by using the H.

4. 발명의 중요한 용도4. Important uses of the invention

본 발명은 스테레오스코픽 비디오 부호화/복호화 등에 이용됨.The present invention is used for stereoscopic video encoding / decoding.

Description

좌우영상의 비대칭적 크기로의 축소에 의한 움직임 및 변이 보상을 수행하는 영상 부호화/복호화 장치 및 그 방법{Video encoding/decoding apparatus and method using motion and disparity compensation for the asymmetric decimated left/right-view images} Video encoding / decoding apparatus and method using motion and disparity compensation for the asymmetric decimated left / right-view images}

본 발명은 영상 부호화/복호화 기술분야에 관한 것으로, 특히 동일 시간상에 좌우 2시점 영상의 프레임으로 구성되는 스테레오스코픽(Stereoscopic) 비디오에 대하여 수평 또는 수직방향의 비대칭적 크기로의 축소에 의하여 한 프레임내에 좌우영상이 포함되도록 전환한 다음, 전환된 영상에 대하여 부호화/복호화를 수행하되, 이때 움직임 및 변이 보상을 갖는 영상 부호화/복호화 장치 및 그 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to the field of image encoding / decoding, and more particularly, to stereoscopic video consisting of frames of left and right 2 viewpoint images at the same time, within a frame by reduction to an asymmetric size in the horizontal or vertical direction. The present invention relates to an image encoding / decoding apparatus for converting left and right images and then encoding / decoding the converted images, wherein the image encoding / decoding method has motion and disparity compensation.

종래의 스테레오스코픽 비디오의 부호화 방식에는 엠펙2(MPEG-2)에서 2차원 영상 부호화 기술을 확장한 MVP(Multi-View Profile)가 있다. 이 방식의 경우, 움직임 보상만을 이용하여 부호화가 이루어지는 기저층(Base Layer)의 부호화 구조가 MPEG-2 MP(Main Profile)와 동일하여, 기존의 2차원 비디오 디코더에서 기저층의 데이터만을 복원하면, 좌우영상중 한 쪽의 영상이 복원되고, 기존 2차원 비디오로서의 디스플레이가 가능하게 된다. 즉, 기존의 2차원 비디오 디코더 시스템과 호환성을 유지한다. 그리고, 상위층(Enhancement Layer) 영상의 부호화에서는 좌우영상 사이에 존재하는 상관정보를 이용하여 부호화한다. 이 방식은 기본적으로 시간 계위(Temporal Scalability)를 이용하여 부호화하는 방식으로 MPEG-4에서도 시간 계위(Temporal Scalability)를 이용한 스테레오스코픽 비디오 부호화에 대하여 정의하고 있다.Conventional stereoscopic video encoding schemes include MVP (Multi-View Profile), which is an extension of two-dimensional image coding technology from MPEG-2. In this method, the encoding structure of the base layer, which is encoded using only motion compensation, is the same as that of MPEG-2 MP (Main Profile). When only the base layer data is restored by the existing two-dimensional video decoder, the left and right images are The image of either side is reconstructed, and the display as the existing two-dimensional video becomes possible. That is, compatibility with existing two-dimensional video decoder system is maintained. In encoding of an enhancement layer image, encoding is performed using correlation information between left and right images. This method basically encodes using temporal scalability and defines stereoscopic video encoding using temporal scalability in MPEG-4.

이와 같은 기술사상의 일예로, US특허등록번호 제5,612,735호(1997. 3. 18 등록)의 "Digital 3D/stereoscopic video compression technique utilizing two disparity estimates"(이하, 제1 선행기술이라 함)가 있다. An example of such a technical concept is "Digital 3D / stereoscopic video compression technique utilizing two disparity estimates" of US Patent No. 5,612,735 (registered on March 18, 1997) (hereinafter referred to as "first prior art").

상기 제1 선행기술은 시간 계위(Temporal Scalability)를 이용하여 기저층(base Layer)에서는 움직임 보상 및 이산여현변환(DCT) 기반 알고리즘을 이용하여 왼쪽 눈에 대한 영상을 부호화하며, 상위층(Enhancement Layer)에서는 오른쪽 눈에 대한 영상 사이에서의 움직임 보상없이 기저층과 상위층 간의 변이(Disparity) 정보만을 이용하여 오른쪽 눈에 대한 영상을 부호화한다. 특히, 상기 제1 선행기술은 상위층에 해당하는 영상에 대해서는 움직임 정보는 이용하지 않고, 2개의 변위 정보만을 이용하여 부호화한다. The first prior art encodes an image of the left eye using a motion compensation and discrete cosine transform (DCT) based algorithm in a base layer using temporal scalability, and in an enhancement layer. The image of the right eye is encoded using only the disparity information between the base layer and the upper layer without motion compensation between the images of the right eye. In particular, the first prior art encodes the image corresponding to the upper layer by using only two displacement information without using motion information.

한편, 상기 기술사상의 다른 예로, US특허등록번호 제5,619,256호(1997. 4. 8 등록)의 "Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions"(이하, 제2 선행기술이라 함)이 있다. Meanwhile, as another example of the technical idea, "Digital 3D / stereoscopic video compression technique utilizing disparity and motion compensated predictions" of US Pat. No. 5,619,256 (registered Apr. 8, 1997) (hereinafter referred to as second prior art) There is this.

상기 제2 선행기술 역시 상기 제1 선행기술과 마찬가지로 시간 계위(Temporal Scalability)를 이용하여 기저층(Base Layer)에서는 움직임 보상 및 DCT 기반 알고리즘을 이용하여 왼쪽 눈에 대한 영상을 부호화하지만, 특히 상위층(Enhancement layer)에서는 오른쪽 눈에 대한 영상간의 움직임 보상 및 기저층과 상위층 간의 변이(Disparity) 정보를 이용하여 오른쪽 눈에 대한 영상의 부호화를 수행한다. 즉, 상기 제2 선행기술은 상기 제1 선행기술에 비춰 볼 때, 기저층 영상의 부호화는 동일하나, 상위층의 영상에 대해서는 움직임 및 변이 보상을 이용하여 부호화한다. Like the first prior art, the second prior art also encodes an image of the left eye using a motion compensation and a DCT-based algorithm in the base layer using temporal scalability, but in particular an enhancement layer. layer) encodes an image of the right eye by using motion compensation between the images of the right eye and disparity information between the base layer and the upper layer. That is, the second prior art encodes the base layer image in the light of the first prior art, but encodes the image of the upper layer using motion and disparity compensation.

하지만, 상기 제2 선행기술은 움직임 및 변이 정보를 이용하여 부호화함으로써 효율적인 압축효율을 달성하지만, 부호화 구조가 복잡하여 하드웨어 구현이 어려우며, 특히 고화질 TV(HDTV)의 영상을 처리할 경우, 상당량의 계산이 요구된다. However, although the second prior art achieves efficient compression efficiency by encoding using motion and disparity information, the encoding structure is complicated, so that hardware implementation is difficult, especially when processing an image of a high definition TV (HDTV). Is required.

따라서, 시간 계위(Temporal Scalability)를 이용하여 스테레오스코픽 비디오를 부호화하는 경우, 좌우영상간의 동기화 문제를 간단히 하기 위하여 기저층과 상위층에서 출력되는 각각의 부호화 스트림을 단일 스트림으로 전송하기 위한 별도의 다중화가 필요하다는 단점이 있다. 또한, 본 발명에 비춰 볼 때, 상기 제1 및 제2 선행기술은 좌우 원 영상의 크기에 대하여 부호화가 이루어지지만, 본 발명에서는 좌우 원 영상의 크기를 비대칭적 크기로 축소하여 하나의 영상크기로 변환한 후 부호화를 수행하며, 복원 후에 다시 영상의 크기로 확대 전환다. Therefore, when encoding stereoscopic video using temporal scalability, in order to simplify synchronization problem between left and right images, separate multiplexing is required to transmit each encoded stream output from the base layer and the upper layer into a single stream. The disadvantage is that. In addition, in the light of the present invention, the first and second prior arts are encoded with respect to the size of the left and right original image, but in the present invention, the size of the left and right original image is reduced to an asymmetrical size to one image size. After conversion, encoding is performed, and after restoration, the image is enlarged and converted to the size of the image.

한편, 스테레오스코픽 비디오에 있어서, 2차원 영상에 대한 기존의 MPEG 코덱을 그대로 사용하면서 좌우영상간의 간편한 동기화를 위하여, 좌우 각각의 영상을 1/2로 축소하여 좌우영상을 하나의 영상으로 전환하여 부호화함으로써 단일 부호화 스트림으로 출력하는 방식이 있다. Meanwhile, in stereoscopic video, in order to easily synchronize between left and right images while using an existing MPEG codec for a two-dimensional image, the left and right images are reduced to 1/2, and the left and right images are converted into one image and encoded. There is a method of outputting a single encoded stream.

이러한 기술사상(좌우영상을 1/2로 축소하여 2차원의 표준 영상으로 전환하는 방식)이 [Andrew Woods, Tom Docherty and Rolf Koch, "3D Video Standards Conversion", Stereoscopic Displays and Applications VII, California, Feb. 1996, Proceedings of the SPIE vol. 2653A]의 논문에 5가지 방식으로 제안되었다. This technical idea (the method of converting left and right images to 1/2 and converting them to standard two-dimensional images) is described by Andrew Woods, Tom Docherty and Rolf Koch, "3D Video Standards Conversion", Stereoscopic Displays and Applications VII, California, Feb. . 1996, Proceedings of the SPIE vol. 2653A] in five ways.

상기 기술사상의 일예로, US특허등록번호 제5,633,682호(1997. 5. 27 등록)의 "Stereoscopic coding system"(이하, 제3 선행기술이라 함)이 있다. As an example of the technical idea, there is a "Stereoscopic coding system" (hereinafter referred to as a third prior art) of US Patent No. 5,633,682 (registered May 27, 1997).

상기 제3 선행기술은 상기 논문에서 첫 번째 영상 전환 방식인, 왼쪽 눈에 대한 영상은 odd fields의 영상만을, 오른쪽 눈에 대한 영상은 even fields만을 선택하여 하나의 영상으로 전환하는 방식을 이용하여, 전환된 하나의 영상에 대하여 기존의 2차원 영상에 대한 MPEG 부호화를 수행한다. 이 방식은 스테레오스코픽 비디오의 디스플레이에 있어서 좌우영상이 교차로 디스플레이되는 Shuttering 방식을 고려한 방식으로, 좌우영상이 동시에 디스플레이되는 편광방식의 디스플레이에는 적합하지 않다. The third prior art is the first image conversion method in the paper, by using the method for switching the image for the left eye only one field of odd fields, the image for the right eye only one field by selecting, MPEG encoding is performed on an existing two-dimensional image of the converted one image. This method takes into account the shuttering method in which the left and right images are alternately displayed in the display of the stereoscopic video, and is not suitable for the polarization type display in which the left and right images are simultaneously displayed.

따라서, 좌우영상이 동시에 디스플레이되는 평광방식의 디스플레이에서는, 좌우영상을 하나의 영상으로 전환할 때, 특히 Side-by-Side와 Top-Down 포맷을 고려해야 한다. Therefore, in a flat display display in which left and right images are simultaneously displayed, in particular, side-by-side and top-down formats should be considered when converting left and right images into a single image.

비록, 종래의 스테레오스코픽 비디오 압축 및 전송에 있어서, 좌우영상을 각각 1/2 해상도가 되도록 좌우 또는 상하에 의해 대칭적으로 축소하여, 좌우영상을 Side-by-Side, Top-Down 등의 형태로 된 2차원 표준 영상으로 전환한 다음, 기존의 2차원 비디오에 대한 부호화 방식을 그대로 이용하여 스테레오스코픽 비디오 데이터를 부호화하는 방법이 있다. 이 경우, 기존의 2차원 비디오 부호화 시스템 및 방식을 그대로 이용할 수 있다는 장점이 있어 많이 사용되고 있기는 하지만, 이 방식은 좌우영상 사이에 존재하는 변이 정보를 이용하지 않고 부호화함으로써, 압축효율을 저하시키는 단점이 있다. However, in conventional stereoscopic video compression and transmission, the left and right images are symmetrically reduced by left and right or up and down so that the resolution is 1/2, respectively, and the left and right images are in the form of side-by-side, top-down, and the like. There is a method of encoding stereoscopic video data by converting to a standardized 2D standard image and then using an existing 2D video encoding method. In this case, the existing two-dimensional video encoding system and method has the advantage that it can be used as it is widely used, but this method is a disadvantage that reduces the compression efficiency by encoding without using the disparity information existing between the left and right images There is this.

또한, 일반적인 스테레오스코픽 비디오 부호화 방식에서는 좌우영상에 대한 부호화율을 각각 제어하고 있으며, 한쪽 영상이 2~3dB정도 좋은 화질을 달성하도록 부호화율을 설정한다. 이는 차이가 있는 화질의 영상이 양눈에 각각 입력될 때, 좋은 화질에 맞추어 인간이 영상을 인식한다는 인간의 특성을 고려한 것이다. 그러나, 대칭적 축소에 의해 전환된 2차원 표준 영상을 기존 2차원 비디오 부호화 시스템 또는 방식에 의해 부호화할 경우에는 좌우영상의 화질이 차이가 나도록 부호화 하는 것이 불가능하다.In addition, in the general stereoscopic video encoding scheme, the coding rates for the left and right images are controlled respectively, and the coding rates are set such that one image achieves a good picture quality of about 2 to 3 dB. This takes into account the human characteristics that humans perceive images according to good image quality when images with different image quality are input to both eyes. However, when the 2D standard image converted by symmetrical reduction is encoded by the existing 2D video encoding system or method, it is impossible to encode the image so that the image quality of the left and right images is different.

본 발명은, 상기와 같은 문제점을 해결하기 위하여 제안된 것으로, 좌우 또는 상하로의 비대칭적 크기로의 축소에 의하여 좌우영상을 Side-by-Side, Top-Down 의 형태로 된 2차원 표준 영상으로 전환한 다음, 이 전환된 영상에 대하여 부호화 및 복호화함으로써, 좌우영상에 대한 비대칭적 크기로의 전환에 의하여 동일 부호화율에서 좌우영상이 서로 다른 정도의 화질로 복원되도록 하기 위한 영상 부호화/복호화 장치 및 그 방법을 제공하는데 그 목적이 있다.The present invention has been proposed to solve the above problems, the left and right images by side-by-side, top-down in the form of a two-dimensional standard image by the reduction in the asymmetrical size to the left and right or up and down An image encoding / decoding apparatus for reconstructing the left and right images with different degrees of image quality at the same coding rate by converting and then encoding and decoding the converted images, and asymmetric sizes of the left and right images; The purpose is to provide a method.

또한, 본 발명은 좌우 또는 상하로의 비대칭적 크기로의 축소에 의하여 좌우영상을 Side-by-Side, Top-Down 의 형태로 된 2차원 표준 영상으로 전환한 다음, 이 전환된 영상에 대하여 부호화 및 복호화함으로써, 좌우영상에 대한 비대칭적 크기로의 전환에 의하여 동일 부호화율에서 좌우영상이 서로 다른 정도의 화질로 복원되도록 하되, 이때 움직임 정보 뿐만 아니라, 좌우영상 사이에 존재하는 변이 정보도 함께 고려하여 부호화함으로써, 부호화 효율을 향상시키기 위한 영상 부호화/복호화 장치 및 그 방법을 제공하는데 다른 목적이 있다. In addition, the present invention converts the left and right images into a two-dimensional standard image in the form of side-by-side and top-down by reducing the asymmetric size to the left and right or up and down, and then encoding the converted image. And by decoding, the left and right images are reconstructed with different degrees of image quality at the same coding rate by switching to asymmetrical sizes for the left and right images. In this case, not only motion information but also variation information existing between the left and right images is considered. It is another object of the present invention to provide an image encoding / decoding apparatus and method for improving encoding efficiency.

상기 목적을 달성하기 위한 본 발명은, 영상 부호화 장치에 있어서, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 전처리수단; 및 상기 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 시간상 전후에 존재하는 프레임의 제2 영상을 이용하여 움직임 예측에 의해 움직임을 보상하여 부호화하기 위한 부호화수단을 포함하여 이루어진 것을 특징으로 한다. The present invention for achieving the above object, in the image encoding apparatus, asymmetrical so that the first and the second image has a different sized resolution in a single frame of a stereoscopic image composed of left and right two-frame image at the same time Pre-processing means for reducing the size to convert to a two-dimensional standard image; And motion-compensating the first image with respect to the first and second images having the image resolution of one frame reduced and converted to the asymmetric size, and the second image of the frame existing before and after the second image of the same frame in time. And encoding means for compensating and encoding the motion by using the motion prediction.

또한, 본 발명은 영상 부호화 장치에 있어서, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 영상 전처리수단; 및 상기 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 상기 동일 프레임의 제1 영상을 이용하여 변이 예측에 의해 변이를 보상하여 부호화하기 위한 영상 부호화수단을 포함하여 이루어진 것을 특징으로 한다. In addition, in the image encoding apparatus, the stereoscopic image composed of the left and right two-frame images at the same time is reduced to an asymmetrical size so that the first and second images have different resolutions in a single frame, respectively. Image preprocessing means for converting to a dimensional standard image; And motion-compensating the first image with respect to the first and second images having the image resolution of one frame reduced and converted to the asymmetric size, and using the first image of the same frame for the second image of the same frame. And image encoding means for compensating and encoding the variation by the prediction of the variation.

상기 목적을 달성하기 위한 본 발명은, 영상 복호화 장치에 있어서, 비대칭적 크기로 축소 전환되어 한 프레임내에서 각각 다른 크기의 영상 해상도를 갖는 부호화된 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 시간상 전후에 존재하는 프레임의 제2 영상을 이용하여 움직임 예측에 의해 움직임을 보상하여 복호화하기 위한 영상 복호화수단; 및 보상된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하기 위한 복원수단을 포함하여 이루어진 것을 특징으로 한다. In accordance with another aspect of the present invention, an image decoding apparatus includes a first image with respect to encoded first and second images having a different sized image resolution within a frame by being reduced and converted into an asymmetrical size. Image decoding means for compensating for motion and compensating and decoding motion by motion prediction using a second image of a frame existing before and after in time in a second image of the same frame; And reconstruction means for reconstructing the compensated first and second images to the original resolution and reconstructing the image in the left and right two frames.

또한, 본 발명은 영상 복호화 장치에 있어서, 비대칭적 크기로 축소 전환되어 한 프레임내에서 각각 다른 크기의 영상 해상도를 갖는 부호화된 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 상기 동일 프레임의 제1 영상을 이용하여 변이 예측에 의해 변이를 보상하여 복호화하기 위한 위한 영상 복호화수단; 및 보상된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하기 위한 영상 복원수단을 포함하여 이루어진 것을 특징으로 한다. In addition, the present invention, in the image decoding apparatus, the motion compensation is compensated for the first image with respect to the encoded first and the second image having a different size of the image resolution in one frame reduced to the asymmetrical size, the same Image decoding means for compensating and decoding the second image of the frame by disparity prediction using the first image of the same frame; And image restoring means for restoring the compensated first and second images to the original resolution and restoring the image to the left and right two frames.

상기 목적을 달성하기 위한 본 발명은, 영상 부호화 장치에 적용되는 영상 부호화 방법있어서, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 제 1 단계; 동일 프레임내의 입력 제1 영상신호에 대하여, 이전 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 2 단계; 움직임 보상된 신호와 입력 제1 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 3 단계; 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 4 단계; 상기 동일 프레임내의 입력 제2 영상신호에 대하여, 이전 프레임의 복원 제2 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 5 단계; 움직임 보상된 신호와 입력 제2 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 6 단계; 및 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제2 영상신호를 복원하는 제 7 단계를 포함하여 이루어진 것을 특징으로 한다. According to an aspect of the present invention, a video encoding method applied to an image encoding apparatus includes a stereoscopic video composed of left and right two-frame video images at the same time, in which a first frame and a second video have different resolutions. A first step of converting the image into a two-dimensional standard image by reducing it to an asymmetrical size so as to have a; A second step of performing motion prediction and motion compensation on the input first video signal in the same frame using the reconstructed first video signal of the previous frame as a reference video signal; A third step of summing the motion compensated signal and the input first video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); A fourth step of inverse quantizing and inverse discrete cosine transform (IDCT) of the quantized signal and adding the motion compensated signal to restore the first image signal; A fifth step of performing motion prediction and motion compensation on the input second video signal in the same frame using the restored second video signal of the previous frame as a reference video signal; A sixth step of adding a motion compensated signal and an input second video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); And a seventh step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal and adding the motion compensated signal to restore the second image signal.

또한, 본 발명은 영상 부호화 장치에 적용되는 영상 부호화 방법에 있어서, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 제 1 단계; 동일 프레임내의 입력 제1 영상신호에 대하여, 이전 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 2 단계; 움직임 보상된 신호와 입력 제1 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 3 단계; 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 4 단계; 상기 동일 프레임내의 입력 제2 영상신호에 대하여, 동일 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 제1 영상의 해상도를 제2 영상과 동일하도록 전환한 다음, 이 영상을 토대로 제2 영상에 대한 변이 예측과 변이 보상을 수행하는 제 5 단계; 변이 보상된 신호와 입력 제2 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 6 단계; 및 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 변이 보상된 신호를 합하여 제2 영상신호를 복원하는 제 7 단계를 포함하여 이루어진 것을 특징으로 한다. In addition, the present invention is an image encoding method applied to an image encoding apparatus, asymmetrical so that the first and second images have a different resolution in a single frame of a stereoscopic image composed of left and right two-frame images at the same time. A first step of converting the image into a two-dimensional standard image by reducing the size to a small size; A second step of performing motion prediction and motion compensation on the input first video signal in the same frame using the reconstructed first video signal of the previous frame as a reference video signal; A third step of summing the motion compensated signal and the input first video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); A fourth step of inverse quantizing and inverse discrete cosine transform (IDCT) of the quantized signal and adding the motion compensated signal to restore the first image signal; With respect to the input second video signal in the same frame, the resolution of the first video is changed to be the same as the second video by using the restored first video signal of the same frame as the reference video signal, and then, based on this video, A fifth step of performing variation prediction and variation compensation for the data; A sixth step of extracting an error image signal that is a difference between the two signals by summing the disparity compensated signal and the input second image signal, and performing variable length coding on the extracted error image signal by using a discrete cosine transform (DCT); And a seventh step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal, and restoring the second image signal by adding the shift compensated signal.

상기 목적을 달성하기 위한 본 발명은, 영상 복호화 장치에 적용되는 영상 복호화 방법에 있어서, 부호화된 비트스트림을 입력받아, 양자화 및 이산여현변환(DCT)된 좌우영상 신호를 역양자화 및 역이산여현변환(IDCT)하는 제 1 단계; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제1 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 2 단계; 역이산여현변환(IDCT)된 제1 영상신호와 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제2 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 4 단계; 역이산여현변환(IDCT)된 제2 영상신호와 움직임 보상된 신호를 합하여 제2 영상신호를 복원하는 제 5 단계; 및 복원된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하는 제 6 단계를 포함하여 이루어진 것을 특징으로 한다. In accordance with an aspect of the present invention, an image decoding method applied to an image decoding apparatus includes receiving an encoded bitstream and performing inverse quantization and inverse discrete cosine transforming on a left and right video signal subjected to quantization and discrete cosine transform (DCT). First step (IDCT); A second step of receiving a motion vector carried in the bitstream and a reconstructed first video signal of a previous frame to obtain a motion compensated signal; A third step of reconstructing the first video signal by summing the inverse discrete cosine transformed (IDCT) first video signal and the motion compensated signal; A fourth step of receiving a motion vector carried in the bitstream and a reconstructed second video signal of a previous frame to obtain a motion compensated signal; A fifth step of reconstructing the second video signal by adding the inverse discrete cosine transformed (IDCT) second video signal and the motion compensated signal; And a sixth step of reconstructing the reconstructed first and second images to the original resolution and reconstructing the image to the left and right two frames.

또한, 본 발명은 영상복호화 장치에 적용되는 영상 복호화 방법에 있어서, 부호화된 비트스트림을 입력받아, 양자화 및 이산여현변환(DCT)된 좌우영상 신호를 역양자화 및 역이산여현변환(IDCT)하는 제 1 단계; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제1 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 2 단계; 역이산여현변환(IDCT)된 제1 영상신호와 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계; 상기 비트스트림에 실린 변위 벡터와 동일 프레임의 복원 제1 영상신호를 입력받아, 제1 영상의 해상도를 제2 영상 해상도와 동일하도록 전환한 다음, 변이 보상된 신호를 구하는 제 4 단계; 역이산여현변환(IDCT)된 제2 영상신호와 변이 보상된 신호를 합하여 제2 영상신호를 복원하는 제 5 단계; 및 복원된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하는 제 6 단계를 포함하여 이루어진 것을 특징으로 한다. In addition, the present invention provides a video decoding method applied to an image decoding apparatus, comprising: receiving an encoded bitstream and performing inverse quantization and inverse discrete cosine transform (IDCT) on a left and right video signal subjected to quantization and discrete cosine transform (DCT); Stage 1; A second step of receiving a motion vector carried in the bitstream and a reconstructed first video signal of a previous frame to obtain a motion compensated signal; A third step of reconstructing the first video signal by summing the inverse discrete cosine transformed (IDCT) first video signal and the motion compensated signal; A fourth step of receiving a reconstructed first image signal of the same frame as the displacement vector carried in the bitstream, converting the resolution of the first image to be the same as the second image resolution, and then obtaining a disparity compensated signal; A fifth step of restoring the second video signal by adding the inverse discrete cosine transformed (IDCT) second video signal and the shift compensation signal; And a sixth step of reconstructing the reconstructed first and second images to the original resolution and reconstructing the image to the left and right two frames.

본 발명은 2차원 비디오 부호화에 보편적으로 사용되고 움직임 보상을 갖는 DCT 부호화 기술을 토대로 하여, 좌우영상을 비대칭 크기로 축소한 다음, 움직임 및 변이 보상을 수행하는 스테레오스코픽 비디오 부호화 및 복호화 기술에 관한 것이다. The present invention relates to a stereoscopic video encoding and decoding technique for reducing left and right images to an asymmetric size and then performing motion and disparity compensation based on a DCT encoding technique commonly used for two-dimensional video encoding and having motion compensation.

이를 위해, 본 발명은 좌우영상을 갖는 스테레오스코픽 비디오에 대하여, 좌우 또는 상하로의 비대칭적 크기로의 축소에 의하여 좌우영상을 Side-by-Side, Top-Down 의 형태로 된 2차원 표준 영상으로 전환한 다음, 이 전환된 영상에 대하여 DCT 부호화 및 복호화를 수행한 후, 축소된 영상을 원 영상의 크기로 확대한다. To this end, the present invention is a stereoscopic video having a left and right image, the left and right images as a two-dimensional standard image in the form of Side-by-Side, Top-Down by reducing the asymmetric size to the left and right or up and down After the conversion, DCT encoding and decoding are performed on the converted image, and then the reduced image is enlarged to the size of the original image.

즉, 본 발명에서는 부호화 계산량을 줄이기 위하여 원 좌우영상의 크기를 수평 또는 수직 방향으로 비대칭적 크기로 축소하여, 하나의 영상으로 변환(한 프레임 영상으로 전환)하여 부호화를 수행하며, 복원(복호화)후에 축소된 영상을 원 영상의 크기로 확대 변환한다. 이때, 부호화시 시간 계위(Temporal Scalability)를 이용하여, 왼쪽 눈에 대한 이미지의 부호화에는 움직임 보상 및 DCT 기반 알고리즘을 이용하며, 오른쪽 눈에 대한 이미지의 부호화에서는 움직임과 변이(Disparity) 보상을 이용하여 DCT 기반 부호화를 수행한다. That is, in the present invention, in order to reduce the amount of encoding calculation, the original left and right images are reduced to an asymmetric size in the horizontal or vertical direction, converted into one image (converted to one frame image), and the encoding is performed, and then restored (decoded). Then, the reduced image is enlarged and converted to the size of the original image. In this case, by using temporal scalability, the motion compensation and DCT based algorithms are used to encode the image of the left eye, and the motion and disparity compensation is used to encode the image of the right eye. DCT-based encoding is performed.

따라서, 본 발명은 좌우영상을 비대칭적 크기로 축소하여 Side-by-Side, Top-Down의 형태로 된 2차원 표준 영상으로 전환한 다음 부호화하여, 동일 부호화율에서 좌우영상이 서로 다른 정도의 화질로 복원되도록 함으로써, 실제 인간이 입체영상을 감상할 때에는 보다 우수한 화질을 느낄 수 있다. 또한, 부호화 과정에서 움직임 정보 뿐만 아니라, 좌우영상사이에 존재하는 변이 정보도 함께 고려함으로써, 부호화 효율을 보다 향상시킬 수 있다. 특히, 본 발명은 좌우영상이 동시에 디스플레이되는 편광방식의 디스플레이에 더욱 효율적이다. Therefore, in the present invention, the left and right images are reduced to an asymmetrical size and converted into a two-dimensional standard image in the form of side-by-side and top-down, and then encoded. By reconstructed as, the real human can feel a better image quality when watching a stereoscopic image. In addition, the coding efficiency can be further improved by considering not only motion information but also variation information existing between left and right images in the encoding process. In particular, the present invention is more efficient for a polarization type display in which left and right images are simultaneously displayed.

상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다.The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1 은 본 발명에 따른 영상 부호화/복호화 장치의 일실시예 구성도이다.1 is a block diagram of an embodiment of an image encoding / decoding apparatus according to the present invention.

도 1에 도시된 바와 같이, 본 발명에 따른 좌우영상의 비대칭적 크기로의 축소에 의한 움직임 및 변이 보상을 수행하는 영상 부호화 장치(즉, 스테레오스코픽 비디오의 부호화 장치)는, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 좌우영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 부호화 전처리부(10)와, 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 좌우영상에 대하여, 좌(우)영상을 움직임 보상하고, 동일 프레임의 우(좌)영상을 시간상 전후에 존재하는 프레임의 우(좌) 영상을 이용하여 움직임 예측에 의해 움직임을 보상하거나, 동일 프레임의 우(좌)영상을 동일 프레임의 좌(우)영상을 이용하여 변이 예측에 의해 변이를 보상하여 부호화하기 위한 부호화(20)를 포함한다. As shown in FIG. 1, an image encoding apparatus (that is, an encoding apparatus of stereoscopic video) that performs motion and disparity compensation by reduction of the left and right images to an asymmetric size according to the present invention is 2 left and right on the same time. Encoding pre-processing unit 10 for converting a stereoscopic image composed of frame images into a two-dimensional standard image by reducing the asymmetric size so that the left and right images have different resolutions in a single frame The left and right images are motion compensated for the left and right images having the image resolution of one frame, and the right (left) image of the same frame is used for motion prediction using the right (left) image of a frame existing before and after time. Compensate the motion by using the left or right image of the same frame or compensate for the variation by the prediction of the variation using the left (right) image of the same frame. Encoding 20 for encoding by encoding.

그리고, 본 발명에 따른 좌우영상의 비대칭적 크기로의 축소에 의한 움직임 및 변이 보상을 수행하는 영상 복호화 장치(즉, 스테레오스코픽 비디오의 부호화 장치)는, 비대칭적 크기로 축소 전환되어 한 프레임내에서 각각 다른 크기의 영상 해상도를 갖는 부호화된 좌우영상에 대하여, 좌(우)영상을 움직임 보상하고, 동일 프레임의 우(좌)영상을 시간상 전후에 존재하는 프레임의 우(좌) 영상을 이용하여 움직임 예측에 의해 움직임을 보상하여 복호화하거나, 동일 프레임의 우(좌)영상을 상기 동일 프레임의 좌(우)영상을 이용하여 변이 예측에 의해 변이를 보상하여 복호화하기 위한 위한 복호화부(20)와, 보상된 좌우영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하기 위한 복호화 후처리부(30)를 포함한다. In addition, an image decoding apparatus (ie, an encoding apparatus of stereoscopic video) that performs motion and disparity compensation by reduction of left and right images to an asymmetric size according to the present invention is reduced and converted to an asymmetric size within a frame. The left and right images are motion compensated for the encoded left and right images having different image resolutions, and the right and left images of the same frame are moved by using the right and left images of frames existing before and after time. A decoder 20 for compensating and decoding motion by prediction or compensating and decoding a shift by right prediction using a left (right) image of the same frame using the left (right) image of the same frame; And a post-decoding processor 30 for reconstructing the compensated left and right images to the original resolution and reconstructing them to the left and right two frames.

부호화 전처리부(10)는 좌우 양안용의 2시점 영상을 비대칭적 크기로 축소하여 2차원 표준영상의 단일영상으로 전환한다. 즉, 부호화 전처리부(10)는 도 2a에 도시된 바와 같이 수평 방향으로 비대칭적 크기로 축소(decimation)하여 Side-by-Side 형태의 단일영상으로 전환하거나, 도 2b에 도시된 바와 같이 수직 방향으로 비대칭적 크기로 축소하여 Top-Down 형태의 단일영상으로 전환한다. The encoding preprocessor 10 converts the two-view images for left and right binoculars into an asymmetric size and converts them into a single image of the two-dimensional standard image. That is, the encoding preprocessor 10 converts the image to a single image having a side-by-side form by deciding it to an asymmetrical size in the horizontal direction as shown in FIG. 2A, or as shown in FIG. 2B. The image is reduced to an asymmetrical size and converted into a single top-down image.

예를 들면, 도 2a에 도시된 바와 같이 좌(우) 영상의 세로 크기(V)는 그대로 두고, 가로 크기(H)를 수평방향으로만 1/3 축소하고, 우(좌) 영상의 가로 크기(H)를 수평방향으로만 2/3 축소하여, 좌(우) 영상은 결국 가로방향으로만 1/3 축소된 "(2H/3)×V"가 되고, 우(좌) 영상은 결국 가로방향으로만 2/3 축소된 "(1H/3)×V"가 된다. For example, as shown in FIG. 2A, the vertical size V of the left (right) image is left unchanged, and the horizontal size (H) is reduced by 1/3 only in the horizontal direction, and the horizontal size of the right (left) image is shown. (H) is reduced by 2/3 only in the horizontal direction, so the left (right) image eventually becomes "(2H / 3) x V" reduced by 1/3 in the horizontal direction only, and the right (left) image is eventually horizontal It becomes "(1H / 3) x V" reduced by 2/3 only in the direction.

또한, 도 2b에 도시된 바와 같이 좌(우) 영상의 가로 크기(H)는 그대로 두고, 세로 크기(V)를 수직방향으로만 1/3 축소하고, 우(좌) 영상의 세로 크기(V)를 수직방향으로만 2/3 축소하여, 좌(우) 영상은 결국 세로방향으로만 1/3 축소된 "H×(2V/3)"가 되고, 우(좌) 영상은 결국 세로방향으로만 2/3 축소된 "H×(1V/3)"가 된다. In addition, as shown in FIG. 2B, the horizontal size (H) of the left (right) image is left unchanged, and the vertical size (V) is reduced by 1/3 only in the vertical direction, and the vertical size (V) of the right (left) image is reduced. ) Is reduced by 2/3 only in the vertical direction, and the left (right) image eventually becomes "H × (2V / 3)" which is reduced by 1/3 only in the vertical direction, and the right (left) image eventually becomes vertical Only 2/3 is reduced to “H × (1V / 3)”.

부호화/복호화부(20)는 도 3에 도시된 바와 같이 움직임 및 변이 보상을 갖는 스테레오 비디오 부호화/복호화 장치로서, 본 발명에서는 좌우영상이 한 프레임내에 함께 존재하는 단일영상에서 먼저 좌영상을 처리한 다음, 우영상을 처리한다. 좌영상은 움직임 정보만을 이용하여 부호화/복호화하며, 우영상은 움직임 정보 혹은 변이 정보를 이용하여 부호화/복호화한다. 하지만, 좌우영상에서, 우영상을 먼저 처리한 다음, 좌영상을 처리할 수도 있음은 자명하다. Encoder / decoder 20 is a stereo video encoding / decoding apparatus having motion and disparity compensation as shown in FIG. 3. In the present invention, a left image is processed first in a single image in which left and right images exist together in one frame. Next, the right image is processed. The left image is encoded / decoded using only motion information, and the right image is encoded / decoded using motion information or disparity information. However, in the left and right images, the right image may be processed first and then the left image may be processed.

설명의 편의를 위하여, DCT 부호화부(31)에서의 부호화 과정을 도 3 및 도 6을 참조하여 살펴보기로 한다. For convenience of explanation, the encoding process in the DCT encoder 31 will be described with reference to FIGS. 3 and 6.

상기에서, 부호화 전처리부(10)를 통해 좌우 양안용의 2시점 영상을 비대칭적 크기로 축소하여 2차원 표준영상의 단일영상으로 전환함을 시사한 바 있다(601). 즉, 부호화 전처리부(10)에서는 도 2a에 도시된 바와 같이 수평 방향으로 비대칭적 크기로 축소(decimation)하여 Side-by-Side 형태의 단일영상으로 전환하거나, 도 2b에 도시된 바와 같이 수직 방향으로 비대칭적 크기로 축소하여 Top-Down 형태의 단일영상으로 전환한다. In the above description, it has been suggested that the two-view image for left and right binoculars is reduced to an asymmetric size through the encoding preprocessing unit 10 and converted into a single image of the two-dimensional standard image (601). That is, the encoding preprocessor 10 converts the image into a single image having a side-by-side form by deflating it to an asymmetrical size in the horizontal direction as shown in FIG. 2A, or as shown in FIG. 2B. The image is reduced to an asymmetrical size and converted into a single top-down image.

이후, DCT 부호화부(31)는 부호화 전처리부(10)로부터 한 프레임으로 구성되는 좌우영상을 입력받아, 먼저 입력 좌영상 신호(수평 혹은 수직방향으로 비대칭 축소된 좌영상 신호)에 대하여 이미 이전의 시간에 처리되어 부호화측 프레임 메모리(321)에 저장되어 있는 복원 좌영상 신호(즉, 이전 프레임의 복원 좌영상 신호)를 기준영상 신호로 사용하여 움직임 예측과 움직임 보상을 수행한다(602). Subsequently, the DCT encoder 31 receives a left and right image composed of one frame from the encoding preprocessor 10 and firstly performs an input previously with respect to the input left image signal (a horizontally or vertically asymmetrically reduced left image signal). Motion prediction and motion compensation are performed by using a reconstructed left image signal (that is, a reconstructed left image signal of a previous frame) which is processed in time and stored in the encoding side frame memory 321 as a reference image signal (602).

즉, 부호화측 움직임 및 변이 예측기(319)는 입력받은 좌영상 신호(수평 혹은 수직방향으로 비대칭 축소된 좌영상 신호)와 부호화측 프레임 메모리(321)에 저장되어 있는 복원 좌영상 신호(즉, 이전 프레임의 복원 좌영상 신호)를 토대로, 움직임을 예측하여 움직임 벡터를 부호화측 움직임 및 변이 보상기(320)와 가변길이 부호화기(314)로 각각 출력한다. 여기서, 부호화측 움직임 및 변이 보상기(320)는 움직임 및 변이 예측기(319)로부터 입력된 움직임 벡터와 부호화측 프레임 메모리(321)로부터 입력받은 복원 좌영상 신호를 이용하여 움직임을 보상하고, 이 움직임 보상 신호를 2개의 합산기(311,317)로 각각 출력한다. That is, the encoding side motion and disparity predictor 319 receives the received left image signal (a horizontally or vertically asymmetrically reduced left image signal) and the reconstructed left image signal stored in the encoding side frame memory 321 (that is, the previous image). Based on the reconstructed left image signal of the frame), the motion vector is predicted and output to the encoding-side motion and disparity compensator 320 and the variable length encoder 314, respectively. Here, the encoding-side motion and disparity compensator 320 compensates for the motion by using the motion vector input from the motion and disparity predictor 319 and the reconstructed left image signal input from the encoding-side frame memory 321. The signals are output to two summers 311 and 317, respectively.

이후, 제1 합산기(311)는 부호화측 움직임 및 변이 보상기(320)에서 움직임 보상된 신호와 입력 좌영상 신호를 합산하여(603), 두 신호간의 차인 에러 영상 신호를 추출하고, 추출된 에러 영상 신호는 이산여현변환부(DCT)(312) 및 양자화기(Q)(313)에서 이산여현변환(DCT) 및 양자화(Q)된 후, 가변길이 부호화기(314)를 통해 가변길이 부호화된다(604). 따라서, 가변길이 부호화기(314)는 양자화기(313)로부터 입력된 양자화된 신호와 부호화측 움직임 및 변이 예측기(319)에서 출력되는 움직임 벡터 신호를 비트스트림으로 부호화하여, DCT 복호화부(33)의 가변길이 복호화기(331)로 출력한다. Thereafter, the first summer 311 adds the motion-compensated signal and the input left image signal at the encoding side motion and disparity compensator 320 to extract an error image signal that is a difference between the two signals, and extracts the extracted error. The video signal is discrete cosine transformed (DCT) and quantized by the discrete cosine transforming unit (DCT) 312 and the quantizer (Q) 313 and then variable length coded by the variable length encoder 314 ( 604). Accordingly, the variable length encoder 314 encodes the quantized signal input from the quantizer 313 and the motion vector signal output from the encoding side motion and disparity predictor 319 into a bitstream, thereby encoding the DCT decoder 33. Output to the variable length decoder 331.

또한, 양자화기(313)에서 양자화된 신호는 역양자화기(IQ)(315) 및 역이산여현변환부(IDCT)(316)를 거쳐 역양자화(IQ) 및 역이산여현변환(IDCT)된 후(605), 제2 합산기(317)로 입력되어, 제2 합산기(317)에서는 부호화측 움직임 및 변이 보상기(320)로부터 입력되는 움직임 보상된 신호를 합하여 좌영상 신호를 복원하고, 복원된 좌영상 신호를 부호화측 프레임 메모리(321)에 저장하여 둔다(606). 이 신호(복원된 좌영상 신호)는 다음 시간에 입력되는 좌영상(다음 프레임의 좌영상)의 부호화시 움직임 보상을 위한 기준영상으로, 혹은 우영상(동일 프레임의 우영상)의 변이 보상을 위한 기준영상으로 각각 이용된다.In addition, the quantized signal in the quantizer 313 is subjected to inverse quantization (IQ) and inverse discrete cosine transform (IDCT) through an inverse quantizer (IQ) 315 and an inverse discrete cosine transform unit (IDCT) 316. 605 and the second summer 317, the second summer 317 sums up the motion-compensated signal input from the encoding-side motion and the shift compensator 320 to restore the left image signal, and The left video signal is stored in the encoding side frame memory 321 (606). This signal (restored left image signal) is a reference image for motion compensation during encoding of a left image (left image of the next frame) input next time, or for compensation for variation of a right image (right image of the same frame). Each is used as a reference image.

한편, 입력받은 좌우영상 중, 우영상 신호(수평 혹은 수직방향으로 비대칭 축소된 우영상 신호)는 이미 이전의 시간에 처리되어 부호화측 프레임 메모리(321)에 저장되어 있는 복원 우영상 신호(즉, 다른 시간에 처리된 이전 프레임의 복원 우영상 신호)를 기준영상 신호로 사용하여 움직임 예측과 움직임 보상을 수행하거나, 같은 시간에 처리되어 부호화측 프레임 메모리(321)에 저장되어 있는 복원 좌영상 신호(즉, 같은 시간에 처리된 동일 프레임의 복원 좌영상 신호)를 기준영상 신호로 사용하여 변이 예측과 변이 보상을 수행하여 부호화한다(607). 이때, 변이 예측 및 보상에 있어서, 좌우영상이 비대칭적 크기로 축소되어 좌우영상의 해상도가 다르므로, 변이 예측 및 보상을 위해서는 좌영상 해상도 조절기(318)에서 좌영상을 우영상과 같은 해상도가 되도록 크기 전환해야 한다. On the other hand, among the inputted left and right images, the right image signal (a right image signal asymmetrically reduced in the horizontal or vertical direction) is already processed at a previous time and is a reconstructed right image signal stored in the encoding side frame memory 321 (that is, Motion prediction and motion compensation are performed using the reconstructed right image signal of the previous frame processed at another time as the reference image signal, or the reconstructed left image signal (restored at the same time and stored in the encoding side frame memory 321) That is, by using the reconstructed left image signal of the same frame processed at the same time as the reference image signal, the prediction and the variation compensation are performed in operation 607. In this case, since the left and right images are reduced to an asymmetrical size and the resolutions of the left and right images are different, the left image resolution controller 318 may have the same resolution as the right image. You must switch size.

즉, 부호화측 움직임 및 변이 예측기(319)는 입력받은 우영상 신호와 부호화측 프레임 메모리(321)에 저장되어 있는 동일 시간의 복원 좌영상 신호(즉, 동일 프레임의 복원 좌영상 신호)를 좌영상 해상도 조절기(318)로 입력하여, 좌영상의 해상도를 우영상과 동일하도록 전환한 다음, 이 영상을 토대로 부호화측 변이 예측을 하고, 변이 예측을 통하여 얻어진 변이 벡터를 부호화측 움직임 및 변이 보상기(320)로 출력하여 변이 보상을 수행한다. 또한, 이전 시간에 처리되어 부호화측 프레임 메모리(321)에 저장되어 있는 복원 우영상 신호(즉, 이전 프레임의 복원 우영상 신호)를 부호화측 움직임 및 변이 예측기(319)로 입력하여, 움직임 예측을 통한 움직임 벡터를 구하여 부호화측 움직임 및 변이 보상기(320)로 출력하여 움직임 보상을 수행한다. That is, the encoding side motion and disparity predictor 319 performs a left image on the received right image signal and the reconstructed left image signal (ie, the reconstructed left image signal of the same frame) stored in the encoding side frame memory 321 at the same time. After inputting to the resolution controller 318, the resolution of the left image is converted to be equal to the right image, and then the encoding side shift prediction is performed based on the image, and the variation vector obtained through the variation prediction is encoded side motion and the displacement compensator 320. ) To perform mutation compensation. In addition, a reconstruction right image signal (that is, a reconstruction right image signal of a previous frame) that is processed at a previous time and stored in the encoding side frame memory 321 is input to the encoding side motion and disparity predictor 319 to perform motion prediction. The motion vector is obtained and output to the encoding-side motion and disparity compensator 320 to perform motion compensation.

그러면, 부호화측 움직임 및 변이 보상기(320)는 변이 보상된 우영상 신호와 움직임 보상된 좌영상 신호 중 입력되는 원래의 우영상 신호와 차이가 적은 쪽의 보상 신호를 2개의 합산기(311,317)로 각각 출력한다. Then, the encoding-side motion and disparity compensator 320 transmits a compensation signal having a smaller difference from the original right image signal input among the disparity compensated right image signal and the motion compensated left image signal to the two summers 311 and 317. Print each.

이후, 제1 합산기(311)는 부호화측 움직임 및 변이 보상기(320)에서 움직임 혹은 변위 보상된 신호와 입력 우영상 신호를 합산하여(608), 두 신호간의 차인 에러 영상 신호를 추출하고, 추출된 에러 영상 신호는 이산여현변환부(DCT)(312) 및 양자화기(Q)(313)에서 이산여현변환(DCT) 및 양자화(Q)된 후, 가변길이 부호화기(314)를 통해 가변길이 부호화된다(609). 또한, 양자화기(313)에서 양자화된 신호는 역양자화기(IQ)(315) 및 역이산여현변환부(IDCT)(316)를 거쳐 역양자화(IQ) 및 역이산여현변환(IDCT)된 후, 제2 합산기(317)로 입력되어, 제2 합산기(317)에서는 역이산여현변환(IDCT)된 신호와 부호화측 움직임 및 변이 보상기(320)로부터 입력되는 움직임 혹은 변위 보상된 신호를 합하여 우영상 신호를 복원하고, 복원된 우영상 신호를 부호화측 프레임 메모리(321)에 저장하여(610), 다음 시간에 입력되는 우영상(즉, 다음 프레임의 우영상)의 부호화시 움직임 보상을 위한 기준영상으로 이용한다.Subsequently, the first summer 311 adds the motion-displacement-compensated signal and the input right image signal at the encoding side motion and disparity compensator 320 to extract an error image signal that is a difference between the two signals, and extracts the extracted image. The error image signal is subjected to discrete cosine transform (DCT) and quantization (DCT) by the discrete cosine transform unit (DCT) 312 and the quantizer (Q) 313, and then is subjected to variable length encoding through a variable length encoder 314. (609). In addition, the quantized signal in the quantizer 313 is subjected to inverse quantization (IQ) and inverse discrete cosine transform (IDCT) through an inverse quantizer (IQ) 315 and an inverse discrete cosine transform unit (IDCT) 316. , Inputted to the second summer 317, and in the second summer 317, add the inverse discrete cosine transform (IDCT) signal and the motion or displacement compensated signal input from the encoding-side motion and disparity compensator 320. Reconstructing the right image signal and storing the reconstructed right image signal in the encoding side frame memory 321 (610) to compensate for motion during encoding of the right image (that is, the right image of the next frame) input next time. Use it as a reference image.

이제, DCT 복호화부(33)에서의 복호화 과정을 도 3 및 도 7을 통해 살펴보기로 한다. Now, the decoding process of the DCT decoder 33 will be described with reference to FIGS. 3 and 7.

DCT 복호화부(33)에서 가변길이 복호화기(331)는 DCT 부호화부(31)의 가변길이 부호화기(314)로부터 비트스트림(움직임 벡터, 변이 벡터, 양자화 및 DCT된 한 프레임의 좌우영상 포함)을 입력받아(701), 움직임 또는 변이 벡터를 복호화측 움직임 및 변이 보상기(335)로 출력하고, 양자화 및 DCT된 한 프레임의 좌우영상 신호를 복호화측 역양자화기(IQ)(332)로 출력한다. In the DCT decoder 33, the variable length decoder 331 receives a bitstream (including a motion vector, a disparity vector, quantized, and left and right images of a DCT frame) from the variable length encoder 314 of the DCT encoder 31. In response to the input (701), the motion or disparity vector is output to the decoding side motion and disparity compensator 335, and the left and right image signals of the quantized and DCT frames are output to the decoding side dequantizer (IQ) 332.

이때, 복호화측 역양자화기(332)는 DCT 부호화부(31)에서 양자화 및 DCT된 좌우영상 신호를 복호화함에 있어서, 먼저 좌영상 신호를 복호화한 다음, 우영상 신호를 복호화한다. 물론, 우영상 신호를 먼저 복호화하고, 다음 좌영상 신호를 복호화할 수도 있음은 자명하다. 이렇게 역양자화된 좌우 영상신호는 역이산여현변환부(IDCT)(333)에 의해 역이산여현변환(IDCT)된다(702). In this case, the decoding side dequantizer 332 first decodes the left image signal and then decodes the right image signal in decoding the left and right video signals quantized and DCT by the DCT encoder 31. It is obvious that the right video signal may be decoded first and the next left video signal may be decoded. The dequantized left and right image signals are inverse discrete cosine transform (IDCT) by an inverse discrete cosine transforming unit (IDCT) 333 (702).

만약, 가변길이 복호화기(331)에서 출력되는 벡터가 움직임 벡터인 경우(703), 복호화측 움직임 및 변이 보상기(335)는 가변길이 복호화기(331)에서 출력되는 움직임 벡터와 복호화측 프레임 메모리(337)에 저장되어 있는 이전 시간의 복원 좌영상 신호(즉, 이전 프레임의 복원 좌영상 신호)를 입력받아, 움직임 보상된 신호를 구하여(704) 합산기(334)로 출력한다. 그러면, 합산기(334)는 복호화측 역이산여현변환부(IDCT)(333)에서 출력되는 신호와 복호화측 움직임 및 변이 보상기(335)로부터의 움직임 보상된 신호를 합하여 좌영상 신호를 복원하여(705), 좌영상 신호를 복호화측 프레임 메모리(337)에 저장하여 둔다. 이 신호(복원된 좌영상 신호)는 다음 시간에 처리될 좌영상(즉, 다음 프레임의 좌영상)의 복호화시 움직임 보상을 위한 기준영상으로, 혹은 우영상(동일 프레임의 우영상)의 복호화시 변이 보상을 위한 기준영상으로 각각 이용한다. If the vector output from the variable length decoder 331 is a motion vector (703), the decoding side motion and disparity compensator 335 may include the motion vector and the decoding side frame memory (output) output from the variable length decoder 331. In operation 337, the restored left image signal of the previous time (that is, the restored left image signal of the previous frame) is received, and the motion compensated signal is obtained (704) and output to the summer 334. Then, the adder 334 reconstructs the left image signal by adding the signal output from the decoding side inverse cosine transform unit (IDCT) 333 and the motion compensated signal from the decoding side motion and disparity compensator 335 ( 705), the left video signal is stored in the decoding-side frame memory 337; This signal (the restored left image signal) is a reference image for motion compensation when decoding the left image (i.e., the left image of the next frame) to be processed next time, or when decoding the right image (right image of the same frame). Each is used as a reference image for variation compensation.

또한, 가변길이 복호화기(331)에서 출력되는 벡터가 움직임 벡터인 경우(703), 복호화측 움직임 및 변이 보상기(335)는 가변길이 복호화기(331)에서 출력되는 움직임 벡터와 복호화측 프레임 메모리(337)에 저장되어 있는 이전 시간의 복원 우영상 신호(즉, 이전 프레임의 복원 우영상 신호)를 입력받아, 움직임 보상된 신호를 구하여(704) 합산기(334)로 출력한다. 그러면, 합산기(334)는 복호화측 역이산여현변환부(IDCT)(333)에서 출력되는 신호와 복호화측 움직임 및 변이 보상기(335)로부터의 움직임 보상된 신호를 합하여 우영상 신호를 복원하여(705), 우영상 신호를 복호화측 프레임 메모리(337)에 저장하여 둔다. 이 신호(복원된 우영상 신호)는 다음 시간에 처리될 우영상(즉, 다음 프레임의 우영상)의 복호화시 움직임 보상을 위한 기준영상으로 이용한다. In addition, when the vector output from the variable length decoder 331 is a motion vector (703), the decoding side motion and disparity compensator 335 is a motion vector and decoding side frame memory (output from the variable length decoder 331). In operation 337, the restored right image signal of the previous time (that is, the restored right image signal of the previous frame) is received, and the motion compensated signal is obtained (704) and output to the summer 334. Then, the summer 334 reconstructs the right image signal by adding the signal output from the decoding side inverse cosine transform unit (IDCT) 333 and the motion compensated signal from the decoding side motion and disparity compensator 335 ( 705) The right video signal is stored in the decoding side frame memory 337. This signal (the restored right image signal) is used as a reference image for motion compensation when decoding the right image (that is, the right image of the next frame) to be processed next time.

한편, 가변길이 복호화기(331)에서 출력되는 벡터가 변이 벡터인 경우(703), 복호화측 움직임 및 변이 보상기(335)는 가변길이 복호화기(331)에서 출력되는 변이 벡터와 동일 프레임 처리시간에 처리되어 복호화측 프레임 메모리(337)에 저장되어 있는 복원 좌영상 신호(즉, 동일 프레임의 복원 좌영상 신호)를 입력받아, 변이 보상된 신호를 구하여(706) 합산기(334)로 출력한다. 이때, 복원 좌영상 신호는 좌영상의 해상도를 우영상 해상도와 동일하도록 전환한 다음, 변이 보상을 수행한다. 그러면, 합산기(334)는 복호화측 역이산여현변환부(IDCT)(333)에서 출력되는 신호와 복호화측 움직임 및 변이 보상기(335)로부터의 변이 보상된 신호를 합하여 우영상 신호를 복원하여(707), 우영상 신호를 복호화측 프레임 메모리(337)에 저장하여 둔다. 이 신호(복원된 우영상 신호)는 다음 시간에 처리될 우영상(즉, 다음 프레임의 우영상)의 복호화시 움직임 보상을 위한 기준영상으로 이용된다. On the other hand, when the vector output from the variable length decoder 331 is a disparity vector (703), the decoding-side motion and disparity compensator 335 is the same as the disparity vector output from the variable length decoder 331 at the same frame processing time. The reconstructed left image signal (that is, the reconstructed left image signal of the same frame) received in the processed and decoded frame memory 337 is obtained, and the variance-compensated signal is obtained (706) and output to the summer 334. In this case, the reconstructed left image signal converts the resolution of the left image to be the same as the right image resolution, and then performs shift compensation. Then, the adder 334 reconstructs the right image signal by adding the signal output from the decoding side inverse cosine transform unit (IDCT) 333 and the variation compensated signal from the decoding side motion and disparity compensator 335 ( 707, the right video signal is stored in the decoding side frame memory 337. This signal (the restored right image signal) is used as a reference image for motion compensation when decoding the right image (that is, the right image of the next frame) to be processed next time.

이렇게 DCT 복호화부(33)에서 복원된 좌우영상 신호는 복호화 후처리부(30)로 입력되어, 도 4a 및 4b에 도시된 바와 같이 복호화 후처리부(30)에서 비대칭적 크기로 축소되어 있는 좌우영상을 원래 크기의 해상도로 확대하여 각각 별도의 영상으로 분리한다(708). The left and right image signals reconstructed by the DCT decoder 33 are input to the decoded post-processing unit 30, and as shown in FIGS. 4A and 4B, the left and right image signals are reduced to an asymmetric size in the decoded post-processing unit 30. The image is enlarged to its original size and separated into separate images (708).

도 4a 는 복호화 후처리부(30)에서 비대칭적 수평방향 확대에 의해 한 프레임의 좌우영상이 2 프레임으로 복원되는 것을 보여준다. 즉, 도 4a에서는 복호화 후처리부(30)가 DCT 복호화부(33)를 통해 복호화된 한 프레임의 좌우영상 데이터를 수평방향의 비대칭적 보간(Interpolation)을 통하여 원 영상 크기로 확대한다. 4A shows that the left and right images of one frame are reconstructed into two frames by asymmetrical horizontal expansion in the decoding post-processing unit 30. That is, in FIG. 4A, the decoding post processor 30 enlarges the left and right image data of one frame decoded by the DCT decoder 33 to the original image size through asymmetric interpolation in the horizontal direction.

도 4b 는 복호화 후처리부(30)에서 비대칭적 수직방향 확대에 의해 한 프레임의 좌우영상이 2 프레임으로 복원되는 것을 보여준다. 즉, 도 4b에서는 복호화 후처리부(30)가 DCT 복호화부(33)를 통해 복호화된 한 프레임의 좌우영상 데이터를 수직방향의 비대칭적 보간(Interpolation)을 통하여 원 영상 크기로 확대한다. 4B shows that the left and right images of one frame are reconstructed into two frames by asymmetrical vertical expansion in the decoding post-processing unit 30. That is, in FIG. 4B, the decoding post processor 30 enlarges the left and right image data of one frame decoded by the DCT decoder 33 to the original image size through vertical asymmetric interpolation.

도 5a 및 5b 는 본 발명에 따른 상기 도 3의 DCT 부호화부에서의 움직임 및 변이 보상을 수행하기 예측 과정을 나타낸 일실시예 설명도이다. 이는 좌우 양안의 스테레오스코픽 비디오를 수직방향의 비대칭적 크기로의 축소에 의해 Top-Down 형태의 영상으로 전환할 때의 움직임 및 변이 보상을 위한 영상의 예측에 관한 것으로, 수평방향의 비대칭적 크기로의 축소에 의해 Side-by-Side 형태의 영상으로 전환하는 경우에도 동일한 예측이 가능하다. 5A and 5B are exemplary diagrams illustrating a prediction process of performing motion and disparity compensation in the DCT encoder of FIG. 3 according to the present invention. This is related to the prediction of the image for the compensation of the motion and the transition when the left and right binocular stereoscopic video is converted to the top-down image by reducing the vertically asymmetrical size. The same prediction is possible even when switching to the side-by-side type image by the reduction of.

도 5a에서는, 제1 프레임의 좌영상 I-픽쳐는 움직임 예측과 보상없이 부호화하여, 부호화측 프레임 메모리(321)에 부호화한 좌영상 I-픽쳐를 복원하여 저장한다. 그 다음, 제1 프레임의 우영상 P-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 복원 좌영상 I-픽쳐를 기준영상으로 하여 변이 예측하여 구한 변이 벡터를 이용해, 변이 보상하여 부호화한다. 그리고, 제1 프레임의 우영상 P-픽쳐를 복원하여 부호화측 프레임 메모리(321)에 저장한다. In FIG. 5A, the left image I-picture of the first frame is encoded without motion prediction and compensation, and the encoded left image I-picture is reconstructed and stored in the encoding side frame memory 321. Next, the right image P-picture of the first frame is variably compensated and encoded using a disparity vector obtained by disparity prediction using the reconstructed left image I-picture stored in the encoding side frame memory 321 as a reference image. Then, the right picture P-picture of the first frame is reconstructed and stored in the encoding side frame memory 321.

그리고, 제4 프레임의 좌영상 P-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제1 프레임의 복원 좌영상 I-픽쳐를 기준영상으로 하여 움직임을 예측하고 움직임 보상을 수행하여 부호화하고, 부호화된 제4 프레임의 좌영상 P-픽쳐를 복원하여 부호화측 프레임 메모리(321)에 저장한다. 또한, 제4 프레임의 우영상 B-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 동일 시간상의 좌영상인 제4 프레임의 복원 좌영상 P-픽쳐를 기준영상으로 하여 변이 예측 및 보상을 수행하고, 제1 프레임의 복원 우영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 보상을 수행하여, 움직임과 변이 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. The left image P-picture of the fourth frame is encoded using the reconstructed left image I-picture of the first frame stored in the encoding side frame memory 321 as a reference image to predict motion and perform motion compensation. The left image P-picture of the encoded fourth frame is reconstructed and stored in the encoding side frame memory 321. In addition, the right image B-picture of the fourth frame performs the disparity prediction and compensation by using the reconstructed left image P-picture of the fourth frame, which is the left image at the same time, stored in the encoding side frame memory 321 as a reference image. Then, motion prediction and compensation are performed by using the reconstructed right image P-picture of the first frame as a reference image, and the data having the smaller error with the original image is encoded among the motion compensated and distorted images.

그리고, 제2 프레임 및 제3 프레임의 좌영상 B-픽쳐는 시간상 이전에 있는 제1 프레임의 복원 좌영상 I-픽쳐와 시간상 뒤에 있는 제4 프레임의 복원 좌영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 움직임 보상을 수행하여, 시간상 전후 2개의 움직임 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. The left image B-picture of the second frame and the third frame is moved based on the reconstructed left image I-picture of the first frame before time and the reconstructed left image P-picture of the fourth frame behind in time as a reference image. Prediction and motion compensation are performed to encode data having the smallest error with the original video among two motion compensated images before and after time.

한편, 제2 프레임의 우영상 B-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제1 프레임의 복원 우영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 보상을 수행하고, 제2 프레임의 복원 좌영상 B-픽쳐를 기준영상으로 하여 변이 예측에 의한 변이 보상을 수행하여, 움직임과 변이 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. 또한, 제3 프레임의 우영상 B-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제1 프레임의 복원 우영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 보상을 수행하고, 제3 프레임의 복원 좌영상 B-픽쳐를 기준영상으로 하여 변이 예측에 의한 변이 보상을 수행하여, 움직임과 변이 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. Meanwhile, the right image B-picture of the second frame performs motion prediction and compensation by using the reconstructed right image P-picture of the first frame stored in the encoding side frame memory 321 as a reference image, Disparity compensation by disparity prediction is performed by using the reconstructed left image B-picture as a reference image, and the data having the smaller error between the motion image and the original image is encoded. Also, the right picture B-picture of the third frame performs motion prediction and compensation by using the reconstructed right picture P-picture of the first frame stored in the encoding side frame memory 321 as a reference picture, Disparity compensation by disparity prediction is performed by using the reconstructed left image B-picture as a reference image, and the data having the smaller error between the motion image and the original image is encoded.

도 5b는 상기 도 5a의 예측 방식과 유사하며, 차이점은 우영상의 움직임 보상을 위한 예측방식에서 제3 프레임의 우영상 B-픽쳐가 다음 프레임, 즉 제4 프레임의 복원 우영상 B-픽쳐를 이용하여 에측하는 것이며, 이를 위하여 부호화측 프레임 메모리(321)에 제4 프레임의 부호화된 우영상 B-픽쳐를 복원하여 저장하여야 한다. FIG. 5B is similar to the prediction method of FIG. 5A, except that the right image B-picture of the third frame is a reconstructed right image B-picture of the fourth frame in the prediction method for motion compensation of the right image. The encoded right image B-picture of the fourth frame must be restored and stored in the encoding side frame memory 321 for this purpose.

즉, 제1 프레임에서 좌영상 I-픽쳐는 움직임 보상없이 부호화하고, 부호화측 프레임 메모리(321)에 부호화된 좌영상 I-픽쳐를 복원하여 저장한다. 그 다음, 제1 프레임의 우영상 P-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제1 프레임의 복원 좌영상 I-픽쳐를 기준영상으로 하여, 변이 예측하여 변이 보상을 수행한다. 그리고, 제1 프레임의 우영상 P-픽쳐를 복원하여 부호화측 프레임 메모리(321)에 저장한다. That is, in the first frame, the left image I-picture is encoded without motion compensation, and the encoded left image I-picture is reconstructed and stored in the encoding side frame memory 321. Next, the right image P-picture of the first frame uses the reconstructed left image I-picture of the first frame stored in the encoding side frame memory 321 as a reference image to perform disparity prediction by performing disparity prediction. Then, the right picture P-picture of the first frame is reconstructed and stored in the encoding side frame memory 321.

다음, 제4 프레임의 좌영상 P-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제1 프레임의 복원 좌영상 I-픽쳐를 기준영상으로 하여 움직임을 예측하고 움직임 보상을 수행하여 부호화하고, 부호화된 제4 프레임의 좌영상 P-픽쳐를 복원하여 부호화측 프레임 메모리(321)에 저장한다. 또한, 제4 프레임의 우영상 B-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 동일 시간상의 좌영상인 제4 프레임의 복원 좌영상 P-픽쳐를 기준영상으로 하여 변이 예측 및 보상을 수행하고, 제1 프레임의 복원 우영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 보상을 수행하여, 움직임과 변이 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. Next, the left image P-picture of the fourth frame is encoded using the reconstructed left image I-picture of the first frame stored in the encoding side frame memory 321 as a reference image to predict motion and perform motion compensation. The left image P-picture of the encoded fourth frame is reconstructed and stored in the encoding side frame memory 321. In addition, the right image B-picture of the fourth frame performs the disparity prediction and compensation by using the reconstructed left image P-picture of the fourth frame, which is the left image at the same time, stored in the encoding side frame memory 321 as a reference image. Then, motion prediction and compensation are performed by using the reconstructed right image P-picture of the first frame as a reference image, and the data having the smaller error with the original image is encoded among the motion compensated and distorted images.

제2 프레임 및 제3 프레임의 좌영상 B-픽쳐는 시간상 이전에 있는 제1 프레임의 복원 좌영상 I-픽쳐와 시간상 뒤에 있는 제4 프레임의 복원 좌영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 움직임 보상을 수행하여, 시간상 전후 2개의 움직임 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. The left image B-picture of the second frame and the third frame may be a motion prediction method using the reconstructed left image I-picture of the first frame before time and the reconstructed left image P-picture of the fourth frame behind in time as a reference image. The motion compensation is performed to encode data having the smallest error with the original video among the two motion compensated videos before and after.

한편, 제2 프레임의 우영상 B-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제1 프레임의 복원 우영상 P-픽쳐를 기준영상으로 하여 움직임 예측 및 보상을 수행하고, 제2 프레임의 복원 좌영상 B-픽쳐를 기준영상으로 하여 변이 예측에 의한 변이 보상을 수행하여, 움직임과 변이 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. 또한, 제3 프레임의 우영상 B-픽쳐는 부호화측 프레임 메모리(321)에 저장되어 있는 제4 프레임의 복원 우영상 B-픽쳐를 기준영상으로 하여 움직임 예측 및 보상을 수행하고, 제3 프레임의 복원 좌영상 B-픽쳐를 기준영상으로 하여 변이 예측에 의한 변이 보상을 수행하여, 움직임과 변이 보상된 영상 중 원 영상과의 에러가 작은 쪽의 데이터를 부호화한다. Meanwhile, the right image B-picture of the second frame performs motion prediction and compensation by using the reconstructed right image P-picture of the first frame stored in the encoding side frame memory 321 as a reference image, Disparity compensation by disparity prediction is performed by using the reconstructed left image B-picture as a reference image, and the data having the smaller error between the motion image and the original image is encoded. In addition, the right picture B-picture of the third frame performs motion prediction and compensation by using the reconstructed right picture B-picture of the fourth frame stored in the encoding side frame memory 321 as a reference picture, Disparity compensation by disparity prediction is performed by using the reconstructed left image B-picture as a reference image, and the data having the smaller error between the motion image and the original image is encoded.

상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다.The method of the present invention as described above may be implemented as a program and stored in a computer-readable recording medium (CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.).

이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다는 것이 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.The present invention described above is not limited to the above-described embodiments and the accompanying drawings, and various substitutions, modifications, and changes are possible in the art without departing from the technical spirit of the present invention. It will be clear to those of ordinary knowledge.

상기한 바와 같은 본 발명은, 좌우영상에 대한 비대칭적 크기로의 전환에 의하여 동일 부호화율에서 좌우영상이 서로 다른 정도의 화질로 복원되도록 함으로써, 실제 인간이 입체영상을 감상할 때에는 보다 우수한 화질을 느낄 수 있도록 하고, 기존의 2차원 비디오 부호화 방식인 MPEG-2/MPEG-4/AVC(Advanced Video Coding)와의 호환성이 용이하며, 움직임 정보 뿐만 아니라 좌우영상 사이에 존재하는 변이정보도 함께 고려하여 부호화함으로써 부호화 효율을 보다 향상시킬 수 있는 효과가 있다.As described above, the present invention allows the left and right images to be restored to different degrees of image quality at the same coding rate by switching to the asymmetrical size of the left and right images, so that when a real human being enjoys a stereoscopic image, It is easy to be compatible with MPEG-2 / MPEG-4 / AVC (Advanced Video Coding), which is a conventional two-dimensional video encoding method, and is encoded by considering not only motion information but also variation information existing between left and right images. This has the effect of further improving the coding efficiency.

도 1 은 본 발명에 따른 영상 부호화/복호화 장치의 일실시예 구성도.1 is a block diagram of an embodiment of an image encoding / decoding apparatus according to the present invention.

도 2a 및 2b 는 본 발명에 따른 상기 도 1의 부호화 전처리부에서의 수평/수직 방향의 비대칭적 축소 과정을 나타낸 일실시예 설명도.2A and 2B are diagrams illustrating an asymmetric reduction process in a horizontal / vertical direction in the encoding preprocessor of FIG. 1 according to the present invention.

도 3 은 본 발명에 따른 상기 도 1의 부호화/복호화부의 일실시예 상세 구성도.3 is a detailed block diagram of an embodiment of the encoding / decoding unit of FIG. 1 according to the present invention;

도 4a 및 4b 는 본 발명에 따른 상기 도 1의 복호 후처리부에서의 수평/수직 방향의 비대칭적 보간 과정을 나타낸 일실시예 설명도.4A and 4B are diagrams illustrating an embodiment of asymmetric interpolation in the horizontal / vertical direction in the decoding post-processing unit of FIG. 1 according to the present invention.

도 5a 및 5b 는 본 발명에 따른 상기 도 3의 DCT 부호화부에서의 움직임 및 변이 보상을 수행하기 예측 과정을 나타낸 일실시예 설명도.5A and 5B are exemplary diagrams illustrating a prediction process for performing motion and disparity compensation in the DCT encoder of FIG. 3 according to the present invention.

도 6 은 본 발명에 따른 영상 부호화 방법에 대한 일실시예 흐름도.6 is a flowchart illustrating an embodiment of an image encoding method according to the present invention.

도 7 은 본 발명에 따른 영상 복호화 방법에 대한 일실시예 흐름도.7 is a flowchart illustrating an embodiment of an image decoding method according to the present invention.

* 도면의 주요 부분에 대한 부호 설명* Explanation of symbols on the main parts of the drawing

10 : 부호화 전처리부 20 : 부호화/복호화부10: encoding preprocessor 20: encoding / decoding unit

30 : 복호화 후처리부30: decryption post-processing unit

Claims (21)

영상 부호화 장치에 있어서, In the video encoding apparatus, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 전처리수단; 및 Pre-processing means for converting the stereoscopic image composed of left and right two-frame images at the same time into a two-dimensional standard image by reducing the asymmetric size so that the first and second images have different resolutions in a single frame; And 상기 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 시간상 전후에 존재하는 프레임의 제2 영상을 이용하여 움직임 예측에 의해 움직임을 보상하여 부호화하기 위한 부호화수단The first image and the second image are reduced and converted to the asymmetrical size to compensate for the motion of the first image, and the second image of the frame existing in time before and after the second image of the same frame. Encoding means for compensating and encoding motion by motion prediction using the 을 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.The image encoding apparatus for performing compensation by reduction of the left and right images to the asymmetric size including. 영상 부호화 장치에 있어서, In the video encoding apparatus, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 영상 전처리수단; 및 Image preprocessing means for converting a stereoscopic image composed of left and right two-frame images at the same time into a two-dimensional standard image by reducing the asymmetric size so that the first and second images have different resolutions in a single frame; And 상기 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 상기 동일 프레임의 제1 영상을 이용하여 변이 예측에 의해 변이를 보상하여 부호화하기 위한 영상 부호화수단 The first and second images having the image resolution of one frame reduced and converted to the asymmetric size are motion compensated, and the second image of the same frame is shifted using the first image of the same frame. Image encoding means for compensating for encoding the variation by prediction 을 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.The image encoding apparatus for performing compensation by reduction of the left and right images to the asymmetric size including. 제 1 항 또는 제 2 항에 있어서,The method according to claim 1 or 2, 동일 시간상에 좌우 2시점 영상의 프레임으로 구성되는 스테레오스코픽 비디오에 대하여 수평 혹은 수직방향의 비대칭적 크기로의 축소에 의하여 한 프레임내에 좌우영상이 포함되도록 전환하여 움직임 및/또는 변이 보상을 수행하는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.Performing motion and / or disparity compensation by converting the stereoscopic video composed of the frames of the left and right 2 viewpoint images at the same time to include the left and right images in one frame by reducing the horizontal or vertical asymmetric size. An image encoding apparatus for performing compensation by reduction of a left and right image to an asymmetric size. 제 1 항에 있어서,The method of claim 1, 상기 영상 전처리수단은, The image preprocessing means, 좌우영상에 대하여 서로 다른 해상도를 갖도록 수평 혹은 수직 방향으로 축소하여 한 프레임의 영상 해상도로 전환하는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.An image encoding apparatus for performing compensation by reducing the left and right images to the asymmetrical size, characterized in that the left and right images are reduced in a horizontal or vertical direction so as to have different resolutions and converted to the image resolution of one frame. 제 4 항에 있어서,The method of claim 4, wherein 상기 영상 부호화수단에서의 부호화 과정은, The encoding process in the video encoding means, 입력 제1 영상신호에 대하여, 이전 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 1 단계;A first step of performing motion prediction and motion compensation on the input first video signal by using the restored first video signal of the previous frame as a reference video signal; 움직임 보상된 신호와 입력 제1 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 2 단계;A second step of summing the motion compensated signal and the input first image signal, extracting an error image signal that is a difference between the two signals, quantizing the extracted error image signal with a discrete cosine transform (DCT), and variable length encoding; 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계;A third step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal to add a motion compensated signal to restore the first image signal; 입력 제2 영상신호에 대하여, 이전 프레임의 복원 제2 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 4 단계;Performing motion prediction and motion compensation on the input second video signal by using the reconstructed second video signal of the previous frame as a reference video signal; 움직임 보상된 신호와 입력 제2 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 5 단계; 및A fifth step of adding a motion compensated signal and an input second video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT) and quantization; And 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제2 영상신호를 복원하는 제 6 단계A sixth step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal to add a motion compensated signal to restore the second image signal 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.The image encoding apparatus for performing compensation by reduction of the left and right images to the asymmetric size including. 제 4 항에 있어서,The method of claim 4, wherein 상기 보상수단에서의 부호화 과정은, The encoding process in the compensation means, 입력 제1 영상신호에 대하여, 이전 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 1 단계;A first step of performing motion prediction and motion compensation on the input first video signal by using the restored first video signal of the previous frame as a reference video signal; 움직임 보상된 신호와 입력 제1 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 2 단계;A second step of summing the motion compensated signal and the input first image signal, extracting an error image signal that is a difference between the two signals, quantizing the extracted error image signal with a discrete cosine transform (DCT), and variable length encoding; 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계;A third step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal to add a motion compensated signal to restore the first image signal; 입력 제2 영상신호에 대하여, 동일 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 제1 영상의 해상도를 제2 영상과 동일하도록 전환한 다음, 이 영상을 토대로 제2 영상에 대한 변이 예측과 변이 보상을 수행하는 제 4 단계;For the input second video signal, the first video signal of the same frame is used as the reference video signal, and the resolution of the first video is converted to be the same as the second video. A fourth step of performing mutation compensation; 변이 보상된 신호와 입력 제2 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 5 단계; 및A fifth step of varying the length-compensated signal and the input second video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); And 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 변이 보상된 신호를 합하여 제2 영상신호를 복원하는 제 6 단계Sixth step in which the quantized signal is inversely quantized and inverse discrete cosine transform (IDCT) to sum the disparity compensated signals to restore the second image signal 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.The image encoding apparatus for performing compensation by reduction of the left and right images to the asymmetric size including. 제 5 항 또는 제 6 항에 있어서,The method according to claim 5 or 6, 상기 제 3 단계의 복원된 제1 영상신호는, 다음 프레임의 좌영상의 부호화에서 움직임 보상을 위한 기준영상으로, 혹은 동일 프레임의 우영상의 변이 보상을 위한 기준영상으로 이용되며,The reconstructed first image signal of the third step is used as a reference image for motion compensation in encoding of a left image of a next frame or as a reference image for disparity compensation of a right image of the same frame. 상기 제 6 단계의 복원된 제2 영상신호는, 다음 프레임의 우영상의 부호화에서 움직임 보상을 위한 기준영상으로 이용되는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 장치.The reconstructed second image signal of the sixth step is used as a reference image for motion compensation in the encoding of the right image of the next frame. Encoding device. 영상 복호화 장치에 있어서, In the video decoding apparatus, 비대칭적 크기로 축소 전환되어 한 프레임내에서 각각 다른 크기의 영상 해상도를 갖는 부호화된 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 시간상 전후에 존재하는 프레임의 제2 영상을 이용하여 움직임 예측에 의해 움직임을 보상하여 복호화하기 위한 영상 복호화수단; 및 The motion compensation of the first image is performed on the encoded first and second images having a different size in each frame and reduced in asymmetric size, and the second image of the same frame exists before and after in time. Image decoding means for compensating and decoding motion by motion prediction using a second image of a frame; And 보상된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하기 위한 복원수단Restoration means for enlarging the compensated first and second images to the original resolution and restoring the image to the left and right two frames 을 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.An image decoding apparatus for performing compensation by reduction of the left and right images to an asymmetric size. 영상 복호화 장치에 있어서, In the video decoding apparatus, 비대칭적 크기로 축소 전환되어 한 프레임내에서 각각 다른 크기의 영상 해상도를 갖는 부호화된 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상하고, 동일 프레임의 제2 영상을 상기 동일 프레임의 제1 영상을 이용하여 변이 예측에 의해 변이를 보상하여 복호화하기 위한 위한 영상 복호화수단; 및 With respect to the encoded first and second images having a reduced size converted to an asymmetric size and having different image resolutions within one frame, motion compensation of the first image is performed, and a second image of the same frame is obtained from the first frame of the same frame. Image decoding means for compensating and decoding the variation by the disparity prediction using the one image; And 보상된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하기 위한 영상 복원수단Image restoring means for restoring the compensated first and second images to the original resolution and restoring the image to the left and right two frames. 을 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.An image decoding apparatus for performing compensation by reduction of the left and right images to an asymmetric size. 제 8 항 또는 제 9 항에 있어서,The method according to claim 8 or 9, 상기 부호화된 좌우영상은, The encoded left and right images, 동일 시간상에 좌우 2시점 영상의 프레임으로 구성되는 스테레오스코픽 비디오에 대하여 수평 혹은 수직방향의 비대칭적 축소에 의하여 한 프레임내에 좌우영상이 포함되도록 전환하여 움직임 및/또는 변이 보상된 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.The stereoscopic video, which is composed of frames of two left and right view images at the same time, is converted to include the left and right images in one frame by asymmetrical reduction in the horizontal or vertical direction, and the left and right images are compensated for movement and / or variation. An image decoding apparatus for performing compensation by reduction to an asymmetric size of. 제 8 항에 있어서,The method of claim 8, 상기 영상 복호화수단은, The video decoding means, 비대칭적 크기로 축소 전환되어 한 프레임의 영상 해상도를 갖는 제1 및 제2 영상에 대하여, 제1 영상을 움직임 보상을 이용하여 복호화하고, 상기 동일 프레임의 제2 영상을 시간상 전후에 존재하는 프레임의 제2 영상을 이용하여 움직임 예측에 의한 움직임 보상을 수행하거나, 상기 동일 프레임의 제1 영상을 이용하여 변이 예측에 의한 변이 보상을 수행하는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.The first and second images are reduced and converted to an asymmetric size, and the first and second images having one frame image resolution are decoded by using motion compensation, and the second image of the same frame may be By performing the motion compensation by the motion prediction using a second image or by performing the compensation of the displacement by the disparity prediction using the first image of the same frame by reducing the asymmetric size of the left and right images Image decoding apparatus for performing the compensation. 제 11 항에 있어서,The method of claim 11, 상기 영상 복호화수단에서의 복호화 과정은, The decoding process in the video decoding means, 부호화된 비트스트림을 입력받아, 양자화 및 이산여현변환(DCT)된 좌우영상 신호를 역양자화 및 역이산여현변환(IDCT)하는 제 1 단계;A first step of receiving an encoded bitstream and performing inverse quantization and inverse discrete cosine transform (IDCT) on the quantized and discrete cosine transformed left and right image signals; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제1 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 2 단계;A second step of receiving a motion vector carried in the bitstream and a reconstructed first video signal of a previous frame to obtain a motion compensated signal; 역이산여현변환(IDCT)된 제1 영상신호와 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계;A third step of reconstructing the first video signal by summing the inverse discrete cosine transformed (IDCT) first video signal and the motion compensated signal; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제2 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 4 단계; 및 A fourth step of receiving a motion vector carried in the bitstream and a reconstructed second video signal of a previous frame to obtain a motion compensated signal; And 역이산여현변환(IDCT)된 제2 영상신호와 움직임 보상된 신호를 합하여 제2 영상신호를 복원하는 제 5 단계A fifth step of restoring the second video signal by adding the inverse discrete cosine transformed (IDCT) second video signal and the motion compensated signal; 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.Image decoding apparatus for performing compensation by the reduction of the left and right images to the asymmetric size including. 제 11 항에 있어서,The method of claim 11, 상기 영상 복호화수단에서의 복호화 과정은, The decoding process in the video decoding means, 부호화된 비트스트림을 입력받아, 양자화 및 이산여현변환(DCT)된 좌우영상 신호를 역양자화 및 역이산여현변환(IDCT)하는 제 1 단계;A first step of receiving an encoded bitstream and performing inverse quantization and inverse discrete cosine transform (IDCT) on the quantized and discrete cosine transformed left and right image signals; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제1 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 2 단계;A second step of receiving a motion vector carried in the bitstream and a reconstructed first video signal of a previous frame to obtain a motion compensated signal; 역이산여현변환(IDCT)된 제1 영상신호와 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계;A third step of reconstructing the first video signal by summing the inverse discrete cosine transformed (IDCT) first video signal and the motion compensated signal; 상기 비트스트림에 실린 변위 벡터와 동일 프레임의 복원 제1 영상신호를 입력받아, 제1 영상의 해상도를 제2 영상 해상도와 동일하도록 전환한 다음, 변이 보상된 신호를 구하는 제 4 단계; 및 A fourth step of receiving a reconstructed first image signal of the same frame as the displacement vector carried in the bitstream, converting the resolution of the first image to be the same as the second image resolution, and then obtaining a disparity compensated signal; And 역이산여현변환(IDCT)된 제2 영상신호와 변이 보상된 신호를 합하여 제2 영상신호를 복원하는 제 5 단계A fifth step of reconstructing the second video signal by adding the inverse discrete cosine transformed (IDCT) second video signal and the shift compensation signal; 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.Image decoding apparatus for performing compensation by the reduction of the left and right images to the asymmetric size including. 제 12 항 또는 제 13 항에 있어서,The method according to claim 12 or 13, 상기 제 3 단계의 복원된 제1 영상신호는, 다음 프레임의 좌영상의 복호화시 움직임 보상을 위한 기준영상으로, 혹은 동일 프레임의 우영상의 복호화시 변이 보상을 위한 기준영상으로 각각 이용되며, The reconstructed first image signal of the third step is used as a reference image for motion compensation when decoding the left image of the next frame or as a reference image for distortion compensation when decoding the right image of the same frame, 상기 제 5 단계의 복원된 제2 영상신호는, 다음 프레임의 우영상의 복호화시 움직임 보상을 위한 기준영상으로 이용되는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.The reconstructed second image signal of the fifth step is an image for performing compensation by reducing the asymmetric size of the left and right images, which is used as a reference image for motion compensation when decoding the right image of the next frame. Decryption device. 제 10 항에 있어서,The method of claim 10, 상기 영상 복원수단은, The image restoration means, 복원된 수평 혹은 수직방향의 비대칭 축소된 좌우영상을 각각 원래 해상도의 2 프레임 영상으로 변환하도록 수평 혹은 수직 방향으로 확대하여 2 프레임의 영상으로 전환하는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.Reduction of the asymmetrical size of the left and right images, which are converted into two-frame images by enlarging the reconstructed horizontal or vertical asymmetrically reduced left and right images to a two-frame image of the original resolution, respectively. Image decoding apparatus for performing the compensation by. 영상 부호화 장치에 적용되는 영상 부호화 방법있어서, In the video encoding method applied to the video encoding device, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 제 1 단계;A first step of converting a stereoscopic image composed of left and right two frame images at the same time into a two-dimensional standard image by reducing the asymmetric size so that the first and second images have different resolutions in a single frame; 동일 프레임내의 입력 제1 영상신호에 대하여, 이전 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 2 단계;A second step of performing motion prediction and motion compensation on the input first video signal in the same frame using the reconstructed first video signal of the previous frame as a reference video signal; 움직임 보상된 신호와 입력 제1 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 3 단계;A third step of summing the motion compensated signal and the input first video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 4 단계;A fourth step of inverse quantizing and inverse discrete cosine transform (IDCT) of the quantized signal and adding the motion compensated signal to restore the first image signal; 상기 동일 프레임내의 입력 제2 영상신호에 대하여, 이전 프레임의 복원 제2 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 5 단계;A fifth step of performing motion prediction and motion compensation on the input second video signal in the same frame using the restored second video signal of the previous frame as a reference video signal; 움직임 보상된 신호와 입력 제2 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 6 단계; 및A sixth step of adding a motion compensated signal and an input second video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); And 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제2 영상신호를 복원하는 제 7 단계A seventh step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal to add a motion compensated signal to restore the second image signal 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 방법.An image encoding method for performing compensation by reduction of an asymmetric size of a left and right image including a. 영상 부호화 장치에 적용되는 영상 부호화 방법에 있어서, In the video encoding method applied to a video encoding apparatus, 동일시간 상에서 좌우측 2 프레임 영상으로 구성되는 스테레오스코픽 영상을 단일 프레임내에 제1 및 제2 영상이 각각 다른 크기의 해상도를 갖도록, 비대칭적 크기로 축소하여 2차원 표준 영상으로 전환하는 제 1 단계;A first step of converting a stereoscopic image composed of left and right two frame images at the same time into a two-dimensional standard image by reducing the asymmetric size so that the first and second images have different resolutions in a single frame; 동일 프레임내의 입력 제1 영상신호에 대하여, 이전 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 움직임 예측과 움직임 보상을 수행하는 제 2 단계;A second step of performing motion prediction and motion compensation on the input first video signal in the same frame using the reconstructed first video signal of the previous frame as a reference video signal; 움직임 보상된 신호와 입력 제1 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 3 단계;A third step of summing the motion compensated signal and the input first video signal, extracting an error video signal that is a difference between the two signals, and performing variable length coding on the extracted error video signal by using a discrete cosine transform (DCT); 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 4 단계;A fourth step of inverse quantizing and inverse discrete cosine transform (IDCT) of the quantized signal and adding the motion compensated signal to restore the first image signal; 상기 동일 프레임내의 입력 제2 영상신호에 대하여, 동일 프레임의 복원 제1 영상신호를 기준영상 신호로 하여 제1 영상의 해상도를 제2 영상과 동일하도록 전환한 다음, 이 영상을 토대로 제2 영상에 대한 변이 예측과 변이 보상을 수행하는 제 5 단계;With respect to the input second video signal in the same frame, the resolution of the first video is changed to be the same as the second video by using the restored first video signal of the same frame as the reference video signal, and then, based on this video, A fifth step of performing variation prediction and variation compensation for the data; 변이 보상된 신호와 입력 제2 영상신호를 합산하여, 두 신호간의 차인 에러 영상신호를 추출하여, 추출된 에러 영상신호를 이산여현변환(DCT) 및 양자화하여 가변길이 부호화하는 제 6 단계; 및A sixth step of extracting an error image signal that is a difference between the two signals by summing the disparity compensated signal and the input second image signal, and performing variable length coding on the extracted error image signal by using a discrete cosine transform (DCT); And 양자화된 신호를 역양자화 및 역이산여현변환(IDCT)하여, 변이 보상된 신호를 합하여 제2 영상신호를 복원하는 제 7 단계A seventh step of inverse quantization and inverse discrete cosine transform (IDCT) of the quantized signal to sum the shift-compensated signal to restore the second image signal 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 방법.An image encoding method for performing compensation by reduction of an asymmetric size of a left and right image including a. 제 16 항 또는 제 17 항에 있어서,The method according to claim 16 or 17, 상기 제 1 단계는, The first step is, 좌우영상에 대하여 서로 다른 해상도를 갖도록 수평 혹은 수직 방향으로 축소하여 한 프레임의 영상 해상도로 전환하는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 방법.An image encoding method for performing compensation by reduction of an asymmetrical size of a left and right image, wherein the left and right images are reduced in a horizontal or vertical direction so as to have different resolutions and converted to an image resolution of one frame. 영상 복호화 장치에 적용되는 영상 복호화 방법에 있어서, In the video decoding method applied to the video decoding apparatus, 부호화된 비트스트림을 입력받아, 양자화 및 이산여현변환(DCT)된 좌우영상 신호를 역양자화 및 역이산여현변환(IDCT)하는 제 1 단계;A first step of receiving an encoded bitstream and performing inverse quantization and inverse discrete cosine transform (IDCT) on the quantized and discrete cosine transformed left and right image signals; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제1 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 2 단계;A second step of receiving a motion vector carried in the bitstream and a reconstructed first video signal of a previous frame to obtain a motion compensated signal; 역이산여현변환(IDCT)된 제1 영상신호와 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계;A third step of reconstructing the first video signal by summing the inverse discrete cosine transformed (IDCT) first video signal and the motion compensated signal; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제2 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 4 단계; A fourth step of receiving a motion vector carried in the bitstream and a reconstructed second video signal of a previous frame to obtain a motion compensated signal; 역이산여현변환(IDCT)된 제2 영상신호와 움직임 보상된 신호를 합하여 제2 영상신호를 복원하는 제 5 단계; 및A fifth step of reconstructing the second video signal by adding the inverse discrete cosine transformed (IDCT) second video signal and the motion compensated signal; And 복원된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하는 제 6 단계A sixth step of reconstructing the reconstructed first and second images to the original resolution and reconstructing the image to the left and right two frames 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화 방법.An image encoding method for performing compensation by reduction of an asymmetric size of a left and right image including a. 영상 복호화 장치에 적용되는 영상 복호화 방법에 있어서, In the video decoding method applied to the video decoding apparatus, 부호화된 비트스트림을 입력받아, 양자화 및 이산여현변환(DCT)된 좌우영상 신호를 역양자화 및 역이산여현변환(IDCT)하는 제 1 단계;A first step of receiving an encoded bitstream and performing inverse quantization and inverse discrete cosine transform (IDCT) on the quantized and discrete cosine transformed left and right image signals; 상기 비트스트림에 실린 움직임 벡터와 이전 프레임의 복원 제1 영상신호를 입력받아, 움직임 보상된 신호를 구하는 제 2 단계;A second step of receiving a motion vector carried in the bitstream and a reconstructed first video signal of a previous frame to obtain a motion compensated signal; 역이산여현변환(IDCT)된 제1 영상신호와 움직임 보상된 신호를 합하여 제1 영상신호를 복원하는 제 3 단계;A third step of reconstructing the first video signal by summing the inverse discrete cosine transformed (IDCT) first video signal and the motion compensated signal; 상기 비트스트림에 실린 변위 벡터와 동일 프레임의 복원 제1 영상신호를 입력받아, 제1 영상의 해상도를 제2 영상 해상도와 동일하도록 전환한 다음, 변이 보상된 신호를 구하는 제 4 단계; A fourth step of receiving a reconstructed first image signal of the same frame as the displacement vector carried in the bitstream, converting the resolution of the first image to be the same as the second image resolution, and then obtaining a disparity compensated signal; 역이산여현변환(IDCT)된 제2 영상신호와 변이 보상된 신호를 합하여 제2 영상신호를 복원하는 제 5 단계; 및 A fifth step of restoring the second video signal by adding the inverse discrete cosine transformed (IDCT) second video signal and the shift compensation signal; And 복원된 제1 및 제2 영상을 원래 해상도로 확대하여 좌우 2프레임의 영상으로 복원하는 제 6 단계A sixth step of reconstructing the reconstructed first and second images to the original resolution and reconstructing the image to the left and right two frames 를 포함하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 장치.Image decoding apparatus for performing compensation by the reduction of the left and right images to the asymmetric size including. 제 19 항 또는 제 20 항에 있어서,The method of claim 19 or 20, 상기 제 6 단계는, The sixth step, 복원된 수평 혹은 수직방향의 비대칭 축소된 좌우영상을 각각 원래 해상도의 2 프레임 영상으로 변환하도록 수평 혹은 수직 방향으로 확대하여 2 프레임의 영상으로 전환하는 것을 특징으로 하는 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 복호화 방법.Reduction of the asymmetrical size of the left and right images, which are converted into two-frame images by enlarging the reconstructed horizontal or vertical asymmetrically reduced left and right images to a two-frame image of the original resolution, respectively. Image decoding method for performing the compensation by.
KR1020030088102A 2003-12-05 2003-12-05 Video encoding/decoding apparatus and method using compensation for the asymmetric decimated left/right-view images KR100587952B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030088102A KR100587952B1 (en) 2003-12-05 2003-12-05 Video encoding/decoding apparatus and method using compensation for the asymmetric decimated left/right-view images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030088102A KR100587952B1 (en) 2003-12-05 2003-12-05 Video encoding/decoding apparatus and method using compensation for the asymmetric decimated left/right-view images

Publications (2)

Publication Number Publication Date
KR20050055163A true KR20050055163A (en) 2005-06-13
KR100587952B1 KR100587952B1 (en) 2006-06-08

Family

ID=37250182

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030088102A KR100587952B1 (en) 2003-12-05 2003-12-05 Video encoding/decoding apparatus and method using compensation for the asymmetric decimated left/right-view images

Country Status (1)

Country Link
KR (1) KR100587952B1 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100704938B1 (en) * 2006-08-25 2007-04-09 주식회사 이시티 Method and apparatus for encoding/decoding stereoscopic images
KR100864859B1 (en) * 2006-12-04 2008-10-23 한국전자통신연구원 Apparatus and method of controlling adaptively bit rate, three dimensional stereo image encoding system using it
US9036714B2 (en) 2009-01-26 2015-05-19 Thomson Licensing Frame packing for video coding
US9118955B2 (en) 2009-06-05 2015-08-25 Samsung Electronics Co., Ltd. Stereo image handling device and method
US9143757B2 (en) 2011-04-27 2015-09-22 Electronics And Telecommunications Research Institute Method and apparatus for transmitting and receiving stereoscopic video
US9185384B2 (en) 2007-04-12 2015-11-10 Thomson Licensing Tiling in video encoding and decoding
US9215445B2 (en) 2010-01-29 2015-12-15 Thomson Licensing Block-based interleaving

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101223205B1 (en) * 2010-10-21 2013-01-17 광주과학기술원 Device and method for transmitting stereoscopic video

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100704938B1 (en) * 2006-08-25 2007-04-09 주식회사 이시티 Method and apparatus for encoding/decoding stereoscopic images
KR100864859B1 (en) * 2006-12-04 2008-10-23 한국전자통신연구원 Apparatus and method of controlling adaptively bit rate, three dimensional stereo image encoding system using it
US9838705B2 (en) 2007-04-12 2017-12-05 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9706217B2 (en) 2007-04-12 2017-07-11 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US10764596B2 (en) 2007-04-12 2020-09-01 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9185384B2 (en) 2007-04-12 2015-11-10 Thomson Licensing Tiling in video encoding and decoding
US10432958B2 (en) 2007-04-12 2019-10-01 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9219923B2 (en) 2007-04-12 2015-12-22 Thomson Licensing Tiling in video encoding and decoding
US9232235B2 (en) 2007-04-12 2016-01-05 Thomson Licensing Tiling in video encoding and decoding
US10298948B2 (en) 2007-04-12 2019-05-21 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9445116B2 (en) 2007-04-12 2016-09-13 Thomson Licensing Tiling in video encoding and decoding
US10129557B2 (en) 2007-04-12 2018-11-13 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9986254B1 (en) 2007-04-12 2018-05-29 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9973771B2 (en) 2007-04-12 2018-05-15 Dolby Laboratories Licensing Corporation Tiling in video encoding and decoding
US9036714B2 (en) 2009-01-26 2015-05-19 Thomson Licensing Frame packing for video coding
US9420310B2 (en) 2009-01-26 2016-08-16 Thomson Licensing Frame packing for video coding
US9118955B2 (en) 2009-06-05 2015-08-25 Samsung Electronics Co., Ltd. Stereo image handling device and method
US9215445B2 (en) 2010-01-29 2015-12-15 Thomson Licensing Block-based interleaving
US9143757B2 (en) 2011-04-27 2015-09-22 Electronics And Telecommunications Research Institute Method and apparatus for transmitting and receiving stereoscopic video

Also Published As

Publication number Publication date
KR100587952B1 (en) 2006-06-08

Similar Documents

Publication Publication Date Title
KR100751422B1 (en) A Method of Coding and Decoding Stereoscopic Video and A Apparatus for Coding and Decoding the Same
KR100667830B1 (en) Method and apparatus for encoding multiview video
US5619256A (en) Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
KR100760258B1 (en) Apparatus for Universal Coding for Multi-View Video
KR100738867B1 (en) Method for Coding and Inter-view Balanced Disparity Estimation in Multiview Animation Coding/Decoding System
JP2009513074A (en) Multi-view video coding using scalable video coding
JP2013533714A (en) Multi-view signal codec
JP2007180981A (en) Device, method, and program for encoding image
KR20030083285A (en) Apparatus for encoding of multi view moving picture
US20120263225A1 (en) Apparatus and method for encoding moving picture
JP2007180982A (en) Device, method, and program for decoding image
Yang et al. An MPEG-4-compatible stereoscopic/multiview video coding scheme
KR102163477B1 (en) Video encoding and decoding method and device using said method
KR100587952B1 (en) Video encoding/decoding apparatus and method using compensation for the asymmetric decimated left/right-view images
KR101348276B1 (en) Method and apparatus for encoding multi-view moving pictures
WO2006110007A1 (en) Method for coding in multiview video coding/decoding system
Wenge et al. Asymmetric stereoscopic video encoding algorithm based on joint compensation prediction
KR20030001758A (en) Apparatus and Method for stereoscopic video coding/decoding with motion and disparity compensated prediction
Adikari et al. A H. 264 compliant stereoscopic video codec
Chang et al. Multi-view image compression and intermediate view synthesis for stereoscopic applications
Jung et al. Efficient stereo video coding based on frame skipping for real-time mobile applications
US20120087594A1 (en) Image-encoding apparatus and image-decoding apparatus for efficiently transmitting a large capacity image
KR20110118744A (en) 3d tv video encoding method, decoding method
KR20090078114A (en) Multi-view image coding method and apparatus using variable gop prediction structure, multi-view image decoding apparatus and recording medium storing program for performing the method thereof
Park et al. View-dependency video coding for asymmetric resolution stereoscopic views

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120531

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee