KR101723953B1 - Method and apparatus for synthesising stereoscopic 3 dimention image - Google Patents

Method and apparatus for synthesising stereoscopic 3 dimention image Download PDF

Info

Publication number
KR101723953B1
KR101723953B1 KR1020100070898A KR20100070898A KR101723953B1 KR 101723953 B1 KR101723953 B1 KR 101723953B1 KR 1020100070898 A KR1020100070898 A KR 1020100070898A KR 20100070898 A KR20100070898 A KR 20100070898A KR 101723953 B1 KR101723953 B1 KR 101723953B1
Authority
KR
South Korea
Prior art keywords
image
eye image
depth
left eye
right eye
Prior art date
Application number
KR1020100070898A
Other languages
Korean (ko)
Other versions
KR20120009885A (en
Inventor
이지영
Original Assignee
주식회사 알티캐스트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 알티캐스트 filed Critical 주식회사 알티캐스트
Priority to KR1020100070898A priority Critical patent/KR101723953B1/en
Publication of KR20120009885A publication Critical patent/KR20120009885A/en
Application granted granted Critical
Publication of KR101723953B1 publication Critical patent/KR101723953B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N2013/40—Privacy aspects, i.e. devices showing different images to different viewers, the images not being viewpoints of the same scene
    • H04N2013/405—Privacy aspects, i.e. devices showing different images to different viewers, the images not being viewpoints of the same scene the images being stereoscopic or three dimensional

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

본 발명에 따른 스테레오스코픽 3차원 영상의 합성 방법은, 3차원 영상을 표현하기 위한 좌안용 영상과 우안용 영상을 입력받는 과정과, 상기 좌안용 영상과 상기 우안용 영상 각각에 합성될 좌안용 3차원 그래픽 객체와 우안용 3차원 그래픽 객체를 입력받는 과정과, 상기 좌안용 및 상기 우안용 3차원 그래픽 객체의 깊이와 상기 좌안용 및 우안용 영상에 포함된 객체의 깊이를 고려하여, 좌안용 영상과 우안용 영상에 포함될 객체들을 재구성함으로써 합성된 좌안용 영상과 합성된 우안용 영상을 생성하는 과정을 포함한다. A method of synthesizing a stereoscopic three-dimensional image according to the present invention comprises the steps of: inputting a left eye image and a right eye image for expressing a three-dimensional image; inputting a left eye image and a right eye image to be synthesized to the left eye image and the right eye image, Dimensional graphic object and a right eye 3D graphic object based on the depth of the left eye and the right eye 3D graphic object and the depth of the object included in the left eye and right eye 3D images, And reconstructing objects to be included in the right eye image to generate a synthesized left eye image and a synthesized right eye image.

Description

스테레오스코픽 3차원 영상의 합성 장치 및 방법{METHOD AND APPARATUS FOR SYNTHESISING STEREOSCOPIC 3 DIMENTION IMAGE}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a stereoscopic 3D image synthesizing apparatus and a stereoscopic 3D stereoscopic image synthesizing apparatus,

본 발명은 스테레오스코픽 3차원 영상을 처리하기 위한 장치 및 방법에 관한 것으로 특히, 스테레오스코픽 3차원 영상에 스테레오스코픽 3차원 영상 또는 그래픽을 합성하기 위한 장치 및 방법에 관한 것이다.
The present invention relates to an apparatus and method for processing a stereoscopic three-dimensional image, and more particularly, to an apparatus and method for synthesizing a stereoscopic three-dimensional image or graphic on a stereoscopic three-dimensional image.

1990년대 중반 이후 평면적인 영상 정보에 깊이 정보를 더하여 실생활에서와 같은 느낄 수 있는 스테레오스코픽(stereoscopic) 디스플레이 시스템이 주목을 받기 시작하였다. 근래에는 3DTV(3 Dimension Television), 입체 영상(stereoscopic vision), 게임, 3차원 애니메이션, 입체 영상 영화 등 영상 산업 전반에 걸쳐 빠르게 발전하고 있다.Since the mid-1990s, stereoscopic display systems, which can feel like in real life, have begun to attract attention by adding depth information to flat image information. In recent years, 3DTV (3 Dimension Television), stereoscopic vision, game, 3D animation, stereoscopic movie and so on are rapidly developing all over the video industry.

스테레오스코픽 영상은 일정한 거리로 이격되어 있는 좌측 카메라와 우측 카메라가 동일한 피사체를 촬영하여 각각 획득한 1쌍의 좌영상과 우영상으로 이루어진다. 이러한 스테레오스코픽 영상은 피사체에 대한 입체감을 LCD(Liquid Crystal Display) 또는 PDP(Plasma Display Panel) 등과 같은 평면 디스플레이 장치에 구현하기 위하여 사용된다. The stereoscopic image is composed of a pair of left and right images obtained by capturing the same subject of the left camera and the right camera which are spaced apart from each other by a predetermined distance. Such a stereoscopic image is used for realizing a stereoscopic effect on a subject in a flat display device such as a liquid crystal display (LCD) or a plasma display panel (PDP).

한편 최근 들어 3차원 영상들이 다양한 영상 매체에서 많이 활용됨에 따라 3차원 영상에 다른 3차원 영상 또는 그래픽을 합성하기 위한 기술의 필요성이 증가하고 있는 추세이다.
In recent years, as 3D images are widely used in various image media, there is an increasing need for a technique for synthesizing 3D images or graphics in 3D images.

본 발명은 스테레오스코픽 3차원 영상들을 합성하기 위한 방법 및 장치를 제공한다. The present invention provides a method and apparatus for synthesizing stereoscopic three-dimensional images.

본 발명은 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 그래픽을 합성하기 위한 방법 및 장치를 제공한다.The present invention provides a method and apparatus for synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional graphic.

본 발명에 따른 스테레오스코픽 3차원 영상의 합성 방법은, 3차원 영상을 표현하기 위한 좌안용 영상과 우안용 영상을 입력 받는 과정과, 상기 좌안용 영상에 포함된 적어도 하나의 좌안용 객체를 획득하고, 상기 우안용 영상에 포함된 적어도 하나의 우안용 객체를 획득하는 과정과, 상기 좌안용 영상과 상기 우안용 영상에 대한 분석 정보를 기반으로 상기 좌안용 영상 내에서 상기 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 우안용 영상 내에서 상기 획득한 적어도 하나의 우안용 객체 각각이 갖는 깊이를 동기화하는 과정과, 상기 동기화에 따른 적어도 하나의 좌안용 객체 각각의 깊이와 적어도 하나의 우안용 객체 각각의 깊이를 고려하여 적어도 하나의 좌안용 추가 객체 각각과 적어도 하나의 우안용 추가 객체 각각의 깊이를 설정하는 과정과, 상기 동기화에 따른 적어도 하나의 좌안용 객체 각각의 깊이와 상기 설정에 따른 상기 적어도 하나의 좌안용 추가 객체 각각의 깊이를 기반으로 상기 좌안용 영상 내에서 상기 적어도 하나의 좌안용 객체와 상기 적어도 하나의 좌안용 추가 객체를 재배치하여 합성된 좌안용 영상을 생성하는 과정과, 상기 동기화에 따른 적어도 하나의 우안용 객체 각각의 깊이와 상기 설정에 따른 상기 적어도 하나의 우안용 추가 객체 각각의 깊이를 기반으로 상기 우안용 영상 내에서 상기 적어도 하나의 우안용 객체와 상기 적어도 하나의 우안용 추가 객체를 재배치하여 합성된 좌안용 영상을 생성하는 과정을 포함할 수 있다.
본 발명에 따른 스테레오스코픽 영상 합성 장치는, 3차원 영상을 표현하기 위한 좌안용 영상과 우안용 영상을 입력 받는 제1 입력부와, 적어도 하나의 좌안용 추가 객체와 적어도 하나의 우안용 추가 객체를 입력 받는 제2 입력부와, 상기 좌안용 영상과 상기 적어도 하나의 좌안용 추가 객체를 사용하여 합성된 좌안용 영상을 생성하고, 상기 우안용 영상과 상기 적어도 하나의 우안용 추가 객체를 사용하여 합성된 우안용 영상을 생성하는 영상 합성부를 포함하고,A stereoscopic three-dimensional image synthesis method according to the present invention includes: inputting a left eye image and a right eye image for expressing a three-dimensional image; acquiring at least one left eye object included in the left eye image; Acquiring at least one right eye object included in the right eye image based on the left eye image and the right eye image based on the left eye image and the right eye image; Synchronizing a depth of each of the at least one left eye object and at least one right eye object in the right eye image; The depth of each of the at least one left eye addition object and at least one right eye addition object is set in consideration of the depth of each object Eye object in the left-eye image based on the depth of each of the at least one left-eye object according to the synchronization and the depth of each of the at least one left-eye additional object according to the setting, Generating a synthesized left eye image by rearranging the at least one left eye supplement object and generating a synthesized left eye image by rearranging the at least one right eye supplement object according to the depth of each of the at least one right eye object and the at least one right eye supplement object according to the setting And rearranging the at least one right eye object and the at least one right eye additional object in the right eye image based on the depth to generate a synthesized left eye image.
A stereoscopic image synthesizing apparatus according to the present invention comprises a first input unit for inputting a left eye image and a right eye image for expressing a three-dimensional image, at least one left eye additional object and at least one right eye additional object Eye image and the at least one left eye additional object, and generates a right eye combined image using the right eye image and the at least one right eye additional object to generate a left eye combined image using the left eye image and the at least one left eye additional object, And an image synthesizing unit for generating an image for use by the user,

여기서, 상기 영상 합성부는, 상기 좌안용 영상으로부터 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 적어도 하나의 좌안용 추가 객체 각각이 갖는 깊이를 기반으로 상기 좌안용 영상 내에서 상기 적어도 하나의 좌안용 객체 각각과 상기 적어도 하나의 좌안용 추가 객체 각각을 재배치하여 합성된 좌안용 영상을 생성하고, 상기 우안용 영상으로부터 획득한 적어도 하나의 우안용 객체 각각이 갖는 깊이와 상기 적어도 하나의 우안용 추가 객체 각각이 갖는 깊이를 기반으로 상기 우안용 영상 내에서 상기 적어도 하나의 우안용 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각을 재배치하여 합성된 우안용 영상을 생성할 수 있다.Here, the image synthesizing unit may synthesize the at least one left eye image in the left eye image based on the depth of each of the at least one left eye object obtained from the left eye image and the depth of each of the at least one left eye additional object, A left eye image obtained by rearranging each of the at least one left eye object and each of the at least one right eye object and the at least one left eye additional object to generate a synthesized left eye image, The right eye image can be generated by rearranging each of the at least one right eye object and the at least one right eye additional object in the right eye image based on the depth of each of the additional objects.

본 발명에 따르면, 서로 다른 스테레오스코픽 3차원 영상들을 합성할 때 각 스테레오스코픽 3차원 영상에 포함되는 객체들의 깊이를 고려함으로써 서로 다른 스테레오스코픽 3차원 영상들을 합성하더라도 입체감을 제공할 수 있다.
According to the present invention, when synthesizing different stereoscopic three-dimensional images, depths of objects included in each stereoscopic three-dimensional image are taken into account, thereby providing stereoscopic effect even when different stereoscopic three-dimensional images are synthesized.

도 1은 본 발명의 제1 실시 예에 따라 스테레오스코픽 3차원(Stereoscopic 3 Dimension : S3D) 영상과 스테레오스코픽 3차원 그래픽을 합성하기 위한 영상 합성장치의 블록 구성도,
도 2는 본 발명의 제1 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도,
도 3은 발명의 제2 실시 예에 따라 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 그래픽을 합성하기 위한 영상 합성장치의 블록 구성도,
도 4는 본 발명의 제2 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도,
도 5는 본 발명의 제3 실시 예에 따른 스테레오스코픽 3차원 영상 합성 장치의 블록 구성도,
도 6은 본 발명의 제3 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도,
도 7은 본 발명의 제4 실시 예에 따른 스테레오스코픽 3차원 영상 합성 장치의 블록 구성도,
도 8은 본 발명의 제4 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도,
도 9는 본 발명의 실시 예에 따라 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 그래픽을 합성하는 과정을 설명하기 위한 도면,
도 10은 본 발명의 실시 예에 따른 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 영상을 합성하는 과정을 설명하기 위한 도면.1 is a block diagram of an image synthesizing apparatus for synthesizing a stereoscopic three-dimensional (3D) image and a stereoscopic three-dimensional graphic according to a first embodiment of the present invention;
2 is a flowchart of a stereoscopic 3D image synthesizing method according to a first embodiment of the present invention,
3 is a block diagram of an image synthesizing apparatus for synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional graphic according to a second embodiment of the present invention.
4 is a flowchart of a stereoscopic 3D image synthesizing method according to a second embodiment of the present invention,
FIG. 5 is a block diagram of a stereoscopic three-dimensional image synthesizing apparatus according to a third embodiment of the present invention. FIG.
FIG. 6 is a flowchart of a stereoscopic three-dimensional image synthesizing method according to a third embodiment of the present invention,
FIG. 7 is a block diagram of a stereoscopic three-dimensional image synthesizing apparatus according to a fourth embodiment of the present invention;
8 is a flowchart of a stereoscopic 3D image synthesizing method according to a fourth embodiment of the present invention,
9 is a diagram for explaining a process of synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional graphic according to an embodiment of the present invention;
10 is a diagram for explaining a process of synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional image according to an embodiment of the present invention.

도 1은 본 발명의 제1 실시 예에 따라 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 그래픽을 합성하기 위한 영상 합성장치의 블록 구성도이다.1 is a block diagram of an image synthesizing apparatus for synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional graphic according to a first embodiment of the present invention.

도 1을 참조하면, S3D 영상을 구성하는 좌안용 영상(100a)과 우안용 영상(100b)은 입력부들(105a, 105b)로 각각 입력될 수 있다. 상기 입력부(105a, 105b) 각각은 입력된 좌안용 영상(100a)과 우안용 영상(100b)을 객체 및 깊이 인식부(110a, 110b)로 출력한다.
상기 객체 및 깊이 인식부(110a, 110b)는 좌안용 영상(100a)과 우안용 영상(100b)에 대해 분석 정보를 공유함으로써, 상기 좌안용 영상(100a)과 상기 우안용 영상(100b)에 존재하는 객체가 서로 동일한 객체인지를 판단할 수 있다. 상기 좌안용 영상(100a)과 상기 우안용 영상(100b)에 존재하는 객체가 서로 동일한 객체라면, 상기 객체 및 깊이 인식부(110a, 110b)는 각 객체의 깊이를 서로 동일하게 하는 동기화를 수행한다.
상기 객체 및 깊이 인식부(110a 110b)는 좌우안용 영상(100a, 100b)에 포함된 객체의 편차를 이용하여 좌우안용 영상(100a, 100b)에 포함된 각 객체의 깊이를 정확히 인식할 수 있다. 상기 객체 및 깊이 인식부(110a, 110b)는 좌안용 영상(100a)에 포함된 객체와 우안용 영상(100b)에 포함된 객체간의 편차를 사용하여 깊이를 결정한다. Referring to FIG. 1, the left eye image 100a and the right eye image 100b constituting the S3D image may be input to the input units 105a and 105b, respectively. Each of the input units 105a and 105b outputs the inputted left eye image 100a and right eye image 100b to the object and depth recognition units 110a and 110b.
The object and depth recognition units 110a and 110b share the analysis information on the left eye image 100a and the right eye image 100b and thereby are present in the left eye image 100a and the right eye image 100b It is possible to judge whether or not objects to be created are the same object. If the objects existing in the left eye image 100a and the right eye image 100b are the same objects, the object and depth recognition units 110a and 110b synchronize the objects so that their depths are equal to each other .
The object and depth recognition units 110a and 110b can accurately recognize depths of respective objects included in the left and right images 100a and 100b using the deviation of the objects included in the left and right images 100a and 100b. The object and depth recognition units 110a and 110b determine a depth using a deviation between an object included in the left eye image 100a and an object included in the right eye image 100b.

설명의 편의를 위해 도 9의 우안용 영상(900a)과 좌안용 영상(900b)에 포함된 사람 객체(904a, 904b)와 집 객체(902a, 902b)를 예로서, 객체의 깊이를 인식하는 방법에 대하여 설명하기로 하겠다.
도 9를 참조하면, 집 객체(902a, 902b)는 사람 객체(904a, 904b)보다 뒤에 위치하고 있으므로, 우안용 영상(900a)의 집 객체(902a)와 좌안용 영상(900b)의 집 객체(902b)의 편차는 우안용 영상(900a)의 사람 객체(904a)와 좌안용 영상(900b)의 사람 객체의 편차보다 상대적으로 커야 한다. 이러한 좌우안용 영상에 포함된 객체간의 편차를 이용하여 각 객체에 해당하는 깊이를 인식할 수 있다.For convenience of explanation, a method of recognizing the depth of an object using, for example, human objects 904a and 904b and house objects 902a and 902b included in the right eye image 900a and the left eye image 900b, Will be described.
9, since the house objects 902a and 902b are located after the human objects 904a and 904b, the house objects 902a and 902b of the right eye image 900a and the left eye image 900b, respectively, Of the right eye image 900a should be relatively larger than the deviation of the human object of the human eye object 904a and the left eye image 900b of the right eye image 900a. The depth corresponding to each object can be recognized using the deviation between the objects included in the left and right images.

스테레오스코픽 좌우안용 영상에서 객체의 깊이를 인식하는 기술은 일반적이므로 더 이상의 상세한 설명은 생략하기로 한다. 그리고, 좌우안용 영상(100a, 100b)에 포함된 모든 객체들의 깊이들을 인식한 객체 및 깊이 인식부(110a, 110b)는 좌안용 영상(100a)과 우안용 영상(100b)에서의 동일 객체가 동일한 깊이를 갖도록 깊이를 동기화시킨다. Since the technique of recognizing the depth of an object in stereoscopic left and right images is general, a detailed description thereof will be omitted. The depth recognition units 110a and 110b that recognize the depths of all the objects included in the left and right images 100a and 100b recognize that the same objects in the left eye image 100a and the right eye image 100b are the same Synchronize depth to have depth.

그리고, 객체 및 깊이 인식부(110a, 110b)는 좌안용 영상(100a)과 우안용 영상(100b) 각각에 존재하는 객체와 그 객체에 해당하는 깊이에 대한 정보를 영상 합성부(120)로 출력한다. The object and depth recognition units 110a and 110b output information about an object existing in each of the left eye image 100a and the right eye image 100b and a depth corresponding to the object to the image combining unit 120 do.

영상 합성부(120a, 120b)는 S3D 그래픽 생성부(115)로부터 상기 좌안용 영상(100a)에 합성될 좌안용 S3D 그래픽 객체가 포함된 프레임과 상기 우안용 영상(100b)에 합성될 우안용 S3D 그래픽 객체가 포함된 프레임을 입력 받을 경우, 상기 좌우안용 S3D 그래픽 객체와 객체의 깊이 정보를 입력 받는다. 그러나, 영상 합성부(120a, 120b)는 프레임이 아니라 좌안용 영상(100a)과 우안용 영상(100b)에 합성될 S3D 그래픽 객체만 입력되는 경우, 그 객체와 객체의 깊이 정보 외에 객체의 위치 정보를 추가로 입력 받는다. The image composing units 120a and 120b generate a right eye S3D and a left eye S3D to be composited into the right eye image 100b and a frame including the left eye S3D graphic object to be synthesized to the left eye image 100a from the S3D graphic generating unit 115, When receiving a frame including a graphic object, the depth information of the left and right S3D graphic objects and the object is input. However, in the case where only the S3D graphic object to be composited into the left eye image 100a and the right eye image 100b is input, not only the frame, but also the depth information of the object and the object, .

그럼 이하에서 본 발명의 실시 예에 따라 S3D 그래픽 생성부(115)가 좌안용 영상(100a)과 우안용 영상(100b)에 합성될 S3D 그래픽 객체, S3D 그래픽 객체의 위치 및 깊이 정보를 영상 합성부(120a, 120b)로 각각 출력하는 것에 대하여 상세히 살펴보기로 한다. Hereinafter, the S3D graphic generation unit 115 generates S3D graphic objects and S3D graphic objects to be synthesized in the left eye image 100a and the right eye image 100b according to an embodiment of the present invention, (120a, 120b), respectively.

우선, 본 발명의 실시 예에 따라 S3D 그래픽 생성부(115)가 좌안용 영상(100a)과 우안용 영상(100b)에 합성될 S3D 그래픽 객체를 출력하는 경우를 먼저 설명하기로 한다. 이러한 경우에는 S3D 그래픽 생성부(115)는 입력된 좌안용 영상(100a)과 우안용 영상(100b)의 객체와 객체의 깊이 정보로부터, 상기 좌안용 영상(100a)과 우안용 영상(100b)에 각각 존재하는 객체의 위치와 깊이를 파악하여, 상기 좌안용 영상(100a)과 우안용 영상(100b)의 객체에 각각 합성될 S3D 그래픽 객체의 위치와 깊이 정보를 결정한 후, 결정된 상기 S3D 그래픽 객체의 위치 정보와 깊이 정보를 S3D 그래픽 객체와 함께 영상 합성부(120a, 120b)로 각각 출력한다.
First, a case where the S3D graphic generator 115 outputs the S3D graphic object to be synthesized to the left eye image 100a and the right eye image 100b according to an embodiment of the present invention will be described first. In this case, the S3D graphic generation unit 115 generates the left eye image 100a and the right eye image 100b from the inputted depth information of the objects and the objects of the left eye image 100a and the right eye image 100b, Determines the position and depth information of the S3D graphic object to be synthesized respectively with the objects of the left eye image 100a and the right eye image 100b and determines the position and depth information of the S3D graphic object And outputs the position information and the depth information to the image composing units 120a and 120b together with the S3D graphic object.

만약, S3D 그래픽 객체를 좌안용 영상(100a) 및 우안용 영상(100b)과 한 프레임 단위로 합성할 경우에는, S3D 그래픽 생성부(115)는 좌안용 영상(100a)의 프레임과 우안용 영상(100b)의 프레임에 합성될 S3D 그래픽 객체가 포함된 프레임을 영상 합성부(120a, 120b)로 각각 출력하게 되므로, S3D 그래픽 객체의 위치를 고려할 필요 없이, S3D 그래픽 객체가 포함된 프레임과 S3D 그래픽 객체의 깊이 정보만을 영상 합성부(120a, 120b)로 출력한다.
If the S3D graphic object is synthesized with the left eye image 100a and the right eye image 100b in units of one frame, the S3D graphic generator 115 generates a frame of the left eye image 100a and a frame of the right eye The frame including the S3D graphic object and the S3D graphic object can be generated without considering the position of the S3D graphic object. Accordingly, since the frame including the S3D graphic object is output to the image synthesizing units 120a and 120b, To the image combining units 120a and 120b.

그리고, 영상 합성부(120a, 120b)는 하나의 프레임 단위로 좌우안용 영상(100a, 100b)과 좌우안용 S3D 그래픽 객체를 합성할 경우에는, 상기 객체 및 깊이 인식부(110a, 110b)로부터 출력된 좌우안용 영상의 객체의 깊이와 상기 S3D 그래픽 생성부(115)로부터 입력된 좌우안용 S3D 그래픽의 객체의 깊이를 고려하여, 좌우안용 영상(100a, 100b)의 각 프레임과 좌우안용 S3D 그래픽 객체가 포함된 프레임을 합성함으로써, 합성된 좌우안용 영상(122a, 122b)을 출력한다. When the left and right images 100a and 100b and the left and right S3D graphic objects are synthesized in units of one frame, the image synthesizing units 120a and 120b synthesize the left and right S3D graphic objects, The respective frames of the left and right images 100a and 100b and the left and right S3D graphic objects are included in consideration of the depth of the object of the left and right images and the depth of the objects of the left and right S3D graphics inputted from the S3D graphic generator 115 And synthesizes the synthesized left and right images 122a and 122b.

반면, 영상 합성부(120a, 120b)는 좌우안용 영상(100a, 100b)에 합성될 좌우안용 S3D 그래픽 객체와 객체의 위치 및 깊이 정보를 입력받을 경우에는, 상기 객체 및 깊이 인식부(110a, 110b)로부터 출력된 좌우안용 영상의 객체의 깊이 및 위치와 상기 S3D 그래픽 생성부(115)로부터 입력된 좌우안용 S3D 그래픽 객체의 깊이 및 위치를 고려하여, 좌안용 영상과 우안용 영상에 포함될 객체들을 재구성함으로써, 합성된 좌안용 영상(122a)과 합성된 우안용 영상(122b)를 생성하여 출력한다. 이때 영상 합성부(120a, 120b)는 좌우안용 영상(100a, 100b)과 좌우안용 S3D 그래픽을 합성할 때 상기 좌우안용 S3D 그래픽 객체가 합성될 위치 정보에 따라 위치를 결정하고, 결정된 위치를 고려하여 각 객체의 깊이에 따라 객체를 재구성함으로써 상기 좌우안용 영상(100a, 100b)과 좌우안용 3SD 그래픽을 각각 합성할 수 있다.On the other hand, when receiving the S3D graphic objects to be synthesized in the left and right images 100a and 100b and the position and depth information of the object, the image synthesizing units 120a and 120b acquire the depth information of the object and the depth recognition units 110a and 110b And reconstructs the objects to be included in the left eye image and the right eye image in consideration of the depth and position of the object of the left and right images outputted from the S3D graphic generator 115 and the depth and position of the left and right S3D graphic objects input from the S3D graphic generator 115, Thereby generating and outputting the synthesized left-eye image 122a and synthesized right-eye image 122b. When combining the left and right images 100a and 100b with the left and right S3D graphics, the image composing units 120a and 120b determine positions according to position information to be synthesized with the left and right S3D graphic objects, The left and right images 100a and 100b and the left and right 3SD graphics can be synthesized by reconstructing an object according to the depth of each object.

본 발명에서는 좌안용 영상(100a)에 포함된 객체들과 좌안용 S3D 그래픽 객체의 깊이를 비교하고, 그 중 깊이가 큰 객체부터 깊이가 작은 객체 순으로 객체를 재배치함으로써, 상기 좌안용 영상(100a)과 상기 좌안용 3SD 그래픽을 합성하여 합성된 좌안용 영상(122a)을 출력한다. 즉 본 발명에서는 깊이가 큰 객체를 먼저 생성하고, 깊이가 작은 객체 순으로 객체를 생성하여 합성된 영상을 생성하게 된다. In the present invention, the depths of objects included in the left eye image 100a and the left eye 3D graphic object are compared, and the objects are rearranged in descending order of depth to size, ) And the left-eye 3SD graphic, and outputs the synthesized left-eye image 122a. That is, in the present invention, an object having a large depth is first generated, and an object is generated in descending order of depth, thereby generating a synthesized image.

영상 합성부(120b)는 우안용 영상(100b)과 우안용 3SD 그래픽에 대하여도 좌안용 영상(100a)과 좌안용 S3D 그래픽을 합성할 때와 동일한 동작을 수행한다. 본 발명의 실시 예에 따라 영상 합성부(120a, 120b)가 객체의 깊이에 따라 좌우안용 영상(100a, 100b)과 좌우안용 S3D 그래픽을 합성하는 과정은 첨부된 도 9를 통해 상세히 설명하기로 한다.
The image synthesizing unit 120b performs the same operation as that for synthesizing the left eye image 100a and the left eye S3D graphic with respect to the right eye image 100b and the right eye 3SD graphic. The process of synthesizing the left and right images 100a and 100b and the left and right S3D graphics according to the depth of the object by the image composing units 120a and 120b according to the embodiment of the present invention will be described in detail with reference to FIG. .

또한 이외에도 영상 합성부(120a)는 상기 좌안용 영상(100a)에 포함된 객체들의 깊이들과 좌안용 S3D 그래픽 객체의 깊이를 비교한 후, 깊이가 큰 객체에서 깊이가 작은 객체에 의해 가려지는 영역에 대해서는 클립 아웃(Clip out)하여 상기 깊이가 큰 그래픽 객체가 깊이가 작은 객체에 의해 가려지지 않고 표시되도록 상기 좌안용 영상(100a)과 상기 좌안용 S3D 그래픽을 합성하여 합성된 좌안용 영상(122a)을 출력한다.
In addition, the image synthesizing unit 120a compares the depths of the objects included in the left eye image 100a with the depths of the left eye 3D graphic object, and then, Eye image 100a and the left-eye S3D graphic so that the graphic object having a large depth is displayed without being cloaked by an object having a small depth, ).

또한 다른 방식으로 본 발명의 실시 예에서 영상 합성부(120a)는 상기 좌안용 영상(100a)에 포함된 객체들의 깊이들과 좌안용 S3D 그래픽 객체의 깊이를 비교한 후, 상기 좌안용 영상(100a)에 포함된 객체들 중 상기 S3D 그래픽 객체의 깊이와 동일한 깊이를 갖는 객체가 존재할 경우, 미리 정해진 설정에 따라 상기 좌안용 영상(100a)에 포함된 객체가 상기 S3D 그래픽 객체 위에 표시되도록 또는 상기 S3D 그래픽 객체가 상기 좌안용 영상(100a) 위에 표시되도록 객체의 깊이를 조절할 수 있다. 예컨대, 상기 좌안용 영상(100a)에 포함된 객체가 상기 S3D 그래픽 객체 위에 표시되도록 설정되어 있다면, 상기 좌안용 영상(100a)에 포함된 객체의 깊이를 상기 S3D 그래픽 객체의 깊이보다 상대적으로 작은 깊이로 결정하고, 그 결정된 깊이에 따라 상기 좌안용 영상(100a)과 상기 좌안용 S3D 그래픽을 합성하여 합성된 좌안용 영상(122a)을 출력한다. 반면, 상기 S3D 그래픽 객체가 상기 좌안용 영상(100a)에 포함된 객체 위에 표시되도록 설정되어 있다면, 상기 S3D 그래픽 객체의 깊이를 상기 좌안용 영상(100a)에 포함된 객체의 깊이보다 상대적으로 작은 깊이로 결정하고, 그 결정된 깊이에 따라 상기 좌안용 영상(100a)과 상기 좌안용 S3D 그래픽을 합성하여 합성된 좌안용 영상(122a)을 출력한다.
Alternatively, in an embodiment of the present invention, the image synthesizing unit 120a compares the depths of objects included in the left eye image 100a with the depths of the left eye 3D graphic object, and then outputs the left eye image 100a , An object included in the left eye image 100a is displayed on the S3D graphic object in accordance with a predetermined setting, or the S3D graphic object is displayed on the S3D graphic object when the object having the same depth as the S3D graphic object exists, The depth of the object can be adjusted so that the graphic object is displayed on the left eye image 100a. For example, if the object included in the left eye image 100a is set to be displayed on the S3D graphic object, the depth of the object included in the left eye image 100a is set to a depth that is relatively smaller than the depth of the S3D graphic object And synthesizes the left-eye image 100a and the left-eye S3D graphic according to the determined depth, and outputs the synthesized left-eye image 122a. On the other hand, if the S3D graphic object is set to be displayed on the object included in the left eye image 100a, the depth of the S3D graphic object is set to a depth smaller than the depth of the object included in the left eye image 100a And synthesizes the left-eye image 100a and the left-eye S3D graphic according to the determined depth, and outputs the synthesized left-eye image 122a.

지금까지는 좌안용 영상(100a)과 좌안용 S3D 그래픽을 합성하는 것에 대해서만 설명하였지만, 우안용 영상(100b)에 대해서도 영상 합성부(120b)는 영상 합성부(120a)에서 행한 동작과 동일한 동작을 통해 우안용 영상(100b)과 우안용 3SD 그래픽을 합성하여 합성된 우안용 영상(122b)를 출력한다. Although only the synthesis of the left-eye image 100a and the left-eye S3D graphic has been described so far, the image synthesizing unit 120b also performs the same operation as that performed by the image synthesizing unit 120a with respect to the right eye image 100b Synthesizes the right eye image 100b and the right eye 3SD graphic, and outputs the synthesized right eye image 122b.

그리고, 도 1에서는 좌안용 영상(100a)과 우안용 영상(100b) 각각에 대해 입력부(105a, 105b), 객체 및 깊이 인식부(110a, 110b), 영상 합성부(120a, 120b)가 존재하는 것으로 도시하였지만, 참조번호 105, 110, 120과 같이 하나의 블록으로 구성할 수도 있다.
1, input units 105a and 105b, object and depth recognition units 110a and 110b, and image composing units 120a and 120b exist for the left eye image 100a and the right eye image 100b, respectively However, it is also possible to configure one block as denoted by reference numerals 105, 110 and 120.

도 2는 본 발명의 제1 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도이다.2 is a flowchart of a stereoscopic 3D image synthesizing method according to a first embodiment of the present invention.

먼저, 200단계에서 스테레오스코픽 3차원 영상 합성 장치는 좌안용 영상과 우안용 영상을 입력받고, 202단계에서 상기 200단계에서 입력된 영상들에 포함된 객체들과 객체들 각각의 깊이를 인식한다. 스테레오스코픽 3 차원 영상에서 객체와 객체의 깊이를 인식하는 기술은 일반적인 기술이므로 본 발명에서 논하지는 않기로 한다. First, in step 200, the stereoscopic three-dimensional image synthesizer receives the left eye image and the right eye image, and recognizes the depths of the objects and objects included in the images input in step 200 in step 202. Techniques for recognizing depths of objects and objects in a stereoscopic three-dimensional image are common techniques and will not be discussed in the present invention.

204단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 202단계에서 인식된 객체들을 분석하고, 상기 분석된 객체들 간의 깊이를 동기화하기 위해 좌안용 영상과 우안용 영상에 존재하는 객체가 동일한 객체인지를 판단한다. 그리고, 동일한 객체라면 객체의 깊이들을 서로 동일하게 하는 동기화를 수행한다. 상기 스테레오스코픽 3차원 영상 합성 장치는 206단계에서 좌안용 영상과 우안용 영상에 포함된 객체와 깊이를 결정한 후, 208단계에서 좌안용 그래픽 및 우안용 그래픽의 객체와 깊이 값을 입력 받는다. 이때 상기 좌안용 그래픽과 우안용 그래픽의 객체에 대한 깊이 값은 상기 좌안용 그래픽과 우안용 그래픽을 삽입할 위치에 상응하는 깊이 값에 의해 결정될 수 있다.In step 204, the stereoscopic three-dimensional image synthesizing apparatus analyzes the objects recognized in step 202 and determines whether the objects existing in the left eye image and the right eye image are the same object in order to synchronize the depths of the analyzed objects do. If the object is the same, synchronization is performed to make the depths of the objects equal to each other. In step 206, the stereoscopic three-dimensional image synthesizer determines an object and a depth included in the left eye image and the right eye image in step 206, and then inputs the object and the depth value of the left eye graphic and the right eye graphic in step 208. At this time, the depth values of the left-eye graphics and the right-eye graphics objects may be determined by the depth values corresponding to the positions of the left-eye graphics and the right-eye graphics.

상기 208단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 200단계에서 입력된 좌안용 영상과 우안용 영상 각각에 S3D 그래픽 객체를 삽입하여 합성할 경우에는 좌안용 영상의 프레임과 우안용 영상의 프레임에 S3D 그래픽 객체가 포함된 프레임을 각각 합성하는 것에 비해 S3D 그래픽 객체의 위치 정보도 추가로 입력받는다. If the S3D graphic object is inserted into each of the left eye image and the right eye image input in step 200 and synthesized in step 208, the stereoscopic three-dimensional image synthesizer synthesizes the S3D image in the frames of the left eye image and the right eye image, The position information of the S3D graphic object is further input as compared with the synthesis of the frame including the graphic object.

그리고, 스테레오스코픽 3차원 영상 합성 장치는 210단계에 좌안용 영상에 포함된 객체와 좌안용 그래픽 객체의 깊이에 따라 객체들을 재배치하여 합성된 좌안용 영상을 생성한 후 출력하고, 212단계에서 우안용 영상에 포함된 객체와 우안용 그래픽 객체의 깊이에 따라 객체들을 재배치하여 합성된 우안용 영상을 생성한 후 출력한다. 한편 상기 합성된 좌안용 영상의 생성과 상기 합성된 우안용 영상의 생성은 동시에 처리될 수 있는 과정이다. In step 210, the stereoscopic three-dimensional image synthesizing apparatus rearranges the objects according to the depths of the objects included in the left eye image and the left eye image graphic object to generate a synthesized left eye image and outputs the synthesized left eye image in step 210. In step 212, Rearranges the objects according to the depth of the object included in the image and the right eye graphic object, and outputs the synthesized right eye image. Meanwhile, the synthesized left eye image and the synthesized right eye image can be simultaneously processed.

상기 210단계와 212단계에서 합성된 좌우안용 영상을 생성하는 과정을 좀더 상세히 설명하면 다음과 같다.The process of generating the synthesized left and right images in steps 210 and 212 will be described in more detail as follows.

210단계와 212단계에서 스테레오스코픽 3차원 영상 합성 장치가 하나의 프레임 단위로 좌우안용 영상과 좌우안용 S3D 그래픽 객체를 각각 합성할 경우에는, 상기 좌우안용 영상의 객체의 깊이와 상기 좌우안용 S3D 그래픽의 객체의 깊이를 고려하여, 상기 좌우안용 영상의 각 프레임과 상기 좌우안용 S3D 그래픽 객체가 포함된 프레임을 합성함으로써, 합성된 좌우안용 영상을 출력한다. When the stereoscopic three-dimensional image synthesizer synthesizes the left and right images and the left and right S3D graphic objects in units of frames in steps 210 and 212, the depth of the object of the left and right images and the depth of the left and right S3D graphics The synthesized left and right images are synthesized by combining each frame of the left and right images and the frame including the left and right S3D graphic objects in consideration of the depth of the object.

반면, 하나의 프레임 단위로 좌우안용 영상과 좌우안용 S3D 그래픽 객체를 합성하는 경우가 아니라면, 210단계와 212단계에서 스테레오스코픽 3차원 영상 합성 장치가 좌우안용 영상에 합성될 좌우안용 S3D 그래픽 객체와 깊이 정보만을 입력받을 경우에는, 상기 합성될 좌우안용 S3D 그래픽 객체의 위치를 추가로 입력받는다. 그리고, 스테레오스코픽 3차원 영상 장치는 상기 합성될 좌우안용 S3D 그래픽 객체의 위치에서, 좌우안용 영상의 객체의 깊이와 상기 좌우안용 영상에 합성될 좌우안용 S3D 그래픽의 객체의 깊이를 고려하여, 상기 좌우안용 S3D 그래픽 객체와 좌안용 영상과 우안용 영상에 포함될 객체들을 재구성함으로써, 합성된 합성된 좌우안용 영상을 각각 생성하여 출력한다.On the other hand, if it is not the case that the left and right images and the left and right S3D graphic objects are synthesized on a frame-by-frame basis, the stereoscopic three-dimensional image synthesizing apparatus synthesizes left and right S3D graphic objects and depth When receiving only the information, the position of the left and right S3D graphic objects to be synthesized is further input. The stereoscopic three-dimensional imaging apparatus considers the depth of the object of the left and right images and the depth of the object of the left and right S3D graphics to be composited into the left and right images at the positions of the left and right S3D graphic objects to be synthesized, And reconstructs the objects to be included in the S3D graphic object, the left eye image, and the right eye image, thereby generating and outputting the combined synthesized left and right images, respectively.

도 3은 발명의 제2 실시 예에 따라 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 그래픽을 합성하기 위한 영상 합성장치의 블록 구성도이다.3 is a block diagram of an image synthesizing apparatus for synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional graphic according to a second embodiment of the present invention.

본 발명의 제2 실시 예에서는 좌안용 영상과 우안용 영상에 포함된 객체와 객체의 깊이 정보를 외부로부터 입력받는 점이 본 발명의 제1 실시 예와의 차이점이다. The second embodiment differs from the first embodiment in that depth information of objects and objects included in the left eye image and the right eye image are inputted from the outside.

먼저, 도 3에서 좌안용 영상(300a)과 우안용 영상(300b)은 입력부들(305a, 305b)로 각각 입력된다. 그리고, 본 발명의 제2 실시 예에서 입력부(305a, 305b)는 상기 좌안용 영상(300a)에 포함된 객체와 각 객체 별 깊이 정보(310a), 상기 우안용 영상(300b)에 포함된 객체와 각 객체 별 깊이 정보(310b)를 각각 외부로부터 입력받는다. 이때 상기 좌안용 영상(300a)에 포함된 객체와 깊이(310a)와 상기 우안용 영상(300b)에 포함된 객체와 각 객체 별 깊이 정보(310b)는 상기 좌안용 영상(300a) 및 상기 우안용 영상(300b)를 생성한 컨텐츠 공급자로부터 제공받을 수 있다. 3, the left eye image 300a and the right eye image 300b are input to the input units 305a and 305b, respectively. In the second embodiment of the present invention, the input units 305a and 305b include objects included in the left eye image 300a, depth information 310a for each object, objects included in the right eye image 300b, And depth information 310b for each object. At this time, the object 310a included in the left eye image 300a, the object 310b included in the right eye image 300b, and the depth information 310b for each object are stored in the left eye image 300a and the right eye image 300a, And may be provided from the content provider that generated the image 300b.

입력부(305a, 305b)는 입력된 좌우안용 영상들(300a, 300b)과 각 영상에 포함된 객체 및 각 객체 별 깊이 정보를 영상 합성부(320a, 320b)로 출력한다. The input units 305a and 305b output the inputted left and right images 300a and 300b and the objects included in each image and the depth information of each object to the image synthesizers 320a and 320b.

S3D 그래픽 생성부(315)와 영상 합성부(320a, 320b)는 도 1의 S3D 그래픽 생성부(115)와 영상 합성부(120a, 120b) 각각과 동일한 동작을 수행하여 합성된 좌안용 영상(322a)과 합성된 우안용 영상(322b)를 생성하므로, 상세한 설명은 생략하기로 한다. The S3D graphic generation unit 315 and the image synthesis units 320a and 320b perform the same operations as the S3D graphic generation unit 115 and the image synthesis units 120a and 120b shown in FIG. And the right eye image 322b synthesized with the right eye image 322b, and thus a detailed description thereof will be omitted.

그리고, 도 3에서는 좌안용 영상(300a)과 우안용 영상(300b) 각각에 대해 입력부(305a, 305b), 영상 합성부(320a, 320b)가 존재하는 것으로 도시하였지만, 참조번호 305, 320과 같이 하나의 블록으로 구성할 수도 있다.
Although the input units 305a and 305b and the image synthesizing units 320a and 320b exist in the left eye image 300a and the right eye image 300b in FIG. 3, It may be constituted by one block.

도 4는 본 발명의 제2 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도이다. 4 is a flowchart of a stereoscopic 3D image synthesizing method according to a second embodiment of the present invention.

스테레오스코픽 3차원 영상 합성 장치는 400단계에서 스테레오스코픽 3차원 좌우안용 영상의 객체와 각 객체 별 깊이 정보를 입력 받은 후, 405단계에서 좌우안용 영상과 합성할 스테레오스코픽 3차원 그래픽 객체와 깊이를 입력받는다. 상기 405단계에서는 전술한 바와 같이 상기 좌우안용 영상과 합성할 스테레오스코픽 3차원 그래픽 객체의 위치에 대한 정보도 추가로 입력 받을 수 있다. 그리고, 410단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 입력받은 스테레오스코픽 좌안용 영상에 포함된 객체들을 상기 입력받은 객체 별 깊이 정보에 따라 재배치하고, 상기 입력받은 스테레오스코픽 우안용 영상에 포함된 객체들을 상기 입력받은 객체 별 깊이 정보에 따라 재배치함으로써, 합성된 좌안용 영상과 합성된 우안용 영상을 생성하여 출력한다.
In step 400, the stereoscopic 3D image synthesizer receives the objects of the stereoscopic three-dimensional left and right images and the depth information of each object in step 400. Then, in step 405, the stereoscopic 3D image synthesizer synthesizes the stereoscopic three- Receive. In step 405, information on the position of the stereoscopic three-dimensional graphic object to be synthesized with the left and right images may be additionally input as described above. In step 410, the stereoscopic three-dimensional image synthesizing apparatus rearranges the objects included in the inputted stereo-scopic left-eye image according to the input depth information of the object, and outputs the object included in the inputted stereoscopic right- Are rearranged according to the depth information of the input object, thereby generating and outputting the synthesized right eye image and the synthesized right eye image.

도 5는 본 발명의 제3 실시 예에 따른 스테레오스코픽 3차원 영상 합성 장치의 블록 구성도이다. 5 is a block diagram of a stereoscopic three-dimensional image synthesizing apparatus according to a third embodiment of the present invention.

먼저, 제1 좌안용 영상(500a)과 제1 우안용 영상(500b)은 입력부들(505a, 505b)로 각각 입력되고, 각 입력부(505a, 505b)는 입력된 제1 좌안용 영상(500a)과 제1 우안용 영상(500b)을 객체 및 깊이 인식부(510a, 510b)로 각각 출력한다. 객체 및 깊이 인식부(510a, 510b)는 제1 좌안용 영상(500a)과 제1 우안용 영상(500b)에 대해 분석 정보를 공유함으로써, 제1 좌안용 영상(500a)과 제1 우안용 영상(500b)에 존재하는 객체가 서로 동일한 객체인지를 판단하고, 서로 동일한 객체라면, 각 객체의 깊이를 서로 동일하게 하는 동기화를 수행한다. The first left eye image 500a and the first right eye image 500b are input to the input units 505a and 505b respectively and the input units 505a and 505b input the input first left eye image 500a, And the first right eye image 500b to the object and depth recognition units 510a and 510b, respectively. The object and depth recognition units 510a and 510b share the analysis information on the first left eye image 500a and the first right eye image 500b to generate the first left eye image 500a and the first right eye image 500b, It is determined whether the objects existing in the object 500b are identical to each other. If they are the same object, synchronization is performed such that the depths of the objects are equal to each other.

도 5에서 객체 및 깊이 인식부(510a, 510b)는 제1 좌우안용 영상(500a, 500b)에 각각 포함된 객체의 편차를 이용하여 제1 좌우안용 영상(500a, 500b)에 포함된 각 객체의 깊이를 정확히 인식할 수 있다. 스테레오스코픽 좌우안용 영상에서 객체의 깊이를 인식하는 기술은 일반적이므로 상세한 설명은 생략하기로 한다. 그리고, 제1 좌우안용 영상(500a, 500b)에 포함된 모든 객체들의 깊이들을 인식한 객체 및 깊이 인식부(510a, 510b)는 제1 좌안용 영상(500a)과 제1 우안용 영상(500b) 각각에 존재하는 객체와 그 객체에 해당하는 깊이에 대한 정보를 영상 합성부(530a, 530b)로 출력한다. In FIG. 5, the object and depth recognition units 510a and 510b calculate the depth of each object included in the first left and right images 500a and 500b using the deviation of the objects included in the first left and right images 500a and 500b, The depth can be accurately recognized. Since the technique of recognizing the depth of an object in stereoscopic left and right images is general, a detailed description will be omitted. The depth recognition units 510a and 510b recognize the depths of all the objects included in the first left and right images 500a and 500b and recognize the depths of the first left eye image 500a and the first right eye image 500b, And outputs information on the objects existing in the respective objects and depths corresponding to the objects to the image composing units 530a and 530b.

입력부(520a, 520b)는 상기 제1 좌안용 영상(500a) 및 상기 제1 우안용 영상(500b)과 합성할 제2 좌안용 영상(515a) 및 제2 우안용 영상(515b)을 입력받아 객체 및 깊이 인식부(525a, 525b)로 출력한다. 객체 및 깊이 인식부(525a, 525b)는 상기 제2 좌안용 영상(515a)과 상기 제2 우안용 영상(515b)에 대해 분석 정보를 공유함으로써, 제2 좌안용 영상(515a)과 제2 우안용 영상(515b)에 존재하는 객체가 서로 동일한 객체인지를 판단하고, 서로 동일한 객체라면, 각 객체의 깊이를 서로 동일하게 하는 동기화를 수행한다. The input units 520a and 520b receive the second left eye image 515a and the second right eye image 515b to be combined with the first left eye image 500a and the first right eye image 500b, And depth recognition units 525a and 525b. The object and depth recognition units 525a and 525b share the analysis information on the second left eye image 515a and the second right eye image 515b to generate the second left eye image 515a and the second right eye image 515b, It is determined whether the objects existing in the use image 515b are the same objects. If they are the same object, synchronization is performed such that the depths of the objects are equal to each other.

그리고, 객체 및 깊이 인식부(525a, 525b)는 제2 좌안용 영상(515a)과 제2 우안용 영상(515b) 각각에 존재하는 객체와 그 객체에 해당하는 깊이를 결정한 후, 영상 합성부(530a, 530b)로 출력한다. 이를 위해 상기 객체 및 깊이 인식부(525a, 525b)는 상기 제1 좌안용 영상의 객체 및 각 객체 별 깊이와 제1 우안용 영상의 객체 및 객체 별 깊이를 고려하여 상기 제2 좌안용 영상의 객체와 상기 제2 우안용 영상의 객체의 깊이를 결정할 수 있다. The object and depth recognition units 525a and 525b determine depths corresponding to the objects existing in the second left eye image 515a and the second right eye image 515b and their depths, 530a, and 530b. For this, the object and depth recognition units 525a and 525b calculate the object of the first left eye image, the object of the second left eye image, and the depth of the first left eye image, And the depth of the object of the second right eye image.

영상 합성부(530a, 530b)는 상기 객체 및 깊이 인식부(510)로부터 입력된 제1 좌우안용 영상(500a, 500b)을 구성하는 객체들의 깊이와 상기 객체 및 깊이 인식부(525)로부터 입력된 제2 좌우안용 영상(515a, 515b)을 구성하는 객체들의 깊이를 고려하여, 좌안용 영상과 우안용 영상에 포함될 객체들을 재구성함으로써, 합성된 좌안용 영상(532a)과 합성된 우안용 영상(532b)을 생성하여 출력한다. 이때 영상 합성부(530)는 제1 좌우안용 영상들(500a, 500b)과 제2 좌우안용 영상들(515a, 515b)을 합성할 때 좌안용 영상과 우안용 영상 별로 각 객체의 깊이에 따라 객체들을 재구성함으로써 상기 제1 좌우안용 영상들(500a, 500b)과 제2 좌우안용 영상들(515a, 515b)을 각각 합성할 수 있다. The image composing units 530a and 530b calculate the depths of the objects constituting the first left and right images 500a and 500b inputted from the object and depth recognition unit 510 and the depths of the objects constituting the first left and right images 500a and 500b, Eye images 532a and 532b synthesized with the synthesized left-eye image 532a by reconstructing objects to be included in the left-eye image and the right-eye image in consideration of the depths of the objects constituting the second left and right images 515a and 515b, And outputs it. At this time, when the first and second left and right images 500a and 500b and the second left and right images 515a and 515b are synthesized, the image synthesizer 530 generates an object The first left and right images 500a and 500b and the second left and right images 515a and 515b can be synthesized, respectively.

본 발명에서 상기 영상 합성부(530a)는 제1좌안용 영상(500a)에 포함된 객체들과 제2 좌안용 영상(515a)에 포함된 객체들의 깊이를 서로 비교하고, 그 중 깊이가 큰 객체부터 깊이가 작은 객체 순으로 객체들을 재배치함으로써, 상기 제1 좌안용 영상(500a)과 상기 제2 좌안용 영상(515a)을 합성하여 합성된 좌안용 영상(532a)을 출력한다. In the present invention, the image composition unit 530a compares the depths of the objects included in the first left-eye image 500a and the objects included in the second left-eye image 515a with each other, Eye image 500a and the second left-eye image 515a by rearranging the objects in descending order of depth to output the synthesized left-eye image 532a.

그리고, 본 발명의 제3 실시 예에서 영상 합성부(530a)는 상기 제1 좌안용 영상(500a)에 포함된 객체들의 깊이들과 상기 제2 좌안용 영상(515a)에 포함된 객체들의 깊이를 비교한 후, 상기 제1 좌안용 영상(500a)에 포함된 객체들과 상기 제2 좌안용 영상(515a)에 포함된 객체들 중 동일한 깊이를 갖는 객체가 존재할 경우, 서로 동일한 깊이를 갖는 객체들을 미리 정해진 설정에 따라 상기 제1 좌안용 영상(500a)에 포함된 객체와 상기 제2 좌안용 영상(515a)에 포함된 객체의 표시 순서를 제어한다. In the third embodiment of the present invention, the image composing unit 530a calculates the depths of the objects included in the first left eye image 500a and the depths of the objects included in the second left eye image 515a If there is an object having the same depth among the objects included in the first left eye image 500a and the second left eye image 515a, And controls the display order of the objects included in the first left eye image 500a and the objects included in the second left eye image 515a according to a predetermined setting.

예컨대, 동일한 깊이를 갖는 객체들에 대해 제1 좌안용 영상(500a)의 객체가 제2 좌안용 영상(515a)의 객체 위에 표시되도록 설정되어 있다면, 상기 제1 좌안용 영상(500a)의 객체를 상기 제2 좌안용 영상(515a)의 객체보다 상대적으로 작은 값을 갖도록 상기 제1 좌안용 영상(500a)에 포함된 객체의 깊이를 결정하고, 그 결정된 깊이에 따라 서로 동일한 깊이를 가졌던 객체들을 재배치함으로써 합성된 좌안용 영상(532a)을 출력한다. For example, if an object of the first left eye image 500a is set to be displayed on an object of the second left eye image 515a for objects having the same depth, the object of the first left eye image 500a Eye image 500a so as to have a relatively smaller value than the object of the second left-eye image 515a, and relocates the objects having the same depth according to the determined depth And outputs the synthesized left-eye image 532a.

반면, 서로 동일한 깊이를 갖는 객체들에 대해 제2 좌안용 영상(515a)의 객체가 제1 좌안용 영상(500a)의 객체 위에 표시되도록 설정되어 있다면, 상기 제2 좌안용 영상(515a)의 객체를 상기 제1 좌안용 영상(500a)의 객체보다 상대적으로 작은 값을 갖도록 상기 제2 좌안용 영상(515a)에 포함된 객체의 깊이를 결정하고, 그 결정된 깊이에 따라 서로 동일한 깊이를 가졌던 객체들을 재배치함으로써 합성된 우안용 영상(532b)을 출력한다. On the other hand, if the object of the second left eye image 515a is set to be displayed on the object of the first left eye image 500a with respect to the objects having the same depth, the object of the second left eye image 515a Eye image 515a to have a relatively smaller value than the object of the first left-eye image 500a, and determine the depth of the objects included in the second left-eye image 515a according to the determined depth And outputs the synthesized right eye image 532b by rearrangement.

또한, 상기 영상 합성부(530b)는 제1 우안용 영상(500b)과 제2 우안용 영상(515b)에 대하여도 제1 좌안용 영상(500a)과 제2 좌안용 영상(515b)를 합성할 때와 동일한 동작을 수행한다. 본 발명의 실시 예에 따라 영상 합성부(530a, 530b)가 객체의 깊이에 따라 제1 좌우안용 영상(500a, 500b)과 제2 좌우안용 영상(515a, 515b)을 합성하는 과정은 첨부된 도 10을 통해 상세히 설명하기로 한다.
The image synthesizing unit 530b also synthesizes the first left eye image 500a and the second left eye image 515b with respect to the first right eye image 500b and the second right eye image 515b And performs the same operation as when. The process of synthesizing the first left and right images 500a and 500b and the second left and right images 515a and 515b according to the depth of an object according to the embodiment of the present invention is described in detail in the accompanying drawings 10 will be described in detail.

도 6은 본 발명의 제3 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도이다.6 is a flowchart of a stereoscopic 3D image synthesizing method according to a third embodiment of the present invention.

스테레오스코픽 3차원 영상 합성 장치는 600단계에서 제1 좌안용 영상과 제1 우안용 영상을 입력받고, 605단계에서 입력된 제1 좌안용 영상과 제1 우안용 영상에 포함된 객체와 객체 별 깊이를 인식한다. The stereoscopic three-dimensional image synthesizer receives the first left eye image and the first right eye image in step 600, and receives the first left eye image and the first right eye image, which are input in step 605, Lt; / RTI >

610단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 605단계에서 인식된 객체들을 분석하고, 상기 분석된 객체들 간의 깊이를 동기화시킨다. 615단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 610단계에서 동기화된 제1 좌안용 영상과 제1 우안용 영상에 포함된 객체와 각 객체 별 깊이를 결정한 후, 620단계에서 상기 제1 좌우안용 영상과 결합될 제2 좌우안용 영상을 입력받는다.In step 610, the stereoscopic three-dimensional image synthesizer analyzes the objects recognized in step 605 and synchronizes the depths of the analyzed objects. In step 615, the stereoscopic three-dimensional image synthesizing apparatus determines depths of objects and objects included in the first left eye image and the first right eye image synchronized in step 610, and then, in step 620, And a second left / right image to be combined with the left / right image.

625단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 620단계에서 입력된 제2 좌안용 영상과 제2 우안용 영상에 포함된 각각의 객체와 각 객체 별 깊이를 인식한 후, 630단계에서 상기 625단계에서 인식된 객체들을 분석하고, 상기 분석된 객체들 간의 깊이를 동기화한다.In step 625, the stereoscopic three-dimensional image synthesizing apparatus recognizes depths of the respective objects included in the second left-eye image and the second right-eye image input at step 620, and then, at step 630, And synchronizes the depths of the analyzed objects.

그리고, 635단계에서 스테레오스코픽 3차원 영상 합성 장치는 제2 좌안용 영상과 제2 우안용 영상에 포함된 객체와 각 객체 별 깊이를 결정한 후, 640단계에서 제1 좌안용 영상과 제2 좌안용 영상에 포함된 객체들의 깊이에 따라 객체들을 재배치하여 합성된 좌안용 영상을 생성하고, 645단계에서 제1 우안용 영상과 제2 우안용 영상에 포함된 객체들의 깊이에 따라 객체들을 재배치하여 합성된 우안용 영상을 생성한다.
In step 635, the stereoscopic three-dimensional image synthesizer determines depths of objects and objects included in the second left eye image and the second right eye image, and then, in step 640, The synthesized left eye image is generated by rearranging the objects according to the depth of the objects included in the image, and in step 645, the objects are rearranged according to the depths of the objects included in the first right eye image and the second right eye image, And generates a right eye image.

도 7은 본 발명의 제4 실시 예에 따른 스테레오스코픽 3차원 영상 합성 장치의 블록 구성도이다. 7 is a block diagram of a stereoscopic three-dimensional image synthesizing apparatus according to a fourth embodiment of the present invention.

제3 실시 예와 제4 실시 예의 차이점은 제4 실시 예에서는 합성될 영상의 객체와 깊이 정보를 외부로부터 입력받는 것이다. The difference between the third and fourth embodiments is that the object of the image to be synthesized and the depth information are input from the outside in the fourth embodiment.

입력부(705a)는 제1 좌안용 영상(700a)과 상기 제1 좌안용 영상(700a)에 포함된 객체와 각 객체 별 깊이 정보를 입력받고, 입력부(705b)는 제1 우안용 영상(700b)과 상기 제1 우안용 영상(700b)에 포함된 객체와 각 객체 별 깊이 정보를 입력받는다. The input unit 705a receives the first left eye image 700a and the objects included in the first left eye image 700a and the depth information of each object and the input unit 705b receives the first right eye image 700b, The object included in the first right eye image 700b, and the depth information of each object.

제2 좌안용 영상(710a)과 제2 좌안용 영상(710a)에 포함된 객체와 객체의 깊이 정보는 입력부(720a)를 통해 입력되어 영상 합성부(730a)로 출력되고, 제2 우안용 영상(710b)과 제2 우안용 영상(710b)에 포함된 객체와 객체의 깊이 정보는 은 각각 입력부(720b)로 입력되어 영상 합성부(730b)로 출력된다. The depth information of the objects and objects included in the second left eye image 710a and the second left eye image 710a is input through the input unit 720a and output to the image synthesizer 730a, The depth information of the object and the object included in the second right eye image 710b and the second right eye image 710b are input to the input unit 720b and outputted to the image synthesizing unit 730b, respectively.

영상 합성부(730a, 730b)는 상기 제1 좌안용 영상(700a)과 상기 제2 좌안용 영상(710a)를 객체의 깊이에 따라 합성함으로써 합성된 좌안용 영상(735a)을 출력하고, 상기 제1 우안용 영상(700b)과 제2 우안용 영상(710b)를 객체의 깊이에 따라 합성함으로써 합성된 우안용 영상(735b)를 출력한다. 도 7에서 본 발명에 따라 영상 합성부(730a, 730b)에서 영상을 합성하는 것은 후술할 도 10을 참조하여 설명하기로 한다.
The image synthesis units 730a and 730b output the synthesized left eye image 735a by synthesizing the first left eye image 700a and the second left eye image 710a according to the depth of the object, 1 synthesizes the right eye image 700b and the second right eye image 710b according to the depth of the object, and outputs the synthesized right eye image 735b. 7, synthesis of images by the image synthesizing units 730a and 730b according to the present invention will be described with reference to FIG. 10 to be described later.

도 8은 본 발명의 제4 실시 예에 따른 스테레오스코픽 3차원 영상 합성 방법의 흐름도이다. 8 is a flowchart of a stereoscopic 3D image synthesizing method according to a fourth embodiment of the present invention.

800단계에서 스테레오스코픽 3차원 영상 합성 장치는 스테레오스코픽 3차원 제1 좌우안용 영상의 객체와 각 객체 별 깊이를 입력받은 후, 805단계에서 상기 제1 좌우안용 영상과 합성할 제2 좌우안용 영상의 객체와 각 객체 별 깊이를 입력 받는다. 그리고, 810단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 입력받은 제1 좌안용 영상에 포함된 객체와 제2 좌안용 영상에 포함된 객체들을 객체들의 깊이에 따라 재배치하고, 제1 우안용 영상에 포함된 객체와 제2 우안용 영상에 포함된 객체들을 객체들의 깊이에 따라 재배치함으로써, 합성된 좌안용 영상과 합성된 우안용 영상을 생성하여 출력한다.
In step 800, the stereoscopic three-dimensional image synthesizer receives the objects of the stereoscopic three-dimensional first left and right images and the depths of the respective objects, and then, in step 805, the second left and right images to be synthesized with the first left and right images The depth of each object and each object is input. In step 810, the stereoscopic three-dimensional image synthesizer rearranges the objects included in the input first left eye image and the objects included in the second left eye image according to the depths of the objects, And rearranges the objects included in the second and right eye images according to the depths of the objects to generate and output the synthesized right eye image and the synthesized right eye image.

도 9는 본 발명의 실시 예에 따라 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 그래픽을 합성하는 과정을 설명하기 위한 도면이다.9 is a diagram for explaining a process of synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional graphic according to an embodiment of the present invention.

참조번호 900단계에서 스테레오스코픽 3차원 영상 합성 장치는 우안용 영상(900a)과 좌안용 영상(900b)을 입력받는다. 그리고, 905단계에서 스테레오스코픽 3차원 영상 합성 장치는 우안용 영상(900a)에 존재하는 객체들(902a, 904a)과 좌안용 영상(900b)에 존재하는 객체들(902b, 904b)를 인식하고, 각 객체들의 깊이를 결정한다. 예컨대, 도 9에서는 우안용 영상(900a)과 좌안용 영상(900b)에 존재하는 집 객체들(902a, 902b)의 깊이 정보가 "10"임을 결정하고, 사람 객체(904a, 904b)의 깊이 정보가 "8"임을 결정한다. 그러나, 본 발명의 실시 예에서는 집 객체와 사람 객체의 깊이 정보인 "10"과 "8"을 외부로부터 입력 받을 수도 있다. In step 900, the stereoscopic three-dimensional image synthesizer receives the right eye image 900a and the left eye image 900b. In step 905, the stereoscopic three-dimensional image synthesizing apparatus recognizes the objects 902a and 904a existing in the right eye image 900a and the objects 902b and 904b existing in the left eye image 900b, Determine the depth of each object. 9, the depth information of the collection objects 902a and 902b existing in the right eye image 900a and the left eye image 900b is "10 ", and the depth information of the human objects 904a and 904b Is "8 ". However, in the embodiment of the present invention, depth information "10" and "8"

참조번호 910단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 우안용 영상(900a)과 좌안용 영상(900b)에 합성될 우안용 그래픽(910a)과 좌안용 그래픽(910b)을 입력받는다. 상기 참조번호 910단계에서는 상기 우안용 영상(900a)과 좌안용 영상(900b)에 합성될 스테레오스코픽 3차원 그래픽 객체(910a, 910b)인 "PIZZA"와 깊이 정보가 "9"임을 입력받는다.In step 910, the stereoscopic three-dimensional image synthesizer receives the right eye graphic 910a and the left eye graphic 910b to be synthesized on the right eye image 900a and the left eye image 900b. In step 910, the stereoscopic three-dimensional graphic objects 910a and 910b to be composited with the right eye image 900a and the left eye image 900b are input with "PIZZA" and depth information "9".

915단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 905단계에서의 분석된 우안용 영상(900a)의 객체와 객체의 깊이와 우안용 그래픽(910a)의 객체와 객체의 깊이를 비교하여 깊이가 큰 객체부터 작은 순서대로 객체를 배치함으로써 합성된 우안용 영상(915a)을 생성한다. 즉, 915단계에서 스테레오스코픽 3차원 영상 합성 장치는 객체들을 재배치할 때 우안용 영상(900a)에서 집 객체(902a)의 깊이가 "10"이고, 사람 객체(904a)의 깊이가 "8"이고, 우안용 그래픽(910a) 객체인 "PIZZA"의 깊이가 "9"이므로, 참조번호 915a와 같이 깊이가 큰 객체인 집 객체를 먼저 배치한 후, 그 후 "PIZZA" 객체, 사람 객체 순으로 객체를 재배치함으로써 우안용 영상을 합성한다. 좌안용 영상(900b)에 대해서도 우안용 영상(900a)와 동일한 동작을 수행함으로써, 합성된 좌안용 영상(915b)을 생성한다. In step 915, the stereoscopic three-dimensional image synthesizer compares the depths of objects and objects of the right eye image 900a analyzed in step 905 with the depths of objects and objects of the right eye graphic image 910a, The right eye image 915a is synthesized by arranging the objects in the order from the smallest to the largest. In other words, when the objects are rearranged in step 915, the depth of the house object 902a in the right eye image 900a is "10 ", the depth of the human object 904a is" 8 " And the depth of the "PIZZA" object 910a of the right-eye graphic 910a is "9". Therefore, a house object having a large depth as shown in reference numeral 915a is first arranged and then the object "PIZZA" So that the right eye image is synthesized. The left eye image 900b is also subjected to the same operation as the right eye image 900a, thereby generating a synthesized left eye image 915b.

상기 도 9의 910단계에서는 좌우안용 영상(900a, 900b)과 좌우안용 그래픽(910a, 910b)이 프레임 단위로 합성되는 것을 예로서 보여주고 있다. 그러나, 좌우안용 영상과 좌우안용 그래픽이 프레임 단위로 합성되는 것이 아닐 경우에는, 좌우안용 그래픽 객체가 합성될 위치에 대한 정보도 추가로 입력되어야 할 것이며, 915단계에서는 입력된 좌우안용 그래픽 객체가 합성될 위치에서 깊이에 따라 객체들을 재배치하여 합성된 좌우안용 영상을 생성할 것이다.
9A and 9B, the left and right images 900a and 900b and the left and right graphics 910a and 910b are synthesized frame by frame. However, if the left and right use images and the left and right graphics are not to be synthesized frame by frame, information on the position where the left and right graphic objects are to be synthesized should be additionally input. In step 915, We will rearrange the objects according to the depth at the position to generate the synthesized left and right images.

도 10은 본 발명의 실시 예에 따른 스테레오스코픽 3차원 영상과 스테레오스코픽 3차원 영상을 합성하는 과정을 설명하기 위한 도면이다.10 is a view for explaining a process of synthesizing a stereoscopic three-dimensional image and a stereoscopic three-dimensional image according to an embodiment of the present invention.

참조번호 1000단계에서 스테레오스코픽 3차원 영상 합성 장치는 제1 우안용 영상(1000a)과 제1 좌안용 영상(1000b)을 입력받는다. 그리고, 1005단계에서 스테레오스코픽 3차원 영상 합성 장치는 제1 우안용 영상(1000a)에 존재하는 객체들(1002a, 1004a)과 좌안용 영상(1000b)에 존재하는 객체들(1002b, 1004b)를 인식하고, 각 객체들의 깊이를 결정한다. 예컨대, 도 10에서는 제1 우안용 영상(1000a)과 제1 좌안용 영상(1000b)에 존재하는 집 객체들(1002a, 1002b)은 깊이 정보가 "10"임을 결정하고, 사람 객체(1004a, 1004b)는 깊이 정보가 "8"임을 결정한다. 그러나, 본 발명의 실시 예에서는 집 객체와 사람 객체 각각의 깊이 정보인 "10"과 "8"을 외부로부터 입력 받을 수도 있다. In step 1000, the stereoscopic three-dimensional image synthesizer receives the first right eye image 1000a and the first left eye image 1000b. In step 1005, the stereoscopic three-dimensional image synthesizing apparatus recognizes the objects 1002a and 1004a existing in the first right eye image 1000a and the objects 1002b and 1004b existing in the left eye image 1000b And determines the depth of each object. 10, the home objects 1002a and 1002b existing in the first right eye image 1000a and the first left eye image 1000b determine that the depth information is "10 ", and the human objects 1004a and 1004b ) Determines that the depth information is "8 ". However, in the embodiment of the present invention, depth information "10" and "8"

참조번호 1010단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 제1 우안용 영상(1000a)과 제1 좌안용 영상(1000b)에 합성될 제2 우안용 영상(1010a)과 제2 좌안용 영상(1010b)을 입력받는다. 그리고, 1010단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 입력된 제2 우안용 영상(1010a)와 제2 좌안용 영상(1010b)에 포함된 객체들을 인식하고, 각 객체의 깊이를 결정한다. 예컨대 1010단계에서 스테레오스코픽 3차원 영상 합성 장치는 제2 우안용 영상(1010a)과 제2 좌안용 영상(1010b) 각각에 포함된 나무 객체(1014a, 1014b)와 사람 객체(1012a, 1012b)를 인식하고, 사람 객체(1012a, 1012b)의 깊이는 "9"임을, 나무 객체(1014a, 1014b)의 깊이는 "11"임을 결정한다. 이때 상기 제2 우안용 영상(1010a)과 제2 좌안용 영상(1010b)에 포함된 객체와 그 객체의 깊이 정보는 외부로부터 스테레오스코픽 3차원 영상 합성 장치가 입력받거나 상기 제1 우안용 영상(1000a)과 제1 좌안용 영상(1000b)의 객체들이 가지는 깊이를 고려하여 결정할 수도 있다. In step 1010, the stereoscopic three-dimensional image synthesizing apparatus synthesizes the second right eye image 1010a and the second left eye image 1010a to be synthesized on the first right eye image 1000a and the first left eye image 1000b, ). In step 1010, the stereoscopic three-dimensional image synthesizing apparatus recognizes the objects included in the input second right eye image 1010a and the second left eye image 1010b, and determines the depth of each object. For example, in step 1010, the stereoscopic three-dimensional image synthesizing apparatus recognizes the tree objects 1014a and 1014b and the human objects 1012a and 1012b included in the second right eye image 1010a and the second left eye image 1010b , The depth of the human objects 1012a and 1012b is "9 ", and the depth of the tree objects 1014a and 1014b is" 11 ". At this time, the objects included in the second right eye image 1010a and the second left eye image 1010b and the depth information of the object are received from the outside by the stereoscopic three-dimensional image synthesizer or the first right eye image 1000a And the depth of the objects of the first left eye image 1000b.

1015단계에서 스테레오스코픽 3차원 영상 합성 장치는 상기 1005단계에서 분석된 제1 우안용 영상(1000a)에 포함된 객체의 깊이와 제2 우안용 영상(1010a)에 포함된 객체의 깊이를 비교하여 깊이가 큰 객체부터 작은 순서대로 객체를 배치함으로써 합성된 우안용 영상(1015a)을 생성한다. 즉, 1015단계에서 스테레오스코픽 3차원 영상 합성 장치는 객체들을 재배치할 때 집 객체(1002a)의 깊이가 "10"이고, 사람 객체(1004a)의 깊이가 "8"이고, 제2 우안용 영상(1010a)에서 사람 객체(1012a)의 깊이가 "9"이고, 나무 객체(1014a)의 깊이가 "11"임을 파악하고, 깊이가 가장 큰 나무 객체(1014a)-> 집 객체(1002a) -> 사람 객체(1012a) -> 사람 객체(1004a)의 순으로 객체를 재배치함으로써 영상을 합성한다. 제1 좌안용 영상(1000b)과 제2 좌안용 영상(1010b)에 대해서도 제1 우안용 영상(1000a)과 제2 우안용 영상(1010a)에 행했던 동작과 동일한 동작을 수행함으로써, 합성된 좌안용 영상(1015b)을 생성한다. In step 1015, the stereoscopic three-dimensional image synthesizing apparatus compares the depth of the object included in the first right eye image 1000a analyzed in step 1005 with the depth of the object included in the second right eye image 1010a, The right eye image 1015a is generated by arranging the objects in order from the largest object to the smallest object. That is, when the objects are rearranged in step 1015, the depth of the house 1002a is "10", the depth of the human 1004a is "8", and the depth of the second right eye It is determined that the depth of the human object 1012a is "9" and the depth of the tree object 1014a is "11" in the tree object 1010a and the tree object 1014a, the house object 1002a, The objects are rearranged in the order of the object 1012a to the human object 1004a to synthesize the images. The same operations as those performed for the first right eye image 1000a and the second right eye image 1010a are performed for the first left eye image 1000b and the second left eye image 1010b, And generates an image 1015b.

상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 플로피 디스크, 하드 디스크, 광자기 디스크, 플래쉬 메모리 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.The method of the present invention as described above may be embodied as a program and stored in a computer-readable recording medium (such as a CD-ROM, a RAM, a floppy disk, a hard disk, a magneto-optical disk, or a flash memory). Such a process can be easily carried out by those skilled in the art and will not be described in detail.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. The present invention is not limited to the drawings.

Claims (18)

스테레오스코픽 영상을 합성하는 방법에 있어서,
3차원 영상을 표현하기 위한 좌안용 영상과 우안용 영상을 입력 받는 과정과,
상기 좌안용 영상에 포함된 적어도 하나의 좌안용 객체를 획득하고, 상기 우안용 영상에 포함된 적어도 하나의 우안용 객체를 획득하는 과정과,
상기 좌안용 영상과 상기 우안용 영상에 대한 분석 정보를 기반으로 상기 좌안용 영상 내에서 상기 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 우안용 영상 내에서 상기 획득한 적어도 하나의 우안용 객체 각각이 갖는 깊이를 동기화하는 과정과,
상기 동기화에 따른 적어도 하나의 좌안용 객체 각각의 깊이와 적어도 하나의 우안용 객체 각각의 깊이를 고려하여 적어도 하나의 좌안용 추가 객체 각각과 적어도 하나의 우안용 추가 객체 각각의 깊이를 설정하는 과정과,
상기 동기화에 따른 적어도 하나의 좌안용 객체 각각의 깊이와 상기 설정에 따른 상기 적어도 하나의 좌안용 추가 객체 각각의 깊이를 기반으로 상기 좌안용 영상 내에서 상기 적어도 하나의 좌안용 객체와 상기 적어도 하나의 좌안용 추가 객체를 재배치하여 합성된 좌안용 영상을 생성하는 과정과,
상기 동기화에 따른 적어도 하나의 우안용 객체 각각의 깊이와 상기 설정에 따른 상기 적어도 하나의 우안용 추가 객체 각각의 깊이를 기반으로 상기 우안용 영상 내에서 상기 적어도 하나의 우안용 객체와 상기 적어도 하나의 우안용 추가 객체를 재배치하여 합성된 좌안용 영상을 생성하는 과정을 포함하는 스테레오스코픽 영상 합성 방법.
A method for synthesizing a stereoscopic image,
Receiving a left eye image and a right eye image for representing a three-dimensional image,
Acquiring at least one left eye object included in the left eye image and acquiring at least one right eye object included in the right eye image;
Wherein the depth information of the at least one left eye object obtained in the left eye image and the depth of each of the at least one left eye object in the right eye image based on the analysis information of the left eye image and the right eye image, Synchronizing depths of objects,
Setting a depth of each of at least one left eye addition object and at least one right eye addition object in consideration of a depth of each of the at least one left eye object and at least one right eye object according to the synchronization; ,
Wherein the at least one left eye object and the at least one left eye object in the left eye image are based on the depth of each of the at least one left eye object according to the synchronization and the depth of each of the at least one left eye additional object according to the setting, Rearranging additional objects for the left eye to generate a synthesized left eye image,
Based on the depth of each of the at least one right eye object and the depth of each of the at least one right eye additional object in accordance with the setting, the at least one right eye object and the at least one right eye object in the right eye image, And rearranging the right-eye additional object to generate a synthesized left-eye image.
삭제delete 제1항에 있어서, 상기 적어도 하나의 좌안용 추가 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각의 깊이를 설정하는 과정은,
상기 좌안용 영상 내에서 상기 적어도 하나의 좌안용 추가 객체 각각이 추가될 위치 정보와 상기 적어도 하나의 우안용 추가 객체 각각이 추가될 위치 정보를 외부로부터 입력 받는 과정을 더 포함하는 스테레오스코픽 영상 합성 방법.
2. The method of claim 1, wherein the step of setting the depth of each of the at least one left eye additional object and the at least one right eye additional object further comprises:
Further comprising receiving, from outside, positional information to which each of the at least one left eye additional object is to be added and position information to which each of the at least one right eye additional object is to be added from the outside in the left eye image, .
제1항에 있어서, 상기 동기화하는 과정은,
상기 좌안용 영상 내에서 상기 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 우안용 영상 내에서 상기 획득한 적어도 하나의 우안용 객체 각각이 갖는 깊이를 외부로부터 입력 받는 과정을 더 포함하는 스테레오스코픽 영상 합성 방법.
2. The method of claim 1,
Receiving a depth of each of the obtained at least one left eye object in the left eye image and a depth of each of the at least one right eye object in the right eye image from outside, Scopic image synthesis method.
제1항에 있어서, 상기 합성된 좌안용 영상을 생성하는 과정은,
상기 적어도 하나의 좌안용 객체 각각과 상기 적어도 하나의 좌안용 추가 객체 각각을 깊이가 큰 객체에서 작은 객체 순서로 상기 좌안용 영상 내에 배치하는 과정을 더 포함하는 스테레오스코픽 영상 합성 방법.
The method according to claim 1, wherein the step of generating the synthesized left-
Further comprising the step of arranging each of the at least one left eye object and the at least one left eye supplement object in the left eye image in the order of a small object in an object having a large depth.
제5항에 있어서, 상기 합성된 우안용 영상을 생성하는 과정은,
상기 적어도 하나의 우안용 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각을 깊이가 큰 객체에서 작은 객체 순서로 상기 우안용 영상 내에 배치하는 과정을 더 포함하는 스테레오스코픽 영상 합성 방법.
6. The method of claim 5, wherein the step of generating the synthesized right-
Further comprising the step of arranging each of the at least one right eye object and the at least one right eye supplement object in the right eye image in the order of a small object from an object having a large depth.
제6항에 있어서,
깊이가 큰 객체에서 상대적으로 깊이가 작은 객체에 의해 가려지는 영역이 존재하면, 상기 깊이가 작은 객체에 의해 가려지는 상기 깊이가 큰 객체의 영역을 클립 아웃 처리하는 스테레오스코픽 영상 합성 방법.
The method according to claim 6,
A method for synthesizing a stereoscopic image, comprising the steps of: clipping out an area of an object having a large depth, which is obscured by an object having a small depth, if an object covered by an object having a relatively small depth exists.
제7항에 있어서, 상기 합성된 좌안용 영상을 생성하는 과정은,
상기 적어도 하나의 좌안용 객체 각각과 상기 적어도 하나의 좌안용 추가 객체 각각 중 동일한 깊이를 가지는 객체들을 미리 설정된 순서를 기반으로 상기 좌안용 영상 내에 배치하는 과정을 더 포함하는 스테레오스코픽 영상 합성 방법.
8. The method according to claim 7, wherein the step of generating the synthesized left-
And arranging, in the left eye image, objects having the same depth of each of the at least one left eye object and the at least one left eye supplement object based on a predetermined order.
제8항에 있어서, 상기 합성된 우안용 영상을 생성하는 과정은,
상기 적어도 하나의 우안용 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각 중 동일한 깊이를 가지는 객체들을 미리 설정된 순서를 기반으로 상기 우안용 영상 내에 배치하는 과정을 더 포함하는 스테레오스코픽 영상 합성 방법.
9. The method according to claim 8, wherein the step of generating the synthesized right-
Further comprising the step of arranging, in the right eye image, objects having the same depth among each of the at least one right eye object and the at least one right eye additional object based on a predetermined order.
스테레오스코픽 영상 합성 장치에 있어서,
3차원 영상을 표현하기 위한 좌안용 영상과 우안용 영상을 입력 받는 제1 입력부와,
적어도 하나의 좌안용 추가 객체와 적어도 하나의 우안용 추가 객체를 입력 받는 제2 입력부와,
상기 좌안용 영상과 상기 적어도 하나의 좌안용 추가 객체를 사용하여 합성된 좌안용 영상을 생성하고, 상기 우안용 영상과 상기 적어도 하나의 우안용 추가 객체를 사용하여 합성된 우안용 영상을 생성하는 영상 합성부를 포함하고,
여기서, 상기 영상 합성부는,
상기 좌안용 영상으로부터 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 적어도 하나의 좌안용 추가 객체 각각이 갖는 깊이를 기반으로 상기 좌안용 영상 내에서 상기 적어도 하나의 좌안용 객체 각각과 상기 적어도 하나의 좌안용 추가 객체 각각을 재배치하여 합성된 좌안용 영상을 생성하고,
상기 우안용 영상으로부터 획득한 적어도 하나의 우안용 객체 각각이 갖는 깊이와 상기 적어도 하나의 우안용 추가 객체 각각이 갖는 깊이를 기반으로 상기 우안용 영상 내에서 상기 적어도 하나의 우안용 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각을 재배치하여 합성된 우안용 영상을 생성하며,
상기 상기 좌안용 영상으로부터 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 적어도 하나의 좌안용 추가 객체 각각이 갖는 깊이는 상기 좌안용 영상과 상기 우안용 영상에 대한 분석 정보를 기반으로 동기화됨을 특징으로 하는 스테레오스코픽 영상 합성 장치.
A stereoscopic image synthesizer comprising:
A first input unit for receiving a left eye image and a right eye image for expressing a three-dimensional image,
A second input for receiving at least one left eye addition object and at least one right eye addition object,
A left eye image synthesized using the left eye image and the at least one left eye additional object, and a right eye image synthesized using the right eye image and the at least one right eye additional object, Comprising:
Here,
Eye image in the left eye image based on the depth of each of the at least one left eye object obtained from the left eye image and the depth of each of the at least one left eye additional object, Rearranging each of the left eye additional objects to generate a synthesized left eye image,
Wherein the at least one right eye object and the at least one right eye object are located in the right eye based on the depth of each of the at least one right eye object obtained from the right eye image and the depth of each of the at least one right eye additional object, Rearranging each of the right eye additional objects to generate a synthesized right eye image,
Wherein the depth of each of the at least one left eye object acquired from the left eye image and the depth of each of the at least one left eye supplement object are synchronized based on the analysis information of the left eye image and the right eye image The stereoscopic image synthesis apparatus comprising:
제10항에 있어서,
상기 좌안용 영상으로부터 적어도 하나의 좌안용 객체를 획득하고, 상기 우안용 영상으로부터 적어도 하나의 우안용 객체를 획득하며, 상기 분석 정보를 기반으로 상기 좌안용 영상 내에서 상기 획득한 적어도 하나의 좌안용 객체 각각이 갖는 깊이와 상기 우안용 영상 내에서 상기 획득한 적어도 하나의 우안용 객체 각각이 갖는 깊이를 동기화하는 객체 및 깊이 인식부를 더 포함하는 스테레오스코픽 영상 합성 장치.11. The method of claim 10,
Acquiring at least one left eye object from the left eye image, acquiring at least one right eye object from the right eye image, acquiring at least one right eye object from the left eye image, Further comprising an object and a depth recognition unit for synchronizing a depth of each object and a depth of each of the acquired at least one right eye object in the right eye image. 제10항에 있어서, 상기 제2 입력부는,
상기 좌안용 영상 내에서 상기 적어도 하나의 좌안용 추가 객체 각각이 추가될 위치 정보와 상기 적어도 하나의 우안용 추가 객체 각각이 추가될 위치 정보를 외부로부터 입력 받음을 특징으로 하는 스테레오스코픽 영상 합성 장치.
11. The apparatus of claim 10, wherein the second input unit comprises:
Wherein the position information to which each of the at least one left eye additional object is to be added and the position information to which each of the at least one right eye additional object is to be added are received from the outside in the left eye image.
제11항에 있어서,
상기 객체 및 깊이 인식부에서의 동기화에 따른 상기 적어도 하나의 좌안용 객체 각각의 깊이와 상기 적어도 하나의 우안용 객체 각각의 깊이를 고려하여 상기 적어도 하나의 좌안용 추가 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각의 깊이를 설정하는 3차원 그래픽 생성부를 더 포함하는 스테레오스코픽 영상 합성 장치.
12. The method of claim 11,
Eye object for each of the at least one left eye and the right eye in consideration of a depth of each of the at least one left eye object and a depth of each of the at least one right eye object in synchronization with the object and the depth recognition unit, And a 3D graphic generator for setting a depth of each of the additional objects.
제10항에 있어서, 상기 영상 합성부는,
상기 적어도 하나의 좌안용 객체 각각과 상기 적어도 하나의 좌안용 추가 객체 각각을 깊이가 큰 객체에서 작은 객체 순서로 상기 좌안용 영상 내에 배치하고,
상기 적어도 하나의 우안용 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각을 깊이가 큰 객체에서 작은 객체 순서로 상기 우안용 영상 내에 배치함을 특징으로 하는 스테레오스코픽 영상 합성 장치.
The apparatus of claim 10,
Arranging each of the at least one left eye object and the at least one left eye supplement object in the left eye image in a small object order in an object having a large depth,
Wherein each of the at least one right eye object and the at least one right eye supplement object is arranged in the right eye image in the order of small objects in the object having a large depth.
삭제delete 제14항에 있어서, 상기 영상 합성부는,
깊이가 큰 객체에서 상대적으로 깊이가 작은 객체에 의해 가려지는 영역이 존재하면, 상기 깊이가 작은 객체에 의해 가려지는 상기 깊이가 큰 객체의 영역을 클립 아웃 처리함을 특징으로 하는 스테레오스코픽 영상 합성 장치.
15. The image synthesizing apparatus according to claim 14,
Wherein a region of the object having a large depth is masked by an object having a small depth and a region covered by an object having a relatively small depth exists in an object having a large depth. .
제16항에 있어서, 상기 영상 합성부는,
상기 적어도 하나의 좌안용 객체 각각과 상기 적어도 하나의 좌안용 추가 객체 각각 중 동일한 깊이를 가지는 객체들을 미리 설정된 순서를 기반으로 상기 좌안용 영상 내에 배치하고,
상기 적어도 하나의 우안용 객체 각각과 상기 적어도 하나의 우안용 추가 객체 각각 중 동일한 깊이를 가지는 객체들을 미리 설정된 순서를 기반으로 상기 우안용 영상 내에 배치함을 특징으로 하는 스테레오스코픽 영상 합성 장치.
17. The image processing apparatus according to claim 16,
Arranging objects having the same depth in each of the at least one left eye object and the at least one left eye supplement object in the left eye image based on a predetermined order,
Wherein the at least one right eye object and the at least one right eye supplement object are arranged in the right eye image based on a predetermined order.
제10항에 있어서,
상기 영상 합성부는,
상기 적어도 하나의 좌안용 추가 객체와 상기 적어도 하나의 우안용 추가 객체를 대신하여 복수의 객체를 포함하는 제2 좌안용 영상과 제2 우안용 영상을 합성하는 스테레오스코픽 영상 합성 장치.11. The method of claim 10,
Wherein the image synthesizer comprises:
And synthesizes a second left eye image and a second right eye image including a plurality of objects in place of the at least one left eye addition object and the at least one right eye additional object.
KR1020100070898A 2010-07-22 2010-07-22 Method and apparatus for synthesising stereoscopic 3 dimention image KR101723953B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100070898A KR101723953B1 (en) 2010-07-22 2010-07-22 Method and apparatus for synthesising stereoscopic 3 dimention image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100070898A KR101723953B1 (en) 2010-07-22 2010-07-22 Method and apparatus for synthesising stereoscopic 3 dimention image

Publications (2)

Publication Number Publication Date
KR20120009885A KR20120009885A (en) 2012-02-02
KR101723953B1 true KR101723953B1 (en) 2017-04-06

Family

ID=45834605

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100070898A KR101723953B1 (en) 2010-07-22 2010-07-22 Method and apparatus for synthesising stereoscopic 3 dimention image

Country Status (1)

Country Link
KR (1) KR101723953B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101343552B1 (en) * 2012-07-09 2013-12-20 인텔렉추얼디스커버리 주식회사 Image display apparatus displaying personalized three-dimensional image based on audience position and displaying method thereof

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004221927A (en) * 2003-01-15 2004-08-05 Sharp Corp Image synthesizer, method for synthesizing image, program for realizing the method, and recording medium recording the program

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004221927A (en) * 2003-01-15 2004-08-05 Sharp Corp Image synthesizer, method for synthesizing image, program for realizing the method, and recording medium recording the program

Also Published As

Publication number Publication date
KR20120009885A (en) 2012-02-02

Similar Documents

Publication Publication Date Title
Terzić et al. Methods for reducing visual discomfort in stereoscopic 3D: A review
US9094675B2 (en) Processing image data from multiple cameras for motion pictures
JP4793451B2 (en) Signal processing apparatus, image display apparatus, signal processing method, and computer program
US8643704B2 (en) Stereoscopic images generated by adding content to alternate eye images for retinal rivalry
CN114895471A (en) Head mounted display for virtual reality and mixed reality with inside-outside position tracking, user body tracking, and environment tracking
KR100957129B1 (en) Method and device for converting image
JP2011525075A (en) Stereo image generation chip for mobile equipment and stereo image display method using the same
KR20140030138A (en) Methods, systems, devices, and associated processing logic for generating stereoscopic images and video
WO2008013352A1 (en) 3d image editing apparatus and method thereof
WO2018176927A1 (en) Binocular rendering method and system for virtual active parallax computation compensation
CN103747236A (en) 3D (three-dimensional) video processing system and method by combining human eye tracking
JP2022183177A (en) Head-mounted display device
CN101697597A (en) Method for generating 3D image
US20200221069A1 (en) Stereoscopic visualization system and method for endoscope using shape-from-shading algorithm
JP2015534745A (en) Stereo image generation, transmission, and reception method and related apparatus
JP2003348621A (en) Means for setting two-viewpoint camera
Hanhart et al. Subjective evaluation of two stereoscopic imaging systems exploiting visual attention to improve 3D quality of experience
KR101723953B1 (en) Method and apparatus for synthesising stereoscopic 3 dimention image
Hanhart et al. EYEC3D: 3D video eye tracking dataset
KR19990057669A (en) Apparatus and method for three-dimensional image conversion of two-dimensional continuous image using virtual stereo image
JP2011259289A (en) Viewing situation adaptive 3d display device and 3d display method
KR100942765B1 (en) Apparatus and Method for editing 3D image
JP5664356B2 (en) Generation apparatus and generation method
CN109561263A (en) 3D subtitle effect is realized in the 3D video of VR equipment
KR100731266B1 (en) Signal process method and apparatus for 3 dimension image

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20191210

Year of fee payment: 4