KR20170104255A - Image Processing Apparatus Of 3-Demension Display And Method Of Thereof - Google Patents

Image Processing Apparatus Of 3-Demension Display And Method Of Thereof Download PDF

Info

Publication number
KR20170104255A
KR20170104255A KR1020160027039A KR20160027039A KR20170104255A KR 20170104255 A KR20170104255 A KR 20170104255A KR 1020160027039 A KR1020160027039 A KR 1020160027039A KR 20160027039 A KR20160027039 A KR 20160027039A KR 20170104255 A KR20170104255 A KR 20170104255A
Authority
KR
South Korea
Prior art keywords
image
display
developed view
image processing
processing apparatus
Prior art date
Application number
KR1020160027039A
Other languages
Korean (ko)
Other versions
KR102468938B1 (en
Inventor
김대성
김명찬
한정안
송대원
박민호
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020160027039A priority Critical patent/KR102468938B1/en
Publication of KR20170104255A publication Critical patent/KR20170104255A/en
Application granted granted Critical
Publication of KR102468938B1 publication Critical patent/KR102468938B1/en

Links

Images

Classifications

    • H04N13/0007—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10—Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • H04N13/0011—
    • H04N13/0217—

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

Disclosed are a three-dimensional display image processing apparatus and an operation method thereof. The operation method of the three-dimensional display image processing apparatus includes: a step of de-warping an image collected through a camera; a step of extracting a development drawing according to a display type to output an image; a step of warping the de-warped image on the extracted development drawing; and a step of outputting the warped image to a display corresponding to the development drawing. Therefore, the present invention can custom-warp the image generated through the camera suitable for a shape of various types of three-dimensional displays.

Description

3차원 디스플레이 영상 처리 장치 및 동작 방법{Image Processing Apparatus Of 3-Demension Display And Method Of Thereof}TECHNICAL FIELD [0001] The present invention relates to a three-dimensional display image processing apparatus,

이하의 실시예는 3차원 디스플레이 영상을 처리하는 장치와 그 동작 방법에 관한 것이다.The following embodiments relate to an apparatus for processing a three-dimensional display image and an operation method thereof.

가상 현실 분야 중 하나인 360도 카메라 기술은 여러 개의 카메라를 다 각도로 장착하거나 어안 렌즈를 이용하여 360도 시점을 획득하여 저장한다. 최근 들어, 이러한 카메라는 소형화, 다양화, 휴대화가 되어짐으로 많은 기업 및 개인이 소유하고 사용할 수 있게 되었다.360 degree camera technology, which is one of the fields of virtual reality, acquires and stores a 360 degree viewpoint by mounting multiple cameras at multiple angles or using a fisheye lens. In recent years, these cameras have become miniaturized, diversified, and portable, and are now owned and used by many corporations and individuals.

실감형 입체감을 제공하는 홀로그램 기술은 기존 산업의 프리미엄화와 신사업화로 진행 가능하며 실제 사물을 보는 것과 유사한 입체감과 현실감을 제공해주는 인간 친화형 실감 영상이다.The hologram technology that provides a sense of realism is a human-friendly realistic image that provides a stereoscopic and realistic feeling similar to that of real objects, which can proceed with premiumization and new business of existing industries.

홀로그램 기술 중 유사 홀로그램 기술은 기존 3D 영상과 차이점을 가지며 무안경착용, 무시각피로, 무공간왜곡의 효과를 제공할 수 있다. 유사 홀로그램 방식 중 스마트폰 위에 거울을 4개 장착하여 스마트폰이 만들어내는 4개의 이미지를 그대로 반사하여 마치 이미지가 서 있는 것처럼 표현할 수 있다.Similar hologram technology among hologram technology has difference from existing 3D image and can provide effect of non-wearing glasses, neglected horn, and spaceless distortion. Of the similar holograms, four mirrors are mounted on the smartphone to reflect the four images produced by the smartphone as if they were images.

360도 디스플레이에 대한 수요가 있으나 이를 어떻게 표현할지에 대해 한계가 있었으며 이를 유사 홀로그램 방식을 이용하여 360도 위치를 커버할 수 있게 디스플레이를 배치시킨다면 보다 저렴하고 쉽게 3차원 디스플레이를 구현할 수 있다.There is a demand for a 360-degree display, but there is a limit to how to express it. If a display is arranged so as to cover a 360-degree position by using a similar hologram method, it is possible to realize a three-dimensional display inexpensively and easily.

기존 유사 홀로그램 방식은 단순히 거울을 이용하여 이미지를 반사하는 형식을 취해서 보는 각도 및 빛 때문에 왜곡 현상 및 선명함이 떨어질 수도 있다.The conventional pseudo-hologram method is a type that reflects an image using a mirror, and distortion and sharpness may be lost due to viewing angle and light.

실시예에 따르면, 360도 카메라를 통해 생성된 영상을 3차원 디스플레이에서 출력할 수 있도록 파티션화 하며, 다양한 형태의 3차원 디스플레이의 형태에 맞게 커스텀-워핑하는 3차원 디스플레이 영상 처리 장치를 제공하고자 한다.According to an embodiment of the present invention, there is provided a three-dimensional display image processing apparatus that divides an image generated through a 360-degree camera into a three-dimensional display so as to be output, and custom-warps the three- .

실시예에 있어서, 카메라를 통해 수집된 영상을 디워핑(De-warping)하는 단계; 상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 단계; 상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 단계; 및 상기 워핑된 영상을 상기 전개도에 대응하는 디스플레이로 출력하는 단계를 포함하는, 3차원 디스플레이 영상 처리 장치의 동작 방법이 제공될 수 있다.In an embodiment, de-warping an image collected through a camera; Extracting a developed view according to a display type for outputting the image; Warping the diverted image to the extracted developed view; And outputting the warped image to a display corresponding to the developed view, the method of operating the three-dimensional display image processing apparatus may be provided.

상기 카메라는 360도 회전 가능한 구형의 영상을 획득할 수 있다.The camera can acquire a spherical image that is 360 degrees rotatable.

상기 카메라를 통해 수집된 영상을 디워핑(De-warping)하는 단계는, 구형의 이미지를 가지는 상기 영상을 직사각형의 평면 이미지로 변경하는 단계를 포함할 수 있다.The step of de-warping the image collected through the camera may include changing the image having a rectangular image into a rectangular plane image.

상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 단계는, 원뿔형, 타원형, 원형, 육면체형 중 적어도 하나의 디스플레이 타입에 대응하는 상기 전개도를 추출하는 단계를 포함할 수 있다.The step of extracting a developed view according to a display type for outputting the image may include extracting the developed view corresponding to at least one display type of a cone, ellipse, circle, or hexahedral type.

상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 단계는, 상기 디스플레이 타입에 따라 전체 구조가 세부적으로 분할된 상기 전개도를 추출하는 단계를 포함할 수 있다.The step of extracting the developed view according to the display type for outputting the image may include extracting the developed view in which the entire structure is finely divided according to the display type.

상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 단계는, 상기 분할된 상기 전개도 상에 상기 디워핑된 영상을 전개하는 단계를 포함할 수 있다.The step of warping the diverted image on the extracted developed view may include developing the diorized image on the developed developed view.

상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 단계는, 상기 전개도에 포함되는 파라미터를 이용하여 상기 디워핑된 영상을 워핑하는 단계를 포함할 수 있다.The step of warping the diverted image on the extracted developed view may include warping the diverted image using parameters included in the developed view.

상기 워핑된 영상을 상기 전개도에 대응하는 디스플레이로 출력하는 단계는, 상기 워핑된 영상의 픽셀들을 상기 디스플레이로 드로잉(Drawing)하여 하나로 연결된 360도 디스플레이 영상을 출력하는 단계를 포함할 수 있다.The outputting of the warped image to the display corresponding to the developed view may include drawing the pixels of the warped image to the display and outputting the 360-degree display image connected thereto.

상기 디스플레이는, 터치 모듈 및 카메라를 포함하는 사용자 인터페이스를 제공할 수 있다.The display may provide a user interface including a touch module and a camera.

상기 디스플레이는, 상기 전개도에 대응하는 플렉시블(Flexible) 디스플레이들이 접합된 3차원 디스플레이일 수 있다.The display may be a three-dimensional display in which flexible displays corresponding to the developed view are bonded.

실시예에 따른 3차원 디스플레이 영상 처리 장치에 있어서, 카메라를 통해 수집된 영상을 디워핑(De-warping)하는 디워핑부; 상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 추출부; 상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 워핑부; 및 상기 워핑된 영상을 상기 전개도에 대응하는 디스플레이로 출력하는 출력부를 포함하는, 3차원 디스플레이 영상 처리 장치가 제공될 수 있다.A three-dimensional display image processing apparatus according to an embodiment of the present invention includes a de-mapping unit de-warping an image collected through a camera; An extracting unit for extracting a developed view according to a display type for outputting the image; A warping unit for warping the diverted image on the extracted developed view; And an output unit for outputting the warped image to a display corresponding to the developed view.

실시예에 따르면, 360도 카메라를 통해 생성된 영상을 3차원 디스플레이에서 출력할 수 있도록 파티션화 하며, 다양한 형태의 3차원 디스플레이의 형태에 맞게 커스텀-워핑하는 3차원 디스플레이 영상 처리 장치를 제공할 수 있다.According to the embodiment, it is possible to provide a three-dimensional display image processing apparatus that divides an image generated through a 360-degree camera so as to be output in a three-dimensional display, and custom-warps the image in accordance with various types of three- have.

도 1은 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 2는 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 동작에 대응하는 이미지 파티션 전개도를 도시하고 있다.
도 3은 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 동작에 대응하여 실제 영상이 처리되는 일례를 도시하고 있다.
도 4는 일실시예에 있어서, 3차원 디스플레이의 조합의 일례를 설명하기 위한 도면이다.
도 5는 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 구성을 설명하기 위한 블록도이다.FIG. 1 is a flowchart illustrating an operation method of a three-dimensional display image processing apparatus according to an exemplary embodiment of the present invention.
FIG. 2 illustrates an image partition exploded view corresponding to the operation of the three-dimensional display image processing apparatus in one embodiment.
3 illustrates an example in which an actual image is processed in response to an operation of the three-dimensional display image processing apparatus in one embodiment.
4 is a diagram for explaining an example of a combination of three-dimensional displays in one embodiment.
FIG. 5 is a block diagram for explaining a configuration of a three-dimensional display image processing apparatus in one embodiment.

이하, 본 발명의 실시예에 대해서 첨부된 도면을 참조하여 자세히 설명하도록 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

실시예에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 실시예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the examples are used only to illustrate specific embodiments and are not intended to limit the embodiments. The singular expressions include plural expressions unless the context clearly dictates otherwise. In this specification, the terms "comprises" or "having" and the like refer to the presence of stated features, integers, steps, operations, elements, components, or combinations thereof, But do not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this embodiment belongs. Terms such as those defined in commonly used dictionaries are to be interpreted as having a meaning consistent with the contextual meaning of the related art and are to be interpreted as either ideal or overly formal in the sense of the present application Do not.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In the following description of the present invention with reference to the accompanying drawings, the same components are denoted by the same reference numerals regardless of the reference numerals, and redundant explanations thereof will be omitted. In the following description of the embodiments, a detailed description of related arts will be omitted if it is determined that the gist of the embodiments may be unnecessarily blurred.

도 1은 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 동작 방법을 설명하기 위한 흐름도이다.FIG. 1 is a flowchart illustrating an operation method of a three-dimensional display image processing apparatus according to an exemplary embodiment of the present invention.

단계(110)에서, 3차원 디스플레이 영상 처리 장치는, 카메라를 통해 수집된 영상을 디워핑(De-warping)한다. 디워핑은 영상에서 왜곡된 부분을 보정하는 과정을 의미할 수 있다.In step 110, the three-dimensional display image processing apparatus de-warps the image collected through the camera. Diouping may refer to the process of correcting distorted parts of an image.

실시예에서, 카메라를 통해 수집된 영상은 360도 카메라를 통해 수집된 구형 이미지에 해당할 수 있다. 예를 들어, 구형 이미지는 단순히 구형의 형태를 지닌 이미지를 의미하는 것이 아니라, 일반적인 촬영 이미지의 아랫면을 구의 중심 점에 출력하고 윗면을 구의 변에 출력하는 파노라마 형식 이미지에 해당할 수 있다. 이러한 구형 이미지를 회전시키면 연속되는 이미지를 나타낼 수 있다.In an embodiment, an image collected through a camera may correspond to a spherical image collected through a 360 degree camera. For example, a spherical image does not simply mean an image having a spherical shape, but may correspond to a panoramic image in which a lower surface of a general image is outputted to a center point of a sphere, and a top surface is output to a sphere side. Rotating these spherical images can display successive images.

이러한 360도 카메라는 소형화 및 일반화되고 있으며, 개인이 쉽게 구해 영상을 촬영 및 공유할 수 있다.Such a 360-degree camera is becoming smaller and more generalized, and individuals can easily acquire and share images.

단계(120)에서 3차원 디스플레이 영상 처리 장치는, 영상을 출력할 디스플레이 타입에 따라 전개도를 추출한다.In step 120, the 3D display image processing apparatus extracts a developed view according to a display type for outputting an image.

실시예에서, 디스플레이는 구형, 타원형, 원뿔, 육면체형 등 3차원으로 출력되는 다양한 형태의 디스플레이에 해당할 수 있고, 영상을 출력하고자 하는 디스플레이에 대해서 적어도 하나의 전개도를 미리 저장할 수 있다. 하나의 디스플레이에 대해서 복수 개의 전개도를 저장할 수 있는데, 전개도는 디스플레이 타입에 따라 전체 구조가 세부적으로 분할될 수 있으며, 그 형태는 다양하게 나타날 수 있다.In an embodiment, the display may correspond to various types of displays that are output in three dimensions, such as spherical, elliptical, conical, or hexahedral shapes, and may store at least one developed view in advance for a display for outputting images. A plurality of developed views can be stored for one display. The entire developed structure can be divided in detail according to the display type, and the shapes can be variously displayed.

예를 들어, 전개도는 디스플레이의 실제 분할된 형태를 기초하여 기 저장될 수 있다. 전개도는 3차원 디스플레이를 형성하기에 분할된 디스플레이들 각각에 대한 파라미터를 포함할 수 있다.For example, a developed view can be stored based on the actual divided shape of the display. The developed view may include parameters for each of the divided displays to form a three-dimensional display.

단계(130)에서, 3차원 디스플레이 영상 처리 장치는, 추출된 전개도에 디워핑된 영상을 워핑(Warping)한다. 워핑이란, 영상을 일정 규칙에 맞춰서 리샘플링(Re-sampling)하는 작업을 의미한다.In step 130, the 3D display image processing apparatus warps the diorama image on the extracted developed image. Warping refers to the task of re-sampling images in accordance with certain rules.

실시예에서, 추출된 전개도에 대해서 디워핑된 영상을 전개할 수 있다. 전개도에 포함되는 파라미터에 기초하여 영상을 워핑할 수 있는데, 전개도에 대응하는 디스플레이의 크기에 맞춰서 디워핑된 영상을 워핑할 수 있다.In an embodiment, a diverged image may be developed for the extracted developed view. The image can be warped based on the parameters included in the developed view, and the distorted image can be warped according to the size of the display corresponding to the developed view.

예를 들어, 전개도에 포함되는 각각의 면은 3차원 디스플레이의 분할된 디스플레이들 각각에 대응할 수 있으며, 분할된 각 디스플레이들에 출력될 영상이 전개도에 맞게 분할되어 전개도의 각각의 면에 워핑될 수 있다. 이를 위해, 전개도는 3차원 디스플레이가 형성되기 위한 실제 분할 디스플레이들의 정보를 포함하여 저장될 수 있다. 일례에서는, 전개도 중 일정 부분에만 워핑하는 사전 맞춤화(Pre-customization) 작업이 필요할 수도 있다.For example, each of the faces included in the developed view may correspond to each of the divided displays of the three-dimensional display, and the image to be output to each of the divided displays may be divided according to the developed view and warped on each face of the developed view have. To this end, the developed view may be stored including information of actual divided displays for the three-dimensional display to be formed. In one example, a pre-customization operation may be required that warps only a portion of the developed view.

단계(140)에서, 3차원 디스플레이 영상 처리 장치는, 워핑된 영상을 전개도에 대응하는 디스플레이로 출력한다.In step 140, the 3D display image processing apparatus outputs the warped image to the display corresponding to the developed view.

실시예에서, 워핑된 영상이 출력되기 위한 3차원 디스플레이는 미리 구비될 수 있고, 3차원 디스플레이의 사양 및 크기에 부합하도록 생성된 영상을 디스플레이할 수 있다. 워핑된 영상의 픽셀들을 디스플레이로 드로잉(Drawing)하여 하나로 연결된 360도 3차원 디스플레이 영상을 출력할 수 있다.In an embodiment, a three-dimensional display for outputting the warped image may be provided in advance, and an image generated to match the specification and size of the three-dimensional display may be displayed. The pixels of the warped image can be drawn to the display to output a 360-degree three-dimensional display image connected thereto.

3차원 디스플레이는 실제 구현될 시, 가격 및 성능 면에서 경쟁력이 있도록 플렉시블 디스플레이를 활용하고, 플렉시블 디스플레이들의 각 면을 접합함으로써 구현될 수 있다. 앞서 설명한 바와 같이, 3차원 디스플레이의 형태는 원뿔, 타원, 구형, 육면체 등 사방에서 어느 각도에서도 영상을 감상할 수 있는 형태로 제공될 수 있다.The 3D display can be implemented by utilizing a flexible display and bonding each side of the flexible displays so as to be competitive in price and performance when actually implemented. As described above, the shape of the three-dimensional display can be provided in a form capable of viewing images from any angle, such as a cone, an ellipse, a sphere, or a hexahedron.

실시예에 따른 3차원 디스플레이는 터치 모듈 및 카메라 등을 구비하고, 어플리케이션이 실행되는 스마트 디스플레이 형태로 제공되어, 3차원 디스플레이에 설치된 어플리케이션을 통해 사용자와 인터랙션(Interaction)을 위한 유저 인터페이스(User Interface)를 제공할 수 있다.The three-dimensional display according to the embodiment includes a touch module, a camera, and the like. The three-dimensional display is provided as a smart display in which an application is executed. The user interface for interacting with a user through an application installed in the three- Can be provided.

도 2는 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 동작에 대응하는 이미지 파티션 전개도를 도시하고 있다.FIG. 2 illustrates an image partition exploded view corresponding to the operation of the three-dimensional display image processing apparatus in one embodiment.

이미지(210)는 앞서 설명한 360도 카메라로 촬영되는 이미지를 임의대로 나눈 형태이다. The image 210 is obtained by arbitrarily dividing an image photographed by the 360-degree camera described above.

해당 이미지(210)가 디워핑 과정을 거치게 되면, 이미지(220)와 같은 형태의 파티션 전개도를 획득할 수 있다. 도시된 바와 같이, 디워핑 과정을 통해, 이미지(210)의 원주에 해당하는 부분은, 이미지(220)의 윗면에 나타날 수 있고, 이미지(210)의 4분할된 중심은 이미지(220)의 아랫면에 디워핑되어 나타날 수 있다.When the corresponding image 210 is subjected to a diapping process, a partition development view similar to that of the image 220 can be obtained. The portion corresponding to the circumference of the image 210 may appear on the top surface of the image 220 and the four divided center of the image 210 may be on the bottom surface 220 of the image 220, And can be displayed.

전개도(230)는 3차원 디스플레이 영상 처리 장치에 미리 저장될 수 있다. 실시예에 따른 전개도(230)는 원뿔 형태의 3차원 디스플레이의 전개도에 해당할 수 있다. 전개도(230)는, 디스플레이의 실제 분할된 형태를 기초하여 기 저장될 수 있으며, 3차원 디스플레이를 형성하기에 분할된 디스플레이에 대한 파라미터를 포함할 수 있다. 예를 들어, 디스플레이의 픽셀 수 등에 대한 정보를 포함할 수 있다.The developed view 230 can be stored in advance in the three-dimensional display image processing apparatus. The developed view 230 according to the embodiment may correspond to an exploded view of a conical three-dimensional display. The developed view 230 may be initially stored based on the actual divided form of the display and may include parameters for the divided display to form a three-dimensional display. For example, the number of pixels of the display, and the like.

3차원 디스플레이 영상 처리 장치는 기 저장된 전개도(230) 중 실제 출력되는 면에 대응하여 이미지(220)를 워핑할 수 있다. 예를 들어, 전개도(230) 중 면(231)은 디스플레이에서 출력되는 면에 해당하되, 면(232)은 실제 구현 시, 바닥에 해당하므로 디스플레이로는 사용되지 않는 면에 해당하여, 면(232)에는 이미지(220)를 워핑하지 않을 수 있다.The three-dimensional display image processing apparatus can warp the image 220 in correspondence with the actual output surface of the previously stored developed view 230. For example, the surface 231 of the developed view 230 corresponds to the surface that is output from the display, while the surface 232 corresponds to the unused surface of the display, May not warp the image 220.

이미지(220)를 전개도(230)에 기초하여 워핑하면, 이미지(240)를 획득할 수 있다. 이미지(240)는 3차원 디스플레이에 실제 출력되기 위해, 3차원 디스플레이의 픽셀 수에 맞춰서 워핑된 이미지에 해당할 수 있다.If image 220 is warped based on development view 230, image 240 can be obtained. The image 240 may correspond to the warped image in accordance with the number of pixels of the three-dimensional display, in order to be actually output to the three-dimensional display.

상기와 같은 방식으로 3차원 디스플레이 영상 처리 장치는 구형 이미지를 직사각형의 파노라마 이미지로 재 조합한 이미지를 3차원 디스플레이 타입에 맞추어 출력할 수 있다.In the above-described manner, the three-dimensional display image processing apparatus can output an image in which the spherical image is re-combined into the rectangular panoramic image according to the three-dimensional display type.

도 3은 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 동작에 대응하여 실제 영상이 처리되는 일례를 도시하고 있다.3 illustrates an example in which an actual image is processed in response to an operation of the three-dimensional display image processing apparatus in one embodiment.

도 2의 예시에 대응하여, 실제 영상을 처리하는 일례를 설명하고자 한다.Corresponding to the example of FIG. 2, an example of processing an actual image will be described.

영상(310)은 앞서 설명한 360도 카메라로 촬영되는 이미지의 일례이다. 도 2를 참조하면, 영상(310)의 원주에 해당하는 부분은, 영상(320)의 윗면에 해당할 수 있고, 영상(310)의 중심부는 영상(320)의 아랫면에 해당할 수 있다.The image 310 is an example of an image photographed by the 360-degree camera described above. 2, the portion corresponding to the circumference of the image 310 may correspond to the upper surface of the image 320, and the center portion of the image 310 may correspond to the lower surface of the image 320. [

실시예에서, 영상(310)에 대해서 디워핑 작업을 거치면 영상(320)과 같은 결과물을 획득할 수 있다. 영상(310)의 왜곡을 보정한 형태로 제공된다.In an embodiment, a result such as image 320 may be obtained by performing a diagonalizing operation on the image 310. [ And the distortion of the image 310 is corrected.

3차원 디스플레이에 출력하기 위한 영상(340)을 획득하기 위해서 디워핑된 영상(320)에 대해서 워핑 작업을 다시 거칠 수 있다. 여기서, 3차원 디스플레이 영상 처리 장치 내에 기 저장된 전개도(330)를 이용할 수 있다.The warped operation can be performed again on the diarized image 320 to obtain the image 340 for output to the three-dimensional display. Here, the developed view 330 previously stored in the three-dimensional display image processing apparatus can be used.

전개도(330)는 3차원 디스플레이 영상 처리 장치에 미리 저장될 수 있다. 실시예에 따른 전개도(330)는 원뿔 형태의 3차원 디스플레이의 전개도에 해당할 수 있다. 전개도(330)는, 디스플레이의 실제 분할된 형태를 기초하여 기 저장될 수 있으며, 3차원 디스플레이를 형성하기에 분할된 디스플레이에 대한 파라미터를 포함할 수 있다. 예를 들어, 디스플레이의 픽셀 수 등에 대한 정보를 포함할 수 있다.The developed view 330 may be stored in advance in the three-dimensional display image processing apparatus. The developed view 330 according to the embodiment may correspond to a developed view of a conical three-dimensional display. The developed view 330 may be stored based on the actual divided form of the display and may include parameters for a partitioned display to form a three-dimensional display. For example, the number of pixels of the display, and the like.

3차원 디스플레이 영상 처리 장치는 기 저장된 전개도(330) 중 실제 출력되는 면에 대응하여 영상(320)를 워핑할 수 있다. 예를 들어, 전개도(330) 중 면(331)은 디스플레이에서 출력되는 면에 해당하되, 면(332)은 실제 구현 시, 바닥에 해당하므로 디스플레이로는 사용되지 않는 면에 해당하여, 면(332)에는 영상(320)을 워핑하지 않을 수 있다.The three-dimensional display image processing apparatus can warp the image 320 in correspondence with the actual output surface of the previously stored developed view 330. For example, a surface 331 of a developed view 330 corresponds to a surface that is output from a display, and a surface 332 corresponds to a surface that is not used as a display, The image 320 may not be warped.

영상(320)를 전개도(230)에 기초하여 워핑하면, 영상(340)를 획득할 수 있다. 영상(340)는 3차원 디스플레이에 실제 출력되기 위해, 3차원 디스플레이의 픽셀 수에 맞춰서 워핑된 이미지에 해당할 수 있다.If the image 320 is warped based on the developed view 230, the image 340 can be acquired. The image 340 may correspond to the warped image in accordance with the number of pixels of the three-dimensional display in order to be actually output to the three-dimensional display.

영상(340)을 획득할 시, 픽셀 순서대로 워핑될 수 있는데, 픽셀(341)을 시작점으로, 가로로 픽셀이 하나씩 기록될 수 있으며, 왼쪽에서 오른쪽 순서대로, 위에서 아래 순서대로 픽셀이 하나씩 기록될 수 있다. 이에, 픽셀(342)는 마지막으로 기록될 수 있다.When acquiring the image 340, they can be warped in pixel order, with pixels 341 being the starting point, one pixel horizontally, one pixel at a time in the order from left to right, top to bottom . Thus, pixel 342 may be last recorded.

도 4는 일실시예에 있어서, 3차원 디스플레이의 조합의 일례를 설명하기 위한 도면이다.4 is a diagram for explaining an example of a combination of three-dimensional displays in one embodiment.

실시예에서, 다양한 방식으로 커팅된 플렉시블 베젤리스(bezel less) 디스플레이가 제공되므로, 이를 이용하여 하나의 3차원 디스플레이를 구성할 수 있다.In an embodiment, a flexible bezel less display cut in various ways is provided, so that one three-dimensional display can be constructed using it.

실시예에서, 도 4(c)와 같은 3차원 디스플레이를 구성하기 위해, 도 4(a) 및 도 4(b)와 같이 분할된 플렉시블 디스플레이들이 조합될 수 있다.In an embodiment, to constitute a three-dimensional display as shown in Fig. 4 (c), the flexible displays divided as shown in Figs. 4 (a) and 4 (b) can be combined.

디스플레이가 구성될 때, 디스플레이에 어플리케이션 프로세서가 탑재되어, 각 디스플레이 스크린에 어떤 영상을 표시할지를 정의할 수 있다. 또한, 워핑 작업을 통해서 구해진 픽셀들을 완성된 3차원 디스플레이에서 드로잉(Drawing)하여 하나의 연결된 360도 화면을 구성할 수 있다.When the display is configured, an application processor is loaded on the display to define what image is to be displayed on each display screen. In addition, the pixels obtained through the warping operation can be drawn on the completed three-dimensional display to form one connected 360-degree screen.

도 4(c)와 같은 디스플레이에 영상은 픽셀(401)을 시작점으로, 가로로 픽셀이 하나씩 기록될 수 있으며, 왼쪽에서 오른쪽 순서대로, 위에서 아래 순서대로 픽셀이 하나씩 기록될 수 있다. 이에, 픽셀(402)는 마지막으로 기록될 수 있다.In the display as shown in FIG. 4 (c), an image may be recorded one by one as a starting point of a pixel 401, and one pixel may be recorded one by one in the order from left to right and from top to bottom. Thus, the pixel 402 may be last recorded.

도 4의 실시예는 원뿔형 3차원 디스플레이의 구성에 대한 일례를 설명하고 있으나, 타원형, 원형, 육면체형 등 3차원 디스플레이에 대해서도 플렉시블 디스플레이를 조합하여 다양한 형태의 3차원 디스플레이를 제작할 수 있다.Although the embodiment of FIG. 4 illustrates an example of the configuration of the conical three-dimensional display, various types of three-dimensional displays can be manufactured by combining flexible displays with respect to three-dimensional displays such as elliptical, circular, and hexahedral displays.

실시예에 따른 디스플레이는 카메라 또는 터치 모듈을 포함하고, 사용자와의 인터랙션을 제공할 수 있다.A display according to an embodiment includes a camera or a touch module, and can provide an interaction with a user.

도 5는 일실시예에 있어서, 3차원 디스플레이 영상 처리 장치의 구성을 설명하기 위한 블록도이다. 실시예에 따른 3차원 디스플레이 영상 처리 장치(500)는 디워핑부(510), 추출부(520), 워핑부(530) 및 출력부(540)를 포함할 수 있다.FIG. 5 is a block diagram for explaining a configuration of a three-dimensional display image processing apparatus in one embodiment. The 3D display apparatus 500 according to the embodiment may include a dou- bleing unit 510, an extracting unit 520, a warping unit 530, and an output unit 540. [

디워핑부(510)는, 카메라를 통해 수집된 영상을 디워핑(De-warping)한다. 디워핑은 영상에서 왜곡된 부분을 보정하는 과정을 의미할 수 있다.The de-mapping unit 510 de-warps the image collected through the camera. Diouping may refer to the process of correcting distorted parts of an image.

실시예에서, 카메라를 통해 수집된 영상은 360도 카메라를 통해 수집된 구형 이미지에 해당할 수 있다. 예를 들어, 구형 이미지는 단순히 구형의 형태를 지닌 이미지를 의미하는 것이 아니라, 일반적인 촬영 이미지의 아랫면을 구의 중심 점에 출력하고 윗면을 구의 변에 출력하는 파노라마 형식 이미지에 해당할 수 있다. 이러한 구형 이미지를 회전시키면 연속되는 이미지를 나타낼 수 있다.In an embodiment, an image collected through a camera may correspond to a spherical image collected through a 360 degree camera. For example, a spherical image does not simply mean an image having a spherical shape, but may correspond to a panoramic image in which a lower surface of a general image is outputted to a center point of a sphere, and a top surface is output to a sphere side. Rotating these spherical images can display successive images.

이러한 360도 카메라는 소형화 및 일반화되고 있으며, 개인이 쉽게 구해 영상을 촬영 및 공유할 수 있다.Such a 360-degree camera is becoming smaller and more generalized, and individuals can easily acquire and share images.

추출부(520)는, 영상을 출력할 디스플레이 타입에 따라 전개도를 추출한다.The extracting unit 520 extracts the developed view according to the display type for outputting the image.

실시예에서, 디스플레이는 구형, 타원형, 원뿔, 육면체형 등 3차원으로 출력되는 다양한 형태의 디스플레이에 해당할 수 있고, 영상을 출력하고자 하는 디스플레이에 대해서 적어도 하나의 전개도를 미리 저장할 수 있다. 하나의 디스플레이에 대해서 복수 개의 전개도를 저장할 수 있는데, 전개도는 디스플레이 타입에 따라 전체 구조가 세부적으로 분할될 수 있으며, 그 형태는 다양하게 나타날 수 있다.In an embodiment, the display may correspond to various types of displays that are output in three dimensions, such as spherical, elliptical, conical, or hexahedral shapes, and may store at least one developed view in advance for a display for outputting images. A plurality of developed views can be stored for one display. The entire developed structure can be divided in detail according to the display type, and the shapes can be variously displayed.

예를 들어, 전개도는 디스플레이의 실제 분할된 형태를 기초하여 기 저장될 수 있다. 전개도는 3차원 디스플레이를 형성하기에 분할된 디스플레이들 각각에 대한 파라미터를 포함할 수 있다.For example, a developed view can be stored based on the actual divided shape of the display. The developed view may include parameters for each of the divided displays to form a three-dimensional display.

워핑부(530)는, 추출된 전개도에 디워핑된 영상을 워핑(Warping)한다. 워핑이란, 영상을 일정 규칙에 맞춰서 리샘플링(Re-sampling)하는 작업을 의미한다.The warping unit 530 warps the diarized image on the extracted developed view. Warping refers to the task of re-sampling images in accordance with certain rules.

실시예에서, 추출된 전개도에 대해서 디워핑된 영상을 전개할 수 있다. 전개도에 포함되는 파라미터에 기초하여 영상을 워핑할 수 있는데, 전개도에 대응하는 디스플레이의 크기에 맞춰서 디워핑된 영상을 워핑할 수 있다.In an embodiment, a diverged image may be developed for the extracted developed view. The image can be warped based on the parameters included in the developed view, and the distorted image can be warped according to the size of the display corresponding to the developed view.

예를 들어, 전개도에 포함되는 각각의 면은 3차원 디스플레이의 분할된 디스플레이들 각각에 대응할 수 있으며, 분할된 각 디스플레이들에 출력될 영상이 전개도에 맞게 분할되어 전개도의 각각의 면에 워핑될 수 있다. 이를 위해, 전개도는 3차원 디스플레이가 형성되기 위한 실제 분할 디스플레이들의 정보를 포함하여 저장될 수 있다.For example, each of the faces included in the developed view may correspond to each of the divided displays of the three-dimensional display, and the image to be output to each of the divided displays may be divided according to the developed view and warped on each face of the developed view have. To this end, the developed view may be stored including information of actual divided displays for the three-dimensional display to be formed.

출력부(540)는, 워핑된 영상을 전개도에 대응하는 디스플레이로 출력한다.The output unit 540 outputs the warped image to the display corresponding to the developed view.

실시예에서, 워핑된 영상이 출력되기 위한 3차원 디스플레이는 미리 구비될 수 있고, 3차원 디스플레이의 사양 및 크기에 부합하도록 생성된 영상을 디스플레이할 수 있다. 워핑된 영상의 픽셀들을 디스플레이로 드로잉(Drawing)하여 하나로 연결된 360도 3차원 디스플레이 영상을 출력할 수 있다.In an embodiment, a three-dimensional display for outputting the warped image may be provided in advance, and an image generated to match the specification and size of the three-dimensional display may be displayed. The pixels of the warped image can be drawn to the display to output a 360-degree three-dimensional display image connected thereto.

3차원 디스플레이는 실제 구현될 시, 가격 및 성능 면에서 경쟁력이 있도록 플렉시블 디스플레이를 활용하고, 플렉시블 디스플레이들의 각 면을 접합함으로써 구현될 수 있다. 앞서 설명한 바와 같이, 3차원 디스플레이의 형태는 원뿔, 타원, 구형, 육면체 등 사방에서 어느 각도에서도 영상을 감상할 수 있는 형태로 제공될 수 있다.The 3D display can be implemented by utilizing a flexible display and bonding each side of the flexible displays so as to be competitive in price and performance when actually implemented. As described above, the shape of the three-dimensional display can be provided in a form capable of viewing images from any angle, such as a cone, an ellipse, a sphere, or a hexahedron.

실시예에 따른 3차원 디스플레이는 터치 모듈 및 카메라 등을 구비하고, 어플리케이션이 실행되는 스마트 디스플레이 형태로 제공되어, 3차원 디스플레이에 설치된 어플리케이션을 통해 사용자와 인터랙션(Interaction)을 위한 유저 인터페이스(User Interface)를 제공할 수 있다.The three-dimensional display according to the embodiment includes a touch module, a camera, and the like. The three-dimensional display is provided as a smart display in which an application is executed. The user interface for interacting with a user through an application installed in the three- Can be provided.

이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The embodiments described above may be implemented in hardware components, software components, and / or a combination of hardware components and software components. For example, the devices, methods, and components described in the embodiments may be implemented within a computer system, such as, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, such as an array, a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded. The software and / or data may be in the form of any type of machine, component, physical device, virtual equipment, computer storage media, or device , Or may be permanently or temporarily embodied in a transmitted signal wave. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 비록 한정된 도면에 의해 실시예들이 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다. 그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Although the preferred embodiments of the present invention have been disclosed for illustrative purposes, those skilled in the art will appreciate that various modifications, additions and substitutions are possible, without departing from the scope and spirit of the invention as disclosed in the accompanying claims. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced. Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (19)

카메라를 통해 수집된 영상을 디워핑(De-warping)하는 단계;
상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 단계;
상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 단계; 및
상기 워핑된 영상을 상기 전개도에 대응하는 디스플레이로 출력하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
De-warping an image collected through a camera;
Extracting a developed view according to a display type for outputting the image;
Warping the diverted image to the extracted developed view; And
Outputting the warped image to a display corresponding to the developed view
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 카메라는 360도 회전 가능한 구형의 영상을 획득하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
Wherein the camera acquires a spherical image capable of rotating 360 degrees,
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 카메라를 통해 수집된 영상을 디워핑(De-warping)하는 단계는,
구형의 이미지를 가지는 상기 영상을 직사각형의 평면 이미지로 변경하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
The step of de-warping an image collected through the camera includes:
Changing the image having a rectangular image to a rectangular plane image
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 단계는,
원뿔형, 타원형, 원형, 육면체형 중 적어도 하나의 디스플레이 타입에 대응하는 상기 전개도를 추출하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
Wherein the step of extracting a developed view according to a display type for outputting the image comprises:
Extracting the developed view corresponding to at least one display type of a cone, ellipse, circle, or hexahedron
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 단계는,
상기 디스플레이 타입에 따라 전체 구조가 세부적으로 분할된 상기 전개도를 추출하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
Wherein the step of extracting a developed view according to a display type for outputting the image comprises:
Extracting the developed view in which the entire structure is finely divided according to the display type
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제5항에 있어서,
상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 단계는,
상기 분할된 상기 전개도 상에 상기 디워핑된 영상을 전개하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
6. The method of claim 5,
The step of warping the diverted image to the extracted developed view may include:
Expanding the diverted image on the developed view,
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 단계는,
상기 전개도에 포함되는 파라미터를 이용하여 상기 디워핑된 영상을 워핑하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
The step of warping the diverted image to the extracted developed view may include:
Warping the diverted image using parameters included in the developed view
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 워핑된 영상을 상기 전개도에 대응하는 디스플레이로 출력하는 단계는,
상기 워핑된 영상의 픽셀들을 상기 디스플레이로 드로잉(Drawing)하여 하나로 연결된 360도 디스플레이 영상을 출력하는 단계
를 포함하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
Wherein the step of outputting the warped image to a display corresponding to the developed view comprises:
Drawing the pixels of the warped image to the display and outputting a 360-degree display image connected thereto
/ RTI >
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 디스플레이는,
터치 모듈 및 카메라를 포함하는 사용자 인터페이스를 제공하는,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
Wherein the display comprises:
Providing a user interface including a touch module and a camera,
A method of operating a three - dimensional display image processing apparatus.
제1항에 있어서,
상기 디스플레이는,
상기 전개도에 대응하는 플렉시블 디스플레이들이 접합된 3차원 디스플레이인,
3차원 디스플레이 영상 처리 장치의 동작 방법.
The method according to claim 1,
Wherein the display comprises:
Dimensional display in which flexible displays corresponding to the developed view are bonded,
A method of operating a three - dimensional display image processing apparatus.
하드웨어와 결합되어 제1항 내지 제10항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
10. A computer program stored on a medium for execution in accordance with any one of claims 1 to 10 in combination with hardware.
3차원 디스플레이 영상 처리 장치에 있어서,
카메라를 통해 수집된 영상을 디워핑(De-warping)하는 디워핑부;
상기 영상을 출력할 디스플레이 타입에 따라 전개도를 추출하는 추출부;
상기 추출된 전개도에 상기 디워핑된 영상을 워핑(Warping)하는 워핑부; 및
상기 워핑된 영상을 상기 전개도에 대응하는 디스플레이로 출력하는 출력부
를 포함하는,
3차원 디스플레이 영상 처리 장치.
A three-dimensional display image processing apparatus comprising:
A de-mapping unit for de-warping the image collected through the camera;
An extracting unit for extracting a developed view according to a display type for outputting the image;
A warping unit for warping the diverted image on the extracted developed view; And
And outputting the warped image to a display corresponding to the developed view,
/ RTI >
3 - D display image processing device.
제12항에 있어서,
상기 카메라는 360도 회전 가능한 구형의 영상을 획득하는,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
Wherein the camera acquires a spherical image capable of rotating 360 degrees,
3 - D display image processing device.
제12항에 있어서,
상기 디워핑부는,
구형의 이미지를 가지는 상기 영상을 직사각형의 평면 이미지로 변경하는,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
Wherein the demultiplexing unit comprises:
And changing the image having a rectangular image to a rectangular plane image,
3 - D display image processing device.
제12항에 있어서,
상기 추출부는,
원뿔형, 타원형, 원형, 육면체형 중 적어도 하나의 디스플레이 타입에 대응하는 상기 전개도를 추출하는,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
The extracting unit extracts,
Extracting the developed view corresponding to at least one display type of a cone, ellipse, circle, or hexahedral shape,
3 - D display image processing device.
제12항에 있어서,
상기 워핑부는,
상기 전개도에 포함되는 파라미터를 이용하여 상기 전개도 상에 상기 디워핑된 영상을 전개하는,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
Wherein the warping portion comprises:
Expanding the diverted image on the developed view using parameters included in the developed view,
3 - D display image processing device.
제12항에 있어서,
상기 출력부는,
상기 워핑된 영상의 픽셀들을 상기 디스플레이로 드로잉(Drawing)하여 하나로 연결된 360도 디스플레이 영상을 출력하는,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
The output unit includes:
Drawing the pixels of the warped image to the display and outputting a 360-degree display image connected thereto,
3 - D display image processing device.
제12항에 있어서,
상기 디스플레이는,
상기 전개도에 대응하는 플렉시블 디스플레이들이 접합된 3차원 디스플레이인,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
Wherein the display comprises:
Dimensional display in which flexible displays corresponding to the developed view are bonded,
3 - D display image processing device.
제12항에 있어서,
상기 디스플레이는,
터치 모듈 및 카메라를 포함하는 사용자 인터페이스를 제공하는,
3차원 디스플레이 영상 처리 장치.
13. The method of claim 12,
Wherein the display comprises:
Providing a user interface including a touch module and a camera,
3 - D display image processing device.
KR1020160027039A 2016-03-07 2016-03-07 Image Processing Apparatus Of 3-Demension Display And Method Of Thereof KR102468938B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160027039A KR102468938B1 (en) 2016-03-07 2016-03-07 Image Processing Apparatus Of 3-Demension Display And Method Of Thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160027039A KR102468938B1 (en) 2016-03-07 2016-03-07 Image Processing Apparatus Of 3-Demension Display And Method Of Thereof

Publications (2)

Publication Number Publication Date
KR20170104255A true KR20170104255A (en) 2017-09-15
KR102468938B1 KR102468938B1 (en) 2022-11-21

Family

ID=59926997

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160027039A KR102468938B1 (en) 2016-03-07 2016-03-07 Image Processing Apparatus Of 3-Demension Display And Method Of Thereof

Country Status (1)

Country Link
KR (1) KR102468938B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190044884A (en) * 2017-10-23 2019-05-02 강서연 Apparatus and method for providing virtual reality video considering binocular angle
WO2019190203A1 (en) * 2018-03-27 2019-10-03 주식회사 케이티 Method and apparatus for processing video signal

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040002682A (en) * 2002-06-28 2004-01-07 마이크로소프트 코포레이션 Real-time wide-angle image correction system and method for computer image viewing
KR20140132575A (en) * 2013-05-08 2014-11-18 심영석 camera system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040002682A (en) * 2002-06-28 2004-01-07 마이크로소프트 코포레이션 Real-time wide-angle image correction system and method for computer image viewing
KR20140132575A (en) * 2013-05-08 2014-11-18 심영석 camera system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190044884A (en) * 2017-10-23 2019-05-02 강서연 Apparatus and method for providing virtual reality video considering binocular angle
WO2019190203A1 (en) * 2018-03-27 2019-10-03 주식회사 케이티 Method and apparatus for processing video signal

Also Published As

Publication number Publication date
KR102468938B1 (en) 2022-11-21

Similar Documents

Publication Publication Date Title
CN107316273B (en) Panoramic image acquisition device and acquisition method
JP2019511024A (en) Adaptive Stitching of Frames in the Process of Generating Panoramic Frames
EP3465630B1 (en) Light-field viewpoint and pixel culling for a head mounted display device
US20110273451A1 (en) Computer simulation of visual images using 2d spherical images extracted from 3d data
EP3139602B1 (en) Image processing method and apparatus
KR20130138177A (en) Displaying graphics in multi-view scenes
US10244227B2 (en) Capture and render of virtual reality content employing a light field camera array
US20190068955A1 (en) Generation apparatus, generation method, and computer readable storage medium
JP2022529367A (en) Peripheral estimation from postural monocular video
US20210056662A1 (en) Image processing apparatus, image processing method, and storage medium
US20210233207A1 (en) Method of playing back image on display device and display device
US10230933B2 (en) Processing three-dimensional (3D) image through selectively processing stereoscopic images
KR20180136891A (en) Image processing method and appratus for omni-directional video
KR20170104255A (en) Image Processing Apparatus Of 3-Demension Display And Method Of Thereof
KR101208767B1 (en) Stereoscopic image generation method, device and system using circular projection and recording medium for the same
US20190058857A1 (en) Generating three-dimensional imagery
KR101606539B1 (en) Method for rendering three dimensional image of circle type display
KR101824818B1 (en) Method and apparatus for stiching 360 degree image
KR101425321B1 (en) System for displaying 3D integrated image with adaptive lens array, and method for generating elemental image of adaptive lens array
US20160163093A1 (en) Method and apparatus for generating image
JP2019146010A (en) Image processing device, image processing method, and program
KR102219345B1 (en) Method and system for generating 3 dimension block information
KR102550967B1 (en) Method and apparatus for outputting image
EP2887321B1 (en) Constructing augmented reality environment with pre-computed lighting
JP2020098944A (en) Video generating device, video generating method and video generation program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant