KR20190108721A - Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors - Google Patents

Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors Download PDF

Info

Publication number
KR20190108721A
KR20190108721A KR1020180030098A KR20180030098A KR20190108721A KR 20190108721 A KR20190108721 A KR 20190108721A KR 1020180030098 A KR1020180030098 A KR 1020180030098A KR 20180030098 A KR20180030098 A KR 20180030098A KR 20190108721 A KR20190108721 A KR 20190108721A
Authority
KR
South Korea
Prior art keywords
degree camera
mirror
degree
camera
image
Prior art date
Application number
KR1020180030098A
Other languages
Korean (ko)
Other versions
KR102031485B1 (en
Inventor
최희진
박민영
서재희
이한울
Original Assignee
세종대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 세종대학교산학협력단 filed Critical 세종대학교산학협력단
Priority to KR1020180030098A priority Critical patent/KR102031485B1/en
Publication of KR20190108721A publication Critical patent/KR20190108721A/en
Application granted granted Critical
Publication of KR102031485B1 publication Critical patent/KR102031485B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/236—Image signal generators using stereoscopic image cameras using a single 2D image sensor using varifocal lenses or mirrors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

Disclosed are a multiple-viewpoint image obtaining device using a 360-degree camera and planar mirrors, and a method thereof. According to an embodiment of the present invention, the multiple-viewpoint image obtaining device comprises: a 360-degree camera photographing the surrounding environment at a 360-degree angle; and a mirror unit including multiple mirrors individually arranged to be spaced from each other at predetermined intervals around the 360-degree camera. The 360-degree camera obtains viewpoint information reflected from the multiple mirrors of the mirror unit so as to obtain an image having multiple viewpoints.

Description

360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법{MULTI-VIEW CAPTURING APPARATUS AND METHOD USING SINGLE 360-DEGREE CAMERA AND PLANAR MIRRORS}Multi-view image acquisition device and method using 360-degree camera and flat mirror {MULTI-VIEW CAPTURING APPARATUS AND METHOD USING SINGLE 360-DEGREE CAMERA AND PLANAR MIRRORS}

아래의 실시예들은 다시점 영상 획득 장치 및 방법에 관한 것으로, 더욱 상세하게는 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법에 관한 것이다. The following embodiments relate to a multiview image acquisition device and method, and more particularly to a multiview image acquisition device and method using a 360-degree camera and a plane mirror.

다시점 영상 획득 기술은 여러 대의 카메라를 이용하여 서로 다른 시점을 갖는 영상을 획득하고 이를 통해 3차원 정보를 추출하는 기술이다. Multi-view image acquisition technology is a technology that obtains images having different viewpoints by using a plurality of cameras and extracts three-dimensional information through them.

일반적으로 다시점 영상을 얻기 위해서는 최소 두 대 이상, 일반적으로 세 대 이상의 카메라를 사용한다. 이러한 기존의 일반적인 다시점 영상 획득 장치는 한 대의 카메라로 하나의 대응되는 시점 영상을 획득하므로 많은 수의 시점 영상을 획득할 때 여러 대의 카메라를 사용하게 되어 다시점 영상 획득 장치 전체 부피가 커지는 문제가 발생한다. 또한, 카메라 대수가 증가함에 따라 각 카메라 사이의 정렬 상태를 고르게 맞추기 위한 전처리 과정 및 각 카메라 센서들의 편차로 인한 영상의 차이를 보정하기위해 요구되는 후처리 과정 역시 카메라 대수에 비례해 증가한다. In general, at least two cameras, typically three or more cameras, are used to obtain a multiview image. Since a conventional multiview image acquisition device acquires a corresponding view image with a single camera, a plurality of cameras are used to obtain a large number of view images, and thus the overall volume of the multiview image acquisition device is increased. Occurs. In addition, as the number of cameras increases, the pre-processing process to evenly align the alignment between the cameras and the post-processing process required to correct an image difference due to the deviation of each camera sensor also increase in proportion to the number of cameras.

기존의 다시점 카메라 장치를 이용해 다시점 영상을 획득할 때 카메라 배열이 수동으로 이루어지기 때문에 기하학적 오차가 생성된다. 따라서 기하학적 오차가 존재하는 다시점 영상을 입력 받아 기하학적 오차가 제거된 영상을 출력하는 변환식을 계산하여 오차를 제거해야 한다. When acquiring a multiview image using a conventional multiview camera device, geometrical errors are generated because the camera arrangement is done manually. Therefore, it is necessary to remove the error by calculating a conversion equation that receives a multiview image having geometric error and outputs an image from which the geometric error is removed.

다시점 카메라 장치로 획득한 이미지들 사이의 기하학적 오차를 보정하기 위해 카메라 배열에서 인접한 카메라 간의 광학중심 값을 알고리즘을 통해 획득할 수 있다. 그리고 알고리즘을 통해 얻은 정보를 이용하여 다시점 영상을 보정할 수 있다. In order to correct geometrical errors between images acquired by a multiview camera device, an optical center value between adjacent cameras in a camera array may be obtained through an algorithm. The multi-view image can be corrected using the information obtained through the algorithm.

Y.S.Kang and Y.S.Ho, “Geometrical Compensation for Multi-view Video in Multiple Camera Array,” Proc. of International Symposium on Electronics in Marine (ELMAR), pp. 83-86, Sep. 2008. Y. S. Kang and Y. S. Ho, “Geometrical Compensation for Multi-view Video in Multiple Camera Array,” Proc. of International Symposium on Electronics in Marine (ELMAR), pp. 83-86, Sep. 2008.

실시예들은 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법에 관하여 기술하며, 보다 구체적으로 기존 다시점 영상 획득 기술에서 사용된 카메라보다 더 적은 수의 카메라를 사용하여 다시점 영상을 획득할 수 있는 기술을 제공한다. Embodiments describe a multi-view image acquisition device and method using a 360-degree camera and a planar mirror, and more specifically, multi-view images are acquired using fewer cameras than those used in conventional multi-view image acquisition techniques. Provide the technology to do it.

실시예들은 거울을 이용하여 물체의 다른 시점이 카메라를 향해 반사되도록 배치시켜 360도 카메라로 거울이 반사한 시점 영상을 한번에 획득함으로써, 다시점 영상을 획득할 때 사용되는 카메라 개수를 줄일 수 있는 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법을 제공하는데 있다. Embodiments use a mirror so that different viewpoints of an object are reflected toward the camera so that a 360-degree camera can obtain a viewpoint image reflected by the mirror at a time, thereby reducing the number of cameras used when acquiring a multi-view image. The present invention also provides an apparatus and method for obtaining a multiview image using a camera and a planar mirror.

일 실시예에 따른 다시점 영상 획득 장치는, 주변 환경을 360도 각도로 촬영하는 360도 카메라; 및 상기 360도 카메라의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함하는 거울부를 포함하고, 상기 360도 카메라는, 상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득하여 복수의 시점을 가진 영상을 획득할 수 있다. Multi-view image acquisition apparatus according to an embodiment comprises a 360-degree camera for capturing a 360-degree surrounding environment; And a mirror unit including a plurality of mirrors disposed at predetermined intervals around the 360 degree camera, wherein the 360 degree camera acquires viewpoint information reflected from a plurality of mirrors of the mirror unit. It can obtain an image with.

상기 360도 카메라는, 광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여, 주변 배경 정보를 파노라마 영상으로 생성할 수 있다. The 360-degree camera may generate a panorama image of surrounding background information by connecting images captured at different angles using a wide-angle lens.

상기 360도 카메라는, 상기 파노라마 영상에 있는 복수의 시점 정보를 따로 분리하여 한번의 촬영으로 복수의 다른 시점을 가진 영상을 획득할 수 있다.The 360-degree camera may separately obtain a plurality of viewpoint information in the panoramic image and acquire an image having a plurality of different viewpoints in one shot.

상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행하는 이미지 처리부를 더 포함할 수 있다.The apparatus may further include an image processor configured to perform left and right inversion after acquiring view information reflected from a plurality of mirrors of the mirror unit.

상기 이미지 처리부는, 상기 360도 카메라의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행할 수 있다.The image processor may perform image processing to correct distortion of an image generated by the wide-angle lens of the 360 degree camera.

상기 거울부는, 상기 360도 카메라의 좌측에 배치되는 평면 거울로 구성되며 촬영 대상의 좌측 정보를 반사시켜 상기 360도 카메라에 전달하는 제1 거울; 및 상기 360도 카메라의 우측에 배치되는 평면 거울로 구성되며 촬영 대상의 우측 정보를 반사시켜 상기 360도 카메라에 전달하는 제2 거울을 포함할 수 있다.The mirror unit may include a first mirror configured to be disposed on the left side of the 360 degree camera and reflect the left information of the photographing target to the 360 degree camera; And a second mirror configured to include a planar mirror disposed on the right side of the 360 degree camera and reflect the right information of the photographing object to be transmitted to the 360 degree camera.

상기 제1 거울은 상기 360도 카메라와 -45도 각도를 이루도록 배치되며, 상기 제2 거울은 상기 360도 카메라와 +45도 각도를 이루도록 배치될 수 있다. The first mirror may be disposed to form a -45 degree angle with the 360 degree camera, and the second mirror may be arranged to form an +45 degree angle with the 360 degree camera.

다른 실시예에 따른 다시점 영상 획득 방법은, 360도 카메라의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함하는 거울부가 구성되어, 상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계를 포함하여 이루어질 수 있다. 여기서, 상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는, 상기 360도 카메라를 통해 상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득하여 복수의 시점을 가진 영상을 획득할 수 있다.The multi-view image acquisition method according to another embodiment comprises a mirror unit including a plurality of mirrors which are disposed at predetermined intervals around the 360-degree camera, respectively, by using the 360-degree camera to the surrounding environment at a 360-degree angle It may be made, including the step of photographing. Here, the step of photographing the surrounding environment at a 360-degree angle using the 360-degree camera, obtains the image having a plurality of viewpoints by obtaining view information reflected from the plurality of mirrors of the mirror unit through the 360-degree camera. can do.

상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는, 광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여, 주변 배경 정보를 파노라마 영상으로 생성할 수 있다.In the step of photographing the surrounding environment at a 360-degree angle using the 360-degree camera, the images captured at different angles by using the wide-angle lens are connected to each other to generate the surrounding background information as a panorama image.

상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는, 상기 파노라마 영상에 있는 복수의 시점 정보를 따로 분리하여 한번의 촬영으로 복수의 다른 시점을 가진 영상을 획득할 수 있다.In the photographing of the surrounding environment at a 360-degree angle using the 360-degree camera, a plurality of viewpoint information in the panoramic image may be separately obtained to acquire images having a plurality of different viewpoints in one shot.

상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행하는 단계를 더 포함할 수 있다.The method may further include performing left and right inversion after obtaining view information reflected from the plurality of mirrors of the mirror unit.

상기 360도 카메라의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행하는 단계를 더 포함할 수 있다.The method may further include performing image processing to correct distortion of an image generated by the wide-angle lens of the 360 degree camera.

상기 거울부는, 상기 360도 카메라의 좌측에 배치되는 평면 거울로 구성되며 촬영 대상의 좌측 정보를 반사시켜 상기 360도 카메라에 전달하는 제1 거울; 및 상기 360도 카메라의 우측에 배치되는 평면 거울로 구성되며 촬영 대상의 우측 정보를 반사시켜 상기 360도 카메라에 전달하는 제2 거울을 포함할 수 있다.The mirror unit may include a first mirror configured to be disposed on the left side of the 360 degree camera and reflect the left information of the photographing target to the 360 degree camera; And a second mirror configured to include a planar mirror disposed on the right side of the 360 degree camera and reflect the right information of the photographing object to be transmitted to the 360 degree camera.

상기 제1 거울은 상기 360도 카메라와 -45도 각도를 이루도록 배치되며, 상기 제2 거울은 상기 360도 카메라와 +45도 각도를 이루도록 배치될 수 있다. The first mirror may be disposed to form a -45 degree angle with the 360 degree camera, and the second mirror may be arranged to form an +45 degree angle with the 360 degree camera.

실시예들에 따르면 거울을 이용하여 물체의 다른 시점이 카메라를 향해 반사되도록 배치시켜 360도 카메라로 거울이 반사한 시점 영상을 한번에 획득함으로써, 다시점 영상을 획득할 때 사용되는 카메라 개수를 줄일 수 있는 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법을 제공할 수 있다. According to embodiments, by arranging different views of an object to be reflected toward the camera by using a mirror to obtain a view image reflected by the mirror with a 360-degree camera at once, thereby reducing the number of cameras used when obtaining a multiview image. A multi-view image acquisition apparatus and method using a 360-degree camera and a plane mirror can be provided.

실시예들에 따르면 거울이 물체의 다른 시점 정보를 반사하면 가운데에 있는 360도 카메라가 거울에 반사된 두 가지 시점 영상을 한번에 획득하여, 카메라 보정 작업 없이 보다 간단한 구조로 두 대의 카메라를 통한 영상 획득 장치의 효과를 낼 수 있는 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법을 제공할 수 있다. According to embodiments, when a mirror reflects different viewpoint information of an object, a 360-degree camera in the center acquires two viewpoint images reflected on the mirror at once, and acquires images through two cameras with a simpler structure without camera correction. A multi-view image acquisition device and method using a 360-degree camera and a planar mirror capable of producing the device can be provided.

도 1은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 개략적으로 나타내는 도면이다.
도 2는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 방법을 설명하기 위한 도면이다.
도 3은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 방법의 예를 나타내는 도면이다.
도 4는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험 예를 설명하기 위한 도면이다.
도 5는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험에서 획득된 영상을 나타낸다.
도 6은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험에서 획득된 영상의 보정을 나타낸다.
도 7은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 기존의 다시점 영상 획득 장치와 비교하여 설명하기 위한 도면이다.
도 8은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 360도 카메라에서 획득한 파노라마 영상을 나타낸다.
도 9는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 파노라마 영상으로부터 획득한 두 개의 시점 영상을 각각 나타낸다.
도 10은 기존의 다시점 영상 획득 장치에서 두 대의 카메라에서 획득한 두 개의 시점 영상을 각각 나타내는 도면이다. 1 is a diagram schematically illustrating an apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror, according to an exemplary embodiment.
2 is a diagram for describing a multiview image acquisition method using a 360 degree camera and a planar mirror, according to an exemplary embodiment.
3 is a diagram illustrating an example of a multiview image acquisition method using a 360 degree camera and a planar mirror, according to an exemplary embodiment.
4 is a diagram illustrating an example of an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.
5 illustrates an image acquired in an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.
6 illustrates correction of an image acquired in an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.
7 is a diagram for describing a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment, in comparison with a conventional multiview image acquisition apparatus.
8 illustrates a panoramic image acquired by a 360-degree camera of a multi-view image acquisition device using a 360-degree camera and a plane mirror according to an embodiment.
9 illustrates two view images acquired from a panoramic image of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, respectively, according to an embodiment.
FIG. 10 is a diagram illustrating two viewpoint images acquired by two cameras in the conventional multiview image acquisition apparatus.

이하, 첨부된 도면을 참조하여 실시예들을 설명한다. 그러나, 기술되는 실시예들은 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 이하 설명되는 실시예들에 의하여 한정되는 것은 아니다. 또한, 여러 실시예들은 당해 기술분야에서 평균적인 지식을 가진 자에게 본 발명을 더욱 완전하게 설명하기 위해서 제공되는 것이다. 도면에서 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.Hereinafter, exemplary embodiments will be described with reference to the accompanying drawings. However, the described embodiments may be modified in many different forms, and the scope of the present invention is not limited to the embodiments described below. In addition, various embodiments are provided to more fully describe the present invention to those skilled in the art. Shape and size of the elements in the drawings may be exaggerated for more clear description.

360도 카메라는 광각렌즈를 이용하여 주변 배경 정보를 파노라마 이미지로 생성할 수 있는 장치이다. 하지만 360도 카메라에서 촬영된 파노라마 이미지 같은 경우 3 차원 객체에 대한 시차 정보를 갖고 있지 않으므로, 획득된 파노라마 이미지를 이용하여 3 차원 정보를 갖는 시점 영상(시점 이미지)을 생성할 수 없다. 따라서 아래에서는 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치 및 방법을 제공한다. The 360-degree camera is a device that can create a panoramic image of surrounding background information using a wide-angle lens. However, since the panorama image photographed by the 360 degree camera does not have parallax information about the 3D object, a viewpoint image (viewpoint image) having 3D information cannot be generated using the obtained panorama image. Therefore, the following provides a multi-view image acquisition device and method using a 360-degree camera and a plane mirror.

아래의 실시예들은 다시점 영상을 기존 다시점 영상 획득 기술에서 사용된 카메라보다 더 적은 수의 카메라를 사용하여 획득할 수 있는 것이다. 보다 구체적으로, 실시예들은 거울을 이용하여 물체의 다른 시점이 카메라를 향해 반사되도록 배치시켜 360도 카메라로 거울이 반사한 시점 영상을 한번에 획득함으로써, 다시점 영상을 획득할 때 사용되는 카메라 개수를 줄일 수 있다. The following embodiments may acquire a multiview image using fewer cameras than cameras used in existing multiview image acquisition techniques. More specifically, embodiments are arranged so that different viewpoints of an object are reflected toward the camera by using a mirror to obtain a viewpoint image reflected by the mirror with a 360 degree camera at one time, thereby obtaining the number of cameras used when acquiring a multiview image. Can be reduced.

도 1은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 개략적으로 나타내는 도면이다. 1 is a diagram schematically illustrating an apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

도 1을 참조하면, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 360도 카메라(110) 및 거울부(120, 130)를 포함하여 이루어질 수 있다. Referring to FIG. 1, the apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror according to an embodiment may include a 360 degree camera 110 and mirrors 120 and 130.

360도 카메라(110)는 주변 환경을 360도 각도로 촬영하는 것으로, 거울부(120, 130)의 복수의 거울들로부터 반사된 시점 정보를 획득하여 복수의 시점을 가진 영상을 획득할 수 있다. The 360-degree camera 110 photographs a surrounding environment at a 360-degree angle, and may acquire image information having a plurality of viewpoints by obtaining view information reflected from a plurality of mirrors of the mirror units 120 and 130.

360도 카메라(110)는 광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여, 주변 배경 정보를 파노라마 영상으로 생성할 수 있다. 360도 카메라(110)는 파노라마 영상에 있는 복수의 시점 정보를 따로 분리하여 한번의 촬영으로 복수의 다른 시점을 가진 영상을 획득할 수 있다.The 360 degree camera 110 may connect images captured at different angles using a wide-angle lens to generate surrounding background information as a panorama image. The 360-degree camera 110 may separate a plurality of viewpoint information in the panorama image and acquire an image having a plurality of different viewpoints in one shot.

거울부(120, 130)는 360도 카메라(110)의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함할 수 있다. The mirror units 120 and 130 may include a plurality of mirrors that are disposed at predetermined intervals around the 360 degree camera 110.

거울부(120, 130)는 제1 거울(120) 및 제2 거울(130)을 포함하며, 제1 거울(120)은 360도 카메라(110)의 좌측에 배치되는 평면 거울로 구성되며 촬영 대상의 좌측 정보를 반사시켜 360도 카메라(110)에 전달하고, 제2 거울(130)은 360도 카메라(110)의 우측에 배치되는 평면 거울로 구성되며 촬영 대상의 우측 정보를 반사시켜 360도 카메라(110)에 전달할 수 있다. 이 때, 제1 거울(120)은 360도 카메라(110)와 -45도 각도를 이루도록 배치되며, 제2 거울(130)은 360도 카메라(110)와 +45도 각도를 이루도록 배치될 수 있다. The mirror parts 120 and 130 include a first mirror 120 and a second mirror 130, and the first mirror 120 is composed of a planar mirror disposed on the left side of the 360 degree camera 110 and is a photographing target. Reflect the left side information of the 360 degree camera 110, and the second mirror 130 is composed of a plane mirror disposed on the right side of the 360 degree camera 110 and reflects the right side information of the subject to shoot the 360 degree camera Can be passed to 110. In this case, the first mirror 120 may be disposed to form a -45 degree angle with the 360 degree camera 110, and the second mirror 130 may be arranged to form an +45 degree angle with the 360 degree camera 110. .

또한, 거울부(120, 130)의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행하는 이미지 처리부를 더 포함할 수 있다. 여기서, 이미지 처리부는 360도 카메라(110) 내부 또는 외부에 구성될 수 있으며, 카메라 내부에 구성되는 경우 이미지 처리부는 360도 카메라(110)에 포함되는 것으로 표현될 수 있다. The apparatus may further include an image processor configured to perform left and right inversion after acquiring viewpoint information reflected from the plurality of mirrors of the mirror units 120 and 130. Here, the image processing unit may be configured inside or outside the 360 degree camera 110, and when configured inside the camera, the image processing unit may be represented as being included in the 360 degree camera 110.

이미지 처리부는 360도 카메라(110)의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행할 수 있다.The image processor may perform image processing to correct distortion of an image generated by the wide-angle lens of the 360 degree camera 110.

아래에서는 두 개의 평면 거울로 이루어지는 거울부(120, 130)와 촬영 대상을 물체(Object, O)로 예를 들어 360도 카메라(110)와 평면 거울을 이용한 다시점 영상 획득 장치를 보다 구체적으로 설명한다. Hereinafter, the multi-view image acquisition apparatus using the 360-degree camera 110 and the planar mirror, for example, the mirror unit 120 and 130 consisting of two plane mirrors and the object to be photographed as an object (O) will be described in more detail. do.

일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 360도 카메라(110), 제1 거울(120) 및 제2 거울(130)을 포함하여 이루어질 수 있다. An apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror according to an embodiment may include a 360 degree camera 110, a first mirror 120, and a second mirror 130.

360도 카메라(110)는 물체(O)와 소정 거리 떨어져 전방에 배치될 수 있다. 여기서 물체(O)는 촬영 대상이 되는 3차원 객체가 되는 것으로, 단순히 하나의 객체뿐 아니라 복수의 객체들이 포함될 수 있다. The 360 degree camera 110 may be disposed in front of the object O at a predetermined distance. Here, the object O becomes a 3D object to be photographed and may include not only one object but a plurality of objects.

360도 카메라(110)는 주변 환경을 360도 각도로 촬영할 수 있는 카메라로, 광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여 보여줌으로써 카메라를 중심으로 360도 배경을 모두 촬영 가능한 카메라이다. 이러한 360도 카메라(110)를 이용하여 주변 배경 정보를 파노라마 영상(이미지)으로 생성할 수 있다. 또한, 360도 카메라(110)를 이용하여 주변 배경 정보를 구면 이미지로 생성할 수도 있다. The 360 degree camera 110 is a camera capable of capturing the surrounding environment at a 360 degree angle. The 360 degree camera 110 is a camera capable of capturing all of the 360 degree background around the camera by displaying images captured at different angles using a wide angle lens. . The surrounding background information may be generated as a panoramic image (image) using the 360 degree camera 110. In addition, the surrounding background information may be generated as a spherical image using the 360 degree camera 110.

이 때, 360도 카메라(110)는 360도 카메라(110)의 주위에 배치된 제1 거울(120)과 제2 거울(130)이 반사시키는 물체(O) 정보를 포함한 모든 각도의 정보를 한번에 촬영할 수 있다. In this case, the 360 degree camera 110 displays information of all angles including the object (O) information reflected by the first mirror 120 and the second mirror 130 disposed around the 360 degree camera 110 at once. You can shoot.

여기에서, 360도 카메라(110)는 제1 거울(120)과 제2 거울(130)이 반사시킨 물체(O)의 시점 정보를 포함하는 하나의 파노라마 영상을 촬영하고, 파노라마 영상에 있는 두 개의 시점 정보를 따로 분리함으로써 한번의 촬영으로 두 개의 다른 시점을 가진 영상을 얻을 수 있다. Here, the 360-degree camera 110 captures one panoramic image including the viewpoint information of the object O reflected by the first mirror 120 and the second mirror 130, and the two images in the panoramic image By separating the viewpoint information separately, an image having two different viewpoints can be obtained with one shot.

제1 거울(120)은 360도 카메라(110)의 좌측에 배치되어 물체(O)의 좌측 정보를 360도 카메라(110)에 전달할 수 있다. 이 때, 제1 거울(120)은 평면 거울로 구성될 수 있으며, 360도 카메라(110)와 -45도 각도를 이루도록 배치될 수 있다. The first mirror 120 may be disposed on the left side of the 360 degree camera 110 to transmit information on the left side of the object O to the 360 degree camera 110. In this case, the first mirror 120 may be configured as a planar mirror, and may be arranged to form a -45 degree angle with the 360 degree camera 110.

그리고 제2 거울(130)은 360도 카메라(110)의 우측에 배치되어 물체(O)의 우측 정보를 360도 카메라(110)에 전달할 수 있다. 이 때, 제2 거울(130)은 평면 거울로 구성될 수 있으며, 360도 카메라(110)와 +45도 각도를 이루도록 배치될 수 있다. In addition, the second mirror 130 may be disposed on the right side of the 360 degree camera 110 to transmit information on the right side of the object O to the 360 degree camera 110. In this case, the second mirror 130 may be configured as a planar mirror, and may be arranged to form a +45 degree angle with the 360 degree camera 110.

제1 거울(120) 및 제2 거울(130)은 시점 영상으로 획득하고자 하는 물체(O)의 정보를 카메라 방향으로 반사시킬 수 있다. 다시 말하면, 제1 거울(120)은 360도 카메라(110)와 -45도 각도를 이루도록 배치됨으로써, 360도 카메라(110)가 제1 거울(120)에 반사된 물체(O)의 좌측의 시점 영상(121)을 획득하도록 할 수 있다. 또한 제2 거울(130)은 360도 카메라(110)와 +45도 각도를 이루도록 배치됨으로써, 360도 카메라(110)가 제2 거울(130)에 반사된 물체(O)의 우측의 시점 영상(122)을 획득하도록 할 수 있다. The first mirror 120 and the second mirror 130 may reflect the information of the object O to be acquired as the viewpoint image in the direction of the camera. In other words, the first mirror 120 is disposed at an angle of −45 degrees with the 360 degree camera 110, such that the 360 degree camera 110 is viewed from the left side of the object O reflected by the first mirror 120. The image 121 may be acquired. In addition, the second mirror 130 is disposed to form a +45 degree angle with the 360 degree camera 110, so that the 360 degree camera 110 is a view of the right side of the object (O) reflected by the second mirror 130 ( 122) can be obtained.

실시예들에 따르면 거울이 물체(O)의 다른 시점 정보를 반사하면 가운데에 있는 360도 카메라(110)가 거울에 반사된 두 가지 시점 영상을 한번에 획득하여, 카메라 보정 작업 없이 보다 간단한 구조로 두 대의 카메라를 통한 영상 획득 장치의 효과를 낼 수 있다. According to the embodiments, when the mirror reflects different viewpoint information of the object O, the 360 degree camera 110 in the center acquires two viewpoint images reflected on the mirror at once, thereby providing a simpler structure without camera correction. The effect of the image acquisition device through the large camera can be produced.

이와 같이, 실시예들에 따르면 360도 카메라(110)와 적어도 두 개 이상의 거울을 이용하여 다시점 영상을 얻을 수 있기 때문에 카메라간 오차 보정 등의 과정을 거쳐야 하는 기존의 다시점 영상 장치보다 효율적이다. As described above, since the multi-view image may be obtained by using the 360 degree camera 110 and at least two mirrors, the multi-view image apparatus that is subjected to the process of error correction between cameras is more efficient. .

도 2는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 방법을 설명하기 위한 도면이다. 2 is a diagram for describing a multiview image acquisition method using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

도 2를 참조하면, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 다시점 영상 획득 방법을 제공할 수 있다. 먼저, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는, 도 1에서 설명한 바와 같이, 360도 카메라와 서로 다른 두 개의 평면 거울을 포함하여 이루어질 수 있다. Referring to FIG. 2, a multiview image acquisition method of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror may be provided. First, a multi-view image acquisition apparatus using a 360 degree camera and a planar mirror according to an embodiment may include a 360 degree camera and two different planar mirrors as described with reference to FIG. 1.

제1 거울과 제2 거울을 통해 반사된 3 차원 물체에 대한 서로 다른 시점 정보를 360도 카메라를 이용하여 획득할 수 있다. 여기서, 실제 물체의 좌측 영상 시점과 우측 영상 시점은 각각 거울에 반사되어 좌우가 반전되어 있기 때문에 좌우를 반전시켜 시점 영상을 추출할 수 있다. Different viewpoint information on the 3D object reflected through the first mirror and the second mirror may be acquired using a 360 degree camera. Here, since the left image view point and the right image view point of the real object are respectively reflected by the mirror and the left and right are reversed, the view image may be extracted by reversing the left and right.

보다 구체적으로, 360도 카메라의 좌측에 배치된 제1 거울을 통해 제1 거울에 반사된 물체의 좌측의 시점 영상(211)을 획득하고, 이를 영상 보정하여 보정된 다시점 영상(221)을 획득할 수 있다. 또한 360도 카메라의 우측에 배치된 제2 거울을 통해 제2 거울에 반사된 물체의 우측의 시점 영상(212)을 획득하고, 이를 영상 보정하여 보정된 다시점 영상(222)을 획득할 수 있다. More specifically, the viewpoint image 211 of the left side of the object reflected by the first mirror is acquired through the first mirror disposed on the left side of the 360 degree camera, and the image is corrected to obtain the corrected multiview image 221. can do. In addition, the viewpoint image 212 of the right side of the object reflected by the second mirror is obtained through the second mirror disposed on the right side of the 360 degree camera, and the corrected multiview image 222 may be obtained by correcting the image. .

일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 여러 대의 카메라를 사용하는 시스템에서 발생하는 카메라간 보정 문제 없이 실용적으로 다시점 영상을 획득할 수 있다. The multi-view image acquisition apparatus using a 360-degree camera and a planar mirror according to an embodiment may obtain a multi-view image practically without inter-camera correction problem occurring in a system using multiple cameras.

도 3은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 방법의 예를 나타내는 도면이다. 3 is a diagram illustrating an example of a multiview image acquisition method using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

도 3을 참조하면, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 방법은 360도 카메라(110)의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함하는 거울부(120, 130)가 구성되어, 360도 카메라(110)를 이용하여 주변 환경을 360도 각도로 촬영하는 단계(S110)를 포함하여 이루어질 수 있다. Referring to FIG. 3, a multi-view image acquisition method using a 360 degree camera and a planar mirror according to an embodiment includes a mirror unit including a plurality of mirrors disposed at predetermined intervals around the 360 degree camera 110 ( 120 and 130 may be configured to include a step (S110) of photographing a surrounding environment at a 360 degree angle using the 360 degree camera 110.

그리고, 거울부(120, 130)의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행하는 단계(S120)를 더 포함할 수 있다. 또한, 360도 카메라(110)의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행하는 단계(S130)를 더 포함할 수 있다.In addition, after obtaining view information reflected from the plurality of mirrors of the mirrors 120 and 130, the method may further include performing left and right inversion (S120). In addition, the method may further include performing image processing (S130) to correct distortion of an image generated by the wide-angle lens of the 360-degree camera 110.

일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 방법은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 이용하여 하나의 예를 들어 보다 구체적으로 설명할 수 있다. 한편, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 도 1에서 설명한 바와 같이 360도 카메라(110) 및 거울부(120, 130)를 포함하여 이루어질 수 있으며, 이미지 처리부를 더 포함할 수도 있다. 그리고 거울부(120, 130)는 제1 거울(120) 및 제2 거울(130)을 포함하여 이루어질 수 있다. A multi-view image acquisition method using a 360-degree camera and a planar mirror according to an embodiment will be described in more detail by using an example of a multi-view image acquisition device using a 360-degree camera and a plane mirror. Can be. Meanwhile, the apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror according to an embodiment may include a 360 degree camera 110 and mirrors 120 and 130 as described in FIG. 1, and an image processor. It may further include. The mirrors 120 and 130 may include a first mirror 120 and a second mirror 130.

단계(S110)에서, 360도 카메라(110)의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함하는 거울부(120, 130)가 구성되어, 360도 카메라(110)를 이용하여 주변 환경을 360도 각도로 촬영할 수 있다. In operation S110, mirror units 120 and 130 including a plurality of mirrors disposed at predetermined intervals around the 360 degree camera 110 are configured, and the surrounding environment using the 360 degree camera 110 is configured. You can shoot at a 360-degree angle.

여기서, 360도 카메라(110)를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는, 360도 카메라(110)를 통해 거울부(120, 130)의 복수의 거울들로부터 반사된 시점 정보를 획득하여 복수의 시점을 가진 영상을 획득할 수 있다. Here, in the step of photographing the surrounding environment at a 360 degree angle using the 360 degree camera 110, the view point information reflected from the plurality of mirrors of the mirrors 120 and 130 through the 360 degree camera 110 is obtained. By doing so, an image having a plurality of viewpoints can be obtained.

그리고, 360도 카메라(110)는 광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여, 주변 배경 정보를 파노라마 영상으로 생성할 수 있으며, 파노라마 영상에 있는 복수의 시점 정보를 따로 분리하여 한번의 촬영으로 복수의 다른 시점을 가진 영상을 획득할 수 있다.The 360-degree camera 110 may connect images captured at different angles using a wide-angle lens to generate surrounding background information as a panorama image, and separately separate a plurality of viewpoint information in the panorama image once. Photographing may acquire an image having a plurality of different viewpoints.

한편, 거울부(120, 130)는 360도 카메라(110)의 좌측에 배치되는 평면 거울로 구성되며 촬영 대상의 좌측 정보를 반사시켜 360도 카메라(110)에 전달하는 제1 거울(120), 및 360도 카메라(110)의 우측에 배치되는 평면 거울로 구성되며 촬영 대상의 우측 정보를 반사시켜 360도 카메라(110)에 전달하는 제2 거울(130)을 포함할 수 있다. 이 때, 제1 거울(120)은 360도 카메라(110)와 -45도 각도를 이루도록 배치되며, 제2 거울(130)은 360도 카메라(110)와 +45도 각도를 이루도록 배치될 수 있다. On the other hand, the mirror unit 120, 130 is composed of a planar mirror disposed on the left side of the 360 degree camera 110, the first mirror 120 to reflect the left information of the subject to be transferred to the 360 degree camera 110, And a second mirror 130 configured as a planar mirror disposed at the right side of the 360 degree camera 110 and reflecting the right information of the photographing object to be transmitted to the 360 degree camera 110. In this case, the first mirror 120 may be disposed to form a -45 degree angle with the 360 degree camera 110, and the second mirror 130 may be arranged to form an +45 degree angle with the 360 degree camera 110. .

단계(S120)에서, 이미지 처리부는 거울부(120, 130)의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행할 수 있다.In operation S120, the image processor may perform left and right inversion after obtaining view information reflected from the plurality of mirrors of the mirror units 120 and 130.

단계(S130)에서, 이미지 처리부는 360도 카메라(110)의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행할 수 있다.In operation S130, the image processor may perform image processing to correct distortion of an image generated by the wide-angle lens of the 360 degree camera 110.

아래에서 도면을 참조하여 보다 구체적으로 설명한다. Hereinafter, with reference to the drawings will be described in more detail.

도 3a를 참조하면, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는, 앞에서 설명한 바와 같이, 360도 카메라(110)의 좌측에 배치된 제1 거울(120)을 통해 제1 거울(120)에 반사된 물체(O)의 좌측의 시점 영상(121)을 획득하고, 360도 카메라(110)의 우측에 배치된 제2 거울(130)을 통해 제2 거울(130)에 반사된 물체(O)의 우측의 시점 영상(131)을 획득할 수 있다. Referring to FIG. 3A, the apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror according to an embodiment, as described above, is provided through the first mirror 120 disposed on the left side of the 360 degree camera 110. The second mirror 130 is obtained through the second mirror 130 disposed on the right side of the 360 degree camera 110 by acquiring a viewpoint image 121 of the left side of the object O reflected by the first mirror 120. The viewpoint image 131 on the right side of the object O reflected by the image may be obtained.

도 3b를 참조하면, 360도 카메라(110)는 광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여 보여줌으로써, 주변 배경 정보를 파노라마 영상으로 생성할 수 있다. 360도 카메라(110)는 360도 카메라(110)의 주위에 배치된 제1 거울(120)과 제2 거울(130)이 반사시키는 물체(O) 정보를 포함한 모든 각도의 정보를 한번에 촬영할 수 있다. Referring to FIG. 3B, the 360-degree camera 110 may generate a panorama image by displaying surrounding background information by pasting images captured at different angles using a wide-angle lens. The 360 degree camera 110 may photograph all angle information including the object O information reflected by the first mirror 120 and the second mirror 130 disposed around the 360 degree camera 110 at once. .

이 때, 360도 카메라(110)의 광각렌즈에 의한 이미지의 왜곡이 발생될 수 있다. At this time, the distortion of the image by the wide-angle lens of the 360-degree camera 110 may occur.

도 3c를 참조하면, 360도 카메라(110)는 제1 거울(120)과 제2 거울(130)이 반사시킨 물체(O)의 시점 정보를 포함하는 하나의 파노라마 영상을 촬영하고, 파노라마 영상에 있는 두 개의 시점 정보를 따로 분리함으로써 한번의 촬영으로 두 개의 다른 시점을 가진 영상을 얻을 수 있다. 그리고, 이미지 처리 과정을 통해 360도 카메라(110)의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정할 수 있다. Referring to FIG. 3C, the 360 degree camera 110 captures one panoramic image including viewpoint information of the object O reflected by the first mirror 120 and the second mirror 130, and captures a panoramic image. By separating two pieces of viewpoint information separately, an image having two different viewpoints can be obtained with one shot. The image processing process may correct distortion of an image generated by the wide-angle lens of the 360 degree camera 110.

한편, 카메라 어레이를 사용한 기존의 다시점 영상 획득 장치의 경우 여러 대의 카메라를 사용하기 때문에 카메라 간의 보정이 필요하고 많은 수의 카메라를 사용할 때 시스템의 부피가 커진다. On the other hand, the conventional multi-view image acquisition device using a camera array requires the use of multiple cameras, the calibration between the cameras is required, and the volume of the system becomes large when using a large number of cameras.

이에, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 한 대의 360도 카메라(110)와 거울을 사용하기 때문에 기존의 다시점 영상 획득 장치와 비교하여 시스템의 부피를 줄일 수 있으며 카메라 간의 보정 없이 효율적으로 시점 영상을 얻을 수 있다. Accordingly, since the multi-view image acquisition apparatus using the 360-degree camera and the planar mirror according to an embodiment uses a single 360-degree camera 110 and the mirror, the volume of the system is reduced compared to the conventional multi-view image acquisition apparatus. Viewpoint images can be obtained efficiently without correction between cameras.

여기에서, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치로부터 촬영된 시점 영상은 거울에 의한 좌우 반전과, 360도 카메라(110)의 광각렌즈에 의한 이미지의 왜곡이 발생될 수 있어 이를 보정하기 위한 이미지 처리 과정을 수행할 수도 있다.Here, the viewpoint image photographed from the multi-view image acquisition apparatus using a 360 degree camera and a planar mirror according to an embodiment, the left and right inversion by the mirror and the distortion of the image by the wide-angle lens of the 360 degree camera 110 is generated The image processing process may be performed to correct this problem.

아래에서는 실험을 통해 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 다시점 영상 획득 결과를 확인한다. In the following, the multi-view image acquisition result of the multi-view image acquisition apparatus using a 360-degree camera and a planar mirror according to an embodiment is confirmed.

도 4는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험 예를 설명하기 위한 도면이다. 4 is a diagram illustrating an example of an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

도 4에 도시된 바와 같이, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 실험을 구성할 수 있다. 여기에서는 360도 카메라로 RICOH THETA S(RICOH 社)를 사용하였으며 파노라마 영상의 해상도는 5376 x 2688 이다. 실험에 사용되는 360도 카메라로 촬영되는 파노라마 영상에서 두 개의 광각렌즈에 의해 촬영된 영상이 정합된다. As shown in FIG. 4, the apparatus for obtaining a multiview image using a 360 degree camera and a planar mirror according to an embodiment may configure an experiment. Here, RICOH THETA S (RICOH Co., Ltd.) was used as the 360-degree camera, and the resolution of the panorama image is 5376 x 2688. The images captured by the two wide-angle lenses are matched with the panoramic images captured by the 360-degree camera used in the experiment.

도 1 내지 도 3에서 설명된 바와 같이, 물체의 정면에 소정 거리 이격되어 360도 카메라가 배치되며, 360도 카메라의 좌우 양측에 소정 간격 이격되어 평면 거울이 배치된다. 즉, 360도 카메라의 좌측에 360도 카메라와 -45도 각도로 제1 거울이 배치되며, 360도 카메라의 우측에 360도 카메라와 +45도 각도로 제2 거울이 배치될 수 있다. As described with reference to FIGS. 1 to 3, a 360 degree camera is disposed on the front of the object by a predetermined distance, and a plane mirror is disposed on the left and right sides of the 360 degree camera by a predetermined distance. That is, the first mirror may be disposed at the -45 degree angle with the 360 degree camera on the left side of the 360 degree camera, and the second mirror may be disposed at the +45 degree angle with the 360 degree camera on the right side of the 360 degree camera.

여기에서는 물체와 360도 카메라의 거리를 40cm로 설정하고, 360도 카메라의 좌우 양측에 각각 20cm의 거리를 두고 제1 거울 및 제2 거울이 배치될 수 있다. 한편, 물체와 360도 카메라의 중심과의 거리를 47.5cm로 설정하고, 360도 카메라의 좌우 양측에 각각 25cm의 거리를 두고 제1 거울 및 제2 거울이 배치하여 동일한 실험을 진행한 결과, 동일한 원리로 복수의 시차영상을 획득하는 결과를 확인할 수 있다. 따라서 이러한 거리는 임의의 거리일 뿐 이에 제한되지는 않는다. Herein, the distance between the object and the 360 degree camera may be set to 40 cm, and the first mirror and the second mirror may be disposed at a distance of 20 cm to both left and right sides of the 360 degree camera. Meanwhile, the same experiment was performed by setting the distance between the object and the center of the 360 degree camera to 47.5 cm, and placing the first mirror and the second mirror at a distance of 25 cm on both sides of the 360 degree camera. In principle, the result of acquiring a plurality of parallax images can be confirmed. Therefore, this distance is an arbitrary distance, but is not limited thereto.

제1 거울 및 제2 거울이 물체의 다른 시점 정보를 반사하면, 가운데 배치된 360도 카메라는 거울에 반사된 두 가지 시점 영상을 한번에 획득할 수 있다. When the first mirror and the second mirror reflect different viewpoint information of the object, the centrally located 360 degree camera may acquire two viewpoint images reflected on the mirror at once.

도 5는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험에서 획득된 영상을 나타낸다. 5 illustrates an image acquired in an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

도 5에 도시된 바와 같이, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험에서 두 가지 시점 영상을 획득할 수 있다. As illustrated in FIG. 5, two viewpoint images may be acquired in an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

여기서, 도 5a는 360도 카메라의 좌측에 배치된 제1 거울을 통해 획득된 시점 영상을 좌우 반전하여 획득한 이미지를 나타낸다. 또한, 도 5b는 360도 카메라의 우측에 배치된 제2 거울을 통해 획득된 시점 영상을 좌우 반전하여 획득한 이미지를 나타낸다. 5A illustrates an image obtained by right and left inverting a viewpoint image acquired through a first mirror disposed on a left side of a 360 degree camera. 5B illustrates an image obtained by inverting left and right of a viewpoint image acquired through a second mirror disposed at a right side of a 360 degree camera.

이와 같이 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치는 360도 카메라를 이용하여 거울을 통해 반사된 영상을 획득하므로 영상의 좌우 반전 과정을 수행할 수 있다. As described above, the multi-view image acquisition apparatus using the 360 degree camera and the planar mirror acquires the image reflected through the mirror using the 360 degree camera, so that the image may be inverted left and right.

도 6은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 실험에서 획득된 영상의 보정을 나타낸다. 6 illustrates correction of an image acquired in an experiment of a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment.

도 6을 참조하면, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 경우, 360도 카메라의 광각렌즈에 의한 이미지의 왜곡이 발생될 수 있어 이를 보정하기 위한 이미지 처리 과정을 수행할 수 있다.Referring to FIG. 6, in the multiview image acquisition apparatus using a 360 degree camera and a planar mirror, image distortion may be generated by a wide-angle lens of a 360 degree camera, thereby correcting an image. Can be performed.

아래에서는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치와 기존의 두 대의 카메라를 이용한 다시점 영상 획득 장치를 비교하여 설명한다. Hereinafter, a multiview image acquisition apparatus using a 360 degree camera and a planar mirror and a multiview image acquisition apparatus using two existing cameras will be described.

도 7은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 기존의 다시점 영상 획득 장치와 비교하여 설명하기 위한 도면이다. 7 is a diagram for describing a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment, in comparison with a conventional multiview image acquisition apparatus.

여기서, 도 7a는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 나타내고, 도 7b는 기존의 두 대의 카메라를 이용한 다시점 영상 획득 장치를 나타낸다. 7A illustrates a multiview image acquisition apparatus using a 360 degree camera and a planar mirror, and FIG. 7B illustrates a multiview image acquisition apparatus using two existing cameras.

도 7a 및 도 7b를 참조하면, 360도 카메라(110)의 중심과 제1 거울(120) 사이의 거리는 제1 카메라(11)와 제1 거울(120) 사이 거리와 같고, 360도 카메라(110)의 중심과 제2 거울(130) 사이의 거리는 제2 카메라(12)와 제2 거울(130) 사이의 거리와 같다. 7A and 7B, the distance between the center of the 360 degree camera 110 and the first mirror 120 is equal to the distance between the first camera 11 and the first mirror 120, and the 360 degree camera 110. ) And the distance between the center of the second mirror 130 and the second mirror 130 is equal to the distance between the second camera 12 and the second mirror (130).

또한, 제1 거울(120)에 입사하는 광선은 제1 카메라(11)에 입사하는 정보와 동일한 정보이며, 제1 거울(120)에 의해 반사되어 360도 카메라(110)에 촬영된다. 마찬가지로, 제2 거울(130)에 입사하는 광선은 제2 카메라(12)에 입사하는 정보와 동일한 정보이며, 제2 거울(130)에 의해 반사되어 360도 카메라(110)에 촬영된다. In addition, the light incident on the first mirror 120 is the same information as the information incident on the first camera 11, and is reflected by the first mirror 120 to be photographed by the 360 degree camera 110. Similarly, the light incident on the second mirror 130 is the same information as the information incident on the second camera 12, and is reflected by the second mirror 130 to be photographed by the 360 degree camera 110.

따라서 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치를 통해 획득한 다시점 정보는 기존 두 대의 카메라를 이용한 다시점 영상 획득 장치에서 획득된 다시점 영상의 정보와 동일하다. Therefore, the multiview information acquired through the multiview image acquisition apparatus using the 360 degree camera and the planar mirror according to an embodiment is the same as the information of the multiview image obtained by the multiview image acquisition apparatus using two existing cameras.

도 8은 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 360도 카메라에서 획득한 파노라마 영상을 나타낸다. 그리고 도 9는 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 파노라마 영상으로부터 획득한 두 개의 시점 영상을 각각 나타낸다. 여기서, 도 9a는 좌측 시점 영상이고, 도 9b는 우측 시점 영상이다. 8 illustrates a panoramic image acquired by a 360-degree camera of a multi-view image acquisition device using a 360-degree camera and a plane mirror according to an embodiment. 9 illustrates two viewpoint images acquired from a panoramic image of a multi-view image acquisition apparatus using a 360 degree camera and a planar mirror, according to an exemplary embodiment. 9A is a left view image and FIG. 9B is a right view image.

한편, 도 10은 기존의 다시점 영상 획득 장치에서 두 대의 카메라에서 획득한 두 개의 시점 영상을 각각 나타내는 도면이다. 여기서, 도 10a는 좌측 시점 영상이고, 도 10b는 우측 시점 영상이다. 10 is a diagram illustrating two viewpoint images acquired by two cameras in the conventional multi-view image acquisition device. 10A is a left view image and FIG. 10B is a right view image.

도 8 내지 도 10을 참조하면, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치에서 360도 카메라가 실제로 획득한 파노라마 영상으로부터 추출한 두 개의 시점 영상은 실제 두 대의 카메라를 사용한 기존의 다시점 영상 획득 장치로 얻은 두 개의 시점 영상과 동일하다. 8 to 10, in the multi-view image acquisition apparatus using the 360-degree camera and the planar mirror according to an embodiment, two viewpoint images extracted from the panorama image actually obtained by the 360-degree camera are actually used by two cameras. It is the same as two viewpoint images obtained by a conventional multiview image acquisition device.

즉, 일 실시예에 따른 360도 카메라와 평면 거울을 이용한 다시점 영상 획득 장치의 구조가 상기 원리와 같이 동일한 영상 정보를 획득하는 것을 확인할 수 있다. That is, it can be seen that the structure of a multi-view image acquisition device using a 360 degree camera and a planar mirror according to an embodiment acquires the same image information as described above.

따라서, 실시예들에 따르면 시점 수 보다 적은 카메라 대수를 이용해 다시점 영상을 획득할 수 있으며, 두 개의 평면 거울을 이용하여 물체의 서로 다른 시점 정보를 카메라로 전달할 수 있다. 또한, 360도 카메라를 이용해 다시점 영상을 획득함으로써 카메라 어레이나 별도의 기계적 움직임을 동반하지 않아 오차 발생을 줄이며 정확한 시점 영상을 획득할 수 있다. Therefore, according to embodiments, a multiview image may be acquired using fewer cameras than the number of viewpoints, and different viewpoint information of an object may be transmitted to the camera using two plane mirrors. In addition, by obtaining a multi-view image using a 360-degree camera, it is not accompanied by a camera array or a separate mechanical movement to reduce the occurrence of errors and obtain an accurate view image.

이상에서 어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is referred to as "connected" or "connected" to another component, the component may be directly connected to or connected to the other component, but another component may be present in the middle. It should be understood that. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that there is no other component in between.

본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. As used herein, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof described on the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.

또한, 명세서에 기재된 "…부", "…모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.In addition, terms such as “… unit”, “… module” described in the specification mean a unit that processes at least one function or operation, which may be implemented by hardware or software or a combination of hardware and software.

또한, 각 도면을 참조하여 설명하는 실시예의 구성 요소가 해당 실시예에만 제한적으로 적용되는 것은 아니며, 본 발명의 기술적 사상이 유지되는 범위 내에서 다른 실시예에 포함되도록 구현될 수 있으며, 또한 별도의 설명이 생략될지라도 복수의 실시예가 통합된 하나의 실시예로 다시 구현될 수도 있음은 당연하다.In addition, the components of the embodiments described with reference to the drawings are not limited to the corresponding embodiments, and may be implemented to be included in other embodiments within the scope of the technical spirit of the present invention. Even if the description is omitted, it is obvious that a plurality of embodiments may be reimplemented into one integrated embodiment.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일하거나 관련된 참조 부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. In addition, in the description with reference to the accompanying drawings, the same components regardless of reference numerals will be given the same or related reference numerals and redundant description thereof will be omitted. In the following description of the present invention, if it is determined that the detailed description of the related known technology may unnecessarily obscure the subject matter of the present invention, the detailed description thereof will be omitted.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.Although the embodiments have been described by the limited embodiments and the drawings as described above, various modifications and variations are possible to those skilled in the art from the above description. For example, the described techniques may be performed in a different order than the described method, and / or components of the described systems, structures, devices, circuits, etc. may be combined or combined in a different form than the described method, or other components Or even if replaced or substituted by equivalents, an appropriate result can be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다. Therefore, other implementations, other embodiments, and equivalents to the claims are within the scope of the claims that follow.

Claims (14)

주변 환경을 360도 각도로 촬영하는 360도 카메라; 및
상기 360도 카메라의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함하는 거울부
를 포함하고,
상기 360도 카메라는,
상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득하여 복수의 시점을 가진 영상을 획득하는 것을 특징으로 하는, 다시점 영상 획득 장치. 360 degree camera to capture the environment at a 360 degree angle; And
A mirror unit including a plurality of mirrors disposed at predetermined intervals around the 360 degree camera
Including,
The 360 degree camera,
And obtaining view information reflected from a plurality of mirrors of the mirror unit to obtain an image having a plurality of viewpoints. 제1항에 있어서,
상기 360도 카메라는,
광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여, 주변 배경 정보를 파노라마 영상으로 생성하는 것
을 특징으로 하는, 다시점 영상 획득 장치. The method of claim 1,
The 360 degree camera,
To create a panoramic image of the surrounding background information by joining images taken from different angles using a wide-angle lens
A multi-view image acquisition device, characterized in that. 제2항에 있어서,
상기 360도 카메라는,
상기 파노라마 영상에 있는 복수의 시점 정보를 따로 분리하여 한번의 촬영으로 복수의 다른 시점을 가진 영상을 획득하는 것
을 특징으로 하는, 다시점 영상 획득 장치. The method of claim 2,
The 360 degree camera,
Separating a plurality of viewpoint information in the panoramic image and acquiring an image having a plurality of different viewpoints in one shot.
A multi-view image acquisition device, characterized in that. 제1항에 있어서,
상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행하는 이미지 처리부
를 더 포함하는, 다시점 영상 획득 장치. The method of claim 1,
An image processor for performing left and right inversion after acquiring viewpoint information reflected from a plurality of mirrors of the mirror unit
Further comprising a multi-view image acquisition device. 제4항에 있어서,
상기 이미지 처리부는,
상기 360도 카메라의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행하는 것
을 특징으로 하는, 다시점 영상 획득 장치. The method of claim 4, wherein
The image processing unit,
Performing image processing to correct distortion of an image generated by the wide-angle lens of the 360-degree camera
A multi-view image acquisition device, characterized in that. 제1항에 있어서,
상기 거울부는,
상기 360도 카메라의 좌측에 배치되는 평면 거울로 구성되며 촬영 대상의 좌측 정보를 반사시켜 상기 360도 카메라에 전달하는 제1 거울; 및
상기 360도 카메라의 우측에 배치되는 평면 거울로 구성되며 촬영 대상의 우측 정보를 반사시켜 상기 360도 카메라에 전달하는 제2 거울
을 포함하는, 다시점 영상 획득 장치. The method of claim 1,
The mirror unit,
A first mirror composed of a planar mirror disposed on a left side of the 360 degree camera and reflecting left information of a photographing object to the 360 degree camera; And
A second mirror composed of a planar mirror disposed on the right side of the 360 degree camera and reflecting the right information of the object to be photographed and transmitted to the 360 degree camera.
A multi-view image acquisition device comprising a. 제6항에 있어서,
상기 제1 거울은 상기 360도 카메라와 -45도 각도를 이루도록 배치되며, 상기 제2 거울은 상기 360도 카메라와 +45도 각도를 이루도록 배치되는 것
을 특징으로 하는, 다시점 영상 획득 장치. The method of claim 6,
Wherein the first mirror is disposed to form a -45 degree angle with the 360 degree camera, and the second mirror is arranged to form an +45 degree angle with the 360 degree camera
A multi-view image acquisition device, characterized in that. 360도 카메라의 주위에 소정 간격 이격되어 각각 배치되는 복수의 거울들을 포함하는 거울부가 구성되어, 상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계
를 포함하고,
상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는,
상기 360도 카메라를 통해 상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득하여 복수의 시점을 가진 영상을 획득하는 것을 특징으로 하는, 다시점 영상 획득 방법. A mirror unit including a plurality of mirrors, each of which is disposed at predetermined intervals around the 360 degree camera, and configured to photograph the surrounding environment at a 360 degree angle using the 360 degree camera
Including,
Taking a 360-degree angle of the surrounding environment using the 360-degree camera,
And obtaining view information reflected from a plurality of mirrors of the mirror unit through the 360 degree camera to obtain an image having a plurality of viewpoints. 제8항에 있어서,
상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는,
광각렌즈를 이용하여 서로 다른 각도에서 촬영된 영상을 이어 붙여, 주변 배경 정보를 파노라마 영상으로 생성하는 것
을 특징으로 하는, 다시점 영상 획득 방법. The method of claim 8,
Taking a 360-degree angle of the surrounding environment using the 360-degree camera,
To create a panoramic image of the surrounding background information by joining images taken from different angles using a wide-angle lens
A multi-view image acquisition method, characterized in that. 제9항에 있어서,
상기 360도 카메라를 이용하여 주변 환경을 360도 각도로 촬영하는 단계는,
상기 파노라마 영상에 있는 복수의 시점 정보를 따로 분리하여 한번의 촬영으로 복수의 다른 시점을 가진 영상을 획득하는 것
을 특징으로 하는, 다시점 영상 획득 방법. The method of claim 9,
Taking a 360-degree angle of the surrounding environment using the 360-degree camera,
Separating a plurality of viewpoint information in the panoramic image and acquiring an image having a plurality of different viewpoints in one shot.
A multi-view image acquisition method, characterized in that. 제8항에 있어서,
상기 거울부의 복수의 거울들로부터 반사된 시점 정보를 획득한 후, 좌우 반전을 수행하는 단계
를 더 포함하는, 다시점 영상 획득 방법. The method of claim 8,
Acquiring viewpoint information reflected from a plurality of mirrors of the mirror unit, and then performing left and right inversion
Further comprising, a multi-view image acquisition method. 제8항에 있어서,
상기 360도 카메라의 광각렌즈에 의한 발생된 이미지의 왜곡을 보정하는 이미지 처리를 수행하는 단계
를 더 포함하는, 다시점 영상 획득 방법. The method of claim 8,
Performing image processing to correct distortion of an image generated by the wide-angle lens of the 360-degree camera;
Further comprising, a multi-view image acquisition method. 제8항에 있어서,
상기 거울부는,
상기 360도 카메라의 좌측에 배치되는 평면 거울로 구성되며 촬영 대상의 좌측 정보를 반사시켜 상기 360도 카메라에 전달하는 제1 거울; 및
상기 360도 카메라의 우측에 배치되는 평면 거울로 구성되며 촬영 대상의 우측 정보를 반사시켜 상기 360도 카메라에 전달하는 제2 거울
을 포함하는 것을 특징으로 하는, 다시점 영상 획득 방법. The method of claim 8,
The mirror unit,
A first mirror composed of a planar mirror disposed on a left side of the 360 degree camera and reflecting left information of a photographing object to the 360 degree camera; And
A second mirror composed of a planar mirror disposed on the right side of the 360 degree camera and reflecting the right information of the object to be photographed and transmitted to the 360 degree camera.
A multi-view image acquisition method comprising a. 제13항에 있어서,
상기 제1 거울은 상기 360도 카메라와 -45도 각도를 이루도록 배치되며, 상기 제2 거울은 상기 360도 카메라와 +45도 각도를 이루도록 배치되는 것
을 특징으로 하는, 다시점 영상 획득 방법. The method of claim 13,
Wherein the first mirror is disposed to form a -45 degree angle with the 360 degree camera, and the second mirror is arranged to form an +45 degree angle with the 360 degree camera
A multi-view image acquisition method, characterized in that.
KR1020180030098A 2018-03-15 2018-03-15 Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors KR102031485B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180030098A KR102031485B1 (en) 2018-03-15 2018-03-15 Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180030098A KR102031485B1 (en) 2018-03-15 2018-03-15 Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors

Publications (2)

Publication Number Publication Date
KR20190108721A true KR20190108721A (en) 2019-09-25
KR102031485B1 KR102031485B1 (en) 2019-10-11

Family

ID=68068328

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180030098A KR102031485B1 (en) 2018-03-15 2018-03-15 Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors

Country Status (1)

Country Link
KR (1) KR102031485B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210083745A (en) * 2019-12-27 2021-07-07 주식회사 맥스트 Apparatus and method for generating point cloud
KR20230115816A (en) * 2022-01-27 2023-08-03 계명대학교 산학협력단 Stereo image generating device and method using 360 cam

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090012291A (en) * 2007-07-29 2009-02-03 주식회사 나노포토닉스 Method and apparatus for obtaining panoramic and rectilinear images using rotationally symmetric wide-angle lens
KR20130106544A (en) * 2012-03-20 2013-09-30 삼성전자주식회사 Method and apparatus for obtaining and information of scene
KR20170059902A (en) * 2015-11-23 2017-05-31 한국전자통신연구원 Method and apparatus for encoding/dicoding a multi-perspective video

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090012291A (en) * 2007-07-29 2009-02-03 주식회사 나노포토닉스 Method and apparatus for obtaining panoramic and rectilinear images using rotationally symmetric wide-angle lens
KR20130106544A (en) * 2012-03-20 2013-09-30 삼성전자주식회사 Method and apparatus for obtaining and information of scene
KR20170059902A (en) * 2015-11-23 2017-05-31 한국전자통신연구원 Method and apparatus for encoding/dicoding a multi-perspective video

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Y.S.Kang and Y.S.Ho, "Geometrical Compensation for Multi-view Video in Multiple Camera Array," Proc. of International Symposium on Electronics in Marine (ELMAR), pp. 83-86, Sep. 2008.

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210083745A (en) * 2019-12-27 2021-07-07 주식회사 맥스트 Apparatus and method for generating point cloud
US11423609B2 (en) 2019-12-27 2022-08-23 Maxst Co., Ltd. Apparatus and method for generating point cloud
KR20230115816A (en) * 2022-01-27 2023-08-03 계명대학교 산학협력단 Stereo image generating device and method using 360 cam

Also Published As

Publication number Publication date
KR102031485B1 (en) 2019-10-11

Similar Documents

Publication Publication Date Title
WO2019100933A1 (en) Method, device and system for three-dimensional measurement
JP6585006B2 (en) Imaging device and vehicle
US9946955B2 (en) Image registration method
US8897502B2 (en) Calibration for stereoscopic capture system
US11558600B2 (en) Multiscopic image capture system
US8797387B2 (en) Self calibrating stereo camera
TWI761684B (en) Calibration method of an image device and related image device and operational device thereof
JP2010128820A (en) Apparatus, method and program for processing three-dimensional image, and three-dimensional imaging apparatus
KR20150120066A (en) System for distortion correction and calibration using pattern projection, and method using the same
JP2019510234A (en) Depth information acquisition method and apparatus, and image acquisition device
CN105744138B (en) Quick focusing method and electronic equipment
EP3765815B1 (en) Imaging device, image processing apparatus, and image processing method
US8749652B2 (en) Imaging module having plural optical units in which each of at least two optical units include a polarization filter and at least one optical unit includes no polarization filter and image processing method and apparatus thereof
WO2011134215A1 (en) Stereoscopic camera device
KR102031485B1 (en) Multi-view capturing apparatus and method using single 360-degree camera and planar mirrors
WO2019048904A1 (en) Combined stereoscopic and phase detection depth mapping in a dual aperture camera
JP5857712B2 (en) Stereo image generation apparatus, stereo image generation method, and computer program for stereo image generation
KR102200866B1 (en) 3-dimensional modeling method using 2-dimensional image
KR20220121533A (en) Method and device for restoring image obtained from array camera
CN111292380B (en) Image processing method and device
CN109785225B (en) Method and device for correcting image
EP3318059B1 (en) Stereoscopic image capture
JP2010118716A (en) Stereoscopic imaging apparatus
WO2021093804A1 (en) Omnidirectional stereo vision camera configuration system and camera configuration method
WO2020244273A1 (en) Dual camera three-dimensional stereoscopic imaging system and processing method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right