KR20150098035A - Device for estimating three-dimensional shape of object and method thereof - Google Patents

Device for estimating three-dimensional shape of object and method thereof Download PDF

Info

Publication number
KR20150098035A
KR20150098035A KR1020140019075A KR20140019075A KR20150098035A KR 20150098035 A KR20150098035 A KR 20150098035A KR 1020140019075 A KR1020140019075 A KR 1020140019075A KR 20140019075 A KR20140019075 A KR 20140019075A KR 20150098035 A KR20150098035 A KR 20150098035A
Authority
KR
South Korea
Prior art keywords
projector
structured light
pattern
sensor
distance
Prior art date
Application number
KR1020140019075A
Other languages
Korean (ko)
Other versions
KR102081778B1 (en
Inventor
최만출
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140019075A priority Critical patent/KR102081778B1/en
Publication of KR20150098035A publication Critical patent/KR20150098035A/en
Application granted granted Critical
Publication of KR102081778B1 publication Critical patent/KR102081778B1/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/22Measuring arrangements characterised by the use of optical techniques for measuring depth
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

The present invention relates to a device for calculating a three-dimensional shape of an object and a method thereof. The present invention provides a device for calculating a three-dimensional shape of an object and a method thereof, which can increase an operation area capable of measuring a three-dimensional depth of the object and enables a depth resolution to be uniformly distributed in the operation area.

Description

객체의 3차원 형상을 산출하는 장치 및 방법{DEVICE FOR ESTIMATING THREE-DIMENSIONAL SHAPE OF OBJECT AND METHOD THEREOF}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to an apparatus and a method for calculating a three-

본 발명은 객체의 3차원 형상을 산출하는 장치에 관한 것으로서, 보다 구체적으로는 구조광을 이용하여 객체의 3차원 형상을 산출하는 장치 및 방법에 관한 것이다.
The present invention relates to an apparatus for calculating a three-dimensional shape of an object, and more particularly to an apparatus and a method for calculating a three-dimensional shape of an object using structured light.

최근 인간이나 기타 사물 등 객체에 대한 이미지화에 있어서, 실제 객체의 형태를 반영하여 3차원 이미지로 구현하려고 하는 시도가 계속되고 있다.In recent years, attempts have been made to realize a three-dimensional image by reflecting the shape of an actual object in image formation of an object such as a human being or other objects.

객체의 3차원 형상이미지로 구현하는 방법과 관련하여, 두 장 이상의 가시광 영상을 이용한 방법, 능동 광원을 이용한 적외선 영상을 이용한 방법 등이 제안되고 있다.A method using two or more visible light images and a method using infrared light using an active light source have been proposed in connection with a method of implementing a three-dimensional shape image of an object.

전통적인 스테레오 비전(stereo vision) 방식에 의하면, 좌안, 우안 촬영 영상은 상기 영상을 촬영한 두 센서 사이의 거리(Baseline)에 의하여, 시차(disparity)가 발생하게 되고, 이러한 시차를 이용하여 3차원 깊이 정보를 산출한다.According to the conventional stereoscopic vision method, a disparity occurs due to a distance between two sensors of the left eye and right eye images, Information.

구조광(structured light) 시스템의 경우, 스테레오 비젼 시스템에서의 카메라 하나를 이미 알고 있는 형상을 투사하는 조명계로 전환하는 방식을 이용하여 3차원 깊이 정보를 산출한다. 이를 통하여 구조광 시스템은 구조광이 촬영되는 전 영역에서 깊이 정보를 산출한다.In the case of a structured light system, 3D depth information is calculated using a method of converting a camera in a stereovision system into an illumination system that projects a shape already known. Through this, the structural optical system calculates depth information in all regions where the structural light is captured.

이러한 종래의 구조광 방식에서는, 미리 정해진 베이스라인에 따라 거리에 따른 깊이 분해능(depth resolution)이 달라지게 되어, 객체와의 거리가 따라 상기 객체의 3차원 깊이 정보의 산출을 위한 깊이 분해능이 원하는 수준으로 확보되지 못하는 문제가 있다.
In such a conventional structured optical system, the depth resolution depending on the distance varies according to a predetermined baseline, and the depth resolution for calculating the three-dimensional depth information of the object along the distance from the object is set to a desired level There is a problem that it can not be secured.

본 발명의 과제는, 객체의 3차원 형상을 산출하는 장치에서 객체의 3차원 깊이를 측정할 수 있는 동작 영역을 늘리고, 동작 영역에서 깊이 분해능을 고르게 분포하도록 할 수 있는 객체의 3차원 형상을 산출하는 장치 및 방법을 제공하는 것이다.An object of the present invention is to provide an apparatus for calculating a three-dimensional shape of an object, which increases an operation region capable of measuring the three-dimensional depth of an object, and calculates a three-dimensional shape of the object capable of uniformly distributing the depth resolution in the operation region And to provide a method and an apparatus for performing the method.

본 발명이 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
The technical objects to be achieved by the present invention are not limited to the technical matters mentioned above, and other technical subjects which are not mentioned can be clearly understood by those skilled in the art from the following description. There will be.

본 발명의 일 양상에 따른 객체의 3차원 형상을 산출하는 장치는 제1 패턴이 부가된 제1 구조광(structured light)을 객체에 투사하는 제1 프로젝터, 제2 패턴이 부가된 제2 구조광을 상기 객체에 투사하는 제2 프로젝터, 상기 객체에서 반사된 상기 제1 구조광 및 상기 제2 구조광을 감지하는 센서 및 소정의 기준 이미지와 비교하여, 상기 감지되는 제1 구조광 및 제2 구조광 중 적어도 하나의 이미지에서 패턴의 변화에 따라 상기 객체의 3차원 깊이를 산출하는 제어부를 포함하며, 상기 제1 프로젝터와 상기 센서 사이의 거리는 상기 제2 프로젝터와 상기 센서 사이의 거리와 서로 다른 것을 특징으로 할 수 있다.An apparatus for calculating a three-dimensional shape of an object according to an aspect of the present invention includes a first projector for projecting a first structured light with a first pattern to an object, a second structure light A second projector for projecting the first structured light and the second structured light reflected from the object, and a sensor for sensing the first structured light and the second structured light reflected from the object, Wherein the distance between the first projector and the sensor is different from the distance between the second projector and the sensor, and wherein the distance between the first projector and the sensor is different from the distance between the second projector and the sensor .

상기 기준 이미지는 상기 제1 프로젝터 및 상기 제2 프로젝터에서 투사된 각 구조광이 상기 객체의 3차원 형상을 산출하는 장치로부터 소정의 거리에 있는 기준 면에서 반사되어, 상기 센서에서 감지된 이미지인 것을 포함할 수 있다.Wherein the reference image is reflected on a reference surface at a predetermined distance from an apparatus for calculating the three-dimensional shape of the object, so that each structured light projected from the first projector and the second projector is an image sensed by the sensor .

상기 제어부는 상기 객체의 3차원 형상을 산출하는 장치로부터 소정의 거리에 있는 영역이 설정되면, 상기 설정된 영역에서의 깊이 분해능(depth resolution)에 따라 하나의 프로젝터를 선택하고, 상기 선택된 프로젝터를 이용하여 상기 객체의 3차원 깊이를 산출하는 것을 포함할 수 있다.Wherein the control unit selects one projector in accordance with the depth resolution in the set area when a predetermined distance from the apparatus for calculating the three-dimensional shape of the object is set, And calculating the three-dimensional depth of the object.

상기 제어부는 상기 객체가 감지되는 영역에서의 깊이 분해능에 따라 하나의 프로젝터를 선택하고, 상기 선택된 프로젝터를 이용하여 상기 객체의 3차원 깊이를 산출하는 것을 포함할 수 있다.The controller may select one projector according to the depth resolution in the region where the object is sensed and calculate the three-dimensional depth of the object using the selected projector.

상기 제어부는 상기 제1 프로젝터 및 제2 프로젝터를 소정의 시간 간격에 따라 교대로 이용하여 상기 객체의 3차원 깊이를 산출하는 것을 포함할 수 있다.The control unit may include calculating the three-dimensional depth of the object by alternately using the first projector and the second projector at predetermined time intervals.

상기 제1 프로젝터 및 상기 제2 프로젝터는 상기 센서와의 거리에 따라 투사하는 광량을 조절하는 것을 포함할 수 있다.The first projector and the second projector may include adjusting the amount of light to be projected according to a distance from the sensor.

상기 제1 프로젝터 및 상기 제2 프로젝터는 상기 센서와의 거리에 따라 상기 제1 패턴 및 상기 제2 패턴을 이루는 무늬의 크기 또는 간격 중 적어도 하나를 조절하는 것을 포함할 수 있다.The first projector and the second projector may include adjusting at least one of a size or an interval of the pattern constituting the first pattern and the second pattern according to a distance between the first projector and the second projector.

상기 객체의 3차원 형상을 산출하는 장치는 상기 센서를 기준으로 하여, 상기 제1 프로젝터까지의 거리 및 상기 제2 프로젝터까지의 거리와 다른 거리에 위치하는 적어도 하나의 프로젝터를 더 포함할 수 있다.The apparatus for calculating the three-dimensional shape of the object may further include at least one projector positioned on the basis of the sensor, the distance to the first projector and the distance to the second projector being different from each other.

본 발명의 다른 면에 따라 객체의 3차원 형상을 산출하는 방법은, 제1 패턴이 부가된 제1 구조광을 객체에 투사하는 단계, 상기 제1 구조광을 투사하는 위치와 다른 위치에서 제2 패턴이 부가된 제2 구조광을 상기 객체에 투사하는 단계, 상기 객체에서 반사된 상기 제1 구조광 및 상기 제2 구조광을 감지하는 단계 및 소정의 기준 이미지와 비교하여, 상기 감지되는 제1 구조광 및 제2 구조광 중 적어도 하나의 이미지에서 패턴의 변화에 따라 상기 객체의 3차원 깊이를 산출하는 단계를 포함할 수 있다.
According to another aspect of the present invention, there is provided a method of calculating a three-dimensional shape of an object, including the steps of projecting first structure light added with a first pattern onto an object, Projecting the second structured light with the pattern added thereto onto the object, sensing the first structured light reflected by the object and the second structured light, and comparing the first structured light and the second structured light reflected from the object with the predetermined reference image, And calculating the three-dimensional depth of the object according to a change in the pattern in at least one image of the structured light and the second structured light.

본 발명에 의하면, 객체의 3차원 형상을 산출하는 장치에서 객체의 3차원 깊이를 측정할 수 있는 동작 영역을 늘리고, 동작 영역에서 깊이 분해능을 고르게 분포하도록 할 수 있다.According to the present invention, in an apparatus for calculating three-dimensional shape of an object, it is possible to increase an operation region capable of measuring the three-dimensional depth of an object and distribute the depth resolution evenly in the operation region.

또한, 본 발명에 의하면, 센서를 기준으로 하여, 센서로부터의 거리에 따라 프로젝터의 광량을 조절함으로써, 보다 정확한 3차원 깊이를 산출할 수 있다.Further, according to the present invention, more accurate three-dimensional depth can be calculated by adjusting the light amount of the projector in accordance with the distance from the sensor based on the sensor.

또한, 본 발명에 의하면, 센서를 기준으로 하여, 센서로부터의 거리에 따라 프로젝터에서 투사되는 구조광에 부가된 패턴을 이루는 무늬의 크기 또는 간격 중 어느 하나를 조절함으로써, 보다 정확한 3차원 깊이를 산출할 수 있다.Further, according to the present invention, a more accurate three-dimensional depth can be calculated by adjusting either the size or the interval of the pattern constituting the pattern added to the structured light projected from the projector according to the distance from the sensor on the basis of the sensor can do.

또한, 본 발명에 의하면, 사용자가 설정한 영역에 가장 적합한 깊이 분해능을 갖는 프로젝터를 이용함으로써, 보다 정확한 3차원 깊이를 산출할 수 있다.Further, according to the present invention, a more accurate three-dimensional depth can be calculated by using a projector having a depth resolution best suited to the area set by the user.

또한, 본 발명에 의하면, 객체가 감지되는 영역에 가장 적합한 깊이 분해능을 갖는 프로젝터를 이용함으로써, 보다 정확한 3차원 깊이를 산출할 수 있다.
Further, according to the present invention, a more accurate three-dimensional depth can be calculated by using a projector having a depth resolution best suited to an area where an object is sensed.

도 1은 본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 장치의 블럭 구성도(block diagram)이다.
도 2는 본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 방법의 흐름도이다.
도 3 내지 6은 본 발명의 일 실시예에 따라 객체의 3차원 형상을 산출하는 것을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 장치에 복수의 프로젝터가 포함된 것을 도시한 블럭 구성도이다.
1 is a block diagram of an apparatus for calculating a three-dimensional shape of an object according to an embodiment of the present invention.
2 is a flowchart of a method for calculating a three-dimensional shape of an object according to an embodiment of the present invention.
3 to 6 are diagrams for explaining calculation of a three-dimensional shape of an object according to an embodiment of the present invention.
FIG. 7 is a block diagram showing a configuration in which a plurality of projectors are included in an apparatus for calculating a three-dimensional shape of an object according to an exemplary embodiment of the present invention.

본 발명의 상술한 목적, 특징들 및 장점은 첨부된 도면과 관련된 다음의 상세한 설명을 통해 보다 분명해질 것이다. 다만, 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예들을 가질 수 있는 바, 이하에서는 특정 실시예들을 도면에 예시하고 이를 상세히 설명하고자 한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 원칙적으로 동일한 구성요소들을 나타낸다. 또한, 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 본 명세서의 설명 과정에서 이용되는 숫자(예를 들어, 제1, 제2 등)는 하나의 구성요소를 다른 구성요소와 구분하기 위한 식별기호에 불과하다.
The above objects, features and advantages of the present invention will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. It is to be understood, however, that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and similarities. Like reference numerals designate like elements throughout the specification. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. In addition, numerals (e.g., first, second, etc.) used in the description of the present invention are merely an identifier for distinguishing one component from another.

도 1은 본 발명의 일 실시예와 관련된 객체의 3차원 형상을 산출하는 장치의 블럭 구성도(block diagram)이다.1 is a block diagram of an apparatus for calculating a three-dimensional shape of an object according to an embodiment of the present invention.

상기 객체의 3차원 형상을 산출하는 장치(100)는 프로젝터(110_1, 110_2), 센서(130), 제어부(150) 및 메모리(170) 등을 포함할 수 있다. 상기 객체의 3차원 형상을 산출하는 장치(100)는 도 1에 도시된 구성요소들 이외에 다른 구성요소들을 더 갖는 형태로 구현될 수도 있다.The apparatus 100 for calculating the three-dimensional shape of the object may include a projector 110_1 or 110_2, a sensor 130, a controller 150, a memory 170, or the like. The apparatus 100 for calculating the three-dimensional shape of the object may be implemented in a form having additional components other than the components shown in FIG.

이하, 상기 구성요소들에 대해 차례로 살펴본다.Hereinafter, the components will be described in order.

프로젝터(110_1, 110_2)는 구조광(structured light)을 3차원 깊이 측정의 목적으로 객체에 대해 투사할 수 있다. 광을 투사하는 것은 특정 객체에 대하여 광을 발하는 것을 의미할 수 있다. 상기 구조광에는 임의의 패턴(pattern)이 부가될 수 있다.The projectors 110_1 and 110_2 can project structured light on an object for the purpose of three-dimensional depth measurement. Projecting light can mean emitting light for a particular object. An arbitrary pattern may be added to the structured light.

일 예에 따라, 상기 광은 적외선을 의미할 수 있다. 다만, 이에 한정되는 것은 아니며, 가시광, 적외선, 자외선 및 방사선 중 적어도 하나를 의미할 수 있다.According to one example, the light may be infrared. However, the present invention is not limited thereto, and may mean at least one of visible light, infrared light, ultraviolet light, and radiation.

프로젝터(110_1, 110_2)는 광을 발하는 광원 및 광원으로부터 나오는 광이 입사되어 임의의 패턴이 부가되는 회절 광학 소자(diffraction optical element: DOE) 등을 포함할 수 있다. 다만, 이에 한정되지 아니하며, 프로젝터(110_1, 110_2)는 광에 패턴을 부가하여 투사할 수 있는 것이라면 공지의 다른 구성을 포함할 수 있다.The projectors 110_1 and 110_2 may include a diffracting optical element (DOE) or the like in which a light source emitting light and a light emitted from a light source are incident to add an arbitrary pattern. However, the present invention is not limited thereto, and the projectors 110_1 and 110_2 may include other known structures as long as they can add a pattern to the light and project it.

일 예에 따라, 상기 임의의 패턴은 일정 크기의 점(spot)들이 어떠한 규칙 없이 무작위적으로 배치되는 패턴일 수 있다. 다만, 이에 한정되지 아니하며, 상기 임의의 패턴을 이루는 무늬는 3차원 깊이 측정에 이용될 수 있는 다른 형태가 적용될 수 있다.According to an example, the arbitrary pattern may be a pattern in which spots of a predetermined size are randomly arranged without any rules. However, the present invention is not limited to this, and other patterns that can be used for three-dimensional depth measurement can be applied to the patterns constituting the arbitrary pattern.

센서(130)는 객체에 투사되어 반사된 구조광을 감지하고, 감지한 구조광의 패턴을 이미지화하여, 전기적인 영상신호로 변환할 수 있다. 상기 영상신호로의 변환의 경우 센서(130)는 프레임 단위로 처리할 수 있다. 센서(130)는 상기 변환된 영상신호를 제어부(150)로 출력할 수 있다.The sensor 130 senses the structured light projected and reflected on the object, converts the sensed pattern of the structured light into an electrical image signal. In the case of conversion into the video signal, the sensor 130 can process the data in units of frames. The sensor 130 may output the converted video signal to the controller 150. [

센서(130)는 그 용어에 한정되지 않고, 객체로 투사된 구조광의 패턴을 감지하고, 이미지화하여 전기적인 영상신호로 변환할 수 있는 것이라면 어느 것이라도 적용될 수 있다.The sensor 130 is not limited to the term, and any sensor may be used as long as it can detect the pattern of the structured light projected into the object, convert the image into an electrical image signal.

제어부(150)는 센서(130)에 의하여 이미지화된 상기 구조광의 패턴으로부터 패턴의 변화를 측정할 수 있다. 제어부(150)는 임의의 기준면(reference plane)에 대하여 투사된 구조광의 패턴을 이미지화한 것을 기준으로 하여, 상기 객체에 투사되어 이미지화된 구조광의 패턴의 변화를 측정할 수 있다.The control unit 150 may measure a change in the pattern from the pattern of the structured light image imaged by the sensor 130. The control unit 150 may measure a change in the pattern of the structured light projected on the object and based on the image of the pattern of the projected structured light with respect to an arbitrary reference plane.

제어부(150)는 상기 측정한 구조광 패턴의 변화로부터 상기 객체의 3차원 깊이를 산출할 수 있다. 이를 통하여 제어부(150)는 상기 객체의 3차원 형상을 산출할 수 있다. 제어부(150)는 상기 구조광 패턴의 변화와 프로젝터(110_1, 110_2)의 위치 및 센서(130)의 위치를 이용하여 삼각측량 기법을 토대로 상기 객체의 3차원 형상을 산출할 수 있다.The control unit 150 may calculate the three-dimensional depth of the object from the change in the measured structural light pattern. The control unit 150 may calculate the three-dimensional shape of the object. The control unit 150 may calculate the three-dimensional shape of the object based on the triangulation technique using the change of the structured light pattern, the positions of the projectors 110_1 and 110_2, and the position of the sensor 130. [

다만, 이에 한정되는 것은 아니며, 구조광 패턴의 변화로부터 객체의 3차원 형상을 산출할 수 있다면, 공지의 어떠한 방식도 적용될 수 있다.However, the present invention is not limited to this, and any known method can be applied as long as the three-dimensional shape of the object can be calculated from the change of the structured light pattern.

메모리(170)는 제어부(150)가 상기 객체의 3차원 형상을 산출하기 위한 프로그램을 저장할 수 있다. 또한, 메모리(170)는 상기 기준면에 대한 구조광 패턴의 이미지를 저장할 수 있다. 또한, 메모리(170)는 상기 센서(130)로부터 변환된 구조광 패턴에 대한 영상신호를 저장할 수 있다.The memory 170 may store a program for the controller 150 to calculate the three-dimensional shape of the object. In addition, the memory 170 may store an image of the structured light pattern for the reference plane. In addition, the memory 170 may store the image signal for the converted structured light pattern from the sensor 130. [

메모리(170)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.The memory 170 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (e.g., SD or XD memory), a RAM At least one of a random access memory (RAM), a static random access memory (SRAM), a read-only memory (ROM), an electrically erasable programmable read-only memory (EEPROM), a programmable read- Type storage medium.

도 1의 객체의 3차원 형상을 산출하는 장치(100)의 구현에 있어서, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(170)에 저장되고, 제어부(150)에 의해 실행될 수 있다.In the implementation of the apparatus 100 for computing the three-dimensional shape of the object of FIG. 1, embodiments such as procedures or functions may be implemented with separate software modules that perform at least one function or operation. The software code may be implemented by a software application written in a suitable programming language. Further, the software codes may be stored in the memory 170 and executed by the control unit 150. [

이하 본 발명의 실시 예들을 설명하기로 한다.Hereinafter, embodiments of the present invention will be described.

도 2는 본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 방법의 흐름도이다. 도 3 내지 6은 본 발명의 일 실시예에 따라 객체의 3차원 형상을 산출하는 것을 설명하기 위한 도면이다.2 is a flowchart of a method for calculating a three-dimensional shape of an object according to an embodiment of the present invention. 3 to 6 are diagrams for explaining calculation of a three-dimensional shape of an object according to an embodiment of the present invention.

본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 방법은, 도 1을 참조하여 설명한 객체의 3차원 형상을 산출하는 장치(100)에서 구현될 수 있다. 이하 필요한 도면들을 참조하여, 본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 방법과, 이를 구현하기 위한 객체의 3차원 형상을 산출하는 장치(100)의 동작을 상세히 설명하기로 한다.A method for calculating a three-dimensional shape of an object according to an embodiment of the present invention may be implemented in an apparatus 100 for calculating a three-dimensional shape of an object described with reference to FIG. Hereinafter, a method of calculating a three-dimensional shape of an object according to an embodiment of the present invention and an operation of an apparatus 100 for calculating a three-dimensional shape of an object to implement the method will be described in detail with reference to necessary drawings .

도 2를 참조하면, 제어부(150)는 제1 프로젝터(110_1)를 통하여 제1 패턴이 부가된 제1 구조광을 객체에 투사할 수 있다[S100].Referring to FIG. 2, the controller 150 may project the first structured light having the first pattern added thereto through the first projector 110_1 onto the object (S100).

도 3에는 본 발명의 일 실시예에 따른 프로젝터(110-1, 110_2) 및 센서(130)의 배치가 개략적으로 도시되어 있다. 도 3에 도시된 바와 같이, 제1 프로젝터(110_1)에서 객체(200)로 구조광을 투사할 수 있다. 이 경우, 제1 프로젝터(110_1)의 구동에 대해서는 제어부(150)의 제어에 의할 수 있다.3 schematically illustrates the arrangement of the projectors 110-1 and 110_2 and the sensor 130 according to an embodiment of the present invention. As shown in FIG. 3, structured light can be projected from the first projector 110_1 to the object 200. FIG. In this case, the driving of the first projector 110_1 can be controlled by the control unit 150. [

다시 도 2를 참조하면, 제어부(150)는 상기 제1 구조광을 투사하는 제1 프로젝터(110_1)의 위치와 다른 위치에 배치되는 제2 프로젝터(110_2)를 통하여 제2 패턴이 부가된 제2 구조광을 객체(200)에 투사할 수 있다[S110].2, the controller 150 controls the second projector 110_2 disposed at a position different from that of the first projector 110_1, which projects the first structured light, The structured light can be projected onto the object 200 (S110).

도 3에 도시된 바와 같이, 제2 프로젝터(110_2)에서 객체(200)로 구조광을 투사할 수 있다. 이 경우, 제2 프로젝터(110_2)의 구동에 대해서는 제어부(150)의 제어에 의할 수 있다.As shown in FIG. 3, the structured light can be projected from the second projector 110_2 to the object 200. FIG. In this case, the operation of the second projector 110_2 can be controlled by the control unit 150. [

도 3을 참조하면, 센서(130)를 기준으로 하여 제1 프로젝터(110_1)와 제2 프로젝터(110_2)는 서로 다른 위치에 배치될 수 있다. 일 예에 따라, 종래에 하나의 프로젝터(1)만 사용되는 경우에 비하여 볼 때, 제1 프로젝터(110_1)는 센서(130)에 더 가깝게, 제2 프로젝터(110_2)는 센서(130)로부터 더 멀리 배치될 수 있다. 다만, 이에 한정되는 것은 아니며, 제1 프로젝터(110_1)와 제2 프로젝터(110_2)는 센서를 기준으로 서로 다른 거리를 가지면 족할 것이다.Referring to FIG. 3, the first projector 110_1 and the second projector 110_2 may be disposed at different positions with respect to the sensor 130. The first projector 110_1 is closer to the sensor 130 and the second projector 110_2 is closer to the sensor 130 than to the case where only one projector 1 is used conventionally Can be placed far away. However, the present invention is not limited thereto, and the first projector 110_1 and the second projector 110_2 may have different distances based on the sensor.

또한, 도 3에서는 센서(130)를 기준으로 왼쪽에 상기 두 개의 프로젝터가 모두 위치하고 있으나, 이에 한정되는 것은 아니다. 즉, 상기 두 개의 프로젝터는 센서(130)를 기준으로 오른쪽에 위치할 수 있다. 또는, 상기 두 개의 프로젝터는 센서(130)를 기준으로 각각 왼쪽과 오른쪽에 하나씩 위치할 수 있다. 이 경우 센서(130)로부터 각 프로젝터까지의 거리는 서로 다르게 배치될 수 있다.In FIG. 3, the two projectors are located on the left side of the sensor 130, but the present invention is not limited thereto. That is, the two projectors may be positioned on the right side with respect to the sensor 130. Alternatively, the two projectors may be positioned one on the left and one on the right, respectively, with respect to the sensor 130. In this case, distances from the sensor 130 to the respective projectors may be different from each other.

상기 제1 구조광에 부가되는 제1 패턴 및 제2 구조광에 부가되는 제2 패턴의 경우, 패턴을 이루는 무늬의 크기나 형태는 서로 제한을 받지 않을 수 있다. 제1 패턴과 제2 패턴은 서로 상이한 형태로 적용될 수 있다.In the case of the first pattern added to the first structured light and the second pattern added to the second structured light, the size and shape of the pattern constituting the pattern may not be limited to each other. The first pattern and the second pattern may be applied in different forms.

다시 도 2를 참조하면, 센서(130)에서는 상기 객체(200)에서 반사된 상기 제1 구조광 및 상기 제2 구조광을 감지할 수 있다[S120].Referring to FIG. 2 again, the sensor 130 may sense the first structured light and the second structured light reflected by the object 200 (S120).

도 3에 도시된 바와 같이, 제1 프로젝터(110_1) 및 제2 프로젝터(110_2)에서 객체(200)로 투사된 구조광을 센서(130)에서 감지할 수 있다. 센서(130)에서는 각각 감지된 구조광의 패턴을 이미지화하고, 이를 제어부(150)로 전송할 수 있다.As shown in FIG. 3, the sensor 130 can detect the structured light projected on the object 200 from the first projector 110_1 and the second projector 110_2. The sensor 130 may image the detected pattern of the structured light, and transmit the pattern to the controller 150.

다시 도 2를 참조하면, 제어부(150)는 소정의 기준 이미지와 비교하여, 상기 감지되는 제1 구조광 및 제2 구조광 중 적어도 하나의 이미지에서 패턴의 변화에 따라 상기 객체의 3차원 깊이를 산출할 수 있다[S130].Referring again to FIG. 2, the controller 150 compares the three-dimensional depth of the object according to the change of the pattern in at least one of the sensed first structural light and the second structured light, Can be calculated [S130].

상기 소정의 기준 이미지라 함은 임의의 기준면에 대하여 제1 프로젝터(110_1) 및 제2 프로젝터(110_2)로부터 구조광을 투사하고, 상기 기준면에서 반사되는 구조광을 센서(130)에서 감지하여 각각 이미지화한 영상을 의미할 수 있다.The predetermined reference image refers to a structure in which the structured light is projected from the first projector 110_1 and the second projector 110_2 with respect to an arbitrary reference plane and the structured light reflected from the reference plane is sensed by the sensor 130, It can mean one image.

이에 대하여 구체적으로 설명하기 위하여, 도 4를 보면, 일 예에 따라 구조광을 이용하여 3차원 깊이를 측정하는 방법이 도시되어 있다.To describe this in detail, FIG. 4 shows a method of measuring three-dimensional depth using structured light according to an example.

도 4에서, b는 프로젝터(10)와 센서(20, 50) 내의 렌즈(20) 간의 거리인 베이스라인(baseline)을 의미한다. 기준면(30)은 특정 객체의 깊이를 측정하는데 있어서 기준이 되는 면을 의미한다. ZO는 객체의 3차원 형상을 산출하는 장치(100)와 기준면(30) 사이의 거리에 해당하며, 미리 정해질 수 있다.4, b means a baseline, which is the distance between the projector 10 and the lens 20 in the sensor 20, 50. The reference plane 30 refers to the reference plane for measuring the depth of a specific object. ZO corresponds to the distance between the device 100 for calculating the three-dimensional shape of the object and the reference plane 30, and can be predetermined.

f는 초점 거리이며, 센서(20, 50) 내의 렌즈(20)와 촬상 장치의 이미지 면(50) 사이의 거리에 해당한다. 프로젝터(10)에서 투사된 광은 렌즈(20)를 통하여 유입되어 촬상 장치에서 전기적인 영상 신호로 전환된다. 상기 촬상 장치는 CCD(charge-coupled device) 등 광을 영상 신호로 전환할 수 있는 것이면 어느 것이나 적용될 수 있다.f is the focal length and corresponds to the distance between the lens 20 in the sensor 20, 50 and the image plane 50 of the imaging device. The light projected from the projector 10 flows through the lens 20 and is converted into an electric image signal in the image pickup apparatus. The imaging device can be applied to any device capable of converting light such as a charge-coupled device (CCD) into a video signal.

도 4를 참조하면, 상기 기준 이미지를 획득하기 위하여, 프로젝터(10)에서 미리 정해진 거리 ZO만큼 떨어진 기준면(30)으로 구조광이 투사된다. 투사된 구조광은 기준면(30)에서 반사되어 센서(20, 50)에서 감지된다.Referring to FIG. 4, in order to obtain the reference image, the structured light is projected onto the reference surface 30, which is separated by a predetermined distance ZO from the projector 10. The projected structured light is reflected by the reference surface 30 and is detected by the sensors 20 and 50.

상기 기준면(30)에 투사되어 감지된 구조광의 패턴에 대한 이미지가 상기 기준 이미지가 되며, 이 경우, 상기 기준 이미지는 미리 생성되어 메모리(170)에 저장될 수 있다.An image of the pattern of the structured light projected on the reference plane 30 becomes the reference image. In this case, the reference image may be generated in advance and stored in the memory 170.

이후 객체(40)의 3차원 깊이를 측정하기 위하여, 상기 기준 이미지를 획득할 때 이용되었던 것과 동일한 패턴을 가지는 구조광이 객체(40)로 투사될 수 있다. 도 4에서 객체(40)는 하나의 면처럼 도시되었으나, 이는 설명의 편의를 위한 것으로, 실제로는 객체(40)를 이루는 각 면에 구조광이 투사될 것이다.In order to measure the three-dimensional depth of the object 40, structured light having the same pattern as that used when acquiring the reference image may be projected onto the object 40. In FIG. 4, the object 40 is shown as a single surface, but this is for convenience of explanation. In fact, the structured light will be projected on each surface of the object 40.

객체(40)에서 반사된 구조광이 센서(20, 50)에서 이미지로 획득되면, 제어부(150)는 상기 기준 이미지를 기준으로 하여, 상기 획득된 이미지에서 각각 대응되는 패턴들의 위치 이동을 측정할 수 있다. 이러한 패턴의 위치 이동은 도 4에서 d에 해당되며, 이는 기준 이미지를 기준으로 하여 객체(40)의 k 점에 대응하는 시차(disparity)를 의미한다.When the structured light reflected by the object 40 is acquired as an image by the sensors 20 and 50, the controller 150 measures the positional shifts of the corresponding patterns in the obtained image with reference to the reference image . The movement of the pattern corresponds to d in Fig. 4, which means disparity corresponding to k points of the object 40 with reference to the reference image.

일 예에 따라, 도 4에서 삼각형의 닮은꼴을 이용하면, D/b=(ZO-ZK)/ZO, d/f=D/ZK의 관계에 있음을 알 수 있다. 상기 두 식을 정리하면 아래의 수학식 1이 도출될 수 있다.According to an example, it can be seen that the relation of D / b = (ZO-ZK) / ZO, d / f = D / ZK is obtained by using the resemblance of triangle in FIG. The above two equations can be summarized as follows.

Figure pat00001
Figure pat00001

전술한 바와 같이, 상기 수학식 1에서 f는 초점 거리, b는 베이스라인, ZO는 기준면(30)까지의 거리로서, 미리 정해질 수 있다. 따라서, 객체(40)의 임의의 점 k에 대한 시차 d가 획득된 이미지에서 측정되면, 객체(40)까지의 거리인 3차원 깊이 ZK를 산출할 수 있다. 이러한 연산을 객체(40)의 표면에 대하여 수행함으로써, 객체(40)의 3차원 형상을 산출할 수 있다. As described above, in the above equation (1), f is a focal length, b is a base line, and ZO is a distance to the reference plane 30. Thus, if the parallax d for an arbitrary point k of the object 40 is measured in the acquired image, the 3D depth ZK, which is the distance to the object 40, can be calculated. By performing such an operation on the surface of the object 40, the three-dimensional shape of the object 40 can be calculated.

다시 도 3을 참조하면, 제어부(150)는 제1 프로젝터(110_1)에서 투사된 구조광에 대하여, 기준면에서 반사된 제1 패턴의 이미지(기준 이미지)와 객체(200)에서 반사된 제1 패턴의 이미지를 서로 비교할 수 있다. 제어부(150)는 기준 이미지와 객체(200)에서 반사된 제1 패턴 이미지에서 대응되는 패턴들의 위치 이동을 측정하여, 객체(200)의 3차원 깊이를 산출할 수 있다.Referring again to FIG. 3, the control unit 150 controls the first projector 110_1 to irradiate the structured light projected from the first projector 110_1 with an image (reference image) of the first pattern reflected from the reference plane, Can be compared with each other. The control unit 150 may calculate the three-dimensional depth of the object 200 by measuring the movement of the reference image and the corresponding patterns in the first pattern image reflected by the object 200. [

마찬가지로 제어부(150)는 제2 프로젝터(110_2)에서 투사된 구조광에 대하여, 기준면에서 반사된 제2 패턴 이미지(기준 이미지)와 객체(200)에서 반사된 제2 패턴 이미지를 서로 비교할 수 있다. 제어부(150)는 기준 이미지와 객체(200)에서 반사된 제2 패턴 이미지에서 대응되는 패턴들의 위치 이동을 측정하여, 객체(200)의 3차원 깊이를 산출할 수 있다.Similarly, the control unit 150 can compare the second pattern image (reference image) reflected from the reference plane with the second pattern image reflected from the object 200 with respect to the structured light projected from the second projector 110_2. The control unit 150 may calculate the three-dimensional depth of the object 200 by measuring the positional shift of the corresponding pattern in the reference image and the second pattern image reflected by the object 200. [

각 프로젝터(110_1, 110_2)에서 구조광을 투사하여 객체(200)의 3차원 깊이를 각각 산출하는 경우에도, 제어부(150)는 각각 상기 수학식 1을 이용하여 3차원 깊이를 산출할 수 있다. 이하에서는 도 5a 및 도 5b를 참조하여, 위치를 서로 달리하는 프로젝터를 이용하여 3차원 깊이를 산출하는 것의 효과를 기재하기로 한다.Dimensional depth of the object 200 by projecting the structured light from each of the projectors 110_1 and 110_2, the controller 150 can calculate the three-dimensional depth using Equation (1). Hereinafter, the effects of calculating the three-dimensional depth using projectors having different positions from each other will be described with reference to Figs. 5A and 5B.

도 5a는 프로젝터를 1개만 이용하는 경우(도 3의 프로젝터(1) 참조)에 있어서, 객체의 3차원 깊이 ZK와 시차 d 사이의 관계(곡선 PO)를 나타낸 그래프이다. 곡선 PO의 특성은 상기 수학식 1에서 미리 정해진 값들에 의해 정해진다. 5A is a graph showing a relationship (curve PO) between the three-dimensional depth ZK of the object and the time difference d in the case of using only one projector (see the projector 1 in Fig. 3). The characteristic of the curve PO is determined by the predetermined values in the above equation (1).

우선적으로 깊이 분해능(depth resolution)의 개념을 설명하기로 한다. 3차원 깊이를 산출하는 정도를 나타내는 깊이 분해능은 Z 방향(도 4 참조)의 단위 길이에 대해 표현 가능한 이미지 면(50)에서의 픽셀의 개수로 이해할 수 있다.First, the concept of depth resolution will be described. The depth resolution indicating the degree to which the three-dimensional depth is calculated can be understood as the number of pixels in the image plane 50 that can be expressed with respect to the unit length in the Z direction (see FIG. 4).

즉, 구조광을 검출하는 센서(130)로 디지털화된 센서를 이용하는 경우, 이미지로 획득된 구조광 패턴의 위치 이동 값은 각 픽셀의 개수로 나타내어진다. 따라서, Z 방향으로의 동일 길이를 더 많은 개수의 픽셀로 나타낼수록 깊이 분해능이 크다고 할 수 있다. That is, when a sensor digitized by the sensor 130 for detecting structured light is used, the position shift value of the structured light pattern obtained by the image is represented by the number of pixels. Therefore, it can be said that as the same length in the Z direction is represented by a larger number of pixels, the depth resolution is larger.

곡선 PO를 보면, ZK=ZO인 경우 d가 0의 값을 갖는다는 것을 알 수 있다. 즉, 객체가 기준 이미지가 있던 거리 ZO에 있는 경우 d=0으로 나타나는 것이다. 이는 상기 수학식 1에 d=0을 대입하여서도 확인할 수 있다.From the curve PO, it can be seen that d = 0 when ZK = ZO. That is, when the object is at the distance ZO where the reference image was, d = 0 is displayed. This can be confirmed by substituting d = 0 in Equation (1).

도 5a의 그래프를 살펴보면 ZK 축에서 ZO점을 기준으로 위로 갈수록 객체가 기준면보다 멀어지는 것을 의미한다. 반대로, ZO점을 기준으로 아래로 갈수록 객체가 객체의 3차원 형상을 산출하는 장치(100)와 가까워지는 것을 의미한다.Referring to the graph of FIG. 5A, it is meant that the object moves away from the reference plane toward the ZO point in the ZK axis. Conversely, the downward movement of the object with respect to the ZO point means that the object approaches the apparatus 100 that calculates the three-dimensional shape of the object.

ZK가 ZO보다 큰 영역에서, 거리 ZK가 커질수록 곡선 PO의 기울기가 점점 증가하므로, 동일한 d1에 대응되는 영역 A1은 점점 커지게 된다. 따라서, 상기한 깊이 분해능은 점점 감소하게 된다. 이로 인하여 객체의 3차원 형상이 제대로 산출되지 못하게 된다.In the region where ZK is larger than Z0, the slope of the curve PO gradually increases as the distance ZK becomes larger, so that the region A1 corresponding to the same d1 becomes larger. Therefore, the depth resolution described above is gradually reduced. As a result, the 3D shape of the object can not be calculated properly.

ZK가 ZO보다 작은 영역에서, 거리 ZK가 작아질수록 곡선 PO의 기울기가 점점 감소하므로, 동일한 d1에 대응되는 영역 B1은 점점 작아지게 된다. 따라서, 상기한 깊이 분해능은 점점 증가하게 된다. 이로 인하여 객체의 3차원 형상을 산출하는데 필요한 깊이 분해능보다 더 큰 값을 갖게 되어 불필요한 연산을 하게 된다. 이는 시스템에 불필요한 부하를 주게 된다.In the region where ZK is smaller than ZO, the slope of the curve PO gradually decreases as the distance ZK becomes smaller, so that the region B1 corresponding to the same d1 becomes smaller. Therefore, the depth resolution described above increases. This results in a larger value than the depth resolution required to calculate the three-dimensional shape of the object, resulting in unnecessary computation. This places unnecessary load on the system.

수학식 1의 고정된 값들인 베이스라인 b, 초점 거리 f, 기준 이미지까지의 거리 ZO는 객체의 3차원 형상을 산출하는 장치를 만들 때 미리 정해질 수 있다. 이에 따라 곡선 PO의 특성도 미리 정해지게 된다. 따라서 객체의 3차원 형상을 산출하는 장치는 ZO와 인접한 거리에 객체가 있는 경우 적절한 깊이 분해능으로 동작할 수 있으나, 이를 벗어나게 되면 상기와 같은 문제가 발생하는 것이다.The fixed values of Equation 1, baseline b, focal length f, and distance ZO to the reference image can be predetermined when creating a device that computes the three-dimensional shape of the object. Accordingly, the characteristic of the curve PO is determined in advance. Therefore, the apparatus for calculating the three-dimensional shape of an object can operate at an appropriate depth resolution when an object exists at a distance adjacent to the ZO.

도 5b에서는 일 실시예에 따라, 제1 프로젝터(110_1)와 제2 프로젝터(110_2)를 사용하는 경우, 객체의 3차원 깊이 ZK와 시차 d 사이의 관계를 나타낸 그래프이다.5B is a graph showing the relationship between the 3D depth ZK of the object and the time difference d when the first projector 110_1 and the second projector 110_2 are used according to an embodiment.

곡선 PO는 도 5a에 도시된 것과 같은 곡선이다. 곡선 P1은 2점 쇄선으로 나타낸 곡선으로 제2 프로젝터(110_2)에 의한 특성을 나타낼 수 있다. 곡선 P2은 일점 쇄선으로 나타낸 곡선으로 제1 프로젝터(110_1)에 의한 특성을 나타낼 수 있다. The curve PO is a curve as shown in Fig. 5A. The curve P 1 is a curve represented by a chain double-dashed line and can show characteristics of the second projector 110 _ 2. The curve P 2 is a curved line indicated by a dot-dash line, and can represent characteristics of the first projector 110 _ 1.

ZK가 ZO보다 큰 영역에서는, 곡선 P1과 P2 중에서 곡선 PO보다 기울기가 작은 곡선 P1의 특성에 따르면, 동일 시차 d1에 의해 표현되는 깊이 ZK가 줄어들게 되어(A1에서 A2로 줄어든다) 깊이 분해능이 더 높게 된다.In the region where ZK is larger than ZO, according to the characteristic of the curve P1 in which the slope is smaller than the curve PO among the curves P1 and P2, the depth ZK represented by the same parallax d1 is reduced (decreased from A1 to A2) do.

따라서, 객체가 기준면보다 원거리에 있는 경우에는 곡선 P1에 대응하는 제2 프로젝터(110_2)를 이용할 수 있다. 이로 인하여 거리 ZK가 커질수록 깊이 분해능이 점점 감소하는 문제를 해소할 수 있다.Therefore, when the object is at a distance from the reference plane, the second projector 110_2 corresponding to the curve P1 can be used. As a result, the problem that the depth resolution decreases gradually as the distance ZK becomes larger can be solved.

ZK가 ZO보다 작은 영역에서, 곡선 P1과 P2 중에서 곡선 PO보다 기울기가 큰 곡선 P2의 특성에 따르면, 동일 시차 d1에 의해 표현되는 깊이 ZK가 늘어나게 되어(B1에서 B2로 늘어난다) 깊이 분해능이 더 낮게 된다.In the region where ZK is smaller than ZO, according to the characteristic of the curve P2 having a larger slope than the curve PO among the curves P1 and P2, the depth ZK represented by the same parallax d1 is increased (increased from B1 to B2) do.

따라서, 객체가 기준면보다 근거리에 있는 경우에는 곡선 P2에 대응하는 제1 프로젝터(110_1)를 이용할 수 있다. 이로 인하여 거리 ZK가 작아질수록 깊이 분해능이 높아져서 불필요한 연산을 수행하는 문제를 해소할 수 있다.Therefore, when the object is closer to the reference plane, the first projector 110_1 corresponding to the curve P2 can be used. As a result, the smaller the distance ZK, the higher the depth resolution becomes, and the problem of performing unnecessary arithmetic operations can be solved.

즉, 객체의 위치에 따라 적합한 프로젝터를 사용함으로써, 객체의 3차원 형상을 산출하는 장치(100)로부터의 거리 전반에 걸쳐, 깊이 분해능이 고르게 나타나게 할 수 있는 효과가 있다. 이를 통하여, 객체의 위치에 관계없이 적절한 깊이 분해능을 유지할 수 있으며, 불필요한 연산을 줄일 수 있는 효과가 있다.That is, by using a suitable projector according to the position of the object, the depth resolution can be uniformly displayed over the entire distance from the apparatus 100 for calculating the three-dimensional shape of the object. Accordingly, it is possible to maintain an appropriate depth resolution regardless of the position of the object, and it is possible to reduce unnecessary operations.

도 6은 본 발명의 일 실시예에 따라, 객체와의 거리에 따른 제1 프로젝터(110_1)와 제2 프로젝터(110_2)의 이용을 설명하기 위한 도면이다.FIG. 6 is a view for explaining the use of the first projector 110_1 and the second projector 110_2 according to the distance to the object, according to an embodiment of the present invention.

도 6의 (a)에서는 제1 프로젝터(110_1)와 제2 프로젝터(110_2)의 교차 사용 방법이 시간축에 대해 도시되어 있다.In FIG. 6 (a), the crossing method of the first projector 110_1 and the second projector 110_2 is shown with respect to the time axis.

사용자는 객체의 3차원 형상을 산출하는 장치(100)로부터 소정의 거리에 있는 영역을 설정할 수 있다. 일 예에 따라, 이러한 영역은 산출할 객체의 3차원 형상을 이용하는 애플리케이션 등의 목적에 따라 정해질 수 있다.The user can set an area at a predetermined distance from the apparatus 100 for calculating the three-dimensional shape of the object. According to one example, such a region may be defined according to purposes such as an application using the three-dimensional shape of the object to be calculated.

제어부(150)는 상기 설정된 영역을 수신하여 상기 영역에서 가장 적합한 깊이 분해능을 갖는 하나의 프로젝터를 선택할 수 있다. 예를 들어, 기준면보다 원거리에 있는 영역이 설정된 경우, 제어부(150)는 원거리에서 깊이 분해능이 좋은 제2 프로젝터(110_2)를 선택할 수 있다.The controller 150 receives the set area and can select one projector having the most suitable depth resolution in the area. For example, when a region remote from the reference plane is set, the control unit 150 can select the second projector 110_2 having a good depth resolution at a long distance.

제어부(150)는 상기 선택된 프로젝터를 이용하여 객체(200)의 3차원 깊이를 산출할 수 있다. 이 경우, 도 6의 (a)에서와 같이, 제2 프로젝터(110_2)의 선택 시점 t1을 기준으로 제2 프로젝터(110_2)가 이용되며, 제1 프로젝터(110_1)는 이용되지 아니할 수 있다.The control unit 150 may calculate the three-dimensional depth of the object 200 using the selected projector. In this case, as shown in FIG. 6A, the second projector 110_2 is used based on the selection time point t1 of the second projector 110_2, and the first projector 110_1 may not be used.

다른 일 예에 따라, 제어부(150)는 객체(200)를 감지하고, 객체(200)가 감지되는 영역에서 가장 적합한 깊이 분해능을 갖는 하나의 프로젝터를 선택할 수 있다. 예를 들어, 기준면보다 원거리에서 객체(200)가 감지되는 경우, 제어부(150)는 원거리에서 깊이 분해능이 좋은 제2 프로젝터(110_2)를 선택할 수 있다.According to another example, the controller 150 can detect the object 200 and select one projector having the most suitable depth resolution in the region where the object 200 is sensed. For example, when the object 200 is detected at a distance from the reference plane, the controller 150 can select the second projector 110_2 having a good depth resolution at a long distance.

이 경우, 제어부(150)는 객체가 감지되었는지 여부를 판단할 수 있다. 다만, 이에 한정되지 아니하며, 객체의 3차원 형상을 산출하는 장치(100)는 객체가 감지된 것을 판단할 수 있는 별도의 구성을 가질 수 있다.In this case, the control unit 150 may determine whether or not the object is detected. However, the present invention is not limited to this, and the apparatus 100 for calculating the three-dimensional shape of the object may have a separate structure for determining that the object is detected.

제어부(150)는 상기 선택된 프로젝터를 이용하여 감지된 객체(200)의 3차원 깊이를 산출할 수 있다. 이 경우, 도 6의 (a)에서와 같이, 제2 프로젝터(110_2)의 선택 시점 t1을 기준으로 제2 프로젝터(110_2)가 이용되며, 제1 프로젝터(110_1)는 이용되지 아니할 수 있다.The control unit 150 may calculate the three-dimensional depth of the object 200 sensed using the selected projector. In this case, as shown in FIG. 6A, the second projector 110_2 is used based on the selection time point t1 of the second projector 110_2, and the first projector 110_1 may not be used.

이를 통하여, 객체의 위치에 따라 가장 적합한 깊이 분해능을 갖는 프로젝터를 사용할 수 있어, 더욱 정확한 3차원 깊이 측정이 가능할 수 있다.Accordingly, it is possible to use a projector having the most suitable depth resolution according to the position of the object, thereby enabling more accurate three-dimensional depth measurement.

또한, 일 예에 따라, 제어부(150)는 객체의 감지가 아닌 이벤트의 발생을 감지하여 적합한 프로젝터를 선택할 수 있다. 일 예에 따라, 상기 이벤트는 이미 감지된 객체의 움직임일 수 있다. 예를 들어, 제어부(150)는 객체가 사람인 경우, 사람의 팔의 움직임을 감지하고, 상기 팔이 움직이는 영역에 따라 적합한 프로젝터를 선택할 수 있다.In addition, according to an example, the controller 150 can detect the occurrence of an event rather than the detection of the object, and select an appropriate projector. According to one example, the event may be a motion of an already sensed object. For example, when the object is a person, the controller 150 can detect movement of a person's arm and select a suitable projector according to an area where the arm moves.

도 6의 (b)는 제1 프로젝터(110_1)와 제2 프로젝터(110_2)를 프레임 단위로 빠르게 전환, 이용함으로써 두 프로젝터에 의한 이미지를 병합(merge)하여 사용하는 것을 시간축에 따라 도시한 것이다.FIG. 6B shows a time base in which images of two projectors are merged and used by quickly switching and using the first projector 110_1 and the second projector 110_2 in units of frames.

제어부(150)는 제1 프로젝터(110_1)와 제2 프로젝터(110_2)를 소정의 시간 간격에 따라 교대로 이용하여 객체(200)의 3차원 깊이를 산출할 수 있다.The control unit 150 can calculate the three-dimensional depth of the object 200 by alternately using the first projector 110_1 and the second projector 110_2 at predetermined time intervals.

상기 소정의 시간 간격은 프레임 단위에 해당할 수 있다. 즉, 도 6의 (b)에서의 t2는 제2 프로젝터(110_2)에 의해 투사된 구조광에 대하여 센서(130)에서 1 프레임의 이미지가 생성될 때까지의 시간 간격에 해당될 수 있다. 마찬가지로, t3는 제1 프로젝터(110_1)에 의해 투사된 구조광에 대하여 센서(130)에서 1 프레임의 이미지가 생성될 때까지의 시간 간격에 해당될 수 있다.The predetermined time interval may correspond to a frame unit. That is, t2 in FIG. 6B may correspond to a time interval until the image of one frame is generated by the sensor 130 with respect to the structured light projected by the second projector 110_2. Similarly, t3 may correspond to a time interval until the image of one frame is generated by the sensor 130 with respect to the structured light projected by the first projector 110_1.

이러한 프로젝터의 이용은 일 예에 따라, 객체가 기준면보다 원거리 또는 근거리 중 어느 쪽에서 주로 감지될지 알 수 없는 경우이거나, 객체가 기준면을 중심으로 하여 원거리 및 근거리에 걸쳐 있는 경우에 적용될 수 있다. 상기와 같은 경우, 제어부(150)는 두 프로젝터를 빠르게 전환하여 각 프로젝터에 의한 이미지를 병합함으로써, 가장 적합한 깊이 분해능에 따라, 3차원 깊이를 산출할 수 있다.The use of such a projector can be applied, for example, when the object is not known at a distance or at a near distance from the reference plane, or when the object is located at a distance and near the center around the reference plane. In such a case, the control unit 150 can rapidly convert the two projectors and merge the images by the respective projectors, whereby the three-dimensional depth can be calculated according to the most suitable depth resolution.

이를 통하여, 객체의 거리에 따라 가장 적합한 깊이 분해능을 이용할 수 있어, 더욱 정확한 3차원 깊이 측정이 가능할 수 있다.Through this, it is possible to utilize the most suitable depth resolution according to the distance of the object, and more accurate three-dimensional depth measurement can be made.

일 실시예에 따라, 제1 프로젝터(110_1) 및 제2 프로젝터(110_2)는 센서(130)와의 거리에 따라, 투사하는 광량을 조절할 수 있다. 일 예에 따라, 프로젝터가 배치되는 위치를 기초로 미리 각 프로젝터에 대한 광량이 설정될 수 있다. 또는, 다른 일 예에 따라, 제어부(150)는 사용자의 입력을 받아 각 프로젝터의 광량을 조절할 수 있다.According to one embodiment, the first projector 110_1 and the second projector 110_2 can adjust the amount of light to be projected according to the distance from the sensor 130. [ According to one example, the light amount for each projector can be set in advance based on the position where the projector is disposed. Alternatively, according to another example, the control unit 150 may receive a user input to adjust the light amount of each projector.

객체가 기준면보다 원거리에 있는 경우, 프로젝터에서 투사되어 센서에서 감지되기까지의 구조광의 이동 경로가 길어지게 되므로, 센서에 도달되는 광량이 줄어들어 3차원 깊이 산출이 어려워질 수 있다.When the object is located at a distance from the reference plane, the traveling path of the structured light from the projector to the sensing of the sensor is lengthened, so that the amount of light reaching the sensor may be reduced and the 3D depth calculation may become difficult.

반대로, 객체가 기준면보다 근거리에 있는 경우, 프로젝터에서 투사되어 센서에서 감지되기까지의 구조광의 이동 경로가 짧아, 센서에 도달되는 광량이 너무 클 수 있어 3차원 깊이 산출이 어려워질 수 있다.On the contrary, when the object is closer than the reference plane, the path of the structured light projected from the projector and detected by the sensor is short, and the amount of light reaching the sensor may be too large, which may make calculation of the three-dimensional depth difficult.

전술한 바와 같이, 본 발명에서는 객체가 기준면보다 원거리에 있는 경우, 깊이 분해능 측면에서 제2 프로젝터(110_2)를 이용하므로, 제2 프로젝터(110_2)에서 투사되는 광량은 근거리에서 이용되는 제1 프로젝터(110_1)의 광량보다 강하게 조절될 수 있다.As described above, in the present invention, when the object is located at a distance from the reference plane, since the second projector 110_2 is used in terms of depth resolution, the amount of light projected from the second projector 110_2 is smaller than the amount of light projected from the first projector Lt; RTI ID = 0.0 > 110_1. ≪ / RTI >

상기한 바와 같이, 동작 영역별로 프로젝터의 광량을 조절함으로써, 객체의 거리에 적합한 광량을 투사할 수 있어, 더욱 정확한 3차원 깊이를 산출할 수 있다.As described above, by adjusting the light amount of the projector for each operation region, it is possible to project an amount of light suitable for the distance of the object, and more accurate three-dimensional depth can be calculated.

일 실시예에 따라, 제1 프로젝터(110_1) 및 제2 프로젝터(110_2)는 센서(130)와의 거리에 따라 구조광에 부가되는 제1 패턴 및 제2 패턴을 이루는 무늬의 크기 또는 간격 중 적어도 하나를 조절하는 것을 포함할 수 있다.According to one embodiment, the first projector 110_1 and the second projector 110_2 may have a first pattern added to the structured light according to the distance from the sensor 130 and at least one of a size or an interval of the pattern forming the second pattern / RTI >

일 예에 따라, 프로젝터가 배치되는 위치를 기초로 미리 각 프로젝터에 대한 구조광에 부가되는 패턴이 설정될 수 있다. 또는, 다른 일 예에 따라, 제어부(150)는 사용자의 입력을 받아 각 프로젝터에 대한 구조광에 부가되는 패턴을 조절할 수 있다. According to one example, a pattern added to the structured light for each projector in advance can be set based on the position where the projector is placed. Alternatively, according to another example, the control unit 150 may receive a user input and adjust a pattern added to the structured light for each projector.

객체가 기준면보다 원거리에 있는 경우, 프로젝터에서 투사되어 센서에서 감지되기까지의 구조광의 이동 경로가 길어지게 되므로, 센서에서 획득되는 패턴을 이루는 무늬가 너무 작거나, 무늬 사이의 거리가 너무 멀어 3차원 깊이 산출이 어려워질 수 있다.When the object is located at a distance from the reference plane, the path of the structured light projected from the projector and sensed by the sensor becomes long, so that the pattern obtained by the sensor is too small or the distance between the patterns is too long, The depth calculation may become difficult.

반대로, 객체가 기준면보다 근거리에 있는 경우, 프로젝터에서 투사되어 센서에서 감지되기까지의 구조광의 이동 경로가 짧아, 센서에서 획득되는 패턴을 이루는 무늬가 너무 크거나, 무늬 사이의 거리가 너무 가까워 3차원 깊이 산출이 어려워질 수 있다.On the contrary, when the object is closer than the reference plane, the movement path of the structured light projected from the projector and sensed by the sensor is short, and the pattern of the pattern obtained by the sensor is too large or the distance between the patterns is too close, The depth calculation may become difficult.

전술한 바와 같이, 본 발명에서는 객체가 기준면보다 원거리에 있는 경우, 깊이 분해능 측면에서 제2 프로젝터(110_2)를 이용하므로, 제2 프로젝터(110_2)에서 투사되는 구조광에 부가된 패턴은 근거리에서 이용되는 제1 프로젝터(110_1)의 패턴보다 무늬가 크고 무늬 사이의 간격이 가깝게 조절될 수 있다.As described above, in the present invention, when the object is located at a distance from the reference plane, the second projector 110_2 is used in terms of depth resolution, so that the pattern added to the structure light projected from the second projector 110_2 can be used The patterns of the first projector 110_1 may be larger than the patterns of the first projector 110_1 and the intervals between the patterns may be adjusted to be closer to each other.

동작 영역별로 프로젝터의 패턴을 조절함으로써, 객체의 거리에 적합한 패턴이 부가된 구조광을 투사할 수 있어, 더욱 정확한 3차원 깊이를 산출할 수 있다.By adjusting the pattern of the projector for each operation region, it is possible to project the structured light to which the pattern suitable for the distance of the object is added, and thereby to obtain a more accurate three-dimensional depth.

도 7은 본 발명의 일 실시예에 따른 객체의 3차원 형상을 산출하는 장치(100)에 복수의 프로젝터(110_1, 110_2, ..., 110_N)가 포함되는 것을 도시한 블럭 구성도이다.FIG. 7 is a block diagram showing an apparatus 100 for calculating a three-dimensional shape of an object according to an exemplary embodiment of the present invention, including a plurality of projectors 110_1, 110_2, ..., 110_N.

객체의 3차원 형상을 산출하는 장치(100)는 센서(130)를 기준으로 하여, 제1 프로젝터(110_1)까지의 거리 및 제2 프로젝터(110_2)까지의 거리와 다른 거리에 위치하는 적어도 하나의 프로젝터를 더 포함할 수 있다.The apparatus 100 for calculating the three-dimensional shape of the object may be configured to calculate the three-dimensional shape of the object based on the sensor 130 and at least one And may further include a projector.

이 경우 전술한 바와 마찬가지로, 각 프로젝터(110_1, 110_2, ..., 110_N)의 특성에 따라 객체의 3차원 깊이 ZK와 시차 d 사이의 관계 곡선이 N개 나타날 수 있다. 센서와의 거리인 베이스라인 b 값에 따라 상기 N개의 곡선의 기울기가 결정될 수 있다.In this case, as described above, there may be N relationship curves between the three-dimensional depth ZK of the object and the time difference d depending on the characteristics of the projectors 110_1, 110_2, ..., 110_N. The slope of the N curves can be determined according to the baseline b value, which is the distance from the sensor.

따라서, 객체까지의 각 거리 구간에 따라 가장 적합한 곡선을 선택하고 해당 프로젝터를 이용할 수 있다. 이를 통하여 객체의 3차원 형상을 산출하는 장치의 동작 영역을 늘리고, 동작 영역 전반에 걸쳐 고른 깊이 분해능으로 3차원 객체의 깊이를 산출할 수 있다. Therefore, the most suitable curve can be selected according to each distance section to the object, and the projector can be used. Through this, it is possible to increase the operation region of the apparatus for calculating the three-dimensional shape of the object and to calculate the depth of the three-dimensional object with uniform depth resolution over the entire operation region.

상기에서 설명한 본 발명에 의한 객체의 3차원 형상을 산출하는 방법은, 컴퓨터에서 실행시키기 위한 프로그램으로 컴퓨터로 읽을 수 있는 기록매체에 기록하여 제공될 수 있다.The above-described method for calculating the three-dimensional shape of the object according to the present invention can be provided by being recorded on a computer-readable recording medium as a program for execution on a computer.

컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는, ROM, RAM, CD-ROM, DVD±ROM, DVD-RAM, 자기 테이프, 플로피 디스크, 하드 디스크(hard disk), 광데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 장치에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the computer-readable recording device include a ROM, a RAM, a CD-ROM, a DVD 占 ROM, a DVD-RAM, a magnetic tape, a floppy disk, a hard disk, The computer-readable recording medium may also be distributed to networked computer devices so that computer readable code can be stored and executed in a distributed manner.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다. 또한, 본 문서에서 설명된 실시예들은 한정되게 적용될 수 있는 것이 아니라, 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. The present invention is not limited to the drawings. In addition, the embodiments described in this document may not be limitedly applied, but all or some of the embodiments may be selectively combined so that various modifications may be made.

100: 객체의 3차원 형상을 산출하는 장치
110_1 ~ 110_N: 프로젝터 130: 센서
150: 제어부 170: 메모리
100: a device for calculating the three-dimensional shape of an object
110_1 to 110_N: Projector 130: Sensor
150: control unit 170: memory

Claims (9)

제1 패턴이 부가된 제1 구조광(structured light)을 객체에 투사하는 제1 프로젝터;
제2 패턴이 부가된 제2 구조광을 상기 객체에 투사하는 제2 프로젝터;
상기 객체에서 반사된 상기 제1 구조광 및 상기 제2 구조광을 감지하는 센서; 및
소정의 기준 이미지와 비교하여, 상기 감지되는 제1 구조광 및 제2 구조광 중 적어도 하나의 이미지에서 패턴의 변화에 따라 상기 객체의 3차원 깊이를 산출하는 제어부;
를 포함하며,
상기 제1 프로젝터와 상기 센서 사이의 거리는 상기 제2 프로젝터와 상기 센서 사이의 거리와 서로 다른 것을 특징으로 하는 객체의 3차원 형상을 산출하는 장치.
A first projector for projecting a first structured light to which a first pattern is added onto an object;
A second projector for projecting the second structured light added with the second pattern onto the object;
A sensor for sensing the first structured light and the second structured light reflected from the object; And
A control unit for calculating a three-dimensional depth of the object according to a change in a pattern in at least one image of the first structured light and the second structured light sensed, in comparison with a predetermined reference image;
/ RTI >
Wherein the distance between the first projector and the sensor is different from the distance between the second projector and the sensor.
제 1 항에 있어서, 상기 기준 이미지는
상기 제1 프로젝터 및 상기 제2 프로젝터에서 투사된 각 구조광이 상기 객체의 3차원 형상을 산출하는 장치로부터 소정의 거리에 있는 기준 면에서 반사되어, 상기 센서에서 감지된 이미지인 것을 포함하는 객체의 3차원 형상을 산출하는 장치.
2. The method of claim 1,
Wherein each structured light projected from the first projector and the second projector is reflected on a reference surface at a predetermined distance from an apparatus for calculating the three-dimensional shape of the object, A device for calculating a three-dimensional shape.
제 1 항에 있어서, 상기 제어부는
상기 객체의 3차원 형상을 산출하는 장치로부터 소정의 거리에 있는 영역이 설정되면, 상기 설정된 영역에서의 깊이 분해능(depth resolution)에 따라 하나의 프로젝터를 선택하고, 상기 선택된 프로젝터를 이용하여 상기 객체의 3차원 깊이를 산출하는 것을 포함하는 객체의 3차원 형상을 산출하는 장치.
The apparatus of claim 1, wherein the control unit
When a region at a predetermined distance is set from a device for calculating the three-dimensional shape of the object, one projector is selected in accordance with the depth resolution in the set region, And calculating the three-dimensional depth.
제 1 항에 있어서, 상기 제어부는
상기 객체가 감지되는 영역에서의 깊이 분해능에 따라 하나의 프로젝터를 선택하고, 상기 선택된 프로젝터를 이용하여 상기 객체의 3차원 깊이를 산출하는 것을 포함하는 객체의 3차원 형상을 산출하는 장치.
The apparatus of claim 1, wherein the control unit
Selecting one projector according to the depth resolution in the area where the object is sensed and calculating the three-dimensional depth of the object using the selected projector.
제 1 항에 있어서, 상기 제어부는
상기 제1 프로젝터 및 상기 제2 프로젝터를 소정의 시간 간격에 따라 교대로 이용하여 상기 객체의 3차원 깊이를 산출하는 것을 포함하는 객체의 3차원 형상을 산출하는 장치.
The apparatus of claim 1, wherein the control unit
And calculating the three-dimensional depth of the object by alternately using the first projector and the second projector at predetermined time intervals.
제 1 항에 있어서, 상기 제1 프로젝터 및 상기 제2 프로젝터는
상기 센서와의 거리에 따라 투사하는 광량을 조절하는 것을 포함하는 객체의 3차원 형상을 산출하는 장치.
The projector according to claim 1, wherein the first projector and the second projector
And adjusting the amount of light to be projected according to the distance from the sensor.
제 1 항에 있어서, 상기 제1 프로젝터 및 상기 제2 프로젝터는
상기 센서와의 거리에 따라 상기 제1 패턴 및 상기 제2 패턴을 이루는 무늬의 크기 또는 간격 중 적어도 하나를 조절하는 것을 포함하는 객체의 3차원 형상을 산출하는 장치.
The projector according to claim 1, wherein the first projector and the second projector
And adjusting at least one of a size or an interval of a pattern constituting the first pattern and the second pattern according to a distance between the sensor and the sensor.
제 1 항에 있어서,
상기 센서를 기준으로 하여, 상기 제1 프로젝터까지의 거리 및 상기 제2 프로젝터까지의 거리와 다른 거리에 위치하는 적어도 하나의 프로젝터를 더 포함하는 객체의 3차원 형상을 산출하는 장치.
The method according to claim 1,
Further comprising at least one projector located on the basis of the sensor, the distance to the first projector and the distance to the second projector being different from each other.
제1 패턴이 부가된 제1 구조광을 객체에 투사하는 단계;
상기 제1 구조광을 투사하는 위치와 다른 위치에서 제2 패턴이 부가된 제2 구조광을 상기 객체에 투사하는 단계;
상기 객체에서 반사된 상기 제1 구조광 및 상기 제2 구조광을 감지하는 단계; 및
소정의 기준 이미지와 비교하여, 상기 감지되는 제1 구조광 및 제2 구조광 중 적어도 하나의 이미지에서 패턴의 변화에 따라 상기 객체의 3차원 깊이를 산출하는 단계;
를 포함하는 객체의 3차원 형상을 산출하는 방법.
Projecting the first structured light added with the first pattern onto an object;
Projecting the second structured light to which the second pattern is added at a position different from the position at which the first structured light is projected to the object;
Sensing the first structured light and the second structured light reflected from the object; And
Calculating a three-dimensional depth of the object according to a change in a pattern in at least one of the sensed first structural light and the second structured light, in comparison with a predetermined reference image;
Dimensional shape of the object.
KR1020140019075A 2014-02-19 2014-02-19 Device for estimating three-dimensional shape of object and method thereof KR102081778B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140019075A KR102081778B1 (en) 2014-02-19 2014-02-19 Device for estimating three-dimensional shape of object and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140019075A KR102081778B1 (en) 2014-02-19 2014-02-19 Device for estimating three-dimensional shape of object and method thereof

Publications (2)

Publication Number Publication Date
KR20150098035A true KR20150098035A (en) 2015-08-27
KR102081778B1 KR102081778B1 (en) 2020-02-26

Family

ID=54059577

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140019075A KR102081778B1 (en) 2014-02-19 2014-02-19 Device for estimating three-dimensional shape of object and method thereof

Country Status (1)

Country Link
KR (1) KR102081778B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019132196A1 (en) * 2017-12-26 2019-07-04 경북대학교 산학협력단 Three-dimensional scanning apparatus and three-dimensional scanning method
CN110088563A (en) * 2019-03-13 2019-08-02 深圳市汇顶科技股份有限公司 Calculation method, image processing apparatus and the three-dimension measuring system of picture depth
WO2020091347A1 (en) * 2018-10-29 2020-05-07 삼성전자 주식회사 Three-dimensional depth measuring device and method
KR102239594B1 (en) * 2020-09-04 2021-04-13 (주)딥인사이트 Electronic device and method for producing flexion contour expression images

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110114500A (en) * 2011-07-27 2011-10-19 경북대학교 산학협력단 Method for detecting of optical surface profilometer
JP2013124937A (en) * 2011-12-15 2013-06-24 Ckd Corp Three-dimensional measuring device
JP2013156045A (en) * 2012-01-27 2013-08-15 Ckd Corp Three-dimensional measuring device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110114500A (en) * 2011-07-27 2011-10-19 경북대학교 산학협력단 Method for detecting of optical surface profilometer
JP2013124937A (en) * 2011-12-15 2013-06-24 Ckd Corp Three-dimensional measuring device
JP2013156045A (en) * 2012-01-27 2013-08-15 Ckd Corp Three-dimensional measuring device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019132196A1 (en) * 2017-12-26 2019-07-04 경북대학교 산학협력단 Three-dimensional scanning apparatus and three-dimensional scanning method
KR20190078008A (en) * 2017-12-26 2019-07-04 경북대학교 산학협력단 3d scanning apparatus and 3d scanning method
WO2020091347A1 (en) * 2018-10-29 2020-05-07 삼성전자 주식회사 Three-dimensional depth measuring device and method
US20220011096A1 (en) * 2018-10-29 2022-01-13 Samsung Electronics Co., Ltd. Three-dimensional depth measuring device and method
US11846500B2 (en) 2018-10-29 2023-12-19 Samsung Electronics Co., Ltd. Three-dimensional depth measuring device and method
CN110088563A (en) * 2019-03-13 2019-08-02 深圳市汇顶科技股份有限公司 Calculation method, image processing apparatus and the three-dimension measuring system of picture depth
CN110088563B (en) * 2019-03-13 2021-03-19 深圳市汇顶科技股份有限公司 Image depth calculation method, image processing device and three-dimensional measurement system
KR102239594B1 (en) * 2020-09-04 2021-04-13 (주)딥인사이트 Electronic device and method for producing flexion contour expression images

Also Published As

Publication number Publication date
KR102081778B1 (en) 2020-02-26

Similar Documents

Publication Publication Date Title
KR102166691B1 (en) Device for estimating three-dimensional shape of object and method thereof
US8718326B2 (en) System and method for extracting three-dimensional coordinates
JP6237876B2 (en) Self-position calculation device and self-position calculation method
US10157474B2 (en) 3D recording device, method for producing a 3D image, and method for setting up a 3D recording device
US9613425B2 (en) Three-dimensional measurement apparatus, three-dimensional measurement method and program
CN107610080B (en) Image processing method and apparatus, electronic apparatus, and computer-readable storage medium
EP2887313B1 (en) Image processing apparatus, system, image processing method, and computer-readable recording medium
US10240913B2 (en) Three-dimensional coordinate measuring apparatus and three-dimensional coordinate measuring method
US10713810B2 (en) Information processing apparatus, method of controlling information processing apparatus, and storage medium
WO2015125301A1 (en) Local location computation device and local location computation method
US10085003B2 (en) Image capture apparatus and control method for the same
KR102081778B1 (en) Device for estimating three-dimensional shape of object and method thereof
US20140333532A1 (en) Stereoscopic image display apparatus and computer-readable recording medium storing program thereon
WO2015080164A1 (en) Focal point detection device, and imaging device
US20140320610A1 (en) Depth measurement apparatus and controlling method thereof
JP6009206B2 (en) 3D measuring device
JP2023115356A (en) Measurement device, imaging device, control method, and program
JP7121269B2 (en) ranging camera
JP6867487B2 (en) Imaging device
CN107707834B (en) Image processing method and apparatus, electronic apparatus, and computer-readable storage medium
US20220113131A1 (en) Measurement apparatus, image capturing apparatus, measurement system, control method, and storage medium
JP6630118B2 (en) Imaging device and control method therefor, program, storage medium
JP6655869B2 (en) Image processing apparatus, image processing method, and program
JP3852285B2 (en) 3D shape measuring apparatus and 3D shape measuring method
KR101976495B1 (en) Method and Apparatus for Estimating Mounting Height of Camera

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant