KR20140144635A - 적외선을 이용한 깊이 정보 추출 장치 및 방법 - Google Patents
적외선을 이용한 깊이 정보 추출 장치 및 방법 Download PDFInfo
- Publication number
- KR20140144635A KR20140144635A KR1020130112467A KR20130112467A KR20140144635A KR 20140144635 A KR20140144635 A KR 20140144635A KR 1020130112467 A KR1020130112467 A KR 1020130112467A KR 20130112467 A KR20130112467 A KR 20130112467A KR 20140144635 A KR20140144635 A KR 20140144635A
- Authority
- KR
- South Korea
- Prior art keywords
- infrared ray
- wavelength
- depth information
- light
- infrared
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 30
- 239000013078 crystal Substances 0.000 claims abstract description 45
- 239000004038 photonic crystal Substances 0.000 claims abstract description 36
- GQYHUHYESMUTHG-UHFFFAOYSA-N lithium niobate Chemical compound [Li+].[O-][Nb](=O)=O GQYHUHYESMUTHG-UHFFFAOYSA-N 0.000 claims description 15
- 239000000463 material Substances 0.000 claims description 12
- OFHMUASCSJJNNA-JOCHJYFZSA-N bis-napthyl β-ketophosphonic acid Chemical compound C1=CC=C2C([C@H](C(=O)C=3C=C4C=CC=CC4=CC=3)P(O)(=O)O)=CC=CC2=C1 OFHMUASCSJJNNA-JOCHJYFZSA-N 0.000 claims description 8
- 229910052710 silicon Inorganic materials 0.000 claims description 8
- 239000010703 silicon Substances 0.000 claims description 8
- 238000001914 filtration Methods 0.000 claims description 7
- RYTWPAUCABOYJP-LURJTMIESA-N [(S)-3-oxocyclohexyl]acetic acid Chemical compound OC(=O)C[C@H]1CCCC(=O)C1 RYTWPAUCABOYJP-LURJTMIESA-N 0.000 claims description 5
- XBJJRSFLZVLCSE-UHFFFAOYSA-N barium(2+);diborate Chemical compound [Ba+2].[Ba+2].[Ba+2].[O-]B([O-])[O-].[O-]B([O-])[O-] XBJJRSFLZVLCSE-UHFFFAOYSA-N 0.000 claims description 5
- CEIPQQODRKXDSB-UHFFFAOYSA-N ethyl 3-(6-hydroxynaphthalen-2-yl)-1H-indazole-5-carboximidate dihydrochloride Chemical compound Cl.Cl.C1=C(O)C=CC2=CC(C3=NNC4=CC=C(C=C43)C(=N)OCC)=CC=C21 CEIPQQODRKXDSB-UHFFFAOYSA-N 0.000 claims description 5
- 229910052744 lithium Inorganic materials 0.000 claims description 5
- OBTSLRFPKIKXSZ-UHFFFAOYSA-N lithium potassium Chemical compound [Li].[K] OBTSLRFPKIKXSZ-UHFFFAOYSA-N 0.000 claims description 5
- PSVBHJWAIYBPRO-UHFFFAOYSA-N lithium;niobium(5+);oxygen(2-) Chemical compound [Li+].[O-2].[O-2].[O-2].[Nb+5] PSVBHJWAIYBPRO-UHFFFAOYSA-N 0.000 claims description 5
- 239000011810 insulating material Substances 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 abstract description 9
- 238000000605 extraction Methods 0.000 abstract description 7
- 239000000284 extract Substances 0.000 abstract description 2
- 230000001678 irradiating effect Effects 0.000 description 8
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 6
- 238000001228 spectrum Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- JBRZTFJDHDCESZ-UHFFFAOYSA-N AsGa Chemical compound [As]#[Ga] JBRZTFJDHDCESZ-UHFFFAOYSA-N 0.000 description 2
- 229910001218 Gallium arsenide Inorganic materials 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 239000003989 dielectric material Substances 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 239000012212 insulator Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 238000002366 time-of-flight method Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Chemical compound O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
- G01N21/31—Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry
- G01N21/35—Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry using infrared light
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
Abstract
본 발명의 일 실시예는 이러한 비선형 결정체 및 포토닉 결정체를 깊이 카메라에 응용하여 더욱 저렴한 실외용 깊이 카메라를 제공할 수 있다. 이러한 본 발명의 일 실시예에 따르는 적외선을 이용한 깊이 정보 추출 장치는 제 1 적외선을 피사체를 향해 발광하는 적외선 조사부; 상기 피사체로부터 반사된 상기 제 1 적외선을 상기 제 1 적외선의 파장보다 짧은 파장을 갖는 제 2 적외선으로 변환하는 파장 변환부; 및 상기 변환된 제 2 적외선을 감지하여 상기 피사체의 깊이 정보를 추출하는 깊이 정보 추출부;를 포함하며, 상기 파장 변환부는 파장의 길이를 변환하는 결정체로 구성되는 것을 특징으로 한다.
Description
본 발명의 실시예들은 깊이 정보 추출 장치 및 방법에 관한 것으로서, 보다 상세하게는 실외에서 적외선을 이용하여 피사체의 깊이 정보를 추출하기 위한 깊이 정보 추출 장치 및 방법에 관한 것이다.
최근 입체 영상 표현과 입체 영상 인식에 관한 관심이 높아지면서 깊이 카메라에 대한 개발이 많이 이루어지고 있다. 깊이 카메라는 실내용 보급형 깊이카메라와 실외용 특수형 깊이 카메라로 나뉘어질 수 있다. 실내용 보급형 깊이 카메라는 주로 CMOS(Complementary Metal-Oxide Semiconductor) 센서를 이용하는 것으로, 주로 800nm 대역의 적외선을 조사하고 Structured light 삼각측량 방식이나 Time of flight(TOF) 방식을 이용하여 거리를 측정한다.
도 1은 일반적인 CMOS 센서의 광전효율을 나타낸다. CMOS 센서는 가시광 대역인 400nm에서 적외선 대역인 1000nm까지 사용이 가능하며 생산단가가 저렴하다. 일반적인 깊이 카메라의 영상 센서는 사람의 눈에 보이지 않고 CMOS 센서에서 광전효율이 좋은 750~800nm의 적외선을 주로 사용한다.
도 2는 지상에 도달하는 태양광의 스펙트럼을 나타낸다. 지상에 도달하는 태양광에는 750~800nm 대역의 적외선이 많이 포함되어 있다. 따라서, 실내용 보급형 깊이 카메라를 실외에서 사용할 경우, 깊이 카메라가 조사한 적외선보다 태양광의 적외선이 더 많이 깊이 카메라에 유입되기 때문에 피사체의 깊이 값을 정확하게 알 수 없다. 즉, 실내용 보급형 깊이 카메라는 태양광이 존재하는 실외 환경에서는 사용이 불가하다.
따라서, 실외용 특수형 깊이 카메라는 지상에 도달하는 태양광에는 존재하지 않는 1350~1400nm 대역의 적외선을 이용하는 것으로 설계되어 있다. 그러나, 이러한 대역의 적외선을 인식할 수 있는 영상 센서는 실리콘이 아닌 갈륨아세나이드와 같은 고가의 재료를 사용한다. 갈윰아세나이드와 같은 재료는 일반 CMOS 공정으로 제작이 어렵기 때문에 실외용 특수형 깊이 카메라는 CMOS 센서가 아닌 다른 센서를 이용하게 되며, 그에 따라 실내용 깊이 카메라보다 더욱 고가로 판매된다.
하지만 750~800nm 대역의 적외선은 태양광에 대량 포함되어 있기 때문에 기존 750~800nm 대역의 적외선을 사용하는 깊이 카메라는 태양광이 존재하는 실외 환경에서는 사용이 어렵다. 본 발명에서는 지상에 도달하는 태양광에는 존재하지 않는 1350~1400nm 대역의 적외선을 조사하고, 물체나 환경에 반사하여 입력되는 적외선의 파장을 비선형수정를 이용하여 675~700nm 대역으로 변경하고, 이를 일반 CMOS 영상센서로 촬영하고 깊이를 측정 방식을 제시한다.
따라서 위와 같은 문제를 해결하기 위하여 본 발명의 일 실시예는 저렴한 가격의 실외용 깊이 카메라를 제공하기 위해, 종래의 CMOS 센서를 이용하는 실외용 깊이 카메라를 제공하는 것을 목적으로 한다.
상기 목적을 위해, 지상에 도달하는 태양광에는 존재하지 않는 1350~1400nm 대역의 적외선을 675~700nm 대역의 적외선으로 변환함으로써, 종래의 CMOS 센서를 이용가능하게 설계하는 것을 목적으로 한다.
또한, 이러한 설계에 결정체를 이용하여 적외선의 파장을 변경시키는 것을 목적으로 한다.
이와 같은 본 발명의 해결 과제를 달성하기 위하여, 본 발명의 일 실시예에 따르는 적외선을 이용한 깊이 정보 추출 장치는 제 1 적외선을 피사체를 향해 발광하는 적외선 조사부; 상기 피사체로부터 반사된 상기 제 1 적외선을 상기 제 1 적외선의 파장보다 짧은 파장을 갖는 제 2 적외선으로 변환하는 파장 변환부; 및 상기 변환된 제 2 적외선을 감지하여 상기 피사체의 깊이 정보를 추출하는 깊이 정보 추출부;를 포함하며, 상기 파장 변환부는 파장의 길이를 변환하는 결정체로 구성되는 것을 특징으로 한다.
또한, 상기 결정체는 입사된 상기 제 1 적외선의 파장의 길이가 절반이 되도록 변조하여 상기 제 2 적외선을 발생시키는 것을 특징으로 한다.
또한, 상기 제 1 적외선은 1200nm 이상 1600nm 이하의 파장이며, 상기 제 2 적외선은 600nm 이상 800nm 이하의 파장인 것을 특징으로 한다.
또한, 상기 결정체는 비선형 결정체와 포토닉 결정체를 포함하는 것을 특징으로 한다.
또한, 상기 비선형 결정체는 리튬 니오베이트, 리튬 평형 리튬 니오베이트(lithium equilibrated lithium niobate), 리튬 칼륨 니오베이트, 리튬 이미오데이트, KTP, KTA, 바륨 보레이트, LBO 및, 주기적으로 폴된(poled) KTP와 리튬니오베이트 중 적어도 하나 이상으로 구성되는 것을 특징으로 한다.
또한, 상기 파장 변환부는 상기 비선형 결정체에 부가하여 공진기 또는 캐비티를 포함하는 것을 특징으로 한다.
또한, 상기 포토닉 결정체는 실리콘을 포함하는 광절연물질로 구성되는 것을 특징으로 한다.
또한, 상기 포토닉 결정체는 서로 다른 유전상수를 갖는 적어도 두 개 이상의 서로 다른 물질로 구성되는 것을 특징으로 한다.
또한, 상기 포토닉 결정체는 3차원 격자 구조로 구성된 것을 특징으로 한다.
또한, 상기 피사체로부터 반사된 광을 수신하여, 상기 반사된 광 중에서 상기 제 1 적외선을 필터링하여 상기 파장 변환부로 전달하는 제 1 필터부; 및 상기 파장 변환부로부터 광을 전달받아, 상기 전달받은 광 중에서 상기 제 2 적외선을 필터링하여 상기 깊이 정보 추출부로 전달하는 제 2 필터부; 중 적어도 하나를 추가로 포함하는 것을 특징으로 한다.
한편, 본 발명의 다른 실시예에 따르는 적외선을 이용한 깊이 정보 추출 방법은 제 1 적외선을 피사체를 향해 발광하는 단계; 상기 피사체로부터 반사된 상기 제 1 적외선을 수신하여, 상기 제 1 적외선의 파장보다 짧은 파장을 갖는 제 2 적외선으로 변환하는 단계; 및 상기 변환된 제 2 적외선을 감지하여 상기 피사체의 깊이 정보를 추출하는 단계;를 포함하며, 상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계는 파장의 길이를 변환할 수 있는 결정체에 상기 제 1 적외선을 입사시켜 상기 제 2 적외선으로 변환하는 것을 특징으로 한다.
또한, 상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계는, 상기 제 2 적외선이 상기 제 1 적외선의 파장의 길이가 절반이 되도록 변환하는 것을 특징으로 한다.
또한, 상기 제 1 적외선은 1200nm 이상 1600nm 이하의 파장이며, 상기 제 2 적외선은 600nm 이상 800nm 이하의 파장인 것을 특징으로 한다.
또한, 상기 결정체는 비선형 결정체와 포토닉 결정체 중 적어도 하나로 구성되는 것을 특징으로 한다.
또한, 상기 비선형 결정체는 리튬 니오베이트, 리튬 평형 리튬 니오베이트(lithium equilibrated lithium niobate), 리튬 칼륨 니오베이트, 리튬 이미오데이트, KTP, KTA, 바륨 보레이트, LBO 및, 주기적으로 폴된(poled) KTP와 리튬니오베이트 중 적어도 하나 이상으로 구성되는 것을 특징으로 한다.
또한, 상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계는, 상기 비선형 결정체에 공진기 또는 캐비티를 부가하여 변환하는 것을 특징으로 한다.
또한, 상기 포토닉 결정체는 실리콘을 포함하는 광절연물질로 구성되는 것을 특징으로 한다.
또한, 상기 포토닉 결정체는 서로 다른 유전상수를 갖는 적어도 두 개 이상의 서로 다른 물질로 구성되는 것을 특징으로 한다.
또한, 상기 포토닉 결정체는 3차원 격자 구조로 구성된 것을 특징으로 한다.
또한, 상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계 전에, 상기 피사체로부터 반사된 광을 수신하여, 상기 반사된 광 중에서 상기 제 1 적외선을 필터링하는 단계; 및 상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계 후에, 상기 제 2 적외선을 포함하는 변환된 광 중에서, 상기 제 2 적외선을 필터링하는 단계; 중 적어도 하나를 추가로 포함하는 것을 특징으로 한다.
상기와 같이 구성되는 본 발명의 적어도 하나의 일 실시예는 결정체를 이용하여 1350~1400nm 대역의 적외선을 675~700nm 대역의 적외선으로 변환시킴으로써, 종래의 CMOS 센서를 이용할 수 있게 하여, 실외 깊이 카메라의 가격을 저렴하게 할 수 있다.
도 1은 일반적인 CMOS 센서의 광전효율 그래프이다.
도 2는 지상에 도달하는 태양광의 스펙트럼 그래프이다.
도 3은 본 발명의 일실시예에 따른 깊이 정보 추출 장치의 구조도이다.
도 4는 본 발명의 일 실시예에 따르는 비선형 결정체에 대한 개념도이다.
도 5a, 도 5b 및 도 5c는 각각 1차원, 2차원, 3차원 구조를 갖는 포토닉 결정체에 대한 구조도이다.
도 6은 본 발명의 일 실시예에 따르는 포토닉 결정체의 구조도이다.
도 7a는 도 6의 a 영역에서 검출된 파형을 나타내는 그래프이다.
도 7b는 도 6의 b 영역에서 검출된 파형을 나타내는 그래프이다.
도 2는 지상에 도달하는 태양광의 스펙트럼 그래프이다.
도 3은 본 발명의 일실시예에 따른 깊이 정보 추출 장치의 구조도이다.
도 4는 본 발명의 일 실시예에 따르는 비선형 결정체에 대한 개념도이다.
도 5a, 도 5b 및 도 5c는 각각 1차원, 2차원, 3차원 구조를 갖는 포토닉 결정체에 대한 구조도이다.
도 6은 본 발명의 일 실시예에 따르는 포토닉 결정체의 구조도이다.
도 7a는 도 6의 a 영역에서 검출된 파형을 나타내는 그래프이다.
도 7b는 도 6의 b 영역에서 검출된 파형을 나타내는 그래프이다.
이하, 본 발명의 실시예에 따르는 적외선을 이용한 깊이 정보 추출 장치 및 방법에 대하여 도면을 참조하여 보다 상세하게 설명한다.
본 명세서에서는 서로 다른 실시예라도 동일 · 유사한 구성에 대해서는 동일 · 유사한 참조번호를 부여하고, 그 설명은 처음 설명으로 갈음한다. 또한, 본 명세서에 첨부된 도면의 구성요소들은 설명의 편의를 위해 확대 또는 축소되어 도시될 수 있음이 고려되어야 한다.
본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 또한, 본 명세서에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있으나 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용되므로 상기 구성 요소들은 상기 용어들에 의해 한정되지 않는다.
도 3은 본 발명의 일실시예에 따른 깊이 정보 추출 장치(100)를 도시한다.
본 발명의 일실시예에 따르면, 깊이 정보 추출 장치(100)는, 적외선 조사부(110), 수광부(120),제 1 필터부(130), 파장 변환부(140), 제 2 필터부(150), 영상 센서부(160) 및 깊이정보 추출부(170)를 포함한다.
적외선 조사부(110)는, 제1 파장을 갖는 제 1 적외선을 생성하고, 상기 제 1 적외선을 깊이 영상을 생성하고자 하는 피사체(200)에 조사(emit)한다.
상기 제 1 적외선은 태양광 환경에서 지구 표면에서 관측되는 적외선 세기가 제1 임계치 이하인 파장 대역을 갖는다. 상기 제1 임계치는 특정한 값으로 고정된 것이 아니라, 선택적으로 다르게 설정될 수 있는 값이며, 예시적으로는 0.01 (W/m2/nm)가 될 수 있다.
알려진 바에 의하면, 태양광 스펙트럼(sunlight spectrum)은 파장 별로 그 세기(intensity)가 다르다. 그리고, 태양광 복사는 대기권의 공기, 수증기, 구름, 먼지 등에 의해 반사되거나 흡수되기 때문에, 지구 표면(surface)에서 측정되는 태양광 스펙트럼 또한 파장 별로 그 세기가 다르다. 지구 표면에서 관측되는 태양광 스펙트럼의 세기가 매우 작아져서 0이거나 또는 0에 가까운 몇 개의 파장 대역이 존재한다. 스펙트럼의 세기가 매우 작아지는 파장 대역 중에서, 전술한 도 2를 참고해보면, 적외선 조사부(110)는 1200nm ~ 1600nm의 파장 대역의 제 1 적외선을 조사한다. 바람직하게, 적외선 조사부(110)는 1350nm ~ 1400nm의 파장의 제 1 적외선을 조사한다.
수광부(120)는 외부의 광을 수신하는 역할을 한다. 따라서, 수광부(120)에 유입되는 광은 적외선 조사부(110)가 조사하여 피사체(200)에서 반사된 광과 주변의 외광을 포함한다.
파장 변환부(140)는 유입된 파장의 길이의 절반의 파장을 갖는 파장을 생성하는 것을 특징으로 한다. 즉, 파장 변환부(140)는 영상 센서부(160)를 구성하는 CMOS 센서를 활용할 수 있도록, 적외선 조사부(110)에서 조사된 1200nm ~ 1600nm의 파장 대역의 적외선(제 1 적외선)을, CMOS 센서에서 이용가능한 600~800nm 대역의 적외선(제 2 적외선)으로 변환하는 것을 특징으로 한다. 바람직하게는, 파장 변환부(140)는1350nm ~ 1400nm의 파장의 제 1 적외선을 775nm ~ 800nm의 파장의 제 2 적외선으로 변환한다. 파장 변환부는 결정체로 구성될 수 있다. 상기 결정체는 유입된 광의 파장을 다른 파장을 갖는 광으로 변환하여 방출하는 것을 특징으로 한다. 상기 결정체에 대해서는 후술로 구체적으로 설명하도록 한다.
한편, 수광부(120)에서 유입된 광을 그대로 이용할 경우, 적외선 조사부(110)에서 조사된 적외선과 주변의 외광을 함께 이용하게 되기 때문에, 피사체(200)에 대한 정확한 깊이 정보를 추출하기 어렵다. 따라서, 깊이 정보 추출 장치(100)는 주변의 외광에 의한 영향을 제거하기 위해 제 1 필터부(130) 및 제 2 필터부(150) 중 적어도 하나 이상을 포함한다. 즉, 도 3에서 제 1 필터부(130) 및 제 2 필터부(150)가 점선으로 표시되어 있는 것은 어느 하나가 선택적으로 깊이 정보 추출 장치(100)에 포함되거나, 모두 포함될 수도 있다는 것을 의미한다.
제 1 필터부(130)는 수광부(120)에서 전달된 광 중에서 제 1 적외선(1200nm ~ 1600nm의 파장 대역, 바람직하게는, 1350nm ~ 1400nm의 파장 대역)을 필터링한다. 파장 변환부(140)는 제 1 적외선만을 변환하게 되므로, 영상 센서부(160)에는 제 2 적외선만이 전달될 수 있다.
제 2 필터부(150)는 파장 변환부(140)에서 전달된 광 중에서 제 2 적외선(600nm~800nm의 파장 대역, 바람직하게는, 775nm ~ 800nm 파장 대역)을 필터링한다. 제 1 필터부(130)가 구비되어 있지 않고, 제 2 필터부(150)만이 깊이 정보 추출 장치(100)에 구비되어 있는경우, 파장 변환부(140)는 수광부(120)가 수광한 모든 광을 전달받는다. 따라서, 이때 파장 변환부(140)가 출력하는 파장은 수광부(120)가 수광한 제 2 적외선과 주변 외광의 파장의 길이를 절반으로 변환한 광이다. 제 2 필터부(150)는 제 2 적외선만을 필터링하여 영상 센서부(160)에 전달한다.
또한, 제 1 필터부(130)와 제 2 필터부(150) 모두 구비될 수 있다. 이 경우, 두 번의 필터링 과정을 거치게 되므로, 제 1 필터부(130)에서 제대로 걸러지지 않은 주변 외광을 제 2 필터부(150)에서 더욱 확실하게 필터링하게 되어, 더욱 정확한 깊이 정보를 추출할 수 있게 된다.
영상 센서부(160)는 제 2 적외선을 이용하여 영상 센서부(160) 내의 각 픽셀 마다 전기적 신호를 생성한다. 영상 센서부(160)는 실리콘 기반 photodiode를 포함하는 CMOS(Complementary Metal-Oxide Semiconductor) 센서로 구성될 수 있으며 이러한 실리콘 기반의 CMOS 센서는 600~800nm 대역에서 광전효율이 좋은 특성을 가진다.
깊이정보 추출부(170)는 영상 센서부(160)의 전기적 신호를 이용하여, 피사체(200)에 대응하는 깊이정보를 추출한다.
본 발명의 일 실시예에 따른 깊이 정보 추출 장치(100)는 통상의 깊이 카메라와는 달리 파장 변환부(140)와 필터부(130, 150)을 종래의 구성에서 추가하여, 종래의 600~800nm 파장을 사용하는 적외선 기반 실내 깊이 카메라들이 실외 태양광 환경에서 사용될 수 없었던 문제를 해결할 수 있다. 또한, 일반적인 CMOS 센서를 실외 깊이 카메라에서도 이용할 수 있게 됨에 따라, 기존의 실외 특수형 깊이 카메라보다 훨씬 저렴한 실외형 깊이 카메라를 제공할 수 있다.
이와 같이 실외에서 사용가능한 깊이 정보 추출 장치(100)는 자동차 전방위 근접 물체 감지 및 인식을 위해 사용될 수 있으며, 실외환경을 3D로 모니터링하고 감시하는 데에 사용될 수도 있으며, 실외에서 동적 3D 비디오를 촬영할 수 있게 한다.
이어서, 본 발명의 일 실시예에 따르는 파장 변환부(140)를 구성하는 결정체에 대하여 더욱 구체적으로 설명하도록 한다.
유입된 파장의 길이를 변환하여 출력할 수 있는 결정체로는 비선형 결정체(nonlinear crystal)과 포토닉 결정체(photonic crystal)을 들 수 있다.
먼저 비선형 결정체에 대하여 도 4를 참고하여 구체적으로 설명한다.
비선형 결정체(141)는 도 4에 도시된 바와 같이, 제 1 적외선이 입사될 경우, 제 1 적외선과 제 2 적외선을 출력하게 된다. 그 제 1 적외선이 제 2 적외선으로 변환되는 원리는, 제 1 적외선이 비선형 결정체(141)에 입사되면, 광전계(optical electrical field)가 전자 쌍극 모멘트(electrical dipole moments)를 비선형 결정체(141) 내에 유발하게 되고, 전자 쌍극 모멘트에 의해 제 1 적외선의 비선형 편광을 유발하게 되어 제 1 적외선의 주파수를 2배로 변환하여 출력하게 되는 것이다. 주파수가 2배로 될 경우, 파장의 길이가 1/2로 되므로, 제 2 적외선이 출력하게 된다.
비선형 결정체(141)는 리튬 니오베이트(LiNbO3), 리튬 평형 리튬 니오베이트(lithium equilibrated lithium niobate), 리튬 칼륨 니오베이트, 리튬 이미오데이트, KTP, KTA, 바륨 보레이트, LBO 및, 주기적으로 폴된(poled) KTP와 리튬니오베이트 중 적어도 하나 이상으로 구성될 수 있다.
또한, 파장 변환부(140)는 비선형 결정체(141)의 성능향상을 위해 비선형 결정체(141)와 함께 공진기 또는 캐비티(예를 들어, resonant cavity, intracavity)를 구비할 수 있다. 공진기 또는 캐비티는 파장 변환부(140)의 파장변환 효율과 전력을 더욱 향상시킬 수 있다. 구체적으로, 공진기 내에서 비선형 결정체의 앞과 뒤에 반사체를 둘 경우, 광이 비선형결정체를 반복적으로 지나가게 되므로 파장변환 효율과 전력을 더욱 향상시킬 수 있다.
이어서, 포토닉 결정체에 대하여 도 5a 내지 도 5c를 통하여 구체적으로 설명한다.
포토닉 결정체란 서로 다른 유전상수를 갖는 유전체를 주기적으로 배열한 인공 결정을 말한다. 일반적으로 결정 구조를 갖는 물질들은 그 물질을 구성하는 원자나 분자들의 규칙적인 배열로 인하여 주기적인 포텐셜이 생겨 전자들의 움직임 (propagation)에 영향을 미친다. 이로 인하여 생기는 중요한 현상이 바로 띠간격 (band gap)의 형성이다. 이러한 개념은 광자에서도 마찬가지로 적용되는데 이 때는 유전체가 광자에 대한 퍼텐셜의 역할을 수행한다. 이 경우에도 전자의 경우와 마찬가지로 띠간격(band gap)이 형성되는데, 이를 전자의 띠간격과 구별하여 광자 띠간격(photonic band gap)이라고 부른다. 광자 띠간격은 서로 다른 유전상수를 갖는 2차원 배열에서 포토닉 결정체의 웨이브 벡터(Wave vector) 방향으로 빛의 통과율을 보았을 때, 특정 파장대의 빛이 금지된 영역이 존재하는 것을 일컫기도 한다.
포토닉 결정체는 크게 3가지 구조로 구성될 수 있다.
도 5a, 도 5b 및 도 5c는 각각 1차원, 2차원, 3차원 구조를 갖는 포토닉 결정체를 나타낸 것이다.
1차원 구조의 포토닉 결정체의 경우 서로 다른 물질(유전상수나 굴절율이 서로 상이한 물질)을 주기적으로 쌓으면 되는 것이므로 제조과정이 가장 간단하다. 또한, 여기서, 각 층이 쌓인 방향이나 적층된 구조(예를 들어, 각 층의 두께)에 따라 광자 띠간격의 특성이 달라지게 된다. 즉, 포토닉 결정체의 구조나 배열을 변경함에 따라 포토닉 결정체의 파장특성을 변경할 수 있다.
포토닉 결정체를 구성하는 물질은 광과 강한 상호작용을 하는 격자구조의 광절연(optical insulator) 물질을 들 수 있으며, 예를 들어, 실리콘이 이에 포함될 수 있다.
이하, 포토닉 결정체가 파장을 변환시키는 원리에 대하여 도 6, 도 7a 및 도 7b를 통해 구체적으로 설명하도록 한다.
먼저 도 6을 참조하면, 포토닉 결정체의 내부를 통과하는 광은 포토닉 결정체의 격자 배열(예를 들어, 격자 간의 간격)이 파장의 길이와 유사하면 파장은 확산되거나 회절되지 않고 일 방향으로 직진하는 성질을 가지게 된다. 도 6에서 점선은 광이 진행하는 경로를 나타낸 것이다. a 영역은 균일한 격자 배열을 가진 포토닉 결정체 내에서 직진하는 광을 나타낸 것이다. 그러나, 광이 직진하는 경로 중간에, 격자 배열이 달라지게 되는 경우, 달라진 격자 배열에 따라 그 부분을 통과하는 광의 성질 역시 달라지게 된다. 결과적으로 광의 파장의 길이가 달라지게 된다. b 영역은 격자배열이 달라진 영역으로서 유입된 광의 파장이 변환되는 부분이다.
a 영역에서 검출된 광의 주파수가 도 7a에 나타난 바와 같다고 할 때, b 영역에서 검출된 광의 주파수는 도 7b에 나타난 바와 같다. 즉, 기존의 유입된 광 외에 주파수가 변환된 광이 하나 더 발생하게 된다. 여기서 격자 배열을 달리하게 될경우, 그 영역의 광자 띠 간격 특성이 달라지게 되어 주파수가 변환되게 되므로, 원하는 주파수를 얻기 위해서는 격자 배열을 그에 맞추어 배열할 필요가 있다. 본 발명의 일 실시예에서, 유입된 파장의 길이의 절반에 해당하는 파장을 얻고자 하는 경우 그에 맞추어 격자배열을 구성해야 할 것이다.
비선형 결정체와 포토닉 결정체는 종래의 레이저 장치 관련 분야에서 레이저의 광학 특성 안정화, 레이저의 출력파워 변환 및 제어 등의 용도로 이용되고 있었다. 그러나, 깊이 카메라와 같은 깊이 정보 추출 분야의 경우, 깊이 정보 추출의 원리로서 삼각 측량 방식(두 점의 거리와 위치를 이용하여 나머지 한 점의 위치를 계산하는 방식) 또는 TOF 방식(기준 펄스를 전송하여 기준 펄스가 피사체에 반사되어 입사하는 동안의 시간차이를 측정해서 거리를 구하는 방식) 등이 이용되고 있었기 때문에, 실내 깊이 카메라와 실외 깊이 카메라 모두 깊이 카메라에서 방출한 광을 변환없이 그대로 이용하여 깊이 정보를 추출하는 방식이 이용되어 왔다. 광은 두 지점 사이의 거리를 측정하기 위한 보조 수단일 뿐이므로 광의 주파수나 크기를 변환할 필요는 없었기 때문에, 깊이 정보 추출 분야에서 비선형 결정체와 포토닉 결정체가 응용된바 없었다. 본 발명의 일 실시예는 이러한 비선형 결정체 및 포토닉 결정체를 깊이 카메라에 응용하여 더욱 저렴한 실외용 깊이 카메라를 제공할 수 있다.
이상에서 본 발명의 바람직한 실시 예들에 대하여 상세하게 설명하였지만, 당해 기술 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 수 있을 것이다.
따라서, 본 발명의 권리범위는 이에 한정되는 것이 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
100 : 깊이 정보 추출 장치 110 : 적외선 조사부
120 : 수광부 130 : 제 1 필터부
140 : 파장 변환부 150 : 제 2 필터부
160 : 영상 센서부 170 : 깊이 정보 추출부
120 : 수광부 130 : 제 1 필터부
140 : 파장 변환부 150 : 제 2 필터부
160 : 영상 센서부 170 : 깊이 정보 추출부
Claims (20)
- 제 1 적외선을 피사체를 향해 발광하는 적외선 조사부;
상기 피사체로부터 반사된 상기 제 1 적외선을 상기 제 1 적외선의 파장보다 짧은 파장을 갖는 제 2 적외선으로 변환하는 파장 변환부; 및
상기 변환된 제 2 적외선을 감지하여 상기 피사체의 깊이 정보를 추출하는 깊이 정보 추출부;를 포함하며,
상기 파장 변환부는 파장의 길이를 변환하는 결정체로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제1항에 있어서,
상기 결정체는 입사된 상기 제 1 적외선의 파장의 길이가 절반이 되도록 변조하여 상기 제 2 적외선을 발생시키는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제1항에 있어서,
상기 제 1 적외선은 1200nm 이상 1600nm 이하의 파장이며, 상기 제 2 적외선은 600nm 이상 800nm 이하의 파장인 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제1항에 있어서,
상기 결정체는 비선형 결정체와 포토닉 결정체를 포함하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제4항에 있어서,
상기 비선형 결정체는 리튬 니오베이트, 리튬 평형 리튬 니오베이트(lithium equilibrated lithium niobate), 리튬 칼륨 니오베이트, 리튬 이미오데이트, KTP, KTA, 바륨 보레이트, LBO 및, 주기적으로 폴된(poled) KTP와 리튬니오베이트 중 적어도 하나 이상으로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제4항에 있어서,
상기 파장 변환부는 상기 비선형 결정체에 부가하여 공진기 또는 캐비티를 포함하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제4항에 있어서,
상기 포토닉 결정체는 실리콘을 포함하는 광절연물질로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제4항에 있어서,
상기 포토닉 결정체는 서로 다른 유전상수를 갖는 적어도 두 개 이상의 서로 다른 물질로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제4항에 있어서,
상기 포토닉 결정체는 3차원 격자 구조로 구성된 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제1항에 있어서,
상기 피사체로부터 반사된 광을 수신하여, 상기 반사된 광 중에서 상기 제 1 적외선을 필터링하여 상기 파장 변환부로 전달하는 제 1 필터부; 및
상기 파장 변환부로부터 광을 전달받아, 상기 전달받은 광 중에서 상기 제 2 적외선을 필터링하여 상기 깊이 정보 추출부로 전달하는 제 2 필터부;
중 적어도 하나를 추가로 포함하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 장치. - 제 1 적외선을 피사체를 향해 발광하는 단계;
상기 피사체로부터 반사된 상기 제 1 적외선을 수신하여, 상기 제 1 적외선의 파장보다 짧은 파장을 갖는 제 2 적외선으로 변환하는 단계; 및
상기 변환된 제 2 적외선을 감지하여 상기 피사체의 깊이 정보를 추출하는 단계;를 포함하며,
상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계는 파장의 길이를 변환할 수 있는 결정체에 상기 제 1 적외선을 입사시켜 상기 제 2 적외선으로 변환하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제11항에 있어서,
상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계는,
상기 제 2 적외선이 상기 제 1 적외선의 파장의 길이가 절반이 되도록 변환하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제11항에 있어서,
상기 제 1 적외선은 1200nm 이상 1600nm 이하의 파장이며, 상기 제 2 적외선은 600nm 이상 800nm 이하의 파장인 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제11항에 있어서,
상기 결정체는 비선형 결정체와 포토닉 결정체 중 적어도 하나로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제14항에 있어서,
상기 비선형 결정체는 리튬 니오베이트, 리튬 평형 리튬 니오베이트(lithium equilibrated lithium niobate), 리튬 칼륨 니오베이트, 리튬 이미오데이트, KTP, KTA, 바륨 보레이트, LBO 및, 주기적으로 폴된(poled) KTP와 리튬니오베이트 중 적어도 하나 이상으로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제14항에 있어서,
상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계는,
상기 비선형 결정체에 공진기 또는 캐비티를 부가하여 변환하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제14항에 있어서,
상기 포토닉 결정체는 실리콘을 포함하는 광절연물질로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제14항에 있어서,
상기 포토닉 결정체는 서로 다른 유전상수를 갖는 적어도 두 개 이상의 서로 다른 물질로 구성되는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제14항에 있어서,
상기 포토닉 결정체는 3차원 격자 구조로 구성된 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법. - 제11항에 있어서,
상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계 전에, 상기 피사체로부터 반사된 광을 수신하여, 상기 반사된 광 중에서 상기 제 1 적외선을 필터링하는 단계; 및
상기 제 1 적외선을 상기 제 2 적외선으로 변환하는 단계 후에, 상기 제 2 적외선을 포함하는 변환된 광 중에서, 상기 제 2 적외선을 필터링하는 단계;
중 적어도 하나를 추가로 포함하는 것을 특징으로 하는 적외선을 이용한 깊이 정보 추출 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US14/067,028 US20140361175A1 (en) | 2013-06-07 | 2013-10-30 | Device for extracting depth information using infrared light and method thereof |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130065412 | 2013-06-07 | ||
| KR20130065412 | 2013-06-07 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20140144635A true KR20140144635A (ko) | 2014-12-19 |
| KR101487812B1 KR101487812B1 (ko) | 2015-01-30 |
Family
ID=52593042
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR20130112467A KR101487812B1 (ko) | 2013-06-07 | 2013-09-23 | 적외선을 이용한 깊이 정보 추출 장치 및 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101487812B1 (ko) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190095912A (ko) * | 2019-08-01 | 2019-08-16 | 삼성디스플레이 주식회사 | 표시 장치 |
| US10739893B2 (en) | 2016-11-04 | 2020-08-11 | Samsung Display Co., Ltd. | Display device |
| KR20210008831A (ko) * | 2018-04-10 | 2021-01-25 | 이베오 오토모티브 시스템즈 게엠베하 | 파장 변환을 가지는 lidar 측정 시스템 |
| KR20210009403A (ko) * | 2019-08-01 | 2021-01-26 | 삼성디스플레이 주식회사 | 표시 장치 |
| KR20220026572A (ko) * | 2021-01-14 | 2022-03-04 | 삼성디스플레이 주식회사 | 표시 장치 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2581016B2 (ja) * | 1994-08-24 | 1997-02-12 | 日本電気株式会社 | 顕微赤外分光光度計 |
| KR100856296B1 (ko) * | 2006-12-26 | 2008-09-03 | 주식회사 포스코 | 열연 압연시 강판의 측면 형상 측정 장치 및 그 방법 |
| JP2010038880A (ja) | 2008-08-08 | 2010-02-18 | Toshiba Corp | レーザ超音波検査装置およびレーザ超音波検査方法 |
| JP2011021996A (ja) | 2009-07-15 | 2011-02-03 | Nippon Soken Inc | ガス濃度計測装置 |
-
2013
- 2013-09-23 KR KR20130112467A patent/KR101487812B1/ko active IP Right Grant
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10739893B2 (en) | 2016-11-04 | 2020-08-11 | Samsung Display Co., Ltd. | Display device |
| US10852866B2 (en) | 2016-11-04 | 2020-12-01 | Samsung Display Co., Ltd. | Display device |
| US11462596B2 (en) | 2016-11-04 | 2022-10-04 | Samsung Display Co., Ltd. | Display device |
| KR20210008831A (ko) * | 2018-04-10 | 2021-01-25 | 이베오 오토모티브 시스템즈 게엠베하 | 파장 변환을 가지는 lidar 측정 시스템 |
| KR20190095912A (ko) * | 2019-08-01 | 2019-08-16 | 삼성디스플레이 주식회사 | 표시 장치 |
| KR20210009403A (ko) * | 2019-08-01 | 2021-01-26 | 삼성디스플레이 주식회사 | 표시 장치 |
| KR20220026572A (ko) * | 2021-01-14 | 2022-03-04 | 삼성디스플레이 주식회사 | 표시 장치 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR101487812B1 (ko) | 2015-01-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101487812B1 (ko) | 적외선을 이용한 깊이 정보 추출 장치 및 방법 | |
| US20140361175A1 (en) | Device for extracting depth information using infrared light and method thereof | |
| US20160165213A1 (en) | Layered type color-depth sensor and three-dimensional image acquisition apparatus employing the same | |
| KR101686079B1 (ko) | 깊이 영상 생성 장치 및 방법 | |
| CN109791207A (zh) | 用于确定到对象的距离的系统和方法 | |
| KR102112298B1 (ko) | 컬러 영상 및 깊이 영상을 생성하는 방법 및 장치 | |
| US11099008B2 (en) | Capture device assembly, three-dimensional shape measurement device, and motion detection device | |
| WO2014149113A3 (en) | Terahertz imaging devices and systems, and related methods, for detection of materials | |
| CN109791204A (zh) | 用于确定到对象的距离的系统 | |
| CN111708039A (zh) | 一种深度测量装置、方法及电子设备 | |
| JP2016035398A (ja) | 測距装置および測距方法 | |
| TW201200898A (en) | Imaging systems including low photon count optical receiver | |
| JP2014190975A (ja) | 光電変換器及び光検出方法 | |
| EP4120905A1 (en) | Quantum electromagnetic field sensor and imager | |
| Sher et al. | Low intensity LiDAR using compressed sensing and a photon number resolving detector | |
| WO2018042785A1 (ja) | 距離センサ及び距離画像センサ | |
| CN205621733U (zh) | 一种广谱成像探测芯片 | |
| Garcia et al. | A 1300× 800, 700 mW, 30 fps spectral polarization imager | |
| CN108180995B (zh) | 新型偏振光谱相机 | |
| Bolduc et al. | THz imaging and radiometric measurements using a microbolometer-based camera | |
| JP6833105B2 (ja) | 被検出物体に検出信号を提供する方法 | |
| JP2010217334A (ja) | 受光素子用フィルタおよび受光装置 | |
| KR102092331B1 (ko) | 이동 가능한 환경에 적합한 소형 oct용 분광기 | |
| Grillet et al. | Low loss SiGe waveguides in the MID-IR | |
| US7409116B1 (en) | RF to optical converter for RF imaging with optical sensors |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20171227 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20190107 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20200102 Year of fee payment: 6 |