KR101706627B1 - 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법 - Google Patents

이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법 Download PDF

Info

Publication number
KR101706627B1
KR101706627B1 KR1020150137834A KR20150137834A KR101706627B1 KR 101706627 B1 KR101706627 B1 KR 101706627B1 KR 1020150137834 A KR1020150137834 A KR 1020150137834A KR 20150137834 A KR20150137834 A KR 20150137834A KR 101706627 B1 KR101706627 B1 KR 101706627B1
Authority
KR
South Korea
Prior art keywords
image
distance
angle
narrow
wide
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020150137834A
Other languages
English (en)
Inventor
김영모
류지형
안종필
Original Assignee
주식회사 디아이랩
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 디아이랩 filed Critical 주식회사 디아이랩
Priority to KR1020150137834A priority Critical patent/KR101706627B1/ko
Application granted granted Critical
Publication of KR101706627B1 publication Critical patent/KR101706627B1/ko
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C3/00—Measuring distances in line of sight; Optical rangefinders
    • G01C3/02—Details
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/08—Systems determining position data of a target for measuring distance only
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

본 발명은 이배율 스테레오 영상을 이용한 거리 측정 장치에 관한 것이다. 상기 거리 측정 장치는, 광각 렌즈가 장착되어 관심 물체를 포함하는 광각 영상을 촬상하는 광각 카메라; 협각 렌즈가 장착되어 관심 물체에 대한 협각 영상을 촬상하는 협각 카메라; 광각 카메라와 협각 카메라를 구동시켜 관심 물체에 대하여 동일 시간에 촬영한 광각 영상과 협각 영상을 획득하고, 상기 광각 영상과 협각 영상의 배율을 동일하게 조정하여 등배율의 스테레오 영상을 생성하고, 상기 협각 영상을 광각 영상의 기준 좌표로 변환시킨 후, 협각 영상과 광각 영상의 특징점들에 대한 디스패리티(disparity)를 구하고, 상기 디스패리티를 이용하여 관심 물체에 대한 거리를 계산하는 중앙 처리 장치;를 구비하여, 광각 및 협각 카메라에 의해 촬영된 이배율의 스테레오 영상을 이용하여 관심 물체에 대한 거리를 측정한다.

Description

이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법{Distance measurement device by using stereo image and method thereof}
본 발명은 거리 측정 장치에 관한 것으로서, 더욱 구체적으로는 이배율 스테레오 카메라에 의해 획득된 광각 영상과 협각 영상으로부터 디스패리티(disparity)를 구하고, 이를 이용하여 거리를 측정하는 거리 측정 장치 및 거리 측정 방법에 관한 것이다.
관측지점으로부터 관심 물체까지의 거리는 다양한 방법으로 측정할 수 있으며, 그 중 한 방법은 스테레오 영상을 이용하는 것이다. 이러한 스테레오 영상을 이용한 거리 측정 방법은, 사람이 특정 사물까지의 거리 정보를 획득하기 위하여 좌안 영상과 우안 영상의 차이(disparity)를 추출하고, 이러한 양안차를 통해 거리값을 얻게 되는 것과 동일하다. 예컨대, 거리가 멀수록 양안차는 거의 없어지게 되며, 거리가 가까울수록 양안차는 증가하게 된다.
이러한 스테레오 영상을 이용한 거리 측정 방법은, 스테레오 카메라를 이용하여 2개의 영상을 획득하고, 2개의 영상에서 동일한 특징점의 좌표값을 찾아낸다. 여기서, '특징점'은 2개의 영상에 변형이 생겨 2개의 영상에서 같은 피사체가 다르게 보이더라도 같은 점 또는 물체의 한 부분이라고 판단할 수 있는 특징을 말한다. 따라서, 특징점을 선정하는 것은 스테레오 카메라의 이미지를 해석하는데 매우 중요한 사항이다.
이와 같이, 하나의 특징점이 2장의 스테레오 영상에서 다른 좌표값을 가질 때, 그 차이값을 디스패리티(disparity)라고 한다. 이론적으로 특징점이 무한히 멀리 있을 경우 2장의 영상에서 특징점은 같은 좌표값을 갖게 되어 디스패리티는 '0'이 된다. 한편, 특징점이 가까울수록 디스패리티는 커지게 되고 이 값이 계속 커지면 특징점은 이미지 밖으로 벗어나게 된다.
종래의 스테레오 영상을 이용한 거리 측정 방법에 있어서, 스테레오 영상은 배율이 동일한 카메라를 사용하여 획득된 등배율의 스테레오 영상들을 사용한다.
도 1은 종래의 스테레오 영상을 이용한 거리 측정 장치를 설명하기 위하여 도시한 개념도이며, 도 2는 도 1의 스테레오 영상에서의 디스패리티를 설명하기 위하여 도시한 개념도이다. 도 1에 도시된 바와 같이, 등배율의 스테레오 영상인 A 영상과 B 영상을 획득하게 된다. 한편, 도 2에 도시된 바와 같이, A 영상과 B 영상을 비교하면 특징점의 좌표값의 차이, 즉 디스패리티(disparity)를 얻을 수 있게 된다.
따라서, 종래의 방법은 배율이 다른 카메라들에 의해 획득된 영상들에 대하여는 적용될 수 없는 문제점이 있다. 특히, 도로상의 교통 정보를 획득하기 위해 설치된 광각 카메라와 차량 번호를 획득하기 위한 협각 카메라가 설치되어 있고 이러한 광각 카메라와 협각 카메라로부터 획득된 영상들로부터는 전술한 종래의 방법을 적용하여 거리 측정을 할 수 없다. 따라서, 도로상의 차량에 대한 거리 정보를 검출하기 위하여는 추가의 스테레오 카메라를 설치하여야 되는 문제점이 발생한다.
한국등록특허공보 제 10-0724889호
전술한 문제점을 해결하기 위하여 본 발명은 이배율 스테레오 영상을 이용하여 거리를 측정하는 거리 측정 장치를 제공하는 것을 목적으로 한다.
전술한 기술적 과제를 달성하기 위한 본 발명의 특징에 따른 거리 측정 장치는, 광각 렌즈가 장착되어 관심 물체를 포함하는 광각 영상을 촬상하는 광각 카메라; 협각 렌즈가 장착되어 관심 물체에 대한 협각 영상을 촬상하는 협각 카메라; 광각 카메라와 협각 카메라를 구동시켜 관심 물체에 대하여 동일 시간에 촬영한 광각 영상과 협각 영상을 획득하고, 상기 광각 영상과 협각 영상의 배율을 동일하게 조정하여 등배율의 스테레오 영상을 생성하고, 상기 협각 영상을 광각 영상의 기준 좌표로 변환시킨 후, 협각 영상과 광각 영상의 특징점들에 대한 디스패리티(disparity)를 구하고, 상기 디스패리티를 이용하여 관심 물체에 대한 거리를 계산하는 중앙 처리 장치;를 구비하여, 광각 및 협각 카메라에 의해 촬영된 이배율의 스테레오 영상을 이용하여 관심 물체에 대한 거리를 측정한다.
전술한 특징에 따른 상기 거리 측정 장치에 있어서, 상기 광각 카메라 및 협각 카메라의 전면에 설치되어, 상기 관심 물체로 레이저 포인터를 발사하는 레이저 거리계;를 더 구비하고,
상기 중앙 처리 장치는, 상기 광각 및 협각 카메라를 구동시킴과 동시에 레이저 거리계를 구동시켜 레이저 포인터를 관심 물체로 조사하여, 광각 영상과 협각 영상에 표시된 레이저 포인터를 특징점으로 추출하고, 상기 특징점을 이용하여 디스패리티를 계산하는 것이 바람직하다.
전술한 특징에 따른 상기 거리 측정 장치에 있어서, 상기 광각 카메라 및 협각 카메라의 전면에 설치되어, 상기 관심 물체로 레이저 포인터를 발사하는 레이저 거리계;를 더 구비하고,
상기 중앙 처리 장치는 사전 설정된 시간 간격마다 주기적으로 거리 측정 장치의 정확도를 보정하는 보정 프로세스를 수행하며, 상기 보정 프로세스는, 레이저 거리계를 구동시킴과 동시에 광각 카메라 및 협각 카메라를 구동시켜 레이저 포인터가 표시된 광각 영상 및 협각 영상을 획득하고, 상기 레이저 거리계를 이용하여 관심 물체에 대한 거리를 측정하고, 광각 영상과 협각 영상의 배율을 조정하여 등배율의 스테레오 영상들을 생성하고 스테레오 영상의 디스패리티를 측정하고 이를 이용하여 관심 물체에 대한 거리를 측정하고, 레이저 거리계를 이용하여 측정한 거리값과 스테레오 영상의 디스패리티를 이용하여 측정한 거리값을 비교하고, 비교 결과에 따라 디스패리티에 따른 거리값에 대한 보정값을 생성하여 저장하는 것이 바람직하다.
전술한 특징에 따른 상기 거리 측정 장치에 있어서, 상기 거리 측정 장치는 스테레오 영상의 각 디스패리티와 이에 대응되는 거리값의 관계를 저장한 거리 테이블을 사전에 설정하여 저장 및 관리하고, 상기 중앙 처리 장치는 관심 물체에 대한 거리 측정을 위하여 디스패리티를 측정하고, 상기 거리 테이블을 참조하여 상기 측정된 디스패리티에 대응되는 거리값을 판독하여 제공하는 것이 바람직하다.
전술한 특징에 따른 상기 거리 측정 장치에 있어서, 상기 협각 카메라는 차량 번호를 촬영가능한 카메라이며, 상기 중앙 처리 장치는 협각 카메라에 의해 촬영된 협각 영상을 이용하여 차량 번호를 획득하고, 획득된 차량 번호에 대한 거리를 측정하는 것이 바람직하다.
본 발명에 따른 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법은 광각 및 협각 영상의 디스패리티를 이용하여 관심 물체의 거리를 측정함으로써, 레이저 거리계로 측정하기 어려운 피사체에 대한 거리도 측정할 수 있게 된다.
또한, 본 발명에 따른 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법은, 도로 등에 차량 번호 촬영이나 차량 정보 획득을 위하여 기설치된 광각 카메라와 협각 카메라를 그대로 이용하여 차량에 대한 거리를 측정할 수 있게 되고, 이를 이용하여 차량의 속도도 계산할 수 있게 된다.
또한, 본 발명에 따른 거리 측정 장치 및 거리 측정 방법은, 피사체가 이동하는 차량 등인 경우 광각 영상을 이용하여 차량 추적 등을 연속적으로 수행할 수 있게 된다.
또한, 본 발명에 따른 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법은 관심 물체인 피사체에 대한 3차원 복원, 이동하는 피사체에 대한 속도 측정 등에 사용될 수 있다.
도 1은 종래의 스테레오 영상을 이용한 거리 측정 장치를 설명하기 위하여 도시한 개념도이며, 도 2는 도 1의 스테레오 영상에서의 디스패리티를 설명하기 위하여 도시한 개념도이다.
도 3은 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치를 설명하기 위하여 도시한 개념도이다.
도 4는 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치에 있어서, 중앙 처리 장치의 거리 측정 방법을 순차적으로 도시한 흐름도이다.
도 5는 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치에 있어서, 이배율 스테레오 카메라에 의해 측정된 광각 영상과 협각 영상을 각각 예시적으로 도시한 개념도이다.
도 6은 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치에 있어서, 광각 영상과 축소된 협각 영상의 좌표를 일치시키고 이로부터 디스패리티를 표시한 개념도이다.
본 발명에 따른 거리 측정 장치 및 방법은 이배율 스테레오 영상인 광각 영상과 협각 영상을 이용하여 관심 물체에 대한 거리를 측정하는 것을 특징으로 한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예들에 따른 거리 측정 장치 및 거리 측정 방법을 구체적으로 설명한다.
< 제1 실시예 >
도 3은 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치를 설명하기 위하여 도시한 개념도이다. 도 3을 참조하면, 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치(3)는 광각 카메라(300), 협각 카메라(310) 및 중앙 처리 장치(320)를 구비한다.
상기 광각 카메라(300)는 광각 렌즈가 장착되어 관심 물체를 포함하는 광각 영상을 촬영하여 상기 중앙 처리 장치로 제공한다.
상기 협각 카메라(310)는 협각 렌즈가 장착되어 관심 물체에 대한 협각 영상을 촬영하여 상기 중앙 처리 장치로 제공한다.
상기 중앙 처리 장치(320)는 광각 카메라와 협각 카메라를 구동시켜 관심 물체에 대하여 동일 시간에 촬영한 광각 영상과 협각 영상을 획득하고, 상기 동시에 촬영된 광각 영상과 협각 영상을 이용하여 관심 물체에 대한 거리를 계산하여 제공한다.
한편, 본 발명에 따른 거리 측정 장치는 스테레오 영상에서의 특징점을 쉽게 추출하기 위하여 광 조사부(330)를 더 구비할 수 있다. 광각 카메라와 협각 카메라를 구동시킴과 동시에 광 조사부의 광을 관심 물체로 조사함으로써, 광각 영상과 협각 영상에 조사된 광이 표시되고, 이렇게 광이 표시된 지점을 특징점으로 사용한다. 상기 광 조사부는 레이저 거리계의 레이저 포인터를 사용할 수 있으며, 그 외에도 LED 등을 사용할 수 있다.
이하, 상기 중앙 처리 장치(320)의 거리 측정 방법에 대하여 도 4 내지 도 6을 참조하여 구체적으로 설명한다.
도 4는 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치에 있어서, 중앙 처리 장치의 거리 측정 방법을 순차적으로 도시한 흐름도이다.
도 4를 참조하면, 본 발명에 따른 거리 측정 장치의 중앙 처리 장치는, 관심 물체에 대한 거리를 측정하기 위하여, 먼저 광각 카메라와 협각 카메라를 동시에 구동시켜 관심 물체에 대한 광각 영상과 협각 영상을 획득한다.
도 5는 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치에 있어서, 이배율 스테레오 카메라에 의해 측정된 광각 영상과 협각 영상을 각각 예시적으로 도시한 개념도이다. 도 5를 참조하면, 서로 다른 배율의 광각 영상과 협각 영상을 얻을 수 있다. 여기서, 레이저 포인터 등이 표시된 경우 특징점으로 사용할 수 있으며, 레이저 포인터가 없는 경우 관심 물체의 특정 영역이나 점을 특징점으로 사용할 수 있다.
다음, 광각 영상과 협각 영상의 배율을 조정하여, 등배율의 스테레오 영상을 생성할 수 있다. 예를 들면, 협각 영상을 축소하여 광각 영상과 동일한 배율로 조정하거나, 광각 영상의 대응 영역을 확대하여 협각 영상과 동일한 배율로 조정할 수 있을 것이다. 다만, 본 실시예에서는 설명의 편의상, 협각 영상을 축소하여 광각 영상과 동일한 배율로 조정하여 등배율의 스테레오 영상을 생성한 것을 기준으로 설명한다.
등배율의 스테레오 영상을 생성한 후, 각 영상에 대해 캘리브레이션(Calibration)한다. 캘리브레이션 프로세스는 디스패리티와 거리값의 관계를 정확하게 구하기 위하여 실세계 공간을 영상 좌표값에 일치시키는 것으로서, 베이스 라인의 거리, 렌즈의 왜곡, 에피폴라 면의 불일치 등에 따라 적절하게 보정하게 된다. 이 때, 레이저 포인터와 같은 명확한 특징점은 캘리브레이션 프로세스에서의 수학적 계산을 최소화시킬 수 있게 된다.
다음, 축소된 협각 영상을 광각 영상의 기준 좌표에 일치시키고, 상기 스테레오 영상의 특징점을 추출하고, 특징점에 대한 디스패리티(disparity)를 구하고, 상기 디스패리티를 이용하여 관심 물체에 대한 거리를 계산한다. 도 6은 본 발명의 바람직한 제1 실시예에 따른 거리 측정 장치에 있어서, 광각 영상과 축소된 협각 영상의 좌표를 일치시키고 이로부터 디스패리티를 표시한 개념도이다.
< 제2 실시예 >
이하, 본 발명의 제2 실시예에 따른 거리 측정 장치 및 거리 측정 방법에 대하여 구체적으로 설명한다. 본 발명의 제2 실시예에 따른 거리 측정 장치는 광각 카메라, 협각 카메라, 레이저 거리계 및 중앙 처리 장치를 구비한다. 광각 카메라 및 협각 카메라는 제1 실시예의 그것들과 동일하므로, 중복되는 설명은 생략한다.
상기 레이저 거리계는 레이저 포인터를 조사하고, 레이저 포인터가 조사된 측정 지점까지의 거리를 측정하여 제공한다.
상기 중앙 처리 장치는 관심 물체에 대한 거리를 측정하기 위하여, 레이저 포인터를 조사함과 동시에 광각 카메라와 협각 카메라를 구동시켜 관심 물체에 대하여 동일 시간에 촬영한 광각 영상과 협각 영상을 획득하고, 상기 동시에 촬영된 광각 영상과 협각 영상을 이용하여 관심 물체에 대한 거리를 계산하여 제공한다.
여기서, 본 실시예에 따른 중앙 처리 장치는 상기 레이저 포인터가 표시된 광각 영상과 협각 영상을 획득하게 되고, 광각 영상과 협각 영상의 레이저 포인터를 특징점으로 사용하는 것을 특징으로 한다.
본 실시예에 따른 중앙 처리 장치의 거리 측정 방법은 제1 실시예의 거리 측정 방법과 동일하다. 다만, 본 실시예에 따른 중앙 처리 장치는 거리 측정의 정확성을 위하여, 사전 설정된 시간 간격마다 주기적으로 보정 프로세스를 수행하는 것을 특징으로 한다.
상기 보정 프로세스는 다음과 같다. 먼저, 레이저 거리계를 구동시킴과 동시에 광각 카메라 및 협각 카메라를 구동시켜 광각 영상 및 협각 영상을 획득하고, 상기 레이저 거리계를 이용하여 관심 물체에 대한 거리를 측정하고, 광각 영상과 협각 영상의 배율을 조정하여 좌표 변환하여 등배율 스테레오 영상을 생성하고, 캘리브레이션한 후 특징점에 대한 디스패리티를 측정하고 이를 이용하여 관심 물체에 대한 거리를 측정한다. 다음, 레이저 거리계를 이용하여 측정한 거리값과 스테레오 영상의 디스패리티를 이용하여 측정한 거리값을 비교하고, 비교 결과에 따라 디스패리티에 따른 거리값을 보정하기 위한 보정값을 생성하여 저장한다.
다음, 이후의 공정에서 디스패리티에 따른 거리값을 계산함에 있어서, 전술한 거리 측정 방법에 의해 디스패리티에 따른 거리값을 계산한 후, 상기 계산된 디스패리티에 따른 거리값은 상기 보정값을 이용하여 보정하여 거리값을 최종적으로 확정하게 된다.
전술한 제1 및 제2 실시예에 따른 거리 측정 장치에 있어서, 측정된 디스패리티에 따른 거리를 계산하기 위하여 사전에 거리 테이블을 더 구비할 수 있다. 상기 거리 테이블은 각 디스패리티에 따른 거리값을 사전에 측정하여 저장한 테이블이다. 상기 중앙 처리 장치는 디스패리티가 측정되면, 상기 거리 테이블을 이용하여 상기 디스패리티에 따른 거리값을 판독하여 제공할 수 있다.
이와 같이 거리 테이블을 사용함으로써, 수학적 계산을 최소화시킬 수 있을 뿐만 아니라 정확성도 향상시킬 수 있다.
한편, 상기 거리 테이블은 사전 설정된 시간 간격마다 주기적으로 보정하여, 항상 정확성을 유지할 수 있도록 하는 것이 바람직하다. 상기 거리 테이블을 주기적으로 보정하는 방법으로는, 제2 실시예의 레이저 거리계를 사용하여 주기적으로 거리를 측정하고, 레이저 거리계에 의해 측정된 거리값과 광각 및 협각 영상의 디스패리티를 이용하여 측정된 거리값을 비교하고, 두 거리값이 서로 상이한 경우, 상기 레이저 거리계에 의해 측정된 거리값을 이용하여 거리 테이블의 디스패리티와 거리값의 관계를 보정할 수 있다.
전술한 본 발명에 따른 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법은 광각 및 협각 영상의 디스패리티를 이용하여 관심 물체의 거리를 측정함으로써, 레이저 거리계로 측정하기 어려운 피사체에 대한 거리도 측정할 수 있게 된다.
한편, 전술한 본 발명에 따른 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법은 관심 물체인 피사체에 대한 3차원 복원, 이동하는 피사체에 대한 속도 측정 등에 사용될 수 있다.
이상에서 본 발명에 대하여 그 바람직한 실시예를 중심으로 설명하였으나, 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 발명의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러 가지의 변형과 응용이 가능함을 알 수 있을 것이다. 그리고, 이러한 변형과 응용에 관계된 차이점들은 첨부된 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명에 따른 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법은 속도 측정, 피사체의 3D 복원 등에 사용될 수 있다.

Claims (7)

  1. 광각 렌즈가 장착되어 관심 물체를 포함하는 광각 영상을 촬상하는 광각 카메라;
    협각 렌즈가 장착되어 관심 물체에 대한 협각 영상을 촬상하는 협각 카메라;
    광각 카메라와 협각 카메라를 구동시켜 관심 물체에 대하여 동일 시간에 촬영한 광각 영상과 협각 영상을 획득하고, 상기 광각 영상과 협각 영상의 배율을 동일하게 조정하여 등배율의 스테레오 영상을 생성하고, 상기 협각 영상을 광각 영상의 기준 좌표로 변환시킨 후, 협각 영상과 광각 영상의 특징점들에 대한 디스패리티(disparity)를 구하고, 상기 디스패리티를 이용하여 관심 물체에 대한 거리를 계산하는 중앙 처리 장치; 및
    상기 광각 카메라 및 협각 카메라의 전면에 설치되어, 상기 관심 물체로 레이저 포인터를 발사하는 레이저 거리계;
    를 구비하여 광각 및 협각 카메라에 의해 촬영된 이배율의 스테레오 영상을 이용하여 관심 물체에 대한 거리를 측정하는 것을 특징으로 하며,
    상기 중앙 처리 장치는, 상기 광각 및 협각 카메라를 구동시킴과 동시에 레이저 거리계를 구동시켜 레이저 포인터를 관심 물체로 조사하여, 광각 영상과 협각 영상에 표시된 레이저 포인터를 특징점으로 추출하고, 상기 특징점을 이용하여 디스패리티를 계산하는 것을 특징으로 하는 것을 특징으로 하는 거리 측정 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 중앙 처리 장치는 사전 설정된 시간 간격마다 주기적으로 거리 측정 장치의 정확도를 보정하는 보정 프로세스를 수행하며,
    상기 보정 프로세스는,
    레이저 거리계를 구동시킴과 동시에 광각 카메라 및 협각 카메라를 구동시켜 레이저 포인터가 표시된 광각 영상 및 협각 영상을 획득하고,
    상기 레이저 거리계를 이용하여 관심 물체에 대한 거리를 측정하고,
    광각 영상과 협각 영상의 배율을 조정하여 등배율의 스테레오 영상들을 생성하고 스테레오 영상의 디스패리티를 측정하고 이를 이용하여 관심 물체에 대한 거리를 측정하고,
    레이저 거리계를 이용하여 측정한 거리값과 스테레오 영상의 디스패리티를 이용하여 측정한 거리값을 비교하고, 비교 결과에 따라 디스패리티에 따른 거리값에 대한 보정값을 생성하여 저장하는 것을 특징으로 하는 거리 측정 장치.
  4. 삭제
  5. 제1항에 있어서, 상기 거리 측정 장치는 스테레오 영상의 각 디스패리티와 이에 대응되는 거리값의 관계를 저장한 거리 테이블을 사전에 설정하여 저장 및 관리하고,
    상기 중앙 처리 장치는 관심 물체에 대한 거리 측정을 위하여 디스패리티를 측정하고, 상기 거리 테이블을 참조하여 상기 측정된 디스패리티에 대응되는 거리값을 판독하여 제공하는 것을 특징으로 하는 거리 측정 장치.
  6. 제5항에 있어서, 상기 중앙 처리 장치는 사전 설정된 시간 간격마다 주기적으로 거리 테이블을 보정하는 보정 프로세스를 수행하며,
    상기 보정 프로세스는,
    레이저 거리계를 구동시킴과 동시에 광각 카메라 및 협각 카메라를 구동시켜 레이저 포인터가 표시된 광각 영상 및 협각 영상을 획득하고,
    상기 레이저 거리계를 이용하여 관심 물체에 대한 거리를 측정하고,
    광각 영상과 협각 영상의 배율을 조정하여 등배율의 스테레오 영상들을 생성하고 스테레오 영상의 디스패리티를 측정하고 이를 이용하여 관심 물체에 대한 거리를 측정하고,
    레이저 거리계를 이용하여 측정한 거리값과 스테레오 영상의 디스패리티를 이용하여 측정한 거리값을 비교하고, 비교 결과에 따라 상기 거리 테이블을 보정하여 저장하는 것을 특징으로 하는 거리 측정 장치.
  7. 제1항에 있어서, 상기 협각 카메라는 차량 번호를 촬영가능한 카메라이며,
    상기 중앙 처리 장치는 협각 카메라에 의해 촬영된 협각 영상을 이용하여 차량 번호를 획득하고, 획득된 차량 번호에 대한 거리를 측정하는 것을 특징으로 하는 거리 측정 장치.

KR1020150137834A 2015-09-30 2015-09-30 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법 Expired - Fee Related KR101706627B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150137834A KR101706627B1 (ko) 2015-09-30 2015-09-30 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150137834A KR101706627B1 (ko) 2015-09-30 2015-09-30 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법

Publications (1)

Publication Number Publication Date
KR101706627B1 true KR101706627B1 (ko) 2017-02-17

Family

ID=58265498

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150137834A Expired - Fee Related KR101706627B1 (ko) 2015-09-30 2015-09-30 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법

Country Status (1)

Country Link
KR (1) KR101706627B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020226264A1 (ko) * 2019-05-06 2020-11-12 삼성전자 주식회사 영상에 기초하여 위치 정보를 획득하는 전자 장치 및 그 동작 방법
CN115244361A (zh) * 2020-01-22 2022-10-25 光子医疗公司 带有深度感测的开放视野多模态校准数字放大镜
US20230186501A1 (en) * 2019-08-07 2023-06-15 Canon Kabushiki Kaisha Depth information generating apparatus, image capturing apparatus, depth information generating method, image processing apparatus, and image processing method
EP4204855A4 (en) * 2020-10-13 2024-09-04 Waymo LLC Lidar based stereo camera correction

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07286858A (ja) * 1994-04-20 1995-10-31 Hitachi Ltd 障害物検知装置及び障害物検知装置を備えるナビゲーション装置
KR100699690B1 (ko) * 2005-11-10 2007-03-26 넥스콘 테크놀러지 주식회사 Ｌｅｄ를 이용한 자동차의 조명장치
KR100724889B1 (ko) 2006-02-21 2007-06-04 삼성전자주식회사 이동통신 단말기에서 스테레오 영상을 이용한 거리 및3차원 영상 제공 장치 및 방법
KR101323639B1 (ko) * 2012-10-31 2013-11-05 최두헌 차량용 추돌방지레이더의 설치각도 조절 구조
JP2015075417A (ja) * 2013-10-10 2015-04-20 日産自動車株式会社 障害物検出センサ及び障害物検出装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07286858A (ja) * 1994-04-20 1995-10-31 Hitachi Ltd 障害物検知装置及び障害物検知装置を備えるナビゲーション装置
KR100699690B1 (ko) * 2005-11-10 2007-03-26 넥스콘 테크놀러지 주식회사 Ｌｅｄ를 이용한 자동차의 조명장치
KR100724889B1 (ko) 2006-02-21 2007-06-04 삼성전자주식회사 이동통신 단말기에서 스테레오 영상을 이용한 거리 및3차원 영상 제공 장치 및 방법
KR101323639B1 (ko) * 2012-10-31 2013-11-05 최두헌 차량용 추돌방지레이더의 설치각도 조절 구조
JP2015075417A (ja) * 2013-10-10 2015-04-20 日産自動車株式会社 障害物検出センサ及び障害物検出装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020226264A1 (ko) * 2019-05-06 2020-11-12 삼성전자 주식회사 영상에 기초하여 위치 정보를 획득하는 전자 장치 및 그 동작 방법
US12249109B2 (en) 2019-05-06 2025-03-11 Samsung Electronics Co., Ltd Electronic device for acquiring location information on basis of image, and method for operating same
US20230186501A1 (en) * 2019-08-07 2023-06-15 Canon Kabushiki Kaisha Depth information generating apparatus, image capturing apparatus, depth information generating method, image processing apparatus, and image processing method
US12243253B2 (en) * 2019-08-07 2025-03-04 Canon Kabushiki Kaisha Depth information generating apparatus, image capturing apparatus, depth information generating method, image processing apparatus, and image processing method
CN115244361A (zh) * 2020-01-22 2022-10-25 光子医疗公司 带有深度感测的开放视野多模态校准数字放大镜
EP4094041A4 (en) * 2020-01-22 2024-07-03 Photonic Medical Inc. OPEN, MULTIMODAL, CALIBRATED DIGITAL MAGNIFIER WITH DEPTH SENSING
US12075019B2 (en) 2020-01-22 2024-08-27 Photonic Medical Inc. Open view, multi-modal, calibrated digital loupe with depth sensing
EP4204855A4 (en) * 2020-10-13 2024-09-04 Waymo LLC Lidar based stereo camera correction

Similar Documents

Publication Publication Date Title
KR101706093B1 (ko) 3차원 좌표 추출 시스템 및 그 방법
US11243072B2 (en) Method for the three dimensional measurement of moving objects during a known movement
CN109443245B (zh) 一种基于单应性矩阵的多线结构光视觉测量方法
KR101626072B1 (ko) 영상 보정 장치 및 영상 보정 방법
KR20190051052A (ko) 복수 개의 다른 파장의 레이저를 포함하는 3차원 스캔 방법 및 스캐너
EP2751521B1 (en) Method and system for alignment of a pattern on a spatial coded slide image
EP1580523A1 (en) Three-dimensional shape measuring method and its device
JP6596433B2 (ja) ２つのカメラからの曲線の集合の構造化光整合
EP3688407B1 (en) Light projection systems
KR101706627B1 (ko) 이배율 스테레오 영상을 이용한 거리 측정 장치 및 거리 측정 방법
CN105378794A (zh) 3d拍摄装置、用于建立3d图像的方法和用于构建3d拍摄装置的方法
CN106225676B (zh) 三维测量方法、装置及系统
WO2011125937A1 (ja) キャリブレーションデータ選択装置、選択方法、及び選択プログラム、並びに三次元位置測定装置
CN105258673A (zh) 一种基于双目合成孔径聚焦图像的目标测距方法、装置
JP2008275366A (ja) ステレオ３次元計測システム
JP5336325B2 (ja) 画像処理方法
WO2019087253A1 (ja) ステレオカメラのキャリブレーション方法
KR101459522B1 (ko) 모바일 기반의 부가정보를 이용한 위치 보정 방법
Setyawan et al. Measurement accuracy analysis of distance between cameras in stereo vision
KR20140061230A (ko) 객체의 깊이 정보 생성 장치 및 그 방법
Kuhl et al. Monocular 3D scene reconstruction at absolute scales by combination of geometric and real-aperture methods
KR101142279B1 (ko) 스테레오 비전 시스템에서의 이미지 정렬 장치 및 방법
JP6570321B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP3525712B2 (ja) 三次元画像撮像方法及び三次元画像撮像装置
Pirahansiah et al. Camera calibration for multi-modal robot vision based on image quality assessment

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20150930

PA0201 Request for examination
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20160613

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20161229

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20170208

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20170208

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20201119