KR101184124B1 - 대향 카메라를 이용한 깊이감 측정 방법 및 장치 - Google Patents

대향 카메라를 이용한 깊이감 측정 방법 및 장치 Download PDF

Info

Publication number
KR101184124B1
KR101184124B1 KR1020110111996A KR20110111996A KR101184124B1 KR 101184124 B1 KR101184124 B1 KR 101184124B1 KR 1020110111996 A KR1020110111996 A KR 1020110111996A KR 20110111996 A KR20110111996 A KR 20110111996A KR 101184124 B1 KR101184124 B1 KR 101184124B1
Authority
KR
South Korea
Prior art keywords
silhouette
subject
camera
image
shape
Prior art date
Application number
KR1020110111996A
Other languages
English (en)
Inventor
신병석
Original Assignee
인하대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인하대학교 산학협력단 filed Critical 인하대학교 산학협력단
Priority to KR1020110111996A priority Critical patent/KR101184124B1/ko
Application granted granted Critical
Publication of KR101184124B1 publication Critical patent/KR101184124B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/271Image signal generators wherein the generated image signals comprise depth maps or disparity maps

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

대향 카메라를 이용한 깊이감 측정 방법 및 장치가 개시된다. 기본 카메라와 대향(對向) 카메라로 이루어진 두 대의 카메라 사이에 피사체가 위치하며, 기본 카메라에서 촬영된 제1 영상과 대향 카메라에서 촬영된 제2 영상을 입력 받는 입력부; 피사체에 대하여 제2 영상에 나타난 제2 실루엣을 이용하여 제1 영상에 나타난 제1 실루엣을 구하는 변환부; 및 제1 실루엣의 크기와 제2 실루엣의 크기를 비교하여 피사체에 대한 깊이 값을 계산하는 계산부를 포함하는 깊이감 측정 장치를 제공한다.

Description

대향 카메라를 이용한 깊이감 측정 방법 및 장치{METHOD AND APPARATUS FOR MEASURING DEPTH USING OPPOSED CAMERA}
본 발명의 실시예들은 영상에 대한 깊이 정보를 저렴한 비용으로 보다 정확하게 측정할 수 있는 깊이감 측정 방법 및 장치에 관한 것이다.
디지털카메라를 이용하면 사물의 형태를 감지할 수 있다. 이것을 연속 촬영하여 동영상을 얻은 후 각 프레임간의 차이를 광류(optical flow)로 만들어서 다양한 정보를 얻어낼 수 있다.
깊이 값(depth cue)은 촬영 객체와 카메라 사이의 거리 정도를 나타내며 변이와 밀접한 관계에 있다. 촬영 객체가 카메라로부터 멀리 떨어져 있을수록 변이 값은 작아지며 깊이 값은 커지고, 촬영 객체가 카메라로부터 가까이 있을수록 변이 값은 커지며 깊이 값은 작아지기 때문이다. 결국, 깊이와 변이는 반비례 관계에 있다고 할 수 있으며, 변이 정보로부터 깊이 정보를 얻을 수 있거나 깊이 정보로부터 변이 정보를 얻을 수 있다. 그러나, 일반적으로 하나의 카메라를 이용하여 피사체의 각 부분들이 카메라로부터 얼마나 떨어져 있는지를 나타내는 깊이 값을 얻어내는 것은 매우 어렵거나 불가능하다.
동영상에서 나타나는 크기의 변화를 이용하거나 운동 시차(motion parallax)를 이용하여 대략의 깊이 값을 얻어내는 방법이 입체영상처리에서 많이 연구되어 왔지만, 이것은 여러 가지 제약조건들 때문에 매우 제한된 환경에서만 깊이 값 검출이 가능하다.
국내등록특허 제10-0931311호(등록일 2009년 12월 03일)에는 스테레오 카메라를 이용하여 깊이 정보를 추정하는 방법이 개시되어 있다. 스테레오 카메라를 이용하면 주시하는 피사체의 양안시차를 이용하여 상대적인 깊이 값을 얻어낼 수 있다. 양안의 영상에서 정합된 두 점 사이의 거리가 멀면 그 점은 카메라에서 가까운 것이고 가까우면 카메라로부터 멀리 떨어진 것이다. 그러나, 스테레오 카메라는 피사체와 카메라가 멀어질수록 시차가 작아져서 깊이 값을 올바르게 계산하기 어려운 문제가 있다. 그래서, 전후면의 거리가 큰 물체이거나 앞뒤로 이동 폭이 매우 넓은 동작이 아니면 감지하기 어렵다.
깊이 값을 측정하기 위한 또 다른 방법으로는 저출력의 레이저나 적외선(IR)을 이용하여 피사체로부터 반사되는 속도(time of fly)를 감지하여 거리를 측정하는 방법이 있다. 이 방법은 스테레오 카메라와 같은 광학적 방법에 비해 카메라와 물체 사이의 거리를 비교적 정확하게 측정할 수 있다. 그러나, 이 방법은 거리측정소자의 물리적인 크기 때문에 광학적 방법에 비해 해상도(resolution)가 떨어지고 광학적 해상도에 비해 현저히 낮은 정밀도를 가지는 장치들조차도 수백~수천 만원의 가격대를 형성한다는 점에서 실용화에 많은 문제점을 가진다.
따라서, 본 명세서에서는 저렴한 비용으로 보다 정확하게 영상에 대한 깊이 값을 측정할 수 있는 깊이감 측정 방법 및 장치를 제안한다.
저렴한 광학 카메라를 서로 마주보게 배치하고 그 사이에서 피사체의 형상이나 움직임을 촬영하여 적은 비용으로 깊이 값을 계산할 수 있는 깊이감 측정 방법 및 장치를 제공한다.
대향 카메라의 실루엣을 변환하여 기본 카메라의 실루엣을 찾아가는 과정에서 얻어지는 파라미터들을 이용하여 피사체의 깊이 값을 추정할 수 있는 깊이감 측정 방법 및 장치를 제공한다.
기본 카메라와 대향(對向) 카메라로 이루어진 두 대의 카메라 사이에 피사체가 위치하며, 기본 카메라에서 촬영된 제1 영상과 대향 카메라에서 촬영된 제2 영상을 입력 받는 입력부; 피사체에 대하여 제2 영상에 나타난 제2 실루엣을 이용하여 제1 영상에 나타난 제1 실루엣을 구하는 변환부; 및 제1 실루엣의 크기와 제2 실루엣의 크기를 비교하여 피사체에 대한 깊이 값을 계산하는 계산부를 포함하는 깊이감 측정 장치를 제공한다.
일 측면에 따르면, 기본 카메라와 대향 카메라는 서로 대칭되는 방향에 위치할 수 있다.
다른 측면에 따르면, 변환부는 제2 영상에서 제2 실루엣을 추출한 후, 제2 실루엣에 거울변환과 크기변환 및 평행이동변환을 적용하여 제1 실루엣을 구할 수 있다.
또 다른 측면에 따르면, 계산부는 제1 실루엣의 크기와 제2 실루엣의 크기 간의 비율인 스케일 팩터(scale factor)를 구한 후, 기본 카메라와 대향 카메라 간의 거리 값과 스케일 팩터를 이용하여 깊이 값을 계산할 수 있다.
피사체에 대한 깊이 값을 측정하는 깊이감 측정 장치의 깊이감 측정 방법에 있어서, 피사체가 기본 카메라와 대향 카메라로 이루어진 두 대의 카메라 사이에 위치하며, 깊이감 측정 방법은 기본 카메라에서 촬영된 제1 영상과 대향 카메라에서 촬영된 제2 영상을 입력 받는 단계; 피사체에 대하여 제2 영상에 나타난 제2 실루엣을 이용하여 제1 영상에 나타난 제1 실루엣을 구하는 단계; 및 제1 실루엣의 크기와 제2 실루엣의 크기를 비교하여 피사체에 대한 깊이 값을 계산하는 단계를 포함할 수 있다.
피사체를 사이에 두고 두 대의 카메라가 서로 마주보도록 배치하여 좌우 대칭이 이루어지는 피사체의 실루엣 비교를 통해 피사체의 각 부분들에 대한 깊이 값을 측정할 수 있다. 따라서, 대향 카메라를 이용한 간단한 시스템 구조를 통해 매우 저렴한 가격으로 공간의 제약을 받지 않으면서 영상에 대한 깊이 값을 보다 정확하게 계산할 수 있다.
도 1은 본 발명의 일실시예에 있어서, 서로 대칭이 되는 피사체의 영상을 얻기 위한 시스템 설치 조건을 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 있어서, 기본 카메라에서 촬영한 피사체 실루엣을 대향 카메라에서 촬영한 피사체 실루엣과 비교하여 깊이 값을 측정하는 깊이감 측정 장치의 내부 구성을 도시한 블록도이다.
도 3은 본 발명의 일실시예에 있어서, 대향 카메라에서 촬영한 피사체 실루엣을 변환하여 기본 카메라의 피사체 실루엣을 찾아내는 과정을 설명하기 위한 도면이다.
도 4 내지 도 6은 본 발명의 일실시예에 있어서, 피사체의 위치에 따른 스케일 팩터의 변화를 설명하기 위한 도면이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
본 실시예들은 서로 마주보는 두 대의 카메라를 이용하여 피사체가 카메라로부터 얼마나 떨어져 있는지를 나타내는 깊이 값을 측정하는 방법 및 장치에 관한 것이다.
기본적으로 활용되는 영상처리 기법이나 제스쳐 인식을 위한 컴퓨터 비젼 기술들은 과거 수십년 동안 연구되어온 기본적인 알고리즘들을 사용한다. 따라서, 영상획득기술, 화질 개선을 위한 영상처리 기술, 의미 있는 영역 추출 등과 같이 제스쳐 인식에 사용되는 다양한 패턴 추출 기술 등은 기존에 개발되어 공개된 기술들을 활용한다. 본 발명의 핵심은 대향 카메라의 실루엣을 변환하여 기본 카메라의 실루엣을 찾아가는 과정에서 얻어지는 파라미터(parameter)들을 이용하여 피사체의 깊이 값을 측정하는 방법과 그에 관련된 장치로 한정할 수 있다.
도 1은 본 발명의 일실시예에 있어서, 서로 대칭이 되는 피사체의 영상을 얻기 위한 시스템 설치 조건을 설명하기 위한 도면이다. 도 1은 시스템을 구현하기 위한 각 컴포넌트인 두 대의 카메라와 피사체의 배치 형태를 도시한 것이다.
도 1에 도시한 바와 같이, 두 대의 카메라 사이에 피사체가 위치하며, 두 대의 카메라를 서로 마주보도록 하여 서로 대칭되는 방향에 위치시킨다. 이러한 시스템 배치 구조를 통해, 하나의 카메라(이하, '기본 카메라'라 칭함)에서 촬영된 피사체의 실루엣은 다른 하나의 카메라(이하, '대향 카메라'라 칭함)에서 촬영된 피사체의 실루엣과 좌우 대칭을 이루게 된다.
본 실시예에서 대향 카메라에서 촬영된 피사체 실루엣을 거울변환(mirror transformation)한 후, 기본 카메라에서 촬영된 피사체 실루엣과 비교하면 깊이 값을 얻을 수 있다. 만약, 기본 카메라에서 피사체(또는 피사체의 특정부분)가 크게 확대되어 나오고, 반대로 대향 카메라에서 피사체가 작게 나왔다면 이는 해당 물체(또는 부분)가 대향 카메라에 비해 기본 카메라 쪽에 더 가까워졌음을 의미하는 것이다. 그에 반대되는 상황이면 피사체가 기본 카메라에서 멀어졌음을 의미한다. 이 원리를 이용하여 피사체가 두 카메라의 화각(field of view) 안에서 앞뒤로 이동한 움직임을 픽셀(pixel) 수준의 해상도로 추정할 수 있다. 이 방법은 일정거리만큼 떨어져 물체를 주시하는 스테레오 카메라에 비해서 분해율이 높기 때문에 작은 움직임도 감지할 수 있으며, 복잡한 캘리브레이션(calibration) 과정이 필요 없다. 두 카메라 사이의 파라미터들이 미리 알려져 있으므로 두 카메라의 피사체 실루엣 크기를 이용하여 피사체의 절대 위치까지 감지할 수 있다. 일반적인 성능의 광학 카메라 두 대만 사용하면 되므로 가격이 저렴하고 레이저와 같은 측거 소자들이 가지는 부작용(예컨대, 시력상실)이 없다.
도 2는 기본 카메라에서 촬영한 피사체 실루엣을 대향 카메라에서 촬영한 피사체 실루엣과 비교하여 깊이 값을 측정하는 깊이감 측정 장치의 내부 구성을 도시한 블록도이고, 도 3은 대향 카메라에서 촬영한 피사체 실루엣을 변환하여 기본 카메라의 피사체 실루엣을 찾아내는 과정을 도시한 것이다. 도 3에 도시된 깊이감 측정 방법의 모든 과정은 도 2에 도시된 깊이감 측정 장치에 의해 실행될 수 있다.
도 2와 도 3을 통해, 대향 카메라를 이용하여 피사체에 대한 깊이 값을 측정하는 과정을 구체적으로 설명하기로 한다.
먼저, 본 발명의 시스템 구성은 상술한 도 1과 같이 기본 카메라와 대향 카메라가 피사체를 사이에 두고 서로 마주보는 구조를 가지고 있다. 즉, 기본 카메라와 대향 카메라는 서로 대칭되는 방향에 위치할 수 있다. 또한, 기본 카메라와 대향 카메라는 유선 카메라는 물론, RF 방식의 무선 카메라를 이용할 수 있다. 색정보를 이용하여 정합하는 경우는 일반 광학 카메라를 사용하고, 마커를 사용하는 경우에는 조명의 영향을 덜 받는 적외선 카메라를 사용할 수도 있다.
도 2에 도시한 바와 같이, 일실시예에 따른 깊이감 측정 장치(200)는 입력부(210), 변환부(220), 그리고 계산부(230)를 포함하여 구성될 수 있다.
입력부(210)는 상기한 시스템 배치 구조에서 기본 카메라 및 대향 카메라와 연결되어 기본 카메라에서 촬영된 영상(이하, '제1 영상'이라 칭함)과 대향 카메라에서 촬영된 영상(이하, '제2 영상'이라 칭함)을 입력 받을 수 있다.
변환부(220)는 피사체에 대하여 제2 영상에 나타난 실루엣을 이용하여 제1 영상에 나타난 실루엣을 구하는 기능을 수행한다. 제1 영상의 피사체 실루엣을 구하는 과정은 도 3에 도시한 바와 같다. 상세하게 설명하면, 변환부(220)는 기본 카메라에서 촬영된 제1 영상에서 이미 알려진 기본 영상처리 기법 중 하나를 이용하여 트래킹 하고자 하는 부위를 검출할 수 있다. 예를 들면, 얼굴이나 손을 트래킹 하는 경우는 영상에서 피부색을 가지는 부분을 영역화하여 그 실루엣을 찾을 수 있다. 동일한 방법으로, 변환부(220)는 대향 카메라에서 촬영된 제2 영상으로부터 피사체의 실루엣(S')을 추출할 수 있다. 이후, 변환부(220)는 제2 영상의 실루엣(S')에 대칭이동을 위한 거울변환(Mmirror)을 적용하고 크기변환(Ms)과 평행이동변환(Mt)을 적용하면 제1 영상에서의 피사체 실루엣(S)을 얻을 수 있다. 즉, 제1 영상에서의 피사체 실루엣(S)은 수학식 1과 같이 정의할 수 있다.
Figure 112011085299032-pat00001
상기한 바와 같이, 변환부(220)는 피사체에 대하여 제2 영상의 실루엣(S')을 변환하여 제1 영상의 실루엣(S)을 찾아내는 과정을 통해 실제 피사체 실루엣을 구할 수 있다.
계산부(230)는 제1 영상의 실루엣(S)과 제2 영상의 실루엣(S') 간 크기 비교를 통해 피사체(또는 특정 부분)에 대한 깊이 값을 계산하는 기능을 수행한다. 먼저, 계산부(230)는 제1 영상의 실루엣 크기와 제2 영상의 실루엣 크기 간의 비율(S'/S)을 나타내는 스케일 팩터를 구한다. 기본 카메라와 대향 카메라 사이의 거리가 d인 경우 적용된 스케일 팩터로부터 피사체의 절대 위치를 계산할 수 있다. 스케일 팩터가 1인 경우 제1 영상의 실루엣(S)과 제2 영상의 실루엣(S')이 동일한 크기를 가지는 것이며, 이는 도 4에 도시한 바와 같이 피사체가 정확하게 기본 카메라와 대향 카메라 사이의 중앙에 놓여 있음을 의미한다. 한편, 스케일 팩터가 1보다 크면 제2 영상의 실루엣(S')이 제1 영상의 실루엣(S) 보다 더 큰 것이며, 이는 도 5에 도시한 바와 같이 실제 피사체가 기본 카메라에서 멀리 위치하고 대향 카메라에 더 가깝게 위치한다는 것을 의미한다. 반대로, 스케일 팩터가 1보다 작으면 제1 영상의 실루엣(S)이 제2 영상의 실루엣(S') 보다 더 큰 것이며, 이는 도 6에 도시한 바와 같이 실제 피사체가 대향 카메라에서 멀리 위치하고 기본 카메라에 더 가깝게 위치함을 의미한다. 따라서, 도 4 내지 도 6을 참조하면 피사체의 위치에 따른 스케일 팩터의 변화를 알 수 있다. 피사체가 기본 카메라에서 멀어지면(도 5) 제1 영상의 피사체 실루엣은 작아지고 제2 영상의 피사체 실루엣은 커진다. 반대로, 피사체가 기본 카메라에 가까워지면(도 6) 제1 영상의 피사체 실루엣은 커지고 제2 영상의 피사체 실루엣은 작아진다.
상기한 계산부(230)는 기본 카메라와 대향 카메라 사이의 거리 값(d)과 스케일 팩터 값을 이용하여 현재 피사체의 위치를 정확하게 계산할 수 있다. 이때, 기본 카메라와 대향 카메라 사이의 거리 값(d)은 초기 시스템 설치 시에 결정되는 값이다. 더 나아가, 본 실시예에서는 카메라 영상의 연속된 두 프레임에서 동일한 피사체의 실루엣을 비교하면 그 피사체가 시간이 지남에 따라 앞 또는 뒤로 이동하는 것을 감지할 수 있다. 예를 들어, 특정 프레임(fi)에서 계산된 스케일 팩터 값(sf(i))값이 다음 프레임(fi +1)에서 계산된 스케일 팩터 값(sf(i+1)) 보다 작으면 해당 피사체가 뒤에서 앞으로 이동한 것으로 판단하고, 반대의 경우에는 피사체가 앞에서 뒤로 이동한 것으로 판단할 수 있다.
본 발명에 따른 깊이감 측정 방법은 기본 카메라에서 촬영된 제1 영상과 대향 카메라에서 촬영된 제2 영상을 입력 받는 단계; 피사체에 대하여 제2 영상에 나타난 제2 실루엣을 이용하여 제1 영상에 나타난 제1 실루엣을 구하는 단계; 및 제1 실루엣의 크기와 제2 실루엣의 크기를 비교하여 피사체에 대한 깊이 값을 계산하는 단계로 이루어지며, 앞서 설명한 깊이감 측정 장치에서 구현 가능한 다양한 기능들을 근거로 단계 별 상세 과정은 물론, 추가 과정이 더 포함될 수 있다.
증강현실기반의 콘솔게임이나 기타 응용프로그램들에서 사용자의 제스쳐를 인식하는 것은 매우 중요하다. 최근에는 단순한 액션(action)이 아니라 사용자의 3D모션을 감지하여 실감나는 게임 내지 운동을 할 수 있도록 하여 사용자들의 관심을 집중시키고 있다.
저렴한 3D스캐너(depth scanner)는 단순한 제스쳐 인식 이외에도 피사체의 3차원적 움직임을 감지하는 분야에서는 매우 중요한 핵심요소이다. 물론, 복잡하고 가격이 매우 비싼 레이저 스캐너를 이용하면 3차원 형상과 움직임을 상당히 정확하게 감지해낼 수 있다. 그러나, 이러한 장치들은 대개 넓은 공간과 다수의 고가격 측거소자들을 사용하기 때문에 공간적 제약이 따르고 다양한 응용 측면에서도 높은 비용으로 인해 제한이 따르게 된다. 본 발명에서 제안하는 방법과 장치를 사용하면 매우 저렴한 가격으로 공간의 제약을 받지 않으면서 게임을 비롯한 다양한 응용분야에 활용할 수 있다.
대향 카메라를 이용하는 경우의 장점은 다음과 같다.
1. 스테레오 카메라와 비교했을 경우에 장점
(1) 스테레오 카메라는 미세한 시차에 의해 영향을 받기 때문에 정교한 캘리브레이션 과정이 필요하고 보통은 두 대 이상의 카메라를 고정된 틀에 장착하여 사용하는 방식을 이용한다. 그러나, 대향 카메라는 상대적으로 장착(alignment)이 쉬우며, 미미한 장착오류(mis-alignment)는 영상 처리 기법을 이용하여 간단하게 보정할 수 있으므로 정교한 설치 과정이 필요 없다.
(2) 대향 카메라는 거울변환, 크기변환, 평행이동변환 등 매우 단순한 아핀(affine) 변환만으로 깊이 값을 계산할 수 있으므로 스테레오 카메라에 비해 계산량이 적으며 이것은 비용절감으로 연결될 수 있다.
(3) 스테레오 카메라는 상대적인 움직임만을 감지할 수 있지만 대향 카메라를 이용하면 절대위치를 감지할 수 있다.
(4) 양안 영상의 시차는 피사체가 카메라로부터 멀어지면 줄어들기 때문에 스테레오 카메라의 거리 감지율은 피사체와 카메라 간의 거리에 따라 감소하지만 대향 카메라는 거리와 무관하게 일정한 성능을 보인다.
(5) 제스쳐 인식 방법의 장점을 그대로 사용할 수 있다. 예를 들어, 오클루젼(occlusion) 문제(피사체의 한 부분이 다른 부분을 가려서 감지하지 못하는 경우)도 기존 알고리즘을 그대로 적용하여 해결할 수 있다.
2. 레인지센서(측거센서)를 이용하는 경우와 비교했을 때의 장점
(1) 널리 사용되는 일반적인 광학 카메라를 사용하기 때문에 동일한 해상도를 기준으로 할 때 고가의 레이저 센서나 IR 센서를 사용하는 경우보다 가격이 매우 저렴하다.
(2) 픽셀 수준에서 거리 값 계산이 가능하므로 레인지 센서를 사용하는 경우에 비해서 해상도가 높다.
(3) 고출력레이저의 경우 인체에 유해할 수 있으나 광학카메라는 알려진 인체유해성이 없다.
(4) 두 대의 카메라를 서로 마주보도록 설치하면 되므로 설치와 운영이 매우 쉽다. RF 무선카메라의 경우 배터리만 장착하면 연결선 없이 임의의 위치에 장착 가능하며 크기도 매우 작다
3. 가속도 센서를 이용하는 경우와 비교했을 때의 장점
(1) 통상 이용되는 가속도 센서를 이용하여 제한적인 움직임을 감지할 수 있다. 그러나, 가속도 센서, 각속도센서, 중력센서 등은 드리프트 현상 등이 발생하기 때문에 자세는 정확히 감지할 수 있지만 움직임은 정확히 감지하지 못한다. 대향 카메라를 이용하면 정지상태에서 움직임이 발생한 것으로 해석되는 현상이 발생하지 않으며 가속도 센서를 사용하는 경우보다 정확하게 깊이 값을 계산할 수 있다.
(2) 가속도 센서는 손에 들거나 피사체에 어디인가에 장착해야 하는 번거로움이 있다. 또한, 인체와 같은 다관절 피사체의 경우 각 관절부위의 정교한 움직임을 골격화(skeletonization) 하여 표현할 수 없다. 그러나, 대향 카메라를 이용하면 이러한 문제를 해결할 수 있다.
이와 같이, 본 발명의 실시예들에 따르면, 대향 카메라를 이용한 간단한 시스템 구조를 통해 매우 저렴한 가격으로 공간의 제약을 받지 않으면서 영상에 대한 깊이 값을 보다 정확하게 계산할 수 있다.
본 발명의 실시예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 또한, 상술한 파일 시스템은 컴퓨터 판독이 가능한 기록 매체에 기록될 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
200: 깊이감 측정 장치
210: 입력부
220: 변환부
230: 계산부

Claims (8)

  1. 기본 카메라와 대향(對向) 카메라로 이루어진 두 대의 카메라 사이에 피사체가 위치하며,
    상기 기본 카메라에서 상기 피사체의 일면 형상이 촬영된 제1 영상과 동시에, 상기 대향 카메라에서 상기 피사체의 다른 일면 형상이 촬영된 제2 영상을 입력 받는 입력부;
    상기 제2 영상에 나타난 상기 피사체의 다른 일면 형상에 해당되는 제2 실루엣을 이용하여 상기 제1 영상에 나타난 상기 피사체의 일면 형상에 해당되는 제1 실루엣을 구하는 변환부; 및
    상기 제1 실루엣의 크기와 상기 제2 실루엣의 크기를 비교하여 상기 피사체에 대한 깊이 값을 계산하는 계산부
    를 포함하고,
    상기 변환부는,
    상기 제2 영상에서 상기 피사체의 다른 일면 형상에 해당되는 부분을 영역화 하여 상기 제2 실루엣을 추출한 후, 상기 제2 실루엣에 대칭이동을 위한 거울변환을 적용하고, 상기 거울변환이 적용된 제2 실루엣에 상기 제1 영상에 대한 크기변환 및 평행이동변환을 적용하여 상기 제1 영상에 나타난 상기 제1 실루엣을 구하는 것
    을 특징으로 하는 깊이감 측정 장치.
  2. 제1항에 있어서,
    상기 기본 카메라와 상기 대향 카메라는 서로 대칭되는 방향에 위치하는 것
    을 특징으로 하는 깊이감 측정 장치.
  3. 삭제
  4. 제1항에 있어서,
    상기 계산부는,
    상기 제1 실루엣의 크기와 상기 제2 실루엣의 크기 간의 비율인 스케일 팩터(scale factor)를 구한 후, 상기 기본 카메라와 상기 대향 카메라 간의 거리 값과 상기 스케일 팩터를 이용하여 상기 깊이 값을 계산하는 것
    을 특징으로 하는 깊이감 측정 장치.
  5. 피사체에 대한 깊이 값을 측정하는 깊이감 측정 장치의 깊이감 측정 방법에 있어서,
    상기 피사체가 기본 카메라와 대향 카메라로 이루어진 두 대의 카메라 사이에 위치하며,
    상기 깊이감 측정 방법은,
    상기 기본 카메라에서 상기 피사체의 일면 형상이 촬영된 제1 영상과 동시에, 상기 대향 카메라에서 상기 피사체의 다른 일면 형상이 촬영된 제2 영상을 입력 받는 단계;
    상기 제2 영상에 나타난 상기 피사체의 다른 일면 형상에 해당되는 제2 실루엣을 이용하여 상기 제1 영상에 나타난 상기 피사체의 일면 형상에 해당되는 제1 실루엣을 구하는 단계; 및
    상기 제1 실루엣의 크기와 상기 제2 실루엣의 크기를 비교하여 상기 피사체에 대한 깊이 값을 계산하는 단계
    를 포함하고,
    상기 제1 실루엣을 구하는 단계는,
    상기 제2 영상에서 상기 피사체의 다른 일면 형상에 해당되는 부분을 영역화 하여 상기 제2 실루엣을 추출하는 단계;
    상기 제2 실루엣에 대칭이동을 위한 거울변환을 적용하는 단계; 및
    상기 거울변환이 적용된 제2 실루엣에 상기 제1 영상에 대한 크기변환 및 평행이동변환을 적용하여 상기 제1 영상에 나타난 상기 제1 실루엣을 구하는 단계
    를 포함하는 깊이감 측정 방법.
  6. 제5항에 있어서,
    상기 기본 카메라와 상기 대향 카메라는 서로 대칭되는 방향에 위치하는 것
    을 특징으로 하는 깊이감 측정 방법.
  7. 삭제
  8. 제5항에 있어서,
    상기 피사체에 대한 깊이 값을 계산하는 단계는,
    상기 제1 실루엣의 크기와 상기 제2 실루엣의 크기 간의 비율인 스케일 팩터를 구한 후, 상기 기본 카메라와 상기 대향 카메라 간의 거리 값과 상기 스케일 팩터를 이용하여 상기 깊이 값을 계산하는 것
    을 특징으로 하는 깊이감 측정 방법.
KR1020110111996A 2011-10-31 2011-10-31 대향 카메라를 이용한 깊이감 측정 방법 및 장치 KR101184124B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110111996A KR101184124B1 (ko) 2011-10-31 2011-10-31 대향 카메라를 이용한 깊이감 측정 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110111996A KR101184124B1 (ko) 2011-10-31 2011-10-31 대향 카메라를 이용한 깊이감 측정 방법 및 장치

Publications (1)

Publication Number Publication Date
KR101184124B1 true KR101184124B1 (ko) 2012-09-18

Family

ID=47113786

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110111996A KR101184124B1 (ko) 2011-10-31 2011-10-31 대향 카메라를 이용한 깊이감 측정 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101184124B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101587730B1 (ko) 2014-08-21 2016-01-22 오재석 실시간 3 차원 게임 시스템 및 그의 처리 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007506074A (ja) 2003-09-19 2007-03-15 ダイムラークライスラー・アクチェンゲゼルシャフト 物体までの距離の測定
JP2010243273A (ja) 2009-04-03 2010-10-28 Hitachi Ltd 円柱形状を有する物体の計測方法および計測装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007506074A (ja) 2003-09-19 2007-03-15 ダイムラークライスラー・アクチェンゲゼルシャフト 物体までの距離の測定
JP2010243273A (ja) 2009-04-03 2010-10-28 Hitachi Ltd 円柱形状を有する物体の計測方法および計測装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101587730B1 (ko) 2014-08-21 2016-01-22 오재석 실시간 3 차원 게임 시스템 및 그의 처리 방법

Similar Documents

Publication Publication Date Title
JP6195915B2 (ja) 画像計測装置
US8787656B2 (en) Method and apparatus for feature-based stereo matching
CN102997891B (zh) 场景深度的测量装置和方法
KR101706093B1 (ko) 3차원 좌표 추출 시스템 및 그 방법
KR101893771B1 (ko) 3d 정보 처리 장치 및 방법
TWI520576B (zh) 將二維影像轉換爲三維影像的方法與系統及電腦可讀媒體
CN106875436B (zh) 一种基于特征点密度由聚焦堆栈估计深度的方法和装置
CN107084680B (zh) 一种基于机器单目视觉的目标深度测量方法
CN107967697B (zh) 基于彩色随机二元编码结构照明的三维测量方法和系统
JP5951043B2 (ja) 画像計測装置
JP6589636B2 (ja) 3次元形状計測装置、3次元形状計測方法及び3次元形状計測プログラム
CN104335005A (zh) 3d扫描以及定位系统
KR20080085472A (ko) 이동 로봇의 위치 인식 방법
CN111047634B (zh) 场景深度的确定方法、装置、设备及存储介质
CN104677330A (zh) 一种小型双目立体视觉测距系统
KR20110084028A (ko) 이미지 데이터를 이용한 거리 측정 장치 및 방법
JP2014211404A (ja) モーションキャプチャー方法
JP2008275366A (ja) ステレオ3次元計測システム
KR102095790B1 (ko) 열 영상을 이용한 신체 특징 분석 장치 및 방법
JP2004069583A (ja) 画像処理装置
KR101184124B1 (ko) 대향 카메라를 이용한 깊이감 측정 방법 및 장치
KR102410300B1 (ko) 스테레오 카메라를 이용한 카메라 위치 측정 장치 및 방법
KR20140102831A (ko) 모바일 기반의 부가정보를 이용한 위치 보정 방법
JP5559749B2 (ja) 位置検出装置、位置検出方法及びコンピュータプログラム
KR101296365B1 (ko) 카메라를 이용한 홀로그램 터치 인식방법

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150626

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160602

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170626

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee