KR102023042B1

KR102023042B1 - 족부 스캔 장치 및 그의 족부 스캔 방법

Info

Publication number: KR102023042B1
Application number: KR1020170070762A
Authority: KR
Inventors: 박순용; 이민재; 백승해
Original assignee: 경북대학교 산학협력단
Priority date: 2016-09-13
Filing date: 2017-06-07
Publication date: 2019-09-20
Also published as: KR20180029831A

Abstract

족부 스캔 장치가 개시된다. 족부 스캔 장치는, 본체, 본체에 족부를 지지할 수 있도록 설치되는 투명 지지대, 본체의 상부에서 회전 가능하도록 설치되어 족부의 상부에 대한 제1 영상을 획득하는 제1 촬상부, 본체의 하부에서 직선 이동하도록 설치되어 족부의 하부에 대한 제2 영상을 획득하는 제2 촬상부 및 제1 촬상부 및 제2 촬상부의 동작을 제어하며, 제1 영상 및 제2 영상을 정합하여 족부의 3차원 모델을 생성하는 제어부를 포함한다.

Description

족부 스캔 장치 및 그의 족부 스캔 방법{FOOT SCANNING APPARATUS AND METHOD FOR SCANNING FOOT THEREOF}

본 발명은 족부 스캔 장치 및 그의 족부 스캔 방법에 관한 것으로, 보다 상세하게는 족부의 3차원 모델을 생성하는 족부 스캔 장치 및 그의 족부 스캔 방법에 관한 것이다.

족부의 형상은 사람마다 다르며, 족부를 스캔하는 것은 입체적 정보를 취급하여야 하므로, 족부의 형상을 정밀하게 나타내는 3차원 모델을 생성하는 것이 용이하지 않다.

종래에는 족부의 3차원 모델을 생성하기 위하여 고정되거나 이동할 수 있는 하나 이상의 카메라 및 레이저 등을 이용하여 족부를 촬영한 후 이를 이용하여 3차원 모델을 생성하였다.

다만, 종래의 족부 스캔 장치는 스캔 장비의 크기가 매우 커서 설치 장소에 제약이 있거나 스캐닝의 정밀도가 떨어져서 실제 족부와 형태가 상이한 3차원 모델이 생성되는 문제가 있었다.

따라서, 크기가 크지 않으면서 실제 족부의 형태가 그대로 투영되는 3차원 모델을 생성할 수 있는 정밀한 족부 스캔 장치의 필요성이 있었다.

본 발명의 목적은 복수의 촬상부를 이용하여 족부를 촬영한 후 촬영된 영상을 정합하여 족부의 정밀한 3차원 모델을 생성할 수 있는 족부 스캔 장치 및 그의 족부 스캔 방법을 제공함에 있다.

상술한 바와 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 족부 스캔 장치는, 본체, 상기 본체에 족부를 지지할 수 있도록 설치되는 투명 지지대, 상기 본체의 상부에서 회전 가능하도록 설치되어 상기 족부의 상부에 대한 제1 영상을 획득하는 제1 촬상부, 상기 본체의 하부에서 직선 이동하도록 설치되어 상기 족부의 하부에 대한 제2 영상을 획득하는 제2 촬상부 및 상기 제1 촬상부 및 상기 제2 촬상부의 동작을 제어하며, 상기 제1 영상 및 상기 제2 영상을 정합하여 상기 족부의 3차원 모델을 생성하는 제어부를 포함한다.

여기서, 상기 제어부는, 상기 제1 촬상부에서 획득된 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 상부에 대한 3차원 모델을 생성하고, 상기 제2 촬상부에서 획득된 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 하부에 대한 3차원 모델을 생성할 수 있다.

여기서, 상기 제어부는, 상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 동일 좌표계로 변환하여 개략 정합하고, 상기 개략 정합된 3차원 모델을 정제 정합하여 상기 족부의 3차원 모델을 생성할 수 있다.

또한, 상기 제1 촬상부는, 적어도 하나의 카메라 및 적어도 2개의 레이저를 포함하고, 상기 족부의 상부를 360도 회전하면서 상기 레이저에 의해 레이저가 조사되는 영역을 상기 카메라로 촬영하며, 상기 제어부는, 기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제1 영상으로부터 상기 족부의 상부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 상부에 대한 3차원 모델을 생성할 수 있다.

여기서, 상기 제1 촬상부는, 상기 적어도 2개의 레이저가 상기 적어도 하나의 카메라의 양측에서 기설정된 각도로 배치될 수 있다.

또한, 상기 제2 촬상부는, 적어도 하나의 카메라 및 적어도 하나의 레이저를 포함하고, 상기 족부의 하부를 직선 이동하면서 상기 레이저에 의해 레이저가 조사되는 영역을 상기 카메라로 촬영하며, 상기 제어부는, 기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제2 영상으로부터 상기 족부의 하부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 생성할 수 있다.

여기서, 상기 제어부는, 기저장된 상기 투명 지지대에 대한 왜곡 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 보정할 수 있다.

또한, 상기 제어부는, 상기 제1 촬상부의 이동 속도에 기초하여 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하고, 상기 제2 촬상부의 이동 속도에 기초하여 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합할 수 있다.

또한, 상기 제어부는, 기저장된 상기 제1 및 제2 촬상부의 위치 관계 정보에 기초하여 상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 개략 정합할 수 있다.

또한, 상기 제어부는, 상기 개략 정합된 3차원 모델에 ICP(Iterative closest point) 방법을 적용하여 정제 정합할 수 있다.

한편, 본 발명의 일 실시 예에 따른 족부 스캔 방법은, 본체, 상기 본체에 족부를 지지할 수 있도록 설치되는 투명 지지대, 상기 본체의 상부에서 회전 가능하도록 설치되는 제1 촬상부 및 상기 본체의 하부에서 직선 이동하도록 설치되는 제2 촬상부를 포함하는 족부 스캔 장치의 족부 스캔 방법에 있어서, 상기 족부의 상부에 대한 제1 영상을 획득하는 단계, 상기 족부의 하부에 대한 제2 영상을 획득하는 단계 및 상기 제1 영상 및 상기 제2 영상을 정합하여 상기 족부의 3차원 모델을 생성하는 단계를 포함한다.

여기서, 상기 족부의 3차원 모델을 생성하는 단계는, 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 상부에 대한 3차원 모델을 생성하는 단계 및 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 하부에 대한 3차원 모델을 생성하는 단계를 포함할 수 있다.

여기서, 상기 족부의 3차원 모델을 생성하는 단계는, 상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 동일 좌표계로 변환하여 개략 정합하는 단계 및 상기 개략 정합된 3차원 모델을 정제 정합하는 단계를 더 포함할 수 있다.

또한, 상기 제1 촬상부는, 적어도 하나의 카메라 및 적어도 2개의 레이저를 포함하고, 상기 족부의 상부에 대한 3차원 모델을 생성하는 단계는, 기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제1 영상으로부터 상기 족부의 상부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 상부에 대한 3차원 모델을 생성할 수 있다.

또한, 상기 제2 촬상부는, 적어도 하나의 카메라 및 적어도 하나의 레이저를 포함하고, 상기 족부의 하부에 대한 3차원 모델을 생성하는 단계는, 기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제2 영상으로부터 상기 족부의 하부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 생성할 수 있다.

여기서, 상기 족부의 하부에 대한 3차원 모델을 생성하는 단계는, 기저장된 상기 투명 지지대에 대한 왜곡 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 보정하는 단계를 포함할 수 있다.

또한, 상기 족부의 상부에 대한 3차원 모델을 생성하는 단계는, 상기 제1 촬상부의 이동 속도에 기초하여 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하고, 상기 족부의 하부에 대한 3차원 모델을 생성하는 단계는, 상기 제2 촬상부의 이동 속도에 기초하여 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합할 수 있다.

또한, 상기 개략 정합하는 단계는, 기저장된 상기 제1 및 제2 촬상부의 위치 관계 정보에 기초하여 상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 개략 정합할 수 있다.

또한, 상기 정제 정합하는 단계는, 상기 개략 정합된 3차원 모델에 ICP(Iterative closest point) 방법을 적용하여 정제 정합할 수 있다.

한편, 본 발명의 일 실시 예에 따른 족부 스캔 방법을 수행하기 위한 프로그램이 컴퓨터에서 판독 가능한 기록 매체에 기록될 수 있다.

이상 설명한 바와 같이 본 발명의 다양한 실시 예에 따르면 복수의 촬상부를 이용하여 족부를 촬영한 후 촬영된 영상을 정합하여 보다 정밀한 족부의 3차원 모델을 생성할 수 있다.

또한, 각각 회전 이동 및 직선 이동하는 복수의 촬상부를 이용하여 크기가 작고 간소한 족부 스캔 장치를 구현할 수 있다.

도 1은 본 발명의 일 실시 예에 따른 족부 스캔 장치를 나타내는 도면이다.
도 2 및 도 3은 본 발명의 일 실시 예에 따른 촬상부의 움직임을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 촬상부를 보정하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시 예에 따른 정합 방법을 개략적으로 나타내는 도면이다.
도 6 및 도 7은 본 발명의 일 실시 예에 따른 선형 정합을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시 예에 따른 개략 정합을 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시 예에 따른 정제 정합을 설명하기 위한 도면이다.
도 10 및 도 11은 본 발명의 다른 실시 예에 따른 정합 방법을 설명하기 위한 도면이다.
도 12 및 도 13은 본 발명의 일 실시 예에 따른 족부 스캔 방법을 나타내는 흐름도이다.

본 발명의 다른 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술 되는 실시 예를 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예는 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.

만일 정의되지 않더라도, 여기서 사용되는 모든 용어들(기술 혹은 과학 용어들을 포함)은 이 발명이 속한 종래 기술에서 보편적 기술에 의해 일반적으로 수용되는 것과 동일한 의미를 가진다. 일반적인 사전들에 의해 정의된 용어들은 관련된 기술 그리고/혹은 본 출원의 본문에 의미하는 것과 동일한 의미를 갖는 것으로 해석될 수 있고, 그리고 여기서 명확하게 정의된 표현이 아니더라도 개념화되거나 혹은 과도하게 형식적으로 해석되지 않을 것이다.

본 명세서에서 사용된 용어는 실시 예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 '포함한다' 및/또는 이 동사의 다양한 활용형들 예를 들어, '포함', '포함하는', '포함하고', '포함하며' 등은 언급된 조성, 성분, 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 조성, 성분, 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.

본 명세서에서 '및/또는' 이라는 용어는 나열된 구성들 각각 또는 이들의 다양한 조합을 가리킨다.

한편, 본 명세서 전체에서 사용되는 '~부', '~기', '~블록', '~모듈' 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있다. 예를 들어 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미할 수 있다. 그렇지만 '~부', '~기', '~블록', '~모듈' 등이 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. '~부', '~기', '~블록', '~모듈'은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '~부', '~기', '~블록', '~모듈'은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '~부', '~기', '~블록', '~모듈'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부', '~기', '~블록', '~모듈'들로 결합되거나 추가적인 구성요소들과 '~부', '~기', '~블록', '~모듈'들로 더 분리될 수 있다.

도 1은 본 발명의 일 실시 예에 따른 족부 스캔 장치를 나타내는 도면이다.

도 1을 참조하면, 족부 스캔 장치(100)는 제1 촬상부(110), 제2 촬상부(120), 투명 지지대(130), 본체(140) 및 제어부(150)를 포함한다.

제1 촬상부(110)는 본체(140)의 상부에서 회전 가능하도록 설치되어 족부의 상부를 360도 회전하면서 촬영할 수 있다. 또한, 제1 촬상부(110)는 적어도 하나의 카메라(111) 및 적어도 2개의 레이저(112, 113)를 포함할 수 있으며, 족부의 상부에서 일정 거리 이격된 위치에서 족부의 상부를 360도 회전하면서 레이저(112, 113)에 의해 레이저가 조사된 영역을 카메라(111)로 촬영하여, 족부의 상부에 대한 3차원 좌표 정보를 획득하기 위한 제1 영상을 획득할 수 있다. 여기서, 적어도 2개의 레이저(112, 113)는 카메라(111)의 양측에 기설정된 각도로 배치될 수 있으며, 적어도 2개의 레이저(112, 113)는 서로 다른 각도로 배치될 수 있다. 이에 따라, 하나의 레이저(112)에 의해 레이저가 조사되지 못하는 영역이 발생하는 경우 다른 각도의 레이저(113)에 의해 해당 영역에 레이저가 조사될 수 있으므로, 제1 촬상부(110)에서 더욱 정확한 3차원 좌표 정보를 획득할 수 있는 제1 영상을 생성할 수 있다.

제2 촬상부(120)는 본체(140)의 하부에서 직선 이동하도록 설치되어 족부의 하부를 촬영할 수 있다. 또한, 제2 촬상부(120)는 적어도 하나의 카메라(121) 및 적어도 하나의 레이저(122)를 포함할 수 있으며, 족부의 하부를 직선 이동하면서 레이저(122)에 의해 레이저가 조사되는 영역을 카메라(121)로 촬영하여, 족부의 하부에 대한 3차원 좌표 정보를 획득하기 위한 제2 영상을 획득할 수 있다. 한편, 도 1에서 제1 촬상부(110)는 하나의 카메라(111) 및 2개의 레이저(112, 113)로 구성되는 것으로 도시하였으나, 2개 이상의 카메라 및 3개 이상의 레이저로 구현될 수 있으며, 제2 촬상부(120)도 하나의 카메라(121) 및 하나의 레이저(122)로 구성되는 것으로 도시하였으나, 2개 이상의 카메라 및 2개 이상의 레이저로 구현될 수 있다.

투명 지지대(130)는 본체(140)에 족부를 지지할 수 있도록 설치되며, 빛이 통과할 수 있는 투명한 재질로 구성될 수 있다. 일 예로, 투명 지지대(130)는 투명 아크릴판으로 구현될 수 있다.

제어부(150)는 제1 촬상부(110) 및 제2 촬상부(120)의 동작을 제어하여 족부의 상부 및 하부를 촬영하며, 제1 촬상부(110) 및 제2 촬상부(120)에서 각각 획득된 제1 영상 및 제2 영상을 정합하여 족부의 3차원 모델을 생성할 수 있다. 구체적으로, 제어부(150)는 제1 촬상부(110)에서 획득된 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 족부의 상부에 대한 3차원 모델을 생성하고, 제2 촬상부(120)에서 획득된 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 족부의 하부에 대한 3차원 모델을 생성할 수 있다. 이 경우, 제어부(150)는 제1 촬상부(110) 및 제2 촬상부(120)의 현재 위치, 이동 속도 등을 고려하여 선형 정합을 수행할 수 있다. 일 예로, 제어부(150)는 제1 촬상부(110)의 회전 속도에 기초하여 제1 영상을 구성하는 복수의 프레임을 선형 정합하고, 제2 촬상부(120)의 이동 속도에 기초하여 제2 영상을 구성하는 복수의 프레임을 선형 정합할 수 있다.

또한, 제어부(150)는 기설정된 제1 촬상부(110)의 카메라(111) 및 레이저(112, 113) 간 위치 관계에 기초하여 제1 영상으로부터 족부의 상부에 대한 3차원 좌표 정보를 획득하고, 획득된 3차원 좌표 정보를 이용하여 족부의 상부에 대한 3차원 모델을 생성할 수 있다. 또한, 제어부(150)는 기설정된 제2 촬상부(120)의 카메라(121) 및 레이저(122) 간 위치 관계에 기초하여 제2 영상으로부터 족부의 하부에 대한 3차원 좌표 정보를 획득하고, 획득된 3차원 좌표 정보를 이용하여 족부의 하부에 대한 3차원 모델을 생성할 수 있다.

이후, 제어부(150)는 족부의 상부에 대한 3차원 모델 및 족부의 하부에 대한 3차원 모델을 개략 정합할 수 있다. 구체적으로, 제어부(150)는 족부의 상부에 대한 3차원 모델 및 족부의 하부에 대한 3차원 모델을 각각 동일 좌표계로 변환한 후 기저장된 제1 촬상부(110) 및 제2 촬상부(120)의 위치 관계 정보에 기초하여 개략 정합을 수행할 수 있다.

제어부(150)는 개략 정합된 3차원 모델에 정제 정합을 수행하여 최종적으로 족부의 3차원 모델을 생성할 수 있다. 일 예로, 제어부(150)는 개략 정합된 3차원 모델에 ICP(Iterative closest point) 방법을 적용하여 정제 정합을 수행할 수 있다.

도 2를 참조하면, 제1 촬상부(110)는 적어도 하나의 카메라(111) 및 적어도 2개의 레이저(112, 113)를 포함하며, 족부의 상부를 360도 회전하면서 족부의 상부를 촬영한다. 이때, 제1 촬상부(110)는 카메라(111)의 양측에 기설정된 각도로 배치되는 적어도 2개의 레이저(112, 113)를 포함하여, 특정 영역에 하나의 레이저(112)가 도달하지 못하는 경우에도 다른 각도에서 다른 레이저(113)가 상기 특정 영역에 도달할 수 있으므로, 제어부(150)는 제1 촬상부(110)에서 획득되는 제1 영상을 이용하여 보다 정밀하게 족부의 상부에 대한 3차원 모델을 생성할 수 있다. 예를 들어, 제1 레이저(112)가 복사뼈에 의하여 복사뼈의 뒷부분에 레이저를 조사하지 못하는 경우 제2 레이저(113)가 다른 각도에서 복사뼈의 뒷부분에 레이저를 조사하여 족부의 상부의 모든 영역에서 레이저가 조사될 수 있도록 할 수 있다. 이에 따라, 족부의 상부에 대해 모든 영역에서 더욱 정확한 3차원 좌표 정보를 획득할 수 있으므로 보다 정밀한 3차원 모델을 생성할 수 있다. 여기서, 제1 레이저(112) 및 제2 레이저(113)는 카메라(111)의 양측에 서로 다른 각도로 배치되어 족부의 상부에 레이저를 조사할 수 있으며, 도 2에서는 2개의 레이저(112, 113)만 도시되었으나, 이에 한정되지 않고 3개 이상의 레이저로 구현될 수 있다.

도 3을 참조하면, 제2 촬상부(120)는 적어도 하나의 카메라(121) 및 적어도 하나의 레이저(122)를 포함하며, 족부의 하부를 직선 이동하면서 족부의 하부를 촬영한다. 제2 촬상부(120)에 포함된 레이저(122)가 족부의 하부에 레이저를 조사하는 경우, 도 3에서와 같이, 투명 지지대(130)를 통과하여 레이저의 왜곡이 발생할 수 있다. 이에 따라, 제2 촬상부(120)에 의하여 획득되는 족부의 하부에 대한 3차원 좌표 정보에는 오차가 발생할 수 있으므로, 족부의 하부에 대한 3차원 모델이 실제 족부의 하부 형태와 차이가 있을 수 있다. 따라서, 제어부(150)는 기저장된 투명 지지대(130)에 대한 왜곡 정보를 이용하여 족부의 하부에 대한 3차원 모델을 보정하여 정밀한 족부의 하부에 대한 3차원 모델을 획득할 수 있다. 일 예로, 투명 지지대(130)는 투명 아크릴판일 수 있으며, 투명 아크릴판에 대한 레이저의 왜곡 정보는 제어부(150)에 미리 저장될 수 있다.

추가적인 실시 예로, 제어부(150)는 제1 촬상부(110) 및 제2 촬상부(120) 각각에서 카메라(111, 121)와 레이저(112, 113, 122) 간의 위치 관계를 제어할 수 있다. 도 4와 같이, 각 레이저(112, 113, 122)를 이용하여 보정 평면에 레이저를 조사한 후, 카메라(111, 121)를 이용하여 보정 평면을 촬영하여, 촬영된 보정 평면에 나타나는 레이저의 형태에 기초하여 카메라(111, 121)와 레이저(112, 113, 122)의 위치를 조절할 수 있다. 또한, 제어부(150)는 제1 촬상부(110) 및 제2 촬상부(120)에서 획득된 제1 영상 및 제2 영상에서 레이저의 중심 좌표를 검출하고, 검출된 레이저 중심 좌표에 대해서 기설정된 카메라와 레이저의 위치 관계에 기초하여 3차원 좌표를 획득할 수 있다.

이후, 도 5와 같이, 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 족부의 상부에 대한 3차원 모델을 생성하고, 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 족부의 하부에 대한 3차원 모델을 생성한 후, 족부의 상부 및 하부에 대한 3차원 모델을 동일 좌표계에서 개략 정합한 후 정제 정합하여 족부의 3차원 모델을 생성할 수 있다.

이하, 도 6 내지 도 9를 참조하여 제어부(150)에서 수행되는 선형 정합, 개략 정합 및 정제 정합을 상세히 설명한다.

우선, 도 6을 참조하면, 제1 촬상부(110)는 족부의 상부를 회전하면서 촬영하여 제1 영상을 획득하며, 제어부(150)는 제1 영상을 구성하는 복수의 프레임을 선형 정합할 때 이러한 제1 촬상부(110)의 회전 운동을 고려하여 선형 정합이 수행된다. 이 경우, 각속도 벡터가 이용되어 복수의 프레임이 순차적으로 정합될 수 있다.

제2 촬상부(120)는 족부의 하부를 직선 이동하면서 촬영하여 제2 영상을 획득하며, 도 7과 같이, 제어부(150)는 제2 촬상부(120)의 이동 속도에 기초한 이동속도 벡터를 이용하여 선형 정합을 수행할 수 있다. 제어부(150)는 제1 및 제2 영상을 구성하는 복수의 프레임에 대하여 선형 정합을 수행할 때, 제1 및 제2 촬상부(110, 120)의 현재 위치 및 이동 속도 등을 고려하여 선형 정합을 수행할 수 있다.

도 8을 참조하면, 제어부(150)는 족부의 상부에 대한 3차원 모델 및 족부의 하부에 대한 3차원 모델을 동일 좌표계로 변환하여 족부의 상부에 대한 3차원 모델 및 족부의 하부에 대한 3차원 모델에 대한 개략 정합을 수행할 수 있다. 이 경우, 제어부(150)는 기설정된 제1 촬상부(110)와 제2 촬상부(120)를 각각 구성하는 카메라 및 레이저의 위치 관계에 기초하여 개략 정합을 수행할 수 있다. 제어부(150)는 개략 정합이 수행된 후, 도 9과 같이, 정제 정합을 수행하여 최종적으로 족부에 대한 3차원 모델을 생성할 수 있다. 이 경우, 개략 정합이 수행된 3차원 모델에 ICP 방법을 적용하여 정제 정합을 수행할 수 있다.

따라서, 본 발명의 일 실시 예에 따른 족부 스캔 장치는 선형 정합, 개략 정합 및 정제 정합을 수행하여 보다 정밀한 족부의 3차원 모델을 생성할 수 있다.

본 발명의 다른 실시 예로, 제어부(150)는 제1 및 제2 촬상부(110, 120)에서 획득된 이전 프레임의 정제 정합 결과에 기초하여 선형 정합된 영상의 현재 프레임과 기준 프레임을 개략 정합할 수 있다. 구체적으로, 이전 프레임을 기준 프레임으로 정합하는 변환 행렬을 선형 정합된 영상의 현재 프레임에 적용하여 개략 정합이 수행될 수 있다. 개략 정합은 아래의 수학식 1에 의해 수행될 수 있다.

수학식 1에서

는 k번째 프레임,

는 개략 정합이 적용된 k번째 프레임, 변환 행렬

은 이전 프레임

을 기준 프레임(

)으로 정합하는 상대 변환을 의미한다. 즉, k번째 프레임(

)을 현재 프레임이라고 하면, 현재 프레임(

)에 대해 이전 프레임을 기준 프레임으로 정합하는 변환 행렬을 적용함으로써 개략 정합이 수행된다. 그 결과 개략 정합이 적용된 현재 프레임(

)을 얻을 수 있다. 이전 프레임을 기준 프레임으로 정합하는 변환 행렬

은 이전 프레임의 정제 정합 결과로부터 구해질 수 있다. 또한, 본 발명의 다른 실시 예에 따른 정제 정합은 변형 IPP 알고리즘에 의하여 수행될 수 있다.

기존의 IPP 알고리즘은 반복적으로 알고리즘을 수행하여 수렴되는 3차원 점을 정합을 위한 매칭점으로 선택한다. 이에 반해, 본 발명의 실시 예에 따른 변형 IPP 알고리즘은 기존의 IPP의 장점을 그대로 이용하면서, 단 한 번의 추정 과정을 통해 매칭점을 결정하여 매칭점 추정에 소요되는 시간을 좀 더 단축시킬 수 있다. 변형 IPP 알고리즘의 목적은 S곡면과 D곡면을 정합하기 위해, 점 P의 매칭점인 점 Q`를 찾는 것이다.

도 10을 참조하면, 먼저, S곡면 상의 3차원 점 P를 D곡면의 2차원 영상으로 투영하여 2차원 이미지 좌표(P_D)를 구한다. 그리고 2차원 이미지 좌표(P_D)에 대응하는 D곡면상의 3차원 투영점(Q)을 D곡면의 거리 영상(I_D)과 2차원 이미지 좌표(P_D)를 이용하여 추정한다. 추정한 3차원 투영점(Q`)의 탄젠트 평면을 구성한 뒤, 점 P와 탄젠트 평면이 수직으로 만나는 점을 매칭점으로 선택한다.

만약 S곡면과 D곡면에서 각각 k개의 매칭점 {P}와 {Q`}가 결정되었다면, 두 점집합 사이의 정합 오차(e)를 최소화하는 3차원 변환 행렬(T)을 아래의 수학식 2와 특이값 분해(Singular Value Decomposition, SVD)를 이용하여 구할 수 있다.

개략 정합이 적용된 현재 프레임(

)은 이어서 기준 프레임과 정제 정합된다. 기준 프레임(

)과 개략 정합이 적용된 현재 프레임(

)이 주어지면, 변형 IPP 알고리즘을 이용하여 다음의 수학식 3을 만족하는 변환 행렬(

)을 계산할 수 있다.

수학식 3에서

와

는 각각 개략 정합이 적용된 현재 프레임(

)과 기준 프레임(

) 사이에 변형 IPP 알고리즘으로 매칭되는 3차원 점들을 말하며,

는

에 대응하는 법선 벡터를 의미한다.

상기와 같은 3단계의 정합 과정을 수행하여 변환 행렬(

)이 산출되면, 산출된 변환 행렬(

)의 역행렬을 이용하여 족부의 3차원 모델을 생성할 수 있다. 이러한 3단계의 정합 과정을 수행하여 3차원 족부 모델의 오차를 줄이고 보다 정확한 3차원 족부 모델을 생성할 수 있다.

도 11은 본 발명의 일 실시 예에 따른 정제 정합 결과에 기초하여 기준 프레임을 업데이트하는 방법을 설명하기 위한 도면이다.

도 11을 참조하면, 1단계는 기준 프레임과 프레임 1이 정합된 결과를 보여주고 있다. 기준 프레임과 프레임 1이 정합된 1단계 정합 결과를 참조하면, 기준 프레임에서 포함되지 않았던 부분(U1)이 1단계 정합 결과에 나타난다. 본 발명의 실시 예에 따르면, 1단계 정합 결과가 2단계 정합의 기준 프레임으로 사용될 수 있도록 1단계 정합 결과가 기준 프레임으로 업데이트된다.

같은 방법으로 2단계는 업데이트된 기준 프레임과 프레임 2가 정합된 결과를 보여주고 있다. 2단계 정합 결과를 참조하면, 기준 프레임에서 포함되지 않았던 부분(U2)이 2단계 정합 결과에 나타난다. 각 단계의 정합 결과가 기준 프레임으로 업데이트되면, 최초 기준 프레임에 포함되어 있지 않았던 영역이 기준 프레임에 포함되게 된다. 따라서, 현재 프레임과 기준 프레임이 중복되는 영역이 많아지도록 할 수 있고, 결과적으로, 기준 프레임과 현재 프레임 사이에 매칭점이 많아지므로 정합의 성공률이 향상된다.

도 12 및 도 13은 본 발명의 일 실시 예에 따른 족부 스캔 방법을 나타내는 흐름도이다.

도 12를 참조하면, 우선, 족부의 상부에 대한 제1 영상을 획득하고(S1210), 족부의 하부에 대한 제2 영상을 획득한다(S1220). 이어서, 제1 영상 및 제2 영상을 정합하여 족부의 3차원 모델을 생성한다(S1230).

구체적으로, S1230 단계는 도 13과 같이, 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 족부의 상부에 대한 3차원 모델을 생성하고(S1310), 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 족부의 하부에 대한 3차원 모델을 생성한다(S1320). 이어서, 족부의 상부에 대한 3차원 모델 및 족부의 하부에 대한 3차원 모델을 동일 좌표계로 변환하여 개략 정합한 후(S1330), 개략 정합된 3차원 모델을 정제 정합하여(S1340), 족부의 3차원 모델을 생성할 수 있다.

한편, 이러한 다양한 실시 예에 따른 족부 스캔 방법은 프로그래밍 되어 각종 저장 매체에 저장될 수 있다. 이에 따라, 저장 매체를 실행하는 다양한 유형의 전자 장치에서 상술한 다양한 실시 예에 따른 족부 스캔 방법이 구현될 수 있다.

구체적으로는, 본 발명의 일 실시 예에 따른, 족부의 상부에 대한 제1 영상을 획득하는 단계, 족부의 하부에 대한 제2 영상을 획득하는 단계 및 제1 영상 및 제2 영상을 정합하여 족부의 3차원 모델을 생성하는 단계를 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

100: 족부 스캔 장치 110: 제1 촬상부
120: 제2 촬상부 130: 투명 지지대
140: 본체 150: 제어부

Claims

상면이 개방된 중공 실린더 형상을 갖는 본체;
족부를 지지할 수 있도록 상기 본체에 설치되는 투명 지지대;
상기 본체의 상부를 따라 족부를 360도 회전하도록 상기 본체의 상부에 설치되어, 상기 족부의 상부에 대한 제1 영상을 획득하는 제1 촬상부;
상기 투명 지지대의 하측에서 직선 이동하도록 설치되어 상기 족부의 하부에 대한 제2 영상을 획득하는 제2 촬상부; 및
상기 제1 촬상부 및 상기 제2 촬상부의 동작을 제어하며, 상기 제1 영상 및 상기 제2 영상을 정합하여 상기 족부의 3차원 모델을 생성하는 제어부;를 포함하는 족부 스캔 장치.
제1항에 있어서,
상기 제어부는,
상기 제1 촬상부에서 획득된 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 상부에 대한 3차원 모델을 생성하고,
상기 제2 촬상부에서 획득된 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 하부에 대한 3차원 모델을 생성하는 족부 스캔 장치.
제2항에 있어서,
상기 제어부는,
상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 동일 좌표계로 변환하여 개략 정합하고, 상기 개략 정합된 3차원 모델을 정제 정합하여 상기 족부의 3차원 모델을 생성하는 족부 스캔 장치.
제2항에 있어서,
상기 제1 촬상부는,
적어도 하나의 카메라 및 적어도 2개의 레이저를 포함하고, 상기 족부의 상부를 360도 회전하면서 상기 레이저에 의해 레이저가 조사되는 영역을 상기 카메라로 촬영하며,
상기 제어부는,
기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제1 영상으로부터 상기 족부의 상부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 상부에 대한 3차원 모델을 생성하는 족부 스캔 장치.
제4항에 있어서,
상기 제1 촬상부는,
상기 적어도 2개의 레이저가 상기 적어도 하나의 카메라의 양측에서 기설정된 각도로 배치되는 족부 스캔 장치.
제2항에 있어서,
상기 제2 촬상부는,
적어도 하나의 카메라 및 적어도 하나의 레이저를 포함하고, 상기 족부의 하부를 직선 이동하면서 상기 레이저에 의해 레이저가 조사되는 영역을 상기 카메라로 촬영하며,
상기 제어부는,
기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제2 영상으로부터 상기 족부의 하부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 생성하는 족부 스캔 장치.
제6항에 있어서,
상기 제어부는,
기저장된 상기 투명 지지대에 대한 왜곡 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 보정하는 족부 스캔 장치.
제2항에 있어서,
상기 제어부는,
상기 제1 촬상부의 이동 속도에 기초하여 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하고,
상기 제2 촬상부의 이동 속도에 기초하여 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합하는 족부 스캔 장치.
제3항에 있어서,
상기 제어부는,
기저장된 상기 제1 및 제2 촬상부의 위치 관계 정보에 기초하여 상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 개략 정합하는 족부 스캔 장치.
제3항에 있어서,
상기 제어부는,
상기 개략 정합된 3차원 모델에 ICP(Iterative closest point) 방법을 적용하여 정제 정합하는 족부 스캔 장치.
상면이 개방된 중공 실린더 형상을 갖는 본체, 족부를 지지할 수 있도록 상기 본체에 설치되는 투명 지지대, 상기 본체의 상부를 따라 족부를 360도 회전하도록 상기 본체의 상부에 설치되는 제1 촬상부 및 상기 투명 지지대의 하측에서 직선 이동하도록 설치되는 제2 촬상부를 포함하는 족부 스캔 장치의 족부 스캔 방법에 있어서,
상기 제1 촬상부에서 상기 족부의 상부에 대한 제1 영상을 획득하는 단계;
상기 제2 촬상부에서 상기 족부의 하부에 대한 제2 영상을 획득하는 단계; 및
상기 제1 영상 및 상기 제2 영상을 정합하여 상기 족부의 3차원 모델을 생성하는 단계;를 포함하는 족부 스캔 방법.
제11항에 있어서,
상기 족부의 3차원 모델을 생성하는 단계는,
상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 상부에 대한 3차원 모델을 생성하는 단계; 및
상기 제2 영상을 구성하는 복수의 프레임을 선형 정합하여 상기 족부의 하부에 대한 3차원 모델을 생성하는 단계;를 포함하는 족부 스캔 방법.
제12항에 있어서,
상기 족부의 3차원 모델을 생성하는 단계는,
상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 동일 좌표계로 변환하여 개략 정합하는 단계; 및
상기 개략 정합된 3차원 모델을 정제 정합하는 단계;를 더 포함하는 족부 스캔 방법.
제12항에 있어서,
상기 제1 촬상부는, 적어도 하나의 카메라 및 적어도 2개의 레이저를 포함하고,
상기 족부의 상부에 대한 3차원 모델을 생성하는 단계는,
기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제1 영상으로부터 상기 족부의 상부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 상부에 대한 3차원 모델을 생성하는 족부 스캔 방법.
제12항에 있어서,
상기 제2 촬상부는, 적어도 하나의 카메라 및 적어도 하나의 레이저를 포함하고,
상기 족부의 하부에 대한 3차원 모델을 생성하는 단계는,
기설정된 상기 카메라와 상기 레이저 간의 위치 관계에 기초하여 상기 제2 영상으로부터 상기 족부의 하부에 대한 3차원 좌표 정보를 획득하고, 상기 3차원 좌표 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 생성하는 족부 스캔 방법.
제15항에 있어서,
상기 족부의 하부에 대한 3차원 모델을 생성하는 단계는,
기저장된 상기 투명 지지대에 대한 왜곡 정보를 이용하여 상기 족부의 하부에 대한 3차원 모델을 보정하는 단계;를 포함하는 족부 스캔 방법.
제12항에 있어서,
상기 족부의 상부에 대한 3차원 모델을 생성하는 단계는,
상기 제1 촬상부의 이동 속도에 기초하여 상기 제1 영상을 구성하는 복수의 프레임을 선형 정합하고,
상기 족부의 하부에 대한 3차원 모델을 생성하는 단계는,
상기 제2 촬상부의 이동 속도에 기초하여 상기 제2 영상을 구성하는 복수의 프레임을 선형 정합하는 족부 스캔 방법.
제13항에 있어서,
상기 개략 정합하는 단계는,
기저장된 상기 제1 및 제2 촬상부의 위치 관계 정보에 기초하여 상기 족부의 상부에 대한 3차원 모델 및 상기 족부의 하부에 대한 3차원 모델을 개략 정합하는 족부 스캔 방법.
제13항에 있어서,
상기 정제 정합하는 단계는,
상기 개략 정합된 3차원 모델에 ICP(Iterative closest point) 방법을 적용하여 정제 정합하는 족부 스캔 방법.
제11항 내지 제19항 중 어느 한 항의 방법을 수행하기 위한 프로그램을 기록한 컴퓨터에서 판독 가능한 기록 매체.