KR101755248B1 - 3차원 모델 생성 방법과 시스템 및 이를 위한 휴대용 단말 - Google Patents

Abstract

본 발명은 3차원 모델을 생성할 수 있는 휴대용 단말을 개시한다. 본 발명에 따른 휴대용 단말은, 카메라; 대상에 대하여 다수의 3차원 메쉬맵을 저장하는 메쉬맵 저장수단; 상기 카메라를 통해 획득한 다수의 2차원 영상데이터를 분석하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식수단; 상기 윤곽선데이터를 이용하여 상기 메쉬맵 저장수단에서 가장 유사한 3차원 메쉬맵을 결정하고, 상기 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지 영역의 높이로 결정하는 높이결정수단; 상기 다수의 2차원 영상데이터와 상기 에지 영역의 높이를 이용하여 1차 모델을 생성하는 영상 정합수단; 상기 1차 모델의 일부 영역을 상기 가장 유사한 3차원 메쉬맵의 대응하는 영역으로 치환하는 메쉬맵 치환수단을 포함한다. 본 발명에 따르면 고가의 전용 스캐너를 사용하지 않고도 사용자가 휴대용 단말을 이용하여 간편하게 3차원 모델을 생성할 수도 있고, 이를 타인에게 전송할 수도 있다. 또한 휴대용 단말에서 실행되는 다양한 애플리케이션에 3차원 모델을 활용할 수 있으므로 사용자에게 보다 다양한 재미와 관심을 유도할 수 있다.

Description

3차원 모델 생성 방법과 시스템 및 이를 위한 휴대용 단말{Method and system of generating 3D model and mobile device for the same}

본 발명은 3차원 모델 생성 방법에 관한 것으로서, 구체적으로는 휴대용 단말을 이용하여 사람 얼굴 등의 3차원 모델을 간편하게 생성할 수 있는 방법에 관한 것이다.

3차원 스캐닝은 대상의 형상정보를 획득하여 3차원 디지털 모델을 생성하는 기술로서, 이를 이용하면 초소형 부품에서부터 항공기, 선박 등과 같은 초대형 사물에 이르는 거의 모든 대상의 3차원 형상정보를 얻을 수 있다.

이에 따라 의학, 치의학, 건축설계, 기계설계, 영화 등 다양한 산업분야에서 3차원 스캐닝 기술이 활용되고 있으며, 최근에는 리버스 엔지니어링(reverse engineering), 제품 품질검사, 문화재 복원 등의 분야에서도 그 활용도가 높아지고 있다.

3차원 스캐닝 방법은 통상 접촉식과 비접촉식으로 구분되며, 접촉식은 대상의 표면에 프로브를 접촉하여 3차원 데이터를 획득하는 방식이고, 비접촉식은 레이저 등을 이용하는 것으로서 TOF(Time of Flight)방식, 광 삼각법, FOV(Field of View)법, 변조광 방식 등을 포함한다.

접촉식은 정확한 3차원 모델을 생성할 수 있는 장점이 있으나 측정속도가 느리고 대상에 변형이나 손상을 줄 수 있는 단점이 있기 때문에, 최근에는 비접촉식 스캐닝을 사용하는 경우가 갈수록 늘어나고 있다.

그런데 3차원 스캐닝을 수행하는 3차원 스캐너는 매우 고가이어서 일반인이 쉽게 구매하기 어렵고, 데이터 처리량이 많아 3차원 모델을 생성하는데 상당한 시간이 소요되는 단점이 있다.

최근에는 이러한 문제를 해결하기 위하여 보다 간단한 방법으로 3차원 모델을 생성하는 방법에 대한 관심이 증가하고 있다. 예를 들어 특허문헌 1은, 대상에 대한 2차원 영상정보를 획득하는 2차원 영상카메라와, 3차원 거리영상을 획득하는 3차원 센서를 이용하여 3차원 모델을 보다 간편하게 생성하는 방법을 제안하고 있다.

그런데 특허문헌 1의 방법은 종래의 3차원 스캐너에 비해 구성이 간단하기는 하지만, 카메라와 별도로 3차원 센서를 사용해야 하므로 제품구성이 복잡하고 휴대하면서 사용하기 어려운 단점이 있다.

등록특허 제10-1424118호(2014.08.13 공고)

본 발명은 이러한 종래의 문제점을 해결하기 위한 것으로서, 사용자들이 항상 휴대하고 다니는 휴대용 단말을 이용하여 3차원 모델을 보다 간편하게 생성할 수 있는 방법을 제공하는 데 목적이 있다.

또한 본 발명은 휴대용 단말을 이용하여 사람 얼굴의 3차원 모델을 빠르고 간편하게 생성할 수 있도록 함으로써 사용자의 흥미와 재미를 유발하고, 3차원 얼굴 모델을 휴대용 단말의 애플리케이션을 통해 다양하게 활용할 수 있도록 하는데 목적이 있다.

본 발명의 일 양상은, 전술한 목적을 달성하기 위하여, 카메라; 대상에 대하여 다수의 3차원 메쉬맵을 저장하는 메쉬맵 저장수단; 상기 카메라를 통해 획득한 다수의 2차원 영상데이터를 분석하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식수단; 상기 윤곽선데이터를 이용하여 상기 메쉬맵 저장수단에서 가장 유사한 3차원 메쉬맵을 결정하고, 상기 가장 유사한 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지 영역의 높이로 결정하는 높이결정수단; 상기 다수의 2차원 영상데이터와 상기 에지 영역의 높이를 이용하여 1차 모델을 생성하는 영상 정합수단; 상기 1차 모델의 일부 영역을 상기 가장 유사한 3차원 메쉬맵의 대응하는 영역으로 치환하는 메쉬맵 치환수단을 포함하는 것을 특징으로 하는 휴대용 단말을 제공한다.

본 발명의 일 양상에 따른 휴대용 단말은 상기 다수의 2차원 영상데이터의 색상을 이용하여 3차원 모델의 색상을 결정하는 색상결정수단을 더 포함할 수 있다.

본 발명의 다른 양상은, 카메라를 구비한 휴대용 단말, 상기 휴대용 단말과 통신망을 통해 통신하는 서비스서버를 포함하는 3차원 모델 생성시스템에 있어서, 상기 서비스서버는, 대상에 대하여 다수의 3차원 메쉬맵을 저장하는 메쉬맵 저장수단; 상기 휴대용 단말의 상기 카메라에서 획득한 다수의 2차원 영상데이터를 수신하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식수단; 상기 윤곽선데이터를 이용하여 상기 메쉬맵 저장수단에서 가장 유사한 3차원 메쉬맵을 결정하고, 상기 가장 유사한 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지 영역의 높이로 결정하는 높이결정수단; 상기 다수의 2차원 영상데이터와 상기 에지 영역의 높이를 이용하여 1차 모델을 생성하는 영상 정합수단; 상기 1차 모델의 일부 영역을 상기 가장 유사한 3차원 메쉬맵의 대응하는 영역으로 치환하는 메쉬맵 치환수단을 포함하는 것을 특징으로 하는 3차원 모델 생성 시스템을 제공한다.

본 발명의 또 다른 양상은, 대상에 대하여 다수의 3차원 메쉬맵을 저장하는 단계; 카메라로 상기 대상을 서로 다른 각도에서 촬영하여 다수의 2차원 영상데이터를 획득하는 단계; 상기 다수의 2차원데이터를 분석하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식단계; 상기 윤곽선데이터를 이용하여 상기 다수의 3차원 메쉬맵 중에서 가장 유사한 3차원 메쉬맵을 결정하고, 상기 가장 유사한 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지 영역의 높이로 결정하는 단계; 상기 다수의 2차원 영상데이터와 상기 에지 영역의 높이를 이용하여 1차 모델을 생성하는 단계; 상기 1차 모델의 일부 영역을 상기 가장 유사한 3차원 메쉬맵의 대응하는 영역으로 치환하는 메쉬맵 치환단계를 포함하는 휴대용 단말을 이용한 3차원 모델 생성방법을 제공한다.

상기 3차원 모델 생성방법에 있어서, 상기 대상은 사람의 얼굴이고, 상기 다수의 2차원 영상데이터는 적어도 얼굴의 전면, 좌측면, 및 우측면의 영상데이터를 포함할 수 있다. 이 경우 상기 윤곽인식단계에서는, 상기 다수의 2차원 영상데이터에서 각각 HSI기반의 색상정보를 획득하여 피부색 구간범위를 추출하여 적어도 얼굴의 전면, 좌측면, 및 우측면의 윤곽선을 인식할 수 있다.

또한 상기 3차원 모델 생성방법의 상기 메쉬맵 치환단계에서는, 상기 1차 모델의 특징점과 상기 가장 유사한 3차원 메쉬 맵의 특징점을 매칭시킨 후에 상기 1차 모델의 일부 영역을 상기 가장 유사한 3차원 메쉬 맵의 대응하는 영역으로 치환할 수 있다.

또한 상기 3차원 모델 생성방법의 상기 메쉬맵 치환단계의 이후에는, 상기 다수의 2차원 영상데이터의 색상을 이용하여 3차원 모델의 색상을 결정하는 단계를 포함할 수 있다.

본 발명에 따르면 고가의 전용 스캐너를 사용하지 않고도 사용자가 휴대용 단말을 이용하여 간편하게 3차원 모델을 생성할 수도 있고, 이를 타인에게 전송할 수도 있다. 또한 휴대용 단말에서 실행되는 다양한 애플리케이션에 3차원 모델을 활용할 수 있으므로 사용자에게 보다 다양한 재미와 관심을 유도할 수 있다.

도 1은 본 발명의 일 실시예에 따른 3차원 모델 생성용 휴대용 단말의 개략 블록도
도 2는 본 발명의 일 실시예에 따른 3차원 모델 생성 방법을 나타낸 흐름도
도 3은 본 발명의 다른 실시예에 따른 3차원 모델 생성 시스템의 개략 구성도

이하에서는 도면을 참조하여 본 발명의 바람직한 실시예를 설명한다. 참고로 본 명세서에서 어떤 부분이 어떤 구성요소를 '포함'하는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.

먼저 스마트폰, 태블릿PC 등과 같은 휴대용 단말에서 3차원 모델을 간편하게 생성하는 경우를 설명한다.

본 발명의 일 실시예에 따른 휴대용 단말(100)은 도 1에 나타낸 바와 같이, 입력수단(110), 디스플레이수단(120), 통신수단(130), 카메라(140), 메쉬맵 저장수단(150), 3차원 모델 생성수단(160), 제어수단(170)을 포함한다.

입력수단(110)에는 터치스크린, 터치패드, 키패드 등이 사용될 수 있고, 디스플레이수단(120)에는 액정표시장치(LED), 유기발광다이오드(OLED) 등과 같은 평판표시장치가 사용될 수 있다.

통신수단(130)은 무선인터넷망 및/또는 이동통신망과의 접속을 지원한다.

카메라(140)는 2차원 영상데이터를 획득하는 통상의 카메라로서, 휴대용 단말(100)의 배면 또는 전면에 장착된 카메라일 수 있다.

메쉬맵 저장수단(150)은 대상에 대한 다양한 3차원 메쉬맵을 저장할 수 있다. 예를 들어 다양한 얼굴 형상에 대한 3차원 메쉽맵을 각각 저장할 수도 있고, 얼굴을 포함한 신체에 대한 다양한 3차원 메쉬맵을 각각 저장할 수도 있다. 대상이 사람에 한정되는 것은 아니므로 동물 또는 사물마다 다양한 형상의 3차원 메쉬맵을 저장할 수도 있다.

3차원 모델 생성수단(160)은 카메라(140)를 통해 획득한 2차원 영상데이터와 메쉬맵 저장수단(150)에 저장된 3차원 메쉬맵을 이용하여 3차원 모델을 생성한다.

3차원 모델 생성수단(160)은 윤곽인식수단(161), 높이결정수단(162), 영상정합수단(163), 메쉬맵 치환수단(164), 색상결정수단(165) 등을 포함할 수 있다.

이하에서는 설명의 편의를 위하여 카메라(140)를 통해 사람 얼굴의 전면, 좌측면, 및 우측면을 각각 촬영하고 이를 통해 획득한 3개의 2차원 영상데이터를 이용하여 사람 얼굴의 3차원 모델을 생성하는 것으로 가정한다.

그러나 본 발명의 범위가 이에 한정되는 것은 아니며, 전면과 좌측면 사이에서 하나 이상의 2차원 영상데이터를 더 획득하고, 전면과 우측면 사이에서 하나 이상의 2차원 영상데이터를 더 획득하여 사용할 수도 있다. 또한 얼굴의 하부 또는 상부에 대하여 2차원 영상데이터를 더 획득하여 사용할 수도 있다. 또한 사람 얼굴이 아닌 신체의 일부 또는 전부, 동물, 사물 등에 대해서도 동일한 방법을 적용할 수 있다.

윤곽인식수단(161)은 카메라(140)를 통해 획득한 얼굴의 전면, 좌측면, 및 우측면에 대한 2차원 영상데이터를 분석하여 얼굴의 윤곽선을 인식한다. 얼굴의 윤곽선은 이마, 눈, 코, 입, 귀, 턱, 광대 등의 윤곽을 포함할 수 있다.

구체적으로는, 얼굴 전면의 2차원 영상 데이터로부터 HSI(Hue, Saturation, Intensity)기반의 색상정보를 획득하고, 이를 기반으로 피부색 구간범위를 추출하여 얼굴 전면의 윤곽선을 인식한다.

또한 얼굴 좌측면의 2차원 영상 데이터로부터 HSI기반의 색상정보를 획득하고, 이를 기반으로 피부색 구간범위를 추출하여 얼굴 좌측면의 윤곽선을 인식한다. 또한 얼굴 우측면의 2차원 영상 데이터로부터 HSI기반의 색상정보를 획득하고, 이를 기반으로 피부색 구간범위를 추출하여 얼굴 우측면의 윤곽선을 인식한다.

높이결정수단(162)은 윤곽인식수단(161)에서 획득한 얼굴 전면, 좌측면, 및 우측면의 윤곽선 데이터로부터 에지영역을 추출하고 에지영역의 높이를 결정한다.

구체적으로는 획득한 윤곽석 데이터를 메쉬맵 저장수단에 저장된 다양한 3차원 얼굴 메쉬 맵과 대비하여 가장 유사한 3차원 메쉬 맵을 결정한다. 그리고 상기 가장 유사한 3차원 메쉬 맵의 대응하는 영역의 높이를 대응하는 윤곽선의 에지 영역의 높이로 결정한다.

영상정합수단(163)은 각 영상데이터의 윤곽선 높이 정보를 이용하여 3개의 2차원 영상데이터를 합성하여 미완성의 1차 모델을 생성한다.

메쉬 맵 치환수단(164)은 가장 유사한 3차원 메쉬 맵과 영상정합수단(163)에서 생성한 1차 모델을 이용하여 2차 모델을 생성한다. 구체적으로는, 1차 모델의 특징점과 가장 유사한 3차원 메쉬 맵의 특징점을 매칭시킨 후에 1차 모델의 소정 영역을 가장 유사한 3차원 메쉬 맵의 대응하는 영역으로 치환한다.

여기서 특징점은 얼굴의 눈 양끝, 코끝, 입꼬리, 광대, 볼, 턱 등에 설정될 수 있고, 이렇게 하면 특징점 부근의 영역을 3차원 메쉬 맵으로 치환할 수 있고, 이를 통해 보다 완성도 높은 3차원 모델을 생성할 수 있다.

메쉬맵 저장수단(150)에 보다 다양한 3차원 얼굴 메쉬 맵이 저장될수록 촬영 대상의 얼굴과 근접한 3차원 메쉬 맵을 활용할 수 있고, 이를 통해 실제 대상과 보다 유사한 3차원 모델을 생성할 수 있음은 물론이다.

색상결정수단(165)은 3차원 모델의 색상을 결정한다. 구체적으로는, 2차원 영상데이터의 색상을 이용하여 3차원 모델의 색상을 결정한다.

이하에서는 도 2의 흐름도를 참조하여 본 발명의 실시예에 따른 휴대용 단말(100)을 이용하여 사람 얼굴의 3차원 모델을 생성하는 방법을 설명한다.

먼저 휴대용 단말(100)에 3차원 모델 생성수단(160)의 기능을 수행하는 전용 애플리케이션을 설치하고, 레퍼런스 역할을 하는 다양한 사람 얼굴의 3차원 메쉬 맵을 메쉬맵 저장수단(150)에 저장해 두어야 한다. (ST11)

이 상태에서, 카메라(140)를 이용하여 사용자 자신 또는 타인의 얼굴을 촬영하여 다수의 2차원 영상데이터를 획득한다. 이때 적어도 얼굴의 전면, 좌측면 및 우측면을 촬영하는 것이 바람직하며, 전용 애플리케이션의 설정에 따라서는 더 많은 위치에서 더 많은 2차원 영상데이터를 획득할 수도 있음은 물론이다. (ST12)

카메라(140)에서 2차원 영상데이터가 획득되면 데이터를 분석한다. 먼저 윤곽인식수단(161)은 2차원 영상데이터에서 HSI기반의 색상정보를 획득하여 피부색 구간범위를 추출하고 이를 이용하여 얼굴의 전면, 좌측면, 및 우측면의 윤곽선을 인식한다. (ST13, ST14)

이어서 높이결정수단(162)은 얼굴 전면, 좌측면, 및 우측면의 윤곽선 데이터를 메쉬맵 저장수단(150)에 저장된 가장 유사한 3차원 메쉬 맵과 대비하고, 가장 유사한 3차원 메쉬 맵의 대응하는 윤곽선의 높이를 각 윤곽선 데이터의 에지 영역의 높이로 결정한다. (ST15)

이어서 영상정합수단(163)은 각 영상데이터의 윤곽선 높이 정보를 이용하여 3개의 2차원 영상데이터를 합성하여 미완성의 1차 모델을 생성하고, 메쉬 맵 치환수단(164)은 미완성 1차 모델의 특징점과 가장 유사한 3차원 메쉬 맵의 특징점을 매칭시킨 후에 1차 모델의 소정 영역을 가장 유사한 3차원 메쉬 맵의 대응하는 영역으로 치환한다. (ST16)

이어서 색상결정수단(165)은 2차원 영상데이터의 색상을 이용하여 3차원 모델의 색상을 결정한다. 이어서 결정된 색상을 모델에 적용함으로써 3차원 모델이 생성된다. (ST17, ST18)

이러한 3차원 모델 생성방법은 컴퓨터 실행 가능한 프로그램을 통해 구현될 수 있다.

이상에서는 본 발명의 바람직한 실시예를 설명하였으나, 본 발명은 전술한 실시예에 한정되지 않고 다양한 형태로 변형 또는 수정되어 실시될 수 있다.

일 예로서, 이상에서는 휴대용 단말(100)에서 3차원 모델을 생성하는 경우를 설명하였으나 이와 다르게 별도의 서버에서 3차원 모델을 생성하도록 구성할 수도 있다.

즉, 도 3의 블록도에 나타낸 바와 같이, 휴대용 단말(100)과 통신망(300)을 통해 통신하는 서비스서버(200)를 포함하는 3차원 모델 생성시스템을 구성할 수도 있다. 이 경우 서비스서버(200)는 3차원 모델생성수단(210)과 메쉬맵 저장수단(220)을 포함하고, 3차원 모델생성수단(210)은 윤곽인식수단(221), 높이결정수단(222), 영상정합수단(223), 메쉬맵 치환수단(224), 색상결정수단(225)을 포함한다. 서비스서버(200)의 상기 각 구성은 앞에서 설명한 휴대용 단말(100)의 대응하는 구성과 동일한 기능을 수행한다.

이와 같은 방식으로 3차원 모델 생성시스템을 구성하면, 사용자는 휴대용 단말(100)에 장착된 카메라로 다양한 각도로 대상을 촬영하여 다수의 2차원 영상데이터를 서비스서버(200)로 전송하고, 서비스서버(200)는 수신한 다수의 2차원 영상데이터를 이용하여 전술한 과정을 거쳐 3차원 모델을 생성하며, 생성된 3차원 모델을 사용자의 휴대용 단말(100)로 제공하게 된다.

서비스서버(200)에서는 대용량의 데이터를 보다 신속하게 처리할 수 있으므로 휴대용단말(100)로부터 보다 많은 2차원 영상데이터를 수신하여 3차원 모델을 생성할 수 있고, 이를 통해 보다 완성도 높은 3차원 모델을 제공할 수 있다.

다른 예로서, 이상에서는 사람 얼굴을 중심으로 3차원 모델 생성방법을 설명하였으나, 본 발명은 사람 얼굴과 신체의 전부 또는 일부를 포함하는 3차원 모델을 생성하는데도 활용될 수 있다. 이 경우 사람 얼굴에 대한 3차원 모델과 목 이하의 신체에 대한 3차원 모델을 별도로 생성한 후에 이를 합성하는 방법으로 3차원 모델을 생성할 수도 있다. 본 발명을 이용하여 동물이나 사물에 대한 3차원 모델을 생성할 수도 있음은 물론이다.

이와 같이 본 발명은 구체적인 적용에 있어서 다양한 형태로 변형 또는 수정되어 실시될 수 있으며, 변형 또는 수정된 실시예도 후술하는 특허청구범위에 개시된 본 발명의 기술적 사상을 포함한다면 본 발명의 권리범위에 속함은 물론이다.

100: 휴대용 단말 110: 입력수단
120: 디스플레이수단 130: 통신수단
140: 카메라 150: 메쉬 맵 저장수단
160: 3차원 모델 생성수단 161: 윤곽인식수단
162: 높이결정수단 163: 영상정합수단
164: 메쉬맵 치환수단 164: 색상결정수단
200: 서비스서버 300: 통신망

Claims (8)

1. 카메라;
   대상에 대하여 다수의 3차원 메쉬맵을 저장하는 메쉬맵 저장수단;
   상기 카메라로 상기 대상을 서로 다른 각도에서 촬영하여 획득한 다수의 2차원 영상데이터를 분석하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식수단;
   상기 윤곽선데이터를 이용하여 상기 메쉬맵 저장수단에 저장된 다수의 3차원 메쉬맵 중에서 하나의 3차원 메쉬맵을 선택하고, 선택된 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지영역의 높이로 결정하는 높이결정수단;
   상기 다수의 2차원 영상데이터와 상기 에지영역의 높이를 이용하여 3차원의 1차 모델을 생성하는 영상정합수단;
   상기 1차 모델의 특징점을 이용하여 상기 메쉬맵 저장수단에 저장된 다수의 3차원 메쉬맵 중에서 하나의 3차원 메쉬맵을 선택하고, 상기 1차 모델의 특징점을 선택된 3차원 메쉬맵의 특징점과 매칭시킨 후에 상기 1차 모델의 일부 영역을 특징점이 매칭된 3차원 메쉬맵의 대응하는 영역으로 치환하여 3차원의 2차 모델을 생성하는 메쉬맵 치환수단
   을 포함하는 것을 특징으로 하는 휴대용 단말
2. 제1항에 있어서,
   상기 다수의 2차원 영상데이터의 색상을 이용하여 3차원 모델의 색상을 결정하는 색상결정수단을 더 포함하는 것을 특징으로 하는 휴대용 단말
3. 카메라를 구비한 휴대용 단말, 상기 휴대용 단말과 통신망을 통해 통신하는 서비스서버를 포함하는 3차원 모델 생성시스템에 있어서,
   상기 서비스서버는,
   대상에 대하여 다수의 3차원 메쉬맵을 저장하는 메쉬맵 저장수단;
   상기 휴대용 단말의 상기 카메라로 상기 대상을 서로 다른 각도에서 촬영하여 획득한 다수의 2차원 영상데이터를 수신하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식수단;
   상기 윤곽선데이터를 이용하여 상기 메쉬맵 저장수단에 저장된 다수의 3차원 메쉬맵 중에서 하나의 3차원 메쉬맵을 선택하고, 선택된 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지영역의 높이로 결정하는 높이결정수단;
   상기 다수의 2차원 영상데이터와 상기 에지영역의 높이를 이용하여 3차원의 1차 모델을 생성하는 영상정합수단;
   상기 1차 모델의 특징점을 이용하여 상기 메쉬맵 저장수단에 저장된 다수의 3차원 메쉬맵 중에서 하나의 3차원 메쉬맵을 선택하고, 상기 1차 모델의 특징점을 선택된 3차원 메쉬맵의 특징점과 매칭시킨 후에 상기 1차 모델의 일부 영역을 특징점이 매칭된 3차원 메쉬맵의 대응하는 영역으로 치환하여 3차원의 2차 모델을 생성하는 메쉬맵 치환수단
   을 포함하는 것을 특징으로 하는 3차원 모델 생성 시스템
4. 카메라로 대상을 서로 다른 각도에서 촬영하여 다수의 2차원 영상데이터를 획득하는 단계;
   상기 다수의 2차원데이터를 분석하여 각 영상데이터의 윤곽선데이터를 생성하는 윤곽인식단계;
   상기 윤곽선데이터를 이용하여 메쉬맵 저장수단에 저장된 다수의 3차원 메쉬맵 중에서 하나의 3차원 메쉬맵을 선택하고, 선택된 3차원 메쉬맵의 대응하는 윤곽선의 높이를 상기 윤곽선 데이터의 에지영역의 높이로 결정하는 단계;
   상기 다수의 2차원 영상데이터와 상기 에지영역의 높이를 이용하여 3차원의 1차 모델을 생성하는 단계;
   상기 1차 모델의 특징점을 이용하여 상기 메쉬맵 저장수단에 저장된 다수의 3차원 메쉬맵 중에서 하나의 3차원 메쉬맵을 선택하고, 상기 1차 모델의 특징점을 선택된 3차원 메쉬맵의 특징점과 매칭시킨 후에 상기 1차 모델의 일부 영역을 특징점이 매칭된 3차원 메쉬맵의 대응하는 영역으로 치환하여 3차원의 2차 모델을 생성하는 메쉬맵 치환단계
   를 포함하는 휴대용 단말을 이용한 3차원 모델 생성방법
5. 제4항에 있어서,
   상기 대상은 사람의 얼굴이고, 상기 다수의 2차원 영상데이터는 적어도 얼굴의 전면, 좌측면, 및 우측면의 영상데이터를 포함하는 것을 특징으로 하는 휴대용 단말을 이용한 3차원 모델 생성방법
6. 제5항에 있어서,
   상기 윤곽인식단계에서는, 상기 다수의 2차원 영상데이터에서 각각 HSI기반의 색상정보를 획득하여 피부색 구간범위를 추출하여 적어도 얼굴의 전면, 좌측면, 및 우측면의 윤곽선을 인식하는 것을 특징으로 하는 휴대용 단말을 이용한 3차원 모델 생성방법
7. 삭제
8. 제4항에 있어서,
   상기 메쉬맵 치환단계의 이후에는, 상기 다수의 2차원 영상데이터의 색상을 이용하여 3차원 모델의 색상을 결정하는 단계를 포함하는 것을 특징으로 하는 휴대용 단말을 이용한 3차원 모델 생성방법

Images