KR20150115296A - 3d 의류 모델 복원 방법 및 장치 - Google Patents

3d 의류 모델 복원 방법 및 장치 Download PDF

Info

Publication number
KR20150115296A
KR20150115296A KR1020140040089A KR20140040089A KR20150115296A KR 20150115296 A KR20150115296 A KR 20150115296A KR 1020140040089 A KR1020140040089 A KR 1020140040089A KR 20140040089 A KR20140040089 A KR 20140040089A KR 20150115296 A KR20150115296 A KR 20150115296A
Authority
KR
South Korea
Prior art keywords
garment
model
information
temporary
image information
Prior art date
Application number
KR1020140040089A
Other languages
English (en)
Other versions
KR101778833B1 (ko
Inventor
김태준
김호원
손성열
조규성
김기남
최진성
구본기
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020140040089A priority Critical patent/KR101778833B1/ko
Priority to US14/590,321 priority patent/US9542769B2/en
Publication of KR20150115296A publication Critical patent/KR20150115296A/ko
Application granted granted Critical
Publication of KR101778833B1 publication Critical patent/KR101778833B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/04—Texture mapping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/50—Lighting effects
    • G06T15/506—Illumination models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10—Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/16—Cloth
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00—Indexing scheme for image rendering
    • G06T2215/16—Using real world measurements to influence rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Generation (AREA)
  • Computer Vision & Pattern Recognition (AREA)

Abstract

캡쳐한 의류의 영상 정보를 이용하여 의류 모델을 복원하는 3D 의류 모델 복원 방법 및 장치에 관한 것으로 구체적으로는 마네킹에 입혀진 의류의 영상 정보를 캡쳐한 후, 캡쳐한 영상 정보를 이용하여 임시 모델을 생성하고, 임시 모델을 이용하여 최종직인 의류 모델을 생성한다.

Description

3D 의류 모델 복원 방법 및 장치{APPARATUS AND METHOD OF 3D CLOTHES MODEL RECONSTRUCTION}
아래의 설명은 3D 의류 모델 복원 방법 및 장치에 관한 것으로 구체적으로는 실존하는 의류의 영상 정보를 이용하여 의류의 3차원 모델의 외형을 복원하고 시뮬레이션에 적합한 형태로 변형하는 3D 의류 모델 복원 방법 및 장치에 관한 것이다.
최근에는 영상의 깊이 정보를 계측할 수 있는 센서의 발달 및 보급화로 인하여 다양한 형태의 사물을 3차원으로 쉽게 복원한다. 이때, 3차원으로 복원된 사물은 장치를 통해 가시화 또는 시뮬레이션되어 사용자에게 제공되며, 다양한 분야에 활용이 가능하다.
대표적으로 가상의 3차원 의류를 이용하여 사용자에게 의류 체험 서비스를 제공하는 사용자 중심 의류 서비스가 있다. 사용자 중심 의류 서비스는 가상의 3차원 의류를 이용하는 것으로 온라인을 통해 사용자가 원하는 의류를 피팅하거나, 의복을 맞춤 제작하는 등 다양한 서비스를 제공한다.
이 때, 사용자 중심 의류 서비스는 사용자의 움직임에 대응하여 가상의 3차원 의류의 움직임을 제어하는 옷감 시뮬레이션을 제공한다. 옷감 시뮬레이션은 사용자가 의류를 직접 입어보지 않고도 의류의 착용 모습을 예측할 수 있도록 하여 사용자가 의류를 구매하는 과정에서 구매 실수를 최소화 한다.
그러나, 사용자 중심 의류 서비스는 사용자가 체험할 수 있는 가상의 3차원 의류를 지속적으로 공급하는 방법의 부재가 존재한다. 구체적으로, 사용자 중심 의류 서비스는 오토데스트 마야와 같은 컴퓨터 그래픽스 저작툴을 이용하여 의류를 창작하는 방법 및 실존하는 의류의 옷본을 이용하여 가상의 3차원 모델을 구성하여 가상 의류를 제작하는 방법을 이용한다. 여기서, 저작툴을 이용하여 착장하는 방법은 게임이나 영화 캐릭터의 의상제적에 사용되는 고전적 방법으로 실존하는 옷을 디지털 화하기에는 어려움이 있다. 또한, 가상 의류를 제작하는 방법은 실제 옷을 제작하는 것과 같이 옷본에 따라 가상의 패턴을 생성하고, 생성된 가상의 패턴을 통합하여 3차원 모델을 제작하며, 제작된 3차원 모델을 가상의 캐릭터에 부착함으로써, 가상 의류를 제작한다.
이 때, 여성복과 같이 주름이 있는 의복의 경우 자연스러운 형태를 유지하기 위해 드레이핑 작업이 필요하며 이는 디자이너의 감각이 필요한 경우로 자동화하기가 매우 어려운 문제가 있다. 더욱이 가상 의류 제작은 작업 환경이 실제 옷을 제작하는 것과 차이가 있어 기존의 디자이너가 작업하기에 어려움이 존재한다.
또한, 옷본을 이용하는 방법의 또 다른 문제는 시스템 적용 이전에 제작된 옷이나 수입된 옷 등 옷본이 없을 경우 있다. 그러나, 옷본이 없는 경우에는 옷본을 얻기 위해 마네킹에 입혀진 옷을 3D 스캐너를 이용하여 스캔하여 옷본 데이터를 추출하여 추출된 옷본을 이용해 디지털 의상을 제작한다. 하지만 이러한 방법은 전문 작업자의 오랜 시간의 수작업이 필요하므로 가상 의류 제작에 적합한 방식은 아니다.
그리고, 수작업은 3D 스캔된 옷의 3D mesh 구성의 형상 데이터에서 옷 영역을 분리하고, mesh의 복잡도를 내리는 작업, 스캔 중에 발생하는 hole을 제거하는 과정, 형상에 옷의 텍스쳐정보를 생성하는 과정 등을 포함한다. 형상 데이터에서 옷본을 추출하기 위해서는 전문가의 GUI를 통한 패턴 추출과정이 필요하다. 또한 이렇게 생성된 형상을 가상 의류 체험에 적용하기 위해서는 옷의 속성(늘어남, 무게감)을 반영한 파라미터 세팅과 아바타와의 결합부위에 대한 정의를 해 주어야 한다. 즉 현재의 실물 의상의 3D 스캔을 통한 디지털 체험용 의상으로의 변환은 시간과 노동집약적인 과정이 필요하다.
따라서, 옷본 등 옷의 데이터를 가지고 있는 제조사와 더불어 옷 데이터를 가지고 있지 않은 유통사를 대상으로, 가상의류 피팅 서비스를 위한 실물의상의 디지털화 작업을 자동화하여 전문지식 없이도 쉽게 실물의상의 체험용 디지털의상 제작을 용이하게 하는 방법을 제시하고자 한다.
의류의 옷본 없이 마네킹에 입혀진 실존하는 의류에서 획득한 영상 정보를 이용하여 3차원 의류 모델을 생성함으로써, 의류의 3차원 복원 과정을 간소화하여 시간과 비용의 최소화를 통해 3차원 의류 모델을 생성하는 3D 의류 모델 복원 방법 및 장치를 제공할 수 있다.
턴테이블의 회전 각도에 따라 회전하는 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 획득함으로써, 다양한 각도에서의 의류의 영상 정보를 획득하며, 사용자의 개입을 최소화하는 3D 의류 모델 복원 방법 및 장치를 제공할 수 있다.
의류의 물리적 정보를 자동으로 추출하여 의류에 대한 옷본 없이 의류 모델을 생성함하는 3D 의류 모델 복원 방법 및 장치를 제공할 수 있다.
일실시예에 따른 3D 의류 모델 복원 방법은 마네킹에 입혀진 의류의 영상 정보를 캡쳐하는 단계; 상기 캡쳐한 영상 정보를 이용하여 상기 의류의 외형 정보 및 텍스쳐 정보를 포함하는 임시 모델을 생성하는 단계; 상기 임시 모델을 이용하여 상기 의류에 대응하는 의류 모델을 생성하는 단계를 포함할 수 있다.
일실시예에 따른 캡쳐하는 단계는 턴테이블의 회전 각도에 기초하여 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 캡쳐할 수 있다.
일실시예에 따른 임시 모델을 생성하는 단계는 상기 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 3차원 공간 상의 위치를 계산하고, 상기 계산된 위치에 대응하여 3D 메쉬 형태를 갖는 의류의 외형 정보를 포함할 수 있다.
일실시예에 따른 임시 모델을 생성하는 단계는 상기 캡쳐된 영상 정보에 포함된 색상 정보를 이용하여 상기 의류의 외형 정보에 매핑되는 텍스쳐 정보를 포함할 수 있다.
일실시예에 따른 임시 모델을 생성하는 단계는 상기 임시 모델의 외형 정보에 포함된 상기 마네킹을 제거하고, 상기 텍스쳐 정보에 포함된 조명 정보를 제거하여 임시 모델을 생성할 수 있다.
일실시예에 따른 임시 모델을 생성하는 단계는 상기 의류의 3차원 공간 정보에 따른 상기 임시 모델의 공간 정보 및 상호 위치 정보에 기초하여 임시 모델을 생성할 수 있다.
일실시예에 따른 의류 모델을 생성하는 단계는 상기 의류의 움직임에 따른 형태를 표현하기 위해 상기 임시 모델을 계층적으로 변환하여 의류 모델을 생성할 수 있다.
일실시예에 따른 의류 모델을 생성하는 단계는 상기 의류를 표현하기 위한 재질의 구조적 특성에 따라 임시 모델의 재질을 재구조화하여 의류 모델을 생성할 수 있다.
일실시예에 따른 의류 모델을 생성하는 단계는 상기 마네킹의 부위별 크기를 조절하여 상기 의류의 부위별로 인체 허용 크기 및 의류의 탄성 중 적어도 하나를 포함하는 물리적 특성을 반영하여 의류 모델을 생성할 수 있다.
일실시예에 따른 의류 모델을 생성하는 단계는 상기 임시 모델의 정밀도를 고려하여 패턴 단위로 상기 임시 모델을 간략화하여 의류 모델을 생성할 수 있다.
일실시예에 따른 3D 의류 모델 복원 장치는 마네킹에 입혀진 의류의 영상 정보를 캡쳐하는 영상 정보 캡쳐부; 상기 캡쳐한 영상 정보를 이용하여 상기 의류의 외형 정보 및 텍스쳐 정보를 포함하는 임시 모델을 생성하는 임시 모델 생성부; 상기 임시 모델을 이용하여 상기 의류에 대응하는 의류 모델을 생성하는 의류 모델 생성부를 포함할 수 있다.
일실시예에 따른 영상 정보 캡쳐부는 턴테이블의 회전 각도에 기초하여 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 캡쳐할 수 있다.
일실시예에 따른 임시 모델 생성부는 상기 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 3차원 공간 상의 위치를 계산하고, 상기 계산된 위치에 대응하여 3D 메쉬 형태를 갖는 의류의 외형 정보를 포함할 수 있다.
일실시예에 따른 임시 모델 생성부는 상기 캡쳐된 영상 정보에 포함된 색상 정보를 이용하여 상기 의류의 외형 정보에 매핑되는 텍스쳐 정보를 포함할 수 있다.
일실시예에 따른 임시 모델 생성부는 상기 임시 모델의 외형 정보에 포함된 상기 마네킹을 제거하고, 상기 텍스쳐 정보에 포함된 조명 정보를 제거하여 임시 모델을 생성할 수 있다.
일실시예에 따른 임시 모델 생성부는 상기 의류의 3차원 공간 정보에 따른 상기 임시 모델의 공간 정보 및 상호 위치 정보에 기초하여 임시 모델을 생성할 수 있다.
일실시예에 따른 의류 모델 생성부는 상기 의류의 움직임에 따른 형태를 표현하기 위해 상기 임시 모델을 계층적으로 변환하여 의류 모델을 생성할 수 있다.
일실시예에 따른 의류 모델 생성부는 상기 의류를 표현하기 위한 재질의 구조적 특성에 따라 임시 모델의 재질을 재구조화하여 의류 모델을 생성할 수 있다.
일실시예에 따른 의류 모델 생성부는 상기 마네킹의 부위별 크기를 조절하여 상기 의류의 부위별로 인체 허용 크기 및 의류의 탄성 중 적어도 하나를 포함하는 물리적 특성을 반영하여 의류 모델을 생성할 수 있다.
일실시예에 따른 의류 모델 생성부는 상기 임시 모델의 정밀도를 고려하여 패턴 단위로 상기 임시 모델을 간략화하여 의류 모델을 생성할 수 있다.
3D 의류 모델 복원 방법 및 장치는 의류의 옷본 없이 마네킹이 입혀진 실존하는 의류에서 획득한 영상 정보를 이용하여 3차원 의류 모델을 생성함으로써, 의류의 3차원 복원 과정을 간소화하여 시간과 비용의 최소화를 통해 3차원 의류 모델을 생성할 수 있다.
3D 의류 모델 복원 방법 및 장치는 턴테이블의 회전 각도에 따라 회전하는 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 획득함으로써, 다양한 각도에서의 의류의 영상 정보를 획득하며, 사용자의 개입을 최소화할 수 있다.
3D 의류 모델 복원 방법 및 장치는 의류의 물리적 정보를 자동으로 추출하여 의류에 대한 옷본 없이 의류 모델을 생성할 수 있다.
도 1은 일실시예에 따른 3D 의류 모델 복원 장치의 전체 구상도이다.
도 2는 일실시예에 따른 3D 의류 모델 복원 장치의 세부 구성을 도시한 도면이다.
도 3은 일실시예에 따른 임시 모델을 생성하는 과정을 도시한 도면이다.
도 4는 일실시예에 따른 3D 의류 모델 복원 장치를 통한 디스플레이의 UI를 도시한 도면이다.
도 5는 일실시예에 따른 3D 의류 모델 복원 방법을 도시한 도면이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 일실시예에 따른 3D 의류 모델 복원 장치의 전체 구상도이다.
도 1을 참고하면, 마네킹(102)은 사용자가 복원하고자 하며 실존하는 의류(103)가 입혀질 수 있다. 여기서, 실존하는 의류(103)는 점퍼, 재킷, 코트, 니트, 셔츠, 티셔츠 등을 포함하는 상의류와 치마, 바지 등을 포함하는 하의류 원피스, 투피스 등을 포함하는 드레스류, 스키복등 상하의 일체형 의류, 모자, 넥타이, 머플러, 가방, 신발등을 포함하는 악세서리류 등을 포함할 수 있다.
마네킹(102)는 사용 목적에 따라 크기가 조정이 가능한 마네킹(shape-shifting mannequin) 또는 고정형의 일반적인 마네킹일 수 있다. 일례로, 마네킹은 상반신형, 하반신형, 전신형, 머리전용형, 손전용형, 발전용형 등을 포함할 수 있다. 또한, 마네킹(102)는 주요 신체 부위의 사이즈, 예를 들어 머리둘레, 목둘레, 가슴둘레, 배둘레, 팔둘레, 손목둘레, 허벅지 둘레, 종아리 둘레, 발둘레 등을 프로그램으로 조정 가능한 물리적 크기를 가질 수 있다. 그리고, 마네킹(102)은 오프라인 매장에서 사용되는 고정형 마네킹을 포함할 수 있다.
의류(103)가 입혀진 마네킹(102)은 턴테이블(104) 위에 위치할 수 있다. 턴테이블(104)은 회전이 가능하며, 미리 설정된 회전 각도에 대응하여 회전될 수 있다.
그리고, 깊이 센서(105)와 카메라(106)는 회전 각도에 대응하여 회전하는 턴테이블(104) 위에 위치한 마네킹(102)에 입혀진 의류(103)를 캡쳐할 수 있다. 이 때, 턴테이블(104), 깊이 센서(105) 및 카메라(106)는 3D 의류 모델 복원 장치(101) 또는 별도의 구동 장치를 통해 신호를 수신할 수 있다. 턴테이블(104)은 수신한 신호에 대응하여 미리 설정된 회전 각도에 따라 회전되며, 깊이 센서(105)와 카메라(106)는 수신한 신호에 대응하여 마네킹(102)에 입혀진 의류(103)를 캡쳐할 수 있다. 여기서, 턴테이블(104), 깊이 센서(105), 카메라(106)는 카메라 교정(camera calibration) 방법을 통해 각각의 상대적 위치가 확인될 수 있다.
또한, 깊이 센서(105)와 카메라(106)는 신호를 수신하면, 마네킹(102)에 입혀진 의류(103)을 캡쳐하기 위해 높이와 방향이 설정될 수 있다. 이 때, 깊이 센서(105)와 카메라(106)는 높이와 방향이 고정될 수 있으며, 고정될 경우, 높이와 방향을 설정하는 과정은 생략될 수 있다.
3D 의류 모델 복원 장치(101)는 깊이 센서(105)와 카메라(106)를 통해 마네킹(102)에 입혀진 의류(103)의 영상 정보를 캡쳐할 수 있다. 이 때, 3D 의류 모델 복원 장치(101)는 턴테이블이 회전하는 각도에 대응하여 마네킹(102)에 입혀진 의류(103)의 영상 정보를 캡쳐함으로써, 회전 각도별 의류(103)의 영상 정보를 캡쳐할 수 있다.
3D 의류 모델 복원 장치(101)는 캡쳐된 영상 정보에 기초하여 임시 모델을 생성할 수 있다. 여기서, 임시 모델은 캡쳐된 영상 정보에 기초하여 의류의 외형 정보 및 텍스쳐 정보를 포함할 수 있다. 그리고, 3D 의류 모델 복원 장치(101)는 임시 모델을 이용하여 최종적인 의류 모델을 생성할 수 있다. 의류 모델은 마네킹에 입혀진 의류의 3차원 모델로써, 드레이핑 된 의류의 형태를 포함할 수 있다.
또한, 3D 의류 모델 복원 장치(101)는 현재 의류의 복원 상황을 디스플레이의 UI를 통해 제공할 수 있다. 3D 의류 모델 복원 장치(101)는 의류에 대응하는 의류 모델을 생성하는 과정을 실시간으로 가시화 함으로써, 의류 모델에 대한 정확도를 향상시킬 수 있다.
도 2는 일실시예에 따른 3D 의류 모델 복원 장치의 세부 구성을 도시한 도면이다.
도 2를 참고하면 3D 의류 모델 복원 장치(201)는 영상 정보 캡쳐부(202), 임시 모델 생성부(203) 및 의류 모델 생성부(204)를 포함할 수 있다.
영상 정보 캡쳐부(202)는 마네킹에 입혀진 의류의 영상 정보를 캡쳐할 수 있다. 영상 정보 캡쳐부(202)는 턴테이블의 회전 각도에 기초하여 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 캡쳐할 수 있다. 구체적으로, 영상 정보 캡쳐부(202)는 턴테이블이 회전하는 회전 각도와 동일하게 회전하는 마네킹에 입혀진 의류에 대하여 회전 각도 별로 영상 정보를 캡쳐할 수 있다.
여기서, 캡쳐된 영상 정보는 캡쳐되는 과정에서 발생하는 측정 노이즈와 배경을 포함하고 있어 측정 노이즈를 최소화되고, 배경이 제거될 수 있다. 캡쳐된 영상 정보의 측정 노이즈를 제거하는 구성은 도 3을 통해 자세히 설명하도록 한다.
임시 모델 생성부(203)는 캡쳐한 영상 정보를 이용하여 상기 의류의 외형 정보 및 텍스쳐 정보를 포함하는 임시 모델을 생성할 수 있다. 상세하게, 임시 모델 생성부(203)는 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 상기 의류의 외형 정보를 생성할 수 있다. 임시 모델 생성부(203)는 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 3차원 공간 상의 위치를 계산하고, 계산된 위치에 대응하여 3D 메쉬 형태를 갖는 의류의 외형 정보를 포함할 수 있다.
임시 모델 생성부(203)는 의류의 외형 정보에 포함된 마네킹을 제거할 수 있다. 임시 모델 생성부(203)는 마네킹을 제거하면서 의류의 일부를 제거할 수 있다. 따라서, 임시 모델 생성부(203)는 마네킹을 제거하면서 삭제된 의류의 일부분에 대응하여 구멍 메움 기술을 통해 복원할 수 있다. 자세한 사항은 도 4의 단계(403)에서 자세히 설명하도록 한다.
그리고, 임시 모델 생성부(203)는 캡쳐된 영상 정보에 포함된 색상 정보를 이용하여 상기 의류의 외형 정보에 매핑되는 텍스쳐 정보를 포함할 수 있다. 구체적으로, 임시 모델 생성부(203)는 임시 모델을 2차원 매개 변수화(parameterization)하여 각 버텍스의 텍스쳐 좌표를 추출할 수 있다. 여기서, 임시 모델 생성부(203)는 캡쳐된 영상 정보에 포함된 조명 효과를 제거할 수 있다. 자세한 구성은 도 4의 단계(405)에서 자세히 설명하도록 한다.
그리고, 임시 모델 생성부(203)는 추출한 텍스쳐 좌표를 외형 정보의 3D 메쉬에 매핑되도록 2D 공간에 랜더링하여 텍스쳐의 각 텍셀에 매핑되는 3D 공간을 추출할 수 있다. 임시 모델 생성부(203)는 각 텍셀의 색상을 결정하기 위해 매핑된 3D 공간에서 챕쳐된 영상 정보의 가상 위치와의 가시성 테스트한 후, 기록된 색상 정보를 바탕으로 텍셀 값을 결정할 수 있다.
임시 모델 생성부(203)는 위의 과정을 통해 생성된 의류의 외형 정보 및 텍스쳐 정보를 포함하는 임시 모델을 생성할 수 있다. 또한, 임시 모델 생성부(203)는 생성된 임시 모델을 뷰어를 통해 실시간으로 사용자에게 제공할 수 있다. 일례로, 임시 모델 생성부(203)는 도 3에 도시된 것과 같이 디스플레이(301)의 UI를 통해 임시 모델을 제공할 수 있다. 자세한 구성은 도 3을 통해 설명하도록 한다.
여기서, 영상 정보 캡쳐부(202), 임시 모델 생성부(203)는 순차적으로 수행될 수 있다. 다시 말해, 영상 정보 캡쳐부(202), 임시 모델 생성부(203)는 일괄적으로 의류의 영상 정보를 캡쳐하고, 캡쳐된 영상 정보에 대하여 노이즈와 배경을 제거하고 및 임시 모델을 생성하는 것이 아니라, 캡쳐된 하나의 영상 정보에 대하여 실시간으로 노이즈와 배경 제거하고 임시 모델을 생성할 수 있다. 즉, 하나의 영상 정보에 대한 임시 모델이 생성되면 영상 정보 캡쳐부(202)는 턴테이블의 회전 각도에 대응하여 회전된 의류에 대한 영상 정보를 다시 캡쳐하고, 노이즈와 배경 제거한 후, 임시 모델 생성부(203)는 임시 모델을 생성하는 과정을 반복적으로 수행할 수 있다.
즉, 3D 의류 모델 복원 장치(201)는 턴테이블의 각도와 깊이 센서 및 카메라의 방향을 순차적으로 조작하면서 지속적으로 영상 정보에 대한 임시 모델을 생성할 수 있다.
여기서, 임시 모델은 턴테이블의 각 회전 각도별 캡쳐된 영상 정보에 대응하는 외형 정보에 대하여 부분적인 3D 패치 데이터로 구성될 수 있다. 즉, 임시 모델은 하나의 모델로 이용된 상태가 아니라, 각각의 3D 패치 데이터로 연결되지 않으며 아바타에 시뮬레이션하기 적합하지 않은 상태일 수 있다. 그러므로, 임시 모델은 시뮬레이션에 적합한 형태를 갖기 위한 이용 과정이 이루어져야 한다.
따라서, 임시 모델 생성부(203)는 연결되지 않은 임시 모델을 접합된 임시 모델로 생성할 수 있다. 구체적으로, 임시 모델은 부분적인 3D 패치 데이터로 구성되어 3D 패치 데이터의 측정점 별로 데이터의 신뢰도를 포함할 수 있다. 여기서, 3D 패치 데이터의 측정점은 턴테이블의 회전 각도에 따라 캡쳐되는 의류의 위치점을 의미할 수 있다. 즉, 3D 패치 데이터의 측정점은 깊이 센서에 의한 변이 정도를 측정하기 위한 기준점이 될 수 있다.
임시 모델 생성부(203)는 3D 패치 데이터의 측정점을 기준으로 일정반경의 구와 같이 일정 영역 내에 존재하는 복셀에 대해 누적하여 증분할 수 있다. 다시 말해, 임시 모델 생성부(203)는 일정 영역 내에 존재하는 복셀에 대해 3D 패치 데이터를 획득한 카메라의 3차원 위치에서의 상대적인 거리값을 임시 모델의 신뢰도에 곱해서 얻어진 값을 복셀에 누적하여 증분할 수 있다.
이 때, 일정 영역 내에 존재하는 복셀들은 개별적인 복셀을 기준으로 복셀에서 카메라 원점을 향해 3차원 ray를 생성하고, 생성된 ray를 이용하여 각 복셀별로 상대적인 거리값을 계산할 수 있다. 상대적인 거리값은 카메라 원점에서 복셀간의 거리와 카메라 원점에서 ray와 교차하는 3D 패치상의 측정점 간의 거리 차이 값을 의미할 수 있다. 또한, 상대적인 거리값은 복셀이 카메라 원점을 기준으로 패치상의 측정점보다 가까울 경우, 양수 값을 가지며, 멀어질수록 음수 값을 가질 수 있다. 그리고, 복셀은 각 카메라에서 얻어진 3D 패치 데이터에 대해 상대 거리값을 누적할 수 있다.
임시 모델 생성부(203)는 3D 패치 데이터와 복셀간의 공간상 교차 정보를 이용해 교차가 발생한 복셀에 각 패치에서 측정된 3D 측정점 정보와 신뢰도 값을 기록할 수 있다. 임시 모델 생성부(203)는 모든 복셀에 대해 의류의 영상 정보를 캡쳐하는 과정에서 얻어진 3D 패치 데이터의 교차를 통한 측정점과 신뢰도가 수집되면 수집된 복셀의 정보를 이용해 하나의 통합된 3D 메쉬 형태의 외형 정보를 생성할 수 있다. 이 때, 임시 모델 생성부(203)는 3D 메쉬 형태의 외형 정보를 생성함으로써, 하나로 접합된 임시 모델을 생성할 수 있다.
의류 모델 생성부(204)는 임시 모델을 이용하여 상기 의류에 대응하는 의류 모델을 생성할 수 있다. 구체적으로, 의류 모델 생성부(204)는 의류의 움직임에 따른 형태를 표현하기 위해 임시 모델을 계층적으로 변환하여 의류 모델을 생성할 수 있다. 다시 말해, 실존하는 의류는 다양한 형태를 갖는다. 실존하는 의류는 홀겹 또는 여러 겹으로 제작되거나, 리본, 레이스, 브로치, 비즈 등 액세서리가 장착될 수 있다. 이러한 경우, 일반적으로는 각각의 층을 구분하기가 어려워 최외각 층을 기준으로 의류 모델로 복원될 수 있다. 이렇게 복원된 의류 모델은 시뮬레이션에 의한 의류의 움직임과 실제 의류의 움직임에 큰 차이가 발생할 수 있다. 따라서, 의류 모델 생성부(204)는 이러한 움직임의 차이를 최소화하기 위해 의류를 계층적으로 변환하여 의류 모델을 생성할 수 있다.
의류 모델 생성부(204)는 의류를 표현하기 위한 재질의 구조적 특성에 따라 임시 모델의 재질을 재구조화하여 의류 모델을 생성할 수 있다. 의류 모델 생성부(204)는 의류 모델을 시뮬레이션하는데 있어 보다 자연스러운 의류 재질을 표현하기 위해 임시 모델의 높이별 윤곽선을 추출하고, 추출된 윤곽선을 기초하여 의류 재질에 따라 임시 모델의 재질을 재구조화 할 수 있다.
의류 모델 생성부(204)는 마네킹의 부위별 크기를 조절하여 의류의 부위별로 인체 허용 크기 및 의류의 탄성 중 적어도 하나를 포함하는 물리적 특성을 반영하여 의류 모델을 생성할 수 있다.
의류 모델 생성부(205)는 임시 모델의 정밀도를 고려하여 패턴 단위로 상기 임시 모델을 간략화하여 의류 모델을 생성할 수 있다. 의류 모델 생성부(205)는 실시간으로 의류 모델이 시뮬레이션 될 수 있도록 임시 모델을 다단계화하여 정밀도를 간략화 할 수 있다.
3D 의류 모델 복원 장치는 실존하는 의류를 의류 모델로 디지털화하여 사용자가 직접 의류를 착용하지 않고도, 의류의 어울림 정도 또는 피팅 정도를 체험하는 시뮬레이션에 적용될 수 있도록 의류에 대응하는 의류 모델을 생성할 수 있는 장치일 수 있다.
3D 의류 모델 복원 장치는 의류를 캡쳐한 영상 정보에 기초하여 생성된 임시 모델을 시뮬레이션에 적합하도록 각 단계별로 변형함으로써, 기존의 디지털화된 의류 모델에 비해 사실성을 높일 수 있다.
도 3은 일실시예에 따른 임시 모델을 생성하는 과정을 도시한 도면이다.
도 3을 참고하면, 캡쳐된 영상 정보는 캡쳐되는 과정에서 측정 노이즈와 배경이 발생할 수 있다. 그리고, 캡쳐된 영상 정보는 노이즈를 줄이는 방법을 통해 측정 노이즈를 최소화되고, 배경이 제거될 수 있다.
노이즈를 줄이는 방법은 캡쳐된 영상 정보의 정확도에 따라 확률 기반으로 처리될 수 있다. 다시 말해, 캡쳐된 영상 정보는 턴테이블의 회전 각도에 따라 의류가 캡쳐됨에 따라 캡쳐된 영상 정보의 측정점을 기준으로 주변의 영상 정보(301)가 함께 캡쳐될 수 있다. 이 때, 함께 캡쳐된 주변의 영상 정보(301)는 깊이 센서의 중심으로부터 측정된 영상 정보가 아님으로 의류를 복원하기 위한 영상 정보로써의 정확도가 떨어질 수 있다.
다시 말해, 함께 캡쳐된 주변의 영상 정보(301)는 깊이 센서의 특성에 의해 발생한 에러일 수 있다. 일례로, 함께 캡쳐된 주변의 영상 정보(301)는 도 3에 도시된 것과 같이 의류의 가장 자리 부분에 대한 영상을 의미할 수 있다.
따라서, 캡쳐된 영상 정보는 턴테이블의 회전각도에서 개별 관심 측정점 주변의 측정 3D 데이터에 얻을 수 있는 카메라의 깊이 방향으로의 변이가 클 경우 측정된 데이터의 신뢰도를 낮게 설정될 수 있다. 그리고, 캡쳐된 영상 정보는 설정된 신뢰도를 중심으로 하나의 판 형태를 갖는 의류 모델로 생성될 수 있다.
도 4은 일실시예에 따른 3D 의류 모델 복원 장치를 통한 디스플레이의 UI를 도시한 도면이다.
도 4를 참고하면, 3D 의류 모델 복원 장치는 디스플레이(401)의 UI를 통해 의류(402)를 제공할 수 있다. 3D 의류 모델 복원 장치는 캡쳐된 영상 정보에 대응하여 생성된 임시 모델을 사용자에게 실시간으로 제공할 수 있다. 3D 의류 모델 복원 장치는 임시 모델을 실시간으로 가시화함으로써, 사용자에게 의류의 디지털화에 따른 진행 상황을 제공할 수 있다.
또한, 3D 의류 모델 복원 장치는 의류 모델을 이용한 최종적인 의류 모델을 디스플레이(401)의 UI를 통해 제공할 수 있다. 이 때, 사용자는 UI 툴(403)를 조작하여 완성된 의류 모델을 다 각도에서 확인할 수 있다. 그리고, 사용자는 최종 모델에 대하여 추가적인 작업이 필요한 경우, UI 툴(403)를 이용하여 해당 부분을 선택한 후, 조작 툴(404)를 조작하여 부분적으로 의류의 영상 정보에 대한 스캔 작업을 수행할 수 있다.
다시 말해, 3D 의류 모델 복원 장치는 디스플레이(401)의 UI를 통해 복원이 완료된 의류 모델에 대하여 추가적인 스캔 작업을 진행할 수 있다. 그리고, 3D 의류 모델 복원 장치는 추가적인 스캔 작업을 통해 생성된 임시 모델을 누적할 수 있는 기술(accumulative)을 포함할 수 있다.
구체적으로, 3D 의류 모델 복원 장치는 추가적인 스캔 작업을 통해 생성된 임시 모델을 완료된 의류 모델에 추가할 수 있는 구조를 포함할 수 있다. 다시 말해, 3 D 의류 모델 복원 장치는 추가적인 스캔 작업을 통해 생성된 임시 모델을 보다 편리하게 추가할 수 있도록 의류에 대한 공간을 분할하고, 분할된 공간을 활용하여 추가적인 스캔 작업을 통해 생성된 임시 모델을 추가할 수 있다. 즉, 3D 의류 모델 복원 장치는 의류에 대한 공간을 분할한 후, 분할된 공간에 연관된 임시 모델을 할당하여 공간 단위로 처리할 수 있다.
이 때, 3D 의류 모델 복원 장치는 의류의 영상 정보를 캡쳐하고, 캡쳐된 영상 정보에 기초한 의류의 외형 정보를 생성하는 과정을 반복하는 작업을 통해 추가적인 임시 모델을 생성할 수 있다.
3D 의류 모델 복원 장치는 공간을 균등 분할하는 복셀(voxel) 기반의 데이터 처리 기술을 이용할 수 있다. 다시 말해, 3D 의류 모델 복원 장치는 디지털로 복원하고자 하는 의류를 3차원 공간으로 정의할 수 있다. 그리고, 정의된 공간을 특정 복셀 크기로 균등 분할하여 일정 크기를 갖는 복셀로 3차원 공간을 표현할 수 있다. 3D 의류 모델 복원 장치는 일정 크기를 갖는 복셀에 대한 3차원 공간 정보에 기초하여 임시 모델을 공간 단위로 할당할 수 있다. 3D 의류 모델 복원 장치는 임시 모델을 공간 단위로 할당함으로써, 의류 모델을 생성할 수 있다.
그리고, 3D 의류 모델 복원 장치는 추가적인 스캔 작업이 요구되는 해당 공간 단위에 대응하여 추가적인 스캔 작업을 통해 생성된 임시 모델을 할당함으로써, 의류 모델을 누적화할 수 있다.
따라서, 3D 의류 모델 복원 장치는 추가적인 스캔 작업을 통해 생성된 임시 모델이 추가되는 경우, 의류 모델에 포함된 모든 데이터를 변경하는 것이 아니라, 공간 단위에 기초하여 변화가 발생된 공간의 데이터를 변경함으로써, 처리 효율을 향상시킬 수 있다.
도 5는 일실시예에 따른 3D 의류 모델 복원 방법을 도시한 도면이다.
단계(501)에서 3D 의류 모델 복원 장치는 턴테이블의 회전 각도에 기초하여 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 캡쳐할 수 있다. 여기서, 캡쳐된 의류의 영상 정보는 캡쳐하는 과정에서 발생하는 측정 노이즈 및 배경이 제거될 수 있다. 이 때, 캡쳐된 의류의 영상 정보는 데이터의 정확도를 기반으로 신뢰도를 포함할 수 있다.
단계(502)에서 3D 의류 모델 복원 장치는 캡쳐한 영상 정보의 깊이 정보를 이용하여 의류의 외형 정보를 생성할 수 있다. 구체적으로, 3D 의류 모델 복원 장치는 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 3차원 공간 상의 위치를 계산하고, 계산된 위치에 대응하여 3D 메쉬 형태를 갖는 의류의 외형 정보를 생성할 수 있다.
단계(503)에서 3D 의류 모델 복원 장치는 의류의 외형 정보에 포함된 마네킹을 제거할 수 있다. 여기서, 마네킹은 의류의 형태를 보존하기 위해 사용되었지만 복원되는 의류 모델에서는 제거되어야 한다. 따라서, 3D 의류 모델 복원 장치는 마네킹에 대하여 정보를 미리 추출하고, 추출된 정보에 대응하여 마네킹을 제거할 수 있다.
일례로, 3D 의류 모델 복원 장치는 마네킹에 대하여 특정 색상으로 제작하고, 의류 모델 생성할 때 특정 색상으로 제작된 마네킹을 제거하는 방법을 활용할 수 있다. 이러한 방법은 영화, 드라마 등에 특수촬영에 사용되는 방법으로 크로마키 방법이라 한다. 여기서, 크로마키 방법을 이용할 경우에는 의류의 색상에 따라 다양한 색상으로 제작된 마네킹을 사용해야 된다.
다른 일례로, 3D 의류 모델 복원 장치는 의류 모델을 생성하기 전에 마네킹에 대응하는 3D 모델을 복원할 수 있다. 그리고, 3D 의류 모델 복원 장치는 의류 모델을 생성할 때 미리 제작된 마네킹의 3D 모델을 임시 모델에서 제거함으로써, 마네킹을 제거할 수 있다. 이러한 방법은 사전에 복원된 마네킹의 위치, 방향과 의류가 입혀진 마네킹의 위치, 방향을 일치시키는 작업이 요구된다.
또 다른 일례로, 3D 의류 모델 복원 장치는 영상 정보의 깊이 정보와 색상 정보를 활용하여 영상을 비교하는 방법을 통해 마네킹을 제거할 수 있다. 다시 말해, 3D 의류 모델 복원 장치는 임시 모델을 2차원 형태의 영상 정보로 전사(projection)할 수 있다. 그리고, 3D 의류 모델 복원 장치는 전사된 영상 정보와 캡쳐된 영상 정보를 비교하여 그 차이를 최소화하는 과정을 통해 마네킹을 제거할 수 있다.
이 때, 3D 의류 모델 복원 장치는 마네킹과 의류의 밀착 정보가 높은 경우, 마네킹 제거시 의류의 일부도 같이 제거되어 제거된 부분에 구멍이 생길 수 있다. 이 때, 마네킹과 의류의 밀착 정도는 의류의 재질 및 탄성에 의해 결정될 수 있다. 다시 말해, 의류의 재질 및 탄성이 높은 경우, 마네킹과 의류의 밀착 정도는 높으며, 의류의 재질 및 탄성이 낮은 경우, 마네킹과 의류의 밀착 정도는 낮을 수 있다. 일례로, 의류가 탄성이 좋은 쫄 티인 경우, 마네킹과 의류의 밀착 정도는 높다고 할 수 있다. 또한, 네킹과 의류의 밀착 정도에 의해 의류가 삭제되는 이유는 마네킹을 제거하는 기술의 오차보다 마네킹과 의류의 밀착 정도가 높아 마네킹 삭제 시, 의류도 함께 삭제될 수 있다.
3D 의류 모델 복원 장치는 구멍 메움 기술을 이용하여 제거된 의류를 복원할 수 있다. 다시 말해, 3D 의류 모델 복원 장치는 의류가 삭제된 부분이라고 판단된 구멍의 가장자리에서부터 구멍을 향하여 면 방향으로의 곡률을 고려하여 면을 확장하여 삭제된 의류를 복원할 수 있다.
그리고, 3D 의류 모델 복원 장치는 제거된 부분에 있어, 의도된 것인지 오차에 의한 것인지 구분하기 위하여 캡쳐된 영상 정보와 임시 모델을 비교할 수 있다.
또 다른 일례로, 3D 의류 모델 복원 장치는 마네킹을 깊이 센서가 감지하지 못하는 재질로 제작하여 마네킹을 제거할 수 있다. 키넥트는 적외선 패턴을 사물에 투영해 반사 패턴을 적외선 센서로 감지하는 방식을 사용된다. 이 때, 키넥트는 검은색의 특정 재질의 경우 패턴이 흡수되어 그 재질을 감지하지 못한다. 3D 의류 모델 복원 장치는 이러한 특성을 이용하여 마네킹을 키넥트가 감지하지 못하는 재질로 제작하여 마네킹을 보다 편리하게 제거할 수 있다.
단계(504)에서 3D 의류 모델 복원 장치는 캡쳐한 의류의 영상 정보에 포함된 색상 정보를 이용하여 텍스쳐 정보를 생성할 수 있다.
단계(505)에서 3D 의류 모델 복원 장치는 색상 정보에 포함된 조명 정보를 제거할 수 있다. 3D 의류 모델 복원 장치는 의류 모델에 대한 사실성을 부여하기 위해 캡쳐된 영상 정보에 포함된 색상 정보에서 조명 정보를 제거할 수 있다. 그리고, 3D 의류 모델 복원 장치는 최종적으로 생성된 의류 모델을 시뮬레이션 할 때에 제거된 조명 정보를 부가하여 재조명(relighting)하는 방식을 사용할 수 있다.
일례로 3D 의류 모델 복원 장치는 의류의 모든 방향에서 동일한 세기로 조명을 가하고, 조명의 위치와 모양에 따른 효과를 미리 제거 할 수 있다.
다른 일례로, 3D 의류 모델 복원 장치는 조명의 초기 위치와 세기를 임의로 설정하고 임시 모델의 외형 정보를 이용하여 사실적 렌더링을 수행할 수 있다. 3D 의류 모델 복원 장치는 렌더링된 결과와 캡쳐된 영상 정보에 포함된 색상 정보를 비교하여 설정된 조명의 위치와 세기를 조정할 수 있다. 3D 의류 모델 복원 장치는 렌더링된 결과와 캡쳐된 영상 정보에 포함된 색상 정보와의 픽셀 단위 차이가 특성 수치 이하가 될 때까지 비교 동작을 반복할 수 있다.
단계(506)에서 3D 의류 모델 복원 장치는 임시 모델을 생성할 수 있다. 이 때, 3D 의류 모델 복원 장치는 단계(402-405) 과정을 수행한 결과로 임시 모델을 생성할 수 있다.
단계(507)에서 3D 의류 모델 복원 장치는 임시 모델에 대한 계층화를 수행할 수 있다. 구체적으로, 3D 의류 모델 복원 장치는 시뮬레이션이 의류의 움직임과 실제 의류의 움직임 간에 발생하는 차이를 최소화하고자 임시 모델을 각 단계별로 계층화할 수 있다.
일례로, 3D 의류 모델 복원 장치는 플라멩고 드레스와 같이 러플이 있는 의류에 대한 의류 모델을 생성할 수 있다. 이 때, 3D 의류 모델 복원 장치는 플라멩고 드레스의 전체적인 움직임과 전체적인 움직임 내 세부적인 움직임으로 나뉘고 이를 각각의 단계로 나누어 모델링하여 계층화 할 수 있다. 3D 의류 모델 복원 장치는 플라멩고 드레스에 러플이 표현되지 않는 1단계, 러플을 표현하는 2단계로 각 단계를 계층화할 수 있다. 그리고, 3D 의류 모델 복원 장치는 각 단계에 기초하여 의류의 초기 형상을 기준으로 바인딩하여 플라멩고 드레스의 러플을 표현할 수 있다.
또한, 3D 의류 모델 복원 장치는 리본과 같은 액세서리가 시뮬레이션에 의해 위치가 이동하면 다른 부분에 밀착될 수 있다. 3D 의류 모델 복원 장치는 이러한 경우에 대응하여 이동하기 전 위치에서 가려진 영상 정보가 사전에 획득되지 않았으므로 구멍이 발생할 수 있다. 이 때, 3D 의류 모델 복원 장치는 구멍 메움 기술을 이용하여 악세사리 이동으로 인해 발생한 구멍을 보간할 수 있다.
단계(508)에서 3D 의류 모델 복원 장치는 의류를 표현하기 위한 재질의 구조적 특성에 따라 임시 모델의 재질을 재구조화하여 의류 모델을 생성할 수 있다. 일반적인 질량-스프링(mass-spring) 기반 시뮬레이션에서는 버텍스를 mass, edge를 스프링으로 모델링할 수 있다. 여기서, 외형 정보를 포함하는 임시 모델은 질량-스프링 방식을 적용하면 실제 의류의 구조적인 차이로 인해 기대되는 시뮬레이션 결과를 얻기 어렵다.
따라서, 3D 의류 모델 복원 장치는 는 의류 모델을 시뮬레이션하는데 있어 보다 자연스러운 의류 재질을 표현하기 위해 임시 모델의 높이별 윤곽선을 추출하고, 추출된 윤곽선을 기초하여 의류 재질에 따라 임시 모델의 재질을 재구조화 할 수 있다.
단계(509)에서 3D 의류 모델 복원 장치는 마네킹의 부위별 크기를 조절하여 의류의 부위별로 인체 허용 크기 및 의류의 탄성 중 적어도 하나를 포함하는 물리적 특성을 반영하여 의류 모델을 생성할 수 있다.
다시 말해, 3D 의류 모델 복원 장치는 마네킹을 이용하여 의류의 물리적 특성을 측정할 수 있다. 3D 의류 모델 복원 장치는 단계(510)를 통해 가슴둘레, 허리둘레 등 각 부위별로 마네킹의 크기를 조절하고 복원하고자 하는 의류의 부위별 최대 허용 크기와 탄성 등을 측정할 수 있다. 측정된 물리적 특성은 질량-스프링 모델의 각 스프링에 적용되는 수치로 변환하여 시뮬레이션에서 이용할 수 있도록 활용이 가능하다.
단계(511)에서 3D 의류 모델 복원 장치는 임시 모델을 여러 단계의 정밀도를 이용하여 간략화 할 수 있다. 3D 의류 모델 복원 장치는 임시 모델을 사용하는 단말의 컴퓨팅 성능을 고려하여 정밀도가 낮은 임시 모델 또는 정밀도가 높은 임시 모델을 생성할 수 있다. 즉, 3D 의류 모델 복원 장치는 단말의 컴퓨팅 성능에 비해 시뮬레이션 또는 가시화가 필요한 경우, 정밀도가 낮은 모델을 생성할 수 있다. 반대로 3D 의류 모델 복원 장치는 정교하고 사실적인 시뮬레이션이 필요한 경우, 정밀도가 높은 임시 모델을 생성할 수 있다.
일례로, 3D 의류 모델 복원 장치는 에지(edge)를 하나 선택해 간략화 오차를 최소로 하는 버텍스를 에지 위에 생성하고 그 에지에 연결된 두 개의 버텍스를 생성된 버텍스 위치로 옮겨서 두 버텍스를 하나로 만드는 edge collapse 방식을 사용하여 임시 모델을 간략화 할 수 있다.
다른 일례로, 3D 의류 모델 복원 장치는 임시 모델의 구조가 일정한 패턴을 반복한다는 것을 이용하여 패턴 단위로 간략화를 수행할 수 있다. 또한, 3D 의류 모델 복원 장치는 간략화 후보군의 위치가 간략화 시 임시 모델의 실루엣에 크게 영향을 주는 부분이면 다른 후보군에 비해 우선 순위를 낮추는 방법으로 외형 변형을 최소화할 수 있다.
단계(512)에서 3D 의류 모델 복원 장치는 임시 모델을 이용하여 단계(407-411) 과정을 수행한 결과로 최종적인 의류에 대응하는 의류 모델을 생성할 수 있다.
3D 의류 모델 복원 장치는 공간을 균등 분할하는 복셀(voxel) 기반의 데이터 처리 기술을 이용할 수 있다.
그리고, 3D 의류 모델 복원 장치는 의류 모델을 포함하는 공간에 저장된 데이터의 분포 및 공간간 상호 위치 정보를 활용하여 의류 모델을 재생성할 수 있다. 데이터의 분포는 공간에 데이터 존재 여부만 고려하는 이항적인(binary) 방법부터 공간과 모델 면 사이의 거리를 고려하는 방법 등 다양한 방법으로 표현이 가능할 수 있다. 이러한 정보들로부터 3D 모델을 생성하는 대표적인 방법으로는 마칭큐브(marching cube)를 포함할 수 있다.
여기서, 의류의 일부가 복원된 임시 모델은 구멍 메움 기술을 통해 의류의 형태로 표현되나, 버텍스가 많아 의류 체험 서비스에 필요한 가시화 및 옷감 시뮬레이션의 성능을 저하시킬 수 있다. 따라서, 3D 의류 모델 복원 장치는 복원된 임시 모델의 복잡도를 줄이고 시뮬레이션에 적합한 형태로 임시 모델을 최적화 할 수 있다.
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
101: 3D 의류 모델 복원 장치 102: 마네킹
103: 의류 104: 턴테이블
105: 깊이 센서 106: 카메라

Claims (20)

  1. 마네킹에 입혀진 의류의 영상 정보를 캡쳐하는 단계;
    상기 캡쳐한 영상 정보를 이용하여 상기 의류의 외형 정보 및 텍스쳐 정보를 포함하는 임시 모델을 생성하는 단계;
    상기 임시 모델을 이용하여 상기 의류에 대응하는 의류 모델을 생성하는 단계;
    를 포함하는 3D 의류 모델 복원 방법.
  2. 제1항에 있어서,
    상기 캡쳐하는 단계는,
    턴테이블의 회전 각도에 기초하여 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 캡쳐하는 3D 의류 모델 복원 방법.
  3. 제1항에 있어서,
    상기 임시 모델을 생성하는 단계는,
    상기 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 3차원 공간 상의 위치를 계산하고, 상기 계산된 위치에 대응하여 3D 메쉬 형태를 갖는 의류의 외형 정보를 포함하는 3D 의류 모델 복원 방법.
  4. 제1항에 있어서,
    상기 임시 모델을 생성하는 단계는,
    상기 캡쳐된 영상 정보에 포함된 색상 정보를 이용하여 상기 의류의 외형 정보에 매핑되는 텍스쳐 정보를 포함하는 3D 의류 모델 복원 방법.
  5. 제1항에 있어서,
    상기 임시 모델을 생성하는 단계는,
    상기 임시 모델의 외형 정보에 포함된 상기 마네킹을 제거하고,
    상기 텍스쳐 정보에 포함된 조명 정보를 제거하여 임시 모델을 생성하는 3D 의류 모델 복원 방법.
  6. 제1항에 있어서,
    상기 임시 모델을 생성하는 단계는,
    상기 의류의 3차원 공간 정보에 따른 상기 임시 모델의 공간 정보 및 상호 위치 정보에 기초하여 임시 모델을 생성하는 3D 의류 모델 복원 방법.
  7. 제1항에 있어서,
    상기 의류 모델을 생성하는 단계는,
    상기 의류의 움직임에 따른 형태를 표현하기 위해 상기 임시 모델을 계층적으로 변환하여 의류 모델을 생성하는 3D 의류 모델 복원 방법.
  8. 제1항에 있어서,
    상기 의류 모델을 생성하는 단계는,
    상기 의류를 표현하기 위한 재질의 구조적 특성에 따라 임시 모델의 재질을 재구조화하여 의류 모델을 생성하는 3D 의류 모델 복원 방법.
  9. 제1항에 있어서,
    상기 의류 모델을 생성하는 단계는,
    상기 마네킹의 부위별 크기를 조절하여 상기 의류의 부위별로 인체 허용 크기 및 의류의 탄성 중 적어도 하나를 포함하는 물리적 특성을 반영하여 의류 모델을 생성하는 3D 의류 모델 복원 방법.
  10. 제1항에 있어서,
    상기 의류 모델을 생성하는 단계는,
    상기 임시 모델의 정밀도를 고려하여 패턴 단위로 상기 임시 모델을 간략화하여 의류 모델을 생성하는 3D 의류 모델 복원 방법.
  11. 마네킹에 입혀진 의류의 영상 정보를 캡쳐하는 영상 정보 캡쳐부;
    상기 캡쳐한 영상 정보를 이용하여 상기 의류의 외형 정보 및 텍스쳐 정보를 포함하는 임시 모델을 생성하는 임시 모델 생성부;
    상기 임시 모델을 이용하여 상기 의류에 대응하는 의류 모델을 생성하는 의류 모델 생성부;
    를 포함하는 3D 의류 모델 복원 장치.
  12. 제11항에 있어서,
    상기 영상 정보 캡쳐부는,
    턴테이블의 회전 각도에 기초하여 턴테이블 위에 위치한 마네킹에 입혀진 의류의 영상 정보를 캡쳐하는 3D 의류 모델 복원 장치.
  13. 제11항에 있어서,
    상기 임시 모델 생성부는,
    상기 캡쳐한 영상 정보에 포함된 깊이 정보를 이용하여 3차원 공간 상의 위치를 계산하고, 상기 계산된 위치에 대응하여 3D 메쉬 형태를 갖는 의류의 외형 정보를 포함하는 3D 의류 모델 복원 장치.
  14. 제11항에 있어서,
    상기 임시 모델 생성부는,
    상기 캡쳐된 영상 정보에 포함된 색상 정보를 이용하여 상기 의류의 외형 정보에 매핑되는 텍스쳐 정보를 포함하는 3D 의류 모델 복원 장치.
  15. 제11항에 있어서,
    상기 임시 모델 생성부는,
    상기 임시 모델의 외형 정보에 포함된 상기 마네킹을 제거하고,
    상기 텍스쳐 정보에 포함된 조명 정보를 제거하여 임시 모델을 생성하는 3D 의류 모델 복원 장치.
  16. 제11항에 있어서,
    상기 임시 모델 생성부는,
    상기 의류의 3차원 공간 정보에 따른 상기 임시 모델의 공간 정보 및 상호 위치 정보에 기초하여 임시 모델을 생성하는 3D 의류 모델 복원 장치.
  17. 제11항에 있어서,
    상기 의류 모델 생성부는,
    상기 의류의 움직임에 따른 형태를 표현하기 위해 상기 임시 모델을 계층적으로 변환하여 의류 모델을 생성하는 3D 의류 모델 복원 장치.
  18. 제11항에 있어서,
    상기 의류 모델 생성부는,
    상기 의류를 표현하기 위한 재질의 구조적 특성에 따라 임시 모델의 재질을 재구조화하여 의류 모델을 생성하는 3D 의류 모델 복원 장치.
  19. 제11항에 있어서,
    상기 의류 모델 생성부는,
    상기 마네킹의 부위별 크기를 조절하여 상기 의류의 부위별로 인체 허용 크기 및 의류의 탄성 중 적어도 하나를 포함하는 물리적 특성을 반영하여 의류 모델을 생성하는 3D 의류 모델 복원 장치.
  20. 제11항에 있어서,
    상기 의류 모델 생성부는,
    상기 임시 모델의 정밀도를 고려하여 패턴 단위로 상기 임시 모델을 간략화하여 의류 모델을 생성하는 3D 의류 모델 복원 장치.
KR1020140040089A 2014-04-03 2014-04-03 3d 의류 모델 복원 방법 및 장치 KR101778833B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140040089A KR101778833B1 (ko) 2014-04-03 2014-04-03 3d 의류 모델 복원 방법 및 장치
US14/590,321 US9542769B2 (en) 2014-04-03 2015-01-06 Apparatus and method of reconstructing 3D clothing model

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140040089A KR101778833B1 (ko) 2014-04-03 2014-04-03 3d 의류 모델 복원 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150115296A true KR20150115296A (ko) 2015-10-14
KR101778833B1 KR101778833B1 (ko) 2017-09-26

Family

ID=54210226

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140040089A KR101778833B1 (ko) 2014-04-03 2014-04-03 3d 의류 모델 복원 방법 및 장치

Country Status (2)

Country Link
US (1) US9542769B2 (ko)
KR (1) KR101778833B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180060160A (ko) * 2016-11-28 2018-06-07 김선영 깊이 카메라의 영상정보를 이용한 3d 비만 관리 시스템
KR200490270Y1 (ko) * 2018-12-03 2019-10-21 강호중 의류촬영용 특수마네킹
KR102469710B1 (ko) * 2021-12-27 2022-11-22 주식회사 딥노이드 인공신경망을 학습시키기 위한 학습 데이터를 생성하기 위한 장치 및 이를 위한 방법
KR102536525B1 (ko) * 2022-06-29 2023-05-26 주식회사 쓰리디뱅크 마커가 구비된 특수 마네킹을 이용한 3d 스캔용 촬영장치

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3175200A4 (en) * 2014-07-31 2018-04-04 Hewlett-Packard Development Company, L.P. Three dimensional scanning system and framework
JP6302132B2 (ja) * 2015-03-20 2018-03-28 株式会社東芝 画像処理装置、画像処理システム、画像処理方法及びプログラム
GB201516700D0 (en) * 2015-09-21 2015-11-04 Metail Ltd Metail Mother
US20170263031A1 (en) * 2016-03-09 2017-09-14 Trendage, Inc. Body visualization system
CN106384381A (zh) * 2016-08-31 2017-02-08 北京维盛视通科技有限公司 二维服装版片的三维展示方法及装置
WO2018052367A1 (en) * 2016-09-14 2018-03-22 Ayne Pte. Ltd. Garment digitization and try-on system and method
CN109891464B (zh) * 2017-01-06 2023-03-07 深圳市三维人工智能科技有限公司 一种3d人体模型的建立方法和系统
US10679408B2 (en) * 2017-02-02 2020-06-09 Adobe Inc. Generating a three-dimensional model from a scanned object
DE102018204083A1 (de) * 2018-03-16 2019-09-19 Adidas Ag Verfahren zum Entwerfen eines Kleidungsstücks, insbesondere zum Entwerfen eines Schuhoberteils.
JP7224112B2 (ja) * 2018-05-21 2023-02-17 Juki株式会社 縫製システム
CN110555903B (zh) 2018-05-31 2023-06-23 北京京东尚科信息技术有限公司 图像处理方法和装置
JP2021531424A (ja) * 2018-07-09 2021-11-18 スワイプ ファッション インコーポレイテッド 形状調整可能なクロマキー互換性のあるマネキンまたはボディスーツ、および関連する３ｄ画像キャプチャ装置
US11562537B2 (en) * 2018-11-14 2023-01-24 Manoj Wad System for rapid digitization of an article
WO2020105760A1 (ko) * 2018-11-23 2020-05-28 수상에스티(주) 3차원 영상 모션인식 기반 관심부위 측정 방법 및 시스템
US11559097B2 (en) * 2019-03-16 2023-01-24 Short Circuit Technologies Llc System and method of ascertaining a desired fit for articles of clothing utilizing digital apparel size measurements
EP3772040A1 (en) 2019-07-30 2021-02-03 Reactive Reality AG Method and computer program product for producing 3-dimensional model data of a garment
CN110672014B (zh) * 2019-08-27 2023-08-22 东莞市精致自动化科技有限公司 一种衣服尺寸测量方法
EP4106998A4 (en) * 2020-02-19 2024-04-10 Auburn University METHOD FOR PRODUCING INDIVIDUALIZED PROTECTIVE CLOTHING BASED ON BODY SCANNING AND RESULTING PRODUCTS
US11640695B2 (en) * 2021-09-20 2023-05-02 Meta Platforms Technologies, Llc Digital garment generation

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR930006430A (ko) 1991-09-06 1993-04-21 천성순 카메라를 이용한 3차원 형상의 좌표 측정 방법 및 자동 입력 장치
GB9626825D0 (en) * 1996-12-24 1997-02-12 Crampton Stephen J Avatar kiosk
GB0101371D0 (en) * 2001-01-19 2001-03-07 Virtual Mirrors Ltd Production and visualisation of garments
FR2837593B1 (fr) * 2002-03-22 2004-05-28 Kenneth Kuk Kei Wang Procede et dispositif de visualisation, d'archivage et de transmission sur un reseau d'ordinateurs d'un modele de vetement
TW200842777A (en) * 2007-04-18 2008-11-01 Chih-Chen Wu Online clothing display system and method thereof
KR101367820B1 (ko) 2009-12-21 2014-02-27 한국전자통신연구원 이동 가능한 다시점 영상 획득 시스템 및 다시점 영상 전처리 방법
US8165711B2 (en) 2010-01-05 2012-04-24 Microsoft Corporation Automated generation of garment construction specification
JP5429713B2 (ja) 2010-03-19 2014-02-26 国際航業株式会社 商品選択システム
US8525828B1 (en) * 2010-05-05 2013-09-03 Amazon Technologies, Inc. Visualization of fit, flow, and texture of clothing items by online consumers

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180060160A (ko) * 2016-11-28 2018-06-07 김선영 깊이 카메라의 영상정보를 이용한 3d 비만 관리 시스템
KR200490270Y1 (ko) * 2018-12-03 2019-10-21 강호중 의류촬영용 특수마네킹
KR102469710B1 (ko) * 2021-12-27 2022-11-22 주식회사 딥노이드 인공신경망을 학습시키기 위한 학습 데이터를 생성하기 위한 장치 및 이를 위한 방법
KR102536525B1 (ko) * 2022-06-29 2023-05-26 주식회사 쓰리디뱅크 마커가 구비된 특수 마네킹을 이용한 3d 스캔용 촬영장치

Also Published As

Publication number Publication date
US20150287242A1 (en) 2015-10-08
KR101778833B1 (ko) 2017-09-26
US9542769B2 (en) 2017-01-10

Similar Documents

Publication Publication Date Title
KR101778833B1 (ko) 3d 의류 모델 복원 방법 및 장치
US11961200B2 (en) Method and computer program product for producing 3 dimensional model data of a garment
US20200380333A1 (en) System and method for body scanning and avatar creation
US10777021B2 (en) Virtual representation creation of user for fit and style of apparel and accessories
US11640672B2 (en) Method and system for wireless ultra-low footprint body scanning
US10573091B2 (en) Systems and methods to create a virtual object or avatar
US10628666B2 (en) Cloud server body scan data system
EP2686834B1 (en) Improved virtual try on simulation service
CN106373178B (zh) 生成人工图像的装置和方法
US20130307851A1 (en) Method for virtually trying on footwear
Magnenat-Thalmann Modeling and simulating bodies and garments
CN103871106A (zh) 利用人体模型的虚拟物拟合方法及虚拟物拟合服务系统
CN105913496B (zh) 一种将真实服饰快速转换为三维虚拟服饰的方法及系统
KR20190114676A (ko) 아바타에 착장된 의상의 전이 패턴 생성 방법
JP5476471B2 (ja) 複雑なおよび／または変形可能なオブジェクトの表現および着用できるオブジェクトの仮想フィッティング
US20170193677A1 (en) Apparatus and method for reconstructing experience items
Carulli et al. ICT technology for innovating the garment design process in fashion industry
KR101803064B1 (ko) 3차원 모델 복원 장치 및 방법
CN114581288A (zh) 一种图像生成方法、装置、电子设备以及存储介质
Wan et al. Shape deformation using skeleton correspondences for realistic posed fashion flat creation
JP2002056405A (ja) テクスチャマッピング処理装置
US20240355138A1 (en) Method and system for wireless ultra-low footprint body scanning
Kubišta et al. Workflow for creating animated digital replicas of historical clothing
Yang Interactive mannequin dressing system for pattern design
Graham The Power of Texture: A New Approach for

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant