KR20210148591A - System for providing smart style information using virtual reality devices and method thereof - Google Patents
System for providing smart style information using virtual reality devices and method thereof Download PDFInfo
- Publication number
- KR20210148591A KR20210148591A KR1020200065634A KR20200065634A KR20210148591A KR 20210148591 A KR20210148591 A KR 20210148591A KR 1020200065634 A KR1020200065634 A KR 1020200065634A KR 20200065634 A KR20200065634 A KR 20200065634A KR 20210148591 A KR20210148591 A KR 20210148591A
- Authority
- KR
- South Korea
- Prior art keywords
- avatar
- style
- virtual reality
- unit
- information
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 238000004458 analytical method Methods 0.000 claims description 32
- 238000012545 processing Methods 0.000 claims description 29
- 239000000835 fiber Substances 0.000 claims description 25
- 238000009877 rendering Methods 0.000 claims description 20
- 239000000463 material Substances 0.000 claims description 9
- 239000000203 mixture Substances 0.000 claims description 8
- 239000003550 marker Substances 0.000 claims description 7
- 210000001015 abdomen Anatomy 0.000 claims description 6
- 238000005452 bending Methods 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 6
- 230000033001 locomotion Effects 0.000 claims description 6
- 210000001061 forehead Anatomy 0.000 claims description 4
- 239000011521 glass Substances 0.000 claims description 4
- 230000008569 process Effects 0.000 description 19
- 230000008859 change Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 230000037237 body shape Effects 0.000 description 10
- 239000004744 fabric Substances 0.000 description 9
- 238000004891 communication Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 229920000742 Cotton Polymers 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 241000272525 Anas platyrhynchos Species 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000007418 data mining Methods 0.000 description 2
- 230000008451 emotion Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000704 physical effect Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 244000025254 Cannabis sativa Species 0.000 description 1
- 235000012766 Cannabis sativa ssp. sativa var. sativa Nutrition 0.000 description 1
- 235000012765 Cannabis sativa ssp. sativa var. spontanea Nutrition 0.000 description 1
- 208000008589 Obesity Diseases 0.000 description 1
- 230000003187 abdominal effect Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000009120 camo Nutrition 0.000 description 1
- 235000005607 chanvre indien Nutrition 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 235000001916 dieting Nutrition 0.000 description 1
- 230000037228 dieting effect Effects 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 239000011487 hemp Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 1
- 235000020824 obesity Nutrition 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007665 sagging Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 230000037303 wrinkles Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0641—Shopping interfaces
- G06Q30/0643—Graphical representation of items or shoppers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0631—Item recommendations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
본 발명은 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 사용자의 신체관련 데이터를 입력받아 3D 아바타를 생성하고, 상기 사용자가 실제 보유한 패션 아이템 및 외부의 데이터 제공 서버로부터 전달받은 패션 아이템의 정보를 저장하고, 상기 사용자의 선택에 따른 패션 아이템들을 상기 아바타에 착용된 상태 또는 스타일 모델에 기반하여 상기 사용자에게 추천하는 패션 아이템들이 상기 아바타에 착용된 상태를 가상현실(VR) 기기를 통해 출력함으로써, 실제 착용하지 않고도 입을 옷을 쉽게 고를 수 있으며, 자신에게 어울리는 패션 아이템을 구매하는데 도움을 받는 것이 가능한 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 관한 것이다.The present invention relates to a system and method for providing smart style information using a virtual reality (VR) device, and more particularly, to a 3D avatar by receiving body-related data of a user, and to a fashion item actually owned by the user and an external device. A state in which fashion item information received from a data providing server of A system for providing smart style information using a virtual reality (VR) device that allows you to easily choose clothes to wear without actually wearing them by outputting them through a virtual reality (VR) device, and to get help in purchasing a fashion item that suits you and to a method therefor.
가상현실(VR, Virtual Reality)은, 사이버 공간(Cyber Space)에서 체험되는 현실을 가리키는데, 이때 사이버 공간이란 컴퓨터를 통해 생성된 가상의 공간으로, 3차원 시각 효과를 통해 현실성을 부여하는 공간을 말한다. 가상현실(VR) 환경은 사용자에게 실감나는 몰입감을 제공하여 실존하는 물체를 시뮬레이션할 수 있을 뿐만 아니라, 실제로 존재하지 않는 물체나 상황을 체험할 수 있도록 하며, 예를 들어 자동차 설계, 시뮬레이션 실험 등의 공학 분야에서부터 의료 분야, 문화 콘텐츠 분야 등에 이르기까지 실로 다양한 분야에 적용될 수 있다.Virtual reality (VR) refers to the reality experienced in cyberspace, where cyberspace is a virtual space created by a computer, a space that provides reality through three-dimensional visual effects. say Virtual reality (VR) environments provide users with a realistic and immersive feeling so that they can not only simulate real objects, but also experience objects or situations that do not actually exist. It can be applied to various fields, from engineering to medical field to cultural contents field.
가상현실(VR)을 구현하기 위한 기술은, 멀티미디어를 뛰어 넘는 차세대 기술로서, 사용자의 입력을 실시간으로 처리하여 현실 세계에 있는 것과 같은 느낌을 받을 수 있도록 하는 기술이다. 이때, 가상현실(VR)을 구현할 때에 360도 이미지를 사용되는데, 첫 번째로 360도 이미지를 얻은 후에, 두 번째로 가상현실(VR) 뷰어(Viewer)를 통해 전시함으로써 가상현실(VR)을 구현할 수 있다. 여기서, 360도 이미지는 보통 카메라의 위치를 고정시키고, 카메라의 몸체를 회전시켜 가면서 연속적으로 얻은 사진들을 적당히 이어 붙임에 의해 생성된다.The technology for realizing virtual reality (VR) is a next-generation technology that goes beyond multimedia, and is a technology that processes user input in real time so that you can feel as if you are in the real world. At this time, a 360-degree image is used when implementing virtual reality (VR). First, after obtaining a 360-degree image, display through a virtual reality (VR) viewer to realize virtual reality (VR). can Here, a 360-degree image is usually created by properly attaching pictures obtained continuously while fixing the position of the camera and rotating the body of the camera.
가상현실(VR) 뷰어는 입력으로 360도 이미지를 받고, 사용자가 특정한 시선 방향을 지정해 주면, 그 시선 방향으로 보았을때의 모습을 360도 이미지로부터 실시간으로 생성하여 보여주게 된다. 가상현실(VR)이 인터넷(Internet) 상에서 보편화됨에 따라 많은 가상현실(VR) 뷰어가 출연하였는데, 많이 사용되고 있는 뷰어들로는 애플 퀵타임 플레이어(Apple Quick Time Player), 매크로미디어 쇽웨이브 플레이어(Macro-media Shockwave Player), PTV뷰어, 애니씽(Anything)3D뷰어, 아이씨미디어 뷰어(iSeeMedia Viewer), iPIX뷰어 등이 있다.The virtual reality (VR) viewer receives a 360-degree image as an input, and when the user designates a specific gaze direction, it generates and shows the 360-degree image in real time when viewed in that gaze direction. As virtual reality (VR) became common on the Internet, many virtual reality (VR) viewers appeared. The most used viewers are Apple Quick Time Player and Macro-media Shockwave. Player), PTV viewer, Anything 3D viewer, iSeeMedia Viewer, and iPIX viewer.
상술한 바와 같은 종래의 가상현실(VR) 콘텐츠 제공 시스템은, 360도 이미지를 얻어 가상현실(VR) 뷰어를 통해 전시해야만 가상현실(VR) 콘텐츠를 제공할 수 있으므로, 사용자가 직접 카메라의 몸체를 회전시켜 가면서 연속적으로 사진들을 얻은 후에 적당히 이어 붙여 360도 이미지를 얻어야 하는 불편함이 있으며, 또한 전문가가 아닌 사용자가 직접 가상현실(VR) 콘텐츠를 제작하거나 편집할 수 없는 단점이 있었다.The conventional virtual reality (VR) content providing system as described above can provide virtual reality (VR) content only after obtaining a 360-degree image and displaying it through a virtual reality (VR) viewer. There is the inconvenience of obtaining a 360-degree image by properly connecting the photos after rotating them, and there is also a disadvantage that non-professional users cannot directly create or edit virtual reality (VR) content.
그러나, 최근 카메라 등에 깊이 센서(depth sensor)의 기능이 탑재됨에 따라, 사용자에 신체정보를 3D로 정확하게 획득하고, 증강현실(Augmented Reality) 기술이 발전함에 따라 사용자의 신체에서 원하는 부분만을 가상으로 랜더링하여 확인할 수 있게 되었다. 이에 따라, 의류를 구매하거나 선택할 때 매번 의류를 실제로 착용하지 않고도 가상으로 착용하며 확인할 수 있는 가상피팅(virtual fitting) 시스템이 활성화되고 있다.However, as a function of a depth sensor is recently installed in a camera, etc., body information is accurately obtained in 3D from a user, and only a desired part of the user's body is rendered virtually as augmented reality technology develops. so it can be verified. Accordingly, when purchasing or selecting clothes, a virtual fitting system that can virtually wear and check clothes without actually wearing them every time is being activated.
구체적으로, 한국등록특허 [10-1707707]에서는, 사용자가 체험 영역에 위치했는지 여부를 판단하는 단계; 상기 사용자가 체험 영역에 위치하면, 사용자가 입력한 설정 정보에 대응하는 3차원 표준 아바타를 로딩하는 단계; 미리 설정된 자세로 있는 사용자의 깊이 영상을 획득하는 단계; 상기 사용자의 깊이 영상을 이용하여 3차원 표준 아바타를 사용자의 외형적 신체 특성이 반영된 사용자 아바타로 변형하는 단계; 상기 사용자가 선택한 가상 아이템을 사용자 아바타에 피팅하는 단계; 및 실시간으로 변화하는 사용자의 움직임을 가상 아이템이 피팅된 사용자 아바타에 적용하는 단계를 포함하는 인체 모델을 이용한 가상 아이템 피팅 방법 및 가상 아이템의 피팅 서비스 제공 시스템을 개시한다.Specifically, in Korea Patent Registration [10-1707707], determining whether the user is located in the experience area; loading a three-dimensional standard avatar corresponding to the setting information input by the user when the user is located in the experience area; acquiring a depth image of a user in a preset posture; transforming a three-dimensional standard avatar into a user avatar in which external physical characteristics of the user are reflected by using the depth image of the user; fitting the virtual item selected by the user to a user avatar; and applying a user's movement that changes in real time to a user avatar to which the virtual item is fitted. Disclosed are a virtual item fitting method using a human body model and a virtual item fitting service providing system.
또한, 한국등록특허 [10-1669927]에서는, 영상을 출력하도록 구성된 표시부; 상기 표시부로부터 미리 설정된 거리 내에 위치한 사용자를 감지하고, 사용자의 영상 정보 및 신체 정보를 획득하도록 구성된 수신부; 상기 영상 정보 및 상기 신체 정보를 이용하여 사용자의 가상 피팅 영상을 생성하도록 구성된 처리부; 및 미리 설정된 영상을 상기 표시부에 출력하며, 상기 미리 설정된 영상의 출력 도중 상기 수신부에 사용자가 감지될 경우 상기 가상 피팅 영상을 상기 표시부에 출력하도록 상기 표시부, 상기 수신부 및 상기 처리부를 제어하는 제어부를 포함하는 가상 피팅 시스템, 구매 촉진을 위한 가상 피팅 서비스 제공 방법 및 이를 위한 컴퓨터 프로그램을 개시하고 있다.In addition, in Korea Patent Registration [10-1669927], a display unit configured to output an image; a receiving unit configured to detect a user located within a preset distance from the display unit and obtain image information and body information of the user; a processing unit configured to generate a virtual fitting image of a user by using the image information and the body information; and a controller for outputting a preset image to the display unit, and controlling the display unit, the receiving unit, and the processing unit to output the virtual fitting image to the display unit when a user is detected by the receiving unit during output of the preset image Disclosed are a virtual fitting system, a method of providing a virtual fitting service for facilitating purchase, and a computer program for the same.
종래의 가상피팅 시스템은 판매자가 제공한 의류를 사용자의 3차원 모델에 정합(렌더링) 시킴으로써, 사용자가 실제 자신의 영상에서 의류를 착용하였을 때의 모습을 직접 시각으로 확인할 수 있었다.In the conventional virtual fitting system, by matching (rendering) the clothes provided by the seller to the user's three-dimensional model, the user can directly visually check the appearance of the clothes in his/her own image.
그러나, 특정 사용자의 가정 내에는 가상피팅을 위한 의류정보를 제공하지 않는 여러 판매자에게 구매한 복수의 의류가 배치되는 것이 일반적이다. 따라서, 특정 사용자는 자신이 구매한 의류나 보관 중인 의류는 전혀 가상피팅을 수행할 수 없다는 한계가 있었다. 따라서, 가상피팅시스템이 개발되었다고 하더라도, 실제 사용자들에게 보편적으로 적용될 수 없는 문제점이 있었다.However, it is common for a plurality of clothing purchased from several sellers who do not provide clothing information for virtual fitting to be arranged in a specific user's home. Therefore, there is a limitation in that a specific user cannot perform virtual fitting on clothes he or she has purchased or stored. Therefore, even if the virtual fitting system was developed, there was a problem that could not be universally applied to real users.
한편, 복수의 의류가 있는 경우에는 사용자가 자신에게 어떠한 의류가 적합한지 모를 수 있다. 따라서, 사용자는 상기 복수의 의류를 직접 입어보거나, 가상피팅을 여러 번 수행해야 하는 번거로움이 있다. 또한, 상기 복수의 의류를 가상피팅을 한다고 하더라도 유행이나 브랜드의 부지, 패션감각의 부재 등으로 자신에게 최적화된 의류를 선택하지 못할 수도 있다.On the other hand, when there are a plurality of clothes, the user may not know which clothes are suitable for him. Accordingly, the user is inconvenient to try on the plurality of clothes directly or to perform virtual fitting several times. In addition, even if the plurality of clothing is virtual fitting, it may not be possible to select clothing optimized for the user due to fashion, brand site, lack of fashion sense, or the like.
한편, 한국공개특허 [10-2017-0006604]에서는, 사용자 단말 또는 스캔 장치로부터 사용자의 신체를 촬영한 스캔 데이터를 수신하는 단계; 수신된 스캔 데이터에 기초하여 사용자의 신체타입을 결정하는 단계; 결정된 신체타입에 대응하는 의류를 선택하는 단계; 및 선택된 의류에 대한 정보를 사용자 단말로 전송하는 단계를 포함하는 것을 특징으로 하는 본 발명의 일 실시예에 따른 서버 장치에 의한 의류 추천 방법이 개시되어 있다.On the other hand, in Korea Patent Laid-Open Patent Publication [10-2017-0006604], receiving scan data of the user's body from a user terminal or a scanning device; determining a user's body type based on the received scan data; selecting clothes corresponding to the determined body type; and transmitting information on the selected clothing to the user terminal.
그러나, 가상피팅 시스템은 가상시스템을 제공하는 판매자가 위치한 특정장소에서만 이용가능하기 때문에, 특정사용자의 신체변화를 지속적으로 관찰하거나 인식하는데 적용될 수 없는 문제점이 있었다. 따라서, 특정 사용자에게 맞춤형으로 가상피팅을 제공하거나 의류를 추천할 수 없는 한계가 있었다.However, since the virtual fitting system is available only in a specific place where the seller providing the virtual system is located, there is a problem in that it cannot be applied to continuously observing or recognizing the body changes of a specific user. Therefore, there is a limit in that it is not possible to provide a customized virtual fitting to a specific user or to recommend clothing.
또한, 종래 가상피팅 시스템은 사용자에게 의류를 추천하더라도 사용자가 상기 의류가 자신에게 실제로 적합한지 확인하거나 검증할 수 없는 한계가 있었다. 예를 들어, 사용자는 현재 가상피팅을 수행하는 장소와 전혀 다른 배경이나 상황에 추천된 의류가 적합한지 판단할 수 없는 문제가 있다.In addition, the conventional virtual fitting system has a limitation in that the user cannot confirm or verify whether the clothing is actually suitable for the user even if the clothing is recommended to the user. For example, there is a problem in that the user cannot determine whether the recommended clothing is suitable for a background or situation completely different from the place where the virtual fitting is currently performed.
한편, 한국등록특허 [10-1682769]에는, 사용자들의 스마트 디바이스에 설치된 어플리케이션을 이용하여 신체사진으로부터 의류사진만을 추출하고, 추출된 의류사진을 사용자의 신체 사이즈에 맞게 리사이징한 후에 사용자 신체정보와 함께 매칭서버에 DB화하면서, 쇼핑몰에 판매되는 의류사진과 함께 데이터베이스를 구축하여 의류정보를 추천하여 상기 사용자단말기로 제공할 수 있는 사용자맞춤형 온라인 패션 코디네이션 자동 매칭방법이 개시되어 있다.On the other hand, in Korea Patent [10-1682769], only clothes photos are extracted from body photos using an application installed on users' smart devices, and the extracted clothes photos are resized to fit the user's body size, and then together with the user's body information. A user-tailored online fashion coordination automatic matching method is disclosed that can recommend clothing information and provide it to the user terminal by building a database together with clothing photos sold in a shopping mall while converting it into a DB in a matching server.
따라서, 본 발명은 상기한 바와 같은 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 사용자의 신체관련 데이터를 입력받아 3D 아바타를 생성하고, 상기 사용자가 실제 보유한 패션 아이템 및 외부의 데이터 제공 서버로부터 전달받은 패션 아이템의 정보를 저장하고, 상기 사용자의 선택에 따른 패션 아이템들을 상기 아바타에 착용된 상태 또는 스타일 모델에 기반하여 상기 사용자에게 추천하는 패션 아이템들이 상기 아바타에 착용된 상태를 가상현실(VR) 기기를 통해 출력함으로써, 실제 착용하지 않고도 입을 옷을 쉽게 고를 수 있으며, 자신에게 어울리는 패션 아이템을 구매하는데 도움을 받는 것이 가능한 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법을 제공하는 것이다.Accordingly, the present invention has been devised to solve the above problems, and an object of the present invention is to generate a 3D avatar by receiving body-related data of a user, and to provide a fashion item actually owned by the user and an external data server Stores the fashion item information received from the avatar, and displays the fashion items worn on the avatar in a state in which the fashion items according to the user's selection are worn on the avatar or the fashion items recommended to the user based on a style model are worn on the avatar ( A system and method for providing smart style information using a virtual reality (VR) device that allows you to easily choose clothes to wear without actually wearing them by outputting them through a VR) device, and to get help purchasing fashion items that suit you will provide
본 발명의 실 시예들의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The purpose of the embodiments of the present invention is not limited to the above-mentioned purpose, and other objects not mentioned will be clearly understood by those of ordinary skill in the art to which the present invention belongs from the following description. .
상기한 바와 같은 목적을 달성하기 위한 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템은, 사용자의 신체관련 데이터를 입력받아 3D 아바타를 생성하고, 상기 사용자가 실제 보유한 패션 아이템 및 외부의 데이터 제공 서버로부터 전달받은 패션 아이템의 정보를 저장하고, 상기 사용자의 선택에 따른 패션 아이템들이 상기 아바타에 착용된 상태 또는 스타일 모델에 기반하여 상기 사용자에게 추천하는 패션 아이템들이 상기 아바타에 착용된 상태를 가상현실(VR) 기기를 통해 출력할 수 있도록 하기 위한 스마트 스타일링 정보 제공 서버(100); 상기 스마트 스타일링 정보 제공 서버에 접속하여, 스타일링 정보를 제공받기 위해 필요한 데이터를 송수신하고, 상기 가상현실(VR) 기기의 디스플레이부를 통해 패션 아이템들이 착용된 아바타를 출력하기 위한 다수의 사용자 단말기(110, 120); 및 상기 사용자 단말기를 통해 상기 스마트 스타일링 정보 제공 서버로부터 스타일링 정보를 제공받는데 소요되는 비용 및, 추천된 패션 아이템을 구매하는데 소요되는 비용을 결제하기 위한 결제 서버(140)를 포함하고, 상기 스마트 스타일링 정보 제공 서버(100)는, 상기 가상현실(VR) 기기로 상기 스타일링 정보 제공을 위한 인터페이스를 제공하는 인터페이스부(101); 상기 인터페이스부를 통하여 송수신되는 데이터에 기초하여 스타일링 정보를 제공하는데 필요한 이미지 처리를 수행하기 위한 이미지 처리부(103); 상기 스타일링 정보 제공을 위해 필요한 데이터를 저장하고 있는 데이터베이스부(104); 상기 사용자의 선택 또는 추천 요청에 따라 결정된 패션 아이템을 분석하여 상기 스타일 모델을 업데이트하기 위한 분석부(105); 및 상기 인터페이스부, 이미지 처리부, 데이터베이스부, 및 분석부를 포함한 각 구성요소를 제어하기 위한 제어부(102)를 포함하는 것을 특징으로 한다.A system for providing smart styling information using a virtual reality (VR) device according to an embodiment of the present invention for achieving the above object generates a 3D avatar by receiving a user's body-related data, and the user Stores owned fashion items and information on fashion items received from an external data providing server, and fashion items recommended to the user based on a state in which the fashion items according to the user's selection are worn on the avatar or a style model are the a smart styling
상기 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템은 상기 스마트 스타일정보 제공 서버로부터의 요청에 따라 패션 아이템에 대한 데이터를 제공하는 데이터 제공 서버(150); 및 사용자의 외형을 스캔하여 3D 이미지 데이터를 제공하는 3D 스캐너(130)를 더 포함하는 것을 특징으로 한다.The smart styling information providing system using the virtual reality (VR) device includes: a
상기 이미지 처리부(103)는, 상기 사용자 단말기 또는 3D 스캐너를 통해 사용자의 신체사이즈 관련 데이터를 입력받기 위한 신체 데이터 획득부(201); 상기 사용자 단말기를 통해 아바타의 조건을 입력받기 위한 아바타 조건 입력부(202); 상기 아바타 조건 입력부를 통해 입력받은 조건 및 아바타 데이터베이스에 근거하여 해당 사용자에 대응하는 아바타를 생성하기 위한 아바타 생성부(203); 상기 사용자 단말기를 통해 입력받은 조건 또는 스타일 추천 조건에 따른 분석 결과에 따라 패션 아이템들을 추출하기 위한 스타일 추출부(204); 상기 추출한 패션 아이템들을 상기 아바타 상에 중첩하기 위한 레이어 중첩부(205); 상기 중첩된 레이어 이미지를 랜더링하여 랜더링된 가상현실(VR) 이미지를 생성하기 위한 가상현실(VR) 이미지 랜더링부(206); 상기 데이터 제공 서버로부터 전달받은 아이템에 대한 데이터를 객체 모델에 기반하여 모델링하여 스타일 정보 제공에 필요한 패션 아이템으로 등록하기 위한 아이템 등록부(207); 및 상기 패션 아이템의 소재 특성에 따라 상기 아바타에 장착된 상기 패션 아이템의 드레이프 정도를 적용하고, 상기 아바타의 모션을 변경함에 따라 아바타 외관의 질감 처리를 적용하기 위한 텍스처 적용부(208)를 포함하는 것을 특징으로 한다.The
상기 분석부(105)는, 상기 사용자 단말기를 통해 선택 조건을 입력받고 상기 사용자의 회원 정보 및 데이터를 전달받아 추천할 패션 아이템의 조건을 분석하기 위한 조건 분석부(301); 상기 조건 분석부에서 분석한 결과에 따라 상기 스타일 모델에 기반하여 스타일 정보를 결정하기 위한 스타일 결정부(302); 상기 스타일 결정부에서 결정한 스타일 정보를 학습하기 위한 학습부(303); 상기 학습부의 학습 내용에 따라 스타일추천모델 요소를 추론하기 위한 추론부(304); 및 상기 추론부에서 추론한 스타일추천모델 요소를 이용하여 상기 스타일 모델을 생성 또는 업데이트하기 위한 모델링부(305)를 포함하는 것을 특징으로 한다.The
상기 아바타 및 상기 패션 아이템에는, 상기 패션 아이템의 종류에 따라 서로 커플링되는 기준점에 장착 마커가 설정되는 것을 특징으로 한다.In the avatar and the fashion item, a mounting marker is set at a reference point coupled to each other according to a type of the fashion item.
또한, 상기한 바와 같은 목적을 달성하기 위한 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법은, In addition, the smart style information providing method using a virtual reality (VR) device according to an embodiment of the present invention for achieving the above object,
회원정보 입력에 따른 아바타를 생성하여 아바타 데이터베이스에 저장하는 아바타생성단계(S401); 외부로부터 입력받거나 전달받은 아이템의 2D 이미지로부터 3D 이미지 데이터로 변환하여 패션 아이템 데이터베이스에 저장하는 패션아이템저장단계(S402); 사용자 단말기를 통해 가상현실(VR)기기를 이용한 스타일정보 제공 서비스를 요청받는 서비스요청단계(S403); 상기 아바타 데이터베이스로부터 기생성된 아바타를 불러오거나, 변경된 회원정보에 따라 기생성된 아바타를 수정하여 로드하는 아바타로드단계(S404); 상기 사용자 단말기를 통해 입력받은 스타일링 조건 또는 선택받은 조건에 따라 스타일 모델에 근거하여 스타일을 결정하는 스타일결정단계(S405); 스타일링 조건 또는 결정된 스타일에 따른 패션 아이템을 추출하는 패션 아이템추출단계(S406); 상기 로드된 아바타에 상기 추출한 패션 아이템의 레이어들을 중첩하는 레이어중첩단계(S407); 상기 중첩된 이미지를 랜더링하여 가상현실(VR) 이미지를 생성하는 가상현실(VR)이미지생성단계(S408); 상기 생성된 가상현실(VR) 이미지를 가상현실(VR) 기기를 통해 출력하는 출력단계(S409)를 포함한다.An avatar creation step of generating an avatar according to the input of member information and storing it in an avatar database (S401); A fashion item storage step (S402) of converting the 2D image of the item received or delivered from the outside into 3D image data and storing it in a fashion item database; a service request step of receiving a request for a style information provision service using a virtual reality (VR) device through a user terminal (S403); an avatar loading step (S404) of loading a pre-generated avatar from the avatar database or modifying and loading a pre-generated avatar according to the changed member information; a style determination step (S405) of determining a style based on a style model according to a styling condition input through the user terminal or a selected condition; a fashion item extraction step of extracting a fashion item according to a styling condition or a determined style (S406); a layer overlapping step (S407) of overlapping the extracted fashion item layers on the loaded avatar; a virtual reality (VR) image generating step (S408) of generating a virtual reality (VR) image by rendering the superimposed image; and an output step (S409) of outputting the generated virtual reality (VR) image through a virtual reality (VR) device.
상기 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법은, 상기 결정된 스타일을 학습하는 학습단계(S410); 및 상기 학습된 스타일을 추론하여 상기 스타일 모델을 업데이트하는 업데이트단계(S411)를 더 포함하는 것을 특징으로 한다.The method for providing smart style information using the virtual reality (VR) device includes: a learning step of learning the determined style (S410); and an update step (S411) of updating the style model by inferring the learned style.
상기 아바타생성단계(S401)에서는, 사용자의 성별, 나이, 신장, 체중, 어깨, 헤어스타일, 안경착용유무, 이마형태, 복부형태, 힙형태, 체형, 허리 사이즈, 발 사이즈, 피부색상, 선호도(브랜드, 보세, 명품), 얼굴형, 성격을 회원정보로 입력받는 것을 특징으로 하고, 상기 패션아이템저장단계(S402)에서는, 해당 패션 아이템의 이미지, 종류, 용도, 브랜드, 사이즈, 섬유 종류, 섬유 조성비, 섬유 특성, 장착 마커 위치를 포함하여 패션 아이템 데이터베이스를 구성하는 것을 특징으로 한다.In the avatar creation step (S401), the user's gender, age, height, weight, shoulder, hairstyle, wearing glasses, forehead shape, abdomen shape, hip shape, body type, waist size, foot size, skin color, preference ( Brand, bonded, luxury goods), face shape, and personality are input as member information, and in the fashion item storage step (S402), the image, type, use, brand, size, fiber type, fiber of the fashion item It is characterized in that it constitutes a database of fashion items including composition ratio, fiber characteristics, and mounting marker positions.
상기 레이어중첩단계(S407)에서는, 상기 아바타와 해당 패션 아이템 사이에 서로 커플링되는 기준점에 설정된 장착 마커를 이용하여 레이어들을 중첩하며, 다수의 패션 아이템들의 장착 순서에 따라 상기 아바타 상에 해당 패션 아이템 레이어들이 순서대로 중첩되는 것을 특징으로 한다.In the layer overlapping step ( S407 ), layers are overlapped using mounting markers set at reference points coupled to each other between the avatar and the corresponding fashion item, and the corresponding fashion item is placed on the avatar according to the mounting order of the plurality of fashion items. It is characterized in that the layers are sequentially overlapped.
상기 가상현실(VR)이미지생성단계(S408)에서는, 섬유의 특성 중, 밀도, 위사강도, 경사강도, 전단강도, 굽힘강도, 및 좌굴값을 이용하여 패션 아이템의 드레이프성을 조절하여 상기 패션 아이템을 표현하는 것을 특징으로 한다.In the virtual reality (VR) image generation step (S408), the drape of the fashion item is adjusted by using the density, weft strength, warp strength, shear strength, bending strength, and buckling value among the characteristics of the fiber to adjust the fashion item. It is characterized by expressing
또한, 본 발명의 일 실시예에 따르면, 상기 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법을 구현하기 위한 프로그램이 저장된 컴퓨터 판독 가능한 기록매체가 제공되는 것을 특징으로 한다.In addition, according to an embodiment of the present invention, a computer-readable recording medium storing a program for implementing the smart style information providing method using the virtual reality (VR) device is provided.
아울러, 본 발명의 일 실시예에 따르면, 상기 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법을 구현하기 위해, 컴퓨터 판독 가능한 기록매체에 저장된 프로그램이 제공되는 것을 특징으로 한다.In addition, according to an embodiment of the present invention, in order to implement the smart style information providing method using the virtual reality (VR) device, a program stored in a computer-readable recording medium is provided.
본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 의하면, 사용자의 신체관련 데이터를 입력받아 3D 아바타를 생성하고, 상기 사용자가 실제 보유한 패션 아이템 및 외부의 데이터 제공 서버로부터 전달받은 패션 아이템의 정보를 저장하고, 상기 사용자의 선택에 따른 패션 아이템들을 상기 아바타에 착용된 상태 또는 스타일 모델에 기반하여 상기 사용자에게 추천하는 패션 아이템들이 상기 아바타에 착용된 상태를 가상현실(VR) 기기를 통해 출력함으로써, 실제 착용하지 않고도 입을 옷을 쉽게 고를 수 있으며, 자신에게 어울리는 패션 아이템을 구매하는데 도움을 받는 것이 가능한 효과가 있다.According to the system and method for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention, a 3D avatar is generated by receiving a user's body-related data, and the user's actual fashion items and external information are provided. A state in which fashion item information received from a data providing server of By outputting through a virtual reality (VR) device, you can easily choose clothes to wear without actually wearing them, and it is possible to get help in purchasing a fashion item that suits you.
또한, 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 의하면, 실제 촬영한 사용자의 사진과 사용자의 얼굴 형태 및 체형 등의 형태 정보를 함께 입력하여 사용자의 실제 모습과 유사한 사용자 3D 아바타 모델을 생성할 수 있는 효과가 있다.In addition, according to the smart style information providing system and the method using a virtual reality (VR) device according to an embodiment of the present invention, the user's photo and shape information such as the user's face shape and body type are input together with the method. There is an effect of generating a user 3D avatar model similar to the user's actual appearance.
또한, 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 의하면, 계절, 날씨, 상황에 따른 의상을 추천하여 사용자가 다양한 의상을 미리 가상으로 매칭시켜 자신에게 가장 어울리거나 선호하는 제품을 구매할 수 있도록 지원해줄 수 있는 효과가 있다.In addition, according to the smart style information providing system and method using a virtual reality (VR) device according to an embodiment of the present invention, it recommends clothes according to seasons, weather, and situations so that the user can virtually match various clothes in advance. It has the effect of supporting you to purchase the product that suits you the most or that you prefer.
또한, 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 의하면, 사용자가 실제 촬영한 사진에서 의상을 추출하거나 데이터 제공 서버로부터 전달받은 일반 사용자들이 선호하는 패션 아이템에 대한 정보를 용이하게 확보하는 것이 가능하므로, 유행되는 패션 아이템을 사용자에게 바로 제공할 수 있는 효과가 있다.In addition, according to the system and method for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention, general users who extract clothes from a photo actually taken by the user or receive it from a data providing server are preferred. Since it is possible to easily secure information on a fashion item to be used, there is an effect that a trendy fashion item can be immediately provided to a user.
또, 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 의하면, 스타일 모델에 기반하여 사용자가 선호하는 스타일을 분석하여, 사용자 취향의 신규 패션 아이템이 출시되는 경우 사용자에게 바로 추천할 수 있는 효과가 있다.In addition, according to the smart style information providing system and method using a virtual reality (VR) device according to an embodiment of the present invention, a user's preferred style is analyzed based on the style model, and a new fashion item of the user's taste is provided. When released, it has the effect of immediately recommending it to users.
또, 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템 및 그 방법에 의하면, 섬유의 특성 중, 밀도, 위사강도, 경사강도, 전단강도, 굽힘강도, 좌굴값 등을 이용하여 드레이프성을 조절하여 실감나게 표현하는 것이 가능한 효과가 있다.In addition, according to the smart style information providing system and method using a virtual reality (VR) device according to an embodiment of the present invention, among the characteristics of the fiber, density, weft strength, warp strength, shear strength, bending strength, buckling value There is an effect that it is possible to express realistically by adjusting the drape property using the back.
도 1은 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템의 구성도.
도 2는 도 1의 스마트 스타일정보 제공 서버에서 이미지 처리부의 상세 구성도.
도 3은 도 1의 스마트 스타일정보 제공 서버에서 분석부의 상세 구성도.
도 4는 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법의 일실시예 흐름도.
도 5는 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에 있어서, 가상현실(VR) 기기를 통해 출력하는 패션 아이템이 장착된 아바타를 포함하는 화면의 일실시예 설명도.
도 6은 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서, 아바타 및 패션 아이템의 중첩된 이미지를 나타내는 설명도.
도 7은 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서, 3D 이미지 처리 방법을 설명하기 위한 도면.
도 8은 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서, 가상현실(VR)이미지생성단계(S408)에서 의상의 드레이프 정도를 조절하는 것을 설명하기 위한 섬유의 조성(면혼용율)에 따른 섬유의 특성에 대한 도면.1 is a block diagram of a system for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention.
Figure 2 is a detailed configuration diagram of the image processing unit in the smart style information providing server of Figure 1;
3 is a detailed configuration diagram of an analysis unit in the smart style information providing server of FIG. 1 .
4 is a flowchart of an embodiment of a method for providing smart style information using a virtual reality (VR) device according to the present invention.
5 is an explanatory view of an embodiment of a screen including an avatar equipped with a fashion item output through a virtual reality (VR) device in the method for providing smart style information using a virtual reality (VR) device according to the present invention.
6 is an explanatory diagram illustrating a superimposed image of an avatar and a fashion item in a method for providing smart style information using a virtual reality (VR) device according to the present invention.
7 is a view for explaining a 3D image processing method in the smart style information providing method using a virtual reality (VR) device according to the present invention.
8 is a composition (cotton) of fibers for explaining the adjustment of the drape degree of clothes in the virtual reality (VR) image generation step (S408) in the method for providing smart style information using a virtual reality (VR) device according to the present invention. A diagram of the properties of fibers according to the mixing ratio).
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야한다.Since the present invention can have various changes and can have various embodiments, specific embodiments are illustrated in the drawings and described in detail. However, this is not intended to limit the present invention to specific embodiments, and it should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.When an element is referred to as being “connected” or “connected” to another element, it is understood that it may be directly connected or connected to the other element, but other elements may exist in between. it should be
반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.On the other hand, when it is said that a certain element is "directly connected" or "directly connected" to another element, it should be understood that the other element does not exist in the middle.
본 명세서에서 사용되는 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 공정, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 공정, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used herein are used only to describe specific embodiments, and are not intended to limit the present invention. The singular expression includes the plural expression unless the context clearly dictates otherwise. In the present application, terms such as "comprise" or "have" are intended to designate that a feature, number, process, operation, component, part, or a combination thereof described in the specification exists, but one or more other features It is to be understood that this does not preclude the existence or addition of numbers, processes, operations, components, parts, or combinations thereof.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미가 있는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present application. does not
이하, 첨부된 도면을 참조하여 본 발명을 더욱 상세하게 설명한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정하여 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여, 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 또한, 사용되는 기술 용어 및 과학 용어에 있어서 다른 정의가 없다면, 이 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 통상적으로 이해하고 있는 의미를 가지며, 하기의 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 설명은 생략한다. 다음에 소개되는 도면들은 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 예로서 제공되는 것이다. 따라서, 본 발명은 이하 제시되는 도면들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 또한, 명세서 전반에 걸쳐서 동일한 참조번호들은 동일한 구성요소들을 나타낸다. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다.Hereinafter, the present invention will be described in more detail with reference to the accompanying drawings. Prior to this, the terms or words used in the present specification and claims should not be construed as being limited to conventional or dictionary meanings, and the inventor should properly understand the concept of the term in order to best describe his invention. Based on the principle that can be defined, it should be interpreted as meaning and concept consistent with the technical idea of the present invention. In addition, if there is no other definition in the technical terms and scientific terms used, it has the meaning commonly understood by those of ordinary skill in the art to which this invention belongs, and the summary of the present invention in the following description and accompanying drawings Descriptions of known functions and configurations that may be unnecessarily obscure will be omitted. The drawings introduced below are provided as examples so that the spirit of the present invention can be sufficiently conveyed to those skilled in the art. Accordingly, the present invention is not limited to the drawings presented below and may be embodied in other forms. Also, like reference numerals refer to like elements throughout. It should be noted that the same components in the drawings are denoted by the same reference numerals wherever possible.
도 1은 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템의 구성도이다.1 is a block diagram of a system for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템은 스마트 스타일정보 제공 서버(100), 다수의 사용자 단말기(110, 120), 상기 사용자 단말기에 연계된 가상현실(VR) 기기(111, 121), 3D 스캐너(130), 및 데이터 제공 서버(150)를 포함한다.Referring to FIG. 1 , a system for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention includes a smart style
상기 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 시스템은 스타일정보를 제공받기 위해 과금을 결제하거나, 추천받은 패션 아이템을 구매하기 위한 결제 서버(140)를 더 포함할 수도 있다.The smart style information providing system using the virtual reality (VR) device may further include a
상기 스마트 스타일정보 제공 서버(100)는 웹서버 기반 또는 전용 애플리케이션 방식의 스마트 스타일정보 제공 서비스를 제공하기 위한 소프트웨어 및/또는 하드웨어 구성요소를 구비한 컴퓨팅 시스템이며, 통신 네트워크를 통하여 다수의 사용자 단말기(110, 120), 결제 서버(140) 및 데이터 제공 서버(예를 들어, 쇼핑몰 서버, 포털 서버)(150)와 통신하여, 상기 다수의 사용자 단말기(110, 120)에 연계된 가상현실(VR)기기(111, 121)로 스타일정보를 제공한다.The smart style
상기 스마트 스타일정보 제공 서버(100)는 사용자의 신체관련 데이터를 입력받아 3D 아바타를 생성하고, 상기 사용자가 실제 보유한 패션 아이템 및 외부의 데이터 제공 서버로부터 전달받은 패션 아이템의 정보를 저장하고, 상기 사용자의 선택에 따른 패션 아이템들이 상기 아바타에 착용된 상태 또는 스타일 모델에 기반하여 상기 사용자에게 추천하는 패션 아이템들이 상기 아바타에 착용된 상태를 가상현실(VR) 기기를 통해 출력할 수 있도록 상기 사용자 단말기(110, 120)로 제공한다.The smart style
상기 사용자 단말기(110, 120)는 제공받는 가상현실(VR) 이미지를 연계된 가상현실(VR) 기기(111, 121)로 출력한다.The
상기 결제 서버(140)는 사용자 단말기의 회원 정보에 따라 과금 처리를 담당한다. 또한, 상기 결제 서버(140)는 별도의 데이터베이스를 구비할 수 있다.The
도 1에서는 결제 서버(140)와 스마트 스타일정보 제공 서버(100)를 별도의 장치로 도시하였지만, 실시예에 따라서는 하나의 물리적인 장치에서 과금 서비스와 스마트 스타일정보 제공 서비스를 모두 제공하도록 구현될 수도 있다.Although FIG. 1 shows the
상기 스마트 스타일정보 제공 서버(100)는 인터페이스부(101), 제어부(102), 이미지 처리부(103), 데이터베이스 관리부(104) 및 분석부(105) 등을 포함한다. 상기 인터페이스부(101), 상기 제어부(102), 상기 이미지 처리부(103), 상기 데이터베이스 관리부(104) 및 상기 분석부(105)는 그 중 적어도 일부가 스마트 스타일정보 제공 서버(100)와 통신하는 프로그램 모듈들일 수 있다. 이러한 프로그램 모듈들은 운영 시스템, 응용 프로그램 모듈 및 기타 프로그램 모듈의 형태로 스마트 스타일정보 제공 서버(100)에 포함될 수 있으며, 물리적으로는 여러 가지 공지의 기억 장치 상에 저장될 수 있다. 또한, 이러한 프로그램 모듈들은 스마트 스타일정보 제공 서버(100)와 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈들은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.The smart style
여기서, 통신 네트워크는 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 근거리 통신망(LAN; Local Area Network), 도시권 통신망(MAN; Metropolitan Area Network), 광역 통신망(WAN; Wide Area Network) 등 다양한 통신망으로 구성될 수 있다. 바람직하게는, 본 발명에서 말하는 통신 네트워크는 공지의 월드와이드웹(WWW; World Wide Web)일 수 있다.Here, the communication network may be configured regardless of its communication mode, such as wired and wireless, and includes a local area network (LAN), a metropolitan area network (MAN), and a wide area network (WAN). It may be composed of various communication networks such as Preferably, the communication network referred to in the present invention may be a well-known World Wide Web (WWW; World Wide Web).
상기 스마트 스타일정보 제공 서버(100)는 통신 네트워크를 통하여 다수의 사용자 단말기(110, 120)와 통신하며, 상기 다수의 사용자 단말기(110, 120)로부터 가상현실(VR) 기기를 이용한 스타일정보 제공에 필요한 데이터를 전송/수신한다. 상기 스마트 스타일정보 제공 서버(100)는 인터넷 포털 사이트의 운영 서버에 포함될 수도 있다.The smart style
한편, 상기 인터페이스부(101)는 스마트 스타일정보 제공 서버(100)가 상기 다수의 사용자 단말기(110, 120)와 통신을 수행할 수 있도록 인터페이싱하며, 가상현실(VR) 기기를 이용한 스타일정보 제공과 관련된 데이터의 전송 및 수신을 위해 필요한 그래픽 사용자 인터페이스를 상기 다수의 사용자 단말기(110, 120)에 제공할 수 있다.On the other hand, the
상기 제어부(102)는 상술한 바와 같은 인터페이스부(101)와, 후술할 이미지 처리부(103), 데이터베이스 관리부(104) 및 분석부(105) 간의 데이터의 흐름을 제어하는 기능을 수행한다.The
상기 이미지 처리부(103)는 인터페이스부(101)를 통하여 송수신되는 데이터에 기초하여 가상현실(VR) 기기를 이용한 스타일정보 제공을 위한 각종 처리를 수행한다. 본 발명에 따른 이러한 처리 과정은 후술하기로 한다.The
상기 데이터베이스 관리부(104)는, 가상현실(VR) 기기를 이용한 스타일정보 서비스를 제공받기 위한 사용자를 회원으로 가입시켜 그 인적 정보를 관리하기 위한 회원 데이터베이스(104a), 상기 사용자의 신체 데이터를 입력받아 생성한 아바타를 관리하기 위한 아바타 데이터베이스(104b), 사용자의 신체적 조건 및 입력받은 조건에 따라 추천할 패션 아이템들에 대한 스타일 모델을 저장하고 있는 스타일 모델 데이터베이스(104c), 아바타 및 패션 아이템들을 가상현실(VR) 이미지로 랜더링하는데 필요한 데이터를 저장하고 있는 렌더링 데이터베이스(104d), 상기 사용자가 소유한 패션 아이템들 및 데이터 제공 서버(150)로부터 전달받은 패션 아이템들을 관리하기 위한 패션 아이템 데이터베이스(104e), 및 상기 아바타 및 패션 아이템의 이미지를 3D 형태로 모델링하는데 필요한 객체 모델을 저장하고 있는 객체 모델 데이터베이스(104f)등을 포함할 수 있다.The
예를 들면, 상기 회원 데이터베이스(104a)는 회원들이 로그인하기 위하여 사용하는 로그인 ID 및 패스워드 등의 식별 정보와, 이름, 성별, 회원 등급, 계좌번호, 연락처, 나이, 및 신체적 특징 등에 관한 정보를 포함할 수 있다.For example, the
상기 신체적 특징은, 사용자의 신장, 체중, 어깨(예: 넓은편, 왜소한편, 굽은편), 헤어스타일(단말, 긴머리, 펌머리, 앞머리 유무), 안경착용유무, 이마형태, 복부형태(배나옴, 배가 안나옴), 힙형태(오리힙, 둥근힙, 납작힙), 체형(뚱뚱, 통통, 보통, 마름), 허리 사이즈, 발 사이즈, 피부색상, 선호도(브랜드, 보세, 명품), 얼굴형(둥근형, 각진형, 긴형), 성격(소극적, 외향적, 내향적) 등을 포함할 수 있다. 이러한 회원 데이터베이스(104a)는 이미지 처리부(103)에 의해 참조될 수 있다.The physical characteristics include the user's height, weight, shoulder (eg, broad side, short side, curved side), hairstyle (terminal, long hair, perm hair, with or without bangs), wearing glasses or not, forehead shape, abdominal shape ( Belly or not), hip shape (duck hip, round hip, flat hip), body type (fat, plump, normal, skinny), waist size, foot size, skin color, preference (brand, bonded, luxury), face It can include type (round, square, elongated), personality (passive, extroverted, introverted), and the like. This
도면에 도시되지 않았지만, 과금 데이터베이스는, 회원에 따른 과금 데이터를 저장하고 있을 수 있다. 한편, 회원 등급에 따른 과금 결제 내역 등을 더 포함할 수 있다.Although not shown in the drawing, the billing database may store billing data according to members. Meanwhile, it may further include billing and payment details according to the membership level.
상기 아바타 데이터베이스(10ba)는 사용자의 신장, 체중, 신체적 특징, 3D 스캐닝 데이터 등의 정보를 포함한다. 이러한 아바타 데이터베이스(104b)는 이미지 처리부(103)에 의해 참조되어 그 정보 중 적어도 일부가 인터페이스부(101)를 통해 외부 장치로 전송될 수 있다.The avatar database 10ba includes information such as height, weight, physical characteristics, and 3D scanning data of the user. The
스타일 모델 데이터베이스(104c)는 데이터 마이닝 알고리즘 및 기계학습을 이용하여 분석한 결과에 따라 생성되는 스타일 모델을 저장하고 있으며, 주기적으로 업데이트되는 패션 아이템, 사용자의 패션 선호도 및 사용자의 체형 변화에 따라 상기 스타일 모델이 업데이트될 수 있다.The
패션 아이템 데이터베이스(104e)에는, 해당 패션 아이템의 이미지, 종류, 용도, 브랜드, 사이즈, 섬유 종류, 섬유 조성비, 섬유 특성, 장착 마커 위치 등을 포함할 수 있다.The
상기 실시예에서는, 본 발명의 구현을 위한 정보를 저장하는 데이터베이스를회원 데이터베이스(104a), 아바타 데이터베이스(104b), 스타일 모델 데이터베이스(104c), 랜더링 데이터베이스(104d), 패션 아이템 데이터베이스(104e), 및 객체 모델 데이터베이스(104f)의 여섯 가지 데이터베이스로 분류하였지만, 이러한 분류를 포함한 데이터베이스의 구성은 당업자의 필요에 따라 변경될 수 있다.In the above embodiment, the database for storing information for the implementation of the present invention includes a
한편, 본 발명에 있어서, 데이터베이스란, 협의의 데이터베이스뿐만 아니라, 컴퓨터 파일 시스템에 기반을 둔 데이터 기록 등을 포함하는 넓은 의미의 데이터베이스까지 포함하는 개념으로서, 단순한 연산 처리 로그의 집합이라도 이를 검색하여 소정의 데이터를 추출할 수 있다면 본 발명에서 말하는 데이터베이스에 포함될 수 있음이 이해되어야 한다.Meanwhile, in the present invention, a database is a concept that includes not only a narrow database but also a database in a broad sense including data records based on a computer file system. It should be understood that if the data of the data can be extracted, it can be included in the database according to the present invention.
상기 다수의 사용자 단말기(110, 120)는 가상현실(VR) 기기를 이용한 스타일정보 서비스 제공에 관심을 가진 자가 통신 네트워크를 통하여 상기 스마트 스타일정보 제공 서버(100)에 접속한 후 통신할 수 있도록 하는 기능을 포함하는 디지털 기기로서, 개인용 컴퓨터(예를 들어, 데스크탑 컴퓨터, 노트북 컴퓨터 등), 워크스테이션, PDA, 웹 패드, 이동 전화기 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 다수의 사용자 단말기(110, 120)로서 채택될 수 있다.The plurality of
한편, 상기 다수의 사용자 단말기(110, 120)는 가상현실(VR) 기기를 이용한 스타일정보제공 서비스를 이용하기 위한 전용 애플리케이션이 설치될 수 있다.On the other hand, the plurality of
상기 다수의 사용자 단말기(110, 120)는 가상현실(VR) 기기를 이용한 스타일정보 제공 서비스를 받기 위해 회원 가입을 하고, 회원 등급에 따른 서비스 요금 결제를 결제서버(140)에 요청하고, 상기 스마트 스타일정보 제공 서버(100)에 가상현실(VR) 기기를 이용한 스타일정보 제공 서비스를 요청하고, 상기 스마트 스타일정보 제공 서버(100)로부터 전달받은 사용자의 스타일 정보(아바타, 패션 아이템)를 상기 가상현실(VR) 기기(111, 121)에 디스플레이되도록 한다.The plurality of
데이터 제공 서버(150)는 상기 스마트 스타일정보 제공 서버(100)로부터의 요청에 따라 패션 아이템 정보를 상기 스마트 스타일정보 제공 서버(100)로 제공할 수 있고, 포털 서버를 통해 새로 업데이트되는 패션 아이템에 대한 정보를 수집하여 상기 스마트 스타일정보 제공 서버(100)로 전달할 수 있다.The
상기 3D 스캐너(130)는 미약한 X-선등의 인체에 무해한 투과성 광선을 이용하여 3차원으로 스캐닝할 수 있는 기기이다. 상기 3D 스캐너(130)는 소정의 장소에 설치될 수 있으며, 상기 3D 스캐너(130)를 통해 측정된 각 개인의 체형정보(3D 이미지정보)를 처리하여 네트워크를 통해 본 발명에 따른 스타일정보 제공 서버(100)로 전송하는 3D스캐너 사업자(미도시됨)가 포함될 수 있다.The
또한, 사용자의 3차원 체형정보를 입력받는 또 다른 방법으로는 상기 3D 스캐너를 통해 측정된 각 개인의 체형정보를 별도의 디스켓이나 카드등에 저장하여 각 개인이 소지할 수 있도록 하고, 개인이 인터넷 등을 통해 사이트에 접속하여 개인의 체형정보를 입력하고자 하는 경우 개인이 소지한 디스켓으로부터 해당 정보를 읽어들여 네트워크를 통해 체형정보를 입력받도록 구성될 수 있으며, 원격지의 3D 스캐너를 통해 측정된 각 개인별 체형정보를 입력하는 것은 전술한 예에만 국한되는 것은 아니다.In addition, as another method of receiving the user's 3D body shape information, each individual's body shape information measured through the 3D scanner is stored on a separate diskette or card so that each individual can possess it, and the individual can use the Internet, etc. If you want to access the website and input your body shape information, it can be configured to read the information from the diskette you have and receive the body shape information through the network. The input of information is not limited to the above-described example.
한편, 상기 체형 정보 입력 방법은 상기의 3D스캐너(210)를 통한 체형 정보의 입력 뿐만 아니라 웹 상에서 사용자에게 체형 정보 입력화면을 전송하여 사용자의 키입력에 따라 각 신체 부위별 치수 및 체형 정보를 입력받는 방법으로도 구현할 수 있다. 나아가, 사용자에게 자신의 전신을 촬영한 사진을 스캐닝하여 입력할 것으로 요구하고, 그에 따라 사용자가 입력하는 2차원의 이미지 정보를 이미지 처리부에서 변환하여 사용자 체형정보로 이용할 수 있도록 한다.On the other hand, the body shape information input method transmits body shape information input screen to the user on the web as well as input body shape information through the 3D scanner 210, and inputs dimensions and body shape information for each body part according to the user's key input. It can also be implemented as a receiving method. Furthermore, the user is requested to scan and input a picture of his or her whole body, and the image processing unit converts the two-dimensional image information input by the user accordingly so that it can be used as user body type information.
도 2는 도 1의 이미지 처리부의 상세 구성도이다.FIG. 2 is a detailed configuration diagram of the image processing unit of FIG. 1 .
도 2에 도시된 바와 같이, 본 발명에 따른 이미지 처리부(103)는, 신체 데이터 획득부(201), 아바타 조건 입력부(202), 아바타 생성부(203), 스타일 추출부(204), 레이어 중첩부(205), 가상현실(VR) 이미지 랜더링부(206)를 포함한다.As shown in FIG. 2 , the
상기 신체 데이터 획득부(201)는 회원 데이터베이스에 저장되어 있는 사용자의 신체 사이즈관련 데이터로부터 신체 데이터를 획득한다.The body
예를 들어, 회원 데이터베이스에 저장되어 있는 사용자의 2D 이미지, 3D 이미지 데이터, 및 신체 측정 데이터로부터 신체데이터를 획득할 수 있다.For example, body data may be obtained from 2D image, 3D image data, and body measurement data of the user stored in the member database.
상기 아바타 조건 입력부(202)는 상기 사용자 단말기(110,120) 또는 3D 스캐너(130)를 통해 사용자의 신체사이즈 관련 데이터를 입력받는다.The avatar
상기 아바타 생성부(203)는 상기 아바타 조건 입력부(202)를 통해 입력받은 조건 및 아바타 데이터베이스(104b)에 근거하여 해당 사용자에 대응하는 아바타를 생성한다.The
이때, 상기 아바타에는, 패션 아이템의 종류에 따라 상기 패션 아이템과 커플링되는 기준점에 장착 마커가 설정되는 것을 특징으로 한다.In this case, in the avatar, a mounting marker is set at a reference point coupled to the fashion item according to the type of the fashion item.
상기 스타일 추출부(204)는 상기 사용자 단말기(110, 120)를 통해 입력받은 조건 또는 스타일 추천 조건에 따른 분석 결과에 따라 패션 아이템 데이터베이스(104e)에서 패션 아이템들을 추출한다.The
상기 레이어 중첩부(205)는 상기 추출한 패션 아이템들을 상기 아바타 상에 중첩한다.The
3D 아바타 및 패션 아이템들은 다각형 메시 형태를 가지며, 다각형 메시가 중첩된 3D 이미지가 생성된다.3D avatars and fashion items have a polygonal mesh shape, and a 3D image in which the polygonal mesh is superimposed is generated.
상기 가상현실(VR) 이미지 랜더링부(206)는 상기 중첩된 레이어 이미지를 랜더링하여 랜더링된 가상현실(VR) 이미지를 생성한다.The virtual reality (VR)
본 발명에 따른 이미지 처리부(103)는 아이템 등록부(207), 텍스처 적용부(208)를 더 포함할 수 있다.The
상기 아이템 등록부(207)는 상기 데이터 제공 서버(150)로부터 전달받은 아이템에 대한 데이터를 객체 모델에 기반하여 모델링하여 스타일 정보 제공에 필요한 패션 아이템으로 상기 패션 아이템 데이터베이스(104e)에 등록한다.The
패션 아이템 데이터베이스에는, 해당 패션 아이템의 이미지, 종류, 용도, 브랜드, 사이즈, 섬유 종류, 섬유 조성비, 섬유 특성, 장착 마커 위치 등을 포함할 수 있다.The fashion item database may include images, types, uses, brands, sizes, fiber types, fiber composition ratios, fiber characteristics, and mounting marker positions of the corresponding fashion items.
이때, 상기 패션 아이템에는, 상기 패션 아이템의 종류에 따라 상기 아바타와 커플링되는 기준점에 장착 마커가 설정되는 것을 특징으로 한다.In this case, in the fashion item, a mounting marker is set at a reference point coupled to the avatar according to the type of the fashion item.
상기 텍스처 적용부(208)는 상기 패션 아이템의 소재 특성에 따라 상기 아바타에 장착된 상기 패션 아이템의 드레이프 정도를 적용하고, 상기 아바타의 모션을 변경함에 따라 아바타 외관의 질감을 처리한다.The
3D 객체 형상을 생성하기 위해서는 모델링과 렌더링 과정으로 나뉜다. 모델링이 기본적인 골격을 만드는 과정이라면, 랜더링은 그 골격 표면을 처리하는 과정이라 할 수 있다. 랜더링에는 투영(Projection), 클리핑(Clipping), 은면처리(Hidden Surface), 셰이딩(Shading), 매핑(Mapping) 과정이 포함될 수 있다. 각 과정의 역할은 다음과 같다.To create a 3D object shape, it is divided into modeling and rendering processes. While modeling is the process of creating a basic skeleton, rendering is the process of processing the skeleton surface. Rendering may include projection, clipping, hidden surface, shading, and mapping processes. The role of each process is as follows.
투영(Projection)은 3차원 오브젝트(객체)를 2차원 스크린에 비추는 과정이고, 클리핑(Clipping)은 디스플레이 밖(모니터 또는 윈도우 창에 나오지 않는 부분)의 오브젝트 부분(보이지 않는 부분)을 처리하는 과정이고, 은면처리(Hidden Surface)는 오브젝트의 보이는 부분과 보이지 않는 부분을 처리하는 과정이고, 셰이딩(Shading)은 음영, 조명 빛, 광원의 빛, 반사광, 투명한 효과 등을 처리하는 과정이고, 매핑(Mapping)은 오브젝트의 표면에 텍스처 등을 씌워 질감과 반사된 풍경 등을 처리하는 과정을 의미한다.Projection is the process of projecting a three-dimensional object (object) onto a two-dimensional screen, and clipping is the process of processing the object part (invisible part) outside the display (the part that does not appear on the monitor or window). , Hidden Surface is the process of processing the visible and invisible parts of an object, and Shading is the process of processing shading, illumination light, light from light sources, reflected light, transparent effects, etc. ) refers to the process of covering the surface of an object with a texture, etc. to process the texture and the reflected landscape.
도 3은 도 1의 분석부의 상세 구성도이다.3 is a detailed configuration diagram of the analysis unit of FIG. 1 .
도 3에 도시된 바와 같이, 본 발명에 따른 분석부(105)는, 조건 분석부(301), 스타일 결정부(302), 학습부(303), 추론부(304), 및 모델링부(305)를 포함한다.3 , the
상기 조건 분석부(301)는 상기 사용자 단말기(110, 120)를 통해 선택 조건을 입력받고 상기 사용자의 회원 정보 및 데이터를 전달받아 추천할 패션 아이템의 조건을 분석한다.The
상기 스타일 결정부(302)는 상기 조건 분석부(301)에서 분석한 결과에 따라 상기 스타일 모델에 기반하여 스타일 정보를 결정한다.The
상기 학습부(303)는 상기 스타일 결정부(302)에서 결정한 스타일 정보를 학습한다.The
상기 추론부(304)는 상기 학습부(303)의 학습 내용에 따라 스타일추천모델 요소를 추론한다.The
상기 모델링부(305)는 상기 추론부(304)에서 추론한 스타일추천모델 요소를 이용하여 상기 스타일 모델을 생성 또는 업데이트한다.The
즉, 상기 스타일 모델은 데이터 마이닝 알고리즘 및 기계학습을 이용하여 분석한 결과에 따라 생성되거나 업데이트 된다.That is, the style model is generated or updated according to the analysis result using a data mining algorithm and machine learning.
한편, 도면에는 도시되지 않았지만, 상기 분석부(105)는 획득한 사용자 신체 데이터로부터 사용자의 체형을 분석하여 신체질량지수(BMI 지수)를 산출하고 신체 부분별 비만 정도를 판단하여, 비만인 신체 부위를 다이어트를 할 수 있는 운동 정보를 제공해줄 수 있는 신체 분석부(미도시됨)를 더 포함할 수 있다.On the other hand, although not shown in the drawing, the
도 4는 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법의 일실시예 흐름도이다.4 is a flowchart illustrating a method for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention.
우선, 회원정보(데이터, 사진, 신체특징) 입력에 따른 아바타를 생성하여 아바타 DB에 저장한다(S401).First, an avatar is created according to the input of member information (data, photo, body characteristics) and stored in the avatar DB (S401).
입력받는 회원정보는 사용자의 성별, 나이, 신장, 체중, 어깨(예: 넓은편, 왜소한편, 굽은편), 헤어스타일(단말, 긴머리, 펌머리, 앞머리 유무), 안경착용유무, 이마형태, 복부형태(배나옴, 배가 안나옴), 힙형태(오리힙, 둥근힙, 납작힙), 체형(뚱뚱, 통통, 보통, 마름), 허리 사이즈, 발 사이즈, 피부색상, 선호도(브랜드, 보세, 명품), 얼굴형(둥근형, 각진형, 긴형), 성격(소극적, 외향적, 내향적) 등을 포함할 수 있다.The member information received is the user's gender, age, height, weight, shoulders (eg, broad, short, curved), hairstyle (short, long hair, perm hair, with or without bangs), wearing glasses or not, and forehead shape. , Abdomen shape (belly out, not belly), hip shape (duck hip, round hip, flat hip), body type (fat, plump, normal, skinny), waist size, foot size, skin color, preference (brand, bonded, luxury), face shape (round, square, long), personality (passive, extroverted, introverted), and the like.
또한, 외부로부터 입력받거나 전달받은 아이템의 2D 이미지로부터 3D 이미지 데이터로 변환하여 패션 아이템 데이터베이스에 저장한다(S402).In addition, the 2D image of the item received or delivered from the outside is converted into 3D image data and stored in the fashion item database (S402).
패션 아이템 데이터베이스에는, 해당 패션 아이템의 이미지, 종류, 용도, 브랜드(명품, 브랜드, 보세), 사이즈, 섬유 종류(면, 실크, 마, 린넨, 폴리), 섬유 조성비, 섬유 특성, 장착 마커 위치 등을 포함할 수 있다.In the fashion item database, the image, type, use, brand (luxury, brand, bonded), size, fiber type (cotton, silk, hemp, linen, poly) of the corresponding fashion item, fiber composition ratio, fiber characteristics, location of mounting markers, etc. may include
한편, 상기 사용자와 상기 패션 아이템이 함께 촬영된 영상으로부터 상기 사용자의 외관을 추출하여 사용자 이미지를 획득하고, 상기 사용자와 상기 패션 아이템이 함께 촬영된 영상으로부터 상기 패션 아이템을 추출하여 패션 아이템 이미지를 획득할 수도 있다.On the other hand, a user image is obtained by extracting the user's appearance from an image in which the user and the fashion item are photographed together, and the fashion item is extracted from an image in which the user and the fashion item are photographed together to obtain a fashion item image You may.
사용자 단말기(110, 120)를 통해 가상현실(VR)기기(111, 121)를 이용한 스타일정보 제공 서비스를 요청받는다(S403).A request is made for a style information providing service using the virtual reality (VR)
스타일정보 제공 서비스를 요청 받음에 따라, 아바타 데이터베이스(104b)에서 기생성된 아바타를 불러오거나, 변경된 회원정보에 따라 기생성된 아바타를 수정하여 아바타를 로드한다(S404).In response to a request for a style information providing service, a pre-generated avatar is loaded from the
이후, 사용자 단말기(110, 120)를 통해 입력받은 스타일링 조건 또는 선택받은 조건에 따라 스타일 모델 데이터베이스(104c)에 근거하여 스타일을 결정한다(S405).Thereafter, a style is determined based on the
이후, 스타일링 조건 또는 결정된 스타일에 따른 패션 아이템을 추출한다(S406).Thereafter, a fashion item according to the styling condition or the determined style is extracted ( S406 ).
이후, 상기 아바타에 상기 추출한 패션 아이템의 레이어들을 중첩한다(S407).Thereafter, the layers of the extracted fashion item are superimposed on the avatar (S407).
이때, 상기 아바타와 해당 패션 아이템 사이에 서로 커플링되는 기준점에 설정된 장착 마커를 이용하여 레이어들을 중첩하며, 다수의 패션 아이템들의 장착 순서에 따라 상기 아바타 상에 해당 패션 아이템 레이어들이 순서대로 중첩된다.In this case, the layers are overlapped using mounting markers set at reference points coupled to each other between the avatar and the corresponding fashion item, and the corresponding fashion item layers are sequentially overlapped on the avatar according to the mounting order of the plurality of fashion items.
이후, 상기 중첩된 이미지를 랜더링하여 가상현실(VR) 이미지를 생성한다(S408).Thereafter, a virtual reality (VR) image is generated by rendering the superimposed image (S408).
이후, 상기 생성된 가상현실(VR) 이미지를 가상현실(VR) 기기(111, 121)를 통해 출력한다(S409).Thereafter, the generated virtual reality (VR) image is output through the virtual reality (VR)
이후, 상기 스타일 결정단계(S405)에서 결정된 스타일을 학습한다(S410).Thereafter, the style determined in the style determination step (S405) is learned (S410).
이후, 상기 학습된 스타일을 추론하여 스타일 모델을 업데이트한다(S411).Thereafter, the style model is updated by inferring the learned style (S411).
상세하게는, 상기 학습단계(S410)에서 학습한 내용에 따라 스타일추천모델 요소를 추론하고, 추론한 스타일추천모델 요소를 이용하여 상기 스타일 모델을 생성 또는 업데이트한다.In detail, a style recommendation model element is inferred according to the content learned in the learning step ( S410 ), and the style model is created or updated by using the inferred style recommendation model element.
도 5는 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에 있어서, 가상현실(VR) 기기를 통해 출력하는 패션 아이템이 장착된 아바타를 포함하는 화면의 일실시예 설명도이다.5 is an explanatory diagram of a screen including an avatar equipped with a fashion item output through a virtual reality (VR) device in a method for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention; .
도 5에 도시된 바와 같이, 일실시예에 따른 선택 메뉴 화면에서, 상의 선택(501), 하의 선택(502), 외투 선택(503), 선호 브랜드 선택(504), 액세서리 선택(505), 신발 선택(506), 용도 선택(507), 장소 선택(508), 감정 선택(509), 계절 선택(510), 배경 변경(511), 모션 변경(512), 날씨 변경(513), 추천의상 보기(514), 및 패션 아이템들이 장착된 아바타(515)가 도시되어 있다.5, on the selection menu screen according to an embodiment,
각각의 메뉴를 선택하면, 선택할 수 있는 메뉴 또는 화면이 도시될 수 있다. 예를 들어, 상의 선택을 누르면, 본인이 가지고 있는 해당 의류들이 디스플레이되고, 디스플레이된 의류들 중에서 선택하는 의류가 아바타에 장착되어 디스플레이되도록 할 수 있다.When each menu is selected, a selectable menu or screen may be displayed. For example, when selecting clothes is pressed, corresponding clothes that the user owns are displayed, and clothes selected from among the displayed clothes are mounted on the avatar and displayed.
각각의 메뉴 선택은 가상현실(VR) 기기(111, 121)에 포함된 리모콘 등에 의해 수행될 수 있다.Each menu selection may be performed by a remote controller included in the virtual reality (VR)
또한, 외부의 데이터 제공 서버(150)로부터 전달받은 의상들이 디스플레이되고, 디스플레이된 의류들 중에서 선택하는 의류가 아바타에 장착되어 디스플레이되도록 할 수 있다.In addition, clothes received from the external
또한, 용도 선택(507), 장소 선택(508), 감정 선택(509), 및 계절 선택(510)의 선택 조건에 따라 추천의상 보기(514) 메뉴가 활성화되어, 상황과 때에 맞는 의상을 추천받을 수 있다.In addition, according to the selection conditions of
또한, 배경 변경(511)에 따라 상황에 알맞은 의상을 잘 선택할 수 있으며, 모션 변경(512)에 따라, 장착되는 패션 아이템(의복)의 변형률, 의복압, 및 여유량을 판단할 수도 있다.In addition, according to the
도 6은 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서, 아바타 및 패션 아이템의 중첩된 이미지를 나타내는 설명도이다.6 is an explanatory diagram illustrating a superimposed image of an avatar and a fashion item in a method for providing smart style information using a virtual reality (VR) device according to the present invention.
도 6에 도시된 바와 같이, 아바타(601) 상에 패션 아이템(602)이 중첩되어 있다.As shown in FIG. 6 , a
예를 들어, 아바타(601) 및 패션 아이템(602)이 메시 형태의 삼각형의 집합으로 모델링한 것을 도시하고 있다.For example, it shows that the
도 7은 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서, 3D 이미지 처리 방법을 설명하기 위한 도면이다.7 is a view for explaining a 3D image processing method in the smart style information providing method using a virtual reality (VR) device according to the present invention.
섬유(직물)를 메시 형태의 삼각형의 집합으로 모델링할 때, 면 접촉하는 삼각형의 각 포인트는 다수의 삼각형에 의하여 공유되는데, 이러한 점을 고려할 때, 각 삼각형의 면적이 원래보다 몇 % 정도 변하였는지는 하기 [수학식 1]의 각 삼각형의 변형률(n) 계산을 통해 산출할 수 있다.When the fiber (fabric) is modeled as a set of triangles in the form of a mesh, each point of the triangle in face contact is shared by a number of triangles. It can be calculated by calculating the strain (n) of each triangle in [Equation 1] below.
[수학식 1][Equation 1]
여기서, L은 삼각형의 원래 면적을 나타내고, L1은 삼각형의 시뮬레이션 후(변형 후)의 면적을 나타낸다.Here, L represents the original area of the triangle, and L1 represents the area after simulation (after deformation) of the triangle.
이에 따라, 각 꼭지점에 연관된 삼각형의 변형률의 평균을 그 꼭지점의 변형률로 볼 수 있는데, 각 꼭지점의 변형률(q)은, 도 7에 도시된 바와 같이, 하나의 꼭지점 Q에 면하는 각 삼각형이 a, b, c, d, e, f 라고 할 때, 하기 [수학식 2]와 같이 산출할 수 있다.Accordingly, the average of the strains of the triangles associated with each vertex can be viewed as the strain at the vertex, and the strain (q) of each vertex is, as shown in FIG. , b, c, d, e, f can be calculated as in [Equation 2] below.
[수학식 2][Equation 2]
여기서, a'는 삼각형 a의 변형률, b'는 삼각형 b의 변형률, c'는 삼각형 c의 변형률, d'는 삼각형 d의 변형률, e'는 삼각형 e의 변형률, f'는 삼각형 f의 변형률을 각각 나타내고, p는 꼭지점 Q에 면하는 삼각형의 개수를 나타낸다.where a' is the strain in triangle a, b' is the strain in triangle b, c' is the strain in triangle c, d' is the strain in triangle d, e' is the strain in triangle e, f' is the strain in triangle f respectively, and p represents the number of triangles facing the vertex Q.
따라서, 스마트 스타일링 정보 제공 서버(100)에서는 3D 아바타에 패션 아이템을 장착시켰을 때 일련의 처리를 통해 상기 패션 아이템이 늘어나는 정도를 나타내는 변형률을 산출할 수 있다. 산출된 패션 아이템의 변형률에 근거하여, 스마트 스타일링 정보 제공 서버(100)에서는, 디스플레이되는 패션 아이템의 부분적인 색상 변화를 주어, 예컨대 패션 아이템의 변형이 커질수록 빨간색이 짙어지고 의상의 변형이 줄어들수록 파란색이 짙어지며 변함이 없을 경우 흰색으로 해당 부분이 디스플레이되도록 함으로써, 스마트 스타일링 서비스를 제공받는 사용자가 패션 아이템의 변형률을 시각적으로 잘 인식할 수 있도록 서비스할 수 있다.Accordingly, when the smart styling
또한, 스마트 스타일링 정보 제공 서버(100)는 스트레인(strain) 값으로부터 원단의 물성치를 고려한 역산으로 스트레스를 계산하고, 이때 미소 변형으로 가정하여 선형 대수식으로 모델링하거나 혹은 특성에 따라 비선형 대수식으로 모델링하는 이 기술분야에 잘 알려진 기법 등을 통해 의복압을 산출하며, 산출된 의복압 또한, 상술한 변형률에서와 유사하게 의복압의 정도를 패션 아이템의 부분적인 색상 변화(예컨대, 파란색에서 하얀색으로의 변화 등)로 표현함으로써, 스마트 스타일링 서비스를 제공받는 사용자가 의상을 착용했을 때의 의복압을 시각적으로 잘 인식할 수 있도록 서비스할 수도 있다.In addition, the smart styling
또한, 스마트 스타일링 정보 제공 서버(100)는, 직물의 한 점에서 수직인 방향(normal vector)으로 3D 아바타의 바디(인체)까지의 최단 거리를 측정하는 방식 등을 통해 여유량을 산출하며, 산출한 여유량의 정도를 의상의 부분적인 색상 변화(예컨대, 바디와 직물의 거리가 멀수록 빨간색으로, 거리가 가까울수록 하얀색으로 변화 등)로 표현함으로써, 스마트 스타일링 서비스를 제공받는 사용자가 의상을 착용했을 때의 여유량을 시각적으로 잘 인식할 수 있도록 서비스할 수도 있다.In addition, the smart styling
도 8은 본 발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서, 가상현실(VR)이미지생성단계(S408)에서 의상의 드레이프 정도를 조절하는 것을 설명하기 위한 섬유의 조성(면혼용율)에 따른 섬유의 특성에 대한 도면이다.8 is a composition of fibers (cotton) for explaining adjusting the degree of drape of clothes in the virtual reality (VR) image generation step (S408) in the method for providing smart style information using a virtual reality (VR) device according to the present invention; It is a diagram of the properties of fibers according to the mixing ratio).
도 8에 도시된 바와 같이, 섬유의 조성(면혼용율)(801)에 따라, 바이어스 신축성(802), 굽힘강도(803), 좌굴점강도(804), 및 좌굴점(805)이 모두 다르다.As shown in FIG. 8 , the
천의 드레이프성(drapability)은 의복, 장식용 제품 등의 외형과 실루엣을 결정하는 주요한 인자이며, 인장(tensile), 전단(shear), 굽힘(bending) 등과 같은 천의 일차적인 역학적 성질들의 복합적 작용으로 나타나는 현상이다. 의복의 드레이프성은 직물의 두께, 중량, 소재의 유연성, 길이 등의 인자에 의해 결정된다. 따라서 소재 기본 물성 분석 및 정적 특성 분석결과를 참고하여, 가상현실(VR)이미지생성단계(S408)에서 랜더링 처리를 할 수 있다.The drapability of fabric is a major factor that determines the appearance and silhouette of clothes and decorative products, and it is a complex action of the primary mechanical properties of fabric such as tensile, shear, and bending. is a phenomenon that appears The drape of a garment is determined by factors such as the thickness, weight, flexibility of the material, and length of the fabric. Therefore, the rendering process may be performed in the virtual reality (VR) image creation step (S408) with reference to the material basic physical property analysis and static property analysis results.
소재의 드레이프성을 평가하기 위해 사용되고 있는 드레이프 계수는 천이 지지대 위에서 처지는 정도를 정량적으로 나타낸다. 드레이프 계수는 처지기 전후의 시료의 면적비로 정의된다. 이 면적비는 0~100%의 값을 가지며, 드레이프 계수가 크면 드레이프성이 좋지 못한 뻣뻣한 직물임을 나타내고, 드레이프 계수가 작으면 드레이프성이 좋다는 것을 말한다.The drape coefficient, which is used to evaluate the drape of a material, is a quantitative measure of how much it sags on the transition support. The drape coefficient is defined as the area ratio of the sample before and after sagging. This area ratio has a value of 0-100%, and a large drape coefficient indicates a stiff fabric with poor drape properties, and a small drape coefficient indicates good drape properties.
한편, 동일한 드레이프 계수를 나타내는 소재들에서도 각 소재의 드레이프 형상은 서로 다르게 나타날 수 있다. 즉 드레이프 면적만으로는 노드(node)의 산(山)의 높이나 곡(谷) 등의 형상정보를 알아낼 수 없다. 정의된 드레이프 형상인자는 드레이프 형상의 굴곡 수, 중심점으로부터 굴곡의 최대점인 노드 산, 중심점으로부터 굴곡의 최저점인 노드 곡의 세 가지이다. 또한 상기 드레이프 형상인자로부터 도출한 노드의 산 높이의 평균은 값이 클수록 받침대 위에서 소재의 펼쳐진 상태가 커진 것을 의미하며, 작을수록 펼쳐진 상태가 작아지는 것을 의미한다. 노드 산의 높이 변동률은 굴곡의 균일성을 표시하는 것으로 값이 작을수록 주름이 균일하다는 것을 의미한다.Meanwhile, even in materials exhibiting the same drape coefficient, the drape shape of each material may be different from each other. That is, shape information such as the height of a mountain or a valley of a node cannot be found only by the drape area. The defined drape shape factor is the number of bends of the drape shape, the peak of the curve from the center point, the peak of the curve, and the curve of the node, the minimum point of the curve, from the center point. In addition, the average of the peak heights of the nodes derived from the drape shape factor means that the unfolded state of the material on the pedestal increases as the value increases, and the smaller the average of the peak heights of the nodes, the smaller the unfolded state becomes. The rate of change in the height of the nodal mountain indicates the uniformity of the curve, and the smaller the value, the more uniform the wrinkles.
즉, 본발명에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에서는, 섬유의 특성 중, 밀도, 위사강도, 경사강도, 전단강도, 굽힘강도, 좌굴값 등을 이용하여 드레이프성을 조절하여 상기 의상(패션 아이템)을 실감나게 표현하는 것이 가능하다.That is, in the method for providing smart style information using a virtual reality (VR) device according to the present invention, the drape property is adjusted using the density, weft strength, warp strength, shear strength, bending strength, buckling value, etc. among the characteristics of fibers. Thus, it is possible to realistically express the costume (fashion item).
이상에서 본 발명의 일 실시예에 따른 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법에 대하여 설명하였지만, 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법을 구현하기 위한 프로그램이 저장된 컴퓨터 판독 가능한 기록매체 및 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법을 구현하기 위한 컴퓨터 판독 가능한 기록매체에 저장된 프로그램 역시 구현 가능함은 물론이다.Although the method for providing smart style information using a virtual reality (VR) device according to an embodiment of the present invention has been described above, a computer reading program storing a program for implementing the method for providing smart style information using a virtual reality (VR) device has been described. Of course, a program stored in a computer-readable recording medium for implementing a smart style information provision method using a possible recording medium and a virtual reality (VR) device can also be implemented.
즉, 상술한 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법은 이를 구현하기 위한 명령어들의 프로그램이 유형적으로 구현됨으로써, 컴퓨터를 통해 판독될 수 있는 기록매체에 포함되어 제공될 수도 있음을 당업자들이 쉽게 이해할 수 있을 것이다. 다시 말해, 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어, 컴퓨터 판독 가능한 기록매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 상기 컴퓨터 판독 가능한 기록매체의 예에는 하드 디스크, 플로피 디스크 및 자기테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리, USB 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.That is, those skilled in the art know that the smart style information providing method using the above-described virtual reality (VR) device may be provided by being included in a recording medium that can be read through a computer by tangibly implementing a program of instructions for implementing it. It will be easy to understand. In other words, it may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable recording medium. The computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the computer-readable recording medium may be specially designed and configured for the present invention, or may be known and used by those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and floppy disks. magneto-optical media, and hardware devices specially configured to store and carry out program instructions, such as ROM, RAM, flash memory, USB memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.
본 발명은 상기한 실시예에 한정되지 아니하며, 적용범위가 다양함은 물론이고, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 다양한 변형 실시가 가능한 것은 물론이다.The present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the gist of the present invention as claimed in the claims.
100: 스마트 스타일정보 제공 서버
110, 120: 사용자 단말기
111, 121: 가상현실(VR) 기기 (헤드 마운티드 디스플레이, HMD)
130: 3D 스캐너
140: 결제 서버
150: 데이터 제공 서버
101: 인터페이스부
102: 제어부
103: 이미지 처리부
104: 데이터베이스 관리부
104a: 회원 DB
104b: 아바타 DB
104c: 스타일 모델 DB
104d: 랜더링 DB
104e: 패션 아이템 DB
104f: 객체 모델 DB
105: 분석부
201: 신체 데이터 획득부
202: 아바타 조건 입력부
203: 아바타 생성부
204: 스타일 추출부
205: 레이어 중첩부
206: 가상현실(VR) 이미지 랜더링부
207: 아이템 등록부
208: 텍스처 적용부
301: 조건 분석부
302: 스타일 결정부
303: 학습부
304: 추론부
305: 모델링부100: smart style
111, 121: Virtual reality (VR) device (head mounted display, HMD)
130: 3D scanner
140: payment server 150: data providing server
101: interface unit 102: control unit
103: image processing unit 104: database management unit
104a:
104c:
104e:
105: analysis unit
201: body data acquisition unit 202: avatar condition input unit
203: avatar generating unit 204: style extracting unit
205: layer overlapping unit 206: virtual reality (VR) image rendering unit
207: Item Register 208: Texture Applicator
301: condition analysis unit 302: style determination unit
303: learning unit 304: reasoning unit
305: modeling unit
Claims (10)
사용자의 신체관련 데이터를 입력받아 3D 아바타를 생성하고, 상기 사용자가 실제 보유한 패션 아이템 및 외부의 데이터 제공 서버로부터 전달받은 패션 아이템의 정보를 저장하고, 상기 사용자의 선택에 따른 패션 아이템들이 상기 아바타에 착용된 상태 또는 스타일 모델에 기반하여 상기 사용자에게 추천하는 패션 아이템들이 상기 아바타에 착용된 상태를 가상현실(VR) 기기를 통해 출력할 수 있도록 하기 위한 스마트 스타일링 정보 제공 서버(100);
상기 스마트 스타일링 정보 제공 서버에 접속하여, 스타일링 정보를 제공받기 위해 필요한 데이터를 송수신하고, 상기 가상현실(VR) 기기의 디스플레이부를 통해 패션 아이템들이 착용된 아바타를 출력하기 위한 다수의 사용자 단말기(110, 120); 및
상기 사용자 단말기를 통해 상기 스마트 스타일링 정보 제공 서버로부터 스타일링 정보를 제공받는데 소요되는 비용 및, 추천된 패션 아이템을 구매하는데 소요되는 비용을 결제하기 위한 결제 서버(140)
를 포함하고,
상기 스마트 스타일링 정보 제공 서버(100)는,
상기 가상현실(VR) 기기로 상기 스타일링 정보 제공을 위한 인터페이스를 제공하는 인터페이스부(101);
상기 인터페이스부를 통하여 송수신되는 데이터에 기초하여 스타일링 정보를 제공하는데 필요한 이미지 처리를 수행하기 위한 이미지 처리부(103);
상기 스타일링 정보 제공을 위해 필요한 데이터를 저장하고 있는 데이터베이스부(104);
상기 사용자의 선택 또는 추천 요청에 따라 결정된 패션 아이템을 분석하여 상기 스타일 모델을 업데이트하기 위한 분석부(105); 및
상기 인터페이스부, 이미지 처리부, 데이터베이스부, 및 분석부를 포함한 각 구성요소를 제어하기 위한 제어부(102)
를 포함하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템.
In a system for providing smart styling information using a virtual reality (VR) device,
A 3D avatar is generated by receiving the user's body-related data, information of a fashion item actually owned by the user and a fashion item received from an external data providing server is stored, and fashion items according to the user's selection are added to the avatar. a smart styling information providing server 100 for outputting a worn state of the fashion items recommended to the user based on a worn state or a style model worn on the avatar through a virtual reality (VR) device;
A plurality of user terminals 110 for accessing the smart styling information providing server, transmitting and receiving data necessary to receive styling information, and outputting an avatar wearing fashion items through a display unit of the virtual reality (VR) device; 120); and
A payment server 140 for paying a cost required to receive styling information from the smart styling information providing server through the user terminal and a cost required to purchase a recommended fashion item
including,
The smart styling information providing server 100,
an interface unit 101 providing an interface for providing the styling information to the virtual reality (VR) device;
an image processing unit 103 for performing image processing necessary to provide styling information based on data transmitted and received through the interface unit;
a database unit 104 that stores data necessary for providing the styling information;
an analysis unit 105 for updating the style model by analyzing the fashion item determined according to the user's selection or recommendation request; and
The control unit 102 for controlling each component including the interface unit, the image processing unit, the database unit, and the analysis unit
A system for providing smart styling information using a virtual reality (VR) device, characterized in that it comprises a.
상기 스마트 스타일정보 제공 서버로부터의 요청에 따라 패션 아이템에 대한 데이터를 제공하는 데이터 제공 서버(150); 및
사용자의 외형을 스캔하여 3D 이미지 데이터를 제공하는 3D 스캐너(130)
를 더 포함하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템.
The method of claim 1,
a data providing server 150 for providing data on fashion items according to a request from the smart style information providing server; and
3D scanner 130 that provides 3D image data by scanning the user's appearance
Smart styling information providing system using a virtual reality (VR) device, characterized in that it further comprises.
상기 이미지 처리부(103)는,
상기 사용자 단말기 또는 3D 스캐너를 통해 사용자의 신체사이즈 관련 데이터를 입력받기 위한 신체 데이터 획득부(201);
상기 사용자 단말기를 통해 아바타의 조건을 입력받기 위한 아바타 조건 입력부(202);
상기 아바타 조건 입력부를 통해 입력받은 조건 및 아바타 데이터베이스에 근거하여 해당 사용자에 대응하는 아바타를 생성하기 위한 아바타 생성부(203);
상기 사용자 단말기를 통해 입력받은 조건 또는 스타일 추천 조건에 따른 분석 결과에 따라 패션 아이템들을 추출하기 위한 스타일 추출부(204);
상기 추출한 패션 아이템들을 상기 아바타 상에 중첩하기 위한 레이어 중첩부(205);
상기 중첩된 레이어 이미지를 랜더링하여 랜더링된 가상현실(VR) 이미지를 생성하기 위한 가상현실(VR) 이미지 랜더링부(206);
상기 데이터 제공 서버로부터 전달받은 아이템에 대한 데이터를 객체 모델에 기반하여 모델링하여 스타일 정보 제공에 필요한 패션 아이템으로 등록하기 위한 아이템 등록부(207); 및
상기 패션 아이템의 소재 특성에 따라 상기 아바타에 장착된 상기 패션 아이템의 드레이프 정도를 적용하고, 상기 아바타의 모션을 변경함에 따라 아바타 외관의 질감 처리를 적용하기 위한 텍스처 적용부(208)
를 포함하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템.
The method of claim 1,
The image processing unit 103,
a body data acquisition unit 201 for receiving body size-related data of a user through the user terminal or a 3D scanner;
an avatar condition input unit 202 for receiving an avatar condition input through the user terminal;
an avatar generating unit 203 for generating an avatar corresponding to the user based on the condition received through the avatar condition input unit and the avatar database;
a style extraction unit 204 for extracting fashion items according to an analysis result according to a condition input through the user terminal or a style recommendation condition;
a layer overlapping unit 205 for superimposing the extracted fashion items on the avatar;
a virtual reality (VR) image rendering unit 206 for generating a rendered virtual reality (VR) image by rendering the overlapped layer image;
an item registration unit 207 for modeling data on an item received from the data providing server based on an object model and registering it as a fashion item required to provide style information; and
A texture application unit (208) for applying a drape degree of the fashion item mounted on the avatar according to the material characteristics of the fashion item, and applying a texture processing of the avatar appearance as the motion of the avatar is changed
A system for providing smart styling information using a virtual reality (VR) device, characterized in that it comprises a.
상기 분석부(105)는,
상기 사용자 단말기를 통해 선택 조건을 입력받고 상기 사용자의 회원 정보 및 데이터를 전달받아 추천할 패션 아이템의 조건을 분석하기 위한 조건 분석부(301);
상기 조건 분석부에서 분석한 결과에 따라 상기 스타일 모델에 기반하여 스타일 정보를 결정하기 위한 스타일 결정부(302);
상기 스타일 결정부에서 결정한 스타일 정보를 학습하기 위한 학습부(303);
상기 학습부의 학습 내용에 따라 스타일추천모델 요소를 추론하기 위한 추론부(304); 및
상기 추론부에서 추론한 스타일추천모델 요소를 이용하여 상기 스타일 모델을 생성 또는 업데이트하기 위한 모델링부(305)
를 포함하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템.
The method of claim 1,
The analysis unit 105,
a condition analysis unit (301) for receiving selection conditions input through the user terminal and receiving member information and data of the user to analyze conditions of a fashion item to be recommended;
a style determination unit (302) for determining style information based on the style model according to the analysis result of the condition analysis unit;
a learning unit 303 for learning the style information determined by the style determining unit;
an inference unit 304 for inferring a style recommendation model element according to the learning contents of the learning unit; and
A modeling unit 305 for generating or updating the style model by using the style recommendation model element inferred by the inference unit.
A system for providing smart styling information using a virtual reality (VR) device, characterized in that it comprises a.
상기 아바타 및 상기 패션 아이템에는,
상기 패션 아이템의 종류에 따라 서로 커플링되는 기준점에 장착 마커가 설정되는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일링 정보 제공 시스템.
4. The method of claim 3,
In the avatar and the fashion item,
Smart styling information providing system using a virtual reality (VR) device, characterized in that mounting markers are set at reference points coupled to each other according to the type of the fashion item.
회원정보 입력에 따른 아바타를 생성하여 아바타 데이터베이스에 저장하는 아바타생성단계(S401);
외부로부터 입력받거나 전달받은 아이템의 2D 이미지로부터 3D 이미지 데이터로 변환하여 패션 아이템 데이터베이스에 저장하는 패션아이템저장단계(S402);
사용자 단말기를 통해 가상현실(VR)기기를 이용한 스타일정보 제공 서비스를 요청받는 서비스요청단계(S403);
상기 아바타 데이터베이스로부터 기생성된 아바타를 불러오거나, 변경된 회원정보에 따라 기생성된 아바타를 수정하여 로드하는 아바타로드단계(S404);
상기 사용자 단말기를 통해 입력받은 스타일링 조건 또는 선택받은 조건에 따라 스타일 모델에 근거하여 스타일을 결정하는 스타일결정단계(S405);
스타일링 조건 또는 결정된 스타일에 따른 패션 아이템을 추출하는 패션 아이템추출단계(S406);
상기 로드된 아바타에 상기 추출한 패션 아이템의 레이어들을 중첩하는 레이어중첩단계(S407);
상기 중첩된 이미지를 랜더링하여 가상현실(VR) 이미지를 생성하는 가상현실(VR)이미지생성단계(S408);
상기 생성된 가상현실(VR) 이미지를 가상현실(VR) 기기를 통해 출력하는 출력단계(S409)
를 포함하는 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법.
In a method for providing smart style information using a virtual reality (VR) device,
An avatar creation step of generating an avatar according to the input of member information and storing it in an avatar database (S401);
A fashion item storage step (S402) of converting the 2D image of the item received or delivered from the outside into 3D image data and storing it in a fashion item database;
a service request step of receiving a request for a style information provision service using a virtual reality (VR) device through a user terminal (S403);
an avatar loading step (S404) of loading a pre-generated avatar from the avatar database or modifying and loading a pre-generated avatar according to the changed member information;
a style determination step (S405) of determining a style based on a style model according to a styling condition input through the user terminal or a selected condition;
a fashion item extraction step of extracting a fashion item according to a styling condition or a determined style (S406);
a layer overlapping step (S407) of overlapping the extracted fashion item layers on the loaded avatar;
a virtual reality (VR) image generating step (S408) of generating a virtual reality (VR) image by rendering the superimposed image;
An output step of outputting the generated virtual reality (VR) image through a virtual reality (VR) device (S409)
A method of providing smart style information using a virtual reality (VR) device comprising a.
상기 결정된 스타일을 학습하는 학습단계(S410); 및
상기 학습된 스타일을 추론하여 상기 스타일 모델을 업데이트하는 업데이트단계(S411)
를 더 포함하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법.
7. The method of claim 6,
a learning step of learning the determined style (S410); and
An update step of updating the style model by inferring the learned style (S411)
Smart style information providing method using a virtual reality (VR) device, characterized in that it further comprises.
상기 아바타생성단계(S401)에서는,
사용자의 성별, 나이, 신장, 체중, 어깨, 헤어스타일, 안경착용유무, 이마형태, 복부형태, 힙형태, 체형, 허리 사이즈, 발 사이즈, 피부색상, 선호도(브랜드, 보세, 명품), 얼굴형, 성격을 회원정보로 입력받는 것을 특징으로 하고,
상기 패션아이템저장단계(S402)에서는,
해당 패션 아이템의 이미지, 종류, 용도, 브랜드, 사이즈, 섬유 종류, 섬유 조성비, 섬유 특성, 장착 마커 위치를 포함하여 패션 아이템 데이터베이스를 구성하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법.
7. The method of claim 6,
In the avatar creation step (S401),
User's gender, age, height, weight, shoulder, hairstyle, wearing glasses or not, forehead shape, abdomen shape, hip shape, body type, waist size, foot size, skin color, preference (brand, bonded, luxury goods), face shape , characterized in that the personality is input as member information,
In the fashion item storage step (S402),
Smart style information using a virtual reality (VR) device, characterized in that it constitutes a fashion item database including the image, type, use, brand, size, fiber type, fiber composition ratio, fiber characteristics, and mounting marker position of the corresponding fashion item How to provide.
상기 레이어중첩단계(S407)에서는,
상기 아바타와 해당 패션 아이템 사이에 서로 커플링되는 기준점에 설정된 장착 마커를 이용하여 레이어들을 중첩하며,
다수의 패션 아이템들의 장착 순서에 따라 상기 아바타 상에 해당 패션 아이템 레이어들이 순서대로 중첩되는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법.
7. The method of claim 6,
In the layer overlapping step (S407),
Layers are overlapped using mounting markers set at reference points coupled to each other between the avatar and the corresponding fashion item,
A method for providing smart style information using a virtual reality (VR) device, characterized in that the corresponding fashion item layers are sequentially overlapped on the avatar according to the mounting order of a plurality of fashion items.
상기 가상현실(VR)이미지생성단계(S408)에서는,
섬유의 특성 중, 밀도, 위사강도, 경사강도, 전단강도, 굽힘강도, 및 좌굴값을 이용하여 패션 아이템의 드레이프성을 조절하여 상기 패션 아이템을 표현하는 것을 특징으로 하는 가상현실(VR) 기기를 이용한 스마트 스타일정보 제공 방법.7. The method of claim 6,
In the virtual reality (VR) image generation step (S408),
Among the characteristics of the fiber, density, weft strength, warp strength, shear strength, bending strength, and buckling value are used to adjust the drape of the fashion item to express the fashion item. A virtual reality (VR) device characterized in that How to provide smart style information using.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200065634A KR102419329B1 (en) | 2020-06-01 | 2020-06-01 | System for providing smart style information using virtual reality devices and method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200065634A KR102419329B1 (en) | 2020-06-01 | 2020-06-01 | System for providing smart style information using virtual reality devices and method thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20210148591A true KR20210148591A (en) | 2021-12-08 |
KR102419329B1 KR102419329B1 (en) | 2022-07-19 |
Family
ID=78867716
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200065634A KR102419329B1 (en) | 2020-06-01 | 2020-06-01 | System for providing smart style information using virtual reality devices and method thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102419329B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20240062362A (en) | 2022-10-31 | 2024-05-09 | 주식회사 로로젬 | GPS/AR-based experiential service provision system |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100879460B1 (en) * | 2008-06-17 | 2009-01-20 | 에스케이씨앤씨 주식회사 | Processing method of electronic commerce system using user avatar |
KR20140119981A (en) * | 2013-04-01 | 2014-10-13 | 주홍찬 | Apparatus and method for virtual reality clothes or virtual reality accessory wear by using augmented reality |
KR20160067373A (en) | 2014-12-04 | 2016-06-14 | 김상백 | System of giving clothes wearing information with AVATA and operating method thereof |
KR101669927B1 (en) | 2015-01-15 | 2016-10-27 | (주)에프엑스기어 | Virtual fitting system, method of providing virtual fitting service for promoting sales and computer program for the same |
KR101682769B1 (en) | 2014-10-28 | 2016-12-05 | 함승철 | The user fitting type automatic online fashion coordination matching method |
KR20170006604A (en) | 2015-07-08 | 2017-01-18 | 주식회사 케이티 | Server apparatus and method for recommending cloth thereby |
KR101707707B1 (en) | 2012-12-14 | 2017-02-16 | 한국전자통신연구원 | Method for fiiting virtual items using human body model and system for providing fitting service of virtual items |
KR20180017597A (en) * | 2016-08-10 | 2018-02-21 | 주식회사 원더풀플랫폼 | System and method for fashion coordination |
-
2020
- 2020-06-01 KR KR1020200065634A patent/KR102419329B1/en active IP Right Grant
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100879460B1 (en) * | 2008-06-17 | 2009-01-20 | 에스케이씨앤씨 주식회사 | Processing method of electronic commerce system using user avatar |
KR101707707B1 (en) | 2012-12-14 | 2017-02-16 | 한국전자통신연구원 | Method for fiiting virtual items using human body model and system for providing fitting service of virtual items |
KR20140119981A (en) * | 2013-04-01 | 2014-10-13 | 주홍찬 | Apparatus and method for virtual reality clothes or virtual reality accessory wear by using augmented reality |
KR101682769B1 (en) | 2014-10-28 | 2016-12-05 | 함승철 | The user fitting type automatic online fashion coordination matching method |
KR20160067373A (en) | 2014-12-04 | 2016-06-14 | 김상백 | System of giving clothes wearing information with AVATA and operating method thereof |
KR101669927B1 (en) | 2015-01-15 | 2016-10-27 | (주)에프엑스기어 | Virtual fitting system, method of providing virtual fitting service for promoting sales and computer program for the same |
KR20170006604A (en) | 2015-07-08 | 2017-01-18 | 주식회사 케이티 | Server apparatus and method for recommending cloth thereby |
KR20180017597A (en) * | 2016-08-10 | 2018-02-21 | 주식회사 원더풀플랫폼 | System and method for fashion coordination |
Also Published As
Publication number | Publication date |
---|---|
KR102419329B1 (en) | 2022-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11593871B1 (en) | Virtually modeling clothing based on 3D models of customers | |
US10702216B2 (en) | Method and system for body scanning and display of biometric data | |
US10872475B2 (en) | 3D mobile renderer for user-generated avatar, apparel, and accessories | |
US20170004567A1 (en) | System and method for providing modular online product selection, visualization and design services | |
KR101728588B1 (en) | Smart device and virtual experience providing server provide virtual experience service method using digital clothes | |
GB2564745B (en) | Methods for generating a 3D garment image, and related devices, systems and computer program products | |
CN109598798B (en) | Virtual object fitting method and virtual object fitting service system | |
KR101671649B1 (en) | Method and System for 3D manipulated image combined physical data and clothing data | |
US20190130649A1 (en) | Clothing Model Generation and Display System | |
US20160088284A1 (en) | Method and system for determining biometrics from body surface imaging technology | |
US10628729B2 (en) | System and method for body scanning and avatar creation | |
EP2775456A2 (en) | Interactive cubicle and method for determining a body shape | |
Kim et al. | An exploratory study of users’ evaluations of the accuracy and fidelity of a three-dimensional garment simulation | |
CN108292449A (en) | Three-dimensional garment is changed using gesture | |
US20140279289A1 (en) | Mobile Application and Method for Virtual Dressing Room Visualization | |
EP1231569A1 (en) | Interactive three-dimensional system for trying eyeglasses | |
CN107924532A (en) | Method and apparatus for the description for providing dress form | |
TW200828043A (en) | Terminal try-on simulation system and operating and applying method thereof | |
CN113610612B (en) | 3D virtual fitting method, system and storage medium | |
KR20130027801A (en) | User terminal for style matching, style matching system using the user terminal and method thereof | |
CN105989617A (en) | Virtual try-on apparatus and virtual try-on method | |
CN105989618A (en) | Virtual try-on apparatus and virtual try-on method | |
CN105374057A (en) | Virtual try-on apparatus and virtual try-on method | |
AU2017260525B2 (en) | Method and system for body scanning and display of biometric data | |
Idrees et al. | Interactive marketing with virtual commerce tools: purchasing right size and fitted garment in fashion metaverse |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
E701 | Decision to grant or registration of patent right | ||
E701 | Decision to grant or registration of patent right |