KR20180000007A - Shoping inducing system using augmented reality - Google Patents

Shoping inducing system using augmented reality Download PDF

Info

Publication number
KR20180000007A
KR20180000007A KR1020160077071A KR20160077071A KR20180000007A KR 20180000007 A KR20180000007 A KR 20180000007A KR 1020160077071 A KR1020160077071 A KR 1020160077071A KR 20160077071 A KR20160077071 A KR 20160077071A KR 20180000007 A KR20180000007 A KR 20180000007A
Authority
KR
South Korea
Prior art keywords
user
module
image
hologram
display
Prior art date
Application number
KR1020160077071A
Other languages
Korean (ko)
Inventor
송지성
박수조
김우형
강나연
허도성
김재원
Original Assignee
한양대학교 에리카산학협력단
송지성
김재원
강나연
허도성
박수조
김우형
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 에리카산학협력단, 송지성, 김재원, 강나연, 허도성, 박수조, 김우형 filed Critical 한양대학교 에리카산학협력단
Priority to KR1020160077071A priority Critical patent/KR20180000007A/en
Publication of KR20180000007A publication Critical patent/KR20180000007A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3245—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of image modifying data, e.g. handwritten addenda, highlights or augmented reality information

Abstract

The present invention provides a shopping induction system using augmented reality. The shopping induction system using augmented reality according to an aspect of the present invention includes a camera for photographing a user, a server for storing a plurality of hologram images of clothes provided in a clothing store, a driving control unit for sequentially loading the plurality of hologram images stored in the server while replacing the hologram images, and a VR projector for projecting the hologram images onto a users body to fit virtual clothes to the users body. Accordingly, the present invention can induce a purchase by the virtual fitting of various clothes.

Description

증강현실을 이용한 쇼핑 유도 시스템{SHOPING INDUCING SYSTEM USING AUGMENTED REALITY}[0001] SHOPING INDUCING SYSTEM USING AUGMENTED REALITY [0002]

본 발명은 쇼핑 유도 시스템에 관한 것으로서 보다 상세하게는 증강현실을 이용한 쇼핑 유도 시스템에 관한 것이다.
The present invention relates to a shopping induction system, and more particularly, to a shopping induction system using an augmented reality.

사용자가 눈으로 보는 현실세계에 가상의 객체를 겹쳐 보여주는 기술을 '증강현실(Augmented Reality)'이라고 한다. 현실세계에 실시간으로 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주므로 혼합현실(Mixed Reality, MR)이라고도 한다.Augmented Reality is a technique for superimposing virtual objects on the real world seen by the user. It is called Mixed Reality (MR) because it combines real world and virtual world with additional information in real time and displays it as one image.

현실세계를 가상세계로 보완해주는 개념인 증강현실은 컴퓨터 그래픽으로 만들어진 가상환경을 사용하지만 주역은 현실환경이다. 컴퓨터 그래픽은 현실환경에 필요한 정보를 추가 제공하는 역할을 한다.Augmented reality, a concept that complements the real world with a virtual world, uses a virtual environment created by computer graphics, but the protagonist is a real environment. Computer graphics serve to provide additional information needed for the real world.

이러한 증강현실기술은 가상환경만으로 구성된 가상현실기술과 달리, 실제 환경과 가상의 객체가 혼합된 영상을 제공하므로, 사용자가 실제 환경을 볼 수 있게 하여 보다 나은 현실감과 부가 정보를 제공한다.Unlike the virtual reality technology, which consists of a virtual environment only, the augmented reality technology provides a mixed reality environment and a virtual object so that the user can see the real environment and provide better reality and additional information.

증강현실기술은 원격의료진단·방송·건축설계·제조공정관리 등에 활용된다. 특히, 최근 스마트폰이 널리 보급 되면서 본격적인 상업화 단계에 들어섰으며, 게임 및 모바일 솔루션 업계·교육 분야 등에서도 다양한 제품을 개발하고 있다.Augmented reality technology is used for remote medical diagnosis, broadcasting, architectural design, manufacturing process management. In particular, smartphones have become popular in the commercialization stage in recent years, and various products are being developed in the game and mobile solution industry and education field.

예를 들어, 스마트폰 카메라로 주변을 비추면 인근에 있는 상점의 위치, 전화번호 등의 정보가 입체영상으로 표기되는 안내 서비스 등은 이미 상업적 서비스로 운영되고 있다.For example, a guide service for displaying information such as the location of a shop nearby, a telephone number, and the like in a stereoscopic image is operated as a commercial service when the user is illuminated by a smartphone camera.

한편, 온라인상에서 3D 이미지를 제공하는 가상현실 기술은 국내공개특허 10-2000-0063857호에 의하여 알려졌고, 3차원 이미지를 생성하는 기술은 국내특허등록 10-0926281호로 알려졌으며, 오프라인 매장을 가상현실 기술을 이용하여 안내하는 기술은 국내특허등록 10-0932288호로 알려졌으나, 단순히 3차원적으로 이미지를 제공하거나, 길을 안내하는 수준이어서, 구매자가 원하는 영상을 제공하는 데에는 한계가 있다.
Meanwhile, a virtual reality technology for providing a 3D image on-line is disclosed in Korean Patent Laid-Open No. 10-2000-0063857, a technology for generating a three-dimensional image is known as a Korean Patent Registration No. 10-0926281, Has been known as a domestic patent registration No. 10-0932288, but it is limited in providing a desired image since it is merely providing images in three dimensions or guiding a route.

본 발명은 증강현실을 이용한 쇼핑 유도 시스템을 제공한다.
The present invention provides a shopping induction system using an augmented reality.

본 발명의 일 측면에 따른 증강현실을 이용한 쇼핑 유도 시스템은 사용자를 촬영하는 카메라, 의류 매장에 비치된 복수개의 의류의 홀로그램 영상이 저장된 서버, 상기 서버에 저장된 복수의 홀로그램 영상을 교체하면서 순차적으로 로딩시키는 구동 제어부, 및 홀로그램 영상을 사용자의 신체에 투사하여 사용자의 신체에 가상의 의류를 피팅하는 VR 프로젝터를 포함한다.According to an aspect of the present invention, a shopping induction system using an augmented reality includes a camera for photographing a user, a server storing a plurality of hologram images of clothes stored in a clothing store, a plurality of hologram images stored in the server, And a VR projector for projecting a hologram image onto a user's body to fit a virtual garment to the user's body.

여기서, 상기 카메라는 사용자의 동선을 따라 회전하면서 사용자의 동선을 추적하는 동선 추정 모듈을 포함할 수 있다.Here, the camera may include a copper wire estimation module that tracks a copper wire of a user while rotating along a copper wire of a user.

또한, 상기 구동 제어부는 사용자의 성별을 판단하는 성별 판단 모듈을 포함할 수 있다.In addition, the drive control unit may include a sex determination module for determining a sex of a user.

또한, 상기 구동 제어부는 사용자의 키와 몸무게를 추정하여 체형을 판단하는 체형 판단 모듈을 포함할 수 있다.In addition, the drive control unit may include a body type determination module that determines a body type by estimating a user's key and body weight.

또한, 상기 구동 제어부는 사용자의 연령을 판단하는 연령 판단 모듈을 포함할 수 있다.In addition, the drive control unit may include an age determination module for determining the age of the user.

또한, 상기 구동 제어부는 기 설정된 간격으로 복수의 홀로그램 영상을 교체하면서 순차적으로 로딩시키는 연속 로딩 모듈을 포함할 수 있다.The driving control unit may include a continuous loading module for sequentially loading a plurality of hologram images while replacing the plurality of hologram images at predetermined intervals.

또한, 상기 구동 제어부는 사용자의 행동에 의하여 선택된 홀로그램 영상을 유지시키는 선택 표시 모듈을 포함할 수 있다.In addition, the drive control unit may include a selection display module for holding a hologram image selected by a user's behavior.

또한, 상기 선택 표시 모듈은 사용자가 홀로그램 영상을 잡는 행동을 취할 때, 로딩된 홀로그램 영상을 교체하지 않고 유지시킬 수 있다.In addition, the selection display module can maintain the loaded hologram image without replacing when the user takes an action of catching the hologram image.

또한, 상기 구동 제어부는 사용자의 행동에 의하여 로딩된 홀로그램 영상의 사이즈를 변경시키는 사이즈 수정 모듈을 포함할 수 있다.In addition, the drive control unit may include a size modification module that changes the size of the hologram image loaded by the user's behavior.

또한, 상기 사이즈 수정 모듈은 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상의 사이즈를 증가시킬 수 있다.In addition, the size modifying module may increase the size of the hologram image when the user increases the space between the hands with the hand placed on the hologram image.

또한, 상기 사이즈 수정 모듈은 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 감소시킬 때 홀로그램 영상의 사이즈를 감소시킬 수 있다.In addition, the size modifying module may reduce the size of the hologram image when the user reduces the space between the hands with the hand placed on the hologram image.

또한, 상기 쇼핑 유도 시스템은 의류 매장의 벽면에 설치되며 사용자의 모습과 가상의 의류 이미지를 합성하여 표시하는 VR 디스플레이를 더 포함할 수 있다.The shopping induction system may further include a VR display installed on a wall of the clothing store and displaying a composite image of a user's appearance and a virtual clothing image.

또한, 상기 VR 디스플레이는 사용자의 행동에 의하여 표시된 가상의 의류 이미지를 다른 이미지로 변경하는 디스플레이 구동 모듈을 더 포함할 수 있다.The VR display may further include a display driving module for changing a virtual clothing image displayed by a user's behavior into another image.

또한, 상기 VR 디스플레이는 선택된 상품과 디자인, 색상, 종류가 유사한 상품의 목록을 도출하는 유사상품 도출 모듈을 포함할 수 있다.In addition, the VR display may include a similar goods derivation module for deriving a list of products having similar designs, colors, and types to the selected products.

또한, 상기 VR 디스플레이는 선택된 상품을 가상 시착한 다른 사용자가 구매한 상품의 목록을 도출하는 선호상품 도출 모듈을 포함할 수 있다.In addition, the VR display may include a preferred goods derivation module for deriving a list of products purchased by other users who have touched the selected products.

또한, 상기 VR 디스플레이는 상기 VR 디스플레이 상에 표시된 상품의 정보를 표시하는 상품정보 표시 모듈을 포함할 수 있다.
In addition, the VR display may include a goods information display module for displaying goods information displayed on the VR display.

상기한 바와 같이 본 제1실시예에 따르면 VR 프로젝터를 이용하여 사용자에게 의류의 홀로그램 영상을 투사하여 가상 피팅을 제공하므로 다양한 의상을 가상 피팅하여 구매를 유도할 수 있다.As described above, according to the first embodiment, since the virtual fitting is provided by projecting the hologram image of the clothes to the user by using the VR projector, various purchases can be induced by virtual fitting.

또한, 본 발명의 다른 측면에 따르면 VR 디스플레이를 구비하므로 직접 시착하지 아니하고도 사용자에게 맞는 의류를 보다 용이하게 선택할 수 있으며, 보다 많은 의류를 가상 시착하도록 하여 구매를 유도할 수 있다.
In addition, according to another aspect of the present invention, since the VR display is provided, it is possible to more easily select clothes suitable for a user even if the user does not directly touch the clothes,

도 1는 본 발명의 제1 실시예에 따른 쇼핑 유도 시스템이 적용된 매장을 나타낸 도면이다.
도 2는 본 발명의 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템을 나타낸 구성도이다.
도 3은 본 발명의 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법을 설명하기 위한 순서도이다.
도 4는 본 발명의 제2 실시예에 따른 쇼핑 유도 시스템이 적용된 매장을 나타낸 도면이다.
도 5는 본 발명의 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템을 나타낸 구성도이다.
도 6은 본 발명의 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법을 설명하기 위한 순서도이다.1 is a view showing a store to which a shopping induction system according to a first embodiment of the present invention is applied.
2 is a block diagram illustrating a shopping induction system using an augmented reality according to a first embodiment of the present invention.
3 is a flowchart illustrating a shopping induction method using an augmented reality according to the first embodiment of the present invention.
4 is a view showing a store to which a shopping induction system according to a second embodiment of the present invention is applied.
5 is a block diagram illustrating a shopping induction system using an augmented reality according to a second embodiment of the present invention.
6 is a flowchart illustrating a shopping induction method using an augmented reality according to a second embodiment of the present invention.

이하, 첨부한 도면을 참조하여 본 발명의 실시예에 대하여 당업자가 용이하게 실시할 수 있도록 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하여 상세하게 설명한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. The present invention can be variously modified and may have various embodiments, and specific embodiments will be described in detail with reference to the drawings. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. Terms including ordinals, such as first, second, etc., may be used to describe various elements, but the elements are not limited to these terms. The terms are used only for the purpose of distinguishing one component from another.

예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries are to be interpreted as having a meaning consistent with the contextual meaning of the related art and are to be interpreted as either ideal or overly formal in the sense of the present application Do not.

이하에서는 도 1 및 도 2를 참조하여 증강현실을 이용한 쇼핑 유도 시스템에 대해서 설명한다.Hereinafter, a shopping induction system using an augmented reality will be described with reference to Figs. 1 and 2. Fig.

도 1는 본 발명의 제1 실시예에 따른 쇼핑 유도 시스템이 적용된 매장을 나타낸 도면이고, 도 2는 본 발명의 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템을 나타낸 구성도이다.FIG. 1 is a view showing a store to which a shopping induction system according to a first embodiment of the present invention is applied, and FIG. 2 is a configuration diagram illustrating a shopping induction system using an augmented reality according to the first embodiment of the present invention.

도 1 및 도 2를 참조하여 설명하면, 본 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템(101)은 카메라(10), VR 프로젝터(20), 서버(30), 구동 제어부(40)를 포함한다.1 and 2, the shopping induction system 101 using the augmented reality according to the first embodiment includes a camera 10, a VR projector 20, a server 30, a drive control unit 40, .

카메라(10)는 사용자를 촬영하며, 매장에는 복수개의 카메라(10)가 설치된다. 사용자가 매장 내에서 이동할 때, 복수개의 카메라 중에 촬영 영역에 위치하는 카메라(10)가 촬영을 수행하고, 사용자가 이동하여 다른 촬영 영역에 진입하면 다른 카메라(10)가 촬영을 수행한다.The camera 10 photographs a user, and a plurality of cameras 10 are installed in the store. When the user moves within the store, the camera 10 positioned in the photographing area among the plurality of cameras performs photographing, and when the user moves and enters another photographing area, the other camera 10 performs photographing.

카메라(10)는 사용자를 촬영하는 촬영 모듈(11), 사용자의 행동을 분석하는 모션 센서 모듈(12), 및 사용자의 동선을 따라 회전하면서 사용자의 동선을 추적하는 동선 추적 모듈(13)을 포함한다. 모션 센서 모듈(13)은 사용자의 행동을 분석하여 VR 프로젝터(20) 및 구동 제어부(40)로 전달한다.The camera 10 includes a photographing module 11 for photographing the user, a motion sensor module 12 for analyzing the behavior of the user, and a copper trace module 13 for tracking the copper wire of the user while rotating along the copper wire of the user do. The motion sensor module 13 analyzes the behavior of the user and transmits the analyzed result to the VR projector 20 and the drive control unit 40.

VR 프로젝터(20)는 홀로그램 영상(61)을 사용자의 신체에 투사하여 사용자의 신체에 가상의 의류를 피팅한다. 매장에는 복수개의 VR 프로젝터(20)가 설치되며 사용자가 이동하면 VR 프로젝터(20)가 교체되어 홀로그램 영상(61)을 투사할 수 있다.The VR projector 20 projects the hologram image 61 onto the user's body to fit the virtual clothing to the user's body. A plurality of VR projectors 20 are installed in the store, and when the user moves, the VR projector 20 is replaced and the hologram image 61 can be projected.

또한, VR 프로젝터(20)는 모션 센서 모듈(12)에서 전달된 정보를 이용하여 사용자가 움직임에 따라 피팅되는 의류의 이미지를 변화시킨다. 서버(30)에는 의류 매장에 비치된 복수개의 의류에 대한 홀로그램 영상이 저장된다.Further, the VR projector 20 uses the information transmitted from the motion sensor module 12 to change the image of the garment to be fitted as the user moves. The server 30 stores a hologram image for a plurality of clothes provided in the clothing store.

구동 제어부(40)는 서버(30)에 저장된 홀로그램 영상을 교체하면서 순차적으로 로딩시킨다. 구동 제어부(40)는 성별 판단 모듈(41), 체형 판단 모듈(42), 연령 판단 모듈(43), 연속 로딩 모듈(44), 선택 표시 모듈(45), 사이즈 수정 모듈(46), 의상 선택 모듈(47), 영상 제어 모듈(48)을 포함한다. The drive control unit 40 sequentially loads the hologram images stored in the server 30 while replacing them. The drive control unit 40 includes a sex determination module 41, a body type determination module 42, an age determination module 43, a continuous loading module 44, a selection display module 45, a size modification module 46, A module 47, and an image control module 48.

성별 판단 모듈(41)은 사용자에 맞는 홀로그램 영상(61)을 로딩하기 위해서 사용자가 매장에 진입할 때 사용자의 성별을 판단한다. 성별 판단 모듈(41)은 카메라(10)에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 얼굴과 머리 모양, 옷 등을 바탕으로 사용자의 성별을 판단한다. The gender determination module 41 determines the gender of the user when the user enters the store to load the hologram image 61 suitable for the user. The gender determination module 41 determines the gender of the user based on the face, hair shape, clothing, and the like using the shape recognition program in the image captured by the camera 10. [

체형 판단 모듈(42)은 사용자에 맞는 홀로그램 영상(61)을 로딩하기 위해서 사용자의 체형을 판단한다. 체형 판단 모듈(42)은 카메라(10)에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 사용자의 키와 몸무게를 추정한다. 체형 판단 모듈(42)은 체형의 판단을 통해서 사용자에게 맞는 의류의 사이즈를 결정한다. The body type determination module 42 determines the body shape of the user to load the hologram image 61 suitable for the user. The body type determination module 42 estimates the user's height and weight using the shape recognition program in the image captured by the camera 10. [ The body type determination module 42 determines the size of the garment suitable for the user through determination of the body type.

연령 판단 모듈(43)은 사용자가 매장에 진입할 때, 사용자의 얼굴을 인식하여 사용자의 대략적인 연령을 추정한다. The age determination module 43 estimates the approximate age of the user by recognizing the user's face when the user enters the store.

연속 로딩 모듈(44)은 기 설정된 간격으로 복수의 홀로그램 영상을 교체하면서 순차적으로 로딩시킨다. 이때, 기 설정된 간격은 2초 내지 10초로 이루어질 수 있다.The continuous loading module 44 sequentially loads a plurality of hologram images while replacing the hologram images at predetermined intervals. At this time, the predetermined interval may be 2 seconds to 10 seconds.

선택 표시 모듈(45)은 사용자의 행동에 의하여 선택된 홀로그램 영상(61)을 유지시킨다. 선택 표시 모듈(45)은 사용자가 홀로그램 영상(61)을 잡는 행동을 취할 때, 시간의 경과에도 로딩된 홀로그램 영상을 교체하지 않고 유지시킨다. 사용자가 투사된 홀로그램 영상(61)이 마음에 들어 자세히 보고 싶은 경우, 사용자는 행동을 취하여 홀로그램 영상(61)이 교체되지 않도록 할 수 있다.The selection display module 45 maintains the hologram image 61 selected by the user's action. The selection display module 45 maintains the loaded holographic image without switching even when the user takes an action of holding the holographic image 61. If the user wishes to view the projected hologram image 61 in detail, the user can take action and prevent the hologram image 61 from being replaced.

사이즈 수정 모듈(46)은 사용자의 행동에 의하여 로딩된 홀로그램 영상(61)의 사이즈를 변경시킨다. 모션 센서 모듈(13)에 의하여 사용자가 사이즈를 수정할 의도가 있는 것으로 판단된 경우 사이즈 수정 모듈(46)은 사이즈를 증가시키거나 감소시킨다. The size modifying module 46 changes the size of the hologram image 61 loaded by the user's action. If it is determined by the motion sensor module 13 that the user intends to modify the size, the size modification module 46 increases or decreases the size.

사이즈 수정 모듈(46)은 사용자가 홀로그램 영상(61)에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상(61)의 사이즈를 증가시킬 수 있으며, 사이즈 수정 모듈은 사용자가 홀로그램 영상(61)에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상(61)의 사이즈를 감소시킬 수 있다.The size modifying module 46 may increase the size of the hologram image 61 when the user places the hand on the hologram image 61, and the size modifying module 46 may increase the size of the hologram image 61, The size of the hologram image 61 can be reduced when the distance between the hands is increased in a state where the hand is placed on the hologram image 61. [

의상 선택 모듈(47)은 성별 판단 모듈(41), 체형 판단 모듈(42), 및 연령 판단 모듈(43)에서 전달된 정보를 바탕으로 사용자에게 가상 피팅할 의상들을 선택한다.The garment selection module 47 selects garments to be virtually fitted to the user based on the information transmitted from the gender determination module 41, the body type determination module 42, and the age determination module 43.

영상 제어 모듈(48)은 서버(30)에 저장된 홀로그램 영상을 촬영된 사용자의 신체에 맞게 수정한다. 또한 영상 제어 모듈(48)은 사용자의 움직임에 따라 홀로그램 영상을 수정하여 VR 프로젝터(20)로 전달한다. The image control module 48 modifies the hologram image stored in the server 30 to fit the photographed user's body. In addition, the image control module 48 modifies the hologram image according to the movement of the user, and transmits the modified hologram image to the VR projector 20.

상기한 바와 같이 본 제1실시예에 따르면 VR 프로젝터(20)를 이용하여 사용자에게 의류의 홀로그램 영상을 투사하여 가상 피팅을 제공하므로 다양한 의상을 가상 피팅하여 구매를 유도할 수 있다.As described above, according to the first embodiment, since the virtual fitting is provided by projecting the hologram image of the clothes to the user by using the VR projector 20, various purchases can be induced by virtual fitting.

이하에서는 도 1 내지 도 3을 참조하여 본 발명의 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법을 설명한다.Hereinafter, a shopping inducing method using an augmented reality according to a first embodiment of the present invention will be described with reference to Figs.

도 3은 본 발명의 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법을 설명하기 위한 순서도이다.3 is a flowchart illustrating a shopping induction method using an augmented reality according to the first embodiment of the present invention.

도 1 내지 도 3을 참조하여 설명하면, 본 제1 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법은 촬영 단계(S101), 선택 단계(S102), 홀로그램 제어 단계(S103), 가상 피팅 단계(S104)를 포함한다. 1 to 3, the shopping induction method using the augmented reality according to the first embodiment includes an imaging step S101, a selection step S102, a hologram control step S103, a virtual fitting step S104 ).

촬영 단계(S101)는 매장 내부로 들어온 사용자를 촬영하되, 매장에 설치된 복수개의 카메라를 이용하여 촬영한다. 촬영 단계(S101)에서 사용자가 매장 내에서 이동할 때, 복수개의 카메라(10) 중에 촬영 영역에 위치하는 카메라(10)가 촬영을 수행하고, 사용자가 이동하여 다른 촬영 영역에 진입하면 다른 카메라(10)가 촬영을 수행한다.The photographing step S101 photographs a user who has entered the store, and photographs the user using a plurality of cameras installed in the store. When the user moves in the store in the photographing step S101, the camera 10 positioned in the photographing area among the plurality of cameras 10 performs photographing. When the user moves and enters another photographing area, the other camera 10 ) Performs photographing.

촬영 단계(S101)는 사용자를 촬영하는 영상 촬영 단계, 사용자의 행동을 분석하는 모션 센싱 단계, 및 사용자의 사용자의 동선을 따라 회전하면서 사용자의 동선을 추적하는 동선 추적 단계를 포함할 수 있다. 모션 센싱 단계는 사용자의 행동을 분석하여 VR 프로젝터 및 구동 제어부로 전달한다.The photographing step S101 may include a photographing step of photographing the user, a motion sensing step of analyzing the behavior of the user, and a tracing step of tracing the user's motion while rotating along the motion line of the user. In the motion sensing step, the user's behavior is analyzed and transmitted to the VR projector and the driving control unit.

선택 단계(S102)는 서버에 저장된 홀로그램 영상 중에서 사용자에게 투사할 의류들의 홀로그램 영상을 선택한다. 선택 단계(S102)는 사용자의 성별을 판단하는 성별 판단 단계, 사용자의 체형을 판단하는 체형 판단 단계, 사용자의 연령을 판단하는 연령 판단 단계, 의상 선택 단계를 포함할 수 있다.In the selection step S102, a hologram image of garments to be projected to the user is selected from the hologram images stored in the server. The selection step S102 may include a gender determination step of determining the gender of the user, a body type determination step of determining the body shape of the user, an age determination step of determining the age of the user, and a costume selection step.

성별 판단 단계는 사용자에 맞는 홀로그램 영상을 로딩하기 위해서 사용자가 매장에 진입할 때 사용자의 성별을 판단한다. 성별 판단 단계는 카메라(10)에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 얼굴과 머리 모양, 옷 등을 바탕으로 사용자의 성별을 판단한다. The gender determination step determines the sex of the user when the user enters the store to load the hologram image suitable for the user. The gender determination step determines the sex of the user based on the face, hair shape, clothes, and the like using the shape recognition program in the image captured by the camera 10. [

체형 판단 단계는 사용자에 맞는 홀로그램 영상을 로딩하기 위해서 사용자의 체형을 판단한다. 체형 판단 모듈은 카메라에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 사용자의 키와 몸무게를 추정한다. 체형 판단 모듈은 체형의 판단을 통해서 사용자에게 맞는 의류의 사이즈를 결정한다. The body shape determination step determines the body shape of the user to load the hologram image suitable for the user. The body type determination module estimates a user's height and weight using a shape recognition program in an image captured by a camera. The body type determination module determines the size of the garment suitable for the user through determination of the body type.

연령 판단 단계는 사용자가 매장에 진입할 때, 사용자의 얼굴을 인식하여 사용자의 대략적인 연령을 추정한다. 의상 선택 단계는 판단된 사용자의 성별, 체형, 연령을 바탕으로 사용자에게 투사할 의상들을 선택한다.The age determination step estimates the approximate age of the user by recognizing the user's face when the user enters the store. The costume selection step selects garments to be projected to the user based on the determined user's sex, body shape, and age.

홀로그램 제어 단계(S103)는 서버에 저장된 홀로그램 영상을 촬영된 사용자의 신체에 맞게 수정한다. 홀로그램 제어 단계(S103)는 사용자의 움직임에 따라 홀로그램 영상을 수정한다. The hologram control step (S103) modifies the hologram image stored in the server to fit the photographed user's body. The hologram control step (S103) modifies the hologram image according to the movement of the user.

가상 피팅 단계(S104)는 매장에 설치된 VR 프로젝터를 이용하여 홀로그램 영상을 사용자의 신체에 투사하여 사용자의 신체에 가상의 의류를 피한다. 가상 피팅 단계(S104)는 복수개의 홀로그램 영상을 기 설정된 간격으로 교체하면서 순차적으로 로딩하여 피팅한다. 이때, 기 설정된 간격은 2초 내지 10초로 이루어질 수 있다.In the virtual fitting step (S104), the hologram image is projected onto the user's body by using the VR projector installed in the store to avoid virtual clothing to the user's body. The virtual fitting step S104 sequentially loads and fits a plurality of hologram images while replacing the plurality of hologram images at predetermined intervals. At this time, the predetermined interval may be 2 seconds to 10 seconds.

가상 피팅 단계(S104)는 선택 표시 단계, 사이즈 수정 단계, 영상 제어 단계를 포함할 수 있다. 선택 표시 단계는 사용자의 행동에 의하여 선택된 홀로그램 영상을 교체하지 않고 유지시킨다. 선택 표시 단계는 사용자가 홀로그램 영상을 잡는 행동을 취할 때, 시간의 경과에도 로딩된 홀로그램 영상이 교체되지 않고 유지되도록 한다.The virtual fitting step S104 may include a selection display step, a size modification step, and an image control step. The selection display step maintains the hologram image selected by the user's behavior without replacement. The selection display step allows the loaded holographic image to remain unchanged over time, when the user takes an action to capture the holographic image.

사이즈 수정 단계는 사용자의 행동에 의하여 로딩된 홀로그램 영상의 사이즈를 변경시킨다. 사용자가 행동을 취하여 사이즈를 수정할 의도가 있는 것으로 판단된 경우 사이즈 수정 단계에서 영상의 사이즈가 증가되거나 감소된다. The size modification step changes the size of the holographic image loaded by the user's action. If it is determined that the user intends to modify the size by taking action, the size of the image is increased or decreased in the size modification step.

사이즈 수정 단계는 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상의 사이즈를 증가시킬 수 있으며, 사이즈 수정 단계는 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상의 사이즈를 감소시킬 수 있다.The size correction step may increase the size of the hologram image when the user increases the distance between the hands with the hand placed on the hologram image. In the size correction step, when the user places the hand on the hologram image, The size of the hologram image can be reduced.

상기한 바와 같이 본 제1실시예에 따르면 가상 피팅 단계에서 사용자에게 의류의 홀로그램 영상을 투사하여 가상 피팅을 제공하므로 다양한 의상을 가상 피팅하여 구매를 유도할 수 있다.As described above, according to the first embodiment, since the virtual fitting is provided by projecting the hologram image of the clothes to the user in the virtual fitting step, virtual fitting of various clothes can be induced to purchase.

이하에서는 도 4 및 도 5를 참조하여 본 발명의 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템에 대해서 설명한다.Hereinafter, a shopping induction system using an augmented reality according to a second embodiment of the present invention will be described with reference to Figs. 4 and 5. Fig.

도 4는 본 발명의 제2 실시예에 따른 쇼핑 유도 시스템이 적용된 매장을 나타낸 도면이고, 도 5는본 발명의 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템을 나타낸 구성도이다.FIG. 4 is a view showing a store to which a shopping induction system according to a second embodiment of the present invention is applied, and FIG. 5 is a configuration diagram illustrating a shopping induction system using an augmented reality according to a second embodiment of the present invention.

도 4 및 도 5를 참조하여 설명하면, 본 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 시스템(102)은 카메라(10), VR 프로젝터(20), 서버(30), 구동 제어부(40), VR 디스플레이(50)를 포함한다.4 and 5, the shopping induction system 102 using the augmented reality according to the second embodiment includes a camera 10, a VR projector 20, a server 30, a drive control unit 40, , And a VR display (50).

카메라(10)는 사용자를 촬영하며, 매장에는 복수개의 카메라(10)가 설치된다. 사용자가 매장 내에서 이동할 때, 복수개의 카메라 중에 촬영 영역에 위치하는 카메라(10)가 촬영을 수행하고, 사용자가 이동하여 다른 촬영 영역에 진입하면 다른 카메라(10)가 촬영을 수행한다.The camera 10 photographs a user, and a plurality of cameras 10 are installed in the store. When the user moves within the store, the camera 10 positioned in the photographing area among the plurality of cameras performs photographing, and when the user moves and enters another photographing area, the other camera 10 performs photographing.

카메라(10)는 사용자를 촬영하는 촬영 모듈(11), 사용자의 행동을 분석하는 모션 센서 모듈(12), 및 사용자의 동선을 따라 회전하면서 사용자의 동선을 추적하는 동선 추적 모듈(13)을 포함한다. 모션 센서 모듈(13)은 사용자의 행동을 분석하여 VR 프로젝터(20) 및 구동 제어부(40)로 전달한다.The camera 10 includes a photographing module 11 for photographing the user, a motion sensor module 12 for analyzing the behavior of the user, and a copper trace module 13 for tracking the copper wire of the user while rotating along the copper wire of the user do. The motion sensor module 13 analyzes the behavior of the user and transmits the analyzed result to the VR projector 20 and the drive control unit 40.

VR 프로젝터(20)는 홀로그램 영상(61)을 사용자의 신체에 투사하여 사용자의 신체에 가상의 의류를 피팅한다. 매장에는 복수개의 VR 프로젝터(20)가 설치되며 사용자가 이동하면 VR 프로젝터(20)가 교체되어 홀로그램 영상(61)을 투사할 수 있다.The VR projector 20 projects the hologram image 61 onto the user's body to fit the virtual clothing to the user's body. A plurality of VR projectors 20 are installed in the store, and when the user moves, the VR projector 20 is replaced and the hologram image 61 can be projected.

또한, VR 프로젝터(20)는 모션 센서 모듈(12)에서 전달된 정보를 이용하여 사용자가 움직임에 따라 피팅되는 의류의 이미지를 변화시킨다. 서버(30)에는 의류 매장에 비치된 복수개의 의류에 대한 홀로그램 영상이 저장된다.Further, the VR projector 20 uses the information transmitted from the motion sensor module 12 to change the image of the garment to be fitted as the user moves. The server 30 stores a hologram image for a plurality of clothes provided in the clothing store.

구동 제어부(40)는 서버(30)에 저장된 홀로그램 영상을 교체하면서 순차적으로 로딩시킨다. 구동 제어부(40)는 성별 판단 모듈(41), 체형 판단 모듈(42), 연령 판단 모듈(43), 연속 로딩 모듈(44), 선택 표시 모듈(45), 사이즈 수정 모듈(46), 의상 선택 모듈(47), 영상 제어 모듈(48)을 포함한다. The drive control unit 40 sequentially loads the hologram images stored in the server 30 while replacing them. The drive control unit 40 includes a sex determination module 41, a body type determination module 42, an age determination module 43, a continuous loading module 44, a selection display module 45, a size modification module 46, A module 47, and an image control module 48.

성별 판단 모듈(41)은 사용자에 맞는 홀로그램 영상(61)을 로딩하기 위해서 사용자가 매장에 진입할 때 사용자의 성별을 판단한다. 성별 판단 모듈(41)은 카메라(10)에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 얼굴과 머리 모양, 옷 등을 바탕으로 사용자의 성별을 판단한다. The gender determination module 41 determines the gender of the user when the user enters the store to load the hologram image 61 suitable for the user. The gender determination module 41 determines the gender of the user based on the face, hair shape, clothing, and the like using the shape recognition program in the image captured by the camera 10. [

체형 판단 모듈(42)은 사용자에 맞는 홀로그램 영상(61)을 로딩하기 위해서 사용자의 체형을 판단한다. 체형 판단 모듈(42)은 카메라(10)에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 사용자의 키와 몸무게를 추정한다. 체형 판단 모듈(42)은 체형의 판단을 통해서 사용자에게 맞는 의류의 사이즈를 결정한다. The body type determination module 42 determines the body shape of the user to load the hologram image 61 suitable for the user. The body type determination module 42 estimates the user's height and weight using the shape recognition program in the image captured by the camera 10. [ The body type determination module 42 determines the size of the garment suitable for the user through determination of the body type.

연령 판단 모듈(43)은 사용자가 매장에 진입할 때, 사용자의 얼굴을 인식하여 사용자의 대략적인 연령을 추정한다. The age determination module 43 estimates the approximate age of the user by recognizing the user's face when the user enters the store.

연속 로딩 모듈(44)은 기 설정된 간격으로 복수의 홀로그램 영상을 교체하면서 순차적으로 로딩시킨다. 이때, 기 설정된 간격은 2초 내지 10초로 이루어질 수 있다.The continuous loading module 44 sequentially loads a plurality of hologram images while replacing the hologram images at predetermined intervals. At this time, the predetermined interval may be 2 seconds to 10 seconds.

선택 표시 모듈(45)은 사용자의 행동에 의하여 선택된 홀로그램 영상(61)을 유지시킨다. 선택 표시 모듈(45)은 사용자가 홀로그램 영상(61)을 잡는 행동을 취할 때, 시간의 경과에도 로딩된 홀로그램 영상을 교체하지 않고 유지시킨다. 사용자가 투사된 홀로그램 영상(61)이 마음에 들어 자세히 보고 싶은 경우, 사용자는 행동을 취하여 홀로그램 영상(61)이 교체되지 않도록 할 수 있다.The selection display module 45 maintains the hologram image 61 selected by the user's action. The selection display module 45 maintains the loaded holographic image without switching even when the user takes an action of holding the holographic image 61. If the user wishes to view the projected hologram image 61 in detail, the user can take action and prevent the hologram image 61 from being replaced.

사이즈 수정 모듈(46)은 사용자의 행동에 의하여 로딩된 홀로그램 영상(61)의 사이즈를 변경시킨다. 모션 센서 모듈(13)에 의하여 사용자가 사이즈를 수정할 의도가 있는 것으로 판단된 경우 사이즈 수정 모듈(46)은 사이즈를 증가시키거나 감소시킨다. The size modifying module 46 changes the size of the hologram image 61 loaded by the user's action. If it is determined by the motion sensor module 13 that the user intends to modify the size, the size modification module 46 increases or decreases the size.

사이즈 수정 모듈(46)은 사용자가 홀로그램 영상(61)에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상(61)의 사이즈를 증가시킬 수 있으며, 사이즈 수정 모듈은 사용자가 홀로그램 영상(61)에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상(61)의 사이즈를 감소시킬 수 있다.The size modifying module 46 may increase the size of the hologram image 61 when the user places the hand on the hologram image 61, and the size modifying module 46 may increase the size of the hologram image 61, The size of the hologram image 61 can be reduced when the distance between the hands is increased in a state where the hand is placed on the hologram image 61. [

의상 선택 모듈(47)은 성별 판단 모듈(41), 체형 판단 모듈(42), 및 연령 판단 모듈(43)에서 전달된 정보를 바탕으로 사용자에게 가상 피팅할 의상들을 선택한다.The garment selection module 47 selects garments to be virtually fitted to the user based on the information transmitted from the gender determination module 41, the body type determination module 42, and the age determination module 43.

영상 제어 모듈(48)은 서버(30)에 저장된 홀로그램 영상을 촬영된 사용자의 신체에 맞게 수정한다. 또한 영상 제어 모듈(48)은 사용자의 움직임에 따라 홀로그램 영상을 수정하여 VR 프로젝터(20)로 전달한다. The image control module 48 modifies the hologram image stored in the server 30 to fit the photographed user's body. In addition, the image control module 48 modifies the hologram image according to the movement of the user, and transmits the modified hologram image to the VR projector 20.

VR 디스플레이(50)는 의류 매장의 벽면에 설치되며 사용자의 모습과 가상의 의류 이미지를 합성하여 표시한다. VR 디스플레이(50)는 평판 디스플레이 형태로 이루어지며 카메라(10)로 촬영된 사용자의 모습을 표시하여 거울처럼 보이도록 작동한다. 가상의 의류 이미지는 사용자가 선택한 의류의 이미지로 이루어질 수 있다.The VR display 50 is installed on the wall of the clothing store, and displays a composite image of a user's image and a virtual clothing image. The VR display 50 is in the form of a flat panel display and operates to look like a mirror by displaying the image of the user photographed by the camera 10. The virtual garment image can be made of images of clothes selected by the user.

VR 디스플레이(50)는 디스플레이 구동 모듈(51), 유사상품 도출 모듈(52), 선호상품 도출 모듈(53), 및 상품정보 표시 모듈(54)을 포함한다. The VR display 50 includes a display drive module 51, a similar product derivation module 52, a preference product derivation module 53, and a product information display module 54.

디스플레이 구동 모듈(51)은 표시된 가상의 의류 이미지를 사용자의 행동에 의하여 다른 이미지로 변경한다. 가상의 의류 이미지가 합성된 상태에서 사용자가 손으로 옆으로 밀면, 디스플레이 구동 모듈(51)은 VR 디스플레이(50)에 합성된 가상의 의류 이미지를 교체한다.The display drive module 51 changes the displayed virtual clothing image into another image according to the user's behavior. When the user pushes his / her hand sideways in a state in which the virtual clothing image is synthesized, the display driving module 51 replaces the virtual clothing image synthesized on the VR display 50. [

유사상품 도출 모듈(52)은 사용자에 의하여 선택된 상품과 디자인, 색상, 종류가 유사한 상품의 목록을 도출한다. 선호상품 도출 모듈(53)은 선택된 상품을 가상 시착한 다른 사용자가 구매한 상품의 목록을 도출한다. 이와 같이 유사상품 도출 모듈(52)과 선호상품 도출 모듈(53)에 의하여 도출된 상품의 목록은 VR 디스플레이(50)에 표시될 수 있으며, 사용자가 해당 목록에서 의류를 선택하면 선택된 의류의 이미지를 사용자의 모습에 합성하여 표시할 수 있다.The similar product derivation module 52 derives a list of products that are similar in design, color, and type to those selected by the user. The preferred product derivation module 53 derives a list of products purchased by other users who have falsified the selected products. A list of the products derived by the similar product derivation module 52 and the preferred product derivation module 53 can be displayed on the VR display 50. When the user selects the clothing in the list, It can be combined with the appearance of the user and displayed.

상품정보 표시 모듈(54)은 VR 디스플레이(50) 상에 표시된 상품의 정보를 가상의 의류 이미지와 함께 표시한다. 여기서 상품의 정보는 가격, 재질, 재조 국가, 기능 등이 될 수 있다.The product information display module 54 displays the information of the goods displayed on the VR display 50 together with the virtual clothing image. Here, the information of the commodity may be price, material, country of reparation, function, and the like.

이와 같이 본 제2 실시예에 따르면 VR 디스플레이(50)를 구비하므로 직접 시착하지 아니하고도 사용자에게 맞는 의류를 보다 용이하게 선택할 수 있으며, 보다 많은 의류를 가상 시착하도록 하여 구매를 유도할 수 있다.As described above, according to the second embodiment, since the VR display 50 is provided, it is possible to more easily select clothing suitable for a user even if the user does not directly touch the VR display 50,

이하에서는 도 3 내지 도 6을 참조하여 본 발명의 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법을 설명한다.Hereinafter, a shopping inducing method using an augmented reality according to a second embodiment of the present invention will be described with reference to Figs. 3 to 6. Fig.

도 6은 본 발명의 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법을 설명하기 위한 순서도이다.6 is a flowchart illustrating a shopping induction method using an augmented reality according to a second embodiment of the present invention.

도 3 내지 도 6을 참조하여 설명하면, 본 제2 실시예에 따른 증강현실을 이용한 쇼핑 유도 방법은 촬영 단계(S201), 선택 단계(S202), 홀로그램 제어 단계(S203), 가상 피팅 단계(S204), 디스플레이 표시 단계(S205)를 포함한다. 3 to 6, the shopping induction method using the augmented reality according to the second embodiment includes an imaging step S201, a selection step S202, a hologram control step S203, a virtual fitting step S204 , And a display step (S205).

촬영 단계(S201)는 매장 내부로 들어온 사용자를 촬영하되, 매장에 설치된 복수개의 카메라를 이용하여 촬영한다. 촬영 단계(S201)에서 사용자가 매장 내에서 이동할 때, 복수개의 카메라(10) 중에 촬영 영역에 위치하는 카메라(10)가 촬영을 수행하고, 사용자가 이동하여 다른 촬영 영역에 진입하면 다른 카메라(10)가 촬영을 수행한다.The photographing step S201 photographs a user who has entered the store, and photographs the user using a plurality of cameras installed in the store. When the user moves within the store in the photographing step S201, the camera 10 positioned in the photographing area among the plurality of cameras 10 performs photographing. When the user moves and enters another photographing area, the other camera 10 ) Performs photographing.

촬영 단계(S201)는 사용자를 촬영하는 영상 촬영 단계, 사용자의 행동을 분석하는 모션 센싱 단계, 및 사용자의 사용자의 동선을 따라 회전하면서 사용자의 동선을 추적하는 동선 추적 단계를 포함할 수 있다. 모션 센싱 단계는 사용자의 행동을 분석하여 VR 프로젝터 및 구동 제어부로 전달한다.The photographing step S201 may include a photographing step of photographing a user, a motion sensing step of analyzing the behavior of the user, and a tracing step of tracing a user's motion while rotating along the motion line of the user. In the motion sensing step, the user's behavior is analyzed and transmitted to the VR projector and the driving control unit.

선택 단계(S202)는 서버에 저장된 홀로그램 영상 중에서 사용자에게 투사할 의류들의 홀로그램 영상을 선택한다. 선택 단계(S202)는 사용자의 성별을 판단하는 성별 판단 단계, 사용자의 체형을 판단하는 체형 판단 단계, 사용자의 연령을 판단하는 연령 판단 단계, 의상 선택 단계를 포함할 수 있다.In the selecting step S202, a hologram image of garments to be projected to the user is selected from the hologram images stored in the server. The selection step S202 may include a gender determination step of determining the gender of the user, a body type determination step of determining the body shape of the user, an age determination step of determining the age of the user, and a costume selection step.

성별 판단 단계는 사용자에 맞는 홀로그램 영상을 로딩하기 위해서 사용자가 매장에 진입할 때 사용자의 성별을 판단한다. 성별 판단 단계는 카메라(10)에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 얼굴과 머리 모양, 옷 등을 바탕으로 사용자의 성별을 판단한다. The gender determination step determines the sex of the user when the user enters the store to load the hologram image suitable for the user. The gender determination step determines the sex of the user based on the face, hair shape, clothes, and the like using the shape recognition program in the image captured by the camera 10. [

체형 판단 단계는 사용자에 맞는 홀로그램 영상을 로딩하기 위해서 사용자의 체형을 판단한다. 체형 판단 모듈은 카메라에 의하여 촬영된 영상에서 형상인식 프로그램을 사용하여 사용자의 키와 몸무게를 추정한다. 체형 판단 모듈은 체형의 판단을 통해서 사용자에게 맞는 의류의 사이즈를 결정한다. The body shape determination step determines the body shape of the user to load the hologram image suitable for the user. The body type determination module estimates a user's height and weight using a shape recognition program in an image captured by a camera. The body type determination module determines the size of the garment suitable for the user through determination of the body type.

연령 판단 단계는 사용자가 매장에 진입할 때, 사용자의 얼굴을 인식하여 사용자의 대략적인 연령을 추정한다. 의상 선택 단계는 판단된 사용자의 성별, 체형, 연령을 바탕으로 사용자에게 가상 피팅할 의상들을 선택한다.The age determination step estimates the approximate age of the user by recognizing the user's face when the user enters the store. The costume selection step selects clothes to be virtual-fitted to the user based on the determined user's sex, body shape, and age.

홀로그램 제어 단계(S203)는 서버에 저장된 홀로그램 영상을 촬영된 사용자의 신체에 맞게 수정한다. 홀로그램 제어 단계(S203)는 사용자의 움직임에 따라 홀로그램 영상을 수정한다. The hologram control step (S203) modifies the hologram image stored in the server to fit the photographed user's body. The hologram control step (S203) modifies the hologram image according to the movement of the user.

가상 피팅 단계(S204)는 매장에 설치된 VR 프로젝터를 이용하여 홀로그램 영상을 사용자의 신체에 투사하여 사용자의 신체에 가상의 의류를 피한다. 가상 피팅 단계(S204)는 복수개의 홀로그램 영상을 기 설정된 간격으로 교체하면서 순차적으로 로딩하여 피팅한다. 이때, 기 설정된 간격은 2초 내지 10초로 이루어질 수 있다.The virtual fitting step S204 projects a hologram image to the user's body using a VR projector installed in the store to avoid virtual clothing to the user's body. The virtual fitting step S204 sequentially loads and fits a plurality of hologram images while replacing the hologram images at predetermined intervals. At this time, the predetermined interval may be 2 seconds to 10 seconds.

가상 피팅 단계(S204)는 선택 표시 단계, 사이즈 수정 단계, 영상 제어 단계를 포함할 수 있다. 선택 표시 단계는 사용자의 행동에 의하여 선택된 홀로그램 영상을 교체하지 않고 유지시킨다. 선택 표시 단계는 사용자가 홀로그램 영상을 잡는 행동을 취할 때, 시간의 경과에도 로딩된 홀로그램 영상이 교체되지 않고 유지되도록 한다.The virtual fitting step S204 may include a selection display step, a size modification step, and an image control step. The selection display step maintains the hologram image selected by the user's behavior without replacement. The selection display step allows the loaded holographic image to remain unchanged over time, when the user takes an action to capture the holographic image.

사이즈 수정 단계는 사용자의 행동에 의하여 로딩된 홀로그램 영상의 사이즈를 변경시킨다. 사용자가 행동을 취하여 사이즈를 수정할 의도가 있는 것으로 판단된 경우 사이즈 수정 단계에서 영상의 사이즈가 증가되거나 감소된다. The size modification step changes the size of the holographic image loaded by the user's action. If it is determined that the user intends to modify the size by taking action, the size of the image is increased or decreased in the size modification step.

사이즈 수정 단계는 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상의 사이즈를 증가시킬 수 있으며, 사이즈 수정 단계는 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상의 사이즈를 감소시킬 수 있다.The size correction step may increase the size of the hologram image when the user increases the distance between the hands with the hand placed on the hologram image. In the size correction step, when the user places the hand on the hologram image, The size of the hologram image can be reduced.

디스플레이 표시 단계(S205)는 의류 매장의 벽면에 설치된 VR 디스플레이(50)에 카메라로 촬영된 영상에 사용자의 모습과 가상의 의류 이미지를 합성하여 표시한다. 가상의 의류 이미지는 사용자가 선택한 의류의 이미지로 이루어질 수 있다.In the display display step (S205), the user's virtual image and the virtual clothing image are displayed on the VR display 50 mounted on the wall of the clothing store. The virtual garment image can be made of images of clothes selected by the user.

디스플레이 표시 단계(S205)는 디스플레이 구동 단계, 유사상품 도출 단계, 선호상품 도출 단계, 상품정보 표시 단계를 포함할 수 있다.The display displaying step S205 may include a display driving step, a similar product deriving step, a preferred product deriving step, and a product information displaying step.

디스플레이 구동 단계는 표시된 가상의 의류 이미지를 사용자의 행동에 의하여 다른 이미지로 변경한다. 가상의 의류 이미지가 합성된 상태에서 사용자가 손으로 옆으로 밀면, 디스플레이 구동 단계는 VR 디스플레이(50)에 합성된 가상의 의류 이미지를 교체한다.The display driving step changes the displayed virtual clothing image to another image according to the user's behavior. When the user pushes his / her hand sideways in a state where the virtual clothing image is synthesized, the display driving step replaces the virtual clothing image synthesized in the VR display 50. [

유사상품 도출 단계는 사용자에 의하여 선택된 상품과 디자인, 색상, 종류가 유사한 상품의 목록을 도출한다. 선호상품 도출 단계는 선택된 상품을 가상 시착한 다른 사용자가 구매한 상품의 목록을 도출한다. 이와 같이 유사상품 도출 단계와 선호상품 도출 단계에서 도출된 상품의 목록은 VR 디스플레이(50)에 표시될 수 있다.The similar product derivation step derives a list of products that are similar in design, color, and type to the product selected by the user. The preferred product derivation step derives a list of products purchased by other users who have touched the selected products. Thus, the list of the products derived in the similar product derivation step and the preferred product derivation step can be displayed on the VR display 50.

상품정보 표시 단계는 VR 디스플레이(50) 상에 표시된 상품의 정보를 가상의 의류 이미지와 함께 표시한다. 여기서 상품의 정보는 가격, 재질, 재조 국가, 기능 등이 될 수 있다.The product information display step displays the information of the goods displayed on the VR display 50 together with the virtual clothing image. Here, the information of the commodity may be price, material, country of reparation, function, and the like.

이와 같이 본 제2 실시예에 따르면 디스플레이 표시 단계에서 VR 디스플레이(50)에 사용자의 모습에 의류 이미지를 합성하여 표시하므로 직접 시착하지 아니하고도 사용자에게 맞는 의류를 보다 용이하게 선택할 수 있으며, 보다 많은 의류를 가상 시착하도록 하여 구매를 유도할 수 있다.As described above, according to the second embodiment, since the garment image is synthesized and displayed on the VR display 50 in the display form of the user, it is possible to more easily select the clothes suitable for the user without directly touching, So that the purchase can be induced.

이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
As described above, preferred embodiments of the present invention have been disclosed in the present specification and drawings, and although specific terms have been used, they have been used only in a general sense to easily describe the technical contents of the present invention and to facilitate understanding of the invention , And are not intended to limit the scope of the present invention. It is to be understood by those skilled in the art that other modifications based on the technical idea of the present invention are possible in addition to the embodiments disclosed herein.

101, 102: 쇼핑 안내 시스템
10: 카메라
11: 촬영 모듈
12: 모션 센서 모듈
13: 동선 추적 모듈
20: VR 프로젝터
30: 서버
40: 구동 제어부
41: 성별 판단 모듈
42: 체형 판단 모듈
43: 연령 판단 모듈
44: 연속 로딩 모듈
45: 선택 표시 모듈
46: 사이즈 수정 모듈
47: 의상 선택 모듈
48: 영상 제어 모듈
50: VR 디스플레이
51: 디스플레이 구동 모듈
52: 유사상품 도출 모듈
53: 선호상품 도출 모듈
54: 상품정보 표시 모듈101, 102: Shopping guide system
10: Camera
11: Shooting module
12: Motion sensor module
13: copper trace module
20: VR projector
30: Server
40:
41: Gender determination module
42: body type determination module
43: Age determination module
44: Continuous loading module
45: Selective display module
46: Size correction module
47: Costume selection module
48: Image control module
50: VR display
51: Display driving module
52: Similar product derivation module
53: Preferred Product Derivation Module
54: Product information display module

Claims (16)

사용자를 촬영하는 카메라;
의류 매장에 비치된 복수개의 의류의 홀로그램 영상이 저장된 서버;
상기 서버에 저장된 복수의 홀로그램 영상을 교체하면서 순차적으로 로딩시키는 구동 제어부; 및
홀로그램 영상을 사용자의 신체에 투사하여 사용자의 신체에 가상의 의류를 피팅하는 VR 프로젝터:
를 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
A camera for photographing a user;
A server for storing a plurality of hologram images of clothes stored in a clothing store;
A drive controller for sequentially loading a plurality of holographic images stored in the server while replacing the plurality of holographic images; And
A VR projector that projects a hologram image to a user's body to fit virtual clothing to the user's body:
And a shopping guidance system using the augmented reality.
제1 항에 있어서,
상기 카메라는 사용자의 동선을 따라 회전하면서 사용자의 동선을 추적하는 동선 추정 모듈을 포함하는 것을 특징으로 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Wherein the camera includes a copper wire estimation module that tracks a copper wire of a user while rotating along a copper wire of a user.
제1 항에 있어서,
상기 구동 제어부는 사용자의 성별을 판단하는 성별 판단 모듈을 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Wherein the drive control unit includes a gender determination module for determining a gender of a user.
제1 항에 있어서,
상기 구동 제어부는 사용자의 키와 몸무게를 추정하여 체형을 판단하는 체형 판단 모듈을 포함하는 것을 특징으로 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Wherein the drive control unit includes a body type determination module for estimating a body type by estimating a key and a weight of a user.
제1 항에 있어서,
상기 구동 제어부는 사용자의 연령을 판단하는 연령 판단 모듈을 포함하는 것을 특징으로 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Wherein the drive control unit includes an age determination module for determining an age of a user.
제1 항에 있어서,
상기 구동 제어부는 기 설정된 간격으로 복수의 홀로그램 영상을 교체하면서 순차적으로 로딩시키는 연속 로딩 모듈을 포함하는 것을 특징으로 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Wherein the drive control unit includes a continuous loading module for sequentially loading a plurality of hologram images while replacing the plurality of hologram images at predetermined intervals.
제6 항에 있어서,
상기 구동 제어부는 사용자의 행동에 의하여 선택된 홀로그램 영상을 유지시키는 선택 표시 모듈을 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 6,
Wherein the drive control unit includes a selection display module for holding a hologram image selected by a user's behavior.
제7 항에 있어서,
상기 선택 표시 모듈은 사용자가 홀로그램 영상을 잡는 행동을 취할 때, 로딩된 홀로그램 영상을 교체하지 않고 유지시키는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
8. The method of claim 7,
Wherein the selection display module maintains the loaded hologram image without replacing when the user takes an action of capturing the hologram image.
제1 항에 있어서,
상기 구동 제어부는 사용자의 행동에 의하여 로딩된 홀로그램 영상의 사이즈를 변경시키는 사이즈 수정 모듈을 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Wherein the drive control unit includes a size modification module that changes a size of the hologram image loaded by the user's behavior.
제9 항에 있어서,
상기 사이즈 수정 모듈은 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 증가시킬 때 홀로그램 영상의 사이즈를 증가시키는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
10. The method of claim 9,
Wherein the size modification module increases the size of the hologram image when increasing the distance between both hands in a state where the user places the hand on the hologram image.
제10 항에 있어서,
상기 사이즈 수정 모듈은 사용자가 홀로그램 영상에 손을 위치시킨 상태에서 양손 사이의 간격을 감소시킬 때 홀로그램 영상의 사이즈를 감소시키는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
11. The method of claim 10,
Wherein the size modification module reduces the size of the hologram image when the user reduces the space between the hands with the hand placed on the hologram image.
제1 항에 있어서,
의류 매장의 벽면에 설치되며 사용자의 모습과 가상의 의류 이미지를 합성하여 표시하는 VR 디스플레이를 더 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
The method according to claim 1,
Further comprising a VR display installed on a wall of the clothing store for displaying a composite image of a user's image and a virtual clothing image.
제12 항에 있어서,
상기 VR 디스플레이는 사용자의 행동에 의하여 표시된 가상의 의류 이미지를 다른 이미지로 변경하는 디스플레이 구동 모듈을 더 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
13. The method of claim 12,
Wherein the VR display further comprises a display driving module for changing a virtual clothing image displayed by a user's behavior into another image.
제12 항에 있어서,
상기 VR 디스플레이는 선택된 상품과 디자인, 색상, 종류가 유사한 상품의 목록을 도출하는 유사상품 도출 모듈을 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
13. The method of claim 12,
Wherein the VR display includes a similar goods derivation module for deriving a list of goods having similar design, color, and type to the selected goods.
제12 항에 있어서,
상기 VR 디스플레이는 선택된 상품을 가상 시착한 다른 사용자가 구매한 상품의 목록을 도출하는 선호상품 도출 모듈을 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
13. The method of claim 12,
Wherein the VR display includes a preference item derivation module for deriving a list of items purchased by another user who has made a virtual purchase of the selected item.
제12 항에 있어서,
상기 VR 디스플레이는 상기 VR 디스플레이 상에 표시된 상품의 정보를 표시하는 상품정보 표시 모듈을 포함하는 것을 특징으로 하는 증강현실을 이용한 쇼핑 유도 시스템.
13. The method of claim 12,
Wherein the VR display includes a goods information display module for displaying information on goods displayed on the VR display.
KR1020160077071A 2016-06-21 2016-06-21 Shoping inducing system using augmented reality KR20180000007A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160077071A KR20180000007A (en) 2016-06-21 2016-06-21 Shoping inducing system using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160077071A KR20180000007A (en) 2016-06-21 2016-06-21 Shoping inducing system using augmented reality

Publications (1)

Publication Number Publication Date
KR20180000007A true KR20180000007A (en) 2018-01-02

Family

ID=61004586

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160077071A KR20180000007A (en) 2016-06-21 2016-06-21 Shoping inducing system using augmented reality

Country Status (1)

Country Link
KR (1) KR20180000007A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200049745A (en) * 2020-04-29 2020-05-08 동의대학교 산학협력단 Method of providing fitting image of mirror display using augmented reality
KR20200049746A (en) * 2020-04-29 2020-05-08 동의대학교 산학협력단 Fitting image providing method using digital twin and augmented reality
KR20200049288A (en) * 2018-10-31 2020-05-08 동의대학교 산학협력단 Method of providing fitting image of mirror display using augmented reality
CN111144989A (en) * 2019-12-27 2020-05-12 安徽云超智能科技有限公司 Garment selection and purchase method based on network garment selection and purchase system
KR20220008410A (en) 2020-07-13 2022-01-21 주식회사 코아소프트 Clerkless store apparatus providing augmented reality
KR20220022954A (en) 2020-08-19 2022-03-02 주식회사 코아소프트 Clerkless store apparatus providing augmented reality

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200049288A (en) * 2018-10-31 2020-05-08 동의대학교 산학협력단 Method of providing fitting image of mirror display using augmented reality
CN111144989A (en) * 2019-12-27 2020-05-12 安徽云超智能科技有限公司 Garment selection and purchase method based on network garment selection and purchase system
KR20200049745A (en) * 2020-04-29 2020-05-08 동의대학교 산학협력단 Method of providing fitting image of mirror display using augmented reality
KR20200049746A (en) * 2020-04-29 2020-05-08 동의대학교 산학협력단 Fitting image providing method using digital twin and augmented reality
KR20220008410A (en) 2020-07-13 2022-01-21 주식회사 코아소프트 Clerkless store apparatus providing augmented reality
KR20220022954A (en) 2020-08-19 2022-03-02 주식회사 코아소프트 Clerkless store apparatus providing augmented reality

Similar Documents

Publication Publication Date Title
KR20180000007A (en) Shoping inducing system using augmented reality
CN105264572B (en) Information processing equipment, information processing method and program
US8976160B2 (en) User interface and authentication for a virtual mirror
US10109315B2 (en) Devices, systems and methods for auto-delay video presentation
US9269157B2 (en) Methods for extracting objects from digital images and for performing color change on the object
US20180137515A1 (en) Virtual dressing room
AU2014304760B2 (en) Devices, systems and methods of virtualizing a mirror
TW202119362A (en) An augmented reality data presentation method, electronic device and storage medium
JP6356157B2 (en) Human gesture based region and volume selection for HMD
US10928914B2 (en) Individually interactive multi-view display system for non-stationary viewing locations and methods therefor
US20170345215A1 (en) Interactive virtual reality platforms
Winkler et al. Pervasive information through constant personal projection: the ambient mobile pervasive display (AMP-D)
KR101894021B1 (en) Method and device for providing content and recordimg medium thereof
US20140225977A1 (en) Devices, systems and methods of virtualizing a mirror
GB2535302A (en) Methods for generating a 3D virtual body model of a person combined with a 3D garment image, and related devices, systems and computer program products
US20190370994A1 (en) Methods and Devices for Detecting and Identifying Features in an AR/VR Scene
CN104685869A (en) Display device, control method, and control program
KR20190079441A (en) Method for providing virtual space simulation of shoppingmall and server using the same
KR20140042119A (en) Virtual fit apparatus for wearing clothes
CN110874133A (en) Interaction method based on intelligent display device, intelligent display device and storage medium
KR20180000006A (en) Shoping inducing mehtod using augmented reality
CN109891490A (en) The method of storage object identifier
CN109891873A (en) The method of information about object is provided
US20240144357A1 (en) System for displaying selected clothes on a dummy human body
Sundari et al. Development of Apparel 360°-An AR based Virtual Trial Room

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application