KR20220025359A - Providing method of augmented reality in jewerly and system performing the method - Google Patents
Providing method of augmented reality in jewerly and system performing the method Download PDFInfo
- Publication number
- KR20220025359A KR20220025359A KR1020200105955A KR20200105955A KR20220025359A KR 20220025359 A KR20220025359 A KR 20220025359A KR 1020200105955 A KR1020200105955 A KR 1020200105955A KR 20200105955 A KR20200105955 A KR 20200105955A KR 20220025359 A KR20220025359 A KR 20220025359A
- Authority
- KR
- South Korea
- Prior art keywords
- data
- augmented reality
- user
- user terminal
- server
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 171
- 238000000034 method Methods 0.000 title claims abstract description 39
- 239000002184 metal Substances 0.000 claims abstract description 14
- 229910052751 metal Inorganic materials 0.000 claims abstract description 14
- 238000004891 communication Methods 0.000 description 29
- 238000013500 data storage Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000005484 gravity Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 239000010437 gem Substances 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 229910001751 gemstone Inorganic materials 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 1
- 239000010931 gold Substances 0.000 description 1
- 229910052737 gold Inorganic materials 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
- G06K19/06018—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding
- G06K19/06028—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding using bar codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
- G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/067—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components
- G06K19/07—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips
- G06K19/0723—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips the record carrier comprising an arrangement for non-contact communication, e.g. wireless communication circuits on transponder cards, non-contact smart cards or RFIDs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0631—Item recommendations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0641—Shopping interfaces
- G06Q30/0643—Graphical representation of items or shoppers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Tourism & Hospitality (AREA)
- Computer Graphics (AREA)
- Development Economics (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Geometry (AREA)
- Multimedia (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- General Engineering & Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
본 발명은 주얼리에 관한 정보를 제공하는 증강현실 이미지 뿐만 아니라, 사용자가 착용한 것과 같은 증강현실 이미지를 제공하는 주얼리 증강현실 제공 방법 및 이를 실행하는 시스템에 관한 것이다.The present invention relates not only to an augmented reality image that provides information about jewelry, but also to a jewelry augmented reality providing method that provides an augmented reality image such as worn by a user, and a system for executing the same.
객체, 배경, 환경이 모두 가상적인 이미지를 사용하는 가상현실(Virtual Reality, VR)과 달리, 증강현실(Augmented Reality, AR)은 현실의 이미지나 배경에 3차원 가상 이미지를 겹쳐서 하나의 영상을 보여주는 기술이다. Unlike virtual reality (VR), where objects, backgrounds, and environments all use virtual images, augmented reality (AR) displays a single image by superimposing a three-dimensional virtual image on a real image or background. it is technology
이러한 증강현실은 가상 이미지를 겹쳐서 표시하는 것 뿐만 아니라, 촬영된 현실의 대상의 명칭, 가격 및 대상의 상세 정보를 제공하는 기술로 확대 적용되고 있다. 일 예로, 스마트 기기의 사용자라면, 증강현실 기능을 활용해 다양한 경험을 할 수 있다. 예를 들어 친구가 보고 있는 서적의 정보가 궁금하면, 사용자는 스마트 기기로 책 표지를 촬영할 수 있다. 스마트 기기 내의 증강현실 어플리케이션은 촬영 정보를 리딩하고, 어플리케이션은 인식된 서적의 저자, 출판사, 서점 평점, 가격 정보를 제공할 수 있다.Such augmented reality is being applied to a technology that not only displays a virtual image overlaid, but also provides the name, price, and detailed information of a photographed real object. For example, a user of a smart device can experience various experiences by using the augmented reality function. For example, if you are curious about the information of a book your friend is reading, you can take a picture of the cover of the book with your smart device. The augmented reality application in the smart device reads the shooting information, and the application may provide the recognized book author, publisher, bookstore rating, and price information.
한편, 주얼리 업계에서도 이러한 증강현실은 적용될 수 있다. 그러나 종래 일반적인 증강현실은 촬영한 주얼리의 명칭, 보석 함량, 브랜드 네임, 및 가격 정보와 같은 데이터를 제공할 뿐, 사용자의 착용 및 현재 입고 있는 의상과의 매칭 정도와 같은 고급 정보를 제공하지 못하는 문제점이 있었다.On the other hand, such augmented reality can also be applied in the jewelry industry. However, conventional augmented reality only provides data such as the name of the photographed jewellery, jewel content, brand name, and price information, but cannot provide advanced information such as the degree of matching with the user's wearing and currently wearing clothes. there was
본 발명은 사용자의 의상 및 신체 크기에 맞춰 촬영된 주얼리 이외의 다른 주얼리를 추천하고, 이를 증강현실로 나타냄으로써, 단순히 사용자가 촬영한 데이터의 기본적인 데이터만을 제공하는 증강현실의 한계를 극복하고, 사용자에게 더 편리하고 유용한 데이터를 제공할 수 있다.The present invention overcomes the limitations of augmented reality that simply provides basic data of data photographed by the user by recommending other jewelery other than jewelery photographed according to the user's clothes and body size, and representing it in augmented reality, and It can provide more convenient and useful data to
상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특징적인 효과를 실현하기 위한, 본 발명의 특징적인 구성은 하기와 같다.In order to achieve the object of the present invention as described above and to realize the characteristic effects of the present invention to be described later, the characteristic configuration of the present invention is as follows.
본 발명의 일 태양에 따르면, 인터넷 네트워크에 연결되는 사용자 단말 및 주얼리에 관한 데이터를 저장하는 서버를 포함하는 증강현실 제공 방법은, 상기 사용자 단말기는 상기 주얼리를 촬영한 제1 사진 데이터를 상기 서버로 전송하는 단계; 상기 서버가 상기 제1 사진 데이터를 인식하고, 상기 인식된 제1 사진 데이터에 기초하여 상기 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 매칭하고, 상기 제1 증강현실 데이터를 상기 사용자 단말로 전송하는 단계; 상기 사용자 단말기는 제1 증강현실 데이터를 상기 제1 사진 데이터와 함께 표시하고, 사용자를 촬영한 제2 사진 데이터를 상기 서버로 전송하는 단계; 상기 서버는 제2 사진 데이터에 기초하여 상기 사용자의 의상 및 신체 크기를 판단하고, 상기 판단 결과에 기초하여 상기 주얼리를 착용한 제2 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계; 상기 사용자 단말기는 상기 제2 사진 데이터에서 상기 제2 증강현실 데이터를 결합하고, 상기 결합된 영상을 표시하는 단계;를 포함된다.According to an aspect of the present invention, in an augmented reality providing method comprising a server for storing data about a user terminal connected to an Internet network and jewelry, the user terminal transmits the first photo data of the jewelry to the server transmitting; The server recognizes the first photo data, matches at least one of price information, metal content information, and related brand information of the jewelry based on the recognized first photo data, and uses the first augmented reality data transmitting to a user terminal; displaying, by the user terminal, first augmented reality data together with the first photo data, and transmitting second photo data of the user to the server; determining, by the server, the clothing and body size of the user based on the second photo data, and transmitting second augmented reality data in which the user wears the jewelry based on the determination result to the user terminal; The user terminal combines the second augmented reality data from the second photo data, and displaying the combined image.
또한, 본 발명의 다른 태양에 따르면, 서버; 및 카메라 및 인터넷 네트워크에 연결되는 사용자 단말기를 포함하고. 상기 사용자 단말기는, 사용자의 입력 명령에 기초하여 주얼리를 촬영하고, 상기 주얼리를 촬영한 제1 사진 데이터 및 상기 사용자를 촬영한 상기 제2 사진 데이터를 상기 서버로 전송하고, 상기 서버는, 상기 제1 사진 데이터를 인식하고, 상기 인식된 제1 사진 데이터에 기초하여 상기 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 매칭하고, 상기 제1 증강현실 데이터를 상기 사용자 단말기로 전송하고, 2 사진 데이터에 기초하여 상기 사용자의 의상을 판단하고, 상기 판단 결과에 기초하여 상기 주얼리를 착용한 제2 증강현실 데이터를 상기 사용자 단말기로 전송하고, 상기 사용자 단말기는, 상기 제2 사진 데이터에 상기 제2 증강현실 데이터를 결합하고, 상기 결합된 영상을 표시하는 것;을 포함하는 시스템이 제공된다.In addition, according to another aspect of the present invention, the server; and a user terminal connected to the camera and the Internet network. The user terminal takes the jewelry based on a user's input command, and transmits the first photo data of the jewelry and the second photo data of the user to the server, the server, 1 Recognizes photo data, matches at least one of price information, metal content information, and related brand information of the jewelry based on the recognized first photo data, and transmits the first augmented reality data to the user terminal; , 2 Determine the clothes of the user based on the photo data, and transmit the second augmented reality data wearing the jewelry based on the determination result to the user terminal, the user terminal, the second photo data Combining the second augmented reality data, and displaying the combined image; is provided a system comprising a.
본 발명에 의하면, 다음과 같은 효과가 있다.According to the present invention, the following effects are obtained.
본 발명은 사용자의 의상 및 신체 크기에 맞춰 촬영된 주얼리 이외의 다른 주얼리를 추천하고, 이를 증강현실로 나타냄으로써, 단순히 사용자가 촬영한 데이터의 기본적인 데이터만을 제공하는 증강현실의 한계를 극복할 수 있다.The present invention recommends jewelry other than jewelry photographed according to the user's clothes and body size and presents it in augmented reality, thereby overcoming the limitation of augmented reality that simply provides basic data of data photographed by the user. .
본 발명은 사용자에게 더 편리하고 유용한 데이터를 제공하는 효과가 있다.The present invention has the effect of providing more convenient and useful data to the user.
도 1은 사용자 단말기와 서버를 포함하는 시스템 및 시스템의 동작을 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 사용자 단말기의 제어 블록도이다.
도 3은 일 실시예에 따른 서버의 동작을 설명하기 위한 도면이다.
도 4는 일 실시예에 따른 증강현실 제공 방법을 설명하기 위한 순서도이다.1 is a diagram for explaining a system including a user terminal and a server and the operation of the system.
2 is a control block diagram of a user terminal according to an embodiment.
3 is a diagram for explaining an operation of a server according to an embodiment.
4 is a flowchart illustrating an augmented reality providing method according to an embodiment.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0012] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0010] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0010] Reference is made to the accompanying drawings, which show by way of illustration specific embodiments in which the present invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the present invention. It should be understood that the various embodiments of the present invention are different but need not be mutually exclusive. For example, certain shapes, structures, and characteristics described herein with respect to one embodiment may be implemented in other embodiments without departing from the spirit and scope of the invention. In addition, it should be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the present invention. Accordingly, the detailed description set forth below is not intended to be taken in a limiting sense, and the scope of the present invention, if properly described, is limited only by the appended claims, along with all scope equivalents as those claimed. Like reference numerals in the drawings refer to the same or similar functions throughout the various aspects.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings in order to enable those of ordinary skill in the art to easily practice the present invention.
도 1은 사용자 단말기와 서버를 포함하는 시스템 및 시스템의 동작을 설명하기 위한 도면이다.1 is a diagram for explaining a system including a user terminal and a server and the operation of the system.
개시된 일 실시예에 따른 시스템(1)은 증강현실 데이터를 표시하는 사용자 단말기(10)와 증강현실 데이터를 생성하고, 생성된 증강현실 데이터를 사용자 단말기(10)로 전송하는 서버(20)를 포함한다.The
구체적으로 사용자 단말기(10)는 주얼리(2)를 촬영하고, 촬영한 사진 데이터(3, 이하 제1 사진 데이터)를 디스플레이에 표시한다. 도 1에서 도시된 예와 같이, 사용자는 제1 사진 데이터(3)를 터치할 수 있다. 사용자 단말기(10)는 서버(20)로 제1 사진 데이터(3)를 전송한다. 여기서 주얼리(2)는 금, 은, 다이아몬드, 또는 천연 보석과 같은 재료를 세공시켜 재산의 가치를 가지는 모든 종류의 보석류를 포함한다.Specifically, the
서버(20)는 사용자 단말기(10)가 수용하기 힘든 대용량의 데이터를 수집 및 저장한다. 서버(20)가 저장하는 데이터는 다양할 수 있지만, 일 실시예에 따른 서버(20)는 주얼리(2)의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 등 다양한 정보를 저장할 수 있다. 구체적으로 주얼리(2)의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보는 주얼리(2)를 제작한 사업자로부터 수집할 수 있으며, AI(Artificial Intelligence) 기술을 통해 업데이트될 수 있다. 만약 주얼리(2)의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보가 없는 경우, 서버(20)는 사용자 단말기(10) 또는 다른 사용자 단말기를 통해 정보의 입력을 요청할 수도 있다.The
서버(20)는 전송된 제1 사진 데이터(3)를 인식한다. 구체적으로 서버(20)가 제1 사진 데이터(3)를 인식하는 방법은 CNN(Convolution Neural Network)와 같은 물체 인식 알고리즘을 사용할 수 있다. 서버(20)가 사진 또는 영상을 인식하는 방법은 CNN이외에 다양한 물체 인식 알고리즘을 사용할 수 있다.The
서버(20)는 제1 사진 데이터(3)를 인식하는 기술 이외에도 사용자 단말기 (10)가 제공하는 바코드, QR(Quick Response code) 코드 또는 RFID(Radio-Frequency Identification) 인식 결과 중 적어도 하나에 기초하여 상기 주얼리(2)를 구별할 수 있다. 즉, 사용자 단말기(10)는 주얼리(2)와 관련된 바코드, QR코드 또는 RFID 인식 결과를 수집하고, 이를 서버(20)에 전송할 수 있으며, 서버(20)는 사진 인식 이외에 사용자 단말기(10)가 제공하는 데이터에 기초하여 주얼리(2)를 인식할 수도 있다.In addition to the technology for recognizing the first photo data 3 , the
서버(20)는 인식한 주얼리(2)와 저장된 주얼리(2)의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 매칭시킨다. 즉, 서버(20)는 제1 사진 데이터(3)를 통해 실제 주얼리(2)를 인식하고, 주얼리(2)의 가격 정보 등을 저장된 데이터베이스에서 추출하여 증강현실 데이터(4, 이하 제1 증강현실 데이터)를 생성한다. 서버(20)는 생성한 제1 증강현실 데이터(4)를 사용자 단말기(10)로 전송한다. The
제1 증강현실 데이터(4)를 수신한 사용자 단말기(10)는 표시하던 제1 사진 데이터(3)와 함께 수신한 제1 증강현실 데이터(4)를 표시할 수 있다.The
한편, 사용자 단말기(10)는 다시 사용자(U)를 촬영하고, 촬영한 제2 사진 데이터(5)를 표시할 수 있다. 이 때, 사용자 단말기(10)는 제2 사진 데이터(5)를 서버(20)로 전송한다. 여기서 제2 사진 데이터는 정지된 사용자(U)의 모습을 촬영한 결과물 뿐만 아니라, 사용자(U)의 움직임을 포함한 영상 결과물 전체를 의미한다.Meanwhile, the
서버(20)는 수신한 제2 사진 데이터(5)를 인식하고, 사람의 신체를 구분한다. 만약 제2 사진 데이터(5)에 포함된 사람의 신체가 얼굴, 목 및 몸통을 포함하고 있다면, 서버(20)는 종류가 판단된 주얼리(2)는 해당 신체를 포함한 사진 영역에 삽입할 수 있다. 예를 들어, 제2 사진 데이터(5)가 사람의 전신을 포함한 데이터이고, 주얼리(2)가 목걸이이면, 서버(20)는 주얼리(2)를 목를 포함한 사진 영역에 포함된 제2 증강현실 데이터(5)를 생성할 수 있다. 다른 예로, 제2 사진 데이터가 사람의 손이고, 주얼리가 반지이면, 서버(20)는 약지에 반지를 삽입한 증강현실 데이터를 생성할 수도 있다.The
한편, 서버(20)는 제2 증강현실 데이터(5)를 생성하면서, 주얼리(2) 이외의 다른 주얼리(6)를 추천하는 제3 증강현실 데이터(7)를 생성한다. 여기서 다른 주얼리를 추천하는 기준은 제2 사진 데이터(5)에서 인식된 사용자(U)의 의상 및 신체 크기를 기초로 결정한다. 예를 들어 사용자의 현재 의상의 종류, 색상 및 재질에 기초하여 서버(20)는 주얼리(2) 이외의 다른 주얼리(6)를 추천할 수 있다. 다른 예로, 서버(20)는 사용자의 목이 신체에서 차지하는 비율 등을 고려하여 다른 모양이나 다른 크기를 가진 유사한 주얼리(6)를 추천할 수도 있다. 서버(20)가 추천하는 주얼리(2) 이외의 다른 주얼리(6)는 단수개가 아니라 복수개를 포함할 수도 있다.On the other hand, the
서버(20)는 생성된 제2 증강현실 데이터(5) 또는 제3 증강현실 데이터(7)를 사용자 단말기(10)로 전송한다. 구체적으로 제2 증강현실 데이터(5)는 제2 사진 데이터(5)에 기초한 3D 모델링 데이터를 포함할 수 있다. 전술한 바와 같이 제2 사진 데이터(5)가 사용자의 움직임을 촬영한 연속된 프레임의 영상 결과물이라면, 제2 증강현실 데이터(5)는 사용자의 움직임에 따라 주얼리(5)의 이미지도 함께 변화하는 3D 모델링 데이터이다. 서버(20)는 제2 증강현실 데이터(5)로 3D 모델링 데이터를 사용자 단말기(10)로 전송한다.The
한편, 서버(20)는 대용량의 3D 모델링 데이터를 쉽게 처리할 수 있지만, 용량의 한계가 있는 사용자 단말기(10)는 전송되는 3D 모델링 데이터를 처리하기 어려울 수 있다. 서버(20)는 사용자 단말기(10)에 따라 전송되는 3D 모델링 데이터를 저용량의 데이터(저해상도)로 변환한 후, 사용자 단말기(10)로 전송할 수 있다. 이 때 저용량의 데이터로 변환되는 크기는 다양하게 설정될 수 있으며, 사용자(U)에 의해서 변경될 수도 있다.On the other hand, the
사용자 단말기(10)에서는 상기 저용량의 데이터를 수신할 수 있고, 상기 사용자(U)의 선택에 따라 고용량의 데이터(고해상도)를 획득할 수 있다. 예를 들어, 복수의 주얼리(2)를 저용량의 데이터로 수신할 수 있고, 사용자(U)는 상기 사용자 단말기(10)에서 복수의 주얼리(2) 중 어느 하나를 선택할 수 있다.The
상기 선택된 주얼리에 대해서 고용량(고해상도)의 3D 모델링 데이터를 다시 서버(20)로부터 사용자 단말기(10)가 수신할 수 있는 것이다. 이 경우, 사용자 단말기(10)는 단순히 선택된 주얼리뿐 아니라 상기 사용자(U)가 상기 선택된 주얼리를 착용한 증강현실 데이터(고용량)를 수신할 수 있다.The
사용자 단말기(10)는 생성된 제2 증강현실 데이터(5) 또는 제3 증강현실 데이터(7)를 수신한다. 사용자 단말기(10)는 제2 사진 데이티에 주얼리(2)가 결합된 제2 증강현실 데이터(5)를 표시할 수 있다. The
만약 사용자가 화면을 터치하면, 사용자 단말기(10)는 다른 주얼리(6)를 추천하는 제3 증강현실 데이터(7)를 함께 표시할 수 있다. 만약 사용자가 제3 증강현실 데이터(7) 중 일부 주얼리를 클릭하면, 사용자 단말기(10)는 제2 사진 데이터(5)에 결합된 주얼리(6)를 선택된 다른 주얼리로 교체하여 새로운 증강현실 데이터를 표시할 수 있다.If the user touches the screen, the
한편, 다른 실시예에 따라 사용자 단말기(10)는 주얼리(2)를 착용한 사용자의 형상을 포함한 제2 증강현실 데이터(5)를 표시하면서, 사용자의 터치나 다른 입력이 없이도 제3 증강현실 데이터(7)를 함께 표시할 수도 있다.Meanwhile, according to another embodiment, the
사용자 단말기(10)는 증강현실 데이터를 구현하기 위해서 다양한 데이터를 서버(20)로 전송한다. 예를 들어, 사용자 단말기(10)는 제1 사진 데이터 또는 제2 사진 데이터를 전송하면서, 사용자 단말기(10)의 위치를 나타내는 GPS(Global Positioning System) 신호 및 중력 센서를 통해 수집된 위치 데이터를 함께 전송한다. 서버(20)는 수집되는 사용자 단말기(10)의 위치에 기초하여 증강현실 데이터를 생성하는데 사용할 수 잇다.The
서버(20)는 다른 주얼리를 추천하기 위해서 사용자 데이터를 활용할 수 있다. 구체적으로 서버(20)는 사용자 단말기(10)가 설치된 어플리케이션을 통해서 사용자(U)가 보유한 복수 개의 의상 및 복수 개의 의상의 종류, 색상 및 브랜드를 포함하는 사용자 데이터(이하 제1 사용자 데이터)와 사용자(U)의 소득, 거주지, 신체 사이즈, 성별, 검색 이력 및 선호도 중 적어도 하나를 포함하는 사용자 데이터(이하 제2 사용자 데이터)를 수집한다. 서버(20)는 사용자 단말기(10)이 수집한 제1 사용자 데이터 및 제2 사용자 데이터에 기초하여 제3 증강현실 데이터를 생성할 수 있다. The
도 2는 일 실시예에 따른 사용자 단말기의 제어 블록도이다.2 is a control block diagram of a user terminal according to an embodiment.
도 2를 참조하면, 사용자 단말기(10)는 사용자의 입력 명령을 수신하는 입력부(11), 카메라, GPS 센서, 중력 센서, 자이로 센서 및 가속도 센서 등 증강현실 제공 방법에 필요한 다양한 센서(12), 서버(20) 또는 인터넷 네트워크와 통신하는 통신부(13), 사진 데이터 및 증강현실 데이터를 표시하는 표시부(14), 소리 및 빛 등 영상 데이터를 제외한 다양한 데이터를 출력하는 출력부(15), 증강현실에 필요한 어플리케이션, 동작에 필요한 데이터 및 알고리즘이나 서버(20)가 제공하는 증강현실 데이터를 저장하는 저장부(16) 및 전술한 구성을 제어하는 제어부(17)를 포함한다.Referring to Figure 2, the
구체적으로 입력부(11)는 사용자로부터 입력 명령을 수신한다. 입력부(11)는 사용자의 입력 명령을 수신하기 위해 각종 버튼이나 스위치, 키보드, 마우스, 트랙볼(track-ball), 각종 레버(lever), 핸들(handle)이나 스틱(stick) 등과 같은 하드웨어적인 장치를 포함할 수 있다. 입력부(11)는 사용자의 입력 명령을 수신하기 위해 터치 패드(touch pad) 등과 같은 GUI(Graphical User interface), 즉 소프트웨어인 장치를 포함할 수도 있다. 터치 패드는 터치 스크린 패널(Touch Screen Panel: TSP)로 구현되어 표시부(14)와 상호 레이어 구조를 이룰 수 있다. 터치 패드와 상호 레이어 구조를 이루는 터치 스크린 패널(TSP)로 구성되는 경우, 표시부(14)는 입력부(11)로도 사용될 수 있다.Specifically, the
센서(12)는 증강현실 제공에 필요한 다양한 데이터를 수집하는 장치이다. 증강현실은 사용자 단말기(10)의 위치를 파악하고, 그 위치에 대응한 다양한 증강현실 데이터를 제공한다. 따라서 센서(12)는 사용자 단말기(10)의 위치를 파악하는데 필요한 GPS 센서, 자이로 센서, 중력 센서, 가속도 센서를 포함할 수 있다. 구체적으로, GPS 센서는 인공위성으로부터 송신되는 GPS 신호를 수신하는 장치이며, 중력 센서는 사용자 단말기(10)의 세로방향, 가로방향인지 여부를 인식할 수 있도록 중력을 감지하는 센서이다. 가속도 센서는 이동하는 사용자 단말기(10)의 가속도 및 충격의 세기를 측정하는 센서이다. 자이로 센서는 각속도를 측정하는 것으로, 6축을 인식할 수 있도록 도와주는 센서이다. 이 밖에도 사용자 단말기(10)은 증강현실 제공을 위해서 필요한 다양한 센서를 더 포함할 수 있다.The
한편, 개시된 실시예에 따른 사용자 단말기(10)는 사진 데이터를 촬영하기 위한 카메라를 포함할 수 있다. 카메라는 일반적인 스마트 기기에 사용되는 이미지 센서이다. 카메라가 촬영하여 전기적 신호로 변환된 사진 데이터는 이미지 처리를 거쳐, 이하에서 설명하는 통신부(13)를 통해 서버(20)에 전송되거나, 표시부(14)를 통해 표시된다.Meanwhile, the
통신부(13)는 인터넷 네트워크를 통해 서버(20)와 사용자 단말기(10)를 연결하는 통신 인터페이스이다. 통신부(13)는 사용자 단말기(10)이 카메라를 통해 촬영된 사진 데이터, 입력부(11) 및 센서(12)를 통해 수집된 사용자 데이터를 서버(20)로 전송하고, 서버(20)가 전송하는 증강현실 데이터를 수신한다. 통신부(13)는 전술한 데이터를 송수신할 수 있게 하는 하나 이상의 구성 요소를 포함할 수 있으며, 예를 들어 근거리 통신 모듈, 유선 통신 모듈 및 무선 통신 모듈 중 적어도 하나를 포함할 수 있다.The
예를 들어 광역 통신(Wide Area Network; WAN)와 같은 유선 통신 포트를 통해 인터넷 네트워크와 연결될 수 있는 행사장에 마련되는 경우를 대비하여, 사용자 단말기(10)는 유선 통신 모듈을 포함할 수 있다. 다른 예로, 유선 통신 포트가 마련되지 않은 야외에 마련되는 경우를 대비하여 와이파이(Wifi) 모듈, 와이브로(Wireless broadband) 모듈 외에도, GSM(global System for Mobile Communication), CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), UMTS(universal mobile telecommunications system), TDMA(Time Division Multiple Access), LTE(Long Term Evolution) 등 다양한 무선 통신 방식을 지원하는 무선 통신 모듈을 포함할 수 있다.For example, in case it is provided at an event venue that can be connected to an Internet network through a wired communication port such as a wide area network (WAN), the
통신부(13)는 전술한 유 무선 모듈 이외에 서버(20)와 연결될 수 있는 블루투스 모듈, 적외선 통신 모듈, RFID(Radio Frequency Identification) 통신 모듈, WLAN(Wireless Local Access Network) 통신 모듈, NFC 통신 모듈, 직비(Zigbee) 통신 모듈과 같은 근거리 통신 모듈을 포함할 수도 있다. 일 실시예에 따라, 통신부(13)는 근거리 통신 모듈에 기초하여 바코드, QR코드를 인식하거나, RFID를 수행한다.The
표시부(14)는 사진 데이터 및 증강현실 데이터를 표시할 수 있는 디스플레이로써, 디지털 광원 처리(Digital Light Processing: DLP) 패널, 플라즈마 디스플레이 패널(Plasma Display Penal), 액정 디스플레이(Liquid Crystal Display: LCD) 패널, 전기 발광(Electro Luminescence: EL) 패널, 전기영동 디스플레이(Electrophoretic Display: EPD) 패널, 전기변색 디스플레이(Electrochromic Display: ECD) 패널, 발광 다이오드(Light Emitting Diode: LED) 패널 또는 유기 발광 다이오드(Organic Light Emitting Diode: OLED) 패널 등으로 마련될 수 있으나, 이에 한정되지 않는다.The
출력부(15)는 소리 또는 빛 등 사용자 단말기(10)에 마련된 어플리케이션이 동작할 수 있는 기능을 실행하는 장치이다. 예를 들어 증강현실 어플리케이션이 촬영된 주얼리의 브랜드 정보를 포함하는 제1 증강현실 데이터를 표시하면서, 그 브랜드를 상징하는 음악을 재생하는 경우, 출력부(15)는 음악이 재생될 수 있는 음향 장치를 의미한다.The
저장부(16)는 다양한 데이터를 저장한다. 저장부(16)는 센서(12)가 촬영한 제1 사진 데이터 및 제2 사진 데이터를 저장할 뿐만 아니라, GPS 신호, 중력 센서 등이 수집한 센서 데이터를 임시적으로 저장한다. 저장부(16)는 서버(20)로부터 수신한 제1 증강현실 데이터 내지 제3 증강현실 데이터를 저장한다. 제1 증강현실 데이터는 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 포함할 수 있으며, 제2 증강현실 데이터는 촬영된 사용자의 신체에 맞게 주얼리가 착용된 3D 모델링 데이터를 포함하고. 제3 증강현실 데이터는 촬영된 주얼리 이외의 주얼리에 관한 정보를 포함한다.The
또한, 저장부(16)는 사용자의 복수 개의 의상 및 의상의 종류, 색상 및 브랜드에 관한 제1 사용자 데이터와 사용자의 소득, 거주지, 신체 사이즈, 성별, 검색 이력 및 선호도 중 적어도 하나를 포함하는 제2 사용자 데이터를 포함할 수도 있다. 사용자 데이터는 어플리케이션이 사용자의 입력에 의해서 수집되거나, 서버(20)와 연계되어 이미 사용자의 입력에 의해서 수집된 정보 및 빅데이터에 기초하여 수집된 데이터에 의해서 생성될 수 있다.In addition, the
저장부(16)는 캐쉬, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 및 플래쉬 메모리(Flash memory)와 같은 비휘발성 메모리 소자 또는 RAM(Random Access Memory)과 같은 휘발성 메모리 소자 또는 하드디스크 드라이브(HDD, Hard Disk Drive), CD-ROM과 같은 저장 매체 중 적어도 하나로 구현될 수 있으나 이에 한정되지는 않는다. 저장부(16)는 제어부(17)와 관련하여 전술한 프로세서와 별개의 칩으로 구현된 메모리일 수 있고, 프로세서와 단일 칩으로 구현될 수도 있다.The
제어부(17)는 사용자 단말기(10)의 전반을 제어한다. 제어부(17)는 사용자 단말기(10)내 구성요소들의 동작을 제어하기 위한 알고리즘 또는 알고리즘을 재현한 프로그램에 대한 데이터를 저장하는 메모리(미도시), 및 메모리에 저장된 데이터를 이용하여 전술한 동작을 수행하는 프로세서(미도시)로 구현될 수 있다.The
인터넷 네트워크를 통해 사용자 단말기(10)과 서버(20)가 연결되면, 제어부(17)는 주얼리를 촬영한 제1 사진 데이터를 표시부(14)에 표시하고, 서버(20)로 제1 사진 데이터, 바코드, QR코드 또는 RFID 인식 결과 중 적어도 하나를 전송한다. 서버(20)로부터 제1 증강현실 데이터를 수신하면, 제어부(17)는 제1 증강현실 데이터와 제1 사진 데이터를 함께 표시부(14)에 표시한다. 사용자의 조작에 의해서 카메라가 사용자 또는 사람을 촬영한 제2 사진 데이터를 수집하면, 제어부(17)는 제2 사진 데이터를 서버(20)로 전송한다. When the
통신부(13)가 주얼리가 착용하는 이미지를 표현한 제2 증강현실 데이터를 수신하면, 제어부(17)는 제2 사진 데이터와 함께 제2 증강현실 데이터를 함께 표시한다. 또한, 제어부(17)는 서버(20)가 전송한 제3 증강현실 데이터를 수신할 수 있다. 제3 증강현실 데이터는 제2 사진 데이터에 기초하여 서버(20)가 선택한 다른 주얼리에 관한 정보를 포함한다. 제어부(17)는 사용자의 입력 또는 미리 정해진 프로그램에 따라 제2 증강현실 데이터를 표시하면서, 제3 증강현실 데이터를 함께 표시할 수 있다.When the
제어부(17)는 제1 사진 데이터 및 제2 사진 데이터를 전송하면서, 제1 사용자 데이터 및 제2 사용자 데이터를 함께 전송할 수 있다. 예를 들어, 제어부(17)는 사용자를 촬영한 제2 사진 데이터를 전송하면서, 사용자가 이미 가지고 있는 복수 개의 의상 정보 및 사용자가 자주 선호하는 주얼리의 종류를 서버(20)로 전송할 수 있다. 제어부(17)가 선택하는 사용자 데이터는 촬영된 주얼리 및 사용자가 설정한 항목에 기초하여 결정될 수 있다.The
제어부(17)는 증강현실 제공 방법 이외에도 사용자 단말기(10)를 제어하고, 동작시키는 일반적인 동작을 수행할 수도 있다. The
사용자 단말기(10)는 인터넷 네트워크를 통해 서버(20)에 접속할 수 있는 컴퓨터나 휴대용 단말기로 구현될 수 있다. 여기서, 컴퓨터는 예를 들어, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(desktop), 랩톱(laptop), 태블릿 PC, 슬레이트 PC 등을 포함하고, 휴대용 단말기는 예를 들어, 휴대성과 이동성이 보장되는 무선 통신 장치로서, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), WiBro(Wireless Broadband Internet) 단말, 스마트 폰(Smart Phone) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치와 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(Head-Mounted-Device, HMD) 등과 같은 웨어러블 장치를 포함할 수 있다. 사용자 단말기(10)은 도2에서 전술한 구성 이외에도 증강현실 제공 방법에 필요한 다양한 구성을 더 포함할 수 있다.The
도 3은 일 실시예에 따른 서버의 동작을 설명하기 위한 도면이다.3 is a diagram for explaining an operation of a server according to an embodiment.
도 3을 참조하면, 일 실시예에 따른 서버(20)는 사용자 단말기(10)이 전송하는 사진 데이터를 수집하는 사진 데이터 수신부(21), 사진 데이터의 주얼리를 인식하고, 인식된 주얼리와 관련된 증간현실 데이터를 매칭시키는 데이터 매칭부(22), 사용자 단말기(10)이 수집하는 사용자 데이터를 저장하는 사용자 데이터 저장부(23), 데이터 매칭부(22)의 동작에 필요한 증강현실 데이터를 저장하는 증강현실 데이터 저장부(24) 및 전술한 제3 증강현실 데이터와 같은 추천 증강현실 데이터를 생성하는 추천 증강현실 데이터 생성부(25)를 포함한다.Referring to FIG. 3 , the
구체적으로 사진 데이터 수신부(21)는 사용자 단말기(10)로부터 제1 사진 데이터 및 제2 사진 데이터를 수신하는 통신 인터페이스의 역할을 수행한다. 제1 사진 데이터는 전술한 바와 같이, 사용자 단말기(10)이 촬영하는 주얼리 또는 주얼리 이미지를 포함한 촬영 영상일 수 있다. 제2 사진 데이터는 사용자 또는 다른 인물을 포함한 촬영 영상일 수 있다. 서버(20)는 제1 사진 데이터 및 제2 사진 데이터를 수집하고, 사진 데이터에 대응되는 증강현실 데이터를 사용자 단말기(10)로 송신한다.Specifically, the photo
한편, 사진 데이터 수신부(21)는 제1 사진 데이터 이외에 바코드, QR코드 또는 RFID 인식 결과 중 적어도 하나를 포함한 데이터를 수신하면, 수신된 데이터에 기초하여 주얼리를 인식한다.On the other hand, when the photo
데이터 매칭부(22)는 인식된 주얼리와 증강현실 데이터를 매칭시킨다. The
예를 들어, 물체 인식 알고리즘에 기초하여 제1 사진 데이터 내의 주얼리를 인식한 결과에 따라 데이터 매칭부(22)는 증강현실 데이터 저장부(24)에서 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 인식된 주얼리와 매칭한다. 인식된 주얼리와 매칭된 데이터는 제1 증강현실 데이터가 되고, 사용자 단말기(10)로 전송된다.For example, according to the result of recognizing the jewelry in the first photo data based on the object recognition algorithm, the
데이터 매칭부(22)는 제2 사진 데이터에 기초하여 사람의 손을 포함한 사람의 외형을 인식한다. 일 예로. 제1 사진 데이터에서 인식된 주얼리가 반지이고, 제2 사진 데이터에서 인식된 대상이 사람의 손이라면, 데이터 매칭부(22)는 주얼리가 사람의 손가락에 착용된 제2 증강현실 데이터를 제2 사진 데이터와 매칭시킨다. 서버(20)는 사진의 손가락에 착용한 형상의 주얼리, 즉 제2 증강현실 데이터를 사용자 단말기(10)로 전송한다. 다른 예로, 제2 사진 데이터에서 인식된 주얼리가 목걸이이고, 제2 사진 데이터에서 인식된 대상이 원피스를 입은 사람의 외관이라면, 데이터 매칭부(22)는 목걸이가 원피스에 착용된 형상의 제2 증강현실 데이터를 제2 사진 데이터와 매칭시킨다.The
사용자 데이터 저장부(23)는 사용자가 가지고 있는 복수 개의 의상, 복수 개의 의상의 종류, 색상 및 브랜드 등에 관한 제1 사용자 데이터와 사용자의 소득, 거주지, 신체 사이즈, 성별, 검색 이력 및 선호도 중 적어도 하나를 포함하는 제2 사용자 데이터를 저장한다. 제1 사용자 데이터 및 제2 사용자 데이터는 모두 제3 증강현실 데이터를 생성하는 요소가 될 수 있다. The user
증강현실 데이터 저장부(24)는 인식된 주얼리에 관한 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 포함하는 제1 증강현실 데이터와, 사용자에 착용될 때 표시되는 3차원의 이미지를 포함한 제2 증강현실 데이터와, 인식된 주얼리 이외에 사용자에게 추천할 수 있는 다른 주얼리의 3차원 이미지 및 다른 주얼리의 브랜드, 금속 함량 및 가격정보를 포함한 제3 증강현실 데이터를 저장한다. The augmented reality
제2 증강현실 데이터는 주얼리의 3D 모델링 데이터를 포함할 수 있으며, 데이터 크기에 제한은 없다.The second augmented reality data may include 3D modeling data of jewelry, and there is no limitation in data size.
제3 증강현실 데이터는 빅데이터에 의해서 업데이트될 수 있으며, 딥러닝을 포함한 AI(Artificial Intelligence)기술이 적용되어 계속적으로 학습될 수 있다.The third augmented reality data may be updated by big data, and AI (Artificial Intelligence) technology including deep learning may be applied to continuously learn.
추천 데이터 생성부(25)는 사용자에게 추천할 새로운 증강현실 데이터를 생성하고, 이를 사용자 단말기(10)로 전송한다. 추천 데이터 생성부(25)가 제3 증강현실 데이터를 생성하는데 필요한 요소는 사용자의 정보에 기초한다. The
일 예로, 추천 데이터 생성부(25)는 제2 사진 데이터에서 인식된 사용자의 의상뿐만 아니라, 제1 사용자 데이터에 포함된 다른 의상과 인식된 주얼리를 매칭한다. 만약 현재 인식된 주얼리가 사용자의 다른 의상과 어울리지 않는 것으로 판단되면, 추천 데이터 생성부(25)는 인식된 주얼리 이외의 다른 주얼리를 제3 증강현실 데이터로 생성한다. For example, the recommendation
다른 예로, 추천 데이터 생성부(25)는 제2 사진 데이터에서 인식된 사용자의 의상뿐만 아니라, 제1 사용자 데이터에 포함된 다른 의상과 인식된 주얼리를 매칭한다. 만약 현재 인식된 주얼리가 사용자의 다른 의상과 어울리는 것으로 판단되면, 추천 데이터 생성부(25)는 인식된 주얼리를 제1 사용자 데이터에 포함된 다른 의상에 착용한 제3 증강현실 데이터를 생성할 수도 있다.As another example, the recommendation
또 다른 예로, 추천 데이터 생성부(25)는 제2 사용자 데이터에 포함된 사용자의 선호도 또는 검색 이력에 따른 또 다른 주얼리를 제2 사진 데이터와 매칭한다. 만약 자주 검색되고, 선호도가 높은 주얼리의 카테고리가 인식된 주얼리의 카테고리, 예를 들어 목걸이로 판단되면, 추천 데이터 생성부(25)는 인식된 주얼리 이외의 다른 주얼리를 제2 사진 데이터에 합성한 제3 증강현실 데이터를 생성한다.As another example, the recommendation
다른 예로, 추천 데이터 생성부(25)는 제2 사용자 데이터에 포함된 사용자의 소득을 고려할 수도 있다. 만약 현재 인식된 주얼리가 사용자의 소득에 기초해 높은 가격으로 판단되면, 추천 데이터 생성부(25)는 인식된 주얼리보다 낮은 가격의 주얼리로 제3 증강현실 데이터를 생성할 수도 있다.As another example, the
추천 데이터 생성부(25)는 전술한 사용자 데이터 이외에도 다른 다양한 사용자 데이터에 기초하여 제3 증강현실 데이터를 생성할 수 있으며, 제1 사용자 데이터와 제2 사용자 데이터를 혼합하여, 제3 증강현실 데이터를 생성할 수도 있다.The
서버(20)는 추천 데이터 생성부(25)가 생성한 제3 증강현실 데이터를 사용자 단말기(10)로 전송함으로써, 단순히 사용자가 촬영한 데이터의 기본적인 데이터만을 제공하는 증강현실의 한계를 극복하고, 사용자에게 더 편리하고 유용한 데이터를 제공할 수 있다.By transmitting the third augmented reality data generated by the recommendation
한편, 도 3에서 전술한 서버(20)의 각 구성은 서버(20)의 동작을 설명하기 위해서 임의로 구분한 것이다. 즉, 서버(20)는 프로세서로 마련되어 인터넷 네트워크를 통해 도 3에서 전술한 동작을 수행하면 충분하다.Meanwhile, each configuration of the
도 4는 일 실시예에 따른 증강현실 제공 방법을 설명하기 위한 순서도이다.4 is a flowchart illustrating an augmented reality providing method according to an embodiment.
도 4를 참조하면, 사용자 단말기(10)는 어플리케이션을 실행하고, 주얼리를 카메라로 촬영한다(100).Referring to FIG. 4 , the
어플리케이션은 사용자 단말기(10)가 증강현실 데이터를 표시할 수 있는 소프트웨어를 의미한다. 어플리케이션은 다양할 수 있으며, 어플리케이션이 포함하는 사용자 인터페이스는 다양할 수 있다. 사용자 단말기(10)는 촬영하여 생성된 제1 사진 데이터를 서버(20)로 전송한다.The application means software capable of displaying augmented reality data by the
서버(20)는 제1 사진 데이터에 기초하여 제1 증강현실 데이터를 생성한다(110).The
제1 증강현실 데이터는 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 포함한다. 서버(20)는 생성된 제1 증강현실 데이터를 사용자 단말기(10)로 전송한다.The first augmented reality data includes at least one of price information of jewelry, metal content information, and related brand information. The
사용자 단말기(10)는 제1 사진 데이터와 수신한 제1 증강현실 데이터를 표시한다(120).The
제1 증강현실 데이터가 표시되는 방법은 다양할 수 있으며, 형태에 제한은 없다. 한편, 사용자 단말기(10)는 어플리케이션이 실행된 상태에서 카메라를 동작시켜, 사용자를 촬영한 제2 사진 데이터를 서버(20)로 전송한다.A method of displaying the first augmented reality data may be various, and there is no limitation in the form. On the other hand, the
서버(20)는 제2 사진 데이터에 기초하여 제2 증강현실 데이터를 생성한다(130).The
제2 증강현실 데이터는 사용자에 제1 사진 데이터에서 인식된 주얼리가 사용자에게 착용한 형태의 이미지를 포함한다. 제2 증강현실 데이터는 촬영된 사용자의 신체 및 크기에 따라 다양할 수 있으며, 3D 모델링 데이터를 포함할 수 있다.The second augmented reality data includes an image of a type of jewelry recognized by the user in the first photo data worn by the user. The second augmented reality data may vary according to the photographed user's body and size, and may include 3D modeling data.
서버(20)는 사용자 데이터에 기초하여 제3 증강현실 데이터를 생성한다(140).The
사용자 데이터는 전술한 바와 같이, 사용자의 복수 개의 의상 및 상기 복수 개의 의상의 종류, 색상 및 브랜드 중 적어도 하나를 포함하는 제1 사용자 데이터, 사용자의 소득, 거주지, 신체 사이즈, 성별, 검색 이력 및 선호도 중 적어도 하나를 포함하는 제2사용자 데이터를 포함한다. 사용자 데이터는 전술한 요소 이외에도 다양할 수 있다.As described above, the user data includes a plurality of clothes of the user and first user data including at least one of a type, color, and brand of the plurality of clothes, the user's income, residence, body size, gender, search history, and preference. and second user data including at least one of User data may be various in addition to the elements described above.
일 실시예에 따른 사용자 단말기(10)는 어플리케이션을 통해 사용자 입력을 수신할 수 있다(150). The
구체적으로 입력부(11)가 수신하는 사용자 입력은 제3 증강현실 데이터에 관한 것으로, 사용자 단말기(10)은 반드시 제3 증강현실 데이터를 제2 증강현실 데이터와 함께 표시하지 않을 수 있다. 즉, 사용자 단말기(10)눈 사용자가 제3 증강현실 데이터를 표시하는 입력 명령을 수신한 후에 제3 증강현실 데이터를 표시할 수 있다. 이러한 사용자 입력을 유도하는 사용자 인터페이스는, 어플리케이션 상에서 다양한 형태로 구현될 수 있다.Specifically, the user input received by the
만약 사용자 입력이 수신되면(Yes), 사용자 단말기(10)는 수신한 제3 증강현실 데이터를 제2 증강현실 데이터와 함께 표시한다(160). 만약 사용자 입력이 수신되지 않으면(No), 사용자 단말기(10)는 제2 증강현실 데이터만을 표시할 수 있다.If the user input is received (Yes), the
이를 통해서 개시된 주얼리의 증강현실 제공방법 및 이를 실행하는 시스템은, 사용자의 의상 및 신체 크기에 맞춰 촬영된 주얼리 이외의 다른 주얼리를 추천하고, 이를 증강현실로 나타냄으로써, 단순히 사용자가 촬영한 데이터의 기본적인 데이터만을 제공하는 증강현실의 한계를 극복할 수 있고, 사용자에게 더 편리하고 유용한 데이터를 제공하는 효과가 있다.The method for providing augmented reality for jewelry disclosed through this and a system for implementing the same, by recommending jewelry other than jewelry photographed according to the user's clothes and body size, and displaying this in augmented reality, simply provide the basic information of the data photographed by the user. It can overcome the limitations of augmented reality that provides only data, and has the effect of providing more convenient and useful data to users.
이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The embodiments according to the present invention described above may be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the computer-readable recording medium may be specially designed and configured for the present invention, or may be known and available to those skilled in the computer software field. Examples of the computer-readable recording medium include hard disks, magnetic media such as floppy disks and magnetic tapes, optical recording media such as CD-ROMs and DVDs, and magneto-optical media such as floppy disks. media), and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules for carrying out the processing according to the present invention, and vice versa.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.In the above, the present invention has been described with specific matters such as specific components and limited embodiments and drawings, but these are provided to help a more general understanding of the present invention, and the present invention is not limited to the above embodiments. , various modifications and variations can be devised from these descriptions by those of ordinary skill in the art to which the present invention pertains.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention should not be limited to the above-described embodiments, and not only the claims described below, but also all modifications equivalently or equivalently to the claims described below belong to the scope of the spirit of the present invention. will do it
1: 시스템
10: 사용자 단말기
11: 입력부
12: 센서
13: 통신부
14: 표시부
15: 출력부
16: 저장부
17: 제어부
20: 서버
21: 사진 데이터 수신부
22: 데이터 매칭부
23: 사용자 데이터 저장부
24: 증강현실 데이터 저장부
25: 추천 증강현실 데이터 생성부1: system
10: user terminal
11: input
12: sensor
13: communication department
14: display unit
15: output unit
16: storage
17: control unit
20: server
21: photo data receiving unit
22: data matching unit
23: user data storage unit
24: Augmented reality data storage unit
25: recommended augmented reality data generation unit
Claims (13)
상기 사용자 단말기는 상기 주얼리를 촬영한 제1 사진 데이터를 상기 서버로 전송하는 단계;
상기 서버가 상기 제1 사진 데이터를 인식하고, 상기 인식된 제1 사진 데이터에 기초하여 상기 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 매칭하고, 상기 제1 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;
상기 사용자 단말기는 제1 증강현실 데이터를 상기 제1 사진 데이터와 함께 표시하고, 사용자를 촬영한 제2 사진 데이터를 상기 서버로 전송하는 단계;
상기 서버는 제2 사진 데이터에 기초하여 상기 사용자의 의상 및 신체 크기를 판단하고, 상기 판단 결과에 기초하여 상기 주얼리를 착용한 제2 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;
상기 사용자 단말기는 상기 제2 사진 데이터에 상기 제2 증강현실 데이터를 결합하고, 상기 결합된 영상을 표시하는 단계;를 포함하는 증강현실 제공 방법.In the augmented reality providing method comprising a server for storing data about a user terminal and jewelery connected to the Internet network,
transmitting, by the user terminal, first photo data of the jewelry to the server;
The server recognizes the first photo data, matches at least one of price information, metal content information, and related brand information of the jewelry based on the recognized first photo data, and uses the first augmented reality data transmitting to a user terminal;
displaying, by the user terminal, first augmented reality data together with the first photo data, and transmitting second photo data of the user to the server;
determining, by the server, the clothing and body size of the user based on the second photo data, and transmitting second augmented reality data in which the user wears the jewelry based on the determination result to the user terminal;
The user terminal combining the second augmented reality data to the second photo data, and displaying the combined image; Augmented reality providing method comprising a.
상기 제1 사진 데이터를 상기 서버로 전송하는 단계;는,
상기 사용자 단말기는 바코드, QR코드 또는 RFID 인식 결과 중 적어도 하나를 상기 서버로 전송하는 단계;를 포함하는 증강현실 제공 방법.The method of claim 1,
Transmitting the first photo data to the server;
The user terminal transmitting at least one of a barcode, a QR code, or an RFID recognition result to the server; Augmented reality providing method comprising a.
상기 제 2 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;는,
상기 서버는 상기 바코드, 상기 QR코드 또는 상기 RFID 인식 결과 중 적어도 하나에 기초하여 상기 주얼리의 3D 모델링 데이터를 상기 사용자 단말기로 전송하는 단계;를 포함하는 증강현실 제공 방법.3. The method of claim 2,
Transmitting the second augmented reality data to the user terminal;
The server transmitting the 3D modeling data of the jewelry to the user terminal based on at least one of the barcode, the QR code, or the RFID recognition result; Augmented reality providing method comprising a.
상기 제 2 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;는,
미리 설정된 해상도 이하의 3D 모델링 데이터를 상기 사용자 단말기로 전송하는 단계;를 포함하는 증강현실 제공 방법.4. The method of claim 3,
Transmitting the second augmented reality data to the user terminal;
Augmented reality providing method comprising a; transmitting the 3D modeling data less than a preset resolution to the user terminal.
상기 제2 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;는.
상기 사용자 단말기가 전송한 GPS(Global Positioning System) 신호에 기초하여 상기 사용자의 위치를 판단하고, 상기 판단된 의상의 색상, 질감 및 상기 사용자의 위치에 기초하여 상기 주얼리 이외의 다른 주얼리를 추천하는 제3 증강현실 데이터를 결정하는 단계;를 더 포함하는 증강현실 제공 방법.The method of claim 1,
Transmitting the second augmented reality data to the user terminal;
A method of determining the location of the user based on a Global Positioning System (GPS) signal transmitted by the user terminal, and recommending jewelry other than the jewelry based on the determined color and texture of the clothes and the location of the user 3 Determining the augmented reality data; Augmented reality providing method further comprising.
상기 제2 사진 데이터를 상기 서버로 전송하는 단계;는,
상기 사용자 단말기가 미리 수집한 상기 사용자의 복수 개의 의상 및 상기 복수 개의 의상의 종류, 색상 및 브랜드 중 적어도 하나를 포함하는 제1 사용자 데이터를 상기 제2 사진 데이터와 함께 상기 서버로 전송하는 단계;를 포함하는 증강현실 제공 방법.6. The method of claim 5,
transmitting the second photo data to the server;
transmitting the plurality of clothes of the user collected in advance by the user terminal and first user data including at least one of a type, color, and brand of the plurality of clothes to the server together with the second photo data; Augmented reality providing method, including.
상기 제3 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;는,
상기 제1 사용자 데이터 및 상기 제2 사진 데이터에 기초하여 상기 복수 개의 의상에 매칭되는 제3 증강현실 데이터를 결정하는 단계;를 더 포함하는 증강현실 제공 방법.7. The method of claim 6,
Transmitting the third augmented reality data to the user terminal;
Augmented reality providing method further comprising; determining the third augmented reality data matching the plurality of clothes based on the first user data and the second photo data.
상기 제2 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;는.
사용자 단말기가 미리 수집한 상기 사용자의 소득, 거주지, 신체 사이즈, 성별, 검색 이력 및 선호도 중 적어도 하나를 포함하는 제2사용자 데이터를 상기 제2 사진 데이터와 함께 상기 서버로 전송하는 단계;를 포함하는 증강현실 제공 방법.6. The method of claim 5,
Transmitting the second augmented reality data to the user terminal;
Transmitting, by the user terminal, second user data including at least one of the user's income, residence, body size, gender, search history, and preference, collected in advance, to the server together with the second photo data; How to provide augmented reality.
상기 제3 증강현실 데이터를 상기 사용자 단말기로 전송하는 단계;는,
상기 제2 사용자 데이터 및 상기 제2 사진 데이터에 기초하여 상기 사용자에게 매칭되는 제3 증강현실 데이터를 결정하는 단계;를 더 포함하는 증강현실 제공 방법.9. The method of claim 8,
Transmitting the third augmented reality data to the user terminal;
Based on the second user data and the second photo data, determining the third augmented reality data matching the user; Augmented reality providing method further comprising a.
상기 사용자 단말기는,
상기 제1 사진 데이터 및 상기 제2 사진 데이터를 촬영하는 어플리케이션을 실행하고,
상기 제1 증강현실 데이터를 상기 제1 사진 데이터와 함께 표시하는 증강현실 제공 방법.6. The method of claim 5,
The user terminal,
Execute an application for taking the first photo data and the second photo data,
Augmented reality providing method for displaying the first augmented reality data together with the first photo data.
상기 사용자가 상기 제3 증강현실 데이터에 관한 입력 명령을 수신하는 단계;
상기 제3 증강현실 데이터에 기초하여 상기 제2 증강현실 데이터를 상기 제3 증강현실 데이터로 변경하는 단계; 및
상기 변경된 제3 증강현실 데이터 및 상기 제2 사진 데이터를 표시하는 단계;를 포함하는 증강현실 제공 방법.11. The method of claim 10,
receiving, by the user, an input command related to the third augmented reality data;
changing the second augmented reality data to the third augmented reality data based on the third augmented reality data; and
Displaying the modified third augmented reality data and the second photo data; Augmented reality providing method comprising a.
상기 변경된 제3 증강현실 데이터에 기초하여 상기 제2 사진 데이터를 변경하는 단계;를 포함하는 증강현실 제공 방법.12. The method of claim 11,
Augmented reality providing method comprising a; changing the second photo data based on the changed third augmented reality data.
카메라 및 인터넷 네트워크에 연결되는 사용자 단말기를 포함하고.
상기 사용자 단말기는,
사용자의 입력 명령에 기초하여 주얼리를 촬영하고, 상기 주얼리를 촬영한 제1 사진 데이터 및 상기 사용자를 촬영한 상기 제2 사진 데이터를 상기 서버로 전송하고,
상기 서버는,
상기 제1 사진 데이터를 인식하고, 상기 인식된 제1 사진 데이터에 기초하여 상기 주얼리의 가격 정보, 금속 함량 정보 및 관련 브랜드 정보 중 적어도 하나를 매칭하고, 상기 제1 증강현실 데이터를 상기 사용자 단말기로 전송하고, 2 사진 데이터에 기초하여 상기 사용자의 의상을 판단하고, 상기 판단 결과에 기초하여 상기 주얼리를 착용한 제2 증강현실 데이터를 상기 사용자 단말기로 전송하고,
상기 사용자 단말기는, 상기 제2 사진 데이터에 상기 제2 증강현실 데이터를 결합하고, 상기 결합된 영상을 표시하는 것;을 포함하는 시스템.server; and
and a camera and a user terminal connected to an Internet network.
The user terminal,
Taking jewelry based on a user's input command, and transmitting the first photo data of the jewelry and the second photo data of the user to the server,
The server is
Recognizes the first photo data, matches at least one of price information, metal content information, and related brand information of the jewelry based on the recognized first photo data, and transmits the first augmented reality data to the user terminal transmit, determine the clothes of the user based on the two photo data, and transmit the second augmented reality data wearing the jewelry based on the determination result to the user terminal,
The user terminal combines the second augmented reality data with the second photo data, and displays the combined image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200105955A KR20220025359A (en) | 2020-08-24 | 2020-08-24 | Providing method of augmented reality in jewerly and system performing the method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200105955A KR20220025359A (en) | 2020-08-24 | 2020-08-24 | Providing method of augmented reality in jewerly and system performing the method |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20220025359A true KR20220025359A (en) | 2022-03-03 |
Family
ID=80818763
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200105955A KR20220025359A (en) | 2020-08-24 | 2020-08-24 | Providing method of augmented reality in jewerly and system performing the method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20220025359A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102618364B1 (en) * | 2023-07-05 | 2023-12-28 | 주식회사 디씨엠 | System for Providing Online Jewelry Fitting Service |
-
2020
- 2020-08-24 KR KR1020200105955A patent/KR20220025359A/en not_active Application Discontinuation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102618364B1 (en) * | 2023-07-05 | 2023-12-28 | 주식회사 디씨엠 | System for Providing Online Jewelry Fitting Service |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11531402B1 (en) | Bimanual gestures for controlling virtual and graphical elements | |
US20220326781A1 (en) | Bimanual interactions between mapped hand regions for controlling virtual and graphical elements | |
US20220254118A1 (en) | Systems and methods for docking virtual objects with virtual displays | |
US10552004B2 (en) | Method for providing application, and electronic device therefor | |
US20190368868A1 (en) | Method and system for generating a virtual user interface related to a totem | |
US9153074B2 (en) | Wearable augmented reality eyeglass communication device including mobile phone and mobile computing via virtual touch screen gesture control and neuron command | |
US8179604B1 (en) | Wearable marker for passive interaction | |
US9671566B2 (en) | Planar waveguide apparatus with diffraction element(s) and system employing same | |
CN105027033B (en) | Method, device and computer-readable media for selecting Augmented Reality object | |
US20170103440A1 (en) | Wearable augmented reality eyeglass communication device including mobile phone and mobile computing via virtual touch screen gesture control and neuron command | |
US20200020024A1 (en) | Virtual product inspection system using trackable three-dimensional object | |
US20160070439A1 (en) | Electronic commerce using augmented reality glasses and a smart watch | |
CN109564500A (en) | Application control is carried out using the trigger based on gesture | |
US20130254066A1 (en) | Shared user experiences | |
CN106610781B (en) | Intelligent wearing equipment | |
US20230091214A1 (en) | Augmented reality items based on scan | |
Kanade et al. | Mobile and location based service using augmented reality: a review | |
JP2016115125A (en) | Wearable search system | |
KR20220025359A (en) | Providing method of augmented reality in jewerly and system performing the method | |
CN108089700A (en) | For showing the electronic equipment of image and its control method | |
US11893166B1 (en) | User avatar movement control using an augmented reality eyewear device | |
US20240144673A1 (en) | Generating user interfaces displaying augmented reality content | |
US12013985B1 (en) | Single-handed gestures for reviewing virtual content | |
Lehikoinen | Interacting with wearable computers: techniques and their application in wayfinding using digital maps | |
KR102603303B1 (en) | Device, method, and automated or automated program for providing extended reality content |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal |