KR20190142824A - Virtual wear method and system of jewelry - Google Patents

Virtual wear method and system of jewelry Download PDF

Info

Publication number
KR20190142824A
KR20190142824A KR1020180069985A KR20180069985A KR20190142824A KR 20190142824 A KR20190142824 A KR 20190142824A KR 1020180069985 A KR1020180069985 A KR 1020180069985A KR 20180069985 A KR20180069985 A KR 20180069985A KR 20190142824 A KR20190142824 A KR 20190142824A
Authority
KR
South Korea
Prior art keywords
image
jewelry
dimensional
jewelery
terminal
Prior art date
Application number
KR1020180069985A
Other languages
Korean (ko)
Other versions
KR102140555B1 (en
Inventor
최정윤
천소연
송화윤
Original Assignee
동의대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동의대학교 산학협력단 filed Critical 동의대학교 산학협력단
Priority to KR1020180069985A priority Critical patent/KR102140555B1/en
Publication of KR20190142824A publication Critical patent/KR20190142824A/en
Application granted granted Critical
Publication of KR102140555B1 publication Critical patent/KR102140555B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

A virtual jewelry wearing method using a terminal according to an embodiment comprises: a step of displaying M (M is two or more natural numbers) three-dimensional jewelry images; a step of receiving a selection of first to N^th (N is a natural number of M or less) three-dimensional jewelry images among the M three-dimensional jewelry images; and a step of displaying one of first to N^th two-dimensional jewelry images for the first to N^th three-dimensional jewelry images on an object displayed on the terminal in response to a user input.

Description

주얼리의 가상 착용 방법 및 시스템{Virtual wear method and system of jewelry}Virtual wear method and system of jewelry

본 발명은 주얼리의 가상 착용 방법 및 이를 구현하기 위한 시스템에 관한 것이다.The present invention relates to a virtual wearing method of jewelry and a system for implementing the same.

증강현실(Augmented Reality; AR)이란 현실세계 위에, 컴퓨터에 의해서 생성된 정보를 덧붙여 표현하는 것으로 서 증강현실이라고 한다. 즉, AR시스템의 사용자는 현실세계를 보면서 상호 작용할 수 있을 뿐만 아니라, 수행 중인 작업에서의 특정한 순서라든지, 중요한 특징의 설명 등의 부가적인 정보들도 얻을 수 있다. 특히, 상기 증강현실 시스템은 의학 분야나 군사훈련, 오락, 광고 등 많은 분야에서 유용하게 사용될 수 있다. 최근 특히, 상기 증강현실 시스템은 온라인 패션 산업에 있어 직접 입어보거나 만져볼 수 없는 구매자의 한계를 최소 화할 수 있는 시뮬레이션 시스템으로 사용자에게 편의를 제공하는데까지 발전하고 있다.Augmented Reality (AR) is an augmented reality that adds computer-generated information to the real world. That is, the user of the AR system can not only interact with the real world while viewing it, but also obtain additional information such as a specific order in the work being performed or a description of important features. In particular, the augmented reality system can be usefully used in many fields, such as medicine, military training, entertainment, advertising. Recently, in particular, the augmented reality system has been developed to provide convenience to the user as a simulation system that can minimize the limit of buyers can not directly wear or touch in the online fashion industry.

한국특허공개공보 제10-2011-0002610호Korean Patent Publication No. 10-2011-0002610

본 발명의 가상으로 주얼리를 착용할 수 있도록 하는 방법과 시스템을 제공하는데 일 목적이 있다.It is an object of the present invention to provide a method and system for virtually wearing jewelry.

또한, 본 발명은 선호하는 복수의 주얼리를 보다 편리하게 변경하고 복수의 주얼리의 착용 모습을 간편하게 비교할 수 있도록 하는데 일 목적이 있다.In addition, an object of the present invention is to make it easier to change a plurality of preferred jewelry and to easily compare the wearing state of the plurality of jewelry.

또한, 본 발명은 보다 정확하게 촬영되는 객체 상에 3차원의 주얼리 이미지가 결합될 수 있도록 하고, 객체의 다른 위치에 3차원의 주얼리 이미지가 직관적이고 간편한 방법으로 이동시킬 수 있도록 하는데 일 목적이 있다.In addition, an object of the present invention is to enable a three-dimensional jewelry image can be combined on an object to be photographed more accurately, and to move the three-dimensional jewelry image in an intuitive and convenient manner to another position of the object.

실시예는, 단말기를 이용한 주얼리 가상착용 방법에 있어서, M(M은 2 이상의 자연수)개의 3차원 주얼리 이미지를 표시하는 단계; 상기 M개의 3차원 주얼리 이미지 중 제1 내지 제N(N은 M 이하의 자연수) 3차원 주얼리 이미지의 선택을 수신하는 단계; 및 사용자의 입력에 응답하여 단말기 상에 표시된 객체에 상기 제1 내지 제N 3차원 주얼리 이미지에 대한 제1 내지 제N 2차원 주얼리 이미지 중 어느 하나를 표시하는 단계;를 표시하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수 있다.Embodiments, the virtual jewelry wearing method using a terminal, comprising the steps of: displaying M (M is a natural number of two or more) three-dimensional jewelry images; Receiving a selection of first to N th (N is a natural number of M or less) three dimensional jewel images among the M three dimensional jewel images; And displaying one of the first to N-th two-dimensional jewelry images of the first to N-th three-dimensional jewelry images on an object displayed on the terminal in response to a user input. A wearing method can be provided.

다른 측면에서, 상기 객체와 2차원 주얼리 이미지를 표시하는 단계는, 상기 단말기에 저장된 복수의 사진의 표시를 실행하기 위한 사진첩표시어포던스의 선택에 응답하여 상기 복수의 사진을 표시하는 단계; 상기 복수의 사진 중 어느 하나의 선택에 응답하여 선택된 사진만을 표시하는 단계; 상기 제1 내지 제N 3차원 주얼리 이미지를 상기 제1 내지 제N 2차원 주얼리 이미지로 변환하는 단계; 상기 제1 2차원 주얼리 이미지와 상기 선택된 사진을 표시하는 단계; 상기 제1 2차원 주얼리 이미지의 이동을 위한 입력에 응답하여 상기 제1 2차원 주얼리 이미지를 이동시켜 상기 선택된 사진 상의 상기 객체에 상기 제1 2차원 주얼리 이미지를 표시하는 단계; 및 상기 제1 2차원 주얼리 이미지를 변경하기 위한 입력에 응답하여 상기 제2 내지 제N 2차원 이미지들을 순서대로 변경하여 표시하는 단계;를 포함하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, the displaying of the object and the two-dimensional jewelry image may include: displaying the plurality of photos in response to selection of a photo album display affordance for executing display of the plurality of photos stored in the terminal; Displaying only the selected picture in response to the selection of any one of the plurality of pictures; Converting the first to N-th three-dimensional jewelery images into the first to N-th two-dimensional jewelery images; Displaying the first two-dimensional jewelry image and the selected photo; Moving the first 2D jewelery image in response to an input for moving the first 2D jewelery image to display the first 2D jewelery image on the object on the selected photograph; And changing and displaying the second to N-th two-dimensional images in order in response to an input for changing the first two-dimensional jewel image.

다른 측면에서, 상기 제1 2차원 주얼리 이미지의 이동을 위한 입력에 응답하여 상기 제1 2차원 주얼리 이미지를 이동시켜 상기 선택된 사진 상의 상기 객체에 상기 제1 2차원 주얼리 이미지를 표시하는 단계는, 표시된 상기 제1 2차원 주얼리 이미지에 대한 사용자의 연속된 터치 이동 입력에 응답하여 상기 제1 2차원 주얼리 이미지를 이동시켜 상기 객체에 상기 제1 2차원 주얼리 이미지를 표시하는 단계인 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, moving the first 2D jewelery image in response to an input for moving the first 2D jewelery image to display the first 2D jewelery image on the object on the selected photo is displayed. Virtual wearing of a jewelry using a terminal which displays the first 2D jewelry image on the object by moving the first 2D jewelry image in response to a user's continuous touch movement input to the first 2D jewelry image It may also provide a method.

다른 측면에서, 상기 제1 2차원 주얼리 이미지를 변경하기 위한 입력에 응답하여 상기 제2 내지 제N 2차원 주얼리 이미지들을 순서대로 변경하여 표시하는 단계는, 상기 객체 상에 표시된 상기 제1 2차원 주얼리 이미지에 대한 기 설정시간 동안의 사용자의 불연속된 복수의 터치 입력에 응답하여 상기 제2 내지 제N 2차원 주얼리 이미지들을 순서대로 변경하여 표시하는 단계인 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, in response to an input for changing the first 2D jewelery image, changing and displaying the second to Nth 2D jewelery images in order may include: displaying the first 2D jewelery displayed on the object. A virtual jewelry wearing method using a terminal may be provided, in which the second to N-th two-dimensional jewelry images are sequentially changed and displayed in response to a plurality of discontinuous touch inputs of a user for a predetermined time for an image. .

또 다른 측면에서, 단말기를 이용한 주얼리 가상착용 방법에 있어서, M(M은 2 이상의 자연수)개의 3차원 주얼리 이미지를 표시하는 단계; 상기 M개의 3차원 주얼리 이미지 중 제1 내지 제N(N은 M 이하의 자연수) 3차원 주얼리 이미지의 선택을 수신하는 단계; 및 사용자의 입력에 응답하여 단말기 상에 표시된 객체에 상기 제1 내지 제N 3차원 주얼리 이미지 중 어느 하나를 표시하는 단계;를 표시하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, a virtual jewelry wearing method using a terminal, comprising: displaying M (M is a natural number of two or more) three-dimensional jewelry images; Receiving a selection of first to N th (N is a natural number of M or less) three dimensional jewel images among the M three dimensional jewel images; And displaying one of the first to N-th three-dimensional jewelry images on an object displayed on the terminal in response to a user input. The jewelry virtual wearing method using the terminal may be provided.

또 다른 측면에서, 상기 객체와 3차원 주얼리 이미지를 표시하는 단계는, 카메라 실행을 위한 카메라실행어포던스의 선택에 응답하여 카메라를 실행하는 단계; 및 상기 카메라에서 촬영된 영상 내의 상기 객체 상에 상기 제1 내지 제N 3차원 주얼리 이미지 중 어느 하나를 표시하는 단계;를 포함하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, displaying the object and the three-dimensional jewelery image, the method comprising: executing the camera in response to the selection of the camera execution affordance for the camera execution; And displaying one of the first to N-th three-dimensional jewelery images on the object in the image photographed by the camera.

또 다른 측면에서, 상기 객체와 3차원 주얼리 이미지를 표시하는 단계는, 카메라 실행을 위한 카메라실행어포던스의 선택에 응답하여 카메라를 실행하는 단계; 상기 카메라에서 촬영된 영상 내의 상기 객체의 제1 영역의 위치 정보를 검출하는 단계; 및 상기 제1 영역의 위치 정보에 기초하여 상에 상기 제1 3차원 주얼리 이미지를 상기 제1 영역과 다른 상기 객체의 제2 영역에 표시하는 단계;를 포함하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, displaying the object and the three-dimensional jewelery image, the method comprising: executing the camera in response to the selection of the camera execution affordance for the camera execution; Detecting location information of a first area of the object in an image captured by the camera; And displaying the first three-dimensional jewelry image on the second area of the object different from the first area on the basis of the location information of the first area. You may.

또 다른 측면에서, 상기 제1 영역 내의 주름 정보에 기초하여 상기 제1 3차원 주얼리 이미지의 위치를 변경하여 상기 제2 영역에 표시하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, there may be provided a jewelry virtual wearing method using a terminal for changing the position of the first three-dimensional jewelry image based on the wrinkle information in the first region to display in the second region.

또 다른 측면에서, 상기 객체와 3차원 주얼리 이미지를 표시하는 단계는, 상기 제1 영역의 위치 정보에 기초하여 상기 객체의 손금 검출 영역을 지정하는 단계; 상기 손금 검출 영역 내에서 손금의 검출 여부를 판단하는 단계; 상기 손금이 검출되면 상기 제1 3차원 주얼리 이미지를 회전시키고 상기 객체의 제3 영역의 위치 정보를 검출하는 단계; 및 상기 제3 영역의 위치 정보에 기초하여 상에 상기 제1 3차원 주얼리 이미지를 상기 제3 영역과 다른 상기 객체의 제4 영역에 표시하는 단계;를 더 포함하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, displaying the object and the 3D jewelery image may include: designating a palm detection region of the object based on location information of the first region; Determining whether the palm rest is detected in the palm rest detection area; Rotating the first three-dimensional jewelery image and detecting position information of a third region of the object when the palm rest is detected; And displaying the first three-dimensional jewelry image on the fourth area of the object different from the third area on the basis of the position information of the third area. You can also provide

또 다른 측면에서, 상기 객체와 3차원 주얼리 이미지를 표시하는 단계는, 상기 손금이 검출된 시점부터 기 설정 시간 후에 상기 손금 검출 영역 내에서 손금의 검출 여부를 다시 판단하는 단계; 및 상기 손금이 검출되지 않으면 상기 제1 3차원 주얼리 이미지를 상기 제2 3차원 주얼리 이미지로 변경하여 표시하는 단계;를 더 포함하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, the displaying of the object and the 3D jewelry image may include: re-determining whether the palm rest is detected in the palm detection region after a preset time from the time when the palm rest is detected; And changing the first three-dimensional jewelery image to the second three-dimensional jewelery image and displaying the second three-dimensional jewelery image if the palm rest is not detected.

또 다른 측면에서, 상기 제1 3차원 주얼리 이미지와 상기 객체에 대한 촬영 이미지를 축소하여 더 표시하는 단계;를 더 포함하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, the method may further provide a jewelry virtual wearing method using a terminal further comprising: reducing and displaying the first 3D jewelry image and the captured image of the object.

또 다른 측면에서, 상기 손금 검출 영역 내에서 상기 손금이 검출된 후 상기 기 설정 시간 후에 상기 손금 검출 영역 내에서 손금이 검출되지 않을 때 마다 상기 제1 내지 제N 3차원 주얼리 이미지를 순서대로 변경하여 표시하는 단말기를 이용한 주얼리 가상착용 방법을 제공할 수도 있다.In another aspect, the first to N-th three-dimensional jewelery image is changed in order every time the palm rest is not detected in the palm rest detection region after the preset time after the palm rest is detected in the palm rest detection region. It is also possible to provide a jewelry virtual wearing method using a terminal to display.

전술한 단계를 수행하기 위한 명령어들을 저장하는 비일시적 컴퓨터 판독가능 매체를 제공할 수도 있다.A non-transitory computer readable medium may be provided for storing instructions for performing the above-described steps.

본 발명의 실시예는 사용자가 선호하는 주얼리를 가상으로 착용할 수 있도록 하는 방법과 시스템을 제공하는 효과가 있다.An embodiment of the present invention has the effect of providing a method and system that allows a user to virtually wear a favorite jewelry.

또한, 본 발명의 실시예는 단말기에 미리 저장된 사진 내의 객체 상에 주얼리를 가상으로 착용 가능하게 한다.In addition, an embodiment of the present invention makes it possible to virtually wear jewelry on an object in a picture previously stored in the terminal.

또한, 본 발명의 실시예는 간편하게 객체 상에 결합된 주얼리 이미지를 사용자가 선호하는 다른 주얼리 이미지로 변경 가능하게 하여 사용자가 선호하는 주얼리 이미지를 착용한 상태의 모습을 빠르고 직관적으로 확인할 수 있도록 한다.In addition, the embodiment of the present invention can easily change the jewelry image combined on the object to another jewelry image preferred by the user so that the user can quickly and intuitively check the state of wearing the jewelry image preferred by the user.

또한, 본 발명의 실시예는 카메라를 통해 촬영되는 객체 상에 3차원의 주얼리 이미지가 결합되도록 하여 가상으로 주얼리를 착용할 수 있도록 한다.In addition, an embodiment of the present invention allows the three-dimensional jewelry image to be combined on the object photographed by the camera so that the jewelry can be worn virtually.

또한, 본 발명의 실시예는 특정 영역의 검출을 통해 3차원 주얼리 이미지가 위치할 영역을 보다 정밀하게 설정하도록 한다.In addition, the embodiment of the present invention allows to more precisely set the region where the 3D jewelry image is to be located by detecting a specific region.

또한, 본 발명의 실시예는 간단한 터치 입력 방식을 통해 객체 상에 결합된 3차원 주얼리 이미지를 사용자가 선호하는 또 다른 3차원 주얼리 이미지로 변경할 수 있도록 한다.In addition, the embodiment of the present invention enables to change the three-dimensional jewelry image combined on the object to another three-dimensional jewelry image preferred by the user through a simple touch input method.

또한, 본 발명의 실시예는 촬영되는 객체의 위치를 보다 정확하게 판별하여 더욱 실감하게 주얼리를 가상 착용한 효과를 준다.In addition, the embodiment of the present invention more effectively determines the position of the object to be photographed gives an effect of virtually wearing the jewelry more realistically.

또한, 본 발명은 손금 검출 영역 상의 손금 검출을 통한 사용자가 손을 반복하여 뒤집는 방식의 간단한 제스처를 빠르게 인식할 수 있도록 한다.In addition, the present invention enables a user to quickly recognize a simple gesture of a method of repeatedly inverting the hand through the palm detection on the palm detection region.

또한, 본 발명은 사용자가 간단한 제스처의 반복 동작을 통해 가상으로 착용한 3차원 주얼리 이미지를 사용자가 선호하는 또 다른 3차원 주얼리 이미지로 변경될 수 있도록 한다.In addition, the present invention allows the user to change the virtually worn three-dimensional jewelry image to another three-dimensional jewelry image through a simple gesture repetitive operation.

또한, 본 발명은 변경전 3차원 주얼리 이미지가 결합된 객체의 촬영 이미지와 변경된 3차원 주얼리 이미지가 결합된 객체의 촬영 영상을 함께 표시함으로써 사용자가 보다 선호하는 주얼리의 착용 모습을 편리하게 비교할 수 있도록 한다.In addition, the present invention displays the photographed image of the object combined with the three-dimensional jewelry image before the change and the photographed image of the object combined with the changed three-dimensional jewelry image so that the user can conveniently compare the wearing appearance of the jewelry more preferred do.

도 1은 주얼리 가상 착용 방법을 구현하기 위한 시스템 환경의 일 구현을 나타낸다.
도 2는 단말기의 제1 사용자 인터페이스에 대한 예시도이다.
도 3은 제1 사용자 인터페이스 상에 표시된 복수의 3차원 주얼리 이미지 중 적어도 하나를 선택하는 과정을 나타낸 예시도이다.
도 4는 사진첩의 실행에 따른 단말기 상에 표시되는 복수의 사진에 대한 예시도이다.
도 5는 선택된 사진 내의 객체 상에 2차원 주얼리 이미지를 위치시키는 방법에 대한 예시도이다.
도 6은 카메라를 통해 촬영되는 객체 상에 3차원 주얼리 이미지가 결합되는 것을 나타낸 예시도이다.
도 7은 제1 영역 및 제2 영역과 손금 검출 영역에 대한 예시도이다.
도 8은 제3 및 제4 영역과 손금 검출 영역에 대한 예시도이다.
도 9는 3차원 주얼리 이미지의 변경 방법에 대한 예시도이다.
도 10은 주얼리 가상 착용 방법을 구현하기 위한 시스템의 예시도이다.
1 illustrates one implementation of a system environment for implementing a jewelry virtual wearing method.
2 is an exemplary diagram of a first user interface of a terminal.
3 is an exemplary diagram illustrating a process of selecting at least one of a plurality of 3D jewelery images displayed on a first user interface.
4 is an exemplary view of a plurality of pictures displayed on the terminal according to the execution of the photo book.
5 is an exemplary diagram illustrating a method of positioning a 2D jewelry image on an object in a selected picture.
6 is an exemplary view illustrating that a 3D jewelry image is combined on an object photographed through a camera.
7 is an exemplary view of a first region, a second region, and a palm detection region.
8 is an exemplary view of the third and fourth regions and the palm rest detection region.
9 is an exemplary view illustrating a method of changing a 3D jewelry image.
10 is an exemplary diagram of a system for implementing a jewelry virtual wearing method.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다. 이하의 실시예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다. 또한, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다. 또한, 도면에서는 설명의 편의를 위하여 구성 요소들이 그 크기가 과장 또는 축소될 수 있다. 예컨대, 도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 임의로 나타내었으므로, 본 발명이 반드시 도시된 바에 한정되지 않는다.As the invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. Effects and features of the present invention, and methods of achieving them will be apparent with reference to the embodiments described below in detail together with the drawings. However, the present invention is not limited to the embodiments disclosed below but may be implemented in various forms. In the following embodiments, the terms first, second, etc. are used for the purpose of distinguishing one component from other components rather than a restrictive meaning. Also, the singular forms “a”, “an” and “the” include plural forms unless the context clearly indicates otherwise. In addition, the terms including or have means that the features or components described in the specification are present, and does not preclude the possibility of adding one or more other features or components. In addition, in the drawings, components may be exaggerated or reduced in size for convenience of description. For example, the size and thickness of each component shown in the drawings are arbitrarily shown for convenience of description, and thus the present invention is not necessarily limited to the illustrated.

이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, and the same or corresponding components will be denoted by the same reference numerals, and redundant description thereof will be omitted. .

시스템 흐름: 개시된 기술은 주얼리 가상 착용 방법을 제공하는 것과 관련된다.System Flow: The disclosed technology relates to providing a jewelry virtual wearing method.

컴퓨터 시스템: 더 상세한 설명 및 첨부 도면에 후속하는 예시적이고 비 제한적인 구현의 다양한 양태의 기본 또는 일반적인 이해를 가능하게 하는 것을 돕기 위해 간략화된 요약이 제공된다. 그러나 이 요약은 포괄적이거나 포괄적인 개요로 의도되지는 않는다. 그 대신에 이 요약의 유일한 목적은 후속하는 다양한 구현에 대한 보다 상세한 설명의 서두로서 간단한 형태로 일부 예시적인 비 - 제한적 구현과 관련된 일부 개념을 제시하는 것이다.Computer System: A simplified summary is provided to facilitate a basic or general understanding of various aspects of the illustrative and non-limiting implementation that follows the more detailed description and the accompanying drawings. However, this summary is not intended to be a comprehensive or comprehensive overview. Instead, the sole purpose of this summary is to present some concepts relating to some example non-limiting implementations in a simplified form as a prelude to the more detailed description of the various implementations that follow.

규정: 이 기술의 한 측면은 개인에게 어울리는 주얼리를 온라인 상에서 추천하고자 하는 주얼리 판매업체에게 큰 장애가 된다. 많은 사람들은 어울리는 주얼리를 고르기 위하여 많은 매장을 직접 방문하고 싶어하지 않는다. Regulations: One aspect of this technology is a major obstacle for jewelers who want to recommend jewelery that is appropriate for them online. Many people don't want to visit many stores in order to find the right jewelry.

도 1은 주얼리 가상 착용 방법을 구현하기 위한 시스템 환경의 일 구현을 나타낸다.1 illustrates one implementation of a system environment for implementing a jewelry virtual wearing method.

도 1을 참조하면, 시스템(100)은 단말기(110), 어플리케이션(120), 카메라(130), 쇼핑몰 서버(140), 3차원 이미지 모델링 서버(150) 및 네트워크(190)를 포함할 수 있다.Referring to FIG. 1, the system 100 may include a terminal 110, an application 120, a camera 130, a shopping mall server 140, a 3D image modeling server 150, and a network 190. .

카메라(130)는 객체를 포착하는데 사용될 수 있으며, 일반적으로 개인 단말기(110)인 현재 스마트폰으로 지칭되는 것과 같은 카메라를 갖는 인터넷 - 접속 컴퓨팅 장치와 같은 독립형 카메라 또는 다른 장치의 일부일 수 있다 예를 들어 Apple Computer의 iPhone® 및 Samsung 및 LG의 Android 기반 전화가 있다. 카메라(130)는 사용자의 손이나 머리, 발 등 신체의 특정 부위를 캡처하고 전송하는데 사용할 수 있다. 이미지는 종이로 전달되어 다시 디지털화되거나 전자 방식으로 전달 될 수 있다.Camera 130 may be used to capture an object and may be part of a standalone camera or other device such as an internet-connected computing device having a camera such as what is now referred to as a current smartphone, which is generally a personal terminal 110. For example, Apple Computer's iPhone® and Samsung and LG's Android-based phones. The camera 130 may be used to capture and transmit a specific part of the body such as a user's hand, head, or foot. Images can be delivered on paper and digitized again or electronically.

3차원 이미지 모델링 서버(150)는 쇼핑몰 서버(140)로부터 수신된 각종 주얼리에 대한 이미지를 렌더링하여 3차원 주얼리 이미지를 생성할 수 있고, 생서안 3차원 주얼리 이미지를 단말기(110)로 전송할 수 있도록 구성된다.The 3D image modeling server 150 may generate an image of various jewels received from the shopping mall server 140 to generate a 3D jewelery image, and transmit the three-dimensional jewelery image to the terminal 110. It is composed.

3차원 이미지 모델링 서버(150)는 쇼핑몰 서버(1400로부터 수신한 주얼리에 대한 이미지와 생성한 3차원 주얼리 이미지를 저장하기 위한 저장소를 구비할 수 있다. 저장소는 범용 분산 메모리 캐싱 시스템을 사용하여 구현할 수 있다. 일부 구현 예에서, 데이터 구조는 하나 이상의 주얼리 엔지니어로부터의 정보를 일반적인 데이터베이스 이미지의 테이블로 저장하여 온 - 디맨드 데이터베이스 서비스(ODDS)를 형성 할 수 있으며, 멀티 - 테넌트 (multi-tenant) 데이터베이스 시스템 (MTDS). 데이터베이스 이미지에는 하나 이상의 데이터베이스 오브젝트가 포함될 수 있다. 다른 구현 예에서, 데이터베이스는 관계형 데이터베이스 관리 시스템 (RDBMS), 객체 지향 데이터베이스 관리 시스템 (OODBMS), 분산 파일 시스템 (DFS), 스키마 없음 데이터베이스 또는 기타 데이터 저장 시스템 또는 컴퓨팅 장치 일 수 있다.The 3D image modeling server 150 may include a storage for storing an image of the jewelry received from the shopping mall server 1400 and the generated 3D jewelry image. The storage may be implemented using a general-purpose distributed memory caching system. In some implementations, the data structure can store information from one or more jewelry engineers as a table of common database images to form an on-demand database service (ODDS), and a multi-tenant database system. (MTDS) A database image may include one or more database objects In another embodiment, the database may be a relational database management system (RDBMS), an object-oriented database management system (OODBMS), a distributed file system (DFS), a schemaless database. Or other data There could be a system or computing device.

카메라(130)로부터의 객체를 포함하는 이미지는 직접 이미지 업로드, 문자 메시지, 전자 메일 또는 소셜 미디어 메시지를 포함하나 이에 한정되지 않는 다수의 전송 기술 중 하나를 사용하여 컴퓨터 기반 시스템으로 가져 오거나 업로드 할 수 있다. WiFi 핫 스팟 또는 네트워크. Raw 이미지는 객체가 인쇄된 그림에서 캡처 할 수 있다.Images containing objects from camera 130 may be imported or uploaded to a computer-based system using one of a number of transmission technologies, including but not limited to direct image uploads, text messages, e-mails, or social media messages. have. WiFi hotspot or network. Raw images can be captured from the printed picture of the object.

쇼핑몰서버(140) 및 서버(150) 각각은 서로 통신하는 임의의 네트워크 또는 네트워크들의 조합 일 수 있다. 예를 들어, 쇼핑몰서버(140) 및 서버(150) 각각은 LAN(근거리 통신망), WAN(광역 네트워크), 전화망(공중 전화망 (PSTN), 세션 개시 프로토콜(SIP), 3G, 4G LTE) 중 하나 또는 임의의 조합을 사용하여 구현 될 수 있다. 스타 네트워크, 토큰 링 네트워크, 허브 네트워크, WiMAX, Wi-Fi, 블루투스, 근거리 무선 통신 (NFC), Z-Wave, ZigBee 또는 기타 적절한 구성과 같은 피어 투 피어 연결 인터넷을 포함한 데이터 네트워크 다른 구현 예에서, 인트라넷, 엑스트라 넷, 가상 사설망 (VPN), 비-TCP / IP 기반 네트워크, 임의의 LAN 또는 WAN 등과 같은 다른 네트워크가 사용될 수 있다.Each of the shopping mall server 140 and the server 150 may be any network or combination of networks that communicate with each other. For example, each of the shopping mall server 140 and the server 150 is one of a local area network (LAN), wide area network (WAN), and telephone network (public telephone network (PSTN), session initiation protocol (SIP), 3G, 4G LTE). Or can be implemented using any combination. In other embodiments, data networks, including peer-to-peer connection Internet, such as star networks, token ring networks, hub networks, WiMAX, Wi-Fi, Bluetooth, near field communication (NFC), Z-Wave, ZigBee, or other suitable configuration, Other networks may be used, such as intranets, extranets, virtual private networks (VPNs), non-TCP / IP based networks, any LAN or WAN, and the like.

도 2는 단말기의 제1 사용자 인터페이스에 대한 예시도이고, 도 3은 제1 사용자 인터페이스 상에 표시된 복수의 3차원 주얼리 이미지 중 적어도 하나를 선택하는 과정을 나타낸 예시도이다. 도 4는 사진첩의 실행에 따른 단말기 상에 표시되는 복수의 사진에 대한 예시도이다. 그리고 도 5는 선택된 사진 내의 객체 상에 2차원 주얼리 이미지를 위치시키는 방법에 대한 예시도이다.2 is an exemplary diagram of a first user interface of a terminal, and FIG. 3 is an exemplary diagram illustrating a process of selecting at least one of a plurality of three-dimensional jewelry images displayed on the first user interface. 4 is an exemplary view of a plurality of pictures displayed on the terminal according to the execution of the photo book. 5 illustrates an example of a method of positioning a 2D jewelry image on an object in a selected picture.

도 2 및 도 3을 참조하면, 단말기(110)에 미리 설치된 어플리케이션(120)이 실행되면, 단말기(110)는 3차원 이미지 모델링 서버(150)로부터 복수의 3차원 주얼리 이미지를 수신할 수 있다.2 and 3, when the application 120 pre-installed in the terminal 110 is executed, the terminal 110 may receive a plurality of three-dimensional jewelry images from the three-dimensional image modeling server 150.

제1 사용자 인터페이스(121)는 수신한 복수의 3차원 주얼리 이미지(a)를 표시할 수 있다. 도면에 예시된 바에 따르면 복수의 3차원 주얼리 이미지(a)는 M(M은 2 이상의 자연수)개의 3차원 주얼리 이미지로 정의할 수 있다.The first user interface 121 may display the plurality of three-dimensional jewelry images a received. As illustrated in the drawing, the plurality of three-dimensional jewelry images a may be defined as three-dimensional jewelry images of M (M is a natural number of two or more).

단말기(110)는 표시된 M개의 3차원 주얼리 이미지(a) 중에서 적어도 하나에 대한 선택을 수신할 수 있다.The terminal 110 may receive a selection of at least one of the displayed M three-dimensional jewelery images a.

여기서의 선택은 예시적으로 사용자의 터치 입력이 될 수 있다.For example, the selection may be a user's touch input.

사용자는 M개의 3차원 주얼리 이미지(a) 중에서 제1 내지 제N(N은 M 이하의 자연수) 3차원 주얼리 이미지의 선택을 수신할 수 있다.The user may receive a selection of the first to N-th (N is a natural number of M or less) three-dimensional jewelry images among the M three-dimensional jewelry images (a).

단말기(110)는 선택된 제1 내지 제N 3차원 주얼리 이미지와 선택한 순서를 메모리에 저장할 수 있다.The terminal 110 may store the selected first to N-th three-dimensional jewelry images and the selected order in a memory.

설명의 편의를 위하여 제1 내지 제N 3차원 주얼리 이미지를 번호 순서대로 선택한 것으로 가정한다.For convenience of explanation, it is assumed that the first to N-th three-dimensional jewelry images are selected in numerical order.

단말기(110)는 사용자의 입력에 응답하여 단말기(110) 상에 표시된 객체에 제1 내지 제N 3차원 주얼리 이미지에 대한 제1 내지 제N 2차원 주얼리 이미지 중 어느 하나를 표시할 수 있다.The terminal 110 may display any one of the first to N-th two-dimensional jewelry images for the first to N-th three-dimensional jewelery images on the object displayed on the terminal 110 in response to a user input.

상세하게는, 제1 사용자 인터페이스(121)는 단말기(110)에 저장된 복수의 사진의 표시를 실행하기 위한 사진첩표시어포던스(Affordance, af1)와 카메라 실행을 위한 카메라실행어포던스(af2)를 포함할 수 있다.In detail, the first user interface 121 may include a photo album display affordance (aff1) for executing a display of a plurality of pictures stored in the terminal 110 and a camera execution affordance (af2) for executing a camera. have.

단말기(110)는 사진첩표시어포던스(af1)의 선택(예를 들어, 사용자의 터치 입력)에 응답하여 사진첩을 실행하여 저장된 복수의 사진(b)을 도 4와 같이 표시할 수 있다.The terminal 110 may display a plurality of pictures b stored by executing the photo album in response to the selection of the photo album display affordance af1 (for example, a user's touch input) as shown in FIG. 4.

도 5를 참조하면, 단말기(110)는 표시된 복수의 사진(b) 중 어느 하나의 선택(예를 들어, 사용자의 터치 입력)에 응답하여 복수의 사진(b) 중에서 선택된 사진(c)만을 표시할 수 있다.Referring to FIG. 5, the terminal 110 displays only the selected picture c among the plurality of pictures b in response to the selection (eg, a user's touch input) of any one of the displayed pictures b. can do.

또한, 단말기(110)는 제1 3차원 주얼리 이미지를 제1 2차원 주얼리 이미지(d1)로 변환하여 선택된 사진(c)과 함께 표시할 수 있다.In addition, the terminal 110 may convert the first 3D jewelery image into a first 2D jewelery image d1 and display the same with the selected picture c.

단말기(110)는 제1 2차원 주얼리 이미지(d1)의 이동을 위한 입력에 응답하여 제1 2차원 주얼리 이미지(d1)를 이동시켜 선택된 사진(c) 내의 객체 상에 제1 2차원 주얼리 이미지(d1)를 위치시킬 수 있다.The terminal 110 moves the first two-dimensional jewelery image d1 in response to an input for the movement of the first two-dimensional jewelery image d1 to display the first two-dimensional jewelery image on the object in the selected photograph c. d1) can be located.

예를 들어, 사용자는 제1 2차원 주얼리 이미지(d1)에 대한 연속된 터치 이동 입력을 통해 화살표 방향으로 이미지(d1)를 이동시킴으로써 선택된 사진(c) 내의 객체 상에 제1 2차원 주얼리 이미지(d1)를 위치시킬 수 있다.For example, the user may move the first two-dimensional jewelry image (image) on an object in the selected photograph c by moving the image d1 in the direction of the arrow through a continuous touch movement input to the first two-dimensional jewelry image d1. d1) can be located.

또한, 단말기(110)는 제1 2차원 주얼리 이미지(d1)를 변경하기 위한 입력에 응답하여 제2 내지 제N 2차원 주얼리 이미지들을 순서대로 변경하여 표시할 수 있다.In addition, the terminal 110 may change and display the second to N-th two-dimensional jewelry images in order in response to an input for changing the first two-dimensional jewelry image d1.

예를 들어, 사용자는 불연속한 두번의 터치 입력을 통해 제1 2차원 주얼리 이미지를 제2 3차원 주얼리 이미지에 대응하는 제2 2차원 주얼리 이미지로 변경할 수 있다.For example, the user may change the first 2D jewelery image into a second 2D jewelery image corresponding to the second 3D jewelery image through two discontinuous touch inputs.

또한, 사용자가 또 다시 불연속한 두번의 터치 입력을 진행하면 단말기(110)는 제3 3차원 주얼리 이미지에 대응하는 제3 2차원 주얼리 이미지로 변경할 수 있다. 이와 같이 단말기(110)는 도 2에서 복수의 3차원 주얼리 이미지 중에서 사용자 선택한 복수의 3차원 주얼리 이미지에 대한 선택 순서에 따라 2차원 주얼리 이미지를 순서대로 변경할 수 있다.In addition, when the user proceeds with two discontinuous touch inputs again, the terminal 110 may change the image into a third 2D jewelery image corresponding to the third 3D jewelery image. As described above, the terminal 110 may change the 2D jewelry image in order according to the selection order of the plurality of 3D jewelry images selected by the user from among the plurality of 3D jewelry images in FIG. 2.

도 6은 카메라를 통해 촬영되는 객체 상에 3차원 주얼리 이미지가 결합되는 것을 나타낸 예시도이다. 도 7은 제1 영역 및 제2 영역과 손금 검출 영역에 대한 예시도이다. 도 8은 제3 및 제4 영역과 손금 검출 영역에 대한 예시도이고, 도 9는 3차원 주얼리 이미지의 변경 방법에 대한 예시도이다.6 is an exemplary view illustrating that a 3D jewelry image is combined on an object photographed through a camera. 7 is an exemplary view of a first region, a second region, and a palm detection region. 8 is an exemplary view of the third and fourth regions and the palm rest detection region, and FIG. 9 is an exemplary view of a method of changing a 3D jewelry image.

도 2, 도 3과 도 6 내지 도 8을 참조하면, 제1 사용자 인터페이스(121)는 M(M은 2 이상의 자연수)개의 3차원 주얼리 이미지(a)를 표시할 수 있다.2, 3 and 6 to 8, the first user interface 121 may display M three-dimensional jewelry images a (M is a natural number of two or more).

단말기(110)는 M개의 3차원 주얼리 이미지(a) 중 제1 내지 제N(N은 M 이하의 자연수) 3차원 주얼리 이미지의 선택(예를 들어, 도 3과 같이 사용자의 터치)을 수신할 수 있고, 사용자의 입력에 응답하여 단말기(110) 상에 표시된 객체에 제1 내지 제N 3차원 주얼리 이미지(a) 중 어느 하나를 표시할 수 있다.The terminal 110 may receive a selection of the first to Nth (N is a natural number of M or less) three-dimensional jewelry images (for example, a user's touch as shown in FIG. 3) among the M three-dimensional jewelry images a. In response to a user input, any one of the first to N-th three-dimensional jewelry images a may be displayed on the object displayed on the terminal 110.

상세하게는, 단말기(110)는 카메라실행어포던스(af2)의 선택(예를 들어, 사용자의 터치 입력)에 응답하여 카메라(130)를 실행할 수 있다.In detail, the terminal 110 may execute the camera 130 in response to the selection of the camera execution affordance af2 (for example, a user's touch input).

사용자는 도 6에서 예시된 바와 같이 카메라(130)에 자신의 손을 촬영할 수 있고, 단말기(110)는 손의 특정 영역을 검출함으로써 제1 3차원 주얼리 이미지(a1)를 촬영된 영상 내의 객체의 이미지의 일 영역에 결합하여 표시할 수 있다.As illustrated in FIG. 6, the user may photograph his or her hand in the camera 130, and the terminal 110 detects a specific area of the hand to capture the first 3D jewelry image a1 of the object in the captured image. It can be displayed in combination with one region of the image.

보다 상세하게는, 도 7을 참조하면, 단말기(110)는 촬영된 이미지 내의 객체에 대한 이미지 분석을 통해 손등면에서의 손가락의 관절부위의 주름 영역인 제1 영역(R1)을 검출할 수 있다. 단말기(110)는 엄지 손가락을 제외한 4 개의 손가락 각각에 대한 주름 영역인 제1 영역(R1)의 위치 정보를 검출할 수 있다.In more detail, referring to FIG. 7, the terminal 110 may detect a first region R1, which is a wrinkle region of a joint portion of a finger on the back of a hand, through image analysis of an object in a captured image. . The terminal 110 may detect location information of the first region R1, which is a wrinkle region of each of four fingers other than the thumb.

이와 같이 주름 영역의 검출은 기하학적 특정 패턴을 기반으로 등록된 특징 패턴과의 유사도에 기초하여 수행될 수 있고, 베이즈(Bayes) 규칙을 사용하여 특정 패턴을 인식하거나, DTW(Dynamic Time Warping) 알고리즘, HMM(Hidden Markov Model) 알고리즘 등을 사용하여 특정 패턴을 인식할 수 있으며, MAX 규칙(rule), MIN 규칙, SUM 규칙, 가중치(Weighted) SUM 규칙, 신경망 회로(Neural Network), SVM(Support Vector Machine) 등의 방법 등을 이용하여 주름이나 후술하는 손금을 인식할 수 있다.As described above, the detection of the wrinkle area may be performed based on the similarity with the registered feature pattern based on the geometric specific pattern, and recognizes the specific pattern using Bayes rule, or the Dynamic Time Warping (DTW) algorithm. Specific patterns can be recognized using HMM (Hidden Markov Model) algorithm, MAX rule, MIN rule, SUM rule, Weighted SUM rule, Neural Network, SVM (Support Vector) By using a method such as a machine, etc., wrinkles and palm trees to be described later can be recognized.

단말기(110)는 제1 영역(R1) 내의 주름의 형상 정보에 기초하여 제1 영역(R1) 내의 주름을 포함하는 하나의 타원 형상(Ellipse)을 설정하고, 타원의 장축(Long axis)과 장축의 중심점을 검출하고, 검출된 중심점으로부터 장축에 수직한 방향으로 소정의 거리만큼 이격된 영역인 4개의 제2 영역(R2)을 검출할 수 있다. 그리고 4개의 제2 영역(R2) 중 어느 하나의 영역 상에 제1 3차원 주얼리 이미지(a1)를 위치시킬 수 있다. 그리고 제1 3차원 주얼리 이미지(a1)를 위치시킬 때 이미지 변환을 통해 촬영된 객체의 제2 영역(R2) 상에 제1 3차원 주얼리 이미지(a1)가 3차원적으로 결합하도록 할 수 있다.The terminal 110 sets one ellipse shape including the wrinkles in the first region R1 based on the shape information of the wrinkles in the first region R1, and sets the long axis and the long axis of the ellipse. The center points of the can be detected, and four second regions R2 which are regions spaced apart by a predetermined distance from the detected center point in a direction perpendicular to the long axis can be detected. The first 3D jewelery image a1 may be positioned on any one of the four second regions R2. When the first 3D jewelery image a1 is positioned, the first 3D jewelery image a1 may be three-dimensionally coupled to the second region R2 of the photographed object through image transformation.

또한, 단말기(110)는 타원의 장축(Long axis) 또는 단축이 가상의 기준축(XY)에서의 기울기 정도에 매칭하여 제1 3차원 주얼리 이미지(a1)를 회전시켜 객체의 제2 영역(R2) 상에 결합되도록 할 수 있다.In addition, the terminal 110 rotates the first three-dimensional jewelery image a1 by matching a long axis or a short axis of the ellipse with the degree of inclination in the virtual reference axis XY so that the second region R2 of the object is rotated. ) May be coupled to

또한, 단말기(110)는 사용자의 슬라이딩 터치의 입력에 기초하여 제1 3차원 주얼리 이미지(a1)의 위치를 변경시킬 수 있다. In addition, the terminal 110 may change the position of the first 3D jewelery image a1 based on the input of the sliding touch of the user.

예를 들어, 단말기(110)의 상단 우측 방향으로 사용자가 슬라이딩 터치를 입력하면, 단말기(110)는 제1 3차원 주얼리 이미지(a1)가 위치한 영역과 인접한 우측의 제2 영역(R2)으로 이동시킬 수 있고, 단말기(110)의 하단 좌측 방향으로 사용자가 슬라이딩 터치를 입력하면, 단말기(110)는 제1 3차원 주얼리 이미지(a1)가 위치한 영역과 인접한 좌측의 제2 영역(R2)으로 이동시킬 수 있다. 그리고 사용자는 재차 슬라이딩 터치를 입력하면 슬라이딩 터치의 이동 방향에 대응하여 제1 3차원 주얼리 이미지(a1)를 인접한 제2 영역(R2)으로 이동시킬 수 있다. 그리고 이동된 제1 3차원 주얼리 이미지(a1)는 전술한 이동될 제2 영역(R2)내의 주름 정보에 기초하여 회전 각도를 설정함으로써 객체의 제2 영역(R2) 상에서 객체와 3차원 적으로 결합되도록 할 수 있다.For example, when a user inputs a sliding touch in the upper right direction of the terminal 110, the terminal 110 moves to the second region R2 on the right adjacent to the region where the first three-dimensional jewelry image a1 is located. When the user inputs a sliding touch in the lower left direction of the terminal 110, the terminal 110 moves to the second region R2 on the left side adjacent to the region where the first three-dimensional jewelry image a1 is located. You can. When the user inputs the sliding touch again, the user may move the first 3D jewelery image a1 to the adjacent second region R2 in response to the moving direction of the sliding touch. The moved first three-dimensional jewelry image a1 is three-dimensionally coupled with the object on the second region R2 of the object by setting a rotation angle based on the wrinkle information in the second region R2 to be moved. You can do that.

단말기(110)는 4개의 손가락 각각의 제1 영역(R1)들의 중심점을 검출하고, 4개의 중심점으로부터 소정의 길이의 반지름을 가지는 가상의 원을 형성한 후 형성된 4개의 원들 모두를 통과하는 하나의 가상의 곡선(Curve)을 형성할 수 있다.The terminal 110 detects a center point of each of the first regions R1 of the four fingers, forms a virtual circle having a radius of a predetermined length from the four center points, and then passes through all four circles formed. A virtual curve can be formed.

단말기(110)는 가상의 곡선을 원호로 하는 가상의 부채꼴 영역(sector form)을 형성함으로써 손금 검출 영역(DR)을 지정할 수 있다.The terminal 110 may designate the palm detection region DR by forming a virtual sector form having an arc of a virtual curve.

단말기(110)는 지정된 손금 검출 영역(DR) 내에서 손금이 검출되는지 여부를 주기적으로 판별할 수 있다.The terminal 110 may periodically determine whether a palm rest is detected in the designated palm detection region DR.

도 7과 같이 사용자가 자신의 손등을 촬영하고 있는 경우에는, 단말기(110)는 손등에서 손금을 검출할 수 없게 된다. 그러나, 도 8과 같이 사용자가 자신의 손을 뒤집어서 촬영하는 경우, 단말기(110)는 미리 설정된 손금 검출 영역(Dr) 상에서 손금을 검출할 수 있게 된다.When the user is photographing the back of his hand as shown in FIG. 7, the terminal 110 may not detect the palm of the hand. However, as shown in FIG. 8, when the user inverts his hand and photographs the terminal, the terminal 110 may detect the palm rest on the preset palm detection region Dr.

단말기(110)는 손금 검출 영역(DR) 상에서 손금이 검출되면, 손바닥에서의 엄지 손가락을 제외한 4개의 손가락 각각에 대한 관절 부위의 주름 영역인 제3 영역(R3)을 검출할 수 있다.When the palm rest is detected on the palm detection region DR, the terminal 110 may detect the third region R3 which is a wrinkle region of the joint region for each of the four fingers except for the thumb in the palm of the hand.

단말기(110)는 제3 영역(R3) 내의 주름의 형상 정보에 기초하여 제3 영역(R3) 내의 주름을 포함하는 하나의 타원 형상(Ellipse)을 설정하고, 타원의 장축(Long axis)과 장축의 중심점을 검출하고, 검출된 중심점으로부터 장축에 수직한 방향으로 소정의 거리만큼 이격된 영역인 4개의 제4 영역(R4)을 검출할 수 있다. 그리고 4개의 제4 영역(R4) 중 어느 하나의 영역 상에 제1 3차원 주얼리 이미지(a1)를 위치시킬 수 있다. 그리고 제1 3차원 주얼리 이미지(a1)를 위치시킬 때 이미지 변환을 통해 촬영된 객체의 제4 영역(R4) 상에 제1 3차원 주얼리 이미지(a1)가 3차원적으로 결합하도록 할 수 있다.The terminal 110 sets one ellipse shape including the wrinkles in the third region R3 based on the shape information of the wrinkles in the third region R3, and sets the long axis and the long axis of the ellipse. The center points of the 4 th areas R4, which are areas spaced apart by a predetermined distance from the detected center point in a direction perpendicular to the long axis, can be detected. In addition, the first 3D jewelery image a1 may be positioned on any one of the four fourth regions R4. When the first 3D jewelery image a1 is positioned, the first 3D jewelery image a1 may be combined three-dimensionally on the fourth region R4 of the photographed object through image transformation.

또한, 도 7과는 달리 도 8에서는 제1 3차원 주얼리 이미지(a1)를 회전시킴으로써 제1 3차원 주얼리 이미지(a1)의 뒷면이 표시될 수 있도록 한다.In addition, unlike FIG. 7, in FIG. 8, the rear surface of the first 3D jewelery image a1 may be displayed by rotating the first 3D jewelery image a1.

또한, 단말기(110)는 슬라이딩 터치 입력에 응답하여 제1 3차원 주얼리 이미지(a1)를 인접한 제4 영역(R4)으로 이동시켜 표시할 수 있다.In addition, the terminal 110 may move and display the first 3D jewelery image a1 to the adjacent fourth region R4 in response to the sliding touch input.

단말기(110)는 손금 검출 영역(DR) 내에서 손금이 검출된 후에도 계속하여 손금 검출 영역(DR) 내에서 손금이 검출되는지 여부를 모니터링할 수 있다. 그리고 사용자가 도 9에서와 같이 다시 손등이 촬영되도록 손을 뒤집는 경우, 단말기(110)는 손금 검출 영역(DR) 내에서 손금을 검출할 수 없게 된다.The terminal 110 may monitor whether the palm rest is detected in the palm rest detection region DR even after the palm rest is detected in the palm rest detection region DR. In addition, when the user flips the hand so that the back of the hand is photographed as shown in FIG. 9, the terminal 110 may not detect the palm rest in the palm detection region DR.

단말기(110)는 도 8에서와 같이 손금 검출 영역(DR) 상에서 손금이 검출된 후에, 기 설정된 시간 후에 도 9에서와 같이 손금 검출 영역(DR) 내에서 손금이 검출되지 않는 경우에는 제1 3차원 주얼리 이미지를 제2 3차원 주얼리 이미지(b2)로 변경하여 표시할 수 있다.After the palm rest is detected on the palm rest detection region DR as shown in FIG. 8, the terminal 110 detects the palm rest within the palm rest detection region DR as shown in FIG. 9 after a preset time. The 3D jewelery image may be changed into a second 3D jewelery image b2 and displayed.

또한, 단말기(110)는 이전에 촬영된 객체에 제1 3차원 주얼리 이미지가 결합된 도 7에서의 이미지를 축소하여 도 9에서와 같이 단말기(110)의 디스플레이 영역의 일부 영역 상에 표시하고, 현재 촬영되고 있는 객체 상에 제2 3차원 주얼리 이미지(a2)를 결합하여 표시할 수 있다.In addition, the terminal 110 reduces the image in FIG. 7 in which the first 3D jewel image is combined with a previously photographed object, and displays the image on a portion of the display area of the terminal 110 as shown in FIG. The second 3D jewelry image a2 may be combined and displayed on the object currently being photographed.

사용자는 손을 뒤집는 행동을 반복함에 따라 객체 상에 결합되는 3차원 주얼리 이미지를 변경할 수 있다. 그리고 변경되는 이미지는 도 3에서 사용자가 선택한 3차원 주얼리 이미지 중 어느 하나가 된다. 또한, 사용자가 도 3에서 선택한 3차원 주얼리 이미지의 순서에 맞춰 순차적으로 이미지가 변경될 수 있으며, 3차원 주얼리 이미지가 변경될 때마다, 변경 전의 3차원 주얼리 이미지와 객체는 축소된 이미지로 변경되어 디스플레이 영역의 일 영역에 표시된다. 예를 들어, 사용자가 손을 뒤집은 행동을 반복함으로써 현재 촬영되는 객체 상에 제N 3차원 주얼리 이미지가 결합되어 있는 경우, 단말기(110)는 제1 내지 제 N-1 3차원 주얼리 이미지들 각각이 객체에 결합된 상태의 축소 이미지 모두를 표시할 있다.The user can change the three-dimensional jewel image to be combined on the object by repeating the hand flip action. The changed image becomes one of three-dimensional jewelry images selected by the user in FIG. 3. In addition, the image may be sequentially changed in accordance with the order of the three-dimensional jewelry image selected by the user in FIG. 3, and each time the three-dimensional jewelry image is changed, the three-dimensional jewelry image and the object before the change are changed to a reduced image. It is displayed in one area of the display area. For example, when the N-th 3D jewelery image is coupled to the object currently being photographed by repeating the user's inverted hand, the terminal 110 may determine that each of the first to N-th three-dimensional jewelery images is selected. You can display all of the thumbnails that are attached to the object.

또한, 단말기는 축소 이미지들 중 어느 하나의 선택(예를 들어, 사용자의 터치 입력)에 응답하여 선택된 축소 이미지를 확대하여 표시할 수 있다.In addition, the terminal may enlarge and display the selected reduced image in response to the selection (eg, a user's touch input) of any one of the reduced images.

도 10은 주얼리 가상 착용 방법을 구현하기 위한 시스템을 구성하는 단말기(110), 3차원 이미지 모델링 서버(150) 및 쇼핑몰 서버(140) 각각을 의미하는 컴퓨터 시스템(810)에 대한 예시적인 블록도이다. 프로세서(Processor(s))는 ASIC 또는 RISC 프로세서 일 수 있다. FPGA 또는 기타 로직 또는 게이트 어레이 일 수 있다. 그래픽 처리 장치(GPU) 리소스를 포함 할 수 있다. 컴퓨터 시스템(810)은 전형적으로 버스 서브 시스템(850)을 통해 다수의 주변 장치와 통신하는 적어도 하나의 프로세서(872)를 포함한다. 이들 주변 장치는, 예를 들어, 메모리 장치 및 파일 저장 서브 시스템을 포함하는 저장 서브 시스템(826), 사용자 인터페이스 입력 장치(838), 사용자 인터페이스 출력 장치(878) 및 네트워크 인터페이스 서브 시스템(876)을 포함한다. 입력 및 출력 장치는 사용자가 컴퓨터 시스템(810)과 상호 작용할 수 있게 한다. 네트워크 인터페이스 서브 시스템(876)은 다른 컴퓨터 시스템의 대응 인터페이스 장치에 대한 인터페이스를 포함하여 외부 네트워크에 인터페이스를 제공한다.FIG. 10 is an exemplary block diagram of a computer system 810 representing a terminal 110, a 3D image modeling server 150, and a shopping mall server 140, which respectively constitute a system for implementing a jewelry virtual wearing method. . Processor (s) may be an ASIC or RISC processor. It may be an FPGA or other logic or gate array. It may include graphics processing unit (GPU) resources. Computer system 810 typically includes at least one processor 872 that communicates with a number of peripheral devices through a bus subsystem 850. These peripheral devices include, for example, storage subsystem 826, user interface input device 838, user interface output device 878, and network interface subsystem 876, including memory devices and file storage subsystems. Include. Input and output devices allow the user to interact with the computer system 810. Network interface subsystem 876 provides an interface to an external network, including an interface to a corresponding interface device of another computer system.

사용자 인터페이스 입력 장치들(838)은 키보드를 포함 할 수 있으며 마우스, 트랙볼, 터치 패드 또는 그래픽 태블릿과 같은 포인팅 장치, 스캐너, 상기 디스플레이에 통합 된 터치 스크린, 음성 인식 시스템 및 마이크로폰과 같은 오디오 입력 장치 및 다른 유형의 입력 장치를 포함 할 수 있다. 일반적으로, 용어 "입력 장치"의 사용은 가능한 유형의 장치 및 정보를 컴퓨터 시스템(810)에 입력하는 방법을 포함하도록 의도된다.The user interface input devices 838 can include a keyboard, pointing devices such as a mouse, trackball, touch pad or graphics tablet, scanners, touch screens integrated into the display, audio input devices such as voice recognition systems and microphones, and Other types of input devices may be included. In general, use of the term “input device” is intended to include methods of inputting possible types of devices and information to computer system 810.

사용자 인터페이스 출력 장치(878)는 디스플레이 서브 시스템, 프린터, 팩스 장치, 또는 오디오 출력 장치와 같은 비 시각적 디스플레이를 포함 할 수 있다. 디스플레이 서브 시스템은 음극선 관(CRT), 액정 디스플레이 (LCD)와 같은 평판 장치, 프로젝션 장치, 또는 가시적 이미지를 생성하기 위한 다른 메커니즘을 포함 할 수 있다. 디스플레이 서브 시스템은 또한 오디오 출력 장치와 같은 비 시각적 디스플레이를 제공 할 수도 있다. 일반적으로, "출력 장치"라는 용어의 사용은 가능한 유형의 장치 및 컴퓨터 시스템(810)으로부터 사용자 또는 다른 기계 또는 컴퓨터 시스템으로 정보를 출력하는 방법을 포함하도록 의도된다.The user interface output device 878 can include a non-visual display such as a display subsystem, printer, fax device, or audio output device. The display subsystem may include a cathode ray tube (CRT), a flat panel device such as a liquid crystal display (LCD), a projection device, or other mechanism for generating a visible image. The display subsystem may also provide a non-visual display such as an audio output device. In general, use of the term “output device” is intended to include methods of outputting information from possible types of devices and computer systems 810 to a user or other machine or computer system.

저장 서브 시스템(824)은 여기에 설명 된 모듈 및 방법의 일부 또는 전부의 기능을 제공하는 프로그래밍 및 데이터 구성을 저장한다. 이들 소프트웨어 모듈은 일반적으로 프로세서(872) 단독으로 또는 다른 프로세서와 함께 실행된다.Storage subsystem 824 stores programming and data configurations that provide the functionality of some or all of the modules and methods described herein. These software modules generally run on processor 872 alone or in conjunction with other processors.

저장 서브 시스템에 사용되는 메모리(822)는 프로그램 실행 동안 명령 및 데이터의 저장을 위한 주 랜덤 액세스 메모리(RAM)(834) 및 고정된 명령이 저장되는 판독 전용 메모리(ROM)(832)를 포함하는 다수의 메모리를 포함 할 수 있다. 파일 저장 서브 시스템(836)은 프로그램 및 데이터 파일을 위한 영구 저장 장치를 제공 할 수 있으며, 하드 디스크 드라이브, 관련 이동식 매체와 함께 플로피 디스크 드라이브, CD-ROM 드라이브, 광 드라이브 또는 이동식 매체 카트리지를 포함할 수 있다. 특정 구현의 기능을 구현하는 모듈은 스토리지 서브 시스템(826) 의 파일 스토리지 서브 시스템(336)에 의해 저장될 수 있다, 또는 프로세서가 액세스 할 수 있는 다른 컴퓨터에 설치해야 한다.Memory 822 used in the storage subsystem includes main random access memory (RAM) 834 for storage of instructions and data during program execution and read-only memory (ROM) 832 in which fixed instructions are stored. It can include multiple memories. File storage subsystem 836 may provide persistent storage for program and data files and may include a floppy disk drive, CD-ROM drive, optical drive, or removable media cartridge along with a hard disk drive and associated removable media. Can be. Modules that implement the functionality of a particular implementation may be stored by the file storage subsystem 336 of the storage subsystem 826, or must be installed on another computer that the processor can access.

버스 서브 시스템(850)은 컴퓨터 시스템(810)의 다양한 컴포넌트들 및 서브 시스템들이 의도된 바와 같이 서로 통신 하게하는 메커니즘을 제공한다. 버스 서브 시스템(850)은 단일 버스로서 개략적으로 도시되어 있지만, 버스 서브 시스템의 다른 구현 예는 다수의 버스를 사용할 수 있다.Bus subsystem 850 provides a mechanism for various components and subsystems of computer system 810 to communicate with each other as intended. Although bus subsystem 850 is schematically depicted as a single bus, other implementations of the bus subsystem may use multiple buses.

컴퓨터 시스템(810)은 워크 스테이션, 서버, 컴퓨팅 클러스터, 블레이드 서버, 서버 팜 또는 임의의 다른 데이터 처리 시스템 또는 컴퓨팅 장치를 포함하는 다양한 유형일 수 있다. 컴퓨터 및 네트워크의 끊임없이 변화하는 특성으로 인해, 도시된 컴퓨터 시스템(810) 의 설명은 하나의 예로서만 의도된다. 컴퓨터 시스템(810)의 많은 다른 구성이 도시된 컴퓨터 시스템 보다 더 많거나 적은 구성 요소를 가질 수 있다.Computer system 810 may be of various types, including workstations, servers, computing clusters, blade servers, server farms, or any other data processing system or computing device. Due to the constantly changing nature of computers and networks, the description of the illustrated computer system 810 is intended as an example only. Many other configurations of computer system 810 may have more or fewer components than the computer system shown.

이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.Embodiments according to the present invention described above can be implemented in the form of program instructions that can be executed by various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the computer readable recording medium may be specially designed and configured for the present invention, or may be known and available to those skilled in the computer software field. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROMs and DVDs, and magneto-optical media such as floptical disks. medium) and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. Hardware devices may be modified with one or more software modules to perform the processing according to the present invention, and vice versa.

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.Particular implementations described in the present invention are embodiments and do not limit the scope of the present invention in any way. For brevity of description, descriptions of conventional electronic configurations, control systems, software, and other functional aspects of the systems may be omitted. In addition, the connection or connection members of the lines between the components shown in the drawings by way of example shows a functional connection and / or physical or circuit connections, in the actual device replaceable or additional various functional connections, physical It may be represented as a connection, or circuit connections. In addition, unless specifically mentioned, such as "essential", "important" may not be a necessary component for the application of the present invention.

또한 설명한 본 발명의 상세한 설명에서는 본 발명의 바람직한 실시 예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자 또는 해당 기술분야에 통상의 지식을 갖는 자라면 후술할 특허청구범위에 기재된 본 발명의 사상 및 기술 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다. 따라서, 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허청구범위에 의해 정하여져야만 할 것이다.In addition, although the detailed description of the present invention has been described with reference to a preferred embodiment of the present invention, those skilled in the art or those skilled in the art having ordinary knowledge in the technical field described in the claims to be described later It will be understood that various modifications and variations can be made in the present invention without departing from the scope of the present invention. Therefore, the technical scope of the present invention should not be limited to the contents described in the detailed description of the specification but should be defined by the claims.

Claims (13)

단말기를 이용한 주얼리 가상착용 방법에 있어서,
M(M은 2 이상의 자연수)개의 3차원 주얼리 이미지를 표시하는 단계;
상기 M개의 3차원 주얼리 이미지 중 제1 내지 제N(N은 M 이하의 자연수) 3차원 주얼리 이미지의 선택을 수신하는 단계; 및
사용자의 입력에 응답하여 단말기 상에 표시된 객체에 상기 제1 내지 제N 3차원 주얼리 이미지에 대한 제1 내지 제N 2차원 주얼리 이미지 중 어느 하나를 표시하는 단계;를 표시하는
단말기를 이용한 주얼리 가상착용 방법.
In the jewelry virtual wearing method using a terminal,
Displaying M (M is two or more natural numbers) three-dimensional jewelry images;
Receiving a selection of first to N th (N is a natural number of M or less) three dimensional jewel images among the M three dimensional jewel images; And
Displaying one of the first to N-th two-dimensional jewelery images for the first to N-th three-dimensional jewelery images on an object displayed on the terminal in response to a user input;
Jewelry virtual wearing method using a terminal.
제1 항에 있어서,
상기 객체와 2차원 주얼리 이미지를 표시하는 단계는,
상기 단말기에 저장된 복수의 사진의 표시를 실행하기 위한 사진첩표시어포던스의 선택에 응답하여 상기 복수의 사진을 표시하는 단계;
상기 복수의 사진 중 어느 하나의 선택에 응답하여 선택된 사진만을 표시하는 단계;
상기 제1 내지 제N 3차원 주얼리 이미지를 상기 제1 내지 제N 2차원 주얼리 이미지로 변환하는 단계;
상기 제1 2차원 주얼리 이미지와 상기 선택된 사진을 표시하는 단계;
상기 제1 2차원 주얼리 이미지의 이동을 위한 입력에 응답하여 상기 제1 2차원 주얼리 이미지를 이동시켜 상기 선택된 사진 상의 상기 객체에 상기 제1 2차원 주얼리 이미지를 표시하는 단계; 및
상기 제1 2차원 주얼리 이미지를 변경하기 위한 입력에 응답하여 상기 제2 내지 제N 2차원 이미지들을 순서대로 변경하여 표시하는 단계;를 포함하는
단말기를 이용한 주얼리 가상착용 방법.
According to claim 1,
Displaying the object and the two-dimensional jewelry image,
Displaying the plurality of photos in response to selection of a photo album display affordance for executing display of the plurality of photos stored in the terminal;
Displaying only the selected picture in response to the selection of any one of the plurality of pictures;
Converting the first to N-th three-dimensional jewelery images into the first to N-th two-dimensional jewelery images;
Displaying the first two-dimensional jewelry image and the selected photo;
Moving the first 2D jewelery image in response to an input for moving the first 2D jewelery image to display the first 2D jewelery image on the object on the selected photograph; And
And changing and displaying the second to N-th two-dimensional images in order in response to an input for changing the first two-dimensional jewelery image.
Jewelry virtual wearing method using a terminal.
제2 항에 있어서,
상기 제1 2차원 주얼리 이미지의 이동을 위한 입력에 응답하여 상기 제1 2차원 주얼리 이미지를 이동시켜 상기 선택된 사진 상의 상기 객체에 상기 제1 2차원 주얼리 이미지를 표시하는 단계는,
표시된 상기 제1 2차원 주얼리 이미지에 대한 사용자의 연속된 터치 이동 입력에 응답하여 상기 제1 2차원 주얼리 이미지를 이동시켜 상기 객체에 상기 제1 2차원 주얼리 이미지를 표시하는 단계인
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 2,
Moving the first 2D jewelery image in response to an input for moving the first 2D jewelery image to display the first 2D jewelery image on the object on the selected photograph,
Displaying the first 2D jewel image on the object by moving the first 2D jewelery image in response to a user's continuous touch movement input to the displayed first 2D jewelery image
Jewelry virtual wearing method using a terminal.
제2 항에 있어서,
상기 제1 2차원 주얼리 이미지를 변경하기 위한 입력에 응답하여 상기 제2 내지 제N 2차원 주얼리 이미지들을 순서대로 변경하여 표시하는 단계는,
상기 객체 상에 표시된 상기 제1 2차원 주얼리 이미지에 대한 기 설정시간 동안의 사용자의 불연속된 복수의 터치 입력에 응답하여 상기 제2 내지 제N 2차원 주얼리 이미지들을 순서대로 변경하여 표시하는 단계인
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 2,
In response to an input for changing the first 2D jewelery image, changing and displaying the second to Nth 2D jewelery images in order may include:
In response to a plurality of discontinuous touch inputs of a user during a preset time for the first 2D jewelery image displayed on the object, changing and displaying the second to Nth 2D jewelery images in order;
Jewelry virtual wearing method using a terminal.
단말기를 이용한 주얼리 가상착용 방법에 있어서,
M(M은 2 이상의 자연수)개의 3차원 주얼리 이미지를 표시하는 단계;
상기 M개의 3차원 주얼리 이미지 중 제1 내지 제N(N은 M 이하의 자연수) 3차원 주얼리 이미지의 선택을 수신하는 단계; 및
사용자의 입력에 응답하여 단말기 상에 표시된 객체에 상기 제1 내지 제N 3차원 주얼리 이미지 중 어느 하나를 표시하는 단계;를 표시하는
단말기를 이용한 주얼리 가상착용 방법.
In the jewelry virtual wearing method using a terminal,
Displaying M (M is two or more natural numbers) three-dimensional jewelry images;
Receiving a selection of first to N th (N is a natural number of M or less) three dimensional jewel images among the M three dimensional jewel images; And
Displaying one of the first to N-th three-dimensional jewelry images on an object displayed on the terminal in response to a user input;
Jewelry virtual wearing method using a terminal.
제5 항에 있어서,
상기 객체와 3차원 주얼리 이미지를 표시하는 단계는,
카메라 실행을 위한 카메라실행어포던스의 선택에 응답하여 카메라를 실행하는 단계; 및
상기 카메라에서 촬영된 영상 내의 상기 객체 상에 상기 제1 내지 제N 3차원 주얼리 이미지 중 어느 하나를 표시하는 단계;를 포함하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 5,
Displaying the object and the three-dimensional jewelry image,
Executing the camera in response to selecting the camera execution affordance for the camera execution; And
Displaying one of the first to N-th three-dimensional jewelry images on the object in the image photographed by the camera;
Jewelry virtual wearing method using a terminal.
제5 항에 있어서,
상기 객체와 3차원 주얼리 이미지를 표시하는 단계는,
카메라 실행을 위한 카메라실행어포던스의 선택에 응답하여 카메라를 실행하는 단계;
상기 카메라에서 촬영된 영상 내의 상기 객체의 제1 영역의 위치 정보를 검출하는 단계; 및
상기 제1 영역의 위치 정보에 기초하여 상에 상기 제1 3차원 주얼리 이미지를 상기 제1 영역과 다른 상기 객체의 제2 영역에 표시하는 단계;를 포함하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 5,
Displaying the object and the three-dimensional jewelry image,
Executing the camera in response to selecting the camera execution affordance for the camera execution;
Detecting location information of a first area of the object in an image captured by the camera; And
Displaying the first three-dimensional jewelery image on the second area of the object different from the first area based on the location information of the first area;
Jewelry virtual wearing method using a terminal.
제7 항에 있어서,
상기 제1 영역 내의 주름 정보에 기초하여 상기 제1 3차원 주얼리 이미지의 위치를 변경하여 상기 제2 영역에 표시하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 7, wherein
Changing the position of the first three-dimensional jewelry image based on the wrinkle information in the first region and displaying the first three-dimensional jewelry image in the second region
Jewelry virtual wearing method using a terminal.
제7 항에 있어서,
상기 객체와 3차원 주얼리 이미지를 표시하는 단계는,
상기 제1 영역의 위치 정보에 기초하여 상기 객체의 손금 검출 영역을 지정하는 단계;
상기 손금 검출 영역 내에서 손금의 검출 여부를 판단하는 단계;
상기 손금이 검출되면 상기 제1 3차원 주얼리 이미지를 회전시키고 상기 객체의 제3 영역의 위치 정보를 검출하는 단계; 및
상기 제3 영역의 위치 정보에 기초하여 상에 상기 제1 3차원 주얼리 이미지를 상기 제3 영역과 다른 상기 객체의 제4 영역에 표시하는 단계;를 더 포함하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 7, wherein
Displaying the object and the three-dimensional jewelry image,
Designating a palm detection region of the object based on location information of the first region;
Determining whether a palm rest is detected in the palm rest detection area;
Rotating the first three-dimensional jewelery image and detecting position information of a third region of the object when the palm rest is detected; And
Displaying the first three-dimensional jewelery image on the fourth region of the object different from the third region on the basis of the position information of the third region;
Jewelry virtual wearing method using a terminal.
제9 항에 있어서,
상기 객체와 3차원 주얼리 이미지를 표시하는 단계는,
상기 손금이 검출된 시점부터 기 설정 시간 후에 상기 손금 검출 영역 내에서 손금의 검출 여부를 다시 판단하는 단계; 및
상기 손금이 검출되지 않으면 상기 제1 3차원 주얼리 이미지를 상기 제2 3차원 주얼리 이미지로 변경하여 표시하는 단계;를 더 포함하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 9,
Displaying the object and the three-dimensional jewelry image,
Determining whether the palm rest is detected in the palm rest detection region after a preset time from when the palm rest is detected; And
Changing the first three-dimensional jewelery image to the second three-dimensional jewelery image if the palm rest is not detected;
Jewelry virtual wearing method using a terminal.
제10 항에 있어서,
상기 제1 3차원 주얼리 이미지와 상기 객체에 대한 촬영 이미지를 축소하여 더 표시하는 단계;를 더 포함하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 10,
And further reducing and displaying the first 3D jewelry image and the captured image of the object.
Jewelry virtual wearing method using a terminal.
제10 항에 있어서,
상기 손금 검출 영역 내에서 상기 손금이 검출된 후 상기 기 설정 시간 후에 상기 손금 검출 영역 내에서 손금이 검출되지 않을 때 마다 상기 제1 내지 제N 3차원 주얼리 이미지를 순서대로 변경하여 표시하는
단말기를 이용한 주얼리 가상착용 방법.
The method of claim 10,
The first to N th three-dimensional jewelery images are changed and displayed in order every time the palm rest is not detected in the palm rest detection region after the preset time after the palm rest is detected in the palm rest detection region.
Jewelry virtual wearing method using a terminal.
제1 내지 제12 항중 어느 하나의 항에 따른 단계를 수행하기 위한 명령어들을 저장하는 비일시적 컴퓨터 판독가능 매체.A non-transitory computer readable medium storing instructions for performing a step according to any of the preceding claims.
KR1020180069985A 2018-06-19 2018-06-19 Virtual wear method and system of jewelry KR102140555B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180069985A KR102140555B1 (en) 2018-06-19 2018-06-19 Virtual wear method and system of jewelry

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180069985A KR102140555B1 (en) 2018-06-19 2018-06-19 Virtual wear method and system of jewelry

Publications (2)

Publication Number Publication Date
KR20190142824A true KR20190142824A (en) 2019-12-30
KR102140555B1 KR102140555B1 (en) 2020-08-03

Family

ID=69102947

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180069985A KR102140555B1 (en) 2018-06-19 2018-06-19 Virtual wear method and system of jewelry

Country Status (1)

Country Link
KR (1) KR102140555B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116880948A (en) * 2023-09-07 2023-10-13 深圳星坊科技有限公司 Jewelry virtual try-on display method, jewelry virtual try-on display device, computer equipment and storage medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020004754A (en) * 2000-07-07 2002-01-16 이창환 Method for the On-Line Service Providing the Design of Products and the Fitting Test by Users
KR20040022499A (en) * 2002-09-09 2004-03-16 정영세 System for displaying a plurality of products automatically and sequentially
KR20100050052A (en) * 2008-11-05 2010-05-13 김영준 Virtual glasses wearing method
KR20110002610A (en) 2009-07-02 2011-01-10 삼성에스디에스 주식회사 Apparatus and method for displaying shape of wearing jewelry using augmented reality
KR20150061058A (en) * 2013-11-25 2015-06-04 오정훈 Method for providing of jewellery wearing simulation

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020004754A (en) * 2000-07-07 2002-01-16 이창환 Method for the On-Line Service Providing the Design of Products and the Fitting Test by Users
KR20040022499A (en) * 2002-09-09 2004-03-16 정영세 System for displaying a plurality of products automatically and sequentially
KR20100050052A (en) * 2008-11-05 2010-05-13 김영준 Virtual glasses wearing method
KR20110002610A (en) 2009-07-02 2011-01-10 삼성에스디에스 주식회사 Apparatus and method for displaying shape of wearing jewelry using augmented reality
KR20150061058A (en) * 2013-11-25 2015-06-04 오정훈 Method for providing of jewellery wearing simulation

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116880948A (en) * 2023-09-07 2023-10-13 深圳星坊科技有限公司 Jewelry virtual try-on display method, jewelry virtual try-on display device, computer equipment and storage medium

Also Published As

Publication number Publication date
KR102140555B1 (en) 2020-08-03

Similar Documents

Publication Publication Date Title
US20230305675A1 (en) Three-dimensional interaction system
US20220300731A1 (en) Activating hands-free mode on mirroring device
US20220300730A1 (en) Menu hierarchy navigation on electronic mirroring devices
US10657716B2 (en) Collaborative augmented reality system
CN112243583B (en) Multi-endpoint mixed reality conference
US9424239B2 (en) Managing shared state information produced by applications
CN105612478B (en) The scaling of user interface program
US10769718B1 (en) Method, medium, and system for live preview via machine learning models
US11978283B2 (en) Mirroring device with a hands-free mode
JP6782846B2 (en) Collaborative manipulation of objects in virtual reality
US11809633B2 (en) Mirroring device with pointing based navigation
US9355268B2 (en) Managing access by applications to perceptual information
US20210192189A1 (en) Method and system for verifying users
US9646131B2 (en) Intelligent image processing for enterprise applications
EP4165599A2 (en) 3d reconstruction using wide-angle imaging devices
US20170212906A1 (en) Interacting with user interfacr elements representing files
US20220197485A1 (en) 3d painting on an eyewear device
EP4268057A1 (en) Gesture control on an eyewear device
US11961195B2 (en) Method and device for sketch-based placement of virtual objects
US9990044B2 (en) Gaze tracking system
CN115552366A (en) Touch pad on back portion of device
FR3025917A1 (en) DEVICE AND METHOD FOR ORCHESTRATION OF DISPLAY SURFACES, PROJECTION DEVICES AND SPATIALIZED 2D AND 3D INTERACTION DEVICES FOR THE CREATION OF INTERACTIVE ENVIRONMENTS
KR102140555B1 (en) Virtual wear method and system of jewelry
KR20170006219A (en) Method for three dimensions modeling service and Apparatus therefor
WO2020226956A1 (en) Device, method, and graphical user interface for generating cgr objects

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant