KR20210064442A - Apparatus for providing image of nail design - Google Patents

Apparatus for providing image of nail design Download PDF

Info

Publication number
KR20210064442A
KR20210064442A KR1020190151808A KR20190151808A KR20210064442A KR 20210064442 A KR20210064442 A KR 20210064442A KR 1020190151808 A KR1020190151808 A KR 1020190151808A KR 20190151808 A KR20190151808 A KR 20190151808A KR 20210064442 A KR20210064442 A KR 20210064442A
Authority
KR
South Korea
Prior art keywords
image
nail
partial region
thumbnail
toenail
Prior art date
Application number
KR1020190151808A
Other languages
Korean (ko)
Inventor
박준희
박준호
Original Assignee
박준희
경운대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 박준희, 경운대학교 산학협력단 filed Critical 박준희
Priority to KR1020190151808A priority Critical patent/KR20210064442A/en
Publication of KR20210064442A publication Critical patent/KR20210064442A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0621—Item configuration or customization
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/187—Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning

Abstract

The present invention relates to a nail design image providing device. The nail design image providing device according to one aspect of the present invention comprises: an image acquisition unit for acquiring an image; a labeling image generation unit for performing labeling to distinguish a nail partial region or toenail partial region of each image from other regions of the hand or foot and generating a plurality of labeling images by performing the labeling in a plurality of images by photographing the hand or foot of the human body including a nail part or toenail part; a partial region image acquisition module for learning the labeling images according to a preset image learning model capable of real-time object detection, extracting the nail partial region or toenail partial region from the image acquired by the image acquisition unit based on learning, and acquiring a partial region image; a thumbnail image generation unit for generating and storing a thumbnail image by enlarging or reducing the partial region image to fit a preset pixel size; and a thumbnail selection interface unit for displaying a plurality of thumbnail images generated or stored by the thumbnail image generation unit and selecting at least one of the thumbnail images by a user's input. Accordingly, the effect of providing nail marketing tailored to the user's preference can be expected.

Description

네일 디자인 이미지 제공 장치{APPARATUS FOR PROVIDING IMAGE OF NAIL DESIGN}Device for providing nail design image {APPARATUS FOR PROVIDING IMAGE OF NAIL DESIGN}

본 발명은 네일 디자인 이미지 제공 장치에 관한 것으로서, 더욱 상세하게는, 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 이미지로부터 네일 디자인을 수집하여 제공할 수 있는 네일 디자인 이미지 제공 장치에 관한 것이다.The present invention relates to an apparatus for providing a nail design image, and more particularly, to an apparatus for providing a nail design image that can collect and provide nail designs from images obtained by photographing a human hand or foot including a nail part or a toenail part. it's about

2000년대 후반부터 일상적으로 손톱을 관리하는 여성이 늘어나면서, 국내 셀프네일 시장 규모가 성장하고 있다. 특히, 최근 간편하게 붙이고 뗄 수 있는 네일 스티커, 네일팁 등이 인기를 끌고있다.Since the late 2000s, as more and more women take care of their nails on a daily basis, the size of the domestic self-nail market is growing. In particular, recently, nail stickers and nail tips that can be easily attached and removed are gaining popularity.

하지만 기존의 네일스티커, 네일팁의 경우, 디자인 선택이 한정적이므로, 다양한 사용자의 기호를 만족시키기에 어려움이 있었다.However, in the case of the existing nail stickers and nail tips, design choices are limited, so it was difficult to satisfy the preferences of various users.

대한민국 등록특허번호 제10-1844347호Republic of Korea Patent No. 10-1844347 대한민국 공개특허번호 제10-2004-0033235호Republic of Korea Patent Publication No. 10-2004-0033235

본 발명의 목적은, 손 또는 발을 촬영한 이미지에 학습모델을 이용해 추출한 네일 이미지를 사용자의 선택에 따라 적용시킬 수 있는 네일 디자인 이미지 제공 장치를 제공하는데 있다.An object of the present invention is to provide a nail design image providing apparatus capable of applying a nail image extracted using a learning model to an image of a hand or foot according to a user's selection.

본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.Objects of the present invention are not limited to the objects mentioned above, and other objects not mentioned will be clearly understood from the description below.

전술한 목적을 달성하기 위한, 본 발명의 일면에 따른 네일 디자인 이미지 제공 장치는, 이미지를 획득하는 이미지 획득부와, 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 복수개의 이미지들에 있어서, 각각의 이미지의 손톱 부분 영역 또는 발톱 부분 영역을 인체의 손 또는 발의 다른 영역과 구분하기 위하여 라벨링을 수행하고, 라벨링 수행에 따라 복수개의 라벨링 이미지들을 생성하는 라벨링 이미지 생성부와, 복수개의 라벨링 이미지들을 실시간 객체 검출이 가능한 기설정된 영상 학습 모델에 따라 학습하고 학습에 기초하여 이미지 획득부에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고, 부분 영역 이미지를 획득하는 부분 영역 이미지 획득 모듈와, 부분 영역 이미지를 기설정된 픽셀 사이즈에 맞도록 확대하거나 축소하여 썸네일 이미지를 생성하여 저장하는 썸네일 이미지 생성부와, 썸네일 이미지 생성부에서 생성되거나 저장된 복수개의 썸네일 이미지들을 표시하되 사용자의 입력에 따라 복수개의 썸네일 이미지들 중 적어도 하나를 선택받는 썸네일 선택 인터페이스부를 포함한다.In order to achieve the above object, an apparatus for providing a nail design image according to an aspect of the present invention includes an image acquisition unit for acquiring an image, and a plurality of images obtained by photographing a human hand or foot including a nail part or a toenail part In the following, a labeling image generating unit that performs labeling to distinguish a nail partial region or a toenail partial region of each image from other regions of a human hand or foot, and generates a plurality of labeling images according to the labeling performance; A partial region image that learns labeling images according to a preset image learning model capable of real-time object detection, extracts a nail partial region or a toenail partial region from an image acquired by the image acquisition unit based on the learning, and obtains a partial region image An acquisition module, a thumbnail image generator that generates and stores a thumbnail image by enlarging or reducing the partial region image to fit a preset pixel size, and a plurality of thumbnail images generated or stored in the thumbnail image generator are displayed, but the and a thumbnail selection interface for selecting at least one of the plurality of thumbnail images accordingly.

본 발명에 따르면, 손 또는 발을 촬영한 이미지에 학습모델을 이용해 추출한 네일 이미지를 사용자의 선택에 따라 적용시킬 수 있는 네일 디자인 이미지 제공 장치를 제공하는 효과가 있다.According to the present invention, there is an effect of providing a nail design image providing apparatus capable of applying a nail image extracted using a learning model to an image of a hand or foot according to a user's selection.

또한, 사용자의 선택에 기초하여 네일 디자인에 대한 호감도를 분석하여, 사용자의 기호에 맞춘 네일 마케팅을 제공하는 효과를 기대할 수 있다.In addition, it is possible to expect the effect of providing nail marketing tailored to the user's preference by analyzing the favorable sensitivity to the nail design based on the user's selection.

사용자가 가상으로 네일 디자인을 손 또는 발에 적용하고, 원하는 디자인을 주문하거나 시술을 요청하여 소비자의 능동적인 이용이 가능하다는 장점이 있다.There is an advantage that the user can apply the nail design to the hand or foot virtually, order the desired design or request the treatment, so that the consumer can actively use it.

도 1은 본 발명의 일 실시예에 따른 네일 디자인 이미지 제공 장치의 내부 블록도이다.
도 2는 본 발명의 일실시 예에 따른 썸네일 선택 인터페이스부를 통해 출력되는 화면을 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 네일 디자인 이미지 제공 장치의 순서도이다.1 is an internal block diagram of an apparatus for providing a nail design image according to an embodiment of the present invention.
2 is a diagram illustrating a screen output through a thumbnail selection interface unit according to an embodiment of the present invention.
3 is a flowchart of an apparatus for providing a nail design image according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며, 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 한다.Advantages and features of the present invention and methods of achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but will be implemented in a variety of different forms, only these embodiments allow the disclosure of the present invention to be complete, and those of ordinary skill in the art to which the present invention pertains. It is provided to fully inform the person of the scope of the invention. On the other hand, the terms used in the present specification are for describing the embodiments, and are not intended to limit the present invention. As used herein, the singular also includes the plural unless specifically stated otherwise in the phrase. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 네일 디자인 이미지 제공 장치의 내부 블록도이다.1 is an internal block diagram of an apparatus for providing a nail design image according to an embodiment of the present invention.

이하, 도 1을 참조하면, 본 발명의 일 실시예에 따른 네일 디자인 이미지 제공 장치(1)는 이미지 획득부(10), 라벨링 이미지 생성부(20), 부분 영역 이미지 획득 모듈(30), 썸네일 이미지 생성부(40), 썸네일 선택 인터페이스부(50), 카메라(60), 촬영 이미지 표시부(70), 가이딩 표시부(80), 네일 디자인 표시부(90)를 포함하여 구성될 수 있다.Hereinafter, referring to FIG. 1 , an apparatus 1 for providing a nail design image according to an embodiment of the present invention includes an image acquisition unit 10 , a labeling image generation unit 20 , a partial region image acquisition module 30 , and a thumbnail The image generating unit 40 , the thumbnail selection interface unit 50 , the camera 60 , the photographed image display unit 70 , the guiding display unit 80 , and the nail design display unit 90 may be included.

이미지 획득부(10)는 이미지를 획득할 수 있다.The image acquisition unit 10 may acquire an image.

이미지 획득부(10)는 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 이미지를 획득할 수 있다.The image acquisition unit 10 may acquire an image obtained by photographing a human hand or foot including a nail part or a toenail part.

이미지 획득부(10)는 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 이미지의 파일 데이터를 외부 서버로부터 획득할 수 있다.The image acquisition unit 10 may acquire file data of an image obtained by photographing a human hand or foot including a nail part or a toenail part from an external server.

라벨링 이미지 생성부(20)는 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 복수개의 이미지들에 있어서, 각각의 이미지의 손톱 부분 영역 또는 발톱 부분 영역을 인체의 손 또는 발의 다른 영역과 구분하기 위하여 라벨링을 수행할 수 있다.In the plurality of images obtained by photographing the hand or foot of the human body including the nail part or the toenail part, the labeling image generating unit 20 sets the nail part region or the toenail part region of each image to another region of the human body hand or foot. Labeling can be performed to distinguish them from

라벨링 이미지 생성부(20)는 라벨링 수행에 따라 복수개의 라벨링 이미지들을 생성할 수 있다.The labeling image generator 20 may generate a plurality of labeling images according to labeling.

부분 영역 이미지 획득 모듈(30)은 복수개의 라벨링 이미지들을 실시간 객체 검출이 가능한 기설정된 영상 학습 모델에 따라 학습할 수 있다.The partial region image acquisition module 30 may learn a plurality of labeling images according to a preset image learning model capable of real-time object detection.

부분 영역 이미지 획득 모듈(30)은 영상 학습 모델의 학습에 기초하여 이미지 획득부(10)에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고, 부분 영역 이미지를 획득할 수 있다.The partial region image acquisition module 30 may extract a nail partial region or a toenail partial region from the image acquired by the image acquisition unit 10 based on learning of the image learning model, and obtain a partial region image.

부분 영역 이미지 획득 모듈(30)은 영상 학습 모델의 학습에 기초하여 이미지 획득부(10)에서 획득된 이미지에서, 손톱 부분 영역 또는 발톱 부분 영역을 추출하고, 추출된 손톱 부분 영역 또는 발톱 부분 영역에 기초한 부분 영역 이미지를 획득할 수 있다.The partial region image acquisition module 30 extracts a nail partial region or a toenail partial region from the image acquired by the image acquisition unit 10 based on the learning of the image learning model, and extracts the extracted nail partial region or toenail partial region. Based on the partial region image may be obtained.

부분 영역 이미지 획득 모듈(30)은 YOLO(You Only Look Once)라는 영상 학습 모델을 적용할 수 있다.The partial region image acquisition module 30 may apply an image learning model called You Only Look Once (YOLO).

YOLO는 이미지를 한번에 스캔하는 방식으로 객체를 인식할 수 있다. YOLO는 뉴럴네트워크 프레임워크인 다크넷을 기반으로 동작한다. 다크넷과 YOLO는 오픈소스이기 때문에 카메라와 GPU(Graphics Process Unit)가 장착된 컴퓨터를 구비하여 부분 영역 이미지 획득 모듈(30)을 구현할 수 있다.YOLO can recognize objects by scanning images at once. YOLO operates based on the darknet, a neural network framework. Since the darknet and YOLO are open sources, the partial region image acquisition module 30 can be implemented by using a computer equipped with a camera and a GPU (Graphics Process Unit).

부분 영역 이미지 획득 모듈(30)은 파라미터 생성부(31), 영역 추출부(32), 확률 산출부(33)를 포함하여 구성될 수 있다.The partial region image acquisition module 30 may include a parameter generating unit 31 , a region extracting unit 32 , and a probability calculating unit 33 .

파라미터 생성부(31)는 복수개의 라벨링 이미지들을 기설정된 영상 학습 모델에 따라 학습하고, 학습에 따른 파라미터를 생성할 수 있다.The parameter generator 31 may learn a plurality of labeling images according to a preset image learning model and generate parameters according to the learning.

영역 추출부(32)는 파라미터에 기초하여 이미지 획득부(10)에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고, 부분 영역 이미지를 획득할 수 있다.The region extracting unit 32 may extract a nail partial region or a toenail partial region from the image acquired by the image acquiring unit 10 based on the parameter, and obtain a partial region image.

확률 산출부(33)는 파라미터에 기초하여 이미지 획득부(10)에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역이 포함되는 확률을 산출할 수 있다.The probability calculating unit 33 may calculate a probability that the nail partial region or the toenail partial region is included in the image acquired by the image acquiring unit 10 based on the parameter.

여기서, 영역 추출부(32)는 확률 산출부(33)에서 산출된 손톱 부분 영역 또는 발톱 부분 영역에 포함되는 확률이 기설정된 임계값을 초과하는 경우에 이미지 획득부(10)에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고 부분 영역 이미지를 획득할 수 있다.Here, the region extracting unit 32 adds to the image acquired by the image acquiring unit 10 when the probability of being included in the nail partial region or the toenail partial region calculated by the probability calculating unit 33 exceeds a preset threshold value. In this case, the nail partial region or the toenail partial region may be extracted and a partial region image may be obtained.

썸네일 이미지 생성부(40)는 부분 영역 이미지를 기설정된 픽셀 사이즈에 맞도록 확대하거나 축소하여 썸네일 이미지를 생성하여 저장할 수 있다.The thumbnail image generator 40 may generate and store a thumbnail image by enlarging or reducing the partial region image to fit a preset pixel size.

썸네일 선택 인터페이스부(50)는 썸네일 이미지 생성부(40)에서 생성되거나 저장된 복수개의 썸네일 이미지들을 표시하되 사용자의 입력에 따라 복수개의 썸네일 이미지들 중 적어도 하나를 선택받을 수 있다.The thumbnail selection interface unit 50 may display a plurality of thumbnail images generated or stored in the thumbnail image generation unit 40 , and may receive selection of at least one of the plurality of thumbnail images according to a user input.

썸네일 선택 인터페이스부(50)는 복수개의 썸네일 이미지들 각각을 미리 정해진 순서에 따라 기설정된 픽셀 사이즈의 화면 영역에 있어서 화면의 가로 또는 세로 방향으로 나열되도록 배치하여 기설정될 갯수만큼 표시할 수 있다.The thumbnail selection interface unit 50 may display each of the plurality of thumbnail images in a predetermined order by arranging them in a horizontal or vertical direction in a screen area having a predetermined pixel size to display a predetermined number.

썸네일 선택 인터페이스부(50)는 사용자의 터치 입력에 따라 화면 표시된 복수개의 썸네일 이미지들에 대한 이미지 표시가 스크롤링되어 화면 표시되지 않은 다른 썸네일 이미지가 추가적으로 화면 표시될 수 있도록 할 수 있다.The thumbnail selection interface unit 50 may scroll the image display of the plurality of thumbnail images displayed on the screen according to the user's touch input so that other thumbnail images that are not displayed on the screen may be additionally displayed on the screen.

썸네일 선택 인터페이스부(50)는 복수개의 썸네일 이미지들 각각에 대한 사용자의 입력에 따른 선택이 가능하도록 각각의 복수개의 썸네일 이미지에 대응되는 각기 다른 식별자가 부여된 사용자 입력 영역을 생성하여 사용자 입력 영역에 대해 사용자의 입력을 받는 경우 식별자와 식별자에 대응되는 썸네일 이미지를 제공할 수 있다.The thumbnail selection interface unit 50 creates a user input area to which different identifiers are assigned to each of the plurality of thumbnail images so that selection of each of the plurality of thumbnail images is possible according to the user's input, and is placed in the user input area. When receiving a user's input for information, an identifier and a thumbnail image corresponding to the identifier may be provided.

카메라(60)는 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영할 수 있다. The camera 60 may photograph a human hand or foot including a nail part or a toenail part.

촬영 이미지 표시부(70)는 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 이미지를 표시할 수 있다.The photographed image display unit 70 may display an image obtained by photographing a human hand or foot including a nail portion or a toenail portion.

가이딩 표시부(80)는 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영시 손톱 부분 또는 발톱 부분의 촬영 위치를 가이딩하기 위한 화면상의 표시 영역을 제공할 수 있다.The guiding display unit 80 may provide a display area on the screen for guiding the photographing position of the nail part or the toenail part when photographing the hand or foot of the human body including the nail part or the toenail part.

화면상의 표시 영역은 사용자의 신체 부분 영역이 가지는 사이즈보다 큰 사이즈를 가지는 것일 수 있다.The display area on the screen may have a size larger than the size of the body part area of the user.

여기서, 부분 영역 이미지 획득 모듈(30)은 촬영 이미지 표시부(70)의 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 영상 학습 모델에 따른 학습에 기초하여 추출함에 따른 사용자의 신체 부분 영역을 검출할 수 있다.Here, the partial region image acquisition module 30 may detect the user's body part region by extracting the nail partial region or the toenail partial region from the image of the captured image display unit 70 based on learning according to the image learning model. have.

네일 디자인 표시부(90)는 썸네일 선택 인터페이스부(50)에서 선택된 썸네일 이미지를 촬영 이미지 표시부(70)에서 표시된 이미지의 손톱 부분 또는 발톱 부분에 대응되는 이미지 영역에 오버랩하여 표시할 수 있다.The nail design display unit 90 may overlap and display the thumbnail image selected by the thumbnail selection interface unit 50 on the nail portion or the image region corresponding to the toenail portion of the image displayed on the photographed image display unit 70 .

네일 디자인 표시부(90)는 사용자 신체 부분 영역의 화면상의 사이즈에 기초하여 썸네일 선택 인터페이스부(50)에서 선택된 썸네일 이미지의 사이즈를 수정하고, 촬영 이미지 표시부(70)에서 표시된 이미지의 손톱 부분 또는 발톱 부분에 대응되는 이미지 영역에 오버랩하여 표시할 수 있다.The nail design display unit 90 corrects the size of the thumbnail image selected in the thumbnail selection interface unit 50 based on the size of the user's body part region on the screen, and the nail part or the toenail part of the image displayed on the photographed image display unit 70 . It can be displayed overlapping the image area corresponding to .

도 2는 본 발명의 일실시 예에 따른 네일 디자인 이미지 제공 장치를 통해 출력되는 화면을 나타낸 도면이다.2 is a view showing a screen output through the nail design image providing apparatus according to an embodiment of the present invention.

도 2를 참조하면 출력화면(100)은 촬영된 이미지가 표시되는 제1 표시영역(101), 손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영시 손톱 부분 또는 발톱 부분의 촬영 위치를 가이딩하기 위한 화면상의 제2 표시영역(102)과 화면상의 표시되는 이미지를 저장하기 위한 촬영버튼(103)과 복수개의 썸네일 이미지들을 표시하되 사용자의 입력에 따라 복수개의 썸네일 이미지들 중 적어도 하나를 선택받기 위한 썸네일 이미지 영역(104)으로 구성될 수 있다.Referring to FIG. 2 , the output screen 100 guides the shooting position of the nail part or the toenail part when photographing the first display area 101 in which the photographed image is displayed, and the hand or foot of the human body including the nail part or the toenail part. Display the second display area 102 on the screen for recording, the shooting button 103 for storing the image displayed on the screen, and a plurality of thumbnail images, but select at least one of the plurality of thumbnail images according to a user input It may consist of a thumbnail image area 104 for receiving.

사용자가 어느 하나의 썸네일 이미지를 선택하면 출력화면(100)에는 선택된 썸네일 이미지가 촬영된 손의 손톱 부분에 오버랩되는 네일영역(105)이 포함되어 출력될 수 있다.When the user selects any one thumbnail image, the output screen 100 may include and output the nail area 105 overlapping the nail part of the hand in which the selected thumbnail image is photographed.

이에 따라 사용자는 손 또는 발을 촬영 후 가상으로 네일을 적용시켜 볼 수 있다.Accordingly, the user can virtually apply the nail after photographing the hand or foot.

도 3은 본 발명의 일 실시예에 따른 네일 디자인 이미지 제공 장치의 순서도이다.3 is a flowchart of an apparatus for providing a nail design image according to an embodiment of the present invention.

도 3을 참조하면, 본 발명의 일 실시예에 따른 네일 디자인 이미지 제공 장치(1)는 외부 또는 자체적으로 손톱 또는 발톱 부분을 포함한 인체의 손 또는 발을 포함하는 복수의 이미지를 획득하고(S101), 획득한 이미지 상에서 손톱 부분 또는 발톱 부분과 대응되는 손톱 부분 영역 또는 발톱 부분 영역을 라벨링한다(S102).Referring to FIG. 3 , the nail design image providing apparatus 1 according to an embodiment of the present invention acquires a plurality of images including hands or feet of a human body including nails or toenails externally or by itself (S101) , labels the nail part area or the toenail part area corresponding to the nail part or the toenail part on the acquired image (S102).

네일 디자인 이미지 제공 장치(1)는 라벨링한 이미지를 객체 검출이 가능한 기설정된 영상 학습 모델을 이용하여 학습하고(S103), 학습에 따라 손톱 부분 영역 또는 발톱 부분 영역을 추출한다(S104).The nail design image providing apparatus 1 learns the labeled image using a preset image learning model capable of object detection (S103), and extracts a nail partial region or a toenail partial region according to the learning (S104).

네일 디자인 이미지 제공 장치(1)는 손톱 부분 영역 또는 발톱 부분 영역을 추출함에 따라 부분 영역 이미지를 획득하고(S105), 부분 영역 이미지를 기설정된 픽셀 사이즈에 맞도록 확대하거나 축소하여 썸네일 이미지를 생성한다(S106).The nail design image providing device 1 obtains a partial region image as the nail partial region or toenail partial region is extracted (S105), and enlarges or reduces the partial region image to fit a preset pixel size to generate a thumbnail image. (S106).

네일 디자인 이미지 제공 장치(1)는 인체의 손 또는 발을 촬영하고(S107), 촬영된 이미지를 표시한다(S108).The nail design image providing apparatus 1 photographs a human hand or foot (S107), and displays the photographed image (S108).

여기서 네일 디자인 이미지 제공 장치(1)는 S107단계 이전에 손톱 부분 또는 발톱 부분의 촬영 위치를 가이딩하기 위한 가이딩 라인을 표시할 수 있다.Here, the nail design image providing apparatus 1 may display a guiding line for guiding the photographing position of the nail part or the toenail part before step S107.

네일 디자인 이미지 제공 장치(1)는 촬영된 이미지에서 손톱 부분 영역 또는 발톱 부분 영역을 영상 학습 모델에 따른 학습에 기초하여 추출함에 따라 사용자 신체 부분 영역을 검출할 수 있다(S109).The nail design image providing apparatus 1 may detect the user's body part region by extracting the nail part region or the toenail part region from the captured image based on learning according to the image learning model (S109).

네일 디자인 이미지 제공 장치(1)는 S106단계에서 생성된 썸네일 이미지를 표시하고(S110), 사용자로부터 어느 하나의 썸네일 이미지를 선택받을 수 있다(S111).The nail design image providing apparatus 1 may display the thumbnail image generated in step S106 (S110) and receive a selection of any one thumbnail image from the user (S111).

네일 디자인 이미지 제공 장치(1)는 선택된 썸네일 이미지를 사용자 신체 부분 영역에 오버랩하여 표시할 수 있다(S112).The nail design image providing apparatus 1 may overlap and display the selected thumbnail image on the user's body part region (S112).

네일 디자인 이미지 제공 장치(1)는 영상 학습 모델을 이용하여 네일 디자인을 추출하고, 사용자에게 복수의 네일 디자일을 제공할 수 있다.The nail design image providing apparatus 1 may extract a nail design using an image learning model and provide a plurality of nail designs to the user.

네일 디자인 이미지 제공 장치(1)는 사용자의 손톱 또는 발톱을 포함하는 손 또는 발을 촬영하고, 사용자로부터 어느 하나의 네일 디자인을 선택받아, 선택된 네일 디자인이 손톱 또는 발톱에 적용된 이미지를 제공할 수 있다.The nail design image providing device 1 may photograph a user's hand or foot including the fingernail or toenail, receive a selection of any one nail design from the user, and provide an image in which the selected nail design is applied to the fingernail or toenail. .

본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those of ordinary skill in the art to which the present invention pertains will understand that the present invention may be embodied in other specific forms without changing the technical spirit or essential features thereof. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. The scope of the present invention is indicated by the following claims rather than the above detailed description, and all changes or modifications derived from the claims and their equivalent concepts should be construed as being included in the scope of the present invention.

1 : 네일 디자인 이미지 제공 장치
10 : 이미지 획득부
20 : 라벨링 이미지 생성부
30 : 부분 영역 이미지 획득 모듈
40 : 썸네일 이미지 생성부
50 : 썸네일 선택 인터페이스부
60 : 카메라
70 : 촬영 이미지 표시부
80 : 가이딩 표시부
90 : 네일 디자인 표시부1: Nail design image providing device
10: image acquisition unit
20: labeling image generating unit
30: partial region image acquisition module
40: thumbnail image generator
50: thumbnail selection interface unit
60 : camera
70: shooting image display unit
80: guiding display unit
90: nail design display unit

Claims (7)

이미지를 획득하는 이미지 획득부;
손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 복수개의 이미지들에 있어서, 각각의 이미지의 손톱 부분 영역 또는 발톱 부분 영역을 인체의 손 또는 발의 다른 영역과 구분하기 위하여 라벨링을 수행하고, 라벨링 수행에 따라 복수개의 라벨링 이미지들을 생성하는 라벨링 이미지 생성부;
복수개의 라벨링 이미지들을 실시간 객체 검출이 가능한 기설정된 영상 학습 모델에 따라 학습하고 상기 학습에 기초하여 상기 이미지 획득부에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고, 부분 영역 이미지를 획득하는 부분 영역 이미지 획득 모듈;
상기 부분 영역 이미지를 기설정된 픽셀 사이즈에 맞도록 확대하거나 축소하여 썸네일 이미지를 생성하여 저장하는 썸네일 이미지 생성부; 및
상기 썸네일 이미지 생성부에서 생성되거나 저장된 복수개의 썸네일 이미지들을 표시하되 사용자의 입력에 따라 복수개의 썸네일 이미지들 중 적어도 하나를 선택받는 썸네일 선택 인터페이스부;
를 포함하는 네일 디자인 이미지 제공 장치.an image acquisition unit for acquiring an image;
In a plurality of images obtained by photographing the hand or foot of the human body including the nail part or the toenail part, labeling is performed to distinguish the nail part region or the toenail part region of each image from other regions of the human hand or foot, , a labeling image generator for generating a plurality of labeling images according to the labeling performance;
A plurality of labeling images are learned according to a preset image learning model capable of real-time object detection, and a nail partial region or a toenail partial region is extracted from the image acquired by the image acquisition unit based on the learning, and a partial region image is obtained. a partial region image acquisition module;
a thumbnail image generator for generating and storing a thumbnail image by enlarging or reducing the partial region image to fit a preset pixel size; and
a thumbnail selection interface unit that displays a plurality of thumbnail images generated or stored in the thumbnail image generation unit and receives at least one selected from among the plurality of thumbnail images according to a user input;
A nail design image providing device comprising a. 제1항에 있어서,
손톱 부분 또는 발톱 부분을 포함한 인체의 손 또는 발을 촬영함에 따른 이미지를 표시하기 위한 촬영 이미지 표시부; 및
상기 썸네일 선택 인터페이스부에서 선택된 썸네일 이미지를 상기 촬영 이미지 표시부에서 표시된 이미지의 상기 손톱 부분 또는 발톱 부분에 대응되는 이미지 영역에 오버랩하여 표시하는 네일 디자인 표시부;
를 더 포함하는 네일 디자인 이미지 제공 장치.According to claim 1,
a photographed image display unit for displaying an image obtained by photographing a human hand or foot including a nail portion or a toenail portion; and
a nail design display unit for overlapping the thumbnail image selected by the thumbnail selection interface unit on an image area corresponding to the nail part or the toenail part of the image displayed on the photographed image display unit;
A nail design image providing device further comprising a. 제2항에 있어서,
상기 부분 영역 이미지 획득 모듈은
상기 촬영 이미지 표시부의 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 상기 영상 학습 모델에 따른 학습에 기초하여 추출함에 따른 사용자 신체 부분 영역을 검출하는 것이고,
상기 네일 디자인 표시부는
상기 썸네일 선택 인터페이스부에서 선택된 썸네일 이미지를 상기 사용자 신체 부분 영역에 오버랩하여 표시하는 것
인 네일 디자인 이미지 제공 장치.3. The method of claim 2,
The partial region image acquisition module is
Detecting a user body part region by extracting a nail part region or a toenail part region from the image of the captured image display unit based on learning according to the image learning model,
The nail design display unit
overlapping and displaying the thumbnail image selected by the thumbnail selection interface on the user's body region
In-nail design image providing device. 제1항에 있어서,
상기 썸네일 선택 인터페이스부는
상기 복수개의 썸네일 이미지들 각각을 미리 정해진 순서에 따라 기설정된 픽셀 사이즈의 화면 영역에 있어서 화면의 가로 또는 세로 방향으로 나열되도록 배치하여 기설정된 갯수만큼 표시하되, 사용자의 터치 입력에 따라 화면 표시된 복수개의 썸네일 이미지들에 대한 이미지 표시가 스크롤링되어 화면 표시되지 않은 다른 썸네일 이미지가 추가적으로 화면 표시될 수 있도록 하는 것
인 네일 디자인 이미지 제공 장치.According to claim 1,
The thumbnail selection interface unit
Each of the plurality of thumbnail images is arranged to be arranged in a horizontal or vertical direction of the screen in a screen area of a preset pixel size according to a predetermined order and displayed as many as a preset number, but a plurality of screens displayed according to a user's touch input The image display for the thumbnail images is scrolled so that other thumbnail images that are not displayed on the screen can be additionally displayed on the screen.
In-nail design image providing device. 제1항에 있어서,
상기 썸네일 선택 인터페이스부는
상기 복수개의 썸네일 이미지들 각각에 대한 사용자의 입력에 따른 선택이 가능하도록 각각의 복수개의 썸네일 이미지에 대응되는 각기 다른 식별자가 부여된 사용자 입력 영역을 생성하여 상기 사용자 입력 영역에 대해 사용자의 입력을 받는 경우 상기 식별자와 상기 식별자에 대응되는 썸네일 이미지를 제공하는 것
인 네일 디자인 이미지 제공 장치.According to claim 1,
The thumbnail selection interface unit
In order to enable selection of each of the plurality of thumbnail images according to a user's input, a user input area to which different identifiers are assigned to each of the plurality of thumbnail images is generated, and the user input is received for the user input area. providing the identifier and a thumbnail image corresponding to the identifier
In-nail design image providing device. 제1항에 있어서,
상기 부분 영역 이미지 획득 모듈은
복수개의 라벨링 이미지들을 기설정된 영상 학습 모델에 따라 학습하고, 상기 학습에 따른 파라미터를 생성하는 파라미터 생성부; 및
상기 파라미터에 기초하여 상기 이미지 획득부에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고, 부분 영역 이미지를 획득하는 영역 추출부;를 포함하는 것
인 네일 디자인 이미지 제공 장치.According to claim 1,
The partial region image acquisition module is
a parameter generator for learning a plurality of labeling images according to a preset image learning model and generating parameters according to the learning; and
A region extracting unit that extracts a nail partial region or a toenail partial region from the image acquired by the image acquisition unit based on the parameter, and obtains a partial region image
In-nail design image providing device. 제6항에 있어서,
상기 부분 영역 이미지 획득 모듈은
상기 파라미터에 기초하여 상기 이미지 획득부에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역이 포함되는 확률을 산출하는 확률 산출부를 더 포함하고,
상기 영역 추출부는
상기 확률 산출부에서 산출된 손톱 부분 영역 또는 발톱 부분 영역이 포함되는 확률이 기설정된 임계값을 초과하는 경우에 상기 이미지 획득부에서 획득된 이미지에 있어서 손톱 부분 영역 또는 발톱 부분 영역을 추출하고 부분 영역 이미지를 획득하는 것
인 네일 디자인 이미지 제공 장치.7. The method of claim 6,
The partial region image acquisition module is
Further comprising a probability calculation unit for calculating the probability that the nail partial region or the toenail partial region in the image acquired by the image acquisition unit based on the parameter,
The region extraction unit
When the probability that the nail partial region or the toenail partial region calculated by the probability calculator exceeds a preset threshold, the nail partial region or the toenail partial region is extracted from the image acquired by the image acquiring unit, and the partial region acquiring an image
In-nail design image providing device.
KR1020190151808A 2019-11-25 2019-11-25 Apparatus for providing image of nail design KR20210064442A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190151808A KR20210064442A (en) 2019-11-25 2019-11-25 Apparatus for providing image of nail design

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190151808A KR20210064442A (en) 2019-11-25 2019-11-25 Apparatus for providing image of nail design

Publications (1)

Publication Number Publication Date
KR20210064442A true KR20210064442A (en) 2021-06-03

Family

ID=76396450

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190151808A KR20210064442A (en) 2019-11-25 2019-11-25 Apparatus for providing image of nail design

Country Status (1)

Country Link
KR (1) KR20210064442A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023022131A1 (en) * 2021-08-20 2023-02-23 シチズン時計株式会社 Determination device, determination method, and determination program
WO2023075469A1 (en) * 2021-10-28 2023-05-04 주식회사 엘에스테크 Nail art apparatus and nail art method using same

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040033235A (en) 2002-10-12 2004-04-21 (주)미즈피아 Nail Style System
KR101844347B1 (en) 2017-08-31 2018-05-14 김지환 Method for Providing Augmented Nail Art Service

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040033235A (en) 2002-10-12 2004-04-21 (주)미즈피아 Nail Style System
KR101844347B1 (en) 2017-08-31 2018-05-14 김지환 Method for Providing Augmented Nail Art Service

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023022131A1 (en) * 2021-08-20 2023-02-23 シチズン時計株式会社 Determination device, determination method, and determination program
WO2023075469A1 (en) * 2021-10-28 2023-05-04 주식회사 엘에스테크 Nail art apparatus and nail art method using same

Similar Documents

Publication Publication Date Title
US9760935B2 (en) Method, system and computer program product for generating recommendations for products and treatments
TWI669103B (en) Information processing device, information processing method and program
CN114502061A (en) Image-based automatic skin diagnosis using deep learning
US9615647B2 (en) Makeup application assistance device, makeup application assistance method, and makeup application assistance program
US20150254501A1 (en) Makeup supporting device, makeup supporting system, makeup supporting method, and non-transitory computer-readable recording medium
US10559102B2 (en) Makeup simulation assistance apparatus, makeup simulation assistance method, and non-transitory computer-readable recording medium storing makeup simulation assistance program
WO2018076622A1 (en) Image processing method and device, and terminal
CN108920490A (en) Assist implementation method, device, electronic equipment and the storage medium of makeup
CN107317974B (en) Beautiful makeup photographing method and device
CN105068646B (en) The control method and system of terminal
CN110663063B (en) Method and device for evaluating facial makeup
KR20210064442A (en) Apparatus for providing image of nail design
JPWO2015122195A1 (en) Impression analysis device, game device, health management device, advertisement support device, impression analysis system, impression analysis method, and program
JP2019048026A (en) Biological information analysis device and hand skin analysis method
KR20030079932A (en) Mascara selecting method, mascara selecting system, and mascara counseling tool
KR20130088493A (en) Method for providing user interface and video receving apparatus thereof
US11882918B2 (en) Make-up assistance method and apparatus and smart mirror
JP2021144582A (en) Makeup simulation device, makeup simulation method and program
KR20210051839A (en) Apparatus for monitoring hair loss through hair pore matching and method thereof
KR20160046399A (en) Method and Apparatus for Generation Texture Map, and Database Generation Method
KR101507410B1 (en) Live make-up photograpy method and apparatus of mobile terminal
JP2008140107A (en) Image processor, image processing method, control program, and recording medium
JP5782540B2 (en) Beauty counseling method
KR101734212B1 (en) Facial expression training system
CN113298593A (en) Commodity recommendation and image detection method, commodity recommendation and image detection device, commodity recommendation and image detection equipment and storage medium

Legal Events

Date Code Title Description
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right