KR20210046360A - Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition - Google Patents

Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition Download PDF

Info

Publication number
KR20210046360A
KR20210046360A KR1020190129978A KR20190129978A KR20210046360A KR 20210046360 A KR20210046360 A KR 20210046360A KR 1020190129978 A KR1020190129978 A KR 1020190129978A KR 20190129978 A KR20190129978 A KR 20190129978A KR 20210046360 A KR20210046360 A KR 20210046360A
Authority
KR
South Korea
Prior art keywords
hair
image
scalp
unit
video data
Prior art date
Application number
KR1020190129978A
Other languages
Korean (ko)
Inventor
박가은
Original Assignee
주식회사 코러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 코러스 filed Critical 주식회사 코러스
Priority to KR1020190129978A priority Critical patent/KR20210046360A/en
Publication of KR20210046360A publication Critical patent/KR20210046360A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/446—Scalp evaluation or scalp disorder diagnosis, e.g. dandruff
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/448—Hair evaluation, e.g. for hair disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7445—Display arrangements, e.g. multiple display units

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Dermatology (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

Disclosed is a digital advertisement system with a hair/scalp care diagnosis function using automatic image recognition, which comprises: a microscope unit scanning a user's hair/scalp and acquiring hair/scalp image and video data; a processing unit connected to the microscope unit and automatically recognizing and processing the hair/scalp image and video data; and a display unit connected to the processing unit and displaying a plurality of windows for displaying advertisements or the hair/scalp image and video data and a diagnosis result. According to the present invention, when the microscope unit operates to acquire the hair/scalp image and video data, the processing unit switches an operation mode of the digital advertisement system from a normal mode to a diagnostic mode. At this time, not only the advertisements but also hair/scalp care information related to the user's specific symptoms are displayed.

Description

이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템{Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition}Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition}

본 발명은 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템에 관한 것으로서, 더욱 상세하게는, 모발/두피 케어 진단 서비스뿐만 아니라 사용자의 특정한 증상과 관련되는 모발/두피 케어 정보도 사용자에게 제공하는, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템에 관한 것이다. The present invention relates to a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition, and more particularly, not only a hair/scalp care diagnosis service, but also hair/scalp care information related to a user's specific symptoms. It relates to a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition provided to a user.

멀티미디어 기술의 발전으로, 디지털 광고가 스마트폰, 공공장소, 운송시스템, 박물관, 스타디움, 소매점, 호텔, 식당 등에서 공공 정보, 상품 정보, 길찾기, 전시회, 마케팅 및 광고를 제공하는데 폭넓게 사용되어 왔다. With the development of multimedia technology, digital advertising has been widely used in smartphones, public places, transportation systems, museums, stadiums, retail stores, hotels, restaurants, etc. to provide public information, product information, directions, exhibitions, marketing and advertising.

어떤 모발/두피 케어 서비스업체들은 그들의 서비스 및 그들이 서비스업체들에서 판매하는 관련된 모발/두피 케어 상품들을 광고하기 위하여 디지털 광고를 사용하기 시작하였다. 그러나, 디지털 광고 시스템이 디스플레이하는 광고 내용은 고객의 특정한 증상과 연계되지 않았다. 즉, 광고는 고객의 특정한 증상과 연계됨이 없이 연속적으로 또는 무작위로 디지털 광고 시스템에서 디스플레이되고, 그래서 광고의 효과는 떨어진다. Some hair/scalp care service providers have started using digital advertising to advertise their services and related hair/scalp care products they sell by service providers. However, the advertisement content displayed by the digital advertisement system is not associated with a specific symptom of the customer. That is, advertisements are continuously or randomly displayed in a digital advertisement system without being linked to a specific symptom of a customer, so the effectiveness of the advertisement is degraded.

한편, 현미경 또는 고배율 디지털 카메라를 가지는 모발/두피 케어 진단 장치는 텍스쳐(texture), 피부의 흠, 공극, 밝기, 모발 손실, 모발 약화, 두피 장애 및 채색을 포함하는 모발/두피의 다양한 요소들을 분석하고 진단 결과 및 케어의 과정을 고객에게 제공하기 위한 목적으로, 디지털 광고와는 상관없이 사용되어 왔다. Meanwhile, a hair/scalp care diagnostic device having a microscope or a high-magnification digital camera analyzes various factors of hair/scalp including texture, skin flaws, voids, brightness, hair loss, hair weakness, scalp disorders and coloring. It has been used irrespective of digital advertisements for the purpose of providing diagnosis results and care processes to customers.

이러한 점에서, 모발/두피 케어 진단 서비스뿐만 아니라 특정한 증상을 분석하는 이미지 자동인식 기능을 제공하여 특정한 증상에 관련된 모발/두피 케어 정보가 고객에게 제공되는, 특정한 증상을 가지는 고객에게 증상-연계된 광고를 제공하는 모발/두피 케어 진단 기능을 갖는 디지털 광고에 대한 요구가 있다. In this respect, symptom-related advertisements to customers with specific symptoms by providing hair/scalp care information related to specific symptoms by providing automatic image recognition function that analyzes specific symptoms as well as hair/scalp care diagnosis services. There is a need for a digital advertisement with a hair/scalp care diagnostic function that provides a.

대한민국 특허등록 제10-1622147호(2016. 05. 12. 등록)Korean Patent Registration No. 10-1622147 (registered on May 12, 2016)

이에, 본 발명은 상기한 종래의 문제점을 해소하기 위한 것이다. 따라서, 본 발명의 목적은 모발/두피 케어 진단 서비스뿐만 아니라 특정한 증상을 분석하는 이미지 자동인식 기능을 제공하여 특정한 증상에 관련된 모발/두피 케어 정보가 고객에게 제공됨으로써 광고의 효과가 개선되는, 특정한 증상을 가지는 고객에게 증상-연계된 광고를 제공하는 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템을 제공하는 것이다. Thus, the present invention is to solve the above-described conventional problem. Accordingly, an object of the present invention is to provide not only a hair/scalp care diagnosis service, but also an image automatic recognition function that analyzes specific symptoms, and provides hair/scalp care information related to a specific symptom to a customer, thereby improving the effect of advertisements. It is to provide a digital advertisement system having a hair/scalp care diagnosis function that provides symptom-related advertisements to customers having

또한 본 발명의 목적은 디지털 광고 시스템이 진단용 모발/두피 영상 및 비디오 데이터를 획득할 때 노말 모드(normal mode)로부터 진단 모드로 작동 모드가 스위칭되는 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템을 제공하는 것이다. 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템은 노말 모드에서는 단지 광고만을 디스플레이하는 반면, 진단 모드에서는 광고뿐만 아니라 진단용 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이한다. It is also an object of the present invention to provide a digital advertisement system having a hair/scalp care diagnosis function in which an operation mode is switched from a normal mode to a diagnosis mode when a digital advertisement system acquires a diagnosis hair/scalp image and video data. It is to do. A digital advertisement system having a hair/scalp care diagnosis function displays only advertisements in the normal mode, while in the diagnosis mode displays not only advertisements, but also hair/scalp image and video data for diagnosis and diagnosis results.

본 발명은 사용자의 모발/두피를 스캔하고 모발/두피 영상 및 비디오 데이터를 획득하는 현미경 유닛, 상기 현미경 유닛과 연결되고 상기 모발/두피 영상 및 비디오 데이터를 자동으로 인식하고 분석하여 처리하는 프로세스 유닛, 및 상기 프로세스 유닛과 연결되고 광고 또는 상기 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이하기 위한 복수개의 윈도우를 디스플레이하는 디스플레이 유닛을 포함하는 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템을 제공한다. The present invention is a microscope unit that scans a user's hair/scalp and acquires hair/scalp image and video data, a process unit connected to the microscope unit and automatically recognizes, analyzes, and processes the hair/scalp image and video data, And a display unit connected to the process unit and displaying a plurality of windows for displaying advertisements or the hair/scalp image and video data, and a diagnosis result.

상기에서, 상기 현미경 유닛은 상기 모발/두피 영상 및 비디오 데이터의 배율 및 해상도를 조절하고, 상기 모발/두피 영상 및 비디오 데이터를 상기 프로세스 유닛에게 전달하며, 상기 프로세스 유닛은 상기 현미경 유닛의 연결 상태를 모니터링하고, 상기 현미경 유닛으로부터 상기 모발/두피 영상 및 비디오 데이터를 수신하며, 상기 모발/두피 영상 및 비디오 데이터를 자동으로 인식하고 분석하여 저장하고, 상기 현미경 유닛이 작동하여 상기 모발/두피 영상 및 비디오 데이터를 획득할 때 노말 모드에서 진단 모드로 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 상기 디지털 광고 시스템의 동작 모드를 스위칭하며, 이때 노말 모드에서는 상기 프로세스 유닛은 광고 내용을 상기 디스플레이 유닛에게 전달하여 복수개의 윈도우가 광고를 디스플레이하게 하고, 진단 모드에서는 상기 프로세스 유닛은 광고 내용 그리고 상기 모발/두피 영상 및 비디오 데이터를 상기 디스플레이 유닛에게 전달하여 복수개의 윈도우 중 하나는 상기 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이하고, 복수개의 윈도우 중 다른 것은 광고를 디스플레이한다.In the above, the microscope unit adjusts the magnification and resolution of the hair/scalp image and video data, and transmits the hair/scalp image and video data to the process unit, and the process unit monitors the connection state of the microscope unit. It monitors, receives the hair/scalp image and video data from the microscope unit, automatically recognizes, analyzes, and stores the hair/scalp image and video data, and the microscope unit operates to operate the hair/scalp image and video. When data is acquired, the operation mode of the digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition is switched from the normal mode to the diagnosis mode. In this case, in the normal mode, the process unit displays the advertisement content to the display unit. And the plurality of windows to display the advertisement, and in the diagnosis mode, the process unit delivers the advertisement content and the hair/scalp image and video data to the display unit, and one of the plurality of windows is the hair/scalp image and Video data and diagnostic results are displayed, and the other of the plurality of windows displays advertisements.

본 발명에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템은 모발/두피 케어 진단 서비스뿐만 아니라 특정한 증상에 관련된 모발/두피 케어 정보를 고객에게 제공함으로써 광고의 효과를 개선할 수 있다. The digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to the present invention provides not only hair/scalp care diagnosis services but also hair/scalp care information related to specific symptoms to customers, thereby improving the effectiveness of advertisements. I can.

도 1은 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템의 개략도이다.
도 2는 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템의 프로세스 유닛의 개략도이다.
도 3은 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템의 디스플레이 유닛 및 그것의 모드 스위칭을 설명하는 개략도이다.
도 4는 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템에서 현미경 및 영상/비디오 획득의 상태에 기초한 모드 스위칭을 설명하는 개략도이다.
도 5는 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템에서 이미지 자동인식을 위한 동적 자가 학습 참조 데이터 세트의 생성 및 통합 참조 데이터 세트를 형성하기 위하여 초기에 공장에서 설치된 참조 데이터 세트와의 통합을 설명하는 개략도이다.
도 6은 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템의 작동 시나리오를 설명하는 개략도이다. 1 is a schematic diagram of a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention.
2 is a schematic diagram of a process unit of a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention.
3 is a schematic diagram illustrating a display unit of a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention and mode switching thereof.
4 is a schematic diagram illustrating mode switching based on a state of a microscope and an image/video acquisition in a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention.
FIG. 5 is a diagram illustrating the generation of a dynamic self-learning reference data set and an integrated reference data set for automatic image recognition in a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention. For this purpose, it is a schematic diagram explaining the integration with the reference data set initially installed in the factory.
6 is a schematic diagram illustrating an operation scenario of a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention.

이하, 도면을 참조하여 본 발명을 상세하게 설명한다.Hereinafter, the present invention will be described in detail with reference to the drawings.

도 1은 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 개략도이다. 도 1을 참조하면, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)은 사용자의 모발/두피를 스캔하고 모발/두피 영상 및 비디오 데이터를 획득하는 현미경 유닛(100), 현미경 유닛(100)에 연결되고 모발/두피 영상 및 비디오 데이터를 자동으로 인식하여 분석하고 처리하는 프로세스 유닛(200) 및 프로세스 유닛(200)에 연결되고 광고 또는 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이하기 위한 복수개의 윈도우를 디스플레이하는 디스플레이 유닛(300)을 포함할 수 있다. 1 is a schematic diagram of a digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention. Referring to FIG. 1, a digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition is a microscope unit 100 that scans a user's hair/scalp and acquires hair/scalp image and video data. , It is connected to the microscope unit 100 and automatically recognizes, analyzes and processes hair/scalp image and video data, and is connected to the process unit 200 and the process unit 200 and is connected to advertisement or hair/scalp image and video data, and diagnosis It may include a display unit 300 that displays a plurality of windows for displaying results.

현미경 유닛(100)은 현미경 케이블(110)로 프로세스 유닛(200)에 연결될 수 있다. 현미경 유닛(100)은 사용자의 모발/두피를 스캔하고, 모발/두피 영상 및 비디오 데이터를 얻으며, 모발/두피 영상 및 비디오 데이터의 배율 및 해상도를 조절하고, 모발/두피 영상 및 비디오 데이터를 프로세스 유닛(200)에게 전달한다. The microscope unit 100 may be connected to the process unit 200 with a microscope cable 110. The microscope unit 100 scans the user's hair/scalp, obtains hair/scalp image and video data, adjusts the magnification and resolution of the hair/scalp image and video data, and converts the hair/scalp image and video data into a process unit. Pass it to 200.

프로세스 유닛(200)은 현미경 유닛(100)의 연결 상태를 모니터링하고, 현미경 유닛(100)으로부터 모발/두피 영상 및 비디오 데이터를 수신하며, 모발/두피 영상 및 비디오 데이터를 자동으로 인식하여 분석하고 저장하며, 현미경 유닛(100)이 작동하거나 또는 모발/두피 영상 및 비디오 데이터를 획득할 때 노말 모드에서 진단 모드로 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 동작 모드를 스위칭한다. 노말 모드에서, 프로세스 유닛(200)은 광고 내용을 디스플레이 유닛(300)에게 전달하고 그래서 복수개의 윈도우는 광고를 디스플레이한다. 진단 모드에서, 프로세스 유닛(200)은 광고 내용과 모발/두피 영상 및 비디오 데이터 둘 모두를 디스플레이 유닛(300)에게 전달하고 그래서 복수개의 윈도우 중의 하나는 모발/두피 영상 및 비디오 데이터 그리고 진단 데이터를 디스플레이하고, 복수개의 윈도우 중의 다른 윈도우는 광고를 디스플레이한다. The process unit 200 monitors the connection state of the microscope unit 100, receives hair/scalp image and video data from the microscope unit 100, and automatically recognizes, analyzes, and stores hair/scalp image and video data. And, the operation of the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition from the normal mode to the diagnosis mode when the microscope unit 100 operates or acquires hair/scalp image and video data Switch mode. In the normal mode, the process unit 200 delivers the advertisement content to the display unit 300 so that a plurality of windows displays the advertisement. In the diagnostic mode, the process unit 200 delivers both the advertisement content and the hair/scalp image and video data to the display unit 300, so that one of the plurality of windows displays the hair/scalp image and video data and the diagnostic data. And, another window among the plurality of windows displays an advertisement.

디스플레이 유닛(300)은 예를 들어, 디스플레이 윈도우 #1(302), 디스플레이 윈도우 #2(304) 및 디스플레이 윈도우 #3(306)를 포함할 수 있다. 디스플레이 유닛(300)은 디스플레이 케이블(310)로 프로세스 유닛(200)에 연결될 수 있다. The display unit 300 may include, for example, a display window #1 302, a display window #2 304, and a display window #3 306. The display unit 300 may be connected to the process unit 200 by a display cable 310.

도 2는 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 프로세스 유닛(200)의 개략도이다. 도 2를 참조하면, 프로세스 유닛(200)은 현미경 인터페이스부(205), 영상/비디오 획득부(210), 디스플레이 관리부(215), 영상/비디오 인식부(220), 광고 처리부(225), 진단 분석부(230), 증상-연계된 광고 처리부(235), 데이터 세트 관리부(240), 통신 및 장치 처리부(245) 및 전원 관리부(250)를 포함할 수 있다. 2 is a schematic diagram of a process unit 200 of a digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention. Referring to FIG. 2, the process unit 200 includes a microscope interface unit 205, an image/video acquisition unit 210, a display management unit 215, an image/video recognition unit 220, an advertisement processing unit 225, and a diagnosis. An analysis unit 230, a symptom-related advertisement processing unit 235, a data set management unit 240, a communication and device processing unit 245, and a power management unit 250 may be included.

현미경 인터페이스부(205)는 현미경 유닛(100)과의 연결을 관리하고 현미경 유닛(100)으로부터 수신한 영상 및 비디오 데이터를 영상/비디오 획득부(210)로 전달한다. 게다가, 현미경 유닛(100)이 작동할 때 노말 모드로부터 진단 모드로 디지털 광고 시스템의 동작 모드를 자동적으로 스위칭하기 위하여, 현미경 인터페이스부(205)는 현미경 유닛(100)의 연결 상태, 즉 온/오프 상태를 모니터링하고 그 상태를 디스플레이 관리부(215)로 전달한다. The microscope interface unit 205 manages the connection with the microscope unit 100 and transmits the image and video data received from the microscope unit 100 to the image/video acquisition unit 210. In addition, in order to automatically switch the operation mode of the digital advertisement system from the normal mode to the diagnostic mode when the microscope unit 100 is operating, the microscope interface unit 205 is connected to the microscope unit 100, that is, on/off. The status is monitored and the status is transmitted to the display management unit 215.

영상/비디오 획득부(210)는 어떤 파일 포맷에서 고객의 모발/두피 케어 진단용 영상 및 비디오 데이터를 고객을 위하여 할당된 메모리에 저장하고 영상/비디오 인식을 위하여 효과적인 어떤 파일 포맷으로 영상 및 비디오 데이터를 변환한 후에 영상/비디오 인식부(220)로 전달한다. 또한 노말 모드로부터 진단 모드로 디지털 광고 시스템의 동작 모드를 자동적으로 스위칭하기 위하여, 영상/비디오 획득부(210)는 영상 및 비디오 데이터가 적합한지 또는 부적합한지 여부를 모니터링하고 적합/부적합 상태를 디스플레이 관리부(215)로 전달한다. The image/video acquisition unit 210 stores the image and video data for hair/scalp care diagnosis of the customer in a file format in a memory allocated for the customer, and stores the image and video data in a file format that is effective for image/video recognition. After conversion, it is transmitted to the image/video recognition unit 220. In addition, in order to automatically switch the operation mode of the digital advertisement system from the normal mode to the diagnostic mode, the image/video acquisition unit 210 monitors whether the image and video data are appropriate or inappropriate, and the display management unit checks whether the image and video data are appropriate or inappropriate. Forward to (215).

디스플레이 관리부(215)는 현미경 유닛(100)의 온/오프 상태에 따라 또는 현미경 유닛(100)으로부터 입력되는 영상/비디오 데이터의 적합/부적합 상태에 따라 노말 모드에서 진단 모드로 그리고 그 반대로 스위칭한다. 디스플레이 관리부(215)는 또한 각 모드에 대하여 디스플레이 유닛(300)의 복수개의 윈도우를 관리하고 동작시킨다. The display management unit 215 switches from the normal mode to the diagnosis mode and vice versa according to the on/off state of the microscope unit 100 or the conformance/nonconformity state of image/video data input from the microscope unit 100. The display manager 215 also manages and operates a plurality of windows of the display unit 300 for each mode.

영상/비디오 인식부(220)는 영상/비디오 획득부(210)로부터 수신하는 영상 및 비디오 데이터의 상태를 이미지 자동인식으로 분석하고, 고객의 모발 및 두피에 대한 증상을 인식하며, 인식 결과를 정량화하고, 텍스쳐, 피부의 흠, 공극, 밝기, 모발 손실, 모발 약화, 모발 두피 장애 및 착색과 같은 모발/두피의 다양한 요소들에 따라 카테고리화된 증상들을 포함하는 증상 카테고리 정보 테이블에 정량화 결과를 저장한다. 영상/비디오 인식의 과정 및 결과에 관한 상세 정보는 진단 분석부(230)에게 전달되고 요약된 정보는 증상-연계된 광고 처리부(235)로 전달된다. The image/video recognition unit 220 analyzes the state of the image and video data received from the image/video acquisition unit 210 by automatic image recognition, recognizes symptoms of the customer's hair and scalp, and quantifies the recognition result. And, the quantification result is stored in the symptom category information table that includes symptoms categorized according to various factors of hair/scalp such as texture, skin blemishes, voids, brightness, hair loss, hair weakness, hair scalp disorder and coloration. do. Detailed information on the process and result of the image/video recognition is transmitted to the diagnosis analysis unit 230 and the summarized information is transmitted to the symptom-linked advertisement processing unit 235.

광고 처리부(225)는 노말 모드에서 실시되는 일반적인 광고 내용을 관리하고 작동시킨다. The advertisement processing unit 225 manages and operates general advertisement contents performed in the normal mode.

진단 분석부(230)는 영상/비디오 인식부(220)로부터 수신한 영상/비디오 인식의 과정 및 결과에 관한 상세 정보를 고객의 모발 및 두피 진단의 이력을 관리하는 데이터베이스에 저장하고 누적된 데이터에 기초하여 모발/두피 케어에서 진단의 상태 및 전척의 정도를 분석한다. 게다가, 진단 분석부(230)는 분석된 정보를 고객에게 유용한 포맷으로 처리하고 처리된 정보를 제공한다. The diagnosis analysis unit 230 stores detailed information on the process and result of image/video recognition received from the image/video recognition unit 220 in a database that manages the history of the customer's hair and scalp diagnosis, and stores the accumulated data. On the basis of the hair/scalp care, the condition of diagnosis and the degree of full scale are analyzed. In addition, the diagnostic analysis unit 230 processes the analyzed information in a format useful to the customer and provides the processed information.

증상-연계된 광고 처리부(235)는 진단 모드에서 실시되는 광고 내용을 관리하고 작동시킨다. 증상-연계된 광고 처리부(235)는 고객이 모발/두피 케어 진단을 받는 동안에 영상/비디오 인식부(220)로부터 수신한 영상/비디오 인식의 요약 정보에 따라 광고 윈도우에 고객의 증상과 관련된 제품 또는 서비스를 디스플레이한다. The symptom-linked advertisement processing unit 235 manages and operates the advertisement contents executed in the diagnosis mode. Symptom-linked advertisement processing unit 235 displays the product or product related to the customer's symptoms in the advertisement window according to the summary information of the image/video recognition received from the image/video recognition unit 220 while the customer is receiving a hair/scalp care diagnosis. Display the service.

데이터 세트 관리부(240)는 영상/비디오 자동인식을 위하여, 정적 참조 영상/비디오 데이터 세트 및 동적 참조 영상/비디오 데이터 세트로 구성되는 참조 데이터 세트를 저장하고 관리한다. 정적 참조 영상/비디오 데이트 세트는 초기에 공장에서 설치된 데이터 세트를 말하고, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템이 공장으로부터 출하될 때 제조자로부터 제공된다. 동적 참조 영상/비디오 데이터 세트는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)이 작동하는 서비스 장소로부터 수집된 모발/두피 영상 및 비디오 데이터를 처리함에 의하여 획득되는 참조 데이터 세트를 말한다. 데이터 세트 관리부(240)는 초기 참조 데이터 세트 및 서비스 동안에 생성되는 동적 참조 데이터 세트를 통합함으로써 품질, 즉 영상/비디오 데이터의 자동인식의 정도를 개선한다. The data set management unit 240 stores and manages a reference data set composed of a static reference image/video data set and a dynamic reference image/video data set for automatic image/video recognition. The static reference image/video data set refers to a data set initially installed in the factory, and is provided by a manufacturer when a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition is shipped from the factory. The dynamic reference image/video data set is a reference obtained by processing the hair/scalp image and video data collected from the service location where the digital advertisement system 10 with the hair/scalp care diagnosis function using automatic image recognition operates. Refers to the data set. The data set management unit 240 improves the quality, that is, the degree of automatic recognition of image/video data by integrating the initial reference data set and the dynamic reference data set generated during the service.

통신 및 장치 처리부(245)는 클라이언트 노드 또는 외부 서버와의 통신을 통하여 광고 내용을 수신하거나 진단 결과를 고객에게 제공한다. 모바일 앱 또는 컴퓨터 장비가 외부 장치로서 사용될 수 있다. The communication and device processing unit 245 receives advertisement content or provides a diagnosis result to a customer through communication with a client node or an external server. A mobile app or computer equipment can be used as an external device.

전원 관리부(250)는 모발/두피 케어 진단 기능을 갖는 디지털 사이니지 시스템(10)의 작동에 따라 디스플레이 유닛(300) 및 현미경 유닛(100)에게 제공되는 전원을 관리한다. The power management unit 250 manages power provided to the display unit 300 and the microscope unit 100 according to the operation of the digital signage system 10 having a hair/scalp care diagnosis function.

도 3은 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 디스플레이 유닛(300) 및 그것의 모드 스위칭을 설명하는 개략도이다.3 is a schematic diagram illustrating a display unit 300 of a digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention and mode switching thereof.

도 3을 참조하면, 디스플레이 유닛(300)의 작동 모드는 현미경 유닛(100)이 작동하거나 모발/두피 영상 및 비디오 데이터를 획득할 때 노말 모드에서 진단 모드로 변경된다. 이때, 노말 모드에서는 디스플레이 유닛(300)은 단지 광고를 디스플레이하고, 진단 모드에서는, 디스플레이 유닛(300)의 복수개의 윈도우 중에서 한 윈도우(306)는 진단용 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이하고, 복수개의 윈도우 중에서 다른 두개의 윈도우(302 및 304)는 광고를 디스플레이한다. Referring to FIG. 3, the operation mode of the display unit 300 is changed from a normal mode to a diagnosis mode when the microscope unit 100 operates or acquires hair/scalp image and video data. In this case, in the normal mode, the display unit 300 only displays advertisements, and in the diagnosis mode, one window 306 of the plurality of windows of the display unit 300 displays the hair/scalp image and video data for diagnosis, and the diagnosis result. And, the other two windows 302 and 304 among the plurality of windows display advertisements.

도 4는 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템에서 현미경 및 영상/비디오 획득의 상태에 기초한 모드 스위칭을 설명하는 개략도이다.4 is a schematic diagram illustrating mode switching based on a state of a microscope and an image/video acquisition in a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention.

도 4를 참조하면, 고객이 모발/두피 케어 진단 서비스를 받는 동안에, 디스플레이 유닛(300)은 영상/비디오 인식부(220)로부터 수신한 영상/비디오 인식의 요약 정보에 따라 광고 윈도우(304)에 고객의 증상과 관련된 제품 또는 서비스를 디스플레이한다. 즉, 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)은 특정한 증상을 가지는 고객에게 증상-연계된 광고를 제공한다. 이때, 모발/두피 케어 진단 서비스뿐만 아니라 특정한 증상과 관련된 모발/두피 케어 정보도 고객에게 제공되므로, 광고의 효과를 개선시킨다. Referring to FIG. 4, while a customer receives a hair/scalp care diagnosis service, the display unit 300 displays the advertisement window 304 according to the summary information of the image/video recognition received from the image/video recognition unit 220. Display products or services related to the customer's symptoms. That is, the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention provides symptom-linked advertisements to customers with specific symptoms. At this time, not only the hair/scalp care diagnosis service but also hair/scalp care information related to specific symptoms are provided to the customer, thereby improving the effectiveness of the advertisement.

도 5는 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템에서 동적 자가 학습 참조 데이터 세트의 생성 및 통합 참조 데이터 세트를 형성하기 위하여 초기에 공장에서 설치된 참조 데이터 세트와의 통합을 설명하는 개략도이다.5 is an initial factory in order to generate a dynamic self-learning reference data set and form an integrated reference data set in a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention. Schematic diagram illustrating integration with the installed reference data set.

도 5를 참조하면, 영상/비디오 자동인식 참조 데이터 세트는 참조 데이터 세트를 초기 참조 데이터 세트(410), 동적 자가 학습 참조 데이터 세트(420), 및 초기 참조 데이터 세트(410)와 동적 자가 학습 참조 데이터 세트(420)를 통합함에 의하여 생성되는 통합 참조 데이터 세트(430)로 분류되는 식별에 따라 수집된다. 표준 데이터베이스는 모든 참조 데이터 세트를 통합함에 의하여 수립되고 표준 데이터베이스의 참조 데이터 세트(440)는 영상/비디오 자동인식의 과정에서 사용된다. 표준 데이터베이스의 참조 데이터 세트(440)는 동적 참조 데이터 세트(420)의 재생 및 피드백 과정을 통하여 성장한다. 5, the image/video automatic recognition reference data set refers to the reference data set as an initial reference data set 410, a dynamic self-learning reference data set 420, and an initial reference data set 410 and a dynamic self-learning reference. It is collected according to the identification categorized as a unified reference data set 430 created by integrating data set 420. The standard database is established by integrating all reference data sets, and the reference data set 440 of the standard database is used in the process of image/video automatic recognition. The reference data set 440 of the standard database grows through the reproduction and feedback process of the dynamic reference data set 420.

초기 참조 데이터 세트(410) 및 동적 자가 학습 참조 데이터 세트(420)는 분할 라벨링(segmentation labelling)에 의하여 식별될 수 있고, 참조 데이터 세트는 활성 또는 비활성(부적합) 상태의 식별로 수집된다. The initial reference data set 410 and the dynamic self-learning reference data set 420 can be identified by segmentation labeling, and the reference data set is collected with identification of an active or inactive (non-conforming) state.

초기 참조 데이터 세트(410)는 인공적으로 수집된 데이터의 인공적 데이터 마사지(massage)에 의하여 생성될 수 있다. 초기 참조 데이터 세트(410)의 생성은 모발/두피의 영상/비디오 데이터의 인공적 수집 및 인공적 학습 과정의 실시, 즉 수집된 데이터를 인식용 참조 데이터 세트로 변환하는 것에 의하여 실시된다. 초기 참조 데이터 세트(410)의 생성을 위하여 영상/비디오 데이터를 수집할 때, 현미경 유닛(100)은 적절한 데이터 세트 모델이 선택되어 서비스 장소에 적용될 수 있도록 모발 또는 두피의 다양한 위치들에 적용될 수 있다. 초기 참조 데이터 세트(410)는 현미경 유닛(100)의 해상도 및 배율에 따라 생성될 수 있다. The initial reference data set 410 may be generated by artificial data massage of artificially collected data. The generation of the initial reference data set 410 is performed by artificially collecting image/video data of the hair/scalp and performing an artificial learning process, that is, by converting the collected data into a reference data set for recognition. When collecting image/video data to generate the initial reference data set 410, the microscope unit 100 may be applied to various locations of the hair or scalp so that an appropriate data set model is selected and applied to a service location. . The initial reference data set 410 may be generated according to the resolution and magnification of the microscope unit 100.

동적 자가 학습 참조 데이터 세트(420)는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)에 설치된 소프트웨어로 데이터를 자동적으로 수집하거나 생성함에 의하여 생성될 수 있다. The dynamic self-learning reference data set 420 may be generated by automatically collecting or generating data with software installed in the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition.

동적 자가 학습 참조 데이터 세트(420)를 생성하는 과정 동안에, 현미경 유닛(100)의 해상도 및 배율 그리고 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)이 설치된 서비스 장소의 내부 조명의 밝기에 적응되는 상태 정보가 모발/두피 영상 및 비디오 데이터를 자동적으로 생성하고 그 데이터를 이용하여 자가 학습하는 소프트웨어에 의하여 생성된다. 그 결과를 서비스 장소의 상태 정보 데이터베이스에 적용함에 의하여, 자가 학습 파일들이 인공적인 데이터의 추가적 생성 및 학습 없이 계속적으로 업데이트된다. During the process of generating the dynamic self-learning reference data set 420, the resolution and magnification of the microscope unit 100 and the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition are installed. State information adapted to the brightness of the interior lighting is generated by software that automatically generates hair/scalp image and video data and uses the data to self-learn. By applying the result to the state information database of the service location, self-learning files are continuously updated without additional generation and learning of artificial data.

모발/두피에 관한 영상/비디오 자동인식의 기능은 현미경 유닛(100)으로부터 입력되는 영상 및 비디오 데이터로부터 상태 디스크립터(descriptor)를 분석함으로써 입력 상태를 인식할 수 있게 하고 그 상태를 자가 학습할 수 있게 하며 모발/두피의 상태를 정확하게 인식할 수 있게 한다. The function of automatic image/video recognition on the hair/scalp enables the recognition of the input state by analyzing the state descriptor from the image and video data input from the microscope unit 100 and enables self-learning of the state. It makes it possible to accurately recognize the condition of the hair/scalp.

모발/두피 영상/비디오 자동인식 소프트웨어는 영상/비디오 데이터의 상태 디스크립터 모두를 N 대표 상태 디스크립터 타입으로 분류한다. 모발/두피 영상/비디오 자동인식 소프트웨어는 N 대표 상태 디스크립터에 따라 모발/두피 영상/비디오 데이터의 각 상태 디스크립터를 분석하고 그것을 가장 유사한 대표 상태 디스크립터 타입으로 분류한다. 대표 상태 디스크립터는 상태 디스크립터들의 다양한 타입들의 유사성을 통계적으로 분석함으로써 선택될 수 있다. 예를 들어, 케이-민 클러스터링 알고리듬(K-mean clustering algorithm)을 적용함으로써, 다양한 타입들의 상태 디스크립터들이 N 대표 타입으로 분류될 수 있다. 모발/두피의 상태는 입력된 영상/비디오 데이터를 N 대표 타입의 하나로 분류함으로써 인식될 수 있다. Hair/scalp image/video automatic recognition software classifies all state descriptors of image/video data into N representative state descriptor types. The hair/scalp image/video automatic recognition software analyzes each state descriptor of hair/scalp image/video data according to the N representative state descriptors and classifies it into the most similar representative state descriptor type. The representative state descriptor can be selected by statistically analyzing the similarity of various types of state descriptors. For example, by applying the K-mean clustering algorithm, various types of state descriptors can be classified into N representative types. The state of the hair/scalp can be recognized by classifying the input image/video data into one of the N representative types.

이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 모발/두피 영상/비디오 자동인식 소프트웨어는 동적 자가 학습 상태 타입, 즉 대표 상태 디스크립터 및 해당 모발/두피 영상/비디오 상태 확률을 상태 정보 데이터베이스에 저장한다. 동적 자가 학습에 의하여 생성되는 결과를 참조 데이터 세트 상태 정보 데이터베이스에 통합함으로써, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)은 추가적 인공적 데이터 생성 및 학습 없이 높은 정도의 성과를 가지는 서비스를 제공할 수 있다. 게다가, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 모발/두피 상태에 대한 자동인식의 지능은 계속적으로 성장할 수 있어 높은 정도의 성과가 자가 학습 데이터 세트를 계속적으로 업데이트함으로써 달성될 수 있다. The hair/scalp image/video automatic recognition software of the digital advertisement system 10 with a hair/scalp care diagnosis function using automatic image recognition is a dynamic self-learning state type, i.e., a representative state descriptor and the corresponding hair/scalp image/video state. Store the probability in the state information database. By integrating the results generated by the dynamic self-learning into the reference data set state information database, the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition provides a high degree of accuracy without additional artificial data generation and learning. We can provide services that have performance. In addition, the intelligence of the automatic recognition of the hair/scalp condition of the digital advertising system 10 with a hair/scalp care diagnosis function using automatic image recognition can continue to grow, so that a high degree of performance continues to build self-learning data sets. This can be achieved by updating to.

도 6은 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템의 동작 시나리오를 설명하는 개략도이다.6 is a schematic diagram illustrating an operation scenario of a digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention.

도 6을 참조하면, 본 발명의 한 실시예에 따른 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)은 광고 모드에서 처음으로 동작한다. 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 프로세스 유닛(200)은 현미경 유닛(100)의 연결 상태를 모니터링한다. 현미경 유닛(100)의 연결 상태가 오프(off)이면, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)은 광고 모드에서 계속적으로 동작한다. 그러나, 현미경 유닛(100)의 연결 상태가 온(on)이면, 영상/비디오 인식이 실행된다. 그러면, 프로세스 유닛(200)은 현미경 유닛(100)으로부터 수신한 영상/비디오 데이터가 활성인지 아니면 비활성인지 여부를 결정하고, 영상/비디오 데이터가 활성일 때, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)은 진단 모드에서 동작하기 시작한다. 즉, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 동작 모드는 영상 및 비디오 데이터가 활성일 때 노말 모드에서 진단 모드로 자동적으로 스위칭된다. Referring to FIG. 6, a digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition according to an embodiment of the present invention operates in an advertisement mode for the first time. The process unit 200 of the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition monitors the connection state of the microscope unit 100. When the connection state of the microscope unit 100 is off, the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition continues to operate in the advertisement mode. However, when the connection state of the microscope unit 100 is on, image/video recognition is performed. Then, the process unit 200 determines whether the image/video data received from the microscope unit 100 is active or inactive, and when the image/video data is active, hair/scalp care using automatic image recognition The digital advertisement system 10 having a diagnostic function starts to operate in a diagnostic mode. That is, the operation mode of the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition is automatically switched from the normal mode to the diagnosis mode when image and video data are active.

그러면, 프로세스 유닛(200)의 영상/비디오 인식부(220)는 영상/비디오 획득부(210)로부터 수신한 영상 및 비디오 데이터의 상태를 자동으로 인식하여 분석하고, 고객의 모발 및 두피에 대한 증상을 인식하며, 인식 결과를 정량화하고, 텍스처, 피부의 흠, 공극, 밝기, 모발 손실, 모발 약화, 모발 두피 장애 및 착색과 같은 모발/두피의 다양한 요소들에 따라 분류되는 증상들을 포함하는 증상 카테고리 정보 테이블에 정량화 결과를 저장한다. 영상/비디오 인식의 과정 및 결과에 관한 상세 정보는 진단 분석부(230)로 전달되고, 요약 정보는 증상-연계된 광고 처리부(235)로 전달된다. Then, the image/video recognition unit 220 of the process unit 200 automatically recognizes and analyzes the state of the image and video data received from the image/video acquisition unit 210 and analyzes the symptoms of the customer's hair and scalp. Recognizes, quantifies the recognition results, and includes symptoms classified according to various factors of hair/scalp such as texture, skin flaws, voids, brightness, hair loss, hair weakness, hair scalp disorders and pigmentation. The quantification result is stored in the information table. Detailed information on the process and result of the image/video recognition is transmitted to the diagnosis analysis unit 230, and the summary information is transmitted to the symptom-linked advertisement processing unit 235.

상기한 시나리오에서, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 동작 모드는 영상 및 비디오 데이터가 적합할 때 노말 모드에서 진단 모드로 자동적으로 스위칭된다. 그러나, 다른 실시예에서는, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 동작 모드는 현미경 유닛(100)의 연결 상태가 온(on)일 때 노말 모드에서 진단 모드로 자동적으로 스위칭될 수도 있다. 다른 실시예에서는, 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템(10)의 동작 모드는 현미경 유닛(100)의 상태를 체크하는 절차 없이, 영상 및 비디오 데이터가 적합할 때 노말 모드에서 진단 모드로 자동적으로 스위칭될 수도 있다. In the above scenario, the operation mode of the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition is automatically switched from the normal mode to the diagnosis mode when the image and video data are appropriate. However, in another embodiment, the operation mode of the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition is diagnosed in the normal mode when the connection state of the microscope unit 100 is on. It can also be automatically switched to mode. In another embodiment, the operation mode of the digital advertisement system 10 having a hair/scalp care diagnosis function using automatic image recognition is when image and video data are appropriate without a procedure for checking the state of the microscope unit 100 It can also be automatically switched from normal mode to diagnostic mode.

10: 디지털 광고 시스템 100: 현미경 유닛
200: 프로세스 유닛 300: 디스플레이 유닛10: digital advertising system 100: microscope unit
200: process unit 300: display unit

Claims (4)

사용자의 모발/두피를 스캔하고 모발/두피 영상 및 비디오 데이터를 획득하는 현미경 유닛, 상기 현미경 유닛과 연결되고 상기 모발/두피 영상 및 비디오 데이터를 자동으로 인식하고 처리하는 프로세스 유닛, 및 상기 프로세스 유닛과 연결되고 광고 또는 상기 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이하기 위한 복수개의 윈도우를 디스플레이하는 디스플레이 유닛을 포함하는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템이고,
상기에서, 상기 현미경 유닛은 상기 모발/두피 영상 및 비디오 데이터의 배율 및 해상도를 조절하고, 상기 모발/두피 영상 및 비디오 데이터를 상기 프로세스 유닛에게 전달하며,
상기 프로세스 유닛은 상기 현미경 유닛의 연결 상태를 모니터링하고, 상기 현미경 유닛으로부터 상기 모발/두피 영상 및 비디오 데이터를 수신하며, 상기 모발/두피 영상 및 비디오 데이터를 자동으로 인식하여 저장하고, 상기 현미경 유닛이 작동하여 상기 모발/두피 영상 및 비디오 데이터를 획득할 때 노말 모드에서 진단 모드로 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 상기 디지털 광고 시스템의 동작 모드를 스위칭하며, 이때 노말 모드에서는 상기 프로세스 유닛은 광고 내용을 상기 디스플레이 유닛에게 전달하여 복수개의 윈도우가 광고를 디스플레이하게 하고, 진단 모드에서는 상기 프로세스 유닛은 광고 내용 그리고 상기 모발/두피 영상 및 비디오 데이터를 상기 디스플레이 유닛에게 전달하여 복수개의 윈도우 중 하나는 상기 모발/두피 영상 및 비디오 데이터 그리고 진단 결과를 디스플레이하고, 복수개의 윈도우 중 다른 것은 광고를 디스플레이하는 것을 특징으로 하는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템.A microscope unit that scans a user's hair/scalp and acquires hair/scalp image and video data, a process unit connected to the microscope unit and automatically recognizes and processes the hair/scalp image and video data, and the process unit A digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition that is connected and includes a display unit that displays advertisements or the hair/scalp image and video data, and a plurality of windows for displaying the diagnosis result,
In the above, the microscope unit adjusts the magnification and resolution of the hair/scalp image and video data, and transmits the hair/scalp image and video data to the process unit,
The process unit monitors the connection state of the microscope unit, receives the hair/scalp image and video data from the microscope unit, automatically recognizes and stores the hair/scalp image and video data, and the microscope unit When operating to obtain the hair/scalp image and video data, the operation mode of the digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition is switched from the normal mode to the diagnosis mode. The process unit delivers the advertisement content to the display unit so that a plurality of windows display the advertisement, and in the diagnosis mode, the process unit delivers the advertisement content and the hair/scalp image and video data to the display unit to provide a plurality of windows. One of them displays the hair/scalp image and video data, and the diagnosis result, and the other of the plurality of windows displays an advertisement. A digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition. 제1항에 있어서,
상기 프로세스 유닛은
상기 현미경 유닛과의 연결을 관리하고, 상기 현미경 유닛의 연결 상태(on/off state)를 모니터링하며, 상기 현미경 유닛으로부터 상기 모발/두피 영상 및 비디오 데이터를 수신하는 현미경 인터페이스부,
영상/비디오 자동인식을 위하여, 정적 참조 영상/비디오 데이터 세트 및 동적 참조 영상/비디오 데이터 세트로 구성되는 참조 데이터 세트를 저장하고 관리하는 데이트 세트 관리부,이때 상기 정적 참조 영상/비디오 데이터 세트는 초기에 공장에서 설치된 데이터 세트이고 상기 동적 참조 영상/비디오 데이터 세트는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 상기 디지털 광고 시스템이 작동하는 서비스 장소로부터 수집된 상기 모발/두피 영상 및 비디오 데이터를 처리함에 의하여 획득된 참조 데이터 세트임,
클라이언트 노드 또는 외부 서버와의 통신을 통하여 상기 광고 내용을 수신하거나 또는 상기 사용자에게 상기 진단 결과를 제공하는 통신 및 장치 처리부,
상기 디스플레이 유닛 및 상기 현미경 유닛에게 공급되는 전원을 관리하는 전원관리부, 및
노말 모드에서 실행되는 상기 광고 내용을 관리하고 동작시키는 광고처리부를 포함하는 것을 특징으로 하는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템.The method of claim 1,
The process unit
A microscope interface unit that manages the connection with the microscope unit, monitors the on/off state of the microscope unit, and receives the hair/scalp image and video data from the microscope unit,
For automatic image/video recognition, a data set management unit that stores and manages a reference data set consisting of a static reference image/video data set and a dynamic reference image/video data set, wherein the static reference image/video data set is initially Factory-installed data set, and the dynamic reference image/video data set contains the hair/scalp image and video data collected from a service location where the digital advertisement system operates with a hair/scalp care diagnosis function using automatic image recognition. It is a reference data set obtained by processing,
A communication and device processing unit that receives the advertisement content through communication with a client node or an external server or provides the diagnosis result to the user,
A power management unit for managing power supplied to the display unit and the microscope unit, and
A digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition, comprising: an advertisement processing unit that manages and operates the advertisement content executed in a normal mode. 제2항에 있어서,
상기 프로세스 유닛은
상기 현미경 유닛의 연결 상태에 따라 또는 상기 현미경 유닛으로부터 입력되는 상기 영상/비디오 데이터의 적합/부적합 상태(valid/idle status)에 따라 모말 모드에서 진단 모드로 또는 그 반대로 스위치하고, 각 모드에 대하여 상기 디스플레이 유닛의 복수개의 윈도우를 관리하고 작동시키는 디스플레이 관리부,
어떤 파일 포맷에서 사용자의 모발/두피 케어 진단용 상기 영상 및 비디오 데이터를 사용자를 위하여 할당된 메모리에 저장하고, 영상/비디오 자동인식을 위하여 효과적인 어떤 파일 포맷으로 상기 영상 및 비디오 데이터를 변환한 후에 영상/비디오 인식부로 전달하며, 상기 영상 및 비디오 데이터가 적합한지 또는 부적합한지 여부를 모니터링하고, 상기 디스플레이 관리부가 노말 모드에서 진단 모드로 상기 디지털 사이니지 시스템의 동작 모드를 자동적으로 스위칭하도록 상기 디스플레이 관리부로 적합/부적합 상태를 전달하는 영상/비디오 획득부,
상기 영상/비디오 획득부로부터 수신한 상기 영상 및 비디오 데이터의 상태를 자동으로 인식하여 분석하고, 사용자의 두발 및 두피에 대한 증상을 인식하며, 인식 결과를 정량화하고, 텍스쳐, 피부의 흠, 공극, 밝기, 모발 손실, 모발 약화, 모발 두피 장애, 착색과 같은 모발/두피의 다양한 요소들에 따라 분류되는 증상들을 포함하는 증상 카테고리 정보 테이블에 정량화 결과를 저장하며, 상기 영상/비디오 인식의 상기 정량화 결과에 관한 상세 정보를 진단 분석부로 전달하는 상기 영상/비디오 인식부,
사용자의 모발 및 두피 진단의 이력을 관리하는 데이터베이스에 상기 정량화 결과에 관한 상세 정보를 저장하고, 누적된 데이터에 기초하여 진단의 상태 및 모발/두피 케어에서 진척의 정도를 분석하며, 고객에게 유용한 포맷으로 상기 분석된 정보를 처리하고, 상기 처리된 정보를 제공하는 상기 진단 분석부, 및
상기 진단 모드에서 실행되는 상기 광고 내용을 관리하고 작동시키며, 사용자가 모발/두피 케어 또는 진단을 받고 있는 동안에 상기 영상/비디오 인식부로부터 수신한 상기 영상/비디오 인식의 요약된 정보에 따라 광고 윈도우에 사용자의 증상과 관련된 상품 또는 서비스를 디스플레이하는 증상-연계된 광고 처리부를 더 포함하는 것을 특징으로 하는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템.The method of claim 2,
The process unit
Switching from the parental mode to the diagnostic mode or vice versa according to the connection status of the microscope unit or the valid/idle status of the image/video data input from the microscope unit, and for each mode, the A display management unit that manages and operates a plurality of windows of the display unit,
In a file format, the image and video data for diagnosis of the user's hair/scalp care are stored in a memory allocated for the user, and the image and video data are converted into a file format that is effective for automatic image/video recognition. It is transmitted to a video recognition unit, and is suitable as the display management unit to monitor whether the image and video data are appropriate or inappropriate, and to automatically switch the operation mode of the digital signage system from the normal mode to the diagnosis mode by the display management unit. /Video/video acquisition unit that delivers the status of nonconformity
It automatically recognizes and analyzes the state of the image and video data received from the image/video acquisition unit, recognizes symptoms of the user's hair and scalp, quantifies the recognition result, and provides texture, skin flaws, voids, Quantification results are stored in a symptom category information table including symptoms classified according to various factors of hair/scalp such as brightness, hair loss, hair weakness, hair scalp disorder, and coloring, and the quantification result of the image/video recognition The image/video recognition unit for transmitting detailed information about the diagnosis and analysis unit,
Stores detailed information on the quantification results in a database that manages the user's hair and scalp diagnosis history, analyzes the diagnosis status and progress in hair/scalp care based on accumulated data, and is a useful format for customers The diagnostic analysis unit that processes the analyzed information and provides the processed information, and
It manages and operates the advertisement content executed in the diagnosis mode, and displays the advertisement window according to the summary information of the image/video recognition received from the image/video recognition unit while the user is receiving hair/scalp care or diagnosis. A digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition, characterized in that it further comprises a symptom-linked advertisement processing unit that displays a product or service related to a user's symptoms. 제1항에 있어서,
상기 진단 결과는 모바일 앱을 통하여 사용자에게 제공되는 것임을 특징으로 하는 이미지 자동인식을 활용한 모발/두피 케어 진단 기능을 갖는 디지털 광고 시스템.
The method of claim 1,
A digital advertisement system having a hair/scalp care diagnosis function using automatic image recognition, characterized in that the diagnosis result is provided to a user through a mobile app.
KR1020190129978A 2019-10-18 2019-10-18 Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition KR20210046360A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190129978A KR20210046360A (en) 2019-10-18 2019-10-18 Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190129978A KR20210046360A (en) 2019-10-18 2019-10-18 Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition

Publications (1)

Publication Number Publication Date
KR20210046360A true KR20210046360A (en) 2021-04-28

Family

ID=75721090

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190129978A KR20210046360A (en) 2019-10-18 2019-10-18 Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition

Country Status (1)

Country Link
KR (1) KR20210046360A (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101622147B1 (en) 2014-06-24 2016-05-19 사운드그래프 Advertisement system and method using digital signage

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101622147B1 (en) 2014-06-24 2016-05-19 사운드그래프 Advertisement system and method using digital signage

Similar Documents

Publication Publication Date Title
CN107680019B (en) Examination scheme implementation method, device, equipment and storage medium
US11140458B2 (en) System and method for dynamic advertisements driven by real-time user reaction based AB testing and consequent video branching
CN112235613B (en) Video processing method and device, electronic equipment and storage medium
CN113159091B (en) Data processing method, device, electronic equipment and storage medium
CN111432282B (en) Video recommendation method and device
CN112911324B (en) Content display method and device for live broadcast room, server and storage medium
KR102547527B1 (en) Method and device for labeling objects
US11875365B2 (en) User experience computing system for gathering and processing user experience information
CN113703585A (en) Interaction method, interaction device, electronic equipment and storage medium
CN116206318A (en) Hotel evaluation feedback method, system, equipment and storage medium
CN116228319A (en) Intelligent advertisement putting method and system based on buried points
CN116051192A (en) Method and device for processing data
KR20210046360A (en) Digital Advertising System With Hair/Skin Care Diagnosis Function Based On Image Automatic Recognition
US11506508B2 (en) System and method using deep learning machine vision to analyze localities
US20200043053A1 (en) Digital signage system with hair/skin care diagnosis function and method for implementing the same
WO2020020095A1 (en) Method for configuring editing tool, and method for generating configuration parameter
CN102970214A (en) Method and system for displaying advertising information in instant messaging
CN111753107A (en) Resource display method, device, equipment and storage medium
KR20210152178A (en) Apparatus for Providing Dressing Table Curation Service and Driving Method Thereof, and Computer Readable Recording Medium
KR20210095764A (en) Method and System for Providing 3D Displayed Commercial Video based on Artificial Intellingence using Deep Learning
CN112738632B (en) Method, device and equipment for optimizing performance of smart television and storage medium
KR102500962B1 (en) Video based outsourcing brokerage and match service platform server and operation method of the platform server
WO2023143164A1 (en) Emotion recognition capability evaluation method and apparatus, and electronic device
US20230394858A1 (en) Resolution-based extraction of textual content from video of a communication session
CN111415186B (en) Marketing method, marketing device, computer device, and storage medium

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right