KR102564373B1 - 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법 - Google Patents

사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법 Download PDF

Info

Publication number
KR102564373B1
KR102564373B1 KR1020220111945A KR20220111945A KR102564373B1 KR 102564373 B1 KR102564373 B1 KR 102564373B1 KR 1020220111945 A KR1020220111945 A KR 1020220111945A KR 20220111945 A KR20220111945 A KR 20220111945A KR 102564373 B1 KR102564373 B1 KR 102564373B1
Authority
KR
South Korea
Prior art keywords
user
color index
whitening
tooth
teeth
Prior art date
Application number
KR1020220111945A
Other languages
English (en)
Inventor
양지연
Original Assignee
양지연
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 양지연 filed Critical 양지연
Priority to KR1020220111945A priority Critical patent/KR102564373B1/ko
Priority to KR1020230097402A priority patent/KR20240034105A/ko
Application granted granted Critical
Publication of KR102564373B1 publication Critical patent/KR102564373B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C19/00—Dental auxiliary appliances
    • A61C19/04—Measuring instruments specially adapted for dentistry
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
    • G01J3/508—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors measuring the colour of teeth
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Tourism & Hospitality (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Marketing (AREA)
  • Artificial Intelligence (AREA)
  • Primary Health Care (AREA)
  • Dermatology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Software Systems (AREA)
  • Strategic Management (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Audiology, Speech & Language Pathology (AREA)

Abstract

실시 예들은 미백 솔루션이 제공될 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계; 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계; 산출된 사용자의 치아에 대한 색상 지수, 및 산출된 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계; 미백 목표 색상을 갖기 위한 미백 솔루션을 사용자에게 제공하기 위해, 상기 사용자의 치아에 대한 미백 목표 색상 지수에 기초한 미백 솔루션 정보를 전자 장치로 전송하는 단계를 갖는 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법에 관련된다.

Description

사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법{System and method for providing customized teeth whitening solutions}
본 출원의 실시 예들은 보다 진정한 사용자 맞춤형 치아 미백 솔루션을 제공하는 시스템 및 방법에 관련된다.
사회가 발달하고 현대인들의 생활수준이 높아짐에 따라 대인관계가 중요한 시대가 되었으며, 이에 따라 치과 치료도 기능 중심의 치료에서 최근에는 심미 중심의 치료로 중점이 변해가고 있다.
치아의 심미성에 영향을 미치는 것은 치아의 배열, 크기, 색상, 질감 및 빛의 투과성 등을 들 수 있는데, 이 중에서 치아의 색상은 가장 민감하고 중요한 요소로서 누런 치아 또는 변색된 치아는 심미적인 문제뿐만 아니라 소극적인 대인관계를 유발하거나 자신감을 결여시키는 등의 심리적인 문제도 유발시킬 수 있다.
치아 변색의 원인은 내인적 요인과 외인적 요인으로 분류된다. 내인적 요인은 신생아 황달, 불소증 등을 포함한다. 한편, 외인적 요인은 치석이나 연성 침전물이 치아 표면에 부착되어 치아의 변색을 가져오는 것, 음식물에 포함된 이중결합의 발색상단을 가지는 물질이 치아 외측의 에나멜층에 침착되는 것 등을 포함할 수도 있다.
위와 같은 여러 요인에 의해 본래의 색상을 상실한 변색된 치아를 다시 하얗게 복원시키는 치과 치료를 치아 미백이라 한다.
종래의 치아 미백 방식은 모두 인적 자원에 기반한 임상 치아 미백 방식으로 진행되었다. 일 예에서, 종래의 치아 미백 방식 중 하나인 대면 미백 방식은 미백을 원하는 고객이 치과를 방문해서 비타 쉐이드 가이드(VITA shade guide)에 따라 치과 의사 또는 치과 위생사가 눈으로 고객의 치아 색상을 추측한 뒤 미백 처리를 수행하였다. 또는, 다른 일 예에서, 종래의 치아 미백 방식 중 하나인 자가(home-care) 미백 방식은 미백을 원하는 고객이 색상 표(color table)를 눈으로 보고 자신의 치아 색상을 선택해서 미백 처리를 수행하였다.
이와 같이, 종래의 치아 미백 방식은 단순히 참조 색상을 제공하고 사람이 치아 색상을 추측하여 치아 미백을 진행하였다.
도 1은, 사람의 색상 인식의 착시 현상을 설명하는 도면이다.
그러나, 사람이 직접 치아 색상을 추측하는 것은 매우 부정확하다. 도 1에 도시된 것처럼 사각형 A와 사각형 B는 동일한 색이지만, 주변의 영향에 따라 서로 다른 색상으로 인식되는 동색 착시 현상을 일으킨다. 이와 같이 인간의 시각 인식 능력은 피사체 주변의 색과 명암에 따라 같은 색도 다르게 인식하는 한계가 있다.
때문에, 종래의 치아 미백 방식은 치아 미백 결과를 정량적인 측면에서 정확하게 예측하지 못하는 문제가 있다.
그 결과, 고객은 치아 미백 제품의 광고 선전 내용과 다른 고객의 사용 후기 등과 같은 부정확한 자료에 의존하여 치아 미백제를 선택해야 하는 어려움을 겪고 있다.
대한민국 특허공개공보 제10-2019-0105333호 (2019.09.17.)
의약외품 치아미백제 효력시험법 가이드라인 (2015.12.)
상술한 문제를 해결하기 위해, 본 출원의 실시 예들은 치아 미백의 정량적인 효과를 정확하게 예측함으로써, 보다 진정한 사용자 맞춤형 치아 미백 솔루션을 제공하는 시스템 및 방법을 제공하고자 한다.
본 출원의 일 측면에 따른 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
미백 솔루션이 제공될 사용자의 치아 이미지 및 사용자의 얼굴 내 치아의 주변 영역을 포함한 사용자의 얼굴 이미지를 전자 장치로부터 수신하고,
수신한 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하며 - 상기 치아에 대한 색상 지수는 미리 설정된 복수의 치아 색상 중 어느 하나를 가리킴,
수신한 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하고 - 상기 피부에 대한 색상 지수는 미리 설정된 복수의 피부 색상 중 어느 하나를 가리킴,
산출된 사용자의 치아에 대한 색상 지수, 및 산출된 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하며, 그리고
미백 목표 색상을 갖기 위한 미백 솔루션을 사용자에게 제공하기 위해, 상기 사용자의 치아에 대한 미백 목표 색상 지수에 기초한 미백 솔루션 정보를 전자 장치로 전송하도록 구성될 수도 있다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
상기 사용자의 치아에 대한 색상 지수를 산출하기 위해, 사용자의 치아 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하고, CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 상기 사용자의 치아의 CIE 색상 값을 산출하며, 그리고 산출된 상기 사용자의 치아의 CIE 색상 값에 기초하여 해당 치아에 대한 색상 지수를 산출하며, 그리고
상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하기 위해, 사용자의 얼굴 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하고, CIE L*a*b 공간으로 변환된 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 치아의 주변 영역의 피부의 CIE 색상 값을 산출하도록 구성될 수도 있다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은, 치아에 대한 색상 지수를 산출하기 위해, 사용자의 치아 영역의 제1 치아 부분 내지 제3 치아 부분 중 하나 이상의 부분의 CIE 색상 값을 각각 산출하도록 더 구성될 수도 있다.
상기 제1 치아 부분은 치경부(Cervical part)를 포함하고, 상기 제3 치아 부분은 교합면 부분(Occlusal part)을 포함하며, 상기 제2 치아 부분은 제1 치아 부분과 제3 치아 부분 사이의 중간 부분(middle part)을 포함할 수도 있다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은, 사용자의 치아에 대한 미백 목표 색상 지수를 산출하기 위해, 사용자의 치아에 대한 색상 지수, 및 사용자의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하도록 구성될 수도 있다.
상기 솔루션 분석 모델은 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합과 미백 목표 색상 지수 간의 상관 관계를 추론하여, 사용자의 얼굴 내 주변 영역의 피부에 매칭하는 치아 색상을 가리키는, 사용자의 치아에 대한 미백 목표 색상 지수를 판단하도록 구성된다.
일 실시 예에서, 상기 솔루션 분석 모델은 복수의 트래이닝 샘플로 이루어진 트래이닝 데이터 세트를 이용하여 미리 학습되며,
각 트래이닝 샘플은 트래이닝 데이터 및 레이블 데이터를 각각 가지며,
상기 트래이닝 데이터는 샘플 사용자의 얼굴 이미지 및 치아 이미지로부터 산출된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 샘플 조합을 포함할 수도 있다.
일 실시 예에서, 상기 솔루션 분석 모델은 출력될 미백 목표 색상 지수를 입력된 치아에 대한 색상 지수로부터 상대적인 색상 지수로 표현 가능한, 복수의 클래스를 포함할 수도 있다.
솔루션 분석 모델을 학습하는데 이용된 레이블 데이터는 샘플 사용자의 치아에 대한 색상 지수와 샘플 사용자의 실제 미백 처리된 치아의 색상 지수의 차이 값과 동일 또는 유사한 클래스 값일 수도 있다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
사용자의 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수를 산출하기 위해, 사용자의 얼굴 이미지에서 상기 주변 영역을 상기 사용자의 치아에 대응한 주변 서브 영역으로 구획하여 각각의 서브 영역을 지정하고,
지정된 주변 서브 영역의 피부에 대한 색상 지수를 산출하며, 그리고
사용자의 각각의 치아에 대한 미백 목표 색상 지수를 각각 산출하기 위해, 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하도록 구성될 수도 있다.
상기 솔루션 분석 모델은, 주변 영역 전체 대비 개별 치아 각각의 해당 주변 서브 영역의 피부에 보다 조화를 이루는 미백 목표 색상 지수를 산출하도록, 사용자의 개별 치아에 대한 색상 지수, 및 해당 주변 서브 영역의 피부에 대한 색상 지수 각각의 값의 쌍을 트래이닝 데이터로 이용하여 학습된 것이다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
사용자의 치아에 대한 미백 목표 색상 지수를 보정하기 위해, 사용자의 치아에 대한 미백 목표 색상 지수 간의 편차로 이루어진 치아 미백 색상의 편차 분포를 산출하고, 상기 치아 미백 색상의 편차 분포에서 편차 외란을 검출하며, 상기 편차 외란이 검출된 경우, 상기 인접한 치아의 쌍의 미백 목표 색상 지수 간의 편차를 보다 감소하기 위해, 편차 외란과 관련된 인접한 치아의 쌍 중 적어도 하나의 치아에 대한 미백 목표 색상 지수를 보정하도록 더 구성될 수도 있다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
사용자의 현재 치아에 대한 색상 지수와 미백 목표 색상 지수 간의 차이만큼의 미백 효과를 얻는데 요구되는 미백 방식, 용품, 회수, 기간 중 하나 이상의 해당 솔루션 정보를 포함한 솔루션 테이블을 미리 저장하고,
솔루션 정보를 포함한 미백 솔루션을 전자 장치로 전송하기 위해, 사용자의 치아에 대한 미백 목표 색상 지수를 위해 요구되는 솔루션 정보를 상기 솔루션 테이블에서 검색하도록 구성될 수도 있다.
일 실시 예에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
사용자에게 미백 솔루션을 수행할 치과 병원을 추천하기 위해, 미리 저장된 치과 병원 목록 중에서 사용자에게 제공될 미백 솔루션을 수행 가능한 적어도 하나의 치과 병원의 서브 목록을 검색하고, 서브 목록 내 각각의 치과 병원과 사용자 간의 지리적 거리에 기초하여 추천 치과 병원을 결정하도록 더 구성될 수도 있다.
본 출원의 다른 일 측면에 따른 컴퓨터 판독가능한 기록매체는 프로세서를 포함한 컴퓨팅 장치에 의해 판독가능하고, 상기 컴퓨팅 장치에 의해 동작 가능한 프로그램 명령어를 저장한다.
상기 프로그램 명령어는, 상기 컴퓨팅 장치의 프로세서에 의해 실행되는 경우,
미백 솔루션이 제공될 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계 - 상기 치아에 대한 색상 지수는 미리 설정된 복수의 치아 색상 중 어느 하나를 가리킴;
사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계 - 상기 사용자의 얼굴 이미지는 사용자의 얼굴 내 치아의 주변 영역을 포함하고, 상기 피부에 대한 색상 지수는 미리 설정된 복수의 피부 색상 중 어느 하나를 가리킴;
산출된 사용자의 치아에 대한 색상 지수, 및 산출된 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계; 및
미백 목표 색상을 갖기 위한 미백 솔루션을 사용자에게 제공하기 위해, 상기 사용자의 치아에 대한 미백 목표 색상 지수에 기초한 미백 솔루션 정보를 전자 장치로 전송하는 단계를 수행하기 위한 명령어를 포함할 수도 있다.
일 실시 예에서, 상기 사용자의 치아 이미지는 기준 치아를 포함하고,
상기 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계는,
상기 사용자의 기준 치아에 대한 색상 지수를 산출하는 것일 수도 있다.
일 실시 예에서, 상기 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계는,
사용자의 개별 치아 각각에 대한 색상 지수를 산출하는 것이고,
상기 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계는,
사용자의 얼굴 이미지에서 상기 주변 영역을 상기 사용자의 치아에 대응한 주변 서브 영역으로 구획하여 각각의 서브 영역을 지정하는 단계; 및
지정된 주변 서브 영역의 피부에 대한 색상 지수를 산출하는 단계를 포함할 수도 있다.
상기 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계는,
사용자의 각각의 치아에 대한 미백 목표 색상 지수를 각각 산출하기 위해, 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수에 기초하여 각 치아에 대한 미백 목표 색상 지수가 각각 산출되는 것일 수도 있다.
본 출원의 일 측면에 따른 사용자 맞춤형 치아 미백 솔루션 제공 시스템은 사용자 각각에 대해서 치아 색상의 단계별 맞춤 큐레이션 서비스를 개인 맞춤형 미백 솔루션으로 제공할 수 있다.
본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당해 기술분야에서의 통상의 기술자가 명확하게 이해할 수 있을 것이다.
본 발명 또는 종래 기술의 실시 예의 기술적 해결책을 보다 명확하게 설명하기 위해, 실시 예에 대한 설명에서 필요한 도면이 아래에서 간단히 소개된다. 아래의 도면들은 본 명세서의 실시 예를 설명하기 목적일 뿐 한정의 목적이 아니라는 것으로 이해되어야 한다. 또한, 설명의 명료성을 위해 아래의 도면들에서 과장, 생략 등 다양한 변형이 적용된 일부 요소들이 도시될 수 있다.
도 1은, 사람의 색상 인식의 착시 현상을 설명하는 도면이다.
도 2는, 본 출원의 일 측면에 따른 사용자 맞춤형 치아 미백 솔루션 제공 시스템과 관련된 네트워크 환경의 개략도이다.
도 3은, 본 출원의 일 실시 예에 따른, 전자 장치의 구성을 개략적으로 도시한 블록도이다.
도 4는, 본 출원의 일 실시 예에 따른, 사용자의 치아 이미지의 개략도이다.
도 5는, 본 출원의 일 실시 예에 따른, 복수의 치아 색상 유형에 따른 색상 지수를 도시한다.
도 6은, 본 출원의 일 실시 예에 따른, 복수의 피부 색상 유형에 따른 색상 지수를 도시한다.
도 7은, 본 출원의 일 실시 예에 따른, 치아에 대응한 주변 서브 영역의 개략도이다.
도 8은, 본 출원의 일 실시 예에 따른, 레이블 데이터의 개략도이다.
도 9는, 본 출원의 다른 일 측면에 따른, 사용자 맞춤형 미백 솔루션 제공 방법의 흐름도이다.
도 10은, 본 출원의 일 실시 예에 따른, 미백 목표 색상 산출 과정의 흐름도이다.
도 11은, 본 출원의 일 실시 예에 따른, 미백 목표 색상 산출 과정의 흐름도이다.
이하에서, 도면을 참조하여 본 출원의 실시 예들에 대하여 상세히 살펴본다.
그러나, 이는 본 개시(disclosure)를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 개시의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 명세서에서, "가진다," "가질 수 있다,""포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 단계, 부품, 요소 및/또는 성분 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재나 부가를 제외시키는 것이 아니다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
다양한 실시 예에서 사용된 "제 1", "제 2", "첫째" 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 해당 구성요소들을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들면, 제1 구성요소와 제2 구성요소는, 순서 또는 중요도와 무관하게, 서로 다른 구성요소를 나타낼 수 있다.
본 명세서에서 사용되는 단수 표현의 구성의 실시 예들은 상기 단수 표현과 관련된 문구들이 이와 명백히 반대의 의미를 나타내지 않는 한 복수 표현의 구성 들의 실시 예들도 포함한다.
본 명세서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to),"또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성(또는 설정)된"은 하드웨어적으로 "특별히 설계된(specifically designed to)"것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성(또는 설정)된 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 명세서에서, 색상(color)은 관찰자가 치아를 관찰한 시각 인지 결과를 의미한다. 상기 색상은 색채 및/또는 음영(shade)에 기초한다. 특정 색상 값을 산출하는 것은 특정 색체 값 및/또는 음영 값을 산출하는 것을 나타낸다.
도 2는, 본 출원의 일 측면에 따른 사용자 맞춤형 치아 미백 솔루션 제공 시스템과 관련된 네트워크 환경의 개략도이다.
실시 예들에 따른 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 전적으로 하드웨어이거나, 전적으로 소프트웨어이거나, 또는 부분적으로 하드웨어이고 부분적으로 소프트웨어인 측면을 가질 수 있다. 예컨대, 시스템은 데이터 처리 능력이 구비된 하드웨어 및 이를 구동시키기 위한 운용 소프트웨어를 통칭할 수 있다. 본 명세서에서 "부(unit)", "모듈(module)", "장치", 또는 "시스템" 등의 용어는 하드웨어 및 해당 하드웨어에 의해 구동되는 소프트웨어의 조합을 지칭하는 것으로 의도된다. 예를 들어, 하드웨어는 CPU(Central Processing Unit), GPU(Graphic Processing Unit) 또는 다른 프로세서(processor)를 포함하는 데이터 처리 가능한 컴퓨팅 장치일 수 있다. 또한, 소프트웨어는 실행중인 프로세스, 객체(object), 실행파일(executable), 실행 스레드(thread of execution), 프로그램(program) 등을 지칭할 수 있다.
도 2를 참조하면, 상기 네트워크 환경(100)은 하나 이상의 전자 장치(110), 전기 통신 네트워크(120), 및 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)을 포함한다. 특정 실시 예들에서, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)과 통신하는 전자 장치(110)는 솔루션을 제공 받는 사용자의 전자 장치(110-1)를 포함한다. 일부 실시 예들에서, 상기 전자 장치(110)는 사용자의 전자 장치(110-1) 및 의료진의 전자 장치(110-2)를 포함할 수도 있다.
상기 네트워크 환경(100)에서 전기 통신 네트워크(120)를 통해 상기 전자 장치(110)와 시스템(130)이 연결된다.
전기 통신 네트워크(120)는, 전자 장치(110)와 시스템(130)이 서로 데이터를 송수신할 수 있는 유/무선의 전기 통신 경로를 제공한다. 전기 통신 네트워크(120)는 특정한 통신 프로토콜에 따른 통신 방식에 한정되지 않으며, 구현 예에 따라 적절한 통신 방식이 사용될 수 있다. 예를 들어, 인터넷 프로토콜(IP) 기초의 시스템으로 구성되는 경우, 전기 통신 네트워크(120)는 유선 및/또는 무선 인터넷 망으로 구현될 수 있다. 또는 전자 장치(110)와 시스템(130)이 이동 통신 단말로서 구현되는 경우 전기 통신 네트워크는 셀룰러 네트워크 또는 WLAN(wireless local area network) 네트워크와 같은 무선망으로 구현될 수 있다.
상기 전자 장치(110)는 시스템(130)과 통신하는 클라이언트 단말 장치로서, 데이터를 처리할 수 있는 적어도 하나의 프로세서, 데이터를 저장하는 메모리, 데이터를 송/수신하는 통신부를 포함한다. 이러한 전자 장치(110)는 예를 들어, 랩탑 컴퓨터, 기타 컴퓨팅 장치, 태블릿, 셀룰러 폰, 스마트 폰, 스마트 워치, 스마트 글래스, 헤드 마운트 디스플레이(HMD), 기타 모바일 장치, 기타 웨어러블 장치로 구현될 수도 있다.
도 3은, 본 출원의 일 실시 예에 따른, 전자 장치의 구성을 개략적으로 도시한 블록도이다.
도 3을 참조하면, 상기 전자 장치(110)는 메모리(111), 통신부(112), 프로세서(113), 카메라(114), 입력 장치(115), 출력 장치(116)를 포함할 수도 있다.
메모리(111)는, 프로세서(113)와 연결되고 프로세서(113)의 동작을 위한 기본 프로그램, 응용 프로그램, 설정 정보, 프로세서(113)의 연산에 의하여 생성된 정보 등의 데이터를 저장할 수 있다. 메모리(111)는 휘발성 메모리, 비휘발성 메모리 또는 휘발성 메모리와 비휘발성 메모리의 조합으로 구성될 수 있다. 그리고, 메모리(111)는 프로세서(113)의 요청에 따라 저장된 데이터를 제공할 수 있다. 또한, 메모리(111)는 통신부(112)에서 수신한 데이터, 카메라(114)에서 촬영한 데이터, 프로세서(113)에서 생성되거나 처리된 데이터를 영구적으로 또는 임시로 저장할 수 있다.
메모리(111)는 HDD(Hard Disk Drive), SSD(Solid State Drive), CD(Compact Disc), RAM(Random Access Memory), Rom(Read Only Memory), 데이터를 영구적, 반영구적 또는 임시적으로 저장하는 다양한 기타 저장 장치를 포함할 수도 있다.
상기 메모리(111)는 프로세서(113)의 지시에 따라 상기 시스템 및 방법을 수행하기 위한 프로그램과 관련된, 저장된 데이터를 제공한다. 특정 실시 예들에서, 상기 메모리(111)는, 사용자 맞춤형 치아 미백 솔루션 제공 시스템 또는 방법을 수행하기 위한 프로그램(또는 애플리케이션)을 저장할 수도 있다.
통신부(112)는, 프로세서(113)와 연결되어 데이터를 송수신하며, 다른 전자 장치(110) 또는 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130) 등의 외부 장치들과 데이터를 송수신할 수 있다. 통신부(113)의 전부 또는 일부는 송신기(transmitter), 수신기(receiver), 송수신기(transceiver), 통신부(communication unit), 통신 모뎀(communication model) 또는 통신 회로(communication circuit)로 지칭할 수 있다. 통신부(112)는 유선 접속 시스템 및 무선 접속 시스템들인 IEEE(institute of electrical and electronics engineers) 802.xx 시스템, IEEE Wi-Fi 시스템, 3GPP(3rd generation partnership project) 시스템, 3GPP LTE(long term evolution) 시스템, 3GPP 5GNR(new radio) 시스템, 3GPP2 시스템, 블루투스(Bluetooth) 등 다양한 무선 통신 규격 중 적어도 하나를 지원할 수 있다.
프로세서(113)는, 본 발명에서 제안한 절차 및/또는 방법들을 구현하도록 구성될 수 있다. 프로세서(113)는 데이터 분석 알고리즘을 사용하여 결정되거나 생성된 정보에 기초하여, 전자 장치(110)의 적어도 하나의 실행 가능한 동작을 결정할 수 있다. 그리고, 프로세서(113)는 전자 장치 (111)의 구성 요소들을 제어하여, 결정된 동작을 수행할 수 있다. 이를 위해, 프로세서(113)는 메모리(111)의 데이터를 요청, 검색, 수신 또는 활용할 수 있고, 상기 적어도 하나의 실행 가능한 동작 중 예측되는 동작이나, 바람직한 것으로 판단되는 동작을 실행하도록 전자 장치(110)의 구성 요소들을 제어할 수 있다.
프로세서(113)는 결정된 동작을 수행하기 위하여 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)와 같은 외부 장치와의 연계가 필요한 경우, 해당 외부 장치를 제어하기 위한 제어 신호를 생성하고, 통신부(112)를 통해 해당 외부 장치에 생성된 제어 신호를 전송할 수 있다.
특정 실시 예들에서, 프로세서(113)는 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)에서 사용자를 위한 솔루션 정보를 제공하기 위해 요구되는 이미지 데이터를 제공하고 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)으로부터 제공받은 솔루션 정보를 출력하는, 전자 장치(110)의 전반적인 동작들을 제어한다.
이러한 프로세서(113)는 적어도 하나의 프로세서로 구현될 수도 있다. 상기 프로세서(113)는, CPU(Central processing unit) 또는 인간의 뇌의 신경세포와 시냅스를 모하여 인공 신경망의 연산에 유리하게 설계된 뉴로모픽 프로세서(Neuromorphic processor) 등을 포함할 수도 있다.
카메라(114)는 피사체를 촬영하여 정지 이미지 또는 동영상 등의 이미지 프레임을 획득한다. 획득된 이미지 프레임은 출력장치(116)의 디스플레이(Display)에 표시되거나, 통신부(112)를 통해 외부 장치에 전송되거나, 프로세서(113)에 의해 처리되거나, 메모리(111)에 저장될 수 있다.
카메라(114)는 하나 또는 복수 개의 촬영 유닛으로 구성될 수 있다. 상기 촬영 유닛은 파장에 반응하여 대상자의 이미지를 생성할 수도 있다. 카메라(114)는 RGB 센서를 포함하여 RGB 이미지를 획득할 수도 있다. 또한, 카메라(114)는 IR 센서 또는 깊이 센서를 더 포함하여 IR 이미지 또는 Depth 이미지를 더 획득할 수도 있다.
입력장치(115)는 사용자의 입력과 관련된 명령을 수신하도록 구성된 구성요소이다. 상기 입력장치(115)는, 터치 유닛 또는 기타 입력 유닛을 포함할 수도 있다.
터치 유닛은 사용자의 신체 일부 또는 다른 객체가 포인팅 객체로 활용되어 사용자 명령을 입력하는 구성요소이다. 상기 터치 유닛은 감압식 또는 정전기식 센서 등을 포함할 수 있으나, 이에 제한되진 않는다. 상기 기타 입력 유닛은 예를 들어 버튼, 키보드, 다이얼, 스위치, 스틱 등을 포함한다.
출력장치(116)는 전자 장치(110)에 저장 및/또는 처리된 정보를 디스플레이하는 구성요소로서, 예를 들어 LCD(Liquid Crystal Disply), OLED(Organic Light Emitting Diodes), 플렉서블 스크린 등을 포함할 수 있으나, 이에 제한되진 않는다.
도 2에서 입력장치(115)와 출력장치(116)이 분리되어 있지만, 많은 실시 예들에서 상기 입력장치(115)와 출력장치(116)는 입력 수신 및 정보 출력을 수행하도록 하나의 구성요소로 구현될 수 있다. 예를 들어, 입력장치(115) 및 출력장치(116)는 스크린과 레이어 구조를 이루는 터치 스크린으로 구현된 터치 패널일 수도 있다. 터치 입력은 (예컨대, 사용자의 신체, 또는 도구 등을 포함한) 포인팅 객체에 의해 입력된다.
상기 사용자의 전자 장치(110-1)는 사용자의 치아 이미지 및 얼굴 이미지를 생성하여 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)으로 전송하도록 구성된다.
또한, 상기 사용자의 전자 장치(110-1)는 전송한 사용자의 치아 이미지 및 얼굴 이미지를 분석하여 산출된 자신의 치아 및 얼굴에 대해 맞춤화된 미백 솔루션을 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)으로부터 수신하여 사용자에게 제공하도록 구성된다.
또한, 상기 사용자의 전자 장치(110-1)는 사용자의 미백 솔루션을 수행할 치과 병원의 정보를 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)으로부터 수신하여 사용자에게 추천하도록 구성될 수도 있다.
또한, 일부 실시 예들에서, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)과 통신하는 전자 장치(110)는 의료진의 전자 장치(110-2)를 더 포함할 수도 있다.
상기 의료진의 전자 장치(110-2)는 사용자의 전자 장치(110-1)가 전송한 사용자의 치아 이미지 및 얼굴 이미지를 분석하여 산출된 자신의 치아 및 얼굴에 대해 맞춤화된 미백 솔루션을 수신하도록 구성된다.
또한, 일부 실시 예들에서, 상기 의료진의 전자 장치(110-2)는 의료진의 전자 장치(110-2)가 동작하는 치과 병원의 미백 솔루션 수행 능력 정보를 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)에 등록하도록 구성될 수도 있다. 상기 미백 솔루션 수행 능력 정보는 해당 치과 병원에서 수행 가능한 미백 솔루션 방식 등을 포함할 수도 있다.
또한, 상기 의료진의 전자 장치(110-2)는 수신한 미백 솔루션에 기초하여 사용자의 처방전 정보를 생성하고, 사용자의 전자 장치(110-1)로 전송하거나 연결된 인쇄기기를 통해 출력하도록 구성될 수도 있다.
상기 전자 장치(110)의 동작에 대해서는 아래의 도 9 등을 참조해 보다 상세히 서술한다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자에 대해 맞춤형 미백 솔루션 서비스를 제공하는 비대면 플랫폼 서비스를 구현할 수 있는 컴퓨팅 시스템이다.
특정 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 하나 이상의 서버(132)를 포함할 수도 있다.
상기 서버(132)는 네트워크 서버로 구현되는 다수의 컴퓨터 시스템 또는 컴퓨터 소프트웨어이다. 여기서, 네트워크 서버란, 사설 인트라넷 또는 인터넷과 같은 컴퓨터 네트워크를 통해 다른 네트워크 서버와 통신할 수 있는 하위 장치와 연결되어 작업 수행 요청을 접수하고 그에 대한 작업을 수행하여 수행 결과를 제공하는 컴퓨터 시스템 및 컴퓨터 소프트웨어(네트워크 서버 프로그램)를 의미한다. 그러나 이러한 네트워크 서버 프로그램 이외에도, 네트워크 서버 상에서 동작하는 일련의 응용 프로그램과 경우에 따라서는 내부에 구축되어 있는 각종 데이터베이스를 포함하는 넓은 개념으로 이해되어야 할 것이다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)는 네트워크 서버, 웹 서버, 파일 서버, 슈퍼컴퓨터, 데스크탑 컴퓨터 등과 같은 컴퓨팅 장치들의 임의의 유형 또는 유형들의 조합으로 구현될 수도 있다. 이를 위해, 서버(132)는 데이터를 처리할 수 있는 적어도 하나의 프로세서, 데이터를 저장하는 메모리, 데이터를 송/수신하는 통신부를 포함한다.
상기 특정 실시 예들에서, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 하나 이상의 데이터 스토어(134)를 포함할 수 있다. 데이터 스토어(134)는 다양한 타입의 정보를 저장하는데 사용될 수 있다. 일부 실시 예들에서, 데이터 스토어(134)에 저장된 정보는 특정한 데이터 구조에 따라 구조화될 수 있다. 또한, 일부 실시 예들에서, 각 데이터 스토어(134)는 관계형, 컬럼형, 상관형 또는 다른 적절한 데이터베이스일 수 있다. 비록 본 명세서는 특정 타입의 데이터베이스를 기술하거나 도시하지만, 본 명세서는 임의의 적절한 타입의 데이터베이스를 고려한다. 일부 실시 예들에서, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 전자 장치(110), 또는 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130))이 데이터 스토어(134)에 저장된 정보를 관리, 검색, 변경, 추가 또는 삭제할 수 있게 하는 인터페이스를 제공할 수 있다.
특정 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아 이미지를 수신하도록 구성된다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 전자 장치(110)에서 사용자의 치아를 촬영하여 생성된 사용자의 치아 이미지를 수신할 수도 있다.
상기 사용자의 치아 중 적어도 하나는 사용자의 치아 미백 처리될 타겟 치아일 수도 있다. 상기 사용자의 치아 이미지는 사용자의 실제 치아 전체 중 일부 또는 전부의 치아를 포함할 수도 있다.
특정 실시 예들에서, 상기 사용자의 치아 이미지는 RGB 이미지일 수도 있다. 전자 장치(110-1)에서 생성한 사용자의 치아 이미지는 RGB 색 공간(color space)로 표현될 수도 있다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 얼굴 이미지를 수신하도록 구성된다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 전자 장치(110)에서 사용자의 치아의 주변 영역을 촬영하여 생성된 사용자의 얼굴 이미지를 수신할 수도 있다.
사용자의 얼굴 이미지는 사용자의 치아의 주변 영역을 포함한다. 일부 실시 예들에서, 상기 사용자의 얼굴 이미지는 사용자의 치아 및 입을 둘러싼 사용자의 얼굴 하관 부분 중 일부 또는 전부를 포함할 수도 있다.
상기 치아의 주변 영역은 얼굴 전체에서 상기 치아가 노출 가능한 영역을 둘러싼 특정 영역이다. 상기 사용자의 치아가 노출 가능한 영역은 얼굴 전체 사용자가 입술을 벌렸을 때 노출되는 치아를 포함한 중 특정 영역을 나타낸다. 여기서 사용자가 입술을 벌리는 것은 상악과 하악이 접촉한 상태에서 입술을 위쪽 및/또는 아래 쪽으로 벌리는 것, 또는 상악과 하악이 접촉하지 않고 떨어진 상태에서 입술을 위쪽 및/또는 아래 쪽으로 벌리는 것일 수도 있다.
예를 들어, 상기 주변 영역은 사용자의 입술 경계, 및 상기 입술 경계로부터 일정 간격만큼 떨어진 테두리 경계로 정의될 수도 있다.
도 4는, 본 출원의 일 실시 예에 따른, 사용자의 치아 이미지 및 얼굴 이미지의 개략도이다.
도 4를 참조하면, 상기 사용자의 치아 이미지는 사용자의 치아 및 광학 파라미터 카드를 포함할 수도 있다. 또한, 상기 사용자의 얼굴 이미지는 사용자의 얼굴 내 치아의 주변 영역 및 상기 광학 파라미터 카드를 포함할 수도 있다.
상기 광학 파라미터 카드는 카메라(114)의 노출계가 피사체의 색상을 흰색, 검정색, 또는 회색으로 인식하는데 이용되는 노출 기준을 제공한다. 상기 광학 파라미터 카드는 화이트 밸런스 등의 카메라(114)의 광학 파라미터를 조정 가능하도록, 검정색, 흰색, 회색, 및 이들 색상 사이의 다른 색상을 포함한다.
상기 광학 파라미터 카드는 큐피카드(QPcard), 또는 도 4에 도시된 것처럼 eLAB_Prim 사의 white_balance grey reference card일 수도 있으나, 이에 제한되진 않는다.
일부 실시 예들에서, 상기 사용자의 치아 이미지는 기준 치아를 포함할 수도 있다. 상기 기준 치아는 미리 지정된 치아로서, 예를 들어 11번 치아 및/또는 21번 치아를 포함할 수도 있다.
카메라(114)의 광학 파라미터는 기준 치아와 상기 광학 파라미터 카드를 매칭하도록 조정될 수도 있다. 이를 위해, 광학 파라미터 카드는 11번 치아, 21번 치아와 같은 기준 치아 주변에 배치되어 촬영될 수도 있다.
상기 카메라(114)의 광학 파라미터는 사용자의 얼굴 내 치아의 주변 영역과 상기 광학 파라미터 카드를 매칭하도록 조정될 수도 있다. 또한, 일부 실시 예들에서, 상기 카메라(114)의 광학 파라미터는 기준 치아에 인접한, 주변 서브 영역에 상기 광학 파라미터 카드를 매칭하도록 조정될 수도 있다.
일부 실시 예들에서, 상기 사용자의 치아 및 얼굴의 일부 영역을 포함한 단일 이미지가 사용자의 얼굴 이미지 및 치아 이미지로 활용될 수도 있다. 도 4에 도시된 것처럼 단일 이미지가 사용자의 얼굴 이미지 및 치아 이미지로 활용될 경우, 상기 카메라(114)의 광학 파라미터는 치아 및 얼굴에 매칭되도록 조정될 수도 있다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아 이미지에 포함된 사용자의 치아에 대한 색상 정보를 산출하도록 구성된다.
특정 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아 이미지에서 사용자의 치아에 대한 색상 지수를 산출하도록 구성된다.
치아에 대한 색상 지수(color index)는 해당 치아 색상을 가리키도록 미리 지정된 지수 값이다. 상기 치아에 대한 색상 지수는 복수의 치아 색상 각각을 가리키는 복수의 지수 값으로 이루어진다. 예를 들어, 제1 색상 지수 값은 제1 색상을 가리키고, 제n 색상 지수 값은 제n 색상을 가리킬 수도 있다.
도 5는, 본 출원의 일 실시 예에 따른, 복수의 치아 색상 유형에 따른 색상 지수를 도시한다.
도 5를 참조하면, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)에 미리 설정된 복수의 치아 색상은 색조 및 음영에 기초한 복수의 색상 유형일 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 상기 복수의 색상 유형 각각을 가리키는 치아에 대한 복수의 색상 지수 중에서 사용자의 치아의 색상 지수를 결정하도록 구성된다.
일 예에서, 상기 복수의 치아 색상은 비타 쉐이드 가이드의 16가지 치아 색상 유형일 수도 있다. 상기 비타 쉐이드 가이드의 16가지 유형은 4가지 유형의 색조(A-D), 및 4가지 유형의 음영(1-4)으로 정의된다. 그러면, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)이 결정 가능한 치아에 대한 색상 지수는 비타 쉐이드 가이드의 16가지 치아 색상 유형에 각각 대응할 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하고, CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 상기 사용자의 치아의 CIE 색상 값을 산출하며, 산출된 상기 사용자의 치아의 CIE 색상 값에 기초하여 해당 치아에 대한 색상 지수를 산출하도록 구성된다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 이전에 공지된 다양한 CIE 변환 알고리즘을 이용하여 사용자의 치아 이미지의 RGB 색 공간을 CIE L*a*b 공간으로 변환할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 이미지에서 치아 영역을 구성하는 픽셀별 CIE 색상 값에 기초하여 전체 영역을 이루는 해당 치아의 CIE 색상 값을 산출할 수도 있다. 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 치아 영역을 구성하는 픽셀별 CIE 색상 값의 평균 값을 해당 치아의 CIE 색상 값으로 산출할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 치아에 대해 미리 설정된, 치아에 대한 색상 지수 각각과 CIE 색상 값 간의 관계를 기록한 제1 CIE 색상 테이블을 미리 저장할 수도 있다. 상기 제1 CIE 테이블에서 각각의 치아 색상을 가리키는 치아에 대한 색상 지수는 해당 색상으로 분류 가능한 치아 영역 내 픽셀의 CIE 색상 값으로 정의될 수도 있다. 치아의 CIE 색상 값이 유사할 경우, 동일한 치아 색상으로 인식될 수 있어 치아에 대한 색상 지수가 동일한 값으로서 산출될 수도 있다.
상기 일 예에서, 상기 제1 CIE 색상 테이블은 비타 쉐이드 가이드의 16가지 치아 색상 유형 각각에 대해서, 동일한 색상 유형으로 분류되는 치아 픽셀의 CIE L*a*b의 색상 값의 집합을 정의하는 CIE 색상 범위를 포함할 수도 있다. 동일한 CIE 색상 범위에 속하는 CIE 색상 값은 상기 동일한 색상 유형을 가리키는, 치아에 대한 특정 색상 지수에 대응한다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 산출된 사용자의 치아의 CIE 색상 값이 매칭하는, 치아에 대한 특정 색상 지수를 상기 제1 CIE 색상 테이블에서 검색하여 해당 치아에 대한 색상 지수로 산출할 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 복수의 치아 각각에 대한 개별 치아에 대한 색상 지수를 각각 산출할 수도 있다. 비타 쉐이드 가이드에 따른 피부 유형을 가리키도록 치아에 대한 색상 지수가 설정된 경우에, 사용자의 특정 치아의 CIE 색상 값이 (78.9, -1.76, 12.33)으로 산출된 경우 상기 특정 치아에 대한 색상 지수는 색상 유형 B1을 가리키는 값인 1로 산출될 수도 있다. 이와 같이, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아 이미지로부터 도 5의 CIE 색상 값을 치아별로 각각 산출하고, 미리 지정된 복수의 치아 색상 유형 (도 5의 1 내지 16) 중 산출된 사용자의 CIE 색상 값에 대응하는 사용자의 치아에 대한 색상 지수를 치아별로 각각 산출할 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 치아에 대한 색상 지수를 산출하기 위해, 사용자의 치아 영역의 제1 치아 부분 내지 제3 치아 부분 중 하나 이상의 부분의 CIE 색상 값을 각각 산출하도록 구성될 수도 있다.
상기 제1 치아 부분은 치경부(Cervical part)를 포함할 수도 있다. 상기 제2 치아 부분은 제1 치아 부분과 제3 치아 부분 사이의 중간 부분(middle part)을 포함할 수도 있다. 상기 제3 치아 부분은 교합면 부분(Occlusal part)을 포함할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 치아 내 제1 치아 부분의 CIE 색상 값을 산출하고, CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 치아 내 제2 치아 부분의 CIE 색상 값을 산출하며, CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 치아 내 제3 치아 부분의 CIE 색상 값을 산출하고, 산출된 각 치아 부분의 CIE 색상 값에 기초하여 특정 치아 전체에 대한 색상 지수를 산출할 수도 있다. 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 산출된 각 치아 부분의 CIE 색상 값의 평균 값을 치아의 CIE 색상 값으로 산출하여 치아 전체에 대한 색상 지수를 산출할 수도 있다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 얼굴 이미지에 포함된 사용자의 얼굴 내 치아의 주변 영역의 피부에 대한 색상 정보를 산출하도록 구성된다.
특정 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 얼굴 이미지에서 사용자의 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수를 산출하도록 구성된다.
얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수(color index)는 해당 주변 영역의 피부 색상을 가리키도록 미리 지정된 지수 값이다. 상기 피부에 대한 색상 지수는 복수의 피부 색상 각각을 가리키는 복수의 지수 값으로 이루어진다. 예를 들어, 제1 색상 지수 값은 제1 피부 색상을 가리키고, 제n 색상 지수 값은 제n 피부 색상을 가리킬 수도 있다.
도 6은, 본 출원의 일 실시 예에 따른, 복수의 피부 색상 유형에 따른 색상 지수를 도시한다.
도 6을 참조하면, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)에 미리 설정된 복수의 피부 색상은 색조 및/또는 음영에 기초한 복수의 색상 유형일 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 상기 복수의 색상 유형 각각을 가리키는 피부에 대한 복수의 색상 지수 중에서 사용자의 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수를 결정하도록 구성된다.
일 예에서, 상기 복수의 치아 색상은 어두운 톤, 붉은 톤, 노란 톤, 및 밝은 톤 중 둘 이상의 피부 톤을 포함할 수도 있다. 그러면, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)이 결정 가능한 피부에 대한 색상 지수는 도 6의 피부 색상 유형에 각각 대응할 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 얼굴 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하고, CIE L*a*b 공간으로 변환된 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 치아의 주변 영역의 피부의 CIE 색상 값을 산출하며, 산출된 상기 사용자의 얼굴 내 치아의 주변 영역의CIE 색상 값에 기초하여 해당 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하도록 구성된다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 이전에 공지된 다양한 CIE 변환 알고리즘을 이용하여 사용자의 치아 이미지의 RGB 색 공간을 CIE L*a*b 공간으로 변환할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 이미지에서 얼굴 내 치아의 주변 영역을 구성하는 픽셀별 CIE 색상 값에 기초하여 전체 영역을 이루는 해당 피부의 CIE 색상 값을 산출할 수도 있다. 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 얼굴 내 치아의 주변 영역을 구성하는 픽셀별 CIE 색상 값의 평균 값을 해당 피부의 CIE 색상 값으로 산출할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 얼굴 내 주변 영역의 피부에 대해 미리 설정된 피부에 대한 색상 지수 각각과 CIE 색상 값 간의 관계를 기록한 제2 CIE 색상 테이블을 미리 저장할 수도 있다. 상기 제2 CIE 테이블에서 각각의 피부 색상을 가리키는 피부에 대한 색상 지수는 해당 색상으로 분류 가능한 얼굴 내 피부 영역에 속하는 픽셀의 CIE 색상 값으로 정의될 수도 있다. 피부의 CIE 색상 값이 유사할 경우, 동일한 피부 색상으로 인식될 수 있어 피부에 대한 색상 지수가 동일한 값으로서 산출될 수도 있다.
상기 일 예에서, 상기 제2 CIE 색상 테이블은 도 6의 4가지 피부 색상 유형 각각에 대해서, 동일한 색상 유형으로 분류되는 치아 픽셀의 CIE L*a*b의 색상 값의 집합을 정의하는 CIE 색상 범위를 포함할 수도 있다. 동일한 CIE 색상 범위에 속하는 CIE 색상 값은 상기 동일한 색상 유형을 가리키는, 피부에 대한 특정 색상 지수에 대응한다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 CIE L*a*b 공간으로 변환된 사용자의 얼굴 이미지에서 산출된 사용자의 얼굴 내 주변 영역의 피부의 CIE 색상 값이 매칭하는, 피부에 대한 특정 색상 지수를 검색하여 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수로 산출할 수도 있다.
예를 들어, 사용자의 피부의 CIE 색상 값이 (60.8785, 11.7863, 20.8453)으로 산출된 경우, 사용자의 피부에 대한 색상 지수는 어두운 톤을 가리키는 값인 1로 산출될 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수를 산출하기 위해, 사용자의 얼굴 이미지에서 상기 주변 영역을 상기 사용자의 치아에 대응한 주변 서브 영역으로 구획하여 각각의 서브 영역을 지정하고, 그리고 지정된 주변 서브 영역의 피부에 대한 색상 지수를 산출하도록 구성될 수도 있다.
도 7은, 본 출원의 일 실시 예에 따른, 치아에 대응한 주변 서브 영역의 개략도이다.
도 7을 참조하면, 상기 주변 서브 영역은 노출 가능한 치아 각각에 대응하도록 지정된다. 예를 들어, 상기 주변 서브 영역은 해당 치아와 그 주변 치아 사이의 경계로부터 연장된 가상의 선에 의해 정의될 수도 있다.
상기 사용자의 치아 중 적어도 하나의 치아는 기준 치아(예컨대, 11번 치아)를 포함할 수도 있다. 이 경우, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 기준 치아에 대응한 주변 서브 영역(예컨대, S1)을 포함한 주변 서브 영역을 지정할 수도 있다.
상기 주변 서브 영역은 사용자의 치아 전체에 대해 지정될 수도 있다. 노출 가능한 치아가 도 7에 도시된 것처럼 상악 및 하악에서 20개일 경우, 20개의 주변 서브 영역(S1 내지 S30)이 지정될 수도 있다.
일부 실시 예들에서, 상기 주변 서브 영역은 전자 장치(110)에서 입력된 사용자 명령에 의해 지정될 수도 있다. 예를 들어, 전자 장치(110)에서 사용자가 주변 영역에서 각각의 주변 서브 영역에 포함된 적어도 하나의 점을 선택하거나 적어도 하나의 선을 형성하는 사용자 명령을 입력할 경우, 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자 명령의 점 또는 선에 기초하여 주변 서브 영역을 상기 사용자의 얼굴 이미지에서 지정할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 도 7와 같이 복수의 주변 서브 영역 각각의 피부에 대한 색상 지수를 각각 산출할 수도 있다. 주변 서브 영역의 피부에 대한 색상 지수를 산출하는 과정은 도 4 및 도 6을 참조해 위에서 서술한 주변 영역의 피부에 대한 색상 지수를 산출하는 과정과 유사하므로, 자세한 설명은 생략한다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 산출된 사용자의 치아에 대한 색상 지수, 및 산출된 사용자의 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하도록 구성된다.
특정 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아에 대한 색상 지수, 및 사용자의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하여, 사용자의 치아에 대한 미백 목표 색상 지수를 산출하도록 구성될 수도 있다. 상기 사용자의 치아에 대한 미백 목표 색상 지수는 사용자의 주변 피부와 조화를 이루면서 치아에 대한 입력 색상 지수 보다 미백 처리된 치아 색상을 가리키는 색상 지수이다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자 맞춤화 치아 미백 솔루션을 제공하는데 가장 중요한 요소인, 사용자의 치아에 대한 미백 목표 색상 지수를 솔루션 분석 모델을 이용하여 산출한다.
상기 솔루션 분석 모델은 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합과 미백 목표 색상 지수 간의 상관 관계를 추론하여 피부에 매칭하는 치아 색상을 가리키는 사용자의 치아에 대한 미백 목표 색상 지수를 판단하도록 구성된 뉴럴 네트워크 구조를 가진다.
상기 뉴럴 네트워크 구조는, 예를 들어 완전 연결 레이어, 또는 MLP(Multi-layer Perceptron)일 수도 있으나, 이에 제한되지 않으며 기타 NN 구조일 수도 있다.
상기 솔루션 분석 모델은 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합이 모델에 미리 설정된 복수의 색상 유형 각각에 분류될 확률을 산출하고, 산출된 확률에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 판단할 수도 있다. 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합은 산출된 확률 값이 가장 높은 색상 유형으로 분류된다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 상기 조합이 분류된 색상 유형을 가리키는 색상 지수를 사용자의 치아에 대한 미백 목표 색상 지수로 판단할 수도 있다.
상기 솔루션 분석 모델은 복수의 트래이닝 샘플로 이루어진 트래이닝 데이터 세트를 이용하여 미리 학습될 수도 있다. 각 트래이닝 샘플은 트래이닝 데이터 및 레이블 데이터를 각각 가진다. 상기 트래이닝 데이터는 샘플 사용자의 얼굴 이미지 및 치아 이미지로부터 산출된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 샘플 조합일 수도 있다.
상기 레이블 데이터는 샘플 사용자가 미백 결과에 대해 만족한 치아 색상일 수도 있다.
도 8은, 본 출원의 일 실시 예에 따른, 레이블 데이터의 개략도이다.
도 8를 참조하면, 상기 레이블 데이터는 치아에 대한 색상 지수와 피부에 대한 색상 지수 간의 조화 관계를 기록한 조화 테이블로부터 생성될 수도 있다. 상기 조화 테이블은 샘플 사용자가 미백 결과에 대해 만족한 결과를 회신한 피드백 내역에 의해 생성된 내역 자료일 수도 있다.
트래이닝 데이터에 포함된 피부에 대한 색상 지수의 값이 4일 경우 해당 레이블 데이터는 미백 목표 색상 지수의 값으로서 1 내지 4 중 하나 이상의 값을 포함할 수도 있다. 트래이닝 데이터에 포함된 피부에 대한 색상 지수의 값이 1일 경우 해당 레이블 데이터는 미백 목표 색상 지수의 값으로서 13 내지 16 중 하나 이상의 값을 포함할 수도 있다.
상기 솔루션 분석 모델은 상기 사용자의 피부에 대한 색상 지수와 조화 관계를 유지 가능한 치아에 대한 다양한 후보 색상 지수 중에서 사용자의 치아에 대한 현재 색상 지수와의 관계에서도 적절한 특정 색상 지수를 미백 목표 색상 지수로 산출한다.
상기 솔루션 분석 모델은 트래이닝 샘플 각각의 트래이닝 데이터가 입력되면, 내부 파라미터로 트래이닝 데이터를 연산 처리하여 결과 값(즉, 예측된 미백 목표 색상 지수)을 산출한다. 상기 솔루션 분석 모델의 파라미터는 상기 연산 결과 값과 레이블 데이터의 값(만족한 미백 색상을 가리키는 지수) 간의 오차가 보다 감소하도록 학습된다. 학습 완료된 솔루션 분석 모델은 상기 오차가 최소화되는 파라미터를 가진다.
일부 실시 예들에서, 상기 솔루션 분석 모델은 사용자의 치아에 대한 미백 목표 색상 지수를, 입력된 사용자의 치아에 대한 색상 지수에 대한 상대적인 값으로 표현하여 산출하도록 구성될 수도 있다. 또한, 일부 실시 예들에서, 상기 솔루션 분석 모델은 출력될 미백 목표 색상 지수를 입력된 치아에 대한 색상 지수로부터 상대적인 색상 지수로 표현 가능한, 복수의 클래스를 포함할 수도 있다. 상대적 색상 지수의 값은 입력된 치아에 대한 색상 지수와 미백 처리될 치아의 색상 지수의 차이 값을 나타낼 수도 있다.
예를 들어, 상기 솔루션 분석 모델은 입력 사용자의 치아에 대한 색상 지수로부터 색상 지수 3 또는 색상 지수 6만큼 보다 밝아지는 것을 분류 가능한 제1 클래스 및 제2 클래스를 포함할 수도 있다. 상기 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합이 제1 클래스로 분류될 경우, 미백 목표 색상 지수는 입력 사용자의 치아에 대한 색상 지수로부터 색상 지수 3만큼 감소한 값일 수도 있다.
이 경우, 상기 솔루션 분석 모델을 학습하는데 이용된 레이블 데이터는 샘플 사용자의 치아에 대한 색상 지수와 샘플 사용자의 실제 미백 처리된 치아의 색상 지수의 차이 값을 가리키는 클래스 값일 수도 있다. 일부 실시 예들에서, 상기 샘플 사용자의 치아에 대한 색상 지수와 샘플 사용자의 실제 미백 처리된 치아의 색상 지수의 차이 값을 가리키는 값과 동일 또는 유사한 클래스 값이 레이블 데이터로 이용될 수도 있다. 여기서, 차이 값에 유사한 클래스는 솔루션 분석 모델의 클래스 중에서 상기 차이 값과 가장 가까운, 상대적 색상 지수의 값을 갖는 클래스를 나타내고, 클래스 값은 해당 클래스가 갖는 상대적 색상 지수의 값을 나타낸다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은, 사용자의 각각의 치아에 대한 미백 목표 색상 지수를 각각 산출하기 위해, 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하는 것일 수도 있다.
상기 일부 실시 예들에서, 상기 솔루션 분석 모델은 사용자의 개별 치아에 대한 색상 지수, 및 해당 주변 서브 영역의 피부에 대한 색상 지수 각각의 값의 쌍을 트래이닝 데이터로 이용하여 학습된다.
상기 솔루션 분석 모델을 학습하는데 이용된 트래이닝 데이터 세트는 단일 샘플 사용자로부터 획득된 다수의 트래이닝 데이터를 포함할 수도 있다. 예를 들어, 트래이닝 데이터 세트는 제1 샘플 사용자로부터 11번 치아 및 해당 주변 서브 영역(S1)을 포함한 제1-1 트래이닝 데이터, 21번 치아 및 해당 주변 서브 영역(S6)을 포함한 제1-2 트래이닝 데이터를 포함할 수도 있다. 그 결과, 상기 솔루션 분석 모델은 각각의 개별 치아에 대한 미백 목표 색상 지수를 산출하기 위해, 주변 영역 전체 대비 개별 치아 각각의 해당 주변 서브 영역의 피부에 보다 조화를 이루는 미백 목표 색상 지수를 산출하도록 학습된다.
또한, 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아에 대한 미백 목표 색상 지수를 보정하도록 더 구성될 수도 있다.
사용자의 특정 치아의 미백 처리 결과 색상이 그 주변 치아의 미백 처리 결과 색상과 지나치게 다를 경우, 부자연스러운 치아 미백 느낌을 제공할 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 보다 자연스러운 치아 미백 효과를 제공하기 위해, 사용자의 특정 치아의 미백 처리 결과 색상이 그 주변 치아의 미백 처리 결과 색상과 보다 유사한 색상을 가져 자연스러운 색상 분포를 갖도록 미백 목표 색상 지수를 보정할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아에 대한 미백 목표 색상 지수를 보정하기 위해, 사용자의 치아에 대한 미백 목표 색상 지수 간의 편차로 이루어진 치아 미백 색상의 편차 분포를 산출하고, 상기 치아 미백 색상의 편차 분포에서 편차 외란을 검출하며, 상기 편차 외란이 검출된 경우, 상기 인접한 치아의 쌍의 미백 목표 색상 지수 간의 편차를 보다 감소하기 위해, 편차 외란과 관련된 인접한 치아의 쌍 중 적어도 하나의 치아에 대한 미백 목표 색상 지수를 보정하도록 구성될 수도 있다.
상기 치아 미백 색상의 편차 분포는 인접한 치아 간의 미백 목표 색상 지수의 차이 값을 치아 구조에 따라 분포시킨 분포 결과일 수도 있다. 상기 미백 목표 색상 지수의 차이 값은 미백 목표 색상 지수가 가리키는 치아 색상을 갖도록 사용자의 치아가 미백 처리된 경우에 미백 처리된 치아의 색상 간의 그레디언트에 대응한다.
각각의 미백 목표 색상 지수의 차이 값은 전체 치아 구조 내에서 차이 값을 야기한 인접한 치아의 위치와 매핑된다. 예를 들어, 도 7에서 상기 미백 목표 색상 지수의 편차 분포는 11번 치아와 21번 치아의 미백 목표 색상 지수의 차이 값을 포함하며, 이 차이 값은 11번 치아와 21번 치아의 위치에 매핑된다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미백 처리된 색상이 자연스럽게 나란히 배열되도록 사람이 인식할 미백 목표 색상 지수 간의 편차를 분류하고, 선별되지 않은 나머지 편차를 편차 외란으로 분류할 수도 있다. 전체 편차 값 중에서 주된 분포의 외부에 위치하는 편차 값이 편차 외란으로 분류된다.
이를 위해, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 특정 데이터 분포에서 주된 분포를 추출하고 외란을 분류하는, 다양한 이상 탐지 알고리즘을 미리 저장할 수도 있다. 상기 이상 탐지 알고리즘은, 예를 들어 Anomaly Detection Algorithm, Multivariate Gaussian Distribution, 기타 이상 탐지 알고리즘을 포함할 수도 있다. 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 미백 처리 이전의 치아에 대한 색상 지수의 분포에 기초하여 미백 목표 색상 지수를 보정할 수도 있다. 미백 결과의 자연스러움은 미백 처리 이전의 치아 색상 분포와 유사한지 여부에도 부분적으로 의존하기 때문이다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)의 보정 동작에 의해, 보정된 미백 목표 색상 지수가 가리키는 치아 색상을 갖도록 미백 처리된 사용자의 치아가 보정되지 않은 미백 목표 색상 지수가 가리키는 치아 색상을 갖도록 미백 처리된 사용자의 치아 대비 상대적으로 연속적이고 상대적으로 균일한 치아 색상 배열을 가진다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)에 의한 미백 목표 색상 지수의 산출 동작 및 보정 동작에 대해서는 아래의 도 11 등을 참조해 보다 상세히 서술한다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미백 목표 색상을 갖기 위한 미백 솔루션 정보를 전자 장치(110)로 전송하도록 구성된다. 상기 미백 솔루션을 수신하는 전자 장치(110)는 사용자의 전자 장치(110-1) 또는 의료진의 전자 장치(110-2)일 수도 있다.
상기 미백 솔루션은 사용자의 치아에 대한 미백 목표 색상 지수를 가리키는 색상을 갖기 위한 치아 미백 방식, 용품, 회수, 기간 중 하나 이상의 솔루션 정보를 포함할 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미백 목표 색상 지수에 기초하여 미백 솔루션 정보를 획득할 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 현재 치아에 대한 색상 지수와 미백 목표 색상 지수 간의 차이만큼의 미백 효과를 얻는데 요구되는 미백 방식, 용품, 회수, 기간 중 하나 이상의 해당 솔루션 정보를 포함한 솔루션 테이블을 미리 저장할 수도 있다.
예를 들어, 상기 솔루션 테이블은 현재 색상 지수의 값 16을 기준으로 3단계만큼 미백 처리하여 미백 목표 색상 지수의 값 13을 구현하는데 요구되는 제1-1 솔루션 정보, 현재 색상 지수의 값 16을 기준으로 6단계만큼 미백 처리하여 미백 목표 색상 지수의 값 10을 구현하는데 요구되는 제1-2 솔루션 정보를 포함할 수도 있다. 또한, 상기 솔루션 테이블은 현재 색상 지수의 값 10을 기준으로 3단계만큼 미백 처리하여 미백 목표 색상 지수의 값 7을 구현하는데 요구되는 제2-1 솔루션 정보, 현재 색상 지수의 값 10을 기준으로 6단계만큼 미백 처리하여 미백 목표 색상 지수의 값 4을 구현하는데 요구되는 제2-2 솔루션 정보를 포함할 수도 있다.
일부 실시 예들에서, 상기 솔루션 테이블은, 솔루션 분석 모델이 출력될 미백 목표 색상 지수를 입력된 치아에 대한 색상 지수로부터 상대적인 색상 지수로 표현 가능한, 복수의 클래스를 포함할 경우, 각 클래스가 가리키는 상대적 색상 지수의 값만큼의 미백 효과를 얻기 위해 요구되는 솔루션 정보를 포함할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자의 치아에 대한 미백 목표 색상 지수를 위해 요구되는 솔루션 정보를 상기 솔루션 테이블에서 검색하도록 구성된다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 산출된 사용자의 치아에 대한 미백 목표 색상 지수가 입력된 치아에 대한 색상 지수로부터 상대적인 색상 지수로 표현되는 경우 상대적 색상 지수의 값에 대응한 솔루션 정보를 상기 솔루션 테이블에서 곧바로 검색할 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 산출된 사용자의 치아에 대한 미백 목표 색상 지수가 입력된 치아에 대한 색상 지수로부터 상대적인 색상 지수로 표현되지 않는 경우 산출된 사용자의 치아에 대한 미백 목표 색상 지수 및 산출된 사용자의 치아에 대한 색상 지수 간의 차이를 산출하고, 산출된 색상 지수의 차이에 대응한 솔루션 정보를 미리 저장된 솔루션 테이블에서 검색하도록 구성될 수도 있다. 검색된 솔루션 정보는 미백 처리 전/후의 개선 효과에 따른 색상 지수의 차이에 대응한, 미백 방식, 용품, 회수, 기간 중 하나 이상의 해당 솔루션 정보를 포함한다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 검색된 솔루션 정보를 포함한 미백 솔루션을 전자 장치(110)로 전송한다.
또한, 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 사용자에게 미백 솔루션을 수행할 치과 병원을 추천하도록 구성될 수도 있다. 사용자가 미백 솔루션을 수행함에 있어서 미백 솔루션을 진행하고 치과 처방전을 생성할 치과 병원을 추천할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미리 저장된 치과 병원 목록 중에서 사용자에게 제공될 미백 솔루션을 수행 가능한 적어도 하나의 치과 병원의 서브 목록을 검색하고, 서브 목록 내에서 치과 병원을 추천 치과 병원으로 결정할 수도 있다.
일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 서브 목록 내 각각의 치과 병원과 사용자 간의 지리적 거리에 기초하여 추천 치과 병원을 결정할 수도 있다. 예를 들어, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 최단 거리의 치과 병원을 사용자에게 추천할 수도 있다.
또한, 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미백 솔루션 진행 상황을 안내하는, 관리 서비스를 제공할 수도 있다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미백 진행 상황, 결과에 대한 정보를 시계열 순서로 제공하도록 구성될 수도 있다. 또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 미백 솔루션이 종료된 이후에도 일정 주기별로 미백 관리 알림을 사용자의 전자 장치(110-1)로 전송하도록 구성될 수도 있다. 이를 통해 사용자 스스로 미백 효과를 지속적으로 유지하게 한다.
상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)이 본 명세서에 서술되지 않은 다른 구성요소를 포함할 수도 있다는 것이 통상의 기술자에게 명백할 것이다. 예를 들어, 데이터 입력장치, 디스플레이 및/또는 인쇄와 같은 출력장치, 네트워크, 네트워크 인터페이스 및 프로토콜 등을 더 포함할 수 있다.
도 9는, 본 출원의 다른 일 측면에 따른, 사용자 맞춤형 미백 솔루션 제공 방법의 흐름도이다.
도 9의 사용자 맞춤형 미백 솔루션 제공 방법은 도 2의 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)과 같은, 하나 이상의 컴퓨팅 장치에 의해 수행된다.
도 9을 참조하면, 사용자 맞춤형 치아 미백 솔루션 제공 방법은, 사용자의 치아 이미지를 수신하는 단계(S110), 및 수신한 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계(S210)를 포함한다.
상기 단계(S110)에서 사용자의 치아 및 광학 파라미터 카드를 포함한 치아 이미지가 획득될 수도 있다.
상기 단계(S210)에서 사용자의 치아 중 적어도 하나의 치아에 대한 색상 지수가 산출될 수도 있다.
상기 단계(S210)는, 사용자의 치아 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하는 단계; CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 상기 사용자의 치아의 CIE 색상 값을 산출하는 단계; 및 산출된 상기 사용자의 치아의 CIE 색상 값에 기초하여 해당 치아에 대한 색상 지수를 산출하는 단계; 를 포함할 수도 있다.
일부 실시 예들에서, 상기 치아의 CIE 색상 값에 기초하여 사용자의 치아에 대한 색상 지수를 산출하는 단계는, 산출된 사용자의 치아의 CIE 색상 값이 매칭하는 색상 지수를 상기 제1 CIE 색상 테이블에서 검색하여 해당 치아에 대한 색상 지수로 산출할 수도 있다.
또한, 일부 실시 예들에서, 상기 단계(S210)는, 사용자의 치아 영역의 제1 치아 부분 내지 제3 치아 부분 중 하나 이상의 부분의 CIE 색상 값을 각각 산출하는 단계; 및 산출된 각 치아 부분의 CIE 색상 값에 기초하여 특정 치아 전체에 대한 색상 지수를 산출하는 단계를 포함할 수도 있다. 또한, 일부 실시 예들에서, 산출된 각 치아 부분의 CIE 색상 값에 기초하여 특정 치아 전체에 대한 색상 지수를 산출하는 단계는 산출된 각 치아 부분의 CIE 색상 값의 평균 값을 치아의 CIE 색상 값으로 산출하여 치아 전체에 대한 색상 지수를 산출할 수도 있다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 방법은, 사용자의 얼굴 내 치아의 주변 영역을 포함한 사용자의 얼굴 이미지를 수신하는 단계(S130), 및 수신한 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계(S230)를 포함한다.
일부 실시 예들에서, 상기 단계(S110)의 치아 이미지, 단계(S130)의 얼굴 이미지는 도 4와 같은 단일 이미지를 촬영함으로써 획득될 수도 있다. 상기 단계(S110 및 S130)의 사용자의 치아 이미지 및 사용자의 얼굴 이미지는 사용자의 치아 및 주변 영역을 포함한 단일 얼굴 이미지를 수신하는 것일 수도 있다.
상기 단계(S130, S230)는 상기 단계(S110, S210)와 유사하므로, 차이점을 위주로 서술한다.
상기 단계(S130)에서 사용자의 얼굴 내 주변 영역 및 광학 파라미터 카드를 포함한 도 4의 얼굴 이미지가 획득될 수도 있다.
상기 단계(S230)은, 사용자의 얼굴 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하는 단계; 및 CIE L*a*b 공간으로 변환된 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 치아의 주변 영역의 피부의 CIE 색상 값을 산출하는 단계;를 포함할 수도 있다.
일부 실시 예들에서, 상기 피부의 CIE 색상 값에 기초하여 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계는, 산출된 사용자의 얼굴 내 주변 영역의 피부의 CIE 색상 값이 매칭하는 색상 지수를 미리 저장된 제2 CIE 색상 테이블에서 검색하여 해당 피부에 대한 색상 지수로 산출할 수도 있다.
단일 이미지로부터 단계(S110)의 치아 이미지, 단계(S130)의 얼굴 이미지가 획득될 경우, 상기 단계(S210 및 S230)의 색상 지수는 단일 얼굴 이미지로부터 산출될 수도 있다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 방법은, 단계(S210)에서 산출된 사용자의 치아에 대한 색상 지수, 및 단계(S230)에서 산출된 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계(S300);를 포함한다.
상기 단계(200)에서 미백 목표 색상 지수는 사용자의 현재 색상을 분석한 결과인, 단계(S210)에서 산출된 사용자의 치아에 대한 색상 지수 보다 밝거나 보다 하얀색에 가까운 색상을 가리키는 치아 색상 지수이다. 예를 들어, 사용자의 특정 치아에 대한 색상 지수가 도 5의 15로 산출될 경우 도 5의 14 이하의 값을 갖는 미백 목표 색상 지수가 산출될 수도 있다.
상기 단계(S300)는, 사용자의 치아에 대한 색상 지수, 및 사용자의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하여, 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 것일 수도 있다.
상기 솔루션 분석 모델은 사용자의 치아에 대한 색상 지수 및 사용자의 피부에 대한 색상 지수의 쌍을 트래이닝 데이터로서 이용하여 학습된 기계학습 모델이다.
상기 단계(S300)에서 사용자의 치아에 대한 미백 목표 색상 지수는 모델에 입력된 단계(S210)의 사용자의 치아에 대한 색상 지수에 대한 상대적인 값으로 표현될 수도 있다.
상기 솔루션 분석 모델에 대해서는 위에서 서술하였는 바, 자세한 설명은 생략한다.
또한, 상기 사용자 맞춤형 치아 미백 솔루션 제공 방법은, 미백 목표 색상을 갖기 위한 미백 솔루션을 사용자에게 제공하기 위해, 상기 사용자의 치아에 대한 미백 목표 색상 지수에 기초한 미백 솔루션 정보를 전자 장치(110)로 전송하는 단계(S400)를 포함할 수도 있다.
상기 단계(S400)에서 미백 솔루션을 수신하는 전자 장치(110)는 사용자의 전자 장치(110-1) 또는 의료진의 전자 장치(110-2)일 수도 있다.
상기 단계(S400)는, 미리 저장된 솔루션 테이블을 이용하여 상기 미백 솔루션 정보를 획득하는 단계; 및 획득된 미백 솔루션 정보를 전자 장치(110)로 전송하는 단계를 포함한다.
단계(S300)에서 산출된 사용자의 치아에 대한 미백 목표 색상 지수 및 단계(S110)에서 산출된 사용자의 치아에 대한 색상 지수 간의 차이를 산출하는 단계; 및 산출된 지수의 차이에 대응한 미백 방식, 용품, 회수, 기간 중 하나 이상의 해당 솔루션 정보를 미리 저장된 솔루션 테이블에서 검색하는 단계를 포함할 수도 있다.
또한, 일부 실시 예들에서, 상기 사용자 맞춤형 치아 미백 솔루션 제공 방법은, 사용자에게 미백 솔루션을 수행할 치과 병원을 추천하는 단계(S500)를 더 포함할 수도 있다.
상기 단계(S500)는, 미리 저장된 치과 병원 목록 중에서 사용자에게 제공될 미백 솔루션을 수행 가능한 적어도 하나의 치과 병원의 서브 목록을 검색하는 단계; 및 서브 목록 내에서 치과 병원을 추천 치과 병원으로 결정하는 단계를 포함할 수도 있다. 결정된 추천 치과 병원의 정보(예컨대, 주소, 명칭, 연락처 등)가 사용자의 전자 장치(110-1)로 전송될 수도 있다(S500).
또한, 일부 실시 예들에서, 사용자 맞춤형 치아 미백 솔루션 제공 방법은, 미백 솔루션을 제공 받은 사용자의 미백 상태를 관리하는 단계(S600)를 더 포함할 수도 있다.
상기 단계(S600)는, 미백 솔루션이 종료된 이후에도 일정 주기별로 미백 관리 알림을 사용자의 전자 장치(110-1)로 전송하는 것일 수도 있다.
도 9의 상기 사용자 맞춤형 치아 미백 솔루션 제공 방법의 일부 실시 예들에서, 상기 단계(S210)에서 사용자의 기준 치아에 대한 색상 지수가 산출될 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 기준 치아에 대한 색상 지수를 이용하여 사용자 맞춤형 미백 솔루션 정보를 산출할 수도 있다(S300). 이에 대해서는 아래의 도 10를 참조해 보다 상세히 서술한다.
도 10은, 본 출원의 일 실시 예에 따른, 미백 목표 색상 산출 과정의 흐름도이다.
도 10의 과정은 도 9의 단계(S210, S230, S300)와 유사하므로, 차이점을 위주로 서술한다.
도 10을 참조하면, 상기 단계(S210)에서 사용자의 기준 치아에 대한 색상 지수가 산출될 수도 있다. 예를 들어, 11번 치아, 21번 치아에 대한 색상 지수가 산출될 수도 있다.
상기 단계(S230)에서 사용자의 기준 치아의 주변 영역의 피부에 대한 색상 지수가 산출된다.
상기 단계(S300)는, 사용자의 치아에 대한 미백 목표 색상 지수를 산출하기 위해, 사용자의 기준 치아에 대한 색상 지수, 및 사용자의 기준 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하는 것일 수도 있다. 일부 실시 예들에서, 상기 솔루션 분석 모델은 샘플 사용자의 기준 치아에 대한 색상 지수, 및 사용자의 기준 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수의 쌍을 트래이닝 데이터로 이용하여 학습된 것일 수도 있다.
상기 단계(S300)에서 사용자의 현재 기준 치아의 색상 지수를 사용자의 현재 치아 전체의 대표 색상 지수로 이용하여 사용자의 치아에 대한 미백 목표 색상 지수가 산출된다.
상기 단계(S400)에서 사용자에게 제공되는 미백 솔루션 정보는 사용자의 기준 치아에 대한 색상 지수 및 이에 기초한 사용자의 치아에 대한 미백 목표 색상 지수에 기초하여 솔루션 테이블에서 검색될 수도 있다.
도 9의 상기 사용자 맞춤형 치아 미백 솔루션 제공 방법의 일부 실시 예들에서, 상기 단계(S210)에서 사용자의 치아 각각에 대한 색상 지수가 산출될 수도 있다. 상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템(130)은 각각의 개별 치아에 대한 색상 지수를 이용하여 사용자 맞춤형 미백 솔루션 정보를 산출할 수도 있다(S300). 이에 대해서는 아래의 도 11를 참조해 보다 상세히 서술한다.
도 11은, 본 출원의 일 실시 예에 따른, 미백 목표 색상 산출 과정의 흐름도이다.
도 11의 과정은 도 9의 단계(S210, S230, S300)와 유사하므로, 차이점을 위주로 서술한다.
도 11의 상기 단계(S210)에서 사용자의 치아 각각에 대한 색상 지수가 산출될 수도 있다.
상기 단계(S230)에서 각 치아에 대응한 주변 서브 영역에 표현된 사용자의 피부에 대한 색상 지수가 산출될 수도 있다. 예를 들어, 도 7의 20개의 주변 서브 영역의 피부에 대한 20개의 색상 지수가 산출될 수도 있다. 상기 20개의 색상 지수는 동일 또는 상이한 값으로 이루어질 수도 있다.
상기 단계(S300)는, 사용자의 각각의 치아에 대한 미백 목표 색상 지수를 각각 산출하기 위해, 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하는 단계(S310)를 포함할 수도 있다. 일부 실시 예들에서, 상기 솔루션 분석 모델은 샘플 사용자의 개별 치아에 대한 색상 지수, 및 해당 주변 서브 영역의 피부에 대한 색상 지수의 쌍을 트래이닝 데이터로 이용하여 학습된 것일 수도 있다.
상기 단계(S310)에서 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수가 각각 산출될 수도 있다.
또한, 일부 실시 예들에서, 상기 단계(S300)는, 사용자의 치아에 대한 미백 목표 색상 지수를 보정하는 단계(S350)를 더 포함할 수도 있다. 일부 실시 예들에서, 상기 단계(S350)는, 사용자의 치아에 대한 미백 목표 색상 지수 간의 편차로 이루어진 치아 미백 색상의 편차 분포를 산출하는 단계; 상기 치아 미백 색상의 편차 분포에서 편차 외란을 검출하는 단계; 상기 편차 외란이 검출된 경우 상기 인접한 치아의 쌍의 미백 목표 색상 지수 간의 편차를 보다 감소하도록 편차 외란과 관련된 인접한 치아의 쌍 중 적어도 하나의 치아에 대한 미백 목표 색상 지수를 보정하는 단계를 포함할 수도 있다.
상기 단계(S400)에서 사용자에게 제공되는 미백 솔루션 정보는 개별 치아에 색상 지수 및 개별 치아에 대한 미백 목표 색상 지수에 기초하여 솔루션 테이블에서 검색될 수도 있다.
하드웨어를 이용하여 본 발명의 실시 예를 구현하는 경우에는, 본 출원의 실시 예들을 수행하도록 구성된 ASICs(application specific integrated circuits) 또는 DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays) 등이 본 출원의 구성요소에 구비될 수 있다.
이상에서 설명한 본 출원의 실시 예들에 따른 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법에 의한 동작은 적어도 부분적으로 컴퓨터 프로그램으로 구현되어, 컴퓨터로 읽을 수 있는 기록매체에 기록될 수 있다. 예를 들어, 프로그램 코드를 포함하는 컴퓨터-판독가능 매체로 구성되는 프로그램 제품과 함께 구현되고, 이는 기술된 임의의 또는 모든 단계, 동작, 또는 과정을 수행하기 위한 프로세서에 의해 실행될 수 있다.
상기 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등을 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수도 있다. 또한, 본 실시예를 구현하기 위한 기능적인 프로그램, 코드 및 코드 세그먼트(segment)들은 본 실시예가 속하는 기술 분야의 통상의 기술자에 의해 용이하게 이해될 수 있을 것이다.
이상에서 살펴본 본 발명은 도면에 도시된 실시예들을 참고로 하여 설명하였으나 이는 예시적인 것에 불과하며 당해 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 실시예의 변형이 가능하다는 점을 이해할 것이다. 그러나, 이와 같은 변형은 본 발명의 기술적 보호범위 내에 있다고 보아야 한다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해서 정해져야 할 것이다.

Claims (13)

  1. 사용자 맞춤형 치아 미백 솔루션 제공 시스템에 있어서,
    미백 솔루션이 제공될 사용자의 치아 이미지 및 사용자의 얼굴 내 치아의 주변 영역을 포함한 사용자의 얼굴 이미지를 전자 장치로부터 수신하고,
    수신한 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하며 - 상기 치아에 대한 색상 지수는 미리 설정된 복수의 치아 색상 중 어느 하나를 가리킴,
    수신한 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하고 - 상기 피부에 대한 색상 지수는 미리 설정된 복수의 피부 색상 중 어느 하나를 가리킴,
    산출된 사용자의 치아에 대한 색상 지수, 및 산출된 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하며, 그리고
    미백 목표 색상을 갖기 위한 미백 솔루션을 사용자에게 제공하기 위해, 상기 사용자의 치아에 대한 미백 목표 색상 지수에 기초한 미백 솔루션 정보를 전자 장치로 전송하도록 구성되며,
    상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
    사용자의 치아에 대한 미백 목표 색상 지수를 산출하기 위해, 사용자의 치아에 대한 색상 지수, 및 사용자의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하도록 구성되며,
    상기 솔루션 분석 모델은 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합과 미백 목표 색상 지수 간의 상관 관계를 추론하여, 사용자의 얼굴 내 주변 영역의 피부에 매칭하는 치아 색상을 가리키는, 사용자의 치아에 대한 미백 목표 색상 지수를 판단하도록 구성된 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  2. 청구항 제1항에 있어서,
    상기 사용자의 치아에 대한 색상 지수를 산출하기 위해, 사용자의 치아 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하고, CIE L*a*b 공간으로 변환된 사용자의 치아 이미지에서 상기 사용자의 치아의 CIE 색상 값을 산출하며, 그리고 산출된 상기 사용자의 치아의 CIE 색상 값에 기초하여 해당 치아에 대한 색상 지수를 산출하며, 그리고
    상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하기 위해, 사용자의 얼굴 이미지의 원본 색 공간을 CIE L*a*b 공간으로 변환하고, CIE L*a*b 공간으로 변환된 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 치아의 주변 영역의 피부의 CIE 색상 값을 산출하도록 구성되는 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  3. 청구항 제2항에 있어서,
    치아에 대한 색상 지수를 산출하기 위해, 사용자의 치아 영역의 제1 치아 부분 내지 제3 치아 부분 중 하나 이상의 부분의 CIE 색상 값을 각각 산출하도록 더 구성되고,
    상기 제1 치아 부분은 치경부(Cervical part)를 포함하고, 상기 제3 치아 부분은 교합면 부분(Occlusal part)을 포함하며, 상기 제2 치아 부분은 제1 치아 부분과 제3 치아 부분 사이의 중간 부분(middle part)을 포함하는 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  4. 삭제
  5. 청구항 제1항에 있어서, 상기 솔루션 분석 모델은 복수의 트래이닝 샘플로 이루어진 트래이닝 데이터 세트를 이용하여 미리 학습되며,
    각 트래이닝 샘플은 트래이닝 데이터 및 레이블 데이터를 각각 가지며,
    상기 트래이닝 데이터는 샘플 사용자의 얼굴 이미지 및 치아 이미지로부터 산출된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 샘플 조합을 포함하는 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  6. 청구항 제5항에 있어서,
    상기 솔루션 분석 모델은 출력될 미백 목표 색상 지수를 입력된 치아에 대한 색상 지수로부터 상대적인 색상 지수로 표현 가능한, 복수의 클래스를 포함하고,
    솔루션 분석 모델을 학습하는데 이용된 레이블 데이터는 샘플 사용자의 치아에 대한 색상 지수와 샘플 사용자의 실제 미백 처리된 치아의 색상 지수의 차이 값을 가리키는 클래스 값인 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  7. 청구항 제1항에 있어서,
    상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
    사용자의 얼굴 내 치아의 주변 영역의 피부에 대한 색상 지수를 산출하기 위해, 사용자의 얼굴 이미지에서 상기 주변 영역을 상기 사용자의 치아에 대응한 주변 서브 영역으로 구획하여 각각의 서브 영역을 지정하고,
    지정된 주변 서브 영역의 피부에 대한 색상 지수를 산출하며, 그리고
    사용자의 각각의 치아에 대한 미백 목표 색상 지수를 각각 산출하기 위해, 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하도록 구성되며,
    상기 솔루션 분석 모델은, 주변 영역 전체 대비 개별 치아 각각의 해당 주변 서브 영역의 피부에 보다 조화를 이루는 미백 목표 색상 지수를 산출하도록, 사용자의 개별 치아에 대한 색상 지수, 및 해당 주변 서브 영역의 피부에 대한 색상 지수 각각의 값의 쌍을 트래이닝 데이터로 이용하여 학습된 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  8. 청구항 제7항에 있어서,
    상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
    사용자의 치아에 대한 미백 목표 색상 지수를 보정하기 위해, 사용자의 치아에 대한 미백 목표 색상 지수 간의 편차로 이루어진 치아 미백 색상의 편차 분포를 산출하고, 상기 치아 미백 색상의 편차 분포에서 편차 외란을 검출하며, 상기 편차 외란이 검출된 경우, 상기 사용자의 치아 구조 내에서 인접한 치아의 쌍의 미백 목표 색상 지수 간의 편차를 보다 감소하기 위해, 편차 외란과 관련된 인접한 치아의 쌍 중 적어도 하나의 치아에 대한 미백 목표 색상 지수를 보정하도록 더 구성되는 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  9. 청구항 제1항에 있어서,
    상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
    사용자의 현재 치아에 대한 색상 지수와 미백 목표 색상 지수 간의 차이만큼의 미백 효과를 얻는데 요구되는 미백 방식, 용품, 회수, 기간 중 하나 이상의 해당 솔루션 정보를 포함한 솔루션 테이블을 미리 저장하고,
    솔루션 정보를 포함한 미백 솔루션을 전자 장치로 전송하기 위해, 사용자의 치아에 대한 미백 목표 색상 지수를 위해 요구되는 솔루션 정보를 상기 솔루션 테이블에서 검색하도록 구성된 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  10. 청구항 제1항에 있어서,
    상기 사용자 맞춤형 치아 미백 솔루션 제공 시스템은,
    사용자에게 미백 솔루션을 수행할 치과 병원을 추천하기 위해, 미리 저장된 치과 병원 목록 중에서 사용자에게 제공될 미백 솔루션을 수행 가능한 적어도 하나의 치과 병원의 서브 목록을 검색하고, 서브 목록 내 각각의 치과 병원과 사용자 간의 지리적 거리에 기초하여 추천 치과 병원을 결정하도록 더 구성되는 것을 특징으로 하는,
    사용자 맞춤형 치아 미백 솔루션 제공 시스템.
  11. 프로세서를 포함한 컴퓨팅 장치에 의해 판독가능하고, 상기 컴퓨팅 장치에 의해 동작 가능한 프로그램 명령어를 저장하는 컴퓨터 판독가능한 기록매체에 있어서,
    상기 프로그램 명령어는, 상기 컴퓨팅 장치의 프로세서에 의해 실행되는 경우,
    미백 솔루션이 제공될 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계 - 상기 치아에 대한 색상 지수는 미리 설정된 복수의 치아 색상 중 어느 하나를 가리킴;
    사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계 - 상기 사용자의 얼굴 이미지는 사용자의 얼굴 내 치아의 주변 영역을 포함하고, 상기 피부에 대한 색상 지수는 미리 설정된 복수의 피부 색상 중 어느 하나를 가리킴;
    산출된 사용자의 치아에 대한 색상 지수, 및 산출된 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수에 기초하여 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계; 및
    미백 목표 색상을 갖기 위한 미백 솔루션을 사용자에게 제공하기 위해, 상기 사용자의 치아에 대한 미백 목표 색상 지수에 기초한 미백 솔루션 정보를 전자 장치로 전송하는 단계를 수행하기 위한 명령어를 포함하고,
    상기 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계는, 사용자의 치아에 대한 색상 지수, 및 사용자의 피부에 대한 색상 지수를 미리 학습된 솔루션 분석 모델을 적용하는 것이며,
    상기 솔루션 분석 모델은 입력된 치아에 대한 색상 지수 및 피부에 대한 색상 지수의 조합과 미백 목표 색상 지수 간의 상관 관계를 추론하여, 사용자의 얼굴 내 주변 영역의 피부에 매칭하는 치아 색상을 가리키는, 사용자의 치아에 대한 미백 목표 색상 지수를 판단하도록 구성된 것을 특징으로 하는,
    컴퓨터 판독가능한 기록매체.
  12. 청구항 제11항에 있어서,
    상기 사용자의 치아 이미지는 기준 치아를 포함하고,
    상기 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계는,
    상기 사용자의 기준 치아에 대한 색상 지수를 산출하는 것을 특징으로 하는,
    컴퓨터 판독가능한 기록매체.
  13. 청구항 제11항에 있어서,
    상기 사용자의 치아 이미지에서 상기 사용자의 치아에 대한 색상 지수를 산출하는 단계는,
    사용자의 개별 치아 각각에 대한 색상 지수를 산출하는 것이고,
    상기 사용자의 얼굴 이미지에서 상기 사용자의 얼굴 내 주변 영역의 피부에 대한 색상 지수를 산출하는 단계는,
    사용자의 얼굴 이미지에서 상기 주변 영역을 상기 사용자의 치아에 대응한 주변 서브 영역으로 구획하여 각각의 서브 영역을 지정하는 단계; 및
    지정된 주변 서브 영역의 피부에 대한 색상 지수를 산출하는 단계를 포함하고,
    상기 사용자의 치아에 대한 미백 목표 색상 지수를 산출하는 단계는,
    사용자의 각각의 치아에 대한 미백 목표 색상 지수를 각각 산출하기 위해, 개별 치아에 대한 색상 지수 및 해당 주변 서브 영역의 피부에 대한 색상 지수에 기초하여 각 치아에 대한 미백 목표 색상 지수가 각각 산출되는 것을 특징으로 하는,
    컴퓨터 판독가능한 기록매체.
KR1020220111945A 2022-09-05 2022-09-05 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법 KR102564373B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020220111945A KR102564373B1 (ko) 2022-09-05 2022-09-05 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법
KR1020230097402A KR20240034105A (ko) 2022-09-05 2023-07-26 기계학습된 인공신경망을 이용해 치아 주변 영역에서 피부를 고려하여 치아 미백 솔루션을 제공하는 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220111945A KR102564373B1 (ko) 2022-09-05 2022-09-05 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020230097402A Division KR20240034105A (ko) 2022-09-05 2023-07-26 기계학습된 인공신경망을 이용해 치아 주변 영역에서 피부를 고려하여 치아 미백 솔루션을 제공하는 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR102564373B1 true KR102564373B1 (ko) 2023-08-07

Family

ID=87561238

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020220111945A KR102564373B1 (ko) 2022-09-05 2022-09-05 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법
KR1020230097402A KR20240034105A (ko) 2022-09-05 2023-07-26 기계학습된 인공신경망을 이용해 치아 주변 영역에서 피부를 고려하여 치아 미백 솔루션을 제공하는 시스템 및 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020230097402A KR20240034105A (ko) 2022-09-05 2023-07-26 기계학습된 인공신경망을 이용해 치아 주변 영역에서 피부를 고려하여 치아 미백 솔루션을 제공하는 시스템 및 방법

Country Status (1)

Country Link
KR (2) KR102564373B1 (ko)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005176915A (ja) * 2003-12-16 2005-07-07 Gc Corp 歯牙材料色調選択支援プログラム及び歯牙材料色調選択支援方法
KR20100138952A (ko) * 2008-02-22 2010-12-31 글락소스미스클라인 엘엘씨 맞춤형 의치를 제조하는 장치 및 방법
JP2014000176A (ja) * 2012-06-15 2014-01-09 Kuraray Noritake Dental Inc 歯の色を判定する方法および該方法を実施するためのシェードガイド
KR20180068703A (ko) * 2016-12-14 2018-06-22 최성숙 구강 관리 서비스 시스템 및 방법
KR20190105333A (ko) 2018-03-05 2019-09-17 재단법인 경북아이티융합 산업기술원 영상분석을 이용한 구강 상태 원격 모니터링 시스템 및 그 방법
KR102286717B1 (ko) * 2019-08-01 2021-08-06 연세대학교 산학협력단 치아 미백 효과를 예측하기 위한 정보제공방법
JP2022070463A (ja) * 2020-10-27 2022-05-13 キヤノン株式会社 歯科用補綴物製造システム、歯科用補綴物製造方法及びプログラム
KR20220088626A (ko) * 2020-12-18 2022-06-28 주식회사 쓰리디산업영상 맞춤형 치아 색상 설정 및 3차원 인쇄 방법
KR102437680B1 (ko) * 2020-03-20 2022-08-29 이상훈 치아 색상 결정시스템, 이를 이용한 치아 색상 결정방법 및 의치 제작 방법

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005176915A (ja) * 2003-12-16 2005-07-07 Gc Corp 歯牙材料色調選択支援プログラム及び歯牙材料色調選択支援方法
KR20100138952A (ko) * 2008-02-22 2010-12-31 글락소스미스클라인 엘엘씨 맞춤형 의치를 제조하는 장치 및 방법
JP2014000176A (ja) * 2012-06-15 2014-01-09 Kuraray Noritake Dental Inc 歯の色を判定する方法および該方法を実施するためのシェードガイド
KR20180068703A (ko) * 2016-12-14 2018-06-22 최성숙 구강 관리 서비스 시스템 및 방법
KR20190105333A (ko) 2018-03-05 2019-09-17 재단법인 경북아이티융합 산업기술원 영상분석을 이용한 구강 상태 원격 모니터링 시스템 및 그 방법
KR102286717B1 (ko) * 2019-08-01 2021-08-06 연세대학교 산학협력단 치아 미백 효과를 예측하기 위한 정보제공방법
KR102437680B1 (ko) * 2020-03-20 2022-08-29 이상훈 치아 색상 결정시스템, 이를 이용한 치아 색상 결정방법 및 의치 제작 방법
JP2022070463A (ja) * 2020-10-27 2022-05-13 キヤノン株式会社 歯科用補綴物製造システム、歯科用補綴物製造方法及びプログラム
KR20220088626A (ko) * 2020-12-18 2022-06-28 주식회사 쓰리디산업영상 맞춤형 치아 색상 설정 및 3차원 인쇄 방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
의약외품 치아미백제 효력시험법 가이드라인 (2015.12.)

Also Published As

Publication number Publication date
KR20240034105A (ko) 2024-03-13

Similar Documents

Publication Publication Date Title
CN114502061B (zh) 使用深度学习的基于图像的自动皮肤诊断
US20190216333A1 (en) Thermal face image use for health estimation
US10943156B2 (en) Machine-implemented facial health and beauty assistant
JP2017211970A (ja) ケア情報取得方法、ケア情報共有方法及びこれらの方法のための電子装置
US11010894B1 (en) Deriving a skin profile from an image
CN111868742A (zh) 机器实现的面部健康和美容助理
JP5058064B2 (ja) 絵画療法の模様選択及び配列、色塗り分析方法、絵画療法の模様分析による心理症状の診断方法、及びこれを行うためのプログラムを記録した記録媒体
US11817205B2 (en) Virtual augmentation of clinical care environments
US20230215063A1 (en) Computer-implemented detection and processing of oral features
US20230237650A1 (en) Computer-implemented detection and processing of oral features
KR102564373B1 (ko) 사용자 맞춤형 치아 미백 솔루션 제공 시스템 및 방법
CA2933799A1 (en) System and method for automatically generating a facial remediation design and application protocol to address observable facial deviations
CN115668279A (zh) 用于确定面部图像部分的感知吸引力的基于口腔护理的数字成像系统和方法
JP2021058361A (ja) 生体情報取得装置およびプログラム
KR102404302B1 (ko) 인공 지능과 빅 데이터를 이용한 얼굴 피부 상태 분석 서버의 작동 방법과 프로그램
Gutstein et al. Hand-eye coordination: automating the annotation of physician-patient interactions
Hexley et al. Psychophysics: Concepts, methods, and frontiers.
US20230320582A1 (en) Visual function examination device, spectacle lens presentation system, printed matter, visual function examination method, spectacle lens presentation method, and computer-readable medium
US20240086761A1 (en) Neuroergonomic api service for software applications
US20240265533A1 (en) Computer-based body part analysis methods and systems
EP4002380A1 (en) Assessing a region of interest of a subject
US20240120071A1 (en) Quantifying and visualizing changes over time to health and wellness
US20230316812A1 (en) Sign language sentiment analysis
EP4290484A1 (en) Face-to-camera distance measurement for telemedical ophthalmological tests
JP2024022873A (ja) 診療意思決定支援装置、診療意思決定支援方法、およびプログラム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant