KR20210030437A - 색소 검출 방법 및 전자 장치 - Google Patents

색소 검출 방법 및 전자 장치 Download PDF

Info

Publication number
KR20210030437A
KR20210030437A KR1020217004153A KR20217004153A KR20210030437A KR 20210030437 A KR20210030437 A KR 20210030437A KR 1020217004153 A KR1020217004153 A KR 1020217004153A KR 20217004153 A KR20217004153 A KR 20217004153A KR 20210030437 A KR20210030437 A KR 20210030437A
Authority
KR
South Korea
Prior art keywords
channel
image
electronic device
lab
rgb
Prior art date
Application number
KR1020217004153A
Other languages
English (en)
Other versions
KR102548317B1 (ko
Inventor
헝휘 루
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Publication of KR20210030437A publication Critical patent/KR20210030437A/ko
Application granted granted Critical
Publication of KR102548317B1 publication Critical patent/KR102548317B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/004—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/442—Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/443—Evaluating skin constituents, e.g. elastin, melanin, water
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/444—Evaluating skin marks, e.g. mole, nevi, tumour, scar
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062—Arrangements for scanning
    • A61B5/0064—Body surface scanning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details
    • G06T2207/20028—Bilateral filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30088—Skin; Dermal
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Dermatology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Medicinal Chemistry (AREA)
  • Mathematical Physics (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Analysis (AREA)
  • Telephone Function (AREA)

Abstract

색소 검출 방법과 전자 장치가 제공되며, 단말기 기술 분야에 관한 것이다. 색소 검출 방법은 구체적으로, 검출될 RGB 피부 이미지로부터 제1 이미지를 추출하는 단계(301) - 제1 이미지는 RGB 피부 이미지의 신체 반사 성분을 나타내는 데 사용되고, RGB 피부 이미지는 RGB 이미지 촬영 기능을 가진 장치에 의해 촬영됨 -; 색소의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선 간의 대응관계에 따라 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 색소를 추출하는 단계(302); 및 추출된 색소에 따라 의사 컬러 이미지를 생성하고, 의사 컬러 이미지를 표시하는 단계(303)를 포함한다. 이 해결책에 기초하여, 색소 검출을 수행하면 보편성이 양호하다.

Description

색소 검출 방법 및 전자 장치
본 출원은 2018년 7월 16일에 중국 특허청에 출원된 중국 특허출원 제 201810776213.1호("SKIN PIGMENT DETECTION METHOD AND APPARATUS")에 대해 우선권을 주장하는 바이며, 그 전체 내용이 원용에 의해 본 명세서에 포함된다.
본 출원은 단말기 기술 분야에 관한 것으로, 상세하게는 색소 검출 방법 및 전자 장치에 관한 것이다.
피부 색소 분포는 피부 외양 및 많은 피부 문제와 직접적으로 관련되어 있다. 예를 들어, 멜라닌의 불균일한 분포가 기미, 주근깨, 및 일광 화상과 같은 피부 문제를 유발한다. 다른 예를 들면, 헤모글로빈 함량의 변화가 여드름, 민감성 피부, 염증, 및 혈관 확장과 직접적으로 관련되어 있다. 따라서 피부 색소를 정확하게 검출하는 것은 스킨 케어 제품 및 스킨 케어 기기의 효과를 연구하고 테스트하는 데 중요한 역할을 할 뿐만 아니라 소비자의 일상적인 미용 및 피부 관리에도 중요하다.
현재, 피부 색소가 모바일 단말기 상의 애플리케이션을 이용하여 검출될 수 있다. 일반적인 피부 색소 검출 방식은, 서로 다른 피부색을 특징으로 하고 다른 시나리오에서 획득된 피부 이미지를 이용하여 오프라인 훈련을 수행함으로써, 피부 색소를 분리하는 데 사용되는 검출 모델을 획득하고; 이 검출 모델을 이용하여 피부 색소를 분리하여 테스트 이미지에 대해 검출을 수행하는 것을 포함한다. 모바일 검출 시나리오들이 크게 다르기 때문에, 훈련용 모든 시나리오에서 피부 이미지를 획득하는 것이 불가능하다. 따라서 검출 모델은 복잡한 가변 시나리오에서 수행되는 피부 색소 검출에 적용될 수 없다. 결과적으로, 검출 모델의 적용 가능성이 낮다.
본 출원은 기존의 피부 색소 검출 기술의 적용 가능성이 불충분한 문제를 해결하기 위한 색소 검출 방법 및 전자 장치를 제공한다.
제1 양태에 따르면, 본 출원의 실시예는 색소 검출 방법을 제공한다. 상기 색소 검출 방법은, 검출될 RGB 피부 이미지로부터 제1 이미지를 추출하는 단계 - 제1 이미지는 상기 RGB 피부 이미지 내의 신체 반사 성분(body reflection component)을 나타내는 데 사용되고, 상기 RGB 피부 이미지는 RGB 이미지 촬영 기능을 가진 장치에 의해 촬영됨 -; 상기 색소의 제1 스펙트럼 응답 곡선과 상기 RGB 이미지 촬영 기능을 가진 상기 장치의 제2 스펙트럼 응답 곡선 간의 대응관계에 기초하여 상기 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 색소를 추출하는 단계; 및 상기 추출된 색소에 기초하여 의사 컬러 이미지(pseudo-color image)를 생성하고, 상기 의사 컬러 이미지를 표시하는 단계를 포함한다.
이 해결책에 기초하여, 상기 제1 이미지는 상기 검출될 RGB 피부 이미지로부터 추출된다. 여기서, 상기 제1 이미지는 RGB 피부 이미지 내의 상기 신체 반사 성분을 나타내는 데 사용되고, 상기 RGB 피부 이미지는 상기 RGB 이미지 촬영 기능을 가진 상기 장치에 의해 촬영된다. 또한, 상기 색소는 상기 색소의 제1 스펙트럼 응답 곡선과 상기 상기 RGB 이미지 촬영 기능을 가진 상기 장치의 제2 스펙트럼 응답 곡선 간의 상기 관계에 기초하여 상기 제1 이미지로부터 추출된다. 이와 같이, 서로 다른 시나리오에서 촬영된 RGB 피부 이미지 내의 색소들이 검출될 수 있도록, 상기 스펙트럼 응답 관계에 기초하여 색소 추출을 수행함으로써, 서로 다른 시나리오에서 획득된 피부 이미지에 대해 훈련이 미리 수행된 후에만 색소 검출이 수행될 수 있는 종래 기술의 사례를 방지한다. 따라서, 이 해결책에 기반한 색소 검출의 적용 가능성이 상대적으로 양호하다.
또한, 상기 RGB 피부 이미지로부터 추출된 상기 제1 이미지의 충실도를 개선하기 위해, 가능한 일 구현에서, 상기 검출될 RGB 피부 이미지가 제1 Lab 이미지로 변환되고; 신체 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널 각각으로부터 추출되며; 제2 Lab 이미지를 얻기 위해, 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널로부터 추출된 상기 신체 반사 성분들이 결합되고; 상기 제1 이미지를 얻기 위해 상기 제2 Lab 이미지가 RGB 이미지로 변환된다.
이와 같이, 색상 관련 정보(상기 채널과 상기 b 채널) 및 색상과 관련되지 않은 정보(상기 L 채널)가 분리되어 상기 색상 관련 정보를 개별적으로 처리할 수 있도록 상기 신체 반사 성분이 추출됨으로써, 상기 제1 이미지의 충실도를 개선하는 것을 돕는다.
가능한 설계에서, 상기 제1 Lab 이미지의 L 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 L 채널의 초기 값과 상기 제1 Lab 이미지의 L 채널의 표면 반사 성분 간의 차이이고; 상기 제1 Lab 이미지의 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 a 채널의 초기 값과 상기 제1 Lab 이미지의 a 채널의 표면 반사 성분 간의 차이이며; 상기 제1 Lab 이미지의 b 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 b 채널의 초기 값과 상기 제1 Lab 이미지의 b 채널의 표면 반사 성분 간의 차이이고; 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분은 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 필터링 처리를 개별적으로 수행하여 획득된다. 이 설계에 따르면, 상기 L 채널, 상기 a 채널, 및 상기 b 채널의 표면 반사 성분이 필터링됨으로써, 상기 L 채널, 상기 채널, 및 상기 b 채널의 신체 반사 성분을 정확하게 추출할 수 있다.
가능한 설계에서, 색소 검출 정확도를 개선하기 위해, 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분은 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 개별적으로 양방향 필터링 처리를 수행하여 획득될 수 있다. 이 설계가 상기 제1 이미지의 가장자리 정보(edge information)를 더 유지하는 데 도움이 되어 상기 색소 검출 정확도를 개선할 수 있다.
가능한 설계에서, 상기 색소는 헤모글로빈, 멜라닌, 카로틴, 리포크롬, 및 담즙 색소 중 어느 하나를 포함하지만 이에 제한되지 않는다.
제2 양태에 따르면, 본 출원의 실시예는 전자 장치를 제공한다. 상기 전자 장치는 메모리, 프로세서, 및 표시 화면을 포함한다. 상기 메모리는 프로그램 명령을 저장하도록 구성된다. 상기 프로세서는 상기 메모리에 저장된 상기 프로그램 명령을 판독하도록 구성되고, 검출될 RGB 피부 이미지로부터 제1 이미지를 추출하는 연산 - 상기 제1 이미지는 상기 RGB 피부 이미지 내의 신체 반사 성분을 나타내는 데 사용되고, 상기 RGB 피부 이미지는 RGB 이미지 촬영 기능을 가진 장치에 의해 촬영됨 -; 상기 색소의 제1 스펙트럼 응답 곡선과 상기 RGB 이미지 촬영 기능을 가진 상기 장치의 제2 스펙트럼 응답 곡선 간의 대응관계에 기초하여 상기 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 색소를 추출하는 연산; 및 상기 추출된 색소에 기초하여 의사 컬러 이미지를 생성하고, 상기 의사 컬러 이미지를 표시하는 연산을 수행한다. 상기 표시 화면은 상기 의사 컬러 이미지를 표시하도록 구성된다.
가능한 설계에서, 상기 프로세서는 구체적으로, 상기 검출될 RGB 피부 이미지를 제1 Lab 이미지로 변환하는 연산; 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널 각각으로부터 신체 반사 성분을 추출하는 연산; 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널로부터 추출된 상기 신체 반사 성분을 결합하여 제2 Lab 이미지를 획득하는 연산; 및 상기 제2 Lab 이미지를 RGB 이미지로 변환하여 상기 제1 이미지를 획득하는 연산을 수행하도록 구성된다.
가능한 설계에서, 상기 제1 Lab 이미지의 L 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 L 채널의 초기 값과 상기 제1 Lab 이미지의 L 채널의 표면 반사 성분 간의 차이이고; 상기 제1 Lab 이미지의 a 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 a 채널의 초기 값과 상기 제1 Lab 이미지의 a 채널의 표면 반사 성분 간의 차이이며; 상기 제1 Lab 이미지의 b 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 b 채널의 초기 값과 상기 제1 Lab 이미지의 b 채널의 표면 반사 성분 간의 차이이고; 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분은 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 개별적으로 필터링 처리를 수행하여 획득된다.
가능한 설계에서, 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 개별적으로 필터링 처리를 수행하여 획득된다는 것은, 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 개별적으로 양방향 필터링 처리를 수행하여 획득된다는 것을 포함한다.
가능한 설계에서, 상기 색소는 헤모글로빈, 멜라닌, 카로틴, 리포크롬, 및 담즙 색소 중 어느 하나를 포함하지만 이에 제한되지 않는다.
제3 양태에 따르면, 본 출원의 실시예는 컴퓨터 저장 매체를 제공한다. 상기 컴퓨터 저장 매체는 프로그램 명령을 저장하고, 상기 프로그램 명령은 전자 장치 상에서 실행될 때 상기 전자 장치로 하여금 본 출원의 실시예의 제1 양태 또는 제1 양태의 가능한 설계 중 어느 하나의 색소 검출 방법을 수행할 수 있게 한다.
제4 양태에 따르면, 본 출원의 실시예는 컴퓨터 프로그램 제품을 제공한다. 상기 컴퓨터 프로그램 제품은 전자 장치 상에서 실행될 때 상기 전자 장치로 하여금, 본 출원의 실시예의 제1 양태 또는 제1 양태의 가능한 설계 중 어느 하나의 색소 검출 방법을 수행할 수 있게 한다.
제5 양태에 따르면, 본 출원의 실시예는 칩을 제공한다. 상기 칩은 전자 장치 내의 메모리에 연결되고, 본 출원의 실시예의 제1 양태 또는 제1 양태의 가능한 설계 중 어느 하나의 색소 검출 방법을 수행하도록 상기 전자 장치를 제어한다.
또한, 제2 양태 내지 제5 양태로 인한 기술적 효과에 대해서는 제1 양태의 설명을 참조하라. 여기서는 세부사항에 대해 다시 설명하지 않는다.
본 출원의 실시예에서 "결합"은 2개의 구성 요소가 서로 직접적으로 또는 간접적으로 결합되는 것을 의미한다는 점에 유의해야 한다.
도 1은 본 출원의 일 실시예가 적용될 수 있는 전자 장치의 구조를 개략적으로 나타내는 도면이다.
도 2는 본 출원의 일 실시예에 따른 사용자 인터페이스를 개략적으로 나타내는 도이다.
도 3은 본 출원의 일 실시예에 따른 색소 검출 방법을 개략적으로 나타내는 흐름도이다.
도 4a와 도 4b는 본 출원의 일 실시예에 따른 사용자 인터페이스를 개략적으로 나타내는 도면이다.
도 5a 내지 도 5d는 본 출원의 일 실시예에 따른 사용자 인터페이스를 개략적으로 나타내는 도면이다.
도 6은 본 출원의 일 실시예에 따른 스펙트럼 응답 곡선을 개략적으로 나타내는 도면이다.
도 7은 본 출원의 일 실시예에 따른 멜라닌에 대응하는 그레이스케일 이미지를 개략적으로 나타내는 도면이다.
도 8은 본 출원의 일 실시예에 따른 헤모글로빈에 대응하는 그레이스케일 이미지를 개략적으로 나타내는 도면이다.
도 9는 본 출원의 일 실시예가 적용될 수 있는 전자 장치의 구조를 개략적으로 나타내는 도면이다.
이하, 첨부 도면을 참조하여 본 출원의 실시예에 대해 더 상세하게 설명한다.
본 출원의 실시예에서, "적어도 하나"가 하나 이상을 의미하고, "복수"가 2개 이상을 의미한다고 이해해야 한다. "및/또는"은 연관된 객체를 설명하기 위한 연관관계를 설명하며 3가지 관계가 존재할 수 있음을 나타낸다. 예를 들어, "A 및/또는 B"는 3가지 경우, 즉 A만 존재하는 경우, A와 B가 모두 존재하는 경우, 및 B만 존재하는 경우를 나타낼 수 있다. "A와 B"는 단수형 또는 복수형일 수 있다. "/"와 같은 문자는 일반적으로 연관된 객체들 간의 "또는" 관계를 나타낸다. "다음 중 적어도 하나(의 항목)" 또는 이와 유사한 표현이 단일 항목 또는 복수의 항목의 어느 조합을 포함하여 이러한 항목의 어느 조합을 의미한다. 예를 들어, a, b, 또는 c 중 적어도 하나(의 항목)이 a; b; c; a와 b; a와 c; b와 c; 또는 a, b, 및 c를 나타낼 수 있다. 여기서 a, b 및 c는 각각 단수 형태 또는 복수 형태일 수 있다.
본 출원에서 개시된 실시예가 전자 장치에 적용될 수 있다. 본 출원의 일부 실시예에서, 전자 장치는 개인용 정보 단말기 기능(personal digital assistant function) 및/또는 음악 플레이어 기능과 같은 기능을 포함하는 휴대용 전자 장치, 예를 들어, 휴대폰, 태블릿 컴퓨터, 무선 통신 기능이 있는 웨어러블 기기(스마트 워치 등) 또는 차량 장착형 장치일 수 있다. 휴대용 전자 장치의 예시적인 실시예가 iOS®, Android®, Microsoft® 또는 다른 운영체제를 사용하는 휴대용 전자 장치를 포함하지만 이에 제한되지 않는다. 전술한 휴대용 전자 장치는 대안적으로, 터치 감지면(예를 들어, 터치 패널)을 가진 랩톱 컴퓨터(Laptop) 등일 수 있다. 또한, 본 출원의 다른 일부 실시예에서, 전술한 전자 장치가 대안적으로 터치 감지면(예를 들어, 터치 패널)을 가진 데스크탑 컴퓨터일 수 있다는 것을 이해해야 한다.
도 1은 전자 장치 구조의 개략도의 예이다.
전자 장치(100)는 프로세서(110), 외부 메모리 인터페이스(120), 내부 메모리(121), 및 유에스비(universal serial bus, USB) 인터페이스(130), 충전 관리 모듈(140), 전력 관리 모듈(141), 배터리(142), 안테나(2), 무선 통신 모듈(160), 오디오 모듈(170), 확성기(170A), 전화 수신기(170B), 마이크(170C), 헤드셋 잭(170D), 센서 모듈(180), 키(190), 모터(191), 표시기(192), 카메라(193), 및 표시 화면(194) 등을 포함할 수 있다. 센서 모듈(180)은 발광 센서(180L)를 포함한다. 또한, 센서 모듈(180)은 추가적으로, 압력 센서(180A), 자이로스코프 센서(180B), 대기압 센서(barometric pressure sensor, 180C), 자기 센서(180D), 가속도 센서(180E), 거리 센서(180F), 광 근접 센서(180G), 지문 센서(180H), 온도 센서(180J), 터치 센서(180K), 및 골전도 센서(180M) 등을 포함할 수 있다.
다른 일부 실시예에서, 본 출원의 본 실시예의 전자 장치(100)는 안테나(1), 이동 통신 모듈(150), 및 가입자 식별 모듈(subscriber identification module, SIM) 카드 인터페이스(195) 등을 더 포함할 수 있다.
프로세서(110)는 하나 이상의 처리 유닛을 포함할 수 있다. 예를 들어, 프로세서(110)는 애플리케이션 프로세서(application processor, AP), 모뎀 프로세서, 그래픽 처리 장치(graphics processing unit, GPU), 이미지 신호 프로세서(image signal processor, ISP), 컨트롤러, 메모리, 비디오 코덱, 디지털 신호 처리기(digital signal processor, DSP), 베이스밴드 프로세서, 및 신경망 처리 장치(neural-network processing unit, NPU) 등을 포함할 수 있다. 다른 처리 장치들은 독립적인 장치이거나 또는 하나 이상의 프로세서에 통합될 수 있다.
일부 실시예에서, 메모리는 추가적으로 프로세서(110)에 배치될 수 있고, 명령과 데이터를 저장하도록 구성된다. 예를 들어, 프로세서(110)의 메모리는 캐시 메모리일 수 있다. 메모리는 프로세서(110)에 의해 최근 사용되거나 또는 주기적으로 사용되는 명령이나 데이터를 저장할 수 있다. 프로세서(110)가 명령이나 데이터를 다시 사용할 필요가 있으면, 프로세서(110)는 메모리로부터 명령이나 데이터를 직접 호출할 수 있다. 이를 통해 반복적인 액세스를 방지하고 프로세서(110)의 대기 시간을 줄임으로써 시스템 효율을 개선한다.
다른 일부 실시예에서, 프로세서(110)는 하나 이상의 인터페이스를 더 포함할 수 있다. 예를 들어, 인터페이스는 USB 인터페이스(130)일 수 있다. 다른 예를 들면, 인터페이스는 대안적으로 I2C(inter-integrated circuit) 인터페이스, I2C 사운드(inter-integrated circuit sound, I2S) 인터페이스, 펄스 코드 변조(pulse code modulation, PCM) 인터페이스, 범용 비동기 수신기/송신기(universal asynchronous receiver/transmitter, UART) 인터페이스, 모바일 산업 프로세서 인터페이스(mobile industry processor interface, MIPI), 범용 입력/출력(general-purpose input/output, GPIO) 인터페이스, 또는 SIM 인터페이스 등일 수 있다. 본 출원의 본 실시예에서, 전자 장치(100)가 서로 다른 기능, 예를 들어, 촬영과 처리를 구현할 수 있도록, 전자 장치(100)의 서로 다른 모듈이 인터페이스를 통해 연결될 수 있다는 것을 이해할 수 있을 것이다. 본 출원의 본 실시예에서 전자 장치(100)의 인터페이스 연결 방식을 제한하지 않는다는 것을 유의해야 한다.
USB 인터페이스(130)는 USB 표준 규격을 따르는 인터페이스이다. 예를 들어, USB 인터페이스(130)는 미니 USB 인터페이스, 마이크로 USB 인터페이스, 및 USB 타입 C 인터페이스 등을 포함할 수 있다. USB 인터페이스(130)는 충전기에 연결되어 전자 장치(100)를 충전하도록 구성될 수 있거나, 또는 전자 장치(100)와 주변 장치 간에 데이터를 전송하도록 구성될 수 있거나, 또는 헤드셋에 연결되고 헤드셋을 이용하여 오디오를 재생하도록 구성될 수 있다. 또한, USB 인터페이스는 다른 전자 장치, 예를 들어 증강 현실(augmented reality, AR) 장치에 연결되도록 구성될 수 있다.
충전 관리 모듈(140)은 충전기로부터 충전 입력을 수신하도록 구성된다. 충전기는 무선 충전기일 수 있거나, 또는 유선 충전기일 수 있다. 유선 충전의 일부 실시예에서, 충전 관리 모듈(140)은 USB 인터페이스(130)를 이용하여 유선 충전기로부터 충전 입력을 수신할 수 있다. 무선 충전의 일부 실시예에서, 충전 관리 모듈(140)은 전자 장치(100)의 무선 충전 코일을 이용하여 무선 충전 입력을 수신할 수 있다. 배터리(142)를 충전하는 동안, 충전 관리 모듈(140)은 전력 관리 모듈 141)을 이용하여 전자 장치에 전력을 더 공급할 수 있다.
전력 관리 모듈(141)은 배터리(142), 충전 관리 모듈(140), 및 프로세서(110)에 연결되도록 구성된다. 전력 관리 모듈(141)은 배터리(142) 및/또는 충전 관리 모듈(140)로부터 입력을 수신하고, 프로세서(110), 내부 메모리(121), 외부 메모리(121), 표시 화면(194), 카메라(193), 및 무선 통신 모듈(160) 등에 전력을 공급한다. 전력 관리 모듈(141)은 추가적으로 배터리 용량, 배터리 사이클 수, 및 배터리 상태(누전 및 임피던스)와 같은 파라미터를 모니터링하도록 구성될 수 있다. 다른 일부 실시예에서, 전력 관리 모듈(141)은 대안적으로 프로세서(110)에 배치될 수 있다. 다른 일부 실시예에서, 전력 관리 모듈(141)과 충전 관리 모듈(140)은 대안적으로 동일한 장치에 배치될 수 있다.
전자 장치(100)의 무선 통신 기능이 안테나(1), 안테나(2), 이동 통신 모듈(150), 무선 통신 모듈(160), 모뎀 프로세서, 및 베이스밴드 프로세서 등을 이용하여 구현될 수 있다.
안테나(1)와 안테나(2)는 전자기파 신호를 송수신하도록 구성된다. 전자 장치(100)의 각각의 안테나는 하나 이상의 통신 주파수 대역을 커버하도록 구성될 수 있다. 서로 다른 안테나들은 안테나 이용율을 개선하기 위해 추가로 다중화될 수 있다. 예를 들어, 안테나(1)은 무선 근거리 통신망 다이버시티 안테나(wireless local area network diversity antenna)로서 다중화될 수 있다. 다른 일부 실시예에서, 안테나는 튜닝 스위치와 조합하여 사용될 수 있다.
이동 통신 모듈(150)은 2G, 3G, 4G, 또는 5G 등을 포함하여 전자 장치(100)에 적용되는 무선 통신 솔루션을 제공할 수 있다. 이동 통신 모듈(150)은 적어도 하나의 필터, 스위치, 전력 증폭기, 및 저잡음 증폭기(low noise amplifier, LNA) 등을 포함할 수 있다. 이동 통신 모듈(150)은 안테나(1)를 이용하여 전자기파를 수신하고, 수신된 전자기파에 대해 필터링 및 증폭과 같은 처리를 수행하며, 처리된 전자기파를 복조를 위해 모뎀 프로세서에 전송할 수 있다. 이동 통신 모듈(150)은 모뎀 프로세서에 의해 변조된 신호를 더 증폭하고, 증폭된 신호를 안테나(1)를 이용하여 전자기파로 변환하며, 안테나(1)를 통해 전자기파를 방사할 수 있다. 일부 실시예에서, 이동 통신 모듈(150) 중 적어도 일부 기능 모듈이 프로세서(110)에 배치될 수 있다. 일부 실시예에서, 이동 통신 모듈(150)의 적어도 일부 기능 모듈과 프로세서(110)의 적어도 일부 모듈이 동일한 장치에 배치될 수 있다.
모뎀 프로세서는 변조기와 복조기를 포함할 수 있다. 변조기는 송신될 저주파 베이스밴드 신호를 중간 고주파 신호로 변조하도록 구성된다. 복조기는 수신된 전자기파 신호를 저주파 베이스밴드 신호로 복조하도록 구성된다. 그런 다음, 복조기는 복조를 통해 얻어진 저주파 베이스밴드 신호를 처리를 위해 베이스밴드 프로세서에 전송한다. 저주파 베이스밴드 신호가 베이스밴드 프로세서에 의해 처리된 후, 처리된 저주파 베이스밴드 신호가 애플리케이션 프로세서에 전송된다. 애플리케이션 프로세서는 오디오 장치(확성기(170A)와 전화 수신기(170B)에 제한되지 않음)를 이용하여 사운드 신호를 출력하거나, 또는 표시 화면(194)을 이용하여 이미지 또는 비디오를 표시할 수 있다. 일부 실시예에서 모뎀 프로세서는 독립적인 장치일 수 있다. 다른 일부 실시예에서, 모뎀 프로세서는 프로세서(110)와 독립적일 수 있고, 이동 통신 모듈(150) 또는 다른 기능 모듈과 동일한 장치에 배치될 수 있다.
무선 통신 모듈(160)은 전자 장치(100)에 적용되는 무선 통신 솔루션, 예를 들어 무선 근거리 통신망(wireless local area networks, WLAN)(예컨대, 와이파이(wireless fidelity, Wi-Fi) 네트워크), 블루투스(Bluetooth, BT), 글로벌 네비게이션 위성 시스템(global navigation satellite system, GNSS), 주파수 변조(frequency modulation, FM), 근거리 무선 통신(near field communication, NFC), 및 적외선(infrared, IR) 기술을 제공할 수 있다. 무선 통신 모듈(160)은 적어도 하나의 통신 처리 모듈에 통합되는 하나 이상의 디바이스일 수 있다. 무선 통신 모듈(160)은 안테나(2)를 이용하여 전자기파 신호를 수신하고, 전자기파 신호에 대해 주파수 변조 및 필터링 처리를 수행하며, 처리된 신호를 프로세서(110)에 송신한다. 무선 통신 모듈(160)은 프로세서(110)로부터 송신될 신호를 추가로 수신하고, 송신될 신호에 대해 주파수 변조 및 증폭을 수행하며, 처리된 신호를 안테나(2)를 이용하여 전자기파로 변환하고, 안테나(2)를 통해 전자기파를 방사할 수 있다.
일부 실시예에서, 전자 장치(100)가 무선 통신 기술을 이용하여 네트워크 및 다른 장치와 통신할 수 있도록, 전자 장치(100)의 안테나(1)는 이동 통신 모듈(150)에 결합되고, 안테나(2)는 무선 통신 모듈(160)에 결합된다. 무선 통신 기술은, 이동통신 글로벌 시스템(global system for mobile communications, GSM), 일반 패킷 무선 서비스(general packet radio service, GPRS), 코드분할 다중접속(Code Division Multiple Access, CDMA), 광대역 코드분할 다중접속(wideband code division multiple access, WCDMA), 시분할 코드분할 다중접속(time-division code division multiple access, TD-SCDMA), 롱 텀 에볼루션(Long Term Evolution, LTE), BT, GNSS, WLAN, NFC, FM, 및/또는 IR 기술 등을 포함할 수 있다. GNSS는 위성 위치 확인 시스템(global positioning system, GPS), 글로나스(global navigation satellite system, GLONASS), 베이더우 내비게이션 위성 시스템(beidou navigation satellite system, BDS), 준천정위성시스템(quasi-zenith satellite system, QZSS), 및/또는 위성 기반의 증강 시스템(satellite based augmentation systems, SBAS)을 포함할 수 있다.
전자 장치(100)는 GPU, 표시 화면(194), 및 애플리케이션 프로세서 등을 이용하여 표시 기능을 구현한다. GPU는 이미지 처리용 마이크로프로세서이며, 표시 화면(194)과 애플리케이션 프로세서에 연결된다. GPU는 수학적 계산과 기하학적 계산을 수행하도록 구성되고, 그래픽 렌더링을 수행하도록 구성된다. 프로세서(110)는 하나 이상의 GPU를 포함할 수 있고, 프로그램 명령을 실행하여 표시 정보를 생성하거나 또는 변경한다.
표시 화면(194)은 이미지와 비디오 등을 표시하도록 구성된다. 표시 화면(194)은 디스플레이 패널을 포함한다. 디스플레이 패널은 액정 디스플레이(liquid crystal display, LCD), 유기 발광 다이오드(Organic light-emitting diode, OLED), 능동형 유기 발광 다이오드(active-matrix organic light emitting diode, AMOLED), 플렉서블 발광 다이오드(flex light-emitting diode, FLED), 미니 LED, 마이크로 LED, 및 양자점 발광 다이오드(quantum dot light emitting diodes, QLED) 등을 사용할 수 있다. 일부 실시예에서, 전자 장치(100)는 하나 또는 N개의 표시 화면(194)을 포함할 수 있다(N은 1보다 큰 양의 정수).
전자 장치(100)는 ISP, 카메라(193), 비디오 코덱, GPU, 표시 화면(194), 및 애플리케이션 프로세서 등을 이용하여 촬영 기능을 구현할 수 있다.
ISP는 카메라(193)에 의해 피드백되는 데이터를 처리하도록 구성된다. 예를 들어, 촬영 중에 셔터가 열린 후, 빛이 렌즈를 통해 카메라의 감광 소자에 전달되고, 광 신호가 전기 신호로 변환되며, 카메라의 감광 소자가 전기 신호를 처리를 위해 ISP에 전송하고 전기 신호를 시각적 이미지로 변환한다. ISP는 추가적으로 이미지의 잡음, 휘도, 및 피부색에 대해 알고리즘 기반의 최적화를 수행할 수 있다. ISP는 추가적으로 촬영 시나리오의 노출 및 색온도와 같은 파라미터를 최적화할 수 있다. 일부 실시예에서, ISP는 카메라(193)에 배치될 수 있다.
카메라(193)는 스틸 이미지 또는 비디오를 캡처하도록 구성된다. 물체에 대한 광 이미지가 렌즈를 이용하여 생성되고, 감광 소자 상에 투사된다. 감광 소자는 전하 결합 소자(charge coupled device, CCD) 또는 상보성 금속 산화물 반도체(complementary metal-oxide-semiconductor, CMOS) 광트랜지스터일 수 있다. 감광 소자는 광 신호를 전기 신호로 변환한 다음, 전기 신호를 ISP에 전송하여 전기 신호를 디지털 이미지 신호로 변환한다. ISP는 디지털 이미지 신호를 처리를 위해 DSP에 출력한다. DSP는 디지털 이미지 신호를 표준 RGB 또는 YUV 형식 등의 이미지 신호로 변환한다. 일부 실시예에서, 전자 장치(100)는 하나 또는 N개의 카메라(193)를 포함할 수 있다(N은 1보다 큰 양의 정수).
DSP는 디지털 신호를 처리하도록 구성된다. 디지털 이미지 신호 외에, DSP는 다른 디지털 신호를 더 처리할 수 있다. 예를 들어, 전자 장치(100)가 주파수를 선택할 때, DSP는 주파수 에너지 등에 대해 푸리에 변환을 수행하도록 구성된다.
비디오 코덱은 디지털 비디오를 압축하거나 또는 압축 해제하도록 구성된다. 전자 장치(100)는 하나 이상의 타입의 비디오 코덱을 지원할 수 있다. 이 경우, 전자 장치(100)는 복수의 인코딩 포맷, 예를 들어 동영상 전문가 그룹(moving picture experts group, MPEG)-1 포맷, MPEG-2 포맷, MPEG-3, 및 MPEG-4 포맷 등으로 비디오를 재생하거나 또는 녹화할 수 있다.
NPU는 신경망(neural-network, NN) 컴퓨팅 프로세서이다. 생물학적 신경망 구조를 사용함으로써, 예를 들어 인간의 뇌 뉴런들 간의 전달 방식을 이용함으로써, NPU는 입력 정보를 신속하게 처리할 수 있고, 추가적으로 지속적인 자기 학습을 수행할 수 있다. 전자 장치(100)의 지능형 인식, 예를 들어 이미지 인식, 안면 인식, 음성 인식, 텍스트 이해와 같은 애플리케이션이 NPU를 이용하여 구현될 수 있다.
외부 메모리 인터페이스(120)는, 전자 장치(100)의 저장 용량을 확장하기 위해 외부 메모리 카드(예를 들어, 마이크로 SD 카드)와 연결되도록 구성될 수 있다. 외부 메모리 카드는 외부 메모리 인터페이스(120)를 이용하여 프로세서(110)와 통신하여 데이터 저장 기능, 예를 들어 음악 파일 또는 비디오 파일 등을 외부 메모리 카드에 저장하는 기능을 구현한다.
내부 메모리(121)는 명령을 포함하는 컴퓨터 실행가능 프로그램 코드를 저장하도록 구성될 수 있다. 프로세서(110)는 내부 메모리(121)에 저장된 명령을 실행하여 전자 장치(100)의 다양한 기능 애플리케이션과 데이터 처리를 수행한다. 내부 메모리(121)는 프로그램 저장 영역과 데이터 저장 영역을 포함할 수 있다. 프로그램 저장 영역은 운영체제, 적어도 하나의 기능(예를 들어, 오디오 재생 기능 또는 이미지 재생 기능)에 필요한 애플리케이션 등을 저장할 수 있다. 데이터 저장 영역은 전자 장치(100)를 사용하는 동안 생성된 데이터(예를 들어, 오디오 데이터, 전화 번호부) 등을 저장할 수 있다. 또한, 내부 메모리(121)는 고속 랜덤 액세스 메모리(random access memory)를 포함할 수 있고, 비휘발성 메모리, 예를 들어, 적어도 하나의 자기 디스크 저장 장치, 플래쉬 메모리 장치, 및 범용 플래쉬 스토리지(universal flash storage, UFS)를 더 포함할 수 있다.
전자 장치(100)는 오디오 모듈(170), 확성기(170A), 전화 수신기(170B), 마이크(170C), 헤드셋 잭(170D), 및 애플리케이션 프로세서 등을 이용하여 오디오 기능, 예를 들어 음악 재생이나 녹음을 구현할 수 있다.
오디오 모듈(170)은 디지털 오디오 정보를 출력용 아날로그 오디오 신호로 변환하도록 구성되고, 또한 아날로그 오디오 입력을 디지털 오디오 신호로 변환하도록 구성된다. 오디오 모듈(170)은 추가적으로, 오디오 신호를 인코딩하고 디코딩하도록 구성될 수 있다. 일부 실시예에서, 오디오 모듈(170)은 프로세서(110)에 배치될 수 있거나, 또는 오디오 모듈(170)의 일부 기능 모듈이 프로세서(110)에 배치될 수 있다.
"스피커"라고도 하는 확성기(170A)는 오디오 전기 신호를 사운드 신호로 변환하도록 구성된다. 전자 장치(100)는 확성기(170A)를 이용하여 음악을 듣거나 또는 핸즈프리 통화에 응답하는 데 사용될 수 있다.
"이어피스(earpiece)"라고도 하는 수화기(170B)는 오디오 전기 신호를 사운드 신호로 변환하도록 구성된다. 전화 또는 음성 정보가 전자 장치(100)에 수신되면, 수화기(170B)를 사람의 귀에 가까이 위치시켜 음성을 들을 수 있다.
"음성 튜브" 또는 "마이크"라고도 하는 마이크로폰(170C)은 사운드 신호를 전기 신호로 변환하도록 구성된다. 전화를 걸거나 또는 음성 정보를 송신할 때, 사용자는 마이크(170C) 근처에서 사용자의 입으로 소리를 내어 소리 신호를 마이크(170C)에 입력할 수 있다. 적어도 하나의 마이크(170C)가 전자 장치(100)에 배치될 수 있다. 다른 일부 실시예에서, 2개의 마이크(170C)가 전자 장치(100)에 배치될 수 있고, 음향 신호 획득 외에도 잡음 감소 기능을 추가로 구현할 수 있다. 다른 일부 실시예에서, 3개, 4개, 또는 그 이상의 마이크(170C)가 대안적으로 전자 장치(100)에 배치되어, 사운드 신호 획득과 소음 감소를 구현하고, 음원을 추가로 식별하며, 방향성 녹음 기능 등을 구현할 수 있다.
헤드셋 잭(170D)은 유선 헤드셋에 연결되도록 구성된다. 헤드셋 잭(170D)은 USB 인터페이스(130)일 수 있거나, 또는 3.5 mm 개방형 모바일 전자 장치 플랫폼(Open Mobile Terminal Platform, OMTP) 표준 인터페이스, 또는 미국의 셀룰러 통신 산업 협회(cellular telecommunications industry association of the USA, CTIA) 표준 인터페이스 등일 수 있다.
압력 센서(180A)는 압력 신호를 감지하도록 구성되고, 압력 신호를 전기 신호로 변환할 수 있다. 일부 실시예에서, 압력 센서(180A)는 표시 화면(194)에 배치될 수 있다. 많은 유형의 압력 센서 (180A), 예를 들어 저항성 압력 센서, 유도성 압력 센서, 및 용량성 압력 센서가 있다. 용량성 압력 센서는 전도성 재료를 포함하는 적어도 2개의 평행 플레이트를 포함할 수 있다. 힘이 압력 센서(180A)에 가해질 때, 전극들 간의 정전 용량이 변한다. 전자 장치(100)는 정전 용량 변화에 기초하여 압력 세기를 결정한다. 표시 화면(194) 상에서 터치 조작이 수행되면, 전자 장치(100)는 압력 센서(180A)를 이용하여 터치 조작의 세기를 검출한다. 전자 장치(100)는 압력 센서(180A)에 의해 검출된 신호에 기초하여 계산을 통해 터치 위치를 획득할 수 있다. 일부 실시예에서, 동일한 터치 위치에서 수행되지만 다른 터치 조작 세기를 가진 터치 조작은 다른 조작 명령에 대응할 수 있다. 예를 들어, SMS 메시지 애플리케이션의 아이콘에 대해 제1 압력 임계값보다 작은 터치 조작 강도로 터치 조작을 수행할 때, 단문 메시지 보기 명령이 실행된다. SMS 메시지 애플리케이션의 아이콘에 대해 제1 압력 임계값보다 크거나 같은 터치 조작 강도로 터치 조작이 수행되면, 새로운 단문 메시지 작성 명령이 실행된다.
자이로스코프 센서(180B)는 전자 장치(100)의 이동 자세를 결정하도록 구성될 수 있다. 일부 실시예에서, 3개의 축(즉, x축, y축, 및 z축)에 대한 전자 장치(100)의 각속도가 자이로스코프 센서(180B)를 이용하여 결정될 수 있다. 자이로스코프 센서(180B)는 촬영 중 이미지 안정화에 사용될 수 있다. 예를 들어, 셔터를 누를 때, 자이로스코프 센서(180B)는 전자 장치(100)가 흔들리는 각도를 검출하고, 그 각도에 기초하여 렌즈 모듈이 보정해야 하는 거리를 계산하며, 렌즈가 역방향 움직임을 통해 전자 장치의 흔들림을 상쇄할 수 있게 함으로써, 이미지 안정화를 구현한다. 또한, 자이로스코프 센서(180B)는 내비게이션 및 움직임 감지 게임 시나리오에 사용될 수 있다.
대기압 센서(180C)는 대기압을 측정하도록 구성된다. 일부 실시예에서, 전자 장치(100)는 위치 결정 및 내비게이션을 돕기 위해, 대기압 센서(180C)에 의해 측정된 대기압을 이용하여 고도를 계산한다.
자기 센서(180D)는 홀 효과 센서(Hall effect sensor)를 포함한다. 전자 장치(100)는 자기 센서(180D)를 이용하여 플립 가죽 케이스의 개폐 여부를 검출할 수 있다. 일부 실시예에서, 전자 장치(100)가 플립 폰인 경우, 전자 장치(100)는 자기 센서(180D)를 이용하여, 가족 케이스의 검출된 개방/폐쇄 상태 또는 플립 커버의 검출된 개방/폐쇄 상태에 기초하여, 플립 폰이 플립되어 열릴 때 구현되는 자동 잠금과 같은 속성을 추가로 설정할 수 있다.
가속도 센서(180E)는 다양한 방향(일반적으로, 3개의 축)에서 전자 장치(100)의 가속도의 크기를 검출할 수 있고; 전자 장치(100)가 가만히 있을 때 중력의 크기와 방향을 검출할 수 있으며; 추가적으로, 전자 장치의 자세를 인식하고, 풍경 모드와 인물 모드 간의 화면 전환, 계보기(pedometer), 또는 다른 애플리케이션에 적용되도록 구성될 수 있다.
거리 센서(180F)는 거리를 측정하도록 구성된다. 전자 장치(100)는 적외선 또는 레이저를 이용하여 거리를 측정할 수 있다. 일부 실시예에서, 촬영 시나리오에서, 전자 장치(100)는 빠른 포커싱을 구현하기 위해 거리 센서(180F)를 이용하여 거리를 측정할 수 있다.
광 근접 센서(180G)는 예를 들어 발광 다이오드(LED)와 광 검출기, 예를 들어 광다이오드를 포함할 수 있다. 발광 다이오드는 적외선 발광 다이오드일 수 있다. 전자 장치(100)는 발광 다이오드를 이용하여 적외선을 방출한다. 전자 장치(100)는 광다이오드를 이용하여 주변 물체의 적외선 반사광을 검출한다. 충분한 반사광이 감지되면, 전자 장치(100)는 전자 장치(100) 주변에 물체가 있다고 결정할 수 있다. 불충분한 반사광이 검출되면, 전자 장치(100)는 전자 장치(100) 주변에 물체가 없다고 결정할 수 있다. 광 근접 센서(180G)를 이용하여, 전자 장치(100)는 통화 중에 사용자가 전자 장치(100)를 귀에 가까이 대고 있다는 것을 감지하여 절전을 위해 화면을 자동으로 끌 수 있다. 또한, 광 근접 센서(180G)는 가죽 케이스 모드 또는 포켓 모드에서 자동 화면 잠금 해제 또는 잠금에 사용될 수도 있다.
주변광 센서(180L)는 주변 광 밝기를 감지하도록 구성된다. 전자 장치(100)는 감지된 주변광 밝기에 기초하여 표시 화면(194)의 밝기를 적응적으로 조절할 수 있다. 주변광 센서(180L)는 촬영 중에 화이트 밸런스를 자동으로 조정하도록 구성될 수도 있다. 또한, 주변광 센서(180L)는 광 근접 센서(180G)와 협력하여 전자 장치(100)가 주머니에 있는지 여부를 감지함으로써, 실수로 터치하는 것을 방지할 수 있다.
지문 센서(180H)는 지문을 획득하도록 구성된다. 획득된 지문의 특징을 이용함으로써, 전자 장치(100)는 지문을 통한 잠금 해제를 수행하고, 애플리케이션 잠금에 액세스하며, 지문을 통한 사진 촬영을 수행하고, 지문을 통한 전화 응답 등을 수행할 수 있다.
온도 센서(180J)는 온도를 검출하도록 구성된다. 일부 실시예에서, 전자 장치(100)는 온도 센서(180J)에 의해 검출된 온도를 이용하여 온도 처리 정책을 실행한다. 예를 들어, 온도 센서(180J)에 의해 보고된 온도가 임계값을 초과할 때, 전자 장치(100)는 온도 센서(180J) 근처에 위치한 프로세서의 성능을 저하시킴으로써, 전력 소비를 줄여서 열 보호를 구현한다. 다른 일부 실시예에서, 온도가 다른 임계값보다 작을 대, 전자 장치(100)는 저온으로 인한 전자 장치(100)의 비정상적인 파워-오프(power-off)를 방지하기 위해 배터리(142)를 가열한다. 다른 일부 실시예에서, 온도가 또 다른 임계값보다 작을 때, 전자 장치(100)는 저온으로 인한 비정상적인 파워-오프를 방지하기 위해 배터리(142)의 출력 전압을 높인다.
터치 센서(180K)는 "터치 패널"이라고도 한다. 터치 센서(180K)는 표시 화면(194)에 배치될 수 있고, 터치 센서(180K)와 표시 화면(194)은 터치 스크린("터치 제어 화면"이라고도 함)을 구성한다. 터치 센서(180K)는 터치 센서(180K) 상에서 또는 그 근처에서 수행되는 터치 조작을 검출하도록 구성된다. 터치 센서는 검출된 터치 조작을 애플리케이션 프로세서로 전송하여 터치 이벤트의 타입을 결정할 수 있다. 터치 조작과 관련된 시각적 출력이 표시 화면(194)을 이용하여 제공될 수 있다. 다른 일부 실시예에서, 터치 센서(180K)는 대안적으로, 전자 장치(100)의 표면에, 표시 화면(194)의 위치와는 다른 위치에 배치될 수 있다.
골전도 센서(180M)는 진동 신호를 획득할 수 있다. 일부 실시예에서, 골전도 센서(180M)는 인체의 성대 부분의 진동하는 뼈 블록의 진동 신호를 획득할 수 있다. 또한, 골전도 센서(180M)는 인체의 맥박과 접촉하여 혈압 변동 신호를 수신할 수 있다. 일부 실시예에서, 골전도 센서(180M)는 헤드셋과 결합하여 골전도 헤드셋이 되도록 헤드셋에도 배치될 수 있다. 오디오 모듈(170)은 골전도 센서(180M)에 의해 획득된 성대 부분의 진동하는 뼈 블록의 진동 신호를 파싱하여 음성 신호를 획득함으로써 음성 기능을 구현할 수 있다. 애플리케이션 프로세서는 골전도 센서(180M)에 의해 획득된 혈압 변동 신호를 파싱하여 심박수 정보를 획득함으로써 심박수 검출 기능을 구현할 수 있다.
키(190)는 전원 키와 볼륨 키 등을 포함할 수 있다. 키(190)는 기계식 키일 수 있거나, 또는 터치 키일 수 있다. 전자 장치(100)는 키 입력을 수신하고, 전자 장치(100)의 사용자 설정 및 기능 제어와 관련된 키 신호 입력을 생성할 수 있다.
모터(191)는 진동 경보를 생성할 수 있다. 모터(191)는 착신호 진동 경보(incoming-call vibration alert) 및 터치 진동 피드백을 제공하도록 구성될 수 있다. 예를 들어, 서로 다른 애플리케이션(예를 들어, 사진 촬영 및 오디오 재생)에 대해 수행되는 터치 조작은 서로 다른 진동 피드백 효과에 대응할 수 있다. 모터(191)는 표시 화면(194)의 다른 영역에서 수행되는 터치 조작에 대한 다른 진동 피드백 효과에 대응할 수도 있다. 다른 애플리케이션 시나리오(예를 들어, 시간 알림, 정보 수신, 알람 시계 애플리케이션, 및 게임 애플리케이션)는 다른 진동 피드백 효과에 대응할 수도 있다. 터치 진동 피드백 효과는 사용자에 의해 정의될 수 있다.
표시기(192)는 표시기 등(indicator light)일 수 있고, 충전 상태 및 배터리 레벨 변화를 나타내도록 구성될 수 있거나, 또는 메시지, 부재중 전화, 또는 알림 등을 나타내도록 구성될 수 있다.
SIM 카드 인터페이스(195)는 SIM 카드에 연결하도록 구성된다. SIM 카드는 SIM 카드 인터페이스(195)에 삽입되거나 또는 SIM 카드 인터페이스(195)로부터 제거되어 전자 장치(100)와 접촉하거나 또는 전자 장치(100)로부터 분리될 수 있다. 전자 장치(100)는 하나 또는 N개의 SIM 카드 인터페이스를 지원할 수 있다(N은 1보다 큰 양의 정수). SIM 카드 인터페이스(195)는 나노 SIM 카드, 마이크로 SIM 카드, 및 SIM 카드 등을 지원할 수 있다. 복수의 카드가 동일한 SIM 카드 인터페이스(195)에 동시에 삽입될 수 있다. 복수의 카드는 동일한 유형이거나 또는 다른 유형일 수 있다. SIM 카드 인터페이스(195)는 다른 유형의 SIM 카드와 호환될 수도 있다. SIM 카드 인터페이스(195)는 외부 메모리 카드와 호환될 수도 있다. 전자 장치(100)는 SIM 카드를 이용하여 네트워크와 연동하여 통화 기능과 데이터 통신 기능 등을 구현할 수 있다. 일부 실시예에서, 전자 장치(100)는 eSIM, 즉 임베디드 SIM 카드를 사용한다. eSIM 카드는 전자 장치(100)에 내장될 수 있고 전자 장치(100)로부터 분리될 수 없다.
본 출원의 본 실시예에서의 개략적인 구조가 전자 장치(100)에 대한 어떠한 구체적인 제한도 부과하지 않는다고 이해할 수 있을 것이다. 본 출원의 다른 일부 실시예에서, 전자 장치(100)는 도시된 것보다 많거나 또는 적은 구성 요소를 포함할 수 있거나, 또는 일부 구성 요소들이 결합될 수 있거나, 일부 구성 요소들이 분할될 수 있거나, 또는 다른 구성 요소 배치가 있을 수 있다. 도면에 도시된 구성 요소는 하드웨어, 또는 소프트웨어, 또는 소프트웨어와 하드웨어의 조합으로 구현될 수 있다.
이하, 전자 장치(100)를 예로 들어 본 출원의 본 실시예에 대해 상세하게 설명한다.
또한, 본 출원의 본 실시예의 전자 장치에 의해 지원되는 애플리케이션이 예를 들어 카메라와 같은 촬영 애플리케이션을 포함할 수 있다는 것을 이해해야 한다. 또한, 전자 장치에 의해 지원되는 애플리케이션이 다른 애플리케이션, 예컨대 드로잉, 게임, 전화, 비디오 플레이어, 음악 플레이어, 사진 관리, 브라우저, 달력, 및 시계 등을 더 포함할 수 있다.
본 출원의 본 실시예의 전자 장치에 의해 지원되는 애플리케이션이 피부 테스트용 애플리케이션을 더 포함할 수 있다. 피부 테스트용 애플리케이션은 촬영된 얼굴 이미지를 이용하여 사용자의 얼굴 피부 특징(예를 들어, 주름, 모공, 검은 여드름, 색 반점, 얼굴 피부의 붉은 부분)을 검출하고, 사용자에게 검출 결과 보고를 제공할 수 있다. 예를 들어, 검출 결과 보고는 얼굴 피부의 각각의 특징에 대한 점수와 얼굴 피부에 대한 종합 분석을 포함할 수 있지만 이에 제한되지 않으며, 사용자의 얼굴 이미지를 더 표시하고 각각의 특징의 검출 결과에 기초하여 얼굴 이미지 상의 대응하는 문제를 표시할 수 있다. 예를 들어, 검은 여드름는 코 부분에 표시되고, 주름은 이마 부분에 표시되며, 색 반점은 뺨 부분에 표시된다. 검출 결과 보고가 사용자 인터페이스 상에서 사용자에게 제공될 수 있음을 이해할 수 있을 것이다. 예를 들어, 검출 결과 보고가 사용자 인터페이스(200) 상에 제공될 수 있고, 종합 점수, 피부 나이, 및 모공, 검은 여드름, 잔주름, 색 반점, 및 붉은 영역에 대한 점수를 포함한다. 다른 일부 실시예에서, 사용자 인터페이스(200)는 가상 버튼(201), 가상 버튼(202), 가상 버튼(203), 가상 버튼(204), 및 가상 버튼(205)을 더 포함할 수 있다. 가상 버튼(201)을 예로 들면, 가상 버튼(201)에 대해 수행되는 조작에 응답하여, 전자 장치(100)는 표시 화면(194)에 모공에 대한 구체적인 케어 조언을 표시한다. 가상 버튼(202), 가상 버튼(203), 가상 버튼(204), 및 가상 버튼(205)의 기능에 대해서는, 가상 버튼(201)의 기능을 참조하라. 자세한 내용은 여기서 다시 설명하지 않는다.
전자 장치가 사용자의 얼굴 피부를 더 정확하게 검출할 수 있도록, 예를 들어 본 출원의 본 실시예의 사용자 피부 테스트 솔루션에서, 촬영 조건 검출 모듈, 이미지 품질 검출 모듈, 및 프로세서(110), 관심 영역(region of interest, ROI) 검출 모듈, 피부 특징 검출 모듈, 및 결과 분석 모듈 등이 프로세서(110)에 통합될 수 있다. 일부 실시예에서, 촬영 조건 검출 모듈, 이미지 품질 검출 모듈, 및 관심 영역(ROI) 검출 모듈, 피부 특징 검출 모듈, 및 결과 분석 모듈 등이 프로세서(110) 내의 애플리케이션 프로세서에 통합될 수 있다. 일부 다른 실시예에서, 인공 지능(artificial intelligence, AI) 칩이 프로세서(110)에 통합되고, 촬영 조건 감지 모듈, 이미지 품질 감지 모듈, 및 관심 영역(ROI) 감지 모듈, 피부 특징 감지 모듈, 및 결과 분석 모듈 등이 AI 칩에 통합되어 사용자 피부 테스트를 구현한다.
촬영 조건 검출 모듈은, 촬영된 이미지가 요구사항을 만족하도록 보장하기 위해, 현재 촬영 조건을 검출하여 사용자가 필요한 촬영 조건에서 촬영을 수행하도록 안내함으로써, 이미지에 기초하여 수행되는 피부 테스트의 정확도를 보장할 수 있다. 예를 들어, 필요한 촬영 조건은 "주변 광이 충분하다; 사람의 얼굴과 전자 장치 사이에는 적절한 거리(예를 들어, 약 25cm)가 있다; 얼굴이 똑바르다; 눈을 감았다; 안경을 착용하지 않았다; 이마가 가능한 한 앞머리로 덮여 있지 않다; 초점이 정확하다; 명백한 흔들림이 없다 등"을 포함한다.
촬영 조건 검출 모듈이 성공적으로 검출을 수행한 후, 프로세서(110)는 지능형 광 보상을 가능하게 한다. 예를 들어, 현재 촬영 조건이 요구사항을 만족하면, 촬영 조건 검출 모듈은 검출이 성공한 것으로 결정한다. 구체적으로, 본 출원의 본 실시예에서, 전자 장치는 서로 다른 얼굴 피부 특징을 검출하는 요구사항을 만족시키기 위해, 서로 다른 광 보정 모드(예를 들어, 플래시 램프 모드 또는 손전등 모드)를 이용하여 사용자의 얼굴에 대한 광 보정을 수행할 수 있다. 사용자의 얼굴에 대한 광 보정을 수행한 후, 프로세서(110)는 사용자의 얼굴을 촬영하도록 카메라(193)를 제어하여 사용자 얼굴의 얼굴 이미지를 획득할 수 있다.
이미지 품질 검출 모듈은, 촬영된 이미지가 다른 얼굴 피부 특징을 검출하는 요구사항을 만족하도록 보장하기 위해 얼굴 이미지의 품질을 검출할 수 있다.
이미지 품질 검출 모듈이 이미지 품질이 요구사항을 만족한다는 것을 발견한 후, ROI 검출 모듈은 얼굴 이미지로부터 검출될 ROI를 결정할 수 있다. 예를 들어, 검은 여드름의 ROI가 코 위의 작은 영역이다.
피부 특징 검출 모듈은, 결정된 ROI에서 얼굴 피부 특징 각각을, 예를 들어 주름, 모공, 검은 여드름, 색 반점, 붉은 영역, 및 피부 상의 유분 정도를 검출할 수 있다.
결과 분석 모듈은 피부 특징 검출 모듈에 의해 검출된 얼굴 피부 특징의 검출 결과를 분석하고, 피부 특징별로 각각의 검출 항목의 점수와 점수 순위 등을 제공할 수 있다.
또한, 일부 실시예에서, 이미지 전처리 모듈은 프로세서(110)에 추가로 통합될 수 있다. ROI 검출 모듈과 피부 특징 검출 모듈 등이 후속 처리를 수행할 수 있도록, 이미지 전처리 모듈은 촬영된 얼굴 이미지에 대해 압축과 자르기(cropping) 등을 수행할 수 있다.
얼굴 이미지 분석 결과를 출력하고, 각각의 검출 항목의 점수를 출력하기 위해, 프로세서(110)는 검출을 통해 획득되는 검출 보고(예를 들어, 얼굴 이미지에서 각각의 특징의 검출 결과가 있는 영역, 검은 여드름dl 표시된 코 영역, 주름이 표시된 이마 영역, 색 반점이 표시된 볼 영역, 및 모든 검출 항목의 점수 등을 포함하는 검출 보고)를 사용자가 볼 수 있도록 표시 화면(194)에 표시함으로써, 사용자 경험을 개선할 수 있다.
이하, 도 1에 도시된 전자 장치의 구조를 참조하여 본 출원의 실시예에 대해 상세하게 설명한다
복수의 검출 시나리오의 변화에 적응하고 기존 피부 색소 검출 기술의 열악한 적용 문제를 해결하기 위해, 본 출원의 실시예는 색소 검출 방법을 제공한다. 색소 검출 방법에서, 전자 장치(100)는 RGB 피부 이미지로부터 색소를 추출할 수 있다. 피부 색소(예를 들어, 멜라닌 또는 헤모글로빈)가 특정 흡수 스펙트럼을 가지고 있기 때문에, 신체 반사 성분이 피부 이미지로부터 추출된 후, 색소가 스펙트럼 분석 기술을 이용하여 신체 반사 성분으로부터 분리될 수 있다. 따라서, 색소 검출을 위한 색소 검출 방법을 사용함으로써 비교적 양호한 적용 가능성이 달성될 수 있다.
본 출원의 본 실시예에서 제공되는 색소 검출 방법은 피부 테스트에 사용되고 전자 장치(100)에 의해 지원되는 애플리케이션에 적용될 수 있다. 예를 들어, 도 5a 내지 도 5d를 참조하면, 전자 장치(100)의 표시 화면(194)이 피부 테스트용 애플리케이션의 아이콘(500)을 표시한다. 아이콘(500)에 대해 수행된 조작을 찾으면(예를 들어, 전자 장치가 사용자가 아이콘(500)을 탭한 것을 찾으면), 아이콘(500)에 대해 수행된 조작에 응답하여, 전자 장치(100)는 표시 화면(194) 상에 피부 테스트용 애플리케이션의 사용자 인터페이스(510)를 표시한다. 피부 테스트용 애플리케이션의 사용자 인터페이스(510)는 가상 버튼(511)(구현 중에, 가상 버튼은 "테스트", "사진 찍기"등으로 명명될 수 있음)을 포함한다. 가상 버튼(511)에 대해 수행된 조작을 찾으면(예를 들어, 전자 장치가 사용자가 가상 버튼(511)을 탭한 것을 찾으면), 가상 버튼(511)에 대해 수행된 조작에 응답하여, 전자 장치(100)는 본 출원의 본 실시예에서 제공된 색소 검출 방법에 따라, RGB 피부 이미지 내에 있는 영역으로서 색소가 검출될 필요가 있는 영역에 대해 색소 검출을 수행한다.
RGB 피부 이미지는 가상 버튼(511) 상의 조작에 대응하여 카메라(193)를 이용하여 사용자의 얼굴을 촬영함으로써 전자 장치(100)에 의해 획득될 수 있다. 여기서, 카메라(193)는 전자 장치(100)의 전면 카메라 또는 후면 카메라일 수 있다. 대안적으로, RGB 피부 이미지는, 전자 장치(100)가 가상 버튼(511) 상의 조작에 응답하여 외부 메모리 인터페이스(120)를 이용하여 내부 메모리(121)로부터 또는 외부 메모리로부터 판독하는 이미지일 수 있다. 이 경우, RGB 피부 이미지는 미리 촬영되어 내부 메모리(121) 또는 외부 메모리에 저장된 RGB 피부 이미지일 수 있다.
예를 들어, RGB 피부 이미지는, 전자 장치가 카메라(193)를 이용하여 사용자의 얼굴을 촬영하여 획득하는 이미지일 수 있다(여기서, 카메라(193)는 전면 카메라 또는 후면 카메라일 수 있음). 촬영 후, 전자 장치(100)는 획득된 RGB 피부 이미지를 내부 메모리(121)에 저장하고, 가상 버튼(511)에 대해 수행된 조작을 찾은 후 전자 장치(100)는 내부 메모리(121)로부터 RGB 피부 이미지를 읽을 수 있다. 또한, 구현 중에, 내부 메모리(121)에 저장된 RGB 피부 이미지는 대안적으로, 이동 통신 모듈(150) 및/또는 무선 통신 모듈(160)을 이용하여 전자 장치(100)에 의해 수신되는 이미지일 수 있다.
또한, 전자 장치(100)가 가상 버튼(511)에 대해 수행된 조작을 찾은 후, 사용자는 대안적으로, 전자 장치(100)가 RGB 피부 이미지를 얻기 위해 카메라(193)를 이용하여 촬영을 수행하는지 여부 또는 전자 장치(100)가 내부 메모리(121) 또는 외부 메모리로부터 RGB 피부 이미지를 읽는지 여부를 선택할 수 있다. 예를 들어, 전자 장치(100)가 가상 버튼(511)에 대해 수행된 조작을 찾은 후, 표시 화면(194)이 사진 선택 영역(512)을 표시한다. 사진 선택 영역(512)은 "사진 제공" 및 "~로부터 사진 획득"과 같은 프롬프트 정보를 포함하여 사용자에게 RGB 피부 이미지의 소스를 선택하도록 상기시키고, 사진 선택 영역(512)은 복수의 가상 버튼을 더 포함할 수 있다. 가상 버튼에 대응하는 조작은 사용자가 가상 버튼에 대해 수행하는 조작에 기초하여 수행됨으로써 다양한 방식으로 RGB 피부 이미지를 획득한다. 예를 들어, 가상 버튼은 촬영 방식으로 RGB 피부 이미지를 획득하는 것을 나타내는 제1 버튼(513)(제1 버튼(513)의 이름이 "카메라" 또는 "사진 찍기" 등일 수 있음)일 수 있거나; 또는 가상 버튼은 메모리로부터 읽어서 RGB 피부 이미지를 획득하는 것을 나타내는 제2 버튼(514)(제2 버튼(514)의 이름이 "저장" 또는 "앨범" 등일 수 있음)일 수 있다. 사용자가 제1 버튼(513)에 대해 수행한 조작을 찾은 후, 사용자가 제1 버튼(513)에 대해 수행한 조작에 응답하여, 전자 장치(100)는 카메라(193)를 이용하여 사용자의 얼굴 이미지를 촬영하고, 얼굴 이미지를 RGB 피부 이미지로서 사용한다. 사용자가 제2 버튼(514)에 대해 수행한 조작을 찾은 후, 전자 장치(100)는 RGB 피부 이미지 저장 경로를 선택하고, 사용자에 의해 선택된 저장 경로로부터, 선택되는 사용자에 의해 선택된 이미지를 RGB 피부 이미지로서 사용하도록 사용자에게 계속 상기시킬 수 있다. 저장 경로는 전자 장치(100)의 "앨범"의 디폴트 저장 경로일 수 있다. 이 저장 경로는 내부 메모리(121)의 저장 경로를 포함할 수 있거나, 또는 외부 메모리의 저장 경로를 포함할 수 있다. 또한, 사진 선택 영역(512)을 표시하는 것이 전자 장치(100)가 가상 버튼(511)에 대해 수행된 조작을 찾는 것 외의 방식으로 트리거될 수 있다고 이해해야 한다. 예를 들어, 새로운 가상 기능 버튼이 사용자 인터페이스(510) 상에 배치됨으로서, 전자 장치(100)가 새로운 가상 기능 버튼에 대해 수행된 조작을 찾은 후 사진 선택 영역(512)을 표시할 수 있다.
사용자의 RGB 피부 이미지가 전술한 방법을 이용하여 획득된 후, 표시 화면(194)이 RGB 피부 이미지 미리보기 인터페이스(520)를 표시하고, RGB 피부 이미지 미리보기의 미리보기 영역(521)에 RGB 피부 이미지를 표시할 수 있다. 전자 장치(100)는 미리보기 영역(521) 내의 RGB 피부 이미지에 기초하여 색소 검출을 위한 ROI를 결정할 수 있다. 예를 들어, 전자 장치(100)는 RGB 피부 이미지 내의 얼굴 특징점에 기초하여 위치 분석을 통해 ROI를 자동으로 선택할 수 있거나; 또는 사용자는 ROI를 수동으로 그릴 수 있거나; 또는 전자 장치(100)는 영역을 제공할 수 있고, 사용자는 전자 장치(100)에 의해 제공된 영역을 수동으로 조정하여 ROI를 획득할 수 있다. 그런 다음, ROI는 RGB 피부 이미지 내에 있는 영역으로서 색소가 검출될 필요가 있는 영역으로 사용되고, 본 출원의 실시예에서 제공된 색소 검출 방법을 이용하여 색소 검출을 수행하는 데 사용된다.
이하, 전자 장치(100)의 프로세서(110)가 전술한 다른 방식으로 획득된 RGB 피부 이미지에 기초하여 RGB 피부 이미지에 대한 색소 검출을 구체적으로 구현하는 방법에 대해 상세하게 설명한다. 구체적인 방법에 대해서는, 도 3에 도시된 개략적인 흐름도를 참조하라. 이 방법은 다음의 단계를 포함한다.
단계 301. 프로세서(110)가 검출될 RGB 피부 이미지로부터 제1 이미지를 추출한다.
제1 이미지는 RGB 피부 이미지 내의 신체 반사 성분을 나타내는 데 사용되고, RGB 피부 이미지는 RGB 이미지 촬영 기능을 가진 장치에 의해 촬영된다.
여기서, RGB 피부 이미지는 검출될 부분의 피부 이미지, 예를 들어 얼굴 이미지 또는 코 영역 이미지일 수 있다.
RGB 피부 이미지는 입사광이 표피를 통해 반사되어 표피, 진피, 및 피하 조직에 흡수되어 산란된 후 이미징에 의해 획득된다. RGB 피부 이미지는 주로 2개의 성분, 즉 표면 반사 성분과 신체 반사 성분을 포함한다.
표면 반사 성분은 입사광이 피부 표면에 입사될 때 거울 반사와 유사한 방식으로 반사되는 에너지를 이용하여 획득되고, 피부 표면의 토폴로지 특징, 예를 들어 주름, 모공, 검은 여드름, 및 피부결을 분석하는 데 사용될 수 있다..
신체 반사 성분은 입사광의 에너지가 피부에 들어와서 표피와 진피의 색소와 콜라겐 등에 의해 흡수되고 산란된 후 되돌아 오는 에너지를 이용하여 얻어지고, 피하 조직의 광학적 성질, 예를 들어 멜라닌 및 헤모글로빈과 같은 색소의 분포를 분석하는 데 사용될 수 있다. 예를 들어, 제1 이미지를 얻기 위해, 검출될 RGB 피부 이미지로부터 신체 반사 성분이 추출될 수 있다.
RGB 이미지 촬영 기능을 가진 장치는 전자 장치(100)일 수 있거나, 또는 전자 장치(100)에 연결된 장치일 수 있거나, 또는 전자 장치(100)에 직접 연결되지 않은 장치일 수 있다. 일 예에서, RGB 이미지 촬영 기능을 가진 장치에 의해 촬영된 RGB 피부 이미지를 전자 장치(100)에 전송하거나 또는 송신하기 위해, 간접 연결이 무선 연결일 수 있거나, 또는 다른 장치를 이용하여 구현된 연결일 수 있다. 예를 들어, RGB 이미지 촬영 기능을 가진 장치는 전자 장치(100)이다. RGB 이미지 촬영 기능은 전자 장치(100) 상의 카메라(193)에 의해 구현된다. 예를 들어, 카메라(193)는 RGB 피부 이미지를 획득한다. 예를 들어, 이미지가 획득될 필요가 있을 때, 카메라(193)로 하여금 전자 장치(100)를 이용하여 이미지를 촬영할 수 있게 하기 위해, 전자 장치(100)에 설치된 카메라 애플리케이션에 대해 조작이 수행될 수 있다. 카메라 애플리케이션은 배송시 전자 장치(100)에 미리 설치된 애플리케이션일 수 있거나, 또는 사용자에 의해 다운로드된 애플리케이션일 수 있다. RGB 피부 이미지가 전자 장치(100)에 미리 저장된 이미지일 수 있거나, 또는 카메라(193)를 활성화하여 실시간 촬영을 통해 전자 장치(100)에 의해 획득될 수 있다는 것을 유의해야 한다.
특정 예에서, 도 4a와 도 4b에 도시된 바와 같이, 전자 장치(100)의 표시 화면(194)이 홈 화면을 표시한다. 홈 화면은 카메라 애플리케이션의 아이콘(400)을 포함한다. 또한, 홈 화면은 이메일 아이콘, SMS 메시지 아이콘, 갤러리 아이콘, 및 위챗(WeChat) 아이콘 등을 더 포함할 수 있다. 이미지가 촬영될 필요가 있을 때, 전자 장치(100)의 표시 화면(194)은 아이콘(400)에 대해 수행된 조작, 예를 들어 아이콘(400)에 대해 수행된 터치 조작에 응답할 수 있다. 표시 화면(194)은 미리보기 인터페이스(410)를 표시하고, 미리보기 인터페이스(410)는 미리보기 영역(411)을 포함한다. 미리보기 영역(411)은 카메라(193)에 의해 획득된 RGB 피부 이미지를 표시하는 데 사용될 수 있다. 얼굴 이미지의 촬영을 예로 들면, 촬영될 이미지가 미리보기 영역(411)에 표시될 때, RGB 피부 이미지를 얻기 위해 가상 버튼(412)에 대한 터치 조작이 수행될 수 있다.
다른 구체적인 예에서, 전자 장치(100)는 피부 검사용 애플리케이션을 더 포함할 수 있다. 도 5a 내지 도 5d에 도시된 바와 같이, 전자 장치(100)의 표시 화면(194)이 피부 테스트용 애플리케이션의 아이콘(500)을 표시한다. 아이콘(500)에 대해 수행된 조작에 응답하여, 전자 장치(100)는 사용자 피부 테스트용 애플리케이션의 인터페이스(510)를 표시 화면(194) 상에 표시한다. 사용자 인터페이스(510)는 가상 버튼(511)을 포함한다. 전자 장치(100)가 가상 버튼(511)에 대해 수행된 조작을 찾으면, 가상 버튼(511)에 대해 수행된 조작에 응답하여, 표시 화면(194)은 카메라 애플리케이션의 미리보기 인터페이스(520)를 표시하고, 미리보기 인터페이스(520)는 미리보기 영역(521)을 포함한다. 미리보기 영역(521)은 카메라(193)에 의해 획득된 RGB 피부 이미지를 표시하는 데 사용된다.
단계 302. 프로세서(110)가 색소의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선 간의 대응관계에 기초하여 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 색소를 추출한다.
색소는 헤모글로빈, 멜라닌, 카로틴, 리포크롬, 및 담즙 색소 중 어느 하나를 포함할 수 있지만 이에 제한되지 않는다.
구체적으로, 프로세서(110)가 색소의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선 간의 대응관계, 및 제1 이미지의 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값에 기초하여 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 색소를 추출한다.
예를 들어, 색소의 제1 스펙트럼 반응 곡선이 다른 파장의 스펙트럼 세그먼트에서 색소의 흡수 값, 예를 들어 도 6에 도시된 멜라닌(melanin)의 흡수 스펙트럼 곡선, 옥시헤모글로빈(oxyhemoglobin)의 흡수 스펙트럼 곡선, 및, 데옥시헤모글로빈(deoxyhemoglobin)의 흡수 스펙트럼 곡선을 반영한다. RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선은 다른 스펙트럼의 세그먼트에 대응하는, RGB 이미지 촬영 기능을 가진 장치 내의 서로 다른 감광 유닛들의 흡수 값, 예를 들어, 도 6에 도시된 적색(R) 감광 유닛의 흡수 스펙트럼 곡선, 녹색(G) 감광 유닛의 흡수 스펙트럼 곡선, 및 청색(B) 감광 유닛의 흡수 스펙트럼 곡선을 반영한다.
구체적인 예에서, 멜라닌과 헤모글로빈은 제1 이미지로부터 추출된다. 멜라닌과 헤모글로빈이 구체적인 흡수 스펙트럼을 가지고 있기 때문에, 멜라닌과 헤모글로빈은 스펙트럼 분석 기술을 이용하여 제1 이미지의 신체 반사 성분으로부터 분리될 수 있다. 이하, 멜라닌과 헤모글로빈을 분리하는 가능한 구현이 제공된다.
도 6에 도시된 멜라닌의 제1 스펙트럼 응답 곡선 및 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선에 기초하여, 멜라닌의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선 간의 제1 함수 관계가 결정될 수 있다. 그런 다음, RGB 이미지 촬영 기능을 가진 장치의 R 채널, G 채널, 및 B 채널의 채널 값과 제1 함수 관계에 기초하여, 멜라닌과 3개의 채널, 즉 R 채널, G 채널, 및B 채널의 채널 값 간의 대응관계가 결정될 수 있다. 예를 들어, 이 대응관계가 다음의 수식 (1)으로 표현된다.
M = g(R,G,B) (1)
이 수식 (1)에서, R, G, B는 각각 RGB 이미지의 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값을 나타내고, M은 멜라닌의 멜라닌 값이며, g는 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값에서 멜라닌 값(M)으로의 매핑 함수이다.
수식 (1) 및 도 5c에 도시된 미리보기 영역(521)에 표시된 RGB 피부 이미지로부터 추출된 제1 이미지에 기초하여, 멜라닌은 제1 이미지의 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값에 기초하여 제1 이미지로부터 추출될 수 있다. 이와 같이, 도 7에 도시된 멜라닌에 대응하는 그레이스케일 이미지가 획득될 수 있다.
유사하게, 도 6에 도시된 헤모글로빈의 제1 스펙트럼 응답 곡선 및 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선에 기초하여, 헤모글로빈의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선 간의 제2 함수 관계가 결정될 수 있다. 그런 다음, RGB 이미지 촬영 기능을 가진 장치의 R 채널, G 채널, 및 B 채널의 채널 값 및 제2 함수 관계에 기초하여, 헤모글로빈과 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값 간의 대응관계가 결정될 수 있다. 예를 들어, 이 대응관계가 다음의 수식 (2)로 표현된다.
H = f(R,G,B) (2)
전술한 수식 (2)에서, R, G, 및 B는 각각 RGB 이미지의 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값을 나타내고, H는 헤모글로빈의 헤모글로빈 값이며, f는 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값에서 헤모글로빈 값 H로의 매핑함수이다.
수식 (2) 및 도 5c에 도시된 미리보기 영역(521)에 표시된 RGB 피부 이미지로부터 추출된 제1 이미지에 기초하여, 헤모글로빈은 제1 이미지의 3개의 채널, 즉 R 채널, G 채널, 및 B 채널의 채널 값에 기초하여 제1 이미지로부터 추출될 수 있다 이와 같이, 도 8에 도시된 헤모글로빈에 대응하는 그레이스케일 이미지가 획득될 수 있다.
수식 (1)과 수식 (2)가 기존 연구에서 제공되는 수학적 모델일 수 있거나, 또는 기계 학습 알고리즘을 이용하여 훈련을 통해 얻어진 모델일 수 있다는 것을 유의해야 한다.
단계 303. 프로세서(110)가 추출된 색소에 기초하여 의사 컬러 이미지(pseudo-color image)를 생성하고, 의사 컬러 이미지를 표시한다.
특정 예에서, 프로세서(110)는 추출된 색소에 기초하여 그레이스케일 이미지(도 7에 도시된 멜라닌 결과 이미지와 도 8에 도시된 헤모글로빈 결과 이미지)를 생성하고, 그런 다음 그레이스케일 이미지를 의사 컬러 이미지로 변환한다. 이러한 방식으로, 사용자가 의사 컬러 이미지로부터 더 많은 정보를 얻을 수 있도록, 직관적인 색소 검출 결과가 사용자에게 제공될 수 있다.
구체적으로, 의사 컬러 이미지가, 미리 설정된 색상 룩업 테이블을 이용하여 매핑을 통해 획득할 수 있다. 예를 들어, 색상 룩업 테이블은 서로 다른 그레이 스케일 값과 R 값, G 값, B 값 간의 매핑 관계를 포함할 수 있다. 이와 같이, 의사 컬러 이미지가, 그레이스케일 이미지 내의 각각의 픽셀의 그레이스케일 값에 대응하는 R 값, G 값, 및 B 값을 검색하여 획득될 수 있다.
또한, 더 정확한 색소 검출 결과를 얻기 위해, 프로세서(110)는 생성된 그레이스케일 이미지에 대해 후처리, 예컨대 정규화 처리 및 콘트라스트 향상 처리를 수행하고, 그런 다음 후처리된 그레이스케일 이미지를 의사 컬러 이미지로 변환할 수 있다.
전술한 해결책에 따르면, 프로세서(110)가 검출될 RGB 피부 이미지로부터 제1 이미지를 추출하고 - 여기서, 제1 이미지는 RGB 피부 이미지 내의 신체 반사 성분을 나타내는 데 사용되고, RGB 피부 이미지는 RGB 이미지 촬영 기능을 가진 장치에 의해 촬영됨 -; 및 프로세서(110)가 색소의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 장치의 제2 스펙트럼 응답 곡선 간의 관계에 기초하여 제1 이미지로부터 색소를 추출한다. 이와 같이, 서로 다른 시나리오에서 촬영된 RGB 피부 이미지 내의 색소들이 검출될 수 있도록, 프로세서(110)가 스펙트럼 응답 관계에 기초하여 색소를 추출함으로써, 서로 다른 시나리오에서 획득된 피부 이미지를 이용하여 훈련이 미리 수행된 후에만 색소 검출이 수행될 수 있는 사례를 방지한다. 따라서, 이 해결책에 기반한 색소 검출은 비교적 양호한 적용 가능성을 가지고 있다.
전술한 실시예에 기초하여, RGB 피부 이미지로부터 추출된 제1 이미지의 충실도를 개선하기 위해, 이하에서는 선택적 구현이 제공되며, 단계 301은 아래의 단계 S1 내지 단계 S3을 이용하여 구현된다.
S1. 프로세서(110)가 검출될 RGB 피부 이미지를 제1 Lab 이미지로 변환한다.
구체적으로, 제1 Lab 이미지를 얻기 위해, 프로세서(110)가 검출될 RGB 피부 이미지를 RGB 색 공간에서 Lab 색 공간으로 변환한다. RGB 색 공간에서 Lab 색 공간으로의 변환은 당 업계에 공개된 알고리즘을 이용하여 수행될 수 있다.
RGB 색 공간은 3개의 채널, 즉 R 채널, G 채널, 및 B 채널을 포함한다. 검출될 RGB 피부 이미지 내의 각각의 화소의 색상이 R 값, G 값, 및 B 값을 포함하고, 모든 화소의 R 값이 R 채널을 형성하며, 모든 화소의 G 값이 G 채널을 형성하고, 모든 화소의 B 값이 B 채널을 형성한다.
lab 색 공간은 3개의 채널, 즉 L 채널, a 채널, 및 b 채널을 포함한다. L은 화소 휘도를 나타내고, 색상 정보와 관련되어 있지 않다. a와 b는 화소의 색상과 관련되어 있고, 화소 휘도와 관련되어 있지 않다. a는 자홍색에서 녹색까지의 범위를 나타내고, b는 노란색에서 파란색까지의 범위를 나타낸다. 제1 Lab 이미지 내의 각각의 픽셀 색상이 L 값, a 값, 및 b 값을 포함한다. 제1 Lab 이미지 내의 모든 픽셀의 L 값이 L 채널을 형성하고, 모든 픽셀의 a 값이 a 채널을 형성하며, 모든 픽셀의 b 값이 b 채널을 형성한다.
RGB 피부 이미지의 R 채널, G 채널, 및 B 채널에 대해 필터링 처리가 수행되면, 필터링 결과에 색상 중첩이 발생할 수 있다. 결과적으로, 획득된 이미지의 충실도가 열악하다. 색상 관련 정보 및 색상과 관련되지 않은 정보가 분리될 수 있도록, 검출될 RGB 피부 이미지가 제1 Lab 이미지로 변환됨으로써, 제1 Lab 이미지의 색상 관련 정보를 개별적으로 처리한다.
S2. 프로세서(110)가 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널 각각으로부터 신체 반사 성분을 추출한다.
예를 들어, 프로세서(110)가 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널에 대해 필터링 처리를 개별적으로 수행함으로써, 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 신체 반사 성분을 획득한다.
제1 Lab 이미지의 L 채널, a 채널, 및 b 채널 각각의 초기 값이 신체 반사 성분과 표면 반사 성분을 포함한다. 일 구현에서, 필터링 처리가 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 개별적으로 수행되어 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분을 획득하고, 그런 다음 L 채널, a 채널, 및 b 채널의 신체 반사 성분이 결정된다. 제1 Lab 이미지의 L 채널의 신체 반사 성분은 제1 Lab 이미지의 L 채널의 초기 값과 제1 Lab 이미지의 L 채널의 표면 반사 성분 간의 차이이고; 제1 Lab 이미지의 a 채널의 신체 반사 성분은 제1 Lab 이미지의 a 채널의 초기 값과 제1 Lab 이미지의 a 채널의 표면 반사 성분 간의 차이이며; 제1 Lab 이미지의 b 채널의 신체 반사 성분은 제1 Lab 이미지의 b 채널의 초기 값과 제1 Lab 이미지의 b 채널의 표면 반사 성분 간의 차이이다. 이와 같이, L 채널, a 채널, 및 b 채널의 표면 반사 성분이 필터링되어 L 채널, a 채널, 및 b 채널로부터 신체 반사 성분을 정확하게 추출할 수 있다.
또한, 색소 검출 정확도를 개선하기 위해, 모든 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분은 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 양방향 필터링 처리를 개별적으로 수행하여 획득된다. 이 해결책은 제1 이미지의 가장자리 정보를 유지하는 데 도움이 됨으로써 색소 검출 정확도를 개선할 수 있다.
S3. 프로세서(110)가 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널로부터 추출된 신체 반사 성분을 결합하여 제2 Lab 이미지를 획득한다.
S4. 프로세서(110)가 제2 Lab 이미지를 RGB 이미지로 변환하여 제1 이미지를 획득한다.
구체적으로, 프로세서(110)는 Lab 색 공간에서 RGB 색 공간으로 제2 Lab 이미지를 변환하여 제1 이미지를 획득한다. Lab 색 공간에서 RGB 색 공간으로의 변환은 당 업계에 공개된 알고리즘을 이용하여 수행될 수 있다.
S1 내지 단계 S4에 따르면, 색상 관련 정보 및 색상과 관련되지 않은 정보가 개별적으로 처리됨으로써, 제1 이미지의 충실도를 개선하는 데 도움이 될 수 있다.
본 출원의 전술한 실시예들이 조합하여 사용될 수 있거나 또는 개별적으로 사용될 수 있다는 것을 이해해야 한다.
본 출원에서 제공된 전술한 실시예에서, 실행 본체의 역할을 하는 전자 장치의 관점에서 본 출원의 실시예에 제공된 방법에 대해 설명하였다. 본 출원의 실시예에 제공되는 방법의 기능을 구현하기 위해, 전자 장치는 하드웨어 구조 및/또는 소프트웨어 모듈을 포함할 수 있고, 하드웨어 구조, 소프트웨어 모듈, 또는 하드웨어 구조와 소프트웨어 모듈의 조합의 형태로 이러한 기능을 구현할 수 있다. 전술한 기능 중 하나의 기능이 하드웨어 구조, 또는 소프트웨어 모듈, 또는 하드웨어 구조와 소프트웨어 모듈의 조합에 의해 수행되는지 여부가 특정 적용 및 기술적 해결책의 설계 제한에 따라 달라진다.
동일한 개념에 기초하여, 도 9는 본 출원에 따른 전자 장치(900)를 나타내는 도면이다. 예를 들어, 전자 장치(900)는 적어도 하나의 프로세서(910), 메모리(920), 및 표시 화면(930)을 포함하고, 표시 화면(930)과 카메라(940)를 더 포함할 수 있다. 프로세서(910)는 메모리(920), 표시 화면(930), 및 카메라(940)에 연결된다. 본 출원의 본 실시예에서의 연결이 장치들, 유닛들, 또는 모듈들 간의 간접 연결 또는 통신 연결이거나, 또는 전기적 형태, 또는 기계적 형태, 또는 다른 형태일 수 있으며, 장치들 또는 유닛들 또는 모듈들 간의 정보 교환에 사용된다.
구체적으로, 메모리(920)는 프로그램 명령을 저장하도록 구성된다.
전자 장치(900)가 도 3에 도시된 색소 검출 방법에서 전자 장치에 의해 수행되는 단계를 수행할 수 있도록, 프로세서(910)는 메모리에 저장된 프로그램 명령(920)을 호출하도록 구성된다.
표시 화면(930)은 프로세서(910)에 의해 획득된 색소 검출 결과, 예를 들어 단계 303에서 의사 컬러 이미지를 표시하도록 구성된다. 표시 화면은 추가적으로, 카메라(940)가 촬영을 시작할 때 미리보기 인터페이스를 표시하도록 구성될 수 있다. 여기서, 미리보기 인터페이스는 카메라(940)에 의해 획득된 이미지를 포함하고, 전술한 실시예에서 설계된 사용자 인터페이스를 표시하는 데 사용된다.
전자 장치(900)가 도 3에 도시된 본 출원의 실시예의 색소 검출 방법을 구현하도록 구성될 수 있다는 것을 이해해야 한다. 관련 특징에 대해서는 전술한 설명을 참조하라. 여기서는 세부사항에 대해 다시 설명하지 않는다.
당업자라면 본 출원의 실시예가 하드웨어, 펌웨어, 또는 이들의 조합을 이용하여 구현될 수 있다는 것을 명확하게 알 수 있다. 본 발명이 소프트웨어에 의해 구현될 때, 전술한 기능은 컴퓨터 판독가능 매체에 저장되거나 또는 하나 이상의 명령 또는 코드로서 컴퓨터 판독가능 매체에 전송될 수 있다. 컴퓨터 판독가능 매체는 컴퓨터 저장 매체와 통신 매체를 포함하며, 통신 매체는 컴퓨터 프로그램이 한 장소에서 다른 장소로 전송될 수 있게 하는 어떠한 매체도 포함한다. 저장 매체는 컴퓨터에 액세스할 수 있는 어떤 이용 가능한 매체일 수 있다. 한정이 아닌 예로서, 컴퓨터 판독가능 매체는 RAM, ROM, 이이피롬(electrically erasable programmable read only memory, EEPROM), 씨디롬(compact disc read-Only memory, CD-ROM), 또는 다른 광 디스크 스토리지, 자기 디스크 저장 매체 또는 다른 자기 저장 장치, 또는 명령 또는 데이터 구조 형태로 예측된 프로그램 코드를 싣고 있거나 또는 저장하는 데 사용될 수 있는 어떤 다른 컴퓨터 접근가능 매체도 포함할 수 있다. 또한, 어떤 연결도 컴퓨터 판독가능 매체로서 적절하게 정의될 수 있다. 예를 들어, 소프트웨어가 동축 케이블, 광 섬유/케이블, 트위스티드 페어, 디지털 가입자 회선(digital subscriber line, DSL) 또는 적외선, 무선 및 마이크로파와 같은 무선 기술을 이용하여 웹사이트, 서버, 또는 다른 원격 소스로부터 전송되면, 동축 게이블, 광 섬유/케이블, 트위스티드 페어, DSL 또는 적외선, 무선 및 마이크로파와 같은 무선 기술이 이들이 속하는 매체의 고정에 포함된다. 본 출원의 실시예에 의해 사용되는 디스크(disk)와 디스크(disc)가 콤팩트 디스크(compact disc, CD), 레이저 디스크, 광 디스크, 디지털 비디오 디스크(digital video disc, DVD), 플로피 디스크, 및 블루레이 디스크를 포함하고, 디스크(disk)는 일반적으로 자기 수단으로 데이터를 복사하고, 디스크(disc)는 레이저 수단으로 데이터를 광학적으로 복사한다. 전술한 조합도 컴퓨터 판독가능 매체의 보호 범위에 포함되어야 한다.
요약하면, 위에 설명된 것은 단지 본 출원의 실시예일 뿐이고, 본 출원의 보호 범위를 제한하려는 것이 아니다. 본 출원의 개시에 따라 이루어진 어떠한 수정, 등가의 대체, 또는 개선도 본 출원의 보호 범위에 속할 것이다.

Claims (13)

  1. 색소 검출 방법으로서,
    검출될 RGB 피부 이미지로부터 제1 이미지를 추출하는 단계 - 상기 제1 이미지는 상기 RGB 피부 이미지 내의 신체 반사 성분(body reflection component)을 나타내는 데 사용되고, 상기 RGB 피부 이미지는 RGB 이미지 촬영 기능을 가진 장치에 의해 촬영됨 -;
    상기 색소의 제1 스펙트럼 응답 곡선과 상기 RGB 이미지 촬영 기능을 가진 상기 장치의 제2 스펙트럼 응답 곡선 간의 대응관계에 기초하여 상기 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 색소를 추출하는 단계; 및
    상기 추출된 색소에 기초하여 의사 컬러 이미지(pseudo-color image)를 생성하고, 상기 의사 컬러 이미지를 표시하는 단계
    를 포함하는 색소 검출 방법.
  2. 제1항에 있어서,
    상기 검출될 RGB 피부 이미지로부터 제1 이미지를 추출하는 단계는,
    상기 검출될 RGB 피부 이미지를 제1 Lab 이미지로 변환하는 단계;
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널 각각으로부터 신체 반사 성분을 추출하는 단계;
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널로부터 추출된 상기 신체 반사 성분을 결합하여 제2 Lab 이미지를 획득하는 단계; 및
    상기 제2 Lab 이미지를 RGB 이미지로 변환하여 상기 제1 이미지를 획득하는 단계
    를 포함하는, 색소 검출 방법.
  3. 제2항에 있어서,
    상기 제1 Lab 이미지의 L 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 L 채널의 초기 값과 상기 제1 Lab 이미지의 L 채널의 표면 반사 성분 간의 차이이고; 상기 제1 Lab 이미지의 a 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 a 채널의 초기 값과 상기 제1 Lab 이미지의 a 채널의 표면 반사 성분 간의 차이이며; 상기 제1 Lab 이미지의 b 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 b 채널의 초기 값과 상기 제1 Lab 이미지의 b 채널의 표면 반사 성분 간의 차이이고,
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 개별적으로 필터링 처리를 수행하여 획득되는, 색소 검출 방법.
  4. 제3항에 있어서,
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 필터링 처리를 수행하여 획득된다는 것은,
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 양방향 필터링 처리를 수행하여 획득된다는 것
    을 포함하는, 색소 검출 방법.
  5. 제1항 내지 제4항 중 어느 한 항에 있어서,
    상기 색소는,
    헤모글로빈, 멜라닌, 카로틴, 리포크롬, 및 담즙 색소 중 어느 하나
    를 포함하는, 색소 검출 방법.
  6. 전자 장치로서,
    상기 전자 장치는 메모리, 프로세서, 및 표시 화면을 포함하고;
    상기 메모리는 프로그램 명령을 저장하도록 구성되며;
    상기 프로세서는 상기 메모리에 저장된 상기 프로그램 명령을 판독하고,
    검출될 RGB 피부 이미지로부터 제1 이미지를 추출하는 연산, 색소의 제1 스펙트럼 응답 곡선과 RGB 이미지 촬영 기능을 가진 상기 장치의 제2 스펙트럼 응답 곡선 간의 대응관계에 기초하여 상기 제1 이미지의 R 채널, B 채널, 및 G 채널로부터 상기 색소를 추출하는 연산, 및 상기 추출된 색소에 기초하여 의사 컬러 이미지(pseudo-color image)를 생성하는 연산을 수행하도록 구성되고 - 상기 제1 이미지는 상기 RGB 피부 이미지 내의 신체 반사 성분(body reflection component)을 나타내는 데 사용되고, 상기 RGB 피부 이미지는 상기 RGB 이미지 촬영 기능을 가진 상기 장치에 의해 촬영됨 -;
    상기 표시 화면은 상기 의사 컬러 이미지를 표시하도록 구성된, 전자 장치.
  7. 제6항에 있어서,
    상기 프로세서는 구체적으로,
    상기 검출될 RGB 피부 이미지를 제1 Lab 이미지로 변환하는 연산;
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널 각각으로부터 신체 반사 성분을 추출하는 연산;
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널로부터 추출된 상기 신체 반사 성분을 결합하여 제2 Lab 이미지를 획득하는 연산; 및
    상기 제2 Lab 이미지를 RGB 이미지로 변환하여 상기 제1 이미지를 획득하는 연산
    을 수행하도록 구성된, 전자 장치.
  8. 제7항에 있어서,
    상기 제1 Lab 이미지의 L 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 L 채널의 초기 값과 상기 제1 Lab 이미지의 L 채널의 표면 반사 성분 간의 차이이고; 상기 제1 Lab 이미지의 a 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 a 채널의 초기 값과 상기 제1 Lab 이미지의 a 채널의 표면 반사 성분 간의 차이이며; 상기 제1 Lab 이미지의 b 채널의 신체 반사 성분은 상기 제1 Lab 이미지의 b 채널의 초기 값과 상기 제1 Lab 이미지의 b 채널의 표면 반사 성분 간의 차이이고,
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 필터링 처리를 수행하여 획득되는, 전자 장치.
  9. 제8항에 있어서,
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 필터링 처리를 수행하여 획득된다는 것은,
    상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 표면 반사 성분이 상기 제1 Lab 이미지의 L 채널, a 채널, 및 b 채널의 초기 값에 대해 양방향 필터링 처리를 수행하여 획득된다는 것
    을 포함하는, 전자 장치.
  10. 제6항 내지 제9항 중 어느 한 항에 있어서,
    상기 색소는,
    헤모글로빈, 멜라닌, 카로틴, 리포크롬, 및 담즙 색소 중 어느 하나를 포함하는, 전자 장치.
  11. 컴퓨터 저장 매체로서,
    상기 컴퓨터 저장 매체는 프로그램 명령을 저장하고, 상기 프로그램 명령은 전자 장치 상에서 실행될 때 상기 전자 장치로 하여금 제1항 내지 제5항 중 어느 한 항의 색소 검출 방법을 수행할 수 있게 하는, 컴퓨터 저장 매체.
  12. 컴퓨터 프로그램 제품으로서,
    상기 컴퓨터 프로그램 제품은, 전자 장치 상에서 실행될 때 상기 전자 장치로 하여금 제1항 내지 제5항 중 어느 한 항의 색소 검출 방법을 수행할 수 있게 하는 컴퓨터 프로그램 제품.
  13. 칩으로서,
    상기 칩은 전자 장치의 메모리에 연결되어 제1항 내지 제5항 중 어느 한 항의 색소 검출 방법을 수행하도록 상기 전자 장치를 제어하는 칩.
KR1020217004153A 2018-07-16 2018-09-18 색소 검출 방법 및 전자 장치 KR102548317B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201810776213.1 2018-07-16
CN201810776213 2018-07-16
PCT/CN2018/106216 WO2020015142A1 (zh) 2018-07-16 2018-09-18 一种色素检测方法及电子设备

Publications (2)

Publication Number Publication Date
KR20210030437A true KR20210030437A (ko) 2021-03-17
KR102548317B1 KR102548317B1 (ko) 2023-06-26

Family

ID=69163856

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020217004153A KR102548317B1 (ko) 2018-07-16 2018-09-18 색소 검출 방법 및 전자 장치

Country Status (6)

Country Link
US (1) US11847798B2 (ko)
EP (1) EP3808252B1 (ko)
JP (1) JP7130839B2 (ko)
KR (1) KR102548317B1 (ko)
CN (2) CN111343907B (ko)
WO (1) WO2020015142A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111343907B (zh) 2018-07-16 2022-06-10 荣耀终端有限公司 一种色素检测方法及电子设备
CN113749614B (zh) * 2020-06-05 2023-03-10 华为技术有限公司 皮肤检测方法和设备
CN112163920A (zh) * 2020-08-18 2021-01-01 广州市美图现电子有限公司 测肤美妆系统的使用方法、装置、存储介质和计算机设备
CN114827442B (zh) * 2021-01-29 2023-07-11 华为技术有限公司 生成图像的方法和电子设备
CN113688752B (zh) 2021-08-30 2024-02-02 厦门美图宜肤科技有限公司 人脸色素检测模型训练方法、装置、设备及存储介质
CN113888540B (zh) * 2021-12-06 2022-03-18 深圳市海谱纳米光学科技有限公司 一种用于人脸皮肤成分图像的分离方法和系统
US12028659B2 (en) 2022-07-25 2024-07-02 Dell Products L.P. Information handling system camera visual image color tuning based on sensed ambient light color
CN117379033B (zh) * 2023-12-13 2024-02-20 深圳市宗匠科技有限公司 皮肤色素检测方法、装置、计算机设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104586355A (zh) * 2013-10-31 2015-05-06 夏普株式会社 测定装置
CN105377132A (zh) * 2013-03-19 2016-03-02 H·施尼达尔 用于评估红斑的方法
KR20170083066A (ko) * 2014-11-19 2017-07-17 가부시키가이샤 시세이도 기미 평가 장치, 기미 평가 방법 및 프로그램
KR20170100717A (ko) * 2016-02-25 2017-09-05 한국전자통신연구원 분광반사율 추정을 이용한 피부 분석 장치 및 방법

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7630006B2 (en) * 1997-10-09 2009-12-08 Fotonation Ireland Limited Detecting red eye filter and apparatus using meta-data
US8026942B2 (en) * 2004-10-29 2011-09-27 Johnson & Johnson Consumer Companies, Inc. Skin imaging system with probe
CN101175537A (zh) * 2005-05-13 2008-05-07 拜埃尔斯多尔夫股份公司 自粘性的皮肤贴片和用于美容皮肤护理的组合套件
JP4818704B2 (ja) * 2005-12-15 2011-11-16 ポーラ化成工業株式会社 画像の色調整方法
GB2429523B (en) 2005-12-23 2008-03-26 Astron Clinica Ltd Method and apparatus for detecting the presence of dermal melanin in epithelial tissue
CN101523169A (zh) * 2006-10-02 2009-09-02 强生消费者公司 用于使用L*a*b*色空间来分析皮肤的装置和方法
CN102037734B (zh) * 2008-05-22 2014-10-15 惠普开发有限公司 照相机传感器校正
FR2944898B1 (fr) * 2009-04-23 2018-03-16 Lvmh Recherche Procede et appareil de caracterisation des imperfections de la peau et procede d'appreciation de l'effet anti-vieillissement d'un produit cosmetique
JP6001245B2 (ja) 2011-08-25 2016-10-05 株式会社 資生堂 皮膚評価装置、皮膚評価方法、及び皮膚評価プログラム
US8861847B2 (en) 2012-12-21 2014-10-14 Intel Corporation System and method for adaptive skin tone detection
WO2014165820A1 (en) 2013-04-05 2014-10-09 University Of Massachusetts Device and method for imaging collagen structure in vivo
US9256963B2 (en) 2013-04-09 2016-02-09 Elc Management Llc Skin diagnostic and image processing systems, apparatus and articles
US9101320B2 (en) * 2013-04-09 2015-08-11 Elc Management Llc Skin diagnostic and image processing methods
US10182757B2 (en) 2013-07-22 2019-01-22 The Rockefeller University System and method for optical detection of skin disease
CN103690149B (zh) * 2013-12-30 2016-08-17 惠州Tcl移动通信有限公司 通过面部拍照识别身体健康状况的移动终端及其实现方法
CN104978707A (zh) * 2014-04-03 2015-10-14 陈鹏飞 基于轮廓线的图像变形技术
JP6003963B2 (ja) 2014-11-07 2016-10-05 カシオ計算機株式会社 診断装置並びに当該診断装置における画像処理方法及びそのプログラム
US10282868B2 (en) * 2016-03-21 2019-05-07 The Procter & Gamble Company Method and system for generating accurate graphical chromophore maps
CN105844242A (zh) 2016-03-23 2016-08-10 湖北知本信息科技有限公司 图像中的肤色检测方法
CN105933607B (zh) 2016-05-26 2019-01-22 维沃移动通信有限公司 一种移动终端的拍照效果调整方法及移动终端
CN106127709A (zh) * 2016-06-24 2016-11-16 华东师范大学 一种低照度彩色眼底图像判断方法与增强方法
CN206132659U (zh) * 2016-08-29 2017-04-26 北京农业智能装备技术研究中心 用于检测柑橘表皮缺陷的在线图像采集系统
CN106388781A (zh) 2016-09-29 2017-02-15 深圳可思美科技有限公司 一种皮肤肤色及其色素沉淀情况的检测方法
US10750055B2 (en) * 2016-10-07 2020-08-18 Canon Kabushiki Kaisha Image processing apparatus with color conversion for reduced consumption of color materials, image processing method, and storage medium
CN106846421A (zh) 2017-02-14 2017-06-13 深圳可思美科技有限公司 一种肤色检测方法及装置
CN107371013B (zh) 2017-07-12 2019-03-08 天津大学 基于色相角和差通道的立体图像质量评价方法
CN107835402A (zh) 2017-11-08 2018-03-23 维沃移动通信有限公司 一种图像处理方法、装置及移动终端
CN111343907B (zh) 2018-07-16 2022-06-10 荣耀终端有限公司 一种色素检测方法及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105377132A (zh) * 2013-03-19 2016-03-02 H·施尼达尔 用于评估红斑的方法
CN104586355A (zh) * 2013-10-31 2015-05-06 夏普株式会社 测定装置
KR20170083066A (ko) * 2014-11-19 2017-07-17 가부시키가이샤 시세이도 기미 평가 장치, 기미 평가 방법 및 프로그램
KR20170100717A (ko) * 2016-02-25 2017-09-05 한국전자통신연구원 분광반사율 추정을 이용한 피부 분석 장치 및 방법

Also Published As

Publication number Publication date
JP7130839B2 (ja) 2022-09-05
CN111343907B (zh) 2022-06-10
EP3808252B1 (en) 2022-06-01
JP2021529634A (ja) 2021-11-04
EP3808252A1 (en) 2021-04-21
WO2020015142A1 (zh) 2020-01-23
CN111343907A (zh) 2020-06-26
EP3808252A4 (en) 2021-08-25
CN112233064B (zh) 2022-05-20
US11847798B2 (en) 2023-12-19
CN112233064A (zh) 2021-01-15
US20210319589A1 (en) 2021-10-14
KR102548317B1 (ko) 2023-06-26

Similar Documents

Publication Publication Date Title
KR102548317B1 (ko) 색소 검출 방법 및 전자 장치
US11759143B2 (en) Skin detection method and electronic device
JP7067697B2 (ja) 肌の検出方法及び電子デバイス
EP3813352B1 (en) Photographing method and electronic device
CN111566693B (zh) 一种皱纹检测方法及电子设备
CN113572956A (zh) 一种对焦的方法及相关设备
CN113572957B (zh) 一种拍摄对焦方法及相关设备
CN113467735A (zh) 图像调整方法、电子设备及存储介质
CN111417982B (zh) 一种色斑检测方法及电子设备
CN111557007B (zh) 一种检测眼睛睁闭状态的方法及电子设备
CN115657992B (zh) 一种屏幕显示的方法、装置、设备及存储介质
WO2023071497A1 (zh) 拍摄参数调节方法、电子设备及存储介质
CN113660424A (zh) 图像拍摄方法及相关设备
CN118155384A (zh) 一种防护提示方法和电子设备

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant