KR20210139309A - 미용 피부 속성을 시각화하기 위한 장치 및 방법 - Google Patents

Abstract

대상의 적어도 하나의 미용 피부 속성을 시각화하는 방법. 방법은 a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지를 획득하는 단계 - 제1 디지털 이미지는 얼굴의 입력 이미지의 적어도 소정 영역으로부터 선택됨 -; b) 획득된 제1 디지털 이미지에 걸친 복수의 타일들을 정의하는 단계; c) 적어도 하나의 미용 피부 속성에 대해 제1 디지털 이미지를 정의된 복수의 타일들 각각에 대해 분석하는 단계; d) 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계; 및 e) 적어도 하나의 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들 중 적어도 일부를 디스플레이하는 단계를 포함한다. 복수의 타일들 중의 디스플레이된 적어도 일부의 타일들은, 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 복수의 타일들 중의 디스플레이되지 않은 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이한다.

Description

미용 피부 속성을 시각화하기 위한 장치 및 방법

본 발명은 미용 피부 속성을 시각화하기 위한 시스템들 및 방법들에 관한 것이다.

소비자들은 화장품 및 피부 케어 치료의 사용을 통해 그들의 신체적 외모를 개선하고자 한다. 결과적으로, 소비자들이 선택해야 할 입수가능한 제품의 선택 폭이 매우 넓다. 종종, 개인 소비자들은 개인 자신의 개인적 피부 유형과 피부 속성들, 및 잠재적으로 상이하거나 변화 중인 피부 속성들을 고려하여 최상의 결과들을 달성하기 위해 어느 제품들을 적용할지 그리고 그것들을 어떻게 적용할지를 결정하는 것에 어려움을 느낀다. 이 문제는 개인의 피부가 시간이 지남에 따라 변화하고/변화하거나 미용 트렌드가 시간이 지남에 따라 변화하므로 더욱 복잡해진다. 소매 화장품 카운터들에 있는 미용 상담사들은 종종 치료를 필요로 하는 고객의 피부 속성들을 식별하는 일을 담당한다. 일단 피부 속성(들)이 식별되면, 상담사는 논의를 위해 그러한 피부 속성(들)의 유형, 양 및 위치를 고객에게 전할 것이다. 최종적으로, 상담사는 소비자에게 식별된 피부 속성들의 외관을 개선하는 것을 목표로 하는 피부 케어 제품들 및 적용 기술들을 추천하고 개선내용을 보여준다. 이러한 접근법의 대부분은 상담사의 주관적 판단 및/또는 시력에 의존한다.

디지털에 정통한 소비자들, 특히 젊은 인구층의 소비자들의 증가하는 인구가 기존의 미용 상담사와의 상담을 찾는 대신에 컴퓨팅 장치를 사용하여 온라인에서 서로 상호 작용하고 피부 및 미용 케어 제품들에 대한 구매 결정들을 내리는 경향을 갖는다. 이들 소비자들 중 일부는 디지털 도구들로 상당한 수준의 객관성이 달성될 수 있다고 믿으며, 따라서, 이러한 소비자 부분에는 디지털 소스로부터의 추천들이 더 신뢰성있게 받아들여진다. 그러한 사용자들이 컴퓨터 모델링/알고리즘들을 사용하여 자신들의 디지털 이미지(예컨대, "셀피")를 분석함으로써 개별 피부 분석을 수행할 수 있도록 많은 시도들이 이루어져 왔다. 컴퓨터 모델에 의해 제공되는 결과들은 이어서 시각적으로 인지할 수 있는 피부 속성들(예컨대, 가시적인 검버섯, 가시적인 선(line) 및 주름(wrinkle))의 위치 및 유형 및 후속 제품 추천/사용 지침을 소비자에게 제공하기 위해 사용될 수 있다.

이러한 시각적으로 인지할 수 있는 피부 속성들을 소비자에게 표시/마킹해주는 하나의 방식은 "히트 맵(heat map)들"을 통해 그의 얼굴 및 피부 속성(들)을 시각화하는 것이다. 그러나, 전형적으로 소비자가 이해해야 할 정보가 많다. 이는 시각적으로 인지할 수 있는 피부 속성의 경우 그다지 힘든 문제가 되지 않을 수 있는데, 그 이유는 소비자가 시각적으로 인지할 수 있는 속성을 기준점 또는 피부 케어 치료의 목표로서 사용할 수 있기 때문이다. 그러나, 피부 속성이 시각적으로 인지할 수 없는 것일 때 문제는 상당히 악화된다. 이는 시각적으로 인지할 수 있는 속성들이 없거나 최소량으로 가질 수 있는 더 젊은 소비자 인구층에서 특히 그러하다. 따라서, 특히 하나 초과의 그러한 시각적으로 인지할 수 없는 속성이 있는 경우, 그리고 특히 더, 전형적으로 인지할 수 있는 피부 속성이 많이 없는 젊은 소비자층의 경우에, 시각적으로 인지할 수 없는 속성과 그의 얼굴 상의 위치를 빠르고 쉽게 식별할 필요가 있다.

일부 시각적으로 인지할 수 없는 피부 속성들이 시각적으로 인지할 수 있는 피부 속성들에 대한 서곡이 된다는 것을 시사하는 연구 결과가 늘어나고 있다. 이를 위해, 소비자가 이러한 시각적으로 인지할 수 없는 피부 속성들을 자신의 일생에서 조기에 식별하고 이러한 속성들에 대한 예방 피부 치료를 수행할 수 있다면, 시간이 지나면서 형성되는 바람직하지 않은 시각적으로 인지할 수 있는 피부 속성들의 발생을 지연시키고/시키거나 완화시키고/시키거나 그의 개시를 지연시킬 가능성이 증가된다.

상술된 피부 속성들에 대한 정보를 제공하기 위해 디지털 세대 소비자들의 요구들을 충족시키기 위한 다양한 피부 평가 디지털 도구들이 개발되었고, 소비자들은 모두 대규모 정보 과부하를 겪었으며, 이로 인해 특히 미용 피부 속성 상태들의 맥락, 예컨대, "내 현재 피부 상태는 무엇이며 개선하려면 무엇을 할 수 있는지?"에 대해 많은 소비자들이 짧은 시간에 정보를 이해하는 과정이 어려워졌다. 그러나, 소비자들은 평가 정보를 휴대폰들과 같은 휴대용 디바이스들 상에서 보는 경향이 있거나, 또는 평가 정보를 이해하기에 제한된 시간을 갖는다. 그 결과, 방대한 양의 정보가 디스플레이되면 소비자들은 빠르게 압도될 수 있고, 이는 "정보 과부하"로 이어진다. 정보 과부하는, 과잉 정보로 인해, 소비자가 더 이상 정보를 이해하거나, 또는 자신의 피부 상태를 개선하기 위해 무엇을 해야 하는지 평가하기 위한 위치에 있지 않게 되는 상황으로 이어질 수 있다. 그러한 상황들에서, 소비자들은 소비자들에게 정보 과부하를 발생시키는 디지털 도구들을 사용하는 것을 중단할 수 있다.

따라서, 하나 이상의 피부 속성들을 식별하기 위한 방법을 소비자에게 제공하고, 소비자가 자신의 미용 피부 속성을 이해하고, 미용 피부 속성의 상태를 개선하는 것을 목표로 하고 그를 위한 효과적인 치료를 획득할 수 있도록 간단한 방식으로 소비자의 얼굴에 대한 이들 속성들의 위치를 디스플레이하는 방법들 및 시스템들에 대한 필요성이 있다.

본 발명은 대상의 적어도 하나의 미용 피부 속성을 시각화하는 방법에 관한 것으로, 방법은

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지를 획득하는 단계 - 제1 디지털 이미지는 얼굴의 입력 이미지의 적어도 소정 영역으로부터 선택됨 -;

b) 획득된 제1 디지털 이미지에 걸친 복수의 타일들을 정의하는 단계;

c) 적어도 하나의 미용 피부 속성에 대해 제1 디지털 이미지를 정의된 복수의 타일들 각각에 대해 분석하는 단계;

d) 타일의 분석된 적어도 하나의 미용 피부 속성들에 기초하여, 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계; 및

e) 적어도 하나의 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들 중 적어도 일부를 디스플레이하는 단계를 포함하며,

복수의 타일들 중의 디스플레이된 적어도 일부의 타일들은, 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 복수의 타일들 중의 디스플레이되지 않은 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이한다.

전술한 일반적인 설명 및 하기의 상세한 설명 둘 모두가 다양한 실시예를 기술하고 청구된 발명 요지의 특성 및 특징을 이해하기 위한 개요 또는 프레임워크를 제공하도록 의도된다는 것이 이해되어야 한다. 첨부 도면은 다양한 실시예의 추가적인 이해를 제공하기 위해 포함되며, 본 명세서에 포함되어 그 일부를 구성한다. 도면은 본 명세서에 기술된 다양한 실시예들을 예시하며, 설명과 함께 청구된 발명의 요지의 원리 및 작동을 설명하는 역할을 한다.
도 1은 본 발명에 따른, 네트워크를 통해 적어도 하나의 미용 피부 속성을 시각화하기 위한 예시적인 시스템을 도시하는 도면.
도 2는 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 대안적인 예시적인 시스템을 도시하는 도면.
도 3은 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 예시적인 시스템의 컴포넌트들을 도시하는 블록도.
도 4a 내지 도 4c는 본 발명에 따른, 미용 피부 속성을 시각화하는 방법을 도시하는 일련의 프로세스 흐름 도면들.
도 5는 본 발명에 따른, 미용 피부 속성을 시각화하는 방법을 도시하는 흐름도.
도 6a 내지 도 6c는 본 발명에 따른 미용 피부 속성을 시각화하는 방법에서 제1 디지털 이미지를 획득하는 단계의 상세 사항들을 도시하는 일련의 프로세스 흐름 도면들.
도 7은 제1 디지털 이미지를 획득하는 단계들을 도시하는 흐름도.
도 8은 본 발명에 따른 미용 피부 속성을 시각화하는 방법에서 복수의 타일들을 정의하는 단계를 도시하는 사진.
도 9는 복수의 타일들을 정의하는 단계들을 도시하는 흐름도.
도 10은 본 발명에 따른, 이미지 데이터를 정의된 복수의 타일들 각각에 대해 분석하는 프로세스(500)를 도시하는 흐름도.
도 11a 내지 도 11c는 본 발명에 따른, 복수의 타일들을 디스플레이하는 프로세스를 도시하는 프로세스 흐름 도면들.
도 12는 본 발명에 따른, 복수의 타일들을 디스플레이하는 프로세스를 도시하는 흐름도.
도 13a 내지 도 13d는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하는 방법을 도시하는 프로세스 흐름 도면들.
도 14는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하는 방법을 도시하는 흐름도.
도 15는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하는 대안적인 방법을 도시하는 흐름도.
도 16a 내지 도 16e는 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 예시적인 사용자 인터페이스를 각각 도시하는 스크린 샷들.
도 17a 및 도 17b는 본 발명에 따른 미용 피부 속성을 시각화하기 위한 방법을 반복하기 위한 추가의 프롬프트들을 제공하기 위한 예시적인 사용자 인터페이스를 각각 도시하는 스크린 샷들.
도 18a 및 도 18b는 본 발명에 따른, 미용 피부 속성을 치료하기 위한 제품 추천의 상세 사항들을 디스플레이하기 위한 예시적인 사용자 인터페이스를 각각 도시하는 스크린 샷들.
도 19는 본 발명에 따른, 미용 피부 속성을 디스플레이하기 위한 도 16d의 예시적인 사용자 인터페이스의 스크린 샷의 변형.
도 20은 본 발명에 따른, 미용 피부 속성을 치료하기 위한 제품 추천의 상세 사항들을 디스플레이하기 위한 예시적인 사용자 인터페이스를 도시하는 스크린 샷.
도 21은 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 예시적인 사용자 인터페이스.
도 22는 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 예시적인 사용자 인터페이스.
도 23은 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하기 위한 이미지 설명의 일례로서 히트 맵을 포함하는 예시적인 사용자 인터페이스를 도시하는 스크린 샷.
도 24는 도 23의 사용자 인터페이스에서 적어도 하나의 미용 피부 속성을 시각화하기 위한 이미지 설명의 대안적인 변형을 도시하는 스크린 샷.
도 25는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하기 위한 예시적인 사용자 인터페이스를 도시하는 스크린 샷.

피부가 스트레스(UV, 자연적 노화, 정신적 스트레스, 환경적 인자들에 의해 야기됨)를 받을 때, 피부는 DNA 레벨, 세포 레벨 및 조직 레벨을 포함하는 다양한 레벨들로 손상되는 것으로 알려져 있다. 피부에 대한 그러한 손상은 피부 결함들을 초래할 수 있다. 이들 피부 결함들의 존재는 하기 실시예들에 기술된 바와 같이 피부의 광학에 상당히 영향을 준다:

각질층이 건조한 경우(겨울/공기 상태), 광이 표면으로부터 더 많이 반사(표면 반사)되어, 피부 상의 선(line)들을 야기하는 피부 미세 텍스처를 향상시킬 것이다.

진피가 손상되면(UV), 진피에서 산란되는 광(진피-산란으로도 알려짐)이 줄어들고 광은 피부를 침투할 것이다(표면 아래 반사 감소). 진피-산란이 적을 경우, 피부는 결과적으로 더 어둡게 보인다.

피부가 만성 UV에 노출되는 경우, 피부는 더 많은 멜라닌을 생성한다. 멜라닌은 광을 흡수하여 표면 아래 반사를 감소시켜, 피부는 더 어둡게 보인다.

위의 피부 결함들은 소비자들의 눈에는 열악한 피부 품질의 시각적으로 인지할 수 없는 신호들로서 나타난다. 소비자들은 이들 결함들을 잠재의식 레벨에서 불순물로서 고려할 수 있지만, 의식적인 지식의 결여로 인해 결함들을 개선하기 위한 조치를 취할 수 없다. 피부가 만성 스트레스를 받고/받거나 치료되지 않으면, 시각적으로 인지할 수 없는 이러한 불순물은 결국 가시적이고 인지할 수 있는 표현형(색소 반점, 주름, 처짐)으로 이어질 수 있다.

본 발명은 대상의 적어도 하나의 미용 피부 속성을 시각화하기 위한 방법, 장치 및 시스템, 및 그래픽 사용자 인터페이스에 관한 것이다. 미용 피부 속성은 시각적으로 인지할 수 있는 미용 피부 속성들 또는 시각적으로 인지할 수 없는 미용 피부 속성들을 포함할 수 있다.

방법은

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지를 획득하는 단계 - 제1 디지털 이미지는 얼굴의 입력 이미지의 적어도 소정 영역으로부터 선택됨 -;

b) 획득된 제1 디지털 이미지에 걸친 복수의 타일들을 정의하는 단계;

c) 적어도 하나의 미용 피부 속성에 대해 제1 디지털 이미지를 정의된 복수의 타일들 각각에 대해 분석하는 단계;

d) 타일의 분석된 적어도 하나의 미용 피부 속성들에 기초하여, 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계; 및

e) 적어도 하나의 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들 중 적어도 일부를 디스플레이하는 단계를 포함하며,

복수의 타일들 중의 디스플레이된 적어도 일부의 타일들은, 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 복수의 타일들 중의 디스플레이되지 않은 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이한다.

놀랍게도, 복수의 타일들 중의 디스플레이되지 않은 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이하는 일부의 타일들만을 디스플레이함으로써, 소비자들이 미용 피부 속성의 상태를 쉽게 더 잘 이해할 수 있으며, 따라서 미용 피부 속성의 상태를 개선하기 위한 치료를 찾기 위해 현명한 결정을 내릴 수 있다는 것이 밝혀졌다.

특히, 디스플레이되지 않은 타일들을 갖는 것의 기술적 효과는 특별히 모바일 폰과 같은 작은 폼 팩터인 전자 휴대용 디바이스 상에 디스플레이하는 단일 디스플레이 상의 "정보 클러터(clutter)" 및 "정보 과부하"를 최소화하는 것이다. 추가의 기술적 효과는 디스플레이를 짧은 시간 내에 생성하는 데 필요한 컴퓨팅 자원이 감소될 수 있고, 이는 (예를 들어, 모바일 폰 상의 네이티브 애플리케이션으로서, 또는 모바일 폰을 통해 액세스되는 웹 애플리케이션을 통해) 본 발명을 사용할 때 더 나은 사용자 경험을 가져온다는 것이다.

본 발명을 상세히 기술하기 전에, 다음의 용어들이 정의되며, 정의되지 않은 용어들은 해당 기술 분야의 통상의 지식을 가진 자가 이해하는 바와 같이 통상적인 의미를 가져야 한다.

본 명세서에 사용되는 "엔트로피"는 이산 랜덤 분포(p(x))의 섀넌 엔트로피(E)(Shannon entropy)를 지칭하고, 다음의 방정식에 의해 정의된다:

---------------(1)

p(x)는 그레이 레벨들의 분포이다.

E(p)는 디지털 이미지에서의 정보의 양, 또는 디지털 이미지를 색 채널 이미지로 변환한 후 색 시스템에서의 색 채널 이미지에서의 정보의 양을 나타낸다.

본 명세서에 사용되는 "엔트로피 통계치"는 엔트로피를 디지털 이미지들 또는 색 채널 이미지들을 분석하기 위한 서술적 통계로서 사용하는 통계적 방법을 지칭한다. 디지털 이미지가 RGB 이미지인 비제한적인 예에서, 각각의 R(적색), G(녹색) 및 B(청색) 채널에 대한 엔트로피들이 개별적으로 계산될 수 있다. 이미지의 엔트로피 값은 각각의 픽셀 위치 (i, j)에서 (i,j)에 중심을 둔 2차원 영역 내의 픽셀-값들의 엔트로피 값을 계산함으로써 계산될 수 있다. 2차원 영역은 색 채널 이미지의 일부일 수 있다. 파이썬(Python)과 같은 프로그래밍 소프트웨어 패키지들이 엔트로피 값을 계산하는 데 사용될 수 있다.

본 명세서에 사용되는 "미용 피부 속성"은 인체의 영역에 시각적/미적 효과를 제공하거나 피부 외관 및/또는 느낌에 영향을 주는 모든 피부 속성들을 포함한다. 미용 피부 속성의 일부 비제한적인 예들은 피부 토포그래피, 피부 탄력, 피부 톤, 피부 색소침착, 피부 텍스처, 피부 모공, 미용 피부 염증, 피부 수화, 피부 피지 레벨, 여드름, 점(mole), 피부 윤기, 피부 광택, 피부 칙칙함, 고르지 않은 톤, 또는 피부 장벽을 포함할 수 있다. 상기 미용 피부 속성들은 표준 용어들이고, 미용 피부 속성의 대응하는 정의는 "Handbook of cosmetic science and technology, 3^rd edition, editors Andre O. Barel, Marc Paye, Howard I. Maiback, CRC Press, 2009", "Cosmetic Science and Technology-Theoretical Principles and Applications, editors Kazutami Sakamoto Robert Y. Lochhead, Howard I. Maibach, Yuji Yamashita, Elsavier, 2017", "Cosmetic Dermatology: Products and Procedures, Editor(s): Zoe Diana Draelos, Blackwell Publishing Ltd, 2010"이라는 출판된 참고 문헌들에서 찾을 수 있음을 당업자는 인식할 것이다. 미용 피부 속성들은 의학적 질환들 또는 근본적인 의학적 질환들에 관련된 피부 속성들을 포함하지 않는다.

본 명세서에 사용되는 "인지할 수 없는 미용 피부 속성"은 인지될 수 없거나 인지자, 즉 사람, 사용자 또는 인간 대상에 의해 감지할 수 없는 미용 피부 속성을 지칭한다. 인지한다(Perceive)는 단어 "인지(Perception)"로부터 파생된 것으로, 이는 제시된 정보 또는 환경을 표현하고 이해하기 위해 감각 정보를 조직화하고 식별하며 해석하는 것을 지칭한다. 모든 인지는 신경계를 통과하는 신호들을 포함하며, 이는 이어서 감각 시스템의 물리적 또는 화학적 자극으로부터 기인한다. 예를 들어, 시력은 눈의 망막에 충돌하는 광과 관련되고, 냄새는 냄새 분자에 의해 매개되고, 청각은 압력파와 관련된다. 인지는 이들 신호들의 수동적인 수신만이 아니며, 수신자의 학습, 기억, 기대, 및 주의에 의해서도 또한 형상화된다. 인지는 2가지 프로세스들, 즉 감각적 입력을 프로세싱 하는 것 - 이는 이들 저레벨 정보를 상위 레벨 정보로 변환함(예컨대, 대상 인식을 위한 형상들을 추출함) -과 관련된 프로세스 (1), 및 사람의 인지에 영향을 미치는, 사람의 개념들 및 기대들(또는 지식), 복원적(restorative) 및 선택적 메커니즘들(예컨대, 주의)과 관련된 프로세스 (2)로 분류될 수 있다. 예를 들어, 인지자는 프로세스 (1)에서 객체를 볼 수 있지만, 프로세스 (2)에서 객체가 나타내는/의미하는 것을 인지 및 인식하는 지식이 없으므로 객체를 시각적으로 인식할 수 없는 것으로 간주할 수 있다.

본 명세서에 사용되는 "시각적으로 인지할 수 없는 미용 피부 속성"은 보조되지 않은 육안으로 검출가능하지 않은 모든 미용 피부 속성들을 포함하며, 또는 소비자에 의해 시각적으로 검출가능한 미용 피부 속성을 포함하지만 소비자가 미용 피부 속성을 이해하지 못하여서 인지할 수 없는 것으로 간주된다. 보조되지 않은 육안으로 시각적으로 검출가능하지 않은 시각적으로 인지할 수 없는 미용 피부 속성의 일부 비제한적인 예들은 미용 피부 염증, 피부 피지 레벨, 또는 임의의 근본적인 미용 피부 속성을 포함한다.

본 명세서에 사용되는 "보조되지 않은"은 진단 장비로부터의 도움을 받지 않음을 의미한다.

본 명세서에 사용되는 "타일"은 디지털 이미지의 일부를 형성하는, 예를 들어, 픽셀과 같은 유닛을 포함하며, 따라서 "타일들"은 디지털 이미지의 전체를 형성한다.

본 명세서에 사용되는 "디지털 이미지 데이터"는 디지털 카메라, 광 스캐너, 디지털 이미지들을 저장할 수 있는 컴퓨터 판독가능 저장 매체, 및 사진 촬영 능력들을 포함하는 임의의 전자 디바이스를 포함하지만 이로 한정되지 않는 이미지 획득 디바이스로부터 획득된 이미지 데이터를 포함한다. 디지털 이미지 데이터는 또한 RGB 이미지로부터 색 시스템에서의 색 채널 이미지로 변환된 색 채널 이미지들을 포함할 수 있다.

본 명세서에 사용되는 "단일의 표시의 정도"는 그래픽 심볼, 수치 값, 색 코드, 조명 기술들 및 이들의 조합들을 포함하지만 이로 제한되지 않는 모든 전자 시각적 표현들을 포함한다.

본 명세서에 사용되는 "피부 속성 인덱스(Skin Attribute Index)"는 통계적 방법들 및 데이터 또는 룩업 테이블(정보의 어레이)로부터 도출된 수학식 또는 모델에 기초하여 계산될 수 있는 점수를 지칭한다. 피부 속성 인덱스는 사람의 피부의 적어도 하나의 부분의 미용 피부 속성의 상태를, 정의된 모집단의 사람들에 비하여 나타낸 확률 값으로서 생성될 수 있고, 바람직하게는, 피부 속성 인덱스는 F(엔트로피 값)에 의해 정의되는 엔트로피 값의 함수로서 생성되고, 상기 함수는 훈련 데이터세트에 대해 확립된 모델에 의해 결정되며, 훈련 데이터세트는: (i) 정의된 모집단의 사람들의 복수의 색 채널 이미지들 - 복수의 색 채널 이미지들의 각각은 정의된 모집단의 사람들 중의 사람의 얼굴 피부를 포함하고, 얼굴 피부는 미용 피부 속성을 포함함 -; (ii) 미용 피부 속성에 기초한 연관 부류(class) 정의를 포함한다.

본 명세서에 사용된 "L*a*b*"는 국제조명위원회(International Commission on Illumination, "CIE")에 의해 지정된 일반적으로 인식되는 색 공간을 지칭한다. 3개의 좌표들은 다음을 나타낸다 (i) 색의 밝기(즉, L*=0은 흑색을 산출하고, L*=100은 확산 백색을 나타냄), (ii) 마젠타와 녹색 사이의 색의 위치(즉, 음의 a* 값들은 녹색을 나타내는 한편 양의 a* 값들은 마젠타를 나타냄), 및 (iii) 황색과 청색 사이의 색의 위치(즉, 음의 b* 값들은 청색을 나타내고 양의 b* 값들은 황색을 나타냄).

본 명세서에 사용되는 "발색단 맵핑(chromophore mapping)"은 멜라닌 및 헤모글로빈 맵핑, 및 전체 피부 톤의 지표로서 사용될 수 있는 멜라닌 또는 헤모글로빈 농도를 결정하기 위한 일반적으로 인식되는 발색단 공간을 지칭한다. 평균 멜라닌 또는 헤모글로빈이 발색단 맵 데이터로부터 계산될 수 있다. 부가적으로, 피부 톤 균일성(evenness)은 발색단 맵 데이터로부터 또한 계산될 수 있는 멜라닌 또는 헤모글로빈 균일성(예컨대, 표준 편차)에 의해 결정될 수 있다.

본 명세서에 사용되는 "피부 순도"는 사람의 피부의 적어도 일부분에서의 피부 결함들이 나타나지 않는 것을 지칭한다. 피부 결함은 피부 토포그래피 형태의 표면 반사 및/또는 멜라닌, 헤모글로빈 및/또는 각질세포 및 섬유아세포 지향 세포 대사 산물과 같은 피부 발색단의 표면 아래 반사로 구성된 불규칙하거나 불균일한 스펙트럼 특성들에 영향을 미치는 미용 피부 속성들을 포함하며, 피부 윤기, 피부 톤 등을 포함하지만 이에 제한되지는 않는다.

본 명세서에서 사용되는 "피부 연령"은 물리적 외관들, 바람직하게는 사람의 얼굴, 바람직하게는 사람의 얼굴의 적어도 일부분, 더 바람직하게는 사람의 얼굴의 적어도 일부분의 적어도 하나의 관심 영역(region of interest, ROI), 훨씬 더 바람직하게는 눈 주위의 피부 영역("눈 영역"), 볼 주위의 피부 영역("볼 영역"), 입 주위의 피부 영역("입 영역"), 및 이들의 조합들로 이루어진 군으로부터 선택된 적어도 하나의 ROI에 기초하여, 정상 연령의 피부 외관과 비교하여 시각적으로 추정 또는 인지되는 사람의 피부 연령을 의미한다.

본 명세서에 사용되는 "피부 톤"은 일반적으로 기저 피부 색의 전체적인 외관 또는 색 균일성을 지칭한다. 피부 톤은 전형적으로 피부의 더 큰 영역에 걸쳐 특징지워진다. 영역은 100 ㎟ 초과일 수 있지만, 얼굴 피부 전체 또는 다른 신체 피부 표면들(예컨대, 팔, 다리, 등, 손, 목)과 같은 더 큰 영역들이 구상된다.

본 명세서에 사용되는 "피부 주름(skin wrinkle)"은 일반적으로 피부에서의 접힘(fold), 융기(ridge) 또는 주름선(crease)을 지칭하며, 미세 선(line), 초미세 선, 미세 주름, 초미세 주름, 주름, 선들을 포함하지만 이로 한정되지 않는다. 피부 주름은, 예를 들어, 밀도 및/또는 길이의 관점에서 측정될 수 있다.

본 명세서에 사용되는 "피부 윤기"는 일반적으로 피부가 반사하는 광의 양을 지칭하고, 피부 광택으로 지칭될 수 있다.

본 명세서에 사용되는 "피부 텍스처"는 일반적으로 피부 표면의 토폴로지(topology) 또는 거칠기를 지칭한다.

본 명세서에 사용되는 "피부 장력"은 일반적으로 피부의 견고성 또는 탄성을 지칭한다.

본 명세서에 사용되는 "피부 피지 레벨"은 일반적으로 피부의 피지선에서 분비되는 유성 또는 왁스질인 피지의 양을 지칭한다.

본 명세서에 사용되는 "피부 반점"은 일반적으로 피부의 변색 또는 고르지 않은 색소침착(예컨대, 과다 색소침착, 얼룩덜룩함)을 지칭한다. 피부 반점은, 예컨대, 변색의 밀도, 크기, 및/또는 정도의 관점에서 평가될 수 있다.

본 명세서에서 사용되는 "피부 케어 제품"은 피부 케어 활성제를 포함하며 피부 상태를 조절하고/하거나 개선하는 제품을 의미한다.

본 명세서에 사용되는 "디지털 이미지"는 표준 RGB 등을 포함하지만 이로 한정되지 않는 이미징 시스템에서의 픽셀들에 의해, 그리고 상이한 조명 조건들 및/또는 모드들 하에서 획득된 이미지들 하에서 형성된 디지털 이미지를 지칭한다. 디지털 이미지의 비제한적인 예들은 색 이미지들(RGB), 단색 이미지들, 비디오, 다중-분광 이미지, 초분광 이미지 등을 포함한다. 비제한적인 광 조건은 백색 광, 청색 광, UV 광, IR 광, 예를 들어, 100 내지 1000 nm, 300 내지 700 nm, 400 내지 700 nm, 또는 위에 기술된 상한 및 하한의 상이한 조합들, 또는 위에 열거된 범위들 내의 임의의 정수의 조합들의 광들을 방출하는 광원과 같은 특정 파장의 광을 포함한다. 디지털 이미지는 디지털 카메라, 광 스캐너, 디지털 이미지를 저장할 수 있는 컴퓨터 판독가능 저장 매체, 및 사진 촬영 능력들을 포함하는 임의의 전자 디바이스를 포함하지만 이로 제한되지 않는 이미지 획득 디바이스로부터 획득될 수 있다.

다음의 설명에서, 기술된 시스템은 미용 피부 속성을 시각화하기 위한 시스템이다. 따라서, 기술된 장치는 미용 피부 속성을 시각화하기 위한 장치이며, 기술된 그래픽 사용자 인터페이스는 미용 피부 속성을 시각화하기 위한 그래픽 사용자 인터페이스이다. 그래픽 사용자 인터페이스는 적어도 하나의 미용 피부 속성을 치료하기 위한 제품 추천을 제공하도록 추가로 구성될 수 있다.

예시적인 실시예에서, 시스템은 분석하고 화장품 및 피부 케어 제품들을 추천하기 위해 소매 화장품 카운터에 위치된 독립형 이미징 시스템(도 2에 도시됨)이다. 그러나, 시스템 및 방법은, 예를 들어, 도 1에 도시된 바와 같이, 이미지 획득부 및 디스플레이를 포함하는 전자 휴대용 디바이스를 통해, 어디에서나 사용하도록 구성될 수 있는 것으로 고려되며, 전자 휴대용 디바이스는 네트워크를 통해, 디스플레이에 디스플레이하기 위한, 미용 피부 속성을 시각화하기 위한 그래픽 사용자 인터페이스를 생성하기 위한 장치에 연결된다.

시스템

도 1은 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 시스템(10)을 도시하는 개략도이다. 시스템(10)은 (예컨대, 이동 전화 네트워크, 공중 교환 전화 네트워크, 위성 네트워크, 및/또는 인터넷 등과 같은) 광역 네트워크, (예컨대, 와이파이(wireless-fidelity), 위맥스(Wi-Max), 지그비(ZigBee)™, 블루투스(Bluetooth)™ 등과 같은) 근거리 네트워크, 및/또는 다른 형태의 네트워킹 능력들로서 구현될 수 있는 네트워크(100)를 포함할 수 있다. 네트워크(100)에는 휴대용 전자 디바이스(12), 및 디스플레이 상의 디스플레이를 위해 미용 피부 속성을 시각화하기 위한 그래픽 사용자 인터페이스를 생성하기 위한 장치(14)가 커플링되어 있다. 장치(104)는 원격에 위치되고 네트워크(100)를 통해 휴대용 전자 디바이스에 연결된다.

휴대용 전자 디바이스(12)는 모바일 전화, 태블릿, 랩톱, 개인 휴대 정보 단말기, 및/또는 디지털 사진과 같은 디지털 이미지를 캡처, 저장, 및/또는 전송하도록 구성된 다른 컴퓨팅 디바이스일 수 있다. 따라서, 휴대용 전자 디바이스(12)는 사용자 입력을 수신하기 위한 입력 디바이스(12a), 이미지들을 획득하기 위한 디지털 카메라와 같은 이미지 획득 디바이스(18) 및 이미지들을 디스플레이하기 위한 출력 디바이스(12b)를 포함할 수 있다. 휴대용 전자 디바이스(12)는 또한 네트워크(100)를 통해 다른 컴퓨팅 디바이스들과 통신하도록 구성될 수 있다. 휴대용 전자 디바이스(12)는, 획득된 적어도 하나의 색 채널 이미지를 엔트로피 통계치를 사용하여 분석하여 엔트로피 값을 획득하고 엔트로피 값에 기초하여 사람의 피부의 적어도 하나의 부분의 미용 피부 속성을 결정하기 위하여 상기 이미지 획득 디바이스(18)에 커플링된 이미지 프로세싱 디바이스(도시되지 않음)를 더 포함할 수 있다. 이미지 프로세싱 디바이스는 바람직하게는 컴퓨터 실행가능 명령어들을 갖는 프로세서를 포함한다. 휴대용 전자 디바이스(12)는 결정된 미용 피부 속성을 기술하는 내용 데이터를 디스플레이하기 위한 디스플레이를 생성하기 위한 디스플레이 생성부(도시되지 않음, 예컨대, 전자 LED/LCD 디스플레이)를 더 포함할 수 있다. 장치(14)는 이미지 획득 로직(144a), 이미지 분석 로직(144a) 및 그래픽 사용자 인터페이스(이하, "GUI") 로직(144c)을 저장하는 비-일시적 컴퓨터 판독가능 저장 매체(14a)(이하, "저장 매체")를 포함할 수 있다. 저장 매체(14a)는 랜덤 액세스 메모리(예컨대, SRAM, DRAM 등), 판독 전용 메모리(ROM), 레지스터들, 및/또는 다른 형태의 컴퓨팅 저장 하드웨어를 포함할 수 있다. 이미지 획득 로직(144a), 이미지 분석 로직(144b) 및 GUI 로직(144c)은 컴퓨터 실행가능 명령어들을 정의한다. 프로세서(14b)는 저장 매체(14a)에 커플링되고, 프로세서(14b)는 컴퓨터 실행가능 명령어들에 기초하여, 도 4a 내지 도 4c의 프로세스 흐름 도면들 및 도 5의 흐름도와 관련하여 이후에 본 명세서에 기술된 바와 같은 본 발명에 따른 대상의 미용 피부 속성을 시각화하기 위한 방법(200)을 구현하도록 구성된다.

방법

도 4a 및 도 5를 참조하면, 프로세서(14b)가 개시될 때, 프로세서(14b)는 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지(51)가 예컨대 단계(202)에서 이미지 획득 로직(144a)을 통해 획득되게 한다. 프로세서(14b)는 획득된 이미지 데이터(20)에 걸친 복수의 타일들(54)을 정의한다(단계 204). 복수의 타일들(54)은 도 4b에 도시된 바와 같이 타일 맵(55)을 정의하도록 인접할 수 있다. 단계(206)에서, 프로세서는 이미지 데이터 각각에 대한 이미지 데이터를 적어도 하나의 미용 피부 속성에 대한 정의된 복수의 타일들(54) 각각에 대해 분석한다. 단계(208)에서, 분석된 적어도 하나의 미용 피부 속성에 기초하여, 정의된 복수의 타일들의 각각의 타일(54)에 단일의 표시의 정도(40)가 고유하게 할당된다. 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들 중 적어도 일부는 도 4c에 도시된 바와 같이 적어도 하나의 미용 피부 속성을 시각화하기 위해 단계(210)에서 디스플레이된다. 사용자(소비자)에 의해 제공된 입력 디지털 이미지의 이미지 데이터를 분석하고, 정의된 복수의 타일들 각각에 대한 분석된 이미지 데이터를 단일 스크린 샷에서 조직화하고 디스플레이함으로써, 본 발명에 따른 방법(200)은, 미용 피부 속성들을 시각화하는 데 필요한 상이한 조명 시스템들 하에서 별개의 윈도우들 내에 정보를 디스플레이하는 사용자 인터페이스들을 통해 내비게이팅하는 부담스러운 작업을 피하면서, 사용자/소비자들이 미용 피부 속성들을 용이하게 식별할 수 있게 한다. 예를 들어, 육안으로 인지가능하지 않은 UV 스폿들을 시각화하기 위해 UV 광과 같은 특정 조건들이 요구될 수 있다.

예시적인 실시예에서, 각각의 타일에 대해 고유하게 할당된 단일의 표시의 정도를 갖는 제2 디지털 이미지가 제1 디지털 이미지(51) 상에 개재될 수 있다. 타일(54)의 크기는 수평 면(타일 폭, W) 상의 픽셀들의 개수 및 수직 면(타일 높이, H) 상의 픽셀들의 개수에 의해 정의될 수 있다는 것이 이해될 것이다. 본 발명에 따른 예시적인 방법에서, 각각의 타일은 100 x 100 픽셀 이하, 1 x 1 픽셀 내지 100 x 100 픽셀, 2 x 2 픽셀 내지 100 x 100 픽셀, 5 x 5 픽셀 내지 90 x 90 픽셀, 40 x 40 픽셀 내지 70 x 70 픽셀 또는 위에 기술된 상한 및 하한의 상이한 조합들, 또는 위에 열거된 범위들 내의 임의의 정수의 조합들의 타일 크기를 포함할 수 있다. 위의 범위들 내의 타일 크기를 갖는 것의 기술적 효과는 그것이 이미지 데이터의 분석을 위한 더 짧은 프로세싱 시간을 가능하게 하고, 따라서 디스플레이가 더 짧은 시간량 내에 적어도 하나의 미용 피부 속성을 시각화할 수 있게 한다는 것이다.

도 1을 참조하면, 네트워크(100)는, 휴대용 전자 디바이스(12)로부터 디지털 이미지들을 획득하고 디지털 이미지들을 본 발명에 따른 방법(200)에 사용되도록 장치(14)로 전송하는데 사용될 수 있다. 입력 디바이스(12a)는 프로세서(14b)를 개시하기 위한 사용자 입력을 수신하기 위해 휴대용 전자 디바이스(12)에 커플링되거나 그와 일체형일 수 있다. 휴대용 전자 디바이스(12)는 복수의 타일들을 디스플레이하기 위한 출력 디바이스(12b)를 포함할 수 있으며, 각각의 타일들은 고유하게 할당된 단일의 표시의 정도를 갖는다. 입력 디바이스(12a)는 마우스, 터치 스크린 디스플레이 등을 포함할 수 있지만, 이에 제한되지 않는다. 출력 디바이스(12b)는 터치 스크린 디스플레이, 비-터치 스크린 디스플레이, 프린터, 예를 들어, 도 2에 관하여 이하에서 기술되는 바와 같은 거울과 같은 디스플레이 표면 상에 얼굴 이미지 맵(30)을 투사하기 위한 프로젝터를 포함할 수 있지만 이에 제한되지 않는다.

도 2는 적어도 하나의 미용 피부 속성을 시각화하고 시각화된 적어도 하나의 미용 피부 속성에 기초하여 미용 및 피부 케어 제품들을 추천할 목적으로 소매 화장품 카운터에 위치된 독립형 이미징 시스템으로서 구성된 시스템(10)의 사시도이다. 도 3은 도 2의 시스템(10)의 블록도이다. 도 2 및 도 3을 참조하면, 시스템(10)은 적어도 하나의 미용 피부 속성을 시각화하기 위해 대상의 디지털 이미지를 획득하기 위한 이미지 획득 디바이스(18)에 연결된 도 1의 장치(14)를 위한 하우징(11)을 포함한다. 도 2를 참조하면, 시스템(10)은 미러(16)를 포함할 수 있고, 이미지 획득 디바이스(18)는 이미지 획득 디바이스(18)가 시야로부터 가려질 수 있도록 하우징(11) 내의 미러(16) 뒤에 장착될 수 있다. 이미지 획득 디바이스(18)는 디지털 카메라, 디지타이징 회로에 연결된 아날로그 카메라, 스캐너, 비디오 카메라 등일 수 있다. 시스템(10)은 대상의 디지털 이미지를 생성하는 데 도움을 주기 위한 LED 조명 시스템을 형성하기 위해 하우징(11) 주위에 배열되는 LED 조명 장치들과 같은 조명 장치들(30)을 포함할 수 있다. 시스템(10)은 사용자 입력을 수신하기 위한 입력 디바이스(112a)를 갖는다. 시스템(10)은 얼굴 맵(30)을 수신하고 미러(16) 상의 디스플레이를 위해 투사하도록 구성된 프로젝터와 같은 출력 디바이스(112b)를 더 포함할 수 있다. 프로젝터는 하우징(11)과는 별개인 주변 구성요소일 수 있기 때문에 도 2에 도시되어 있지 않지만, 시스템(10)을 구성하도록 장치(14)에 커플링되어 있다. 시스템(10)은 전체 소비자 경험을 보완하고/하거나 향상시키기 위해 오디오 안내 출력을 생성하기 위해 증폭기에 선택적으로 커플링된 하나 이상의 스피커들과 같은 제2 출력 디바이스(112c)를 더 포함할 수 있다.

시스템(10) 및 방법(200)이 본 발명에 따라 적어도 하나의 미용 피부 속성을 시각화하도록 작용하는 방식을 설명하기 위해, 단계(202)에서, 대상의 얼굴의 디지털 이미지가 어떻게 획득되는지, 단계(204)에서, 타일들이 어떻게 정의되는지, 단계(206)에서, 이미지 데이터가 어떻게 분석되는지, 단계(208)에서, 단일의 표시의 정도가 각각의 타일에 어떻게 고유하게 할당되는지, 단계(210)에서, 타일들이 어떻게 디스플레이되는지를 이해하는 것이 도움이 된다. 따라서, 본 발명에 따른 방법(200)의 단계들(202, 204, 206, 208, 210)은 각각의 단계를 수행하기 위한 개별 프로세스들로서 이하에서 기술된다. 각각의 프로세스는 또한 서브-루틴, 즉 본 발명에 따른 방법(200)에 따라 대응하는 단계를 수행하는 프로그램 명령어들의 시퀀스로서 기술될 수 있다.

디지털 이미지 획득

본 발명에 따른 방법(200)에 따라 디지털 이미지를 획득하는 단계(202)는 제1 디지털 이미지가 어떻게 획득되는지를 예시하는 일련의 프로세스 흐름 도면들인 도 6a, 도 6b 및 도 6c를 참조하여 기술되며, 도 7은 단계(202)에 대응하는, 디지털 이미지를 획득하는 프로세스(300)의 흐름도이다.

얼굴(1)의 입력 이미지(50a)가 도 6a에 도시되어 있다. 입력 이미지(50a)는, 예를 들어, 도 7에 도시된 바와 같이 프로세스(300)의 단계(302)에서 카메라(18)를 사용하여 사용자에 의해 캡처될 수 있다. 도 6b는 얼굴의 적어도 일부분을 포함하는 편집된 이미지 데이터(50b)를 획득하기 위해 입력 이미지(50a)를 크로핑(cropping)하는 단계(304)를 도시한다. 입력 이미지(50a)는 눈, 코, 콧구멍, 입꼬리 등과 같은 얼굴 특징들을 포함하지만 이에 제한되지 않는 얼굴의 앵커(anchor) 특징(1a)을 식별함으로써 크로핑될 수 있다. 도 6b에 도시된 바와 같이 앵커 특징(1a)으로서 눈이 도시되어 있지만, 이는 단지 예일 뿐이며, 임의의 두드러진 또는 검출가능한 얼굴 특징(들)이 앵커 특징일 수 있다는 것이 이해될 것이다. 편집된 이미지 데이터(50b)는 단계(308)에서 획득된 제1 디지털 이미지(51)일 수 있다. 대안적으로, 도 6c에 도시된 바와 같이, 편집된 이미지 데이터(50b)는 입력 이미지(50a)의 하나 이상의 원하지 않는 부분을 제거하기 위해 크로핑함으로써 추가로 프로세싱되어, 단계(308)에서, 경계선(52)에 의해 정의되는 얼굴(1)의 적어도 일부분을 포함하는 제1 디지털 이미지(51)를 획득할 수 있다. 획득된 제1 디지털 이미지(51)는 경계선(52)에 의해 정의되는 얼굴(1)의 적어도 일부분의 적어도 하나의 관심 영역(ROI) 2를 포함할 수 있다. ROI 2는 얼굴(1)의 전체 부분, 바람직하게는 얼굴의 적어도 일부분, 더 바람직하게는 얼굴(1)의 적어도 일부분을 정의하는 하나 이상의 피부 영역들일 수 있다. 피부 영역이 어떻게 정의되는지에 대한 상세 사항들이 도 10a 내지 도 10c와 도 11의 흐름도를 참조하여 이하에서 기술된다.

선택적으로, 프로세스(300)는 단계(306)를 포함할 수 있으며, ROI 2는 눈 주위의 피부 영역("눈 영역(2a)"), 볼 주위의 피부 영역("볼 영역(2b)"), 입 주위의 피부 영역("입 영역(2c)"), 및 이들의 조합들로 이루어진 군으로부터 선택될 수 있으며, 바람직하게는 ROI 2는 대상의 얼굴(1)의 적어도 일부분의 일부이고, 더 바람직하게는 획득된 제1 디지털 이미지는 얼굴(1)의 좌측 또는 우측을 정의한다. ROI 2는 획득된 제1 디지털 이미지의 5%, 10% 내지 100%, 25% 내지 90%의 영역을 포함할 수 있다.

타일 정의

도 8은 제1 디지털 이미지 데이터(51) 상의 복수의 타일들(54)을 도시하는 사진이다. 도 9는 제1 디지털 이미지 데이터(51) 상의 복수의 타일들(54)을 정의하는 프로세스(400)를 도시하는 흐름도이다. 도 8을 참조하면, 제1 디지털 이미지 데이터(51)는 도 6c를 참조하여 위에 기술된 바와 같이 경계선(52)에 의해 정의되는 얼굴(1)의 적어도 일부분을 포함한다. 프로세스(400)는 획득된 제1 디지털 이미지를 둘러싸는 경계선(52)을 감싸는 외주연부(53)를 정의하는 단계를 포함한다(단계 402). 획득된 제1 디지털 이미지(51)는 픽셀의 총 개수에 의해 형성되고, 예를 들어, 획득된 제1 디지털 이미지(51)는 입력 이미지(50a)의 크로핑 후의 이미지 크기에 따라 단계(304) 또는 단계(306)에서 결정되는 픽셀들의 개수를 가질 수 있다. 따라서, 획득된 제1 디지털 이미지(51)에 기초한 전체 이미지 크기가 단계(404)에서 정의될 수 있다. 예를 들어, 타일 크기가 40 x 40 픽셀 내지 70 x 70 픽셀로 설정되는 경우, 따라서 단계(406)에서, 획득된 제1 디지털 이미지(51)에 걸친 복수의 타일(54)들을 형성하는 타일들(54)의 개수는 전체 이미지 크기를 지정된 타일 크기로 나눔으로써 획득될 것이다.

이미지 데이터 분석

도 10은 본 발명에 따른, 이미지 데이터를 정의된 복수의 타일들 각각에 대해 분석하는 프로세스(500)를 도시하는 흐름도이다. 프로세스(500)는 미용 피부 속성을 결정하기 위한 엔트로피 값을 획득하기 위한 분석을 위한 추출된 색 채널 이미지를 제공하기 위해, 획득된 제1 디지털 이미지로부터 적어도 하나의 색 채널을 추출함으로써 단계(502)에서 시작할 수 있다. 다음의 설명에서, 적어도 하나의 색 채널 이미지는 L 색 채널 이미지, a-채널 이미지, b-채널 이미지 및 RGB 색 공간으로부터의 c-채널 이미지, 및 이들의 조합들로 이루어진 군으로부터 선택되는 L*a*b* 색 시스템에서의 이미지이고, 엔트로피 값은 L-엔트로피 값, a-엔트로피 값, b-엔트로피 값, c-엔트로피 값, 및 이들의 조합들로 이루어진 군으로부터 선택되고, 함수는 하기 식을 가지고:

피부 속성 인덱스= A + B × (L-엔트로피 값) + C × (a-엔트로피 값) + D × (b-엔트로피 값) + E × (c-엔트로피),

A, B, C, D, 및 E는 상수이고, B, C, D, 및 E 중 적어도 하나는 0이 아니다.

그러나, 적어도 하나의 색 채널이 또한 발색단 시스템일 수 있고 적어도 하나의 색 채널이 멜라닌 채널 또는 헤모글로빈 채널일 수 있음이 이해될 것이다. 색 시스템은 또한 HSL/HSV 색 시스템, 및 CMYK 색 시스템일 수 있다.

단계(504)에서, 추출된 색 채널은 필터링될 수 있고, 단계(506)에서, 필터링된 색 채널은 엔트로피 통계치를 이용하여 분석되어 적어도 하나의 미용 피부 속성을 결정하기 위한 엔트로피 값을 생성한다. 필터링된 색 채널은 또한 표준 편차, 평균 등을 포함하지만 이로 제한되지 않는 다른 서술적 통계치들을 사용하여 분석될 수 있음이 이해될 것이다. 엔트로피 통계치를 사용하는 것의 기술적 효과는 이것이 다른 서술적 통계치에 비해 더 높은 정확도를 가지고, 또한 본 발명에 따른 방법의 더 빠른 프로세싱 시간을 가능하게 할 수 있다는 것이다.

단계(506)에서, 사람의 피부의 적어도 하나의 부분의 미용 피부 속성은 엔트로피 값에 기초하여 결정된다.

적어도 하나의 색 채널 이미지는 L*a*b* 색 시스템, RGB 색 시스템, HSL/HSV 색 시스템, 및 CMYK 색 시스템으로 이루어진 군으로부터 선택되는 색 시스템에서의 이미지일 수 있다.

아래 표 1은 각각의 엔트로피 값을 대응하는 색 채널 이미지 및 엔트로피 값에 기초하여 결정될 대응하는 미용 피부 속성들과 함께 제시한다. 표 1에 기술된 색 채널 이미지는 L 채널 이미지, a-채널 이미지, b-채널 이미지, c-채널 이미지, 및 그 조합들로 이루어진 군으로부터 선택되는 L*a*b* 색 시스템에서의 이미지이다.

[표 1]

미용 피부 속성을 결정하는 것은 사람의 피부의 적어도 하나의 부분의 미용 피부 속성의 상태를, 정의된 모집단의 사람들에 비하여 나타낸 확률 값으로서 피부 속성 인덱스를 생성하는 것을 포함할 수 있다. 구체적으로, 시각적 인지 연구에서, 소비자들은 사전결정된 척도에 기초하여, 미용 피부 속성에 대한 정의된 모집단의 사람들의 디지털 이미지들(예컨대, 사진들)의 순위를 매기도록 요청받을 수 있다. 순위가 매겨진 디지털 이미지들은 미용 피부 속성과 가장 높은 상관관계를 갖는 엔트로피 값을 결정하기 위해 방법(500)에 따라 분석되도록 데이터베이스로서 저장될 수 있다.

대안적으로, 피부 속성 인덱스는 함수 F(엔트로피 값)에 의해 정의되는 엔트로피 값의 함수로서 생성될 수 있으며, 상기 함수는 훈련 데이터세트 상에 확립된 모델에 의해 결정된다. 훈련 데이터세트는 (i) 정의된 모집단의 사람들의 복수의 색 채널 이미지들 - 복수의 색 채널 이미지들의 각각은 정의된 모집단의 사람들의 사람의 얼굴 피부를 포함하고, 얼굴 피부는 미용 피부 속성을 포함함 -; (ii) 미용 피부 속성에 기초한 연관 부류 정의를 포함할 수 있다. 훈련 데이터세트들을 구축하기 위한 기술들은 이미지 프로세싱 방법들의 분야의 숙련자에게 공지되어 있으며, 추가로 기술되지 않는다.

모델은 회귀 모델 또는 분류 모델, 바람직하게는 선형 회귀 모델, 더 바람직하게는 기계 학습 선형 회귀 모델, 가장 바람직하게는 기계 학습 지원 벡터 회귀(support vector regression, SVR) 모델일 수 있다. SVR 모델은 지원 벡터 기계(Support Vector Machine, SVM) 모델의 특정 예이다. SVM 모델은 또한 지원 벡터 분류 모델일 수 있다.

SVR 모델의 사용은, 휴대용 전자 디바이스 상의 네이티브 애플리케이션으로서 구현될 때, 방법의 성능에서의 정확성, 재현성, 속도의 이점들을 가능하게 한다. 특히, SVR 모델의 가중치는 네이티브 애플리케이션이 더 작은 하드웨어 풋프린트를 가질 수 있게 하며 결과적으로 본 발명에 따른 방법들은 Apple™ 폰용 iOS 또는 안드로이드 폰용 Android OS를 포함하나 이에 제한되지 않는 모바일 폰 운영 체제들(OS)을 갖는 모바일 폰들과 같은 휴대용 전자 디바이스들에 쉽게 전개될 수 있다.

분류 모델은, 피부 속성 인덱스의 수치 값에 기초하여 연관 부류 정의를 정의하기 위해 소비자들을 복수의 군들 - 각각의 군은 동일한 미용 피부 속성의 상태의 상이한 정도들을 가짐 -, 바람직하게는 2개의 군들, 보다 바람직하게는 3개의 군들로 분류하는 데 사용될 수 있다. 예를 들어, 방법은 피부의 영역들을 각각의 군들에 할당된 임계치들에 기초하여 높은 레벨의 미용 피부 속성 상태 또는 낮은 레벨의 미용 피부 속성 상태로 분류하도록 구성된 히트 맵을 디스플레이할 수 있다.

적어도 하나의 색 채널 이미지는 L 색 채널 이미지, a-채널 이미지, b-채널, 이미지 및 RGB 색 시스템으로부터의 c-채널 이미지, 및 이들의 조합들로 이루어진 군으로부터 선택되는 L*a*b* 색 시스템에서의 이미지이고, 엔트로피 값은 L-엔트로피 값, a-엔트로피 값, b-엔트로피 값, c-엔트로피 값, 및 이들의 조합들로 이루어진 군으로부터 선택되고, 함수는 하기 식을 가지고:

피부 속성 인덱스= A + B × (L-엔트로피 값) + C × (a-엔트로피 값) + D × (b-엔트로피 값) + E × (c-엔트로피),

A, B, C, D, 및 E는 상수이고, B, C, D, 및 E 중 적어도 하나는 0이 아니다.

상수 A, B, C, D, 및 E는 훈련 데이터세트의 크기 및 내용에 기초하여 변할 수 있고, 훈련 데이터세트에 기초하여 모델에 의해 생성되는 임의의 수치 값일 수 있다는 것이 이해될 것이다.

구체적으로, 상기의 엔트로피 값들 각각은 단독으로 또는 엔트로피 값들 중 다른 값과 조합하여 사용될 수 있다. 예를 들어, 단일 엔트로피 값을 사용하면 컴퓨팅 속도가 보다 빨라져 매우 기본적인 하드웨어를 갖춘 소형 디바이스들을 사용할 수 있으므로 보다 효율적이고 비용 효율적인 제품을 생성할 수 있다.

적어도 하나의 색 채널 이미지는 L 채널 이미지일 수 있고, 엔트로피 값은 L-엔트로피 값이고, C, D, E는 각각 0의 값을 가지고, 생성된 피부 속성 인덱스는 피부 순도, 피부 톤 또는 피부 윤기를 나타낸다.

놀랍게도, L 색 채널 이미지의 L-엔트로피 값이 피부 순도에 대해 가장 높은 상관관계를 갖는 것으로 밝혀졌다.

본 발명에 따른 방법들에 따라 분석 단계에서 L-엔트로피 값에 기초하여 L-엔트로피 값을 획득하고 피부 순도를 결정하기 위해 적어도 하나의 색 채널 이미지로서 L-채널 이미지를 선택하는 것의 기술적 효과는 색 채널 이미지들을 분석한 결과 L-엔트로피 값이 다른 엔트로피 값들에 비해 피부 순도와 가장 높은 상관관계(r = 0.89)를 나타내기 때문이다. 아래는 피어슨 상관 계수(Pearson correlation coefficient)(r)를 사용한 통계 분석을 사용하여 시각적 인지 연구로부터의 결과들과의 상관관계에 기초하여 생성된 데이터이다. 상관 관계 결과를 아래 표 2에 나타내었다.

[표 2]

더 높은 피어슨 상관 계수(r)는 엔트로피 값이 시각적 인지 연구에서 연구된 미용 피부 속성의 상태에 더 기여하는 인자임을 의미한다. 구체적으로, 시각적 인지 연구는 사전결정된 수의 응답자들 = 302명, 응답자들의 연령 = 20 내지 50세에 기초하여 수행된다. 응답자들은 1 내지 5의 척도로 (미용 피부 속성의 예로서) 피부 순도에 대해 사람들의 사진들에 순위를 매기도록 요청받는다. 시각적 인지 연구 결과들 및 위의 상관관계 결과들에 기초하여, (주파수 필터에 의해) 필터링된 이미지의 L 채널 엔트로피 값이 피부 순도 속성과 가장 높은 상관관계를 갖는 것으로 나타났다. 따라서, 디지털 이미지에서 사람의 피부의 적어도 일부분의 피부 순도를 결정하기 위한 L 채널의 L-엔트로피 값의 사용은 피부 순도를 시각적으로 인지할 수 없는 미용 피부 속성에서 소비자들에게 소비자 관련된 방식으로 설명가능한 미용 피부 속성으로 변환시키는 데 사용될 수 있다.

적어도 하나의 색 채널 이미지는 a-채널 이미지일 수 있고, 엔트로피 값은 a-엔트로피 값이고, B, D, E는 각각 0의 값을 가지고, 생성된 피부 속성 인덱스는 피부 염증을 나타낸다.

적어도 하나의 색 채널 이미지는 b-채널 이미지일 수 있고, 엔트로피 값은 b-엔트로피 값이고, B, C, E는 각각 0의 값을 가지고, 생성된 피부 속성 인덱스는 피부 색소침착 또는 피부 칙칙함을 나타낸다.

적어도 하나의 색 채널 이미지는 c-채널 이미지일 수 있고, 엔트로피 값은 c-엔트로피 값이고, B, C, D는 각각 0의 값을 가지고, 생성된 피부 속성 인덱스는 바람직하게는 모공, 미세 선, 주름, 처짐, 피부 탄력, 및 이들의 조합들로 이루어진 군으로부터 선택되는 피부 토포그래피를 나타낸다.

바람직하게는, 대상의 연령 및 정의된 모집단의 사람들의 평균 연령은 각각 독립적으로 18 내지 60년, 바람직하게는 20 내지 40년, 더 바람직하게는 25 내지 35년, 더욱 더 바람직하게는 28 내지 32년일 수 있다.

선택적으로, 단계(504)의 추출된 색 채널 이미지를 필터링하는 단계는 주파수 필터를 사용하는 것을 포함할 수 있으며, 바람직하게는 주파수 필터는 가우스 차이(Difference of Gaussian, DoG) 필터, 고속 푸리에 변환(Fast Fourier Transform, FFT) 필터, 웨이블릿 변환(Wavelet transformation) 필터, 및 이들의 조합들로 이루어진 군으로부터 선택되며, 더 바람직하게는, 필터는 DoG 필터이다. 선택적으로, 방법(200)은 필터링된 색 채널을 분석하기 전에, 필터링된 색 채널에 이미지 보정 인자를 적용하는 단계를 더 포함할 수 있다.

도 10을 참조하면, 이미지 데이터를 분석하는 단계는 적어도 2개의 색 채널들, 더 바람직하게는 3개의 색 채널들을 분석하는 단계를 포함할 수 있다. 특히, 적색 색 채널, 황색 색 채널 및 청색 색 채널은 다음과 같이 기술될 수 있다. 적색 색 채널이 L*a*b* 색 공간에 있을 때, a-엔트로피는 필터링된 적색 색 채널의 엔트로피 값이다. 황색 색 채널이 L*a*b* 색 시스템에 있을 때, b-엔트로피는 필터링된 황색 색 채널의 엔트로피 값이다. 청색 색 채널이 텍스처 채널에 대응하는 경우, c-엔트로피는 청색 색 채널의 엔트로피 값이다.

디스플레이

본 발명에 따른 방법들은 미용 피부 상태를 시각화하기 위해 위에 기술된 생성된 피부 속성 인덱스에 대응하는 이미지 설명을 생성하는 단계를 더 포함할 수 있다. 이미지 설명은 (도 16d, 도 25에 도시된 바와 같은) 히트 맵, 미용 피부 속성과 같은 미용 피부 속성 상태를 나타내는 총 점수, 도 16d의 제4 영역(194)에 도시된 피부 연령, 도 25의 특징부(934)에 도시된 피부 순도 점수를 포함할 수 있다. 총 점수는 위에 기술된 생성된 피부 속성 인덱스에 기초하여 계산될 수 있다.

도 11a 내지 도 11c는 본 발명의 방법에 따라 복수의 타일들을 디스플레이하는 프로세스의 상세 사항들을 도시하는 프로세스 흐름 도면들이다. 도 12는 복수의 타일들을 디스플레이하는 프로세스를 도시하는 흐름도이다. 도 11a는 제1 디지털 이미지(51) 상에 개재된 제2 디지털 이미지(60)를 도시하는 사진이다. 제2 디지털 이미지(60)는 대상의 얼굴의 적어도 일부분을 포함하며, 디스플레이된 복수의 타일들(54)은 고유하게 할당된 단일의 표시의 정도(40)를 각각 갖는다. 도 11b는, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들(54)에 기초하여, 획득된 제1 디지털 이미지 상에 디스플레이된 제1 구역(110), 제2 구역(120), 제3 구역(130)의 3개 구역들을 도시한다. 각각의 구역(110, 120, 130)은 도 6a 내지 도 6c 및 도 7을 참조하여 위에 기술된 대상의 얼굴(1) 상의 각자의 관심 영역(ROI) 2를 식별한다. 도 11c는 경계선(52) 및 외주연부(53)가 도 11b의 제2 디지털 이미지(60)에 디스플레이되지만 도 11c의 제2 디지털 이미지(60)에는 디스플레이되지 않는다는 점에서 도 11b와는 상이하다. 제1 구역(110)은 제1 구역 색(110a)을 갖는 제1 구역선을 포함할 수 있고, 제2 구역(120)은 제2 구역 색(120a)을 갖는 제2 구역선을 포함할 수 있고, 제3 구역(130)은 제3 구역 색(130a)을 갖는 제3 구역선을 포함할 수 있다. 각각의 구역 내의 타일들(54)의 분석된 이미지 데이터에 기초하여, 각각의 구역선들의 색은, 예를 들어, 도 16d의 예시적인 사용자 인터페이스에 도시된 바와 같이, 대상의 다른 구역들에 비해 정상적이거나 아름답거나 취약한 상태일 수 있는 미용 피부 속성들을 시각화하는 타일들을 시각적으로 더 잘 구별하기 위해 상이할 수 있다.

도 12는 본 발명에 따른, 복수의 타일들을 디스플레이하는 프로세스(600)를 도시하는 흐름도이다. 프로세스(600)는 단계(602)에서 시작될 수 있으며, 프로세서는 각각의 타일(54)의 분석된 이미지 데이터를 판독하고, 타일(54)의 분석된 적어도 하나의 시각적인 미용 피부 속성에 기초하여 복수의 타일들의 각각의 타일(54)에 고유하게 단일의 표시의 정도를 할당한다(단계(604)). 단일의 표시의 정도가 조도(illumination)인 경우, 단계(606)에서, 타일들 각각의 분석된 이미지 데이터는 각각의 타일에서의 조도의 대응하는 밝기의 정도를 반영하도록 변환될 수 있다. 예시적인 예에서, 구역(110)은 구역(120) 내의 타일들 각각에서의 조도의 정도에 비해 구역(110) 내의 타일들 각각에서 더 낮은 조도의 정도를 가질 수 있다. 또한, 단계(608)에서, 구역들은 제1 구역(110)이 눈 구역에 대응할 수 있고, 제2 구역(120)이 볼 구역에 대응할 수 있고, 제3 구역(130)은 입 구역에 대응하도록 정의될 수 있다. 각각의 구역의 타일들의 평균 인덱스는, 구역 내의 디스플레이된 미용 피부 속성을 치료하기 위해 구역에 제품 추천 항목을 할당하도록 각자의 구역에 따른 디스플레이된 미용 피부 속성과 상관되는 피부 상태의 진단을 생성하도록 계산될 수 있다. 구체적으로, 방법(200)은 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목을 디스플레이하는 단계를 더 포함할 수 있다.

도 13a 내지 도 13d는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하는 방법을 도시하는 프로세스 흐름 도면들이다. 도 14는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하는 방법(700)을 도시하는 흐름도이다. 도 13a는 도 14의 방법(700)의 단계(702)에서 디스플레이되는 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지를 도시하는 색사진이다. 도 13b는 대상의 얼굴의 적어도 일부분의 제2 디지털 이미지 및 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 도시하는 색사진이며, 단계(704)에서 제2 디지털 이미지는 제1 디지털 이미지 상에 개재된다. 선택적으로, 제1 디지털 이미지는 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들과 제1 디지털 이미지 사이에 더 우수한 콘트라스트를 제공하기 위해 도 13c에 도시된 바와 같이 그레이 스케일로 변환될 수 있다. 단계(706)에서, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들에 기초하여 제2 디지털 이미지 상에 3개의 구역들이 디스플레이된다.

도 15는 도 14에 도시된 바와 같이 적어도 하나의 미용 피부 속성을 시각화하는 방법(700)의 변형을 도시하는 흐름도이다. 도 14의 방법(700)의 단계(706) 후에 적어도 하나의 제품 추천 항목이 단계(708)에서 디스플레이된다. 단계(710)에서, 사용자는 방법(700)을 종료하도록 선택하도록 촉구되고, 단계(712)에서, 방법(700)은 사용자가 '예'를 선택하는 경우 종료된다. 사용자가 '아니오'를 선택하는 경우, 도 5의 방법(200)의 단계들이 수행되고 방법(700)은 단계(708)로 복귀한다.

인간 기계 사용자 인터페이스

본 발명은 또한 적어도 하나의 미용 피부 속성을 치료하기 위한 제품 추천을 제공하기 위한 인간 기계 사용자 인터페이스(이하, "사용자 인터페이스")에 관한 것이다. 사용자 인터페이스는 터치 스크린 디스플레이/입력 디바이스를 갖는 디스플레이 및 이미지 획득 디바이스를 포함하는 휴대용 전자 장치 상의 그래픽 사용자 인터페이스일 수 있다. 사용자 인터페이스는, 이미지 획득 디바이스로부터 획득된 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 및 제1 디지털 이미지 상에 개재된 제2 디지털 이미지를 디스플레이하는 터치 스크린 디스플레이의 제1 영역을 포함할 수 있으며, 제2 디지털 이미지는 대상의 얼굴의 적어도 일부분 및 고유하게 할당된 단일의 표시의 정도를 각각 갖는 상기 디스플레이된 복수의 타일들을 갖는다. 사용자 인터페이스는 제1 영역과 상이한 터치 스크린 디스플레이의 제2 영역을 더 포함할 수 있고, 제2 영역은 사용자 입력을 수신하기 위한 선택가능한 아이콘을 디스플레하며, 사용자가 선택가능한 아이콘을 활성화하는 경우, 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지가 터치 스크린 디스플레이 상에 디스플레이된다.

도 16a 내지 도 16e는 본 발명에 따른, 미용 피부 속성을 시각화하기 위해 서로 협력하는 예시적인 사용자 인터페이스를 각각 도시하는 스크린 샷들이다. 도 16a 내지 도 16e는 선행하는 사용자 인터페이스에 응답하여 순차적인 방식으로 제공되는 일련의 사용자 인터페이스들로서 기술되지만, 도 16a 내지 도 16e의 사용자 인터페이스들은 위에 기술된 바와 같은 본 발명에 따른 방법들에 따라 적어도 하나의 미용 피부 속성을 시각화하기 위한 전체 사용자 인터페이스를 정의하도록 다수의 방식들로 프로그래밍될 수 있다. 바람직하게는, 도 16a 내지 도 16e의 모든 사용자 인터페이스들은 본 발명에 따른, 미용 피부 속성을 시각화하기 위한 예시적인 사용자 인터페이스를 정의한다.

도 16a는 제1 사용자 입력을 수신하기 위한 사용자 인터페이스(160)를 도시하며, 바람직하게는 제1 사용자 입력은 사용자의 연령이다. 사용자 인터페이스(160)는 제1 사용자 입력을 수신하기 위한 제1 영역(162)을 포함할 수 있다. 제1 영역(162)은 제1 사용자 입력을 수신하기 위한 하나 이상의 사용자 입력 특징부들(164)을 포함할 수 있다. 사용자 입력 특징부(164)는 예를 들어, 도 16a에 도시된 바와 같이 예를 들어, 사용자의 연령과 같은 사전결정된 사용자 특징에 대응하는 선택가능한 입력 아이콘과 같은 것일 수 있다. 사용자 인터페이스(160)는 제1 사용자 입력을 제공하기 위한 사용자에 대한 대응하는 지시문을 포함하는 제2 영역(166)을 더 포함할 수 있다. 제2 영역(166)은 보다 사용자 친화적인 인터페이스를 제공하도록 제1 영역(162) 위에 배치될 수 있다. 사용자 인터페이스(160)는 본 발명에 따른 방법(200)을 시작하기 위한 시작 옵션의 일부일 수 있다.

도 16b는 제2 사용자 입력을 수신하기 위한 사용자 인터페이스(170)를 도시하며, 바람직하게는 제2 사용자 입력은 사용자에게 우려를 야기하는 미용 피부 속성이다. 미용 피부 속성은 사용자의 피부 문제로서 기술될 수 있다. 사용자 인터페이스(170)는 도 16a의 사용자 입력 특징부(164)로부터의 제1 사용자 입력의 선택에 응답하여 제공될 수 있다. 사용자 인터페이스(170)는 제2 사용자 입력을 수신하기 위한 제1 영역(172)을 포함할 수 있다. 제1 영역(172)은 제2 사용자 입력을 수신하기 위한 하나 이상의 사용자 입력 특징부들(174)을 포함할 수 있다. 사용자 입력 특징부(174)는 예를 들어, 사전결정된 피부 문제에 대응하는 선택가능한 입력 아이콘과 같은 것일 수 있다. 제1 영역(172)은 하나 이상의 입력 특징부들(174)에 대응하는 설명적 영역(173)을 더 포함할 수 있으며, 설명적 영역(173)은 미용 피부 속성 또는 피부 문제의 간단한 설명을 포함한다. 사용자 인터페이스(170)는 사용자 입력을 제공하기 위한 사용자에 대한 대응하는 지시문을 포함하는 제2 영역(176)을 더 포함할 수 있다. 제2 영역(176)은 보다 사용자 친화적인 인터페이스를 제공하도록 제1 영역(172) 위에 배치될 수 있다.

도 16c는 사용자의 입력 이미지를 획득하기 위한 사용자 인터페이스(180)를 도시한다. 사용자 인터페이스(180)는 도 7에 기술된 바와 같이 프로세스에 따라 제1 디지털 이미지를 획득하기 위해 (눈과 같은) 앵커 특징을 정렬시키기 위한 지시문을 갖는 제1 영역(182)을 포함할 수 있다. 사용자 인터페이스(180)는 도 16b의 하나 이상의 사용자 입력 특징부들(174)을 통한 제2 사용자 입력의 선택에 응답하여 제공될 수 있다.

도 16d는 적어도 하나의 미용 피부 속성을 디스플레이하기 위한 사용자 인터페이스(190)를 도시한다. 사용자 인터페이스(190)는 사용자의 입력 이미지가 도 16c의 사용자 인터페이스(180)에서 획득된 후에 제공될 수 있다. 사용자 인터페이스(190)는 본 발명의 방법들에 따라 적어도 하나의 미용 피부 속성을 시각화하기 위해 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 디스플레이하는 제1 영역(191)을 포함할 수 있다. 제1 영역(191)은 도 13d에 도시된 것과 유사한 특징부들을 디스플레이할 수 있지만, 다만 복수의 타일들을 정의하는 선들이 턴오프되고/되거나 비가시적 층으로서 설정될 수 있다는 점에서 상이하다. 제1 영역(191)은 사용자의 얼굴의 적어도 일부분의 눈 구역에 대응하는 제1 구역(110), 사용자의 얼굴의 적어도 일부분의 볼 구역에 대응하는 제2 구역(120), 및 사용자의 얼굴의 적어도 일부분의 입 구역에 대응하는 제3 구역(130)을 포함할 수 있다. 도 16d에 도시된 바와 같이, 구역 결과가 제3 영역(193)에 디스플레이될 수 있으며, 이에 의해 구역 결과는 사용자의 얼굴의 적어도 일부분 내의 구역들의 인덱스들의 상대 비교에 기초하여 각각의 구역에 대해 생성될 수 있는 인덱스를 포함한다. 예시적인 실시예에서, 구역 결과들에 따라, 제1 구역(110)은 정상/아름다운/취약한 구역으로서 기술될 수 있고, 제2 구역(120)은 정상/아름다운/취약한 구역으로서 기술될 수 있고, 제3 구역(130)은 정상/아름다운/취약한 구역으로서 기술될 수 있다. 바람직하게는, 각각의 구역은 구역 결과들의 상대적인 차이들에 기초하여 상이한 설명들을 가질 수 있다. 사용자 인터페이스(190)는 또한 제3 사용자 입력을 수신하기 위한 제2 영역(192)을 포함한다. 제2 영역(192)은 제3 사용자 입력을 수신하기 위한 하나 이상의 사용자 입력 특징부들(1921)을 포함할 수 있다. 사용자 입력 특징부(1921)는 예를 들어, 본 발명에 따른 방법의 다음 단계로 진행하기 위한 선택가능한 입력 아이콘과 같은 것일 수 있다. 선택적으로, 사용자 인터페이스(190)는 사용자의 얼굴의 적어도 일부분의 획득된 제1 디지털 이미지에 기초한 복수의 타일들의 각각의 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여 사용자의 피부 연령을 디스플레이하기 위한 제4 영역(194)을 포함할 수 있다.

도 16e는 제품 추천 항목(210)을 디스플레이하기 위한 제1 영역(201)을 포함하는 사용자 인터페이스(200)를 도시한다. 사용자 인터페이스(200)는 도 16d의 사용자 인터페이스(190)로부터의 사용자 입력 특징부(1921)의 선택에 응답하여 제공될 수 있다. 선택적으로, 사용자 인터페이스(200)는 제품 추천 항목(210)의 상세 사항들을 제공하기 위한 제2 영역(202)을 포함할 수 있다. 바람직하게는, 사용자 인터페이스(200)는, 예를 들어, 제품 추천 항목(210)의 조회 및/또는 구매를 위한 제품 컨설턴트로부터의 도움에 대한 요청과 같은 제4 사용자 입력을 수신하기 위한 제3 영역(203)을 포함할 수 있다. 제3 영역(203)은 제4 사용자 입력을 수신하기 위한 하나 이상의 사용자 입력 특징부들(2031)을 포함할 수 있다. 사용자 입력 특징부(2031)는 예를 들어, 본 발명에 따른 방법의 다음 단계로 진행하기 위한 선택가능한 입력 아이콘과 같은 것일 수 있다.

도 17a는 도 15를 참조하여 기술된 바와 같은 본 발명에 따른 미용 피부 속성을 시각화하기 위한 방법(700)의 단계(710)에 따라 추가의 프롬프트들을 제공하기 위한 예시적인 사용자 인터페이스(300)를 도시하는 스크린 샷이다. 사용자 인터페이스(300)는 도 16d의 사용자 입력 특징부(1921)의 선택에 응답하여 제공될 수 있거나, 도 16e의 사용자 인터페이스(200) 이후에 프로세서에 의해 자동으로 생성될 수 있다.

도 17a를 참조하면, 사용자 인터페이스(300)는 예를 들어, 방법(700)의 단계(712)에 따른 방법을 종료하기 위한 것과 같은 제5 사용자 입력을 수신하기 위한 제1 영역(301), 및 예를 들어, 본 발명의 방법들에 따라 다음 단계를 계속해서 수행하기 위한 것과 같은 제6 사용자 입력을 수신하기 위한 제2 영역(302)을 포함할 수 있다. 제1 및 제2 영역들(301, 302)은 제4 사용자 입력을 수신하기 위한 하나 이상의 사용자 입력 특징부들(3011, 3021)을 포함할 수 있다. 사용자 입력 특징부(3011, 3021)는 예를 들어, 본 발명에 따른 방법의 다음 단계로 진행하기 위한 선택가능한 입력 아이콘과 같은 것일 수 있다. 선택적으로, 사용자 인터페이스(300)는 사용자가 제5 또는 제6 사용자 입력을 제공할 기간을 설정하기 위한 타이머 특징부를 포함하는 제3 영역(303)을 포함할 수 있다. 도 17b는 방법(700)의 단계(712)를 디스플레이하기 위한 예시적인 사용자 인터페이스(400)를 도시하는 스크린 샷이다. 사용자 인터페이스(400)는 사용자에게 방법(700)의 종료를 확인하기 위한 내용을 도시하기 위한 제1 영역(401)을 포함할 수 있다.

도 18a 및 도 18b는 본 발명에 따른, 미용 피부 속성을 치료하기 위한 제품 추천 항목 및 제품 추천 항목이 작용하는 방식의 상세 사항들을 디스플레이하기 위한 예시적인 사용자 인터페이스(500, 600)를 각각 도시하는 스크린 샷들이다.

예시적인 실시예에서, 본 발명은 적어도 하나의 미용 피부 속성을 치료하기 위한 제품 추천을 제공하기 위한 사용자 인터페이스에 관한 것일 수 있으며, 사용자 인터페이스는 디스플레이 및 이미지 획득 디바이스를 포함하는 휴대용 전자 장치 상에 있을 수 있다. 사용자 인터페이스는, 이미지 획득 디바이스로부터 획득된 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 및 제1 디지털 이미지 상에 개재된 제2 디지털 이미지를 디스플레이하는 디스플레이의 제1 영역 - 제2 디지털 이미지는 대상의 얼굴의 적어도 일부분 및 고유하게 할당된 단일의 표시의 정도를 각각 갖는 상기 디스플레이된 복수의 타일들을 가짐 -, 제1 영역과 상이한 디스플레이의 제2 영역 - 제2 영역은 사용자 입력을 수신하기 위한 음성 입력 컴포넌트를 디스플레이하고, 사용자가 음성 입력 컴포넌트를 활성화하는 경우, 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지가 터치 스크린 디스플레이 상에 디스플레이됨 -, 및 제1 영역과 상이한 디스플레이의 제3 영역을 포함하며, 제3 영역은 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지를 디스플레이한다.

도 19는 본 발명에 따른, 미용 피부 속성을 디스플레이하기 위한 도 16d의 예시적인 사용자 인터페이스(700)의 변형을 도시하는 스크린 샷이다. 구체적으로, 도 19의 사용자 인터페이스(700)는 도 16d의 사용자 인터페이스(190)와 실질적으로 동일한 특징부들을 가지며, 적어도 하나의 제품 추천 항목(210)을 디스플레이하기 위한 제5 영역(195), 예를 들어, 예를 들어 추가의 제품 추천 항목을 추가하기 위한 것과 같이, 본 발명의 방법들에 따라 다음 단계를 계속하기 위한 것과 같은 사용자 입력을 수신하기 위한 제6 영역(196), 및 예를 들어, 본 발명의 방법들을 종료하기 위한 것과 같은 사용자 입력을 수신하기 위한 제7 영역(197)을 포함하는 추가의 특징부들에서 상이하다. 제5 및 제6 영역들(195, 196)은 각자의 사용자 입력을 수신하기 위한 하나 이상의 사용자 입력 특징부들을 포함할 수 있다. 사용자 입력 특징부는 예를 들어, 본 발명에 따른 방법의 다음 단계로 진행하기 위한 선택가능한 입력 아이콘과 같은 것일 수 있다.

도 20은 본 발명에 따른, 하나 이상의 제품 추천 항목들을 디스플레이하기 위한 예시적인 사용자 인터페이스(800)를 도시하는 스크린 샷이다. 사용자 인터페이스(800)는 제6 영역(196) 내의 사용자 입력 특징부를 선택하는 것에 응답하여 제공될 수 있다. 사용자 인터페이스(800)는 사용자 인터페이스(700)와 실질적으로 동일한 특징부들을 가지며, 사용자 인터페이스(800)가 복수의 제품 추천 항목들(210)을 디스플레이한다는 점에서 상이하다.

본 발명에 따른 방법은 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들에 기초하여, 적어도 하나의 관심 영역(ROI), 바람직하게는 1개 내지 3개의 ROI, 더 바람직하게는 3개의 ROI를 디스플레이하는 단계를 포함할 수 있으며, 바람직하게는, 3개의 ROI 중 디스플레이된 하나의 ROI는, 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 3개의 ROI 중 다른 ROI들의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이한다.

도 21은 미용 피부 속성을 디스플레이하기 위한 예시적인 사용자 인터페이스(810)의 스크린 샷이다. 구체적으로, 사용자 인터페이스(810)는 도 16d의 사용자 인터페이스와 실질적으로 동일한 특징부들을 가지며, 복수의 타일들이 디스플레이되지 않는다는 점에서 상이하다. 구체적으로, 사용자 인터페이스(810)는 각자의 ROI를 정의하는 경계선을 각각 갖는 3개의 ROI를 포함한다. 구체적으로, 3개의 ROI는 눈 영역을 정의하는 제1 ROI(812), 볼 영역을 정의하는 제2 ROI(814) 및 입 영역을 정의하는 제3 ROI(816)를 포함한다. 미용 피부 속성은 건성 피부/텍스처이고, 따라서, 미용 피부 속성의 상태를 설명하는 이미지 설명(818, 820, 822)이 3개의 ROI(812, 814, 816) 각각의 옆에 배치된다. 예를 들어, 제3 ROI(816)는, 디스플레이되지 않은 타일의 분석된 미용 피부 속성에 기초하여, 제3 ROI(816)가 얼굴 상의 아름다운 구역임을 나타내는 이미지 설명(822)을 가질 수 있다.

도 22는 미용 피부 속성을 디스플레이하기 위한 예시적인 사용자 인터페이스(830)의 스크린 샷이다. 구체적으로, 사용자 인터페이스(830)는 도 21의 사용자 인터페이스(820)와 실질적으로 동일한 특징부를 가지며, 3개의 ROI(812, 814, 816) 각각 내의 타일들(54)이 디스플레이된다는 점에서 상이하다. 타일들(54)은, 예를 들어, 이미지 설명(822)에 기초하여 아름다운 구역을 나타내는 ROI(816)만을 디스플레이하는 것과 같이, 단일 ROI에 디스플레이되도록 구성될 수 있음이 이해될 것이다.

도 23은 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하기 위한 디지털 이미지(51) 상에 오버레이된 이미지 설명(901)을 포함하는 예시적인 사용자 인터페이스(900)의 부분도를 도시한다. 이미지 설명(902)은 위에 기술된 방법(500)으로부터 출력된 엔트로피 값들에 기초하여 생성된 히트 맵을 포함한다. 히트 맵은 더 우수한 미용 피부 속성 상태에 대응하는 낮은 엔트로피 값들에 기초한 제1 히트 맵 섹션(906)을 포함한다. 히트 맵(904)은 열악한 미용 피부 속성 상태에 대응하는 높은 엔트로피 값들에 기초한 제2 히트 맵 섹션(908)을 더 포함한다. 제1 히트 맵 섹션(906)은 제2 히트 맵 섹션(908) 내의 제2 복수의 타일들과는 시각적으로 상이한 제1 복수의 타일들로 형성된다. 예를 들어, 제1 복수의 타일들은 제2 복수의 타일들의 색과 상이한 색을 디스플레이하도록 변환된다. 디스플레이되지 않는 히트 맵 섹션들(910)(이하, "디스플레이되지 않은 히트 맵 섹션들(910)")은 높은 엔트로피 값과 낮은 엔트로피 값 사이의 엔트로피 값들에 대응한다. 히트 맵 섹션들은 하기의 표 5에 약술된 바와 같이 미용 피부 속성 상태 및 피부 속성 인덱스에 관련된 엔트로피 정보를 디스플레이하기 위해 다음과 같이 구성될 수 있다.

[표 5]

도 24는 도 23의 사용자 인터페이스(900)에서 적어도 하나의 미용 피부 속성을 시각화하기 위한 이미지 설명(920)의 대안적인 변형을 도시한다. 이미지 설명(920)은 디스플레이된 관심 영역(ROI)(922)을 포함하고, 디스플레이된 ROI(922)는 더 우수한 미용 피부 속성 상태에 대응하는 다른 디스플레이되지 않은 관심 영역(ROI)(924)에 비해 더 불량한 미용 피부 속성 상태를 나타내기 위헤 색을 디스플레이하도록 변환된다는 점에서, 이미지 설명(920)은 도 19의 이미지 설명(902)과 상이하다. 단일 히트 맵 섹션(도 20 참조) 또는 ROI 만을 디스플레이하는 것의 이점은 사용자 인터페이스를 보는 소비자가 너무 많은 시각적 정보로 과부하되지 않는다는 것이다.

도 25는 본 발명에 따른, 적어도 하나의 미용 피부 속성을 시각화하기 위한 예시적인 사용자 인터페이스(930)를 도시하는 스크린 샷으로서, 적어도 하나의 미용 피부 속성이 피부 순도이다. 사용자 인터페이스(930)는, 사용자 인터페이스(930)가 미용 피부 속성을 기술하는 대안적인 텍스트(932) 및 생성된 피부 속성 인덱스에 기초한 총 점수(934)를 포함한다는 점에서 도 19의 사용자 인터페이스(902)와 상이하다. 사용자 인터페이스(930)는 측정기(936), 및 측정기(936)를 따라 0 내지 100의 스케일로 총 점수를 나타내기 위한 측정기 마커(938)를 더 포함할 수 있다. 측정기(936)는 총 점수(934)를 시각화하는 상이한 방식이며, 선택적일 수 있다. 측정기(936)의 색은 제1 히트 맵 섹션(904) 및 제2 히트 맵 섹션(906)을 나타내는 색들의 구배를 나타내도록 구성될 수 있다.

위에 기술된 본 발명에 따른 미용 피부 상태를 결정하기 위한 방법들은 사전결정된 기간에 걸쳐 미용 피부 속성을 추적하는 단계를 더 포함할 수 있다. 예를 들어, 도 21에 도시된 바와 같은 사용자 인터페이스(930)는 제1 선택가능한 아이콘(940)을 포함할 수 있는데, 이는 선택 시에 프로세서에 의해, 미용 피부 속성들의 개선을 추적하기 위해 미용 피부 속성 다이어리를 생성하기 위한 캘린더 또는 스케줄을 생성하도록 지시문이 수신되고, 단계들이 수행되게 한다. 예를 들어, 소비자가 1일에 이를 사용하는 경우, 날짜 및 얼굴 분석이 기록되고 메모리에 저장된다. 후속적으로, 소비자가 향후(소정의 기간, 1주, 1개월, 6개월 후) 본 발명에 따른 방법을 사용할 때마다, 소비자의 얼굴 피부는 다시 분석되고 소비자는 1일에 비해 사전결정된 기간 후의 시간에 자신의 얼굴 피부가 어떻게 보이는지 비교할 수 있다. 본 발명에 따른 방법들은 휴대용 전자 디바이스 상의 네이티브 애플리케이션으로서 저장되는 다운로드가능한 소프트웨어 애플리케이션, 또는 소비자에 특정되는 로그인 계정을 통해 액세스될 수 있는 웹 애플리케이션이도록 구성될 수 있으므로, 소비자가 본 발명에 따른 방법들에 기초하여 자가-피부 분석을 수행할 수 있고, 일정 기간에 걸쳐 개선(더 불량한 미용 피부 속성 상태를 갖는 ROI들의 감소)을 관찰 및/또는 모니터링할 수 있다.

사용자 인터페이스(930)는, 선택 시에, 본 발명에 따른 미용 피부 속성을 결정하기 위한 방법이 반복될 수 있게 하는 제2 선택가능한 아이콘(942)을 더 포함할 수 있다. 예를 들어, 위에 기술된 방법(500)이 반복될 수 있다.

위에 기술된 본 발명의 대표적인 실시예들은 다음의 단락들에 기재된 바와 같이 기술될 수 있다:

A. 대상의 하나 이상의 시각적으로 인지할 수 없는 미용 피부 속성을 시각화하는 방법으로서, 방법은

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터를 획득하는 단계;

b) 획득된 이미지 데이터에 걸친 복수의 타일들을 정의하는 단계;

c) 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성에 대해, 이미지 데이터를 정의된 복수의 타일들 각각에 대해 분석하는 단계;

d) 타일의 분석된 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성에 기초하여, 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계; 및

e) 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 디스플레이하는 단계를 포함하는, 방법.

B. 단락 A에 있어서, 획득된 제1 디지털 이미지 데이터는 대상의 적어도 일부분의 적어도 하나의 관심 영역(ROI)을 포함하며, ROI는 눈 주위의 피부 영역("눈 영역"), 볼 주위의 피부 영역("볼 영역"), 입 주위의 피부 영역("입 영역"), 및 이들의 조합들로 이루어진 군으로부터 선택될 수 있으며, 바람직하게는 ROI는 대상의 얼굴의 적어도 일부분의 일부이고, 더 바람직하게는 획득된 제1 디지털 이미지 데이터는 얼굴의 좌측 또는 우측을 정의하는, 방법.

C. 단락 A 또는 단락 B에 있어서, 각각의 타일은 100 x 100 픽셀 이하, 바람직하게는 1 x 1 픽셀 내지 100 x 100 픽셀, 더 바람직하게는 2 x 2 픽셀 내지 100 x 100 픽셀, 더 바람직하게는 5 x 5 픽셀 내지 90 x 90 픽셀의 타일 크기를 포함하고, 보다 더 바람직하게는 타일 크기는 40 x 40 픽셀 내지 70 x 70 픽셀인, 방법.

D. 단락 A, 단락 B 또는 단락 C 중 어느 한 단락에 있어서, 단계(c)에서의 분석하는 단계는 복수의 타일들의 총 표면적의 적어도 5%, 바람직하게는 10% 내지 100%, 더 바람직하게는 25% 내지 90%를 분석하는 단계를 포함하는, 방법.

E. 단락 A 내지 단락 D 중 어느 한 단락에 있어서, 정의된 복수의 타일들의 각각의 타일에 대한 단일의 표시의 정도와, 정의된 모집단의 사람들과 연관된 사전결정된 값 사이의 비교를 디스플레이하는 단계를 더 포함하는, 방법.

F. 단락 A 내지 단락 E 중 어느 한 단락에 있어서, 대상의 얼굴의 적어도 일부분의 제2 디지털 이미지 데이터와, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 디스플레이된 복수의 타일들을 개재하는 단계를 더 포함하는, 방법.

G. 단락 A 내지 단락 F에 있어서, 시각적으로 인지할 수 없는 미용 피부 속성은 피부 토포그래피, 피부 탄력성, 피부 톤, 피부 색소침착, 피부 텍스처, 피부 모공, 미용 피부 염증, 피부 수화, 피부 피지 레벨, 여드름, 점, 피부 윤기, 피부 광택, 피부 칙칙함, 고르지 않은 톤, 또는 피부 장벽으로 이루어진 군으로부터 선택되는, 방법.

H. 단락 A 내지 단락 G 중 어느 한 단락에 있어서, 단일의 표시의 정도는 그래픽 심볼, 숫자 값, 색 코드, 조도 및 이들의 조합들로 이루어진 군으로부터 선택되는, 방법.

I. 단락 A 내지 단락 H 중 어느 한 단락에 있어서, 단계(e)에서의 디스플레이하는 단계는, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들에 기초하여, 획득된 제1 디지털 이미지 데이터 상에 적어도 하나의 관심 영역(ROI), 바람직하게는 1개 내지 3개의 ROI, 더 바람직하게는 3개의 ROI를 정의하는 단계를 포함하는, 방법.

J. 단락 A 내지 단락 I 중 어느 한 단락에 있어서, 디스플레이된 시각적으로 인지할 수 없는 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목을 디스플레이하는 단계를 더 포함하는, 방법.

K. 단락 A 내지 단락 J 중 어느 한 단락에 있어서, 이미지 데이터를 분석하는 단계는:

i) 획득된 디지털 이미지로부터 적어도 하나의 색 채널을 추출하여 추출된 색 채널 이미지를 제공하는 단계;

ii) 추출된 색 채널 이미지를 필터링하는 단계; 및

iii) 필터링된 색 채널 이미지를 엔트로피 통계치를 사용하여 분석하여 시각적으로 인지할 수 없는 미용 피부 속성을 결정하는 단계를 포함하는, 방법.

L. 단락 K에 있어서, 단계(ii)의 추출된 색 채널 이미지를 필터링하는 단계는 주파수 필터를 사용하는 것을 포함할 수 있으며, 바람직하게는 주파수 필터는 가우스 차이(DoG) 필터, 고속 푸리에 변환(FFT) 필터, 웨이블릿 변환 필터, 및 이들의 조합들로 이루어진 군으로부터 선택되며, 더 바람직하게는, 필터는 DoG 필터인, 방법.

M. 단락 L에 있어서, 적어도 하나의 색 채널은 적색 색 채널, 황색 색 채널, 및 청색 색 채널로부터 선택될 수 있고, 바람직하게는, 방법은 적어도 2개의 색 채널들, 더 바람직하게는 3개의 색 채널들을 포함하고, wherein,

적색 색 채널은 L*a*b* 색 공간에 있고, a-엔트로피는 필터링된 적색 색 채널의 엔트로피 값이고,

황색 색 채널은 L*a*b* 색 시스템에 있고, b-엔트로피는 필터링된 황색 색 채널의 엔트로피 값이고,

청색 색 채널은 텍스처 채널에 대응하고, c-엔트로피는 청색 색 채널의 엔트로피 값인, 방법.

N. 단락 K, 단락 L 또는 단락 M 중 어느 한 단락에 있어서, 방법은 인덱스를 할당하기 위해 적어도 하나의 시각적으로 인지할 수 없는 미용 속성을 사전-정의된 데이터세트와 비교하는 단계로서;

각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계는 할당된 인덱스에 기초하는, 상기 비교하는 단계; 및

고유하게 할당된 인덱스를 각각 갖는 복수의 타일들을 디스플레이하는 단계를 더 포함하는, 방법.

O. 단락 N에 있어서, 인덱스는 시각적으로 인지할 수 없는 미용 피부 속성의 a-엔트로피 값, b-엔트로피 값, c-엔트로피 값 중 적어도 하나에 기초하여 계산되고, 사전-정의된 데이터세트는 정의된 모집단의 동일한 시각적으로 인지할 수 없는 미용 피부 속성의 사전결정된 a-엔트로피 값, b-엔트로피 값, c-엔트로피 값을 포함하는, 방법.

P. 단락 O에 있어서, 대상의 연령 및 정의된 모집단의 사람들의 평균 연령은 각각 독립적으로 18 내지 40세, 바람직하게는 20 내지 40세, 더 바람직하게는 25 내지 35세, 더욱 더 바람직하게는 28 내지 32세인, 방법.

Q. 단락 K, 단락 L, 단락 M, 단락 N, 단락 O 또는 단락 P 중 어느 한 단락에 있어서,적어도 하나의 색 채널 이미지는 적색 색 채널이고,

바람직하게는, 시각적으로 인지할 수 없는 미용 피부 속성은 피부 염증인, 방법.

R. 단락 K, 단락 L, 단락 N, 단락 N, 단락 O, 단락 P 또는 단락 Q 중 어느 한 단락에 있어서, 적어도 하나의 색 채널은 황색 색 채널이고,

바람직하게는, 시각적으로 인지할 수 없는 미용 피부 속성은 피부 색소침착/칙칙함인, 방법.

S. 단락 K, 단락 L, 단락 M, 단락 N, 단락 O, 단락 P, 단락 Q 또는 단락 R 중 어느 한 단락에 있어서, 적어도 하나의 색 채널은 텍스처 채널이고,

바람직하게는, 시각적으로 인지할 수 없는 미용 피부 속성은 피부 토포그래피, 더 바람직하게는 모공, 잔주름, 미세 선, 처짐, 피부 탄력인, 방법.

T. 단락 K, 단락 L, 단락 M, 단락 N, 단락 O, 단락 P, 단락 Q, 단락 R 또는 단락 S 중 어느 한 단락에 있어서, 이미지 데이터를 분석하기 전에, 필터링된 색에 이미지 보정 계수를 적용하는 단계를 더 포함하는, 방법.

U. 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성을 치료하기 위한 제품 추천을 제공하기 위한 그래픽 사용자 인터페이스로서, 그래픽 사용자 인터페이스는 터치 스크린 디스플레이/입력 디바이스를 갖는 디스플레이 및 이미지 획득 디바이스를 포함하는 휴대용 전자 장치 상에 있으며, 그래픽 사용자 인터페이스는:

이미지 획득 디바이스로부터 획득된 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터 및 제1 디지털 이미지 데이터 상에 개재된 제2 디지털 이미지 데이터를 디스플레이하는 터치 스크린 디스플레이의 제1 영역 - 제2 디지털 이미지 데이터는 대상의 얼굴의 적어도 일부분을 갖고, 상기 디스플레이된 복수의 타일들은 고유하게 할당된 단일의 표시의 정도를 각각 가짐 -, 및

제1 영역과 상이한 터치 스크린 디스플레이의 제2 영역을 포함하고, 제2 영역은 사용자 입력을 수신하기 위한 선택가능한 아이콘을 디스플레이하며, 사용자가 선택가능한 아이콘을 활성화하는 경우, 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지가 터치 스크린 디스플레이 상에 디스플레이되는, 그래픽 사용자 인터페이스.

V. 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성을 치료하기 위한 제품 추천을 제공하기 위한 인간 기계 인터페이스로서, 인간 사용자 인터페이스는 디스플레이 및 이미지 획득 디바이스를 포함하는 휴대용 전자 장치 상에 있으며, 그래픽 사용자 인터페이스는

이미지 획득 디바이스로부터 획득된 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터 및 제1 디지털 이미지 데이터 상에 개재된 제2 디지털 이미지 데이터를 디스플레이하는 디스플레이의 제1 영역 - 제2 디지털 이미지 데이터는 대상의 얼굴의 적어도 일부분을 갖고, 상기 디스플레이된 복수의 타일들은 고유하게 할당된 단일의 표시의 정도를 각각 가짐 -, 및

제1 영역과 상이한 디스플레이의 제2 영역 - 제2 영역은 사용자 입력을 수신하기 위한 음성 입력 컴포넌트를 디스플레이하고, 사용자가 음성 입력 컴포넌트를 활성화하는 경우, 디스플레이된 시각적으로 인지할 수 없는 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지가 터치 스크린 디스플레이 상에 디스플레이됨 -, 및

제1 영역과 상이한 터치 스크린 디스플레이의 제3 영역을 포함하며, 제3 영역은 디스플레이된 시각적으로 인지할 수 없는 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지를 디스플레이하는, 그래픽 사용자 인터페이스.

W. 대상의 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성을 시각화하기 위한 장치로서, 장치는 사람의 디지털 이미지 및 컴퓨터 실행가능 명령어들을 저장하도록 구성된 비일시적 컴퓨터 판독가능 저장 매체; 및

저장 매체에 커플링된 프로세서를 포함하며, 프로세서는, 컴퓨터 실행가능 명령어들에 기초하여,

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터를 획득하고;

b) 획득된 이미지 데이터에 걸친 복수의 타일들을 정의하고;

c) 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성에 대해, 이미지 데이터를 정의된 복수의 타일들 각각에 대해 분석하고;

d) 타일의 분석된 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성에 기초하여, 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하고;

e) 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 디스플레이하도록 구성되는, 장치.

X 단락 W에 따른 장치 및 장치에 동작가능하게 연결된 터치 스크린 디스플레이를 포함하는 시스템.

Y. 대상의 적어도 하나의 미용 피부 속성을 시각화하는 방법으로서, 방법은

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터를 획득하는 단계 - 제1 디지털 이미지 데이터는 얼굴의 입력 이미지의 적어도 소정 영역으로부터 선택됨 -;

b) 획득된 제1 디지털 이미지 데이터에 걸친 복수의 타일들을 정의하는 단계;

c) 적어도 하나의 미용 피부 속성에 대해, 이미지 데이터를 정의된 복수의 타일들 각각에 대해 분석하는 단계;

d) 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계; 및

e) 적어도 하나의 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들 중 적어도 일부를 디스플레이하는 단계를 포함하며,

f) 복수의 타일들 중의 디스플레이된 적어도 일부의 타일들은, 타일의 분석된 적어도 하나의 미용 피부 속성에 기초하여, 복수의 타일들 중의 디스플레이되지 않은 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 나타내는, 방법.

Z. 단락 Y에 있어서, 획득된 이미지 데이터는 대상의 얼굴의 적어도 일부분의 적어도 하나의 관심 영역(ROI)을 포함하며, ROI는 눈 주위의 피부 영역, 볼 주위의 피부 영역, 입 주위의 피부 영역, 및 이들의 조합들로 이루어진 군으로부터 선택되는, 방법.

AA. 대상의 적어도 하나의 미용 피부 속성을 시각화하는 방법으로서, 방법은

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터를 디스플레이하는 단계;

b) 대상의 얼굴의 적어도 일부분의 제2 디지털 이미지 데이터와, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 개재하는 단계; 및

c) 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들에 기초하여, 대상의 얼굴의 적어도 일부분의 적어도 하나의 관심 영역(ROI)을 제2 디지털 이미지 데이터 상에 디스플레이하는 단계를 포함하며, ROI는 눈 주위의 피부 영역, 볼 주위의 피부 영역, 입 주위의 피부 영역, 및 이들의 조합들로 이루어진 군으로부터 선택되는, 방법.

BB. 단락 AA에 있어서, 적어도 하나의 ROI는 색을 갖는 경계선에 의해 정의되는, 방법.

CC. 단락 AA 또는 단락 BB에 있어서, 디스플레이하는 단계는 2개 내지 3개의 ROI를 디스플레이하는 단계를 포함하고, 2개 또는 3개의 ROI들 중 하나의 ROI는 2개 또는 3개의 ROI들 중 다른 ROI들과 서로 상이한 경계선 색을 갖는, 방법.

DD. 대상의 적어도 하나의 시각적으로 인지할 수 없는 미용 피부 속성을 시각화하기 위한 장치로서, 장치는 사람의 디지털 이미지 및 컴퓨터 실행가능 명령어들을 저장하도록 구성된 비일시적 컴퓨터 판독가능 저장 매체; 및

저장 매체에 커플링된 프로세서를 포함하며, 프로세서는, 컴퓨터 실행가능 명령어들에 기초하여,

a) 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 데이터를 디스플레이하고;

b) 대상의 얼굴의 적어도 일부분의 제2 디지털 이미지 데이터와, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 개재하고;

c) 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들에 기초하여, 대상의 얼굴의 적어도 일부분의 적어도 하나의 관심 영역(ROI)을 제2 디지털 이미지 데이터 상에 디스플레이하도록 구성되며, ROI는 눈 주위의 피부 영역, 볼 주위의 피부 영역, 입 주위의 피부 영역, 및 이들의 조합들로 이루어진 군으로부터 선택되는, 비일시적 컴퓨터 판독가능 저장 매체.

임의의 상호 참조된 또는 관련된 특허 또는 출원, 및 이러한 출원이 우선권을 주장하거나 그의 이익을 청구하는 임의의 특허 출원 또는 특허를 비롯한, 본 명세서에 인용된 모든 문헌은 이에 의해, 명백히 배제되거나 달리 제한되지 않는 한, 전체적으로 본 명세서에 참고로 포함된다. 어떠한 문헌의 인용도 본 명세서에 개시되거나 청구된 임의의 발명에 대한 종래 기술인 것으로 인정되거나, 또는 단독으로 또는 임의의 다른 참조 문헌 또는 참조 문헌들과의 임의의 조합으로 임의의 그러한 발명을 교시, 제안 또는 개시하는 것으로 인정되지 않는다. 또한, 본 명세서에서의 용어의 임의의 의미 또는 정의가 참고로 포함된 문헌에서의 동일한 용어의 임의의 의미 또는 정의와 상충되는 경우, 본 명세서에서 그 용어에 부여된 의미 또는 정의가 우선할 것이다.

본 발명의 특정 실시예들이 예시되고 기술되었지만, 다양한 다른 변경 및 수정이 본 발명의 사상 및 범주로부터 벗어남이 없이 이루어질 수 있음이 당업자에게 명백할 것이다. 따라서, 본 발명의 범주 내에 있는 모든 그러한 변경 및 수정을 첨부된 청구범위에 포함하도록 의도된다.

Claims (15)

1. 대상의 적어도 하나의 미용 피부 속성을 시각화하는 방법으로서, 상기 방법은
   a) 상기 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지를 획득하는 단계 - 상기 제1 디지털 이미지는 상기 얼굴의 입력 이미지의 적어도 소정 영역으로부터 선택됨 -;
   b) 상기 획득된 제1 디지털 이미지에 걸친 복수의 타일들을 정의하는 단계;
   c) 상기 적어도 하나의 미용 피부 속성에 대해 상기 제1 디지털 이미지를 상기 정의된 복수의 타일들 각각에 대해 분석하는 단계;
   d) 상기 타일의 상기 분석된 적어도 하나의 미용 피부 속성들에 기초하여, 상기 정의된 복수의 타일들의 각각의 타일에 고유하게 단일의 표시의 정도를 할당하는 단계; 및
   e) 적어도 하나의 미용 피부 속성을 시각화하기 위해, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 상기 복수의 타일들 중 적어도 일부를 디스플레이하는 단계를 포함하며,
   상기 복수의 타일들 중의 상기 디스플레이된 적어도 일부의 타일들은, 상기 타일의 상기 분석된 적어도 하나의 미용 피부 속성에 기초하여, 상기 복수의 타일들 중의 디스플레이되지 않은 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이하는, 방법.
2. 제1항에 있어서, 상기 복수의 타일들 중의 상기 디스플레이된 적어도 일부의 타일들은 제1 디스플레이된 타일 및 제2 디스플레이된 타일을 포함하고, 상기 제1 디스플레이된 타일과 상기 제2 디스플레이된 타일 사이에 시각적 차이가 존재하고, 상기 제1 디스플레이된 타일은, 상기 타일의 상기 분석된 적어도 하나의 미용 피부 속성들에 기초하여, 상기 제2 디스플레이된 타일의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이하는, 방법.
3. 제1항에 있어서, 상기 획득된 제1 디지털 이미지는 상기 대상의 상기 적어도 일부분의 적어도 하나의 관심 영역(region of interest, ROI)을 포함하며, 상기 적어도 하나의 ROI는 눈 주위의 피부 영역("눈 영역"), 볼 주위의 피부 영역("볼 영역"), 입 주위의 피부 영역("입 영역"), 및 이들의 조합들로 이루어진 군으로부터 선택되며, 바람직하게는 상기 적어도 하나의 ROI는 상기 대상의 상기 얼굴의 상기 적어도 일부분의 일부이고, 더 바람직하게는 상기 획득된 제1 디지털 이미지는 상기 얼굴의 좌측 또는 우측을 정의하는, 방법.
4. 제3항에 있어서, 상기 단계(e)에서의 디스플레이하는 단계는 고유하게 할당된 단일의 표시의 정도를 각각 갖는 상기 복수의 타일들에 기초하여, 상기 적어도 하나의 관심 영역(ROI), 바람직하게는 1개 내지 3개의 ROI, 더 바람직하게는 3개의 ROI를 디스플레이하는 단계를 포함하며, 바람직하게는, 상기 3개의 ROI 중 상기 디스플레이된 하나의 ROI는, 상기 타일의 상기 분석된 적어도 하나의 미용 피부 속성에 기초하여, 상기 3개의 ROI 중 다른 ROI들의 미용 피부 속성 상태에 비해 더 우수한 미용 피부 속성 상태를 디스플레이하는, 방법.
5. 제1항에 있어서, 상기 정의된 복수의 타일들의 각각의 타일에 대한 상기 단일의 표시의 정도와, 정의된 모집단의 사람들과 연관된 사전결정된 값 사이의 비교를 디스플레이하는 단계를 더 포함하는, 방법.
6. 제1항에 있어서, 상기 단계(e)에서의 디스플레이하는 단계는 상기 대상의 얼굴의 적어도 일부분의 제2 디지털 이미지 데이터와, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 상기 디스플레이된 복수의 타일들을 개재하는 단계를 포함하는, 방법.
7. 제1항에 있어서, 상기 미용 피부 속성은 피부 순도, 피부 연령, 피부 토포그래피, 피부 톤, 피부 색소침착, 피부 모공, 피부 염증, 피부 수화, 피부 피지 레벨, 여드름, 점(mole), 피부 윤기, 피부 광택, 피부 칙칙함, 및 피부 장벽으로 이루어진 군으로부터 선택되는, 방법.
8. 제1항에 있어서, 상기 미용 피부 속성은 시각적으로 인지할 수 없는 미용 피부 속성이고, 상기 시각적으로 인지할 수 없는 미용 피부 속성은 육안으로 검출가능하지 않은 미용 피부 속성, 또는 소비자에 의해 시각적으로 검출가능한 미용 피부 속성이지만, 상기 소비자가 상기 미용 피부 속성을 이해하지 못하는, 방법.
9. 제1항에 있어서, 상기 단일의 표시의 정도는 그래픽 심볼, 숫자 값, 색 코드, 조도(illumination) 및 이들의 조합들로 이루어진 군으로부터 선택되는, 방법.
10. 제1항에 있어서, 상기 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목을 디스플레이하는 단계를 더 포함하는, 방법.
11. 제1항에 있어서, 상기 분석하는 단계(c)에서, 피부 속성 인덱스(Skin Attribute Index)는 상기 대상의 피부의 상기 적어도 하나의 부분의 상기 미용 피부 속성의 상태를, 정의된 모집단의 사람들에 비하여 나타낸 확률 값으로서 생성되고, 바람직하게는, 상기 피부 속성 인덱스는 F(엔트로피 값)에 의해 정의되는 엔트로피 값의 함수로서 생성되며, 상기 함수는 훈련 데이터세트에 대해 확립된 모델에 의해 결정되며, 상기 훈련 데이터세트는: (i) 상기 정의된 모집단의 사람들의 복수의 색 채널 이미지들 - 상기 복수의 색 채널 이미지들의 각각은 상기 정의된 모집단의 사람들 중의 사람의 얼굴 피부를 포함하고, 상기 얼굴 피부는 상기 미용 피부 속성을 포함함 -; (ii) 상기 미용 피부 속성에 기초한 연관 부류(class) 정의를 포함하는, 방법.
12. 제11항에 있어서, 상기 대상의 연령 및 상기 정의된 모집단의 사람들의 평균 연령은 각각 독립적으로 18 내지 60세, 바람직하게는 20 내지 40세, 더 바람직하게는 25 내지 35세, 더욱 더 바람직하게는 28 내지 32세인, 방법.
13. 대상의 적어도 하나의 미용 피부 속성을 시각화하는 방법으로서, 상기 방법은
    a) 상기 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지를 디스플레이하는 단계;
    b) 상기 대상의 얼굴의 적어도 일부분의 제2 디지털 이미지 데이터와, 고유하게 할당된 단일의 표시의 정도를 각각 갖는 복수의 타일들을 개재하는 단계; 및
    c) 고유하게 할당된 단일의 표시의 정도를 각각 갖는 상기 복수의 타일들에 기초하여, 상기 대상의 얼굴의 상기 적어도 일부분의 적어도 하나의 관심 영역(ROI)을 상기 제2 디지털 이미지 상에 디스플레이하는 단계를 포함하며, 상기 적어도 하나의 ROI는 눈 주위의 피부 영역, 볼 주위의 피부 영역, 입 주위의 피부 영역, 및 이들의 조합들로 이루어진 군으로부터 선택되고, 디스플레이하는 단계는 2개 또는 3개의 ROI를 디스플레이하는 단계를 포함하고, 상기 2개 또는 3개의 ROI들 중 하나의 ROI는 상기 2개 또는 3개의 ROI들 중 다른 ROI들과 서로 상이한 경계선을 갖고, 상기 2개 또는 3개의 ROI 중의 상기 적어도 하나의 ROI의 상기 디스플레이된 경계선은, 상기 2개 또는 3개의 ROI 중 상기 적어도 하나의 ROI가, 상기 2개 또는 3개의 ROI 중의 상기 다른 ROI들의 각각의 미용 피부 속성에 비해 더 나은 미용 피부 속성 상태를 가짐을 나타내는, 방법.
14. 적어도 하나의 미용 피부 속성을 치료하기 위한 제품 추천을 제공하기 위한 그래픽 사용자 인터페이스로서, 상기 그래픽 사용자 인터페이스는 터치 스크린 디스플레이/입력 디바이스를 갖는 디스플레이 및 이미지 획득 디바이스를 포함하는 휴대용 전자 장치 상에 있으며, 상기 그래픽 사용자 인터페이스는:
    상기 이미지 획득 디바이스로부터 획득된 상기 대상의 얼굴의 적어도 일부분의 제1 디지털 이미지 및 상기 제1 디지털 이미지 상에 개재된 제2 디지털 이미지를 디스플레이하는 터치 스크린 디스플레이의 제1 영역 - 상기 제2 디지털 이미지는 상기 대상의 얼굴의 상기 적어도 일부분을 갖고, 상기 디스플레이된 복수의 타일들은 고유하게 할당된 단일의 표시의 정도를 각각 가짐 -; 및
    상기 제1 영역과 상이한, 상기 터치 스크린 디스플레이의 제2 영역을 포함하고, 상기 제2 영역은 사용자 입력을 수신하기 위한 선택가능한 아이콘을 디스플레이하며, 상기 사용자가 상기 선택가능한 아이콘을 활성화하는 경우, 상기 디스플레이된 미용 피부 속성을 치료하기 위한 적어도 하나의 제품 추천 항목의 이미지가 상기 터치 스크린 디스플레이 상에 디스플레이되는, 그래픽 사용자 인터페이스.
15. 제14항에 있어서, 상기 적어도 하나의 미용 피부 속성은 시각적으로 인지할 수 없는 미용 피부 속성이고, 상기 시각적으로 인지할 수 없는 미용 피부 속성은 육안으로 검출가능하지 않은 미용 피부 속성, 또는 소비자에 의해 시각적으로 검출가능한 미용 피부 속성이지만, 상기 소비자가 상기 미용 피부 속성을 이해하지 못하는, 그래픽 사용자 인터페이스.

Images