CN107925725B - 显示装置以及该显示装置的控制方法 - Google Patents

显示装置以及该显示装置的控制方法 Download PDF

Info

Publication number
CN107925725B
CN107925725B CN201680050978.6A CN201680050978A CN107925725B CN 107925725 B CN107925725 B CN 107925725B CN 201680050978 A CN201680050978 A CN 201680050978A CN 107925725 B CN107925725 B CN 107925725B
Authority
CN
China
Prior art keywords
skin
user
photo
photo content
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680050978.6A
Other languages
English (en)
Other versions
CN107925725A (zh
Inventor
孙柱荣
金在珍
金知胤
D-Y.玄
金璇儿
朱佳贤
洪泰和
金烘逸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107925725A publication Critical patent/CN107925725A/zh
Application granted granted Critical
Publication of CN107925725B publication Critical patent/CN107925725B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425—Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Abstract

一种显示装置，包括：显示器，其显示包括包含用户脸部的多个照片内容的屏幕；以及处理器，被配置为参考与皮肤相关的预设事件已经发生的时间、基于多个照片内容的拍摄时间来控制显示器可区分地显示多个照片内容。

Description

显示装置以及该显示装置的控制方法
技术领域
与本文公开的相一致的设备和方法涉及显示装置及其控制方法，并且更具体地，涉及被配置为拍摄照片的显示装置及其控制方法。
背景技术
随着电子技术的发展，开发了各种类型的显示装置。具体地，诸如TV、PC、膝上型计算机、平板PC、蜂窝电话、MP3播放器等的显示装置展示出高分配率(distribution rate)，使得大多数的家庭使用这样的装置。
近来，为了满足要求新的和各种功能的用户需求，已经进行了将显示装置进一步开发到更新的形式的努力。例如，提供了使用在诸如智能电话的用户终端装置上的照相机的各种服务。
发明内容
技术问题
示例实施例解决了本领域中的某些缺点。
根据示例实施例，提供了显示装置及其控制方法，该显示装置允许通过参考皮肤相关事件发生的时间来区分经皮肤分析的照片内容来容易地比较皮肤相关事件之前和之后的皮肤状况并提供结果。
技术方案
根据示例实施例，显示装置包括：显示器，被配置为显示包括包含用户脸部的多个照片内容的屏幕；以及处理器，被配置为参考已经发生预设事件的时间、基于多个照片内容的拍摄时间来控制显示器可区分地显示多个照片内容。
显示装置可以另外地包括被配置为接收用户命令的输入的用户界面。当响应于所接收的用户命令，从在预设事件发生的时间之前拍摄的照片内容当中选择第一照片内容，并且从在预设事件发生的时间之后拍摄的照片内容当中选择第二照片内容时，处理器可以被配置为提供将被包含在所选择的第一照片内容和第二照片内容中的每一个照片内容中的用户脸部的皮肤状况进行比较的用户界面(User Interface，UI)屏幕。
处理器可以被配置为显示指示在发生预设事件的时间之前和之后拍摄的照片内容之间的预设事件的图形用户界面(Graphic User Interface，GUI)，以便参考预设事件发生的时间来可区分地显示多个照片内容。
显示装置可以另外地包括被配置为接收用户命令的输入的用户界面。当基于用户命令选择GUI时，处理器可以被配置为从在预设事件发生的时间之前拍摄的照片内容当中选择第三照片内容，从在预设事件发生的时间之后拍摄的照片内容当中选择具有与第三照片内容的拍摄条件类似的拍摄条件的第四照片内容，以及提供将分别被包含在所选择的第三照片内容和第四照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
拍摄条件可以包括脸部大小、脸部角度、脸部表情、化妆或没化妆、存在或不存在配件、和拍摄照明中的至少一个。
与皮肤相关的预设事件可以包括皮肤护理事件、皮肤治疗事件、与皮肤相关的产品购买事件、与影响皮肤的位置的改变相关的事件、与影响皮肤的天气相关的事件、与影响皮肤的食物消耗相关的事件、和假期事件中的至少一个。
处理器可以被配置为基于在预设日历上输入的皮肤相关事件、被包括在文本消息中的皮肤相关事件、GPS信息和被包括在照片内容或输入中的食物相关信息中的至少一个来确定预设事件。
当在包括多个照片内容的图库屏幕(gallery screen)上选择皮肤模式时，处理器可以被配置为仅过滤经皮肤分析的照片内容，并且参考与皮肤护理相关的预设事件发生的时间来可区分地显示经过滤的照片内容。
处理器可以被配置为向经皮肤分析的照片内容添加图形用户界面(GUI)，以可区分地显示来自图库屏幕上的多个照片内容的其余照片内容的经皮肤分析的照片内容。
当从被提供用于拍摄的预览屏幕检测到至少一个脸部时，处理器可以被配置为显示关于与预先注册的用户脸部匹配或不匹配的菜单按钮和关于化妆或没化妆的菜单按钮中的至少一个。
在一个示例实施例中，提供了一种控制显示装置的方法，该方法可以包括：接收命令；并且响应于接收到该命令，参考与皮肤相关的预设事件发生的时间、基于拍摄时间来可区分地显示包含用户脸部的多个照片内容。
当基于所接收的命令从在预设事件发生的时间之前拍摄的照片内容当中选择第一照片内容并且从在预设事件发生的时间之后拍摄的照片内容当中选择第二照片内容时，该方法可以另外地包括提供将被包含在所选择的第一照片内容和第二照片内容中的每一个照片内容中的用户脸部的皮肤状况进行比较的用户界面(UI)屏幕。
显示可以包括显示指示在预设事件发生的时间之前和之后拍摄的照片内容之间的预设事件的图形用户界面(GUI)，使得多个照片内容参考预设事件发生的时间而被可区分地显示。
当基于所接收的用户命令来选择GUI时，该方法可以另外地包括：从在预设事件发生的时间之前拍摄的照片内容当中选择第三照片内容，并且从在预设事件发生的时间之后拍摄的照片内容当中选择具有与第三照片内容的拍摄条件类似的拍摄条件的第四照片内容，并且提供将分别被包含在所选择的第三照片内容和第四照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
拍摄条件可以包括脸部大小、脸部角度、脸部表情、化妆或没化妆、存在或不存在配件、和拍摄照明中的至少一个。
此外，与皮肤相关的预设事件可以包括皮肤护理事件、皮肤治疗事件、与皮肤相关的产品购买事件、与影响皮肤的位置的改变相关的事件、与影响皮肤的天气相关的事件、与影响皮肤的食物消耗相关的事件、和假期事件中的至少一个。
此外，该方法可以包括基于在预设日历上输入的皮肤相关事件、被包括在文本消息中的皮肤相关事件、GPS信息和被包括在照片内容或输入中的食物相关信息中的至少一个来确定预设事件。
此外，当在包括多个照片内容的图库屏幕上选择皮肤模式时，所述显示可以包括仅过滤经皮肤分析的照片内容，并且参考与皮肤护理相关的预设事件发生的时间来可区分地显示照片内容。
此外，显示可以包括向经皮肤分析的照片内容添加GUI以从图库屏幕上的多个照片内容的其余照片内容识别经皮肤分析的照片内容，并显示结果。
此外，当在被提供用于拍摄的预览屏幕检测到至少一个脸部时，该方法可以包括显示关于与预先注册的用户脸部匹配或不匹配的菜单按钮和关于化妆或没化妆的菜单按钮中的至少一个。
发明的有益效果
根据以上各种示例实施例，能够增强用户便利性并且可以提供用于皮肤相关服务的优化的UI屏幕。
附图说明
从结合附图的以下详细描述中，上述和/或其它方面将更加明显，其中相似的参考标记表示相似的元素，并且其中：
图1A是示出根据示例实施例的显示装置的示例的示图；
图1B是示出根据另一示例实施例的显示装置的示例的示图；
图2A是示出根据示例实施例的示例显示装置的框图；
图2B是示出图2A的显示装置的示例的框图；
图2C是示出存储在储存器(storage)中的各种模块的示例的示图；
图3A和图3B是示出根据各种示例实施例的服务的示例的示图；
图4A和图4B是示出根据示例实施例的用于在日历上输入皮肤相关日程的示例方法的示图；
图5A和图5B是示出根据示例实施例的示例UI屏幕的示图；
图6是示出根据另一示例实施例的示例UI屏幕的示图；
图7A至图7C是示出根据另一示例实施例的用于从消息提取皮肤相关事件的示例方法的示图；
图8是示出根据另一示例实施例的示例UI屏幕的示图；
图9是示出根据另一示例实施例的示例UI屏幕的示图；
图10是示出根据另一示例实施例的用于基于GPS信息提取皮肤相关事件的示例方法的示图；
图11是示出根据另一示例实施例的示例UI屏幕的示图；
图12A和图12B是示出根据示例实施例的用于提供皮肤分析结果的示例方法的示图；
图13A至图13C是示出根据另一示例实施例的用于提供皮肤分析结果的示例方法的示图；
图14A、图14B、图15A和图15B是示出根据另一示例实施例的用于提供皮肤分析结果的示例方法的示图；
图16A到图16C和图17是示出根据各种示例实施例的被提供在预览屏幕上的示例UI的示图；
图18是示出根据示例实施例的控制显示装置的示例方法的流程图；以及
图19是示出根据各种示例实施例的网络环境的示例的示图。
具体实施方式
用于本发明的模式
现在将参考附图更详细地描述本公开的某些示例实施例。
在以下描述中，即使在不同的附图中，相同的参考标记也用于相同的元素。提供在描述中定义的事项，诸如详细的结构和元素，以帮助对本公开的全面理解。因此，显然能够在没有那些具体地定义的事项的情况下实施本公开的示例实施例。而且，如果众所周知的功能或结构以不必要的细节模糊了本公开，则可能不会对其进行详细地描述。
图1A是示出根据示例实施例的显示装置的示例的示图；
如图1A所示，显示装置100可以采取诸如智能电话的便携式电话的形式，但是不限于此。因此，可以实施具有显示功能的各种类型的设备，诸如平板个人计算机(PersonalComputer，PC)、移动电话、电子书、台式个人计算机(PC)、笔记本个人计算机(PC)、上网本计算机、个人数字助理(Personal Digital Assistant，PDA)、便携式多媒体播放器(PortableMultimedia Player，PMP)、MP3播放器、移动医疗设备、照相机、摄像机、电子框架、可穿戴设备(例如，头戴式设备(Head Mounted Device，HMD)、智能手表、电子织物、电子手镯、电子项链)、近眼显示器(Head Mounted Device，NED)、大型显示器(Large Form Display，LFD)、数字标牌、数字信息显示器(Digital Information Display，DID)、电视墙、投影仪显示器等。此外，显示装置100可以包括嵌入式触摸屏，使得能够用手指或者笔(例如，手写笔)来实施程序。
显示装置100可以提供关于被包括在照片内容中的用户脸部的皮肤分析和皮肤护理服务。针对以上情况，显示装置可以被实施为存储用于提供皮肤分析和皮肤护理服务的各种程序。
例如，根据示例实施例的皮肤分析和皮肤护理服务可以以应用形式而被提供，该应用形式例如可以是由用户在OS上直接使用的软件，并且可以在显示装置100屏幕上以图标界面形式来提供该应用。然而，示例实施例不限于此，并且因此，可以根据显示装置100的实施方式以各种形式来提供皮肤分析和皮肤护理服务。
图1B是示出根据另一示例实施例的显示装置的示例的示图。
根据另一示例实施例，显示装置100可以被实施为通过通过网络10与服务器200通信来提供服务。本文中，显示装置100可以以与图1A的实施例相同的形式而被实施，为了简洁将不再进一步解释。
根据图1B的示例性实施例，显示装置100可以提供用于提供皮肤分析和皮肤护理服务的UI屏幕，并且可以通过服务器200来执行照片内容皮肤分析。
例如，当将用于皮肤分析的照片内容从显示装置100发送到服务器200时，服务器200可以执行关于照片内容的用户脸部区域的皮肤分析，并且将结果提供给显示装置100。从而，服务器200可以被实施为执行与在图1A中解释的皮肤分析相关的功能。
服务器200可以被实施为例如云服务器，但是不限于此。“云计算”可以是指例如基于云的计算技术。例如，它可以是基于网络的软件服务，其在因特网的公用数据(utilitydata)服务器上保存程序，每当必要时在计算机或便携式电话上调用和使用该程序。当服务器200被实施为云服务器时，服务器200可以被实施为能够进行各种产品销售和广告服务以及简单的信息管理的形式。此外，根据物理实施形式，服务器200可以被实施为在外部服务器或用户终端装置100内提供的嵌入式服务器。
然而，为了便于解释，将基于图1A中示出的各种实施例在下面更详细地描述各种实施例。
图2A是示出根据示例实施例的示例显示装置的框图。
参考图2A，显示装置100可以包括显示器110和处理器120。
显示器110可以显示各种内容，诸如静止图像、视频、文本、音乐、包括各种内容的应用实施屏幕、图形用户界面(GUI)屏幕等。
例如，根据示例实施例，显示器110可以显示用于提供皮肤分析和护肤护理服务的各种UI屏幕。下面将参考附图描述UI屏幕的各种示例。
此外，显示器110可以显示图像，例如，通过照相机模块(未示出)拍摄的预览图像。根据示例，可以在显示的图像上选择特定区域，在这种情况下，显示器110可以显示关于对应的区域的扩展的或详细的拍摄图像。例如，扩展的图像可以是放大并且然后拍摄所选择的区域的图像，详细的拍摄图像可以是聚焦和放大并且然后拍摄对应的区域的图像。
在这种情况下，显示器110可以被实施为各种形式的显示面板，例如但没有限制，液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-EmittingDiode，OLED)、硅上液晶显示(Liquid Crystal on Silicon，LCoS)、数字光处理(DigitalLight Processing，DLP)和量子点(Quantum Dot，QD)显示面板等。例如，显示器110可以被实施为触摸屏形式，其与触摸板形成夹层(inter-layer)结构。在该示例中，显示器110可以被用作如上所述的用户界面(未示出)以及输出设备。触摸屏可以例如被配置为除了触摸输入位置和空间区域之外还检测触摸输入压力。
处理器120可以控制显示装置100的整体操作。
[照片内容中包括的用户脸部的皮肤分析]
处理器120可以使用例如预先安装的应用来提供各种皮肤分析服务。
“皮肤分析服务”可以是指例如从所拍摄的照片内容分析关于用户脸部区域的皮肤状况并提供所分析的结果的服务。
例如，显示装置100可以从用户脸部测量和分析各种皮肤状况，诸如毛孔、痤疮、色素沉着、肤色、黑眼圈、皱纹等。针对以上情况，根据各种示例，处理器120可以被配置为执行详细的拍摄操作，以聚焦、放大并拍摄对应的区域，以便详细地拍摄用户脸部的一个区域。
例如，处理器120可以被配置为执行关于被包括在所拍摄的图像中的脸部区域的识别，并且执行关于所识别的脸部区域的皮肤分析。
例如，当所拍摄的图像被识别为预先注册的用户的脸部时，显示装置100可以执行关于对应的脸部区域的皮肤分析。在该示例中，显示装置100可以仅当在所拍摄的图像中包括的脸部区域满足某些示例预设条件(例如，脸部大小、脸部方向、或存在或不存在配件(例如，眼镜)))时执行皮肤分析。然而，根据各种示例，可以仅执行关于在特定拍摄条件下拍摄的图像的皮肤分析。
处理器120可以被配置为当用户脸部被识别时分析关于至少一个分析项目的用户脸部区域的皮肤。在该示例中，处理器120可以仅当在所拍摄的图像中包括的脸部满足预设条件时才执行皮肤分析。例如，只有当脸部区域的大小等于或大于预设大小时才可以执行皮肤分析。
分析项目可以包括例如诸如色素沉着、斑点、雀斑、肤色、皱纹、黑眼圈等的各种项目。在该示例中，要被分析的项目可以是在制造显示装置100时或者在安装应用程序时默认设置的项目。然而，根据各种示例，要被分析的项目可以是由用户从能够在显示装置100中被分析的项目当中选择的项目。
此外，处理器120可以被配置为仅执行关于能够从所拍摄的图像分析的项目的皮肤分析。
例如，当仅从所拍摄的图像中确认在眼睛附近中的区域时，显示装置100可以执行关于能够从眼睛附近中的区域分析的项目的皮肤分析，诸如，皱纹、黑眼圈等。又例如，仅从所拍摄的图像中确认脸颊区域的显示装置100可以仅执行关于能够从脸颊区域分析的项目(例如色素沉着、斑点、雀斑、肤色等)的皮肤分析。
处理器120可以被配置为生成并提供表示关于用户脸部区域的皮肤分析结果的UI屏幕，并用各种方法示出所分析的结果。
例如，处理器120可以生成UI屏幕，以用颜色来区分每个分析项目，使得例如痤疮以红色表示、色素沉着以蓝色表示等，并且然后提供分析项目。此外，处理器120可以生成UI屏幕，以确认预先分析的结果，例如，以绿色或蓝色表示改善的区域，以及以红色表示恶化的脸部区域，并且提供预先分析的结果。根据各种示例，当与特定脸部区域相对应的区域或者根据分析项目或所分析的结果以颜色区分的区域从所拍摄的图像中被选择时，处理器120可以提供关于所选择的脸部区域的详细分析的图像。
[提供基于皮肤相关事件的UI屏幕]
处理器120可以被配置为显示参考与皮肤相关的预设事件已经发生的时间来区分和提供包括用户脸部的多个照片内容的屏幕。
在该示例中，处理器120可以被配置为基于用每个照片内容标记的拍摄时间信息来确定每个照片内容被拍摄时的时间点。例如，处理器120可以从用照片内容标记的可交换图像文件形式(Exchangeable Image File Form，EXIF)信息确定照片内容被拍摄的时间点。另外地，EXIF信息可以包括诸如照相机类型、光圈数、快门速度、曝光校正值等的信息。
与皮肤相关的预设事件可以包括皮肤护理事件、皮肤治疗事件、皮肤产品购买事件、与影响皮肤的位置的改变相关的事件、与影响皮肤的天气相关的事件、与影响皮肤的食物消耗相关的事件和假期事件中的至少一个。
皮肤护理事件可以包括例如涉及皮肤科(dermatology)或护肤店的使用的皮肤护理事件、涉及家庭护理(按摩护理设备)的使用的皮肤护理事件以及涉及温泉(hot spring)或水疗(spa)的皮肤护理事件。皮肤治疗事件可以包括在皮肤科诊所、皮肤护理店或私人住宅中进行的诸如剃刀治疗或药物治疗的皮肤治疗的事件。
与皮肤相关的产品购买事件可以例如是购买诸如精华(essence)和面霜(cream)的面膜(mask pack)或化妆品的事件。影响皮肤的位置的改变事件可以例如是访问示出了与居住的位置的天气不同的天气的位置(例如，诸如具有高紫外线的外国或者具有更冷天气的外国的影响皮肤的位置)的事件。假期事件可以包括例如在没有压力的情况下待在家中度过假期并且放弃外出的情况或者假期进行国内旅行或者海外旅行的情况。影响皮肤的天气改变事件可以包括快速温降或温升、降雪或降雨等的事件。可以包括能够影响皮肤的各种其他事件。
影响皮肤的天气相关事件可以包括例如能够影响皮肤的各种天气相关事件，诸如湿度、温度、细尘指数、紫外线指数等。
影响皮肤的食物消耗事件可以包括例如各种食物消耗事件，这些事件可以例如由用户手动输入或从所拍摄的图片中识别，并且能够影响皮肤。例如，可以是消耗影响皮肤的食物(诸如酒、碳酸饮料、油腻食物、保健食品等)的情况。
处理器120可以被配置为基于在预设日历上输入的皮肤相关事件、被包括在文本消息中的皮肤相关事件、GPS信息和被包括在照片内容中或由用户输入的食物相关信息中的至少一个来确定对应的事件是否已经发生。
例如，当用户驱动日历应用并在日历屏幕上输入皮肤相关事件(例如，皮肤科，7月5日)时，处理器120可以被配置为基于输入来确定对应的事件是否已经发生。此外，当接收到关于购买化妆品的支付文本消息时，处理器120可以识别购买的接收并确定对应的事件的发生。例如，可以使用诸如光学消息读取器(Optical Message Reader，OCR)、磁性消息读取器(Magnetic Message Reader，MICR)和光学标记读取设备(Optical Mark ReadingDevice，OMR)等的相关消息读取技术来读取消息描述。
处理器120可以预先存储各种标准术语，以确定皮肤相关事件的发生。例如，与皮肤相关的各种术语(诸如皮肤、皮肤科、化妆品、无化妆脸部、精华、面膜、激光、护理、护理店、乳液、面霜、填充物等)可以被数据库化(Databased，DBed)和存储。此外，处理器120可以数据库化由用户输入的皮肤相关术语。例如，当用户输入用户将要去的皮肤科诊所的名称或用户将要使用的化妆品的名称时，对应的术语可以被数据库化(DBed)。
当从日历上输入的日程或消息描述(例如，支付描述、预约描述、进展查询描述(例如，询问皮肤科治疗之后的进展的消息描述))识别到对应的项目时，处理器120可以确定对应的事件是皮肤相关事件。
处理器120可以基于例如记录显示装置100的移动位置的信息和用照片内容标记的GPS信息来确定影响皮肤的位置的改变事件或假期事件。
此外，处理器120可以基于从天气应用或天气相关服务器获得的天气信息来确定影响皮肤的天气改变事件。
当例如如上所述确定了各种皮肤相关事件时，处理器120可以显示指示在发生对应的事件的时间之前和之后拍摄的照片内容之间的对应的事件的识别信息，因此基于预设事件发生的时间可区分地显示多个照片内容。
当在包括多个照片内容的图库屏幕上选择皮肤模式时，处理器120可以仅过滤经皮肤分析的照片内容，并且参考与皮肤护理相关的预设事件发生的时间来可区分地显示照片内容。在该示例中，皮肤模式可以通过单独的菜单按钮(例如，在图库屏幕上提供的菜单按钮)来选择。
在该示例中，处理器120可以与图库屏幕上的多个显示的照片内容当中的其他照片内容可区分地显示经皮肤分析的照片内容。例如，处理器120可以将预设GUI添加到经皮肤分析的照片内容并显示它。该GUI可以包括预设图标、预设符号、预设界限等。
然而，示例实施例不限于上面提供的示例。处理器120可以基于诸如不同地显示照片内容的帧或者不同地显示照片内容的亮度等的各种方法来与其他内容可区分地显示经皮肤分析的照片内容。
处理器120可以仅在单独的文件夹中管理多个照片内容当中的经皮肤分析的照片内容。因此，可以通过仅选择对应的文件夹而不必选择单独的皮肤模式来向用户提供仅包括经皮肤分析的照片内容的图库屏幕。
处理器120可以基于接收诸如例如用户命令的命令来用各种标准过滤和提供照片内容。
例如，当输入用户命令(诸如指向仅查看室外照片、仅查看室内照片、仅查看其中脸部大小等于或大于预设大小的照片内容、或仅查看在其中脸部在正前方的照片内容的命令)时，在基于皮肤相关事件来可区分地提供照片内容的UI屏幕上，处理器120可以过滤并提供对应的照片内容。在该示例中，处理器120可以通过照片图像分析、标记EXIF信息分析等来过滤对应的照片内容。
[提供用于比较事件之前和之后的皮肤的UI屏幕]
当基于例如用户命令从皮肤相关事件发生的时间之前拍摄的照片内容当中选择第一照片内容时，以及当从皮肤相关事件发生的时间之后拍摄的照片内容当中选择第二照片内容时，处理器120可以提供将分别被包括在所选择的第一照片内容和第二照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
响应于基于用户命令来选择指示皮肤相关事件的GUI，处理器120可以从在对应的事件发生的时间之前拍摄的照片内容当中选择第三照片内容(例如，在对应的事件发生的时间之前拍摄的照片内容当中的最近拍摄的照片或者在近来拍摄的照片当中的拍摄条件最合适于预设条件的照片)。处理器120可以从在对应的事件发生的时间之后拍摄的照片内容当中选择第四照片内容，其中第四照片内容的拍摄条件与第三照片内容的拍摄条件类似，并且提供将分别被包括在所选择的第三照片内容和第四照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。拍摄条件可以包括用户脸部大小、用户脸部角度、化妆或没化妆、存在或不存在配件、以及拍摄照明当中的至少一个。
在该示例中，处理器120可以调整在对应的事件之前和之后拍摄的照片内容的布置位置和大小以适合各种环境，并提供该布置位置和大小。
例如，处理器120可以基于显示装置100的布置模式来确定在对应的事件之前和之后拍摄的照片内容的布置位置。
例如，当例如显示器装置100处于水平模式时，处理器120可以在屏幕的左侧提供在对应的事件之前拍摄的照片内容以及在屏幕的右侧提供在对应的事件之后拍摄的照片内容。例如，当例如显示器装置100处于垂直模式时，处理器120可以在屏幕的上侧提供在对应的事件之前拍摄的照片内容以及在屏幕的下侧提供在对应的事件之后拍摄的照片内容。
又例如，处理器120可以以相同的大小来提供在对应的事件之前拍摄的照片内容和对应的事件之后拍摄的照片内容以便于比较，但是不限于此。根据各种示例，处理器120可以以比在对应的事件之后拍摄的照片内容小的大小来提供在对应的事件之前拍摄的照片内容。
处理器120可以基于显示装置100的布置模式以不同的形式提供皮肤比较UI屏幕。例如，处理器120可以提供将在对应的事件之前拍摄的照片内容与在对应的事件之后拍摄的照片内容进行比较的UI屏幕。此外，当显示装置100改变为垂直模式时，其可以基于皮肤比较结果以文本形式来提供皮肤比较结果、或提供皮肤护理推荐信息。
处理器120可以基于所接收的命令(例如，诸如用户命令(例如，触摸交互))来调整每个照片内容的大小。在该示例中，处理器120可以基于照片内容的大小来以不同形式提供皮肤分析信息。例如，处理器120可以在照片内容等于或大于预设大小时以图像形式提供分析信息，并且在照片内容小于预设大小时以文本形式提供分析信息。例如，处理器120可以用特定颜色突出并提供脸颊附近的色素沉着区域，或者提供诸如“左脸颊的色素沉着增加”或“左脸颊的周围区域：两个色斑”的文本形式。
[提供与拍摄相关的UI屏幕]
处理器120可以在拍摄完成屏幕和用于拍摄的预览屏幕上提供各种菜单以提供根据示例实施例的皮肤分析和皮肤护理。
当在用户脸部未被注册的同时拍摄到包括满足预设条件的人脸的照片时，处理器120可以在拍摄完成之后立即提供确认人脸是否是用户脸部的UI菜单。例如，当询问所拍摄的脸部是否是用户脸部时，可以基于所拍摄的脸部来提供将比较和管理皮肤改变的通知。此后，处理器120可以在确认时注册用户脸部，并且将用户脸部存储为用于皮肤分析/改变管理的对象图像。
当在用户脸部被注册的状态下从用于拍摄的预览图像中检测到至少一个脸部时，处理器120可以在预览屏幕上显示关于匹配预先注册的用户脸部或者不匹配预先注册的用户脸部的菜单按钮和关于存在或不存在化妆的菜单按钮中的至少一个菜单按钮。
例如，当从预览图像中检测到一个脸部并且确定所检测的脸部匹配注册的用户脸部时，处理器120可以在屏幕上提供选择脸部是有化妆还是没有化妆的GUI按钮。拍摄可以在用户选择完成之后被执行。在该示例中，当对应的GUI按钮被选择并且然后快门按钮被选择时照片可以被存储。或者，屏幕可以被提供被自动地选择的快门按钮，在这种情况下能够自动地执行拍摄，即只需要对应的GUI按钮的操作。
作为另一示例，当从预览图像检测到一个脸部并且当所检测的脸部不匹配注册的用户脸部时，处理器120可以提供确认用户的GUI按钮以及选择脸部是有化妆还是没有化妆GUI按钮。在该示例中，可以仅在确认用户之后就执行拍摄，然后再确认脸部是有化妆还是没有化妆。再次，屏幕可以被提供被自动地选择的快门按钮，在这种情况下，可以仅通过需要对应的GUI按钮的连续操作来自动地执行拍摄。
作为另一示例，当从预览图像中检测到多个脸部时，处理器120可以显示识别匹配注册的用户脸部的脸部的GUI，并且靠近所识别的脸部提供选择脸部是有化妆还是没有化妆的GUI按钮。在该示例中，处理器120可以仅执行关于多个所检测的脸部当中的匹配注册的用户脸部的脸部的皮肤分析。
此外，当在多个所检测的脸部当中不存在匹配注册的用户脸部的脸部时，处理器120可以显示选择用于皮肤分析的脸部的GUI并且执行关于所选择的脸部的皮肤分析。
[服务的实施方式]
根据上述示例实施例的服务可以是由相关应用的互操作功能提供的服务形式。但是，它可以采用从新的应用提供的服务形式。
例如，相关的图库应用可以与日历应用互操作，并且通过日历应用的皮肤相关日程输入可以被应用于图库应用。然而，当使用文本消息阅读功能(或邮件阅读功能)时，文本消息应用(或邮件应用)可以被另外地互操作。此外，当使用照相机拍摄功能时，照相机应用可以被另外地互操作。
作为另一示例，根据示例实施例的所有服务可以被实施为单独的新的应用，例如皮肤护理应用，其提供在对应的应用内提供图库功能的UI屏幕、提供日历功能的UI屏幕和照相机拍摄功能。在该示例中，因为通过提供日历功能的UI屏幕的所有日程输入被确定为与皮肤相关的日程。因此，关于日程的另一确定可能没有必要。而且，只有一些功能可以在对应的应用中实施，并且其他功能可以通过互操作相关应用来使用。
图2B是示出图2A中所示出的显示装置的示例的框图。
参考图2B，显示装置100'可以包括显示器110、处理器120、储存器130、用户界面140、(例如，包括通信电路的)通信器150和照相机160。本文将不提供关于图2B中示出的与图2A中示出的元件重叠的元件的进一步解释。
处理器120可以包括例如RAM 121、ROM 122、主CPU 123、图形处理器124、第一接口125-1至第(n)接口125-n、以及总线126。
RAM 121、ROM 122、主CPU 123、图形处理器124、以及第一接口125-1至第(n)接口125-n可以通过总线126彼此连接。
第一接口125-1至第(n)接口l2S-n可以被连接到上述元件。接口中的一个接口可以是通过网络连接到外部设备的网络接口。
主CPU 123可以访问储存器130，并且通过使用储存器130中存储的O/S来执行启动。此外，主CPU可以通过使用存储在储存器130中的各种程序、内容和数据来执行各种操作。
ROM 122可以存储用于系统启动的命令集。当输入接通命令并且提供电源时，主CPU 123可以根据存储在ROM 122中的命令将储存器140中的所存储的O/S复制到RAM 121，并通过实施O/S来启动系统。当启动完成时，主CPU 123可以将存储在储存器130中的各种程序复制到RAM 121，并通过实施复制到RAM 121的程序来执行各种操作。
图形处理器124可以通过使用计算器(未示出)和渲染器(未示出)来生成包括诸如图标、图像和文本的各种对象的屏幕。计算器(未示出)可以基于所接收的控制命令来根据屏幕的布局来计算将要显示的每个对象的诸如坐标值、形状、大小和颜色的特征值。渲染器(未示出)可以基于在计算器(未示出)中所计算的特征值来生成包括对象的屏幕的各种布局。
同时，通过存储在储存器130中的程序可以执行处理器120的上述操作。
储存器130可以存储诸如驱动显示装置100'的O/S(操作系统)软件模块的各种数据和各种多媒体内容。下面将解释使用存储在储存器130中的程序的处理器120的更详细的操作。
图2C是示出可以存储在储存器中的各种示例模块的示图。
参考图2C，储存器130可以存储包括基本模块131、感测模块132、通信模块133、呈现模块134、网页浏览器模块135、服务模块136、图像分析模块137和皮肤分析模块138的软件。
‘基本模块131’是指处理从在显示装置100'中包括的每个硬件递送的信号并将所处理的信号递送到上层模块的基本模块。基本模块131可以包括存储模块131-1、安全模块131-2和网络模块131-3。存储模块131-1是管理数据库或注册表的程序模块。主CPU 123可以通过使用存储模块131-1来访问储存器130内的数据库，并且读取各种数据。安全模块131-2可以是支持硬件认证、请求允许和安全存储的程序模块。网络模块131-3可以是支持网络连接的模块，并且包括DNET模块和UPnP模块。
感测模块132可以是从各种传感器收集信息、分析和管理所收集的信息的模块。感测模块132可以包括头部方向识别模块、脸部识别模块、语音识别模块、运动识别模块、触摸识别模块、手势识别模块和NFC识别模块。
通信模块133可以被提供以外部地执行通信。通信模块133可以包括诸如信使(messenger)程序、短消息服务(Short Message Service，SMS)&多媒体消息服务(Multimedia Message Service，MMS)程序和电子邮件程序的消息发送模块133-1，以及包括呼叫信息聚合器程序模块和VoIP模块的呼叫模块133-2。
呈现模块134可以是创建显示屏幕的模块。呈现模块134可以包括再现和输出多媒体内容的多媒体模块134-1以及执行UI和图形处理的UI渲染模块134-2。多媒体模块134-1可以包括播放器模块、摄像机模块和声音处理模块。从而，多媒体模块134-1可以执行通过再现各种多媒体内容来生成和再现屏幕和声音的操作。UI渲染模块134-2可以包括组合图像的图像合成器模块、在图像将要被显示的屏幕上组合坐标的坐标组合模块、从硬件接收各种事件的X11模块以及提供用于以2D或3D形式组成UI的工具的2D/3D UI工具箱。
网页浏览器模块135是指通过执行网页浏览来访问网页服务器的模块。网页浏览器模块135可以包括诸如组成网页的网页浏览模块、执行下载的下载代理模块、书签模块和webkit模块的各种模块。
服务模块136可以是包括各种应用以提供各种服务的模块。例如，服务模块136可以包括诸如SNS程序、内容再现程序、游戏程序、电子书程序、日历程序、警报管理程序以及其他小部件的各种程序。
可以提供图像分析模块137以通过分析所拍摄的图像来识别用户脸部。在该示例中，图像分析模块137可以存储脸部识别算法。例如，图像分析模块137可以通过该通过使用脸部识别算法的脸部建模技术来从所拍摄的图像中识别眼睛区域。本文中，“脸部建模技术”可以是指例如处理在所拍摄的图像中包括的脸部图像并且转换成用于传输的数字信息的分析处理；可以使用主动形状建模(Active Shape Modeling，ASM)技术和主动外观建模(Active Appearance Modeling，AAM)技术中的一个。
可以提供皮肤分析模块138以分析关于至少一个分析项目的用户脸部区域的皮肤。本文中，分析项目可以包括诸如色素沉着、斑点、雀斑、肤色、皱纹、黑眼圈等各种项目。在这种情况下，皮肤分析模块138可以存储关于要被分析的项目的信息以及每项目的分析算法。
虽然图2C示出了各种程序模块，但是所示出的各种程序模块可以被部分地移除和修改，或者可以基于显示装置100'的类型和特征来添加新的程序模块。例如，它可以被实施为还包括位置基本模块以通过与诸如GPS芯片的硬件进行互操作来支持位置基本服务。
此外，储存器130可以存储皮肤分析信息和用户识别信息。
皮肤分析信息可以包括例如基于上述各种分析项目的用户脸部区域的皮肤的分析。例如，皮肤分析信息可以包括分析特定脸部区域是否包括色素沉着、肤色、斑点或痤疮的信息，关于根据各个项目的预先分析的信息以及表示关于根据时间顺序的每个脸部区域的皮肤分析结果的历史信息。
用户识别信息可以是识别特定用户脸部的信息。从而，用户识别信息可以包括用户的普通脸部图像以及关于被包括在脸部区域中的脸部部分(例如，眼睛、鼻子、嘴唇)的图像。例如，处理器120可以使用用户识别信息来识别用户，并将来自所拍摄的图像的所识别的眼睛区域与先前存储的用户眼睛区域进行比较。
用户界面140可以接收各种用户命令。
例如，用户界面140可以使用各种接口电路(包括例如触摸板或触摸屏)来实施，并且被实施为接收用于控制用户终端装置100的用户触摸交互。
例如，用户界面140可以接收通过触摸屏提供的关于各种UI屏幕的用户交互。UI屏幕可以是用于提供根据实施例的皮肤分析和皮肤护理的各种UI屏幕。在该示例中，UI屏幕可以以诸如像图像、视频、文本和音乐的各种内容再现屏幕、包括各种内容的应用实施屏幕、网页浏览器屏幕和图形用户界面(GUI)屏幕的各种形式来实施。
通信器150可以执行与外部设备(未示出)的通信。本文中，通信器150可以通过各种通信电路和方法(诸如，例如但没有限制，蓝牙(Bluetooth，BT)、无线保真(WirelessFidelity，WI-FI)、Zigbee、红外(Infrared，IR)、串行接口、通用串行总线(UniversalSerial Bus，USB)、近场通信(Near Field Communication，NFC)等)来执行与外部设备的通信。外部设备(未示出)可以包括各种外部服务器以及各种电子设备。
例如，当预设事件已经发生时，通信器150可以基于预先定义的通信方法通过执行与外部设备(未示出)的通信来以互操作状态操作。本文中，“互操作”可以是指例如在其中通信可用的任何状态，诸如初始化显示装置100'和外部设备(未示出)之间的通信的操作、形成网络的操作、执行设备配对的操作等。例如，显示装置100'的设备识别信息可以被提供给外部设备(未示出)，并且可以执行两个设备之间的配对过程。例如，当在用户终端装置100中已经发生预设事件(例如，设备选择命令、设备接通命令)时，通信器150可以通过数字生活网络联盟(Digital Living Network Alliance，DLNA)技术来搜索周围设备，并且可以通过执行与所搜索的设备的配对来以互操作状态操作。
例如，当外部服务器200根据图1B的示例实施例执行皮肤分析时，通信器150可以将用于皮肤分析的照片内容发送到服务器200，并且接收其中关于照片内容的用户脸部执行皮肤分析的结果。
照相机160可以根据用户命令拍摄对象。
当对象通过照相机160被拍摄时，对象可以通过电荷耦合器件(Charge CoupledDevice，CCD)而被转换成电图像信号，并且所转换的图像信号可以在模拟信号处理器(未示出)中被转换为放大的和数字的信号。如上所述所转换的数字信号可以在数字信号处理器(未示出)处被数字化，并且在处理器120的控制下用颜色和亮度调整之后通过显示器110来表示。根据各种示例，照相机160可以将焦点放在用户的脸部区域上，随着处理器120的控制来放大并拍摄。
根据各种示例实施例，处理器120可以使用自动白平衡设置功能来确定所拍摄的图像的照明环境。例如，处理器120可以拍摄图像，使得能够通过使用所计算的照明环境来设置统一的白平衡(uniform white balance)。此外，处理器120可以在没有外部光的拍摄环境下调整被包括在显示装置100'内的光源(例如，LED光源)，并拍摄图像，使得能够设置统一的白平衡。
当通过根据自动白平衡设置功能设置白平衡来执行拍摄时，处理器120可以响应于每个所拍摄的图像根据设置的白平衡以不同颜色来设置所拍摄的图像的脸部区域，并且然后拍摄该脸部区域。
为了统一地设置关于各种图像的脸部区域的颜色感觉，处理器120可以屏蔽外部光源，并且仅使用被包括在显示装置100'中的光源。
此外，根据各种示例实施例，显示装置100'可以包括正面照相机或背面照相机。例如，当通过使用正面照相机拍摄图像时，背面照相机可以确定拍摄环境并设置要被拍摄的图像的白平衡，使得能够在统一的拍摄环境下拍摄图像。
提供音频处理器170以处理音频数据。音频处理器170可以执行诸如音频数据的解码、放大和噪声过滤的各种处理。
提供视频处理器180以处理视频数据。视频处理器180可以执行关于视频数据的诸如解码、缩放、噪声过滤、帧率转换和分辨率转换的各种图像处理。
提供扬声器191以输出各种警报声音和语音消息以及在音频处理器170中处理的音频数据。
按钮192可以是各种类型的按钮，诸如在显示装置100'的外部主体的诸如前部区域、侧部区域和后部区域的任何区域上形成的机械按钮、触摸板、轮子(wheel)等。例如，可以提供接通/断开显示装置100'的电源的按钮。
提供麦克风193以接收用户语音或其他声音并转换为音频数据。处理器120可以使用在通话期间通过麦克风193输入的用户语音，或者转换成音频数据并存储在储存器130中。同时，取决于其功能，照相机160和麦克风193可以是上述用户界面140的一部分。
当提供照相机160和麦克风193时，处理器120可以根据通过麦克风193输入的用户语音或由照相机160识别的用户动作来执行控制操作。因此，显示装置100'可以以运动控制模式或语音控制模式操作。当以运动控制模式操作时，处理器120可以通过激活照相机160来拍摄用户，并且通过跟随用户动作中的改变来执行对应的控制操作。当以语音控制模式操作时，处理器120可以以语音识别模式操作，以分析通过麦克风输入的用户语音，并根据所分析的用户语音来执行控制操作。
同时，虽然未示出，但是显示装置100'可以还包括反馈提供者(未示出)和GPS接收器(未示出)。反馈提供者(未示出)可以根据所显示的UI屏幕来执行提供各种反馈(例如，音频反馈、图形反馈、触觉反馈)的功能。例如，当正在执行皮肤分析的同时，当皮肤相关事件已经发生时，或者当用于皮肤比较的UI屏幕被提供时，反馈提供者(未示出)可以提供对应的反馈。GPS接收器(未示出)可以从全球定位系统(Global Positioning System，GPS)卫星接收GPS信号并且计算显示装置100'的当前位置或者执行用当前位置来标记所拍摄的照片内容的功能。
图2B示出了被包括在显示装置100'中的详细元件的示例实施例。根据示例实施例，图2B中示出的一些元件可以被部分地移除或修改，并且其他新的元件可以被添加。
图3A和图3B是示出根据各种示例实施例的服务的示例的示图。
图3A示出了根据示例实施例的服务的示例。当用户在所示出的UI屏幕上选择并驱动图库应用311时，可以提供包括多个照片内容321至335的图库屏幕。在该示例中，可以提供将在其中皮肤分析被执行的照片内容324、照片内容328、照片内容332、照片内容334、照片内容335与其他照片内容区分开的GUI 10。当用户从所提供的菜单350中选择皮肤项目351时，可以提供仅包括经皮肤分析的照片内容的图库屏幕360。
图3B示出了根据示例实施例的服务的示例。当用户如所示出地选择并驱动皮肤服务应用315时，可以立即提供仅包括经皮肤分析的照片内容的图库屏幕370。皮肤服务应用315可以例如是单独地制造的应用程序，其提供根据本发明的皮肤相关服务。例如，皮肤服务应用315可以被实施为提供诸如拍摄功能、日历功能和皮肤分析功能的各种功能以提供根据示例实施例的皮肤相关服务。
图4A和图4B是示出根据示例实施例的用于在日历上输入皮肤相关日程的示例方法的示图。
当用户在图3A所示的UI屏幕上驱动日历(或记事簿)应用312并且通过如图4A所示的用于输入日程的UI屏幕410输入皮肤相关日程时，皮肤相关日程430可以被输入到日历420，如图4B所示。
在该示例中，处理器120可以在输入到日历420的各种日程当中提取皮肤相关日程，并且将所提取的日程用来提供根据示例实施例的各种服务，这将在下面更详细地解释。
示例实施例可以不被限于上面提供的示例。因此，图4A中所示的用于输入日程的UI屏幕410可以被提供为图3B中所示的皮肤服务应用315的UI屏幕。在该示例中，处理器120可以将所有输入的日程确定为与皮肤相关的日程。例如，即使当日程不包括与皮肤有关的DB术语时，处理器120也可以将该日程确定为皮肤相关日程。
图5A和图5B是示出根据示例实施例的示例UI屏幕的示图。
根据示例实施例，处理器120可以基于多个照片内容的拍摄时间、参考与皮肤相关的预设事件已经发生的时间来可区分地显示多个照片内容。
例如，可以基于图4B中输入的皮肤相关日程的标准，例如“5月21日，皮肤治疗”511和“5月27日，皮肤护理店”512的日程，来区分和提供如图5A中所示的经皮肤分析的照片内容。
例如，皮肤相关事件可以在具有与照片内容相同的形式和大小的GUI中提供，但是不限于此。例如，如图5B所示，皮肤相关事件可以以图标521、522的预设形式而被提供。虽然用户可以直接生成图标，或者从预设图标选择并使用图标，但是这些图标可以被存储为默认值。
如图5A所示，可以在照片内容上标记对应的照片内容被拍摄时的天气和时间(或日期)。然而，如图5B所示，可以仅当用户选择时才显示天气和时间。
根据上述示例实施例，用户可以利用一次快速查看来区分在皮肤相关事件的时间之前和之后拍摄的照片内容，并且容易地观察对应的事件之前和之后的皮肤改变。
图6是示出根据另一示例实施例的示例UI屏幕的示图。
如图6所示，当用户在包括经皮肤分析的照片内容的UI屏幕610上选择特定皮肤相关事件之前和之后的照片内容621、622时，比较被包括在所选择的照片内容621、622中的用户脸部的皮肤状况的UI屏幕630可以被提供。
对应的UI屏幕630可以被提供具体地相互比较和分析在所选择的照片内容621、622中包括的用户脸部的皮肤状况的屏幕。
可以在屏幕的左侧提供在皮肤相关事件之前拍摄的照片内容621，并且可以在屏幕的右侧提供在皮肤相关事件之后拍摄的照片内容622，但是不具体地限制于此。例如，当屏幕处于垂直模式时，可以在屏幕的上侧提供皮肤相关事件之前拍摄的照片内容621，并且在屏幕的下侧提供皮肤相关事件之后拍摄的照片内容622。
此外，可以如所示出的以相同的大小来提供在皮肤相关事件之前拍摄的照片内容621和在皮肤相关事件之后拍摄的照片内容622以便于比较，但是不限于此。例如，可以以比在皮肤相关事件之后拍摄的照片内容622的大小更小的大小来提供在皮肤相关事件之前拍摄的照片内容621。
图7A至图7C是示出根据另一示例实施例的用于在消息上提取皮肤相关事件的示例方法的示图。
如图7A至图7C所示，当接收到皮肤相关文本消息时，处理器120可以识别该消息并确定是否发生了皮肤相关事件。例如，处理器120可以通过使用OCR、MICR和OMR技术从文本消息描述确定诸如“皮肤科预约(图7A)”710、“化妆品购买(图7B)”720和“皮肤科支付(图7C)”730的皮肤相关事件。
例如，处理器120可以基于DB标准术语来确定接收到的文本消息描述710、720、730是否对应于皮肤相关事件。例如，当文本消息包括诸如“皮肤科”和“化妆品”的标准术语时，文本消息可以对应于皮肤相关事件。
根据各种示例，当从接收到的文本消息描述提取皮肤相关事件时，处理器120可以向用户提供通知窗口，询问对应的事件是否被添加为皮肤相关事件。在该示例中，处理器120可以仅当用户批准将对应的事件添加为皮肤相关事件时才将对应的事件添加为皮肤相关事件，并且可以在当用户不批准时忽略对应的事件。
图8是示出根据另一示例实施例的示例UI屏幕的示图。
根据另一示例实施例，通过图7A-图7C中所示的文本消息描述所提取的皮肤相关事件可以被应用为用于自动地或者基于用户选择来区分照片内容的标准，如在图8中所示。
例如，通过图7B所示的文本消息描述生成的2015年5月21日的化妆品购买事件可以被用作皮肤相关事件810以区分照片内容，如图所示。
在该示例中，分别指示事件的GUI 810、GUI 820可以被提供指示分别生成事件的应用的识别信息(例如，消息、日历)，如图所示。然而，这仅仅是各种示例实施例中的一个。根据另一示例实施例，只有事件标题可以在没有关于生成事件的应用的信息的情况下被显示。
图9是示出根据另一示例实施例的示例UI屏幕的示图。
根据另一示例实施例，可以提供用户能够在图库屏幕上直接输入事件的UI屏幕。
如图所示，用于输入事件的输入窗口910可以根据预设事件在包括照片内容的图库屏幕上被提供。当在输入窗口910上输入皮肤相关事件时，可以在照片内容之间实时显示如右侧所示的指示对应的事件的GUI 920。例如，当在2015年5月21日输入皮肤治疗事件时，可以在对应的皮肤治疗事件之前和之后拍摄的照片之间自动地添加指示对应的皮肤治疗事件的GUI 920。
图10是示出根据另一示例实施例的用于基于GPS信息提取皮肤相关事件的示例方法的示图。
根据另一示例实施例，处理器120可以基于用照片内容标记的GPS信息(例如，基于拍摄的位置信息)来生成皮肤相关事件。
如图所示，处理器120可以基于用基于时间顺序提供的照片内容标记的GPS信息来提取用户访问国外的事件。例如，当用照片内容标记的位置信息在特定时间从“120:00E，37:30N”被修改为“157:00W，21:18N”时，处理器120可以确定用户在对应的时间访问了国外。在这种情况下，指示海外旅行事件的GUI 1030可以被自动地添加在与位置信息被修改的时间相对应的照片内容1010、1020之间。
然而，使用用照片内容标记的GPS信息仅仅是许多各种示例实施例中的一个。处理器120可以基于记录了显示装置100的移动位置的GPS信息来生成事件。例如，当显示装置100的位置在特定时间从“120:00E，37:30N”被修改为“157:00W，21:18N”时，处理器120可以确定用户在对应的时间访问了国外。在该示例中，指示对应的事件的GUI可以被自动地添加在对应于时间点的照片内容之间。
图11是示出根据另一示例实施例的示例UI屏幕的示图。
根据另一示例实施例，处理器120可以基于用户命令仅过滤和提供内部或外部地拍摄的照片内容。
例如，当如图所示在基于皮肤相关事件来区分和提供照片内容的UI屏幕上输入“仅查看室外照片”的命令时，处理器120可以仅过滤和提供对应的照片内容当中的在室外拍摄的照片内容。在该示例中，处理器120可以基于皮肤相关事件来区分和提供在室外拍摄的照片内容。
处理器120可以通过分析照片内容来确定照片内容是在室外还是在室内拍摄的，该分析是基于用照片内容标记的EXIF信息的。因此，处理器120可以基于被包括在EXIF信息中的诸如光圈数和曝光校正数的信息来确定对应的照片内容是在室外还是室内拍摄的照片内容。
处理器120可以基于用户命令、基于各种标准来过滤和提供照片内容。例如，处理器120可以过滤和提供与用户命令(诸如仅查看脸部大小等于或大于预设大小的照片内容、或者仅查看脸部在正前方的照片内容)相对应的照片内容。
图12A和图12B是示出根据示例实施例的用于提供皮肤分析结果的示例方法的示图。
可以关于在其下皮肤改变最大的项目来简要提供比较根据示例性实施例的皮肤相关事件之前和之后的皮肤状况的结果。例如，当与其他分析项目相比，皮肤治疗之前和之后的雀斑明显被改善时，其可以提供以诸如“雀斑被改善”的文本形式的消息1210，如图12A所示。
此外，当与其他分析项目相比，在诸如海外旅行的事件之前和之后痤疮明显增加时，其可以提供以诸如“痤疮增加”的文本形式的消息1220。因此，即使当用户不习惯使用设备时，用户也可以一眼就识别出他或她的皮肤改变。
例如，可以基于在图6的下部中示出的比较用户脸部的皮肤状况的UI屏幕630之后的预设事件(例如，用户命令的输入、预设时间的流逝)来提供图12A和图12B所示的UI屏幕，或者可以通过替换对应的UI屏幕530来提供图12A和图12B所示的UI屏幕。
图13A至图13C是示出根据另一示例实施例的用于提供皮肤分析结果的示例方法的示图。
根据另一示例实施例，可以每分析项目详细地提供比较皮肤相关事件之前和之后的皮肤状况的结果。
例如，当在如图13A所示的比较皮肤相关事件之前和之后的皮肤状况的UI屏幕1210上输入预设事件(例如，用户命令、布置模式的改变)时，可以提供UI屏幕1320，用诸如肤色1321、痤疮1322、皱纹1323、色素沉着1324和毛孔1325的各种分析项目来指示事件之前和之后的皮肤改变状况。
根据又一示例实施例，根据比较皮肤相关事件之前和之后的皮肤状况的结果，可以提供推荐的皮肤护理、推荐的化妆品信息和关于特定化妆品的广告信息。
例如，当在如图13B所示的比较皮肤相关事件之前和之后的皮肤状况的UI屏幕1210上输入预设事件(例如，用户命令、布置模式修改)时，可以提供根据皮肤改变状况而提供推荐的皮肤护理信息的UI屏幕1340。例如，当对应的事件之前和之后眼睛周围的皱纹显著地增加时，可以提供包括用于眼睛护理的各种推荐信息1341、1342、1343的UI屏幕。例如，当推荐用于眼睛护理的化妆品时，UI屏幕可以包括基于购买量、人气排名和等级来推荐化妆品或者直接链接到对应的能够购买化妆品的网站的项目1341a至项目1341c。
又例如，当在如图13C所示的比较皮肤相关事件之前和之后的皮肤状况的UI屏幕1210上输入预设事件(例如，用户命令、布置模式修改)时，UI屏幕1360可以被提供以基于皮肤改变状况来提供关于特定化妆品和皮肤科的广告信息。例如，当对应的事件之前和之后痤疮显著地增加时，可以提供广告屏幕1360来广告能够改善痤疮的产品。在该示例中，广告屏幕1360可以包括详细查看按钮1361以转换成关于痤疮治疗药物的广告或关于痤疮治疗药物的解释屏幕。例如，可以基于与对应的产品的销售者的合同以及与特定皮肤科的合同来提供广告信息。
图14A、图14B、图15A和图15B是示出根据另一示例实施例的用于提供皮肤分析结果的示例方法的示图。
根据另一示例实施例，可以以各种形式来提供比较皮肤相关事件之前和之后的皮肤状况的UI屏幕。
例如，在提供如图14A所示的包括在特定皮肤相关事件之前和之后的照片内容1411、1412的UI屏幕1410的同时接收到从对应的照片内容1411、1412中的至少一个照片内容选择或放大特定区域的用户命令之后，对应的区域可以被放大并被显示，或者包含被详细地拍摄的对应的区域的内容可以被重新地显示，如图14B中所示。在该示例中，放大的或精细地拍摄的内容1421、1422可以包括关于对应的区域的细节信息(例如，痤疮的数量、痤疮的颜色)。
又例如，在提供如图15A所示的包括在特定皮肤相关事件之前和之后的照片内容1511、1512的UI屏幕1510的同时接收到从对应的照片内容1511、1512中的至少一个照片内容选择或放大眼睛的周围区域的用户命令之后，眼睛的周围区域可以被放大并被提供，或者包含精细地拍摄的眼睛的周围区域的内容1520、1530可以被重新地显示，如图15B所示。在该示例中，放大或精细地拍摄的内容可以包括关于眼睛的周围区域的详细信息(例如，黑眼圈的程度)。
图16A到图16C和图17是示出根据各种示例实施例的被提供在预览屏幕中的示例UI的示图。
图16A是示出在没有预先注册的用户脸部图片时用于拍摄的预览屏幕或在拍摄之后立即提供的UI屏幕的示图。
例如，处理器120可以提供通知以询问被包括在所拍摄的图像中的脸部是否是用户脸部，并且通过基于上述脸部的比较来管理皮肤改变。此外，当用户输入确认脸部的命令时，处理器120可以将对应的脸部注册为用户脸部并且存储为用于管理皮肤分析/改变的图像。UI屏幕可以提供选择脸部是有化妆还是没有化妆的UI按钮1611、1612，将对应的项目设置为必要的项目，或者当用户这样设置时，从必要的项目中排除对应的项目。
图16B是示出当被包括在预览图像或者所拍摄的图像中的脸部不匹配预先注册的用户脸部时提供的UI屏幕的示图。
例如，当从预览屏幕所检测的一个脸部不匹配注册的用户脸部时，处理器120可以另外地显示确认所检测的脸部是否是用户脸部的UI按钮1613。在该示例中，当对应的UI按钮1613被选择时，处理器120可以存储对应的照片，或者存储用于皮肤分析的对应的照片。根据各种示例，可以以已经点击的状态提供快门按钮，在这种情况中可以执行拍摄，仅需要点击对应的UI按钮1613，例如不需要用户点击快门按钮。
图16C是示出当被包括在预览图像或者所拍摄的图像中的脸部匹配预先注册的用户脸部时提供的示例UI屏幕的示图。
例如，当从预览屏幕所检测的脸部匹配注册的用户脸部时，处理器120可以仅提供选择脸部是有化妆还是没有化妆的UI按钮1611、1612。根据各种示例，可以以已经点击的状态提供快门按钮，在这种状态中可以执行拍摄，仅需要点击对应的UI按钮1611、1612，例如不需要用户点击快门按钮。
图17是示出当从预览图像或者所拍摄的图像中检测到多个脸部时提供的示例UI屏幕的示图。
例如，当从预览屏幕中检测到多个脸部时并且当一个脸部匹配注册的用户脸部时，处理器120可以提供选择匹配注册的用户脸部的脸部在所标记的区域上是有化妆还是没有化妆的UI按钮1711、1712。根据各种示例，可以以已经点击的状态提供快门按钮，在这种情况中可以执行拍摄，仅需要点击对应的UI按钮1611、1612，例如不需要用户点击快门按钮。
当从预览屏幕中检测到多个脸部时并且当多个脸部不匹配注册的用户脸部时，处理器120可以另外地显示选择用户脸部的UI按钮1713、1714。
当在预览屏幕上检测到多个脸部时并且当一个脸部匹配注册的用户脸部时，处理器120可以显示选择用户脸部UI按钮1713、1714。在该示例中，对应的按钮中的一个按钮可以以已经点击的状态被显示，这可以消除单独地选择对应的按钮的需要。
图18是示出根据示例实施例的控制显示装置的示例方法的流程图。
关于根据图18中示出的示例实施例的显示装置的控制方法，当在S1810处接收到用户命令时，可以在S1820处参考发生皮肤相关预设事件的时间、基于拍摄时间点来可区分地显示包括用户脸部的多个照片内容。
此外，当在预设事件发生的时间之前拍摄的照片内容当中选择第一照片内容时并且当在预设事件发生的时间之后拍摄的照片内容当中选择第二照片内容时，根据示例实施例的方法可以包括提供将分别被包括在所选择的第一照片内容和第二照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
此外，在S1820处，可以显示指示在预设事件发生的时间之前和之后所拍摄的照片内容之间的预设事件的GUI，使得可以基于预设事件发生的时间来可区分地显示多个照片内容。
此外，根据示例实施例的方法可以包括：当基于用户命令选择GUI时，在预设事件发生的时间之前拍摄的照片内容当中选择第三照片内容；在预设事件发生的时间之后拍摄的照片内容当中选择具有与第四照片内容的拍摄条件类似的拍摄条件的第二照片内容；以及提供将分别被包括在所选择的第三照片内容和第四照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
拍摄条件可以包括用户脸部大小、用户脸部角度、拍摄照明，脸部是有化妆还是没有化妆以及存在或不存在配件中的至少一个。
与皮肤相关的预设事件可以包括皮肤护理事件、皮肤治疗事件、与皮肤相关的产品购买事件、与影响皮肤的位置的改变相关的事件、与影响皮肤的天气相关的事件、与影响皮肤的食物消耗相关的事件、以及假期事件中的至少一个。
根据示例实施例的方法可以包括用于基于在预设日历上输入的皮肤相关事件、被包括在文本消息中的皮肤相关事件、GPS信息以及由用户输入的或被包括在照片内容中的食物相关信息中的至少一个来确定预设事件的过程。
此外，在S1820处，操作可以涉及仅过滤经皮肤分析的照片内容，并且当在包括多个照片内容的图库屏幕上选择了皮肤模式时，参考与皮肤护理相关的预设事件发生的时间来可区分地显示照片内容。
在S1820处的操作可以涉及将GUI添加到经皮肤分析的照片内容，以从图库屏幕上的多个照片内容的其余照片内容识别经皮肤分析的照片内容。
当从用于拍摄的预览屏幕检测到至少一个脸部时，根据示例实施例的方法还可以包括显示关于匹配预先注册的用户脸部或不匹配预先注册的用户脸部的菜单按钮和关于化妆或没化妆的菜单按钮中的至少一个。
图19是示出根据各种示例实施例的网络环境的示例实施例的示图。
参考图19，根据示例实施例的网络环境1900可以包括显示装置1901、1904中的至少一个和服务器1906；显示装置1901、1904中的至少一个和服务器1906可以通过网络1962彼此连接。
显示装置1901可以包括总线1910、处理器1920、存储器1930、输入/输出接口1940、显示器1950、通信接口1960和照相机模块1970。总线1910可以包括将上述元件彼此连接并且在上述元件之间递送通信(例如，控制消息)的电路。处理器1920可以通过总线1910从上述其他元件(例如，存储器1930、输入/输出接口1940、显示器1950、通信接口1960或照相机模块1970)接收命令、解密所接收的命令、并且根据所解密的命令来执行计算或数据处理。
处理器1920可以控制显示装置1901的整体操作。根据各种实施例，处理器1920可以包括至少一个处理器(例如，图2A的处理器120)。
存储器1930可以存储从处理器1920或其他元件接收的或者由处理器1920或其他元件生成的命令或数据。例如，存储器1930可以包括诸如内核1931、中间件1932、应用编程接口(Application Programming Interface，API)1933或应用1934的编程模块。上述编程模块可以被配置为软件、固件、硬件、或者以上中的至少两个的组合。
内核1931可以控制或管理在执行操作中使用的系统资源(例如，总线1910、处理器1920或存储器1930)或者在另一个编程模块(例如，中间件1932、API 1933或应用程序1934)上实施的功能。此外，内核1931可以提供接口以由中间件1932、API 1933或应用1934来访问和控制或管理显示装置1901的每个单元。
中间件1932可以执行中介功能(mediating role)，使得API 1933或应用1934能够通过与内核1931进行通信来交换数据。此外，关于从应用1934接收到的作业请求，中间件1932可以通过使用用于分配优先级的方法来执行作业请求(例如，调度或负载平衡)的控制以在应用1934中的至少一个应用上使用显示装置1901的系统资源(例如，总线1910、处理器1920或存储器1930)。
API 1933可以是其中应用1934控制从内核1931或中间件1932提供的功能的界面。例如，API 1933可以包括用于文件控制、窗口控制、图像处理或字符控制的至少一个接口或数学功能(例如，指令)。
根据各种示例实施例，应用1934可以包括SMS/MMS应用、日历应用、警报应用、电子邮件应用、健康护理应用(例如，测量锻炼量或血糖的应用)或环境信息应用(例如，提供关于压力、湿度或温度的信息的应用)等。另外地或可替代地，应用1934可以是与在显示装置1901和外部电子设备(例如，显示装置1904)之间的信息交换相关的应用等。与信息交换相关的应用可以包括通知中继应用以将特定信息递送到上述外部电子设备或设备管理应用以管理上述外部电子设备。根据各种示例，应用1934可以包括单独制造的以提供根据实施例的皮肤护理和分析服务的应用。
输入/输出接口1940可以将通过输入/输出设备(例如，传感器、键盘或触摸屏)从用户输入的命令或数据通过总线1910递送到处理器1920、存储器1930、通信接口1960或照相机模块1970。例如，输入/输出接口1940可以将关于通过触摸屏输入的用户触摸的数据提供给处理器1920。输入/输出接口1940可以用输入/输出设备(例如，扬声器或显示屏)将通过总线1910从处理器1920、存储器1930、通信接口1960或照相机模块1970接收的命令或数据输出。例如，输入/输出接口1940可以用扬声器将通过处理器1920处理的语音数据输出给用户。显示器1950可以将各种各样的信息(例如，多媒体数据或文本数据)显示给用户。通信接口1960可以连接显示装置1901和外部设备(例如，显示装置1904或服务器1906)之间的通信。例如，通信接口1960可以通过由无线通信或有线通信连接到网络1962来与上述外部设备通信。上述无线通信可以包括无线保真(，Wifi)、蓝牙(BT)，近场通信(NFC)，全球定位系统(GPS)或蜂窝通信(例如，LTE、LTE-A、CDMA、WCDMA、UMTS、Wibro或GSM)当中的至少一个。有线通信可以包括通用串行总线(USB)、高清晰度多媒体接口(High Definition MultimediaInterface，HDMI)、推荐标准232(Recommended Standard 232，RS-232)或普通老式电话服务(Plain Old Telephone Service，POTS)当中的至少一个。
照相机模块1970可以用从其他元件(例如，处理器1920、存储器1930、输入/输出接口1940或通信接口1960)获得的信息来控制。因此，照相机模块1970可以通过放大所拍摄的图像来放大或详细地拍摄特定区域。
根据示例实施例，网络1962可以是电信网络。电信网络可以包括计算机网络、互联网、物联网或电话网络当中的至少一个。根据示例实施例，可以从应用1934、API 1933、中间件1932、内核1931或通信接口1960当中的至少一个来支持用于显示装置1901与外部设备之间的通信的协议(例如，传输层协议、数据链路层协议或物理层协议)。
根据各种示例实施例的装置(模块或其功能)或方法(例如，操作)的至少一部分可以被实施为存储在计算机可读存储介质中的指令，该指令能够被计算机以编程模块的形式读取。当指令由至少一个处理器(或控制器)执行时，至少一个处理器可以执行对应于指令的功能。能够由计算机读取的计算机可读存储介质可以是储存器或存储器。编程模块的至少一部分可以由处理器来实施。编程模块的至少一部分可以包括模块、程序、例程、指令集或过程以执行至少一个功能。
计算机可读存储介质可以包括诸如硬盘、软盘和磁带的磁介质，诸如CD-ROM(Compact Disc Read Only Memory，光盘只读存储器)和DVD(Digital Versatile Disc，数字通用光盘)的光学介质，诸如软光盘的磁光介质以及被配置为存储和执行程序指令的诸如ROM、RAM和快闪存储器的硬件设备(例如，编程模块)。此外，程序指令可以包括能够由具有解释器的计算机执行的高级语言代码以及由编译器生成的机械代码。上述硬件设备可以被配置为作为至少一个软件模块来操作以执行各种实施例的操作，反之亦然。
关于根据各种示例实施例的模块或编程模块，可以包括上述元件当中的至少一个元件，可以删除一些元件，或者还可以包括其他附加的新的元件。根据各种示例实施例的用模块、编程模块或其他元件执行的操作可以用顺序、并行、重复或启发式方法来执行。此外，一些操作可以以不同的顺序被执行或者被删除，并且可以添加其他新的操作。
根据各种示例实施例，关于存储指令的计算机可读存储介质，可以将指令设置为当用至少一个处理器执行时，用至少一个处理器执行至少一个操作。
此外，在本公开和附图中示出和描述的示例实施例仅仅被提供来更容易地解释本公开的技术实质并且支持各种示例实施例的理解，但是可以不限制本公开的范围。根据各种示例实施例，关于存储指令的计算机可读存储介质，指令被设置为当用至少一个处理器执行时，用至少一个处理器执行至少一个操作。至少一个操作可以包括：当接收到用户命令时，参考与皮肤相关的预设事件发生的时间、基于拍摄时间来区分和显示包括用户脸部的多个照片内容。
前述示例实施例和优点仅仅是示例，并不被解释为限制示例实施例。本公开能够容易地被应用于其他类型的装置。而且，本公开的示例实施例的描述旨在是说明性的，而不是限制权利要求的范围。

Claims (15)

1.一种显示装置，包括：
显示器；以及
处理器，被配置为：
控制所述显示器显示包括多个包含用户脸部的照片内容的屏幕，
基于选择皮肤分析应用和菜单上的皮肤项目中的至少一个的用户输入，从所述多个照片内容当中过滤经皮肤分析的照片内容，
控制所述显示器显示所过滤的经皮肤分析的照片内容，以及
参考与皮肤护理相关的预定事件发生的时间、基于所述多个经皮肤分析的照片内容的拍摄时间来控制所述显示器可区分地显示多个所过滤的经皮肤分析的照片内容。
2.根据权利要求1所述的显示装置，还包括：
用户界面，被配置为：接收用户命令；响应于接收到所述用户命令，从在预定事件发生的时间之前拍摄的照片内容当中选择第一经皮肤分析的照片内容并且从在预定事件发生的时间之后拍摄的照片内容当中选择第二经皮肤分析的照片内容，
处理器，被配置为提供将被包含在所选择的第一照片内容和第二照片内容中的每一个照片内容中的用户脸部的皮肤状况进行比较的用户界面(UI)屏幕。
3.根据权利要求1所述的显示装置，其中，所述处理器被配置为显示在所述预定事件发生的时间之前和之后拍摄的经皮肤分析的照片内容之间的所述预定事件的指示的图形用户界面(GUI)，并且参考所述预定事件发生的时间来可区分地显示所述多个照片内容。
4.根据权利要求3所述的显示装置，还包括：
用户界面，被配置为接收用户命令，
其中当基于所述用户命令来选择所述GUI时，所述处理器被配置为从在所述预定事件发生的时间之前拍摄的照片内容当中选择第三经皮肤分析的照片内容，从在所述预定事件发生的时间之后拍摄的照片内容当中选择具有与所述第三照片内容的拍摄条件类似的拍摄条件的第四经皮肤分析的照片内容，以及提供将分别被包含在所选择的第三照片内容和第四照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
5.根据权利要求4所述的显示装置，其中，所述拍摄条件包括用户脸部大小、用户脸部角度、用户脸部表情、化妆或没化妆、存在或不存在配件、以及拍摄照明中的至少一个。
6.根据权利要求1所述的显示装置，其中，与皮肤护理相关的所述预定事件包括皮肤护理事件、皮肤治疗事件、与皮肤相关的产品购买事件、与影响皮肤的位置的改变相关的事件、与影响皮肤的天气相关的事件、与影响皮肤的食物消耗相关的事件、和假期事件中的至少一个。
7.根据权利要求1所述的显示装置，其中，所述处理器被配置为基于在预定日历上输入的皮肤相关事件、被包括在文本消息中的皮肤相关事件、GPS信息和被包括在照片内容或输入中的食物相关信息中的至少一个来确定所述预定事件。
8.根据权利要求1所述的显示装置，其中当在包括多个照片内容的图库屏幕上选择了皮肤模式时，所述处理器被配置为参考与皮肤护理相关的所述预定事件发生的时间来显示所过滤的经皮肤分析的照片内容。
9.根据权利要求8所述的显示装置，其中，所述处理器被配置为向所述经皮肤分析的照片内容添加图形用户界面(GUI)，以从所述图库屏幕上的多个照片内容的剩余部分识别所述经皮肤分析的照片内容并显示结果。
10.根据权利要求1所述的显示装置，其中，当从被提供用于拍摄的预览屏幕检测到至少一个脸部时，所述处理器被配置为显示关于与预先注册的用户脸部匹配或不匹配的菜单按钮和关于化妆或没化妆的菜单按钮中的至少一个。
11.一种控制显示装置的方法，包括：
基于接收选择皮肤分析应用和菜单上的皮肤项目中的至少一个的用户命令，从多个照片内容当中过滤经皮肤分析的照片内容，并且显示所过滤的经皮肤分析的照片内容；以及
基于接收到所述用户命令，参考与皮肤护理相关的预定事件发生的时间、基于经皮肤分析的照片内容的拍摄时间来可区分地显示包含用户脸部的多个所过滤的经皮肤分析的照片内容。
12.根据权利要求11所述的方法，其中，当基于用户命令从在所述预定事件发生的时间之前拍摄的照片内容当中选择了第一经皮肤分析的照片内容并且从在所述预定事件发生的时间之后拍摄的照片内容当中选择了第二经皮肤分析的照片内容时，所述方法还包括提供将被包含在所选择的第一照片内容和第二照片内容中的每一个照片内容中的用户脸部的皮肤状况进行比较的用户界面(UI)屏幕。
13.根据权利要求11所述的方法，其中，所述显示包括显示提供在所述预定事件发生的时间之前和之后拍摄的经皮肤分析的照片内容之间的所述预定事件的指示的图形用户界面(GUI)，使得所述多个经皮肤分析的照片内容参考所述预定事件发生的时间而被可区分地显示。
14.根据权利要求13所述的方法，其中，当基于所接收的用户命令来选择所述GUI时，所述方法还包括从在所述预定事件发生的时间之前拍摄的照片内容当中选择第三经皮肤分析的照片内容，并且从在所述预定事件发生的时间之后拍摄的照片内容当中选择具有与所述第三照片内容的拍摄条件类似的拍摄条件的第四经皮肤分析的照片内容，以及提供将分别被包含在所选择的第三照片内容和第四照片内容中的用户脸部的皮肤状况进行比较的UI屏幕。
15.根据权利要求14所述的方法，其中，所述拍摄条件包括用户脸部大小、用户脸部角度、用户脸部表情、化妆或没化妆，存在或不存在配件、以及拍摄照明中的至少一个。
CN201680050978.6A 2015-09-02 2016-09-01 显示装置以及该显示装置的控制方法 Expired - Fee Related CN107925725B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020150124138A KR102490438B1 (ko) 2015-09-02 2015-09-02 디스플레이 장치 및 그 제어 방법
KR10-2015-0124138 2015-09-02
PCT/KR2016/009768 WO2017039341A1 (en) 2015-09-02 2016-09-01 Display apparatus and control method thereof

Publications (2)

Publication Number Publication Date
CN107925725A CN107925725A (zh) 2018-04-17
CN107925725B true CN107925725B (zh) 2020-10-20

Family

ID=58095655

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680050978.6A Expired - Fee Related CN107925725B (zh) 2015-09-02 2016-09-01 显示装置以及该显示装置的控制方法

Country Status (5)

Country Link
US (1) US10786196B2 (zh)
EP (1) EP3345384B1 (zh)
KR (1) KR102490438B1 (zh)
CN (1) CN107925725B (zh)
WO (1) WO2017039341A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3692896A1 (en) * 2014-11-04 2020-08-12 Samsung Electronics Co., Ltd. Electronic device, and method for analyzing face information in electronic device
JP6249263B2 (ja) * 2015-09-08 2017-12-20 日本電気株式会社 顔認識システム、顔認識方法、表示制御装置、表示制御方法および表示制御プログラム
TWI585711B (zh) * 2016-05-24 2017-06-01 泰金寶電通股份有限公司 獲得保養信息的方法、分享保養信息的方法及其電子裝置
USD836654S1 (en) * 2016-10-28 2018-12-25 General Electric Company Display screen or portion thereof with graphical user interface
CN109034399A (zh) * 2017-06-09 2018-12-18 丽宝大数据股份有限公司 保养评估方法及其电子装置
US10599391B2 (en) * 2017-11-06 2020-03-24 Google Llc Parsing electronic conversations for presentation in an alternative interface
JP2020081323A (ja) * 2018-11-22 2020-06-04 パナソニックＩｐマネジメント株式会社 肌分析装置、肌分析方法、及び、コンピュータプログラム
US10970593B2 (en) * 2018-12-03 2021-04-06 International Business Machines Corporation Product effect analysis
US11172751B2 (en) * 2018-12-19 2021-11-16 The Procter & Gamble Company Method of defining a treatment area of an applicator for registration with a condition to be treated
CN109684026B (zh) * 2019-01-14 2022-02-22 武汉斗鱼鱼乐网络科技有限公司 App皮肤更换方法、装置、电子设备及存储介质
WO2020242274A1 (en) * 2019-05-31 2020-12-03 Samsung Electronics Co., Ltd. Electronic device for controlling skin-care device and method of operating the same
EP4315827A1 (en) * 2021-03-30 2024-02-07 Snap Inc. Inclusive camera
KR102358339B1 (ko) * 2021-09-27 2022-02-08 주식회사 루츠코퍼레이션 고객 맞춤형 소재 추천 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103989454A (zh) * 2013-02-19 2014-08-20 北京银万特科技有限公司 基于移动智能终端的皮肤监测与保养方法及系统

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030065526A1 (en) 2001-10-01 2003-04-03 Daniela Giacchetti Historical beauty record
US7039222B2 (en) * 2003-02-28 2006-05-02 Eastman Kodak Company Method and system for enhancing portrait images that are processed in a batch mode
US7827498B2 (en) * 2004-08-03 2010-11-02 Visan Industries Method and system for dynamic interactive display of digital images
US20060129411A1 (en) * 2004-12-07 2006-06-15 Nina Bhatti Method and system for cosmetics consulting using a transmitted image
WO2006118060A1 (ja) 2005-04-28 2006-11-09 Shiseido Company, Ltd. 肌状態解析方法、肌状態解析装置、及び肌状態解析プログラムを記録した記録媒体
JP2006345296A (ja) 2005-06-09 2006-12-21 Fujifilm Holdings Corp 画像表示装置及びソート方法
US20070058858A1 (en) * 2005-09-09 2007-03-15 Michael Harville Method and system for recommending a product based upon skin color estimated from an image
US7454046B2 (en) * 2005-09-20 2008-11-18 Brightex Bio-Photonics, Llc Method and system for analyzing skin conditions using digital images
US8131029B2 (en) * 2005-09-20 2012-03-06 Brightex Bio-Photonics Llc Systems and methods for automatic skin-based identification of people using digital images
US20090245603A1 (en) * 2007-01-05 2009-10-01 Djuro Koruga System and method for analysis of light-matter interaction based on spectral convolution
WO2010093503A2 (en) * 2007-01-05 2010-08-19 Myskin, Inc. Skin analysis methods
US8139817B2 (en) * 2007-04-27 2012-03-20 Telewatch Inc. Face image log creation
US8194952B2 (en) * 2008-06-04 2012-06-05 Raytheon Company Image processing system and methods for aligning skin features for early skin cancer detection systems
JP2011019192A (ja) * 2009-07-10 2011-01-27 Toshiba Corp 画像表示装置
CN102577348B (zh) * 2009-08-24 2016-06-15 三星电子株式会社 发送图像的方法以及应用该方法的图像拾取设备
US20140121188A1 (en) * 2009-10-02 2014-05-01 Foamix Ltd. Compositions for the improved treatment of acne and related disorders
US8855751B2 (en) * 2010-02-26 2014-10-07 Empire Technology Development Llc Multidirectional scan and algorithmic skin health analysis
US20120078088A1 (en) * 2010-09-28 2012-03-29 Point of Contact, LLC. Medical image projection and tracking system
US8644606B2 (en) * 2011-01-24 2014-02-04 Steven White Method for visual image detection
KR101198199B1 (ko) 2011-02-14 2012-11-07 김선미 피부 관리 지원 시스템 및 방법과 이를 지원하는 휴대 단말기
US20130058543A1 (en) * 2011-09-06 2013-03-07 The Proctor & Gamble Company Systems, devices, and methods for image analysis
JP2013101242A (ja) * 2011-11-09 2013-05-23 Sony Corp 画像処理装置、表示制御方法及びプログラム
TWI556116B (zh) * 2012-02-15 2016-11-01 Hitachi Maxell Skin condition analysis and analysis information management system, skin condition analysis and analysis information management method, and data management server
EP2733664A1 (en) 2012-11-09 2014-05-21 Skin Analytics Ltd Skin image analysis
JP2014123261A (ja) 2012-12-21 2014-07-03 Sony Corp 情報処理装置及び記録媒体
US9256963B2 (en) * 2013-04-09 2016-02-09 Elc Management Llc Skin diagnostic and image processing systems, apparatus and articles
US10512401B2 (en) 2013-05-03 2019-12-24 Parable Health, Inc. Methods and systems for facilitating medical care
US9875394B2 (en) * 2013-07-31 2018-01-23 Panasonic Intellectual Property Corporation Of America Skin analysis method, skin analysis device, and method for controlling skin analysis device
FR3015741B1 (fr) * 2013-12-23 2015-12-25 Galderma Res & Dev Procede d'analyse d'images du visage pour la detection d'un effet flush.
US10366487B2 (en) * 2014-03-14 2019-07-30 Samsung Electronics Co., Ltd. Electronic apparatus for providing health status information, method of controlling the same, and computer-readable storage medium
SG10201405182WA (en) * 2014-08-25 2016-03-30 Univ Singapore Technology & Design Method and system
EP3692896A1 (en) * 2014-11-04 2020-08-12 Samsung Electronics Co., Ltd. Electronic device, and method for analyzing face information in electronic device
TWI585711B (zh) * 2016-05-24 2017-06-01 泰金寶電通股份有限公司 獲得保養信息的方法、分享保養信息的方法及其電子裝置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103989454A (zh) * 2013-02-19 2014-08-20 北京银万特科技有限公司 基于移动智能终端的皮肤监测与保养方法及系统

Also Published As

Publication number Publication date
US20170061609A1 (en) 2017-03-02
KR20170027477A (ko) 2017-03-10
EP3345384A4 (en) 2018-08-15
EP3345384A1 (en) 2018-07-11
KR102490438B1 (ko) 2023-01-19
EP3345384B1 (en) 2020-03-25
WO2017039341A1 (en) 2017-03-09
US10786196B2 (en) 2020-09-29
CN107925725A (zh) 2018-04-17

Similar Documents

Publication Publication Date Title
CN107925725B (zh) 显示装置以及该显示装置的控制方法
US10841265B2 (en) Apparatus and method for providing information
CN107430489B (zh) 共享用户可配置的图形构造的方法、介质和设备
CN108664829B (zh) 用于提供与图像中对象有关的信息的设备
KR102367828B1 (ko) 이미지 운용 방법 및 이를 지원하는 전자 장치
KR20220156926A (ko) 제1 사용자 인터페이스 콘텐츠를 제2 사용자 인터페이스 내로 조합하기
CN116719595A (zh) 用于媒体捕获和管理的用户界面
US20170011557A1 (en) Method for providing augmented reality and virtual reality and electronic device using the same
US20190324634A1 (en) Display and Processing Methods and Related Apparatus
US11632344B2 (en) Media item attachment system
KR20160146281A (ko) 전자 장치 및 전자 장치에서 이미지 표시 방법
US20240061659A1 (en) Mini program data binding method and apparatus, device, and storage medium
US11145047B2 (en) Method for synthesizing image and an electronic device using the same
KR20160031851A (ko) 정보 제공 방법 및 그 전자 장치
US11943283B2 (en) Dynamically assigning storage locations for messaging system data
US20220198603A1 (en) Recentering ar/vr content on an eyewear device
US20220092307A1 (en) Contextual media filter search
KR20220160084A (ko) 튜토리얼 콘텐츠와 함께 증강 현실 콘텐츠를 디스플레이
WO2022140734A1 (en) Recentering ar/vr content on an eyewear device
WO2022140113A1 (en) Conversation interface on an eyewear device
US20230229279A1 (en) User interfaces for managing visual content in media
KR20200127928A (ko) 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치
US20160259539A1 (en) User terminal device, digital signage device, and controlling methods thereof
US20200065604A1 (en) User interface framework for multi-selection and operation of non-consecutive segmented information
Kumar et al. Google glasses impediments

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201020

CF01 Termination of patent right due to non-payment of annual fee