KR20240021052A

KR20240021052A - Skin diagnosis device and system including the same

Info

Publication number: KR20240021052A
Application number: KR1020220099552A
Authority: KR
Inventors: 문명일
Original assignee: 문명일
Priority date: 2022-08-09
Filing date: 2022-08-09
Publication date: 2024-02-16

Abstract

피부 진단장치는 사용자 얼굴 이미지를 획득하는 이미지 획득 모듈; 디스플레이 모듈; 상기 디스플레이 모듈 상에 위치하는 하프 미러; 및 상기 얼굴 이미지에 기반하여 피부 진단을 수행하고, 상기 디스플레이 모듈 상에 피부 진단 결과를 포함하는 페이스 영역들을 상기 하프 미러에 관련된 제1 투과율로 표시하고, 상기 디스플레이 모듈 상에 사용자 인터페이스를 상기 하프 미러에 관련된 제2 투과율로 표시하는 제어 모듈을 포함하며, 상기 이미지 획득 모듈은 카메라 장치 및 3차원 이미지 획득 장치중 어느 하나를 포함한다.The skin diagnosis device includes an image acquisition module that acquires an image of the user's face; display module; a half mirror located on the display module; and performing skin diagnosis based on the facial image, displaying face areas including skin diagnosis results on the display module with a first transmittance related to the half mirror, and displaying a user interface on the display module on the half mirror. and a control module that displays a second transmittance related to , wherein the image acquisition module includes one of a camera device and a three-dimensional image acquisition device.

Description

Skin diagnosis device and skin diagnosis system including the same {SKIN DIAGNOSIS DEVICE AND SYSTEM INCLUDING THE SAME}

본 발명은 피부 진단장치 및 이를 포함하는 피부 진단 시스템에 관한 것으로서, 카메라 또는 를 이용하여 촬영한 얼굴 이미지를 하프 미러 후면의 디스플레이 장치를 통하여 사용자가 확인하면서 피부 진단 및 피부케어 서비스를 제공받을 수 있도록 한 피부 진단장치 및 이를 포함하는 피부 진단 시스템에 관한 것이다.The present invention relates to a skin diagnosis device and a skin diagnosis system including the same, which allows the user to receive skin diagnosis and skin care services while checking the facial image captured using a camera or through a display device on the back of the half mirror. It relates to a skin diagnosis device and a skin diagnosis system including the same.

최근 외모와 가성비를 중시하는 트렌드가 확산되면서 집에서 스스로 자신의 몸이나 건강을 관리하는 '홈 케어' 열풍이 거세지고 있으며, 남녀 가리지 않고 피부미용은 현대인의 주요 관심사 중 하나이다. 그러나 매일 피부 관리나 진단을 받는 것이 비용이나 시간 측면에서 부담스러운 것이 사실이다.Recently, as the trend of emphasizing appearance and cost-effectiveness has spread, the 'home care' craze of taking care of one's own body and health at home is growing stronger, and skin care is one of the main interests of modern people regardless of gender. However, it is true that receiving skin care or diagnosis every day is burdensome in terms of cost and time.

이에 집에서 매일 비춰보는 거울에서 자신의 피부상태를 분석해주고 해결책을 알려주는 기술들이 등장하고 있다.Accordingly, technologies are emerging that analyze the condition of your skin in the mirror you look at every day at home and provide solutions.

본 발명의 목적은, 평상시에는 일반 거울로서 기능하며, 피부 진단 시에 카메라에 의한 얼굴 또는 피부 상태를 스캔하고, 디스플레이 장치 상에 디스플레이하면서 사용자가 피부 진단 및 피부케어 서비스를 제공받을 수 있도록 한 피부 진단장치 및 이를 포함하는 피부 진단 시스템을 제공하고자 하는 것이다.The purpose of the present invention is to provide a skin mirror that functions as a general mirror in normal times, scans the face or skin condition with a camera during skin diagnosis, and displays it on a display device so that the user can receive skin diagnosis and skin care services. The object is to provide a diagnostic device and a skin diagnosis system including the same.

또한, 본 발명은 음성 인식, 모션 인식, 터치 인식 등의 사용자 인터페이스(UI)에 의한 명령에 따라 피부케어 서비스 정보를 제공받을 수 있도록 하는 것이다.In addition, the present invention allows skin care service information to be provided according to commands through a user interface (UI) such as voice recognition, motion recognition, and touch recognition.

상기 기술적 과제를 해결하기 위한 본 발명의 일 측면에 따른 피부 진단장치는 사용자 얼굴 이미지를 획득하는 이미지 획득 모듈; 디스플레이 모듈; 상기 디스플레이 모듈 상에 위치하는 하프 미러; 및 상기 얼굴 이미지에 기반하여 피부 진단을 수행하고, 상기 디스플레이 모듈 상에 피부 진단 결과를 포함하는 페이스 영역들을 상기 하프 미러에 관련된 제1 투과율로 표시하고, 상기 디스플레이 모듈 상에 사용자 인터페이스를 상기 하프 미러에 관련된 제2 투과율로 표시하는 제어 모듈을 포함하며, 상기 이미지 획득 모듈은 카메라 장치 및 3차원 이미지 획득 장치중 어느 하나를 포함한다.A skin diagnosis device according to one aspect of the present invention for solving the above technical problem includes an image acquisition module for acquiring a user's face image; display module; a half mirror located on the display module; and performing skin diagnosis based on the facial image, displaying face areas including skin diagnosis results on the display module with a first transmittance related to the half mirror, and displaying a user interface on the display module on the half mirror. and a control module that displays a second transmittance related to , wherein the image acquisition module includes one of a camera device and a three-dimensional image acquisition device.

상기 페이스 영역들은 이마 영역, 좌우 눈가 영역, 좌우 볼 영역, 턱 영역을 포함할 수 있다.The face areas may include a forehead area, left and right eye areas, left and right cheek areas, and chin area.

상기 제어 모듈은 상기 피부 진단 결과를 포함하는 페이스 영역들이 사용자 얼굴 라인에 맞춰져 있지 않으면, 상기 페이스 영역들을 사용자 얼굴 라인에 맞춰지도록 이동시킬 수 있다.If the face areas including the skin diagnosis results are not aligned with the user's face line, the control module may move the face areas to align with the user's face line.

상기 제어 모듈은 상기 진단 결과에 따라서 사용자의 피부 상태 및 피부톤, 얼굴 형상에 맞는 추천 메이크업 및 메이크업 제품에 대한 정보를 사용자에게 제공할 수 있다.The control module may provide the user with information about recommended makeup and makeup products suitable for the user's skin condition, skin tone, and face shape according to the diagnosis results.

상기 제어 모듈은 카메라 모듈의 촬영 타이밍 및 촬영 각도 등을 제어하는 카메라 제어부, LED 모듈의 밝기 및 파장과 지속시간을 제어하는 조명 제어부, 디스플레이 모듈의 밝기 및 해상도를 제어하는 화면 제어부, 네트워크 접속 및 서버 연동을 위한 통신 제어부, 카메라를 통한 사용자 제스쳐 등을 감지하여 처리하기 위한 모션 인식부, 마이크 장치를 통한 사용자 음성을 감지하여 처리하는 음성 인식부 및 미러에 부착된 터치 필름의 터치 인식을 제어하는 터치 인식부를 포함할 수 있다.The control module includes a camera control unit that controls the shooting timing and shooting angle of the camera module, a lighting control unit that controls the brightness, wavelength, and duration of the LED module, a screen control unit that controls the brightness and resolution of the display module, network connection, and a server. A communication control unit for linkage, a motion recognition unit to detect and process user gestures through a camera, a voice recognition unit to detect and process the user's voice through a microphone device, and a touch control unit to control touch recognition of the touch film attached to the mirror. It may include a recognition unit.

본 발명의 일 측면에 따른 피부 진단 시스템은 사용자 얼굴 이미지를 획득하는 이미지 획득 모듈; 디스플레이 모듈 및 상기 디스플레이 모듈 상에 위치하는 하프 미러를 포함하고, 피부 진단 결과를 수신하면 상기 디스플레이 모듈 상에 상기 피부 진단 결과를 포함하는 페이스 영역들을 상기 하프 미러에 관련된 제1 투과율로 표시하고, 상기 디스플레이 모듈 상에 사용자 인터페이스를 상기 하프 미러에 관련된 제2 투과율로 표시하는 피부 진단장치; 및 상기 이미지 획득 모듈로부터 상기 사용자 얼굴 이미지를 수신하면, 상기 사용자 얼굴 이미지에 대한 피부 진단을 수행하고, 피부 진단 결과를 상기 피부 진단장치로 전송하는 피부 진단 서버를 포함하며, 상기 이미지 획득 모듈은 카메라 장치 및 3차원 이미지 획득 장치중 어느 하나를 포함한다.A skin diagnosis system according to an aspect of the present invention includes an image acquisition module for acquiring a user's face image; Comprising a display module and a half mirror located on the display module, when receiving a skin diagnosis result, displaying face areas including the skin diagnosis result on the display module with a first transmittance related to the half mirror, a skin diagnosis device that displays a user interface on a display module with a second transmittance related to the half mirror; and a skin diagnosis server that, when receiving the user's face image from the image acquisition module, performs a skin diagnosis on the user's face image and transmits the skin diagnosis result to the skin diagnosis device, wherein the image acquisition module is a camera. It includes any one of a device and a 3D image acquisition device.

상기 페이스 영역들은 이마 영역, 좌우 눈가 영역, 좌우 볼 영역, 턱 영역을 포함하라 수 있다.The face areas may include a forehead area, left and right eye areas, left and right cheek areas, and chin area.

상기 피부 진단장치는 상기 피부 진단 결과를 포함하는 페이스 영역들이 사용자 얼굴 라인에 맞춰져 있지 않으면, 상기 페이스 영역들을 사용자 얼굴 라인에 맞춰지도록 이동시킬 수 있다.If the face areas containing the skin diagnosis results are not aligned with the user's face line, the skin diagnosis apparatus may move the face areas to align with the user's face line.

상기 피부 관리서버는 상기 피부 진단 결과에 따른 피부 솔루션을 상기 피부 진단장치로 전송할 수 있다.The skin care server may transmit a skin solution according to the skin diagnosis results to the skin diagnosis device.

상기 피부 솔루션은 상기 피부 진단 결과에 따라서 사용자의 피부 상태 및 피부톤, 얼굴 형상에 맞는 추천 메이크업 및 메이크업 제품에 대한 정보를 포함할 수 있다.The skin solution may include information about recommended makeup and makeup products suitable for the user's skin condition, skin tone, and face shape according to the skin diagnosis results.

상기 피부 관리 서버는 상기 피부 진단 장치로 사용자 신체 정보를 요청하고 상기 피부 진단 장치로부터 사용자 신체 정보를 수신하면 상기 사용자 신체 정보에 따른 권장 운동량 및 피트니트 센터 위치를 포함하는 피부 솔루션을 상기 피부 진단 장치로 전송할 수 있다.The skin care server requests user body information from the skin diagnosis device, and upon receiving the user body information from the skin diagnosis device, provides a skin solution including a recommended amount of exercise and a fitness center location according to the user body information to the skin diagnosis device. It can be sent to .

상기 피부 관리 서버는 상기 피부 진단 장치로 사용자 신체 정보를 요청하고 상기 피부 진단 장치로부터 사용자 신체 정보를 수신하면 상기 사용자 신체 정보에 따른 식이 조절 식단 및 관련 쇼핑 정보를 상기 피부 진단장치로 전송할 수 있다.The skin care server may request user body information from the skin diagnosis device and, upon receiving the user body information from the skin diagnosis device, transmit a dietary adjustment menu and related shopping information according to the user body information to the skin diagnosis device.

본 발명의 실시예들에 따른 피부 진단장치 및 이를 포함하는 피부 진단 시스템에 따르면, 사용자는 자신의 얼굴이 카메라 모듈에 의해 촬영된 사용자 이미지가 아닌 하프 미러를 통해 사용자의 반사를 보기 때문에 자신의 피부 상태 및 피부 색을 정확히 파악할 수 있으며, 디스플레이 장치에 표시된 진단 결과도 동시에 볼 수 있다.According to the skin diagnosis device and the skin diagnosis system including the same according to embodiments of the present invention, the user sees the user's reflection through the half mirror rather than the user image captured by the camera module, so the user's skin You can accurately determine your condition and skin color, and you can also view the diagnostic results displayed on the display device at the same time.

또한, 본 발명의 피부 진단장치를 통한 피부 진단 서비스에 있어서 피부 상태 진단 데이터를 지정된 병원이나 담당 주치의 또는 외부 전문가에게 정보를 공유하고 실시간 채팅 아이콘을 실행 시, 피부 전문가들로부터 조언 및 피드백을 받을 수 있어 효과적인 피부케어를 제공받을 수 있는 효과가 있다.In addition, in the skin diagnosis service using the skin diagnosis device of the present invention, skin condition diagnosis data can be shared with a designated hospital, attending physician, or external expert and receive advice and feedback from skin experts when running the real-time chat icon. This has the effect of providing effective skin care.

도 1은 본 발명의 일실시예에 따른 스마트 미러를 이용하는 피부 진단장치 및 피부관리 서버를 포함하는 시스템을 나타낸 도면이다.
도 2는 도 1의 피부 진단장치의 정면도, 후면도 및 사시도를 나타낸 도면이다.
도 3은 도 1의 피부 진단장치의 분해 사시도이다.
도 4는 본 발명에 따른 디스플레이 장치의 구성을 나타낸 도면이다.
도 6는 본 발명에 따른 하프 미러를 이용하는 피부 진단장치의 동작 방법을 나타내는 흐름도이다.
도 7은 도 6의 진단장치의 동작 순서에 따른 피부진단 장치의 화면들을 나타낸 도면이다.
도 8a 및 도 8b는 본 발명에 따라 피부케어 정보를 표시하는 피부 진단장치의 화면 예들을 나타난 도면이다.
도 9은 본 발명의 일 실시예에 따른 피부 진단 시스템에서 피부 진단을 위한 메시지 흐름을 나타낸 도면이다.Figure 1 is a diagram showing a system including a skin diagnosis device and a skin care server using a smart mirror according to an embodiment of the present invention.
FIG. 2 is a front view, rear view, and perspective view of the skin diagnosis device of FIG. 1.
Figure 3 is an exploded perspective view of the skin diagnosis device of Figure 1.
Figure 4 is a diagram showing the configuration of a display device according to the present invention.
Figure 6 is a flowchart showing a method of operating a skin diagnosis device using a half mirror according to the present invention.
FIG. 7 is a diagram showing screens of the skin diagnosis device according to the operation sequence of the diagnosis device of FIG. 6.
Figures 8a and 8b are diagrams showing examples of screens of a skin diagnosis device that displays skin care information according to the present invention.
Figure 9 is a diagram showing a message flow for skin diagnosis in a skin diagnosis system according to an embodiment of the present invention.

본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.Terms or words used in this specification and claims should not be construed as limited to their common or dictionary meanings, and the inventor may appropriately define the concept of terms in order to explain his or her invention in the best way. It must be interpreted with meaning and concept consistent with the technical idea of the present invention based on the principle that it is.

따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Therefore, the embodiments described in this specification and the configuration shown in the drawings are only one of the most preferred embodiments of the present invention and do not represent the entire technical idea of the present invention, and therefore, various equivalents that can replace them at the time of filing the present application It should be understood that variations and variations may exist.

이하 본 발명의 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명하면 아래와 같다.Hereinafter, a preferred embodiment of the present invention will be described in detail with reference to the attached drawings.

도 1은 본 발명의 일실시예에 따른 스마트 미러를 이용하는 피부 진단장치 및 피부관리 서버를 포함하는 시스템을 나타낸 도면이다. Figure 1 is a diagram showing a system including a skin diagnosis device and a skin care server using a smart mirror according to an embodiment of the present invention.

피부 진단 장치(100)는 사용자의 얼굴 이미지를 획득한 후 사용자의 얼굴 이미지를 이용하여 피부 진단을 수행하고, 피부 진단 결과를 하프 미러를 이용하여 표시할 수 있다. The skin diagnosis device 100 may obtain a face image of the user, perform a skin diagnosis using the user's face image, and display the skin diagnosis result using a half mirror.

피부 진단 장치(100)는 사용자 얼굴 이미지를 이미지 획득 모듈을 통해 획득할 수 있다. 상기 이미지 획득 모듈은 카메라 장치 및 3차원 이미지 획득 장치를 포함할 수 있다. 카메라 장치는 피부 진단 장치(100)에 포함될 수 있다. 3차원 이미지 획득 장치(400))는 피부 진단 장치(100)와 유선 통신 방식 또는 무선 통신 방식으로 연결될 수 있다. 피부 진단 장치(100)는 상기 3차원 이미지 획득 장치(400)로부터 사용자의 3차원 구조의 얼굴 스캔 이미지를 획득할 수 있다. The skin diagnosis device 100 may acquire a user's face image through an image acquisition module. The image acquisition module may include a camera device and a 3D image acquisition device. A camera device may be included in the skin diagnosis device 100. The 3D image acquisition device 400 may be connected to the skin diagnosis device 100 through a wired or wireless communication method. The skin diagnosis device 100 may acquire a facial scan image of the user's 3D structure from the 3D image acquisition device 400.

도 1에서와 같이 본 발명의 3차원 이미지 획득 장치는 밀폐된 내부 공간을 가지는 본체하우징과, 본체하우징의 일 측면에서 면 발광의 펄스 레이저광을 외부로 방출하며 외부에서 들어오는 광의 투과를 용이하게 하는 윈도우(410)가 배치된다. 상기 윈도우(410)는 3차원 이미지 획득 장치의 내외부로 광 투과를 용이하게 하고 본체하우징을 보호하기 위한 광투과성 부재로 이루어질 수 있다.As shown in Figure 1, the three-dimensional image acquisition device of the present invention includes a main housing having a sealed internal space, a surface-emitting pulse laser light emitting from one side of the main housing to the outside, and a device that facilitates the transmission of light coming from the outside. A window 410 is disposed. The window 410 may be made of a light-transmissive member to facilitate light transmission into and out of the three-dimensional image acquisition device and to protect the main housing.

피부 진단 장치(100)는 네트워크(10)를 통해 피부 관리 서버(300)에 연결될 수 있다. 피부 진단 장치(100)는 자체적으로 얼굴 이미지를 이용하여 피부 진단을 수행할 뿐만 아니라 피부 관리 서버(300)로 피부 진단을 요청할 수도 있다. The skin diagnosis device 100 may be connected to the skin care server 300 through the network 10. The skin diagnosis device 100 not only performs skin diagnosis by itself using a facial image, but can also request skin diagnosis from the skin management server 300.

이에 본 발명의 본체하우징은 도 1에서와 같이 일정 높이의 사각 박스 형태로 이루어질 수 있으나, 이에 한정하지는 않는다.Accordingly, the main housing of the present invention may be in the form of a rectangular box with a certain height as shown in FIG. 1, but is not limited to this.

도 2는 도 1의 피부 진단장치의 정면도, 후면도 및 사시도를 나타낸 도면이다. 도 3은 도 1의 피부 진단장치의 분해 사시도이다.FIG. 2 is a front view, rear view, and perspective view of the skin diagnosis device of FIG. 1. Figure 3 is an exploded perspective view of the skin diagnosis device of Figure 1.

피부 진단장치(100)는 하프 미러(110), 프레임(130), LED 모듈(140), 상기 하프 미러(110)가 부착되는 디스플레이 장치(160), 카메라 모듈(170), 및 리어 커버(rear cover)(190)를 포함한다. 디스플레이 장치(160)는 본 발명에 따른 피부 진단 동작을 수행하는 시스템 모듈을 포함하고 있다.The skin diagnosis device 100 includes a half mirror 110, a frame 130, an LED module 140, a display device 160 to which the half mirror 110 is attached, a camera module 170, and a rear cover. cover) (190). The display device 160 includes a system module that performs a skin diagnosis operation according to the present invention.

또한, 피부 진단장치(100)는 USB 젠더(Zender) 및 파워 PCB(150) 및 배터리(180)를 더 포함할 수 있다.Additionally, the skin diagnosis device 100 may further include a USB Zender, a power PCB 150, and a battery 180.

상기 하프 미러(110)는 투명 PET 박막에 알루미늄 등의 금속을 코팅함으로써 형성될 수 있다. 또는 상기 하프 미러(110)는 투명 PET 박막을 여러층 적층 합지함으로써 형성될 수 있다. 상기 하프 미러(110)는 광투과율 35% 내지 50%을 갖도록 형성될 수 있다. 또한, 상기 하프 미러(110)는 65% 내지 50%의 거울 반사율을 갖도록 형성될 수 있다. The half mirror 110 can be formed by coating a transparent PET thin film with a metal such as aluminum. Alternatively, the half mirror 110 may be formed by laminating multiple layers of transparent PET thin films. The half mirror 110 may be formed to have a light transmittance of 35% to 50%. Additionally, the half mirror 110 may be formed to have a mirror reflectance of 65% to 50%.

그 결과, 하프 미러(110)는 부분적으로 반사되고 부분적으로 투명하다. 사용자(10)가 바라보는 하프 미러(110)의 면이 하프 미러(110)의 반대 면보다 훨씬 더 밝을 때, 사용자는 대부분 그의 반사(reflection)를 본다. 반대로, 사용자가 바라보는 하프 미러(110)의 측면이 하프 미러(110)의 반대쪽보다 현저히 어두울 때, 사용자는 대부분 하프 미러(110)를 통해 그의 반사 대신 다른 측(the other side)을 볼 수 있다.As a result, half mirror 110 is partially reflective and partially transparent. When the side of the half mirror 110 that the user 10 is looking at is much brighter than the opposite side of the half mirror 110, the user mostly sees his reflection. Conversely, when the side of the half mirror 110 that the user is looking at is significantly darker than the other side of the half mirror 110, the user can mostly see the other side through the half mirror 110 instead of his reflection. .

이로 인해 피부 진단 장치(100)의 표면은 일반거울과 비슷하거나 동일한 색상과 반사율을 갖지만 하프 미러(110) 뒷면에 밝은 광원이 있다면 그 빛이 외부로 투과되어 볼 수 있게 되는 것이다.As a result, the surface of the skin diagnosis device 100 is similar to or has the same color and reflectance as a regular mirror, but if there is a bright light source on the back of the half mirror 110, the light is transmitted to the outside and can be seen.

즉, 하프 미러(110)는 디스플레이 장치(160)가 비활성화될 때는 거울로서 기능하고, 디스플레이 장치(160)가 콘텐츠를 표시할 때는 디스플레이 장치(160)의 컨텐츠를 투과하여 사용자가 컨텐츠를 볼 수 있다.That is, the half mirror 110 functions as a mirror when the display device 160 is inactive, and when the display device 160 displays content, the half mirror 110 transmits the content of the display device 160 so that the user can view the content. .

디스플레이 장치(160)는 하프 미러(110)의 일측에 인접하게 배치된다. 디스플레이 장치(160)는 피부 진단장치(100)의 사용자 인터페이스를 사용자에게 디스플레이한다. 다양한 예들에서, 디스플레이 장치(160)는 사용자 인터페이스를 그래픽 사용자 인터페이스(GUI)로서 제공하는데 사용되지만, 다른 예들에서 Ul은 텍스트 기반이거나 다른 유형일 수 있다.The display device 160 is disposed adjacent to one side of the half mirror 110. The display device 160 displays the user interface of the skin diagnosis device 100 to the user. In various examples, display device 160 is used to provide a user interface as a graphical user interface (GUI), although in other examples Ul may be text-based or other type.

디스플레이 장치(160)의 밝기는 사용자가 마주하고 있는 하프 미러(110)의 주변 밝기보다 더 밝거나 어둡게 하도록 제어 가능하다. 주변 밝기에 따라 디스플레이(120)의 밝기를 적절하게 제어함으로써, 피부 진단장치(100)는 사용자가 하프 미러(110)를 통해 사용자 인터페이스를 더 뚜렷하게 보는지 또는 하프 미러(110)로부터의 사용자의 반사를 더 뚜렷하게 볼 수 있는지 판단할 수 있다. The brightness of the display device 160 can be controlled to be brighter or darker than the surrounding brightness of the half mirror 110 facing the user. By appropriately controlling the brightness of the display 120 according to the surrounding brightness, the skin diagnosis device 100 determines whether the user sees the user interface more clearly through the half mirror 110 or the user's reflection from the half mirror 110. You can determine whether you can see more clearly.

디스플레이 장치(160)는 LCD(Liquid Crystal Display) 또는 OLED(Organic Light Emitting Diode) 디스플레이를 포함할 수 있다. OLED 디스플레이는 백라이트를 사용하지 않기 때문에 어두운 환경(dimly-lit environments)에서 하프 미러(110)가 대부분 반사 방식으로(in a mostly-reflective manner) 작동할 수 있도록 한다.The display device 160 may include a Liquid Crystal Display (LCD) or Organic Light Emitting Diode (OLED) display. OLED displays do not use a backlight, allowing the half mirror 110 to operate in a mostly-reflective manner in dimly-lit environments.

프레임(130)에는 발광다이오드(LED)를 이용한 LED 모듈(140)이 장착된다. LED 모듈(140)은 2개의 LED 바(142, 144)를 포함한다. 2개의 LED 바(142, 144)는 광을 방출한다.An LED module 140 using a light emitting diode (LED) is mounted on the frame 130. LED module 140 includes two LED bars 142 and 144. The two LED bars 142 and 144 emit light.

상기 LED 모듈(140)에서 방출되는 광을 확산하기 위해 상기 LED 모듈(140)을 커버하는 보호 덮개로서 광 확산판(Light Diffusion Plate)(122, 124)이 구비될 수 있다.In order to diffuse the light emitted from the LED module 140, light diffusion plates 122 and 124 may be provided as protective covers that cover the LED module 140.

또한, 사용자의 피부 스캔을 위해 하나 이상의 카메라 모듈(170)이 장착될 수 있는데, 이때 카메라 모듈(170)은 디스플레이 장치(160)의 상단에 위치할 수 있다. 그러나, 카메라 모듈(170)의 위치는 당업자에 의해 자명한 어떠한 위치도 가능하다.Additionally, one or more camera modules 170 may be mounted to scan the user's skin. In this case, the camera module 170 may be located on the top of the display device 160. However, the position of the camera module 170 can be any position that is obvious to those skilled in the art.

카메라 모듈(170)은 사용자의 피부를 촬영함으로써 사용자 얼굴 이미지를 획득할 수 있다. 그런데, 카메라 모듈(170)을 통해 획득된 사용자 얼굴 이미지는 통상적으로 카메라 필터링에 의해 또는 보정 프로그램을 통해 사용자 얼굴의 실제 피부 상태와 피부 색과 다른 피부 상태와 피부 색을 나타낼 수 있다.The camera module 170 may obtain an image of the user's face by photographing the user's skin. However, the user's face image acquired through the camera module 170 may typically represent a skin condition and skin color that is different from the actual skin condition and skin color of the user's face through camera filtering or a correction program.

본 발명에서는 피부 진단장치(100)가 카메라 모듈(170)을 통해 촬영된 사용자 얼굴 이미지에 기반하여 피부 상태를 진단한 후 그 결과를 디스플레이 장치(160) 상에 표시한다. 이 때, 사용자가 자신의 얼굴 이미지를 본다면 제대로 자신의 얼굴 상태를 파악할 수 없게 된다.In the present invention, the skin diagnosis device 100 diagnoses the skin condition based on the user's face image captured through the camera module 170 and then displays the results on the display device 160. At this time, if the user sees the image of his or her face, he or she will not be able to properly determine the state of his or her face.

본 발명에서는 사용자는 하프 미러(110)를 통해 사용자의 반사(reflection)을 보면서 동시에 하프 미러(110)의 후위에 위치한 디스플레이 장치(160)를 통해 사용자의 피부 진단 결과를 표시할 수 있다. In the present invention, the user can view the user's reflection through the half mirror 110 and simultaneously display the user's skin diagnosis results through the display device 160 located behind the half mirror 110.

그에 따라, 사용자는 자신의 얼굴을 카메라 모듈(170)에 의해 촬영된 사용자 이미지가 아닌 하프 미러(110)를 통해 사용자의 반사를 보기 때문에 자신의 피부 상태 및 피부 색을 정확히 파악할 수 있으며, 디스플레이 장치(160)에 표시된 진단 결과도 동시에 볼 수 있게 된다. Accordingly, since the user sees the user's reflection through the half mirror 110 rather than the user image captured by the camera module 170, the user can accurately determine his/her skin condition and skin color, and the display device The diagnosis results displayed at (160) can also be viewed at the same time.

도 4는 본 발명에 따른 디스플레이 장치의 구성을 나타낸 도면이다. Figure 4 is a diagram showing the configuration of a display device according to the present invention.

디스플레이 장치(160)는 제어 모듈(210), 통신 모듈(220), 전원 모듈(230), 음성 입출력 모듈(240) 및 디스플레이 모듈(250)을 포함하여 이루어질 수 있다. 디스플레이 모듈(150)은 전술한 바와 같이, LCD(Liquid Crystal Display) 또는 OLED(Organic Light Emitting Diode) 디스플레이로 구현될 수 있다.The display device 160 may include a control module 210, a communication module 220, a power module 230, an audio input/output module 240, and a display module 250. As described above, the display module 150 may be implemented as a Liquid Crystal Display (LCD) or Organic Light Emitting Diode (OLED) display.

상기 음성 입출력 모듈(240)은 사용자 음성을 입력받을 수 있는 마이크 장치 및 사운드를 출력하는 스피커 장치를 포함하는 것이라 할 수 있다.The voice input/output module 240 can be said to include a microphone device that can receive a user's voice and a speaker device that outputs sound.

상기 통신 모듈(220)은 적어도 하나 이상의 접속 포트(Ex, LAN 포트)를 제공하여 다른 컴퓨팅 장치와의 유선 방식의 통신을 가능하게 할 수 있거나, WiFi, 3G, LTE, 블루투스(Bluetooth) 등과 같은 무선 방식을 사용하여 사용자 스마트폰 또는 외부 컴퓨팅 장치와 통신이 가능하도록 할 수 있다.The communication module 220 may provide at least one access port (Ex, LAN port) to enable wired communication with other computing devices, or wireless communication such as WiFi, 3G, LTE, Bluetooth, etc. The method can be used to enable communication with a user's smartphone or external computing device.

이에 제어 모듈(210)은 통신 모듈(220)을 통하여 외부의 피부케어 관리 서버와 연동할 수 있다.Accordingly, the control module 210 can link with an external skin care management server through the communication module 220.

상기 피부케어 관리 서버(300)는 사용자의 피부 촬영 영상을 전송받아 인공지능 기반 복합적 데이터 분석에 따른 진단을 통하여 피부케어 정보를 생성하고 이를 진단장치에 제공하는 서비스 플랫폼이라 할 수 있다.The skin care management server 300 can be said to be a service platform that receives a user's skin image, creates skin care information through diagnosis based on artificial intelligence-based complex data analysis, and provides it to a diagnostic device.

그러므로 상기 제어 모듈(210)은 카메라 모듈(170)의 촬영 타이밍 및 촬영 각도 등을 제어하는 카메라 제어부, LED 모듈(140)의 밝기 및 파장과 지속시간을 제어하는 조명 제어부, 디스플레이 모듈(250)의 밝기 및 해상도를 제어하는 화면 제어부, 카메라 모듈(170)를 통한 사용자 제스쳐 등을 감지하여 처리하기 위한 모션 인식부, 마이크를 통한 사용자 음성을 감지하여 처리하는 음성 인식부 및 하프 미러(110)에서 입력되는 터치를 인식하는 터치 인식부를 포함할 수 있으며, 이외에도 통신 모듈(220)을 통한 네트워크 접속 및 서버 연동을 위한 통신 제어부, 조명 및 디스플레이 모듈의 온 오프를 제어하기 위한 전원제어부 및 내부 저장 장치를 제어하는 기능을 더 포함하여 이루어질 수 있다. Therefore, the control module 210 includes a camera control unit that controls the shooting timing and shooting angle of the camera module 170, a lighting control unit that controls the brightness, wavelength, and duration of the LED module 140, and a display module 250. A screen control unit that controls brightness and resolution, a motion recognition unit that detects and processes user gestures through the camera module 170, a voice recognition unit that detects and processes the user's voice through the microphone, and input from the half mirror 110. It may include a touch recognition unit that recognizes the touch, and in addition, a communication control unit for network connection and server interworking through the communication module 220, a power control unit for controlling the on and off of the lighting and display module, and an internal storage device control unit. It may be accomplished by further including the following functions.

상기 제어 모듈(210)은 피부케어 관리 서버로부터 생성된 피부케어 정보를 제공받아, 하프 미러(110)을 통하여 사용자가 얼굴, 피부 등의 상태를 확인할 때, 사용자의 피부 분석 결과 및 진단 결과를 음성으로 출력할 수 있도록 하는 음성 출력부를 더 포함할 수 있다.The control module 210 receives skin care information generated from the skin care management server, and when the user checks the condition of the face, skin, etc. through the half mirror 110, the control module 210 reports the user's skin analysis results and diagnosis results as a voice. It may further include a voice output unit that allows output.

제어 모듈(210)은 하드웨어 및 소프트웨어 구성요소의 조합으로 이루어지며, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치를 이용하여 구현될 수 있다. 상기 제어 모듈(210)은 운영 체제(OS) 및 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다.The control module 210 consists of a combination of hardware and software components, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, and a field programmable gate array (FPGA). ), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The control module 210 may execute an operating system (OS) and one or more software applications executed on the operating system.

디스플레이 장치(160)는 도시하지 않았지만, 다양한 센서들을 포함할 수 있다. 상기 센서들은 주변광 센서, 근접 센서 등을 포함할 수 있다. 추가적으로 상기 하프 미러(110)에는 사용자 터치 조작에 따른 인식이 가능하도록 하는 터치 인식 필름이 부착되며 이에 따른 터치 센서가 구비될 수 있다.Although not shown, the display device 160 may include various sensors. The sensors may include an ambient light sensor, a proximity sensor, etc. Additionally, a touch recognition film is attached to the half mirror 110 to enable recognition according to a user's touch operation, and a touch sensor may be provided accordingly.

제어 모듈(210)은 센서들 및 디스플레이 모듈(250)에 통신 가능하게 결합된다. 제어 모듈(210)은 또한 예를 들어 인터넷과 같은 외부의 통신 네트워크(미도시)에 통신 가능하게 결합될 수 있다. 제어 모듈(210)은 또한 하프 미러(110) 상의 사용자의 반사 및 디스플레이 모듈(250) 상의 사용자 인터페이스를 모두 잘 보이는 방식으로 제시하도록 구성된다. 제어 모듈(210)는 하프 미러(110) 상에 사용자 인터페이스를 덜 가시적인 방식으로 표시하고 사용자(10)의 반사를 매우 가시적인 방식으로 표시하도록 한다. Control module 210 is communicatively coupled to sensors and display module 250 . Control module 210 may also be communicatively coupled to an external communication network (not shown), such as the Internet, for example. Control module 210 is also configured to present both the user's reflection on half mirror 110 and the user interface on display module 250 in a highly visible manner. The control module 210 causes the user interface to be displayed on the half mirror 110 in a less visible manner and the user's 10 reflection to be displayed in a highly visible manner.

구체적으로 제어 모듈(210)은 사용자가 피부 진단 기능을 실행하면 사용자의 얼굴을 촬영하고, 촬영한 사용자 얼굴 이미지에 대해 피부 진단을 수행한다. 이 경우, 제어 모듈(210)은 사용자의 촬영된 얼굴 이미지를 피부 관리 서버(300)로 전송할 수 있다. 피부 관리 서버(300)는 얼굴 이미지에 기초하여 피부 진단을 수행하고 피부 진단 결과를 피부진단 장치(100)로 전송할 수 있다. Specifically, when the user executes the skin diagnosis function, the control module 210 photographs the user's face and performs skin diagnosis on the captured image of the user's face. In this case, the control module 210 may transmit the user's captured facial image to the skin care server 300. The skin management server 300 may perform skin diagnosis based on the facial image and transmit the skin diagnosis result to the skin diagnosis device 100.

제어 모듈(210)은 피부 진단 결과를 디스플레이 모듈(250) 상에 표시할 수 있다. The control module 210 may display the skin diagnosis results on the display module 250.

구체적으로, 제어 모듈(210)은 디스플레이 모듈(250) 상에 피부 진단 결과를 포함하는 페이스 영역들을 하프 미러(110)에 관련된 제1 투과율로 표시한다. 제1 투과율은 사용자가 하프 미러(110)를 통해 디스플레이 모듈(25)에 표시된 컨텐츠와 사용자의 반사를 동시에 볼 수 있도록 한다. 이러한 관련된 관련된 제1 투과율은 사용자에 의해 조절될 수 있다.Specifically, the control module 210 displays face areas including skin diagnosis results on the display module 250 with a first transmittance related to the half mirror 110 . The first transmittance allows the user to simultaneously view the content displayed on the display module 25 and the user's reflection through the half mirror 110. This associated first transmittance can be adjusted by the user.

또한, 제어 모듈(210)은 디스플레이 모듈(250) 상에 사용자 인터페이스를 하프 미러(110)에 관련된 제2 투과율로 표시한다. 제2 투과율을 사용자가 하프 미러(110)를 통해 자신의 반사를 거의 볼 수 없도록 한다.Additionally, the control module 210 displays a user interface on the display module 250 with a second transmittance related to the half mirror 110 . The second transmittance makes it so that the user can hardly see his or her reflection through the half mirror 110.

하프 미러(110)의 투과율은 디스플레이 모듈(250)의 밝기에 좌우된다. 디스플레이 모듈(250)의 밝기가 클수록 하프 미러(110)의 투과율이 증가한다. 또한, 디스플레이 모듈(250)의 밝기가 작을수록 하프 미러(110)의 투과율이 감소한다. 하프 미러(1100의 투과율이 증가할수록 디스플레이(250) 상에 표시된 컨텐츠를 사용자가 더 잘 볼 수 있다. The transmittance of the half mirror 110 depends on the brightness of the display module 250. As the brightness of the display module 250 increases, the transmittance of the half mirror 110 increases. Additionally, as the brightness of the display module 250 decreases, the transmittance of the half mirror 110 decreases. As the transmittance of the half mirror 1100 increases, the user can better see the content displayed on the display 250.

본 발명에 따라, 사용자는 하프 미러(110) 상에 자신의 반사를 보면서 자신의 얼굴의 피부 진단 결과를 볼 수 있다. According to the present invention, a user can view the skin diagnosis results of his or her face while looking at his or her reflection on the half mirror 110.

도 5는 본 발명의 일 실시예에 따른 3차원 이미지 획득 장치의 구성을 보여주는 블록도이다.Figure 5 is a block diagram showing the configuration of a 3D image acquisition device according to an embodiment of the present invention.

도시에서와 같이 본 발명의 3차원 이미지 획득 장치는 제어부 기판(600) 및 광의 송신과 수신을 위한 광 송수신 유닛(500)을 포함한다. As shown in the figure, the 3D image acquisition device of the present invention includes a control board 600 and an optical transmitting and receiving unit 500 for transmitting and receiving light.

상기 광 송수신 유닛(500)은 전면렌즈(510), 빅셀모듈(520), 빔스플리터(540), TOF 수신센서(530), 카메라 모듈(550)을 포함한다.The optical transmitting and receiving unit 500 includes a front lens 510, a vixel module 520, a beam splitter 540, a TOF receiving sensor 530, and a camera module 550.

광 송수신 유닛(200)은 3차원 이미지 획득 장치의 윈도우(410)의 방향으로 위치되는 전면렌즈(510)이 위치되고, 상기 전면렌즈(510)의 뒷단에서는 외부로부터 입사되는 광을 적외선과 가시광의 파장대로 분리하여 굴절시키는 빔스플리터(Beam splitter)(540)가 구비되며, 상기 빔스플리터(240)의 수평방향 뒷단에서 적외선 파장 대를 감지하는 TOF 수신센서(530)가 구비된다.상기 빅셀모듈(520)은 수직 캐비티 표면 광방출 레이저(VCSEL, Vertical-Cavity Surface Emitting Laser)가 다수의 도트(dot) 어레이 형태로 모듈화 되어 빠른 펄스 패턴의 레이저를 면 발광으로 발신하는 모듈이다. 빅셀모듈(520)에서는 940nm의 내외의 근적외선 파장대를 점멸하며 방출하게 된다.The optical transmitting and receiving unit 200 has a front lens 510 located in the direction of the window 410 of the three-dimensional image acquisition device, and at the rear end of the front lens 510, light incident from the outside is converted into infrared and visible light. A beam splitter 540 is provided to separate and refract wavelengths, and a TOF reception sensor 530 that detects an infrared wavelength band is provided at the horizontal rear end of the beam splitter 240. The big cell module ( 520) is a module in which a Vertical-Cavity Surface Emitting Laser (VCSEL) is modularized in the form of a multiple dot array to emit a laser with a fast pulse pattern as surface light emission. The Bixel module 520 emits a blinking near-infrared wavelength range of around 940 nm.

또한, 빅셀모듈(520)은 펄스 패턴으로 면 발광되는 레이저 광을 앞단의 전면렌즈(510)의 일부분을 통해 외부로 방출하도록 이루어지는데, 이에 상기 빅셀모듈(520)의 앞면에 위치하는 전면렌즈(510)의 일부분이 상기 빅셀모듈(520)에서 방출되는 광을 외부로 발산시키기 위한 필터렌즈(511)로 구비될 수 있다.In addition, the Bixel module 520 is configured to emit laser light that is surface-emitting in a pulse pattern to the outside through a portion of the front lens 510 at the front end. Therefore, the front lens (located on the front of the Bixel module 520) A portion of 510) may be provided as a filter lens 511 to radiate light emitted from the big cell module 520 to the outside.

이때, 상기 필터렌즈(511)는 빅셀모듈(520)의 자체 레이저 광원에 사용된 파장만 통과시키기 위한 대역통과 필터의 기능을 하는 렌즈일 수 있다. 즉, 전면렌즈(510)는 전체적으로 광 수신용을 위한 광학 렌즈의 기능을 수행하되, 상기 빅셀모듈(520)의 앞단에 위치되는 일정 부분에서는 광 발신을 위한 필터렌즈(511)가 전면렌즈(510)의 일정 위치에서 삽입되거나, 외측에 추가로 장착될 수 있다.At this time, the filter lens 511 may be a lens that functions as a band-pass filter to pass only the wavelengths used in the laser light source of the Vixel module 520. That is, the front lens 510 performs the function of an optical lens for receiving light as a whole, but in a certain part located in front of the big cell module 520, the filter lens 511 for transmitting light functions as the front lens 510. ) can be inserted at a certain location or installed additionally on the outside.

또한, 빅셀모듈(520)의 VCSEL에서 광을 쏠 때 굉장히 빠른 간격으로 점멸을 시키기 위한 모듈레이션(modulation)(521)이 구비되고, 여기서 빅셀모듈(520)의 레이저가 켜있는 동안을 in phase라 부르고 레이저가 꺼져있는 동안을 out phase라 하며, TOF 수신센서(530)는 각각의 셀이 2개씩의 감지 센서(receptor) 쌍으로 구성되어 반사되어 돌아오는 빛을 상기 모듈레이션(521)의 점멸 간격과 동기화되어 출사된 광 펄스와 정확히 동기화되도록 실행됨으로서 시간 타이밍에 따른 위상차를 측정하기 위한 적외선 이미지 센서라 할 수 있다.In addition, a modulation 521 is provided to blink at very fast intervals when the VCSEL of the VCSEL module 520 emits light, and here, while the laser of the VCSEL module 520 is on is called in phase. While the laser is turned off, it is called out phase. Each cell of the TOF receiving sensor 530 consists of two pairs of detection sensors (receptors), and synchronizes the reflected light with the blinking interval of the modulation 521. It can be said to be an infrared image sensor for measuring phase difference according to time timing by being precisely synchronized with the emitted light pulse.

즉 일반적인 적외선(IR) 센서는 신호 강도만 측정하고 사물의 반사율에 영향을 받기 쉽지만, TOF 수신센서는 VCSEL에서 발신되는 적외선 레이저를 수광하여 이에 따른 비행시간 방식 거리를 계산하기 때문에 더 정밀한 값을 얻을 수 있다.In other words, a general infrared (IR) sensor only measures signal strength and is easily affected by the reflectance of objects, but a TOF receiving sensor receives the infrared laser emitted from the VCSEL and calculates the time-of-flight distance accordingly, providing more precise values. You can.

본 발명에서의 TOF 수신센서(530)는 일정 픽셀 피치(예를 들어 15μ일정 프레임(예를 들어 초당 최대 150 프레임)의 속도에서 일정 해상도(예를 들어 VGA 640x480)의 분해능 데이터를 제공할 수 있다.The TOF receiving sensor 530 in the present invention can provide resolution data with a certain resolution (e.g., VGA 640x480) at a constant pixel pitch (e.g., 15μ constant frame rate (e.g., a maximum of 150 frames per second)). .

또한, TOF 수신센서(530)에서 나오는 신호가 아날로그 신호인 경우, A/D 컨버터(ADC, Analog to Digital Converter)(523)에 의해서 디지털 신호로 변환되어 3D 이미지처리모듈(620)로 전달될 수 있다.In addition, if the signal coming from the TOF receiving sensor 530 is an analog signal, it can be converted into a digital signal by the A/D converter (ADC, Analog to Digital Converter) 523 and transmitted to the 3D image processing module 620. there is.

본 발명의 제어부 기판(600)은 빅셀모듈(520)의 펄스형 레이저(VCSEL)의 빠른 점멸을 위한 구동신호를 인가하기 위한 광 발신 제어 및 가시광 영역의 수신을 위한 이미지센서(도시 생략)에 초점 조절 기능을 수행하기 위하여 카메라 모듈(550)을 제어하는 제어모듈(610)과, TOF 수신센서(530)와 이미지센서로부터 주변 지형 및 피사체 등의 목표물에 대한 영상 데이터를 수신 받아, 이를 결합하여 목표물에 대한 3차원 공간 구조를 측정하는 3D 이미지처리모듈(320)을 포함한다.The control board 600 of the present invention focuses on an image sensor (not shown) for controlling light transmission and receiving a visible light region to apply a driving signal for rapid blinking of the pulsed laser (VCSEL) of the Vixel module 520. In order to perform the adjustment function, the control module 610, which controls the camera module 550, receives image data about targets such as surrounding terrain and objects from the TOF reception sensor 530 and the image sensor, and combines them to determine the target. It includes a 3D image processing module 320 that measures the three-dimensional spatial structure.

즉 상기 3D 이미지처리모듈(620)은 목표물에 대한 영상 데이터를 수신 받아 노이즈를 제거하는 전처리 과정을 수행하며, TOF 수신센서(530)에서 수광된 목표물에 대한 적외선 영역에서의 일그러진 구조 영상에 대한 깊이 정보를 계산하고, 또한, 이미지센서에서 수신된 컬러 영상과의 텍스쳐 성분의 대비를 비교하여 영상의 선명도가 높은 영상값을 선택하는 방식으로 두 영상을 융합하는 알고리즘 과정을 수행하게 된다. 상기 알고리즘을 통해 결합된 영상을 통하여 목표물에 대한 3차원 공간 구조를 정밀하게 측정할 수 있게 된다.That is, the 3D image processing module 620 receives image data about the target and performs a pre-processing process to remove noise, and calculates the depth of the distorted structure image in the infrared region of the target received by the TOF receiving sensor 530. An algorithmic process is performed to fuse the two images by calculating information and comparing the contrast of texture components with the color image received from the image sensor to select an image value with high image clarity. It is possible to precisely measure the three-dimensional spatial structure of a target through images combined through the above algorithm.

이를 위해 제어부 기판(600)은 논리회로, 프로그래밍 로직 컨트롤러, 마이컴, 마이크로프로세서 등에서 선택되는 적어도 어느 하나의 장치로 구현될 수 있고, 이를 아우르는 FPGA(Field-Programmable Logic Array) 보드로 구현될 수 있다.To this end, the control board 600 can be implemented with at least one device selected from a logic circuit, programming logic controller, microcomputer, microprocessor, etc., and can be implemented with an FPGA (Field-Programmable Logic Array) board encompassing these.

또한, 제어부 기판(600)은 무선의 WiFi 또는 유선의 LAN(Local Area Network) 연결을 위한 통신 연결 수단을 위한 통신모듈(630)을 별도로 구비하거나 일체로 결합되어 구성될 수 있다. 상기 통신모듈(630)은 인트라넷, 인터넷, 차량 네트워크 등을 통해 외부의 사용자 PC 또는 스마트폰과 같은 사용자 모바일 장치와 통신하게 되며, 감지한 주변 지형 및 피사체 등의 목표물에 대한 정보 데이터를 이러한 사용자 장치에 전송할 수 있다. 이는 인터넷과 같은 외부 네트워크에서 연동되는 사용자 컴퓨팅 장치에서 디지털 영상으로 변환되어 데이터를 재가공할 수 있는 편의를 제공하기 위함이다.Additionally, the control board 600 may be configured to include a communication module 630 for a communication connection means for wireless WiFi or wired LAN (Local Area Network) connection, or may be integrally combined with the communication module 630. The communication module 630 communicates with external user PCs or user mobile devices such as smartphones through an intranet, Internet, vehicle network, etc., and transmits information data about targets such as detected surrounding terrain and objects to these user devices. can be transmitted to. This is to provide the convenience of converting data into digital images and reprocessing them on user computing devices linked to external networks such as the Internet.

한편, 제어부 기판(600)은 본 발명의 3차원 이미지 획득 장치의 전원 공급을 위한 배선이나 어댑터 또는 전원공급수단을 구비할 수 있고, 상기 전원공급수단은 내부전원 또는 재충전 가능한 전원장치로 구비될 수 있다.Meanwhile, the control board 600 may be provided with wiring, an adapter, or a power supply means for supplying power to the 3D image acquisition device of the present invention, and the power supply means may be provided as an internal power source or a rechargeable power supply device. there is.

상기한 구성을 가진 3차원 이미지 획득 장치는 사용자의 얼굴에 대한 3차원 이미지를 획득할 수 있으며, 상기 3차원 이미지를 피부 진단 장치(100)로 무선 통신 또는 유선 통신 방식으로 전송할 수 있다. The 3D image acquisition device having the above configuration can acquire a 3D image of the user's face and transmit the 3D image to the skin diagnosis device 100 through wireless or wired communication.

피부 진단 장치(100)는 사용자 얼굴의 3차원 이미지를 수신하면 피부 진단을 수행하거나, 피부 관리 서버(300)로 피부 진단을 요청하기 위해 사용자 얼굴의 3차원 이미지를 송신할 수 있다. 이 경우, 피부 진단 장치(100) 또는 피부 관리 서버(300)는 3차원 이미지를 통해 사용자의 얼굴에 대한 피부 진단을 정밀하게 수행할 수 있다. When receiving a 3D image of the user's face, the skin diagnosis device 100 may perform a skin diagnosis or transmit the 3D image of the user's face to request a skin diagnosis to the skin care server 300. In this case, the skin diagnosis device 100 or the skin care server 300 can precisely perform skin diagnosis on the user's face using a 3D image.

도 6는 본 발명에 따른 하프 미러를 이용하는 피부 진단장치의 동작 방법을 나타내는 흐름도이고, 도 7은 도 6의 진단장치의 동작 순서에 따른 피부진단 장치의 화면들을 나타낸 도면이다. FIG. 6 is a flowchart showing a method of operating a skin diagnosis device using a half mirror according to the present invention, and FIG. 7 is a diagram showing screens of the skin diagnosis device according to the operation sequence of the diagnosis device of FIG. 6.

도 7(a)에 도시된 바와 같이, 사용자는 자신의 반사(310)를 하프 미러(110)를 통해 볼 수 있다. 이 경우, 디스플레이 모듈(250)는 컨텐츠를 표시하지 않으며, 그에 따라 하프 미러(110)의 투과율을 매우 낮다. 따라서, 사용자는 자신을 하프 미러(110)에 비춰 볼 수 있다.As shown in FIG. 7(a), the user can see his or her reflection 310 through the half mirror 110. In this case, the display module 250 does not display content, and accordingly, the transmittance of the half mirror 110 is very low. Accordingly, the user can see himself reflected in the half mirror 110.

피부 진단장치(100)는 피부 진단 모드에 진입하면 카메라 모듈(170)을 활성화한다(S110). 도 7(a)에는 도시하지 않았지만, 디스플레이 모듈(250)은 화면의 일부에 피부 진단 요청을 위한 아이콘 등을 표시할 수 있다. 피부 진단장치(100)는 사용자의 피부 진단 모드 진입을 나타내는 터치 명령이나 음성 명령 또는 제스쳐 명령을 인식하여 진입할 수 있다.When the skin diagnosis device 100 enters the skin diagnosis mode, it activates the camera module 170 (S110). Although not shown in FIG. 7(a), the display module 250 may display an icon for requesting a skin diagnosis, etc. on a portion of the screen. The skin diagnosis device 100 can enter the skin diagnosis mode by recognizing a touch command, voice command, or gesture command indicating the user's entry into the skin diagnosis mode.

여기서 피부 진단 모드란 사용자 피부 진단을 위한 카메라 촬영을 하기 위하여 LED 모듈(140)에서 일정 파장의 조명이 동작되어 밝기를 조절하고, 사용자는 얼굴과 같은 피부 진단 대상을 디스플레이 모듈(250) 상에 표시된 가상의 안내선에 따라 맞추며, 카메라를 향해 위치하여 촬영을 준비하는 모드라 할 수 있다.Here, the skin diagnosis mode refers to lighting of a certain wavelength operated in the LED module 140 to control brightness in order to take camera photos for user skin diagnosis, and the user displays a skin diagnosis object, such as a face, on the display module 250. It can be said to be a mode in which you prepare for shooting by adjusting according to the virtual guide line and positioning yourself toward the camera.

사용자는 예컨대, 디스플레이 모듈(250) 상에 표시된 사용자 인터페이스(330)를 통해 피부 진단을 피부진단 장치(100)에 요청할 수 있다.For example, a user may request a skin diagnosis from the skin diagnosis device 100 through the user interface 330 displayed on the display module 250.

사용자에 의해 피부 진단이 요청되면, 피부진단 장치(100)는 카메라 모듈(170)을 활성화한다. 이후 피부 진단장치(100)는 사용자 얼굴이 캡쳐되는 지 판단할 수 있다(S120). 예컨대, 카메라 모듈(170)이 사용자의 얼굴을 캡쳐하여 얼굴 이미지를 획득하여 제어 모듈(210)에 제공할 수 있다.When a skin diagnosis is requested by a user, the skin diagnosis device 100 activates the camera module 170. Thereafter, the skin diagnosis device 100 may determine whether the user's face is captured (S120). For example, the camera module 170 may capture the user's face, obtain a facial image, and provide it to the control module 210.

피부 진단장치(100)는 사용자의 얼굴이 캡쳐되면 사용자 얼굴 이미지에 대해 피부 진단을 수행한다(S130). When the user's face is captured, the skin diagnosis device 100 performs skin diagnosis on the user's face image (S130).

이어서, 피부 진단장치(100)는 피부 진단 결과를 디스플레이 모듈(250) 상에 표시할 수 있다. Subsequently, the skin diagnosis device 100 may display the skin diagnosis results on the display module 250.

구체적으로, 피부 진단장치(100)는 디스플레이 모듈(250) 상에 피부 진단 결과를 포함하는 페이스 영역들(330)을 하프 미러(110)에 관련된 제1 투과율로 표시한다. 제1 투과율은 사용자가 하프 미러(110)를 통해 디스플레이 모듈(250)에 표시된 컨텐츠와 사용자의 반사를 동시에 볼 수 있도록 한다. 이러한 관련된 관련된 제1 투과율은 사용자에 의해 조절될 수 있다.Specifically, the skin diagnosis device 100 displays face areas 330 including skin diagnosis results on the display module 250 with a first transmittance related to the half mirror 110. The first transmittance allows the user to simultaneously view the content displayed on the display module 250 and the user's reflection through the half mirror 110. This associated first transmittance can be adjusted by the user.

또한, 제어 모듈(210)은 디스플레이 모듈(250) 상에 사용자 인터페이스(320)를 하프 미러(110)에 관련된 제2 투과율로 표시한다. 제2 투과율은 사용자가 하프 미러(110)를 통해 자신의 반사를 거의 볼 수 없도록 한다.Additionally, the control module 210 displays the user interface 320 on the display module 250 with a second transmittance related to the half mirror 110 . The second transmittance allows the user to barely see his or her reflection through the half mirror 110.

본 발명에 따라, 사용자는 하프 미러(110) 상에 자신의 반사를 보면서 자신의 얼굴의 피부 진단 결과를 볼 수 있다.According to the present invention, a user can view the skin diagnosis results of his or her face while looking at his or her reflection on the half mirror 110.

이어서, 피부 진단장치(100)는 피부 진단 결과, 예컨대, 피부 진단 결과를 포함하는 페이스 영역들(330)이 사용자 얼굴 라인에 맞춰져 있는 지를 판단한다(S160). 페이스 영역들(330)은 이마 영역, 좌우 눈가 영역, 좌우 볼 영역, 턱 영역을 포함할 수 있다. Next, the skin diagnosis apparatus 100 determines whether the skin diagnosis result, for example, the face areas 330 including the skin diagnosis result, are aligned with the user's face line (S160). The face areas 330 may include a forehead area, left and right eye areas, left and right cheek areas, and chin area.

피부 진단 결과를 포함하는 페이스 영역들(330)이 사용자 얼굴 라인에 맞춰져 있지 않으면, 피부 진단장치(100)는 페이스 영역들(330)을 사용자 얼굴 라인에 맞춰지도록 이동시킨다(S170). 이 경우, 피부 진단장치(100)는 카메라 모듈(170)을 통해 사용자 얼굴을 캡쳐하여 캡쳐된 사용자 얼굴에 기반하여 페이스 영역들(330)이 사용자 얼굴 라인에 맞춰져 있는 지를 판단할 수 있다.If the face areas 330 containing the skin diagnosis results are not aligned with the user's face line, the skin diagnosis device 100 moves the face areas 330 to align with the user's face line (S170). In this case, the skin diagnosis device 100 may capture the user's face through the camera module 170 and determine whether the face areas 330 are aligned with the user's face line based on the captured user's face.

한편, 피부 진단장치(100)는 진단 결과에 따라서 사용자의 피부 상태 및 피부톤, 얼굴 형상에 맞는 추천 메이크업 및 메이크업 제품을 소개할 수 있다. 또한, 피부 진단장치(100)는 피부 건강상태에 따른 권장 운동량 및 피트니스 센터 위치 정보등을 제공함으로써 사용자에게 피부 개선을 위한 필요한 사항들을 제안할 수 있다. Meanwhile, the skin diagnosis device 100 can introduce recommended makeup and makeup products suited to the user's skin condition, skin tone, and face shape according to the diagnosis results. In addition, the skin diagnosis device 100 can suggest necessary matters for improving the skin to the user by providing recommended exercise amount and fitness center location information according to skin health status.

피부 진단장치(100)는 피부 건강 상태에 따른 식이 조절 제안 및 피부 개선에 도움이 되는 식재료를 제안할 수 있다. 피부 진단장치(100)는 사용자가 피부 전문가들과 실시간 채팅을 가능하도록 할 수 있다. 이 경우, 사용자는 자신의 피부에 대하여 피부 전문가들로부터 조언 및 진단을 받고 문의 사항 등을 해결함으로써 사용자가 조속한 피부 개선 및 치료를 받을 수 있다.The skin diagnosis device 100 can suggest dietary adjustments according to skin health conditions and suggest food ingredients that are helpful in improving the skin. The skin diagnosis device 100 may enable users to chat in real time with skin experts. In this case, the user can receive advice and diagnosis about his or her skin from skin experts and resolve any questions, so that the user can quickly receive skin improvement and treatment.

한편, 피부 진단장치(100)는 피부 관리 서버(300)에 사용자 얼굴 이미지를 전송하여 피부 진단을 요청할 수 있다. 이 경우, 피부 관리 서버(300)는 사용자의 피부 상태 또는 날씨에 따라 화장 방법 또는 화장품을 사용자에게 제안할 수 있다. Meanwhile, the skin diagnosis device 100 may request a skin diagnosis by transmitting the user's face image to the skin management server 300. In this case, the skin care server 300 may suggest a makeup method or cosmetics to the user according to the user's skin condition or weather.

상기 피부 관리 서버(300)는 사용자의 피부 촬영 영상을 전송받아 인공지능 기반 복합적 데이터 분석에 따른 진단을 통하여 피부케어 정보를 생성하고, 피부 진단 서비스 정보를 피부 진단장치(100)로 제공할 수 있다.The skin care server 300 receives a user's skin image, generates skin care information through diagnosis based on artificial intelligence-based complex data analysis, and provides skin diagnosis service information to the skin diagnosis device 100. .

도 8a 및 도 8b는 본 발명에 따라 피부케어 정보를 표시하는 피부 진단장치의 화면 예들을 나타난 도면이다.Figures 8a and 8b are diagrams showing examples of screens of a skin diagnosis device that displays skin care information according to the present invention.

도 8a 및 도 8b를 참조하면, 복수개의 아이콘들(332)은 피부상태 진단 결과 표시 아이콘, AI로 신체 및 피부상태 체크 결과에 따른 화장법을 제공 받을 수 있는 화장방법 제공 아이콘, 피부상태 체크 결과에 따른 권장 운동량 표시 아이콘, 식이조절 제안 표시 아이콘 및 실시간 채팅 아이콘 등을 포함할 수 있다.Referring to FIGS. 8A and 8B, a plurality of icons 332 include an icon for displaying skin condition diagnosis results, an icon for providing a makeup method for receiving a makeup method according to the body and skin condition check results using AI, and a skin condition check result. It may include a recommended amount of exercise display icon, a diet suggestion display icon, and a real-time chat icon.

또한, 복수개의 아이콘들(332)은 피부 상태 진단 데이터를 지정된 병원이나 담당 주치의 또는 외부 전문가에게 정보를 공유하고 피드백을 받을 수 있도록 하는 데이터 공유 아이콘을 제공할 수 있다. 또한, 스마트폰의 앱(Application) 연동 및 소셜 네트워크 서비스(Social Networking Service, SNS) 공유 아이콘을 제공하여 피부 상태 진단 데이터를 공유하도록 할 수 있다.Additionally, the plurality of icons 332 may provide a data sharing icon that allows skin condition diagnosis data to be shared and feedback received from a designated hospital, attending physician, or external expert. In addition, skin condition diagnosis data can be shared by linking to a smartphone application and providing a social networking service (SNS) sharing icon.

복수개의 아이콘들(332)중 하나가 선택되면 관련 콘텐츠가 사용자 인터페이스(330)에 표시될 수 있다. 이 경우, 컨텐츠량이 많으면 사용자 인터페이스(330)를 확대할 수 있는 확장 아이콘(330a)가 사용자 인터페이스(330) 상에 표시되어 있다. 확장 아이콘(330a)가 선택되면, 관련 컨텐츠가 더 많이 표시된다. 축소 아이콘(330b)가 선택되면, 사용자의 반사 및 페이스 영역들(330)이 표시된다.When one of the plurality of icons 332 is selected, related content may be displayed on the user interface 330. In this case, if the amount of content is large, an expansion icon 330a that can enlarge the user interface 330 is displayed on the user interface 330. When the expansion icon 330a is selected, more related content is displayed. When the zoom out icon 330b is selected, the user's reflection and face areas 330 are displayed.

도 9은 본 발명의 일 실시예에 따른 피부 진단 시스템에서 피부 진단을 위한 메시지 흐름을 나타낸 도면이다.Figure 9 is a diagram showing a message flow for skin diagnosis in a skin diagnosis system according to an embodiment of the present invention.

도 9을 참조하면, 피부 진단장치(100)는 사용자에 의해 피부 진단 요청이 발생하는 지를 판단할 수 있다(S202). 예컨대, 사용자는 피부 진단장치(100)의 디스플레이 모듈(250) 상에 표시된 피부 진단 아이콘을 선택함으로써 피부 진단 요청을 발생시킬 수 있다. 피부 진단장치(100)는 피부 진단을 음성 명령 또는 제스쳐 명령을 인식할 수도 있다.Referring to FIG. 9, the skin diagnosis device 100 may determine whether a skin diagnosis request is made by the user (S202). For example, a user may generate a skin diagnosis request by selecting a skin diagnosis icon displayed on the display module 250 of the skin diagnosis device 100. The skin diagnosis device 100 may recognize voice commands or gesture commands for skin diagnosis.

피부 진단 요청이 발생하면, 피부 진단장치(100)는 카메라 모듈(170)을 활성화한다(S204). 이후 피부 진단장치(100)는 사용자 얼굴을 캡쳐할 수 있다(S206). When a skin diagnosis request occurs, the skin diagnosis device 100 activates the camera module 170 (S204). Afterwards, the skin diagnosis device 100 can capture the user's face (S206).

피부 진단장치(100)는 사용자의 얼굴이 캡쳐되면 사용자 얼굴 이미지를 피부 관리 서버(300)로 전송할 수 있다(S208). 피부 관리 서버(300)는 피부 진단장치(100)로부터 얼굴 이미지를 수신하면 해당 얼굴 이미지에 대해 피부 진단을 수행하고(S210) 피부 진단 결과를 피부 진단장치(100)로 전송한다(S212).When the user's face is captured, the skin diagnosis device 100 may transmit the user's face image to the skin care server 300 (S208). When the skin care server 300 receives a facial image from the skin diagnosis device 100, it performs a skin diagnosis on the facial image (S210) and transmits the skin diagnosis result to the skin diagnosis device 100 (S212).

피부 진단장치(100)는 피부 진단 결과를 수신하면 피부 진단 결과를 디스플레이 모듈(250) 상에 표시한다. When the skin diagnosis device 100 receives the skin diagnosis results, it displays the skin diagnosis results on the display module 250.

또한, 피부 진단장치(100)는 디스플레이 모듈(250) 상에 사용자 인터페이스(320)를 하프 미러(110)에 관련된 제2 투과율로 표시한다. 제2 투과율은 사용자가 하프 미러(110)를 통해 자신의 반사를 거의 볼 수 없도록 한다.Additionally, the skin diagnosis device 100 displays the user interface 320 on the display module 250 with a second transmittance related to the half mirror 110. The second transmittance allows the user to barely see his or her reflection through the half mirror 110.

피부 진단장치(100)는 피부 관리 서버(300)에 피부 솔루션을 요청할 수 있다(S216). 피부 관리 서버(300)는 피부 솔루션을 제공하기 위해 필요한 사용자 정보를 피부 진단장치(100)에 요청할 수 있다(S218). 사용자 정보는 사용자의 신체적 특징, 예컨대, 키, 몸무게, 나이 등을 포함할 수 있다. 사용자 정보의 요청을 수신하면 피부 진단장치(100)는 사용자 정보를 피부 관리 서버(300)에 전송할 수 있다(S220). 사용자 정보의 요청 및 사용자 정보의 전송은 본 발명 필수 구성요소가 아니므로, 생략될 수 있다.The skin diagnosis device 100 may request a skin solution from the skin care server 300 (S216). The skin care server 300 may request the skin diagnosis device 100 for user information necessary to provide a skin solution (S218). User information may include the user's physical characteristics, such as height, weight, age, etc. Upon receiving a request for user information, the skin diagnosis device 100 may transmit the user information to the skin care server 300 (S220). Since requesting user information and transmitting user information are not essential components of the present invention, they may be omitted.

피부 진단장치(100)가 사용자 정보를 피부 관리 서버(300)에 전송하면, 피부 관리 서버(300)가 피부 진단 결과 또는 사용자 정보에 기반하여 피부 솔루션을 피부 진단장치(100)로 전송할 수 있다 (S222).When the skin diagnosis device 100 transmits user information to the skin care server 300, the skin care server 300 may transmit a skin solution to the skin diagnosis device 100 based on the skin diagnosis results or user information ( S222).

피부 솔루션은 예컨대, 화장 방법, 추천 화장품, 건강 상태에 따른 권장 운동량, 피트니스 센터 위치 정보, 건강 상태에 따른 식이 조절 제안 및 쇼핑 제안, 피부 전문자들과의 실시간 채팅을 포함할 수 있다. Skin solutions may include, for example, makeup methods, recommended cosmetics, recommended exercise amount according to health status, fitness center location information, dietary adjustment suggestions and shopping suggestions according to health status, and real-time chat with skin experts.

일 실시예에 따라, 피부 솔루션은 상기 피부 진단 결과에 따라서 사용자의 피부 상태 및 피부톤, 얼굴 형상에 맞는 추천 메이크업 및 메이크업 제품에 대한 정보를 포함할 수 있다. 다른 실시예에 따라, 피부 솔루션은 사용자의 신체 특징에 따른 권장 운동량 및 피트니트 센터 위치를 포함할 수 있다. 또 다른 실시예에 따라, 피부 솔루션은 사용자의 신체 특징에 따른 식이 조절 식단 및 관련 쇼핑 정보를 포함할 수 있다. According to one embodiment, the skin solution may include information about recommended makeup and makeup products suitable for the user's skin condition, skin tone, and face shape according to the skin diagnosis results. According to another embodiment, the skin solution may include a recommended amount of exercise and a fitness center location according to the user's body characteristics. According to another embodiment, the skin solution may include a dietary control plan and related shopping information according to the user's physical characteristics.

한편 도시하지 않았지만, 피부 진단 서비스에 있어서 실시간 채팅 아이콘을 실행 시, 피부 전문가들로부터 조언 및 피드백을 받는 실시간 채팅 화면을 볼 수 있다. 또한, 신체 및 피부상태 체크 결과에 따른 권장 운동량에 대한 정보가 표시될 수 있다. Meanwhile, although not shown, when you run the real-time chat icon in the skin diagnosis service, you can see a real-time chat screen that receives advice and feedback from skin experts. Additionally, information about the recommended amount of exercise according to the results of body and skin condition check may be displayed.

전술한 바와 같이 본 발명의 상세한 설명에서는 바람직한 실시예들에 관하여 설명하였지만, 본 발명의 기술분야에서 통상의 지식을 가진 사람이라면 하기의 청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음은 이해할 수 있을 것이다.As described above, preferred embodiments of the present invention have been described in the detailed description of the present invention, but those skilled in the art will understand without departing from the spirit and scope of the present invention as set forth in the following claims. It will be understood that various modifications and changes can be made to the present invention.

110: 하프미러 130: 프레임
140: LED 모듈 160: 디스플레이 장치
170: 카메라 모듈 210: 제어 모듈
220: 통신 모듈 230: 전원 모듈
240: 음성 입출력 모듈 250: 디스플레이 모듈110: half mirror 130: frame
140: LED module 160: display device
170: camera module 210: control module
220: communication module 230: power module
240: Voice input/output module 250: Display module

Claims

An image acquisition module that acquires a user's face image;
display module;
a half mirror located on the display module; and
Perform skin diagnosis based on the facial image, display face areas containing skin diagnosis results on the display module with a first transmittance related to the half mirror, and display a user interface on the display module to the half mirror. a control module indicating the associated second transmittance;
The image acquisition module is a skin diagnosis device including one of a camera device and a 3D image acquisition device.

In claim 1,
The face areas include a forehead area, left and right eye areas, left and right cheek areas, and chin area.

In claim 2,
The control module is a skin diagnosis device that, if the face areas containing the skin diagnosis results are not aligned with the user's face line, moves the face areas to align with the user's face line.

The skin diagnosis device according to claim 1, wherein the control module provides the user with information about recommended makeup and makeup products suitable for the user's skin condition, skin tone, and face shape according to the diagnosis results.

In claim 1,
The control module is
A camera control unit that controls the shooting timing and shooting angle of the camera module,
A lighting control unit that controls the brightness, wavelength, and duration of the LED module,
A screen control unit that controls the brightness and resolution of the display module,
Communication control unit for network connection and server interworking,
A motion recognition unit to detect and process user gestures through a camera,
A voice recognition unit that detects and processes the user's voice through a microphone device, and
A skin diagnosis device including a touch recognition unit that controls touch recognition of a touch film attached to a mirror.

In the skin diagnosis system,
An image acquisition module that acquires a user's face image;
Comprising a display module and a half mirror located on the display module, when receiving a skin diagnosis result, displaying face areas including the skin diagnosis result on the display module with a first transmittance related to the half mirror, a skin diagnosis device that displays a user interface on a display module with a second transmittance related to the half mirror; and
When receiving the user's face image from the image acquisition module, it includes a skin diagnosis server that performs a skin diagnosis on the user's face image and transmits the skin diagnosis result to the skin diagnosis device,
The image acquisition module is a skin diagnosis system including one of a camera device and a 3D image acquisition device.

In claim 6,
The face areas include a forehead area, left and right eye areas, left and right cheek areas, and chin area.

In claim 6,
A skin diagnosis system in which the skin diagnosis device moves the face areas to align with the user's face line when the face areas containing the skin diagnosis results are not aligned with the user's face line.

In claim 6,
A skin diagnosis system in which the skin care server transmits a skin solution according to the skin diagnosis results to the skin diagnosis device.

In claim 9,
The skin solution is a skin diagnosis system that includes information on recommended makeup and makeup products suitable for the user's skin condition, skin tone, and face shape according to the skin diagnosis results.

In claim 6,
The skin care server requests user body information from the skin diagnosis device, and upon receiving the user body information from the skin diagnosis device, provides a skin solution including a recommended amount of exercise and a fitness center location according to the user body information to the skin diagnosis device. A skin diagnosis system transmitted to .

In claim 6,
The skin care server requests user body information from the skin diagnosis device, and upon receiving the user body information from the skin diagnosis device, transmits a dietary adjustment menu and related shopping information according to the user body information to the skin diagnosis device. system.