KR101846230B1 - 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템 - Google Patents

Abstract

본 발명은 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템에 관한 것으로서, 더욱 상세하게는 피부진단장치를 통해 피부 정보를 의사단말기에서 획득하여 피부 진단 정보를 생성하여 해당 피부 진단 정보를 피부관리클라우드서버로 제공하여 지속적인 관리가 가능하도록 하며, 상기 피부관리클라우드서버로부터 제공된 피부진단표시앱을 탑재하고 있는 스마트기기를 이용하여 언제, 어디서든지 자유롭게 접속하여 의사단말기에서 진단한 피부 진단 결과에 따른 피부 트러블 위치 및 항목에 따라 피부 관리를 수행함에 있어 해당 피부 트러블 위치별 혹은 항목별 이에 적합한 복약 지도 정보를 제공하거나, 자신이 소지하고 있는 피부를 치료하는 약품의 바코드를 스캔할 경우에 해당 약품이 사용되는 피부 트러블 위치 및 항목을 화면상에 제공하되, 특히 증강현실기반으로 화면에 실시간으로 복약 지도를 제공함을 특징으로 하는 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템에 관한 것이다.

Description

피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템{Telemedicine system using Augmented Reality-Based Medication Map and Three-dimensional image of the skin}

본 발명은 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템에 관한 것으로서, 더욱 상세하게는 피부진단장치를 통해 피부 정보를 의사단말기에서 획득하여 피부 진단 정보를 생성하여 해당 피부 진단 정보를 피부관리클라우드서버로 제공하여 지속적인 관리가 가능하도록 하며, 상기 피부관리클라우드서버로부터 제공된 피부진단표시앱을 탑재하고 있는 스마트기기를 이용하여 언제, 어디서든지 자유롭게 접속하여 의사단말기에서 진단한 피부 진단 결과에 따른 피부 트러블 위치 및 항목에 따라 피부 관리를 수행함에 있어 해당 피부 트러블 위치별 혹은 항목별 이에 적합한 복약 지도 정보를 제공하거나, 자신이 소지하고 있는 피부를 치료하는 약품의 바코드를 스캔할 경우에 해당 약품이 사용되는 피부 트러블 위치 및 항목을 화면상에 제공하되, 특히 증강현실기반으로 화면에 실시간으로 복약 지도를 제공함을 특징으로 하는 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템에 관한 것이다.

피부 미용에 대한 관심이 증가하면서 많은 사용자들이 피부관리실이나 마사지샵, 피부과의원 등 다양한 경로를 통하여 피부의 상태를 확인하고, 적절한 화장품이나 약품 등을 이용하여 피부관리를 하게 되었다.

사람들의 피부 상태는 계절에 따라서도 크게 달라지며, 개인마다 편차가 심하기 때문에 적절한 처방을 위해서는 정확한 진단이 무엇보다 중요하다.

피부 상태의 진단을 위하여 피부과의원이나 클리닉 등지에는 전문적인 의료장비들이 구비되어 모공의 확대사진을 촬영하는 등의 진단 행위를 가능케 하고 있다.

그러나, 피부 미용에 대한 관심의 증가로 인해 사용자들의 피부에 대한 지식수준도 함께 증가하였으며, 사용자들은 자신의 피부의 상태에 대해서 또는 피부의 상태변화에 대해서 보다 상세하게 알기를 원하게 되었다.

그럼에도 불구하고 단순히 피부 상태를 모니터링하고, 미용제품 등의 사용에 따른 변화추이를 파악하기 위하여 정기적으로 클리닉 등에 방문하는 것은 매우 번거로운 일이라 하겠다.

따라서, 사용자들이 휴대하면서 간단히 자신의 피부상태를 확인하고 진단할 수 있도록 하는 방안의 마련이 필요하다.

또한, 종래의 피부에 대한 종합적인 정보를 제공하는 카메라, 센서 등은 단순히 운영자가 수동으로 피부에 접촉하여 촬영하고 정보를 획득한다.

또한, 얼굴 피부에 대한 대략의 상태를 측정하는 경우에는 고해상도 카메라로 2D 영상을 획득하여 분석하여 왔고, 얼굴 피부에 대한 종합적인 정보를 획득하기 위해서는 고해상도 카메라 외에 다른 센서를 이용하여 접촉식 국부 촬영 센서로 재촬영해야 하는 번거로움이 존재했다.

이런 경우, 고해상도 카메라 앞에서 얼굴 피부 촬영 후 기구로부터 얼굴을 분리한 뒤 접촉식 국부 촬영 카메라를 수동으로 밀착하여 촬영하는 과정을 거쳐야 하는 불편함이 있었다.

특히, 피부 트러블 종류는 기미, 피지, 블랙헤드, 화이트헤드, 각질, 주름, 여드름 등으로 다양하고 그에 따른 종류마다 원인이나 관리법 또한 다양하기 때문에 적절하지 않은 피부 관리 제품이나 관리 방법을 적용하는 경우에 오히려 피부 트러블을 더욱 악화시킬 수 있다.

자신의 피부 상태를 확인하고 적합한 피부 관리 제품이나 관리 방법을 찾고자 많은 사람들이 피부 관리 샵이나 피부과 병원 등을 찾고 있는데, 이는 시간적으로나 비용적으로 부담을 주기에 보다 저렴하면서도 간단한 방법으로 자신의 피부를 확인하고 이에 대한 적합한 피부 관리 제품이나 관리 방법을 모색하는 요구가 높아지고 있다.

이와 같은 분위기에 따라 간단하게 자신의 피부 상태를 확인할 수 있는 다양한 방안들이 제시되고 있으며, 통신 기술의 발달로 스마트폰 등의 개인 휴대 통신 기기 등을 접목시키는 기술들이 제안되고 있다.

그러나 대부분의 종래 기술들은 개인 휴대 통신 기기를 통해 피부 관리 서버에 접속하여 일정 비용을 지불하면서 자신의 피부 상태를 확인하는 방안이 주를 이루고 있으며, 이외에 스마트폰 등에 피부 관리 어플리케이션을 탑재시켜 자신의 피부 상태를 확인하는 기술도 제안되었으나 이경우 간단한 피부 상태만 확인 가능할 뿐 다양한 피부 트러블에 대한 분석이 이루어지지 않아 단순히 흥미를 유발시키는 정도에 그치고 있다.

특히, 피부 관련 전문 병원의 출입이 제한적인 부류들은 수시로 자신의 피부 상태를 확인하고, 이에 따라 적절한 복약 지도를 수행하고 싶어도 제한적인 처방만 가능하여 피부 트러블이 더욱 악화되는 실정이다.

피부의 경우에는 복약 지도가 필요한데, 그 이유는 예를 들어, 피부 연고는 심각한 부작용을 초래하기에 바르는 부위와 주기를 잘 지켜야 하며, 스테로이드 연고의 경우에 안구 주위에 바를 경우 백내장 발병 위험을 높이는 결과를 초래하게 된다.

또한, 특정 연고는 그 주기를 빈번하게 할 경우에 모공의 이상과 안면 홍조 등을 발병시키며, 각질 융해와 탈락을 유도하지만 급격한 수분 결핍으로 건선을 발병시킬 가능성이 높다.

결국, 사용자들이 피부 진단 결과 정보를 언제든지 획득할 수 있도록 하여 항상 휴대하고 있는 스마트기기를 이용하여 간단히 자신의 피부 상태를 확인하고 현재 자신의 피부 상태에 가장 적합한 약품을 실시간으로 의사로부터 진단받아 피부 관리를 언제, 어디서도 자유롭게 수행할 수 있는 시스템을 제안하게 된 것이다.

(등록특허문헌) 대한민국공개특허공보 제10-2012-0069823호

따라서 본 발명은 상기와 같은 종래 기술의 문제점을 감안하여 제안된 것으로서, 본 발명의 제 1 목적은 피부진단장치를 통해 피부 정보를 의사단말기에서 획득하여 피부 진단 정보를 생성하여 해당 피부 진단 정보를 피부관리클라우드서버로 제공하여 지속적인 관리가 가능하도록 하며, 상기 피부관리클라우드서버로부터 제공된 피부진단표시앱을 탑재하고 있는 스마트기기를 이용하여 언제, 어디서든지 자유롭게 접속하여 의사단말기에서 진단한 피부 진단 결과에 따른 피부 트러블 위치 및 항목에 따라 피부 관리를 수행함에 있어 해당 피부 트러블 위치별 혹은 항목별 이에 적합한 복약 지도 정보를 제공하도록 하는데 있다.

본 발명의 제 2 목적은 의사단말기에서 진단한 피부 진단 결과에 따른 피부 트러블 위치 및 항목에 따라 피부 관리를 수행함에 있어 해당 피부 트러블 위치별 혹은 항목별 이에 적합한 복약 지도 정보를 증강 현실 기반으로 제공함으로써, 직관적으로 그리고 실시간으로 스마트기기를 통해 확인할 수 있도록 하는데 있다.

본 발명의 제 3 목적은, 자신이 소지하고 있는 피부를 치료하는 약품의 바코드를 스캔할 경우에 해당 약품이 사용되는 피부 트러블 위치 및 항목을 화면상에 제공하거나, 증강현실기반으로 화면에 실시간으로 제공하도록 하는데 있다.

본 발명이 해결하고자 하는 과제를 달성하기 위하여, 본 발명의 실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템은,

피부 상태를 촬영하여 촬영된 피부 정보를 피부관리클라우드서버(200)로 제공하기 위한 피부진단장치(100);

상기 피부진단장치로부터 제공되는 피부 정보와 해당 진단자의 아이디 정보를 매칭시켜 저장 관리하며, 의사단말기(400)로부터 피부 정보에 대한 피부 진단 결과 정보를 획득하여 피부 정보에 맵핑시켜 저장 관리하기 위한 피부관리클라우드서버(200);

상기 피부관리클라우드서버에 접속하여 해당 피부 진단 결과 정보를 획득하여 피부 진단의 위치를 피부 진단의 항목별로 복약 지도 정보와 함께 화면에 표시하기 위한 피부진단표시앱을 탑재하고 있는 스마트기기(300);를 포함한다.

본 발명에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템은, 피부진단장치를 통해 피부 진단 정보를 생성하여 해당 정보를 피부관리클라우드서버로 제공하여 지속적인 관리가 가능하도록 하며, 상기 피부관리클라우드서버로부터 제공된 피부진단표시앱을 탑재하고 있는 스마트기기를 이용하여 언제, 어디서든지 자유롭게 접속하여 의사단말기에서 진단한 피부 진단 결과에 따른 피부 트러블 위치 및 항목에 따라 피부 관리를 수행함에 있어 해당 피부 트러블 위치별 혹은 항목별 이에 적합한 처방전 혹은 복약 지도 정보를 제공할 수 있는 편리성과 효율성 및 간편성을 제공하게 된다.

또한, 의사단말기에서 진단한 피부 진단 결과에 따른 피부 트러블 위치 및 항목에 따라 피부 관리를 수행함에 있어 해당 피부 트러블 위치별 혹은 항목별 이에 적합한 처방전 혹은 복약 지도 정보를 증강 현실 기반으로 제공함으로써, 직관적으로 그리고 실시간으로 스마트기기를 통해 확인할 수 있도록 함으로써, 전문 병원을 방문할 필요없이 장소나 시간에 구애받지 않고, 피부 관리를 스케쥴에 따라 수행할 수 있는 효과를 발휘한다.

또한, 자신이 소지하고 있는 피부를 치료하는 약품의 바코드를 스캔할 경우에 해당 약품이 사용되는 피부 트러블 위치 및 항목을 화면상에 제공하거나, 증강현실기반으로 화면에 실시간으로 제공할 수 있게 되어 자신이 소지한 약품이 어느 부위에, 어느 피부 트러블에 사용하는 약품인지를 즉각적으로 증강 현실 기반으로 화면상에 제공할 수 있게 되어 약품의 오남용을 사전에 방지할 수 있게 된다.

도 1은 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 전체 구성도이다.
도 2는 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 피부진단장치 블록도이다.
도 3은 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 피부관리클라우드서버 블록도이다.
도 4는 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 스마트기기 블록도이다.
도 5는 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 피부 표면 이미지 예시도이며, 도 6은 증강현실 기반으로 자신의 실시간 동영상 얼굴에 해당 피부 진단의 위치를 항목별로 표시하는 예시도이며, 도 7은 복약 지도 예시도이며, 도 8은 바코드 스캔시, 약품 표시 예시도이다.

이하의 내용은 단지 본 발명의 원리를 예시한다. 그러므로 당업자는 비록 본 명세서에 명확히 설명되거나 도시되지 않았지만, 본 발명의 원리를 구현하고 본 발명의 개념과 범위에 포함된 다양한 장치를 발명할 수 있는 것이다.

또한, 본 명세서에 열거된 모든 조건부 용어 및 실시 예들은 원칙적으로, 본 발명의 개념이 이해되도록 하기 위한 목적으로만 명백히 의도되고, 이와 같이 특별히 열거된 실시 예들 및 상태들에 제한적이지 않는 것으로 이해되어야 한다.

이하, 본 발명에 의한 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 실시예를 통해 상세히 설명하도록 한다.

도 1은 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 전체 구성도이다.

도 1에 도시한 바와 같이, 본 발명의 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템은 크게, 피부진단장치(100), 피부관리클라우드서버(200), 스마트기기(300), 의사단말기(400) 등을 포함하여 구성되며, 상기 피부진단장치와 피부관리클라우드서버 간에, 피부관리클라우드서버와 스마트기기 간에, 피부관리클라우드서버와 의사단말기 간에는 네트워크망을 통해 피부 진단과 관련된 정보를 주고 받게 되는 것이다.

본 발명에서 설명하고 있는 피부 진단이란, 신체의 모든 피부를 의미하며, 실시예의 경우에는 얼굴 즉, 안면을 가지고 설명하도록 하겠다.

상기 피부진단장치(100)는 피부 상태를 촬영하여 촬영된 피부 정보를 피부관리클라우드서버(200)로 제공하게 된다.

이때, 피부진단장치는 바람직하게는 피부에 대한 3차원 영상을 획득하기 위한 3차원영상촬영장치를 적용하게 되며, 일반적인 2차원영상촬영장치를 적용하여도 상관은 없다.

그리고, 접촉식 피부진단 장치를 사용할 수도 있으며, 안면의 경우에는 접촉식 안면피부진단장치를 이용할 수도 있다.

그러나, 증강현실 기반의 피부 영상을 제공하기 위하여 3차원영상촬영장치를 적용하는 것이 바람직할 것이다.

상기 피부관리클라우드서버(200)는 피부진단장치로부터 제공되는 피부 정보와 해당 진단자의 아이디 정보를 매칭시켜 저장 관리하게 된다.

그리고, 전문의가 의사단말기에 접속하여 해당 진단자의 피부 정보를 확인하고, 피부 정보에 대한 피부 진단 결과 정보를 기재하게 되면, 해당 의사단말기(400)로부터 피부 정보에 대한 피부 진단 결과 정보를 획득하여 피부 정보에 맵핑시켜 저장 관리하게 된다.

이때, 진단자는 스마트기기(300)를 이용하여 피부진단표시앱을 탑재하게 되며, 상기 피부진단표시앱을 이용하여 피부관리클라우드서버에 접속하여 해당 피부 진단 결과 정보를 획득하여 피부 진단의 위치를 피부 진단의 항목별로 화면에 표시하게 되는 것이다.

도 2는 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 피부진단장치 블록도이다.

상기한 피부진단장치(100)의 구체적인 구성수단은 도 2를 참조하여 설명하자면, 하기와 같다.

상기 피부진단장치(100)는, 3차원촬영부(110), 3차원맵생성부(120), 텍스쳐정의부(130), 3차원정보전송부(140)를 포함하게 된다.

구체적으로 설명하자면, 상기 3차원촬영부(110)는 피부 진단자의 3차원 입체 영상 정보를 획득하게 된다.

즉, 피부 진단자의 3차원 입체 영상 정보를 획득하게 되며, 이러한 기술은 일반적인 3차원촬영장치를 이용하여 획득할 수도 있다.

상기 3차원맵생성부(120)는 3차원촬영부에 의해 획득된 3차원 입체 영상 정보의 3차원 좌표값을 추출하여 2차원 이미지 정보를 포함한 3차원 맵을 생성하게 된다.

이때, 상기 텍스쳐정의부(130)는 피부 진단자의 피부 표면 이미지 정보를 텍스쳐로 정의하게 되는 것이다.

상기와 같이, 3차원맵생성부와 텍스쳐정의부에 의해 피부의 표피층과 진피층에 발생한 여러 가지 피부 상태를 광학적으로 획득하게 되는 것이다.

이때, 상기 3차원정보전송부(140)는 3차원 맵과 피부 표면 이미지 정보를 피부관리클라우드서버로 전송하게 되는 것이다.

상기 피부 진단 정보에는 2차원 이미지 정보를 포함하게 되는데, 2차원 이미지 정보는 피부의 표면 이미지 정보를 의미한다.

도 3은 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 피부관리클라우드서버 블록도이다.

도 3에 도시한 바와 같이, 피부관리클라우드서버(200)는, 피부진단결과획득부(210), 피부진단정보맵핑부(220), 피부진단정보디비(230), 피부인식맵컨버팅부(240)를 포함하게 된다.

상기 피부진단결과획득부(210)는 3차원 맵과 피부 표면 이미지 정보를 의사단말기(400)로 송출하며, 의사단말기로부터 피부 진단 결과 정보를 획득하게 된다.

즉, 도 5에 도시한 바와 같이, 얼굴의 경우에 3차원 맵과 피부 표면 이미지를 전송하게 되며, 의사단말기에서 3차원맵생성부에 의해 생성된 3차원 맵과 텍스쳐정의부에 의해 정의된 얼굴 표면 이미지 정보를 참조하여 얼굴 표면상의 트러블의 3차원 좌표값과 피부 트러블의 종류를 분석하게 되고, 최종적으로 얼굴 피부 진단 정보를 생성하게 되는 것이다.

예를 들어, 디지털화된 피부의 3차원 정보를 원거리의 피부과 전문의나 군의관에게 송출하게 되며, 전문의나 군의관은 2차원 정보와 3차원 정보를 융합하여 다각적인 분석이 가능하게 되는 것이다.

구체적으로 군인들의 경우에는 피부 트러블이 자주 발생하게 되는데, 병원에 내방하여 진료를 수행한다는 것은 불가능하며, 군인들의 피부 진단을 위하여 원격 진료시스템으로 활용할 수 있게 된다.

이를 위하여, 의사단말기에 의해 처방전 정보를 획득하여 해당 약품을 조제하기 위한 약품조제단말기를 구성할 수 있으며, 약품조제단말기에 의해 조제된 약품을 해당 진단자가 설정한 위치로 배송하기 위한 배송처리부를 더 포함하여 구성할 수도 있다.

이때, 상기 의사단말기는 특정 얼굴 부위에 피부 트러블 명칭을 기재할 수 있는 설정페이지를 제공할 수 있다.

이때, 상기 피부진단정보맵핑부(220)는 피부 표면의 3차원 좌표값을 참조하여 좌표별 피부 진단 결과 정보를 맵핑시켜 진단자의 아이디에 매칭시켜 피부진단정보디비에 저장시키게 되는 것이다.

이때, 상기 피부진단정보디비(230)에는 매칭된 좌표별 피부 진단 결과 정보를 아이디별로 저장 관리하게 되며, 상기 피부인식맵컨버팅부(240)는 상기 피부진단정보디비에 저장된 피부 진단 결과 정보를 획득하여 피부 인식 맵으로 컨버팅하여 저장하게 되는 것이다.

따라서, 진단자가 언제든지 본 발명의 피부관리클라우드서버에 앱을 통해 접속하면 상기 피부 인식 맵으로 컨버팅된 정보를 획득하여 화면에 제공하게 되는 것이다.

한편, 다른 실시예에 따라, 상기 피부관리클라우드서버(200)는,

피부 진단 항목별 매칭되는 복약 지도 정보를 저장하고 있는 피부진단항목별복약정보디비(250)를 더 포함하여 구성한다.

즉, 피부 진단 항목별 매칭되는 복약 지도 정보, 바코드 정보 등을 의사단말기로부터 획득하여 이를 피부진단항목별복약정보디비(250)에 저장시켜 주기적으로 관리하도록 하는 것이다.

예를 들어, 색소침착, 피지과다, 아토피성 피부염, 모낭염, 화농성 여드름 등의 피부 진단 결과를 설정하고, 해당 피부 진단 항목별로 적용되는 처방전 정보 혹은 복약 지도 정보를 저장하게 되는 것이다.

상기한 복약 지도 정보는, 환자가 유효하고도 안전하게 약물 치료를 받도록 복약에 관한 사항을 의사, 약사가 지도하는 것을 의미한다.

주로 의약품명, 사용 목적과 기대하는 약효, 투여 경로와 사용방법, 약 용량, 투여시간 투여간격, 부작용 여부, 부작용이 있을 때 대처 방법, 저장법, 피해야 할 약과 음식물 따위에 관한 정보를 복약 지도 정보라 정의한 것이다.

특히, 본 발명은 주로 사용 방법에 관하여 정보를 제공하는 것이며, 그 중에서 피부에 직접적으로 바르는 약을 중점적으로 다룰 것이다.

예를 들어, 경구로 먹는 약은 약 용량과 투여시간, 식전이나 식후 투여, 저장 방법, 같이 먹으면 안 되는 약이나 음식 등에 대한 정보를 상기의 피부진단항목별복약정보디비(250)에 저장시켜 진단자의 증세에 따라 선별하여 알려주게 된다.

그리고, 바르는 약도 마찬가지로 약 용량과 바르는 시간, 바르는 간격, 저장법, 바르는 순서와 바르면 안 되는 위치, 이후 관리방법(직사광선을 피하거나, 세수하면 안되는 것 등), 부작용 발생 시 증상(부작용 발생시 증상은 이미지와 함께 제공할 수 있다.), 대처 방법 등을 피부진단항목별복약정보디비(250)에 저장시켜 진단자의 증세에 따라 선별하여 알려주게 된다.

그리고, 기구를 사용할 경우, 기구의 사용 방법에 대한 설명과 이미지 동영상들을 포함하여 피부진단항목별복약정보디비(250)에 저장시켜 진단자의 증세에 따라 선별하여 알려주게 된다.

이때, 스마트기기의 증강현실을 이용하게 되면 증강현실을 통해 기구의 부위별 명칭과 위치 그리고 사용방법을 설명하도록 하는 것이다.

일반적으로 진료 후 의사나 약사가 복약 지도를 해야 하지만, 직접적인 대면이 불가능한 상황일 경우, 본 발명의 시스템을 이용하게 되면 직관적이고 안전하게 복약할 수 있는 장점을 제공할 수 있게 된다.

한편, 상기 피부진단표시앱을 탑재하고 있는 스마트기기(300)를 통해, 피부관리클라우드서버에 접속하여 해당 피부 진단 결과 정보를 획득하여 피부 진단의 위치를 피부 진단의 항목별로 화면에 표시하게 된다.

즉, 도 6에 도시한 바와 같이, 피부 진단의 위치를 피부 진단의 항목별로 화면에 표시하게 되는데, 진단자의 스마트기기에 구성된 안면카메라장치를 이용하여 자신의 실시간 동영상 얼굴에 해당 피부 진단의 위치를 항목별로 표시하게 되는 것이다.

상기한 스마트기기(300)의 구체적인 구성수단은 도 4를 참조하여 설명하자면, 하기와 같다.

도 4는 본 발명의 일실시예에 따른 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템의 스마트기기 블록도이다.

도 4에 도시한 바와 같이, 상기 스마트기기(300)는, 스마트기기용촬영부(310), 피부인식정보생성부(320), 피부인식얼라인처리부(330)를 포함하게 된다.

즉, 스마트기기용촬영부(310)에 의해 자신의 피부 이미지를 촬영하게 되는데, 본 발명의 예시에서는 얼굴 이미지를 촬영하였다.

이때, 상기 피부인식정보생성부(320)는 상기 촬영된 피부 이미지를 획득하여 피부 인식 정보를 생성하게 되며, 피부인식얼라인처리부(330)에 의해 상기 생성된 피부 인식 정보와 피부 진단 결과 정보에 포함된 피부 인식 맵 정보를 맵핑시켜 얼라인 처리하며, 피부 진단의 위치를 피부 진단의 항목별로 처리하게 되는 것이다.

도 6에서는 아토피성피부염의 위치는 눈주위며, 색소침착은 왼쪽 볼 부위, 모낭염은 오른쪽 볼 부위, 피지과다는 눈썹부터 코 부위, 화농성 여드름은 턱라인 등으로 피부 진단 결과를 표출하게 된다.

따라서, 진단자는 자신의 안면 이미지 상에 위치를 보고 어느 위치에 어떤 피부 트러블 즉, 진단한 피부 트러블이 존재하는지를 손쉽게 식별할 수 있게 되는 것이다.

상기와 같은 얼라인 처리를 수행하기 위하여, 상기 피부인식얼라인처리부(330)는,

피부인식정보생성부에 의해 생성된 피부 인식 정보에 포함된 좌표값과 피부 인식 맵 정보에 포함된 좌표값을 얼라인 처리하기 위한 얼라인처리모듈과,

상기 스마트기기용촬영부에 의해 촬영된 피부 이미지의 피부 좌표를 기준으로 피부 트러블의 위치를 피부 트러블의 항목별로 표시하기 위한 항목별피부트러블위치표시모듈을 포함하여 구성할 수 있다.

즉, 얼라인처리모듈에 의해 피부인식정보생성부에 의해 생성된 피부 인식 정보에 포함된 좌표값과 피부 인식 맵 정보에 포함된 좌표값을 얼라인 처리하게 되며, 상기 항목별피부트러블위치표시모듈에 의해 촬영된 피부 이미지의 피부 좌표를 기준으로 피부 트러블의 위치를 피부 트러블의 항목별로 표시하게 되는 것이다.

한편, 상기 스마트기기(300)는,

피부 진단의 항목별로 매칭되는 복약 지도 정보를 화면에 표시하기 위한 복약지도정보표시부(340),

화면에 표시되는 복약할 약품이 피부 진단 항목 중 어느 진단 항목에 사용하는 약품인지를 화면에 제공하기 위한 프로그레시브바표시부(345) 중 적어도 어느 하나 이상을 포함하게 된다.

상기 복약지도정보표시부(340)는 피부 진단의 항목별로 매칭되는 복약 지도 정보를 화면에 표시하게 된다.

도 7에 도시한 바와 같이, 해당 질병에 따라 바르는 연고와 바르는 부위 등을 화면에 표시하게 되는데, 이를 복약 지도 정보라 정의한 것이다.

그리고, 처방전 정보도 함께 화면에 표시할 수도 있다.

상기 복약 지도 정보가 필요한 이유는 피부연고는 심각한 부작용을 초래하기에 바르는 부위와 주기를 잘 지켜야 하며, 스테로이드제 연고는 안구주위에 바를 경우 백내장 발병위험이 있다.

따라서, 복약 지도 정보가 필요하게 된 것이며, 특정연고는 그 주기를 빈번하게 할 경우 모공의 이상과 안면홍조를 발병시시켜, 다른 특정연고는 각질 융해와 탈락을 유도하지만 급격한 수분결핍으로 건선을 발병시키는 원인이 된다.

또한, 상기 프로그레시브바표시부(345)는 화면에 표시되는 복약할 약품이 피부 진단 항목 중 어느 진단 항목에 사용하는 약품인지를 화면에 제공하게 되는데, 예를 들어, 도 7과 같이, 화면상에 하측에 설정된 피부 트러블 혹은 피부 질환 항목을 선택할 수 있는 아이콘 바(탭) 중 모공 트러블 항목을 선택하게 되면 모공 트러블에 처방받은 연고의 이미지 및 명칭 혹은 연고의 성분 정보를 제공하게 된다.

상기 처방된 약품의 성분 정보는 텍스트 형태 혹은 이미지 형태로 제공될 수 있을 것이다.

상기 프로그레시브바는 어떤 시기에 써야 하는 제품인지를 알 수 있도록 나타낸 것인데, 예를 들어, 클렌징-세안부터 최종 메이크업 전 혹은 취침 전까지의 시점을 나타내 주는 것이다.

도 7의 경우에는 안면 이미지의 우측에 연고 제품 종류들을 표시하였으며, 안면 이미지의 하측에 프로그레시브바를 표시하였다.

한편, 추가적인 기능에 따라, 상기 스마트기기(300)는,

스마트기기용촬영부(310)를 통해 촬영된 실시간 피부 영상 정보를 획득하여 피부 진단 결과 발생된 피부 트러블의 위치와 항목을 증강 현실로 처리하기 위한 증강현실처리부(380),

상기 피부 트러블의 위치와 항목을 참조하여 항목별로 디스플레이 화면을 분류하기 위한 피부트러블항목별분류표시처리부(385) 중 적어도 어느 하나 이상을 포함하여 구성된다.

상기 증강현실처리부(380)는 스마트기기용촬영부(310)를 통해 촬영된 실시간 피부 영상 정보를 획득하여 피부 진단 결과 발생된 피부 트러블의 위치와 항목을 도 6 내지 도 7에 도시한 바와 같이, 증강 현실로 처리하게 되는 것이다.

즉, 증강현실처리부에 의해 실시간 피부 영상 정보에 피부 트러블의 위치와 항목을 증강 현실로 표현함으로써, 자신의 피부 부위의 정확한 피부 트러블 위치와 항목을 실시간으로 확인할 수가 있게 되는 것이다.

또한, 증강현실 이외에 앱을 통해 리포트 형태의 정보로도 제공할 수도 있다.

또한, 상기 피부트러블항목별분류표시처리부(385)는 피부 트러블의 위치와 항목을 참조하여 항목별로 디스플레이 화면을 분류하게 되는데,

도 7에 도시한 바와 같이, 스마트기기의 화면 상에 색소침착, 모공, 여드름, 피지과다 등의 피부 트러블 항목을 표시하며, 어느 한 항목을 선택하게 되면 피부 이미지 상의 해당 항목의 피부 트러블 위치가 표시되도록 하는 것이다.

예시에서는 모공을 선택하게 되면 노란색으로 피부 트러블이 존재하는 모공 영역을 표시하였다.

즉, 상기와 같이, 피부트러블항목별분류표시처리부를 구성하게 되면, 트러블 항목별(종류별)로 디스플레이 화면을 전체로 제공할 수 있으며, 화면을 분류하여 제공할 수 있게 되는 것이다.

따라서, 피부 트러블 항목을 누르게 되면 해당 피부 트러블 탭으로 변경되게 되는데, 해당 불량 탭은 피부에 해당 불량만 표시하며, 해당 피부 트러블(불량)에 사용하는 약품 정보와 사용 시점을 제공하게 된다.

한편, 다른 추가적인 기능에 따라, 상기 스마트기기(300)는,

약품에 구성된 바코드를 스캔하기 위한 바코드스캔부(350),

상기 바코드스캔부에 의해 스캔된 약품의 성분 정보를 분석하여 피부 진단 항목을 분석하기 위한 피부진단항목분석부(360),

상기 분석된 피부 진단 항목을 참조하여 해당 피부 진단 항목의 위치를 화면에 표시하기 위한 피부트러블위치표시부(370) 중 적어도 어느 하나 이상을 포함하여 구성되게 된다.

즉, 도 8에 도시한 바와 같이, 바코드스캔부(350)를 구성하여 의사에 의해 진단받은 약품에 구성된 바코드를 스캔하게 되면, 상기 피부트러블항목분석부(360)는 바코드스캔부에 의해 스캔된 약품의 성분 정보를 분석하여 피부 트러블 항목을 분석하게 되는 것이다.

본 발명에서 전반적으로 설명하고 있는 스마트기기에서 미용제품에 대한 정보를 판단하기 위해서는 피부관리클라우드서버(200)에 약품 정보를 요청하게 되고, 이를 피부관리클라우드서버(200)에서 피부진단항목별처방정보디비(250)를 참조하여 해당 정보를 제공하는 것이다.

이때, 상기 피부트러블위치표시부(370)는 분석된 피부 트러블 항목을 참조하여 해당 피부 트러블의 위치를 화면에 표시하게 되는 것이다.

요약하자면, 상기 바코드스캔부를 이용하여 특정 약품이 어느 피부 트러블 항목에 사용되는 것인지, 그리고 자신의 피부 트러블 중 어느 항목에 해당하는 지를 확인할 수 있게 되는 것이다.

이때, 해당 약품에 따른 질병과 바르는 부위를 증강현실 기반으로 제공할 수도 있다.

따라서, 자신이 소유하고 있는 약품들이 어느 피부 트러블에 사용되는 약품인지, 어느 성분을 함유하고 있는지를 확인할 수 있게 되어 추후 어디에 사용하는 약품인지를 모를 경우에 이를 확인할 수 있게 되어 약물 남용을 방지할 수 있게 된다.

상기와 같이, 증강현실 기반으로 시스템을 구현하게 된다면, 보다 직관적인 원격 진료가 가능하며, 진료 후 개인의 질병 관리에 도움을 줄 수 있으며, 진료 및 처방에 대한 시공간적인 제약을 탈피할 수 있게 된다.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.

100 : 피부진단장치
200 : 피부관리클라우드서버
300 : 스마트기기
400 : 의사단말기

Claims (7)

1. 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템에 있어서,
   피부 진단자의 3차원 입체 영상 정보를 획득하기 위한 3차원촬영부(110),
   상기 3차원촬영부에 의해 획득된 3차원 입체 영상 정보의 3차원 좌표값을 추출하여 2차원 이미지 정보를 포함한 3차원 맵을 생성하기 위한 3차원맵생성부(120),
   피부 진단자의 피부 표면 이미지 정보를 텍스쳐로 정의하기 위한 텍스쳐정의부(130),
   3차원 맵과 피부 표면 이미지 정보를 피부관리클라우드서버로 전송하기 위한 3차원정보전송부(140)를 포함하여 구성되는 피부진단장치(100)와;
   
   3차원 맵과 피부 표면 이미지 정보를 의사단말기(400)로 송출하며, 의사단말기로부터 피부 진단 결과 정보를 획득하기 위한 피부진단결과획득부(210),
   피부 표면의 3차원 좌표값을 참조하여 좌표별 피부 진단 결과 정보를 맵핑시켜 진단자의 아이디에 매칭시켜 피부진단정보디비에 저장시키는 피부진단정보맵핑부(220),
   상기 매칭된 좌표별 피부 진단 결과 정보를 아이디별로 저장 관리하는 피부진단정보디비(230),
   상기 피부진단정보디비에 저장된 피부 진단 결과 정보를 획득하여 피부 인식 맵으로 컨버팅하기 위한 피부인식맵컨버팅부(240),
   피부 진단 항목별 매칭되는 복약 지도 정보를 저장하고 있는 피부진단항목별복약정보디비(250)를 포함하여 구성되는 피부관리클라우드서버(200)와;
   
   상기 피부관리클라우드서버에 접속하여 해당 피부 진단 결과 정보를 획득하여 피부 진단의 위치를 피부 진단의 항목별로 복약 지도 정보와 함께 화면에 표시하기 위한 피부진단표시앱을 탑재하고 있는 스마트기기(300)를 포함하여 구성되되,
   
   상기 스마트기기(300)는,
   자신의 피부 이미지를 촬영하기 위한 스마트기기용촬영부(310),
   상기 촬영된 피부 이미지를 획득하여 피부 인식 정보를 생성하기 위한 피부인식정보생성부(320),
   얼라인 처리를 수행하기 위하여, 피부인식정보생성부에 의해 생성된 피부 인식 정보에 포함된 좌표값과 피부 인식 맵 정보에 포함된 좌표값을 얼라인 처리하기 위한 얼라인처리모듈과 상기 스마트기기용촬영부에 의해 촬영된 피부 이미지의 피부 좌표를 기준으로 피부 트러블의 위치를 피부 트러블의 항목별로 표시하기 위한 항목별피부트러블위치표시모듈을 포함하여 구성되는 피부인식얼라인처리부(330),
   피부 진단의 항목별로 매칭되는 복약 지도 정보를 화면에 표시하기 위한 복약지도정보표시부(340),
   화면에 표시되는 복약할 약품이 피부 진단 항목 중 어느 진단 항목에 사용하는 약품인지를 화면에 제공하기 위한 프로그레시브바표시부(345),
   약품에 구성된 바코드를 스캔하기 위한 바코드스캔부(350),
   상기 바코드스캔부에 의해 스캔된 약품의 성분 정보를 분석하여 피부 진단 항목을 분석하기 위한 피부진단항목분석부(360),
   상기 분석된 피부 진단 항목을 참조하여 해당 피부 진단 항목의 위치를 화면에 표시하기 위한 피부트러블위치표시부(370),
   스마트기기용촬영부(310)를 통해 촬영된 실시간 피부 영상 정보를 획득하여 피부 진단 결과 발생된 피부 트러블의 위치와 항목을 증강 현실로 처리하기 위한 증강현실처리부(380),
   상기 피부 트러블의 위치와 항목을 참조하여 항목별로 디스플레이 화면을 분류하기 위한 피부트러블항목별분류표시처리부(385)를 포함하는 것을 특징으로 하는 피부의 3차원 영상을 이용한 진료와 증강현실기반의 복약 지도를 활용한 원격진료시스템.
   
2. 삭제
3. 삭제
4. 삭제
5. 삭제
6. 삭제
7. 삭제

Images