KR20160065702A - Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method - Google Patents

Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method Download PDF

Info

Publication number
KR20160065702A
KR20160065702A KR1020140170069A KR20140170069A KR20160065702A KR 20160065702 A KR20160065702 A KR 20160065702A KR 1020140170069 A KR1020140170069 A KR 1020140170069A KR 20140170069 A KR20140170069 A KR 20140170069A KR 20160065702 A KR20160065702 A KR 20160065702A
Authority
KR
South Korea
Prior art keywords
wellness
user
mirror
index
wearable
Prior art date
Application number
KR1020140170069A
Other languages
Korean (ko)
Other versions
KR101686070B1 (en
Inventor
이종하
Original Assignee
계명대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 계명대학교 산학협력단 filed Critical 계명대학교 산학협력단
Priority to KR1020140170069A priority Critical patent/KR101686070B1/en
Publication of KR20160065702A publication Critical patent/KR20160065702A/en
Application granted granted Critical
Publication of KR101686070B1 publication Critical patent/KR101686070B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S128/00—Surgery
    • Y10S128/90—Blood pressure recorder

Abstract

The present invention relates to a home health mirror-wearable interacting system monitoring a wellness index enabling biofeedback. The home health mirror-wearable interacting system includes: a wellness mirror device displaying a body condition of a user; a wearable device measuring bioactivity of the user for a preset time; and a wellness control device providing a recommended bioactivity pattern to the wearable device in order to increase a first body wellness index of the user.

Description

바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법 및 이를 수행하는 홈 헬스 미러-웨어러블 연동 시스템{HEALTH CARING METHOD OF MONITORING WELLNESS INDEX FOR BIOFEEDBACK AND HOME HEALTH MIRROR-WEARABLE INTERACTING SYSTEM PERFORMING THE HEALTH CARING METHOD}TECHNICAL FIELD [0001] The present invention relates to a health care method for monitoring a wellness index to enable biofeedback, and a home health mirror-wearable interlocking system for performing the same.

본 발명은 헬스 케어 방법 및 이를 수행하는 홈 헬스 시스템에 관한 것으로서, 보다 구체적으로는 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법 및 이를 수행하는 홈 헬스 미러-웨어러블 연동 시스템에 관한 것이다.The present invention relates to a healthcare method and a home health system for performing the same, and more particularly, to a healthcare method for monitoring a wellness index so as to enable biofeedback and a home health mirror-wearable interlocking system for performing the healthcare method.

정보통신 기술(ICT)이 발달하고, 인구가 고령화됨에 따라 사회 경제적으로 건강에 대한 관심이 증가하고 있다. 또한, 최근에는 웰빙(well-being), 행복(happiness), 건강(fitness)의 합성어로서 신체와 정신은 물론 사회적으로 건강한 상태를 의미하는 웰니스(wellness)를 향상시키기 위한 사회적 관심이 증가하고 있다. 특히, 도시 생활에 익숙한 많은 직장인들은 스트레스, 흡연, 음주, 운동 부족, 비정상적인 식생활 등 다양한 건강 유해 요소에 노출될 수 있는데, 이로 인해 일상생활에서도 지속적으로 건강 상태를 유지할 수 있는 기술이 요구되고 있다.
As information and communication technology (ICT) develops and the population ages, interest in socioeconomic health is increasing. In recent years, social interest has been increasing to improve wellness, which means well-being, happiness, and fitness as well as body and mind as well as socially healthy state. In particular, many workers who are familiar with urban life can be exposed to various health hazards such as stress, smoking, drinking, lack of exercise, and abnormal eating habits. Therefore, there is a demand for a technique that can maintain the health state continuously in daily life.

이러한 헬스 케어(health care) 기술과 관련하여, 최근에는 손목에 착용할 수 있는 스마트 워치(smart watch) 등과 같은 웨어러블 디바이스(wearable device)가 보급되어, 이를 착용한 채 간단한 신체 정보를 측정할 수 있게 되었다.
In relation to such health care technology, a wearable device such as a smart watch that can be worn on a wrist has recently been introduced, and a simple body information can be measured while wearing it .

그러나 웨어러블 디바이스 그 자체만으로는 사용자의 진정한 신체 건강 상태를 향상시키기 부족한 면이 있고, 단순히 그때그때의 신체 상태를 측정하는 것만으로는 사용자의 건강 상태를 개선하기 위해 어떠한 노력들이 더 필요한지 확인하기 어려운 문제가 있다.
However, the wearable device itself is insufficient to improve the user's true physical condition, and it is difficult to simply determine what kind of efforts are needed to improve the user's health condition by simply measuring the physical condition at that time have.

이에 대해, 공개특허공보 제10-2011-0073205호(2011.06.29.), 등록특허공보 제10-0874361호(2008.12.10.) 등에서는 사용자의 의료 정보를 제공 및 관리하기 위한 기술들이 개시되고 있으나, 환자 뿐 아니라 일반 사용자들의 웰니스 자체를 개선하기 위한 기술은 개시되지 않은 한계가 있다.On the other hand, techniques for providing and managing medical information of a user are disclosed in, for example, Japanese Unexamined Patent Application Publication No. 10-2011-0073205 (June 29, 2011) and Japanese Patent Application Publication No. 10-0874361 (December 10, 2008) However, the technique for improving the wellness of not only patients but also general users is not disclosed.

본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 홈 헬스 미러-웨어러블 연동 시스템이, 사용자의 영상을 촬영하여 신체 상태를 표시하는 웰니스 거울 장치와, 사용자의 신체에 착용되어 생체 활동을 측정하는 웨어러블 장치와, 신체 웰니스 지수를 계산하여 권장 생체 활동 패턴을 제공하는 웰니스 제어 장치를 포함함으로써, 실시간으로 생체 신호를 모니터링할 수 있으면서도 웰니스 지수 및 건강 상태를 주기적으로 향상시키도록 유도할 수 있는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법 및 이를 수행하는 홈 헬스 미러-웨어러블 연동 시스템을 제공하는 것을 그 목적으로 한다.
The present invention has been proposed in order to solve the above-mentioned problems of the previously proposed methods. The present invention provides a home health mirror-wearable interlocking system comprising a wellness mirror device for photographing a user's image and displaying a body condition, By including a wearable device that measures the bio-activity that is worn, and a wellness control device that calculates the body wellness index and provides a recommended bio-activity pattern, it can monitor the bio-signal in real time and periodically improve the wellness index and health status And a home health mirror-wearable interlocking system for performing the health care method, which monitors the wellness index so as to enable biofeedback.

또한, 본 발명은, 일상생활에서 쉽게 접할 수 있는 거울을 활용한 웰니스 거울 장치에 사용자의 신체 상태를 표시하고, 표시된 신체 상태를 개선하기 위해 필요한 권장 청취 음악, 권장 운동, 권장 음식 등의 권장 생체 활동 패턴을 제공함으로써, 지속적으로 사용자의 웰니스 지수를 개선하도록 유도할 수 있는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법 및 이를 수행하는 홈 헬스 미러-웨어러블 연동 시스템을 제공하는 것을 다른 목적으로 한다.The present invention also relates to a method for displaying a user's body condition in a well-being mirror device using a mirror that can be easily accessed in daily life, and recommending a recommended living body, such as recommended listening music, recommended exercise, A health care method for monitoring a wellness index so as to enable biofeedback, which can lead to improvement of a user's wellness index continuously by providing an activity pattern, and a home health mirror-wearable interlocking system do.

상기한 목적들을 달성하기 위한 본 발명의 특징에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템은,In order to accomplish the above objects, there is provided a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an aspect of the present invention,

미리 설정된 공간에 배치되어 사용자의 영상을 촬영하고, 상기 사용자의 영상에 기초한 상기 사용자의 신체 상태를 표시하는 웰니스(wellness) 거울 장치;A wellness mirror device arranged in a predetermined space to photograph a user's image and display the user's physical condition based on the user's image;

상기 사용자의 신체에 착용되어 미리 설정된 시간 동안 상기 사용자의 생체 활동을 측정하는 웨어러블(wearable) 장치; 및A wearable device which is worn on the body of the user and measures the user's bio-activity for a predetermined time; And

상기 웰니스 거울 장치로부터 상기 사용자의 영상을 제공받아 미리 설정된 웰니스 지수 산정 알고리즘을 통해 상기 사용자의 제1 신체 웰니스 지수를 계산하여 상기 웰니스 거울 장치에 제공하고, 상기 사용자의 제1 신체 웰니스 지수를 향상시키기 위한 권장 생체 활동 패턴을 상기 웨어러블 장치에 제공하는 웰니스 제어 장치를 포함하는 것을 그 구성상의 특징으로 한다.
Wherein the user is provided with an image of the user from the wellness mirror apparatus, calculates a first body wellness index of the user through a preset wellness index calculation algorithm and provides the first body wellness index to the wellness mirror apparatus, And a wellness control device for providing the wearable device with a recommended bio-activity pattern for the wearable device.

바람직하게는,Preferably,

상기 웰니스 거울 장치에 의해 촬영되는 상기 사용자의 영상은, 상기 사용자의 안면 연상을 포함하여 구성될 수 있다.
The image of the user photographed by the wellness mirror apparatus may include a face image of the user.

바람직하게는, 상기 제1 신체 웰니스 지수는,Advantageously, said first body wellness index comprises:

맥박, 스트레스 지수, 신체 긴장도, 신체 피로도 및 신체 활력도 중 적어도 어느 하나를 포함하여 구성될 수 있다.
Heart rate, pulse rate, stress index, body tension, body fatigue and physical activity.

바람직하게는,Preferably,

상기 웰니스 제어 장치는 상기 웰니스 거울 장치의 후면에서 상기 웰니스 거울 장치에 일체로 결합되도록 구성될 수 있다.
The wellness control device may be configured to be integrally coupled to the wellness mirror device at the back of the wellness mirror device.

바람직하게는, 상기 웰니스 거울 장치는,Preferably, the wellness mirror device comprises:

상기 사용자의 영상을 촬영하는 카메라;A camera for capturing an image of the user;

상기 사용자의 신체 상태를 표시하는 제1 표시부;A first display unit for displaying a physical condition of the user;

상기 사용자의 영상을 상기 웰니스 제어 장치에 전송하는 제1 통신부; 및A first communication unit for transmitting the image of the user to the wellness control device; And

상기 카메라, 제1 표시부 및 제1 통신부에 전기적으로 연결되어, 각각을 제어하는 거울 제어부를 포함하도록 구성될 수 있다.
And a mirror control unit electrically connected to the camera, the first display unit, and the first communication unit, respectively, for controlling the mirror control unit.

더욱 바람직하게는,More preferably,

상기 제1 표시부는 상기 웰니스 거울 장치의 거울면을 포함하도록 구성될 수 있다.
The first display may be configured to include a mirror surface of the wellness mirror device.

더욱 바람직하게는,More preferably,

상기 거울면에는 상기 사용자의 신체 상태가, 숫자, 문자 및 그래픽 객체 중 적어도 어느 하나를 포함하여 표시되도록 구성될 수 있다.
The mirror surface may be configured to display the user's physical condition including at least one of numbers, characters, and graphic objects.

바람직하게는, 상기 웨어러블 장치는,Preferably, the wearable device comprises:

상기 사용자의 생체 활동을 측정하는 생체 활동 측정부;A bio-activity measuring unit for measuring the bio-activity of the user;

상기 측정된 사용자의 생체 활동을 표시하는 제2 표시부;A second display unit for displaying the measured biological activity of the user;

상기 권장 생체 활동 패턴을 수신하고, 상기 측정된 사용자의 생체 활동을 상기 웰니스 제어 장치에 전송하는 제2 통신부; 및A second communication unit receiving the recommended biometric activity pattern and transmitting the measured biometric activity of the user to the wellness control device; And

상기 생체 활동 측정부, 제2 표시부 및 제2 통신부에 전기적으로 연결되어, 각각을 제어하는 웨어러블 제어부를 포함하도록 구성될 수 있다.
And a wearable control unit electrically connected to the bio-activity measuring unit, the second display unit, and the second communication unit to control the wearable control unit.

더욱 바람직하게는,More preferably,

상기 웨어러블 장치는 상기 사용자의 머리, 손목, 상박, 하박, 발목, 허리 및 가슴 중 적어도 어느 한 부위에 착용되도록 구성될 수 있다.
The wearable device may be configured to be worn on at least one of the user's head, wrist, upper arm, lower arm, ankle, waist, and chest.

더욱 바람직하게는, 상기 생체 활동 측정부는,More preferably, the bio-activity measuring unit includes:

상기 사용자의 심전도를 측정하기 위한 심박 센서;A heart rate sensor for measuring the electrocardiogram of the user;

상기 사용자의 체온을 측정하기 위한 온도 센서; 및A temperature sensor for measuring the body temperature of the user; And

상기 사용자의 뇌파를 측정하기 위한 뇌파 센서 중 적어도 어느 하나를 포함하도록 구성될 수 있다.
And a brain wave sensor for measuring the brain waves of the user.

바람직하게는, 상기 웰니스 제어 장치는,Preferably, the wellness control device further comprises:

상기 웰니스 지수 산정 알고리즘을 통해 상기 제1 신체 웰니스 지수를 계산하고, 상기 권장 생체 활동 패턴을 선택하는 시스템 제어부; 및A system controller for calculating the first body wellness index through the wellness index estimation algorithm and selecting the recommended biometric activity pattern; And

상기 시스템 제어부의 데이터를 상기 웰니스 거울 장치 및 웨어러블 장치에 대하여 전송하는 제3 통신부를 포함하도록 구성될 수 있다.
And a third communication unit for transmitting the data of the system control unit to the wellness mirror device and the wearable device.

더욱 바람직하게는,More preferably,

상기 권장 생체 활동 패턴은 상기 사용자가 청취하기 위한 음악 정보, 상기 사용자가 수행하기 위한 운동 정보 및 상기 사용자가 섭취하기 위한 음식 정보 중 적어도 어느 하나의 정보를 포함하도록 구성될 수 있다.
The recommended bio-activity pattern may include at least any one of music information for the user to listen to, exercise information for the user to perform, and food information for the user to ingest.

바람직하게는, 상기 홈 헬스 미러-웨어러블 연동 시스템은,Preferably, the home health mirror-wearable interlock system further comprises:

상기 시스템 제어부와 전기적으로 연결되고, 상기 음악 정보, 운동 정보 및 음식 정보를 저장하는 데이터베이스를 더 포함하도록 구성될 수 있다.
And a database that is electrically connected to the system control unit and stores the music information, exercise information, and food information.

바람직하게는, 상기 시스템 제어부는,Preferably, the system control unit includes:

상기 음악 정보, 운동 정보 및 음식 정보의 데이터 베이스를 포함하는 외부의 서버로부터 상기 음악 정보, 운동 정보 및 음식 정보를 선택적으로 제공받도록 구성될 수 있다.
The music information, exercise information, and food information may be selectively received from an external server including the music information, exercise information, and food information database.

바람직하게는, 상기 웰니스 제어 장치는,Preferably, the wellness control device further comprises:

상기 웨어러블 장치에 의해 측정된 상기 사용자의 생체 활동에 기초하여 상기 웰니스 지수 산정 알고리즘을 통해 상기 사용자의 제2 신체 웰니스 지수를 계산하여 상기 웰니스 거울 장치에 제공하도록 구성될 수 있다.
And calculate the second body wellness index of the user through the wellness index estimation algorithm based on the user ' s bioactivity measured by the wearable device and provide the second body wellness index to the wellness mirror device.

상기한 목적들을 달성하기 위한 본 발명의 특징에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법은,According to an aspect of the present invention, there is provided a health care method for monitoring a wellness index to enable biofeedback,

홈 헬스 미러-웨어러블 연동 시스템이,Home health mirror-wearable interlocking system,

(1) 사용자의 영상을 촬영하는 단계;(1) photographing a user's image;

(2) 상기 촬영된 영상을 이용하여 미리 설정된 웰니스 지수 산정 알고리즘을 통해 상기 사용자의 제1 신체 웰니스 지수를 계산하는 단계;(2) calculating a first body wellness index of the user through a preset wellness index estimation algorithm using the photographed image;

(3) 상기 계산된 제1 신체 웰니스 지수를 표시하는 단계;(3) displaying the calculated first body wellness index;

(4) 상기 계산된 제1 신체 웰니스 지수를 향상시키기 위한 권장 생체 활동 패턴을 선택하는 단계; 및(4) selecting a recommended bio-activity pattern for improving the calculated first body wellness index; And

(5) 상기 선택된 권장 생체 활동 패턴을 저장하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
(5) storing the selected recommended biometric activity pattern.

바람직하게는,Preferably,

(6) 미리 설정된 시간 동안 상기 사용자의 생체 신호를 저장하는 단계;(6) storing the user's biomedical signal for a preset time;

(7) 상기 저장된 권장 생체 활동 패턴 및 상기 생체 신호에 기초하여 상기 사용자의 제2 신체 웰니스 지수를 계산하는 단계; 및(7) calculating a second body wellness index of the user based on the stored recommended bio-activity pattern and the bio-signal; And

(8) 상기 계산된 제2 신체 웰니스 지수를 표시하는 단계를 더 포함하도록 구성될 수 있다.
(8) indicating the calculated second body wellness index.

바람직하게는, 상기 단계 (2)에서,Preferably, in the step (2)

상기 제1 신체 웰니스 지수는, 상기 사용자의 맥박, 스트레스 지수, 신체 긴장도, 신체 피로도 및 신체 활력도 중 적어도 어느 하나를 포함하도록 구성될 수 있다.
The first body wellness index may be configured to include at least one of the user's pulse, stress index, body tension, body fatigue, and physical activity.

더욱 바람직하게는, 상기 단계 (3)에서,More preferably, in the step (3)

상기 제1 신체 웰니스 지수는, 상기 사용자를 반사하는 거울면에서 숫자, 문자 및 그래픽 객체 중 적어도 어느 하나를 포함하여 표시되도록 구성될 수 있다.
The first body wellness index may be configured to be displayed including at least one of numbers, characters, and graphic objects on a mirror surface reflecting the user.

바람직하게는, 상기 단계 (4)에서,Preferably, in said step (4)

상기 권장 생체 활동 패턴은, 상기 사용자가 청취하기 위한 음악 정보, 상기 사용자가 수행하기 위한 운동 정보 및 상기 사용자가 섭취하기 위한 음식 정보 중 적어도 어느 하나의 정보를 포함하도록 구성될 수 있다.The recommended bio-activity pattern may include at least any one of music information for the user to listen to, exercise information for the user to perform, and food information for the user to ingest.

본 발명에서 제안하고 있는 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법 및 이를 수행하는 홈 헬스 미러-웨어러블 연동 시스템에 따르면, 홈 헬스 미러-웨어러블 연동 시스템이, 사용자의 영상을 촬영하여 신체 상태를 표시하는 웰니스 거울 장치와, 사용자의 신체에 착용되어 생체 활동을 측정하는 웨어러블 장치와, 신체 웰니스 지수를 계산하여 권장 생체 활동 패턴을 제공하는 웰니스 제어 장치를 포함함으로써, 실시간으로 생체 신호를 모니터링할 수 있으면서도 웰니스 지수 및 건강 상태를 주기적으로 향상시키도록 유도할 수 있다.
According to the health care method for monitoring the wellness index so as to enable biofeedback proposed in the present invention and the home health mirror-wearable interlocking system that performs the health care mirror-wearable interlock system, the home health mirror- And a wellness control device for calculating a body wellness index and providing a recommended bio-activity pattern, thereby realizing monitoring of a living body signal in real time While still inducing the Wellness Index and health status to improve periodically.

또한, 일상생활에서 쉽게 접할 수 있는 거울을 활용한 웰니스 거울 장치에 사용자의 신체 상태를 표시하고, 표시된 신체 상태를 개선하기 위해 필요한 권장 청취 음악, 권장 운동, 권장 음식 등의 권장 생체 활동 패턴을 제공함으로써, 지속적으로 사용자의 웰니스 지수를 개선하도록 유도할 수 있다.In addition, the wellness mirror device using a mirror that is easily accessible in everyday life displays the physical condition of the user and provides the recommended bio-activity patterns such as recommended listening music, recommended exercise, and recommended food required to improve the displayed physical condition Thereby continuously inducing the user to improve the wellness index.

도 1은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 구성을 블록 도시한 도면.
도 2는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템을 사용하는 상태의 모습을 도시한 도면.
도 3은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템을 사용하여 생체 활동 지수가 표시된 모습을 도시한 도면.
도 4는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 시스템 제어부에 연결되는 데이터베이스를 도시한 도면.
도 5는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웰니스 거울 장치에, 사용자의 신체 웰니스 지수를 향상시키기 위한 권장 생활 패턴이 표시되는 모습을 도시한 도면.
도 6은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웨어러블 장치를 착용한 사용자의 모습을 도시한 도면.
도 7 및 도 8은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웨어러블 장치의 구성을 도시한 도면.
도 9는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웰니스 거울 장치에, 사용자의 향상된 신체 상태가 표시되는 모습을 도시한 도면.
도 10은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법의 흐름을 도시한 도면.1 is a block diagram illustrating a configuration of a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention.
2 is a view illustrating a state of using a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention;
3 is a view showing a bioactivity index displayed using a home health mirror-wearable interlocking system for monitoring a wellness index so that biofeedback is possible according to an embodiment of the present invention.
FIG. 4 illustrates a database coupled to a system controller of a home health mirror-wearable interworking system that monitors a wellness index to enable biofeedback according to an embodiment of the present invention. FIG.
FIG. 5 is a view showing a recommended life pattern for improving a user's body wellness index in a wellness mirror apparatus of a home health mirror-wearable interlocking system for monitoring a wellness index so that biofeedback is possible according to an embodiment of the present invention FIG.
6 is a view showing a user wearing a wearable device of a home health mirror-wearable interlocking system for monitoring a wellness index so that biofeedback can be performed according to an embodiment of the present invention.
FIG. 7 and FIG. 8 are diagrams illustrating a configuration of a wearable device of a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention. FIG.
FIG. 9 is a view showing a state where an improved body state of a user is displayed in a wellness mirror apparatus of a home health mirror-wearable interworking system for monitoring a wellness index so that biofeedback is possible according to an embodiment of the present invention.
10 illustrates a flow of a healthcare method for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention.

이하에서는 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일 또는 유사한 부호를 사용한다.
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. In the following detailed description of the preferred embodiments of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear. The same or similar reference numerals are used throughout the drawings for portions having similar functions and functions.

덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’되어 있다고 할 때, 이는 ‘직접적으로 연결’되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
In addition, in the entire specification, when a part is referred to as being 'connected' to another part, it may be referred to as 'indirectly connected' not only with 'directly connected' . Also, to "include" an element means that it may include other elements, rather than excluding other elements, unless specifically stated otherwise.

도 1은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 구성을 블록 도시한 도면이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템은 웰니스 거울 장치(100), 웨어러블 장치(200) 및 웰니스 제어 장치(300)를 포함하여 구성될 수 있다. 웰니스(wellness) 거울 장치(100)는 카메라(110), 제1 표시부(120), 제1 통신부(130) 및 거울 제어부(140)를 포함하여 구성될 수 있다. 웨어러블(wearable) 장치는 생체 활동 측정부(210), 제2 표시부(220), 제2 통신부(230) 및 웨어러블 제어부(240)를 포함하여 구성될 수 있다. 웰니스 제어 장치(300)는 시스템 제어부(320) 및 제3 통신부(310)를 포함하여 구성될 수 있으며, 데이터베이스를 더 포함하여 구성될 수 있다. 이하에서는, 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 각각의 구성요소에 대하여 보다 상세히 설명하도록 한다.
1 is a block diagram illustrating a configuration of a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention. 1, a home health mirror-wearable interlocking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention includes a wellness mirror device 100, a wearable device 200, and a wellness control device 300). The wellness mirror apparatus 100 may include a camera 110, a first display unit 120, a first communication unit 130, and a mirror control unit 140. The wearable apparatus may include a bio-activity measuring unit 210, a second display unit 220, a second communication unit 230, and a wearable control unit 240. The wellness control device 300 may include a system control unit 320 and a third communication unit 310, and may further include a database. Hereinafter, each component of the home health mirror-wearable interworking system for monitoring the wellness index to enable biofeedback according to an embodiment of the present invention will be described in more detail.

도 2는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템을 사용하는 상태의 모습을 도시한 도면이다. 도 2에 도시된 바와 같이, 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웰니스 거울 장치(100)는 미리 설정된 소정 공간에 배치될 수 있다. 웰니스 거울 장치(100)의 거울 제어부(140)는 카메라(110), 제1 표시부(120) 및 제1 통신부(130)에 전기적으로 연결될 수 있다.
FIG. 2 is a view illustrating a state of using a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention. As shown in FIG. 2, the wellness mirror apparatus 100 of the home health mirror-wearable interworking system for monitoring the wellness index so that biofeedback according to an embodiment of the present invention is monitored may be arranged in a predetermined space. The mirror control unit 140 of the wellness mirror apparatus 100 may be electrically connected to the camera 110, the first display unit 120, and the first communication unit 130.

웰니스 거울 장치(100)는 예를 들어, 사용자의 집 출입문에 인접하여 배치될 수 있다. 웰니스 거울 장치(100)의 카메라(110)는 거울면(120) 앞에 위치한 사용자(50)의 영상을 촬영할 수 있다. 예를 들어, 카메라(110)는 거울면(120) 앞에서 웨어러블 장치(200)를 착용한 사용자의 영상을 촬영할 수 있다. 이러한 사용자의 영상은 정지 영상, 동영상 등을 포함할 수 있다. 예를 들어, 사용자의 영상은 사용자의 안면 영상을 포함할 수 있다. 카메라(110)를 통해 촬영된 영상은 거울 제어부(140)의 제어에 의해 제1 통신부(130)를 통하여 웰니스 제어 장치(300)로 전송될 수 있다. 예를 들어, 카메라(110)의 영상은 제1 통신부(130)를 통하여 무선 또는 유선으로 웰니스 제어 장치(300)의 제3 통신부(310)에 전송될 수 있다.
The wellness mirror device 100 may be disposed adjacent to, for example, a user's home access door. The camera 110 of the wellness mirror apparatus 100 can take an image of the user 50 located in front of the mirror surface 120. [ For example, the camera 110 may photograph an image of a user wearing the wearable device 200 in front of the mirror surface 120. The user's image may include a still image, a moving image, and the like. For example, the user's image may include a user's facial image. The image photographed through the camera 110 may be transmitted to the wellness control apparatus 300 through the first communication unit 130 under the control of the mirror control unit 140. [ For example, the image of the camera 110 may be transmitted to the third communication unit 310 of the wellness control apparatus 300 wirelessly or by wire through the first communication unit 130.

웰니스 제어 장치(300)는 예를 들어, 웰니스 거울 장치(100)의 후면에서 상기 웰니스 거울 장치(100)에 일체로 결합될 수 있다. 웰니스 제어 장치(300)의 시스템 제어부(320)는 제3 통신부(310)에 전기적으로 연결되어, 상기 제3 통신부(310)에 수신되는 사용자의 영상으로부터, 미리 설정된 웰니스 지수 산정 알고리즘에 따라 사용자의 제1 신체 웰니스 지수를 계산할 수 있다. 이러한 제1 신체 웰니스 지수에는, 사용자의 맥박, 스트레스 지수, 신체 긴장도, 신체 피로도 및 신체 활력도 중 적어도 어느 하나가 포함될 수 있다.
The wellness control device 300 may be integrally coupled to the wellness mirror device 100, for example, from the rear side of the wellness mirror device 100. The system control unit 320 of the wellness control apparatus 300 is electrically connected to the third communication unit 310 and receives a user's image received from the third communication unit 310 in accordance with a well- A first body wellness index can be calculated. The first body wellness index may include at least one of a user's pulse, stress index, body tension, body fatigue and physical activity.

도 3은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템을 사용하여 생체 활동 지수가 표시된 모습을 도시한 도면이다. 도 3에 도시된 바와 같이, 웰니스 제어 장치(300)로부터 계산된 사용자의 신체 상태는, 웰니스 거울 장치(100)의 제1 표시부(120)에 표시될 수 있다. 이 경우, 제1 표시부(120)는 웰니스 거울 장치(100)의 거울면을 포함할 수 있다. 예를 들어, 웰니스 거울 장치(100)의 제1 표시부(120)에는 사용자의 신체 상태가, 숫자, 문자 및 그래픽 객체 중 적어도 어느 하나를 포함하여 표시될 수 있다. 도 3에서는 사용자의 맥박(121), 스트레스 지수(122) 및 활력도(123)가 각각 129, 93 및 42의 수치와 함께 소정의 그래픽 객체로 표시되는 모습이 도시되었다.
FIG. 3 is a view showing a bioactivity index displayed using a home health mirror-wearable linked system for monitoring a wellness index so that biofeedback is possible according to an embodiment of the present invention. 3, the body condition of the user calculated from the wellness control device 300 can be displayed on the first display unit 120 of the wellness mirror apparatus 100. [ In this case, the first display portion 120 may include a mirror surface of the wellness mirror device 100. [ For example, the first display unit 120 of the wellness mirror apparatus 100 may display a user's physical condition including at least one of numbers, characters, and graphic objects. In FIG. 3, the user's pulse 121, stress index 122, and vitality 123 are displayed with predetermined graphical objects with values of 129, 93, and 42, respectively.

도 4는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 시스템 제어부에 연결되는 데이터베이스를 도시한 도면이다. 도 4에 도시된 바와 같이, 시스템 제어부(320)에 전기적으로 연결되는 데이터베이스(350)에는 사용자의 신체 웰니스 지수를 향상시키기 위해 권장될 수 있는 음악 정보(351), 운동 정보(352) 및 음식 정보(353)가 저장된 각각 저장될 수 있다. 예를 들어, 시스템 제어부(320)는 사용자의 신체 웰니스 지수를 향상시키기 위하여, 소정의 권장 생체 활동 패턴을 선택할 수 있는데, 이러한 권장 생체 활동 패턴에는, 사용자가 청취하기 위한 음악, 사용자가 수행하기 위한 운동, 사용자가 섭취하기 위한 음식 등이 포함될 수 있다.
4 is a diagram illustrating a database connected to a system controller of a home health mirror-wearable interworking system for monitoring a wellness index so as to enable biofeedback according to an embodiment of the present invention. 4, the database 350 electrically connected to the system controller 320 includes music information 351, exercise information 352, and food information 352 that may be recommended to improve the user's body wellness index, (353) can be stored. For example, the system controller 320 may select a recommended recommended activity pattern to improve the user's body wellness index, which may include music for the user to listen to, Exercise, food for the user to ingest, and the like.

다른 실시예에서, 이러한 음악 정보(351), 운동 정보(352) 및 음식 정보(353)를 포함하는 데이터베이스(350)는 웰니스 제어 장치(300)가 전기적으로 연결되는 외부의 서버에 저장될 수 있다. 이 경우, 시스템 제어부(320)는 상기 외부의 서버로부터, 소정의 음악 정보, 운동 정보 및 음식 정보를 선택적으로 제공받을 수 있다.
In another embodiment, the database 350 containing such music information 351, exercise information 352 and food information 353 may be stored in an external server to which the wellness control device 300 is electrically connected . In this case, the system control unit 320 can selectively receive predetermined music information, exercise information, and food information from the external server.

이처럼 시스템 제어부(320)에 의해 산출된 권장 생체 활동 패턴의 데이터는, 제3 통신부(310)를 통하여 웰니스 거울 장치(100) 및 웨어러블 장치(200)에 각각 전송될 수 있다.
The recommended bio-activity pattern data calculated by the system control unit 320 can be transmitted to the well-being mirror device 100 and the wearable device 200 through the third communication unit 310, respectively.

도 5는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웰니스 거울 장치에, 사용자의 신체 웰니스 지수를 향상시키기 위한 권장 생활 패턴이 표시되는 모습을 도시한 도면이다. 도 5에 도시된 바와 같이, 시스템 제어부(320)로부터 제공되는 권장 생체 활동 패턴으로서, 웰니스 거울 장치(100)의 제1 표시부(120) 상에는, 권장 음악(126), 권장 운동(127), 권장 음식(128) 등이 표시될 수 있다.
FIG. 5 is a view showing a recommended life pattern for improving a user's body wellness index in a wellness mirror apparatus of a home health mirror-wearable interlocking system for monitoring a wellness index so as to enable biofeedback according to an embodiment of the present invention Fig. 5, a recommended music 126, a recommended motion 127, and a recommended motion 126 are provided on the first display unit 120 of the wellness mirror apparatus 100 as a recommended vital activity pattern provided from the system control unit 320, Food 128 and the like may be displayed.

도 6은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웨어러블 장치를 착용한 사용자의 모습을 도시한 도면이다. 도 6에 도시된 바와 같이, 웰니스 거울 장치(100)에 의해 권장 생체 활동 패턴을 확인한 사용자는, 웨어러블 장치(200)를 착용한 상태로, 권장 생체 활동 패턴에 포함된 소정의 음악을 청취하거나, 운동을 수행하거나, 음식을 섭취할 수 있다. 예를 들어, 사용자는 웨어러블 장치(200)를 착용한 채 헤드셋(280)을 통해 권장 음악을 들으면서, 가벼운 조깅을 수행할 수 있다.
FIG. 6 is a view showing a user wearing a wearable device of a home health mirror-wearable interlocking system for monitoring a wellness index so that biofeedback is possible according to an embodiment of the present invention. As shown in FIG. 6, the user who confirms the recommended bio-activity pattern by the wellness mirror device 100 can listen to predetermined music included in the recommended bio-activity pattern while wearing the wearable device 200, Exercise, or take food. For example, the user can perform light jogging while listening to the recommended music through the headset 280 while wearing the wearable device 200.

도 7 및 도 8은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웨어러블 장치의 구성을 도시한 도면이다. 도 7 및 도 8에 도시된 바와 같이, 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웨어러블 장치(200)는 예를 들어, 사용자의 손목에 착용되는 형태를 가질 수 있다. 다만, 이는 예시적인 것으로서, 실시예에 따라, 웨어러블 장치(200)는 사용자의 머리, 손목, 상박, 하박, 발목, 허리, 가슴 등에 착용될 수 있다.
FIG. 7 and FIG. 8 are views showing a configuration of a wearable device of a home health mirror-wearable interworking system for monitoring a wellness index so as to be biofeedback according to an embodiment of the present invention. As shown in FIGS. 7 and 8, the wearable device 200 of the home health mirror-wearable interworking system for monitoring the wellness index so as to enable biofeedback according to an embodiment of the present invention, for example, It can have a form to be worn. However, this is an exemplary one, and according to an embodiment, the wearable device 200 may be worn on the user's head, wrist, upper arm, lower arm, ankle, waist, chest,

웨어러블 장치(200)는 미리 설정된 시간 동안 사용자의 생체 활동을 측정할 수 있다. 예를 들어, 웨어러블 장치(200)는 생체 활동 측정부(210)로서 사용자의 심전도를 측정하기 위한 심박 센서(211, 212), 사용자의 체온을 측정하기 위한 온도 센서, 사용자의 뇌파를 측정하기 위한 뇌파 센서 등을 포함할 수 있다. 또한, 웨어러블 장치(200)는 본체부(201) 및 스트랩부(203)를 포함할 수 있다. 본체부(201)의 일면에는 측정된 사용자의 생체 활동을 표시하기 위한 제2 표시부(220)가 표시될 수 있다. 또한, 본체부(201)의 일 측면에는 헤드셋(280)과 연결되기 위한 접속 홀(208)이 정의될 수 있다.
The wearable device 200 can measure the user's bio-activity for a preset time. For example, the wearable device 200 may include a heart rate sensor 211 and 212 for measuring a user's electrocardiogram, a temperature sensor for measuring a user's body temperature, Brain wave sensor, and the like. In addition, the wearable apparatus 200 may include a main body 201 and a strap 203. A second display unit 220 may be displayed on one side of the main body unit 201 to display the measured biological activity of the user. A connection hole 208 for connection with the headset 280 may be defined on one side of the main body 201.

웨어러블 장치(200)의 웨어러블 제어부(240)는 생체 활동 측정부(210), 제2 표시부(220) 및 제2 통신부(230)에 전기적으로 연결되어, 상기 제2 통신부(230)를 통하여 웰니스 제어 장치(300)로부터 제공되는 권장 생체 활동 패턴을 수신하거나, 상기 측정된 사용자의 생체 활동을 웰니스 제어 장치(300)에 전송할 수 있다.
The wearable control unit 240 of the wearable device 200 is electrically connected to the bio-activity measuring unit 210, the second display unit 220 and the second communication unit 230, A recommended bio-activity pattern provided from the apparatus 300, or transmit the measured user's bio-activity to the wellness control apparatus 300.

도 9는 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템의 웰니스 거울 장치에, 사용자의 향상된 신체 상태가 표시되는 모습을 도시한 도면이다. 도 9에 도시된 바와 같이, 사용자(50)가 권장 생체 활동 패턴에 따른 생체 활동을 마치고나서 다시 웰니스 거울 장치(100) 앞에 서는 경우, 웨어러블 장치(200)를 통해 측정된 사용자의 생체 활동 패턴이 권장 생체 활동 패턴과 비교되어, 웰니스 제어 장치(300)에 의해 웰니스 산정 알고리즘을 통해 다시 계산된 사용자의 제2 신체 웰니스 지수가 웰니스 거울 장치(100)에 표시될 수 있다. 예를 들어, 웰니스 거울 장치(100)의 제1 표시부(120)에는 사용자의 개선된 맥박(121), 스트레스 지수(122) 및 활력도(123)가 각각 108, 32 및 91의 수치와 소정의 그래픽 객체로 표시될 수 있다.
FIG. 9 is a diagram illustrating a state in which an improved physical condition of a user is displayed in a well-being mirror apparatus of a home health mirror-wearable interworking system for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention. 9, when the user 50 stands in front of the wellness mirror apparatus 100 after completing the bio-activity according to the recommended bio-activity pattern, the user's bio-activity pattern measured through the wearable apparatus 200 A second body wellness index of the user, as recalculated by the wellness control device 300 via the wellness estimation algorithm, may be displayed on the wellness mirror device 100, as compared to the recommended biometric pattern. For example, in the first display portion 120 of the wellness mirror apparatus 100, the user's improved pulse 121, stress index 122 and vitality 123 are set to values of 108, 32 and 91, respectively, It can be displayed as a graphical object.

도 10은 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법의 흐름을 도시한 도면이다. 도 10에 도시된 바와 같이, 본 발명의 일실시예에 따른 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법은, 홈 헬스 미러-웨어러블 연동 시스템이, 사용자의 영상을 촬영하는 단계(S110), 촬영된 영상을 이용하여 미리 설정된 웰니스 지수 산정 알고리즘을 통해 사용자의 제1 신체 웰니스 지수를 계산하는 단계(S120), 계산된 제1 신체 웰니스 지수를 표시하는 단계(130), 계산된 제1 신체 웰니스 지수를 향상시키기 위한 권장 생체 활동 패턴을 선택하는 단계(S140) 및 선택된 권장 생체 활동 패턴을 저장하는 단계(S150)를 포함하여 구성될 수 있으며, 미리 설정된 시간 동안 사용자의 생체 신호를 저장하는 단계(S160), 저장된 권장 생체 활동 패턴 및 생체 신호에 기초하여 사용자의 제2 신체 웰니스 지수를 계산하는 단계(S170) 및 계산된 제2 신체 웰니스 지수를 표시하는 단계(S180)를 더 포함하여 구성될 수 있다.
FIG. 10 is a flowchart illustrating a healthcare method for monitoring a wellness index to enable biofeedback according to an embodiment of the present invention. Referring to FIG. As shown in FIG. 10, the healthcare method for monitoring the wellness index to enable biofeedback according to an embodiment of the present invention includes a step S110 of photographing a user's home, Calculating a first body wellness index (S120) of the user through a preset wellness index estimation algorithm using the photographed image, displaying (130) the calculated first body wellness index, calculating a first body wellness index (S140) of selecting a recommended bio-activity pattern for improving the index and storing a selected recommended bio-activity pattern (S150), and storing the bio-signal of the user for a predetermined time S160), calculating (S170) a user's second body wellness index based on the stored recommended bio-activity pattern and the bio-signal, and calculating And displaying the wellness index (S180).

이상 설명한 본 발명은 본 발명이 속한 기술 분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허 청구범위에 의하여 정해져야 할 것이다.The present invention may be embodied in many other specific forms without departing from the spirit or essential characteristics of the invention.

100: 웰니스 거울 장치 110: 카메라
120: 제1 표시부 130: 제1 통신부
140: 거울 제어부 200: 웨어러블 장치
210: 생체 활동 측정부 220: 제2 표시부
230: 제2 통신부 240: 웨어러블 제어부
300: 웰니스 제어 장치 310: 제3 통신부
320: 시스템 제어부
S110: 사용자의 영상을 촬영하는 단계
S120: 촬영된 영상을 이용하여 미리 설정된 웰니스 지수 산정 알고리즘을 통해 사용자의 제1 신체 웰니스 지수를 계산하는 단계
S130: 계산된 제1 신체 웰니스 지수를 표시하는 단계
S140: 계산된 제1 신체 웰니스 지수를 향상시키기 위한 권장 생체 활동 패턴을 선택하는 단계
S150: 선택된 권장 생체 활동 패턴을 저장하는 단계
S160: 미리 설정된 시간 동안 사용자의 생체 신호를 저장하는 단계
S170: 저장된 권장 생체 활동 패턴 및 생체 신호에 기초하여 사용자의 제2 신체 웰니스 지수를 계산하는 단계
S180: 계산된 제2 신체 웰니스 지수를 표시하는 단계100: Wellness mirror device 110: Camera
120: first display unit 130: first communication unit
140: mirror control unit 200: wearable device
210: biological activity measurement unit 220: second display unit
230: second communication unit 240: wearable control unit
300: Wellness control device 310: Third communication section
320:
S110: Step of photographing the user's image
S120: calculating a user's first body wellness index through a preset wellness index calculation algorithm using the photographed image
S130: Step of displaying the calculated first body wellness index
S140: selecting a recommended bio-activity pattern to improve the calculated first body wellness index
S150: Step of storing the selected recommended bio-activity pattern
S160: Storing the user's biomedical signal for a preset time
S170: calculating the user's second body wellness index based on the stored recommended bio-activity pattern and the bio-signal
S180: Step of displaying the calculated second body wellness index

Claims (20)

홈 헬스 미러-웨어러블 연동 시스템으로서,
미리 설정된 공간에 배치되어 사용자의 영상을 촬영하고, 상기 사용자의 영상에 기초한 상기 사용자의 신체 상태를 표시하는 웰니스(wellness) 거울 장치;
상기 사용자의 신체에 착용되어 미리 설정된 시간 동안 상기 사용자의 생체 활동을 측정하는 웨어러블(wearable) 장치; 및
상기 웰니스 거울 장치로부터 상기 사용자의 영상을 제공받아 미리 설정된 웰니스 지수 산정 알고리즘을 통해 상기 사용자의 제1 신체 웰니스 지수를 계산하여 상기 웰니스 거울 장치에 제공하고, 상기 사용자의 제1 신체 웰니스 지수를 향상시키기 위한 권장 생체 활동 패턴을 상기 웨어러블 장치에 제공하는 웰니스 제어 장치를 포함하는 것을 특징으로 하는 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
As a home health mirror-wearable interlocking system,
A wellness mirror device arranged in a predetermined space to photograph a user's image and display the user's physical condition based on the user's image;
A wearable device which is worn on the body of the user and measures the user's bio-activity for a predetermined time; And
Wherein the user is provided with an image of the user from the wellness mirror apparatus, calculates a first body wellness index of the user through a preset wellness index calculation algorithm and provides the first body wellness index to the wellness mirror apparatus, And a wellness control device for providing the wearable device with a recommended bio-activity pattern for the bio-activity pattern.
제1항에 있어서,
상기 웰니스 거울 장치에 의해 촬영되는 상기 사용자의 영상은, 상기 사용자의 안면 연상을 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The method according to claim 1,
Wherein the image of the user photographed by the wellness mirror device comprises a face image of the user. ≪ RTI ID = 0.0 > 8. < / RTI >
제1항에 있어서, 상기 제1 신체 웰니스 지수는,
맥박, 스트레스 지수, 신체 긴장도, 신체 피로도 및 신체 활력도 중 적어도 어느 하나를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
2. The method of claim 1, wherein the first body wellness index
Wherein the homeostasis mirror-wearable interlocking system monitors at least one of a pulse rate, a stress index, a body tension, a body fatigue, and a body vitality.
제1항에 있어서,
상기 웰니스 제어 장치는 상기 웰니스 거울 장치의 후면에서 상기 웰니스 거울 장치에 일체로 결합되는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The method according to claim 1,
Wherein the wellness control device is integrally coupled to the wellness mirror device at a rear side of the wellness mirror device, wherein the wellness mirror device is monitored for biofeedback.
제1항에 있어서, 상기 웰니스 거울 장치는,
상기 사용자의 영상을 촬영하는 카메라;
상기 사용자의 신체 상태를 표시하는 제1 표시부;
상기 사용자의 영상을 상기 웰니스 제어 장치에 전송하는 제1 통신부; 및
상기 카메라, 제1 표시부 및 제1 통신부에 전기적으로 연결되어, 각각을 제어하는 거울 제어부를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The apparatus of claim 1, wherein the wellness mirror device comprises:
A camera for capturing an image of the user;
A first display unit for displaying a physical condition of the user;
A first communication unit for transmitting the image of the user to the wellness control device; And
And a mirror control unit electrically connected to the camera, the first display unit, and the first communication unit, respectively, for controlling the wellness mirror-wearable interlock system.
제5항에 있어서,
상기 제1 표시부는 상기 웰니스 거울 장치의 거울면을 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
6. The method of claim 5,
Wherein the first display portion includes a mirror surface of the wellness mirror device, wherein the first display portion includes a mirror surface of the wellness mirror device.
제6항에 있어서,
상기 거울면에는 상기 사용자의 신체 상태가, 숫자, 문자 및 그래픽 객체 중 적어도 어느 하나를 포함하여 표시되는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The method according to claim 6,
Wherein the body surface of the user is displayed on the mirror surface by including at least one of numbers, characters, and graphic objects, and monitors the wellness index to enable biofeedback.
제1항에 있어서, 상기 웨어러블 장치는,
상기 사용자의 생체 활동을 측정하는 생체 활동 측정부;
상기 측정된 사용자의 생체 활동을 표시하는 제2 표시부;
상기 권장 생체 활동 패턴을 수신하고, 상기 측정된 사용자의 생체 활동을 상기 웰니스 제어 장치에 전송하는 제2 통신부; 및
상기 생체 활동 측정부, 제2 표시부 및 제2 통신부에 전기적으로 연결되어, 각각을 제어하는 웨어러블 제어부를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The wearable device according to claim 1,
A bio-activity measuring unit for measuring the bio-activity of the user;
A second display unit for displaying the measured biological activity of the user;
A second communication unit receiving the recommended biometric activity pattern and transmitting the measured biometric activity of the user to the wellness control device; And
And a wearable control unit electrically connected to the bio-activity measuring unit, the second display unit, and the second communication unit to control the bio-activity measuring unit, the second display unit, and the second communication unit.
제8항에 있어서,
상기 웨어러블 장치는 상기 사용자의 머리, 손목, 상박, 하박, 발목, 허리 및 가슴 중 적어도 어느 한 부위에 착용되는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
9. The method of claim 8,
Wherein the wearable apparatus is worn on at least one of a head, a wrist, an upper arm, an upper arm, an ankle, a waist and a chest of the user.
제8항에 있어서, 상기 생체 활동 측정부는,
상기 사용자의 심전도를 측정하기 위한 심박 센서;
상기 사용자의 체온을 측정하기 위한 온도 센서; 및
상기 사용자의 뇌파를 측정하기 위한 뇌파 센서 중 적어도 어느 하나를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
9. The bio-activity measuring device according to claim 8,
A heart rate sensor for measuring the electrocardiogram of the user;
A temperature sensor for measuring the body temperature of the user; And
And a brain wave sensor for measuring the brain waves of the user. The home health mirror-wearable interlock system for monitoring the wellness index so as to enable biofeedback.
제1항에 있어서, 상기 웰니스 제어 장치는,
상기 웰니스 지수 산정 알고리즘을 통해 상기 제1 신체 웰니스 지수를 계산하고, 상기 권장 생체 활동 패턴을 선택하는 시스템 제어부; 및
상기 시스템 제어부의 데이터를 상기 웰니스 거울 장치 및 웨어러블 장치에 대하여 전송하는 제3 통신부를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The apparatus according to claim 1, wherein the wellness control device comprises:
A system controller for calculating the first body wellness index through the wellness index estimation algorithm and selecting the recommended biometric activity pattern; And
And a third communication unit for transmitting data of the system control unit to the wellness mirror device and the wearable device, wherein the third communication unit monitors the wellness index to enable biofeedback.
제11항에 있어서,
상기 권장 생체 활동 패턴은 상기 사용자가 청취하기 위한 음악 정보, 상기 사용자가 수행하기 위한 운동 정보 및 상기 사용자가 섭취하기 위한 음식 정보 중 적어도 어느 하나의 정보를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
12. The method of claim 11,
Wherein the recommended bio-activity pattern includes at least any one of music information for the user to listen to, exercise information for the user to perform, and food information for the user to ingest. Home Health Mirror - Wearable Interlocking System to Monitor Wellness Index.
제11항에 있어서, 상기 홈 헬스 미러-웨어러블 연동 시스템은,
상기 시스템 제어부와 전기적으로 연결되고, 상기 음악 정보, 운동 정보 및 음식 정보를 저장하는 데이터베이스를 더 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
12. The system of claim 11, wherein the home health mirror-
The home health mirror-wearable interworking system as claimed in claim 1, further comprising a database that is electrically connected to the system control unit and stores the music information, exercise information, and food information.
제11항에 있어서, 상기 시스템 제어부는,
상기 음악 정보, 운동 정보 및 음식 정보의 데이터 베이스를 포함하는 외부의 서버로부터 상기 음악 정보, 운동 정보 및 음식 정보를 선택적으로 제공받는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
12. The system according to claim 11,
Wherein the music information, the exercise information, and the food information are selectively provided from an external server including a database of the music information, the exercise information, and the food information. The home health mirror - Wearable interlocking system.
제1항에 있어서, 상기 웰니스 제어 장치는,
상기 웨어러블 장치에 의해 측정된 상기 사용자의 생체 활동에 기초하여 상기 웰니스 지수 산정 알고리즘을 통해 상기 사용자의 제2 신체 웰니스 지수를 계산하여 상기 웰니스 거울 장치에 제공하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 홈 헬스 미러-웨어러블 연동 시스템.
The apparatus according to claim 1, wherein the wellness control device comprises:
Calculating a second body wellness index of the user through the wellness index estimation algorithm based on the user ' s bioactivity measured by the wearable device, and providing the second body wellness index to the wellness mirror device Home Health Mirror - Wearable Interlocking System to Monitor Indices.
신체 지수를 모니터링하는 헬스 케어 방법으로서, 홈 헬스 미러-웨어러블 연동 시스템이,
(1) 사용자의 영상을 촬영하는 단계;
(2) 상기 촬영된 영상을 이용하여 미리 설정된 웰니스 지수 산정 알고리즘을 통해 상기 사용자의 제1 신체 웰니스 지수를 계산하는 단계;
(3) 상기 계산된 제1 신체 웰니스 지수를 표시하는 단계;
(4) 상기 계산된 제1 신체 웰니스 지수를 향상시키기 위한 권장 생체 활동 패턴을 선택하는 단계; 및
(5) 상기 선택된 권장 생체 활동 패턴을 저장하는 단계를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법.
A health care method for monitoring a body index, the home health mirror-wearable interlocking system comprising:
(1) photographing a user's image;
(2) calculating a first body wellness index of the user through a preset wellness index estimation algorithm using the photographed image;
(3) displaying the calculated first body wellness index;
(4) selecting a recommended bio-activity pattern for improving the calculated first body wellness index; And
(5) storing the selected recommended bio-activity pattern. ≪ Desc / Clms Page number 13 >
제16항에 있어서,
(6) 미리 설정된 시간 동안 상기 사용자의 생체 신호를 저장하는 단계;
(7) 상기 저장된 권장 생체 활동 패턴 및 상기 생체 신호에 기초하여 상기 사용자의 제2 신체 웰니스 지수를 계산하는 단계; 및
(8) 상기 계산된 제2 신체 웰니스 지수를 표시하는 단계를 더 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법.
17. The method of claim 16,
(6) storing the user's biomedical signal for a preset time;
(7) calculating a second body wellness index of the user based on the stored recommended bio-activity pattern and the bio-signal; And
(8) displaying the calculated second body wellness index. ≪ Desc / Clms Page number 13 >
제16항에 있어서, 상기 단계 (2)에서,
상기 제1 신체 웰니스 지수는, 상기 사용자의 맥박, 스트레스 지수, 신체 긴장도, 신체 피로도 및 신체 활력도 중 적어도 어느 하나를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법.
17. The method of claim 16, wherein in step (2)
Wherein the first body wellness index includes at least one of pulse, stress index, body tension, body fatigue, and physical activity of the user.
제18항에 있어서, 상기 단계 (3)에서,
상기 제1 신체 웰니스 지수는, 상기 사용자를 반사하는 거울면에서 숫자, 문자 및 그래픽 객체 중 적어도 어느 하나를 포함하여 표시되는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법.
19. The method of claim 18, wherein in step (3)
Wherein the first body wellness index is displayed including at least one of numbers, characters, and graphical objects on a mirror surface reflecting the user, wherein the first body wellness index is biofeedback enabled.
제16항에 있어서, 상기 단계 (4)에서,
상기 권장 생체 활동 패턴은, 상기 사용자가 청취하기 위한 음악 정보, 상기 사용자가 수행하기 위한 운동 정보 및 상기 사용자가 섭취하기 위한 음식 정보 중 적어도 어느 하나의 정보를 포함하는 것을 특징으로 하는, 바이오피드백 가능하도록 웰니스 지수를 모니터링하는 헬스 케어 방법.17. The method of claim 16, wherein in step (4)
Wherein the recommended bio-activity pattern includes at least any one of music information for the user to listen to, exercise information for the user to perform, and food information to be consumed by the user. A healthcare method to monitor the Wellness Index to ensure that
KR1020140170069A 2014-12-01 2014-12-01 Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method KR101686070B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140170069A KR101686070B1 (en) 2014-12-01 2014-12-01 Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140170069A KR101686070B1 (en) 2014-12-01 2014-12-01 Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method

Publications (2)

Publication Number Publication Date
KR20160065702A true KR20160065702A (en) 2016-06-09
KR101686070B1 KR101686070B1 (en) 2016-12-13

Family

ID=56138951

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140170069A KR101686070B1 (en) 2014-12-01 2014-12-01 Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method

Country Status (1)

Country Link
KR (1) KR101686070B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180065593A (en) 2016-12-08 2018-06-18 링크젠 주식회사 Wearable device-based healthcare system
KR20180072248A (en) * 2016-12-21 2018-06-29 동아제약 주식회사 Self-scanner, system and method for measuring fatigue using the self-scanner
CN108245176A (en) * 2017-12-07 2018-07-06 江苏大学 Based on the interactive contactless psychology detection therapeutic device of Internet of Things, system and method
KR20210063188A (en) * 2019-11-21 2021-06-01 주식회사 지비소프트 Smart mirror device
CN112890785A (en) * 2019-12-04 2021-06-04 钜怡智慧股份有限公司 Health management system using non-contact image type physiological detection technology
US11103144B2 (en) 2019-11-21 2021-08-31 Gb Soft Inc. Method of measuring physiological parameter of subject in contactless manner

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102043687B1 (en) 2017-12-20 2019-11-12 주식회사 코맥스 Apparatus and method for smart mirror using thermal image camera based on voice recognition
KR101957648B1 (en) * 2018-11-16 2019-03-12 주식회사 아이코어이앤씨 The module identification and assistant system based on artificial intelligence
KR102055081B1 (en) 2019-01-09 2019-12-12 주식회사 바디프랜드 Massage chair with brain massage for mental health improvement and recovery of brain cognitive function
KR20190137058A (en) 2019-12-03 2019-12-10 주식회사 바디프랜드 Massage chair with brain massage for mental health improvement and recovery of brain cognitive function

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006305260A (en) * 2005-04-28 2006-11-09 Ichiro Hagiwara Expression diagnosis assisting apparatus
JP2011239370A (en) * 2010-04-14 2011-11-24 Sanyo Electric Co Ltd Image display unit with an imaging function
KR20140003820A (en) * 2012-06-29 2014-01-10 주식회사 라이프사이언스테크놀로지 Method for user interface of based on vital signal

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006305260A (en) * 2005-04-28 2006-11-09 Ichiro Hagiwara Expression diagnosis assisting apparatus
JP2011239370A (en) * 2010-04-14 2011-11-24 Sanyo Electric Co Ltd Image display unit with an imaging function
KR20140003820A (en) * 2012-06-29 2014-01-10 주식회사 라이프사이언스테크놀로지 Method for user interface of based on vital signal

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180065593A (en) 2016-12-08 2018-06-18 링크젠 주식회사 Wearable device-based healthcare system
KR20180072248A (en) * 2016-12-21 2018-06-29 동아제약 주식회사 Self-scanner, system and method for measuring fatigue using the self-scanner
CN108245176A (en) * 2017-12-07 2018-07-06 江苏大学 Based on the interactive contactless psychology detection therapeutic device of Internet of Things, system and method
KR20210063188A (en) * 2019-11-21 2021-06-01 주식회사 지비소프트 Smart mirror device
US11103144B2 (en) 2019-11-21 2021-08-31 Gb Soft Inc. Method of measuring physiological parameter of subject in contactless manner
CN112890785A (en) * 2019-12-04 2021-06-04 钜怡智慧股份有限公司 Health management system using non-contact image type physiological detection technology

Also Published As

Publication number Publication date
KR101686070B1 (en) 2016-12-13

Similar Documents

Publication Publication Date Title
KR101686070B1 (en) Health caring method of monitoring wellness index for biofeedback and home health mirror-wearable interacting system performing the health caring method
US11132424B2 (en) Health monitoring eco-system with optimized power consumption
JP7031669B2 (en) Information processing equipment, information processing methods and programs
EP3389472B1 (en) Wearable device and method for determining electro-dermal activity of a subject
US9144405B2 (en) User health monitoring system comprising 3D glasses and display apparatus, and display apparatus and control method thereof
KR101584090B1 (en) Mirror device, wearable device and exercise management system
US20150079560A1 (en) Wearable Monitoring and Training System for Focus and/or Mood
US20150025335A1 (en) Method and system for monitoring pain of patients
JP5943344B2 (en) HEALTH MANAGEMENT SYSTEM, ITS METHOD AND PROGRAM, AND GLASSES-TYPE BIOLOGICAL INFORMATION ACQUISITION DEVICE
JP4754447B2 (en) Biological analysis apparatus and program
WO2014138414A1 (en) Form factors for the multi-modal physiological assessment of brain health
CN204734469U (en) Wearable does not have many vital sign monitoring facilities of wound
WO2021070472A1 (en) Information processing device, information processing system, and information processing method
Mahmud et al. SensoRing: An integrated wearable system for continuous measurement of physiological biomarkers
TW200927066A (en) Ear wearing type biofeedback device
CN105844108A (en) Intelligent wearing equipment
KR20130134452A (en) Healthcare system using bio signal
JP7407419B2 (en) Physical condition evaluation method and physical condition evaluation system
KR102193558B1 (en) Method, system and non-transitory computer-readable recording medium for measuring bio signal
JP2018079239A (en) Estimation system, estimation method and estimation program
CN107837084A (en) A kind of wearable multi-parameter physiology record sensing clothes
KR101571418B1 (en) measurement module for bio signal and healthcare underwear for bio signal monitoring
WO2023167061A1 (en) Information processing method, information processing device, and information processing system
WO2023157596A1 (en) Information processing method, information processing device, program, and information processing system
KR20160038915A (en) Healthcare System using Bio Signal

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191202

Year of fee payment: 4