KR101862696B1 - 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법 - Google Patents

실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법 Download PDF

Info

Publication number
KR101862696B1
KR101862696B1 KR1020160138570A KR20160138570A KR101862696B1 KR 101862696 B1 KR101862696 B1 KR 101862696B1 KR 1020160138570 A KR1020160138570 A KR 1020160138570A KR 20160138570 A KR20160138570 A KR 20160138570A KR 101862696 B1 KR101862696 B1 KR 101862696B1
Authority
KR
South Korea
Prior art keywords
biometric information
computer graphics
image
user
measuring device
Prior art date
Application number
KR1020160138570A
Other languages
English (en)
Other versions
KR20180045101A (ko
Inventor
배병훈
Original Assignee
(주)락싸
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)락싸 filed Critical (주)락싸
Priority to KR1020160138570A priority Critical patent/KR101862696B1/ko
Publication of KR20180045101A publication Critical patent/KR20180045101A/ko
Application granted granted Critical
Publication of KR101862696B1 publication Critical patent/KR101862696B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021—Measuring pressure in heart or blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0402—
    • A61B5/0476—
    • A61B5/0488—
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/389—Electromyography [EMG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72519—

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Vascular Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pulmonology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명은 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법에 관한 것이다. 본 발명의 생체 정보 표시 시스템은 실시간으로 측정된 사용자의 생체 정보에 대응하여 변환된 컴퓨터 그래픽스(Computer Graphics) 영상을 사용자의 실사 영상에 포함시켜서 실시간으로 사용자 단말기에 표시하도록 처리한다. 본 발명에 의하면, 사용자의 생체 정보를 종래의 숫자, 챠트 , 막대 그래프 등으로 사용자에게 보고서 화면을 제시하는 방식에서 탈피하여, 보다 시각적인 효과를 제공하고, 흥미를 유발할 수 있다.

Description

실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법{BIOMETRIC DATA DISPLAY SYSTEM USING ACTUAL IMAGE AND COMPUTER GRAPHICS IMAGE AND METHOD FOR DISPLAYING THEREOF}
본 발명은 생체 정보 표시 시스템에 관한 것으로, 좀 더 구체적으로 생체 정보 측정기를 이용하여 사용자의 생체 정보를 실시간으로 측정하고, 측정된 생체 정보를 컴퓨터 그래픽스(Computer Graphics) 요소로 변환하여 컴퓨터 그래픽스 처리된 생체 정보에 대응하는 컴퓨터 그래픽스 영상을 카메라로 실시간 촬영 중인 사용자의 실사 영상에 포함시켜서 표시하도록 처리하여, 사용자의 생체 상태를 다양한 실사 컴퓨터 그래픽스 영상으로 표현하는 실사와 컴퓨터 그래픽 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법에 관한 것이다.
최근 들어 사회의 고령화에 수반하여, 연령층을 불문하고, 건강 관리, 건강 유지, 건강 증진에 대한 사람들의 인식이 높아지고 있다. 많은 사람들은 질환의 조기 발견 혹은 예방을 목적으로 병원 등의 의료 시설의 전문가의 진단이나 조언을 받고 있을 뿐만 아니라, 이른바 스포츠 클럽과 같은 비의료 시설을 이용하여 자신의 건강 관리, 유지, 증진을 위해 노력하고 있다. 이와 같이 건강에 대한 관심이 고조되면서 병원과 같은 전문 기관을 방문하지 않는 재택 건강관리 서비스에 대한 필요성이 대두되고 있어 시공간적인 제약없는 다양한 생체 정보를 측정하는 생체 정보 측정 장치의 개발에 많은 연구가 진행되고 있는 실정이다. 생체 정보 측정 장치는 사용자의 생체 정보 예를 들어, 혈압, 맥박, 운동량, 심전도, 피부 미세 전류, 체온, 뇌파 및 심장 박동수 등을 측정하여 전기적인 신호를 출력한다.
최근에는 스마트 폰, 태블릿 폰 등의 모바일 단말기에서 제공하는 다양한 서비스 및 부가 기능들이 점차 확대되고 있다. 이러한 모바일 단말기의 효용 가치를 높이고 사용자들의 다양한 욕구를 만족시키기 위해서 모바일 단말기가 실행 가능한 다양한 어플리케이션들이 개발되고 있다.
특히 스마트 폰과 무선 통신 기술의 발달과 급속한 보급으로 인하여, 스마트 폰과 연계된 생체 정보 측정 기술이 개발되고 있다. 이러한 생체 정보 측정 기술은 시간적, 공간적인 제약을 두지 않고, 사용자의 생체 정보를 실시간 측정하고, 스마트 폰을 통해 측정된 생체 정보를 모니터링하고, 이를 토대로 사용자 자신의 건강 상태를 체크하거나 관리할 수 있다.
그러나 이러한 생체 정보 측정 장치들은 측정된 생체 정보를 단순히 보고서 형식 예를 들어, 측정된 생체 정보를 표현하는 숫자, 챠트, 막대 그래프 등의 형태로 사용자에게 제공하는 방식으로, 사용자에게 자신의 생체 정보에 대한 관심도를 점차 저하시키는 원인이 될 수 있으며, 또한 실시간으로 측정된 생체 정보와 연계된 다양한 서비스를 제공하는데에는 한계가 있다.
한국 공개특허공보 제10-2016-0028351호(공개일 2016년 03월 11일) 한국 공개특허공보 제10-2012-0108235호(공개일 2012년 10월 05일) 한국 공개특허공보 제10-2007-0104520호(공개일 2007년 10월 26일) 한국 등록특허공보 제10-0433578호(공고일 2004년 05월 31일)
본 발명의 목적은 실시간으로 측정된 생체 정보를 사용자에게 제공하기 위해 실사와 컴퓨터 그래픽스 영상을 이용하는 생체 정보 표시 시스템 및 그의 표시 방법을 제공하는 것이다.
본 발명의 다른 목적은 실시간으로 측정된 생체 정보에 대응하여 다양한 컴퓨터 그래픽 효과를 이용하여 보다 시각적인 효과를 제공할 수 있도록 처리하는 생체 정보 표시 시스템 및 그의 표시 방법을 제공하는 것이다.
본 발명의 또 다른 목적은 실시간으로 측정된 생체 정보를 어플리케이션을 이용하여 사용자에게 제공하는 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법을 제공하는 것이다.
상기 목적들을 달성하기 위한, 본 발명의 생체 정보 표시 시스템은, 실시간으로 측정된 사용자의 생체 정보에 대응하여 변환된 컴퓨터 그래픽스 영상을 사용자의 실사 영상에 포함시켜서 실시간으로 사용자 단말기에 표시하는데 그 한 특징이 있다. 이와 같은 본 발명의 생체 정보 표시 시스템은 종래에 비해 보다 시각적인 효과를 제공할 수 있다.
이 특징에 따른 본 발명의 생체 정보 표시 시스템은: 실시간으로 사용자의 생체 정보를 측정하는 생체 정보 측정기 및; 통신망을 통하여 상기 생체 정보 측정기와 연결되고, 카메라를 이용하여 실시간으로 사용자의 실사 영상을 촬영하고, 상기 생체 정보 측정기로부터 상기 생체 정보를 실시간으로 전송받아서 수집하고, 수집된 상기 생체 정보를 기설정된 기준 정보와 비교, 판별하여 상기 생체 정보에 대응되는 컴퓨터 그래픽스 요소로 변환하여 컴퓨터 그래픽스 영상을 추출하고, 추출된 상기 컴퓨터 그래픽스 영상을 상기 실사 정보에 포함시켜서 표시하도록 처리하는 사용자 단말기를 포함한다.
이 특징의 한 실시예에 있어서, 상기 생체 정보 측정기는 뇌파, 맥파, 심전도, 근전도, 안전도, 모션, 체온, 혈압, 호흡 중 적어도 하나의 상기 생체 정보를 측정하는 센서를 구비한다.
다른 실시예에 있어서, 상기 컴퓨터 그래픽스 요소에는 상기 컴퓨터 그래픽스 영상에 표현되는 표현물의 크기, 색상, 밝기, 대칭성, 동적 움직임 및 사용자의 얼굴 밝기 중 적어도 하나가 포함된다.
또 다른 실시예에 있어서, 상기 생체 정보 측정기는; 상기 생체 정보를 측정하는 적어도 하나의 센서를 갖는 센서 모듈과; 상기 통신망을 통해 상기 사용자 단말기와 연결되고, 상기 사용자 단말기로 측정된 상기 생체 정보를 실시간 전송하는 통신 모듈 및; 상기 센서 모듈로부터 측정된 상기 생체 정보를 상기 통신 모듈을 통해 상기 사용자 단말기로 전송하도록 상기 센서 모듈과 상기 통신 모듈을 제어하는 컨트롤러를 포함한다.
또 다른 실시예에 있어서, 상기 사용자 단말기는; 실시간으로 상기 실사 영상을 촬영하는 상기 카메라와; 상기 통신망을 통해 상기 생체 정보 측정기와 연결되어 실시간으로 측정된 상기 생체 정보를 받아들이는 통신부와; 상기 실사 영상, 다양한 상기 컴퓨터 그래픽스 영상, 상기 생체 정보, 상기 기준 정보, 그리고 상기 통신부를 통해 상기 생체 정보 측정기가 인식되면, 활성화되어 상기 생체 정보 측정기로부터 측정된 상기 생체 정보를 실시간으로 받아서 수집하고, 상기 생체 정보에 대응하여 상기 실사 영상과 상기 컴퓨터 그래픽스 영상을 함께 표시하도록 처리하는 어플리케이션이 저장된 저장부와; 상기 어플리케이션에 의해 상기 생체 정보에 대응하는 상기 실사 영상과 상기 컴퓨터 그래픽스 영상을 함께 표시하는 표시부 및; 상기 어플리케이션을 처리하도록 제어하는 제어부를 포함한다.
또 다른 실시예에 있어서, 상기 어플리케이션은; 상기 생체 정보 측정기를 상기 통신망을 통해 인식되면, 상기 생체 정보 측정기로부터 사용자의 상기 생체 정보를 측정, 수집하도록 상기 어플리케이션을 활성화시키는 측정기 인식부와; 상기 어플리케이션이 활성화되면, 상기 생체 정보 측정기로부터 실시간으로 수집된 사용자의 상기 생체 정보를 상기 기준 정보와 비교하여, 상기 생체 정보의 상태를 판별하고, 판별된 결과에 따라 상기 생체 정보에 대응되는 컴퓨터 그래픽스 요소로 변환하는 생체 정보 판별부 및; 기저장된 상기 컴퓨터 그래픽스 영상들 중 변환된 컴퓨터 그래픽스 요소에 따른 하나의 상기 컴퓨터 그래픽스 영상을 선택하고, 선택된 상기 컴퓨터 그래픽스 영상을 사용자의 상기 실사 영상과 함께 상기 표시부에 표시하도록 처리하는 영상 처리부를 포함한다.
본 발명의 다른 특징에 따르면, 생체 정보 표시 시스템의 생체 정보 표시 방법이 제공된다.
이 특징에 따른 본 발명의 생체 정보 표시 시스템의 생체 정보 표시 방법은: 생체 정보 측정기로부터 실시간으로 사용자의 생체 정보를 측정하고, 측정된 상기 생체 정보를 통신망을 통하여 사용자 단말기로 전송하는 단계와; 상기 사용자 단말기의 카메라를 이용하여 사용자의 실사 영상을 실시간으로 촬영하고, 상기 사용자 단말기가 상기 생체 정보 측정기로부터 상기 생체 정보를 실시간으로 수집하는 단계와; 상기 사용자 단말기가 수집된 상기 생체 정보를 기설정된 기준 정보와 비교, 판별하여 상기 생체 정보에 대응되는 컴퓨터 그래픽스 요소로 변환하여 변환된 컴퓨터 그래픽스 요소에 대응되는 컴퓨터 그래픽스 영상을 추출하는 단계 및; 상기 실사 영상과 추출된 상기 컴퓨터 그래픽스 영상을 합성하여 상기 사용자 단말기의 표시부에 표시하는 단계를 포함한다.
이 특징의 한 실시예에 있어서, 상기 방법은; 상기 전송하는 단계 이전에 상기 사용자 단말기가 상기 통신망을 이용하여 상기 생체 정보 측정기를 인식하는 단계를 더 포함한다.
다른 실시예에 있어서, 상기 인식하는 단계는; 상기 사용자 단말기에서 상기 생체 정보 측정기가 인식되면, 상기 사용자 단말기에 설치된 어플리케이션을 활성화시켜서 상기 전송하는 단계와 상기 수집하는 단계와 상기 추출하는 단계 및 상기 표시하는 단계를 처리하도록 한다.
또 다른 실시예에 있어서, 상기 컴퓨터 그래픽스 요소에는 상기 컴퓨터 그래픽스 영상에 표현되는 표현물의 크기, 색상, 밝기, 대칭성, 동적 움직임 및 사용자의 얼굴 밝기 중 적어도 하나가 포함된다.
상술한 바와 같이, 본 발명의 생체 정보 표시 시스템은 실시간으로 측정된 사용자의 생체 정보에 대응하여 변환된 컴퓨터 그래픽스(Computer Graphics) 영상을 사용자의 실사 영상에 포함시켜서 실시간으로 사용자 단말기에 표시함으로써, 사용자의 생체 정보를 종래의 숫자, 챠트 , 막대 그래프 등으로 사용자에게 보고서 화면을 제시하는 방식에서 탈피하여, 보다 시각적인 효과를 제공하고, 흥미를 유발할 수 있다.
또 본 발명의 생체 정보 표시 시스템은 사용자의 생체 정보에 대응하여 변환된 컴퓨터 그래픽스(Computer Graphics) 영상과 사용자의 실사 영상이 포함된 영상을 다른 사용자와 공유하도록 함으로써, 새로운 콘텐츠의 공유와 소셜 네트워크 서비스의 차별화를 얻을 수 있다.
또한 본 발명의 생체 정보 표시 시스템은 사용자의 생체 정보에 따라 최적의 컨디션 상태(예를 들어, 집중도가 높은 상태 등)에서 사용자가 원하는 프로그램을 활용하도록 제공할 수 있다.
도 1은 본 발명에 따른 생체 정보 표시 시스템의 구성을 도시한 블럭도;
도 2는 도 1에 도시된 생체 정보 측정기의 구성을 도시한 블럭도;
도 3은 도 1에 도시된 사용자 단말기의 구성을 도시한 블럭도;
도 4는 본 발명에 따른 생체 정보 표시 시스템의 생체 정보를 표시하는 수순을 나타내는 흐름도; 그리고
도 5a 내지 도 5i는 본 발명의 실시예들에 따른 사용자의 실사 영상과 다양한 컴퓨터 그래픽스 영상을 이용하여 사용자의 생체 정보의 상태를 나타낸 도면들이다.
본 발명의 실시예는 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 서술하는 실시예로 인해 한정되어지는 것으로 해석되어서는 안된다. 본 실시예는 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서 도면에서의 구성 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어진 것이다.
이하 첨부된 도 1 내지 도 5를 참조하여 본 발명의 실시예를 상세히 설명한다.
도 1은 본 발명에 따른 생체 정보 표시 시스템의 구성을 도시한 블럭도이고, 도 2는 도 1에 도시된 생체 정보 측정기의 구성을 도시한 블럭도이며, 그리고 도 3은 도 1에 도시된 사용자 단말기의 구성을 도시한 블럭도이다.
도 1 내지 도 3을 참조하면, 본 발명의 생체 정보 표시 시스템(2)은 사용자의 생체 정보를 종래의 숫자, 챠트 , 막대 그래프 등으로 사용자에게 보고서 화면을 제시하는 방식에서 탈피하여, 보다 시각적인 효과를 제공하고, 흥미를 유발할 수 있도록 하기 위하여, 실시간으로 측정된 사용자의 생체 정보에 대응하여 변환된 컴퓨터 그래픽스(Computer Graphics : CG) 영상을 사용자의 실사 영상에 포함시켜서 실시간으로 사용자 단말기(200)의 표시부(150)에 표시하도록 처리한다.
이를 위해 본 발명의 생체 정보 표시 시스템(2)은 통신망(4)과, 생체 정보 측정기(100) 및 사용자 단말기(200)를 포함한다.
통신망(4)은 예컨대, 유무선 통신망으로 구비되고, 생체 정보 측정기(100)와 사용자 단말기(200) 간에 상호 데이터 통신이 이루어지도록 제공된다. 이 실시예에서 통신망(4)은 블루투스(bluetooth), 와이파이(WiFi), 지그비(ZigBee) 등의 무선 통신망, 범용 직렬 버스(USB) 등의 유선 통신망 등으로 구비된다.
생체 정보 측정기(100)는 사용자의 다양한 생체 정보를 실시간으로 측정한다. 생체 정보 측정기(100)는 측정된 생체 정보를 통신망(4)을 통하여 사용자 단말기(200)로 제공한다. 본 발명에서 생체 정보에는 예를 들어, 뇌파, 맥파, 심전도, 근전도, 안전도, 모션, 심장 박동, 체온, 혈압, 호흡, 전기 피부 반응 등이 포함될 수 있으며, 생체 정보 측정기(100)는 이들 중 적어도 하나를 측정할 수 있도록 제공된다.
이러한 생체 정보 측정기(100)는 다양한 형태나 종류 예를 들어, 헤드 밴드, 팔찌, 목걸이 등과 같은 사용자 착용형 장치나, 휴대용 단말기, 전극 패드형 측정기 등과 같은 가정용 헬스 케어 장치로 구비될 수 있다.
이 실시예에서 생체 정보 측정기(100)는 도 2에 도시된 바와 같이, 센서 모듈(120)과, 컨트롤러(110) 및 통신 모듈(130)을 포함한다. 또 생체 정보 측정기(100)는 사용자 착용형 장치, 휴대용 단말기 등과 같이, 사용자 단말기(200)로 무선 통신으로 측정된 생체 정보를 전송하는 경우, 내부에 배터리(미도시됨)가 더 구비될 수 있다.
센서 모듈(120)은 사용자의 다양한 생체 정보 예를 들어, 뇌파, 맥파, 심전도, 근전도, 안전도, 모션, 심장 박동, 체온, 혈압, 호흡, 전기 피부 반응 중 적어도 하나를 각각 측정하는 적어도 하나의 센서를 포함한다. 센서 모듈(120)은 컨트롤러(110)의 제어를 받아서 실시간으로 사용자의 생체 정보를 측정하고, 측정된 생체 정보를 컨트롤러(110)로 제공한다.
컨트롤러(110)는 생체 정보 측정기(100)의 제반 동작을 처리하도록 제어한다. 즉, 컨트롤러(110)는 센서 모듈(120)을 제어하여 사용자의 생체 정보를 실시간으로 측정하도록 하고, 센서 모듈(120)로부터 측정된 생체 정보를 받아들여서 통신 모듈(130)을 통해 사용자 단말기(200)로 전송하도록 제어한다.
통신 모듈(130)은 컨트롤러(110)의 제어를 받아서 통신망(4)을 통해 사용자 단말기(200)로 생체 정보를 실시간 전송한다. 이 실시예에서 통신 모듈(130)은 블루투스(bluetooth) 무선 통신 모듈 또는 범용 직렬 버스(USB) 인터페이스 모듈 등으로 구비된다.
그리고 사용자 단말기(200)는 예를 들어, 스마트 폰, 태블릿 폰, 태블릿 PC 및 퍼스널 컴퓨터 등으로 구비되고, 통신망(4)을 통해 생체 정보 측정기(100)와 연결된다. 사용자 단말기(200)는 통신망(4)을 통해 생체 정보 측정기(100)가 무선 또는 유선으로 연결되어 있는지를 인식하고, 생체 정보 측정기(100)가 연결되어 있으면, 사용자의 생체 정보를 실시간으로 측정하도록 생체 정보 측정기(100)를 제어하고, 통신망(4)을 통해 생체 정보 측정기(100)로부터 실시간 측정된 생체 정보를 받아들인다.
또 사용자 단말기(200)는 카메라(도 3의 220)를 이용하여 실시간으로 사용자의 실사 영상을 촬영한다. 사용자 단말기(200)는 생체 정보 측정기(100)로부터 측정된 생체 정보를 실시간으로 전송받아서 수집하고, 수집된 생체 정보를 기설정된 기준 정보와 비교, 판별하여 생체 정보에 대응되는 컴퓨터 그래픽스(CG) 요소로 변환한다.
또 사용자 단말기(200)는 기저장된 컴퓨터 그래픽스 영상들 중 변환된 컴퓨터 그래픽스(CG) 요소의 영상 즉, 컴퓨터 그래픽스(CG) 영상을 선택하고, 선택된 컴퓨터 그래픽스(CG) 영상을 실사 영상에 포함시켜서 표시하도록 처리한다. 이 실시예에서 실사 영상과 컴퓨터 그래픽스 영상은 동영상 형태로 제공된다. 물론 실사 영상과 컴퓨터 그래픽스 영상은 정지 영상 형태로 제공될 수도 있다. 여기서 컴퓨터 그래픽스(CG) 요소는 표현물의 크기, 색상, 대칭성, 동적 움직임 및 사용자의 얼굴 톤(tone) 등이 포함된다.
이 실시예의 사용자 단말기(200)는 예컨대, 스마트 폰, 태플릿 PC 등으로 구비되고, 도 3에 도시된 바와 같이, 통신부(230)와, 카메라(220)와, 입력부(240)와, 표시부(250)와, 저장부(260) 및 제어부(210)를 포함한다. 사용자 단말기(200)는 저장부(260)에 본 발명에 따른 사용자의 생체 정보에 대응하여 실사 영상과 컴퓨터 그래픽스(CG) 영상을 함께 표시하도록 처리하는 어플리케이션(270)이 설치된다.
구체적으로, 통신부(230)는 제어부(210)의 제어를 받아서 통신망(4)을 통해 생체 정보 측정기(100)와 연결되어 실시간으로 측정된 생체 정보를 받아들인다. 이 실시예에서 통신부(230)는 블루투스(bluetooth) 무선 통신 모듈 또는 범용 직렬 버스(USB) 인터페이스 모듈 등으로 구비된다.
카메라(220)는 제어부(210)의 제어를 받아서 사용자의 실사 영상(262)을 실시간으로 촬영한다. 실사 영상(262)은 저장부(260)에 저장된다. 실사 영상(262)에는 사용자 실사 영상과 사용자가 위치한 배경 영상이 포함된다.
입력부(240)는 생체 정보 측정기(100)가 연결되어 있음이 인식되면, 어플리케이션(270)이 활성화되고, 어플리케이션(270)에 의한 다양한 명령이나 제어 신호를 발생하도록 메뉴, 아이콘 등을 선택, 실행시킨다.
표시부(250)는 예를 들어, 액정 디스플레이 패널, 유기 엘이디(OLED) 디스플레이 패널, 터치 패널 등으로 구비되고, 어플리케이션(270)의 처리 과정에 따른 다양한 유저 인터페이스 화면을 제공하고, 이를 이용하여 생체 정보 측정기(100)로부터 실시간으로 전송된 사용자의 생체 정보에 대응하여 실사 영상과 컴퓨터 그래픽스(CG) 영상을 함께 표시한다. 이 실시예에서 입력부(240)와 표시부(250)는 터치 패널로 구비된다.
저장부(260)는 예컨대, 메인 메모리, 휴대용 메모리 등으로 구비되고, 내부에 어플리케이션(270)이 설치된다. 또 저장부(260)는 카메라(220)로부터 촬영한 실사 영상(262)과, 생체 정보에 대응하여 표현되는 다양한 컴퓨터 그래픽스(CG) 요소가 포함된 컴퓨터 그래픽스(CG) 영상(264)과, 생체 정보 측정기(100)로부터 전송된 생체 정보(266) 및, 다양한 생체 정보들 각각에 대한 특정 측정치 또는 측정 범위로 설정되어 생체 정보(266)를 컴퓨터 그래픽스(CG) 요소로 변환하기 위해 생체 정보(266)를 비교하는 기준 정보(268)를 저장한다. 여기서 기준 정보(268)는 생체 정보의 신호 크기, 주파수 대역 등으로 설정된다.
이 실시예에서 컴퓨터 그래픽스(CG) 요소는 실사 영상의 컴퓨터 그래픽 표현을 위한 요소로서, 크기, 색상, 대칭성, 동적 움직임, 사용자 얼굴 밝기(톤) 등의 요소가 포함된다. 크기 요소는 사용자의 실사로부터 컴퓨터 그래픽 표현물의 외곽까지의 길이를 나타내는 요소로, 생체 정보의 상태가 좋은 경우에는 보통 상태보다 크게, 생체 정보의 상태가 나쁜 경우에는 보통 상태보다 작게 표현되도록 한다. 색상 요소는 표현물의 색상, 밝기 정도를 나타내는 요소로, 생체 정보의 상태가 좋은 경우에는 밝은 색상 예를 들어, 노란색, 연두색, 녹색 및 파란색 계통으로, 생체 정보의 상태가 나쁜 경우에는 어두운 색상 예를 들어, 밝은 색상에 회색, 검정색, 갈색 등의 어두운 계열의 색상이 추가되어 표현되도록 한다. 대칭성 요소는 컴퓨터 그래픽 표현물의 좌우의 차이를 나타내는 요소로서, 생체 정보의 상태가 좌우 동일한 경우에는 좌우가 대칭되게, 생체 정보의 상태가 좌우 다른 경우에는 좌우가 비대칭되게 표현되도록 한다. 동적 움직임 요소는 표현물에서 색상, 채도 및 크기 등이 동적으로 변화되는 것을 나타내는 요소로, 생체 정보의 상태가 좋은 경우에는 많이 변화되도록 하고, 생체 정보의 상태가 나쁜 경우에는 적게 변화되도록 표현한다. 그리고 사용자 얼굴 밝기 요소는 사용자 얼굴의 밝고 어두움을 조절하는 요소로, 생체 정보의 상태가 좋은 경우에는 밝게, 생체 정보의 상태가 나쁜 경우에는 어둡게 표현되도록 한다.
이러한 컴퓨터 그래픽스(CG) 요소들은 사용자의 생체 정보의 상태에 따라 다양하게 제공되며, 이를 통해 사용자의 건강 상태, 컨디션, 리듬감, 집중도 등의 정신 상태를 쉽게 표현할 수 있다.
다시 도 3을 참조하면, 어플리케이션(270)은 실시간으로 수집된 사용자의 생체 정보를 기준 정보를 이용하여 비교, 판별하고, 판별 결과에 따라 생체 정보에 대응되는 컴퓨터 그래픽스(CG) 요소로 변환하여 실사 영상(262)과 컴퓨터 그래픽스(CG) 영상(264)을 함께 표시하도록 처리한다.
이 실시예의 어플리케이션(270)은 측정기 인식부(271)와, 영상 처리부(272)와, 생체 정보 판별부(274) 및 컴퓨터 그래픽스(CG) 요소 변환부(276)으로 구성된다.
측정기 인식부(271)는 생체 정보 측정기(100)가 유선 또는 무선으로 연결되는지를 인식한다. 즉, 측정기 인식부(271)는 통신부(230)를 통해 생체 정보 측정기(100)가 인식되면, 생체 정보 측정기(100)로부터 사용자의 생체 정보를 측정, 수집하도록 어플리케이션(270)을 활성화시킨다. 만약, 측정기 인식부(271)는 생체 정보 측정기(100)가 인식되지 않으면, 어플리케이션(270)을 비활성화시킨다.
생체 정보 판별부(274)는 어플리케이션(270)이 활성화되면, 생체 정보 측정기(100)로부터 실시간으로 수집된 사용자의 생체 정보(266)를 기설정된 기준 정보(268)와 비교하여, 생체 정보(266)의 상태를 판별한다. 컴퓨터 그래픽스 요소 변환부(276)는 생체 정보 판별부(274)에 의해 판별된 결과에 따라 생체 정보(266)에 대응되는 컴퓨터 그래픽스(CG) 요소로 변환한다. 그리고 영상 처리부(272)는 기저장된 다양한 컴퓨터 그래픽스(CG) 영상(264)들 중 변환된 컴퓨터 그래픽스(CG) 요소에 따른 하나의 컴퓨터 그래픽스(CG) 영상을 선택하고, 선택된 컴퓨터 그래픽스(CG) 영상을 사용자의 실사 영상과 함께 표시부(250)에 표시하도록 처리한다.
그리고 제어부(210)는 예를 들어, 컨트롤러, 프로세서, 프로그램어블 로직 컨트롤러(PLC), 마이크로 컨트롤 유닛(MCU) 등으로 구비되어, 사용자 단말기(200)의 제반 동작을 처리하도록 제어한다. 즉, 제어부(210)는 어플리케이션(270)을 처리하도록 통신부(230), 카메라(220), 입력부(240), 표시부(250) 및 저장부(260)를 제어한다.
이러한 사용자 단말기(200)는 생체 정보 측정기(100)를 인식하여 실시간으로 사용자의 생체 정보를 측정하도록 하고, 측정된 생체 정보를 실시간으로 수집하여 사용자의 생체 정보의 상태에 따라 컴퓨터 그래픽스(CG) 영상을 선택하여 사용자의 실사 영상과 함께 표시하도록 한다.
또 본 발명의 생체 정보 표시 시스템(2)은 도면에는 도시되지 않았으나, 통신망(4)을 이용하여 복수 개의 사용자 단말기(200)들 각각이 접속하여 회원 등록하도록 하고, 어플리케이션(270)과 다양한 컴퓨터 그래픽스(CG) 영상들을 저장하여 사용자 단말기(200)들 각각에 어플리케이션(270)과 컴퓨터 그래픽스(CG) 영상들을 제공하는 서버(미도시됨)가 더 구비될 수 있다.
다음은 생체 정보 측정기(100)가 뇌파 측정기로 구비되는 경우, 사용자의 뇌파 정보를 이용하여 사용자 단말기(200)가 컴퓨터 그래픽스(CG) 영상을 표현하는 과정들을 상세히 설명한다.
뇌파 측정기가 실시간 측정한 뇌파 정보에는 특정 주파수 대역을 갖는다. 즉, 뇌파의 주파수 대역은 약 0.1 ~ 4 Hz 범위의 델타(delta) 대역, 약 4 ~ 8 Hz 범위의 세타(theta) 대역, 약 8 ~ 13 Hz 범위의 알파(alpha) 대역, 약 13 ~ 30 Hz 범위의 베타(beta) 대역, 그리고 약 30 Hz 이상 범위의 감마(gamma) 대역으로 구분된다. 일반적으로 약 0.5 ~ 4 HZ 범위의 델타 대역의 경우, 예를 들어, 뇌의 상태가 숙면 상태를 나타내고, 약 4 ~ 7 HZ 범위의 세타 대역의 경우, 졸리는 상태, 산만한 상태 등을 나타내고, 약 8 ~ 12 HZ 범위의 알파 대역의 경우, 편안한 상태에서 외부 집중력이 느슨한 상태 등을 나타내고, 약 12 ~ 15 HZ 범위의 알파 및 베타 대역의 경우, 움직이지 않은 상태에서 집중력을 유지하는 상태 등을 나타내고, 약 15 ~ 18 HZ 범위의 베타 대역의 경우에는 사고를 하며 활동적인 상태에서 집중력을 유지하는 상태 등을 나타내며, 그리고 약 18 HZ 이상의 베타 및 감마 대역의 경우에는 긴장, 불안 상태 등을 나타낸다.
이러한 특정 주파주 또는 특정 주파수 범위는 상술한 기준 정보(268)가 되며, 이러한 기준 정보(268)와 실시간으로 측정된 생체 정보(여기서는 뇌파 정보)(266)를 비교하여, 생체 정보(266)의 상태를 판별한다. 따라서 사용자 단말기(200)는 뇌파 정보의 특정 주파수 대역의 크기에 비례해서, 컴퓨터 그래픽스(CG) 요소를 조절한다.
여기서 컴퓨터 그래픽스(CG) 요소를 조절하는 방법에 대하여 예를 들어, 설명한다.
예를 들어, 뇌파 정보의 주파수 성분 중 알파 대역을 이용하여 컴퓨터 그래픽스(CG) 영상을 표현하는 방법 중 하나는 아래의 표 1과 같다.
CG 요소 알파 대역 감소시 CG 표현 알파 대역 증가시 CG 표현
크기 감소 증가
색상 어두운 색상 밝은 색상
동적 움직임 감소 증가
사용자 얼굴 밝기 어두워짐 밝아짐
또 뇌파 정보의 주파수 성분 중 좌우 알파 대역의 크기 차이에 따라 대칭 또는 비대칭적으로 표현하는 방법은 아래의 표 2와 같다. 즉, 뇌파 측정기의 측정 전극을 머리의 왼쪽, 오른쪽 각각에 개별적으로 부착하고, 각각에서 측정된 알파 대역의 크기에 따라서 아래 표 2와 같은 컴퓨터 그래픽스(CG) 요소의 표현이 가능하며, 각 컴퓨터 그래픽스(CG) 요소의 표현 시, 좌우뇌 알파 강도의 편측성을 비대칭 요소로, 동일성을 대칭 요소로써 표현한다.
CG 요소 좌뇌 > 우뇌 좌뇌 < 우뇌 좌뇌 = 우뇌
크기 화면 상의 사용자 왼쪽 CG가 오른쪽 CG 보다 더 크게 표현 화면 상의 사용자 왼쪽 CG를 오른쪽 CG 보다 더 작게 표현 화면 상의 사용자의 왼쪽, 오른족 CG 동일 크기 표현
색상 사용자의 왼편 색상을 오른쪽 보다 더 밝게 표현 사용자의 왼쪽 색상을 오른쪽 보다 더 어둡게 표현 사용자의 왼쪽, 오른쪽 동일 밝기 표현
동적 움직임 사용자의 왼쪽 CG가 오른쪽 CG 보다 동적움직임 요소 증가 사용자의 왼쪽 CG가 오른쪽 CG 보다 동적움직임 요소 감소 사용자의 왼쪽, 오른쪽 동일 동적 움직임 요소 표현.
사용자 얼굴 밝기 사용자의 왼쪽 얼굴이 오른쪽 얼굴보다 더 밝게 표현 사용자의 왼쪽 얼굴이 오른쪽 얼굴보다 더 어둡게 표현 사용자의 왼쪽, 오른쪽 얼굴 동일 밝기 표현
또 다른 예로서, 생체 정보 중 심박 정보를 이용하여 컴퓨터 그래픽스(CG) 요소를 조절하는 방법을 설명한다. 즉, 생체 정보 측정기(100)가 맥파 측정기, 심전도 측정기로 구비되는 경우, 측정된 심박 정보의 심박 시간 간격으로부터 측정된 분당 심박수, 심박 시간 격열을 이용한 심박 변이도 분석 결과의 수치들을 이용하여 아래의 표 3과 같은 컴퓨터 그래픽스(CG) 요소의 크기, 색상, 대칭성, 동적 움직임 요소를 표현 가능하다. 이러한 컴퓨터 그래픽스(CG) 요소의 표현은 심장 박동이 검출될 때마다 실시간으로 심장 박동에 동기화되어 표현된다.
CG 요소 심장 박동에 동기되어 표현
크기 심장 박동 시, 크기 증가되었다가 감소
동적 움직임 심장 박동 시마다 CG 기본 표현 상태에 추가적인 섬광 발생
여기서는 생체 정보 중 뇌파 정보, 심박 정보를 이용하여 본 발명의 기술적인 특징을 설명하였으나, 뇌파, 맥파, 심전도, 근전도, 안전도, 모션, 심장 박동, 체온, 혈압, 호흡, 전기 피부 반응 등의 다양한 생체 정보 중 하나 또는 하나 이상의 복합된 생체 정보를 이용하여 생체 정보의 상태에 따른 다양한 컴퓨터 그래픽스 영상으로 표현할 수 있음은 자명한 일이다.
계속해서 도 4는 본 발명에 따른 생체 정보 표시 시스템의 생체 정보를 표시하는 수순을 나타내는 흐름도이다. 이 수순은 사용자 단말기(200)의 제어부(210)가 처리하는 프로그램으로, 이 프로그램의 사용자 단말기(200)의 저장부(260)에 저장된다.
도 4를 참조하면, 본 발명의 생체 정보 표시 시스템(2)은 단계 S300에서 사용자 단말기(200)가 무선 또는 유선 통신망(4)을 이용하여 생체 정보 측정기(100)가 연결되었는지를 판별하여 연결되어 있으면, 해당 생체 정보 측정기(100)를 인식한다.
단계 S310에서 사용자 단말기(200)가 생체 정보 측정기(100)를 인식하면, 어플리케이션(270)을 활성화시킨다. 물론 사용자 단말기(200)에서 생체 정보 측정기(100)가 인식되지 않으면, 어플리케이션(270)은 비활성화된다.
단계 S320에서 어플리케이션(270)이 활성화된 사용자 단말기(200)가 생체 정보 측정기(100)로 사용자의 생체 정보를 실시간 측정하도록 제어하고, 생체 정보 측정기(100)로부터 통신망(4)을 통하여 측정된 생체 정보를 실시간 받아서 수집한다.
단계 S330에서 사용자 단말기(200)는 카메라(220)를 이용하여 사용자의 실사 영상을 촬영한다. 이 때, 단계 S340에서 사용자 단말기(200)는 어플리케이션(270)을 이용하여 사용자의 생체 정보와 기준 정보를 비교하여 생체 정보의 상태를 판별한다.
단계 S350에서 사용자 단말기(200)는 판별 결과에 대응하여 생체 정보를 컴퓨터 그래픽스(CG) 요소로 변환하고, 단계 S360에서 실사 영상과 컴퓨터 그래픽스(CG) 요소로 변환된 컴퓨터 그래픽스(CG) 영상을 합성한다. 이어서 단계 S370에서 사용자 단말기(200)는 실사 영상과 컴퓨터 그래픽스(CG) 영상이 합성된 영상을 표시부(250)에 디스플레이한다.
따라서 사용자의 생체 정보에 대응하는 컴퓨터 그래픽스(CG) 영상이 사용자의 실사 영상에 포함되어 동시에 표시된다. 이러한 합성된 영상들에 대한 다양한 실시예가 도 5a 내지 도 5i에 도시되어 있다.
도 5a 내지 도 5i는 본 발명의 실시예들에 따른 사용자의 실사 영상과 다양한 컴퓨터 그래픽스 영상을 이용하여 사용자의 생체 정보의 상태를 나타낸 도면들이다.
도 5a 내지 도 5i를 참조하면, 이 실시예의 인터페이스 화면(400, 410, 420, 430, 440, 450, 460, 470, 480)들은 생체 정보 측정기(100)로부터 실시간으로 측정된 생체 정보에 대응하여 사용자의 실사 영상(또는 사용자와 배경이 포함된 실사 영상)과 생체 정보에 매칭된 다양한 형상의 컴퓨터 그래픽스 영상이 합성되어 사용자 단말기(200) 예를 들어, 스마트 폰, 태블릿 폰, 태블릿 PC 등의 표시부(250)에 표시된다. 여기서 생체 정보 측정기(100)는 헤어 밴드(hair band) 형태의 뇌파 측정기로 구비된다.
예를 들어, 도 5a의 경우, 사용자 단말기(200)의 인터페이스 화면(400)에는 사용자의 실사 영상(401)과 헤어 밴드(hair band)(100)에서 실시간 측정된 생체 정보 즉, 뇌파 정보에 대응되는 컴퓨터 그래픽스(CG) 영상(408)이 합성되어 동시에 표시된다. 이 때, 컴퓨터 그래픽스(CG) 영상(408)은 실사 영상(401)의 사용자의 전체 주변에 아우라(aura) 또는 후광(halo)으로 표현되며, 실사 영상(401)에서의 얼굴 밝기와 컴퓨터 그래픽스 영상(408)의 크기, 색상, 대칭성 및 동적 움직임 효과는 상술한 표 1 내지 표 3에서와 같이, 측정된 뇌파 정보에 대응하여 변화될 수 있다.
이 인터페이스 화면(400)에는 합성 영상에서 원하는 정지 영상을 캡쳐하기 위한 스냅샷 버튼(402)과, 합성 영상을 저장하기 위한 저장 버튼(404) 및 다양한 소셜 네트워크 서비스(SNS)에 캡쳐한 정지 영상 또는 저장된 합성 영상을 공유하기 위한 SNS 공유 버튼(406)이 구비된다. 여기서 스냅샷 버튼(402)과 저장 버튼(404)이 눌러지면, 합성 영상에서 특정 화면의 정지 영상이나, 동영상이 사용자에 의해 수동으로 저장되도록 하거나, 측정 중인 생체 정보가 특정 기준 정보를 만족할 때에 자동 저장하도록 한다.
또 도 5b의 실시예에 따른 인터페이스 화면(410)에는 도 5a와는 달리, 측정된 뇌파 정보에 대응하여 실사 영상(412)에서 사용자의 얼굴 밝기가 더 밝고, 컴퓨터 그래픽스 영상(414)의 크기와 밝기 및 색상을 다르게 표현하고 있다.
또 도 5c의 인터페이스 화면(420)에는 측정된 뇌파 정보에 대응하여 실사 영상(412)에서 사용자의 얼굴 밝기가 도 5a의 것에 비해 더 어둡고, 컴퓨터 그래픽스 영상(414)의 크기, 색상, 밝기 및 동적 움직임을 다르게 표현하고 있다.
또 도 5d의 인터페이스 화면(430)에는 측정된 뇌파 정보에 대응하여 다른 형태의 컴퓨터 그래픽스 영상(434)이 표현되어 있다. 이 컴퓨터 그래픽스 영상(434)은 도 5a 내지 도 5c와는 달리, 실사 영상(432)에서 사용자의 머리 부분 만에 표현되어 있다. 이 인터페이스 화면(430)에는 실시간 측정한 뇌파 정보를 그래프 형태(436)로 더 표시하여 보여준다.
또 도 5e 내지 도 5i의 인터페이스 화면(440, 450, 460, 470, 480)들 각각에는 측정된 뇌파 정보에 대응하여 실사 영상(442, 452, 462, 472, 482)과 또 다른 형태의 컴퓨터 그래픽스 영상(444, 454, 464, 474, 484)들이 각각 합성되어 표시된다. 이 실시예에서 컴퓨터 그래픽스 영상(444, 454, 464, 474, 484)들은 측정된 뇌파 정보에 대응하여 크기, 색상, 밝기, 대칭성 및 동적 움직임들 중 적어도 하나의 요소를 달리하여 서로 다르게 표현된다.
또 이 실시예의 인터페이스 화면(440, 450, 460, 470, 480)들에는 도 5a의 인터페이스 화면(400)에 표시된 다양한 버튼(402, 404, 406)들과, 게임 모드 버튼(446)이 구비된다. 게임 모드 버튼(446)은 뇌파 정보에 대응하여 생체 정보의 상태가 최적인 상태 예를 들어, 집중도가 높은 상태에 활성화되고, 특정 게임과 링크된다. 따라서 이 인터페이스 화면(440, 450, 460, 470, 480)들 각각에서 게임 모드 버튼(446)이 눌러지면, 해당 게임을 활성화시킨다. 물론 게임 모드 버튼(446)이 게임을 대신하여 특정 프로그램 예를 들어, 교육용 프로그램에 링크되고, 생체 정보의 상태에 따라 사용자에게 교육용 프로그램을 활성화시켜서 효율적인 학습이 가능하도록 제공될 수도 있다.
이상에서, 본 발명에 따른 생체 정보 표시 시스템의 구성 및 작용을 상세한 설명과 도면에 따라 도시하였지만, 이는 실시예를 들어 설명한 것에 불과하며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다.
2 : 생체 정보 표시 시스템
4 : 통신망
100 : 생체 정보 측정기
200 : 사용자 단말기
220 : 카메라
250 : 표시부
270 : 어플리케이션

Claims (10)

  1. 생체 정보 표시 시스템에 있어서:
    실시간으로 사용자의 생체 정보를 측정하는 생체 정보 측정기 및;
    통신망을 통하여 상기 생체 정보 측정기가 연결되도록 인식하고, 카메라를 이용하여 실시간으로 사용자의 실사 영상을 촬영하고, 상기 생체 정보 측정기로부터 상기 생체 정보를 실시간으로 전송받아서 수집하고, 수집된 상기 생체 정보를 기설정된 기준 정보와 비교, 판별하여 상기 생체 정보에 대응되는 컴퓨터 그래픽스 요소로 변환하여 컴퓨터 그래픽스 영상을 추출하고, 추출된 상기 컴퓨터 그래픽스 영상을 상기 실사 영상에 포함시켜서 표시하도록 처리하는 사용자 단말기;를 포함하되,
    상기 컴퓨터 그래픽스 요소에는 상기 컴퓨터 그래픽스 영상에 표현되는 표현물의 크기, 색상, 밝기, 대칭성, 동적 움직임 및 사용자의 얼굴 밝기 중 적어도 하나가 포함되고;
    상기 생체 정보 측정기는, 상기 생체 정보를 측정하는 적어도 하나의 센서를 갖는 센서 모듈과; 상기 통신망을 통해 상기 사용자 단말기와 연결되고, 상기 사용자 단말기로 측정된 상기 생체 정보를 실시간 전송하는 통신 모듈 및; 상기 센서 모듈로부터 측정된 상기 생체 정보를 상기 통신 모듈을 통해 상기 사용자 단말기로 전송하도록 상기 센서 모듈과 상기 통신 모듈을 제어하는 컨트롤러;를 포함하는 것을 특징으로 하는 생체 정보 표시 시스템.
  2. 제 1 항에 있어서,
    상기 생체 정보 측정기는 뇌파, 맥파, 심전도, 근전도, 안전도, 모션, 체온, 혈압, 호흡 중 적어도 하나의 상기 생체 정보를 측정하는 센서를 구비하는 것을 특징으로 하는 생체 정보 표시 시스템.
  3. 삭제
  4. 삭제
  5. 제 1 항에 있어서,
    상기 사용자 단말기는;
    실시간으로 상기 실사 영상을 촬영하는 상기 카메라와;
    상기 통신망을 통해 상기 생체 정보 측정기와 연결되어 실시간으로 측정된 상기 생체 정보를 받아들이는 통신부와;
    상기 실사 영상, 다양한 상기 컴퓨터 그래픽스 영상, 상기 생체 정보, 상기 기준 정보, 그리고 상기 통신부를 통해 상기 생체 정보 측정기가 인식되면, 활성화되어 상기 생체 정보 측정기로부터 측정된 상기 생체 정보를 실시간으로 받아서 수집하고, 상기 생체 정보에 대응하여 상기 실사 영상과 상기 컴퓨터 그래픽스 영상을 함께 표시하도록 처리하는 어플리케이션이 저장된 저장부와;
    상기 어플리케이션에 의해 상기 생체 정보에 대응하는 상기 실사 영상과 상기 컴퓨터 그래픽스 영상을 함께 표시하는 표시부 및;
    상기 어플리케이션을 처리하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 생체 정보 표시 시스템.
  6. 제 5 항에 있어서,
    상기 어플리케이션은;
    상기 생체 정보 측정기를 상기 통신망을 통해 인식되면, 상기 생체 정보 측정기로부터 사용자의 상기 생체 정보를 측정, 수집하도록 상기 어플리케이션을 활성화시키는 측정기 인식부와;
    상기 어플리케이션이 활성화되면, 상기 생체 정보 측정기로부터 실시간으로 수집된 사용자의 상기 생체 정보를 상기 기준 정보와 비교하여, 상기 생체 정보의 상태를 판별하고, 판별된 결과에 따라 상기 생체 정보에 대응되는 컴퓨터 그래픽스 요소로 변환하는 생체 정보 판별부 및;
    기저장된 상기 컴퓨터 그래픽스 영상들 중 변환된 컴퓨터 그래픽스 요소에 따른 하나의 상기 컴퓨터 그래픽스 영상을 선택하고, 선택된 상기 컴퓨터 그래픽스 영상을 사용자의 상기 실사 영상과 함께 상기 표시부에 표시하도록 처리하는 영상 처리부를 포함하는 것을 특징으로 하는 생체 정보 표시 시스템.
  7. 생체 정보 표시 시스템의 생체 정보 표시 방법에 있어서:
    사용자 단말기가 통신망을 이용하여 생체 정보 측정기를 인식하는 단계와;
    인식된 상기 생체 정보 측정기로부터 실시간으로 사용자의 생체 정보를 측정하고, 측정된 상기 생체 정보를 상기 통신망을 통하여 상기 사용자 단말기로 전송하는 단계와;
    상기 사용자 단말기의 카메라를 이용하여 사용자의 실사 영상을 실시간으로 촬영하고, 상기 사용자 단말기가 상기 생체 정보 측정기로부터 상기 생체 정보를 실시간으로 수집하는 단계와;
    상기 사용자 단말기가 수집된 상기 생체 정보를 기설정된 기준 정보와 비교, 판별하여 상기 생체 정보에 대응되는 컴퓨터 그래픽스 요소로 변환하여 변환된 컴퓨터 그래픽스 요소에 대응되는 컴퓨터 그래픽스 영상을 추출하는 단계 및;
    상기 실사 영상과 추출된 상기 컴퓨터 그래픽스 영상을 합성하여 상기 사용자 단말기의 표시부에 표시하는 단계를 포함하되;
    상기 컴퓨터 그래픽스 요소에는 상기 컴퓨터 그래픽스 영상에 표현되는 표현물의 크기, 색상, 밝기, 대칭성, 동적 움직임 및 사용자의 얼굴 밝기 중 적어도 하나가 포함되는 것을 특징으로 하는 생체 정보 표시 시스템의 생체 정보 표시 방법.
  8. 삭제
  9. 제 7 항에 있어서,
    상기 인식하는 단계는;
    상기 사용자 단말기에서 상기 생체 정보 측정기가 인식되면, 상기 전송하는 단계와 상기 수집하는 단계와 상기 추출하는 단계 및 상기 표시하는 단계를 처리하도록 상기 사용자 단말기에 설치된 어플리케이션을 활성화시키는 것을 특징으로 하는 생체 정보 표시 시스템의 생체 정보 표시 방법.
  10. 삭제
KR1020160138570A 2016-10-24 2016-10-24 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법 KR101862696B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160138570A KR101862696B1 (ko) 2016-10-24 2016-10-24 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160138570A KR101862696B1 (ko) 2016-10-24 2016-10-24 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법

Publications (2)

Publication Number Publication Date
KR20180045101A KR20180045101A (ko) 2018-05-04
KR101862696B1 true KR101862696B1 (ko) 2018-06-01

Family

ID=62199226

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160138570A KR101862696B1 (ko) 2016-10-24 2016-10-24 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법

Country Status (1)

Country Link
KR (1) KR101862696B1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102054445B1 (ko) * 2018-09-18 2019-12-10 주식회사 휴먼라인 뇌파신호를 센싱하는 정신치료장치 및 그 장치를 이용하여 뇌파신호를 표시및 저장하는 정신치료시스템 및 중간관리자를 통한 뇌파신호 관리시스템
KR102324426B1 (ko) * 2019-05-02 2021-11-11 주식회사 힐리언 뇌파신호를 센싱하는 헤드폰겸용 호흡명상유도장치 및 그 장치를 이용하여 뇌파신호를 표시 및 저장하는 호흡명상유도시스템 및 중간관리자를 통한 뇌파신호 관리시스템
KR102074794B1 (ko) * 2019-11-29 2020-02-07 주식회사 휴먼라인 뇌파신호를 센싱하는 정신치료장치 및 그 장치를 이용하여 뇌파신호를 표시및 저장하는 정신치료시스템 및 중간관리자를 통한 뇌파신호 관리시스템
WO2021112270A1 (ko) * 2019-12-02 2021-06-10 주식회사 휴먼라인 뇌파신호를 센싱하는 정신치료장치 및 그 장치를 이용하여 뇌파신호를 표시및 저장하는 정신치료시스템 및 중간관리자를 통한 뇌파신호 관리시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100689465B1 (ko) * 2004-12-21 2007-03-08 삼성전자주식회사 적외선 센서를 구비한 카메라 폰 및 그 방법
KR100979274B1 (ko) * 2010-03-03 2010-08-31 황준하 생체정보 제공장치 및 그 방법
KR101536348B1 (ko) * 2014-03-31 2015-07-14 주식회사 바이브라시스템 동영상 기반 생리 신호를 이용한 졸음 검출 방법 및 장치
KR20160116186A (ko) * 2015-03-26 2016-10-07 주식회사 아트테크놀로지 바이오 레이더 기능과 이동 통신 기능을 연동한 생체 신호 감지 시스템

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7581191B2 (en) 1999-11-15 2009-08-25 Xenogen Corporation Graphical user interface for 3-D in-vivo imaging
JP3818488B2 (ja) 2000-01-28 2006-09-06 株式会社タニタ グラフ表示機能付き生体測定装置
KR20120108235A (ko) 2011-03-23 2012-10-05 삼성전자주식회사 가상의 생체 모델을 이용하여 실제 생체 신호 측정에 이용되는 최적의 파라미터를 결정하는 방법 및 장치
KR20160028329A (ko) 2014-09-03 2016-03-11 삼성전자주식회사 생체 정보를 측정하는 전자 장치 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100689465B1 (ko) * 2004-12-21 2007-03-08 삼성전자주식회사 적외선 센서를 구비한 카메라 폰 및 그 방법
KR100979274B1 (ko) * 2010-03-03 2010-08-31 황준하 생체정보 제공장치 및 그 방법
KR101536348B1 (ko) * 2014-03-31 2015-07-14 주식회사 바이브라시스템 동영상 기반 생리 신호를 이용한 졸음 검출 방법 및 장치
KR20160116186A (ko) * 2015-03-26 2016-10-07 주식회사 아트테크놀로지 바이오 레이더 기능과 이동 통신 기능을 연동한 생체 신호 감지 시스템

Also Published As

Publication number Publication date
KR20180045101A (ko) 2018-05-04

Similar Documents

Publication Publication Date Title
US11779222B2 (en) Method of and imaging system for clinical sign detection
Lamonaca et al. Health parameters monitoring by smartphone for quality of life improvement
US10969583B2 (en) Augmented reality information system for use with a medical device
KR101862696B1 (ko) 실사와 컴퓨터 그래픽스 영상을 이용한 생체 정보 표시 시스템 및 그의 표시 방법
JP6268193B2 (ja) 脈波測定装置、携帯機器、医療機器システム、及び生体情報コミュニケーションシステム
AU2020366348A1 (en) Systems and methods for multivariate stroke detection
KR101988657B1 (ko) 온열질환에 따른 위험을 예방하기 위한 시스템
CN115003216A (zh) 来自非接触式监测系统的附加流式生理参数的附接传感器激活以及相关联的装置、系统和方法
JP2007125151A (ja) 診断システム及び診断装置
US20240122486A1 (en) Physiological monitoring soundbar
WO2006064635A1 (ja) 診断システム
US20140163405A1 (en) Physiological information measurement system and method thereof
JP5400072B2 (ja) 生物感知インタラクティブ装置
CN108882853A (zh) 使用视觉情境来及时触发测量生理参数
JP2023527717A (ja) ユーザ活動を監視するためのシステムおよび方法
WO2020132941A1 (zh) 识别方法及相关装置
KR102188076B1 (ko) 노년층 피보호자를 모니터링하기 위한 IoT 기술을 이용하는 방법 및 그 장치
CN109620265A (zh) 识别方法及相关装置
KR102171742B1 (ko) 노인 케어 시스템 및 그 방법
US11510583B2 (en) Diagnostic mask and method
KR20220046734A (ko) 동영상을 이용한 잠재적 위험 존재 또는 이상 반응 상태 검출 방법 및 장치
CN116098596A (zh) 一种基于深度学习的生命体征监测方法与装置
McDuff Applications of camera-based physiological measurement beyond healthcare
CN212546423U (zh) 基于人脸图像解析的智能镜子
KR20220117632A (ko) 원격 상담 서비스 제공 방법 및 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant