KR20150093036A - 생체 정보 측정장치 및 측정방법 - Google Patents

생체 정보 측정장치 및 측정방법 Download PDF

Info

Publication number
KR20150093036A
KR20150093036A KR1020140013799A KR20140013799A KR20150093036A KR 20150093036 A KR20150093036 A KR 20150093036A KR 1020140013799 A KR1020140013799 A KR 1020140013799A KR 20140013799 A KR20140013799 A KR 20140013799A KR 20150093036 A KR20150093036 A KR 20150093036A
Authority
KR
South Korea
Prior art keywords
face
stress
image
concentration
heart rate
Prior art date
Application number
KR1020140013799A
Other languages
English (en)
Other versions
KR102176001B1 (ko
Inventor
박찬규
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020140013799A priority Critical patent/KR102176001B1/ko
Publication of KR20150093036A publication Critical patent/KR20150093036A/ko
Application granted granted Critical
Publication of KR102176001B1 publication Critical patent/KR102176001B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens

Abstract

본 발명은 컴퓨터에 구비된 영상 입력장치를 통해 얼굴 영상을 획득한 후, 얼굴 영상을 이용하여 심박수를 추출하고, 추출된 심박수를 분석하여 스트레스 및 집중도를 측정하되, 측정된 스트레스와 집중도에서 설정된 수치보다 이상 수치가 발생할 경우 이상 발생을 알리며, 사용자의 선택 여부에 따라 스트레스 완화 프로그램 또는 집중도 향상 프로그램을 실시할 수 있는 생체 정보 측정장치 및 측정방법을 제공한다.
본 발명의 실시예에 따른 생체 정보 측정장치는 얼굴 영상을 수신하는 영상 수신부, 상기 얼굴 영상에서 최초로 수신된 얼굴 영상을 찾고, 상기 최초로 수신된 얼굴 영상에서 얼굴 영역을 검출하는 얼굴 영역 검출부, 검출된 상기 얼굴 영역과 최초로 수신된 얼굴 영상의 이후 수신된 얼굴 영상의 얼굴 영역을 비교하고, 검출된 상기 얼굴 영역을 업데이트하는 얼굴 영역 추적부, 업데이트 된 상기 얼굴 영역 내 피부색의 픽셀값을 심박수로 변환하는 심박수 추출부 및 상기 심박수를 이용하여 스트레스와 집중도를 측정하는 스트레스 및 집중도 측정부를 포함할 수 있다.

Description

생체 정보 측정장치 및 측정방법{Apparatus for measuring Biometric Information and Method thereof}
본 발명은 생체 정보 측정장치 및 측정방법에 관한 것으로, 보다 상세하게는 얼굴 영상과 심박수를 이용한 생체 정보 측정장치 및 측정방법에 관한 것이다.
요즘은 컴퓨터 없이 생활하기란 불가능한 시대이다. 컴퓨터를 이용하는 사람들이 급격히 증가하고, 컴퓨터를 이용하는 시간이 급증하여 컴퓨터로부터 발생될 수 있는 스트레스나 VDT 증후군이 심각한 문제로 대두되고 있다.
일반적으로 스트레스는 내적으로 긴장감을 느끼게 하는 것으로서, 마음의 안정이나 다른 사람과 함께 생활하는데 있어서 큰 불편을 주는 신체적, 정신적인 긴장 또는 그러한 긴장을 유발하는 것을 말한다.
보통 스트레스 반응은 자극 호르몬인 아드레날린이나 다른 호르몬이 혈중 내로 분비되어 우리 몸을 보호하려고 하는 반응으로서, 위험에 대처해 싸우거나 그 상황을 피할 수 있는 힘과 에너지를 제공하게 되며, 이러한 스트레스 반응에 대한 신체의 변화는 다음과 같다.
근육과 뇌 및 심장에 더 많은 혈액을 보낼 수 있도록 맥박과 혈압의 증가가 나타나며, 더 많은 산소를 얻기 위해 호흡이 빨라진다.
또한, 행동을 할 준비 때문에 근육이 긴장하게 되며, 상황 판단과 빠른 행동을 위해 정신 더욱 명료해지고 감각기관이 한층 예민해진다.
아울러, 위험을 대비한 중요한 장기인 뇌와 심장 및 근육으로 흐르는 혈류는 증가하며, 위험한 시기에 혈액이 가장 적게 요구되는 곳인 피부와 소화기관과 신장 및 간으로 흐르는 혈류는 감소한다.
또한, 추가적인 에너지를 위해서 혈액 중에 있는 당과 지방 및 콜레스테롤의 양이 증가하며, 외상을 입었을 때 출혈을 방지하기 위해 혈소판이나 혈액응고인자가 증가한다.
현대사회에서 살아가는 사람들은 많은 스트레스에 노출되어 있으며, 신체에 손상을 입는 경우뿐만 아니라, 직장과 가정에서의 갈등이 스트레스를 제공하는 원인이 되고 있다.
한편, 의료계에서는 스트레스 측정에 많은 연구가 진행되고 있으며, 주로 피검자의 가슴 부위에 전극을 부착하여 심장의 전위활동을 나타내는 심전도를 측정한 후, 심전도 파형에 나타난 심박과 스트레스의 상관관계에 따라서 스트레스를 측정하는 방법이 사용되고 있다.
그러나, 심전도를 이용하여 스트레스를 측정하는 방법은 주로 가슴부위에 전극을 부착하고, 그 자세도 눕거나 앉아서 측정해야 하는 등 전체적인 과정이 복잡할 뿐만 아니라, 측정 대상자 입장에서 매우 번거롭고 불편한 점이 있다.
최근에는 일반인들의 건강에 대한 관심이 높아지면서 언제 어디서나 자신의 스트레스 상태를 점검해보고자 하는 욕구가 점차 높아지고 있고, 이에 따라 사용자가 간편하게 스트레스 상태를 측정하고자 하는 필요성이 요구되고 있다.
그러나, 사용자 자신이 직접 스트레스의 상태를 측정하기 위해서는 병원에서 검진을 받거나 가정용 의료기기를 개별적으로 구입해야 하는 번거로움이 있고, 또한 병원을 이용할 경우에는 시간 투자 및 검진비를 부담해야 했으며, 가정용 의료기기의 경우에는 고가의 돈을 지불하고 구입해야 하는 문제가 있다.
본 발명은 전문 의료측정장비 또는 가정용 의료기기를 사용하지 않고도 컴퓨터에 구비된 영상 입력장치를 이용하여 얼굴 영상을 수신하고, 얼굴 영상을 이용하여 심박수와 같은 생체 정보를 파악할 수 있는 생체 정보 측정장치 및 측정방법을 제공한다.
본 발명의 실시예에 따른 생체 정보 측정장치는 얼굴 영상을 수신하는 영상 수신부, 상기 얼굴 영상에서 최초로 수신된 얼굴 영상을 찾고, 상기 최초로 수신된 얼굴 영상에서 얼굴 영역을 검출하는 얼굴 영역 검출부, 검출된 상기 얼굴 영역과 최초로 수신된 얼굴 영상의 이후 수신된 얼굴 영상의 얼굴 영역을 비교하고, 검출된 상기 얼굴 영역을 업데이트하는 얼굴 영역 추적부, 업데이트 된 상기 얼굴 영역 내 피부색의 픽셀값을 심박수로 변환하는 심박수 추출부 및 상기 심박수를 이용하여 스트레스와 집중도를 측정하는 스트레스 및 집중도 측정부를 포함할 수 있다.
또한, 측정된 상기 스트레스와 집중도가 설정된 수치보다 이상이면 이상 발생을 알리는 알림부를 더 포함할 수 있다.
또한, 상기 알림부는 사용자가 스트레스 해소 또는 집중도 강화를 원할 경우, 이상 발생과 동시에 스트레스 해소 프로그램 또는 집중도 강화 프로그램을 추천하거나 제공할 수 있다.
또한, 측정된 상기 스트레스 및 집중도를 모니터의 위젯 또는 알림창을 통해 제공할 수 있다.
본 발명의 실시예에 따른 생체 정보 측정방법은 얼굴 영상을 수신하는 단계, 수신된 상기 얼굴 영상에서 최초로 수신된 얼굴 영상을 찾고, 상기 최초로 수신된 얼굴 영상에서 얼굴 영역을 검출하는 단계, 검출된 상기 얼굴 영역과 최초로 수신된 얼굴 영상의 이후 수신된 얼굴 영상의 얼굴 영역을 비교하고, 검출된 상기 얼굴 영역을 업데이트하는 단계, 업데이트 된 상기 얼굴 영역 내 피부색의 픽셀값을 심박수로 변환시키는 단계 및 상기 심박수를 이용하여 스트레스와 집중도를 측정하는 단계를 포함할 수 있다.
또한, 상기 스트레스와 집중도를 측정하는 단계에서 측정된 상기 스트레스와 집중도가 설정된 수치보다 이상이면 이상 발생을 알리는 단계를 더 포함할 수 있다.
또한, 상기 심박수로 변환시키는 단계와 동시에 얼굴 표정 분류 프로그램을 이용하여 얼굴 표정을 추출하는 단계를 더 포함할 수 있다.
본 기술은 전문 의료측정장비 또는 가정용 의료기기를 사용하지 않고도 컴퓨터에 구비된 영상 입력장치를 이용하여 얼굴 영상을 수신하고, 얼굴 영상을 이용하여 심박수와 같은 생체 정보를 파악할 수 있다.
또한, 본 기술은 측정된 생체 정보에서 이상 수치가 발생하면, 사용자는 스트레스 완화 프로그램 또는 집중도 향상 프로그램을 이용할 수 있어서 일의 효율을 높이고, 사용자의 건강을 개선할 수 있다.
도 1은 본 발명의 실시예에 따른 생체 정보 측정장치를 간략히 설명한 도면이다.
도 2는 본 발명의 실시예에 따른 생체 정보 측정장치의 구성도이다.
도 3은 본 발명의 실시예에 따른 생체 정보 측정장치의 측정방법을 설명한 순서도이다.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여, 본 발명의 가장 바람직한 실시예를 첨부도면을 참조하여 설명하기로 한다.
도 1은 본 발명의 실시예에 따른 생체 정보 측정장치를 간략히 설명한 도면이다.
도 1을 참조하면, 생체 정보 측정장치(1)는 컴퓨터의 모니터에 설치되는 카메라(10) 또는 영상 입력장치를 이용하여 사용자의 얼굴 영상을 수신할 수 있다.
아울러, 생체 정보 측정장치(1)는 수신된 얼굴 영상에서 얼굴 영역을 검출하고, 얼굴 영역을 기반으로 심박수를 추출하며, 추출된 심박수를 이용하여 스트레스 및 집중도를 파악할 수 있다.
도 1에 도시된 바와 같이, 심박수, 스트레스 및 집중도 수치 또는 상태를 모니터(20)에 개시할 수 있다. 예를 들어, 모니터(20)의 우측 상단에 심박수는 77이고, 스트레스는 양호하며, 집중도도 양호하다라고 표시될 수 있다. 즉, 사용자는 컴퓨터의 모니터(20)에 설치된 위젯(30)이나 알림창을 통해 측정된 심박수, 스트레스 및 집중도를 모니터링할 수 있다.
그리고, 생체 정보 측정장치(1)는 심박수, 스트레스 및 집중도의 이상 유무를 판단하여 알려준다.
심박수, 스트레스 및 집중도의 이상이 발생한 경우, 스트레스 프로그램 및 집중도 프로그램(40)을 실시하도록 알려주며, 사용자는 선택 여부에 따라 스트레스 프로그램 및 집중도 프로그램(40)의 실시 여부를 선택할 수 있다.
이러한 생체 정보 측정장치의 각 구성에 관한 구체적인 설명은 도 2를 참조한다.
도 2는 본 발명의 실시예에 따른 생체 정보 측정장치의 구성도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 생체 정보 측정장치는 PC 또는 노트북 등을 기반으로 하는 컴퓨터 장치로 구비될 수 있다. 여기서는 컴퓨터를 기반으로 하는 환경에서 얼굴 영상을 수신하고, 수신된 얼굴 영상에서 추출된 심박수를 이용하여 스트레스 및 집중도를 측정할 수 있는 생체 정보 측정장치에 대하여 설명하고자 한다.
생체 정보 측정장치는 영상 수신부(100), 얼굴 영역 검출부(200), 얼굴 영역 추적부(300), 심박수 추출부(400), 스트레스 및 집중도 측정부(500) 및 알림부(600)를 포함한다.
영상 수신부(100)는 컴퓨터를 기반으로 하는 환경에서 모니터에 설치되는 카메라 또는 영상 입력장치를 이용하여 사용자의 얼굴 영상을 수신할 수 있다. 영상 수신부(100)는 1초 당 30 프레임의 얼굴 영상을 수신할 수 있고, 카메라 또는 영상 입력장치의 성능에 따라 1초 당 30 프레임 이상의 얼굴 영상을 수신할 수도 있다.
얼굴 영역 검출부(200)는 영상 수신부(100)로부터 지속적으로 수신된 얼굴 영상에서 최초로 수신된 얼굴 영상을 찾고, 최초로 수신된 얼굴 영상에서 얼굴 영역을 검출한다. 얼굴 영역은 얼굴의 윤곽, 피부색 또는 얼굴의 특정부위(예를 들어, 눈, 코, 입 및 귀 등)를 포함할 수 있다.
얼굴 영역 검출부(200)는 에이다부스트(Adaboost) 기반의 얼굴 검출기 또는 서포트 벡터 머신(Support Vector Machines, SVM) 기반의 검출기를 이용하여 얼굴 영역 또는 얼굴의 구성요소들의 위치를 검출할 수 있다.
얼굴 영역 추적부(300)는 얼굴 영역 검출부(200)로부터 검출된 최초로 수신된 얼굴 영상의 얼굴 영역(첫 번째 프레임의 얼굴 영상에서 추출된 얼굴 영역)과 최초로 수신된 얼굴 영상의 이후에 수신된 얼굴 영상의 얼굴 영역(첫 번째 이후 프레임의 얼굴 영상에서 추출된 얼굴 영역)과 비교하여 최초로 수신된 얼굴 영역에서 변화된 얼굴 영역을 찾아내고, 변화된 영역을 업데이트한다. 변화된 얼굴 영역은 얼굴 영역의 위치, 얼굴 영역 내 피부색의 변화 등을 포함할 수 있다.
반면, 얼굴 영역 추적부(300)에서 사용자의 얼굴 영역을 추적할 수 없을 경우에는, 얼굴 영역 검출부(200)에서 다시 얼굴 영역을 검출할 수 있다.
심박수 추출부(400)는 얼굴 영역 추적부(300)에서 추출된 얼굴 영역을 이용하여 심박수의 추출을 시행할 수 있다.
구체적으로, 추출된 얼굴 영역은 이미지로써, 여러 개의 픽셀(화소수)들의 조합으로 구현될 수 있다. 이러한 이미지의 가로 및 세로의 크기를 각각 M, N이라고 하면, 추출된 얼굴 영역 내 피부색의 픽셀 값은 0 내지 255로 나타낼 수 있으며, MxN의 행렬로 구성될 수 있다. 여기서, 픽셀 값은 RGB 색상에서 G 색상만을 사용할 수 있다.
하나의 이미지 프레임이 처리될 때, 얼굴 영역의 전체 픽셀 값의 평균값을 구할 수 있다. 1초 당 30 프레임 영상의 경우, 1초 당 30개의 픽셀 값의 평균값이 정해지고, 이러한 픽셀 값의 평균값들이 1차원의 심박 신호로 변환된다.
1차원의 심박 신호는 사인파 형태의 심박 신호를 갖게 된다. 사인파 형태의 심박 신호의 최고점과 최하점을 각각 추출하여 1분 당 평균 값을 구하게 되면, 평균 심박수를 계산할 수 있다. 이러한 평균 심박수와 설정 기준이 되는 심박수와 비교하여 정상 또는 비정상의 유무를 판단할 수 있다.
또한, 심박수 추출부(400)는 심박수의 추출과 함께 추출된 얼굴 영역과 얼굴 표정 분류 프로그램(예를 들어 즐거운 표정, 지루한 표정, 슬픈 표정, 흥분한 표정, 무표정 등의 샘플얼굴 사진을 포함하는 얼굴 표정 분류 프로그램)을 이용하여 얼굴 표정을 분류할 수 있다. 이러한 얼굴 표정을 분류하기 위하여 사전에 분류된 표정들이 저장되어 있고, 얼굴 표정 분류 프로그램은 기계학습기법을 통해 얼굴 표정을 분류할 수 있다. 즉, 얼굴 영역 추적부(300)에서 추출되는 얼굴 영역의 표정과 사전에 분류된 얼굴 표정들과 비교하여 사용자의 얼굴 표정이 분류될 수 있다.
스트레스 및 집중도 측정부(500)에서는 추출된 심박수를 이용하여 스트레스와 집중도를 측정한다. 추출된 심박수는 수치로 표시되어 있고, 추출된 심박수의 수치에 따른 스트레스 및 집중도를 수치화하여 시간을 축으로 누적시켜 저장한다.
측정된 스트레스 및 집중도의 수치와 얼굴 표정 분류 프로그램에 따라 분류된 사용자의 얼굴 표정을 서로 비교하여 스트레스 및 집중도의 수치에 따른 상태를 모니터에 표시할 수 있다. 예를 들어, 사용자의 스트레스 및 집중도의 상태를 양호, 매우 양호, 조금 양호, 불량, 매우 불량 및 조금 불량 등으로 표시할 수 있다.
측정된 스트레스와 집중도는 컴퓨터에 저장될 수 있고, 사용자는 컴퓨터의 모니터의 위젯이나 알림창을 통해 측정된 스트레스와 집중도를 모니터링할 수 있다.
알림부(600)에서는 측정된 스트레스와 집중도에서 설정된 기준 수치보다 이상 수치가 발생하면, 이상 발생을 사용자에게 알린다.
이후에 사용자가 스트레스의 해소 또는 집중도 강화를 원할 경우, 알림부(600)에서는 이상 발생과 동시에 스트레스 해소 프로그램 또는 집중도 강화 프로그램을 사용자가 제공받을 수 있도록 서비스를 제공한다. 즉, 스트레스 해소 프로그램 또는 집중도 강화 프로그램은 알림부(600)와 연동되어 있다. 그리고, 스트레스 해소 프로그램 또는 집중도 강화 프로그램이 시행된 시점과 사용자의 스트레스 및 집중도의 수치는 저장되며, 지속적으로 스트레스 및 집중도의 이력이 사용자 별로 관리된다.
도 3은 본 발명의 실시예에 따른 생체 정보 측정장치의 측정방법을 설명한 순서도이다.
도 3을 참조하면, 영상 수신부(100)는 컴퓨터 기반의 환경에서 모니터에 설치된 카메라 또는 영상 입력장치를 통해 사용자의 얼굴 영상을 수신한다(S100). 사용자와 카메라 또는 영상 입력장치와의 거리는 최대한 1m ~ 2m를 벗어나지 않도록 한다.
다음으로, 얼굴 영역 검출부(200)에서는 지속적으로 수신된 얼굴 영상에서 최초로 수신된 얼굴 영상을 찾고, 최초로 수신된 얼굴 영상에서 얼굴 영역을 검출한다. 얼굴 영역은 얼굴의 윤곽, 피부색 또는 얼굴의 특정부위(예를 들어, 눈, 코, 입 및 귀 등)를 포함할 수 있다(S110).
얼굴 영역을 검출하는 방법은 에이다부스트(Adaboost) 기반의 얼굴 검출기 또는 서포트 벡터 머신(Support Vector Machines, SVM) 기반의 검출기를 이용할 수 있다.
구체적으로, 에이다부스트(Adaboost) 기반의 얼굴 검출기에서는 얼굴을 검출하고, 화상 안의 얼굴 영역을 결정한다. 얼굴 영역에 대해 눈동자 중심, 코 밑, 입 끝 등의 얼굴 위치를 찾고, 얼굴의 크기를 정규화한다. 얼굴의 크기를 정규화한 다음에 데이터베이스(DB)에 등록되어 있는 얼굴 화상과의 대조를 실시하여 유사도를 산출한다. 산출된 유사도를 역치 처리함으로써 등록 인물과 대조 인물이 동일인인지 아닌지를 결정할 수 있는 방법이다.
다음으로, 얼굴 영역 추적부(300)에서는 얼굴 영역 검출부(200)로부터 검출된 최초로 수신된 얼굴 영상의 얼굴 영역(첫 번째 프레임의 얼굴 영상에서 추출된 얼굴 영역)과 최초로 수신된 얼굴 영상의 이후에 수신된 얼굴 영상의 얼굴 영역(첫 번째 이후 프레임의 얼굴 영상에서 추출된 얼굴 영역)과 비교하여 최초로 수신된 얼굴 영역에서 변화된 얼굴 영역을 찾아내고, 변화된 얼굴 영역을 업데이트한다(S120). 변화된 얼굴 영역은 얼굴 영역의 위치, 얼굴 영역 내 피부색의 변화 등을 포함할 수 있다.
반면, 얼굴 영역 추적부(300)에서 사용자의 얼굴 영역을 즉시 추적할 수 없을 경우에는, 얼굴 영역 검출부(200)에서 지속적으로 수신된 얼굴 영상으로부터 다시 얼굴 영역을 검출할 수 있다.
이어서, 심박수 추출부(400)에서는 얼굴 영역 추적부(300)에서 추출된 얼굴 영역을 이용하여 심박수의 추출을 시행할 수 있다(S130).
구체적으로, 추출된 얼굴 영역은 이미지로써, 여러 개의 픽셀들의 조합으로 구현될 수 있다. 이러한 이미지의 가로 및 세로의 크기를 각각 M, N이라고 하면, 추출된 얼굴 영역 내 피부색의 픽셀 값은 0 내지 255로 나타낼 수 있으며, MxN의 행렬로 구성될 수 있다. 여기서, 픽셀 값은 RGB 색상에서 G 색상만을 사용할 수 있다.
하나의 이미지 프레임이 처리될 때, 얼굴 영역의 전체 픽셀 값의 평균값을 구할 수 있다. 1초 당 30 프레임 영상의 경우, 1초 당 30개의 픽셀 값의 평균값이 정해지고, 이러한 픽셀 값의 평균값들이 1차원의 심박 신호로 변환된다.
1차원의 심박 신호는 사인파 형태의 심박 신호를 갖게 된다. 사인파 형태의 심박 신호의 최고점과 최하점을 각각 추출하여 1분 당 평균 값을 구하게 되면, 평균 심박수를 계산할 수 있다. 이러한 평균 심박수와 설정 기준이 되는 심박수와 비교하여 정상 또는 비정상의 유무를 판단할 수 있다.
또한, 심박수 추출부(400)에서는 심박수의 추출과 함께 추출된 얼굴 영역과 얼굴 표정 분류 프로그램(예를 들어 즐거운 표정, 지루한 표정, 슬픈 표정, 흥분한 표정, 무표정 등의 샘플얼굴 사진을 포함하는 얼굴 표정 분류 프로그램)을 이용하여 얼굴 표정을 분류할 수 있다. 이러한 얼굴 표정을 분류하기 위하여 사전에 분류된 표정들이 저장되어 있고, 얼굴 표정 분류 프로그램은 기계학습기법을 통해 얼굴 표정을 분류할 수 있다. 즉, 얼굴 영역 추적부(300)에서 추출되는 얼굴 영역의 표정과 사전에 분류된 얼굴 표정들과 비교하여 사용자의 얼굴 표정이 분류될 수 있다.
다음으로, 스트레스 및 집중도 측정부(500)에서는 추출된 심박수를 이용하여 스트레스와 집중도를 측정한다(S140). 추출된 심박수는 수치로 표시되어 있고, 추출된 심박수의 수치에 따른 스트레스 및 집중도를 수치화하여 시간축으로 누적시켜 저장한다.
측정된 스트레스 및 집중도의 수치와 얼굴 표정 분류 프로그램에 따라 분류된 사용자의 얼굴 표정을 서로 비교하여 스트레스 및 집중도의 수치에 따른 상태를 모니터에 표시할 수 있다. 예를 들어, 사용자의 스트레스 및 집중도의 상태를 양호, 매우 양호, 조금 양호, 불량, 매우 불량 및 조금 불량 등으로 표시할 수 있다.
측정된 스트레스와 집중도는 컴퓨터에 저장될 수 있고, 사용자는 컴퓨터의 모니터의 위젯이나 알림창을 통해 측정된 스트레스와 집중도를 모니터링할 수 있다.
이어서, 알림부(600)에서는 측정된 스트레스와 집중도에서 설정된 기준 수치보다 이상 수치가 발생하면, 이상 발생을 사용자에게 알린다(S150).
이후에 사용자가 스트레스의 해소 또는 집중도 강화를 원할 경우, 알림부(600)에서는 이상 발생과 동시에 스트레스 해소 프로그램 또는 집중도 강화 프로그램을 사용자가 제공받을 수 있도록 서비스를 제공한다(S160). 즉, 스트레스 해소 프로그램 또는 집중도 강화 프로그램은 알림부(600)와 연동되어 있다. 그리고, 스트레스 해소 프로그램 또는 집중도 강화 프로그램이 시행된 시점과 사용자의 스트레스 및 집중도의 수치는 저장되며, 지속적으로 스트레스 및 집중도의 이력이 사용자 별로 관리된다(S170).
이상, 본 발명은 비록 한정된 구성과 도면에 의해 설명되었으나, 본 발명의 기술적 사상은 이러한 것에 한정되지 않으며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해, 본 발명의 기술적 사상과 하기 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형 실시가 가능할 것이다.

Claims (1)

  1. 얼굴 영상을 수신하는 영상 수신부;
    상기 얼굴 영상에서 최초로 수신된 얼굴 영상을 찾고, 상기 최초로 수신된 얼굴 영상에서 얼굴 영역을 검출하는 얼굴 영역 검출부;
    검출된 상기 얼굴 영역과 최초로 수신된 얼굴 영상의 이후 수신된 얼굴 영상의 얼굴 영역을 비교하고, 검출된 상기 얼굴 영역을 업데이트하는 얼굴 영역 추적부;
    업데이트 된 상기 얼굴 영역 내 피부색의 픽셀값을 심박수로 변환하는 심박수 추출부; 및
    상기 심박수를 이용하여 스트레스와 집중도를 측정하는 스트레스 및 집중도 측정부
    를 포함하는 것을 특징으로 하는 생체 정보 측정장치.
KR1020140013799A 2014-02-06 2014-02-06 생체 정보 측정장치 및 측정방법 KR102176001B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140013799A KR102176001B1 (ko) 2014-02-06 2014-02-06 생체 정보 측정장치 및 측정방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140013799A KR102176001B1 (ko) 2014-02-06 2014-02-06 생체 정보 측정장치 및 측정방법

Publications (2)

Publication Number Publication Date
KR20150093036A true KR20150093036A (ko) 2015-08-17
KR102176001B1 KR102176001B1 (ko) 2020-11-09

Family

ID=54057136

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140013799A KR102176001B1 (ko) 2014-02-06 2014-02-06 생체 정보 측정장치 및 측정방법

Country Status (1)

Country Link
KR (1) KR102176001B1 (ko)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170028113A (ko) 2015-09-03 2017-03-13 주식회사 제론헬스케어 스킨컬러 필터를 이용한 심박수 측정시스템
WO2019172642A1 (ko) * 2018-03-07 2019-09-12 삼성전자주식회사 심장 박동을 측정하기 위한 전자 장치 및 방법
US10616530B2 (en) 2017-12-22 2020-04-07 Electronics And Telecommunications Research Institute Multipoint video conference device and controlling method thereof
KR20200038146A (ko) * 2018-10-02 2020-04-10 상명대학교산학협력단 심전도를 이용한 집중도 인식 방법 및 장치
WO2020166757A1 (ko) * 2019-02-14 2020-08-20 연세대학교 산학협력단 영상과 얼굴의 특징점을 이용한 스트레스 인식 장치 및 방법
CN111797794A (zh) * 2020-07-13 2020-10-20 中国人民公安大学 一种面部动态血流分布检测方法
WO2020246758A1 (ko) * 2019-06-03 2020-12-10 계명대학교 산학협력단 카메라를 이용한 비접촉 ppg 신호 측정 시스템 및 그 구동 방법
WO2021101073A1 (ko) * 2019-11-18 2021-05-27 삼성전자 주식회사 생체 데이터를 획득하는 장치 및 그 방법
KR20210093705A (ko) * 2020-01-20 2021-07-28 주식회사 에버정보기술 다중 이벤트 분석 및 제어를 위한 ai 영상 처리 카메라 및 카메라 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040218810A1 (en) * 2003-04-29 2004-11-04 Inforward, Inc. Methods and systems for computer analysis of skin image
KR20080038512A (ko) * 2006-10-30 2008-05-07 현대자동차주식회사 심전도를 이용한 운전자 스트레스지수 제공시스템 및 방법
KR20120048021A (ko) * 2009-08-20 2012-05-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 이미지 분석을 위한 방법 및 시스템
KR20130126000A (ko) * 2012-05-10 2013-11-20 삼성전자주식회사 개인화된 감성 인식 장치 및 방법
KR20140003820A (ko) * 2012-06-29 2014-01-10 주식회사 라이프사이언스테크놀로지 의자에서 획득한 생체정보를 기반으로 한 사용자 인터페이스방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040218810A1 (en) * 2003-04-29 2004-11-04 Inforward, Inc. Methods and systems for computer analysis of skin image
KR20080038512A (ko) * 2006-10-30 2008-05-07 현대자동차주식회사 심전도를 이용한 운전자 스트레스지수 제공시스템 및 방법
KR20120048021A (ko) * 2009-08-20 2012-05-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 이미지 분석을 위한 방법 및 시스템
KR20130126000A (ko) * 2012-05-10 2013-11-20 삼성전자주식회사 개인화된 감성 인식 장치 및 방법
KR20140003820A (ko) * 2012-06-29 2014-01-10 주식회사 라이프사이언스테크놀로지 의자에서 획득한 생체정보를 기반으로 한 사용자 인터페이스방법

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170028113A (ko) 2015-09-03 2017-03-13 주식회사 제론헬스케어 스킨컬러 필터를 이용한 심박수 측정시스템
US10616530B2 (en) 2017-12-22 2020-04-07 Electronics And Telecommunications Research Institute Multipoint video conference device and controlling method thereof
WO2019172642A1 (ko) * 2018-03-07 2019-09-12 삼성전자주식회사 심장 박동을 측정하기 위한 전자 장치 및 방법
KR20190109654A (ko) * 2018-03-07 2019-09-26 삼성전자주식회사 심장 박동을 측정하기 위한 전자 장치 및 방법
KR20200038146A (ko) * 2018-10-02 2020-04-10 상명대학교산학협력단 심전도를 이용한 집중도 인식 방법 및 장치
WO2020166757A1 (ko) * 2019-02-14 2020-08-20 연세대학교 산학협력단 영상과 얼굴의 특징점을 이용한 스트레스 인식 장치 및 방법
WO2020246758A1 (ko) * 2019-06-03 2020-12-10 계명대학교 산학협력단 카메라를 이용한 비접촉 ppg 신호 측정 시스템 및 그 구동 방법
KR20200139039A (ko) * 2019-06-03 2020-12-11 계명대학교 산학협력단 카메라를 이용한 비접촉 ppg 신호 측정 시스템 및 그 구동 방법
WO2021101073A1 (ko) * 2019-11-18 2021-05-27 삼성전자 주식회사 생체 데이터를 획득하는 장치 및 그 방법
KR20210093705A (ko) * 2020-01-20 2021-07-28 주식회사 에버정보기술 다중 이벤트 분석 및 제어를 위한 ai 영상 처리 카메라 및 카메라 시스템
CN111797794A (zh) * 2020-07-13 2020-10-20 中国人民公安大学 一种面部动态血流分布检测方法

Also Published As

Publication number Publication date
KR102176001B1 (ko) 2020-11-09

Similar Documents

Publication Publication Date Title
KR20150093036A (ko) 생체 정보 측정장치 및 측정방법
Cho et al. Instant stress: detection of perceived mental stress through smartphone photoplethysmography and thermal imaging
Li et al. The obf database: A large face video database for remote physiological signal measurement and atrial fibrillation detection
US11903720B2 (en) System and method for detecting neurological disease
US9336594B2 (en) Cardiac pulse rate estimation from source video data
Lamonaca et al. Health parameters monitoring by smartphone for quality of life improvement
JP6461021B2 (ja) 被検者のバイタルサイン情報を取得するためのデバイス及び方法
Shahriari et al. Electrocardiogram signal quality assessment based on structural image similarity metric
US20200196961A1 (en) Non-Invasive Determination of Disease States
JP5616794B2 (ja) 心房細動監視
JP6073919B2 (ja) ユーザの圧受容器反射をモニタリングする方法及び装置
EP3305188A1 (en) Biosignal measurement device utilizing plurality of electrodes for measuring biosignal as touch sensors
JP6616331B2 (ja) 対象の無呼吸を検出するための装置、システム及び方法
KR101752873B1 (ko) 동공 크기 변화율을 이용한 심장 시간 영역의 정보 추출 방법 및 그 장치
WO2020175759A1 (ko) 생체 신호 센서 탑재 hmd 기기를 활용한 사용자의 스트레스 분석 및 개인 정신건강 관리 시스템 및 방법
US9320440B2 (en) Discriminating between atrial fibrillation and sinus rhythm in physiological signals obtained from video
US20160287183A1 (en) Classifying a time-series signal as ventricular premature contraction
Kobayashi et al. Development of a mental disorder screening system using support vector machine for classification of heart rate variability measured from single-lead electrocardiography
KR101996027B1 (ko) 동공 크기 변화를 이용한 심장 주파수 영역의 정보 추출 방법 및 그 장치
US20160287106A1 (en) Method for assessing patient risk for ventricular tachycardia
Hsieh et al. The emotion recognition system with Heart Rate Variability and facial image features
KR20170004549A (ko) 동공 크기 변화율을 이용한 심장 주파수 영역의 정보 추출 방법 및 그 장치
Camargo et al. Sleep apnea-hypopnea quantification by cardiovascular data analysis
JP7162254B2 (ja) 生体情報モニタリング方法および生体情報モニタリングシステム
JP2018130264A (ja) 動態解析システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant