CN109982633B - 脉搏检测装置、图像分析装置以及生物体信息生成系统 - Google Patents
脉搏检测装置、图像分析装置以及生物体信息生成系统 Download PDFInfo
- Publication number
- CN109982633B CN109982633B CN201780068397.XA CN201780068397A CN109982633B CN 109982633 B CN109982633 B CN 109982633B CN 201780068397 A CN201780068397 A CN 201780068397A CN 109982633 B CN109982633 B CN 109982633B
- Authority
- CN
- China
- Prior art keywords
- living body
- pulse wave
- biological information
- pulse
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 170
- 238000010191 image analysis Methods 0.000 title claims abstract description 88
- 102000001554 Hemoglobins Human genes 0.000 claims abstract description 40
- 108010054147 Hemoglobins Proteins 0.000 claims abstract description 40
- 230000005540 biological transmission Effects 0.000 claims abstract description 34
- 230000031700 light absorption Effects 0.000 claims abstract description 28
- 230000008859 change Effects 0.000 claims abstract description 22
- 230000033001 locomotion Effects 0.000 claims description 71
- 230000036772 blood pressure Effects 0.000 claims description 68
- 238000012937 correction Methods 0.000 claims description 30
- 238000003384 imaging method Methods 0.000 claims description 21
- 210000001061 forehead Anatomy 0.000 claims description 19
- 230000001815 facial effect Effects 0.000 claims description 2
- 230000001678 irradiating effect Effects 0.000 claims 1
- 238000004364 calculation method Methods 0.000 description 62
- 238000010586 diagram Methods 0.000 description 22
- 238000012986 modification Methods 0.000 description 11
- 230000004048 modification Effects 0.000 description 11
- 210000004204 blood vessel Anatomy 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000002834 transmittance Methods 0.000 description 8
- 239000008280 blood Substances 0.000 description 7
- 210000004369 blood Anatomy 0.000 description 7
- 238000001816 cooling Methods 0.000 description 7
- 238000010438 heat treatment Methods 0.000 description 7
- 238000010276 construction Methods 0.000 description 6
- 230000001276 controlling effect Effects 0.000 description 6
- 238000001228 spectrum Methods 0.000 description 6
- 210000002565 arteriole Anatomy 0.000 description 5
- 239000003086 colorant Substances 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 238000000034 method Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 210000005036 nerve Anatomy 0.000 description 4
- 210000005037 parasympathetic nerve Anatomy 0.000 description 4
- 230000002889 sympathetic effect Effects 0.000 description 4
- 210000000467 autonomic pathway Anatomy 0.000 description 3
- 230000017531 blood circulation Effects 0.000 description 3
- 230000002596 correlated effect Effects 0.000 description 3
- 210000002615 epidermis Anatomy 0.000 description 3
- 238000000611 regression analysis Methods 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 210000001367 artery Anatomy 0.000 description 2
- 238000012880 independent component analysis Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000003491 skin Anatomy 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 206010016326 Feeling cold Diseases 0.000 description 1
- 206010016334 Feeling hot Diseases 0.000 description 1
- 238000002835 absorbance Methods 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/021—Measuring pressure in heart or blood vessels
- A61B5/02108—Measuring pressure in heart or blood vessels from analysis of pulse wave characteristics
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02444—Details of sensor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/1032—Determining colour for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/14542—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
- A61B5/33—Heart-related electrical modalities, e.g. electrocardiography [ECG] specially adapted for cooperation with other devices
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7225—Details of analog processing, e.g. isolation amplifier, gain or sensitivity adjustment, filtering, baseline or drift compensation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/143—Sensing or illuminating at different wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/14—Vascular patterns
- G06V40/145—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/40—Spoof detection, e.g. liveness detection
- G06V40/45—Detection of the body part being alive
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0219—Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
- A61B5/346—Analysis of electrocardiograms
- A61B5/349—Detecting specific parameters of the electrocardiograph cycle
- A61B5/352—Detecting R peaks, e.g. for synchronising diagnostic apparatus; Estimating R-R interval
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61K—PREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
- A61K38/00—Medicinal preparations containing peptides
- A61K38/16—Peptides having more than 20 amino acids; Gastrins; Somatostatins; Melanotropins; Derivatives thereof
- A61K38/41—Porphyrin- or corrin-ring-containing peptides
- A61K38/42—Haemoglobins; Myoglobins
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/15—Biometric patterns based on physiological signals, e.g. heartbeat, blood flow
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Surgery (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Molecular Biology (AREA)
- Cardiology (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physiology (AREA)
- Multimedia (AREA)
- Vascular Medicine (AREA)
- Human Computer Interaction (AREA)
- Psychiatry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Optics & Photonics (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Dentistry (AREA)
- Artificial Intelligence (AREA)
- Power Engineering (AREA)
Abstract
高精度地检测生物体的脉搏。脉搏检测装置(2A)具备:照相机(10A),其通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一绿色滤色器以及红外光滤色器多次拍摄所述生物体;及图像分析部(20A),其通过对由照相机(10A)拍摄到的多个所述生物体的图像进行分析来检测所述生物体的脉搏,图像分析部(20A)通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏。
Description
技术领域
以下的公开涉及一种检测生物体的脉搏的脉搏检测装置以及图像分析装置、和基于该脉搏检测装置检测到的生物体的脉搏生成生物体的生物体信息的生物体信息生成系统。
背景技术
已知有一种检测脉搏的脉搏检测装置,脉搏是指表现伴随着心脏的血液驱出的血管的拍动的波形。能够由通过这样的脉搏检测装置检测到的脉搏,取得压力水平、血压等生物体信息。
作为脉搏检测装置,已知有接触式的脉搏检测装置。然而,对于接触方式的脉搏检测装置而言,由于待测量者会成为意识到测量的状态,且会产生因待测量者的测量部位与脉搏检测装置接触而引起的血管的变形,因此准确地检测脉搏较为困难。
例如,已知有专利文献1公开了能够解决所述问题点的非接触式的脉搏检测装置。在专利文献1所公开的脉搏检测装置中,从利用照相机拍摄到的待测量者的图像计算该图像内的待测量者的面部的脉搏的检测区域的位置,在该检测区域内检测脉搏。
此外,在专利文献1的脉搏检测装置中,照相机中搭载有R(Red)、G(Green)、B(Blue)这三种受光元件,使用由照相机拍摄到的图像所包含的三个波长成分、即R成分、G成分以及B成分中的、血液的吸光特性有所不同的R成分和G成分的两个波长成分的代表值的时间序列数据,来检测脉搏。即,在专利文献1的脉搏检测装置中,使用可视光波长区域的光的强度检测脉搏。
现有技术文献
专利文件
专利文献1:日本公开专利公报“日本特开2014-198201号公报(2014年10月23日公开)”
发明内容
本发明所要解决的技术问题
然而,在专利文献1的脉搏检测装置中,如上所述,使用可视光波长区域的光的强度检测脉搏。在使用可视光波长区域的光的强度检测脉搏的情况下,可视光向生物体内部的透射深度较浅,因此只能检测处于待测量者的表面的毛细血管中的脉搏。其结果为,专利文献1的脉搏检测装置存在有无法高精度地检测脉搏的问题。
此外,在待测量者移动的情况下,存在有检测脉搏的精度会下降这样的问题。
本公开的一个方式所涉及的脉搏检测装置以及图像分析装置是鉴于所述的问题点而完成的,其目的在于,可高精度地检测生物体的脉搏。
解决问题的手段
为了解决所述的课题,本公开的一个方式所涉及的脉搏检测装置是通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏的脉搏检测装置,具备:拍摄部,其通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一滤色器多次拍摄所述生物体;及图像分析部,其通过对由所述拍摄部拍摄到的多个所述生物体的图像进行分析来检测所述生物体的脉搏;其中所述图像分析部通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏。
为了解决所述的课题,本公开的一个方式所涉及的图像分析装置是通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏的图像分析装置,具备:取得部,其取得多个通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一滤色器拍摄到所述生物体的图像;及图像分析部,其通过对所述取得部取得的多个所述生物体的图像进行分析来检测所述生物体的脉搏;其中所述图像分析部通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏。
为了解决所述的课题,本公开的一个方式所涉及的图像分析装置是通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏的图像分析装置,其中,具备:图像分析部,其对拍摄到所述生物体的图像进行分析来检测所述生物体的脉搏;及补正部,其基于由检测所述生物体的动作的动作传感器检测到的所述生物体的动作,来实施所述图像分析部检测到的脉搏的补正。
发明效果
根据本公开的一个方式,可起到高精度地检测生物体的脉搏的效果。
附图说明
图1为表示本公开的第一实施方式所涉及的生物体信息生成系统的主要部分的构成的框图。
图2为表示所述生物体信息生成系统所具备的照相机的构成的概要图。
图3为表示所述照相机所具备的红色滤色器、第一绿色滤色器、蓝色滤色器、以及红外光滤色器的光透射率的图表。
图4为用于说明由所述生物体信息生成系统所具备的检测区域设定部设定检测区域的图。
图5表示由所述生物体信息生成系统计算出的压力水平与由现有的装置计算出的压力水平的关联,(a)为表示积分值LF的关联的图表,(b)为表示积分值HF的关联的图表,(c)为表示LF/HF的值的关联的图表。
图6为表示所述生物体信息生成系统中的处理的流程的一个示例的流程图。
图7为表示作为所述生物体信息生成系统的变形例的生物体信息生成系统的主要部分的构成的框图。
图8为表示作为所述生物体信息生成系统的其他变形例的生物体信息生成系统的主要部分的构成的框图。
图9为表示作为所述生物体信息生成系统的再一变形例的生物体信息生成系统的主要部分的构成的框图。
图10为表示本公开的第二实施方式所涉及的生物体信息生成系统的主要部分的构成的框图。
图11为表示所述生物体信息生成系统所具备的照相机的构成的概要图。
图12为表示所述照相机所具备的红色滤色器、第一绿色滤色器、蓝色滤色器、以及第二绿色滤色器的光透射率的图表。
图13为表示本公开的第三实施方式所涉及的生物体信息生成系统的主要部分的构成的框图。
图14为表示所述生物体信息生成系统所具备的照相机的构成的概要图。
图15为表示所述照相机所具备的红色滤色器、第一绿色滤色器、蓝色滤色器、以及青色滤色器的光透射率的图表。
图16为表示本公开的第四实施方式所涉及的生物体信息生成系统的主要部分的构成的框图。
图17为表示所述生物体信息生成系统中的处理的流程的一个示例的流程图。
图18为表示氧化的血红蛋白以及还原的血红蛋白的光吸收系数的图表。
具体实施方式
针对本公开的实施方式,若基于附图进行说明则如下所示。另外,在以下的各实施方式中,说明从通过拍摄人而获得的图像来检测该人的脉搏的脉搏检测装置以及图像分析装置,但本公开并不限定于此。即,从通过拍摄人以外的生物体(具有心脏的任意的生物体)而获得的动态图像来检测该生物体的脉搏的脉搏检测装置以及图像分析装置也包含于本公开的范畴。另外,脉搏是指表现伴随着心脏的血液驱出的血管的拍动的波形。
〔第一实施方式〕
以下,参照图1至图6对本公开的第一实施方式中的生物体信息生成系统1A详细地进行说明。
(生物体信息生成系统1A的构成)
参照图1对生物体信息生成系统1A的构成进行说明。图1为表示生物体信息生成系统1A的主要部分的构成的框图。
如图1所示,生物体信息生成系统1A具备脉搏检测装置2A和生物体信息生成装置3A。
(脉搏检测装置2A)
如图1所示,脉搏检测装置2A具备照相机(拍摄部、拍摄装置)10A和图像分析部(图像分析装置)20A。
(照相机10A)
参照图2对照相机10A进行说明。图2为表示照相机10A的构成的概要图。
如图2所示,照相机10A具备包含多个受光元件的图像传感器(未图示),各受光元件具备红色滤色器11、第一绿色滤色器(第一滤色器、第二滤色器)12、蓝色滤色器13、以及红外光滤色器(第一滤色器)14中的任意一者。照相机10A对分别透射了这些红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及红外光滤色器14的光的强度(亮度)进行检测,并生成拍摄图像。通过设置有上述四种滤色器中的任意一者的受光元件,形成拍摄图像中的各像素。
参照图3对红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及红外光滤色器14的透射特性(灵敏度特性)进行说明。图3为表示红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及红外光滤色器14的光透射率的图表。如图3所示,红色滤色器11使约600nm~约700nm的红色的可视光波长区域的光透射。第一绿色滤色器12使约500nm~约600nm的绿色的可视光波长区域的光、以及约805nm以上的近红外线区域的波长的光透射。蓝色滤色器13使约400nm~约500nm的蓝色的可视光波长区域的波长的光透射。红外光滤色器14使约805nm以上的近红外线区域的波长的光透射。
照相机10A基于透射了红色滤色器11的光的强度、透射了第一绿色滤色器12的光的强度、透射了蓝色滤色器13以及红外光滤色器14的光的强度,以规定的时间间隔多次拍摄被摄体(生物体),其结果为,将生成了的多个拍摄图像向图像分析部20A输出。在以下的说明中,照相机10A将包含多个拍摄图像的动态图像向图像分析部20A输出。
(图像分析部20A)
图像分析部20A通过对由照相机10A输出的动态图像所包含的多个拍摄图像进行分析来检测生物体的脉搏检测。图像分析部20A也可以仅使用所述动态图像所包含的多个拍摄图像(帧)中的一部分来检测脉搏。如图1所示,图像分析部20A具备检测区域设定部(取得部)21A、像素值计算部22A、以及脉搏检测部23A。
检测区域设定部21A取得从照相机10A输出的生物体的动态图像(即,检测区域设定部21A具有作为取得多个从照相机10A输出的图像的取得部的功能),在该动态图像所包含的拍摄图像各个中,设定检测脉搏的检测区域。另外,检测区域需要在拍摄图像中从拍摄到生物体的皮肤的区域中选择。这是由于,脉搏是使用待测量者的皮肤的颜色的时间的变化来检测。
图4为用于说明检测区域设定部21A设定检测区域的图。具体而言,如图4所示,检测区域设定部21A首先从照相机10A输出的生物体的动态图像的规定的每帧检测生物体的面部区域F。生物体的面部区域F的检测能够使用公知的技术。接着,检测区域设定部21A在检测到了的生物体的面部区域F将前额区域D作为检测区域而设定。在作为检测区域而设定前额区域D的情况下,只要将从面部区域F的左起1/5~4/5的宽度且从面部区域F的上方起0~1/5的区域设为检测区域即可。作为检测区域,除前额区域D以外,也可以设定鼻子或面颊的区域。由于前额、鼻子、面颊中有动脉,此外前额、鼻子、面颊在生物体的面部朝向照相机10A时是易于检测的区域,因此优选设为检测区域。此外,在生物体横着朝向照相机10A的情况下,也可以将颈部设为检测区域。
像素值计算部22A使用用于表现拍摄图像所包含的各像素的各色(R、G、B以及IR(Infrared))的像素值(灰度值),计算检测区域(例如,前额区域D)中的各色的像素值的运算值。该运算值为通过对拍摄图像中的检测区域所包含的多个像素的像素值实施规定的运算而获得的值,且为反映了该检测区域所包含的像素的像素值的大小的值。像素值计算部22A例如也可以将前额区域D中的各色的像素值的平均(平均像素值),作为前额区域D中的像素值的运算值进行计算。此外,像素值计算部22A也可以例如将增大靠近前额区域D的中心的像素的像素值的加权并减小远离前额区域D的中心的像素的像素值的加权而计算出的统计值,作为前额区域D中的像素值的运算值进行计算。在以下的说明中,说明像素值计算部22A将前额区域D中的各色的平均像素值,作为前额区域D中的像素值的运算值进行计算。
像素值计算部22A为了取得平均像素值的时间变化,而对所述动态图像中的规定的时间(例如,30秒钟)量的帧实施平均像素值的计算。像素值计算部22A将计算出的各色的平均像素值向脉搏检测部23A输出。
在此,参照图18说明生物体的血液所包含的、氧化的血红蛋白以及还原的血红蛋白对光的吸收。图18为表示氧化的血红蛋白以及还原的血红蛋白的光吸收系数的图表。如图18所示,在453nm~499nm、529~546nm、569~584nm、以及805nm~1300nm的波长区域中,氧化的血红蛋白的吸光系数比还原的血红蛋白的吸光系数大。
因而,基于透射了在529~546nm、569~584nm、以及805nm~1300nm的波长区域具有光透射特性的第一绿色滤色器12的光的强度计算出的平均像素值,具有生物体的血液中的氧化的血红蛋白的浓度的信息。此外,基于透射了在近红外线区域即805nm~1300nm的波长区域具有光透射特性的红外光滤色器14的光的强度计算出的平均像素值也同样地,具有生物体的血液中的氧化的血红蛋白的浓度的信息。
脉搏检测部23A通过检测像素值计算部22A计算出的各色的平均像素值的变化计算出生物体的脉搏。如上所述,基于像素值计算部22A计算出的各色的平均像素值中的、透射了第一绿色滤色器12或红外光滤色器14的光的强度计算出的平均像素值,具有生物体的血液中的氧化的血红蛋白的浓度的信息。因此,脉搏检测部23A基于所述氧化的血红蛋白的浓度变化而计算生物体的脉搏。
具体而言,脉搏检测部23A首先对像素值计算部22A计算出的各色的平均像素值实施独立成分分析,取出与色彩数相同的数量(即,四个)的独立成分。接着,脉搏检测部23A针对取出的四个独立成分使用0.75~3.0Hz的数字带通滤波器,分别去除低频成分以及高频成分。接着,脉搏检测部23A对去除了低频成分以及高频成分的四个独立成分,实施高速傅立叶转换,计算各独立成分的频率的功率光谱。接着,脉搏检测部23A对计算出的各独立成分的频率的功率光谱的0.75~3.0Hz中的峰值进行计算,将各独立成分的峰值中的具有最大峰值的峰值的独立成分作为脉搏进行检测。并且,脉搏检测部23A将检测到的脉搏向生物体信息生成装置3A输出。
另外,像素值计算部22A计算出的平均像素值相对于时间的变动大的情况下,脉搏检测部23A也可以分别对各色的平均像素值实施趋势去除(参照IEEE TransBiomed Eng,2002 Feb;49(2):172-175),对去除了所述变动后的各色的平均像素值,实施独立成分分析。
另外,可以说图像分析部20A(检测区域设定部21A、像素值计算部22A以及脉搏检测部23A)还作为通过对拍摄到生物体的图像进行分析来检测生物体的脉搏的图像分析装置发挥功能。
(生物体信息生成装置3A)
生物体信息生成装置3A基于脉搏检测装置2A检测到的脉搏,生成生物体的生物体信息。此外,生物体信息生成装置3A基于生成了的生物体信息,相对于外部装置(其他装置)90生成控制命令。如图1所示,生物体信息生成装置3A具备:压力水平计算部31、心率计算部32、血压计算部33A、以及控制命令生成部34A。
压力水平计算部31基于从脉搏检测装置2A输出的脉搏计算出生物体的压力水平。另外,本实施方式中的“压力”是指,交感神经以及副交感神经的活性的平衡。具体而言,将与副交感神经相比交感神经为活性状态的情况称作“压力状态”。另一方面,将与交感神经相比副交感神经为活性状态的情况称作“放松状态”。
具体而言,压力水平计算部31首先由从脉搏检测装置2A输出的脉搏检测脉搏的峰值。接着,压力水平计算部31相对于检测到某峰值的时间与检测到该某峰值的下一个峰值的时间的期间实施高速傅立叶转换,从而计算出频率的功率光谱。接着,压力水平计算部31在计算出的频率的功率光谱中,分别计算0.04~0.15Hz中的功率光谱的积分值LF、以及0.15~0.4Hz中的功率光谱的积分值HF。接着,压力水平计算部31计算使积分值LF除以积分值HF而得到的值(LF/HF的值),将计算出的LF/HF的值向控制命令生成部34A输出。
另外,积分值LF为表示交感神经的活性度的指标,积分值HF为表示副交感神经的活性度的指标。此外,已知有LF/HF的值小(低)表示生物体处于放松状态,另一方面,该LF/HF的值大(高)表示生物体处于压力状态。
在此,参照图5说明通过本实施方式的生物体信息生成系统1A计算出的积分值LF、积分值HF、以及LF/HF的值、与由指尖和检测器接触而进行脉搏计算的现有的装置计算出的积分值LF、积分值HF、以及LF/HF的值的关联。图5表示由生物体信息生成系统1A计算出的压力水平与由现有的装置计算出的压力水平的关联,(a)为表示积分值LF的关联的图表,(b)为表示积分值HF的关联的图表,(c)为表示LF/HF的值的关联的图表。如图5的(a)~(c)所示,可知生物体信息生成系统1A计算出的积分值LF、积分值HF、以及LF/HF的值、与现有的装置计算出的积分值LF、积分值HF、以及LF/HF的值获得较高的关联。
心率计算部32基于从脉搏检测装置2A输出的脉搏计算出生物体的心率。具体而言,心率计算部32通过对规定的时间(例如,30秒)中的、从脉搏检测装置2A输出的脉搏的峰值的数量进行计数,从而计算出生物体的心率。接着,心率计算部32将计算出的生物体的心率向控制命令生成部34A输出。
血压计算部33A基于从脉搏检测装置2A输出的脉搏计算生物体的血压。具体而言,血压计算部33A首先通过对从脉搏检测装置2A输出的脉搏进行两次微分而导出加速度脉搏。接着,血压计算部33A对导出了的加速度脉搏对a波~e波进行特定,并计算从a波~e波的各特征量(具体而言,a波~e波的振幅、b波~e波相对于a波的振幅的振幅之比、以及从a波至b波~e波的时间间隔)。已知所述的各特征量与脉搏传播速度有关联关系,此外,已知脉搏传播速度与血压有关联关系。即,所述的各特征量与血压有关联关系。因此,预先取得所述各特征量的数据以及血压的数据,例如通过使用这些数据实施多回归分析而制成血压的计算式。并且,血压计算部33A通过将所述特征量代入所述计算式而计算生物体的血压。接着,血压计算部33A将计算出的生物体的血压向控制命令生成部34A输出。
控制命令生成部34A基于从压力水平计算部31、心率计算部32、以及血压计算部33A输出的生物体信息,对外部装置90生成控制命令。作为外部装置90,可列举出机器人、电视、计算机、制冷制热装置等电子设备。在外部装置90为机器人的情况下,控制命令生成部34A根据用户的生物体信息,以实施用户可放松那样的发声、手势的方式对机器人发出控制命令。在外部装置90为电视或计算机的情况下,控制命令生成部34A根据用户的生物体信息,以输出用户可放松那样的图像、语音的方式对电视或计算机发出控制命令。在外部装置90为制冷制热装置的情况下,控制命令生成部34A以实施与用户的生物体信息对应的温度调节、风量、风向的调节的方式对制冷制热装置发出控制命令。
另外,控制命令生成部34A基于从压力水平计算部31输出的用户的压力水平、从心率计算部32输出的用户的心率、以及从血压计算部33A输出的用户的血压的生物体信息中的至少一个,对外部装置90生成控制命令即可,未必需要基于压力水平、心率、以及血压的所有生物体信息生成控制命令。
(生物体信息生成系统1A的动作)
接着,参照图6说明生物体信息生成系统1A的动作。图6为表示生物体信息生成系统1A中的处理的流程的一个示例的流程图。
如图6所示,在生物体信息生成系统1A中,首先由照相机10A拍摄生物体(S1),将拍摄到的生物体的动态图像向图像分析部20A输出。
接着,检测区域设定部21A在从照相机10A输出的生物体的动态图像中,检测生物体的面部区域F(S2)。
接着,检测区域设定部21A对检测到的生物体的面部区域F中的、前额区域D进行设定(S3)。
接着,像素值计算部22A使用由从照相机10A输出的动态图像所示的、针对各像素的各色的光强度(像素值),计算前额区域D中的各色的平均像素值(S4)。
接着,像素值计算部22A对是否以规定时间计算出平均像素值进行判定(S5)。在未以规定时间计算出平均像素值的情况(S5中为否)下,返回步骤S2。另一方面,在以规定时间计算出平均像素值的情况(S5中为是)下,像素值计算部22A将计算出的各色的平均像素值向脉搏检测部23A输出。
接着,脉搏检测部23A从像素值计算部22A计算出的各色的平均像素值检测脉搏(S6),并将检测到的脉搏向生物体信息生成装置3A输出。
接着,压力水平计算部31、心率计算部32、以及血压计算部33A基于从脉搏检测部23A(图像分析部20A)输出的脉搏,生成生物体信息(S7),将生成了的生物体信息向控制命令生成部34A输出。
接着,控制命令生成部34A基于从压力水平计算部31、心率计算部32、以及血压计算部33A输出的生物体信息,对外部装置90生成控制命令(S8),对外部装置90输出控制命令(S9)。
如以上所述,本实施方式所涉及的脉搏检测装置2A具备照相机10A,其通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一绿色滤色器12或红外光滤色器14多次拍摄生物体;和图像分析部20A,其通过对由照相机10A拍摄到的多个所述生物体的图像进行分析来检测生物体的脉搏。并且,图像分析部20A通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测脉搏。
根据所述的构成,图像分析部20A检测通过第一绿色滤色器12或红外光滤色器14而由照相机10A拍摄到的生物体的多个图像所示的、近红外光波长区域的光的强度的变化。由于近红外光向生物体内部的透射深度较深,因此由照相机10A拍摄到的生物体的多个图像包含根据生物体的自主神经收缩、松缓并且血流量发生变化的细动脉等的生物体深部的血管的信息。因而,与检测可视光波长区域的光的强度的变化来检测脉搏的现有的脉搏检测装置相比,通过检测由照相机10A拍摄到的生物体的多个图像所示的、近红外光波长区域的光的强度的变化来检测生物体的脉搏的脉搏检测装置2A能够更高精度地检测生物体的脉搏。
此外,由于近红外光不易受到测量时的周围的各种光环境、生物体的面部的化妆等干扰的影响,因此脉搏检测装置2A能够进一步高精度地检测生物体的脉搏。
此外,生物体信息生成系统1A具备:脉搏检测装置2A和生物体信息生成装置3A,所述生物体信息生成装置3A基于脉搏检测装置2A检测到的生物体的脉搏,生成生物体的生物体信息。
根据所述的构成,生物体信息生成装置3A使用由脉搏检测装置2A更高精度地检测到的脉搏生成生物体的生物体信息。由此,生物体信息生成系统1A能够更准确地生成生物体的生物体信息。
此外,生物体信息生成系统1A具备控制命令生成部,所述控制命令生成部基于由生物体信息生成装置生成了的生物体的生物体信息,生成控制外部装置90的控制命令。由此,生物体信息生成系统1A能够与生物体的状况对应地使外部装置90动作。
此外,通过将身高、体重、年龄等用户的数据预先记录于生物体信息生成系统1A,能够更准确地计算出生物体信息。
此外,同时测量由袖带式的血压计测量到的血压和由生物体信息生成系统1A计算出的血压,使从测量到的两个血压间计算出的补正系数预先记录于生物体信息生成系统1A,通过该补正系数对由生物体信息生成系统1A计算出的血压进行补正还能够更准确地计算出血压。
<变形例1>
接着,对作为生物体信息生成系统1A的变形例的生物体信息生成系统1B进行说明。另外,为了便于说明,对与所述实施方式中说明的构件具有相同的功能的构件,标注相同的符号,并省略其说明。
(生物体信息生成系统1B的构成)
参照图7说明生物体信息生成系统1B的构成。图7为表示生物体信息生成系统1B的主要部分的构成的框图。
如图7所示,生物体信息生成系统1B具备脉搏检测装置2B以及生物体信息生成装置3B,以替代生物体信息生成系统1A中的脉搏检测装置2A以及生物体信息生成装置3A。此外,生物体信息生成系统1B除生物体信息生成系统1A的构成以外还具备测距传感器4。
脉搏检测装置2B具备图像分析部20B,以替代生物体信息生成系统1A的脉搏检测装置2A中的图像分析部20A。图像分析部20B具备检测区域设定部21B、像素值计算部22B、以及脉搏检测部23B,以替代图像分析部20A中的检测区域设定部21A、像素值计算部22A、以及脉搏检测部23A。
检测区域设定部21B在从照相机10A输出的构成生物体的动态图像的各拍摄图像中,在两个部位设定用于检测脉搏的检测区域。例如,检测区域设定部21B也可以将前额和鼻子设为检测区域。检测区域的设定的方法能够与检测区域设定部21A同样地实施。
像素值计算部22B在检测区域设定部21B设定了的两个部位的检测区域中,计算出各色的平均像素值。平均像素值的计算的方法能够与像素值计算部22A同样地实施。
脉搏检测部23B从像素值计算部22B计算出的两个部位的平均像素值,分别计算出脉搏。脉搏的计算的方法能够与脉搏检测部23A同样地实施。
测距传感器4对检测区域设定部21B中设定了的两个部位的检测区域间的距离进行测量(即,检测所述两个部位的检测区域间的距离)。本变形例的测距传感器4由基于因距离变化引起的受光元件的成像位置的变化而计算距离的三角测距式的测距传感器构成,但并不限于此。测距传感器也可以是,例如由测距传感器测量从照射光到接收光为止的时间且基于测量到的时间计算距离的飞行时间(TOF)式的测距传感器。测距传感器4将测量到的所述两个部位的检测区域间的距离输出至血压计算部33B。
生物体信息生成装置3B具备血压计算部33B,以替代生物体信息生成系统1A的生物体信息生成装置3A中的血压计算部33A。
血压计算部33B基于从脉搏检测装置2B输出的两个部位中的脉搏、由测距传感器4测量到的所述两个部位之间的距离计算生物体的血压。
具体而言,血压计算部33B首先使用从脉搏检测装置2B输出的两个部位中的脉搏,计算脉搏传播速度。更详细而言,血压计算部33B通过由测距传感器4测量到的所述两个部位之间的距离除以所述两个部位中的脉搏的上升的时间差而计算脉搏传播速度。
在此,如上所述,脉搏传播速度与血压有关联关系。因此,通过预先取得脉搏传播速度的数据以及血压的数据,例如使用这些数据实施回归分析,从而制成血压的计算式。并且,血压计算部33B通过将所述脉搏传播速度代入所述计算式,计算出生物体的血压。
如以上所述,生物体信息生成系统1B具备测距传感器4,并基于测距传感器4检测到的所述两个部位之间的距离和脉搏检测装置2B检测到的脉搏,计算生物体的血压(生成生物体信息),因此能够更准确地计算生物体的血压。
此外,例如,将本公开的一个方式所涉及的生物体信息生成系统搭载于智能电话,使用该智能电话所具有的功能计算出脉搏传播速度,从而能够测量生物体的血压。在此,智能电话具备主照相机、与该主照相机相邻地设置的白色LED(Light Emitting Diode)、以及拍摄用户的面部的内部照相机(子照相机)。首先,通过使用户的食指与所述主照相机以及所述白色LED接触,从用户的食指检测脉搏。此外,同时由所述内部照相机从用户的面部检测脉搏。并且,基于从用户的食指检测到的脉搏和从用户的面部检测到的脉搏来检测脉搏传播速度并代入所述计算式,从而能够计算生物体的血压。
<变形例2>
接着,对作为生物体信息生成系统1A的其他变形例的生物体信息生成系统1C进行说明。另外,为了便于说明,对与所述实施方式中说明的构件具有相同的功能的构件,标注相同的符号,并省略其说明。
(生物体信息生成系统1C的构成)
参照图8说明生物体信息生成系统1C的构成。图8为表示生物体信息生成系统1C的主要部分的构成的框图。
如图8所示,生物体信息生成系统1C具备生物体信息生成装置3C,以替代生物体信息生成系统1A中的生物体信息生成装置3A。此外,生物体信息生成系统1C除生物体信息生成系统1A的构成以外还具备心电信号检测装置5。
心电信号检测装置5为检测生物体的心电信号的心电仪。心电信号检测装置5将检测到的生物体的心电信号向后述血压计算部33C输出。
生物体信息生成装置3C具备血压计算部33C,以替代生物体信息生成系统1A的生物体信息生成装置3A中的血压计算部33A。
血压计算部33C基于从脉搏检测装置2A输出的脉搏和由心电信号检测装置5检测到的生物体的心电信号计算生物体的血压。
具体而言,血压计算部33C首先从由心电信号检测装置5检测到的生物体的心电信号中的峰值(或者,峰值的上升)的时间与从脉搏检测装置2A输出的脉搏中的峰值(或者,峰值的上升)的时间的时间差计算脉搏传播时间。在此,脉搏传播时间与血压有关联关系。因此,通过预先取得脉搏传播时间的数据以及血压的数据,例如使用这些数据实施回归分析,从而制成血压的计算式。并且,血压计算部33C通过将计算出的脉搏传播时间代入所述计算式,从而计算出生物体的血压。
如以上所述,生物体信息生成系统1C具备心电信号检测装置5,并基于心电信号检测装置5检测到的心电信号和脉搏检测装置2A检测到的脉搏,计算出生物体的血压(生成生物体信息),因此能够更准确地计算出生物体的血压。
另外,生物体信息生成系统1B中的血压计算部33B通过由从脉搏检测装置2B输出的两个部位检测到的脉搏的上升的时间差求得脉搏传播时间,从而能够与生物体信息生成系统1C中的血压计算部33C同样地(即,与从心电信号计算脉搏传播时间的情况同样地),计算生物体的血压。
<变形例3>
接着,对作为生物体信息生成系统1A的其他变形例的生物体信息生成系统1D进行说明。另外,为了便于说明,对与所述实施方式中说明的构件具有相同的功能的构件,标注相同的符号,并省略其说明。
参照图9说明生物体信息生成系统1D的构成。图9为表示生物体信息生成系统1D的主要部分的构成的框图。
如图9所示,生物体信息生成系统1D具备脉搏检测装置2C,以替代生物体信息生成系统1A中的脉搏检测装置2A。
脉搏检测装置2C除生物体信息生成系统1A中的脉搏检测装置2A的构成以外,还进一步具备近红外光照射装置19。
近红外光照射装置19为照射近红外光的照射装置,在通过照相机10A拍摄生物体的动态图像时,对生物体照射近红外光。
如以上所述,脉搏检测装置2C具备近红外光照射装置19。由此,能够通过照相机10A更强烈地检测向生物体内部的透射深度较深的近红外光的反射光,因此能够在图像分析部20A中更高精度地检测生物体的脉搏。
〔第二实施方式〕
基于图10至图12说明本公开的其他实施方式,如下所示。另外,为了便于说明,对与所述实施方式中说明的构件具有相同的功能的构件,标注相同的符号,并省略其说明。
在本实施方式的生物体信息生成系统1E中,照相机10B的构成与第一实施方式的生物体信息生成系统1A的照相机10A不同。
(生物体信息生成系统1E的构成)
参照图10说明生物体信息生成系统1E的构成。图10为表示生物体信息生成系统1E的主要部分的构成的框图。
如图10所示,生物体信息生成系统1E具备脉搏检测装置2D,以替代生物体信息生成系统1A中的脉搏检测装置2A。
脉搏检测装置2D具备照相机10B,以替代生物体信息生成系统1A中的脉搏检测装置2A的照相机10A。参照图11说明照相机10B。图11为表示照相机10B的构成的概要图。
如图11所示,在照相机10B中,在图像传感器(未图示)所具备的多个受光元件的各个,具备红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及第二绿色滤色器(第二滤色器)15中的任意一者。照相机10B检测分别透射了红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及第二绿色滤色器15的光的强度(亮度),生成拍摄图像。通过设置有上述的四种滤色器中的任意一者的受光元件,形成拍摄图像中的各像素。
参照图12说明第二绿色滤色器15的透射特性(灵敏度特性)。图12为表示第二绿色滤色器15的光透射率的图表。另外,图12中一并示出红色滤色器11、第一绿色滤色器12、以及蓝色滤色器13的光透射率。如图12所示,第二绿色滤色器15与第一绿色滤色器12同样地,使约500nm~约600nm的绿色的可视光波长区域的光、以及约805nm以上的近红外线区域的波长的光透射。
照相机10B基于透射了红色滤色器11的光的强度、透射了第一绿色滤色器12的光的强度、透射了蓝色滤色器13以及第二绿色滤色器15的光的强度,生成拍摄到被摄体(生物体)的动态图像,将生成的动态图像向图像分析部20A输出。
图像分析部20A中的用于脉搏检测的图像处理方法与第一实施方式的相同,因此省略其说明。
如以上所述,本实施方式中的脉搏检测装置2D一同使用通过第一绿色滤色器12拍摄到的图像和通过在绿色波长区域具有光透射特性的第二绿色滤色器15拍摄到的图像,检测生物体的脉搏。如上所述,绿色波长区域包含氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的、529~546nm以及569~584nm的波长区域。因而,脉搏检测装置2D一同使用通过第一绿色滤色器12拍摄到的图像和通过在绿色波长区域具有光透射特性的第二绿色滤色器15拍摄到的图像,检测生物体的脉搏,因此更多地检测生物体的血管的信息,因此能够高精度地检测生物体的脉搏。
〔第三实施方式〕
基于图13至图15说明本公开的其他实施方式,如下所示。
在本实施方式的生物体信息生成系统1F中,照相机10C的构成与第一实施方式的生物体信息生成系统1A的照相机10A不同。
(生物体信息生成系统1F的构成)
参照图13说明生物体信息生成系统1F的构成。图13为表示生物体信息生成系统1F的主要部分的构成的框图。
如图13所示,生物体信息生成系统1F具备脉搏检测装置2E,以替代生物体信息生成系统1A中的脉搏检测装置2A。
脉搏检测装置2E具备照相机10C,以替代生物体信息生成系统1A中的脉搏检测装置2A的照相机10A。参照图14说明照相机10C。图14为表示照相机10C的构成的概要图。
如图14所示,照相机10C,在图像传感器(未图示)所具备多个受光元件的各个,具备红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及青色滤色器(第二滤色器)16中的任意一者。照相机10C检测分别透射了红色滤色器11、第一绿色滤色器12、蓝色滤色器13、以及青色滤色器16的光的强度(亮度),并生成拍摄图像。通过设置了上述的四种滤色器的任一个的受光元件,形成拍摄图像中的各像素。
参照图15说明青色滤色器16的透射特性(灵敏度特性)。图15为表示青色滤色器16的光透射率的图表。另外,图15中一并示出红色滤色器11、第一绿色滤色器12、以及蓝色滤色器13的光透射率。如图15所示,青色滤色器16使约450nm~约550nm的绿色的可视光波长区域的光、以及约805nm以上的近红外线区域的波长的光透射。
照相机10C基于透射了红色滤色器11的光的强度、透射了第一绿色滤色器12的光的强度、透射了蓝色滤色器13以及青色滤色器16的光的强度,生成拍摄到被摄体(生物体)的动态图像,并将生成了的动态图像向图像分析部20A输出。
如以上所述,本实施方式中的脉搏检测装置2E一同使用通过第一绿色滤色器12拍摄到的图像和通过在青色波长区域具有光透射特性的青色滤色器16拍摄到的图像,检测生物体的脉搏。在此,青色的波长区域包含氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的、453nm~499nm以及529~546nm的波长区域。因而,脉搏检测装置2E一同使用通过第一绿色滤色器12拍摄到的图像和通过在青色的波长区域具有光透射特性的青色滤色器16拍摄到的图像,检测生物体的脉搏,因此能够更多地检测生物体的血管的信息,因此能够高精度地检测生物体的脉搏。
〔第四实施方式〕
基于图16以及图17说明本公开的其他实施方式,如下所示。
生物体的脉搏因生物体的动作而发生变化。因此,在本实施方式中的生物体信息生成系统1G中具备动作传感器6,基于由动作传感器6检测到的生物体的动作,实施脉搏的补正以及对外部装置90控制命令的生成这一点与生物体信息生成系统1A不同。
(生物体信息生成系统1G的构成)
参照图16说明生物体信息生成系统1G的构成。图16为表示生物体信息生成系统1G的主要部分的构成的框图。
如图16所示,生物体信息生成系统1G具备脉搏检测装置2F以及生物体信息生成装置3D,以替代生物体信息生成系统1A中的脉搏检测装置2A以及生物体信息生成装置3A。此外,生物体信息生成系统1G除生物体信息生成系统1A的构成以外还具备动作传感器(手势传感器)6。
动作传感器6为检测生物体的动作(手势)的传感器。动作传感器6具备:照射部(未图示),其照射近红外光;照相机(未图示),其检测从该照射部照射并被生物体反射的近红外光;以及检测部(未图示),其基于由该照相机检测到的近红外光的强度的变化检测生物体的动作。动作传感器6将表示检测到的生物体的动作的信息向后述的脉搏补正部24以及控制命令生成部34B输出。
脉搏检测装置2F具备图像分析部20C,以替代生物体信息生成系统1A中的脉搏检测装置2A的图像分析部20A。图像分析部20C除图像分析部20A的构成以外还具备脉搏补正部(补正部)24。
脉搏补正部24基于由动作传感器6检测到的生物体的动作,实施脉搏检测部23A检测到的脉搏的补正。
例如,在因头的上下移动、使身体倾斜等动作,生物体的面部沿垂直方向移动的情况下,由于施加于生物体的血管的压力发生变化,因此脉搏发生变化。因此,脉搏补正部24预先设定有与生物体的特定的动作有关的脉搏的补正量,基于由动作传感器6检测到的生物体的动作,以所述补正量对脉搏检测部23A检测到的脉搏进行补正,并向生物体信息生成装置3D输出。由此,脉搏检测装置2F能够更高精度地检测生物体的脉搏。
此外,例如,在激烈地移动双手或左右摇晃身体等生物体的身体的移动大于规定的移动的情况下,脉搏发生紊乱,因此该期间的脉搏为没有检测意义的脉搏。因此,脉搏补正部24在由动作传感器6检测到的生物体的动作大于规定的移动的情况下,不将脉搏检测部23A检测到的脉搏向生物体信息生成装置3D输出。由此,能够抑制脉搏检测装置2F检测的脉搏的检测误差变大。
生物体信息生成装置3D具备控制命令生成部34B,以替代生物体信息生成系统1A的生物体信息生成装置3A中的控制命令生成部34A。
控制命令生成部34B基于动作传感器6检测到的生物体的动作和从压力水平计算部31、心率计算部32、以及血压计算部33A输出的生物体信息,对外部装置90生成控制命令。
具体而言,在外部装置90为机器人的情况下,控制命令生成部34B在由动作传感器6检测到用户对机器人摆手,则以使发声、手势开始的方式对机器人发出控制命令。而且,控制命令生成部34B根据从压力水平计算部31、心率计算部32、以及血压计算部33A输出的用户的生物体信息,以实施用户可放松那样的发声、手势的方式,对机器人发出控制命令。在外部装置90为电视或计算机的情况下,控制命令生成部34B通过动作传感器6检测到用户扩展或收缩手的动作,则以放大或缩小显示的方式,对电视或计算机发出控制命令。而且,控制命令生成部34B根据从压力水平计算部31、心率计算部32、以及血压计算部33A输出的用户的生物体信息,以输出用户可放松那样的图像、语音的方式,对电视或计算机发出控制命令。在外部装置90为制冷制热装置的情况下,通过动作传感器6检测到用户感觉热、感觉冷等动作,则控制命令生成部34B对制冷制热装置发出制冷制热的控制命令。而且,控制命令生成部34B根据从压力水平计算部31、心率计算部32、以及血压计算部33A输出的用户的生物体信息,对制冷制热装置发出温度调节、风量、风向等更详细的控制命令。
(生物体信息生成系统1G的动作)
接着,参照图17说明生物体信息生成系统1G的动作。图17为表示生物体信息生成系统1G中的处理的流程的一个示例的流程图。
在图17的流程图中,S1~S6与第一实施方式的图6所示的S1~S6相同,因此省略说明。
在生物体信息生成系统1G中,在脉搏检测部23A检测到脉搏后(S6),脉搏补正部24基于由动作传感器6检测到的生物体的动作,实施脉搏检测部23A检测到的脉搏的补正(S11),将补正后的脉搏向生物体信息生成装置3D输出。
接着,压力水平计算部31、心率计算部32、以及血压计算部33A基于从脉搏补正部24(图像分析部20C)输出的脉搏,生成生物体信息(S7),将生成的生物体信息向控制命令生成部34B输出(S7)。
接着,控制命令生成部34B基于动作传感器6检测到的生物体的动作、和从压力水平计算部31、心率计算部32、以及血压计算部33A输出的生物体信息,对外部装置90生成控制命令(S12),对外部装置90输出控制命令(S9)。
如以上所述,作为图像分析装置的图像分析部20C具备:作为图像分析部的检测区域设定部21A、像素值计算部22A以及脉搏检测部23A,它们通过对拍摄到生物体的图像进行分析来检测生物体的脉搏;及脉搏补正部24,其基于由检测生物体的动作的动作传感器6检测到的生物体的动作,实施检测区域设定部21A、像素值计算部22A以及脉搏检测部23A检测到的脉搏的补正。由此,图像分析部20C能够更高精度地检测生物体的脉搏。
此外,生物体信息生成系统1G具备:照相机10A,其拍摄生物体;动作传感器6,其检测生物体的动作;图像分析部20C;及生物体信息生成装置3D,其基于图像分析部20C检测到的脉搏,生成生物体的生物体信息。由此,生物体信息生成系统1G基于由图像分析部20C检测到的详细的脉搏,能够更高精度地生成生物体的生物体信息。
而且,生物体信息生成系统1G具备:控制命令生成部,所述控制命令生成部基于动作传感器6检测到的生物体的动作、和压力水平计算部31、心率计算部32、以及血压计算部33A生成了的生物体信息,生成控制其他装置的控制命令。由此,生物体信息生成系统1G能够一同使用生物体的体外呈现的信息(动作传感器6检测到的生物体的动作)、和生物体的体内的信息(从压力水平计算部31、心率计算部32、以及血压计算部33A输出的生物体信息),生成控制外部装置90的控制命令。其结果为,生物体信息生成系统1G能够更根据生物体的状况对应地使外部装置90动作。
〔由软件实现的示例〕
脉搏检测装置2A~2F的控制模块(特别是图像分析部20A~20C)以及生物体信息生成装置3A~3D的控制模块(特别是压力水平计算部31、心率计算部32、血压计算部33A~33C、以及控制命令生成部34A、34B)也可以通过形成于集成电路(IC芯片)等的逻辑电路(硬件)来实现,也可以使用CPU(Central Processing Unit)通过软件来实现。
在后者的情况下,脉搏检测装置2A~2F以及生物体信息生成装置3A~3D具备:执行实现各功能的软件即程序的命令的CPU、以计算机(或CPU)可读取的方式记录有所述程序以及各种数据的ROM(Read Only Memory)或存储装置(将这些称作“记录介质”)、及对所述程序进行展开的RAM(Random Access Memory)等。并且,通过计算机(或CPU)从所述记录介质读取并执行所述程序,从而达到本公开的目的。作为所述记录介质,能够使用“非临时性的有形的介质”,例如磁带、磁盘、卡、半导体存储器、可编程的逻辑电路等。此外,所述程序也可以经由可传输该程序的任意的传输介质(通信网络、广播波等)而供给至所述计算机。另外,本公开的一个方式即使是所述程序通过电子传输而具体化的、埋入于载波的数据信号的方式也可实现。
〔总结〕
本公开的方式1所涉及的脉搏检测装置(2A~2F),通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏,其中,所述脉搏检测装置具备:拍摄部(照相机10A~10C),其通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一滤色器(第一绿色滤色器12、红外光滤色器14)多次拍摄所述生物体;及图像分析部(20A~20C),其通过对由所述拍摄部拍摄到的多个所述生物体的图像进行分析来检测所述生物体的脉搏,所述图像分析部通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏。
根据所述的构成,图像分析部检测通过在近红外光波长区域具有光透射特性的第一滤色器拍摄到的生物体的多个图像所示的、近红外光波长区域的光的强度的变化。在此,近红外光波长区域的光的强度不仅是存在于生物体的表皮附近的毛细血管的信息,还包含细动脉等生物体深部的血管的信息,细动脉根据生物体的自主神经而进行收缩、松缓,从而血流量发生变化。因此,脉搏检测装置能够高精度地检测生物体的脉搏。
本公开的方式2所涉及的脉搏检测装置(2A~2F)也可以构成为,在所述方式1中,所述拍摄部通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的可视光波长区域具有光透射特性的第二滤色器(第一绿色滤色器12、第二绿色滤色器15、青色滤色器16)多次拍摄所述生物体,所述图像分析部一同使用通过所述第一滤色器拍摄到的图像和通过所述第二滤色器拍摄到的图像来检测所述脉搏。
根据所述的构成,一同使用通过第一滤色器拍摄到的图像和通过在视光波长区域具有光透射特性的第二滤色器拍摄到的图像来检测脉搏。由此,进一步考虑到表皮表面的毛细血管的信息来检测脉搏,因此能够更高精度地检测生物体的脉搏。
本公开的方式3所涉及的脉搏检测装置(2D)也可以构成为,在所述方式2中,所述拍摄部具备在绿色波长区域具有光透射特性的滤色器(第二绿色滤色器15),以作为所述第二滤色器。
根据所述的构成,能够使用通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的绿色波长区域具有光透射特性的滤色器拍摄到的图像来检测脉搏。
本公开的方式4所涉及的脉搏检测装置(2E)也可以构成为,在所述方式2中,所述拍摄部具备在青色的波长区域具有光透射特性的滤色器(青色滤色器16),以作为所述第二滤色器。
根据所述的构成,能够使用通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的青色的波长区域具有光透射特性的滤色器拍摄到的图像来检测脉搏。
本公开的方式5所涉及的脉搏检测装置(2A~2F)也可以构成为,在所述方式1~4的任一方式中,所述图像分析部对所述生物体的图像中的所述生物体的面部区域进行特定,并从该面部区域中的至少一部分检测所述生物体的脉搏。
根据所述的构成,图像分析部能够在面部区域中使用生物体的图像检测脉搏。
本公开的方式6所涉及的脉搏检测装置(2A~2F)优选构成为,在所述方式5中,所述面部区域中的至少一部分包含所述生物体的鼻子、前额、面颊中的至少一个。
根据所述的构成,在前额、鼻子、面颊中有动脉,因此能够更高精度地检测脉搏。
本公开的方式7所涉及的脉搏检测装置(2C)优选构成为,在所述方式1~6的任一方式中,还具备照射近红外光的照射装置(近红外光照射装置19)。
根据所述的构成,通过照射装置照射近红外光,因此能够通过拍摄部更多地检测向生物体内部的透射深度深的近红外光的反射光。其结果为,能够更高精度地检测脉搏。
本公开的方式8所涉及的生物体信息生成系统(1A~1G)具备:所述方式1~7的任一方式的脉搏检测装置;及生物体信息生成装置(3A~3D),其基于所述脉搏检测装置检测到的生物体的脉搏,生成所述生物体的生物体信息。
根据所述的构成,生物体信息生成系统基于由所述脉搏检测装置检测到的详细的脉搏,能够更高精度地生成生物体的生物体信息。
本公开的方式9所涉及的生物体信息生成系统(1C)也可以构成为,在所述方式8中,还具备检测心电信号的心电信号检测装置(5),所述生物体信息生成装置(3C)基于所述心电信号检测装置检测到的心电信号和利用所述脉搏检测装置检测到的生物体的脉搏,生成所述生物体信息。
根据所述的构成,基于脉搏检测装置检测到的脉搏和心电信号检测装置检测到的心电信号计算脉搏传播时间,使用该脉搏传播时间生成生物体信息。由此,能够更准确地生成生物体信息。
本公开的方式10所涉及的生物体信息生成系统(1B)也可以构成为,在所述方式8中,还具备测距传感器(4),基于所述测距传感器检测到的距离和所述脉搏检测装置检测到的脉搏,生成所述生物体信息。
根据所述的构成,基于脉搏检测装置检测到的脉搏和测距传感器检测到的距离计算脉搏传播速度,使用该脉搏传播速度生成生物体信息。由此,能够更准确地生成生物体信息。
本公开的方式11所涉及的生物体信息生成系统(1A~1G)也可以为,在所述方式8~10的任一方式中,所述生物体信息为与心率、血压、压力水平中的至少一个有关的信息。
本公开的方式12所涉及的生物体信息生成系统(1A~1G)也可以构成为,在所述方式8~11的任一方式中,所述生物体信息生成装置具备控制命令生成部(34A、34B),所述控制命令生成部(34A、34B)基于所述生物体信息,生成控制其他装置的控制命令。
根据所述的构成,与生物体的状况对应地使其他装置动作。
本公开的方式13所涉及的图像分析装置(图像分析部20A~20C)通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏,所述图像分析装置具备:取得部(检测区域设定部21A、21B),其取得多个通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一滤色器拍摄到所述生物体的图像;及图像分析部(检测区域设定部21A、21B、像素值计算部22A、22B、脉搏检测部23A、23B),其通过对所述取得部取得了的多个所述生物体的图像进行分析来检测所述生物体的脉搏,所述图像分析部通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏。
根据所述的构成,图像分析部检测通过在近红外光波长区域具有光透射特性的第一滤色器拍摄到的生物体的多个图像所示的、近红外光波长区域的光的强度的变化。在此,近红外光波长区域的光的强度不仅是存在于生物体的表皮附近的毛细血管的信息,还包含细动脉等生物体深部的血管的信息,细动脉根据生物体的自主神经进行收缩、松缓,从而血流量发生变化。因此,图像分析装置能够高精度地检测生物体的脉搏。
本公开的方式14所涉及的图像分析装置(图像分析部20C)通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏,所述图像分析装置具备:图像分析部(检测区域设定部21A、21B、像素值计算部22A、22B、脉搏检测部23A、23B),其通过对拍摄到所述生物体的图像进行分析来检测所述生物体的脉搏;及补正部(脉搏补正部24),其基于由检测所述生物体的动作的动作传感器检测到的所述生物体的动作,实施所述图像分析部检测到的脉搏的补正。
根据所述的构成,通过补正部基于由动作传感器检测到的所述生物体的动作,能实施所述图像分析部检测到的脉搏的补正,因此能够高精度地检测生物体的脉搏。
本公开的方式15所涉及的生物体信息生成系统(1G)具备:拍摄装置(照相机10A),其拍摄生物体;动作传感器(6),其检测所述生物体的动作;所述方式14的图像分析装置;及生物体信息生成装置(3D),其基于所述图像分析装置检测到的脉搏,生成所述生物体的生物体信息。
根据所述的构成,生物体信息生成系统基于由所述图像分析装置检测到的详细的脉搏,能够更高精度地生成生物体的生物体信息。
本公开的方式16所涉及的生物体信息生成系统(1G)优选构成为,在所述方式15中,所述生物体信息生成装置具备控制命令生成部(34B),所述控制命令生成部(34B)基于所述动作传感器检测到的动作和所述生物体信息,生成控制其他装置控制命令。
根据所述的构成,能够一同使用生物体的体外呈现的信息和生物体的体内的信息,生成控制其他装置的控制命令。其结果为,能够根据生物体的状况对应地使其他装置动作。
本公开的各方式所涉及的脉搏检测装置以及生物体信息生成装置也可以通过计算机来实现,在该情况下,通过使计算机作为所述脉搏检测装置或生物体信息生成装置所具备的各部(软件要素)进行动作,从而由计算机实现所述脉搏检测装置或生物体信息生成装置的脉搏检测装置或生物体信息生成装置的控制程序、以及记录有上述程序的计算机可读取的记录介质也包含于本公开的范畴。
本公开并不限定于上述的各实施方式,在权利要求所示的范围内可实施各种变更,对不同的实施方式分别公开的技术手段进行适当组合而获得的实施方式也包含于本公开的技术范围内。而且,对各实施方式分别公开的技术手段进行组合,能够获得新的技术特征。
(关联申请的相互参照)
本申请相对于2016年11月10日提出申请的日本专利申请:日本特愿2016-219887要求优先权的利益,通过对其进行参照,而将其全部内容包含于本说明书。
附图标记说明
1A~1G 生物体信息生成系统
2A~2F 脉搏检测装置
3A~3D 生物体信息生成装置
4 测距传感器
5 心电信号检测装置
6 动作传感器
10A~10C 照相机(拍摄部、拍摄装置)
12 第一绿色滤色器(第一滤色器、第二滤色器)
14 红外光滤色器(第一滤色器)
15 第二绿色滤色器(第二滤色器)
16 青色滤色器(第二滤色器)
19 近红外光照射装置(照射装置)
20A~20C 图像分析部(图像分析装置)
21A、21B 检测区域设定部(取得部、图像分析部)
22A、22B 像素值计算部(图像分析部)
23A、23B 脉搏检测部(图像分析部)
24 脉搏补正部(补正部)
34A、34B 控制命令生成部
90 外部装置(其他装置)
Claims (16)
1.一种脉搏检测装置,通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏,其特征在于,具备:
拍摄部,其通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一滤色器多次拍摄所述生物体;及
图像分析部,其通过对由所述拍摄部拍摄到的多个所述生物体的图像进行分析来检测所述生物体的脉搏;其中
所述图像分析部通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏,
所述脉搏检测装置还包括补正部,其基于由检测所述生物体的动作的动作传感器检测到的所述生物体的动作,来实施所述图像分析部检测到的脉搏的补正,
所述补正部根据与所述生物体的特定的动作有关的脉搏的补正量对所述脉搏补正,
所述补正部在由所述动作传感器检测到的生物体的动作比规定的动作大的情况下,不输出所述脉搏。
2.根据权利要求1所述的脉搏检测装置,其特征在于,
所述拍摄部通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的可视光波长区域具有光透射特性的第二滤色器多次拍摄所述生物体;
所述图像分析部一同使用通过所述第一滤色器拍摄到的图像和通过所述第二滤色器拍摄到的图像来检测所述脉搏。
3.根据权利要求2所述的脉搏检测装置,其特征在于,
所述拍摄部具备在绿色波长区域具有光透射特性的滤色器,以作为所述第二滤色器。
4.根据权利要求2所述的脉搏检测装置,其特征在于,
所述拍摄部具备在青色的波长区域具有光透射特性的滤色器,以作为所述第二滤色器。
5.根据权利要求1至4中任一项所述的脉搏检测装置,其特征在于,
所述图像分析部对所述生物体的图像中的所述生物体的面部区域进行特定,并从所述面部区域中的至少一部分来检测所述生物体的脉搏。
6.根据权利要求5所述的脉搏检测装置,其特征在于,
所述面部区域中的至少一部分包含所述生物体的鼻子、前额、面颊中的至少一个。
7.根据权利要求1至4和6中任一项所述的脉搏检测装置,其特征在于,
还具备照射近红外光的照射装置。
8.一种生物体信息生成系统,其特征在于,具备:
权利要求1至7中任一项所述的脉搏检测装置;及
生物体信息生成装置,其基于所述脉搏检测装置检测到的生物体的脉搏,生成所述生物体的生物体信息。
9.根据权利要求8所述的生物体信息生成系统,其特征在于,
还具备检测心电信号的心电信号检测装置;并且
所述生物体信息生成装置基于所述心电信号检测装置检测到的心电信号和由所述脉搏检测装置检测到的生物体的脉搏,生成所述生物体信息。
10.根据权利要求8所述的生物体信息生成系统,其特征在于,
还具备测距传感器;并且
基于所述测距传感器检测到的距离和所述脉搏检测装置检测到的脉搏,生成所述生物体信息。
11.根据权利要求8至10中任一项所述的生物体信息生成系统,其特征在于,
所述生物体信息为,与心率、血压、压力水平中的至少一个有关的信息。
12.根据权利要求8至10中任一项所述的生物体信息生成系统,其特征在于,
所述生物体信息生成装置具备控制命令生成部,所述控制命令生成部基于所述生物体信息,生成控制其他装置的控制命令。
13.一种图像分析装置,通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏,其特征在于,具备:
取得部,其取得多个通过在氧化的血红蛋白的光吸收系数比还原的血红蛋白的光吸收系数大的波长区域中的近红外光波长区域具有光透射特性的第一滤色器拍摄到所述生物体的图像;及
图像分析部,其通过对所述取得部取得的多个所述生物体的图像进行分析来检测所述生物体的脉搏;其中
所述图像分析部通过检测由所述多个图像所示的、近红外光波长区域的光的强度的变化来检测所述脉搏,
所述脉搏检测装置还包括补正部,其基于由检测所述生物体的动作的动作传感器检测到的所述生物体的动作,来实施所述图像分析部检测到的脉搏的补正,
所述补正部根据与所述生物体的特定的动作有关的脉搏的补正量对所述脉搏补正,
所述补正部在由所述动作传感器检测到的生物体的动作比规定的动作大的情况下,不输出所述脉搏。
14.一种图像分析装置,通过对拍摄到生物体的图像进行分析来检测所述生物体的脉搏,其特征在于,具备:
图像分析部,其对拍摄到所述生物体的图像进行分析来检测所述生物体的脉搏;及
补正部,其基于由检测所述生物体的动作的动作传感器检测到的所述生物体的动作,来实施所述图像分析部检测到的脉搏的补正,
所述补正部在由所述动作传感器检测到的生物体的动作比规定的动作大的情况下,不输出所述脉搏。
15.一种生物体信息生成系统,其特征在于,具备:
拍摄装置,其拍摄生物体;
动作传感器,其检测所述生物体的动作;
权利要求14所述的图像分析装置;及
生物体信息生成装置,其基于所述图像分析装置检测到的脉搏,生成所述生物体的生物体信息。
16.根据权利要求15所述的生物体信息生成系统,其特征在于,
所述生物体信息生成装置具备控制命令生成部,所述控制命令生成部基于所述动作传感器检测到的动作和所述生物体信息,生成控制其他装置的控制命令。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-219887 | 2016-11-10 | ||
JP2016219887 | 2016-11-10 | ||
PCT/JP2017/039920 WO2018088358A1 (ja) | 2016-11-10 | 2017-11-06 | 脈波検出装置、画像解析装置および生体情報生成システム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109982633A CN109982633A (zh) | 2019-07-05 |
CN109982633B true CN109982633B (zh) | 2022-06-07 |
Family
ID=62110691
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780068397.XA Active CN109982633B (zh) | 2016-11-10 | 2017-11-06 | 脉搏检测装置、图像分析装置以及生物体信息生成系统 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11064895B2 (zh) |
JP (1) | JP6716712B2 (zh) |
CN (1) | CN109982633B (zh) |
WO (1) | WO2018088358A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11011583B2 (en) * | 2018-02-05 | 2021-05-18 | Samsung Electronics Co., Ltd. | Image sensors and electronic devices |
JP7230409B2 (ja) | 2018-10-02 | 2023-03-01 | カシオ計算機株式会社 | 判定装置、判定方法及び判定プログラム |
JP2020086004A (ja) * | 2018-11-19 | 2020-06-04 | 株式会社日立製作所 | 生体情報検出装置及び生体情報検出方法 |
JP7373298B2 (ja) | 2019-04-26 | 2023-11-02 | 株式会社日立製作所 | 生体情報検出装置、生体情報検出方法および生体情報検出プログラム |
JP7106126B2 (ja) * | 2019-05-28 | 2022-07-26 | 学校法人立命館 | 自律神経系活動評価装置 |
JP2021041142A (ja) * | 2019-09-03 | 2021-03-18 | 株式会社東書エステート | 血圧推定システム、血圧推定方法、学習装置、学習方法及びプログラム |
JP2021132869A (ja) * | 2020-02-27 | 2021-09-13 | カシオ計算機株式会社 | 電子装置、電子装置の制御方法及び電子装置の制御プログラム |
CN113786179A (zh) * | 2021-09-27 | 2021-12-14 | 北方工业大学 | 红外与光学图像融合的人体血压实时测量方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104853670A (zh) * | 2012-11-23 | 2015-08-19 | 皇家飞利浦有限公司 | 用于提取生理信息的设备和方法 |
CN105636505A (zh) * | 2013-10-17 | 2016-06-01 | 皇家飞利浦有限公司 | 用于获得对象的生命体征的设备和方法 |
CN105792742A (zh) * | 2013-11-27 | 2016-07-20 | 皇家飞利浦有限公司 | 用于获得对象的脉搏传导时间和/或脉搏波速度信息的设备和方法 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005188969A (ja) * | 2003-12-24 | 2005-07-14 | Matsushita Electric Ind Co Ltd | トイレシステムおよび住環境制御システム |
JP5067024B2 (ja) * | 2007-06-06 | 2012-11-07 | ソニー株式会社 | 生体情報取得装置および生体情報取得方法 |
JP5318810B2 (ja) | 2010-03-30 | 2013-10-16 | シャープ株式会社 | 脈波伝播速度測定装置および脈波伝播速度の測定方法および脈波伝播速度の測定プログラム |
JP6029108B2 (ja) | 2011-02-25 | 2016-11-24 | 株式会社産学連携機構九州 | 生体情報検出システム |
BR112014002227A2 (pt) * | 2011-08-01 | 2017-02-21 | Koninklijke Philips Nv | dispositivo e método para a obtenção e processamento de leituras de medição incluindo pelo menos um componente representante de um fenômeno físico em um ser vivo; processador e método para processar leituras de medição incluindo pelo menos um componente representante de um fenômeno físico em um ser vivo; e programa de computador |
GB2494622A (en) * | 2011-08-30 | 2013-03-20 | Oxitone Medical Ltd | Wearable pulse oximetry device |
JP5948836B2 (ja) * | 2011-12-09 | 2016-07-06 | ソニー株式会社 | 測定装置、測定方法、プログラム及び記録媒体 |
WO2013128825A1 (ja) * | 2012-02-28 | 2013-09-06 | コニカミノルタ株式会社 | 生体情報処理装置および信号処理方法 |
JP6020082B2 (ja) | 2012-11-19 | 2016-11-02 | Tdk株式会社 | 生体信号計測装置、生体信号計測方法及び生体信号計測プログラム |
JP6072893B2 (ja) * | 2013-03-08 | 2017-02-01 | 富士フイルム株式会社 | 脈波伝播速度の測定方法、その測定方法を用いた測定システムの作動方法及び脈波伝播速度の測定システム並びに撮像装置 |
JP6102433B2 (ja) | 2013-03-29 | 2017-03-29 | 富士通株式会社 | 脈波検出プログラム、脈波検出方法および脈波検出装置 |
JP6349075B2 (ja) * | 2013-11-22 | 2018-06-27 | 三星電子株式会社Samsung Electronics Co.,Ltd. | 心拍数測定装置及び心拍数測定方法 |
EP3082586A1 (en) * | 2013-12-19 | 2016-10-26 | The Board of Trustees of the University of Illinois | System and methods for measuring physiological parameters |
US10959622B2 (en) * | 2014-02-24 | 2021-03-30 | Koninklijke Philips N.V. | Method for determining pulse wave velocity in an artery |
US10268874B2 (en) * | 2014-10-29 | 2019-04-23 | Nec Corporation | Biometric authentication apparatus and biometric authentication method |
JP6517499B2 (ja) | 2014-11-28 | 2019-05-22 | マクセル株式会社 | 撮像システム |
JP6308161B2 (ja) | 2015-03-31 | 2018-04-11 | 株式会社エクォス・リサーチ | 脈波検出装置、及び脈波検出プログラム |
CN107405093A (zh) * | 2015-04-08 | 2017-11-28 | 奥林巴斯株式会社 | 图像处理装置、摄像装置、图像处理方法和程序 |
JP6329696B2 (ja) * | 2015-04-10 | 2018-05-23 | 株式会社日立製作所 | 生体情報分析システム |
CN114795151A (zh) * | 2016-06-30 | 2022-07-29 | 松下知识产权经营株式会社 | 方法及系统 |
-
2017
- 2017-11-06 CN CN201780068397.XA patent/CN109982633B/zh active Active
- 2017-11-06 JP JP2018550188A patent/JP6716712B2/ja active Active
- 2017-11-06 WO PCT/JP2017/039920 patent/WO2018088358A1/ja active Application Filing
- 2017-11-06 US US16/346,148 patent/US11064895B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104853670A (zh) * | 2012-11-23 | 2015-08-19 | 皇家飞利浦有限公司 | 用于提取生理信息的设备和方法 |
CN105636505A (zh) * | 2013-10-17 | 2016-06-01 | 皇家飞利浦有限公司 | 用于获得对象的生命体征的设备和方法 |
CN105792742A (zh) * | 2013-11-27 | 2016-07-20 | 皇家飞利浦有限公司 | 用于获得对象的脉搏传导时间和/或脉搏波速度信息的设备和方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6716712B2 (ja) | 2020-07-01 |
JPWO2018088358A1 (ja) | 2019-10-03 |
US20200054222A1 (en) | 2020-02-20 |
US11064895B2 (en) | 2021-07-20 |
WO2018088358A1 (ja) | 2018-05-17 |
CN109982633A (zh) | 2019-07-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109982633B (zh) | 脉搏检测装置、图像分析装置以及生物体信息生成系统 | |
US11490825B2 (en) | Biological information detection apparatus that includes a light source projecting a near-infrared pattern onto an object and an imaging system including first photodetector cells detecting near-infrared wavelength light and second photodetector cells detecting visible wavelength light | |
RU2674226C2 (ru) | Устройство и способ определения основных физиологических показателей субъекта | |
Stricker et al. | Non-contact video-based pulse rate measurement on a mobile service robot | |
McDuff et al. | Remote detection of photoplethysmographic systolic and diastolic peaks using a digital camera | |
US11452456B2 (en) | Device, system and method for determining the core body temperature of a subject | |
CN107028602B (zh) | 生物体信息测定装置、生物体信息测定方法以及记录介质 | |
US20110251493A1 (en) | Method and system for measurement of physiological parameters | |
JP6125648B2 (ja) | 生体情報取得装置および生体情報取得方法 | |
JP6547160B2 (ja) | 脈波検出装置、及び脈波検出プログラム | |
US9385768B2 (en) | Device and method for extracting physiological information | |
Gupta et al. | Real-time physiological measurement and visualization using a synchronized multi-camera system | |
JP7068339B2 (ja) | 血圧測定装置、および、血圧測定方法 | |
Feng et al. | Motion artifacts suppression for remote imaging photoplethysmography | |
WO2016087273A1 (en) | Device and method for skin detection | |
Nooralishahi et al. | Robust remote heart rate estimation from multiple asynchronous noisy channels using autoregressive model with Kalman filter | |
KR20220098701A (ko) | 비접촉 광용적맥파 추정 장치 및 방법 | |
JP6878687B2 (ja) | モデル設定装置、非接触式血圧測定装置、モデル設定方法、モデル設定プログラム、および記録媒体 | |
KR102243017B1 (ko) | 얼굴 피부 영상을 이용한 우울증 지수 측정 및 진단 방법 | |
US9978144B2 (en) | Biological information measurement apparatus, biological information measurement method, and computer-readable recording medium | |
KR20220012582A (ko) | 생체정보 추정 장치 및 방법 | |
WO2022137557A1 (ja) | 脈拍検出装置、脈拍検出方法およびプログラム | |
Melchor Rodríguez | Contributions to heart rate variability and respiratory rate analysis through video imaging techniques | |
Lee et al. | Photoplethysmography Measurement Algorithm for a Smartphone Camera | |
Balmaekers | Vital Signs Camera |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |