CN101959458A - 便于使用可见光图像来测定心率的方法和设备 - Google Patents

便于使用可见光图像来测定心率的方法和设备 Download PDF

Info

Publication number
CN101959458A
CN101959458A CN2009801063310A CN200980106331A CN101959458A CN 101959458 A CN101959458 A CN 101959458A CN 2009801063310 A CN2009801063310 A CN 2009801063310A CN 200980106331 A CN200980106331 A CN 200980106331A CN 101959458 A CN101959458 A CN 101959458A
Authority
CN
China
Prior art keywords
image
visible images
handle
correspondence
treatment technology
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009801063310A
Other languages
English (en)
Inventor
弗兰切斯卡·舒勒
穆罕默德·I·阿梅德
托马斯·D·比安库利
马克·W·霍莱夫琴斯基
克里希纳·琼纳拉加达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Motorola Solutions Inc
Original Assignee
Motorola Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Motorola Inc filed Critical Motorola Inc
Publication of CN101959458A publication Critical patent/CN101959458A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1382—Detecting the live character of the finger, i.e. distinguishing from a fake or cadaver finger
    • G06V40/1388—Detecting the live character of the finger, i.e. distinguishing from a fake or cadaver finger using image processing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0013—Medical image data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Cardiology (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Physiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Abstract

一种设备(400)接收(101)与接近传送血液的毛细血管(404)的对象的皮肤(403)对应的多个可见光图像，然后处理(102)所述多个可见光图像以测定所述对象的心率。这些教导涵盖光透射图像和光反射图像。根据一种方法，可见光图像包括由蜂窝电话照相机(402)捕获的图像。所述处理整体或部分地发生在蜂窝电话处或者位于远处的服务器(408)处。

Description

便于使用可见光图像来测定心率的方法和设备
技术领域
本发明大体上涉及光电容积描记术，更具体地涉及用于测定心率的光的使用。
背景技术
使用光来测定给定对象的心率是本领域公知的。当心脏泵血时，对应的脉冲扩张对象皮下组织中的传送血液的毛细血管(例如，动脉和小动脉)。可以通过下述方式来检测在体积上的对应变化：通过使用例如发光二极管来照射皮肤，然后使用光电二极管来测量透射或反射的光量。在该种测量期间，每一个心动周期将其自身表征为峰。
可以获得能够以这种方式来进行操作的装置。它们的可用性是重要的，因为测定一个人的心率出于各种原因可以构成对于许多人而言重要的行为。例如，精确地测定心率可以构成一个人的健康养生方案的重要部分。测定心率也可以构成在许多应用设置中的重要的诊断输入。
但是，当前解决方案不总是满足在所有的应用设置中的所有终端用户要求。至少，这样的装置构成了感兴趣的终端用户必须根据需要来维持、保持供电、和随身携带的至少再一个的装置。这会导致在需要使用时与该装置的无电状态有关的不期望的意外，和/或在需要使用时因为终端用户还没有将该装置包含在该终端用户随身携带的物品内而导致与该装置的当前不可用性有关的不期望的意外。
附图说明
通过提供在下面的详细说明中描述特别是结合附图得知的便于使用可见光图像来测定心率的方法和设备，至少部分地满足上述需要，在附图中：
图1是根据本发明的各个实施例配置的流程图；
图2是根据本发明的各个实施例配置的流程图；
图3是根据本发明的各个实施例配置的流程图；
图4是根据本发明的各个实施例配置的框图；
图5是可见光图像的说明性示例；
图6是所得到的二值图像的说明性示例；
图7是与所得到的二值图像对应的降维图形表示；
图8是与结果产生的二值图像对应的、滤波后的降维图形表示；以及
图9是提取的心跳数据的图形表示。
技术人员可以明白，为了简单和清楚而示出在附图中的元件，在附图中的元件不一定是根据比例绘制的。例如，在附图中的一些元件的尺寸和/或相对定位可能相对于其他元件被夸大，以有助于改善对于本发明的各个实施例的理解。而且，通常不描述在商业上可行的实施例中有用或必要的常用而且公知的元件，以便利于使得本发明的这些各个实施例的查看较少受阻。进一步可以理解，可以以特定的发生顺序来说明或描述某些行为和/或步骤，但是本领域内的技术人员可以明白，实际上不要求相对于次序的这样的特定性。也应该明白，除非在此另外给出不同的特定含义，否则在此使用的术语和表达具有由在如上给出的本领域的技术人员对该术语和表达所理解的普通技术含义。
具体实施方式
一般而言，根据这些各个实施例，设备可以接收与接近传送血液的毛细血管的对象的皮肤对应的多个可见光图像，然后处理该多个可见光图像，由此测定对象的心率。这些教导将涵盖光透射图像和光反射图像。根据一种方法，这些可见光图像可以包括通过使用蜂窝电话照相机而捕获的图像。上述处理可以全部或部分地发生在蜂窝电话本身处或远处的位置/设施(诸如在对应的服务器)处。
根据一种方法，可见光图像可以包括具有对应的颜色分量的图像。在该情况下，上述处理可以包括将对应的颜色分量转换为不同的颜色分量。例如，这可以包括：提供基于RGB的图像，并且将那些图像转换为由色度饱和度纯度(HSV)分量构成的图像。这个和其他处理步骤可以提供对应的高对比度图像。然后，可以将这些高对比度图像的维度内容减少，以提供对应的降维图像。例如，后者可以包括：从构成对应的高对比度图像的多个图像分量中仅选择一个图像分量和仅使用该一个图像分量。
本教导很适合于让普通可见光数字照相机(例如，经常构成现代蜂窝电话或个人数字助理等的一部分)能够提供容易处理且转换为给定个体的心跳的精确测定的数据。应该理解，在许多情况下仅仅使用较少的连续图像就能容易地实现这些结果。例如，少至(例如在例如10秒内以每秒10至15帧的帧频捕获的)100至200个这样的图像能够足以提供一个人的心跳的较为精确的测定。
用于支持这些方法的对应的处理和功耗要求是充分适度的，因此允许蜂窝电话、个人数字助理或其他便携装置能够成功地作为这些教导的实现平台。这进而使得终端用户已经携带和定期使用的、任何数量的普通可用装置能够以本地方式支持这些能力。结果是，现在可以获得能够迅速和精确地测定一个人的心率的益处，而不要求终端用户处理、维持和随身携带用于这个目的的专用装置。
在对下面的详细说明进行彻底查看和研究后，这些和其他益处可变得更清楚。现在参见附图，并且具体参见图1，现在示出的是与这些教导中的许多都兼容的说明性过程100。可以通过对应的设备来整体或部分地执行这个过程100。根据一种方法，这种设备可以包括便携的个人装置，诸如蜂窝电话或个人数字助理等。在该情况下，该设备自身很可能与要对其测定心率的人紧密结合地使用。根据另一种方法，该设备可以位于远离该人。这可以包括例如与该人在物理上相距很多英里的服务器。
该过程100使得所述设备接收101与传送血液的毛细血管接近的对象的皮肤对应的多个可见光图像。如在此使用的，应该明白对于“可见光图像”的该引用表示通常与诸如照相机的普通可见光图像捕获部件相关联的种类的照片(包括，也许最典型为数字照片)。如下所述，这可以包括通常的彩色图像，以及实质上包括任何其他可见光摄影格式，该任何其他可见光摄影格式包括但是不限于RGB格式、HSV格式和灰度格式等。一般而言，这些可见光图像具有至少100X100像素的尺寸/分辨率，而176X144尺寸的图像在这一方面上表现良好，并且更高分辨率和/或尺寸的照片则比足够好更好。
这个过程100包括：接收101光透射图像(其中，可见光通过皮肤/毛细血管而到达图像捕获部件)或光反射图像(其中，达到图像捕获部件的可见光包括已经从皮肤的表面反射的光)。
如此接收的可见光图像的数量可以随着应用设置而在一定程度上发生变化。一般地，对于大多数场合，接收至少100至200个这样的图像可能是适当的，其中，该图像包括以大约每秒10至15个帧的大致均匀间隔捕获的图像。一般而言，帧频越大，则心跳测定的对应精度越高。
然后，该过程100用于对多个可见光图像进行处理102，由此测定对象的心率。根据一种方法，这可以包括：在逐帧的基础上动态地评估图像质量，以判定各个图像是否适合用于测定对象的心率。存在为什么给定的可见光图像不可用于这些目的的各种原因，并且这样的步骤将允许识别这样的图像，以避免例如为该不适合的图像进一步耗费处理资源。
根据一种方法，所接收的可见光图像可以每一个都提供有与当捕获图像时的时间点对应的时间戳。在该情况下，处理102可见光图像的这个步骤可以部分地包括：监控与多个可见光图像对应的这些时间戳，并且当处理图像时使用那些时间戳以测定对象的心率。利用另一种方法，在图像之间的间隔可以包括预知的时间量。
存在可以用来实现该处理102的各种方式。然而，在讨论在这一方面上的一些替代方式之前，可能有益的是，再一次注意，该设备可以相对于对象位于远处。在该情况下，该过程100进一步可选地包括：向对象发射103所测定的心率信息。当例如通过对象的蜂窝电话首先捕获到可见光图像时，这个步骤可以包括：将对应的心率信息经由那个蜂窝电话转发到该对象。如由附图标记104表示的假想线所示，该过程100也可以包括：然后继续接收另外的可见光图像，并且，继续测定对象的随后或正在发生的心率。这些随后的结果然后可以被发送到对象，并且过程类似地继续，直到根据期望结束。
如在图5提供的图示所示，给定的可见光图像501通常包括较为模糊的提供品。可用于标注心跳的存在的该种图像内的变化趋向于较为轻微。现在参见图2，根据一种方法，处理这样的可见光图像的上述步骤可以包括：首先增强201那些图像，以突出(highlight)一个或多个感兴趣的特定特征。在这一方面上的有益增强技术包括二维滤波、对比度增强、边缘增强和中值滤波等。通过例示，向诸如在图5中提供的那个的图像应用这样的技术可以得到高对比度和降维的图像，诸如在图6中所示的结果601。如下更详细所述，这样的增强可以非常有助于允许对于普通可见光照片的该使用来检测心跳标记(indicia)。
这些增强的图像然后被处理202，以利于从图像序列提取一个或多个选择的特征。这可以包括例如阈值测定、霍夫(Hough)变换、边缘检测和定位、以及中值滤波等的使用。提取行为可以包括例如：使用阈值处理和求和来计算大于给定阈值的给定图像的面积、在霍夫变换后的面积计算、给定感兴趣的轴的边缘的绝对位置、二维快速傅立叶变换(FFT)分析、和对应的峰频率提取等。
然后，所提取的特征的集合被缩减203为一维表示。在这一方面上，在图7中示出一个说明性示例701。这可以使用例如矢量量化、主成分分析、和面积计算等来实现。根据一种方法，该处理还可以进一步包括用于提高对应的信噪比(SNR)的对于这些特征的处理204。这可以包括例如根据需要使用另外的滤波、平滑和平均等。在这一方面上，在图8示出一个说明性示例801。
然后，可以通过从信息的该(可能减少了噪声的)降维特征的集合中提取205改变速度来计算对象的心率901(如图9中所示)。这可以通过使用多种方法的任何一种来实现，该多种方法包括谐波分析、峰值检测、微分、峰值(或波谷)的周期性、以及过零检测等。如果期望，此后可跟着通过使用例如平均技术来去除206寄生噪声。
上述方法包括便利的处理过程的非常通用的概述，通过该便利的处理过程，可以处理多个可见光图像，以测定给定对象的心率。现在参见图3，现在提供在这一方面上的更具体的示例。
在这个说明性示例中，所接收的可见光图像包括具有对应的颜色分量的彩色图像的序列。然后，这些彩色图像被处理以将对应的颜色分量转换为不同的颜色分量。例如，原始可见光图像可以包括红绿蓝(RGB)颜色分量，它们然后被转换为可以更适合于提取表征心跳的图像内容的另一组颜色分量。这样的替代颜色分量的示例包括本领域中公知的色度饱和度纯度(HSV)、YCb、Cr和CMYK等。
如果期望，可以相对于其他非标准维度来进一步处理可见光图像。例如，给定图像的RGB值可以与对应的HSV信息的V值组合，以提供新的“颜色”维度。这些结果有可能是在美学观点上不令人满意的和不寻常的，但是通过突出在利于提取期望的心率信息方面表现良好的特定突现特征，可有效地更便利提取期望的心率信息。
该转换后的多维图像然后可以被降维到更少的维度。其可以包括例如：提供色度饱和度纯度(HSV)分量的对应图像，然后处理HSV分量的那些图像以提供对应的高对比度图像。这些高对比度图像的维度内容可以被减少，以产生对应的降维图像。这可以包括例如：仅提取基于HSV的图像的V(纯度)分量，以及然后仅使用那个提取的图像分量来用于这些目的。
作为另一个示例，这可以包括：例如当图像包括基于RGB的图像时提取R(红色)分量。作为另一种方法，当高对比度图像包括红绿蓝(RGB)彩色模型图像时，这可以包括：根据
Figure BPA00001207994300071
来处理红绿和蓝分量值。
然后，可以将对应结果的所得到的一维内容转换为多个对应的二值图像。这可以包括例如：相对于阈值处理多个可见光图像，使得超过阈值的像素值被转换为第一颜色值，并且使得低于阈值的像素值被转换为相对于第一颜色呈高度对比性的第二颜色。根据一种方法，例如，第一颜色可以是黑色，并且第二颜色可以是白色。在图6中通过示例示出这样的方法的结果。
虽然被获得，上述降维二值图像然后可以被滤波，以提供对应的滤波后的图像。根据一种方法，这可以包括：使用频域处理技术(例如但是不限于傅立叶分析技术)来识别各个心跳。根据另一种方法，与上述方法结合或取代上述方法，这可以包括：使用时域处理技术(例如但是不限于峰值检测和过零检测等)来识别心跳。
这些行为在图3中被一般地表示如下。从引入的图像提取301所选择的信息，然后使用一个或多个阈值来评估302所得到的图像分量。然后，处理303所得到的高对比度和降维的图像，以识别什么画面可以被表征为感兴趣的“色斑(blob)”(在图6中示出该色斑的说明性示例)。在平滑304后，识别305反映心跳的图像，之后进行平均306以去除寄生噪声。
本领域内的技术人员将明白，可以使用广泛多种可用和/或容易配置的平台来容易地实现上述处理，该平台包括本领域中已知的部分或整体可编程的平台或一些应用所需的专用平台。现在参见图4，现在将提供用于该平台的说明性方法。
如上所述，该设备400可以包括位于远处的平台，诸如经由因特网访问的服务器，或者，该设备400可以包括诸如个人数字助理的个人便携设备或诸如蜂窝电话、一键通(press-to-talk)的步谈机等的便携无线双向通信设备。在该说明性示例中，设备400包括处理器401，处理器401可操作地耦合到可见光图像捕获部件402(或当提供超过一个这样的部件时耦合到多个可见光图像捕获部件)。该可见光图像捕获部件402可以包括例如照相机，所述照相机诸如被提供给许多现代蜂窝电话的通用照相机。
该可见光图像捕获部件402适合于允许捕获接近传送血液的毛细血管404的对象的皮肤403的可见光图像。后述的接近应当是使得能够经由对象的皮肤403在视觉上显著表征与心跳相关联的压力提高。根据一种方法，这些捕获的图像可以基于外部发射的可见光光源(未示出)，以使得可见光通过对象的组织。根据另一种方法，这些捕获的图像可以基于从对象的皮肤403反射出的反射可见光。
在后一种情况下，如果期望，反射可见光可以至少部分地初始源自一个或多个可见光光源405，该一个或多个可见光光源405构成设备400的部分。该可见光光源405可以包括例如发光二极管，该发光二极管在可见光图像捕获部件402的通常使用期间用作该可见光图像捕获部件402的闪光灯。根据另一种方法，该闪光灯元件可以专用于仅当捕获图像时使用，以便测定对象的心跳。可见光的其他源也可以用于这些方面。例如，如果期望，可见光光源405可以包括显示器背光，该显示器背光可以另外构成设备400的一部分。
本领域内的技术人员认识到和理解，这样的处理器401可以包括固定目的的硬布线平台，或可以包括部分或整体可编程的平台(诸如微处理器或微控制器)。所有这些架构选项是本领域公知和明白的，并且不需要在此做进一步的描述。这个处理器401可以被配置和布置(经由例如本领域内的技术人员明白的适当编程)来实现已经在此阐述的步骤、行为和功能的一个或多个。这可以包括例如：从可见光图像捕获部件402接收上述可见光图像，并且处理那些图像以由此测定对象的心率。
如果期望，则这个设备400可以进一步包括存储器406，该存储器406可操作地耦合到处理器401。该存储器406可以用于暂时或永久地存储可见光图像、中间图像处理结果、和/或测定的心跳信息。该存储器406也可以用于存储操作指令，该操作指令允许处理器401执行所述步骤。
如上所述，如果期望，则设备400可以具有双向无线通信能力。为了便利这样的能力，设备400进一步可选地包括收发机407(诸如蜂窝电话收发机)，该收发机允许例如设备400经由一个或多个中间网络409(诸如蜂窝电话网络、因特网等)来与服务器408通信。在该情况下，如果期望，则设备400可以用于收集上述可见光图像，然后将该信息(以其原始形式，或根据这些教导而部分地处理后的)转发到服务器408，在服务器408，信息的处理完成。服务器408然后将所提取的心率信息返回到设备400，在设备400，可以使用选择的呈现仪器来将该信息提供到对象或其他终端用户。
本领域内的技术人员可以认识到和明白，这样的设备400可以由通过在图4中所示的图示建议的多个物理上不同的元件构成。然而，也可能将这个图示看作包括逻辑视图，在该情况下，可以经由共享平台来启用和实现这些元件的一个或多个。也应该明白，这样的共享平台可以包括在本领域中已知的整体或至少部分地可编程的平台。
如此配置的、通常可用的能力(诸如配备了相对适度的图像捕获能力的蜂窝电话)可容易地用来提供高效和精确的心跳测定。这些教导允许仅从较少的图像提取这样的信息。这继而最小化了图像捕获要求和处理要求。这还允许这样的能力作为诸如蜂窝电话的通常可用的和通常携带的设备的集成于其上的能力。这避免了让感兴趣的终端用户单独获取、维持和携带分立装置来用作该种特定工具的需求。
本领域内的技术人员认识到，在不偏离本发明的精神和范围的情况下，可以对于上述实施例进行多种修改、改变和组合，并且这样的修改、改变和组合要被看作在本发明的思想的范围内。

Claims (10)

1.一种方法，包括：
在设备处：
接收与接近传送血液的毛细血管的对象的皮肤对应的多个可见光图像；以及
处理所述多个可见光图像以测定所述对象的心率。
2.根据权利要求1所述的方法，其中，所述多个可见光图像包括光透射图像和光反射图像中的至少一种。
3.根据权利要求1所述的方法，其中，所述多个可见光图像包括具有对应的颜色分量的图像；以及
其中，处理所述多个可见光图像包括：处理所述多个可见光图像以将所述对应的颜色分量转换为不同的颜色分量。
4.根据权利要求3所述的方法，其中，处理所述多个可见光图像以将所述对应的颜色分量转换为不同的颜色分量包括：提供色度饱和度纯度分量的对应图像；以及
其中，处理所述多个图像进一步包括：处理色度饱和度纯度分量的所述对应图像，以提供对应的高对比度图像。
5.根据权利要求4所述的方法，其中，处理所述多个可见光图像进一步包括：
减少所述对应的高对比度图像的维度内容，以提供对应的降维图像。
6.根据权利要求5所述的方法，其中，减少所述对应的高对比度图像的维度内容包括下述步骤的至少一个：
通过从构成所述对应的高对比度图像的多个图像分量中选择仅一个图像分量和仅使用所述一个图像分量来减少所述对应的高对比度图像的维度内容；
当所述对应的高对比度图像包括红绿蓝颜色模型图像时，根据来处理红绿和蓝分量值；以及
通过将所述多个可见光图像转换为多个对应的二值图像来减少所述对应的降维图像的维度内容。
7.根据权利要求5所述的方法，其中，处理所述多个可见光图像包括：
对所述对应的降维图像进行滤波以提供滤波后的图像；以及
使用频域处理技术、时域处理技术中的至少一种来处理所述滤波后的图像，以识别心跳。
8.根据权利要求7所述的方法，其中，使用频域处理技术来处理所述滤波后的图像包括：使用快速傅立叶变换处理技术来识别所述心跳；以及
其中，使用时域处理技术来处理所述滤波后的图像包括：使用峰检测处理技术和过零检测处理技术中的至少一种来识别所述心跳。
9.根据权利要求1所述的方法，其中，所述设备位于远离所述对象的皮肤处。
10.根据权利要求1所述的方法，其中，处理所述多个可见光图像以测定所述对象的心率包括：
在逐帧的基础上动态地评估图像质量，以判定所述图像是否适合用于测定所述对象的所述心跳。
CN2009801063310A 2008-03-06 2009-03-03 便于使用可见光图像来测定心率的方法和设备 Pending CN101959458A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/043,515 US20090226071A1 (en) 2008-03-06 2008-03-06 Method and Apparatus to Facilitate Using Visible Light Images to Determine a Heart Rate
US12/043,515 2008-03-06
PCT/US2009/035836 WO2009111446A1 (en) 2008-03-06 2009-03-03 Method and apparatus to facilitate using visible-light images to determine a heart rate

Publications (1)

Publication Number Publication Date
CN101959458A true CN101959458A (zh) 2011-01-26

Family

ID=41053647

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801063310A Pending CN101959458A (zh) 2008-03-06 2009-03-03 便于使用可见光图像来测定心率的方法和设备

Country Status (4)

Country Link
US (1) US20090226071A1 (zh)
EP (1) EP2252211A4 (zh)
CN (1) CN101959458A (zh)
WO (1) WO2009111446A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102488508A (zh) * 2011-12-29 2012-06-13 哈尔滨工业大学 一种基于图像捕获的心率测量方法
CN103040452A (zh) * 2011-10-14 2013-04-17 财团法人工业技术研究院 非接触式的心脉量测方法及其系统
CN103083005A (zh) * 2011-11-01 2013-05-08 北京瓦力网络科技有限公司 一种心率检测的方法
CN103271744A (zh) * 2012-12-10 2013-09-04 中国人民解放军第一五二中心医院 一种基于成像设备的非接触式血氧饱和度测量方法
CN103271743A (zh) * 2012-12-10 2013-09-04 中国人民解放军第一五二中心医院 一种基于成像设备的非接触式血氧饱和度测量装置
CN104661583A (zh) * 2012-09-21 2015-05-27 皇家飞利浦有限公司 用于处理能从远程检测到的电磁辐射导出的数据的设备和方法
CN104968259A (zh) * 2013-02-05 2015-10-07 皇家飞利浦有限公司 用于确定对象的生命体征信息的系统和方法
CN105615862A (zh) * 2015-12-21 2016-06-01 珠海格力电器股份有限公司 检测心率的方法及装置
CN106137175A (zh) * 2014-10-27 2016-11-23 塔塔咨询服务有限公司 生理参数估计
CN106361316A (zh) * 2016-08-30 2017-02-01 苏州品诺维新医疗科技有限公司 一种多人心跳检测系统及获取多人心跳变化曲线的方法
CN107072567A (zh) * 2014-10-16 2017-08-18 松下知识产权经营株式会社 生物体信息处理装置和生物体信息处理方法
CN107595271A (zh) * 2017-07-27 2018-01-19 康美健康云服务有限公司 基于手机的心率测量方法、电子设备、存储介质及系统
RU2674226C2 (ru) * 2013-03-14 2018-12-05 Конинклейке Филипс Н.В. Устройство и способ определения основных физиологических показателей субъекта
CN111027485A (zh) * 2019-12-11 2020-04-17 南京邮电大学 一种基于人脸视频检测与色度模型的心率检测方法

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8605961B2 (en) 2009-03-30 2013-12-10 Motorola Mobility Llc Method and apparatus for determining a physiological parameter using a fingerprint sensor on a portable electronic device
WO2011042858A1 (en) * 2009-10-06 2011-04-14 Koninklijke Philips Electronics N.V. Method and system for processing a signal including at least a component representative of a periodic phenomenon in a living being
LV14514B (lv) 2010-10-06 2012-08-20 Latvijas Universitāte Iekārta un metode sirdsdarbības parametru optiskai bezkontakta kontrolei
WO2012078243A2 (en) * 2010-10-11 2012-06-14 Woundmatrix, Inc. Wound management mobile image capture device
US9186111B2 (en) * 2010-11-17 2015-11-17 Koninklijke Philips N.V. System and method for converting an input signal into an output signal
EP2661219B1 (en) * 2011-01-05 2019-05-15 Koninklijke Philips N.V. Device and method for extracting information from characteristic signals
WO2012140531A1 (en) * 2011-04-14 2012-10-18 Koninklijke Philips Electronics N.V. Device and method for extracting information from characteristic signals
WO2013030739A1 (en) * 2011-08-26 2013-03-07 Koninklijke Philips Electronics N.V. Distortion reduced signal detection
US9924907B2 (en) 2011-09-30 2018-03-27 Google Technology Holdings LLC Method and system for identifying location of a touched body part
US10459972B2 (en) 2012-09-07 2019-10-29 Biobeats Group Ltd Biometric-music interaction methods and systems
US9330680B2 (en) 2012-09-07 2016-05-03 BioBeats, Inc. Biometric-music interaction methods and systems
CN103054569B (zh) * 2012-12-20 2015-04-22 Tcl集团股份有限公司 基于可见光图像测量人体心率的方法、装置及手持设备
JP6389831B2 (ja) * 2013-03-06 2018-09-12 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． バイタルサイン情報を決定するためのシステム及び方法
WO2014140148A1 (en) * 2013-03-14 2014-09-18 Koninklijke Philips N.V. Device and method for determining vital signs of a subject
US10238292B2 (en) 2013-03-15 2019-03-26 Hill-Rom Services, Inc. Measuring multiple physiological parameters through blind signal processing of video parameters
WO2014171983A1 (en) * 2013-04-18 2014-10-23 Wichita State University Non-invasive biofeedback system
JP6435128B2 (ja) 2013-07-26 2018-12-05 タタ・コンサルタンシー・サーヴィシズ・リミテッド 生理学的パラメータの監視
DE102014212590B4 (de) 2013-09-11 2021-10-14 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Erfassung der kardialen Aktivität eines Fahrzeugführers
CN103610445B (zh) * 2013-11-26 2015-12-30 深圳市倍轻松科技股份有限公司 生理信号的检测处理方法及系统
CN103622675B (zh) * 2013-11-26 2016-01-20 深圳市倍轻松科技股份有限公司 生理信号的实时检测方法及系统
BR112016020283B1 (pt) 2014-03-06 2022-07-12 Koninklijke Philips N.V Aparelho de determinação de propriedade fisiológica, método de determinação de propriedade fisiológica, e mídia legível
US9770213B2 (en) * 2014-10-30 2017-09-26 Koninklijke Philips N.V. Device, system and method for extracting physiological information
ES2836849T3 (es) * 2014-11-21 2021-06-28 Nokia Technologies Oy Un aparato, procedimiento y programa de ordenador para identificar rasgos biométricos
CN105147274B (zh) * 2015-08-04 2018-06-15 河北工业大学 一种从可见光谱段人脸视频信号中提取心率的方法
US10335045B2 (en) 2016-06-24 2019-07-02 Universita Degli Studi Di Trento Self-adaptive matrix completion for heart rate estimation from face videos under realistic conditions

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5148809A (en) * 1990-02-28 1992-09-22 Asgard Medical Systems, Inc. Method and apparatus for detecting blood vessels and displaying an enhanced video image from an ultrasound scan
JP3857788B2 (ja) * 1997-09-01 2006-12-13 テルモ株式会社 循環器情報計測システム
US6167832B1 (en) * 1999-02-08 2001-01-02 Franklyn P. Vooris Chime tube hanger cord connector
US6616613B1 (en) * 2000-04-27 2003-09-09 Vitalsines International, Inc. Physiological signal monitoring system
ATE481922T1 (de) * 2001-09-28 2010-10-15 Csem Ct Suisse Electronique Verfahren und vorrichtung zur pulsmessung
US7020507B2 (en) * 2002-01-31 2006-03-28 Dolphin Medical, Inc. Separating motion from cardiac signals using second order derivative of the photo-plethysmogram and fast fourier transforms
EP1353292B1 (en) * 2002-04-12 2011-10-26 STMicroelectronics (Research & Development) Limited Biometric sensor apparatus and methods
FR2840794B1 (fr) * 2002-06-18 2005-04-15 Suisse Electronique Microtech Equipement portable destine a la mesure et/ou la surveillance de la frequence cardiaque
GB0229734D0 (en) * 2002-12-23 2003-01-29 Qinetiq Ltd Grading oestrogen and progesterone receptors expression
KR100675555B1 (ko) * 2003-07-07 2007-01-29 유선국 맥박 산소포화도 측정 장치 및 방법
US7575551B2 (en) * 2003-09-01 2009-08-18 Panasonic Corporation Biological signal monitor device
US20050277872A1 (en) * 2004-05-24 2005-12-15 Colby John E Jr Apparatus and method for mobile medical services
AU2004203059A1 (en) * 2004-06-08 2005-12-22 The Government Of The United States Of America As Represented By The Secretary Of The Department Of Health And Human Services, Centers For Disease Control And Prevention Apparatus and method for assessing peripheral circulation to evaluate a physiological condition
JP4528710B2 (ja) * 2005-11-09 2010-08-18 株式会社東芝 睡眠状態計測装置、睡眠状態計測方法及び睡眠状態計測システム
US7636466B2 (en) * 2006-01-11 2009-12-22 Orbotech Ltd System and method for inspecting workpieces having microscopic features
US20070211965A1 (en) * 2006-03-07 2007-09-13 Helbing Rene P Hand-held diagnostic systems and methods of use thereof
US20090203998A1 (en) * 2008-02-13 2009-08-13 Gunnar Klinghult Heart rate counter, portable apparatus, method, and computer program for heart rate counting

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103040452A (zh) * 2011-10-14 2013-04-17 财团法人工业技术研究院 非接触式的心脉量测方法及其系统
CN103083005A (zh) * 2011-11-01 2013-05-08 北京瓦力网络科技有限公司 一种心率检测的方法
CN103083005B (zh) * 2011-11-01 2015-05-13 北京瓦力网络科技有限公司 一种心率检测的方法
CN102488508A (zh) * 2011-12-29 2012-06-13 哈尔滨工业大学 一种基于图像捕获的心率测量方法
CN102488508B (zh) * 2011-12-29 2014-10-15 哈尔滨工业大学 一种基于图像捕获的心率测量方法
CN104661583A (zh) * 2012-09-21 2015-05-27 皇家飞利浦有限公司 用于处理能从远程检测到的电磁辐射导出的数据的设备和方法
CN104661583B (zh) * 2012-09-21 2017-07-07 皇家飞利浦有限公司 用于处理能从远程检测到的电磁辐射导出的数据的设备和方法
CN103271743A (zh) * 2012-12-10 2013-09-04 中国人民解放军第一五二中心医院 一种基于成像设备的非接触式血氧饱和度测量装置
CN103271744A (zh) * 2012-12-10 2013-09-04 中国人民解放军第一五二中心医院 一种基于成像设备的非接触式血氧饱和度测量方法
CN104968259A (zh) * 2013-02-05 2015-10-07 皇家飞利浦有限公司 用于确定对象的生命体征信息的系统和方法
RU2674226C2 (ru) * 2013-03-14 2018-12-05 Конинклейке Филипс Н.В. Устройство и способ определения основных физиологических показателей субъекта
CN107072567A (zh) * 2014-10-16 2017-08-18 松下知识产权经营株式会社 生物体信息处理装置和生物体信息处理方法
CN106137175A (zh) * 2014-10-27 2016-11-23 塔塔咨询服务有限公司 生理参数估计
CN105615862A (zh) * 2015-12-21 2016-06-01 珠海格力电器股份有限公司 检测心率的方法及装置
CN106361316A (zh) * 2016-08-30 2017-02-01 苏州品诺维新医疗科技有限公司 一种多人心跳检测系统及获取多人心跳变化曲线的方法
CN107595271A (zh) * 2017-07-27 2018-01-19 康美健康云服务有限公司 基于手机的心率测量方法、电子设备、存储介质及系统
CN111027485A (zh) * 2019-12-11 2020-04-17 南京邮电大学 一种基于人脸视频检测与色度模型的心率检测方法

Also Published As

Publication number Publication date
EP2252211A4 (en) 2011-08-31
US20090226071A1 (en) 2009-09-10
WO2009111446A1 (en) 2009-09-11
EP2252211A1 (en) 2010-11-24

Similar Documents

Publication Publication Date Title
CN101959458A (zh) 便于使用可见光图像来测定心率的方法和设备
CN105391916B (zh) 用于视频数据处理的方法和系统
CN106546581B (zh) 试纸检测卡智能检测系统以及试纸检测卡智能分析方法
CN105243386B (zh) 人脸活体判断方法以及系统
CN112215802B (zh) 一种皮肤检测方法和电子设备
US20130209954A1 (en) Techniques for Standardized Imaging of Oral Cavity
CN110097034A (zh) 一种智能人脸健康程度的识别与评估方法
CN106600597B (zh) 一种基于局部二值模式的无参考彩色图像质量评价方法
EP2893477A2 (en) Portable medical diagnostic systems and methods using a mobile device
CN106198538A (zh) 一种试纸读取方法和装置
CN103984964A (zh) 一种试纸条图像识别方法及系统
Santra et al. A non-invasive approach for estimation of hemoglobin analyzing blood flow in palm
CN106910033B (zh) 自适应收银台管理系统
CN106053468A (zh) 一种基于智能手机对肉类新鲜度的检测方法
CN110456050B (zh) 便携式智能数字化寄生虫体外诊断仪
CN110378304B (zh) 皮肤状态检测方法、装置、设备及存储介质
Ryu et al. Research on the combination of color channels in heart rate measurement based on photoplethysmography imaging
US10803353B2 (en) Method and apparatus for acquiring information
KR20120117604A (ko) 피부 상태 분석 방법 및 장치
KR20200036314A (ko) 식품 정보 추정을 위한 가이드 카드, 이를 이용한 식품 정보 추정 시스템 및 방법
Ciocca et al. How to assess image quality within a workflow chain: an overview
KR20210107354A (ko) Ａｉ 기반 피부분석 및 피부개선 솔루션 제공 시스템 및 제공 방법
CN107103413B (zh) 一种自适应收银台管理方法
CN109635684A (zh) 一种食品追溯系统
CN210605753U (zh) 一种识别零售商户卷烟牌号陈列情况的系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110126