JP5631901B2 - 少なくとも1の生物体の画像の処理 - Google Patents

少なくとも1の生物体の画像の処理 Download PDF

Info

Publication number
JP5631901B2
JP5631901B2 JP2011552553A JP2011552553A JP5631901B2 JP 5631901 B2 JP5631901 B2 JP 5631901B2 JP 2011552553 A JP2011552553 A JP 2011552553A JP 2011552553 A JP2011552553 A JP 2011552553A JP 5631901 B2 JP5631901 B2 JP 5631901B2
Authority
JP
Japan
Prior art keywords
image
measurement zone
frequency
signal
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011552553A
Other languages
English (en)
Other versions
JP2012519894A (ja
Inventor
ヴィンセント ジャンネ
ヴィンセント ジャンネ
ブルイン フレデリク ジェイ デ
ブルイン フレデリク ジェイ デ
ルード ヴルッテルズ
ルード ヴルッテルズ
ジョヴァンニ センニニ
ジョヴァンニ センニニ
ドミトリ ケスタコフ
ドミトリ ケスタコフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2012519894A publication Critical patent/JP2012519894A/ja
Application granted granted Critical
Publication of JP5631901B2 publication Critical patent/JP5631901B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0064Body surface scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0255Recording instruments specially adapted therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • A61B5/0816Measuring devices for examining respiratory frequency
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0233Special features of optical sensors or probes classified in A61B5/00
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/04Arrangements of multiple sensors of the same type
    • A61B2562/046Arrangements of multiple sensors of the same type in a matrix array
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7285Specific aspects of physiological measurement analysis for synchronising or triggering a physiological measurement or image acquisition with a physiological event or waveform, e.g. an ECG signal
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/54Control of apparatus or devices for radiation diagnosis
    • A61B6/541Control of apparatus or devices for radiation diagnosis involving acquisition triggered by a physiological signal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30076Plethysmography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Description

本発明は、少なくとも1の生物体の画像を処理する方法であって、
−連続する時間点に取得されるデジタル画像のシーケンスを得るステップと、
−複数の画像点を含む少なくとも1の測定ゾーンを選択するステップと、
−各測定ゾーンごとに、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションを表わす信号を得るステップであって、該信号は、周期的な生理学的現象の周波数に対応する前記信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するのに使用される、ステップと、
を含む方法に関する。
本発明は更に、少なくとも1の生物体の画像を処理するシステムであって、
−連続する時間点に取得されるデジタル画像のシーケンスを表わすデータを得るためのインタフェースと、
−画像データ処理システムと、
を有し、前記画像処理システムが、
−複数の画像点を含む少なくとも1の測定ゾーンを選択する処理と、
−各測定ゾーンごとに、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションを表わす信号を得る処理であって、該信号は、周期的な生理学的現象の周波数に対応する該信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するのに使用される、処理と、
を行うように構成されるシステムに関する。
本発明は更に、コンピュータプログラムに関する。
Verkruysse他による文献「Remote plethysmographic imaging using ambient light」(Optics Express, 16 (26), 22 December 2008, pp.21434-21445)は、フォトプレチスモグラフィ信号が、ソースとしての通常の周囲光及び動画モードのシンプルなコンシューマレベルのデジタルフォトカメラにより、遠隔的にヒトの顔面上で測定されることが可能であることを説明している。
カメラを動画モードにセットした後、有志者は、座る、立つ又はいかなる動きも最小限にするように横になる、ことを要求された。カラー動画は、カメラによって保存され、パーソナルコンピュータに転送された。赤、緑及び青チャネルの画素値が、動画フレームごとに読み取られ、PV(x,y,t)の組が提供された。ここで、x及びyは、水平及び垂直位置であり、tは、フレームレートに対応する時間である。グラフィックユーザインタフェースを使用して、関心領域(ROI)が、(動画から選択された)静止画において選択され、生信号PVraw(t)が、ROI内のすべての画素値の平均として計算された。高速フーリエ変換が実施され、パワー及び位相スペクトルが求められた。ROIの選択は、心拍数の決定のために深刻ではないことを述べておく。更に、動きアーチファクトによるフォトプレチスモグラフィ画像の空間解像度に対する制限は、有志者の改善されたポジショニング、フレームを水平方向で同期させるためのソフトウェア、及びシェーディングアーチファクトを低減するためのより一様な照明によって、解決可能であることを述べておく。
知られている方法の問題は、その方法が監督者を使用して、生きている人に対応することを監督者が知っている画像の一部のROIを選択することである。
本発明の目的は、冒頭の段落に記述したタイプの方法、システム及びコンピュータプログラムであって、良好な結果を提供するために人間の監督をほとんど又は全く必要としない方法、システム及びコンピュータプログラムを提供することである。
この目的は、本発明による方法であって、
−連続する時間点に取得されるデジタル画像のシーケンスを得るステップと、
−複数の画像点を含む少なくとも1の測定ゾーンを選択するステップと、
−各測定ゾーンごとに、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションを表わす信号を得るステップであって、該信号は、周期的な生理学的現象の周波数に対応する該信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するのに使用される、ステップと、
を含む方法によって達成される。少なくとも1の測定ゾーンを選択するステップは、画像のうち少なくとも1の画像内の複数の画像部分の画素データに基づく情報を解析するステップであって、各画像部分が少なくとも1の画像点を含む、ステップと、同様の特性を有すると判定された連続的な部分から各測定ゾーンを選択するステップと、を含む。
画像のうち少なくとも1の画像内の複数の画像部分の画素データに基づく情報を解析するステップであって、各画像部分が少なくとも1の画像点を含む、前記ステップは、同様の特性を有すると判定される部分をクラスタリングすることができるとき、自動的に実行されることができる。従って、この方法は、非監督の実行に適している。同様の特性を有すると判定される連続的な部分を選択するステップは、一様な特性をもつ画像の領域の決定につながる。これらの特性が、空間ドメインの解析に従って、同様である場合、測定ゾーンを形成するであろう一様なゾーンのより良い選択が、行われることができる。測定ゾーンに対応する身体部位が、画像のシーケンスにわたって適当な位置に正確にあるままでない場合でさえ、測定ゾーン内の画素強度は、このような位置のバリエーションにより、容易に検知できるほどは変化しない。これは、少なくとも幾つかの画像点における画素値の組み合わせの時間変化する値に対応する信号のスペクトルの品質を改善し、それゆえ、心拍数又は呼吸数に対応する信号ピークの信頼できる識別が達成されることができる。効果は、特定の照明条件に依存せず、ゆえに、方法を、よりロバストにし且つ遠隔検知アプリケーションにより適したものにする。少なくとも幾つかの画像点における画素値の組み合わせの時間変化する値のスペクトルの少なくとも一部を表わすデータを使用することによって、多くの量の雑音が除去されることができる。これは、生物被検体から反射される光を取得することによって得られる画像を使用することを可能にする。このような画像は、相対的に安価なカメラ又はセンサアレイによって取得されることができる。これに対して、仮に各画素のスペクトルを個別に決定し、ピークの値をクラスタする場合、例えば受動型サーマルイメージング装置のような非常に感受性の高いイメージング装置を使用して取得される画像を使用しなければならないであろう。
この方法の一実施形態は、選択ステップに含まれる解析のための画素データを選択するために、デジタル画像のシーケンスの中の少なくとも1の画像に対して画像セグメンテーションを実施することを含む。
効果は、セグメンテーションステップにおいて得られたセグメントの特定の有望なものだけが処理されればよいので、選択ステップにおいて解析されなければならない画素データの量が低減されることである。
この実施形態の変形例において、画像セグメンテーションは、生物体の身体部位の少なくとも1のタイプに対応する画像部分を認識するためのアルゴリズムを使用して実施される。
この変形例は、周期的な生理学的現象の周波数に対応する平均輝度信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するための解析に適した、生物体の部分に対応する画像部分を選択する。原則的に、この方法は、皮膚から反射される光の強度が、周期的な生理学的現象の周波数、すなわち心拍数及び呼吸数、によって変化するという事実に基づく。従って、皮膚又は概して被覆されない身体部位(例えば人間の顔)に対応する形状を有する身体部位を検出することを目的とするセグメンテーションアルゴリズムは、適切な画像セグメントの事前の選択を実現し、かかるセグメント内で、1又は複数の一様な測定ゾーンが選択される。
方法の一実施形態は、シーケンスの複数の画像の各々の中で、測定ゾーン及び測定ゾーンを含む画像セグメントの少なくとも一方を識別するために、追跡アルゴリズムを使用することを含む。
この実施形態は、一様な測定ゾーンでさえより大きい動きによって影響されうるという事実を考慮する。追跡アルゴリズムは、測定ゾーンが、それが表す実際の身体部位とともに移動することを許す。従って、測定ゾーンへ移動してくる不均一な画像部分から生じる信号アーチファクトが大幅に回避される。これは、周期的な生理学的現象に対応する信号成分の信号対雑音比を改善する。
一実施形態において、デジタル画像のシーケンスは、初期化フェーズの終了時にカメラによって取得され、初期化フェーズは、
−カメラの設定が変えられる間、カメラによって取得される画像の少なくとも一部の周期的な強度揺らぎを測定し、
−少なくとも周波数レンジにおいて測定された周期的な強度揺らぎが最小であると判定されるカメラ設定の値を選択する、
ことを含む。
この実施形態は、例えば電源周波数のような周期的な外乱のソースを除去することを可能にする。一般に、このような外乱は、周囲照明の周期的な揺らぎに対応する。方法は、遠隔イメージングに適しているので、これらの外乱は、例えば赤外光ソース及びカメラを使用する場合よりも多くの役割を果たす。強度揺らぎの測定は、1の色成分に制限されることができ、又は画素データに含まれる色成分の幾つか又はすべての加重和に基づくことができる。変更される適切なカメラ設定は、フレームレート、露光時間、カメラ利得及び画素クロックを含む。
方法の一実施形態は、
−測定ゾーン以外の画像部分内の少なくとも幾つかの画像点における画素値の組み合わせの時間変化する値に対応する補正信号を求めるステップと、
−補正信号から、少なくとも測定ゾーン内の画像の画素データ、及び測定ゾーン内の少なくとも幾つかの画像点における画素値の組み合わせの時間変化する値、の少なくとも一方を相関解除(decorrelate)するステップと、
を含む。
この実施形態は、解析から非周期性の外乱を切り離すことを可能にし、周期的な生理学的現象による信号成分の信号対雑音比を更に改善する。一例は、画像シーケンスが取得される間にテレビを視聴している人の顔でのテレビジョン信号の反射である。測定ゾーン以外の画像部分は、測定ゾーンをも包含するより大きい画像でありうることに注意されたい。
方法の一実施形態において、周期的な生理学的現象の周波数に対応するスペクトル内に少なくとも1のピークの存在が検出されるかどうかを表わす出力は、少なくとも1種類の少なくとも1の生物体の存在を検出することを条件とする機能を実施する装置を制御するために、使用される。
効果は、生きている人が実際に存在していることを、邪魔にならないやり方で検証することが可能であることである。
変形例において、出力は、認証処理用の条件付きアクセスシステムに供給される。
効果は、特定の人が存在しているとして条件付きアクセスシステムをだますことがもはや可能でないことである。例えば、不在の人の指のワックス鋳型を指紋検出器に提供することは可能でなく、又は不在の人の写真により顔認識システムをだますことも可能でない。従って、この方法は、特にバイオメトリック条件付きアクセスシステムと連携して使用するのに適している。
方法の一実施形態において、周期的な生理学的現象の周波数に対応するスペクトルの少なくとも1のピークの周波数値が求められ、知覚できる出力を提供するシステムが、周波数信号に依存して、その出力を適応させる。
従って、この実施形態は、特に、例えばアンビエントシステムにおいて、又はゲーム若しくはフィットネス環境において、生体フィードバックを提供するように適合される。
方法の一実施形態は、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションに対応する信号に基づいて、ゲーティング信号をイメージングシステムに提供することを含む。
この実施形態は、例えばMRI又はCTシステムのようなイメージングシステムと共に使用するのに適しており、この場合、人は、スキャナ内に配置される。このようなイメージングシステムにおいて、ゲーティング信号が、例えば心臓の静止画像を得るために必要とされることが多い。邪魔にならない心拍数又は呼吸数の決定は、イメージングされている人のストレスレベルを低下させるために好ましい。更に、イメージングシステムに影響を及ぼす可能性があるワイヤ又はプローブもない。
方法の一実施形態は、
−複数の測定ゾーンを選択するステップと、
−各測定ゾーンごとに、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションを表わす信号を得、周期的な生理学的現象の周波数に対応する該信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するステップと、
−周波数値を比較することによって、何人の生物体が画像シーケンスの中に表現されているかを検出するステップと、
を含む。
この方法は、例えば画像セグメンテーション方法に適している。これは、画像内の異なる人々の間の識別を可能にする。他のアプリケーションは、例えば群衆制御のための画像解析システムを含む。
別の見地により、本発明による、少なくとも1の生物体の画像を処理するシステムは、
−連続する時間点に取得されるデジタル画像のシーケンスを表わすデータを得るためのインタフェースと、
−画像データ処理システムと、
を有し、前記画像処理システムは、
−複数の画像点を含む少なくとも1の測定ゾーンを選択する処理と、
−各測定ゾーンごとに、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションを表わす信号を得る処理であって、該信号は、周期的な生理学的現象の周波数に対応する該信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するのに使用される、処理と、
を行うように構成され、画像データ処理システムは更に、画像のうち少なくとも1の画像内の複数の画像部分の画素データに基づく情報を解析することによって、少なくとも1の測定ゾーンを選択する処理であって、各々の画像部分が少なくとも1の画像点を含む処理と、同様の特性を有すると判定された連続的な部分から各測定ゾーンを選択する処理と、を行うように構成される。
一実施形態において、システムは、本発明による方法を実施するように構成される。
本発明の別の見地により、機械可読媒体に組み込まれるとき、本発明による方法を情報処理能力を有するシステムに実施させることが可能な命令の組を含むコンピュータプログラムが提供される。
本発明は、添付の図面を参照してより詳しく説明される。
システムが生物体の存在を検出したかどうかに依存して又は生物体の心拍数若しくは呼吸数に依存して、その出力を適応させるように構成されたシステムの概略図。 生物体の心拍数又は呼吸数を決定する方法を示すフローチャート。 画像のランニングシーケンスを処理することによって取得される信号によってゲーティングされるイメージングシステムの概略図。
図1を参照して、画像のシーケンスを処理するように構成される第1のシステム1の一例がここに示されている。第1のシステム1は、周期的な生理学的現象の周波数に対応する画像の画素データに基づいて信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するために、この処理を実施する。生物体の存在は、ピークの存在から推定され、1又は複数のシステム処理のバイナリ入力として使用される。ピークの周波数は、それらのプロセスの少なくとも1の入力として使用される。
第1のシステム1は、迅速に連続してデジタル画像のシーケンスを記録するように構成されるデジタルカメラ2を有する。第1のシステム1は更に、画像データを取得する目的だけでなく、後述するようにデジタルカメラ2の動作を制御する目的でもデジタルカメラ2と通信するデータ処理装置3を有する。
デジタルカメラ2によって取得されたデジタル画像データは、データ処理装置3のインタフェース4を介して、データ処理装置3に渡される。図示される実施形態において、データ処理装置3は、処理ユニット5と、メインメモリ6と、デジタル画像データのようなデータ及びデータ処理装置3が画像データを処理し、幾つかの周辺装置を制御することを可能にするソフトウェアの不揮発性ストレージのためのデータ記憶装置7と、を有する。
図示される実施形態において、周辺装置は、テレビジョン装置8と、コントローラ9及び照明ユニット10−12を含むアンビエントシステムと、バイオメトリックスキャニング装置13と、を有する。これら全ては、個々のインタフェース14−16を介してデータ処理装置3に接続される。これらの周辺装置は、図2に関して記述される画像処理方法の1又は複数の変形例の結果に依存して制御できる周辺装置の例にすぎない。
この方法は、皮膚のパッチに対応する画像データに基づく信号を生成することによって、デジタルカメラ2によって取得されたシーンの中の生物体、すなわちヒト又は動物、の存在を判定するために使用される。かかる信号は、例えば人間の心拍又は呼吸のような周期的な生理学的現象の周波数とともに変化する。
人間の皮膚は、2層化されたオブジェクトとしてモデル化されることができ、一方の層は、表皮(薄い表面層)であり、他方の層は、真皮(表皮の下のより厚い層)である。入射する光線の約5%が表皮で反射され、これは、すべての波長及び皮膚の色について当てはまる。残りの光は、(二色性反射モデルに記述される)ボデイ反射率として知られる現象において、2つの皮膚層の中で散乱され、吸収される。表皮は、光学フィルタのように振る舞い、主に光を吸収する。真皮において、光は、散乱され、吸収される。吸収は、血液組成に依存し、それゆえ、吸収は、血流バリエーションに敏感である。真皮の光学特性は、一般に、すべての人種について同じである。真皮は、成人の全血管網の10%に関して、高い密度の血管網を含む。これらの血管は、身体内の血流に従って収縮する。結果的に、それらは、真皮の構造を変化させ、これは、皮膚層の反射率に影響を及ぼす。従って、心拍数が、皮膚反射率のバリエーションから決定されることができ、これは、本願明細書に示される方法の基礎をなす原理である。
方法の図示される実施形態において、デジタルカメラ2の適当な設定を決定するために、初期化フェーズが、最初に完了される(ステップ17)。このために、データ処理装置3は、デジタル画像のシーケンスが取得される間、フレームレート、露光時間、画素クロック(画素値が取得されるレートを決定する)、及びデジタルカメラ2のカメラチャネルのうち少なくとも1つを変化させる。シーケンスの各画像の少なくとも一部の(空間的な)平均輝度が求められ、平均輝度の周期的な揺らぎ(変動)の大きさが、設定の新しい値ごとに求められる。少なくともスペクトルのレンジ、特に低周波数レンジ、の大きさが最小である設定が、この方法における後の使用のために選択される。画像の少なくとも一部の空間的な平均輝度を求める代わりに、個別の画素の輝度の揺らぎが、求められることができる。デジタルカメラ2の設定を選択する効果は、周期的なバックグラウンド照射の揺らぎが、方法の残りが適用される画像のシーケンスにおいて、可能な限り大きい程度に除かれることである。
次のステップ18において、画像のシーケンス19が、デジタルカメラ2から得られる。画像のシーケンス19は、連続する時間点に取得されるシーンを表わし、取得は、規則的な又は不規則な間隔でありうる。
次のステップ20において、画像19が、非周期性のバックグラウンド信号を除去するように処理される。このために、画像19の一部又はすべての時間変化する平均輝度に対応する補正信号が形成される。図示される実施形態において、画像19の画素データが、補正信号から相関解除される。非線形の相互相関をキャンセルするためのアルゴリズムは、それ自体知られている。更なる画像処理が、例えばカメラ動きを補償するために、このステージ20において行われることができる。
次の2つのステップ21、22において、画像セグメンテーションアルゴリズムが、デジタル画像のシーケンス19の少なくとも1の画像に対して実施される。特に、身体部位、一般には顔、を表わす画像セグメント23を検出するためのアルゴリズムが、これらのステップ21、22において実行される。適切なアルゴリズムが、Viola, P.及びJones, M.J.による文献「Robust real-time object detection」(Proc. of IEEE Workshop on statistical and computational theories of vision, 13 July 2001)に記述されている。特定の形状及び/又はカラー(皮膚色)によりセグメントを認識することに基づく他の適切なアルゴリズムが、知られており、上記アルゴリズムに代わって又はそれに加えて、使用されることができる。1又は複数の、例えば全ての、所望のタイプの身体部位に対応すると判定された個々のセグメント23が、画像のシーケンス19にわたって追跡される(ステップ24)。すなわち、セグメント23が識別され、すなわち、画像19内の身体部位の動きを定量化するために、シーケンス19内の画像を比較することによって、そのロケーションが決定される。適切な追跡アルゴリズムは、例えば、De Haan他による「True-motion estimation with 3-D recursive search block matching」(IEEE Transactions on circuits and systems for video technology, 3 (5), October 1993, pp. 368-379)から知られている。
その後、各々の選択され追跡されたセグメント23ごとに、画像セグメント23内の測定ゾーン26が選択される(ステップ25)。このステップ25は、同様の特性を有すると判定される連続的な部分の組を決定するために、複数の画像部分の画素データの空間的な解析を含む。各々の画像部分は、大きさに関する1又は複数の画像点である。このステップ25は、データ処理装置3によって自動的に実施される。適切なアルゴリズムは、最小の勾配バリエーションを有する領域を検出するためのアルゴリズムである。当該領域に属する画像部分は、測定ゾーン26を形成するために選択される。図示される実施形態において、測定ゾーン26の位置が、画像のシーケンス19内のキー画像の解析によって決定される。身体部位に対応するセグメント23に対する測定ゾーン26の位置が決定され、それが、画像のシーケンス19にわたって画像セグメント23に関して追跡される。従って、測定ゾーンを作るすべての画像点に関して、各画像のどの画素が、測定ゾーン26の特定の画像点に対応するかが、判定される。
次に(ステップ27)、測定ゾーン26の画像点に対応する画素の時間変化する平均輝度を表わす信号28が、生成される。シーケンス19の各画像について、測定ゾーン26に含まれると判定された画素の平均輝度が形成される。シーケンス19の各画像は時間点を表わすので、こうして、時間変化する(離散時間)信号が得られる。代替の実施形態において、特定の画像点が捨てられ、それゆれ、測定ゾーン26内のすべての画像点より少ない数の画像点の画素値の和が得られる。更に、輝度は、色成分の加重和又はただ1つの色成分の値でありうる。緑が、最も強い信号を有することが分かった。
測定ゾーン26の画像点に対応する画素の時間変化する平均輝度を表わす他の信号30を与えるために、信号28は、その中間値にセンタリングされ(ステップ29)、それにより、測定ゾーン内のバリエーションがより良く観察される。変形例において、このステップ29は更に、ステップ20に代替例として含まれる補正信号との相関解除を含む。別の変形例において、このステップ29は、例えば信号の微分に対応するフィルタリング演算のようなフィルタリング演算を含む。第1の信号の動的レンジの1%のオーダーのバリエーションを抽出するための他の代替例が可能である。
最後に、基本的な信号処理技法が、第2の信号30から心拍数又は呼吸数を表わす情報を抽出するために、使用される(ステップ31)。
図1のシステムの図2の方法の少なくとも一部の第1のアプリケーションは、生物体、特に人間、の存在を検出することを含む。このために、周期的な生理学的現象の周波数に対応するスペクトルの少なくとも1のピークの存在が検出されるかどうかを表わす出力が、少なくとも1の人間の存在を検出することを条件とする機能を実施するように周辺装置の1又は複数を制御するために使用される。この場合、少なくとも制限されたレンジ内のスペクトル又はスペクトルのピークが、典型的なヒト心拍数又は呼吸数に対応する予め決められた参照レンジと比較される。人間が存在する場合、例えば、テレビジョン受信機8及びアンビエントシステムは、機能し続けることができる。そうでない場合、それらは、スイッチオフされ又はスタンバイ機能に切り替えられることができる。従って、このアプリケーションは、エネルギー節約型の装置に適用可能である。同様のアプリケーションが、家庭及びオフィスのためのインテリジェント照明システムに適用される。自動化された画像解析による生物体の検出は、例えばペットによる偽警報に対する感受性が低い。
同様のアプリケーションは、例えばバイオメトリックスキャニング装置13を含むような、条件付きアクセスシステムを制御することである。一実施形態において、これは、指紋スキャナでありうる。生物体の検出を使用することにより、例えば、人の指のワックス鋳型が、条件付きアクセスシステムをだますために使用されることができないことが確実にされる。(例えば人の虹彩又は顔をスキャンするために)カメラ2のみを使用する条件付きアクセスシステムが更に、生きている人が実際にカメラレンズの前にいると判定するために、図2の方法の付加の使用から利益を得ることができる。
代替として又は付加的に、図2の方法は、ユーザに生体フィードバックを提供するために使用される。より具体的には、少なくともアンビエントシステムは、方法の最終ステップ31において求められる周波数に依存して、その出力を適応させる。例えば、照明ユニット10、11、12によって放出される光の色又は強度は、心拍数に依存して変更されることができる。このために、図2の方法は、データ処理装置3によって得られる最後のNデジタル画像を含むシーケンスに対してリアルタイムに実施される。Nは、画像取得レートに依存し、平均的な人間の少なくとも2回の心拍をカバーするのに十分長い時間間隔、例えば少なくとも4秒の長さ、をスパンするシーケンスをカバーするように、画像取得レートに依存して選択される。変形例において、複数の測定ゾーン26が選択され、複数の平均信号30が確立され、それゆれ、データ処理装置3は、複数の個人の現在心拍数及び/又は呼吸数を決定することが可能である。従って、アンビエントシステムを用いて提供されるフィードバックは、複数ユーザの心拍数に依存して行われることができる。
図2の方法の少なくとも一部の代替アプリケーションは、図3に概略的に示されるシステム33の使用を含む。このアプリケーションにおいて、平均信号28又は時間変化する平均輝度を表わすが、その中間値にセンタリングされた信号30が、イメージングシステム用のゲーティング信号として使用される。例えば、イメージングシステムは、MRI(磁気共鳴イメージング)又はCT(コンピュータトモグラフィ)スキャナシステムでありうる。このようなイメージングシステムは、患者の複数の2次元断面図を取得する。患者又は患者の器官の動きを補正するために、画像取得プロセスは、周期的な動きを引き起こす周期的な生理学的現象を表わす信号を使用して、ゲーティングされる。図2の方法の少なくとも最初の9のステップ17、18、20−22、24、25、27、29を実行する図示されるシステム33において、自動的に選択された測定ゾーンの平均輝度のバリエーションに対応する信号30が、画像取得装置32及びパルス送信機34をゲーティングするために使用される。これらの装置は、適当なインタフェース36、37を通じて提供される信号によって、データ処理装置35によって制御される。データ処理装置35は、データ処理ユニット38、メインメモリ39及びデータ記憶ユニット40を有する。データ処理装置35は、患者から反射された周囲光を記録したデジタル画像データを、デジタルカメラ41から他のインタフェース42を通じて受け取る。画像取得装置32からデータの処理によって形成された画像が、適当なグラフィックコントローラ44を使用して、モニタ43に表示される。図2の方法(最終ステップ31を除く)により、医用イメージング方法のためのゲーティング信号が、邪魔にならないやり方で、取得される。第1に、患者に取り付けられるセンサがないので、患者にとっての経験は、よりストレスの少ないものになる。第2に、ワイヤ又はセンサが、送信機34又は画像取得装置32の動作に影響を及ぼしえない。ゲーティング信号が取得されるプロセスは、完全に自動化され、それゆえ、医療従事者の注意は、測定ゾーン26の選択によって占められず、モニタ43は、実際の医用イメージング方法のためにのみ使用される。測定ゾーン26の使用及びそれ全体を通じての平均算出(ステップ31)は、ゲーティング信号が雑音をもたないことを確実にする。従って、それは、フィルタリングをほとんど必要とせず又は全く必要としない。
上述の実施形態は、本発明を制限するものではなく、説明するものであり、当業者は、添付の請求項の範囲を逸脱することなく、多くの代替の実施形態を設計することができることに注意すべきである。請求項において、括弧内に置かれた任意の参照符号は、請求項を制限するものとして解釈されるべきでない。「含む、有する」という語は、請求項に列挙されるもの以外の構成要素又はステップの存在を除外しない。構成要素に先行する「a」又は「an」という語は、このような構成要素の複数の存在を除外しない。特定の手段が相互に異なる従属請求項に列挙されているという単なる事実は、これらの手段の組み合わせが有利に使用されることができないことを示さない。
上述したように、ここに概説される方法は、画素データの単一の色成分に対して、又は色成分(例えば赤、緑及び青、又はシアン、マゼンタ、イエロー及びキー)のうち2又はそれ以上のものの加重和に対して、実施されることができる。
図3に関して記述された医用イメージング方法は、図2に示される方法の最終ステップ31の実施を更に含むことができる。その場合、それは、信号発生器によって供給されるゲーティング信号の周波数を制御するために使用される。

Claims (13)

  1. 少なくとも1の生物体の画像を処理する方法であって、
    連続する時間点に取得されるデジタル画像のシーケンスを得るステップと、
    複数の画像点を含む少なくとも1の測定ゾーンを選択するステップであって、前記画像のうち少なくとも1の画像内の複数の画像部分の画素データに基づく情報を解析し、同様の特性を有すると判定された連続的な部分から各測定ゾーンを選択することを含み、各画像部分が少なくとも1の画像点を含む、選択ステップと、
    各測定ゾーンごとに、少なくとも幾つかの画像点における画素値の組み合わせの少なくとも時間変化する平均値のバリエーションを表わす信号を得るステップであって、該信号は、周期的な生理学的現象の周波数に対応する前記信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するのに使用される、ステップと、
    前記測定ゾーン以外の画像部分内の少なくとも幾つかの画像点における画素値の組み合わせの時間変化する値に対応する補正信号を求めるステップと、
    前記補正信号から、少なくとも前記測定ゾーン内の前記画像の前記画素データ及び前記測定ゾーン内の前記画像点における少なくとも幾つかの画素値の組み合わせの時間変化する平均値の少なくとも一方を相関解除するステップと、
    を含む方法。
  2. 前記選択ステップに含まれる前記解析のための画素データを選択するために、前記デジタル画像のシーケンスの中の少なくとも1の画像に対して画像セグメンテーションを実施するステップを更に含む、請求項1に記載の方法。
  3. 前記画像セグメンテーションは、生物体の身体部位の少なくとも1のタイプに対応する画像部分を認識するためのアルゴリズムを使用して、実施される、請求項2に記載の方法。
  4. 前記シーケンスの中の複数の画像の各々において、前記測定ゾーン及び前記測定ゾーンを含む画像セグメントの少なくとも一方を識別するために、追跡アルゴリズムを使用するステップを更に含む、請求項1に記載の方法。
  5. 前記デジタル画像のシーケンスは、初期化フェーズの終了後、カメラによって取得され、
    前記初期化フェーズは、
    カメラ設定が変えられる間、前記カメラによって取得される画像の少なくとも一部の周期的な強度揺らぎを測定し、
    少なくとも周波数のレンジ内の測定された周期的な強度揺らぎが最小であると決定された前記カメラ設定の値を選択する、
    ことを含む、請求項1に記載の方法。
  6. 前記周期的な生理学的現象の周波数に対応する前記スペクトルの少なくとも1のピークの存在が検出されるかどうかを表わす出力が、少なくとも1種類の少なくとも1の生物体の存在を検出することを条件とする機能を実施する装置を制御するために、使用される、請求項1に記載の方法。
  7. 前記出力は、認証処理用の条件付きアクセスシステムに供給される、請求項に記載の方法。
  8. 前記周期的な生理学的現象の周波数に対応する前記スペクトルの少なくとも1のピークの周波数値が求められ、
    知覚できる出力を提供するシステムが、前記周波数値に依存してその出力を適応させる、請求項1に記載の方法。
  9. 少なくとも幾つかの前記画像点における画素値の組み合わせの少なくとも時間変化する平均値のバリエーションに対応する信号に基づいて、ゲーティング信号をイメージングシステムに提供するステップを更に含む、請求項1に記載の方法。
  10. 複数の測定ゾーンを選択するステップと、
    各測定ゾーンごとに、少なくとも幾つかの前記画像点における画素値の組み合わせの少なくとも時間変化する平均値のバリエーションを表わす信号を得、周期的な生理学的現象の周波数に対応する前記信号のスペクトルの少なくとも1のピークの周波数値を求めるステップと、
    前記周波数値を比較することによって、幾つの生物体が前記画像シーケンスに表現されているかを検出するステップと、
    を更に含む、請求項1に記載の方法。
  11. 少なくとも1の生物体の画像を処理するシステムであって、
    連続する時間点に取得されるデジタル画像のシーケンスを表わすデータを得るためのインタフェースと、
    画像データ処理システムと、
    を有し、前記画像処理システムは、
    複数の画像点を含む少なくとも1の測定ゾーンを選択する処理であって、前記画像のうち少なくとも1の画像内の複数の画像部分の画素データに基づく情報を解析することによって少なくとも1の測定ゾーンを選択し、同様の特性を有すると判定された連続的な部分から各測定ゾーンを選択することを含み、各画像部分が少なくとも1の画像点を含む、処理と、
    各測定ゾーンごとに、少なくとも幾つかの前記画像点における画素値の組み合わせの少なくとも時間変化する値のバリエーションを表わす信号を得る処理であって、該信号は、周期的な生理学的現象の周波数に対応する前記信号のスペクトルの少なくとも1のピークの存在及び周波数値の少なくとも一方を決定するのに使用される、処理と、
    前記測定ゾーン以外の画像部分内の少なくとも幾つかの画像点における画素値の組み合わせの時間変化する値に対応する補正信号を求める処理と、
    前記補正信号から、少なくとも前記測定ゾーン内の前記画像の前記画素データ及び前記測定ゾーン内の前記画像点における少なくとも幾つかの画素値の組み合わせの時間変化する平均値の少なくとも一方を相関解除する処理と、
    を行うように構成される、システム。
  12. 請求項1乃至1のいずれか1項に記載の方法を実施するように構成された、請求項1に記載のシステム。
  13. 機械可読媒体に組み込まれるとき、請求項1乃至1のいずれか1項に記載の方法を情報処理能力を有するシステムに実施させることが可能な命令の組を含むコンピュータプログラム。
JP2011552553A 2009-03-06 2010-03-01 少なくとも1の生物体の画像の処理 Active JP5631901B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP09154493 2009-03-06
EP09154493.2 2009-03-06
PCT/IB2010/050870 WO2010100594A2 (en) 2009-03-06 2010-03-01 Processing images of at least one living being

Publications (2)

Publication Number Publication Date
JP2012519894A JP2012519894A (ja) 2012-08-30
JP5631901B2 true JP5631901B2 (ja) 2014-11-26

Family

ID=42101526

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011552553A Active JP5631901B2 (ja) 2009-03-06 2010-03-01 少なくとも1の生物体の画像の処理

Country Status (7)

Country Link
US (2) US8542877B2 (ja)
EP (1) EP2404283B1 (ja)
JP (1) JP5631901B2 (ja)
CN (1) CN102341828B (ja)
DE (1) DE202010017895U1 (ja)
ES (1) ES2426971T3 (ja)
WO (1) WO2010100594A2 (ja)

Families Citing this family (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2023812B1 (en) 2006-05-19 2016-01-27 The Queen's Medical Center Motion tracking system for real time adaptive imaging and spectroscopy
WO2010100593A1 (en) 2009-03-06 2010-09-10 Koninklijke Philips Electronics N.V. Method of controlling a function of a device and system for detecting the presence of a living being
EP2404283B1 (en) 2009-03-06 2013-06-19 Koninklijke Philips Electronics N.V. Processing images of at least one living being
EP2467805B1 (en) 2009-08-20 2020-08-05 Koninklijke Philips N.V. Method and system for image analysis
US8553940B2 (en) 2009-10-06 2013-10-08 Koninklijke Philips N.V. Formation of a time-varying signal representative of at least variations in a value based on pixel values
CN102576458B (zh) 2009-10-06 2015-08-19 皇家飞利浦电子股份有限公司 用于获得第一信号进行分析以便表征该第一信号的至少一个周期性分量的方法和系统
US9186111B2 (en) 2010-11-17 2015-11-17 Koninklijke Philips N.V. System and method for converting an input signal into an output signal
US20130272393A1 (en) * 2011-01-05 2013-10-17 Koninklijke Philips N.V. Video coding and decoding devices and methods preserving ppg relevant information
US20130294505A1 (en) * 2011-01-05 2013-11-07 Koninklijke Philips N.V. Video coding and decoding devices and methods preserving
TR201910715T4 (tr) 2011-01-05 2019-08-21 Koninklijke Philips Nv Karakteristik sinyallerden bilgiyi ekstrakte etmek için cihaz ve yöntem.
FI20115053A0 (fi) * 2011-01-19 2011-01-19 Delfin Technologies Oy Menetelmä ja järjestelmä kardiovaskulaaristen sykeaaltojen visualisoimiseksi
EP2697771B1 (en) * 2011-04-14 2019-08-07 Koninklijke Philips N.V. Device and method for extracting information from characteristic signals
US9427191B2 (en) * 2011-07-25 2016-08-30 Valencell, Inc. Apparatus and methods for estimating time-state physiological parameters
BR112014002227A2 (pt) * 2011-08-01 2017-02-21 Koninklijke Philips Nv dispositivo e método para a obtenção e processamento de leituras de medição incluindo pelo menos um componente representante de um fenômeno físico em um ser vivo; processador e método para processar leituras de medição incluindo pelo menos um componente representante de um fenômeno físico em um ser vivo; e programa de computador
GB201114406D0 (en) 2011-08-22 2011-10-05 Isis Innovation Remote monitoring of vital signs
US9606209B2 (en) 2011-08-26 2017-03-28 Kineticor, Inc. Methods, systems, and devices for intra-scan motion correction
JP6059726B2 (ja) 2011-09-29 2017-01-11 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 歪み低減された信号検出
TW201315438A (zh) * 2011-10-14 2013-04-16 Ind Tech Res Inst 非接觸式之心脈量測方法及其系統
JP5822651B2 (ja) * 2011-10-26 2015-11-24 株式会社ソニー・コンピュータエンタテインメント 個体判別装置および個体判別方法
CN104168819B (zh) * 2012-02-28 2018-03-30 皇家飞利浦有限公司 用于监视生命体征的设备和方法
CN102755156B (zh) * 2012-06-08 2013-12-11 深圳市富晶科技有限公司 手表、心率检测装置及心率检测方法
BR112015001897A2 (pt) 2012-08-02 2017-07-04 Koninklijke Philips Nv dispositivo de extração de informações fisiológicas de radiação eletromagnética detectada emitida ou refletida por um paciente, método de extração de informações fisiológicas de radiação eletromagnética detectada, emitida ou refletida por um paciente e programa de computador
WO2014038077A1 (ja) 2012-09-07 2014-03-13 富士通株式会社 脈波検出方法、脈波検出装置及び脈波検出プログラム
US9839375B2 (en) 2012-09-21 2017-12-12 Koninklijke Philips N.V. Device and method for processing data derivable from remotely detected electromagnetic radiation
US20150250425A1 (en) * 2012-09-21 2015-09-10 Koninklijke Philips N.V. Motion robust vital signal monitoring
US9385768B2 (en) 2012-11-02 2016-07-05 Koninklijke Philips N.V. Device and method for extracting physiological information
CN103054569B (zh) * 2012-12-20 2015-04-22 Tcl集团股份有限公司 基于可见光图像测量人体心率的方法、装置及手持设备
WO2014095759A1 (en) 2012-12-21 2014-06-26 Koninklijke Philips N.V. System and method for extracting physiological information from remotely detected electromagnetic radiation
US9305365B2 (en) 2013-01-24 2016-04-05 Kineticor, Inc. Systems, devices, and methods for tracking moving targets
US10327708B2 (en) 2013-01-24 2019-06-25 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
WO2014120734A1 (en) 2013-02-01 2014-08-07 Kineticor, Inc. Motion tracking system for real time adaptive motion compensation in biomedical imaging
WO2014140994A1 (en) * 2013-03-13 2014-09-18 Koninklijke Philips N.V. Apparatus and method for determining vital signs from a subject
US10052038B2 (en) * 2013-03-14 2018-08-21 Koninklijke Philips N.V. Device and method for determining vital signs of a subject
US10238292B2 (en) 2013-03-15 2019-03-26 Hill-Rom Services, Inc. Measuring multiple physiological parameters through blind signal processing of video parameters
US10110859B2 (en) * 2013-06-11 2018-10-23 Koninklijke Philips N.V. System, method and device for monitoring light and sound impact on a person
JP6349075B2 (ja) 2013-11-22 2018-06-27 三星電子株式会社Samsung Electronics Co.,Ltd. 心拍数測定装置及び心拍数測定方法
EP3079582B1 (en) 2013-12-13 2017-07-05 Koninklijke Philips N.V. Sleep monitoring system and method
US10993621B2 (en) 2014-02-03 2021-05-04 The Board Of Trustees Of The Leland Stanford Junior University Contact-free physiological monitoring during simultaneous magnetic resonance imaging
JP6286220B2 (ja) * 2014-02-14 2018-02-28 株式会社日立製作所 X線ct装置
EP3110317B1 (en) 2014-02-25 2023-05-03 ICU Medical, Inc. Patient monitoring system with gatekeeper signal and corresponding method
WO2015185706A1 (en) * 2014-06-06 2015-12-10 Koninklijke Philips N.V. Device, system and method for detecting apnoea of a subject
WO2016014718A1 (en) 2014-07-23 2016-01-28 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
DE102014218924A1 (de) * 2014-09-19 2016-03-24 Siemens Aktiengesellschaft Ermittlung einer Position eines Objekts mittels MRT-Aufnahmen
US10660533B2 (en) * 2014-09-30 2020-05-26 Rapsodo Pte. Ltd. Remote heart rate monitoring based on imaging for moving subjects
RU2707841C2 (ru) * 2014-12-17 2019-11-29 Конинклейке Филипс Н.В. Перфузионная визуализация
WO2016189071A1 (en) * 2015-05-28 2016-12-01 Koninklijke Philips N.V. X-ray imaging system with camera capable of recording physiological states
US9943247B2 (en) 2015-07-28 2018-04-17 The University Of Hawai'i Systems, devices, and methods for detecting false movements for motion correction during a medical imaging scan
DE102015216115B4 (de) * 2015-08-24 2023-08-10 Siemens Healthcare Gmbh Verfahren und System zum Bestimmen eines Triggersignals
CA3002372C (en) 2015-10-19 2021-03-02 Icu Medical, Inc. Hemodynamic monitoring system with detachable display unit
WO2017091479A1 (en) 2015-11-23 2017-06-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
JP2019508116A (ja) * 2016-02-08 2019-03-28 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 拍動検出のための装置、システム、及び方法
FR3052350B1 (fr) 2016-06-10 2022-03-25 Univ Bourgogne Surveillance de la qualite du sommeil d’un bebe par combinaison de donnees multimodales incluant la photoplethysmographie
US10335045B2 (en) 2016-06-24 2019-07-02 Universita Degli Studi Di Trento Self-adaptive matrix completion for heart rate estimation from face videos under realistic conditions
CN106203365B (zh) * 2016-07-14 2019-02-12 浙江赢视科技有限公司 增益调节处理的指纹成像方法
CN106974626A (zh) * 2017-03-09 2017-07-25 深圳市奥芯博电子科技有限公司 脉搏监测机器人
EP3375354A1 (en) * 2017-03-17 2018-09-19 Koninklijke Philips N.V. Cardiac motion signal derived from optical images
CN107122709B (zh) * 2017-03-17 2020-12-04 上海云从企业发展有限公司 活体检测方法及装置
EP3398508A1 (en) * 2017-05-04 2018-11-07 Koninklijke Philips N.V. A system and method for extracting a physiological information from video sequences
US10489911B2 (en) * 2018-02-08 2019-11-26 Apn Health, Llc Determining respiratory phase from fluoroscopic images
US20190347786A1 (en) * 2018-05-08 2019-11-14 Pixart Imaging Inc. Method, apparatus, and electronic device having living body detection capability
US10696305B2 (en) * 2018-11-15 2020-06-30 XMotors.ai Inc. Apparatus and method for measuring physiological information of living subject in vehicle
JP6983357B2 (ja) * 2019-03-20 2021-12-17 学校法人慶應義塾 推定方法、推定モデルの生成方法、プログラム、及び推定装置
TWI743593B (zh) * 2019-11-18 2021-10-21 緯創資通股份有限公司 活體臉部辨識系統與方法
EP4123575A1 (en) 2021-07-23 2023-01-25 Koninklijke Philips N.V. Signal extraction from camera observation
CN114601437A (zh) * 2022-03-02 2022-06-10 虹软科技股份有限公司 一种心率检测方法和装置

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB8628698D0 (en) 1986-12-01 1987-01-07 Kon Israel Pulse rate detector
US4958638A (en) 1988-06-30 1990-09-25 Georgia Tech Research Corporation Non-contact vital signs monitor
EP0752143B2 (en) * 1994-03-24 2005-07-20 Minnesota Mining And Manufacturing Company Biometric, personal authentication system
US5995856A (en) 1995-11-22 1999-11-30 Nellcor, Incorporated Non-contact optical monitoring of physiological parameters
AU2977700A (en) 1999-01-29 2000-08-18 Evgueni N. Bogomolov Personal physiological monitor
IL128397A0 (en) 1999-02-01 2000-01-31 Makheteshim Chemical Works Ltd Improved method for the preparation of 3,5-dichloro-2,4,6-trifluoropyridine
AU2001242127A1 (en) 2000-03-16 2001-09-24 Cedara Software Corp. System and method for processing an image sequence
EP1485015A1 (en) 2002-02-22 2004-12-15 Datex-Ohmeda, Inc. Cepstral domain pulse oximetry
US20040218787A1 (en) 2002-04-17 2004-11-04 Tomohisa Tagami Motion detector, image processing system, motion detecting method, program, and recordig medium
US20050054940A1 (en) 2003-04-23 2005-03-10 Almen Adam J. Apparatus and method for monitoring heart rate variability
US7354380B2 (en) 2003-04-23 2008-04-08 Volpe Jr Joseph C Heart rate monitor for controlling entertainment devices
KR100675555B1 (ko) 2003-07-07 2007-01-29 유선국 맥박 산소포화도 측정 장치 및 방법
GB0327100D0 (en) 2003-11-21 2003-12-24 King S College Hospital Nhs Tr Blood flow monitoring equipment
CN1613425A (zh) 2004-09-15 2005-05-11 南京大学 司机疲劳预警生物识别的方法和系统
US7507203B2 (en) 2004-09-21 2009-03-24 Digital Signal Corporation System and method for remotely monitoring physiological functions
JP5149015B2 (ja) 2004-12-28 2013-02-20 ハイパーメツド・イメージング・インコーポレイテツド 全身生理機能およびショックの決定、評価および監視におけるハイパースペクトル/マルチスペクトルイメージング
CN100509083C (zh) 2005-01-31 2009-07-08 重庆微海软件开发有限公司 利用呼吸信号控制图像同步的方法及其装置
US7840246B1 (en) 2005-09-20 2010-11-23 Pacesetter, Inc. Implantable self-calibrating optical sensors
WO2007043328A1 (ja) * 2005-10-12 2007-04-19 Konica Minolta Holdings, Inc. データ検出装置及びデータ検出方法
DE102005049862A1 (de) * 2005-10-18 2007-04-26 Siemens Ag Verfahren und Vorrichtung zur Bewegungskorrektur bei der Bildgebung des Herzens
JPWO2007052755A1 (ja) * 2005-11-04 2009-04-30 株式会社東芝 呼吸モニタリング装置、呼吸モニタリングシステム、医療的処理システム、呼吸モニタリング方法、呼吸モニタリングプログラム
WO2007144880A2 (en) 2006-06-13 2007-12-21 Elfi-Tech Ltd. System and method for measurement of biological parameters of a subject
US8360986B2 (en) * 2006-06-30 2013-01-29 University Of Louisville Research Foundation, Inc. Non-contact and passive measurement of arterial pulse through thermal IR imaging, and analysis of thermal IR imagery
JP5681844B2 (ja) * 2006-11-14 2015-03-11 シーエフピーエイチ, エル.エル.シー. 賭け型ゲームのための方法及び装置
US20100056887A1 (en) 2006-11-27 2010-03-04 Pioneer Corporation Emission sensor device and bioinformation detecting method
JP2010525444A (ja) 2007-04-18 2010-07-22 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 医療患者に対して私的な逸話を与える装置及び方法
EP1988489B1 (en) 2007-05-04 2021-02-17 STMicroelectronics (Research & Development) Limited Biometric sensor apparatus and method
WO2009009761A1 (en) 2007-07-11 2009-01-15 Triage Wireless, Inc. Device for determining respiratory rate and other vital signs
US7504872B2 (en) 2007-08-13 2009-03-17 Nvidia Corporation Generic flexible timer design
CN101112307A (zh) 2007-08-30 2008-01-30 复旦大学 利用高速ccd测量斑马鱼心率的方法
US8149273B2 (en) 2007-11-30 2012-04-03 Fuji Xerox Co., Ltd. System and methods for vital sign estimation from passive thermal video
CN101527034B (zh) 2008-03-07 2013-01-23 深圳迈瑞生物医疗电子股份有限公司 自适应帧相关的方法和装置
EP2404283B1 (en) 2009-03-06 2013-06-19 Koninklijke Philips Electronics N.V. Processing images of at least one living being
US20110251493A1 (en) * 2010-03-22 2011-10-13 Massachusetts Institute Of Technology Method and system for measurement of physiological parameters

Also Published As

Publication number Publication date
EP2404283A2 (en) 2012-01-11
CN102341828B (zh) 2014-03-12
US8805019B2 (en) 2014-08-12
US20140023236A1 (en) 2014-01-23
JP2012519894A (ja) 2012-08-30
US8542877B2 (en) 2013-09-24
CN102341828A (zh) 2012-02-01
EP2404283B1 (en) 2013-06-19
WO2010100594A2 (en) 2010-09-10
US20110311119A1 (en) 2011-12-22
DE202010017895U1 (de) 2013-01-08
ES2426971T3 (es) 2013-10-28
WO2010100594A3 (en) 2010-12-02

Similar Documents

Publication Publication Date Title
JP5631901B2 (ja) 少なくとも1の生物体の画像の処理
US8818041B2 (en) Method of controlling a function of a device and system for detecting the presence of a living being
US8553940B2 (en) Formation of a time-varying signal representative of at least variations in a value based on pixel values
CN105451646B (zh) 用于提取生理信息的设备、系统和方法
JP5834011B2 (ja) 生体中の少なくとも周期的現象を表す成分を含む信号を処理する方法およびシステム
EP3664704B1 (en) Device, system and method for determining a physiological parameter of a subject
JP5856960B2 (ja) 第1の信号の少なくとも一つの周期的成分を特徴付けるための分析のため第1の信号を得るための方法及びシステム
US20200178809A1 (en) Device, system and method for determining a physiological parameter of a subject
WO2016087273A1 (en) Device and method for skin detection
KR et al. SS MMk kTk StSTTTCTT

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130301

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140310

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140909

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141008

R150 Certificate of patent or registration of utility model

Ref document number: 5631901

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250