JP6435128B2 - 生理学的パラメータの監視 - Google Patents
生理学的パラメータの監視 Download PDFInfo
- Publication number
- JP6435128B2 JP6435128B2 JP2014153319A JP2014153319A JP6435128B2 JP 6435128 B2 JP6435128 B2 JP 6435128B2 JP 2014153319 A JP2014153319 A JP 2014153319A JP 2014153319 A JP2014153319 A JP 2014153319A JP 6435128 B2 JP6435128 B2 JP 6435128B2
- Authority
- JP
- Japan
- Prior art keywords
- sample
- ppg
- physiological parameter
- features
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims description 65
- 238000013186 photoplethysmography Methods 0.000 claims description 434
- 238000000034 method Methods 0.000 claims description 102
- 238000012360 testing method Methods 0.000 claims description 102
- 238000013178 mathematical model Methods 0.000 claims description 71
- 238000004458 analytical method Methods 0.000 claims description 69
- 238000012545 processing Methods 0.000 claims description 59
- 230000006870 function Effects 0.000 claims description 36
- 238000001514 detection method Methods 0.000 claims description 20
- 238000012806 monitoring device Methods 0.000 claims description 17
- 238000005070 sampling Methods 0.000 claims description 12
- 230000036772 blood pressure Effects 0.000 claims description 11
- 238000012706 support-vector machine Methods 0.000 claims description 10
- 238000013528 artificial neural network Methods 0.000 claims description 5
- 239000008280 blood Substances 0.000 claims description 5
- 210000004369 blood Anatomy 0.000 claims description 5
- 238000012417 linear regression Methods 0.000 claims description 4
- 230000003044 adaptive effect Effects 0.000 claims description 3
- 230000036387 respiratory rate Effects 0.000 claims description 3
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 claims description 2
- 230000002596 correlated effect Effects 0.000 claims description 2
- 229910052760 oxygen Inorganic materials 0.000 claims description 2
- 239000001301 oxygen Substances 0.000 claims description 2
- 230000004044 response Effects 0.000 claims 9
- 238000011156 evaluation Methods 0.000 claims 2
- 238000012795 verification Methods 0.000 claims 2
- 230000001747 exhibiting effect Effects 0.000 claims 1
- 238000012549 training Methods 0.000 description 22
- 238000005259 measurement Methods 0.000 description 12
- 230000035487 diastolic blood pressure Effects 0.000 description 9
- 230000035488 systolic blood pressure Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 4
- 230000000875 corresponding effect Effects 0.000 description 4
- 210000000624 ear auricle Anatomy 0.000 description 4
- 238000000718 qrs complex Methods 0.000 description 4
- 238000000306 qrs interval Methods 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000630 rising effect Effects 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000007920 subcutaneous administration Methods 0.000 description 2
- 206010008531 Chills Diseases 0.000 description 1
- 206010011224 Cough Diseases 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007621 cluster analysis Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000002790 cross-validation Methods 0.000 description 1
- 230000003205 diastolic effect Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 230000001766 physiological effect Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 238000002106 pulse oximetry Methods 0.000 description 1
- 206010041232 sneezing Diseases 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 210000005166 vasculature Anatomy 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
- A61B5/327—Generation of artificial ECG signals based on measured signals, e.g. to compensate for missing leads
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
- A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2505/00—Evaluating, monitoring or diagnosing in the context of a particular type of medical care
- A61B2505/07—Home care
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/021—Measuring pressure in heart or blood vessels
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Veterinary Medicine (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Cardiology (AREA)
- Physiology (AREA)
- Artificial Intelligence (AREA)
- Pulmonology (AREA)
- Optics & Photonics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Signal Processing (AREA)
- Evolutionary Computation (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
Description
MIC(D) = maxxy<B(n){M(D)x, y}…………(1)
B(n) = n0.6
102 プロセッサ
104 メモリ
106 モジュール
108 データ
110 処理モジュール
112 一貫性分析モジュール
114 特徴選択モジュール
116 テストモジュール
118 モデリングモジュール
120 その他のモジュール
122 処理データ
124 一貫性分析データ
126 特徴データ
128 モデリングデータ
130 その他のデータ
132 サンプリングデバイス
134 生理学的パラメータ監視デバイス
136 体の一部
138 カメラ
140 体の一部
142 カメラ
144 モデリングデータ
146 監視モジュール
148 特徴選択データ
Claims (47)
- ハンドヘルドデバイス(134)を使用して被験者に関連する生理学的パラメータを監視するための方法であって、
プロセッサ(102)によって、サンプルの被験者の体の一部(136)の映像から前記サンプルの被験者に関連する複数のサンプルのフォトプレチスモグラフィ(PPG)の特徴を取得するステップと、
前記プロセッサ(102)によって、前記複数のサンプルのPPGの特徴の中から、前記サンプルの被験者に関する前記生理学的パラメータのグランドトゥルース値に基づいて、前記生理学的パラメータに関連する少なくとも1つの関連するサンプルのPPGの特徴を選択するステップと、
前記プロセッサ(102)によって、前記少なくとも1つの関連するサンプルのPPGの特徴と前記生理学的パラメータの前記グランドトゥルース値とに基づいて、前記少なくとも1つの関連するサンプルのPPGの特徴と前記生理学的パラメータとの間の相関を示す数学的モデルを決定するステップであって、前記数学的モデルが、リアルタイムで前記生理学的パラメータを監視するために展開される、ステップとを含み、
取得する前記ステップが、
前記映像から複数の窓を取得するステップであって、前記窓の各々が所定の数のフレームを含むステップと、
前記複数の窓内の各フレームに関して1つまたは複数の色モデルに関する少なくとも1つの量子化された色値を決定するステップと、
各フレームの前記少なくとも1つの量子化された色値に基づいて前記複数の窓からの所定の数の決定窓に関して一貫性分析を実行することによって前記映像の一貫性を判定するステップであって、前記一貫性分析が、前記所定の数の前記決定窓を取得することに応答して実行される、ステップとを含む、方法。 - 前記複数のサンプルのPPGの特徴を取得する前記ステップが、時間領域および周波数領域のうちの1つで前記映像から前記複数のサンプルのPPGの特徴を抽出するステップを含む、請求項1に記載の方法。
- 前記生理学的パラメータが、血圧、心臓の状態を示す心電図(ECG)、血中酸素濃度、および呼吸数のうちの少なくとも1つを含む、請求項1に記載の方法。
- 前記複数のサンプルのPPGの特徴が、時間領域の特徴および周波数領域の特徴のうちの少なくとも1つの組を含む、請求項1に記載の方法。
- 前記複数のサンプルのPPGの特徴が、前記サンプルの被験者に関連する身体的特徴を含む、請求項1に記載の方法。
- 前記身体的特徴が、前記サンプルの被験者の身長、前記サンプルの被験者の体重、および前記サンプルの被験者の年齢を含む、請求項5に記載の方法。
- 前記数学的モデルを決定する前記ステップが、教師あり学習技術に基づく、請求項1に記載の方法。
- 試験対象者の体の一部(140)の映像から前記試験対象者に関連するテストのPPGの特徴を取得するステップと、
前記テストのPPGの特徴および前記数学的モデルに基づいて前記試験対象者に関する前記生理学的パラメータを監視するステップとをさらに含む、請求項1に記載の方法。 - 選択する前記ステップが、
前記複数のサンプルのPPGの特徴の各々に関して関連性のランクを決定するステップであって、前記関連性のランクが、前記生理学的パラメータとの前記複数のサンプルのPPGの特徴の各々の関係を示す、ステップと、
前記複数のサンプルのPPGの特徴の各々の前記関連性のランクおよび閾値の関連性のランクに基づいて、前記複数のサンプルのPPGの特徴の中から前記少なくとも1つの関連するサンプルのPPGの特徴を突き止めるステップとを含む、請求項1に記載の方法。 - 判定する前記ステップが、前記少なくとも1つの量子化された色値が量子化された色値の所定の範囲内にあるかどうかを評価するステップであって、前記一貫性分析が、評価する前記ステップに基づいて実現される、ステップを含む、請求項1に記載の方法。
- 前記プロセッサ(102)によって、前記決定窓の中から、前記実現することに応答して、所定の数のフレームを包含する複数の選択された決定窓を取得するステップと、
前記プロセッサ(102)によって、前記複数の選択された決定窓の各々に関してピーク周波数の検出の検査を実行するステップであって、少なくとも1つの生理学的パラメータが、実行する前記ステップに基づいて突き止められる、ステップとをさらに含む、請求項10に記載の方法。 - 実行する前記ステップが、前記複数の選択された決定窓によって包含されるすべてのフレームの少なくとも1つの量子化された色値に高速フーリエ変換(FFT)を適用することによって、前記複数の選択された決定窓の各々の前記少なくとも1つの量子化された色値のピーク周波数を決定するステップを含む、請求項11に記載の方法。
- 前記プロセッサ(102)によって、前記複数の選択された決定窓のうちの少なくとも1つが前記ピーク周波数の検出の検査を通らないときに、新しい映像を撮影するために前記サンプルの被験者にフィードバックを提供するステップをさらに含む、請求項11に記載の方法。
- 前記一貫性を判定する前記ステップが、
前記決定窓の各々に関して前記少なくとも1つの量子化された色値のピーク周波数の位置を決定するステップと、
前記決定窓にわたるピーク周波数に関する周波数ドリフトを評価するステップであって、前記周波数ドリフトが、前記決定窓にわたるピーク周波数の位置の変化を示す、ステップと、
前記周波数ドリフトと閾値の周波数ドリフトとを比較するステップであって、前記少なくとも1つの生理学的パラメータが、比較する前記ステップに応答して突き止められる、ステップとを含む、請求項1に記載の方法。 - 前記一貫性を判定する前記ステップが、
前記決定窓内の各フレームの前記少なくとも1つの量子化された色値に関する信号振幅を決定するステップと、
前記信号振幅を閾値の信号振幅と比較するステップであって、前記少なくとも1つの生理学的パラメータが、比較する前記ステップに応答して突き止められる、ステップとを含む、請求項1に記載の方法。 - 前記プロセッサ(102)によって、撮影された映像に一貫性がないときに、新しい映像を撮影するために前記サンプルの被験者にフィードバックを提供するステップをさらに含む、請求項1に記載の方法。
- 前記体の一部(136)が、前記サンプルの被験者の手の指先である、請求項1に記載の方法。
- 選択する前記ステップが、
前記プロセッサ(102)によって、サンプルのPPGの特徴と前記生理学的パラメータのグランドトゥルース値との間の関係を示す、前記複数のサンプルのPPGの特徴の各々に関する相関係数を決定するステップと、
前記プロセッサ(102)によって、前記相関係数に基づいて前記複数のサンプルのPPGの特徴の各々に関する利得因子を突き止めるステップと、
前記プロセッサ(102)によって、前記利得因子に基づいて前記複数のサンプルのPPGの特徴の中から関連するサンプルのPPGの特徴を選択するステップであって、前記関連するサンプルのPPGの特徴が、リアルタイムで前記生理学的パラメータを監視するために展開される、ステップとを含む、請求項1に記載の方法。 - 前記相関係数が、最大情報係数(MIC)である、請求項18に記載の方法。
- 前記利得因子を突き止める前記ステップが、シグモイド利得関数に基づく、請求項18に記載の方法。
- 前記利得因子を突き止める前記ステップが、k分割検証技術の精度に基づいて前記利得因子に関連する傾斜定数(m)を調整するステップであって、回帰モデルおよび分類器モデルのうちの1つを使用して実行されるステップを含む、請求項18に記載の方法。
- 前記回帰モデルが、線形回帰モデル、非線形回帰モデル、および多項式回帰モデルのうちの1つである、請求項21に記載の方法。
- 前記分類器モデルが、サポートベクターマシン(SVM)に基づくモデルおよび適応ニューラルネットワーク(ANN)に基づくモデルのうちの1つである、請求項21に記載の方法。
- 選択する前記ステップが、
前記複数のサンプルのPPGの特徴の各々にそれぞれの利得係数を乗算するステップと、
各乗算されるサンプルのPPGの特徴の閾値に基づいて前記複数のサンプルのPPGの特徴の中から前記関連するサンプルのPPGの特徴を選択するステップとを含む、請求項18に記載の方法。 - 前記プロセッサ(102)によって、それぞれの利得因子に基づいて前記関連するサンプルのPPGの特徴の各々の実際の関連性を突き止めるステップをさらに含む、請求項18に記載の方法。
- 前記プロセッサ(102)によって、試験対象者の体の一部(140)の映像から前記試験対象者に関連するテストのPPGの特徴を取得するステップと、
前記プロセッサ(102)によって、前記テストのPPGの特徴および前記関連するサンプルのPPGの特徴に基づいて前記試験対象者に関する前記生理学的パラメータを監視するステップとをさらに含む、請求項18に記載の方法。 - ハンドヘルドデバイス(134)を使用して被験者に関連する生理学的パラメータを監視するための方法であって、
サンプルの被験者の体の一部(136)の映像から前記サンプルの被験者に関連する複数のサンプルのフォトプレチスモグラフィ(PPG)の特徴を取得するステップと、
前記複数のサンプルのPPGの特徴の中から、前記被験者に関する前記生理学的パラメータのグランドトゥルース値に基づいて、前記生理学的パラメータに関連する少なくとも1つの関連するサンプルのPPGの特徴を選択するステップと、
前記少なくとも1つの関連するサンプルのPPGの特徴と前記生理学的パラメータの前記グランドトゥルース値とにのみ基づいて、前記関連するサンプルのPPGの特徴と前記生理学的パラメータとの間の相関を示す数学的モデルを決定するステップであって、前記数学的モデルが、リアルタイムで前記生理学的パラメータを監視するために展開され、前記生理学的パラメータが、血圧(BP)の特徴および心電図(ECG)の特徴のうちの少なくとも1つである、ステップとを含み、
選択する前記ステップが、
サンプルのPPGの特徴と前記生理学的パラメータのグランドトゥルース値との間の関係を示す、前記複数のサンプルのPPGの特徴の各々に関する相関係数を決定するステップと、
前記相関係数に基づいて前記複数のサンプルのPPGの特徴の各々に関する利得因子を突き止めるステップと、
前記利得因子に基づいて前記複数のサンプルのPPGの特徴の中から関連するサンプルのPPGの特徴を選択するステップであって、前記関連するサンプルのPPGの特徴が、リアルタイムで前記生理学的パラメータを監視するために展開される、ステップとを含む、方法。 - 被験者に関連する生理学的パラメータを監視するためのモデリングシステム(100)であって、
プロセッサ(102)と、
サンプルの被験者に関連する複数のサンプルのフォトプレチスモグラフィ(PPG)の特徴を取得するための、前記プロセッサ(102)に結合された処理モジュール(110)であって、前記サンプルのPPGの特徴が、前記サンプルの被験者の体の一部(136)の映像から抽出される、処理モジュール(110)と、
前記生理学的パラメータのグランドトゥルース値に基づいて、前記複数のサンプルのPPGの特徴の中から、前記生理学的パラメータに関連する少なくとも1つの関連するサンプルのPPGの特徴を選択するための、前記プロセッサ(102)に結合された特徴選択モジュール(114)と、
前記少なくとも1つの関連するサンプルのPPGの特徴と前記生理学的パラメータの前記グランドトゥルース値とに基づいて、前記関連するサンプルのPPGの特徴と前記生理学的パラメータとの間の相関を示す数学的モデルを決定するための、前記プロセッサ(102)に結合されたモデリングモジュール(118)であって、前記数学的モデルが、リアルタイムで前記生理学的パラメータを監視するように適合される、モデリングモジュール(118)とを含み、
前記処理モジュール(110)が前記映像から複数の窓を取得し、前記窓の各々が所定の数のフレームを含み、前記モデリングシステム(100)が、
前記複数の窓内の各フレームに関して、1つまたは複数の色モデルに関する少なくとも1つの量子化された色値を決定することと、
各フレームの前記少なくとも1つの量子化された色値に基づいて前記複数の窓からの所定の数の決定窓に関して一貫性分析を実行することによって前記映像の一貫性を判定することであって、前記一貫性分析が、前記所定の数の前記決定窓を取得することに応答して実行される、判定することとを行うための、
前記プロセッサ(102)に結合された一貫性分析モジュール(112)をさらに含む、モデリングシステム(100)。 - 前記処理モジュール(110)が、
サンプリングデバイス(132)から前記被験者の前記体の一部(136)の前記映像を取得し、
前記映像を処理してサンプルのPPG波形を決定する、請求項28に記載のモデリングシステム(100)。 - 前記処理モジュール(110)が、時間領域および周波数領域のうちの少なくとも1つで前記映像から前記複数のサンプルのPPGの特徴を取得する、請求項28に記載のモデリングシステム(100)。
- 前記モデリングモジュール(118)が、教師あり学習技術に基づいて前記数学的モデルを決定する、請求項28に記載のモデリングシステム(100)。
- 前記特徴選択モジュール(114)が、
前記複数のサンプルのPPGの特徴の各々に関して関連性のランクを決定することであって、前記関連性のランクが、前記生理学的パラメータとの各サンプルのPPGの特徴の関係を示す、決定することと、
前記複数のサンプルのPPGの特徴の各々の前記関連性のランクを閾値の関連性のランクと比較して前記少なくとも1つの関連するサンプルのPPGの特徴を選択することとを行う、請求項28に記載のモデリングシステム(100)。 - 前記処理モジュール(110)が、前記少なくとも1つの量子化された色値が量子化された色値の所定の範囲内にあるかどうかを評価する、請求項28に記載のモデリングシステム(100)。
- 前記一貫性分析モジュール(112)が、前記処理モジュール(110)による評価に応答して新しい映像を撮影するために前記被験者にフィードバックを提供する、請求項33に記載のモデリングシステム(100)。
- 前記一貫性分析モジュール(112)が、前記処理モジュール(110)による評価に応答して前記一貫性分析を実現する、請求項33に記載のモデリングシステム(100)。
- 前記一貫性分析モジュール(112)が、
前記決定窓の各々に関して前記少なくとも1つの量子化された色値のピーク周波数の位置を決定することと、
前記決定窓にわたるピーク周波数に関する周波数ドリフトを評価することであって、前記周波数ドリフトが、前記決定窓にわたるピーク周波数の位置の変化を示す、評価することと、
前記周波数ドリフトと閾値の周波数ドリフトとを比較して、前記少なくとも1つの生理学的パラメータを前記比較に応答して決定することとを行う、請求項28に記載のモデリングシステム(100)。 - 前記一貫性分析モジュール(112)が、
前記決定窓内の各フレームの前記少なくとも1つの量子化された色値に関する信号振幅を決定し、
前記信号振幅を閾値の信号振幅と比較して、前記生理学的パラメータを前記比較に応答して突き止める、請求項28に記載のモデリングシステム(100)。 - 前記特徴選択モジュール(114)が、
サンプルのPPGの特徴と前記生理学的パラメータのグランドトゥルース値との間の関係を示す、前記複数のサンプルのPPGの特徴の各々に関する相関係数を決定することと、
前記相関係数に基づいて前記複数のサンプルのPPGの特徴の各々に関する利得因子を突き止めることと、
前記利得因子に基づいて前記複数のサンプルのPPGの特徴の中から前記関連するサンプルのPPGの特徴を選択することであって、前記関連するサンプルのPPGの特徴が、リアルタイムで前記生理学的パラメータを監視するために展開される、選択することとを行う、請求項28に記載のモデリングシステム(100)。 - それぞれの利得因子に基づいて前記関連するサンプルのPPGの特徴の各々の実際の関連性を突き止めるための、前記プロセッサ(102)に結合されたテストモジュール(116)をさらに含む、請求項38に記載のモデリングシステム(100)。
- 前記特徴選択モジュール(114)が、
前記複数のサンプルのPPGの特徴の各々にそれぞれの利得係数を乗算し、
各乗算されるサンプルのPPGの特徴の閾値に基づいて前記複数のサンプルのPPGの特徴の中から前記関連するサンプルのPPGの特徴を選択する、請求項38に記載のモデリングシステム(100)。 - 前記相関係数が、最大情報係数(MIC)である、請求項38に記載のモデリングシステム(100)。
- 前記特徴選択モジュール(114)が、シグモイド利得関数に基づいて前記利得因子を突き止める、請求項38に記載のモデリングシステム(100)。
- 前記特徴選択モジュール(114)が、k分割検証技術の精度に基づいて前記利得因子に関連する傾斜定数(m)を調整することであって、回帰モデルおよび分類器モデルのうちの1つを使用して実行される、調整することを行う、請求項38に記載のモデリングシステム(100)。
- 被験者に関連する生理学的パラメータを監視するための生理学的パラメータ監視デバイス(134)であって、
プロセッサと、
関連するサンプルのPPGの特徴と監視される前記生理学的パラメータとの間の相関を示す数学的モデルを取得することであって、前記関連するサンプルのPPGの特徴が、複数のサンプルのPPGの特徴に対する前記生理学的パラメータの影響に基づいて前記複数のサンプルのPPGの特徴の中から選択される、前記数学的モデルを取得すること、
試験対象者の体の一部(140)の映像から前記試験対象者に関連するテストのPPGの特徴を突き止めることであって、前記映像が、生理学的パラメータ監視デバイス(134)のカメラ(140)を使用して撮影される、前記テストのPPGの特徴を突き止めること、ならびに
前記テストのPPGの特徴および前記数学的モデルに基づいて前記試験対象者に関する前記生理学的パラメータを監視することを行うための、
前記プロセッサに結合された監視モジュール(146)とを含み、
前記監視モジュール(146)が、
監視されるべき前記生理学的パラメータのグランドトゥルース値と相関がある少なくとも1つの関連するサンプルのPPGの特徴を取得することであって、前記関連するサンプルのPPGの特徴が、サンプルのPPGの特徴と前記生理学的パラメータのグランドトゥルース値との間の相関と、前記相関に基づいて決定された利得因子とに基づいて複数のサンプルのPPGの特徴の中から選択される、前記サンプルのPPGの特徴を取得することと、
前記テストのPPGの特徴および前記関連するPPGの特徴に基づいて前記試験対象者に関する前記生理学的パラメータを監視することとを行う、生理学的パラメータ監視デバイス(134)。 - 前記監視モジュール(146)が、映像のうちの少なくとも1つに一貫性がないときに、新しい映像を撮影するために前記被験者にフィードバックを提供する、請求項44に記載の生理学的パラメータ監視デバイス(134)。
- サンプルの被験者の体の一部(136)の映像から前記サンプルの被験者に関連する複数のサンプルのフォトプレチスモグラフィ(PPG)の特徴を取得することと、
前記複数のサンプルのPPGの特徴の中から、前記被験者に関する生理学的パラメータのグランドトゥルース値に基づいて、前記生理学的パラメータに関連する少なくとも1つの関連するサンプルのPPGの特徴を選択することと、
前記少なくとも1つの関連するサンプルのPPGの特徴と前記生理学的パラメータの前記グランドトゥルース値とに基づいて、前記関連するサンプルのPPGの特徴と前記生理学的パラメータとの間の相関を示す数学的モデルを決定することであって、前記数学的モデルが、リアルタイムで前記生理学的パラメータを監視するように適合される、決定することとを行うための、処理リソースによって実行可能な命令を含み、
前記映像から複数の窓を取得することであって、前記窓の各々が所定の数のフレームを含む、前記複数の窓を取得することと、
前記複数の窓内の各フレームに関して、1つまたは複数の色モデルに関する少なくとも1つの量子化された色値を決定することと、
前記複数の窓からの所定の数の決定窓の各々に関して前記少なくとも1つの量子化された色値のピーク周波数の位置を決定することと、
前記決定窓にわたるピーク周波数の前記位置に基づいて前記決定窓に関する一貫性分析を実行することとを行うための、プロセッサによって実行可能な命令をさらに含む、非一時的コンピュータ可読媒体。 - サンプルのPPGの特徴と前記生理学的パラメータのグランドトゥルース値との間の関係を示す、前記複数のサンプルのPPGの特徴の各々に関する相関係数を決定することと、
前記相関係数およびシグモイド利得関数に基づいて前記複数のサンプルのPPGの特徴の各々に関する利得因子を突き止めることと、
前記利得因子に基づいて前記複数のサンプルのPPGの特徴の中から関連するサンプルのPPGの特徴を選択することであって、前記関連するサンプルのPPGの特徴が、リアルタイムで前記生理学的パラメータを監視するために展開される、選択することとを行うための、プロセッサによって実行可能な命令をさらに含む、請求項46に記載の非一時的コンピュータ可読媒体。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
IN2489/MUM/2013 | 2013-07-26 | ||
IN2489MU2013 IN2013MU02489A (ja) | 2013-07-26 | 2013-07-26 | |
IN3152MU2013 IN2013MU03152A (ja) | 2013-10-03 | 2013-10-03 | |
IN3152/MUM/2013 | 2013-10-03 | ||
IN1540/MUM/2014 | 2014-05-02 | ||
IN1540MU2014 | 2014-05-02 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015027459A JP2015027459A (ja) | 2015-02-12 |
JP6435128B2 true JP6435128B2 (ja) | 2018-12-05 |
Family
ID=51300528
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014153319A Active JP6435128B2 (ja) | 2013-07-26 | 2014-07-28 | 生理学的パラメータの監視 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9924870B2 (ja) |
EP (1) | EP2829223B1 (ja) |
JP (1) | JP6435128B2 (ja) |
Families Citing this family (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9465995B2 (en) | 2013-10-23 | 2016-10-11 | Gracenote, Inc. | Identifying video content via color-based fingerprint matching |
CN107106118B (zh) | 2014-10-16 | 2021-03-19 | 远程护理科技第一公司 | 检测重搏切迹的方法 |
BR112017012448A2 (pt) * | 2014-12-15 | 2018-01-02 | Koninklijke Philips Nv | dispositivo de medição de tempo de repreenchimento capilar, e método para medir tempo de repreenchimento capilar |
EP3087915B1 (en) * | 2015-04-27 | 2022-02-09 | Tata Consultancy Services Limited | Method and system for noise cleaning of photoplethysmogram signals for estimating blood pressure |
JP2016202733A (ja) * | 2015-04-27 | 2016-12-08 | ローム株式会社 | 携帯端末 |
WO2017024457A1 (zh) * | 2015-08-08 | 2017-02-16 | 深圳先进技术研究院 | 连续血压测量装置、测量模型建立方法和系统 |
EP3136297A1 (en) * | 2015-08-27 | 2017-03-01 | Tata Consultancy Services Limited | System and method for determining information and outliers from sensor data |
US10182097B2 (en) | 2015-09-23 | 2019-01-15 | Board Of Regents, The University Of Texas System | Predicting a viewer's quality of experience |
KR101760441B1 (ko) * | 2015-11-30 | 2017-07-25 | 조선대학교산학협력단 | 심전도 정점 주기를 이용한 개인 식별 장치 및 그 방법 |
US11109809B2 (en) | 2015-12-11 | 2021-09-07 | Valencell, Inc. | Methods and systems for adaptable presentation of sensor data |
EP3393347B8 (en) * | 2015-12-23 | 2020-03-25 | Koninklijke Philips N.V. | Apparatus and method for measuring the quality of an extracted signal |
GB201602875D0 (en) * | 2016-02-18 | 2016-04-06 | Leman Micro Devices Sa | Personal hand-held monitor |
US10362998B2 (en) | 2016-02-25 | 2019-07-30 | Samsung Electronics Co., Ltd. | Sensor-based detection of changes in health and ventilation threshold |
US10172517B2 (en) | 2016-02-25 | 2019-01-08 | Samsung Electronics Co., Ltd | Image-analysis for assessing heart failure |
US11164596B2 (en) | 2016-02-25 | 2021-11-02 | Samsung Electronics Co., Ltd. | Sensor assisted evaluation of health and rehabilitation |
US10420514B2 (en) | 2016-02-25 | 2019-09-24 | Samsung Electronics Co., Ltd. | Detection of chronotropic incompetence |
KR101950555B1 (ko) * | 2016-03-30 | 2019-02-20 | 순천향대학교 산학협력단 | 스마트 체중계를 이용한 부정맥을 포함한 생체신호 측정 시스템 |
US10335045B2 (en) | 2016-06-24 | 2019-07-02 | Universita Degli Studi Di Trento | Self-adaptive matrix completion for heart rate estimation from face videos under realistic conditions |
US11653843B2 (en) * | 2016-06-28 | 2023-05-23 | Kyocera Corporation | Electronic device and estimation system |
WO2018020334A1 (en) * | 2016-07-28 | 2018-02-01 | Tata Consultancy Services Limited | System and method for aiding communication |
US10743821B2 (en) * | 2016-10-21 | 2020-08-18 | Tata Consultancy Services Limited | Anomaly detection by self-learning of sensor signals |
US11096595B2 (en) * | 2016-11-15 | 2021-08-24 | Microsoft Technology Licensing, Llc | Blood pressure determinations |
KR20180076806A (ko) | 2016-12-28 | 2018-07-06 | 삼성전자주식회사 | 생체 신호 특징 스케일링 장치 및 방법 |
US10709390B2 (en) | 2017-03-02 | 2020-07-14 | Logos Care, Inc. | Deep learning algorithms for heartbeats detection |
WO2019006631A1 (zh) * | 2017-07-03 | 2019-01-10 | 深圳市汇顶科技股份有限公司 | 质量评估方法及装置、模型建立方法及模块、穿戴设备 |
TWI638641B (zh) * | 2017-07-26 | 2018-10-21 | 鼎博康生物科學有限公司 | 生理特徵感測系統 |
IT201700093172A1 (it) * | 2017-08-11 | 2019-02-11 | Restech S R L | Metodo per l'identificazione precoce di riacutizzazioni di broncopneumopatia cronica ostruttiva |
WO2019088462A1 (ko) * | 2017-11-03 | 2019-05-09 | 주식회사 딥메디 | 혈압 추정 모델 생성 시스템 및 방법과 혈압 추정 시스템 및 방법 |
CN112087969A (zh) * | 2018-05-10 | 2020-12-15 | 夏普株式会社 | 模型设定装置、血压测量装置、以及模型设定方法 |
JP7229676B2 (ja) * | 2018-05-21 | 2023-02-28 | 株式会社日立製作所 | 生体情報検出装置および生体情報検出方法 |
US10552986B1 (en) * | 2018-07-20 | 2020-02-04 | Banuba Limited | Computer systems and computer-implemented methods configured to track multiple eye-gaze and heartrate related parameters during users' interaction with electronic computing devices |
EP3669768B1 (en) * | 2018-12-20 | 2024-02-21 | IMEC vzw | A method for generating a model for generating a synthetic ecg and a method and system for analysis of heart activity |
KR102230289B1 (ko) * | 2018-12-20 | 2021-03-19 | 고려대학교 산학협력단 | 광용적맥파(ppg) 신호 파형을 분석하는 방법, 이를 이용하여 사용자의 병리 상태를 추정하는 장치 및 그 방법 |
CN111374652A (zh) * | 2018-12-29 | 2020-07-07 | 中兴通讯股份有限公司 | 一种计算血压的装置和电子设备 |
TWI693061B (zh) * | 2019-05-09 | 2020-05-11 | 鉅怡智慧股份有限公司 | 非接觸式酒駕評判系統及相關方法 |
KR20210014305A (ko) | 2019-07-30 | 2021-02-09 | 삼성전자주식회사 | 생체정보 추정 장치 및 방법 |
WO2021046237A1 (en) * | 2019-09-06 | 2021-03-11 | Valencell, Inc. | Wearable biometric waveform analysis systems and methods |
CN112790750A (zh) * | 2019-11-13 | 2021-05-14 | 北京卡尔斯通科技有限公司 | 一种基于视频眼动和心率分析的恐惧紧张情绪识别方法 |
WO2021150305A2 (en) * | 2019-11-27 | 2021-07-29 | Vivonics, Inc. | Contactless system and method for assessing and/or determining hemodynamic parameters and/or vital signs |
WO2021141572A1 (en) * | 2020-01-06 | 2021-07-15 | Valencell, Inc. | Methods and systems for adaptable presentation of sensor data |
EP4210566A4 (en) * | 2020-10-20 | 2024-10-23 | Binah Ai Ltd | SYSTEM AND METHOD FOR OBTAINING BLOOD PRESSURE MEASUREMENTS FROM OPTICAL DATA |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FI115289B (fi) * | 2000-02-23 | 2005-04-15 | Polar Electro Oy | Elimistön energia-aineenvaihdunnan ja glukoosin määrän mittaaminen |
US8512240B1 (en) | 2007-11-14 | 2013-08-20 | Medasense Biometrics Ltd. | System and method for pain monitoring using a multidimensional analysis of physiological signals |
US20090226071A1 (en) * | 2008-03-06 | 2009-09-10 | Motorola, Inc. | Method and Apparatus to Facilitate Using Visible Light Images to Determine a Heart Rate |
US8532932B2 (en) | 2008-06-30 | 2013-09-10 | Nellcor Puritan Bennett Ireland | Consistent signal selection by signal segment selection techniques |
US8478538B2 (en) * | 2009-05-07 | 2013-07-02 | Nellcor Puritan Bennett Ireland | Selection of signal regions for parameter extraction |
US8706464B2 (en) * | 2010-01-31 | 2014-04-22 | Vladimir Shusterman | Health data dynamics, its sources and linkage with genetic/molecular tests |
LV14514B (lv) | 2010-10-06 | 2012-08-20 | Latvijas Universitāte | Iekārta un metode sirdsdarbības parametru optiskai bezkontakta kontrolei |
US20120130201A1 (en) * | 2010-11-24 | 2012-05-24 | Fujitsu Limited | Diagnosis and Monitoring of Dyspnea |
US9646261B2 (en) * | 2011-05-10 | 2017-05-09 | Nymi Inc. | Enabling continuous or instantaneous identity recognition of a large group of people based on physiological biometric signals obtained from members of a small group of people |
WO2013036718A1 (en) * | 2011-09-08 | 2013-03-14 | Isis Innovation Ltd. | Determining acceptability of physiological signals |
US8617081B2 (en) | 2011-09-28 | 2013-12-31 | Xerox Corporation | Estimating cardiac pulse recovery from multi-channel source data via constrained source separation |
CN102429649B (zh) | 2011-12-14 | 2014-02-19 | 中国航天员科研训练中心 | 连续血压测量装置 |
-
2014
- 2014-07-28 EP EP14178793.7A patent/EP2829223B1/en active Active
- 2014-07-28 US US14/444,745 patent/US9924870B2/en active Active
- 2014-07-28 JP JP2014153319A patent/JP6435128B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
EP2829223A1 (en) | 2015-01-28 |
JP2015027459A (ja) | 2015-02-12 |
EP2829223B1 (en) | 2019-06-12 |
US20150031965A1 (en) | 2015-01-29 |
US9924870B2 (en) | 2018-03-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6435128B2 (ja) | 生理学的パラメータの監視 | |
US11872061B2 (en) | Method and system for acquiring data for assessment of cardiovascular disease | |
CN104665768B (zh) | 生理参数的监测 | |
US10653362B2 (en) | Motion and noise artifact detection and reconstruction algorithms for photoplethysmogram and equivalent signals | |
CN109452935B (zh) | 使用统计后处理从血管容积图估计血压的无创方法和系统 | |
CN106659392A (zh) | 非侵扰式皮肤组织水合确定设备及相关的方法 | |
WO2015121949A1 (ja) | 信号処理装置、信号処理方法及び信号処理プログラム | |
Shin | Deep convolutional neural network-based signal quality assessment for photoplethysmogram | |
US20230036114A1 (en) | System and methods for determining health-related metrics from collected physiological data | |
JPWO2017188099A1 (ja) | 装置、端末および生体情報システム | |
Tabei et al. | A novel diversity method for smartphone camera-based heart rhythm signals in the presence of motion and noise artifacts | |
CN112597949B (zh) | 一种基于视频的心理压力测量方法及其系统 | |
Kiddle et al. | Dynamic region of interest selection in remote photoplethysmography: Proof-of-concept study | |
JP7557550B2 (ja) | 高血圧監視のためのシステムおよび方法 | |
Banerjee et al. | Design of a Realtime Photoplethysmogram Signal Quality Checker for Wearables and Edge Computing | |
Huerta-Ruiz et al. | Relationship between PPG Signals and Glucose levels through Chaotic Descriptors and Support Vector Machines | |
US20240312631A1 (en) | Assessing patient health risks & predicting health events using biosignals from smartphones & other devices | |
US20220031208A1 (en) | Machine learning training for medical monitoring systems | |
US20230277069A1 (en) | Heart Rate and Respiratory Rate Measurements from Imagery | |
WO2017171802A1 (en) | Aortic stenosis screening | |
RAJU et al. | MULTI CLASS STRESS DETECTION THROUGH HEART RATE VARIABILITY A DEEP NEURAL NETWORK BASED STUDY | |
DP et al. | Heart Rate Monitoring on Facial RGB Images using Deep Learning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170510 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180528 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180723 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180919 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181015 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181112 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6435128 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |