JP7520011B2 - 体液試料中の検体の濃度を特定するための方法及びシステム、並びにソフトウェア実装モジュールを生成するための方法及びシステム - Google Patents

体液試料中の検体の濃度を特定するための方法及びシステム、並びにソフトウェア実装モジュールを生成するための方法及びシステム Download PDF

Info

Publication number
JP7520011B2
JP7520011B2 JP2021532484A JP2021532484A JP7520011B2 JP 7520011 B2 JP7520011 B2 JP 7520011B2 JP 2021532484 A JP2021532484 A JP 2021532484A JP 2021532484 A JP2021532484 A JP 2021532484A JP 7520011 B2 JP7520011 B2 JP 7520011B2
Authority
JP
Japan
Prior art keywords
image
interest
analyte
devices
concentration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021532484A
Other languages
English (en)
Other versions
JPWO2020120349A5 (ja
JP2022514826A (ja
Inventor
ベルク マックス
ハイラー フレドリック
リンブルク ベルント
ジーフェルト ダニエル
ビーダー ヘルベルト
ゼーリヒ ペーター
アイジン ベンハール
シッタジャール シーバ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
F Hoffmann La Roche AG
Original Assignee
F Hoffmann La Roche AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by F Hoffmann La Roche AG filed Critical F Hoffmann La Roche AG
Publication of JP2022514826A publication Critical patent/JP2022514826A/ja
Publication of JPWO2020120349A5 publication Critical patent/JPWO2020120349A5/ja
Application granted granted Critical
Publication of JP7520011B2 publication Critical patent/JP7520011B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/8483Investigating reagent band
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/75Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated
    • G01N21/77Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated by observing the effect on a chemical indicator
    • G01N21/78Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated by observing the effect on a chemical indicator producing a change of colour
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • G01N33/50Chemical analysis of biological material, e.g. blood, urine; Testing involving biospecific ligand binding methods; Immunological testing
    • G01N33/66Chemical analysis of biological material, e.g. blood, urine; Testing involving biospecific ligand binding methods; Immunological testing involving blood sugars, e.g. galactose
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/12Circuits of general importance; Signal processing
    • G01N2201/129Using chemometrical methods
    • G01N2201/1296Using chemometrical methods using neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30024Cell structures in vitro; Tissue sections in vitro

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Immunology (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Hematology (AREA)
  • Data Mining & Analysis (AREA)
  • Public Health (AREA)
  • Urology & Nephrology (AREA)
  • Software Systems (AREA)
  • Food Science & Technology (AREA)
  • Medicinal Chemistry (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Biotechnology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Cell Biology (AREA)
  • Microbiology (AREA)
  • Diabetes (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Plasma & Fusion (AREA)

Description

本開示は、体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するための方法、及び体液試料中の検体の濃度を特定するための方法に関する。更に、本開示は、体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するためのシステム、及び体液試料中の検体の濃度を特定するためのシステムに関する。また、コンピュータプログラム製品にも関する。
機械学習(ML)は、データによって作動されるアルゴリズムを導出するために使用されるコンピュータ科学の分野である。明示公式を使用する代わりに、MLアルゴリズムは、実世界訓練データを利用して、人間が従来的に着想するモデルよりも正確かつ洗練されたモデルを生成する。人工ニューラルネットワーク(ANN)は、機械学習の分野に属し、複数の層にわたって広がった人工ニューロンに依存する。ニューラルネットワークの概念は、数十年にわたって存在してきたが、ニューラルネットワークアルゴリズムを効果的に開発するために必要とされる膨大な計算に計算能力が追いついたのはごく最近である。分散型コンピューティング能力により、開発者らは、スーパーコンピュータを使用するのではなく、計算を複数のユニットに分散させることが可能となった。分散型コンピューティングの周知の実装としては、Apache Hadoop、Apache Spark、及びMapReduceが挙げられる。
ニューラルネットワークモデルは、直接的な1対1の関係がないか又はほとんどない場合に、入力と出力との間のパターン/非線形関係を特定するのに非常に好適である。モデルの精度は、根底にあるシステムの特徴付けがどれだけ十分であるか、及び入力と出力との間の関係性がどのように定義されるかに高度に依存するために、これは重要である。
米国特許出願公開第2006/0008923(A1)号明細書では、患者の医学的診断又はリスク評価のためのシステム及び方法が説明されている。これらのシステム及び方法は、救急治療室及び手術室などのポイントオブケアで、又は迅速かつ正確な結果が望まれるあらゆる状況で利用されるように設計されている。システム及び方法は、患者データ、特に、イムノアッセイ、心電図、X線及び他のそのような試験を含むポイントオブケア診断試験又はアッセイから得られたデータを処理し、病状又はそのリスク若しくは欠如の指標を提供する。システムは、試験データの読取り又は評価のための機器と、データを診断情報又はリスク評価情報に変換するためのソフトウェアと、を含む。患者情報には、身体検査及びイムノアッセイなどの生化学検査により得られたデータ、並びに他の手技により得られたデータが含まれる。試験は、ポイントオブケアにおいて患者に行われ、データシグナルを生成する電子反射リーダー又は電子透過リーダーなどによってデジタル化することができるデータが生成される。シグナルを、病状の診断又は疾患のリスクの特定を補助するために使用されるデータに変換するために、シグナルは、データ削減及び曲線適合アルゴリズムを用いるソフトウェア、若しくは訓練済みニューラルネットワークなどの特定支援システム、又はこれらの組合せを使用して、処理される。この結果を、評価の精査又は強化のために、更に、ニューラルネットなどの第2の特定支援システムに入力してもよい。
国際公開第2018/0194525(A1)号明細書は、生体試料中の代謝産物を定量するための生化学的分析方法に関する。この方法は、様々な条件下における試験ストリップ(ディップスティック)の外観を生成かつ学習することに基づいて、未知の試料画像の値/標識を推測する。この方法は、訓練部分及び試験部分の2つの部分からなる。訓練部分において、試験ストリップの代謝産物量を、生化学分析装置によって測定する。同じ試験ストリップの画像セットを、様々な周囲光条件をシミュレートするデバイスによって捕捉する。試験ストリップの画像及びその対応する代謝産物量を使用して、機械学習モデルを訓練し、学習モデルをスマートデバイスへと移す。試験部分では、分析しようとする試験ストリップの画像を、スマートデバイスによって捕捉し、画像を、訓練部分において特定した学習モデルを使用して処理する。
米国特許出願公開第2018/0211380(A1)号明細書は、生体試料を撮像し、生体試料の画像を分析するためのシステムに言及している。このシステムは、機械学習技法を使用して、目的の細胞を分類するために生体試料の画像を自動で分析するためのものである。実装では、特定の細胞型と関連する疾患を、診断することができる。
米国特許出願公開第2016/0048739(A1)号明細書は、生体試料の診断システムに関する。診断システムは、診断機器及び携帯型電子デバイスを含む。診断機器は、参照カラーバーと、生体試料を受容するための複数の化学試験パッドと、を含む。携帯型電子デバイスは、無制御な照明環境で診断機器のデジタル画像を捕捉するためのデジタルカメラ、診断機器の表面の照度を捕捉するためのセンサ、デジタル画像及び照度を受信するためにデジタルカメラ及びセンサに接続されたプロセッサ、並びにプロセッサに接続された記憶デバイスを含む。記憶デバイスは、デジタル画像及び照度を処理し、複数の化学試験パッドの色を正規化し、化学試験パッドにおける色変化の定量に応答して診断試験結果を特定するための、プロセッサによる実行のための命令を記憶する。
体液試料中の検体の濃度を特定するための改善された技術を提供することが、本開示の目的である。
本課題を解決するために、独立請求項1に記載の体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するための方法が、提供される。更に、独立請求項2に記載の体液試料中の検体の濃度を測定するための方法が、提供される。体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するためのシステム、及び体液試料中の検体の濃度を特定するためのシステムが、それぞれ、独立請求項11及び12に従って提供される。更に、請求項13に記載のコンピュータプログラム製品が提供される。更なる実施形態は、従属請求項に開示されている。
一態様によると、体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するための方法が、提供される。本方法は、1つ以上のデータ処理デバイスにおいて、第1の測定データセットを提供することであって、第1の測定データセットは、1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を表す、第1の測定データセットを提供することを含む。画像は、検体を含有する1つ以上の第1の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示し、画像は、それぞれが第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスによって記録され、複数のデバイスに、デバイスにおける画像記録及び画像データ処理のために適用される種々のソフトウェア及び/又はハードウェアデバイス構成が提供される。本方法は、1つ以上のデータ処理デバイスにおいて、人工ニューラルネットワークを適用する機械学習プロセスにおいて、ニューラルネットワークモデルを生成することであって、ニューラルネットワークモデルを提供すること、及び第1の測定データセットから選択される訓練データによってニューラルネットワークモデルを訓練することを含む、ニューラルネットワークモデルを生成することを更に含む。ニューラルネットワークモデルを表す第1の分析アルゴリズムを含むソフトウェア実装モジュールが生成され、ソフトウェア実装モジュールは、1つ以上のプロセッサを有するデータ処理デバイスに搭載されると、1つ以上の試験ストリップの目的の領域の画像から画像処理によって導出される第2の色情報を示す第2の測定データセットを分析することによって、第2の体液試料中の検体の濃度を特定するように構成され、画像は、検体を含有する第2の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す。
一態様によると、体液試料中の検体の濃度を特定するための方法であって、方法は、1つ以上のデータ処理デバイスにおいて、現在の試験ストリップ又はストライプの目的の領域の画像から画像処理によって導出される現在の色情報を示す現在の測定データセットを提供することであって、画像は、検体を含有する現在の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す、現在の測定データセットを提供することと、人工ニューラルネットワークを適用する機械学習プロセスにおいて生成されるニューラルネットワークモデルを表す第1の分析アルゴリズムを含むソフトウェア実装モジュールを提供することと、現在の体液試料中の検体の濃度を特定することであって、第1の分析アルゴリズムによって現在の測定データセットを分析することを含む、検体の濃度を特定することと、現在の体液試料中の検体の濃度を示す濃度データを生成することとを含む、方法。機械学習プロセスにおいてニューラルネットワークモデルを生成することは、第1の測定データセットを提供することであって、第1の測定データセットは、1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を示し、画像は、検体を含有する1つ以上の第1の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す、第1の測定データセットを提供することを含む。第1の測定データセットは、それぞれが第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスによって記録される画像から導出される第1の色情報を表し、複数のデバイスに、デバイスにおける画像記録及び画像データ処理のために適用される種々のデバイス構成が提供される。ニューラルネットワークモデルは、第1の測定データセットから選択される訓練データによって訓練される。
別の態様によると、体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するためのシステムであって、システムは、1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を表す第1の測定データセットを提供するように構成される、1つ以上のデータ処理デバイスを備える、システム、が提供される。画像は、検体を含有する1つ以上の第1の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示し、画像は、それぞれが第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスによって記録され、複数のデバイスに、デバイスにおける画像記録及び画像データ処理のために適用される種々のソフトウェア及び/又はハードウェアデバイス構成が提供される。ニューラルネットワークモデルを提供することと、第1の測定データセットから選択される訓練データによってニューラルネットワークモデルを訓練することとを、含む、人工ニューラルネットワークを適用する機械学習プロセスにおいて、ニューラルネットワークモデルを生成するように構成される1つ以上のデータ処理デバイス。さらに、ニューラルネットワークモデルを表す第1の分析アルゴリズムを含むソフトウェア実装モジュールを生成するように構成される1つ以上のデータ処理デバイスであって、ソフトウェア実装モジュールは、ソフトウェア実装モジュールが1つ以上のプロセッサを有するデータ処理デバイスに搭載されると、1つ以上の試験ストリップの目的の領域の画像から画像処理によって導出される第2の色情報を示す第2の測定データセットを分析することによって、第2の体液試料中の検体の濃度を特定するように構成され、画像が、検体を含有する第2の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す、データ処理デバイス。
なおも別の態様によると、体液試料中の検体の濃度を特定するためのシステムであって、システムは、1つ以上のデータ処理デバイスを備え、1つ以上のデータ処理デバイスが、現在の試験ストリップの目的の領域の画像から画像処理によって導出される現在の色情報を示す現在の測定データセットを提供することであって、画像は、検体を含有する現在の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す、現在の測定データセットを提供することと、人工ニューラルネットワークを適用する機械学習プロセスにおいて生成されるニューラルネットワークモデルを表す第1の分析アルゴリズムを含むソフトウェア実装モジュールを提供することと、現在の体液試料中の検体の濃度を特定することであって、第1の分析アルゴリズムによって現在の測定データセットを分析することを含む、検体の濃度を特定することと、現在の体液試料中の検体の濃度を示す濃度データを生成することとを行うように構成される、システム、が提供される。機械学習プロセスにおいてニューラルネットワークモデルを生成することは、第1の測定データセットを提供することであって、第1の測定データセットは、1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を示し、画像は、検体を含有する1つ以上の第1の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す、第1の測定データセットを提供することを含む。第1の測定データセットは、それぞれが第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスによって記録される画像から導出される第1の色情報を表し、複数のデバイスに、デバイスにおける画像記録及び画像データ処理のために適用される種々のデバイス構成が提供される。ニューラルネットワークモデルは、第1の測定データセットから選択される訓練データによって訓練される。
更に、1つ以上のプロセッサを有するコンピュータに搭載されると上述の方法を行うように構成されるプログラムコードを含むコンピュータプログラム製品が、提供される。
機械学習プロセスにおいて生成されるニューラルネットワークモデルは、(現在の)体液試料中の検体の濃度の改善された特定を可能にする。それぞれが第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数の種々のデバイスによって記録される画像から導出される第1の色情報を表す第1の測定データセットに基づいて生成されるニューラルネットワークモデルを有することによって、訓練及び試験の後に、体液試料中の検体の濃度を特定するために種々のデバイスに適用又は実装することができるニューラルネットワークモデルが得られ、種々のデバイスは、それぞれのデバイスにおける画像記録及び画像データ処理のために適用される種々のデバイス構成を有する。
以前に生成されたニューラルネットワークモデルは、現在/第2の試験ストリップの目的の領域の画像から画像処理によって導出される現在/第2の色情報を示す現在又は第2の測定データセットを分析するために適用され、画像は、患者の現在/第2の体液試料、すなわち、検体を含有する試料を目的の領域に付加することに応答して、目的の領域の色変換を示す。そのようなプロセスにおいて、検体濃度は、試料が提供された患者に関して特定される。
本方法は、画像記録及び画像データ処理のために適用される種々のカメラデバイス及び種々の画像処理ソフトウェアのうちの少なくとも1つを有する複数のデバイスを含み得る。
記録される画像は、種々の光学画像記録条件で記録される画像を含み得る。
本方法は、更に、以下の、第1の分析アルゴリズムとは異なる第2の分析アルゴリズムを提供することと、現在の体液試料中の検体の濃度について、第2の分析アルゴリズムを用いて現在の測定データセットを分析することによって第1の推定値を特定することとを含み得る。第2の分析アルゴリズムは、パラメトリック多変数線形回帰などの、非機械学習に基づくアルゴリズムであり得る。そのような非機械学習に基づくアルゴリズムはまた、検体濃度を特定するための従来的なアルゴリズムとも称され得る。検体濃度の第1の推定値は、ニューラルネットワークモデルを用いた(更なる)分析に対する入力を提供し得る。あるいは、非機械学習に基づくアルゴリズムから導出される濃度の結果は、ニューラルネットワークモデルを適用することによって特定される検体濃度値のフェールセーフ試験において適用され得る。
特定することは、現在の体液試料中の検体の濃度の標的範囲を特定することを含み得る。検体濃度の実際の値を特定する代わりに、又はそのような特定に加えて、検体濃度値の標的範囲が特定され得る。
特定することは、第1の推定値及び第1の分析アルゴリズムによる現在の測定データセットの分析ことによって提供される濃度値を平均化することによって、平均化された濃度を特定することを含む。ニューラルネットワークモデル分析から得られた結果及び従来的なアルゴリズムに基づく分析から得られた結果は、平均化された値を特定することによって組み合わされる。
別の実施形態では、特定することは、第2の試料中の血中グルコース濃度を特定することを含み得る。
第1の測定データセット、第2の測定データセット、及び現在の測定データセットのうちの少なくとも1つは、それぞれ、1つ以上の試験ストリップの目的の領域について、測定期間にわたって記録される画像、すなわち、約0.1から約1.5秒の時間間隔で記録される連続画像から画像処理によって導出される、第1の色情報、第2の色情報、及び現在の色情報を表し得る。
第1の測定データセットが導出される画像は、1つ以上の第1の体液試料を1つ以上の試験ストリップの目的の領域に付加する前の目的の領域の画像を含み得る。同様に、追加又は代替として、現在の測定データセットが導出される画像は、現在の体液試料を現在の試験ストリップの目的の領域に付加する前の目的の領域の画像を含み得る。
例では、測定データが訓練データセット、検証データセット、及び試験データセットに分割されることが提供され得る。例えば、測定データの約60%は、訓練に使用され得(訓練データセット)、約20%は、検証に使用され得(検証データセット)、約20%は、試験に使用され得る(試験データセット)。p個抜きの交差検証又はk倍交差検証などの交差検証技法を用いることができる。訓練データセットは、測定データの層別化ランダムサンプリングを使用することによって作成され得る。層別化は、測定データを収集するために適用されるデバイスのタイプ及び測定データを収集している間に適用される実験のタイプのうちの少なくとも1つに基づいて実行され得る。測定データは、別個の部分集団(階層)に分割され、それぞれの階層は、種々のデバイスタイプ及び/又は種々の実験タイプに対応し得る。続いて、データは、それぞれの階層に関して別個にサンプリングされた後、訓練データセットを作成するために統合され得る。訓練データが、本質的にデバイスタイプ及び/又は実験タイプの完全な集団を表すことを確実にするために、そうすることが適用され得る。検証データセット(複数可)及び試験データセット(複数可)を、同様に作成することができる。
本方法の少なくとも1つに関して上記に開示される実施形態は、必要な変更を加えて、一方又は両方のシステムに適用され得る。
更なる実施形態の説明
以下において、実施形態は、例として、図を参照して説明される。
フィードフォワード型人工ニューラルネットワーク(ANN)の図による表示である。 供与した試験ストリップの色変化に基づいて血中グルコース値を予測するための方法の図による表示である。 試験ストリップの画像の図による表示である。 特徴変換を適用することによって特徴表に由来する特徴から新しい特徴を作成するプロセスの図による表示である。 例示的な新しい特徴の相関挙動の図による表示である。 例示的な新しい特徴の相関挙動の更なる図による表示である。 例示的な新しい特徴の相関挙動の更なる図による表示である。 訓練しようとするANNモデルのアーキテクチャの図による表示である。 実際の血中グルコースレベルと対比した予測した血中グルコース値の性能を示すParkesエラーグリッドを示す図である。 実際の血中グルコースレベルと対比した予測した血中グルコース値の性能を示す、別のParkesエラーグリッドの図である。 種々のタイプの従来的なアルゴリズムとANNモデルとの組合せを図による表示である。 従来的なアルゴリズム予測をその入力のうちの1つとして使用するANNモデルの予測を示すParkesエラーグリッドの図である。 従来法とANNとを組合せたアルゴリズムの別の実施形態の図による表示である。 従来法及びANNのアプローチの性能を比較するための3つのParkesエラーグリッドの図である。
以下に、体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するための方法の実施形態を、更に詳細に開示する。ソフトウェア実装モジュールが生成された後、さらなる方法において、試験ストリップに付加された体液試料中の検体の濃度を特定するために、それを、実験結果を分析するためのモバイルデバイスなどの種々のデバイスで使用することができ、試験ストリップは、試料をストリップ上の試験領域に付加することに応答して、試験領域が色変化を示す。
ソフトウェア実装モジュールを生成するための方法は、1つ以上のデータ処理デバイスにおいて実行される。1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を表す第1の測定データセットが、提供される。例えば、血液試料を試験ストリップに付加してもよく、試験ストリップは、それに応答して、目的の領域(試験領域)の色変化を示す。そのような色変化は、試験領域に供与された試料中の血中グルコース濃度に依存し得る。目的の領域について捕捉された画像は、検体を含有する1つ以上の第1の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す。画像は、モバイルデバイスなどの複数のデバイス、、例えば、携帯電話又はタブレットコンピュータによって記録される。それぞれのデバイスは、第1の色情報を生成するための画像記録及び画像データ処理を行うように構成され、複数のデバイスに、デバイスにおける画像記録及び画像データ処理のために適用される種々のソフトウェア及び/又はハードウェアデバイス構成が提供される。例えば、デバイスに、画像を捕捉するために使用される種々のタイプのカメラが提供され得る。また、種々のソフトウェア構成、具体的には、捕捉された画像を処理するためにデバイスに適用される種々のソフトウェアアプリケーションが、デバイスに提供され得る。
ニューラルネットワークモデルは、ニューラルネットワークモデルを提供すること、及び第1の測定データセットから選択される訓練データによってニューラルネットワークモデルを訓練することを含む、人工ニューラルネットワークを適用する機械学習プロセスにおいて生成される。ニューラルネットワークモデルを表す第1の分析アルゴリズムを含む、ソフトウェア実装モジュールが、提供される。ソフトウェア実装モジュールは、1つ以上のプロセッサを有するデータ処理デバイスに搭載されると、1つ以上の試験ストリップの目的の領域の画像から画像処理によって導出される第2の色情報を示す第2の測定データセットを分析することによって、第2の体液試料中の検体の濃度を特定するように構成され、画像は、検体を含有する第2の体液試料を目的の領域に付加することに応答して、目的の領域の色変換を示す。したがって、以下に更に詳細に説明されるように、ニューラルネットワークモデルが生成された後、それは、現在の試料とも称される場合があり、ニューラルネットワークモデルの生成後にそれを使用して特定しようとする体液試料である、第2の試料の結果を分析するために、適用されることになる。ソフトウェア実装モジュールを含むソフトウェアアプリケーションは、携帯電話又は他のモバイルデバイスなどの分析デバイスに搭載される。試験ストリップの分析は、検体の濃度を特定するためのソフトウェアアプリケーションを実行することによって行われる。
図1は、そのようなものとして知られているフィードフォワード型人工ニューラルネットワーク(ANN)10の概略的な図による表示を示す。典型的なフィードフォワード型ANNにおいて、情報は、一方向に流れる。入力特徴11a、11b、11c、…、11xは、入力層12のノード(又は人工ニューロン)12a、12b、12c、…、12xにフィードされる。ノード12a、12b、12c、…、12xの数は、理想的には、根底にあるデータセット内の特徴の数に等しくあるべきである。入力層12は、単純に、入力特徴11a、11b、11c、…、11xを受信し、入力特徴11a、11b、11c、…、11xを接続13を介して隠れ層14に渡す。
隠れ層14は、ノード14a、14b、…、14yを含む。隠れ層14のノードの数は、入力層12及び出力層16のノードの数に依存する。入力層12及び隠れ層14のノードの数は、等しい場合も等しくない場合もある。それぞれのノード14a、14b、…、14yにおいて、そのそれぞれの入力に変換が適用される。続いて、変換された値は、接続15を介して出力層16に渡される。ANN 10が訓練されると、高い予測値を提供するノード12a、12b、12c、…、12x、14a、14b、…、14yは、より高い程度に重み付けされる。ここでは、それぞれの接続13、15は、より高い重みを受ける。
出力層16は、根底にある問題を解決するのに所望される情報を提供する。そのノード16aの数は、目下の問題に依存する。問題が、例えば、対象物を、4つのクラスのうちの1つに分類することである場合、出力層16は、4つのノード(図示せず)からなる。問題が回帰となる場合、出力層16は、単一のノード16aからなる。
以下において、体液試料を付加することに応答した試験ストリップの試験領域における色変化に基づいて、測定から体液試料中の検体の濃度を特定するためにANNを適用することに関する例が、開示される。例えば、血中グルコースレベルが特定され得る。図2は、本方法の例の工程を概略的に示す。
測定の過程において、試験ストリップの画像系列201は、種々のデバイスを使用して第1の画像データ収集工程202において捕捉され、それぞれのデバイスは、画像の取得及び画像データの処理を行うように構成されている。デバイスは、携帯電話若しくはモバイル電話タイプ又はタブレットコンピュータなどの携帯デバイスであり得る。
そのようなものとして知られているように、画像を取得するために、体液試料、例えば、血液試料が、試験ストリップの試験領域に付加される。試料の付加に応答して、試験領域は、色変化を示すこととなり、その色変化が、画像(複数可)を取得することによって検出されることとなる。画像は、血中グルコースレベルなどの体液試料中の検体の濃度を特定するための分析プロセスにおいて、処理されることとなる。
画像は、体液試料を特定するために取得されるが、種々の測定条件は、例えば、種々の温度、相対湿度値、照度値及び/又はヘマトクリットの組合せによって、画像を捕捉するために存在し得る。他の値もまた、使用され得る。例では、種々の気候条件に関して、例えば、5°C間隔で5°Cから30°Cの温度値、及び、例えば、10%間隔で15%から85%の相対湿度値が適用され得る。種々の気候条件のセットを形成するために、相対湿度値のそれぞれを温度値のそれぞれと組み合わせて提供されてもよい。あるいは、ある特定の相対湿度/温度の組合せは関係性が低いため、ある特定の相対湿度値だけを温度値のそれぞれと組み合わせる。
以下の測定条件が、気候研究における温度湿度のデータセットに適用され得る:
温度(°C) 相対湿度(%)
5 45
10 15
10 45
10 85
15 45
25 45
30 45
30 85
それぞれの試験ストリップについて、画像系列201が、測定期間に捕捉される。例えば、約40秒間、試験ストリップの画像30が、0.5秒ごとに捕捉される(画像30の図による表示については、図3を参照されたい)。試験ストリップごとのそれぞれの画像系列201は、ブランク試験ストリップ(付加される血液供与なし又は試料なしの試験ストリップ)の画像から開始する。後続の画像30は、血液試料を付加した後に捕捉される。したがって、試験ストリップの色の変化は、それぞれの画像系列201内で完全に捕捉される。次に、画像系列201は、データベースに保存される。第1の画像の捕捉と第2の画像の捕捉との間に、ユーザが血液供与を試験ストリップに付加するのを可能にする更なる時間遅延が提供されてもよい。
画像を、複数の種々の携帯電話又はモバイル電話で捕捉し、それぞれの携帯電話には、画像の捕捉及び画像データの処理を行うために、個々のカメラデバイス、並びに画像処理パラメーターRGGB、色変換マトリックス及び色調マッピング曲線のソフトウェア構成が提供されている。
測定で取得された画像は、濃度を特定する必要がある検体を含有する体液試料を付加することに応答して、試験領域の色変化に関する色情報を表す(測定された)画像データを提供する。次に、画像データは、現在の試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するために使用される。ANNが提供され、測定された画像データから取得された訓練データセットに基づいて訓練される。
次の工程203において、図2及び図3を参照すると、データベースに保存され得る画像系列201から導出される画像データは、画像系列201のそれぞれの画像30の目的の領域31を特定するために処理される。目的の領域31は、試験ストリップ30a上に付加された体液試料(例えば、血液試料)を示す画像の部分(標的フィールド32)及び標的フィールド32の周囲の四角形33からなる。4つの区画からなる、標的フィールド32の外側かつ四角形33の内側の空間は、ホワイトフィールド34と呼ばれる。目的の領域(試験領域)31は、標的フィールド32及びホワイトフィールド34の画素色値を捕捉することによって、画像処理ソフトウェアによって検出される。それぞれの画素色は、例えば、RGBでエンコードされていてもよい。代替的な色空間及び色モデル、例えば、CIE L*a*b*、CIE 1931 XYZ、CMYK、及びHSVもまた、画素色をエンコードするために用いることができる。代替的な色空間及び代替的な色空間への色変換の使用により、信号品質を増強することができ、より単純かつ/又はより正確な予測アルゴリズムをもたらすことができる。
信号精度を改善するために、未加工の画素データを変換することを提供してもよい。以下のタイプの色変換又はそれらの組合せを用いることができる:
-未加工のR、G及びBチャネルの平均を、血液が付加される標的フィールド32から計算する;
-R及びGチャネルを、標的フィールド32から得られたBによって正規化する(正規化は、R及びGチャネル値のそれぞれを、対応するB値で除すことによって行う);
-標的フィールド32から得られた、RチャネルとBチャネルとの間のデルタ、及びGチャネルとBチャネルとの間のデルタを計算する;
-標的フィールド32から得られたR、G、Bチャネルを、ホワイトフィールド34から得られたR、G、Bチャネルによって正規化する;
-標的フィールド32の標的ホワイト正規化R、G、Bチャネルと、参照フィールドのホワイト正規化R、G、Bチャネルとの間の比を計算する。
この色変換のリストは、網羅的ではない。種々の特徴のさらなる色変換が提供され得る。
画像取得のために適用されるデバイス、例えば、複数の携帯電話又はモバイル電話に対して、種々の較正方法を用いることができる。種々の携帯電話タイプ間での色調整スキームの相違は、補正されないままの場合、多様なグルコース予測性能をもたらすこととなる。出力を共通の参照スケールに標準化する携帯電話タイプに特異的な較正曲線を生成するために、様々なアプローチを使用することができる。一方で、既知の色度の領域を含む色参照カードを使用して、オフライン較正を行うことができる。そのようなオフライン較正は、それぞれの測定の前に行う必要はない。任意の測定をユーザが行う前に、オフライン較正を一度行うことが、提供され得る。あるいは、オフライン較正は、周期的な時間間隔で行われる。一方で、色参照を使用したオンライン較正を用いることができる。これには、試験ストリップに供与した後、事前に指定した時間に、参照カード画像が、試験フィールドとともに捕捉される。試験ストリップの画像は、供与前及び供与後に捕捉される。試験ストリップは、さらに、オンライン較正のための事前に印刷された参照フィールドを有してもよい。
標的フィールド32が位置付けられると、標的フィールド32内の領域、例えば、標的フィールド32の内側のわずかに小さい半径を有する円から得られたRGB画素値が、それぞれのチャネルについて抽出され、平均化されて、R、G、及びBチャネルのそれぞれの平均値が得られる。したがって、標的フィールド32の境界部における望ましくない画素を平均化することが回避され得る。
続いて、それぞれの色チャネルの平均値が、参照グルコース値、画像ID、研究名、エラーコードなどのさらなる関連データ、温度、湿度、ヘマトクリット又はデバイスモデル番号などの研究関連情報と一緒にデータ表に保存される。データ表は、更なる処理のために、例えば、カンマ区切り値(csv)ファイル又はMATLAB matファイルとして保存され得る。
特定のモデリング目的については、データ表の必ずしも全ての列が関連するわけではない。したがって、モデリングに必要とされる列のみを含めることによって、より小さな表、特徴表が、データ表から生成される。特徴表の4つの行を有する例示的な表を表1に示す。
Figure 0007520011000001
特徴表は、標的フィールドの線形平均RGBチャネル値(tfRlin、tfGlin、tfBlin)及びホワイトフィールドの値(wfRlin、wfGlin、wfBlin)の両方を含む。線形化は、スマートフォンの色調マップ曲線を1:1直線に設定することによって達成される。線形化は、種々のスマートフォンタイプにおいて種々のデフォルト色調マップ曲線を扱うために必要である。色調マップ曲線を設定しない場合、値間の関係性は、デフォルトの色調マップ曲線が非線形であることに起因して人工的に非線形となるであろう。平均化は、それぞれの領域(標的フィールド又はホワイトフィールド)のチャネル値の演算平均を取ることによって、それぞれのRGBチャネルについて別個に行われる。
特徴表は、更に、供与前の標的フィールドの線形平均RGBチャネル値(blankValueRtf、blankValueGtf、blankValueBtf)及びホワイトフィールドの値(blankValueRwf、blankValueRwf、blankValueRwf)を含む。
データが、非常に(部分的に)過剰露出していたか、不均一であったか、含んでいる画素が少なすぎたか、対応する画像が十分に鮮明でなかったか、又はこれらの組合せであったと判断された場合に、データは無効として評価され得る。無効データは、特徴表から除去され得る。特徴表は、同じ測定のすべての画像からの情報を含むわけではない。一般に、それぞれの画像系列201について、およそ80個の画像30が捕捉されるが、すべての画像30がモデリングに必要というわけではない。モデリングには、最後の画像及び最後の画像の前の10から19個の画像からのデータを用いることで十分であり得るか、又はそれが望ましい場合がある。最後の画像において、R又はGチャネルの傾きはゼロに近く、すなわち、供与後のある特定の時点において色動態が安定化され、色が、その時点から変化しないか又は最小限にしか変化しない。静止した色動態で画像を取得することにより、画像の比較性が増加し得る。
更に図2を参照すると、工程204において、特徴表のデータが、特徴操作に使用される。モデリングの最も重要な態様の1つは、モデルに適切な特徴を選択することである。血中グルコース値を予測することが目的であるため、参照血中グルコース値と強力な相関性を有する特徴を使用することが、より良好なモデルをもたらすと予測される。参照血中グルコース値は、確立された血中グルコース測定システムで特定されている。線形RGBチャネルは、参照グルコース値とある特定の程度の相関性を呈する。しかしながら、参照グルコース値とより強力な相関性を有する新しい特徴を作成することによって、結果は依然として改善することが可能である。そのような新しい特徴を作成することは、種々の携帯電話タイプ及び気候条件若しくは照明条件などの測定条件に関して、依存性を減少させることができるという点で、更に有益な場合がある。
これに関して、図4は、色変換などの特徴変換41を、特徴40に適用することによって、特徴表の特徴40から新しい特徴42を作成するプロセスの図による表示を示す。特徴40は、標的フィールドの線形平均RGBチャネル値(tfRlin、tfGlin、tfBlin)及び/若しくはホワイトフィールドのもの(wfRlin、wfGlin、wfBlin)、並びに/又は供与前のRGBチャネル値(blankValueRtf、blankValueGtf、blankValueBtf)、(blankValueRwf、blankValueRwf、blankValueRwf)を含み得る。
図5a及び図5bにおいて、特徴40の特徴変換41によって作成された例示的な新しい特徴42の相関挙動の描写が示される。グラフ51から56は、それぞれ、新しい特徴42のうちの1つ(x軸)の参照血中グルコース値(y軸)との相関挙動を示す。グラフ52における特徴「GRY」は、グレイスケール色値を指す。ある特定の特徴における接尾辞「N」は、正規化を指す。具体的には、グラフ53における「RGBN」は、「正規化されたRGB色」を意味する。種々のマーカー(○、+、◇)は、種々の実験タイプに対応している。描写されている新しい特徴42は、単純な未加工のRGB値よりも強い参照グルコース値との相関性を示す。
対照的に、図5cは、未加工のRGBチャネル値の参照血中グルコース値との相関挙動の描写を示す。グラフ57は、標的フィールドの線形平均Rチャネル値tfRlinを示す。グラフ58は、標的フィールドの線形平均Gチャネル値tfGlinを示す。グラフ57及び58は、より大きな値の散乱を示し、したがって、図5a及び図5bに示される新しい特徴42よりも弱い、参照血中グルコース値との相関性を示す。
図2を再び参照すると、後続の工程206において、ANNモデルが訓練され得る前に、特徴表におけるデータから、訓練、検証、及び試験セットが作成される。データが、訓練、検証、及び試験セットに分割されることが提供されてもよい。データのうちの60%が訓練に使用され、20%が検証に使用され、20%が試験に使用される。p個抜きの交差検証又はk分割交差検証などの交差検証技法もまた、用いることができる。訓練セットは、データの層別化ランダムサンプリングを使用して作成される。層別化は、スマートフォンタイプ及び実験タイプに基づいて行った。すなわち、データは、別個の部分集団(階層)に分割され、それぞれの階層は、種々のスマートフォンタイプ及び実験タイプに対応する。続いて、データは、それぞれの階層に関して別個にサンプリングされた後、訓練データを作成するために統合される。そうすることで、訓練データが、依然としてスマートフォンタイプ及び実験タイプの完全な集団を表すことが確実となる。検証セット及び試験セットを、同様に作成することができる。
検証セットは、過剰訓練/過剰適合を防止するために使用され、一方で、試験セットは、訓練中のモデルの独立した評価のために使用される。どのデータが訓練、試験、及び検証に使用されるかを示すために、入力データセットに、列が追加される。追加された列は、ANNを訓練するときに適切なサブセットを特定するのに重要である。
工程207において、ANNが訓練される。ANNは、種々の測定条件が訓練セットに表示され、モデルに含まれ得るように、種々の測定条件で訓練される。種々のスマートフォンタイプがモデリングに含まれることもまた、提供され得る。ANNの訓練は、MATLABなどの数値計算環境において行うことができる。性能の向上のために、コンパイルしたプログラム言語もまた利用され得る。図6は、訓練しようとするANNモデル60の例示的なアーキテクチャの図による表示を示す。図6のアーキテクチャは、2つの隠れ層62、63を含む。あるいは、問題の複雑さに応じて、2つを上回る隠れ層からできた単一の隠れ層を用いることができる(図示せず)。入力値61は、隠れ層62へと送られる。隠れ層62の出力は、隠れ層63に送られる。隠れ層63の出力は、次いで、出力層64へと送られ、出力値65をもたらす。出力値65は、予測血中グルコース値に対応する。重み係数62a、62b、63a、63b、64a、及び64bは、適切な血中グルコースモデルの訓練中に最適化される。
早期停止などの規則化方法を使用して、過剰訓練を防止することができる。例えば、最大12回の反復を、モデル60の訓練に許容することが提供され得る。エポックの最大数は、例えば、1000に設定することができる。種々の初期化点を有する複数のモデル60を訓練し、それらの性能メトリクスは、後のモデル選択のために、csvファイルなどの表ファイルに保存される。すべてのモデル60が作成され、性能メトリクスが評価されると、最良性能のモデルが、最終的な訓練済みモデルとして選択される。
図2に戻って参照すると、工程208において、訓練済みモデルが、特徴の双曲線正接と訓練済みANNから得られる最適化された係数との線形結合からなるニューラルネットワーク式を使用して構築される。訓練済みニューラルネットワークモデルを使用することによって、血中グルコース値が特定される(工程209)。続いて、特定された血中グルコース値が、更なる処理のために出力される(工程210)。
図7及び図8は、それぞれ、全データセットにおける、実際の血中グルコース値と対比した、特定された血中グルコース値の性能を示す、Parkesエラーグリッドを示す。Parkesエラーグリッド(コンセンサスエラーグリッド)は、定量的診断において種々のデータを比較するための周知のグラフィックツールである(Parkes et al.,Diabetes Care 23:1143-1148,2000)。それぞれのy軸は、予測血中グルコース値に対応し、それぞれのx軸は、実際の血中グルコース値に対応する。それぞれのエラーグリッドは、種々のエラー領域に対応する種々のゾーンAからDに分割される。ゾーンA内の二分岐線71、81からの逸脱は、低いエラーに対応する。ほとんどの値がゾーンA内にあることが望ましい。ゾーンBは、中等度のエラーに対応し、ゾーンCは、患者の処置に許容できない大きなエラーに対応し、ゾーンDは、過剰に大きなエラーに対応する。図7において、種々のマーカーは種々の実験タイプに対応し、図8において、種々のマーカーは種々のスマートフォンタイプに対応する。図7及び図8から見ることができるように、予測血中グルコース値は、種々の携帯電話タイプ及び種々の実験タイプの両方に関して、合理的に十分に実際の血中グルコース値に対応している。
表2は、従来法又は非ANNアルゴリズム(パラメトリック多変数線形回帰)の血中グルコース値が、種々のParkesエラーグリッドゾーンAからEに入る頻度を、ANNモデルアプローチと比較して示す。ゾーンA及びB内の値は、許容可能とみなされ、ゾーンCからE内の値は、許容不可能から危機的とみなす。従来法アルゴリズム及びANNモデルの両方を、コーディングデータセットM1及びM2で訓練した。続いて、不明な携帯電話タイプ(コーディングデータセットM4、M5、及びM6)を評価した。コーディングデータセットM1からM5は、標準的な測定ステーションにおいて標準的な条件(温度=24°C、湿度=45%)下で特定される研究室データから派生し、ヘキソキナーゼグルコース参照値を含む。環境及び取扱いの影響は、最小限に抑えられている。コーディングデータセット当たり5個の種々のタイプの携帯電話を用いた。したがって、訓練は、10個の種々の携帯電話タイプを使用して行った。このようにして生成されたアルゴリズムに、続いて、不明な3×5=15個の種々の携帯電話タイプのデータを提供した。
Figure 0007520011000002
表2から見ることができるように、ANNモデルは、不明な携帯電話タイプに関して、従来法アルゴリズムよりも、血中グルコース値の予測性能が良好である。重要なことに、ANAモデルからの値で、血中グルコースレベルの誤分類に対応する許容できないゾーンCからEに入るものはない。
血中グルコース予測の更なる例では、例えば、多項式適合などの従来法アルゴリズム91を、ANNモデル92と組み合わせて使用することができる。図9は、使用することができる種々のタイプの組合せの図による表示を示す:
a)従来法アルゴリズム91から得られた予測93は、ANNモデル92への入力(特徴)として使用することができる;
b)ANNモデル92から得られた予測94は、従来法アルゴリズム91への入力として使用することができる;並びに
c)従来法アルゴリズム91及びANNモデル92の両方を使用することができ、両方のアルゴリズムから得られた予測93、94における相違は、誤った予測を排除するためのフェールセーフとして使用することができる。
図10は、従来法アルゴリズム予測をその入力のうちの1つとして使用するANNモデルの予測を示すParkesエラーグリッドを示す。
図11は、従来法とANNモデルとを組み合わせたアルゴリズム110の別の実施形態の図による表示を示す。少なくとも2つの画像を含む画像系列201から、ある特定の特徴が抽出される(工程111)。これらの特徴を、次いで、動態アルゴリズムを使用してドライ(ブランク)値及び最終値についてモニタリングし、特定する(工程112)。
特徴を、次いで、従来的なアルゴリズム(工程113)及びANNモデル(工程114)で並行して処理し、血中グルコース値予測を得る(工程115)。該当する場合には、エラーフラグもまた提供され得る。
図12は、従来法及びANNモデルのアプローチの性能を比較するための3つのParkesエラーグリッド120、121、122を示す。エラーグリッド120については、従来法アルゴリズムのみを用い、エラーグリッド121については、ANNモデルのみを用いた。エラーグリッド120及び121において見ることができるように、特徴に基づくANNモデルの測定性能は、従来法アルゴリズムのものよりも良好である。エラーグリッド122は、ANNモデルのみに頼らない理由を示す。ここでは、試験例として、ANNを、450mg/dl未満の血中グルコース値でのみ訓練した。したがって、訓練範囲のうち試料122a、122bは、重度に誤分類されている。ANNに対する任意の予測できない入力データが、誤った血中グルコース結果をもたらすことを確実にするために、従来法で特定される血中グルコース値を、ANN血中グルコース結果のフェールセーフとして使用することができる。

Claims (13)

  1. 体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するための方法であって、前記方法は、1つ以上のデータ処理デバイスにおいて、以下の:
    -第1の測定データセットを提供する工程ここで前記第1の測定データセットは、1つ以上の試験ストリップ(30a)の目的の領域(31)の画像から画像データ処理によって導出される第1の色情報を表し、前記画像は、
    -検体を含有する1つ以上の第1の体液試料を前記目的の領域(31)に付加することに応答して、前記目的の領域(31)の色変換を示し、
    -それぞれが前記第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスであって、前記デバイスにおける画像記録及び画像データ処理のために適用される異なるソフトウェア及び/又はハードウェアデバイス構成が提供されている複数のデバイスによって記録され、
    -人工ニューラルネットワークを適用する機械学習プロセスにおいて、ニューラルネットワークモデルを生成する工程、ここで当該工程は、
    -前記ニューラルネットワークモデルを提供し、
    -前記第1の測定データセットから、訓練データ、較正データ、及び試験データを作成し;そして
    -前記訓練データによって、前記ニューラルネットワークモデルを訓練すること、
    を含み、ここで前記訓練データが、前記複数のデバイス及び実験タイプの完全な集合を代表し、そして
    -前記ニューラルネットワークモデルを表す第1の分析アルゴリズムを含むソフトウェア実装モジュールを生成する工程
    とを含み、
    前記ソフトウェア実装モジュールは、1つ以上のプロセッサを有するデータ処理デバイスに搭載されると、1つ以上の試験ストリップの目的の領域の画像から画像処理によって導出される第2の色情報を示す第2の測定データセットを分析することによって、第2の体液試料中の検体の濃度を特定するように構成され、前記画像は、前記検体を含有する前記第2の体液試料を前記目的の領域に付加することに応答して、前記目的の領域の色変換を示す、方法。
  2. 体液試料中の検体の濃度を特定するための方法であって、前記方法は、1つ以上のデータ処理デバイスにおいて、以下の:
    -現在の試験ストリップ(30a)の目的の領域(31)の画像から画像処理によって導出される現在の色情報を示す現在の測定データセットを提供する工程、ここで前記画像は、検体を含有する現在の体液試料を前記目的の領域(31)に付加することに応答して、前記目的の領域(31)の色変換を示し、
    -人工ニューラルネットワークを適用する機械学習プロセスにおいて生成されるニューラルネットワークモデルを表す第1の分析アルゴリズムを含む、ソフトウェア実装モジュールを提供する工程
    -前記現在の体液試料中の前記検体の濃度を特定する工程であって、前記第1の分析アルゴリズムによって前記現在の測定データセットを分析することを含む、前記工程、及び
    -前記現在の体液試料中の前記検体の濃度を示す、濃度データを生成する工程
    を含み、
    前記機械学習プロセスにおける前記ニューラルネットワークモデルの生成は、
    -第1の測定データセットを提供すること、ここで、前記第1の測定データセットは、
    -1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を示し、ここで前記画像は、検体を含有する1つ以上の第1の体液試料を前記目的の領域に付加することに応答して、前記目的の領域の色変換を示し、
    -それぞれが前記第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスであって、前記デバイスにおける画像記録及び画像データ処理のために適用される異なるデバイス構成が提供されている前記複数のデバイスによって記録される画像から導出される第1の色情報を表し、
    -前記第1の測定データセットから、訓練データ、較正データ、及び試験データを作成すること;そして
    前記訓練データによって、前記ニューラルネットワークモデルを訓練すること、ここで前記訓練データは、複数のデバイス及び実験タイプの完全な集合を代表する、
    を含む、方法。
  3. 画像記録及び画像データ処理のために適用される異なるカメラデバイス及び異なる画像処理ソフトウェアのうちの少なくとも1つを有する前記複数のデバイスを含む、請求項1又は2に記載の方法。
  4. 記録される前記画像は、異なる光学画像記録条件で記録される画像を含む、請求項1から3のいずれか一項に記載の方法。
  5. -前記第1の分析アルゴリズムとは異なる、第2の分析アルゴリズムを提供する工程、及び
    -前記現在の体液試料中の前記検体の濃度について、前記第2の分析アルゴリズムを用いて前記現在の測定データセットを分析することによって、第1の推定値を特定する工程
    を更に含む、請求項2から4のいずれか一項に記載の方法。
  6. 前記特定は、前記現在の体液試料中の前記検体の濃度について、標的範囲を特定することを含む、請求項5に記載の方法。
  7. 前記特定は、前記第1の推定値及び前記第1の分析アルゴリズムによる前記現在の測定データセットを分析することによって提供される濃度値を平均化することによって、平均化された濃度を特定することを含む、請求項5又は6に記載の方法。
  8. 前記特定は、前記第2の試料中の血中グルコースの濃度を特定することを含む、請求項2から7のいずれか一項に記載の方法。
  9. 前記第1の測定データセット、前記第2の測定データセット、及び現在の測定データセットのうちの少なくとも1つは、それぞれ、前記1つ以上の試験ストリップの前記目的の領域について測定期間にわたって記録される画像、すなわち、約0.1から約1.5秒の時間間隔で記録される連続画像から画像処理によって導出される第1の色情報、第2の色情報、及び現在の色情報を表す、請求項1から8のいずれか一項に記載の方法。
  10. 前記画像は、前記1つ以上の第1の体液試料を前記目的の領域に付加する前の前記目的の領域の画像を含む、請求項1から9のいずれか一項に記載の方法。
  11. 体液試料中の検体の濃度を特定するように構成されるソフトウェア実装モジュールを生成するためのシステムであって、前記システムは、1つ以上のデータ処理デバイスを備え、前記1つ以上のデータ処理デバイスは、以下の:
    -第1の測定データセットを提供する工程、ここで前記第1の測定データセットは、1つ以上の試験ストリップ(30a)の目的の領域(31)の画像から画像データ処理によって導出される第1の色情報を表し、前記画像は、
    -検体を含有する1つ以上の第1の体液試料を前記目的の領域(31)に付加することに応答して、前記目的の領域(31)の色変換を示し、
    -それぞれが前記第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスであって、前記デバイスにおける画像記録及び画像データ処理のために適用される異なるソフトウェア及び/又はハードウェアデバイス構成が提供されている前記複数のデバイスによって記録され、
    -人工ニューラルネットワークを適用する機械学習プロセスにおいて、ニューラルネットワークモデルを生成する工程であって、以下の:
    -前記ニューラルネットワークモデルを提供すること、
    -前記第1の測定データセットから、訓練データ、較正データ、及び試験データを作成すること;そして
    -前記練データによって、前記ニューラルネットワークモデルを訓練すること、ここで前記訓練データは、複数のデバイス及び実験タイプの完全な集合を代表する、
    を含む、前記工程、及び
    -前記ニューラルネットワークモデルを表す第1の分析アルゴリズムを含むソフトウェア実装モジュールを生成する工程
    とを行うように構成され、前記ソフトウェア実装モジュールは、1つ以上のプロセッサを有するデータ処理デバイスに搭載されると、1つ以上の試験ストリップの目的の領域の画像から画像処理によって導出される第2の色情報を示す第2の測定データセットを分析することによって、第2の体液試料中の検体の濃度を特定するように構成され、前記画像は、前記検体を含有する前記第2の体液試料を前記目的の領域に付加することに応答して、前記目的の領域の色変換を示す、システム。
  12. 体液試料中の検体の濃度を特定するためのシステムであって、前記システムは、1つ以上のデータ処理デバイスを備え、前記1つ以上のデータ処理デバイスは、以下の:
    -現在の試験ストライプ(30a)の目的の領域(31)の画像から画像処理によって導出される現在の色情報を示す現在の測定データセットを提供する工程、ここで、前記画像は、検体を含有する現在の体液試料を前記目的の領域(31)に付加することに応答して、前記目的の領域(31)の色変換を示し、
    -人工ニューラルネットワークを適用する機械学習プロセスにおいて生成されるニューラルネットワークモデルを表す第1の分析アルゴリズムを含む、ソフトウェア実装モジュールを提供する工程、
    -前記第1の分析アルゴリズムによって前記現在の測定データセットを分析することを含む、前記現在の体液試料中の前記検体の濃度を特定する工程、及び
    -前記現在の体液試料中の前記検体の濃度を示す、濃度データを生成する工程
    とを行うように構成され、
    前記機械学習プロセスにおける前記ニューラルネットワークモデルの生成は、
    -第1の測定データセットを提供することであって、前記第1の測定データセットは、
    -1つ以上の試験ストリップの目的の領域の画像から画像データ処理によって導出される第1の色情報を示し、前記画像は、検体を含有する1つ以上の第1の体液試料を前記目的の領域に付加することに応答して、前記目的の領域の色変換を示し、
    -それぞれが前記第1の色情報を生成するための画像記録及び画像データ処理を行うように構成される複数のデバイスによって記録される画像から導出される第1の色情報を表し、前記複数のデバイスに、前記デバイスにおける画像記録及び画像データ処理のために適用される異なるバイス構成が提供され、第1の測定データセットを提供することと、
    -前記第1の測定データセットから、訓練データ、較正データ、及び試験データを作成すること;そして
    -前記練データによって、前記ニューラルネットワークモデルを訓練すること、ここで、前記訓練データは、複数のデバイス及び実験タイプの完全な集合を代表する、
    とを含む、システム。
  13. 1つ以上のプロセッサを有するコンピュータに搭載されると請求項1から10のうちの少なくとも1つに記載の方法を行うように構成されるプログラムコードを含む、コンピュータプログラム製品。
JP2021532484A 2018-12-10 2019-12-09 体液試料中の検体の濃度を特定するための方法及びシステム、並びにソフトウェア実装モジュールを生成するための方法及びシステム Active JP7520011B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201862777360P 2018-12-10 2018-12-10
US62/777,360 2018-12-10
EP18215541.6 2018-12-21
EP18215541.6A EP3667301B1 (en) 2018-12-10 2018-12-21 Method and system for determining concentration of an analyte in a sample of a bodily fluid, and method and system for generating a software-implemented module
PCT/EP2019/084115 WO2020120349A1 (en) 2018-12-10 2019-12-09 Method and system for determining concentration of an analyte in a sample of a bodily fluid, and method and system for generating a software-implemented module

Publications (3)

Publication Number Publication Date
JP2022514826A JP2022514826A (ja) 2022-02-16
JPWO2020120349A5 JPWO2020120349A5 (ja) 2022-12-09
JP7520011B2 true JP7520011B2 (ja) 2024-07-22

Family

ID=64901409

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021532484A Active JP7520011B2 (ja) 2018-12-10 2019-12-09 体液試料中の検体の濃度を特定するための方法及びシステム、並びにソフトウェア実装モジュールを生成するための方法及びシステム

Country Status (12)

Country Link
US (2) US11928814B2 (ja)
EP (1) EP3667301B1 (ja)
JP (1) JP7520011B2 (ja)
KR (1) KR20210099575A (ja)
CN (1) CN113167738A (ja)
BR (1) BR112021011115A2 (ja)
CA (1) CA3120025A1 (ja)
ES (1) ES2910573T3 (ja)
MA (1) MA51798B1 (ja)
PL (1) PL3667301T3 (ja)
TW (1) TWI825240B (ja)
WO (1) WO2020120349A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116324406A (zh) * 2020-10-16 2023-06-23 株式会社钟化 自动判别系统、自动判别方法以及自动判别程序
CN113486900B (zh) * 2021-05-28 2024-06-07 杭州微策生物技术股份有限公司 一种用于poct的嵌入式实时图像采集处理系统
CN114145738B (zh) * 2022-02-10 2022-06-24 苏州百孝医疗科技有限公司 分析物浓度数据生成方法和装置、监测分析物水平的系统
WO2023152200A1 (en) 2022-02-11 2023-08-17 F. Hoffmann-La Roche Ag Methods and devices for determining the concentration of at least one analyte in a bodily fluid
IL314686A (en) * 2022-02-11 2024-10-01 F Hoffmann La Roche Ag Methods and instruments for performing analytical measurement
CN115598124B (zh) * 2022-11-03 2023-07-18 淮北师范大学 颜色去卷积水质检测方法
WO2024108597A1 (zh) * 2022-11-25 2024-05-30 深圳迈瑞生物医疗电子股份有限公司 一种干化学检测装置及方法
CN117723530A (zh) * 2023-11-24 2024-03-19 中国石油大学(华东) 可穿戴比色生物传感器及深度学习智能感知微系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002502045A (ja) 1998-02-03 2002-01-22 アデザ・バイオメデイカル・コーポレイシヨン ポイントオブケア診断システム
JP2011515680A (ja) 2008-03-17 2011-05-19 ネルソン,ランドール,ダブリュ. 糖尿病のためのバイオマーカーおよびアッセイ
US20160048739A1 (en) 2014-08-15 2016-02-18 Scanadu Incorporated Precision luxmeter methods for digital cameras to quantify colors in uncontrolled lighting environments
US20180211380A1 (en) 2017-01-25 2018-07-26 Athelas Inc. Classifying biological samples using automated image analysis
WO2018194525A1 (en) 2017-04-18 2018-10-25 Yeditepe Universitesi Biochemical analyser based on a machine learning algorithm using test strips and a smartdevice

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040092036A1 (en) * 2002-09-11 2004-05-13 Lattec I/S Device for analysing analyte compounds and use hereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002502045A (ja) 1998-02-03 2002-01-22 アデザ・バイオメデイカル・コーポレイシヨン ポイントオブケア診断システム
JP2011515680A (ja) 2008-03-17 2011-05-19 ネルソン,ランドール,ダブリュ. 糖尿病のためのバイオマーカーおよびアッセイ
US20160048739A1 (en) 2014-08-15 2016-02-18 Scanadu Incorporated Precision luxmeter methods for digital cameras to quantify colors in uncontrolled lighting environments
US20180211380A1 (en) 2017-01-25 2018-07-26 Athelas Inc. Classifying biological samples using automated image analysis
WO2018194525A1 (en) 2017-04-18 2018-10-25 Yeditepe Universitesi Biochemical analyser based on a machine learning algorithm using test strips and a smartdevice

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
A New Consensus Error Grid to Evaluate the Clinical Significance of Inaccuracies in the Measurement of Blood Glucose,Diabates Care,American Diabates Association,2000年08月01日,Volume 23, Number 8,pp. 1143-1148,doi: 10.2337/diacare.23.8.1143

Also Published As

Publication number Publication date
ES2910573T3 (es) 2022-05-12
US20240177304A1 (en) 2024-05-30
MA51798B1 (fr) 2022-01-31
US20210295515A1 (en) 2021-09-23
PL3667301T3 (pl) 2022-02-28
WO2020120349A1 (en) 2020-06-18
EP3667301B1 (en) 2021-12-01
JP2022514826A (ja) 2022-02-16
KR20210099575A (ko) 2021-08-12
MA51798A (fr) 2020-06-17
TW202032435A (zh) 2020-09-01
CN113167738A (zh) 2021-07-23
US11928814B2 (en) 2024-03-12
EP3667301A1 (en) 2020-06-17
CA3120025A1 (en) 2020-06-18
BR112021011115A2 (pt) 2021-08-31
TWI825240B (zh) 2023-12-11

Similar Documents

Publication Publication Date Title
JP7520011B2 (ja) 体液試料中の検体の濃度を特定するための方法及びシステム、並びにソフトウェア実装モジュールを生成するための方法及びシステム
Kuznetsov et al. Power considerations for the application of detrended fluctuation analysis in gait variability studies
CN110403611B (zh) 血液中糖化血红蛋白成分值预测方法、装置、计算机设备和存储介质
Liu et al. Simple model for encoding natural images by retinal ganglion cells with nonlinear spatial integration
Zhou et al. Six cornerstones for translational brain charts
Mouches et al. An exploratory causal analysis of the relationships between the brain age gap and cardiovascular risk factors
RU2808555C2 (ru) Способ и система для определения концентрации аналита в образце физиологической жидкости и способ и система для создания реализуемого программным обеспечением модуля
Neumann et al. Thermography based skin allergic reaction recognition by convolutional neural networks
WO2022190891A1 (ja) 情報処理システム及び情報処理方法
Kazi et al. Comparative study of machine learning methods on spectroscopy images for blood glucose estimation
JP2023545704A (ja) エクスポソーム臨床応用のためのシステム及び方法
Kolisnyk et al. Features of Telemedicine Technology for Monitoring of Patients with Atopic Dermatitis
Singh et al. Generalizability challenges of mortality risk prediction models: A retrospective analysis on a multi-center database. PLOS Digit Health 1 (4): e0000023
Babshet et al. Visual pattern complexity determination for enhanced usability in cognitive testing
Wang Towards Real-Time Predictive Health Monitoring from Sweat Wearables
Chen et al. General stain deconvolution of histopathology images with physics-guided deep learning
Raju et al. IDENTIFICATION OF PLANT LEAF DISEASE WITH SOLUTION USING CNN
Eissa et al. CODI: Enhancing machine learning-based molecular profiling through contextual out-of-distribution integration
KR20240014124A (ko) 인공지능과 신속진단키트 융복합 기반 심근 경색 예후 판별 장치 및 그 동작방법
KR20240014128A (ko) 인공지능-신속항원키트 융복합 기반 개인 또는 집단 면역 추이 예측 분석 장치 및 그 동작방법
KR20240014126A (ko) 인공지능-신속진단키트 융복합 기반 소변 분석 장치 및 그 동작방법
Poovarasi Optimized principal vectors-based co-kurtosis pca and recurrent attention unit-based Classifier for optimal cardiac disease prediction in big data
KR20240014118A (ko) 체외 진단 키트의 시각 인공지능 진단 기반 의료 정보 서비스 제공 장치 및 그 동작 방법
KR20240014125A (ko) 인공지능-신속진단키트 융복합 기반 약물 복용 여부 검출 장치 및 그 동작방법
Issaev Robust image-to-image translation tool for fibrotic quantification of whole-slide images

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210811

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221201

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230905

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20231205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240605

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240709

R150 Certificate of patent or registration of utility model

Ref document number: 7520011

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150