JP2023164793A - サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法 - Google Patents

サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法 Download PDF

Info

Publication number
JP2023164793A
JP2023164793A JP2023124217A JP2023124217A JP2023164793A JP 2023164793 A JP2023164793 A JP 2023164793A JP 2023124217 A JP2023124217 A JP 2023124217A JP 2023124217 A JP2023124217 A JP 2023124217A JP 2023164793 A JP2023164793 A JP 2023164793A
Authority
JP
Japan
Prior art keywords
image
camera
mobile device
test
calibration method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023124217A
Other languages
English (en)
Inventor
ベルク マックス
Berg Max
クライン ティモ
Klein Timo
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
F Hoffmann La Roche AG
Original Assignee
F Hoffmann La Roche AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by F Hoffmann La Roche AG filed Critical F Hoffmann La Roche AG
Publication of JP2023164793A publication Critical patent/JP2023164793A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/27Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands using photo-electric detection ; circuits for computing concentration
    • G01N21/274Calibration, base line adjustment, drift correction
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/8483Investigating reagent band
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/47Scattering, i.e. diffuse reflection
    • G01N21/4738Diffuse reflection, e.g. also for testing fluids, fibrous materials
    • G01N2021/4776Miscellaneous in diffuse reflection devices
    • G01N2021/478Application in testing analytical test strips

Landscapes

  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Molecular Biology (AREA)
  • Mathematical Physics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Investigating Or Analysing Materials By The Use Of Chemical Reactions (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

【課題】 サンプル中の分析物検出用のモバイルデバイス(114)のカメラ(112)の較正方法(110)が開示される。【解決手段】方法は、 a)(118)カメラ(112)を使用することによって少なくとも1つの対象物(116)の少なくとも1つの画像をキャプチャすることであって、キャプチャ中に、モバイルデバイス(114)の照明源(120)がオンになる、キャプチャすることと、 b)(122)ステップa)でキャプチャされた画像から、照明源(120)から発生し、対象物(116)によって反射される光の直接反射によって影響を受ける画像内の少なくとも1つの第1の領域(124)を決定することと、 c)(126)画像内で第1の領域(124)と本質的に重ならない少なくとも1つの第2の領域(128)を決定し、第2の領域(128)を後続の検出ステップにおける試験片(134)の試験フィールド(132)の位置の標的領域(130)として返すこと、を含む。【選択図】図2

Description

本出願は、サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法、および、モバイルデバイスのカメラを使用することによってサンプル中の分析物を検出するための検出方法に関する。本発明はさらに、本発明による方法を実行するためのプログラム手段を備えたコンピュータプログラムに関する。さらに、本発明はモバイルデバイスに関する。本発明による方法、コンピュータプログラムおよびモバイルデバイスは、1つまたは複数の体液中の1つまたは複数の分析物を定性的または定量的に検出するために、医療診断において使用され得る。しかしながら、本発明の他の応用分野が可能である。
医療診断の分野では、多くの場合、血液、間質液、尿、唾液、または他の種類の体液などの体液のサンプルから1つまたは複数の分析物を検出する必要がある。検出される分析物の例は、グルコース、トリグリセリド、乳酸塩、コレステロール、またはこれらの体液に通常存在する他の種類の分析物である。分析物の濃度および/または存在に応じて、必要に応じて適切な処理を選択することができる。
一般に、当業者に知られているデバイスおよび方法は、検出される分析物の存在下で、光学的に検出可能な検出反応などの1つまたは複数の検出可能な検出反応を実行することができる1つまたは複数の試験化学物質を含む試験要素を利用する。これらの試験化学物質に関しては、例えば、J.Hoenes et al.:The Technology Behind Glucose Meters:Test Strips、Diabetes Technology&Therapeutics、Volume 10、Supplement 1、2008、S-10~S-26が参照され得る。他の種類の試験化学物質が可能であり、本発明を実施するために使用されることができる。
分析測定、特に発色反応に基づく分析測定では、1つの技術的課題は、検出反応に起因する色の変化の評価にある。手持ち式の血糖値計などの専用分析装置を使用することに加えて、スマートフォンやポータブルコンピュータなどの一般的に入手可能な電子機器の使用は、近年ますます一般的になっている。国際公開第2012/131386号は、アッセイを実施するための試験装置を開示し、試験装置は、試薬を含む容器であって、試薬は、色またはパターンの変化を発現することにより、適用された試験サンプルに反応する、容器と、例えばプロセッサおよび画像キャプチャデバイスを含む携帯電話またはラップトップであるポータブルデバイスであって、プロセッサは、画像キャプチャデバイスによってキャプチャされたデータを処理し、適用された試験サンプルの試験結果を出力するように構成される、ポータブルデバイスと、を備えている。
国際公開第2014/025415号は、生物学的材料の色ベースの反応試験を実施するための方法および装置を開示している。この方法には、自動的に較正された環境内で、露光されていない機器と後で露光された機器のデジタル画像をキャプチャして読み取ることが含まれる。この機器には、固有識別(Unique Identification:UID)ラベル、画像カラー較正用の標準化された色のサンプルを提供する参照色バー(Reference Color Bar:RCB)、および化学試験パッド(Chemical Test Pads:CTP)のいくつかの試験固有のシーケンスが含まれている。この方法はさらに、画像内の機器の位置特定、UIDの抽出、RCBの抽出、および各画像内の複数のCTPの位置特定を含む。この方法は、CTPの画像ノイズをさらに低減し、RCBで実行された照明測定に従って画像を自動的に較正する。この方法では、CTP画像の色をManufacturer Interpretation Color Chart(MICC)の色と比較することにより、試験結果をさらに決定する。この方法は、これらの結果をグラフィカルモードまたは定量モードで表示する。
欧州特許出願公開第1801568号明細書は、生体液サンプル中の分析物濃度を測定するための試験片および方法を開示している。この方法は、カラーインジケータおよび参照色領域を絵で検出するために、試験片にカメラを配置することを含む。カメラと試験片との間の相対位置の測定値が決定され、目的の値の領域と比較される。測定値と目的の値との間に偏差があるうちは、試験片に対する偏向を低減するためにカメラが移動される。インジケータに割り当てられた画像領域は、カメラによって検出されるカラー画像に局在化される。分析対象物の濃度は、比較値によってサンプル内で決定される。
欧州特許第1963828号明細書は、生体液のサンプルに含まれる少なくとも1つの分析物の濃度を測定するための方法を開示しており、a)少なくとも1つの試験点と、少なくとも1つの時間インジケータと、白および/またはカラースケールを含む少なくとも1つの参照色範囲と、を有する試験片が調製され、b)流体サンプルが試験点および時間インジケータと接触させられ、c)分析物の濃度の関数として試験点にカラーインジケータが配置され、d)時間インジケータの色は、流体が試験点と接触した時間の関数として、少なくとも1つの分析物の濃度とは無関係に変化し、e)試験片上にカメラが配置され、f)カメラと試験片との間の相対位置の少なくとも1つの測定値が決定され、公称値範囲と比較され、g)測定値と公称値の範囲との間に不一致がある場合、不一致を減らすためにカメラを試験片に対して移動し、手順f)とg)とを繰り返し、h)少なくともカラーインジケータ、時間インジケータ、および参照色範囲が画像化されているカラー画像をカメラを使用して記録し、j)カラーインジケータ、時間インジケータ、および参照色範囲に関連する画像領域がカラー画像内に局在化され、これらの画像領域の色値が決定され、k)流体サンプルが試験点と接触されてから色画像が記録されるまでの期間は、時間インジケータに対して決定された色値に基づいて所定の参照値の助けを借りて決定され、l)サンプル中の分析物濃度は、カラーインジケータについて決定された色値および参照色に基づいて、ならびに期間に基づいて、事前に決定された比較値を使用して決定される。
モバイルコンピューティングデバイスを使用した分析測定の信頼性および精度は、一般に多くの技術的要因に依存する。具体的には、カメラを備えた膨大な数のモバイルデバイスが市場に出回っており、それらはすべて、分析測定のために考慮されなければならない異なる技術的および光学的特性を有している。例えば、国際公開第2007/079843号は、生体液のサンプルに含まれる分析物の濃度を測定するための方法を記載している。前記方法では、少なくとも1つの試験点と、白色および/またはカラースケールを包含する少なくとも1つの参照色セクションとを含む試験片が提供される。液体サンプルを試験点に接触させ、分析物の濃度に応じてカラーインジケータを試験点に配置する。試験片にカメラが配置される。カメラと試験片との間の相対位置について少なくとも1つの測定値が検出され、設定値の範囲と比較される。測定値が設定値の範囲から外れると、カメラを試験片に対して移動させてずれを低減する。少なくともカラーインジケータと参照色セクションとが表されているカラー画像が、カメラの助けを借りて検出される。カラーインジケータおよびカラーマッチングセクションに割り当てられた画像領域が配置され、前記画像領域の色値が決定される。サンプル中の分析対象物の濃度は、事前定義された比較値を使用して、色の値に基づいて決定される。欧州特許出願公開第3108244号明細書および国際公開第2015/120819号は、ケース、ケース内の試験片、および合わせ面を越えてモバイルコンピューティングデバイスの面まで延びる位置アンカーを含む試験片モジュールについて説明している。位置アンカーは、モバイルコンピューティングデバイスの表面の特徴に一致する形状を有する。
国際公開第2015/038717号は、流体の分析のためのシステムおよび方法を説明している。システムは、液体サンプルを受け入れるための不透明な容器と、カップが流体サンプルを含むときに表面が流体サンプルに沈められるカップの表面に配置された色変化インジケータと、表面に配置され、色変化インジケータの色が比較される色標準と、表面の景色を有するように容器の近くに配置され、プロセッサに結合されているカメラと、標準照明で表面を照らす人工光源と、人工光源と表面との間に配置された光拡散器と、を備えている。プロセッサは、カメラによってキャプチャされた画像を受信し、色変化インジケータから色値を抽出し、色標準に対して色値を標準化し、試験中の既知の試薬の標準化された量にさらされたときに色値を色変化インジケータの既知の色値に定量的に関連付ける。
分析測定を実行する目的でモバイルコンピューティングデバイスを使用することに伴う利点にもかかわらず、いくつかの技術的な課題が残っている。具体的には、測定の信頼性と精度を向上させ、保証する必要がある。主な問題は、光沢の存在と影響である。オンボード照明デバイスおよびモバイルコンピューティングデバイスの画像化デバイスを使用すると、最初に照明デバイスから発生した光が、少なくとも部分的に試験要素によって反射される可能性がある。そのように反射した光は、試験要素の試薬フィールドに形成された色の評価を妨げる可能性があり、光沢の存在と影響のために測定結果の信頼性および精度を保証できない。さらに、光沢の位置は、モバイルデバイスの照明デバイスとカメラとの相対的な位置に依存する可能性があり、市場で入手可能な膨大な数の異なるモバイルデバイスのために、モバイルデバイスの種類またはモデルによって異なる可能性がある。
したがって、家庭用電化製品のモバイルデバイスなどのモバイルデバイス、特にスマートフォンやタブレットコンピュータなどの分析測定専用ではない多目的モバイルデバイスを使用した分析測定の上記の技術的課題に対処する方法およびデバイスを提供することが望ましい。具体的には、測定の信頼性および精度を保証する方法および装置を提案する必要がある。
この問題は、独立クレームの特徴を備えた、サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法、モバイルデバイス法のカメラを使用することによってサンプル中の分析物を検出するための検出方法、コンピュータプログラムおよびモバイルデバイスによって対処される。従属請求項には、単独で、または任意の組み合わせで実現され得る有利な実施形態が記載されている。
以下において使用されるように、用語「有する」、「備える」もしくは「含む」またはそれらの任意の文法上の変形は、非排他的な方法で使用される。したがって、これらの用語は、これらの用語によって導入される特徴に加えて、この文脈で説明されている実在物(entity)にさらなる特徴が存在しない状況と、1つまたは複数の追加の特徴が存在する状況との双方を指す場合がある。例として、「AはBを有する」、「AはBを備える」および「AはBを含む」という表現は、いずれも、B以外に、他の要素がAに存在しない状況(すなわち、Aが単独で且つ排他的にBからなる状況)と、B以外に、要素C、要素CおよびD、さらに追加の要素など、1つまたは複数のさらなる要素が実在物Aに存在する状況を指す場合がある。
さらに、特徴または要素が1回以上存在することができることを示す「少なくとも1つ」、「1つ以上」という用語または同様の表現は、通常、それぞれの特徴または要素を導入するときに一度だけ使用されることに留意されたい。以下では、ほとんどの場合、それぞれの特徴または要素を指すとき、それぞれの特徴または要素が1回以上存在することができるという事実にもかかわらず、「少なくとも1つ」または「1つ以上」という表現は繰り返されない。
さらに、以下において使用されるように、用語「好ましくは」、「より好ましくは」、「特に」、「より特に」、「具体的に」、「より具体的に」または同様の用語は、代替の可能性を制限することなく、任意の特徴と併せて使用される。したがって、これらの用語によって導入される特徴は、任意の特徴であり、決して特許請求の範囲を制限することを意図したものではない。本発明は、当業者が認識するように、代替の特徴を使用することによって実施され得る。同様に、「本発明の実施形態において」または同様の表現によって導入される特徴は、本発明の代替の実施形態に関するいかなる制限もない、本発明の範囲に関するいかなる制限もない、およびそのような方法で導入された特徴を本発明の他の任意または非任意の特徴と組み合わせる可能性に関するいかなる制限もない任意の特徴であることを意図している。
第1の態様では、サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法が開示される。この方法は、一例として、所与の順序で実行され得る以下のステップを含む。しかしながら、別の順序も可能であることに留意されたい。さらに、1つまたは複数の方法ステップを1回または繰り返し実行することも可能である。さらに、2つ以上の方法ステップを同時にまたは適時に重複して実行することも可能であることに留意されたい。本方法は、記載されていない追加の方法ステップを含むことができる。
本方法は、以下のステップを含む。
a)カメラを使用することによって少なくとも1つの対象物の少なくとも1つの画像をキャプチャするステップであって、前記キャプチャ中に、モバイルデバイスの照明源がオンにされる、キャプチャするステップ。
b)ステップa)でキャプチャされた画像から、照明源から発生し、対象物によって反射される光の直接反射によって影響を受ける画像内の少なくとも1つの第1の領域を決定するステップ。
c)第1の領域と本質的に重ならない画像内の少なくとも1つの第2の領域を決定し、第2の領域を後続の検出ステップにおける試験片の試験フィールドの位置の標的領域として返すステップ。
本明細書で使用される「モバイルデバイス」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、限定されないが、モバイル電子デバイス、より具体的には、携帯電話またはスマートフォンなどのモバイル通信デバイスを指す場合がある。追加的または代替的に、以下でさらに詳細に概説されるように、モバイルデバイスはまた、少なくとも1つのカメラを有するタブレットコンピュータまたは別の種類のポータブルコンピュータを指す場合がある。
本明細書で使用される「試験片」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、限定されないが、色変化検出反応を実行するように構成された任意の要素またはデバイスを指すことができる。試験片は、特に、少なくとも1つの分析物を検出するための少なくとも1つの試験化学物質を含む試験フィールドを有し得る。例として、試験要素は、少なくとも1つの試験フィールドがそれに適用されるか、またはその中に統合された、少なくとも1つのキャリアなどの少なくとも1つの基板を含み得る。一例として、少なくとも1つのキャリアは帯状であり得、それにより、試験要素を試験片にする。これらの試験片は一般的に広く使用されており、入手可能である。1つの試験片は、単一の試験フィールド、またはその中に含まれる同一または異なる試験化学物質を有する複数の試験フィールドを有し得る。試験片には、少なくとも1つのサンプルが適用されていてもよい。
本明細書で使用される「試験フィールド」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、限定されないが、材料の1つまたは複数の層を有し、試験化学物質が含まれる試験フィールドの少なくとも1つの層を有する、円形、多角形または長方形の形状のフィールドなどに対するコヒーレントな量の試験化学物質を指す場合がある。他の層は、反射特性などの特定の光学特性を提供し、サンプルを拡散するための拡散特性を提供し、または細胞成分などのサンプルの粒子成分の分離などの分離特性を提供するために存在し得る。
本明細書で使用される「試験化学物質」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、化合物、または分析物の存在下で検出反応を実行するのに適した化合物の混合物などの複数の化合物を指すことがあり、検出反応は、光学的に、などのような特定の手段によって検出可能である。検出反応は、具体的には分析物特異的であり得る。試験化学物質は、この場合、具体的には、分析物の存在下で色が変化する色変化試験化学物質などの光学試験化学物質であり得る。色の変化は、特にサンプルに存在する分析物の量に依存する可能性がある。試験化学物質は、例として、グルコースオキシダーゼおよび/またはグルコースデヒドロゲナーゼなどの少なくとも1つの酵素を含み得る。さらに、1つまたは複数の色素、メディエータなどの他の成分が存在し得る。試験化学物質は一般に当業者に知られており、J.Hoenesらの:Diabetes Technology and Therapeutics、Vol.10、補足1、2008、pp.10-26を参照することができる。ただし、他の試験化学物質も使用可能である。
本明細書で使用される「分析物」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、特に、これらに限定されないが、検出および/または測定される1つまたは複数の特定の化合物および/または他のパラメータを指す場合がある。一例として、少なくとも1つの分析物は、グルコース、コレステロール、またはトリグリセリドのうちの1つまたは複数など、代謝に関与する化合物であり得る。追加的または代替的に、例えばpH値など、他の種類の分析物またはパラメータを決定することができる。
本明細書で使用される「サンプル中の分析物を検出する」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、限定されないが、任意のサンプル中の少なくとも1つの分析物の定量的および/または定性的決定を指すことがある。例えば、サンプルは、血液、間質液、尿、唾液または他の種類の体液などの体液を含み得る。一例として、分析測定の結果は、分析物の濃度および/または決定されるべき分析物の存在または不在であり得る。具体的には、一例として、分析測定は血糖測定であり得、したがって、分析測定の結果は、例えば、血糖濃度であり得る。
本明細書で使用される場合、「較正」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。較正という用語は、事前定義または事前指定された画像キャプチャ条件を保証するため、および/またはモバイルデバイスおよび/またはカメラハードウェア構成、例えば、モバイルデバイスの種類またはモデルに依存する画像キャプチャ条件を調整および/または適合させるための少なくとも1つのプロセスを指す場合がある。較正方法は、サンプル中の分析物のその後の決定中に、事前定義されたおよび/または事前に指定された画像キャプチャ条件が満たされることを確実にするように構成され得る。これにより、測定の堅牢性、信頼性、および精度を向上させることができる。
本明細書で使用される「カメラ」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、限定されないが、空間的に分解された一次元、二次元、または三次元の光学情報を記録またはキャプチャするように構成された少なくとも1つの画像化要素を有するデバイスを指すことができる。一例として、カメラは、画像を記録するように構成された少なくとも1つのCCDチップおよび/または少なくとも1つのCMOSチップなどの少なくとも1つのカメラチップを含み得る。例えば、カメラは、以下で詳細に説明するように、少なくとも3つのカラーピクセルを含むカラーカメラであり得る。カメラはカラーCMOSカメラでもよい。例えば、カメラは、白黒ピクセルおよびカラーピクセルを含み得る。カラーピクセルおよび白黒ピクセルは、カメラの内部で組み合わせることができる。カメラは、少なくとも1つのカラーカメラと、白黒CMOSなどの少なくとも1つの白黒カメラとを含み得る。カメラは、少なくとも1つの白黒CMOSチップを含み得る。カメラは、一般に、ピクセルなどの画像センサの一次元または二次元アレイを含み得る。一例として、カメラは、各次元に少なくとも10ピクセルなど、少なくとも1つの次元に少なくとも10ピクセルを含み得る。ただし、他のカメラも使用可能であることに注意されたい。カメラは、移動体通信装置のカメラであり得る。本発明は、特に、ノートブックコンピュータ、タブレット、または具体的にはスマートフォンなどの携帯電話などのモバイルアプリケーションで通常使用されるカメラに適用可能でなければならない。したがって、具体的には、カメラは、少なくとも1つのカメラに加えて、1つまたは複数のデータプロセッサなどの1つまたは複数のデータ処理デバイスを含むモバイルデバイスの一部であり得る。ただし、他のカメラも使用できる。カメラは、少なくとも1つのカメラチップまたは画像化チップに加えて、例えば1つまたは複数のレンズなどの1つまたは複数の光学要素などのさらなる要素を含み得る。一例として、カメラは、カメラに対して固定的に調整される少なくとも1つのレンズを有する固定焦点カメラであり得る。しかしながら、代替的に、カメラはまた、自動または手動で調整され得る1つ以上の可変レンズを含み得る。
カメラは、具体的にはカラーカメラであり得る。したがって、各ピクセルなどについて、3色R、G、Bの色値などの色情報が提供または生成され得る。各ピクセルに4色など、より多くの色の値も使用できる。カラーカメラは一般に当業者に知られている。したがって、例として、カメラチップの各ピクセルは、3つ以上の異なるカラーセンサ、例えば、赤(R)用の1ピクセル、緑(G)用の1ピクセル、および青(B)用の1ピクセルのようなカラー記録ピクセルを有し得る。R、G、Bなどの各ピクセルについて、それぞれの色の強度に応じて、値は、0から255の範囲のデジタル値などのピクセルによって記録され得る。例として、R、G、Bなどの色の3つ組を使用する代わりに、C、M、Y、KまたはRGGB、BGGR、RGBG、GRGB、RGGBなどの4つ組を使用することができる。ピクセルの色感度は、カラーフィルタアレイなどのカラーフィルタによって、例えば、少なくとも1つのベイヤーフィルタによって、またはカメラピクセルで使用されるセンサ要素の適切な固有の感度によって生成され得る。これらの技術は、一般に当業者に知られている。
本明細書で使用される場合、限定されないが、「画像」という用語は、特に、カメラチップのピクセルなどの画像化デバイスからの複数の電子読み取りなど、カメラを使用して記録されたデータに関連し得る。したがって、画像自体はピクセルを含み得、画像のピクセルはカメラチップのピクセルに相関する。したがって、「ピクセル」に言及する場合、カメラチップの単一ピクセルによって生成された画像情報の単位、またはカメラチップの単一ピクセルのいずれかが直接参照される。画像は生のピクセルデータを含み得る。例えば、画像は、RGGB空間内のデータ、R、GまたはBピクセルのうちの1つからの単色データ、ベイヤーパターン画像などを含み得る。画像は、フルカラー画像またはRGB画像などの評価されたピクセルデータを含み得る。生のピクセルデータは、例えば、デモザイクアルゴリズムおよび/またはフィルタリングアルゴリズムを使用することによって評価することができる。これらの技術は、一般に当業者に知られている。「少なくとも1つの画像をキャプチャする」という用語は、画像化、画像記録、画像取得、画像キャプチャのうちの1つまたは複数を指す。「少なくとも1つの画像をキャプチャする」という用語は、単一の画像および/または一連の画像などの複数の画像をキャプチャすることを含み得る。例えば、画像のキャプチャは、ビデオまたは映画などの一連の画像を連続的に記録することを含み得る。ステップa)でのキャプチャは、1秒未満の時間枠で、好ましくは0.5秒未満の時間枠で、より好ましくは0.1秒未満の時間枠で行うことができる。ただし、さらに長い時間枠が可能である。
少なくとも1つの画像のキャプチャは、ユーザアクションによって開始され得るか、またはカメラの視野内および/または視野の所定のセクタ内の少なくとも1つの対象物の存在が自動的に検出されると、自動的に開始され得る。これらの自動画像取得技術は、例えば、自動バーコード読み取りアプリなどの自動バーコードリーダの分野で知られている。
例えば、ステップa)において、複数の画像をキャプチャすることができる。複数の画像は、画像の少なくとも1つのシーケンスを含み得る。ステップb)において、複数の画像のうち、少なくとも1つの事前定義されたおよび/または事前に指定された選択基準を満たす少なくとも1つの画像が選択され、使用され得る。事前定義および/または事前指定された選択基準は、ルックアップテーブルで提供され得、および/または経験的または半経験的に決定され得る。選択基準は、一例として、モバイルデバイスに含まれるストレージデバイスにさらに格納されることができる。具体的には、選択基準は、ソフトウェアによって、より具体的にはアプリによって、ストレージデバイスに格納され得る。事前定義または事前指定された選択基準は、少なくとも1つのシャープネス基準、少なくとも1つの空間基準、周囲光の状態、からなるグループから選択することができる。鮮明度基準は、それを超えると画像が「焦点が合っている」または「鮮明である」と見なされる、またはそれ以上の少なくとも1つの鮮明度閾値を含み得る。画像は、対象物が画像の最大領域を埋めるおよび/または覆うようにキャプチャされ得る。ステップb)において、複数の画像のうち、対象物が画像の最大領域を埋めるおよび/または覆う画像を選択して使用することができる。空間基準は、例えば対象物の任意の平面に対するモバイルデバイスの平面平行位置からの許容可能な偏差を指す少なくとも1つの角度閾値を含み得る。空間基準は、カメラと対象物との間の距離に依存する場合がある。例えば、モバイルデバイスの平面平行位置からの角度偏差は、25°未満、好ましくは20°未満、最も好ましくは15°未満が許容可能であると見なされ得る。ステップb)は、画像のシーケンスから最良の画像、例えば、事前定義されたまたは事前指定された選択基準を最もよく満たす画像を選択することを含み得る。画像のシーケンスは、少なくとも1つの時間間隔の間、連続的にキャプチャされ得る。ステップb)、例えば、画像の選択、および/またはステップc)は、オンラインで、すなわち、画像シーケンスをキャプチャしている間に実行することができる。キャプチャは、例えば、選択基準を満たす少なくとも1つの画像が決定されるまで繰り返され得る。
画像をキャプチャするときに、視覚的ガイダンスなどの視覚的表示がユーザに与えられ得る。視覚的表示は、画像をキャプチャする前にユーザに与えられることができる。視覚的表示は、テキストメッセージおよび/またはグラフィック命令などの少なくとも1つの命令を含み得る。例えば、視覚的表示は、対象物、または対象物の輪郭および/または対象物の外形などの対象物の一部の視覚化を含み得る。視覚的表示は、対象物の輪郭または対象物上の参照領域、例えば、モバイルデバイスのディスプレイに重ね合わされた対象物の形状に対応するフレームを含み得、カメラを対象物に対して配置するための視覚的ガイダンスを提供する。シャープネス基準および/または空間基準が満たされ得ると決定された場合、特に視覚的表示の対象物の輪郭が対象物と重なることが決定された場合、少なくとも1つの画像のキャプチャが自動的に開始され得る。視覚的表示は、ステップa)で使用される対象物に依存する場合がある。例えば、対象物の輪郭および/または外形などの視覚的表示は、経験的に決定され得、および/または、ソフトウェアによって、具体的には、アプリストアなどからダウンロードされた少なくとも1つのアプリによって、少なくとも1つのルックアップテーブルおよび/またはモバイルデバイスの少なくとも1つのデータストレージに格納され得る。追加的または代替的に、音声ガイダンスまたは他の種類のガイダンスが与えられ得る。
本明細書で使用される場合、「対象物」という用語は、事前定義された表面特性、特に平面表面特性および/または事前定義された反射特性を有する任意の対象物を指す。ステップa)で使用される対象物は、少なくとも1つの平らな面、参照カード、サンプル中の分析物を検出するための少なくとも1つの試験片であって、分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールドを有する試験片、少なくとも1つの試験片容器、少なくとも1つの、特に試験片の包装、で構成されるグループから選択され得る。包装は、単一の試験片用の包装、2つ以上の試験片などの複数の試験片用の包装、試験片容器、からなる群から選択される包装であり得る。したがって、1つまたは複数の試験片容器、少なくとも1つの試験要素を受け入れるための包装、または試験片またはその一部などの対象物自体は、対象物として機能することができる。ステップa)において、カメラと対象物との間の距離は、0.03m~0.3m、好ましくは0.03~0.15m、最も好ましくは0.03~0.1mであり得る。例えば、モバイルデバイスの種類、対象物とカメラの間の角度、および対象物の深さによってはさらに短い距離が可能になる場合がある。
モバイルデバイスおよび対象物は、モバイルデバイスのカメラと対象物、特に対象物の少なくとも1つの表面とが互いに本質的に平行であるように配置されることができる。本明細書で使用される場合、「本質的な平行」という用語は、対象物とカメラとが、例えば、±20°以下の許容誤差、好ましくは±10°以下の許容誤差、より好ましくは±5°以下の許容誤差を伴って互いに平行である条件を指す。対象物は、少なくとも1つの位置マーカを含み得る。対象物とカメラとの間の相対的な位置および/または向きは、位置マーカを使用することによって決定されることができる。例えば、位置マーカは、少なくとも1つのOpenCV ArUcoマーカを含み得る。OpenCV ArUcoマーカを使用して位置を決定するための技術は、一般に当業者に知られている。さらに、モバイルデバイスは、空間位置、特に角度位置および/または空間内の少なくとも1つの向きを決定するように適合された少なくとも1つの位置センサを備え得る。例えば、対象物は、例えばテーブルおよび/または壁の平らな表面であってもよく、モバイルデバイスは、ユーザによって、平らな表面に、例えば上で平行に配置され得る。例えば、対象物は、少なくとも1つの平らな表面を有する少なくとも1つの包装、例えば、立方体の包装であり得る。モバイルデバイスおよび/または包装は、互いに平面平行に配置されることができる。例えば、対象物はテーブル上に配置されてもよく、モバイルデバイスは、対象物に対してユーザによって配置され得る。平行な向きを確保するために、対象物とモバイルデバイスとを相互に相対的に配置するときに、視覚的な表示がユーザに与えられてもよい。具体的には、モバイルデバイスはディスプレイを備え得る。モバイルデバイスを、ディスプレイ上に視覚的な表示を与えるように適合させることができる。例えば、視覚的表示は、対象物に対してモバイルデバイスをどのように適応するか、および/または変更するか、および/または配置するか、および/またはモバイルデバイスに対して対象物をどのように適応するか、および/またはどのように変更および/または配置するかに関するユーザへの少なくとも1つのプロンプトおよび/または少なくとも1つの指示を含み得る。視覚的表示は、少なくとも1つのテキストメッセージおよび/または少なくとも1つのグラフィック命令を含み得る。特に、対象物の画像をキャプチャするときに、視覚的な表示がユーザに与えられ得る。相対的な位置および/または向きが満たされ得ると決定された場合、少なくとも1つの画像のキャプチャが自動的に開始され得る。これにより、ハンズフリー操作、特に分析対象物の較正および/または測定が可能になる。
本明細書で使用される場合、「モバイルデバイスの照明源」という用語は、モバイルデバイスの任意の光源を指す。「照明源」という用語は、対象物を照明するための光を生成するように適合された少なくとも1つのデバイスを指す。本明細書で使用される場合、「光」という用語は、一般に、可視スペクトル範囲、紫外線スペクトル範囲、および赤外線スペクトル範囲のうちの1つまたは複数の電磁放射を指す。可視スペクトル範囲という用語は、一般に、380nm~780nmのスペクトル範囲を指す。好ましくは、本発明内で使用される光は、可視スペクトル範囲の光である。照明源は、モバイルデバイスに統合された少なくとも1つの発光ダイオードを含み得る。照明源は、2つの状態、すなわち、対象物を照明するために少なくとも1つの光ビームを生成するオン状態と、照明源がオフであるオフ状態とを有し得る。本明細書で使用される場合、「オンにされる」という用語は、照明源がオンになって対象物を照明するか、またはそれが対象物を照明するための光線を生成するオン状態にあることを指す。モバイルデバイスは、ディスプレイを照明するように適合された少なくとも1つの照明源などのさらなる照明デバイスを含み得、および/またはディスプレイは、さらなる照明源自体として設計され得る。
較正方法は、照明源が、検出方法を実行するのに十分な照明強度を提供するように構成されているかどうかを評価することをさらに含み得る。照明源が十分な照明を提供するように構成されているかどうかを評価することは、少なくとも1つの閾値方法を使用することができる。照度の十分性は、対象物の表面特性および/または周囲光の状態に依存し得る。特に、高い反射特性を有する明るい対象物の場合、低い反射特性を有する暗い対象物と比較して、より低い光強度で十分である可能性がある。さらに、例えば太陽光による明るい周囲光条件の場合、遮蔽された周囲光条件と比較して、より高い強度が必要とされる場合がある。
上で概説したように、ステップa)でキャプチャされた画像から、照明源から発生し、対象物によって反射される光の直接反射によって影響を受ける画像内の少なくとも1つの第1の領域が決定される。「第1の領域」という用語は、画像内の任意の形状の領域を指す。特に、第1の領域は、少なくとも1つのストライプ、少なくとも1つの象限、少なくとも1つの長方形の領域、少なくとも1つの円のうちの1つまたは複数であり得る。例えば、第1の領域は、画像内の直接反射によって生成された光スポットの半径を有する円に対応し得る。モバイルデバイスの照明源は、対象物を照らすことができる。しかしながら、モバイルデバイスでは、照明源およびカメラは、照明源によって生成された光線、特にフラッシュ光が、少なくとも部分的に対象物によって反射されるように配置される。「照明源から発生する光の直接反射の影響を受ける」という用語は、照明源によって生成された光ビームの直接反射によって生成された画像内の光スポットを指す。画像内の光点は、周囲の画像領域よりも明るい領域である可能性がある。
画像のヒストグラム分析は、ステップb)において第1の領域を決定するために使用され得る。ヒストグラム分析は、画像内の第1の領域の位置を決定することを含み得る。ヒストグラム分析は、画像内の最大強度を決定すること、および画像内の最大強度の位置を決定することを含み得る。第1の領域は、ヒストグラム分析において強度の少なくとも1つの閾値を使用することによって決定され得る。ヒストグラム分析は、少なくとも1つの二次元ガウスフィットを含むことができる。例えば、強度が1σを超える画像領域を第1の領域と見なすことができる。ヒストグラム分析を使用して、照明源が十分に機能するかどうか、すなわち、対象物を照明するのに適切な量の光が生成されるかどうかを決定することができる。
ステップc)において、本質的に第1の領域と重ならない少なくとも1つの第2の領域が画像内で決定され、後続の検出ステップにおける試験片の試験フィールドの位置の標的領域として第2の領域を返す。検出ステップは、特に較正方法の後に実行されることができる。したがって、検出ステップは、較正方法の一部ではない可能性がある。「第2の領域」という用語は、第1の領域とは異なる画像の領域またはゾーンを指し、第1の領域と第2の領域との小さな重なりが可能である。第2の領域は、画像の連続領域であり得る。本明細書で使用される場合、「標的領域」という用語は、試験片の試験フィールドが後続の検出ステップで配置され得る領域を指す。標的領域は、画像をキャプチャする間に試験片の試験フィールドが配置されると想定され得る、所定のまたは事前に指定された領域であり得る。第2の領域は、照明源からの光の直接反射による影響が防止および/または最小化および/または少なくとも大幅に低減されるように決定されることができる。標的領域は、照明源からの光の直接光反射によって影響を受けるゾーン、特に第1の領域から離れていると決定され得る。さらに、標的領域は、分析物の決定が可能であるように、例えば試験フィールドが十分に照らされており、カメラの視野内にあるように決定され得る。第2の領域は、本質的に均一な照明を備えた画像の領域であると決定され得る。「本質的な均質照明」という用語は、10%以下、好ましくは5%以下、最も好ましくは1%以下の許容誤差を有する均質照明の条件を指す。第2の領域は、照明強度が少なくとも1つの強度閾値を下回る領域であると決定され得る。第2の領域は、直接反射からの光スポットによって生成される照明が最小化されるように選択され得る。
以下に概説するように、検出方法は、試験フィールドが少なくとも部分的に標的領域に位置するように、カメラに対して試験片を配置するためにユーザに視覚的表示が提供される少なくとも1つのステップを含む。標的領域は、試験片の形状または形状の一部と同一の形状を有し得る。標的領域は、試験片の外形または重なりとして構成できる。視覚的表示は、モバイルデバイスのディスプレイ上のカメラのライブ画像と、標的領域、例えば試験片の輪郭との重ね合わせである場合がある。したがって、試験片がカメラの視野内に配置されると、視覚的表示は標的領域と試験片との重なりを示し、ユーザが標的領域と試験片とを簡単に配置できるようにする。
本明細書で使用される場合、「本質的に重ならない」という用語は、第1の領域および第2の領域が空間的に分離された領域であることを指す。ただし、分析対象物の測定に影響を与えない重なり領域が発生する可能性がある。例えば、第1の領域と第2の領域の領域は、10%未満、好ましくは5%未満、最も好ましくは1%未満で重なり得る。例えば、キャプチャされた画像は、例えば象限において、少なくとも4つのセグメントにセグメント化され得る。第1の領域は、画像の少なくとも1つの第1のセグメントに割り当てられ得る。第2の領域は、第1のセグメントとは異なる画像の少なくとも1つの第2のセグメントに割り当てられ得る。例えば、第1の領域は、左下の象限にあると決定され得る。第2の領域は、左上の象限および/または右上の象限および/または右下の象限に割り当てられ得る。
「第2の領域を標的領域として返す」という用語は、標的領域の場所の少なくとも1つの情報が生成されることを指す。標的領域の場所の情報は、プロンプトとして、例えば、外部コンピューティング手段またはプロセッサなどのモバイルデバイスのコンピューティング手段へのコンピューティング手段に提供される場合がある。コンピューティング手段は、標的領域の位置の情報に基づいて、試験片とモバイルデバイスとを互いに対して配置するための視覚的表示を適応および/または生成することができる。
本発明のさらなる態様では、モバイルデバイスのカメラを使用することによってサンプル中の分析物を検出するための検出方法が開示される。この方法は、一例として、所与の順序で実行され得る以下のステップを含む。しかしながら、別の順序も可能であることに留意されたい。さらに、1つまたは複数の方法ステップを1回または繰り返し実行することも可能である。さらに、2つ以上の方法ステップを同時にまたは適時に重複して実行することも可能であることに留意されたい。本方法は、記載されていない追加の方法ステップを含むことができる。本方法は、以下のステップを含む。
i)本発明による較正方法を使用することによってカメラを較正するステップ。
ii)サンプル中の分析物を検出するための少なくとも1つの試験片を提供するステップであって、試験片が、分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールドを有する、ステップ。
iii)試験片の試験フィールドに少なくとも1つのサンプルを適用するステップ。
iv)試験フィールドが少なくとも部分的に標的領域に配置されるように、カメラに対して試験片を配置するための視覚的表示をユーザに提供するステップ。
v)カメラを使用することによって試験フィールドの少なくとも1つの画像をキャプチャするステップであって、前記キャプチャ中に、モバイルデバイスの照明源がオンにされる、キャプチャするステップ。
vi)ステップv)でキャプチャされた画像から、サンプル中の分析物濃度を決定するステップ。
実施形態および検出方法の定義に関して、上記の較正方法の説明を参照し、以下でさらに詳細に説明する。特に、方法ステップi)に関して、上記の較正方法の説明を参照することができる。
本明細書で使用される場合、「視覚的表示」という用語は、モバイルデバイスと試験片とを互いに対してどのように配置するかについてのユーザのための視覚的ガイダンスを指す。モバイルデバイスは、視覚的表示を表示するように適合され得るディスプレイを備え得る。視覚的表示は、テキストメッセージ、例えばプロンプトなどのユーザのための少なくとも1つの命令、および/または少なくとも1つのグラフィカルな命令を含み得る。例えば、視覚的表示は、試験片または試験片の輪郭および/または外形などの試験片の一部の視覚化を含み得る。視覚的表示は、具体的には視覚的ガイダンスであり得、モバイルデバイスのディスプレイに重ね合わされ、試験片に対してカメラを配置するための視覚的ガイダンスを提供する、例えば試験片の形状の輪郭であり得るか、またはそれを含み得る。視覚的表示は、モバイルデバイスと試験片の両方の相対的な視覚化を含み得る。視覚的表示は、例えば、少なくとも1つの矢印および/または少なくとも1つのテキストメッセージなどの方向および/または距離プロンプトなどの位置情報を含み得る。「少なくとも部分的に標的領域に位置する」という用語は、試験片および/またはモバイルデバイスが、試験片が20%以下、好ましくは10%以下、最も好ましくは5%以下の許容誤差で標的領域を覆い、および/または完全に一致するように配置されることを指す。
分析物濃度の決定は、光学的検出を含み得る。本明細書で使用される場合、「光学的検出」という用語は、分析物の存在下で色が変化する色変化試験化学物質などの光学的試験化学物質を使用する反応の検出を指す。色の変化は、特にサンプルに存在する分析物の量に依存する可能性がある。ステップvi)は、試験片の試験フィールド上のスポットの色を分析することを含み得、前記スポットは、少なくとも部分的にサンプルを含む。光学的検出によって分析物を決定するための技術、特に試験フィールド上のスポットの色を分析するための技術は、一般に当業者に知られている。少なくとも1つの画像を評価し、その少なくとも1つの分析情報を導出するために、血糖モニタリングの分野などの分析の分野の当業者に一般に知られているいくつかのアルゴリズムを使用することができる。したがって、一例として、少なくとも1つの試験化学物質を有する少なくとも1つの試験フィールドの色などの試験要素の色を評価することができる。一例として、画像を評価する場合、関心領域は、試験要素の試験フィールド内の関心領域など、試験要素の画像内に定義され得、色の分析は、統計分析のように実行され得る。一例として、長方形、正方形、多角形、楕円形、または円形の関心領域を、試験フィールドの画像であると認識される画像の部分内に規定することができる。続いて、関心領域内のピクセルの色の統計分析を実行することができる。一例として、1つまたは複数の色座標をピクセルに対して導出することができ、色座標の統計分析を関心領域にわたって実行することができる。一例として、少なくとも1つの色座標の分布の中心を決定することができる。本明細書で使用される「挿入面」という用語は、広義の用語であり、当業者にその通常の慣習的な意味を与えられるべきであり、特別なまたはカスタマイズされた意味に限定されるべきではない。この用語は、具体的には、座標を使用して色を記述するために使用される任意の色座標系の座標を指すことができるが、これに限定されない。いくつかの色座標系は、一般に当業者に知られており、本発明の文脈で使用することもできる。したがって、例として、CIE 1964色空間、マンセル色システム、またはR、G、B、L、a、bなどの他の座標系などの人間の知覚に基づく比色座標系または座標系を使用することができる。
したがって、画像から分析情報を導出するために、例として、試験フィールドなどの試験要素の少なくとも1つの色座標間の所定のまたは決定可能な関係を監視することができる。上で概説したように、統計分析は、少なくとも1つの試験化学物質を含む試験フィールド上および/または少なくとも1つの試験化学物質を含む試験フィールド内の関心領域にわたってなど、試験要素またはその一部に対して実行され得る。したがって、例として、試験要素の画像内の少なくとも1つの試験フィールドは、好ましくは自動的に、例えば、以下の例で説明するパターン認識および/または他のアルゴリズムによって自動で認識され得る。この場合も、1つまたは複数の関心領域を試験フィールドの部分画像内に規定することができる。ここでも、1つ以上のヒストグラムを使用することにより、関心領域、色座標、例:この場合も、青色の色座標および/または他の色の座標を決定することができる。統計分析は、上記のような1つまたは複数のフィッティング曲線を少なくとも1つのヒストグラムに配置することを含み得、それにより、例えば、ピークの中心を決定する。したがって、色形成反応は、1つまたは複数の画像を使用することによって監視することができ、1つまたは複数の画像について、統計分析を使用することによって、ピークの中心を決定することができ、それによって、少なくとも1つの座標内の色シフトを決定することができる。当業者が一般的に知っているように、発色反応が終了するか、または所定のまたは決定可能なエンドポイントに到達すると、血糖モニタリングから、少なくとも1つの色座標または終点の色座標のシフトが決定され得、そして例えば、色座標と濃度との間の所定のまたは決定可能な相関関係を使用することによる、サンプル中の分析物の濃度に変換され得る。例として、変換関数、変換テーブル、またはルックアップテーブルとしての相関は、経験的に決定されることができ、そして一例として、ソフトウェア、特にアプリストアなどからダウンロードしたアプリによって、モバイルデバイスの少なくとも1つのデータストレージデバイスに格納され得る。
以下でさらに詳細に概説されるように、較正方法および検出方法は、完全にまたは部分的に、特にモバイルデバイスのプロセッサなどのモバイルデバイスのコンピュータ上にコンピュータ実装され得る。したがって、具体的には、方法は、較正方法の少なくとも方法ステップb)およびc)および/または検出方法の方法ステップi)、iv)およびvi)の1つまたは複数を実行するための少なくとも1つのプロセッサおよびソフトウェア命令を使用することを含み得る。具体的には、これらの方法は、例えばAndroidまたはiOS用のいわゆるアプリとして完全にまたは部分的に実装され得、例えば、アプリストアからダウンロードできる場合がある。ソフトウェア命令、特にアプリはさらに、較正方法および/または検出方法の方法ステップをサポートするために、ディスプレイの1つまたは複数によって、音声命令または他の命令によって、ユーザ命令を提供する場合がある。その中で、上に示したように、方法ステップa)、b)およびc)はまた、対象物がカメラの視野内および/または視野内の特定の範囲内に入ると、カメラを使用することによって、少なくとも1つの対象物の少なくとも1つの画像を自動的に撮影することによって完全にまたは部分的にコンピュータで実施され得る。較正方法および/または検出方法を実行するためのプロセッサは、具体的には、モバイルデバイスの一部であり得る。
上で概説したように、モバイルデバイスは、具体的には、モバイルコンピュータおよび/またはモバイル通信デバイスであり得る。したがって、具体的には、モバイルデバイスは、モバイル通信デバイス、具体的にはスマートフォン、ポータブルコンピュータ、特にノートブック、タブレットコンピュータ、からなる群から選択され得る。
上に示したように、さらなる方法ステップは、特にモバイルデバイスのプロセッサによって、コンピュータで実装されるか、またはコンピュータによって支援され得る。したがって、例として、対象物および/または試験片に対してモバイルデバイスを配置するためのユーザのための視覚的ガイダンスは、コンピュータ実装またはコンピュータ支援であり得る。追加的または代替的に、音声ガイダンスまたは他の種類のガイダンスが与えられ得る。
本発明のさらなる態様では、本明細書に記載の実施形態のいずれか1つによる較正方法を実行するためのコンピュータ実行可能命令を含むコンピュータプログラムが開示される。具体的には、コンピュータ実行可能命令は、方法ステップa)、b)およびc)のうちの1つまたは複数を実行するのに適している可能性がある。特に、プログラムは、コンピュータまたはコンピュータネットワーク上で、具体的には、少なくとも1つのカメラを有するモバイルデバイスのプロセッサ上で実行される。
したがって、一般的に言えば、プログラムがコンピュータまたはコンピュータネットワーク上で実行されるときに、本明細書に含まれる1つ以上の実施形態において、本開示による方法を実行するためのコンピュータ実行可能命令を含むコンピュータプログラムがさらに開示および提案される。具体的には、コンピュータプログラムは、コンピュータ可読データキャリアに格納され得る。したがって、具体的には、本明細書に開示される1つ、2つまたはそれ以上、またはすべての方法ステップは、コンピュータまたはコンピュータネットワークまたは任意の適切なデータ処理器具を使用して、好ましくはコンピュータプログラムを使用して実行され得る。コンピュータは、具体的には、モバイルデバイスに完全にまたは部分的に統合することができ、コンピュータプログラムは、具体的には、ソフトウェアアプリとして具体化することができる。しかしながら、代替的に、コンピュータの少なくとも一部がモバイルデバイスの外に配置されていてもよい。
データ構造が格納されたデータキャリアがさらに開示および提案されており、これは、コンピュータまたはコンピュータネットワークのワーキングメモリまたはメインメモリなどのコンピュータまたはコンピュータネットワークにロードした後、本明細書で開示される1つ以上の実施形態による方法を実行し得る。
プログラムがコンピュータまたはコンピュータネットワーク上で実行されるときに、本明細書に含まれる1つ以上の実施形態による較正方法を実行するために、マシン可読キャリアに格納されたプログラムコードを有するコンピュータプログラム製品がさらに開示および提案される。本明細書で使用される場合、コンピュータプログラム製品は、取引可能な製品としてのプログラムを指す。製品は一般に、紙のフォーマットなどの任意のフォーマットで、またはコンピュータ可読データキャリア上に存在する。具体的には、コンピュータプログラム製品は、データネットワークを介して配布されてもよい。
最後に、本明細書に開示および提案されるのは、本明細書に開示される1つまたは複数の実施形態、具体的には上記のように較正方法の1つまたは複数のステップによる較正方法を実行するための、コンピュータシステムまたはコンピュータネットワークによって読み取り可能な命令を含む変調データ信号である。
具体的には、本明細書で以下がさらに開示される。
-少なくとも1つのプロセッサを備えるコンピュータまたはコンピュータネットワークであって、プロセッサが、この記述で説明される実施形態のうちの1つによる方法を実行するように適合される、コンピュータまたはコンピュータネットワーク。
-データ構造がコンピュータ上で実行されている間に、本明細書に記載された実施形態の1つによる較正方法を実行するように適合されたコンピュータロード可能データ構造。
-プログラムがコンピュータ上で実行されている間に、この説明に記載された実施形態のうちの1つによる較正方法を実行するように適合されているコンピュータプログラム。
-コンピュータプログラムがコンピュータ上またはコンピュータネットワーク上で実行されている間に、この説明に記載された実施形態のうちの1つによる較正方法を実行するためのプログラム手段を含むコンピュータプログラム。
-前実施形態によるプログラム手段を含むコンピュータプログラムであって、プログラム手段は、コンピュータが読み取り可能な記憶媒体上に格納され、
-記憶媒体であって、データ構造が記憶媒体に記憶され、データ構造がコンピュータまたはコンピュータネットワークのメイン記憶部および/または作業用記憶部にロードされた後、本明細書に記載された実施形態の1つによる方法を実行するように適合される、記憶媒体。
-プログラムコード手段が、コンピュータまたはコンピュータネットワーク上で実行された場合に、この説明に記載された実施形態の1つによる較正方法を実行するために、プログラムコード手段を記憶することができるか、または記憶媒体上に記憶することができる、プログラムコード手段を有するコンピュータプログラム製品。
本発明のさらなる態様では、本明細書に記載の実施形態のいずれか1つによる検出方法を実行するためのコンピュータ実行可能命令を含むコンピュータプログラムが開示される。具体的には、コンピュータ実行可能命令は、方法ステップi)~vi)の1つまたは複数を実行するのに適している可能性がある。特に、プログラムは、コンピュータまたはコンピュータネットワーク上で、具体的には、少なくとも1つのカメラを有するモバイルデバイスのプロセッサ上で実行される。
したがって、一般的に言えば、プログラムがコンピュータまたはコンピュータネットワーク上で実行されるときに、本明細書に含まれる1つ以上の実施形態において、本開示による検出方法を実行するためのコンピュータ実行可能命令を含むコンピュータプログラムがさらに開示および提案される。具体的には、コンピュータプログラムは、コンピュータ可読データキャリアに格納され得る。したがって、具体的には、本明細書に開示される1つ、2つまたはそれ以上、またはすべての方法ステップは、コンピュータまたはコンピュータネットワークまたは任意の適切なデータ処理器具を使用して、好ましくはコンピュータプログラムを使用して実行され得る。コンピュータは、具体的には、モバイルデバイスに完全にまたは部分的に統合することができ、コンピュータプログラムは、具体的には、ソフトウェアアプリとして具体化することができる。しかしながら、代替的に、コンピュータの少なくとも一部がモバイルデバイスの外に配置されていてもよい。
データ構造が格納されたデータキャリアがさらに開示および提案されており、これは、コンピュータまたはコンピュータネットワークのワーキングメモリまたはメインメモリなどのコンピュータまたはコンピュータネットワークにロードした後、本明細書で開示される1つ以上の実施形態による較正方法を実行し得る。
プログラムがコンピュータまたはコンピュータネットワーク上で実行されるときに、本明細書に含まれる1つ以上の実施形態による 検出方法を実行するために、マシン可読キャリアに格納されたプログラムコードを有するコンピュータプログラム製品がさらに開示および提案される。本明細書で使用される場合、コンピュータプログラム製品は、取引可能な製品としてのプログラムを指す。製品は一般に、紙のフォーマットなどの任意のフォーマットで、またはコンピュータ可読データキャリア上に存在する。具体的には、コンピュータプログラム製品は、データネットワークを介して配布されてもよい。
最後に、本明細書に開示および提案されるのは、本明細書に開示される1つまたは複数の実施形態による検出方法、具体的には上記のように検出方法の1つまたは複数のステップを実行するための、コンピュータシステムまたはコンピュータネットワークによって読み取り可能な命令を含む変調データ信号である。
具体的には、本明細書で以下がさらに開示される。
-少なくとも1つのプロセッサを備えるコンピュータまたはコンピュータネットワークであって、プロセッサは、この記述で説明される実施形態のうちの1つによる方法を実行するように適合される、コンピュータまたはコンピュータネットワーク。
-データ構造がコンピュータ上で実行されている間に、本明細書に記載された実施形態の1つによる検出方法を実行するように適合されたコンピュータロード可能データ構造。
-コンピュータプログラムであって、プログラムがコンピュータ上で実行されている間に、この説明に記載された実施形態のうちの1つによる検出方法を実行するように適合されている、コンピュータプログラム。
-コンピュータプログラムがコンピュータ上またはコンピュータネットワーク上で実行されている間に、この説明に記載された実施形態の1つによる検出方法を実行するためのプログラム手段を含むコンピュータプログラム。
-前実施形態によるプログラム手段を含むコンピュータプログラムであって、プログラム手段は、コンピュータが読み取り可能な記憶媒体上に格納され、
-記憶媒体であって、データ構造が記憶媒体に記憶され、データ構造がコンピュータまたはコンピュータネットワークのメイン記憶部および/または作業用記憶部にロードされた後、本明細書に記載された実施形態の1つによる方法を実行するように適合される、記憶媒体。
-プログラムコード手段がコンピュータまたはコンピュータネットワーク上で実行された場合に、この説明に記載された実施形態の1つによる検出方法を実行するために、プログラムコード手段を記憶することができる、または記憶媒体上に記憶することができる、プログラムコード手段を有するコンピュータプログラム製品。
本発明のさらなる態様では、分析測定を実行するためのモバイルデバイスが開示されている。モバイルデバイスは、
-少なくとも1つのカメラと、
-少なくとも1つの照明源と、
-先行する実施形態のうちの1つによる較正方法を実行するためのプログラム手段を含む、少なくとも1つのプロセッサと、を備えている。
本明細書で使用されるほとんどの用語および可能な定義については、上記の方法の説明を参照することができる。
プロセッサは、前述の実施形態のいずれか1つによる検出方法を実行するためのプログラム手段をさらに含み得る。モバイルデバイスは、モバイル通信デバイスであり得る。
本発明にかかる装置および方法は、同様の種類の公知の装置および方法に勝る多くの利点を提供する。本発明は、当技術分野で知られているプロセスと比較して、分析測定を実行するプロセスの信頼性および使いやすさを改善することができる。具体的には、本発明は、既知のアプリまたはコンピュータプログラムと比較した、分析測定を実行するためのコンピュータ実行可能命令を含むアプリケーション、例えばアプリの信頼性および使いやすさを改善することができる。特に、本発明は、異なるモバイルデバイスおよび/または特定のモバイルデバイスごとのカメラに対するLEDフラッシュの異なる位置などのカメラハードウェア構成のためのロバストな、特に不変の画像キャプチャ条件を保証することを可能にし得る。具体的には、これは、試験片認識用の試験片のフレームなどの試験片の輪郭を、最初に照明源から発生し試験片に反射された光の直接光反射の影響を受けるゾーン外のモバイルデバイスのディスプレイに動的に配置することによって保証される。本発明は、光沢の影響が本質的に回避されるか、または少なくとも大幅に低減されるため、モバイルのカメラ画像を使用するアプリまたはコンピュータプログラムの改善された信頼性および精度を提供し得る。
要約すると、さらに可能な実施形態を除外することなく、以下の実施形態が想定され得る。
[実施形態1] サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法であって、以下を含む、較正方法。
a)カメラを使用することによって少なくとも1つの対象物の少なくとも1つの画像をキャプチャするステップであって、前記キャプチャ中に、モバイルデバイスの照明源がオンにされる、キャプチャするステップ。
b)ステップa)でキャプチャされた画像から、照明源から発生し、対象物によって反射される光の直接反射によって影響を受ける画像内の少なくとも1つの第1の領域を決定するステップ。
c)第1の領域と本質的に重ならない画像内の少なくとも1つの第2の領域を決定し、第2の領域を後続の検出ステップにおける試験片の試験フィールドの位置の標的領域として返すステップ。
[実施形態2]ステップb)において第1の領域を決定するために画像のヒストグラム分析が使用される、先行する実施形態に記載の較正方法。
[実施形態3] ヒストグラム分析において強度の少なくとも1つの閾値を使用することによって第1の領域が決定される、先行する実施形態に記載の較正方法。
[実施形態4] ヒストグラム分析が少なくとも1つの2次元ガウスフィットを含む、先行する2つの実施形態のいずれか1つに記載の較正方法。
[実施形態5] キャプチャされた画像が少なくとも4つのセグメントにセグメント化され、第1の領域が画像の少なくとも1つの第1のセグメントに割り当てられ、第2の領域が第1のセグメントとは異なる画像の第2のセグメントの少なくとも1つに割り当てられる、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態6] 較正方法が、検出方法を実行するのに十分な照明強度を提供するように照明源が構成されているかどうかを評価することをさらに含む、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態7] 十分な照明を提供するように構成された照明源が少なくとも1つの閾値方法を使用するかどうかを評価する、先行する実施形態に記載の較正方法。
[実施形態8] 較正方法が、カメラと対象物との間の遠近および/または角度をさらに考慮に入れる、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態9] 対象物が少なくとも1つの位置マーカを含み、対象物とカメラとの間の相対位置および/または向きが位置マーカを使用することによって決定される、先行する実施形態に記載の較正方法。
[実施形態10]ステップa)において複数の画像がキャプチャされ、複数の画像が少なくとも1つの画像シーケンスを含み、ステップb)において少なくとも1つの事前定義された選択基準を満たす複数の画像のうちの少なくとも1つの画像が選択されて使用される、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態11] 画像のシーケンスが少なくとも1つの時間間隔の間に連続的にキャプチャされ、ステップb)および/またはc)が画像シーケンスのキャプチャ中に実行される、先行する実施形態に記載の較正方法。
[実施形態12] カメラが移動通信装置のカメラである、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態13]ステップa)において、カメラと対象物との間の距離が、0.03m~0.3m、好ましくは0.03~0.15m、最も好ましくは0.03~0.1mである、前述の実施形態のいずれか1つに記載の較正方法。
[実施形態14]ステップa)で使用される対象物が、少なくとも一つの平らな面、参照カード、サンプル中の分析物を検出するための少なくとも1つの試験片であって、分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールドを有する試験片、少なくとも1つの試験片容器、少なくとも1つの、特に試験片の包装、からなる群から選択される、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態15] 試験片に少なくとも1つのサンプルが塗布されている、先行する実施形態に記載の較正方法。
[実施形態16]モバイルデバイスの照明源が、モバイルデバイスに統合された少なくとも1つの発光ダイオードを含む、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態17]ステップa)でのキャプチャが1秒未満の時間枠で、好ましくは0.5秒未満の時間枠で、より好ましくは0.1秒未満の時間枠で行われる、先行する実施形態のいずれか1つに記載の較正方法。
[実施形態18] モバイルデバイスのカメラを使用することによってサンプル中の分析物を検出するための検出方法であって、以下を含む方法。
i)前述の実施形態のいずれか1つによる較正方法を使用することによってカメラを較正するステップ。
ii)サンプル中の分析物を検出するための少なくとも1つの試験片を提供するステップであって、試験片が、分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールドを有する、ステップ。
iii)試験片の試験フィールドに少なくとも1つのサンプルを適用するステップ。
iv)試験フィールドが少なくとも部分的に標的領域に配置されるように、カメラに対して試験片を配置するための視覚的表示をユーザに提供するステップ。
v)カメラを使用することによって試験フィールドの少なくとも1つの画像をキャプチャするステップであって、前記キャプチャ中に、モバイルデバイスの照明源がオンにされる、キャプチャするステップ。
vi)ステップv)でキャプチャされた画像から、サンプル中の分析物濃度を決定するステップ。
[実施形態19] ステップvi)が、試験片の試験フィールド上のスポットの色を分析することを含み、前記スポットが少なくとも部分的にサンプルを含む、先行する実施形態に記載の検出方法。
[実施形態20] コンピュータプログラムがコンピュータ上またはコンピュータネットワーク上、特にモバイルデバイスのプロセッサ上で実行されている間に、較正方法を参照する前述の実施形態の1つによる較正方法を実行するためのプログラム手段を含むコンピュータプログラム。
[実施形態21]コンピュータプログラムが、以下のステップを実行するプログラム手段を含む、先行する実施形態に記載のコンピュータプログラム。
ステップa)でキャプチャされた画像から、照明源から発生し、対象物によって反射される光の直接反射の影響を受ける画像の少なくとも1つの第1の領域を決定するステップ。
第1の領域と本質的に重ならない画像内の少なくとも1つの第2の領域を決定し、第2の領域を後続の検出ステップにおける試験片の試験フィールドの位置の標的領域として返すステップ。
[実施形態23]コンピュータプログラムがコンピュータ上またはコンピュータネットワーク上、特にモバイルデバイスのプロセッサ上で実行されている間に、検出方法を参照する前述の実施形態のうちの1つによる検出方法を実行するためのプログラム手段を含むコンピュータプログラム。
[実施形態24]コンピュータプログラムが、以下のステップを実行するプログラム手段を含む、先行する実施形態に記載のコンピュータプログラム。
- i)前述の実施形態のいずれか1つによる較正方法を使用することによってカメラを較正するステップ。
- iv)試験フィールドが少なくとも部分的に標的領域に配置されるように、カメラに対して試験片を配置するための視覚的表示をユーザに提供するステップ。
- vi)ステップv)でキャプチャされた画像から、サンプル中の分析物濃度を決定するステップ。
[実施形態25]モバイルデバイスであって、
少なくとも1つのカメラと、
少なくとも1つの照明源と、
較正方法を参照する前述の実施形態のうちの1つによる較正方法を実行するためのプログラム手段を含む、少なくとも1つのプロセッサと、を備えた、モバイルデバイス。
[実施形態26] プロセッサが、検出方法を参照する前述の実施形態のいずれか1つによる検出方法を実行するためのプログラム手段をさらに備える、先行する実施形態に記載のモバイルデバイス。
[実施形態27]モバイルデバイスがモバイル通信デバイスである、先行する2つの実施形態のいずれか1つに記載のモバイルデバイス。
さらなる任意の特徴および実施形態は、好ましくは従属請求項と併せて、実施形態の後続の説明においてより詳細に開示される。その中で、それぞれの任意選択的な特徴は、当業者が理解するように、独立した方法で、ならびに任意の実行可能な組み合わせで実現され得る。本発明の範囲は、好ましい実施形態によって制限されない。実施形態は、図に概略的に示されている。その中で、これらの図の同一の参照符号は、同一または機能的に比較可能な要素を指す。
較正方法および分析物を検出するための方法のフローチャートを示す。 本発明による較正方法を実行するためのモバイルデバイスの実施形態の斜視図を示す。 図3A~図3Bはモバイルデバイスによってキャプチャされた画像の実施形態を示す。 図4A~Bは視覚的表示の実施形態を示す。
図1は、サンプル中の分析物を検出するためのモバイルデバイス114のカメラ112を較正するための較正方法110のフローチャート、および分析物115を検出するための方法のフローチャートを示す。較正方法110は、以下のステップを含む:
a)(参照番号118で示される)カメラ112を使用することによって少なくとも1つの対象物116の少なくとも1つの画像をキャプチャするステップであって、前記キャプチャ中に、モバイルデバイス114の照明源120がオンにされる、キャプチャするステップ。
b)(参照番号122で示される)ステップa)でキャプチャされた画像から、照明源120から発生し、対象物116によって反射される光の直接反射によって影響を受ける画像内の少なくとも1つの第1の領域124を決定するステップ。
c)(参照番号126で示される)第1の領域124と本質的に重ならない画像内の少なくとも1つの第2の領域128を決定し、第2の領域128を、後続の検出ステップにおける試験片134の試験フィールド132の位置の標的領域130として返すステップ。
図2には、較正方法110を実行するためのモバイルデバイス114が斜視図で示されている。さらに、少なくとも1つの対象物116が示されている。対象物116は、少なくとも一つの平らな面、参照カード、サンプル中の分析物を検出するための少なくとも1つの試験片134であって、分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールド132を有する試験片134、少なくとも1つの試験片容器、少なくとも1つの、特に試験片134の包装136、からなる群から選択することができる。図2に示される実施形態では、対象物116は、包装136であり得る。ステップa)118において、カメラ112と対象物116との間の距離は、0.03m~0.3m、好ましくは0.03~0.15m、最も好ましくは0.03~0.1mであり得る。
モバイルデバイス114および対象物116は、モバイルデバイス114のカメラ112と、対象物116、特に対象物116の少なくとも1つの表面とが互いに本質的に平行であるように配置され得る。対象物116は、少なくとも1つの位置マーカ138、例えば、少なくとも1つのOpenCV ArUcoマーカを含み得る。対象物116とカメラ112との間の相対的な位置および/または向きは、位置マーカ138、特にOpenCV ArUcoマーカを使用することによって決定され得る。図2に示されるように、対象物116は、少なくとも1つの位置マーカ138を含む少なくとも1つの平らな表面を有する少なくとも1つの包装136であり得る。例えば、包装136は、立方体の包装であり得る。モバイルデバイス114および/または包装136は、互いに平面平行に配置することができる。例えば、対象物116はテーブル上に配置され得、モバイルデバイス114は、対象物116に対してユーザによって配置され得る。対象物116およびモバイルデバイス114を互いに対して配置するときに、視覚的表示がユーザに与えられ得る。具体的には、モバイルデバイス114は、ディスプレイ140を備えることができ、視覚的表示は、ディスプレイ140上に与えられ得る。モバイルデバイス114は、少なくとも1つのプロセッサ142を含み得る。プロセッサ142は、視覚的表示を生成するように適合させることができる。例えば、視覚的表示は、対象物116に対してモバイルデバイス114をどのように適応するか、および/または変更するか、および/または配置するか、および/またはモバイルデバイス114に対して対象物116をどのように適応するかおよび/または変更および/または配置するかについてのユーザへの少なくとも1つのプロンプトおよび/または少なくとも1つの指示を含み得る。視覚的表示は、少なくとも1つのテキストメッセージおよび/または少なくとも1つのグラフィック命令を含み得る。特に、対象物116の画像をキャプチャするときに、視覚的な表示をユーザに与えることができる。相対的な位置および/または向きが満たされ得ると決定された場合、少なくとも1つの画像のキャプチャが自動的に開始され得る。これにより、ハンズフリー操作、特に分析対象物の較正および/または測定が可能になる。
照明源120は、モバイルデバイス114に統合された少なくとも1つの発光ダイオードを含み得る。照明源120は、2つの状態、すなわち、対象物116を照明するための光線を生成するオン状態と、照明源120がオフであるオフ状態とを有し得る。モバイルデバイス114は、ディスプレイ140を照明する少なくとも1つの照明源などのさらなる照明デバイスを含み得、および/またはディスプレイ140は、さらなる照明源自体として設計され得る。較正方法110は、照明源120が、検出方法を実行するのに十分な照明強度を提供するように構成されているかどうかを評価することをさらに含み得る。照明源120が十分な照明を提供するように構成されているかどうかを評価することは、少なくとも1つの閾値方法を使用することができる。照明強度の十分性は、対象物116の表面特性および/または周囲光条件に依存し得る。特に、高い反射特性を有する明るい対象物116の場合、低い反射特性を有する暗い対象物116と比較して、より低い光強度で十分であり得る。さらに、例えば太陽光による明るい周囲光条件の場合、遮蔽された周囲光条件と比較して、より高い強度が必要とされる場合がある。
ステップa)118において、対象物116の単一の画像がキャプチャされ得、および/または一連の画像などの対象物116の複数の画像がキャプチャされ得る。例えば、画像のキャプチャは、ビデオまたは映画などの一連の画像を連続的に記録することを含み得る。ステップa)118でのキャプチャは、1秒未満の時間枠で、好ましくは0.5秒未満の時間枠で、より好ましくは0.1秒未満の時間枠で行うことができる。対象物の少なくとも1つの画像のキャプチャは、ユーザアクションによって開始され得るか、またはカメラ112の視野内および/または視野の所定のセクタ内に少なくとも1つの対象物116の存在が自動的に検出されると、自動的に開始され得る。これらの自動画像取得技術は、例えば、自動バーコード読み取りアプリなどの自動バーコードリーダの分野で知られている。
例えば、ステップa)118において、複数の画像をキャプチャすることができる。複数の画像は、画像の少なくとも1つのシーケンスを含み得る。ステップb)122において、少なくとも1つの事前定義されたおよび/または事前に指定された選択基準を満たす、複数の画像のうちの少なくとも1つの画像が選択され、使用され得る。事前定義および/または事前指定された選択基準は、ルックアップテーブルで提供され得、および/または経験的または半経験的に決定され得る。選択基準は、一例として、モバイルデバイス114によって構成される記憶装置にさらに記憶され得る。具体的には、選択基準は、ソフトウェアによって、より具体的にはアプリによって、ストレージデバイスに格納され得る。事前定義または事前指定された選択基準は、少なくとも1つのシャープネス基準、少なくとも1つの空間基準、周囲光の状態、からなるグループから選択することができる。鮮明度基準は、それを超えると画像が「焦点が合っている」または「鮮明である」と見なされる、またはそれ以上の少なくとも1つの鮮明度閾値を含み得る。空間基準は、例えば対象物116の任意の平面に対するモバイルデバイス114の平面平行位置からの許容可能な偏差を指す少なくとも1つの角度閾値を含み得る。ステップb)122は、画像のシーケンスから最良の画像、例えば、事前定義または事前に指定された選択基準を最もよく満たす画像を選択することを含み得る。画像のシーケンスは、少なくとも1つの時間間隔の間、連続的にキャプチャされ得る。ステップb)122、例えば画像の選択、および/またはステップc)126は、オンラインで、すなわち画像シーケンスをキャプチャしている間に実行されることができる。キャプチャは、例えば、選択基準を満たす少なくとも1つの画像が決定されるまで繰り返され得る。上で概説したように、視覚的ガイダンスなどの視覚的表示は、対象物116の画像をキャプチャするときにユーザに与えられ得る。例えば、視覚的表示は、対象物116または対象物116の輪郭および/または輪郭などの対象物116の一部の視覚化を含み得る。視覚的表示は、対象物116の輪郭または対象物116上の参照領域、例えば、モバイルデバイス114のディスプレイ140に重ね合わされた、対象物116の形状に対応するフレームを含み得、対象物116に対してカメラ112を位置決めするための視覚的ガイダンスを提供する。対象物116の少なくとも1つの画像のキャプチャは、シャープネス基準および/または空間基準が満たされ得ると決定された場合、特に、視覚的表示における対象物116の輪郭が対象物116に重なると決定された場合に自動的に開始され得る。追加的または代替的に、音声ガイダンスまたは他の種類のガイダンスが与えられ得る。
図3Aおよび3Bは、モバイルデバイス114によってキャプチャされた画像の実施形態を示す。ステップa)118でキャプチャされた画像から、照明源120から発生し、対象物116によって反射される光の直接反射によって影響を受ける画像内の少なくとも1つの第1の領域124が決定される。図3Aおよび図3Bに示されるように、画像内の光スポット144は、照明源120によって生成された光ビーム146の直接反射によって生成される。画像内の光スポット144は、周囲の画像領域よりも明るい領域であり得る。画像のヒストグラム分析を使用して、ステップb)122の第1の領域124を決定することができる。ヒストグラム分析は、画像内の第1の領域124の位置を決定することを含み得る。ヒストグラム分析は、画像内の最大強度を決定すること、および画像内の最大強度の位置を決定することを含み得る。第1の領域124は、ヒストグラム分析において強度の少なくとも1つの閾値を使用することによって決定され得る。ヒストグラム分析は、少なくとも1つの二次元ガウスフィットを含むことができる。例えば、1σを超える強度を有する画像領域は、第1の領域124と見なされ得る。図3Aおよび図3Bに示される画像は、例えば象限において、少なくとも4つのセグメントに分割され得る。第1の領域124は、画像の少なくとも1つの第1のセグメントに割り当てられ得る。例えば、図3Aに示される画像では、第1の領域124は、象限の2つの上部セグメントに位置すると決定され得る。例えば、図3Bに示される画像では、第1の領域124は、2つの下部セグメントに位置すると決定され得る。
ステップc)126において、画像において、第1の領域124と本質的に重ならない少なくとも1つの第2の領域128が決定され、第2の領域128を、後続の検出ステップにおける試験片134の試験フィールド132の位置の標的領域130として返す。第2の領域128は、照明源120からの光の直接反射による影響が防止され、および/または少なくとも大幅に低減されるように決定され得る。標的領域130は、ゾーン外、具体的には、照明源120からの光の直接光反射によって影響を受ける第1の領域124から外れていると決定され得る。さらに、標的領域130は、分析物の決定が可能であるように、例えば試験フィールド132が十分に照明され、カメラ112の視野内にあるように決定され得る。第2の領域128は、本質的に均一な照明を備えた画像の領域であると決定され得る。第2の領域128は、照明強度が少なくとも1つの強度閾値を下回る領域であると決定され得る。第2の領域は、直接反射からの光スポットによって生成される照明が最小化されるように選択され得る。したがって、第2の領域128は、第1の領域124が決定された第1のセグメントとは異なる画像の少なくとも1つの他のセグメントに位置すると決定され得る。さらに、第2の領域128は、光源による十分な照明を可能にし、画像エッジによる境界効果を防止するために、画像エッジから十分に分離されるように決定され得る。図3Aおよび図3Bは、決定された第2の領域128およびそれぞれの標的領域130を示している。図3Aでは、第1の領域124が2つの上部セグメントに位置すると決定された場合、第2の領域128は、象限の2つの下部セグメントの一方または両方に位置すると決定され得る。図3Bでは、第1の領域124が2つの下部セグメントに位置すると決定された場合、第2の領域128は、2つの上部セグメントに位置すると決定され得る。
標的領域130の位置の情報は、例えば、プロンプトとして、例えば、外部コンピューティング手段またはプロセッサ142などのモバイルデバイス114のコンピューティング手段などのコンピューティング手段に提供され得る。プロセッサ142は、標的領域130の位置の情報に基づいて、試験片134およびモバイルデバイス114を互いに対して配置するための視覚的表示を適合および/または生成することができる。
検出方法115は、サンプル中の分析物を検出するための少なくとも1つの試験片134を提供するステップ146を含む。図2は、分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールド132を有する試験片134の実施形態を示す。検出方法115は、少なくとも1つのサンプルを試験片134の試験フィールド132に適用するステップ148を含む。
検出方法115は、試験フィールド132が少なくとも部分的に標的領域130に配置されるように、ユーザがカメラ112に対して試験片134を配置するための視覚的表示150を提供するステップ152を含む。標的領域130は、試験片134の形状または形状の一部と同一の形状を有し得る。標的領域130は、試験片134の輪郭または重なりとして構成され得る。視覚的表示150は、モバイルデバイス114のディスプレイ140上のカメラのライブ画像と標的領域130、例えば試験片134の輪郭との重ね合わせであり得る。したがって、試験片134がカメラ112の視野内に配置されると、視覚的表示150は、標的領域130と試験片134との重なりを示し、ユーザが標的領域130に合わせて試験片134を容易に配置できるようにする。視覚的表示150は、テキストメッセージ、例えばプロンプトなどのユーザのための少なくとも1つの命令、および/または少なくとも1つのグラフィカルな命令を含み得る。例えば、視覚的表示は、試験片134または試験片134の輪郭および/または輪郭などの試験片134の一部の視覚化を含み得る。視覚的表示150は、具体的には視覚的ガイダンスであり得、例えば、モバイルデバイス114のディスプレイ140上に重ねられた、例えば、試験片134の形状であって、試験片134に対してカメラを配置するための視覚的ガイダンスを提供する輪郭であり得、または含み得る。視覚的表示150は、モバイルデバイス114および試験片114の両方の互いに対する視覚化を含み得る。視覚的表示150は、方向および/または距離プロンプト、例えば、少なくとも1つの矢印および/または少なくとも1つのテキストメッセージなどの位置決め情報を含み得る。図4Aおよび図4Bは、モバイルデバイス114のディスプレイ140上の視覚的表示150の実施形態を示す。図4Aでは、視覚的表示150は、検出方法115で使用される試験片134に対応する重なり154を含み得る。重なり154は、経験的に決定され得、および/またはソフトウェアによって、具体的には、アプリストアなどからダウンロードされた少なくとも1つのアプリによって、少なくとも1つのルックアップテーブルに、および/またはモバイルデバイスの少なくとも1つのデータストレージに格納され得る。さらに、ディスプレイ140上に、ユーザが重なり154および試験片134と一致するように適合され得るように、試験片134のカメラのライブ画像が示され得る。図4Bには、さらなる視覚的表示150が示されている。特に、視覚的表示150は、ユーザに試験片の側面を変更するように要求するテキストメッセージおよびグラフィック表示を含み得る。
検出方法115は、カメラ112を使用することによって試験フィールド132の少なくとも1つの画像をキャプチャするステップ156を含み、前記キャプチャ中に、モバイルデバイス114の照明源120がオンになる。検出方法115は、前のステップ156でキャプチャされた画像から、サンプル中の分析物濃度が決定されるステップ158を含む。
110 較正方法
112 カメラ
114 モバイルデバイス
115 分析物を検出する方法
116 対象物
118 ステップa)
120 照明源
122 ステップb)
124 第1の領域
126 ステップc)
128 第2の領域
130 標的領域
132 試験フィールド
134 試験片
136 包装
138 位置マーカ
140 表示
142 プロセッサ
144 光スポット
146 光ビーム
148 方法ステップ
150 視覚的表示
152 方法ステップ
154 重なり
156 方法ステップ
158 方法ステップ

Claims (15)

  1. サンプル中の分析物検出用のモバイルデバイス(114)のカメラ(112)の較正方法(110)であって、
    a)(118)前記カメラ(112)を使用することによって少なくとも1つの対象物(116)の少なくとも1つの画像をキャプチャすることであって、前記キャプチャ中に、前記モバイルデバイス(114)の照明源(120)がオンになる、キャプチャすることと、
    b)(122)ステップa)でキャプチャされた前記画像から、前記照明源(120)から発生し、前記対象物(116)によって反射される光の直接反射によって影響を受ける前記画像内の少なくとも1つの第1の領域(124)を決定することと、
    c)(126)前記第1の領域(124)と本質的に重ならない前記画像内の少なくとも1つの第2の領域(128)を決定し、前記第2の領域(128)を後続の検出ステップにおける試験片(134)の試験フィールド(132)の位置の標的領域(130)として返すこと、
    を含む較正方法(110)。
  2. ステップb)(122)において前記第1の領域(124)を決定するために前記画像のヒストグラム分析が使用される、請求項1に記載の較正方法(110)。
  3. 前記第1の領域(124)は、前記ヒストグラム分析において少なくとも1つの強度の閾値を使用することによって決定される、請求項2に記載の較正方法(110)。
  4. 前記較正方法(110)は、前記カメラ(112)と前記対象物(116)との間の遠近および/または角度をさらに考慮に入れる、請求項1~3のいずれか一項に記載の較正方法(110)。
  5. ステップa)(118)において、複数の画像がキャプチャされ、前記複数の画像が少なくとも1つの画像シーケンスを含み、ステップb)(122)において、少なくとも1つの事前定義された選択基準を満たす、前記複数の画像のうちの少なくとも1つの画像が選択されて使用される、請求項1~4のいずれか一項に記載の較正方法(110)。
  6. ステップa)(118)において、前記カメラ(112)と前記対象物(116)との間の距離が0.03m~0.3m、好ましくは0.03~0.15m、最も好ましくは0.03~0.1mである、請求項1~5のいずれか一項に記載の較正方法(110)。
  7. ステップa)(118)で使用される前記対象物(116)が、少なくとも1つの平らな面、参照カード、前記サンプル中の前記分析物を検出するための少なくとも1つの試験片(134)、少なくとも1つの試験片容器、少なくとも1つの包装(136)、からなる群から選択される、請求項1~6のいずれか一項に記載の較正方法(110)。
  8. 前記モバイルデバイス(114)の前記照明源(110)が、前記モバイルデバイス(114)に組み込まれた少なくとも1つの発光ダイオードを含む、請求項1~7のいずれか一項に記載の較正方法(110)。
  9. ステップa)(118)におけるキャプチャが、1秒未満の時間枠で、好ましくは0.5秒未満の時間枠で、より好ましくは0.1秒未満の時間枠で行われる、請求項1~8のいずれか一項に記載の較正方法(110)。
  10. モバイルデバイス(114)のカメラ(112)を使用することによってサンプル中の分析物を検出するための検出方法(115)であって、
    i)請求項1~9のいずれか一項に記載の較正方法を使用することによって前記カメラ(112)を較正することと、
    ii)前記サンプル中の前記分析物を検出するための少なくとも1つの試験片(134)を提供することであって、前記試験片(134)は、前記分析物の存在下で光学的検出反応を実行するための少なくとも1つの試験化学物質を含む少なくとも1つの試験フィールド(132)を有する、提供することと、
    iii)前記試験片(134)の前記試験フィールド(132)に少なくとも1つのサンプルを適用することと、
    iv)ユーザに、前記試験フィールド(132)が少なくとも部分的に前記標的領域(130)に位置するように、前記カメラ(112)に対して前記試験片(134)を配置するための視覚的表示(150)を提供すること、
    v)前記カメラ(112)を使用することにより、前記試験フィールド(134)の少なくとも1つの画像をキャプチャすることであって、前記キャプチャ中に、前記モバイルデバイス(114)の前記照明源(120)がオンになる、キャプチャすることと、
    vi)ステップv)でキャプチャされた前記画像から、前記サンプル中の分析物濃度を決定すること、
    を含む検出方法(115)。
  11. ステップvi)が、前記試験片(134)の前記試験フィールド(132)上のスポットの色を分析することを含み、前記スポットが少なくとも部分的に前記サンプルを含む、請求項10に記載の検出方法(115)。
  12. コンピュータプログラムがコンピュータ上またはコンピュータネットワーク上、特に前記モバイルデバイス(114)のプロセッサ上で実行されている間に、請求項1に記載の較正方法の方法ステップa)、b)およびc)のうちの1つまたは複数を実行するためのプログラム手段を含むコンピュータプログラム。
  13. コンピュータプログラムがコンピュータ上またはコンピュータネットワーク上、特に前記モバイルデバイス(114)のプロセッサ上で実行されている間に、請求項10または11に記載の検出方法(115)の方法ステップi)、iv)およびvi)のうちの1つまたは複数を実行するためのプログラム手段を含むコンピュータプログラム。
  14. モバイルデバイス(114)であって、
    -少なくとも1つのカメラ(112)と、
    -少なくとも1つの照明源(120)と、
    -較正方法を参照する請求項1~9のうちのいずれか一項に記載の前記較正方法(110)を実行するためのプログラム手段を含む、少なくとも1つのプロセッサ(142)と、を備えたモバイルデバイス(114)。
  15. 前記プロセッサ(142)が、検出方法を参照する請求項10または11に記載の検出方法(115)を実行するためのプログラム手段をさらに備える、請求項14に記載の前記モバイルデバイス(114)。
JP2023124217A 2018-06-11 2023-07-31 サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法 Pending JP2023164793A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
EP18176998 2018-06-11
EP18176998.5 2018-06-11
JP2020568716A JP2021527210A (ja) 2018-06-11 2019-06-05 サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法
PCT/EP2019/064671 WO2019238500A1 (en) 2018-06-11 2019-06-05 A calibration method for calibrating a camera of a mobile device for detecting an analyte in a sample

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020568716A Division JP2021527210A (ja) 2018-06-11 2019-06-05 サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法

Publications (1)

Publication Number Publication Date
JP2023164793A true JP2023164793A (ja) 2023-11-14

Family

ID=62599484

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020568716A Pending JP2021527210A (ja) 2018-06-11 2019-06-05 サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法
JP2023124217A Pending JP2023164793A (ja) 2018-06-11 2023-07-31 サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020568716A Pending JP2021527210A (ja) 2018-06-11 2019-06-05 サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法

Country Status (16)

Country Link
US (1) US20210096083A1 (ja)
EP (1) EP3803350A1 (ja)
JP (2) JP2021527210A (ja)
KR (1) KR20210018834A (ja)
CN (1) CN112219109A (ja)
AR (1) AR115513A1 (ja)
AU (1) AU2019284819A1 (ja)
BR (1) BR112020025228A2 (ja)
CA (1) CA3102609A1 (ja)
IL (1) IL279241B2 (ja)
MA (1) MA52741A (ja)
MX (1) MX2020013520A (ja)
SG (1) SG11202011798TA (ja)
TW (1) TW202001228A (ja)
WO (1) WO2019238500A1 (ja)
ZA (1) ZA202007420B (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8422740B2 (en) * 2009-01-15 2013-04-16 Scott Dylewski Methods for determining a liquid front position on a test strip
ES2964084T3 (es) * 2019-12-23 2024-04-04 Hoffmann La Roche Procedimiento de ajuste para ajustar una configuración para un procedimiento analítico
WO2021180442A1 (en) * 2020-03-07 2021-09-16 Immundiagnostik Ag Calibration of a digital camera for use as a scanner
EP3936859A1 (en) * 2020-07-06 2022-01-12 Roche Diabetes Care GmbH Method of performing at least one analytical measurement by using a mobile device
EP4214669A1 (en) 2020-09-17 2023-07-26 Scanwell Health, Inc. Diagnostic test kits and methods of analyzing the same
EP4232201A1 (en) 2020-10-23 2023-08-30 Becton, Dickinson and Company Systems and methods for imaging and image-based analysis of test devices
USD970033S1 (en) 2020-10-23 2022-11-15 Becton, Dickinson And Company Cartridge imaging background device
CN113466440B (zh) * 2021-06-30 2024-04-19 上海科华实验系统有限公司 一种生化分析仪定位精度测试设备及测试方法
TWI787964B (zh) * 2021-08-20 2022-12-21 屋諾實業有限公司 自動檢測試紙販賣機
EP4166932A1 (en) 2021-10-14 2023-04-19 F. Hoffmann-La Roche AG Enhanced method for the determination of an analyte concentration in bodily fluid

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7756327B2 (en) * 2002-07-26 2010-07-13 Olympus Corporation Image processing system having multiple imaging modes
EP1801568A1 (de) 2005-12-21 2007-06-27 Micronas Holding GmbH Teststreifen und Verfahren zum Messen einer Analytkonzentration in einer Probe eines biologischen Fluids
GB201105474D0 (en) 2011-03-31 2011-05-18 Albagaia Ltd Testing apparatus
JP5841403B2 (ja) * 2011-10-28 2016-01-13 Kddi株式会社 着色濃度測定装置、着色濃度測定方法および着色濃度測定プログラム
CN104969068B (zh) 2012-08-08 2019-06-18 思勘度股份有限公司 用于在自动校准环境中执行及量化由特定浓度的生物分析物诱发的色彩改变的方法及设备
US9787815B2 (en) * 2013-01-21 2017-10-10 Cornell University Smartphone-based apparatus and method
EP2946198B1 (en) * 2013-01-21 2019-10-30 Cornell University Smartphone-based apparatus and method for obtaining repeatable, quantitative colorimetric measurement
WO2015038717A1 (en) 2013-09-11 2015-03-19 Wellumina Health, Inc. System for diagnostic testing of liquid samples
US9658217B2 (en) * 2014-02-17 2017-05-23 Ixensor Co., Ltd Measuring physical and biochemical parameters with mobile devices
EP2921846B1 (en) * 2014-03-21 2023-10-25 Microdiscovery Gmbh Portable reader module, portable reader, and method for quantitative analysis of an assay
US9823131B2 (en) * 2015-06-02 2017-11-21 X-Rite Switzerland GmbH Sample target for improved accuracy of color measurements and color measurements using the same
US20210172945A1 (en) * 2018-05-07 2021-06-10 Immundiagnostik Ag System for analyzing quantitative lateral flow chromatography

Also Published As

Publication number Publication date
CN112219109A (zh) 2021-01-12
IL279241B1 (en) 2024-02-01
US20210096083A1 (en) 2021-04-01
SG11202011798TA (en) 2020-12-30
AU2019284819A1 (en) 2020-12-17
AR115513A1 (es) 2021-01-27
JP2021527210A (ja) 2021-10-11
WO2019238500A1 (en) 2019-12-19
MA52741A (fr) 2021-04-14
IL279241B2 (en) 2024-06-01
EP3803350A1 (en) 2021-04-14
ZA202007420B (en) 2021-09-29
KR20210018834A (ko) 2021-02-18
CA3102609A1 (en) 2019-12-19
TW202001228A (zh) 2020-01-01
MX2020013520A (es) 2021-02-26
IL279241A (en) 2021-01-31
BR112020025228A2 (pt) 2021-03-09

Similar Documents

Publication Publication Date Title
JP2023164793A (ja) サンプル中の分析物検出用のモバイルデバイスのカメラの較正方法
US11835515B2 (en) Method for evaluating suitability of lighting conditions for detecting an analyte in a sample using a camera of a mobile device
KR102603366B1 (ko) 분석 측정을 수행하기 위한 방법들 및 디바이스들
JP7356490B2 (ja) サンプル中の分析物の検出方法
AU2018356358A1 (en) Methods and devices for performing an analytical measurement based on a color formation reaction
US20220291134A1 (en) Method of performing an analytical measurement
RU2809608C2 (ru) Способ калибровки для калибровки камеры мобильного устройства для определения аналита в образце
KR20230086754A (ko) 카메라를 가진 모바일 장치의 자동 노출 설정 제어 방법
AU2019284820B2 (en) Method for evaluating a suitability of lighting conditions for detecting an analyte in a sample using a camera of a mobile device
EP3954990B1 (en) Test strip fixation device for optical measurements of an analyte
US20220122254A1 (en) Method of determining a concentration of an analyte in a body fluid
CN117940990A (zh) 用于控制移动装置的自动白平衡设定以用于使用颜色参考卡的基于颜色的测量的方法和装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230830

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240409