JP2023520014A - 検査キットの画像ベースの分析 - Google Patents
検査キットの画像ベースの分析 Download PDFInfo
- Publication number
- JP2023520014A JP2023520014A JP2022559789A JP2022559789A JP2023520014A JP 2023520014 A JP2023520014 A JP 2023520014A JP 2022559789 A JP2022559789 A JP 2022559789A JP 2022559789 A JP2022559789 A JP 2022559789A JP 2023520014 A JP2023520014 A JP 2023520014A
- Authority
- JP
- Japan
- Prior art keywords
- test kit
- image
- user
- waiting time
- machine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims description 34
- 238000003149 assay kit Methods 0.000 title abstract description 22
- 238000012360 testing method Methods 0.000 claims abstract description 190
- 238000000034 method Methods 0.000 claims description 52
- 230000015654 memory Effects 0.000 claims description 23
- 230000003862 health status Effects 0.000 claims description 10
- 238000004519 manufacturing process Methods 0.000 claims 2
- 241000700605 Viruses Species 0.000 description 13
- 238000003752 polymerase chain reaction Methods 0.000 description 12
- 241001678559 COVID-19 virus Species 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 201000010099 disease Diseases 0.000 description 4
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 4
- 229940027941 immunoglobulin g Drugs 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 239000008280 blood Substances 0.000 description 3
- 210000004369 blood Anatomy 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000001010 compromised effect Effects 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 208000025721 COVID-19 Diseases 0.000 description 2
- 241000725303 Human immunodeficiency virus Species 0.000 description 2
- 108060003951 Immunoglobulin Proteins 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 102000018358 immunoglobulin Human genes 0.000 description 2
- 208000015181 infectious disease Diseases 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 208000024891 symptom Diseases 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000003556 assay Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000001124 body fluid Anatomy 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 208000006454 hepatitis Diseases 0.000 description 1
- 231100000283 hepatitis Toxicity 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010339 medical test Methods 0.000 description 1
- 238000009597 pregnancy test Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 210000003296 saliva Anatomy 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 210000002700 urine Anatomy 0.000 description 1
- 230000003612 virological effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/8483—Investigating reagent band
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/17—Image acquisition using hand-held instruments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/40—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for data related to laboratory analysis, e.g. patient specimen analysis
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/40—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management of medical equipment or devices, e.g. scheduling maintenance or upgrades
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Epidemiology (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Signal Processing (AREA)
- Molecular Biology (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Chemical & Material Sciences (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Automatic Analysis And Handling Materials Therefor (AREA)
- User Interface Of Digital Computer (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
デバイスは、1つまたは複数の検査キット用の画像ベースの分析器として機能するように構成されてよい。デバイスは、適切な時間ウィンドウ内に検査キットの画像をキャプチャする際にユーザをガイドする。デバイスは、検査キットの画像を分析し、画像に示されている検査キットの1つまたは複数の特徴を認識し、認識された1つまたは複数の特徴によって示される1つまたは複数の結果を取得し、1つまたは複数の結果のうちの1つまたは複数を提供する。デバイスは、結果のうちのいくつかまたはすべてを提供するように構成されてよい。結果は、デバイスのディスプレイ画面上に可視的に表示されてよく、デバイスのスピーカにより可聴的に提示されてよく、またはその両方であってよい。
Description
本明細書に開示される主題は、一般に、ヘルスケア検査を行う専用マシンの技術分野に関し、そうした専用マシンのソフトウェア構成されたコンピュータ化された変形形態およびそうした変形形態の改善を含み、そうした専用マシンがヘルスケア検査を行う他の専用マシンと比較して改善された技術に関する。詳細には、本開示は、検査キットの画像ベースの分析を行うためのシステムおよび方法に対処する。
デバイスは、デバイスのカメラを用いて画像をキャプチャするように構成される場合がある(例えば、アプリなどの適切なソフトウェアによって)。デバイスは、その後、キャプチャされた画像を、ネットワークを介して別のデバイスまたは他のマシンに通信する場合がある。
いくつかの実施形態は、例として示され、添付の図面の図における限定として示されるものではない。
例示的な方法(例えば、アルゴリズム)は、1つまたは複数の検査キットの画像ベースの分析を行い、例示的なシステム(例えば、専用ソフトウェアによって構成された専用マシン)は、1つまたは複数の検査キットの画像ベースの分析を行うように構成される。例は、可能な変形形態を代表するに過ぎない。明示的に述べられない限り、構造(例えば、モジュールなどの構造的コンポーネント)は、随意であり、組み合わされまたはさらに再分割されてよく、動作(例えば、プロシージャ、アルゴリズム、または他の機能)は、順次変化してよく、または組み合わされもしくは再分割されてよい。以下の記載では、説明の目的のため、多くの特有の詳細が、様々な例示的な実施形態の十分な理解を提供するように説明される。しかしながら、本発明の主題が、これらの具体的な詳細なしに実施されてよいことが、当業者には明らかである。
ヘルスケア検査は、多くの場合、ヘルスケアワーカーによって患者に対して実行され、その結果は、ヘルスケアワーカーによって、患者と政府保健所などの中央当局との両方に報告されることが可能である。中央当局は、患者が適切な時間枠内に自身の検査キットを分析しない可能性があるという懸念、患者が自分の検査キットの結果を確実に解釈しない可能性があるという懸念、患者が自身のヘルスケア検査の結果を中央当局に報告しない可能性があるという懸念、またはこれらの懸念の任意の組合せから、患者が自身で医療検査を行うことを許可しない規則を有する場合がある。
デバイス(例えば、スマートフォンなどのモバイルデバイス)は、1つまたは複数の検査キットのための画像ベースの分析器として機能するように(例えば、モバイルアプリまたは他の適切なソフトウェア、ハードウェア、もしくはその両方によって)構成されてもよい。ユーザは、ヘルスケア検査を実行するために検査キットを用いてよい。例えば、検査キットは、ウイルスの存在についてのポリメラーゼ連鎖反応(PCR)検査、そのウイルスに対する抗体の存在についての抗体検査、またはその両方についての組合せ検査を実施または行うように構成されてよい。本明細書における考察はまた、ヒト免疫不全ウイルス(HIV)検査(例えば、ウイルス量検査、抗体検査、および組合せ検査)、肝炎ウイルス検査、妊娠検査、または適切な検査キット(例えば、ラテラルフローアッセイ(LFA)検査キット)を用いて適切な試料(例えば、血、唾液、または尿などの体液)に対して実施することが可能である他の検査などの、様々な他のヘルスケア検査のうちの1つまたは複数を企図する。例えば、デバイスは、検査キットの画像ベースの分析のために特に構成されたモバイルアプリをダウンロードし、インストールし、実行してよく、モバイルアプリは、デバイスに、本明細書において説明される動作のうちの任意の1つまたは複数を行わせてよい。
構成される(例えば、モバイルアプリによって)と、デバイスは、適切な時間ウィンドウ内に検査キットの画像をキャプチャする際にユーザをガイドする。例えば、デバイスは、検査キットの使用後に所定の最小待機時間が経過した後に画像をキャプチャするようにユーザに指示し、タイマ(例えば、可視プロンプト、可聴プロンプト、またはその両方を備えるカウントダウンタイマ)を提供し、ユーザが画像をキャプチャしようとするのが早すぎる場合にユーザに警告し、所定の最小待機時間が経過した後であって所定の最大待機時間が経過する前に画像をキャプチャするようにユーザに促し、所定の最大待機時間が近づいている場合(例えば、閾値警告期間内)にユーザに警告し、所定の最大待機時間が満了したことをユーザに通知し、検査キットの画像をキャプチャせずに所定の最大待機時間が満了した場合にユーザが続行できないようにするか、またはそれらの任意の適切な組合せであってもよい。
検査キットの画像がキャプチャされた(例えば、適切な期間内に)場合、デバイスは、検査キットの画像を分析し、画像内に示される検査キットの1つまたは複数の特徴を認識し、1つまたは複数の認識された特徴によって示される1つまたは複数の結果を取得し(例えば、生成し)、1つまたは複数の結果のうちの1つまたは複数を提供する。例えば、検査キットは、特定のウイルス(例えば、SARS-CoV-2、COVID-19を引き起こすウイルス)に対する抗体の存在を検出するための試験紙の形態をとってよい。構成される(例えば、モバイルアプリによって)と、デバイスは、試験紙の画像を分析し、試験紙の画像において可視の1つまたは複数のインジケータを認識する(例えば、コンピュータビジョンまたは光学認識のための他の人工知能を用いて)。そうしたインジケータの例には、結果ウィンドウおよびそれに隣接するかまたは近接するマーキング(例えば、「対照」を表す「C」、短期免疫グロブリンM(IgM)抗体を表す「M」、長期免疫グロブリンG(IgG)抗体を表す「G」)が含まれる。デバイスは、試験紙の形状、試料挿入開口部(例えば、血液液滴入力穴)、検査キットの製造者の名称、検査キットの名称、検査キットの型番、またはそれらの任意の適切な組合せをさらに認識してよく、それらのうちの任意の1つまたは複数は、結果ウィンドウおよびその対応するマーキングを認識するようにデバイスによって用いられる要因であってよい。
結果ウィンドウが認識されると、デバイスは、結果ウィンドウ内および認識されたマーキングに対応する(例えば、近接していることによって)位置において、マーク(例えば、バー、正方形、またはドット)の有無、勾配の長さ、色(例えば、青対ピンク)の有無、またはそれらの任意の適切な組合せを認識することによって、結果自体を識別するか、または取得する。SARS-CoV-2ウイルスに対する抗体の有無を検出するための検査キットは、その結果ウィンドウの近くにマーキング「C」、「M」、および「G」を有してよい。デバイスは、マーキングごとにそれぞれのマーク(例えば、バー)の有無を認識してよい。例えば、「C」マーキングの隣のバーは、検査キット内の対照の存在として認識されてよい。デバイスは、検査キットが正常に機能しており、解釈の準備ができていることを確認するために他のマーキングをチェックする前に、この認識を最初にチェックしてよい。別の例として、不可能なまたは無意味な結果の認識は、損なわれた検査キットを示してよい。デバイスは、エラーモードに切り替えること、エラー警告を提示すること、または正確な結果を得るために検査キットを使用不能として扱うことによって応答してよい。
様々な例示的な実施形態によれば、デバイスは、得られた結果のうちのいくつかまたは全てを提供するように構成される。結果は、デバイスのディスプレイ画面上に視覚的に表示されてよく、デバイスのスピーカを介して聴覚的に提示されてよく、またはその両方であってよい。結果は、ユーザの別のデバイス、ヘルスケアワーカー(例えば、医師または看護師)のデバイス、病院もしくは役所のデバイスもしくは他のマシン(例えば、サーバマシン)、またはそれらの任意の適切な組合せなどの別のデバイスに送信されてよい。デバイスは、所定の時間ウィンドウ(例えば、検査キットまたは検査キットの種類の有効期間)内に結果を提供してよい。デバイスは、そうした所定の時間ウィンドウの遵守を確実にするためにエラーチェックを行ってよい。いくつかの例示的な実施形態では、デバイスは、1つまたは複数の結果が報告されることを確実にするために、任意の結果をユーザに提供する前に、(例えば、役所または他の当局エンティティに対応する)まず所定のサーバマシンに1つまたは複数の結果を送信するように構成される。
ある例示的な実施形態では、さらなる結果を提供するために、追加のデータがアクセスされ、検査キットからの1つまたは複数の結果と共に処理される。例えば、PCR検査が以前に行われており、その結果がデバイスによってアクセス可能(例えば、ローカルにまたはネットワークを介して)である場合、デバイスは、PCR結果にアクセスし、PCR結果および複数の検査キット結果のうちの1つまたは複数に基づいてさらなる結果を生成し、そのさらなる結果を提供(例えば、ユーザに、当局エンティティに、またはその両方に)してよい。検査キットがSARS-CoV-2ウイルスに対する抗体の有無を検出する場合、デバイスは、SARS-CoV-2ウイルスの有無についてのPCR結果にアクセスし、PCR結果および検査キット結果に基づいて使用者の仕事に行く準備の評価を生成し、次いで、上記のように評価(例えば、準備スコア)を提供してよい。
様々な例示的な実施形態では、デバイスは、デバイスによってキャプチャされた画像を分析し、検査キットまたはその任意の部分を認識するために、機械学習(例えば、深層学習)を利用するものを含む、様々なコンピュータビジョン技法のうちのいずれか1つまたは複数を用いて、本明細書において説明される方法のうちの1つまたは複数を行うように構成される。例えば、そうした技法を用いて、デバイスの様々な例示的な実施形態は、個々のマーク(例えば、個々のバー)または複数のマークのパターン(例えば、複数のバーの構成)を認識してよい。複数のマークのパターンを認識する場合、各可能なパターンは、デバイスによってキャプチャされた画像内の複数のマークの実際のパターンを分類する際の使用のために、訓練された分類器(例えば、深層学習によって訓練された)によって分類されてよい。
いくつかの例示的な実施形態では、デバイスは、ユーザの健康状態(例えば、ユーザが現在ウイルスに感染しているか、以前にウイルスに感染していたか、現在ウイルスに対して免疫性であるか、またはそれらの任意の適切な組合せ)についての予測を生成するように構成される。そうした予測は、検査キットの識別された結果、別の検査(例えば、PCR検査)の1つまたは複数のアクセスされた結果、ユーザによって経験されているとユーザによって示された1つまたは複数の症状、またはそれらの任意の適切な組合せに基づいて、デバイスによって生成および提供(例えば、通信、提示、またはその両方)されてよい。
様々な例示的な実施形態によれば、デバイスは、以下の形態のうちの任意の1つまたは複数により1つまたは複数の結果を提供する:バイナリ(例えば、はいまたはいいえ、有無、感染または非感染など)、検査キットの結果ウィンドウ内に存在するマーク(例えば、バーが示す)、検査キットの結果ウィンドウに存在しないマーク(例えば、バーが欠けている)、結果ウィンドウ内のマークのうちの1つまたは複数の周りに描かれた境界ボックス、またはそれらの任意の適切な組合せ。
ある例示的な実施形態によれば、デバイスは、検査キットの識別された結果に基づいて生成され、決定され、または取得されたさらなる情報を提供する。そうしたさらなる情報の例には、結果に関してユーザが次に何をすべきかについての推奨、疾患に罹患するリスクレベル(例えば、検査キットの結果に基づいて生成または取得される)、疾患がないことを示すクリアランス通知(例えば、検査キットの結果に基づいて生成または取得される)、またはそれらの任意の適切な組合せが含まれる。
いくつかの例示的な実施形態によれば、検査キットがデバイスによって認識されないとき、デバイスは、ユーザにグラフィカルユーザインタフェースを提示する。ユーザは、そのユーザインターフェースによって、検査キット上のインジケータ、検査キット上の結果ウィンドウ、結果ウィンドウについての1つまたは複数のマーキング、結果ウィンドウにおける1つまたは複数のマーク、またはそれらの任意の好適な組合せを、手動で定めることが可能である(例えば、境界ボックスを示すことによって)。したがって、デバイスは、検査キットのそうしたユーザ定義の特徴に基づいて、その画像分析動作、その結果識別動作、またはその両方を修正するように構成されてよい。これに代えて、デバイスは、そうしたユーザ定義の特徴についての定義データをサーバマシンにアップロードするように構成されてよく、サーバマシンは、そうした修正を行い、修正された動作を行うようにデバイスを再構成するアプリ更新により応答するように構成される。サーバマシンはまた、1つまたは複数の他のデバイスにアプリ更新を提供して、そのデバイス上にて行われる同様の動作を修正してよい。
様々な例示的な実施形態では、モバイルアプリについて上述した機能のいくつかまたは全ては、ウェブサーバによってホストされるウェブインターフェースを介して利用可能でもある。したがって、本明細書において説明されるシステムおよび方法は、ユーザによって用いられる1つまたは複数の検査キットの画像ベースの分析から医師訪問、緊急ケア、および緊急治療室治療が利益を得ることができるように、ユーザの環境(例えば、自宅または職場)ならびに種々のヘルスケア環境において柔軟に展開されてよい。
図1は、いくつかの例示的な実施形態に係る、ユーザが自身でヘルスケア検査を行うことを可能にし、指定された時間ウィンドウ内にて検査キットの画像ベースの分析を通じてユーザをガイドする、モバイルアプリの例示的な画面を示す図である。上述した動作のいずれか1つまたは複数は、図1に示されるモバイルアプリによって構成されたデバイスによって行われてよい。
図2は、いくつかの例示的な実施形態に係る、検査キットの画像ベースの分析の結果に基づいて、モバイルアプリがユーザに提示させ得る例示的なメッセージを説明する注釈付き表である。図2に示される例示的なメッセージの各々は、検査キットの結果ウィンドウに表示される1つまたは複数のマークから認識可能な異なる結果を示す。
図3は、いくつかの例示的な実施形態に係る、画像ベースの分析に適した例示的な特徴を示す、いくつかの検査キットの写真である。示される検査キットは、隣接するマーキング(例えば、「C」、「G」、および「M」)を伴う結果ウィンドウと、試料挿入開口と、結果ウィンドウを通して可視の1つ以上のマーク(例えば、バー)とを各々含む。
図4は、いくつかの例示的な実施形態に係る、検査キットの画像ベースの分析のための方法400を行う際のデバイス(例えば、モバイルアプリによって構成されるような)の動作を示すフローチャートである。方法400における動作は、任意のデバイス(例えば、スマートフォン、タブレットコンピュータ、またはスマートウォッチなどのモバイルデバイス)によって、1つまたは複数のプロセッサ(例えば、マイクロプロセッサまたは他のハードウェアプロセッサ)を用いて、またはそれらの任意の適切な組合せを用いて行われてよい。図4に示されるように、方法400は、動作410、412、420、422、424、430、432、440、450、460、470、および480のうちの1つまたは複数を含む。
動作410では、デバイスは、検査キットを用いてから所定の最小待ち時間が経過した後に画像をキャプチャするようにユーザに指示する。すなわち、デバイスは、所定の最小待機時間が経過するまで待機し、次に検査キットの画像をキャプチャするようにユーザに指示する。したがって、デバイスは、タイマ(例えば、可視プロンプト、可聴プロンプト、またはその両方を備えるカウントダウンタイマ)を表示または提供してよい。検査キットに応じて、所定の最小待ち時間は、数秒(例えば、3、4、5、8、または10秒)から数秒(例えば、12、15、30、または45秒)、数分(例えば、1、1.5、2、2.5、3、4、5、8、または10分)、数分(例えば、12、15、30、または45分)までのいずれかであってよい。
ユーザが画像をキャプチャしようとするのが早すぎる場合(例えば、デバイスによって検出されるように)、動作412において、デバイスは、ユーザが画像をキャプチャしようとするのが早すぎるという警告を表示するか、または提示(例えば、聴覚的にまたは触覚的に)する。
所定の最小待機時間(例えば、デバイスによって検出されるような)の満了後、かつ所定の最大待機時間の満了前に、動作420において、デバイスは、検査キットの画像をキャプチャするようにユーザに促す(例えば、視覚的に、聴覚的に、触覚的に、またはそれらの任意の好適な組合せ)。
ユーザがまだ画像(例えば、デバイスによって検出するような)をキャプチャしておらず、所定の最大待機時間が近づいている(例えば、デバイスによって決定されるように、所定の閾値警告期間内にある)場合、動作422において、デバイスは、所定の最大待機時間が近づいている(例えば、所定の閾値警告期間内にある)ことをユーザに警告する(例えば、視覚的に、聴覚的に、触覚的に、またはそれらの任意の適切な組合せ)。検査キットに応じて、所定の最大待機時間は、所定の最大待機時間が所定の最小待機時間より長い限り、数秒(例えば、5、8、または10秒)から数秒(例えば、12、15、30、または45秒)、数分(例えば、1、1.5、2、2.5、3、4、5、8、または10分)、数分(例えば、12、15、30、または45分)、数時間(例えば、1、1.5、2、2.5、または3時間)までのいずれかであってよい。
ユーザがまだ画像(例えば、デバイスによって検出されるような)をキャプチャしておらず、所定の最大待機時間が満了している(例えば、デバイスによって決定されるように)場合、動作424において、デバイスは、所定の最大待機時間が満了したことをユーザに通知する(例えば、視覚的に、聴覚的に、触覚的に、またはそれらの任意の適切な組合せ)。これに加えて、またはこれに代えて、そうした通知は、検査キットがもはや有効ではない(例えば、損なわれている、または信頼できない)こと、新しい検査キットが使用されるべきであること、またはその両方をユーザに知らせてよい。いくつかの例示的な実施形態は、デバイス(例えば、モバイルアプリによって構成されるような)は、検査キットの画像のキャプチャなしに所定の最大待機時間が満了した後、ユーザがモバイルアプリの後続の画面にさらに進むことを許可しない。
検査キットの画像がキャプチャされた(例えば、デバイスによって検出される適切な期間内に)場合、動作430において、デバイスは、検査キットの画像を分析し、画像において示される検査キットの1つまたは複数の特徴を認識し、1つまたは複数の認識された特徴によって示される1つまたは複数の結果を取得(例えば、生成または決定)し、またはそれらの任意の適切な組合せを行う。例えば、検査キットは、特定のウイルス(例えば、SARS-CoV-2、COVID-19を引き起こすウイルス)に対する抗体の存在を検出するための試験紙であるまたはその試験紙を含んでよい。動作430では、デバイスは、試験紙の画像を分析し、試験紙の画像において可視の1つまたは複数のインジケータを認識してよい(例えば、コンピュータビジョンまたは光学認識のための他の人工知能を用いて)。上述したように、そうしたインジケータの例には、結果ウィンドウ、それに隣接するかまたは近接する1つまたは複数のマーキング(例えば、「対照」を表す「C」、短期免疫グロブリンM(IgM)抗体を表す「M」、長期免疫グロブリンG(IgG)抗体を表す「G」)、またはそれらの任意の適切な組合せが含まれる。動作430において、デバイスは、試験紙の形状、試料挿入開口(例えば、血液液滴入力穴)、検査キットの製造者の名称、検査キットの名称、検査キットの型番、またはそれらの任意の適切な組合せをさらに認識してよく、それらの要因のうちの任意の1つまたは複数は、結果ウィンドウおよびその任意の1つまたは複数の対応するマーキングを認識するようにデバイスによって用いられてよい。
様々な例示的な実施形態では、デバイスは、デバイスによってキャプチャされた画像を分析し、検査キットまたはその任意の部分を認識するために、機械学習(例えば、深層学習)を利用するものを含む、様々なコンピュータビジョン技法のうちのいずれか1つまたは複数を用いて、動作430を行うように構成される。例えば、そうした技法を用いて、デバイスの様々な例示的な実施形態は、1つもしくは複数の個々のマーク(例えば、個々のバー)または1つもしくは複数のマークのパターン(例えば、複数のバーの構成)を認識してよい。複数のマークのパターンを認識する場合、各可能なパターンは、デバイスによってキャプチャされた画像における複数のマークの実際のパターンを分類する際の使用のために、訓練された分類器(例えば、深層学習によって訓練された)によって分類されてよい。
動作430の一部として、デバイスは、結果ウィンドウ内にて、認識されたマーキングに対応する(例えば、近接していることによって)位置において、1つもしくは複数のマーク(例えば、バー、正方形、またはドット)の有無、1つもしくは複数の勾配の長さ、1つもしくは複数の色(例えば、青対ピンク)の有無、またはそれらの任意の適切な組合せを認識することによって、結果を識別、生成、決定、解釈、または取得する。
様々な例示的な実施形態によれば、デバイスは、以下の形態のうちの任意の1つまたは複数により1つまたは複数の結果を提供する:バイナリ(例えば、はいまたはいいえ、有無、感染または非感染など)、検査キットの結果ウィンドウに存在するマーク(例えば、バーが示す)、検査キットの結果ウィンドウに存在しないマーク(例えば、バーが欠けている)、結果ウィンドウにおけるマークのうちの1つまたは複数の周りに描かれた境界ボックス、またはそれらの任意の適切な組合せ。
様々な例示的な実施形態によれば、デバイスは、検査キットが損なわれていることを示し得る、不可能または無意味な1つまたは複数の結果を判定してよく、動作432において、デバイスは、それに応じて、エラーモードに切り替えること、エラー警告を提示すること、または正確な結果を得るために検査キットを使用不能として扱うことによって応答してよい。
動作440において、デバイスは、動作430において得られた(例えば、生成された)結果のうちの1つまたは複数を提供する。例えば、結果のうちの1つまたは複数は、デバイスのディスプレイ画面上に視覚的に表示されてよく、デバイスのスピーカを介して聴覚的に提示されてよく、またはその両方であってよい。結果のうちの1つまたは複数は、ユーザの別のデバイス、ヘルスケアワーカー(例えば、医師または看護師)のデバイス、病院もしくは役所のデバイスもしくは他のマシン(例えば、サーバマシン)、またはそれらの任意の適切な組合せなどの別のデバイスに送信されてよい。デバイスは、所定の時間ウィンドウ(例えば、検査キットまたは検査キットの種類の有効期間)内に結果のうちの1つまたは複数を提供してよい。デバイスは、そうした所定の時間ウィンドウの遵守を確実にするためにエラーチェックを行ってよい。いくつかの例示的な実施形態では、デバイスは、1つまたは複数の結果が報告されることを確実にするために、任意の結果をユーザに提供する前に、(例えば、役所または他の当局エンティティに対応する)所定のサーバマシンにまず1つまたは複数の結果を送信するように構成される。
ある例示的な実施形態では、動作450において、デバイスは、追加データにアクセスし、追加データを検査キットからの1つ以上の結果とともに処理し、1つまたは複数のさらなる結果を提供する(例えば、生成する)。例えば、PCR検査が以前に行われており、その結果がデバイスによってアクセス可能(例えば、ローカルにまたはネットワークを介して)である場合、デバイスは、PCR結果にアクセスし、PCR結果および複数の検査キット結果のうちの1つまたは複数に基づいてさらなる結果を生成し、そのさらなる結果を提供(例えば、ユーザに、当局エンティティに、またはその両方に)してよい。検査キットがSARS-CoV-2ウイルスに対する抗体の有無を検出する場合、デバイスは、SARS-CoV-2ウイルスの有無についてのPCR結果にアクセスし、PCR結果および検査キット結果に基づいて使用者の仕事に行く準備の評価を生成し、次いで、上記のように評価(例えば、準備スコア)を提供してよい。
いくつかの例示的な実施形態では、動作460において、デバイスは、ユーザの健康状態(例えば、ユーザが現在ウイルスに感染しているか、以前にウイルスに感染していたか、現在ウイルスに対して免疫性であるか、またはそれらの任意の適切な組合せ)についての予測を生成する。そうした予測は、検査キットの識別された結果、別の検査(例えば、PCR検査)の1つまたは複数のアクセスされた結果、ユーザによって経験されているとユーザによって示された1つまたは複数の症状、またはそれらの任意の適切な組合せに基づいて、デバイスによって生成および提供(例えば、通信、提示、またはその両方)されてよい。
ある例示的な実施形態によれば、動作470において、デバイスは、検査キットの識別された結果に基づいて生成され、決定され、または取得されたさらなる情報を提供する。そうしたさらなる情報の例には、結果に関してユーザが次に何をすべきかについての推奨、疾患に罹患するリスクレベル(例えば、検査キットの結果に基づいて生成または取得される)、疾患がないことを示すクリアランス通知(例えば、検査キットの結果に基づいて生成または取得される)、またはそれらの任意の適切な組合せが含まれる。
いくつかの例示的な実施形態によれば、検査キットがデバイスによって認識されないとき、動作480において、デバイスは、ユーザにグラフィカルユーザインタフェースを提示する。ユーザは、そのユーザインターフェースによって、検査キット上のインジケータ、検査キット上の結果ウィンドウ、結果ウィンドウについての1つまたは複数のマーキング、結果ウィンドウにおける1つまたは複数のマーク、またはそれらの任意の好適な組合せを、手動で定めることが可能である(例えば、境界ボックスを示すことによって)。したがって、デバイスは、検査キットのそうしたユーザ定義の特徴に基づいて、その画像分析動作、その結果識別動作、またはその両方を修正するように構成されてよい。これに代えて、デバイスは、そうしたユーザ定義の特徴についての定義データをサーバマシンにアップロードするように構成されてよく、サーバマシンは、そうした修正を行い、修正された動作を行うようにデバイスを再構成するアプリ更新により応答するように構成される。サーバマシンはまた、1つまたは複数の他のデバイスにアプリ更新を提供して、そのデバイス上にて行われる同様の動作を修正してよい。
様々な例示的な実施形態によれば、本明細書に記載の方法のうちの1つまたは複数は、LFA検査キットなどの検査キットの画像ベースの分析を行ってよい。さらに、本明細書に記載される方法のうちの1つまたは複数は、検査キットの画像に現れる1つまたは複数の検査結果の機械認識を行ってよい(例えば、コンピュータビジョン、人工知能、またはその両方を介して)。したがって、本明細書に記載される方法のうちの1つまたは複数は、既存のシステムおよび方法の能力と比較して、検査キット上で可視の1つまたは複数の結果の自動読み取り、ならびに検査キットを用い(例えば、単独で)、その1つまたは複数の結果の信頼できる読み取りを得る際のユーザの自動指示を行ってよい。
図5は、マシン可読媒体1122(例えば、非一時的なマシン可読媒体、マシン可読記憶媒体、コンピュータ可読記憶媒体、またはそれらの任意の適切な組合せ)から命令1124を読み取り、本明細書で説明される方法のうちの任意の1つまたは複数を全体的または部分的に実行することができる、いくつかの例示的な実施形態に従うマシン1100のコンポーネントを示すブロック図である。具体的には、図5は、コンピュータシステム(例えば、コンピュータ)の例示的な形態のマシン1100を示し、その中で、機械1100に本明細書で説明される方法のうちの任意の1つまたは複数を実行させるための命令1124(例えば、ソフトウェア、プログラム、アプリケーション、アプレット、アプリ、または他の実行可能コード)が、全体的または部分的に実行されてよい。
代替的な実施形態では、マシン1100は、スタンドアロンデバイスとして動作するか、または他のマシンに対し通信可能に結合(例えば、ネットワーク化)されてよい。ネットワーク化された配置では、マシン1100は、サーバ-クライアントネットワーク環境におけるサーバマシンもしくはクライアントマシンとして、または分散(例えば、ピアツーピア)ネットワーク環境におけるピアマシンとして動作してよい。マシン1100は、サーバコンピュータ、クライアントコンピュータ、パーソナルコンピュータ(PC)、タブレットコンピュータ、ラップトップコンピュータ、ネットブック、セルラー電話、スマートフォン、セットトップボックス(STB)、携帯情報端末(PDA)、ウェブアプライアンス、ネットワークルータ、ネットワークスイッチ、ネットワークブリッジ、またはそのマシンによって行われるべきアクションを指定する命令1124を順次または他の方法で実行することが可能な任意のマシンであってよい。さらに、単一のマシンのみが示されているが、「マシン」という用語はまた、本明細書で説明される方法のうちの任意の1つまたは複数のすべてまたは一部を実行するために命令1124を個別にまたは共同で実行するマシンの任意の集合を含むと解釈される。
マシン1100は、バス1108を介して互いに通信するように構成されたプロセッサ1102(例えば、1つ以上の中央処理装置(CPU)、1つ以上のグラフィックス処理装置(GPU)、1つ以上のデジタル信号プロセッサ(DSP)、1つ以上の特定用途向け集積回路(ASIC)、1つ以上の無線周波数集積回路(RFIC)、またはそれらの任意の適切な組合せ)、メインメモリ1104、およびスタティックメモリ1106を備える。プロセッサ1102は、プロセッサ1102が全体的または部分的に本明細書で説明される方法のうちの任意の1つまたは複数を実行するように構成可能であるように、命令1124の一部または全部によって一時的または永続的に構成可能であるソリッドステートデジタルマイクロ回路(例えば、電子的、光学的、または両方)を含む。例えば、プロセッサ1102の1組の1つまたは複数のマイクロ回路は、本明細書で説明される1つまたは複数のモジュール(例えば、ソフトウェアモジュール)を実行するように構成可能であってよい。いくつかの例示的な実施形態では、プロセッサ1102は、マルチコアCPU(例えば、デュアルコアCPU、クアッドコアCPU、8コアCPU、または128コアCPU)であり、マルチコアCPU内で、複数のコアの各々は、本明細書で説明される方法のうちの任意の1つまたは複数を全体的または部分的に実行することができる別個のプロセッサとして挙動する。本明細書で説明される有益な効果は、少なくともプロセッサ1102を有するマシン1100によって提供され得るが、これらの同じ有益な効果は、プロセッサを備えない異なる種類のマシン(例えば、純粋なマシンシステム、純粋な油圧システム、またはハイブリッドマシン油圧システム)によって、そうしたプロセッサレスマシンが本明細書で説明される方法のうちの1つ以上を行うように構成される場合、提供されてよい。
マシン1100は、グラフィックスディスプレイ1110(例えば、プラズマディスプレイパネル(PDP)、発光ダイオード(LED)ディスプレイ、液晶ディスプレイ(LCD)、プロジェクタ、陰極線管(CRT)、またはグラフィックスもしくはビデオを表示することが可能な任意の他のディスプレイ)をさらに含んでよい。マシン1100はまた、英数字入力デバイス1112(例えば、キーボードまたはキーパッド)、ポインタ入力デバイス1114(例えば、マウス、タッチパッド、タッチスクリーン、トラックボール、ジョイスティック、スタイラス、動きセンサ、アイトラッキングデバイス、データグローブ、または他のポインティング機器)、データストレージ1116、音声生成デバイス1118(例えば、サウンドカード、増幅器、スピーカ、ヘッドフォンジャック、またはそれらの任意の適切な組合せ)、およびネットワークインターフェースデバイス1120を含んでよい。
データストレージ1116(例えば、データストレージデバイス)は、マシン可読媒体1122(例えば、有形かつ非一時的なマシン可読記憶媒体)を含み、ここに記載された方法または機能のうちの任意の1つ以上を具現化する命令1124が記憶される。命令1124はまた、マシン1100による実行前または実行中に、メインメモリ1104内、スタティックメモリ1106内、プロセッサ1102内(例えば、プロセッサのキャッシュメモリ内)、またはそれらの任意の適切な組合せに完全にまたは少なくとも部分的に存在してもよい。したがって、メインメモリ1104、スタティックメモリ1106、およびプロセッサ1102は、マシン可読媒体(たとえば、有形および非一時的なマシン可読媒体)と見なされてよい。命令1124は、ネットワークインターフェースデバイス1120を介して、ネットワーク190上で送信または受信されてよい。例えば、ネットワークインターフェースデバイス1120は、任意の1つ以上の転送プロトコル(例えば、ハイパーテキスト転送プロトコル(HTTP))を使用して命令1124を通信してよい。
いくつかの例示的実施形態では、マシン1100は、ポータブルコンピューティングデバイス(例えば、スマートフォン、タブレットコンピュータ、またはウェアラブルデバイス)であってもよく、1つ以上の追加の入力コンポーネント1130(例えば、センサまたはゲージ)を有してよい。そうした入力コンポーネント1130の例には、画像入力コンポーネント(例えば、1つまたは複数のカメラ)、音声入力コンポーネント(例えば、1つまたは複数のマイクロフォン)、方向入力コンポーネント(例えば、コンパス)、位置入力コンポーネント(例えば、全地球測位システム(GPS)受信機)、方位コンポーネント(例えば、ジャイロスコープ)、動き検出コンポーネント(例えば、1つまたは複数の加速度計)、高度検出コンポーネント(例えば、高度計)、温度入力コンポーネント(例えば、温度計)、およびガス検出コンポーネント(例えば、ガスセンサ)が含まれる。これらの入力コンポーネント1130のうちのいずれか1つ以上によって収集された入力データは、本明細書に説明されるモジュールのうちのいずれかによる使用のためにアクセス可能および利用可能であってよい(例えば、ユーザ選好、適用可能な規制、またはそれらの任意の好適な組合せに従って実装される、オプトイン同意またはオプトアウト同意等の適切なプライバシー通知および保護を用いて)。
本明細書で使用される場合、「メモリ」という用語は、データを一時的または永続的に記憶することが可能なマシン可読媒体を指し、限定されないが、ランダムアクセスメモリ(RAM)、読取り専用メモリ(ROM)、バッファメモリ、フラッシュメモリ、およびキャッシュメモリを含むように解釈されてよい。マシン可読媒体1122は、例示的な実施形態では単一の媒体として示されているが、「マシン可読媒体」という用語は、命令を記憶することができる単一の媒体または複数の媒体(例えば、集中型もしくは分散型データベース、または関連するキャッシュおよびサーバ)を含むものと解釈される。「マシン可読媒体」という用語はまた、マシン1100による実行のための命令1124を搬送(例えば、記憶または通信)することができる任意の媒体または複数の媒体の組合せを含むと解釈され、命令1124は、マシン1100の1つまたは複数のプロセッサ(例えば、プロセッサ1102)による実行時、マシン1100に、本明細書に記載の方法のうちの任意の1つまたは複数を全体的または部分的に実行させる。したがって、「マシン可読媒体」は、単一のストレージ装置またはデバイス、ならびに複数のストレージ装置またはデバイスを含むクラウドベースのストレージシステムまたはストレージネットワークを指す。したがって、「マシン可読媒体」という用語は、ソリッドステートメモリチップ、光ディスク、磁気ディスク、またはそれらの任意の適切な組合せの例示的な形態の1つまたは複数の有形かつ非一時的なデータリポジトリ(たとえば、データボリューム)を含むが、これらに限定されないと解釈される。
「非一時的な」マシン可読媒体は、本明細書で使用される場合、伝搬信号自体を特に除外する。様々な例示的な実施形態によれば、マシン1100による実行用の命令1124は、キャリア媒体(例えば、マシン可読キャリア媒体)を介して通信され得る。そうしたキャリア媒体の例には、非一時的なキャリア媒体(例えば、1つの場所から別の場所に物理的に移動可能なソリッドステートメモリなどの非一時的マシン可読記憶媒体)および一時的キャリア媒体(例えば、命令1124を通信する搬送波または他の伝搬信号)が含まれる。
特定の例示的な実施形態は、モジュールを含むように本明細書に記載されている。モジュールは、ソフトウェアモジュール(例えば、マシン可読媒体または伝送媒体に記憶された、または他の方法で具現化されたコード)、ハードウェアモジュール、またはそれらの任意の適切な組合せを構成してよい。「ハードウェアモジュール」は、特定の動作を実行することができる有形の(例えば、非一時的な)物理的コンポーネント(例えば、1つまたは複数のプロセッサのセット)であり、特定の物理的手法により構成または配置されてよい。様々な例示的な実施形態において、1つ以上のコンピュータシステムまたはその1つ以上のハードウェアモジュールは、ソフトウェア(例えば、アプリケーションまたはその一部)によって、そのモジュールについて本明細書に記載される動作を実行するように動作するハードウェアモジュールとして構成されてよい。
いくつかの例示的な実施形態において、ハードウェアモジュールは、機械的に、電子的に、油圧的に、またはそれらの任意の適切な組合せで実装されてよい。例えば、ハードウェアモジュールは、特定の動作を実行するように永続的に構成された専用回路又はロジックを含んでよい。ハードウェアモジュールは、フィールドプログラマブルゲートアレイ(FPGA)またはASICなどの専用プロセッサであってよい。ハードウェアモジュールはまた、特定の動作を実行するようにソフトウェアによって一時的に構成されるプログラマブルロジックまたは回路を備えてもよい。一例として、ハードウェアモジュールは、CPUまたは他のプログラム可能プロセッサ内に包含されるソフトウェアを含んでよい。ハードウェアモジュールを機械的に、油圧的に、専用の恒久的に構成された回路において、または一時的に構成された(例えば、ソフトウェアによって構成された)回路において実装するという決定は、コストおよび時間を考慮することによって行われてよいことが理解される。
したがって、「ハードウェアモジュール」という語句は、本明細書で説明される特定の手法によりで動作するように、または特定の動作を実行するように、物理的に構築され、恒久的に構成され(例えば、ハードワイヤード)、または一時的に構成され(例えば、プログラムされ)得る有形のエンティティを包含すると理解される。さらに、本明細書で使用される場合、「ハードウェア実装モジュール」という語句は、ハードウェアモジュールを指す。ハードウェアモジュールが一時的に構成される(例えば、プログラムされる)例示的な実施形態を考慮すると、ハードウェアモジュールの各々は、任意の1つの時点において構成またはインスタンス化される必要はない。例えば、ハードウェアモジュールが、ソフトウェアによって専用プロセッサになるように構成されたCPUを備える場合、CPUは、異なる時間にそれぞれ異なる専用プロセッサ(例えば、それぞれ異なるハードウェアモジュールに備えられる)として構成されてよい。したがって、ソフトウェア(例えば、ソフトウェアモジュール)は、例えば、ある時点で特定のハードウェアモジュールになるか、または特定のハードウェアモジュールを構成し、異なる時点で異なるハードウェアモジュールになるか、または異なるハードウェアモジュールを構成するように、1つまたは複数のプロセッサを構成してよい。
ハードウェアモジュールは、他のハードウェアモジュールに情報を提供し、他のハードウェアモジュールから情報を受信することができる。したがって、説明されるハードウェアモジュールは、通信可能に結合されていると見なされてよい。複数のハードウェアモジュールが同時に存在する場合、通信は、ハードウェアモジュールのうちの2つ以上の間の信号伝送(例えば、回路およびバスを介した)により達成されてよい。複数のハードウェアモジュールが異なる時間に構成またはインスタンス化される実施形態では、そうしたハードウェアモジュール間の通信は、例えば、複数のハードウェアモジュールがアクセスを有するメモリ構造における情報の記憶および検索により達成されてよい。例えば、1つのハードウェアモジュールは、動作を行い、その動作の出力を、通信可能に結合されているメモリ(例えば、メモリデバイス)に記憶してよい。次いで、さらなるハードウェアモジュールが、後にメモリにアクセスして、記憶された出力を取り出し処理してよい。ハードウェアモジュールはまた、入力デバイスまたは出力デバイスとの通信を開始してもよく、リソース(例えば、コンピューティングリソースからの情報の集合)上にて動作することが可能である。
本明細書において記載される例示的な方法の様々な動作は、関連する動作を行うように一時的に構成された(例えば、ソフトウェアによって)または永続的に構成された1つまたは複数のプロセッサによって、少なくとも部分的に実行されてよい。一時的に構成されるか永久的に構成されるかにかかわらず、そうしたプロセッサは、本明細書において記載される1つまたは複数の動作または機能を行うように動作するプロセッサ実装モジュールを構成してよい。本明細書で使用される場合、「プロセッサ実装モジュール」は、ハードウェアが1つまたは複数のプロセッサを備えるハードウェアモジュールを指す。したがって、プロセッサはハードウェアの一例であって、本明細書において説明される方法のうちの任意の1つまたは複数内の少なくともいくつかの動作は、1つまたは複数のプロセッサ実装モジュール、ハードウェア実装モジュール、またはそれらの任意の適切な組合せによって実行されてよいため、本明細書において記載される動作は、少なくとも部分的にプロセッサ実装、ハードウェア実装、またはその両方であってよい。
さらに、そうした1つまたは複数のプロセッサは、「クラウドコンピューティング」環境において、またはサービスとして(例えば、「サービスとしてのソフトウェア」(SaaS)実装内にて)動作を行ってよい。例えば、本明細書において説明される方法のうちの任意の1つまたは複数内の少なくともいくつかの動作は、コンピュータのグループ(例えば、プロセッサを備えるマシンの例として)によって行われてよく、これらの動作は、ネットワーク(例えば、インターネット)を介して、および1つまたは複数の適切なインターフェース(例えば、アプリケーションプログラムインターフェース(API))を介してアクセス可能である。特定の動作の実行は、単一のマシン内にのみ存在するか、またはいくつかのマシンにわたってデプロイされるかにかかわらず、1つまたは複数のプロセッサ間で分散されてよい。いくつかの例示的な実施形態では、1つまたは複数のプロセッサまたはハードウェアモジュール(例えば、プロセッサ実装モジュール)は、単一の地理的位置(例えば、家庭環境、オフィス環境、またはサーバファーム内)に位置してよい。他の例示的な実施形態では、1つまたは複数のプロセッサまたはハードウェアモジュールは、いくつかの地理的位置にわたって分散されてよい。
本明細書を通して、複数のインスタンスは、単一のインスタンスとして説明されるコンポーネント、動作、または構造を実装してよい。1つまたは複数の方法の個々の動作が別個の動作として例示および記載されているが、個々の動作のうちの1つまたは複数は同時に行われてよく、動作が例示された順序で行われることを必要としない。例示的な構成において別個のコンポーネントおよび機能として提示される構造およびそれらの機能は、組み合わされた機能を有する組み合わされた構造またはコンポーネントとして実装されてよい。同様に、単一のコンポーネントとして提示された構造および機能は、別個のコンポーネントおよび機能として実装されてよい。これらおよび他の変形、修正、追加、および改良は、本明細書の主題の範囲内に入る。
本明細書において説明される主題のいくつかの部分は、メモリ(例えば、コンピュータメモリまたは他のマシンメモリ)内にビットまたはバイナリデジタル信号として記憶されたデータに対する動作のアルゴリズムまたは記号表現に関して提示されてよい。そうしたアルゴリズムまたは記号表現は、データ処理分野の当業者が自身の成果の内容を他の当業者に伝えるために使用する技法の例である。本明細書において使用される場合、「アルゴリズム」は、所望の結果をもたらす自己矛盾のない一連の動作または同様の処理である。この文脈では、アルゴリズムおよび動作は、物理量の物理的操作を含む。通常、必ずしもそうではないが、これらの量は、記憶、転送、結合、比較、およびその他の操作が可能である電気信号または磁気信号の形態をとる。主として一般的な用法「データ」、「内容」、「ビット」、「値」、「要素」、「記号」、「文字」、「項」、「数」、「数字」などの語を使用してそうした信号を指すことが時には便利である。しかしながら、これらの語は便利なラベルにすぎず、適切な物理量に関連付けられる。
特に明記しない限り、本明細書における「アクセス」、「処理」、「検出」、「計算」、「算出」、「決定」、「生成」、「提示」、「表示」などの語を使用する説明は、1つまたは複数のメモリ(例えば、揮発性メモリ、不揮発性メモリ、またはそれらの任意の適切な組合せ)、レジスタ、または情報を受信、記憶、送信、または表示する他のマシンコンポーネント内の物理的(例えば、電子的、磁気的、または光学的)量として表されるデータを操作または変換する機械(例えば、コンピュータ)によって実行可能な動作または処理を指す。さらに、特に明記しない限り、用語「1つの(a)」または「1つの(an)」は、特許文献において一般的であるように、1つまたは2つ以上のインスタンスを含むように用いられる。最後に、本明細書において用いられる場合、接続詞「または(or)」は、特に別段の定めがない限り、非排他的な「または」を指す。
以下の列挙された記載は、本明細書において説明される方法、マシン可読媒体、およびシステム(例えば、マシン、デバイス、または他の装置)の様々な例を記載する。実施例の1つまたは複数の特徴は、単独でまたは組み合わせて、本願の開示内において考慮されることに留意されたい。
第1の実施例は、方法であって、
マシンの1つまたは複数のプロセッサが、前記マシンのユーザが前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの命令の提示を行う工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示す前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析(例えば、コンピュータ視界分析)に基づいて、1組の1つまたは複数の結果を生成する結果生成工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える方法を提供する。
マシンの1つまたは複数のプロセッサが、前記マシンのユーザが前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの命令の提示を行う工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示す前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析(例えば、コンピュータ視界分析)に基づいて、1組の1つまたは複数の結果を生成する結果生成工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える方法を提供する。
第2の実施例は、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、第1の実施例に係る方法を提供する。
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、第1の実施例に係る方法を提供する。
第3の実施例は、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、第2の実施例の第1の実施例に係る方法を提供する。
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、第2の実施例の第1の実施例に係る方法を提供する。
第4の実施例は、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、第1~第3の実施例のうちのいずれかに係る方法を提供する。
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、第1~第3の実施例のうちのいずれかに係る方法を提供する。
第5の実施例は、
前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、第1~第4の実施例のうちのいずれかに係る方法を提供する。
前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、第1~第4の実施例のうちのいずれかに係る方法を提供する。
第6の実施例は、
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づく、第1~第5の実施例のうちのいずれかに係る方法を提供する。
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づく、第1~第5の実施例のうちのいずれかに係る方法を提供する。
第7の実施例は、
前記マシンの前記ユーザの健康状態の予測を生成する工程であって、前記健康状態の前記予測は、前記検査キットの前記画像の前記コンピュータ分析に基づいて生成された前記1組の1つまたは複数の結果のうちの1つ以上に基づいて生成される、工程をさらに備える、第1~第6の実施例のうちのいずれかに係る方法を提供する。
前記マシンの前記ユーザの健康状態の予測を生成する工程であって、前記健康状態の前記予測は、前記検査キットの前記画像の前記コンピュータ分析に基づいて生成された前記1組の1つまたは複数の結果のうちの1つ以上に基づいて生成される、工程をさらに備える、第1~第6の実施例のうちのいずれかに係る方法を提供する。
第8の実施例は、命令を記憶しているマシン可読媒体(例えば、非一時的なマシン可読記憶媒体)であって、前記命令は、マシンの1つまたは複数のプロセッサによる実行時、前記マシンに、
前記マシンのユーザが、前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記検査キットが示されている前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析(例えば、コンピュータ視界分析)に基づいて1組の1つまたは複数の結果を生成する結果生成工程と、
前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える動作を行わせる、マシン可読媒体を提供する。
前記マシンのユーザが、前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記検査キットが示されている前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析(例えば、コンピュータ視界分析)に基づいて1組の1つまたは複数の結果を生成する結果生成工程と、
前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える動作を行わせる、マシン可読媒体を提供する。
第9の実施例は、前記動作が、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、第8の実施例に係るマシン可読媒体を提供する。
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、第8の実施例に係るマシン可読媒体を提供する。
第10の実施例は、前記動作が、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、第8の実施例または第9の実施例に係るマシン可読媒体を提供する。
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、第8の実施例または第9の実施例に係るマシン可読媒体を提供する。
第11の実施例は、前記動作が、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、第8~第10の実施例のうちのいずれかに係るマシン可読媒体を提供する。
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、第8~第10の実施例のうちのいずれかに係るマシン可読媒体を提供する。
第12の実施例は、
前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、第8~第11の実施例のうちのいずれかに係るマシン可読媒体を提供する。
前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、第8~第11の実施例のうちのいずれかに係るマシン可読媒体を提供する。
第13の実施例は、前記動作が、
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づく、第8~第12の実施例のうちのいずれかに係るマシン可読媒体を提供する。
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づく、第8~第12の実施例のうちのいずれかに係るマシン可読媒体を提供する。
第14の実施例は、前記動作が、
前記マシンの前記ユーザの健康状態の予測を生成する工程であって、前記健康状態の前記予測は、前記検査キットの前記画像の前記コンピュータ分析に基づいて生成された前記1組の1つまたは複数の結果のうちの1つ以上に基づいて生成される、工程をさらに備える、第8~第13の実施例のうちのいずれかに係るマシン可読媒体を提供する。
前記マシンの前記ユーザの健康状態の予測を生成する工程であって、前記健康状態の前記予測は、前記検査キットの前記画像の前記コンピュータ分析に基づいて生成された前記1組の1つまたは複数の結果のうちの1つ以上に基づいて生成される、工程をさらに備える、第8~第13の実施例のうちのいずれかに係るマシン可読媒体を提供する。
第15の実施例は、システム(例えば、コンピュータシステム)であって、
1つまたは複数のプロセッサと、
命令を記憶しているメモリと、を備え、前記命令は、前記1つまたは複数のプロセッサによる実行時、前記システムに、
前記ユーザ(例えば、システムの)が、前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記検査キットが示されている前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析(例えば、コンピュータ視界分析)に基づいて1組の1つまたは複数の結果を生成する結果生成工程と、
前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える動作を行わせる、システムを提供する。
1つまたは複数のプロセッサと、
命令を記憶しているメモリと、を備え、前記命令は、前記1つまたは複数のプロセッサによる実行時、前記システムに、
前記ユーザ(例えば、システムの)が、前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記検査キットが示されている前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析(例えば、コンピュータ視界分析)に基づいて1組の1つまたは複数の結果を生成する結果生成工程と、
前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える動作を行わせる、システムを提供する。
第16の実施例は、前記動作が、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、第15の実施例に係るシステムを提供する。
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、第15の実施例に係るシステムを提供する。
第17の実施例は、前記動作が、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、第15の実施例または第16の実施例に係るシステムを提供する。
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、第15の実施例または第16の実施例に係るシステムを提供する。
第18の実施例は、前記動作が、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、第15~第17の実施例のうちのいずれかに係るシステムを提供する。
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、第15~第17の実施例のうちのいずれかに係るシステムを提供する。
第19の実施例は、
前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、第15~第18の実施例のうちのいずれかに係るシステムを提供する。
前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、第15~第18の実施例のうちのいずれかに係るシステムを提供する。
第20の実施例は、前記動作が、
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づく、第15~第19の実施例のうちのいずれかに係るシステムを提供する。
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識(例えば、コンピュータ視界認識)にさらに基づく、第15~第19の実施例のうちのいずれかに係るシステムを提供する。
第21の実施例は、
前記結果生成工程は、マーキングのコンピュータ認識(例えば、コンピュータ視界認識)と、前記検査キット内の対照の存在を一緒に示す対応するインジケータと、にさらに基づき、前記マーキングおよび前記対応するインジケータは前記検査キットの前記画像に示されている、第15~第20の実施例のうちのいずれかに係るシステムを提供する。
前記結果生成工程は、マーキングのコンピュータ認識(例えば、コンピュータ視界認識)と、前記検査キット内の対照の存在を一緒に示す対応するインジケータと、にさらに基づき、前記マーキングおよび前記対応するインジケータは前記検査キットの前記画像に示されている、第15~第20の実施例のうちのいずれかに係るシステムを提供する。
第22の実施例は、前に記載された実施例のうちのいずれか1つにおいて行われる前記動作(例えば、方法動作)を行うようにマシンを制御するためのマシン可読命令を搭載したキャリア媒体を提供する。
Claims (21)
- 方法であって、
マシンの1つまたは複数のプロセッサが、前記マシンのユーザが前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示す前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析に基づいて、1組の1つまたは複数の結果を生成する結果生成工程と、
前記マシンの前記1つまたは複数のプロセッサが、前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える方法。 - 前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、請求項1に記載の方法。 - 前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、請求項1に記載の方法。 - 前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、請求項1に記載の方法。 - 前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、請求項1に記載の方法。
- キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識にさらに基づく、請求項1に記載の方法。 - 前記マシンの前記ユーザの健康状態の予測を生成する工程であって、前記健康状態の前記予測は、前記検査キットの前記画像の前記コンピュータ分析に基づいて生成された前記1組の1つまたは複数の結果のうちの1つ以上に基づいて生成される、工程をさらに備える、請求項1に記載の方法。
- 命令を記憶しているマシン可読媒体であって、前記命令は、マシンの1つまたは複数のプロセッサによる実行時、前記マシンに、
前記マシンのユーザが、前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記検査キットが示されている前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析に基づいて1組の1つまたは複数の結果を生成する結果生成工程と、
前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える動作を行わせる、マシン可読媒体。 - 前記動作は、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、請求項8に記載のマシン可読媒体。 - 前記動作は、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、請求項8に記載のマシン可読媒体。 - 前記動作は、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、請求項8に記載のマシン可読媒体。 - 前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、請求項8に記載のマシン可読媒体。
- 前記動作は、
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識にさらに基づく、請求項8に記載のマシン可読媒体。 - 前記動作は、
前記マシンの前記ユーザの健康状態の予測を生成する工程であって、前記健康状態の前記予測は、前記検査キットの前記画像の前記コンピュータ分析に基づいて生成された前記1組の1つまたは複数の結果のうちの1つ以上に基づいて生成される、工程をさらに備える、請求項8に記載のマシン可読媒体。 - システムであって、
1つまたは複数のプロセッサと、
命令を記憶しているメモリと、を備え、前記命令は、前記1つまたは複数のプロセッサによる実行時、前記システムに、
ユーザが、前記ユーザによって用いられる検査キットを示すように画像をキャプチャすることの指示の提示を行う工程と、
前記検査キットが示されている前記画像が、所定の最小待機時間の満了後かつ所定の最大待機時間の満了前にキャプチャされたことを検出する工程と、
前記検査キットを示すとともに前記所定の最小待機時間の満了後かつ前記所定の最大待機時間の満了前にキャプチャされた前記画像のコンピュータ分析に基づいて1組の1つまたは複数の結果を生成する結果生成工程と、
前記検査キットを示す前記画像の前記コンピュータ分析に基づいて、生成された前記1組の1つまたは複数の結果の中から1つ以上の結果を提供する工程と、を備える動作を行わせる、システム。 - 前記動作は、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることを検出する工程と、
前記ユーザが前記所定の最小待機時間の満了前に前記検査キットの前記画像をキャプチャしようとしていることの警告の提示を行う工程と、をさらに備える、請求項15に記載のシステム。 - 前記動作は、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、前記所定の最小待機時間が満了していること、および前記所定の最大待機時間が満了していないことを検出する工程と、
前記ユーザが前記検査キットの前記画像をキャプチャすることのプロンプトの提示を行う工程と、をさらに備える、請求項15に記載のシステム。 - 前記動作は、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることを検出する工程と、
前記ユーザが前記検査キットの前記画像をまだキャプチャしていないこと、および前記所定の最大待機時間が所定の閾値警告期間内にあることの警告の提示を行う工程と、をさらに備える、請求項15に記載のシステム。 - 前記結果生成工程は、前記検査キットの結果ウィンドウのコンピュータ認識にさらに基づき、前記結果ウィンドウは前記検査キットの前記画像に示されている、請求項15に記載のシステム。
- 前記動作は、
キャプチャされた前記画像に示されている前記検査キットの結果ウィンドウの周りに境界ボックスを定めるように前記ユーザによって操作可能なグラフィカルユーザインタフェースの提示を行う工程をさらに備え、
前記結果生成工程は、前記ユーザによって前記境界ボックスがその周りに定められた前記結果ウィンドウのコンピュータ認識にさらに基づく、請求項15に記載のシステム。 - 前記結果生成工程は、マーキングのコンピュータ認識と、前記検査キット内の対照の存在を一緒に示す対応するインジケータと、にさらに基づき、前記マーキングおよび前記対応するインジケータは前記検査キットの前記画像に示されている、請求項15に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063004431P | 2020-04-02 | 2020-04-02 | |
US63/004,431 | 2020-04-02 | ||
PCT/US2021/025359 WO2021202866A1 (en) | 2020-04-02 | 2021-04-01 | Image-based analysis of a test kit |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023520014A true JP2023520014A (ja) | 2023-05-15 |
Family
ID=77930418
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022559789A Pending JP2023520014A (ja) | 2020-04-02 | 2021-04-01 | 検査キットの画像ベースの分析 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20230351754A1 (ja) |
EP (1) | EP4128253A4 (ja) |
JP (1) | JP2023520014A (ja) |
BR (1) | BR112022019884A2 (ja) |
CA (1) | CA3173637A1 (ja) |
WO (1) | WO2021202866A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022076516A1 (en) * | 2020-10-09 | 2022-04-14 | The Trustees Of Columbia University In The City Of New York | Adaptable automated interpretation of rapid diagnostic tests using self-supervised learning and few-shot learning |
WO2024058319A1 (ko) * | 2022-09-16 | 2024-03-21 | 주식회사 켈스 | 영상 정보를 기반으로 감염 상태 정보를 생성하는 장치 및 방법 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5902982A (en) * | 1997-04-04 | 1999-05-11 | National Medical Review Office Inc. | Changeable machine readable assaying indicia |
US7108662B2 (en) * | 1999-04-21 | 2006-09-19 | Quest Diagnostics Incorporated | Device and method for sample collection |
GB2380888A (en) * | 2001-10-13 | 2003-04-16 | Hewlett Packard Co | Automatic determination of regions of interest in an image |
US20090060373A1 (en) * | 2007-08-24 | 2009-03-05 | General Electric Company | Methods and computer readable medium for displaying a restored image |
EP2916117A1 (en) * | 2014-03-05 | 2015-09-09 | Scanadu Incorporated | Quantifying color changes of chemical test pads induced by specific concentrations of biological analytes under different lighting conditions |
US9986165B2 (en) * | 2014-12-31 | 2018-05-29 | Invent.ly LLC | Remote analyte testing system |
EP3475409A4 (en) * | 2016-06-22 | 2020-03-04 | Becton, Dickinson and Company | MODULAR TEST READING DEVICE |
US20190027258A1 (en) * | 2016-10-17 | 2019-01-24 | Reliant Immune Diagnostics, Inc | System and method for mapping a diagnostic test to an individual user to create a unique profile on a remote database |
CN106993129B (zh) * | 2017-03-06 | 2019-05-17 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
US10146909B2 (en) * | 2017-04-06 | 2018-12-04 | Diassess Inc. | Image-based disease diagnostics using a mobile device |
US10340032B2 (en) * | 2017-08-16 | 2019-07-02 | James Taylor Ramsey | Rapidly configurable drug detection system with enhanced confidentiality |
-
2021
- 2021-04-01 CA CA3173637A patent/CA3173637A1/en active Pending
- 2021-04-01 WO PCT/US2021/025359 patent/WO2021202866A1/en active Search and Examination
- 2021-04-01 EP EP21780631.4A patent/EP4128253A4/en active Pending
- 2021-04-01 JP JP2022559789A patent/JP2023520014A/ja active Pending
- 2021-04-01 BR BR112022019884A patent/BR112022019884A2/pt unknown
- 2021-04-01 US US17/282,482 patent/US20230351754A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230351754A1 (en) | 2023-11-02 |
EP4128253A4 (en) | 2023-09-13 |
CA3173637A1 (en) | 2021-10-07 |
BR112022019884A2 (pt) | 2022-12-13 |
EP4128253A1 (en) | 2023-02-08 |
WO2021202866A1 (en) | 2021-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110622000A (zh) | 使用移动设备的基于图像的疾病诊断 | |
JP2023520014A (ja) | 検査キットの画像ベースの分析 | |
US10726262B2 (en) | Imaging support system, device and method, and imaging terminal | |
EP3132264B1 (en) | Method and apparatus for collecting test data from use of a disposable test kit | |
JP2023513060A (ja) | 器具追跡機械 | |
JP2023536832A (ja) | ビジュアライゼーションのためのメトリックの提供及び表面化 | |
JP2023518825A (ja) | 非接触型ヘルスケア・スクリーニング | |
US11263341B1 (en) | Identifying personally identifiable information within an unstructured data store | |
CA2965283C (en) | Systems and methods of subject state change notification | |
JP2021523408A (ja) | 周辺デバイス識別システムおよび方法 | |
CN110084298B (zh) | 用于检测图像相似度的方法及装置 | |
CN109036497B (zh) | 一种医学实验室检测结果的分析方法及装置 | |
Waranusast et al. | The Development of Mobile Application for Assisting COVID-19 Antigen Test Kit Results Reading | |
US20230238125A1 (en) | Establishing Network Pairing | |
JP2020518048A5 (ja) | ||
US20220405551A1 (en) | Systems and methods to analyze images of lateral flow assays | |
US20220207878A1 (en) | Information acquisition support apparatus, information acquisition support method, and recording medium storing information acquisition support program | |
Gans | The pandemic needs an information solution | |
Loo et al. | Development of Crowd Control and Tracing for Indoor Facility | |
JP2024073830A (ja) | 判定システム、判定方法、及びプログラム | |
JP2022092622A (ja) | 検査結果確認システム | |
JP2022056062A (ja) | 情報処理装置及び感染症情報表示システム | |
KR20240014634A (ko) | 체외 진단 키트의 시각 인공지능 진단 서비스 제공 방법 및 그 기록매체 | |
KR20240014121A (ko) | 시각 인공지능 기반 신속 진단키트 특성 식별 장치 및 방법 | |
WO2022055441A1 (en) | System and method for generating quick test and result for covid-19 virus and other mouth and tongue related diseases |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |