JP2023096772A - 情報処理装置、情報処理方法、およびプログラム - Google Patents

Abstract

【課題】患者に課す操作または認知・判断上の負荷を抑制しながら当該患者の検査結果に関する情報を収集する。【解決手段】本開示の一態様のプログラムは、１以上のコンピュータを、患者から採取された検体に反応して判定部の外観が変化可能に構成され、かつ既定の位置に検査種別を特定可能な識別子が配置された検査キットを、当該識別子および判定部が撮影範囲に含まれるように撮影した検査画像を取得する手段、検査画像に写った識別子に基づいて、検査キットに対応する検査種別を判定する手段、検査種別の判定結果と、検査画像に写った識別子の位置および向きとに基づいて、検査キットによる検査結果に対する人間の判断を補助する情報である補助情報を検査画像に付加し、対象画像を生成する手段、対象画像と、検査種別の判定結果とに関する情報とを、所定の外部装置へ送信する手段、として機能させる。【選択図】図８

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関する。

尿または血液を検体として用いる検査キットが知られている。

特許文献１には、検査キットから検査データを収集する方法が開示されている。具体的には、特許文献１には、検査キットに設けられた検査識別子を走査して当該検査キットによって行われる検査のタイプを識別すること、表示スクリーン上に当該検査に関連付けられた全ての取り得る弁別的結果を表示すること、表示された弁別的結果のうち１つをユーザに選択させることで検査データを収集すること、について記載されている。

特表2018-525613号公報

特許文献１に記載の技術では、表示スクリーン上に表示された弁別的結果のうちどれが適切であるかをユーザが検査結果を判断して選択する必要がある。しかしながら、全てのユーザが常に正しい弁別的結果を容易に選択できるとは限らない。ユーザは、検査キットを上下逆に見て誤った弁別的結果を選択したり、検査キットに現れたラインが想定よりも薄く選択に迷ったり、スクリーンの表示内容と検査キットを見比べて弁別的結果を選択することを億劫に感じたりするおそれがある。

本開示の目的は、患者に課す操作または認知・判断上の負荷を抑制しながら当該患者の検査結果に関する情報を収集することである。

本開示の一態様のプログラムは、１以上のコンピュータを、患者から採取された検体に反応して判定部の外観が変化可能に構成され、かつ既定の位置に検査種別を特定可能な識別子が配置された検査キットを、当該識別子および判定部が撮影範囲に含まれるように撮影した検査画像を取得する手段、検査画像に写った識別子に基づいて、検査キットに対応する検査種別を判定する手段、検査種別の判定結果と、検査画像に写った識別子の位置および向きとに基づいて、検査キットによる検査結果に対する人間の判断を補助する情報である補助情報を検査画像に付加し、対象画像を生成する手段、対象画像と、検査種別の判定結果とに関する情報とを、所定の外部装置へ送信する手段、として機能させる。

本実施形態の情報処理システムの構成を示すブロック図である。 本実施形態の患者端末の構成を示すブロック図である。 本実施形態のサーバの構成を示すブロック図である。 本実施形態の医師端末の構成を示すブロック図である。 本実施形態の検査キットの構成を示すブロック図である。 本実施形態の一態様の説明図である。 本実施形態のデータ構造を示す図である。 本実施形態の情報処理の全体フローを示す図である。 本実施形態の情報処理において表示される画面例を示す図である。 本実施形態の情報処理において検査画像に対して行われる処理の説明図である。

以下、本発明の一実施形態について、図面に基づいて詳細に説明する。なお、実施形態を説明するための図面において、同一の構成要素には原則として同一の符号を付し、その繰り返しの説明は省略する。

以下の説明において、「患者」とは、医療サービスの提供を受ける者を意味する。患者は、必ずしも何らかの病気に罹患しているとは限らない。「医療サービス」とは、例えば、検査、処方、診察、指導、相談、診療、診断、治療、または手術の少なくとも１つを含むことができる。医療サービスは、医師と患者とが対面した状態で提供されてもよいし、通信技術を用いて遠隔で提供されてもよい。また、医療サービスを提供する者は、医師に限られず、種々の医療関係者、または医療機器を含み得る。

（１）情報処理システムの構成
情報処理システムの構成について説明する。図１は、本実施形態の情報処理システムの構成を示すブロック図である。

図１に示すように、情報処理システム１は、患者端末１０と、サーバ３０と、医師端末５０とを備える。
患者端末１０及びサーバ３０は、ネットワーク（例えば、インターネット又はイントラネット）ＮＷを介して接続される。サーバ３０及び医師端末５０は、ネットワークＮＷを介して接続される。

患者端末１０は、情報処理装置の一例である。患者端末１０は、例えば、スマートフォン、タブレット端末、又は、パーソナルコンピュータである。患者端末１０のユーザは、患者である。

サーバ３０は、情報処理装置の一例である。サーバ３０は、例えば、サーバコンピュータである。

医師端末５０は、情報処理装置の一例である。医師端末５０は、例えば、スマートフォン、タブレット端末、又は、パーソナルコンピュータである。医師端末５０のユーザは、医師である。

（１－１）患者端末の構成
患者端末の構成について説明する。図２は、本実施形態の患者端末の構成を示すブロック図である。

図２に示すように、患者端末１０は、記憶装置１１と、プロセッサ１２と、入出力インタフェース１３と、通信インタフェース１４とを備える。患者端末１０は、ディスプレイ２１およびカメラ２２に接続される。

記憶装置１１は、プログラム及びデータを記憶するように構成される。記憶装置１１は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、及び、ストレージ（例えば、フラッシュメモリ又はハードディスク）の組合せである。

プログラムは、例えば、以下のプログラムを含む。
・ＯＳ（Operating System）のプログラム
・情報処理を実行するアプリケーションのプログラム

データは、例えば、以下のデータを含む。
・情報処理において参照されるデータベース
・情報処理を実行することによって得られるデータ（つまり、情報処理の実行結果）

プロセッサ１２は、記憶装置１１に記憶されたプログラムを起動することによって、患者端末１０の機能を実現するコンピュータである。プロセッサ１２は、例えば、以下の少なくとも１つである。
・ＣＰＵ（Central Processing Unit）
・ＧＰＵ（Graphic Processing Unit）
・ＡＳＩＣ（Application Specific Integrated Circuit）
・ＦＰＧＡ（Field Programmable Array）

入出力インタフェース１３は、患者端末１０に接続される入力デバイスから情報（例えば、ユーザの指示、画像）を取得し、かつ、患者端末１０に接続される出力デバイスに情報（例えば、画像）を出力するように構成される。
入力デバイスは、例えば、カメラ２２、キーボード、ポインティングデバイス、タッチパネル、センサ、又は、それらの組合せである。
出力デバイスは、例えば、ディスプレイ２１、スピーカ、又は、それらの組合せである。

通信インタフェース１４は、患者端末１０と外部装置（例えばサーバ３０）との間の通信を制御するように構成される。

ディスプレイ２１は、画像（静止画、または動画）を表示するように構成される。ディスプレイ２１は、例えば、液晶ディスプレイ、または有機ＥＬディスプレイである。

カメラ２２は、画像（静止画、または動画）を撮影するように構成される。カメラ２２は、例えば後述する検査キットを撮影するために用いられる。

（１－２）サーバの構成
サーバの構成について説明する。図３は、本実施形態のサーバの構成を示すブロック図である。

図３に示すように、サーバ３０は、記憶装置３１と、プロセッサ３２と、入出力インタフェース３３と、通信インタフェース３４とを備える。

記憶装置３１は、プログラム及びデータを記憶するように構成される。記憶装置３１は、例えば、ＲＯＭ、ＲＡＭ、及び、ストレージ（例えば、フラッシュメモリ又はハードディスク）の組合せである。

プログラムは、例えば、以下のプログラムを含む。
・ＯＳのプログラム
・情報処理を実行するアプリケーションのプログラム

データは、例えば、以下のデータを含む。
・情報処理において参照されるデータベース
・情報処理の実行結果

プロセッサ３２は、記憶装置３１に記憶されたプログラムを起動することによって、サーバ３０の機能を実現するコンピュータである。プロセッサ３２は、例えば、以下の少なくとも１つである。
・ＣＰＵ
・ＧＰＵ
・ＡＳＩＣ
・ＦＰＧＡ

入出力インタフェース３３は、サーバ３０に接続される入力デバイスから情報（例えば、ユーザの指示）を取得し、かつ、サーバ３０に接続される出力デバイスに情報（例えば、画像）を出力するように構成される。
入力デバイスは、例えば、キーボード、ポインティングデバイス、タッチパネル、又は、それらの組合せである。
出力デバイスは、例えば、ディスプレイである。

通信インタフェース３４は、サーバ３０と外部装置（例えば、患者端末１０、および医師端末５０）との間の通信を制御するように構成される。

（１－３）医師端末の構成
医師端末の構成について説明する。図４は、本実施形態の医師端末の構成を示すブロック図である。

図４に示すように、医師端末５０は、記憶装置５１と、プロセッサ５２と、入出力インタフェース５３と、通信インタフェース５４とを備える。医師端末５０は、ディスプレイ６１に接続される。

記憶装置５１は、プログラム及びデータを記憶するように構成される。記憶装置５１は、例えば、ＲＯＭ、ＲＡＭ、及び、ストレージ（例えば、フラッシュメモリ又はハードディスク）の組合せである。

プログラムは、例えば、以下のプログラムを含む。
・ＯＳのプログラム
・情報処理を実行するアプリケーションのプログラム

データは、例えば、以下のデータを含む。
・情報処理において参照されるデータベース
・情報処理の実行結果

プロセッサ５２は、記憶装置５１に記憶されたプログラムを起動することによって、医師端末５０の機能を実現するコンピュータである。プロセッサ５２は、例えば、以下の少なくとも１つである。
・ＣＰＵ
・ＧＰＵ
・ＡＳＩＣ
・ＦＰＧＡ

入出力インタフェース５３は、医師端末５０に接続される入力デバイスから情報（例えば、ユーザの指示）を取得し、かつ、医師端末５０に接続される出力デバイスに情報（例えば、画像）を出力するように構成される。
入力デバイスは、例えば、キーボード、ポインティングデバイス、タッチパネル、センサ、又は、それらの組合せである。
出力デバイスは、例えば、ディスプレイ６１、スピーカ、又は、それらの組合せである。

通信インタフェース５４は、医師端末５０と外部装置（例えば、サーバ３０）との間の通信を制御するように構成される。

ディスプレイ６１は、画像（静止画、または動画）を表示するように構成される。ディスプレイ６１は、例えば、液晶ディスプレイ、または有機ＥＬディスプレイである。

（１－４）検査キットの構成
検査キットの構成について説明する。図５は、本実施形態の検査キットの構成を示すブロック図である。

図５に示すように、検査キット７０は、検体滴下部７１と、識別子７２と、判定部７３とを含む。検査キット７０は、患者から採取された検体を検体滴下部７１に滴下すると、判定部７３の外観が当該検体に反応して変化するように構成される。検査キット７０は、例えばイムノクロマト法、またはその他の検査法を利用して構成される。

検体とは、例えば、患者の体液、または組織である。患者の体液とは、例えば、血液、尿、または分泌液（例えば、唾液、汗、または生殖器からの分泌液）である。患者の組織とは、例えば、粘膜である。

検体滴下部７１は、検査キット７０内部のろ紙（例えばセルロース膜）の第１端部に対応する。検体滴下部７１には、検体に含まれる検出対象（例えば、特定の抗原、ホルモン、ウイルス、細菌）と結合する標識抗体が配置される。標識抗体は、所定の色に発色する物質（例えばコロイド）によって予め標識されている。検出対象と結合した標識抗体（つまり標識された検出対象）、および検出対象と結合していない標識抗体は、毛細管現象により時間の経過ともにろ紙の第２端部へ移動する。

識別子７２は、検査キット７０の既定の位置に、既定の向きで配置される。識別子７２は、検査キット７０の種別（以下、単に「検査種別」という）を特定可能な情報を保持する。検査種別は、検査キット７０によって行われる検査の内容を含み得る。具体的には、識別子７２は、検査種別を符号化した図形を表す。一例として、識別子７２は、一次元または二次元のバーコード（例えばＱＲコード（登録商標））である。識別子７２は、検査キット７０の筐体表面に例えば印刷により配置された塗料であってもよいし、検査キット７０の筐体表面に貼り付けられたステッカーであってもよいし、検査キット７０の筐体表面の凹凸として当該筐体に一体化されてもよい。

判定部７３は、検査キット７０内部のろ紙の第２端部（つまり、検体滴下部７１の反対側）に対応する。判定部７３は、検体滴下部７１から流れてきた検体に含まれる検出対象に反応して外観が変化するように構成される。一例として、判定部７３の第１領域７３ａはＴラインが出現可能に構成され、判定部７３の第２領域７３ｂはＣラインが出現可能に構成される。

第１領域７３ａには、検出対象と結合する第１抗体が配置される。標識された検出対象は、第１抗体によってトラップされ、Ｔラインを呈示する。他方、検出対象と結合していない標識抗体は、第１抗体によってトラップされず、ろ紙をさらに移動する。第２領域７３ｂには、標識抗体と結合する第２抗体が配置される。検出対象と結合していない標識抗体は、第２抗体によってトラップされ、Ｃラインを呈示する。
呈示されるＴラインおよびＣラインは、人間が色として知覚可能な光（つまり、可視光線）を呈示（例えば、反射、または発光）してもよいし、人間が色として知覚可能でない光（つまり、例えば赤外光などの可視領域外の波長を持つ光線）を呈示（例えば、反射、または発光）してもよい。

Ｃラインの出現は、検体が最後まで流れたこと、つまり検査が正常に完了したことを意味する。したがって、ＣラインおよびＴラインの両方が出現した場合に、検査結果は陽性である。Ｃラインが出現したがＴラインが出現しなかった場合に、検査結果は陰性である。他方、Ｃラインが出現しなかった場合には、検査が正常に完了していないため、Ｔラインの出現の有無に関わらず検査結果は無効である。

（２）実施形態の一態様
本実施形態の一態様について説明する。図６は、本実施形態の一態様の説明図である。

図６に示すように、患者ＰＴ１は、検査キット７０の使用後に、患者端末１０のカメラ２２を用いて、当該検査キット７０を少なくとも識別子７２および判定部７３が撮影範囲に含まれるように撮影する。これにより、患者端末１０は、検査キット７０の写った画像（以下、「検査画像」という）を取得する。

患者端末１０は、検査画像に写った識別子７２に基づいて、検査キット７０に対応する検査種別を判定する。患者端末１０は、患者を識別する情報（後述する「患者ＩＤ」）と、検査画像に関する情報と、検査種別の判定結果に関する情報（後述する「検査種別情報」）とをサーバ３０へ送信する。

サーバ３０は、各種の情報を患者端末１０から受信する。サーバ３０は、検査種別情報と、検査画像に写った識別子７２の位置および向きとに基づいて、補助情報を生成する。補助情報は、検査キット７０による検査結果に対する人間（例えば、医師、または患者）の判断を補助する情報である。サーバ３０は、補助情報を検査画像に付加することで、対象画像を生成する。サーバ３０は、検査画像を、検査キット７０に対応する検査種別に対して予め定義されている複数の検査結果類型のいずれかに分類することで、人の判断によらずに検査結果の判定（一次判定）を行う。サーバ３０は、患者ＰＴ１を識別する情報（後述する「患者ＩＤ」）に関連付けて、検査種別情報と、対象画像に関する情報（後述する「対象画像情報」）と、検査画像の分類結果に関する情報（後述する「分類結果情報」）とを記憶装置３１に保存する。サーバ３０は、検査種別情報、対象画像情報、および分類結果情報を医師端末５０へ送信する。さらに、サーバ３０は、患者ＰＴ１に関する情報（後述する「患者情報」）のうち、医師ＤＣ１に提供可能であって、かつ診断に有用な情報を医師端末５０へ送信する。

医師端末５０は、各種の情報をサーバ３０から受信する。医師端末５０は、対象画像情報、分類結果情報、および患者情報（の一部）を医師ＤＣ１に提示する。医師ＤＣ１は、医師端末５０によって提示された情報に基づいて、検査キット７０による検査結果に関する判断を行う。医師端末５０は、医師による判断結果に関する情報（後述する「判断結果情報」）をサーバ３０へ送信する。

サーバ３０は、判断結果情報を医師端末５０から受信する。サーバ３０は、患者ＰＴ１を識別する患者ＩＤに関連付けて、判断結果情報を記憶装置３１に保存する。サーバ３０は、判断結果情報を患者端末１０へ送信する。

患者端末１０は、サーバ３０から判断結果情報を受信する。患者端末１０は、判断結果情報を患者ＰＴ１に提示する。

このように、情報処理システム１によれば、患者は、検査キット７０を撮影する以外に、当該検査キット７０による検査結果に関して何らの認知・判断もすることなく、当該検査結果を外部装置へ送信することができる。つまり、情報処理システム１によれば、患者に課される操作または認知・判断上の負荷が小さいので、患者が検査結果に関する情報を提供することに対する敷居を下げ、かかる情報の収集・蓄積を促進することができる。

（３）データ構造
本実施形態のデータ構造について説明する。図７は、本実施形態のデータ構造を示す図である。
以下に説明する各種の情報は、例えばデータベースの形式で記憶装置３１に保存される。

図７に示すように、記憶装置３１には、患者ＩＤリストが保存される。患者ＩＤリストは、複数の患者ＩＤを含む。患者ＩＤは、患者を識別する情報である。患者ＩＤは、患者情報に関連付けられる。

患者情報は、患者ＩＤによって特定される患者に関する情報である。患者情報は、例えば、基本情報、検査履歴情報、服薬履歴情報、および診察履歴情報を含むことができる。

基本情報は、該当患者の基本的属性に関する情報である。基本情報は、例えば、以下の少なくとも１つに関する情報を含むことができる。
・患者名
・性別
・年齢
・住所
・健康状態
・既往歴
・身分証明証（例えば、被保険者番号、マインナンバー）
・決済情報
健康状態は、例えば、以下の少なくとも１つを含むことができる。
・身長
・体重
・月経期間
・血圧
・心拍数
・睡眠状態
・血糖値
・体脂肪率
・持病
・活動量

検査履歴情報は、該当患者に対して行われた検査の履歴に関する情報である。検査履歴情報は、例えば、１以上のレコードを含むことができる。各レコードは、患者に対して行われた検査の１つに対応する。各レコードは、検査日時情報、検査種別情報、対象画像情報、分類結果情報、および判断結果情報を含む。このほか、各レコードは、医師による判断の日時に関する情報、または判断を行った医師を関する情報を含んでもよい。

検査日時情報は、該当レコードに対応する検査が行われた日時に関する情報である。検査日時は、例えば、検査画像の撮影日時に基づいて決定される。

検査種別情報は、該当レコードに対応する検査の種別に関する情報である。検査種別情報は、例えば検査画像に写った識別子７２に基づいて判定される。

対象画像情報は、該当レコードに対応する検査において生成された対象画像に関する情報である。対象画像情報は、対象画像を表すデータであってもよいし、当該データの所在を示す情報（例えば、ＵＲＬ）であってもよい。

分類結果情報は、該当レコードに対応する検査において生成された対象画像を複数の検査結果類型のいずれかに自動分類した結果に関する情報である。

判断結果情報は、該当レコードに対応する検査において生成された対象画像に対して医師が判断した検査結果（つまり、確定診断結果）に関する情報である。

服薬履歴情報は、該当患者による服薬の履歴に関する情報である。服薬履歴情報は、例えば、服薬毎に、服薬日時に関する情報と、服用した薬に関する情報とを含むことができる。

診察履歴情報は、該当患者に対して行われた診察の履歴に関する情報である。診察履歴情報は、例えば診察毎に、診察日時に関する情報と、診察を行った医師に関する情報と、診察の結果に関する情報とを含むことができる。

（４）情報処理
本実施形態の情報処理について説明する。図８は、本実施形態の情報処理の全体フローを示す図である。図９は、本実施形態の情報処理において表示される画面例を示す図である。図１０は、本実施形態の情報処理において検査画像に対して行われる処理の説明図である。

図８の情報処理は、例えば患者端末１０によって実行されるヘルスケアアプリのＵＩ（User Interface）、または患者端末１０によって実行されるＷｅｂブラウザ上で表示されるヘルスケアＳａａＳ（Software as a Service）のＵＩ上で、患者が所定の操作（例えば、検査結果をアップロードするためのオブジェクトの選択）を行ったことに応じて開始する。

図８に示すように、患者端末１０は、検査キットの撮影（Ｓ１１０）を実行する。
具体的には、患者端末１０は、カメラ２２を起動し、使用済みの検査キット７０を撮影することで、検査画像を取得する。
患者端末１０は、検査キット７０の撮影を補助するための情報をディスプレイ２１に提示してもよい。一例として、患者端末１０は、図９の画面をディスプレイ２１に表示してもよい。図９の画面では、カメラ２２のプレビューに相当する画像ＩＭ１０に、オブジェクトＯＢＪ１０ａ，ＯＢＪ１０ｂが重畳されている。
オブジェクトＯＢＪ１０ａは、検査画像に占める検査キット７０の位置および大きさの目標を示すガイドを表示する。ガイドは、検査種別に関わらず共通であってもよいし、検査種別毎に定義されてもよい。ガイドが検査種別ごとに定義される場合に、患者端末１０は、検査画像の確定前に、識別子７２に基づいて検査種別を判定し、判定結果に応じてガイドの形状を制御してもよい。
オブジェクトＯＢＪ１０ｂは、患者に対するフィードバック情報を表示する。例えば、検査画像に占める検査キット７０の位置または大きさの少なくとも１つの目標からの乖離が許容範囲を超える場合に、オブジェクトＯＢＪ１０ｂにはメッセージが表示される。メッセージは、例えば、カメラ２２の撮影範囲をどのように変更すべきかを患者に伝えるテキスト、音声、画像、またはアニメーションであってよい。

ステップＳ１１０の後に、患者端末１０は、検査種別の判定（Ｓ１１１）を実行する。
具体的には、患者端末１０は、ステップＳ１１０において取得した検査画像に写った識別子７２に基づいて、検査キットに対応する検査種別を判定する。例えば、患者端末１０は、識別子７２の表す図形をデコードすることで、検査種別情報を取得する。

ステップＳ１１１の後に、患者端末１０は、情報の送信（Ｓ１１２）を実行する。
具体的には、患者端末１０は、患者ＩＤと、ステップＳ１１０において取得した検査画像と、ステップＳ１１１において取得した検査種別情報とをサーバ３０へ送信する。

ステップＳ１１２の後に、サーバ３０は、画像の補正（Ｓ１３０）を実行する。
具体的には、サーバ３０は、検査画像に写った識別子７２の大きさ、位置、向き、または形状の少なくとも１つに基づいて、検査画像に対して以下の少なくとも１つの画像処理による画像補正を行う。
・拡大
・縮小
・平行移動
・回転
・歪み補正（例えば台形補正）
第１例として、サーバ３０は、検査画像に写った識別子７２の大きさが、既定の大きさに近づくように、検査画像の拡大、または縮小を行う。第２例として、サーバ３０は、検査画像に写った識別子７２の位置が、既定の位置に近づくように、検査画像の平行移動を行う。第３例として、サーバ３０は、検査画像に写った識別子７２の向きが、既定の向きに近づくように、検査画像の平行移動を行う。第４例として、サーバ３０は、検査画像に写った識別子７２の形状が、既定の形状に近づくように、検査画像の歪み補正を行う。既定の大きさ、位置、向き、または形状はそれぞれ、検査種別に関わらず共通であってもよいし、検査種別毎に定義されていてもよい。

ステップＳ１３０の後に、サーバ３０は、対象画像の生成（Ｓ１３１）を実行する。
具体的には、サーバ３０は、ステップＳ１３０において補正された検査画像に、補助情報を付加することで対象画像を生成する。サーバ３０は、検査種別情報と、補正された検査画像に写った識別子７２の位置および向きとに基づいて、補助情報を生成する。補助情報は、例えば、以下の少なくとも１つを含むことができる。
・補正された検査画像に写った判定部７３のうち、検体に反応して外観の変化（例えば、ＣラインおよびＴライン）が現れる可能性がある領域（例えば、第１領域７３ａおよび第２領域７３ｂ）の場所を示す情報
・補正された検査画像に写った判定部７３のうち、検体に反応して外観の変化が現れる可能性がある領域の種別（例えば、ＣおよびＴ）を示す情報
・補正された検査画像に写った判定部７３のうち、検体に反応して現れた外観の変化を強調する情報（例えば、付加的な輪郭線、もしくは着色、または拡大画像）
・複数の検査結果類型の見本を示す情報

一例として図１０に示すように、ステップＳ１３０およびステップＳ１３１において、サーバ３０は、検査画像ＩＭ１に対して、画像処理および補助情報の付加を行うことで、対象画像ＩＭ２を生成する。対象画像ＩＭ２には、補助情報として、オブジェクトＯＢＪ２０ａおよびオブジェクトＯＢＪ２０ｂが付加されている。
オブジェクトＯＢＪ２０ａは、ラインが現れる可能性がある領域の場所を示す図形と、当該領域がＴラインに対応することを示すテキスト画像とを含む。
オブジェクトＯＢＪ２０ａは、ラインが現れる可能性がある領域の場所を示す図形と、当該領域がＣラインに対応することを示すテキスト画像とを含む。

ステップＳ１３１の後に、サーバ３０は、検査結果の判定（Ｓ１３２）を実行する。
具体的には、サーバ３０は、ステップＳ１３０において補正された検査画像を、検査キット７０に対応する検査種別に対して予め定義されている複数の検査結果類型に分類することで、検査結果の一次判定を行う。一例として、サーバ３０は、学習済みモデルを用いて検査結果を自動分類してもよい。学習済みモデルは、検査キット７０の写った画像と、当該画像に対応する検査結果（教師ラベル）とを含む訓練データを用いた機械学習により構築可能である。学習済みモデルは、検査種別毎に構築されてよい。
なお、分類のベースとなる画像は、補正前の検査画像、またはステップＳ１３１において生成された対象画像であってもよい。

ステップＳ１３２の後に、サーバ３０は、情報の保存（Ｓ１３３）を実行する。
具体的には、サーバ３０は、患者ＩＤに関連付けられる検査履歴情報に新規レコードを追加する。サーバ３０は、新規レコードに適切な値を設定することで、検査日時情報、検査種別情報、対象画像情報、および分類結果情報を記憶装置３１に保存する。

ステップＳ１３３の後に、サーバ３０は、情報の提示（Ｓ１３４）を実行する。
具体的には、サーバ３０は、検査種別情報と、ステップＳ１３１において生成した対象画像（対象画像情報）と、ステップＳ１３２における判定結果（分類結果情報）とを、医師端末５０へ送信しディスプレイ６１に表示させることで、医師に提示する。ここで、情報の提示先となる医師は、患者によって指定されてもよいし、アルゴリズムによって自動的に決定されてもよい。

さらに、サーバ３０は、患者ＩＤに関連付けられる患者情報の一部（例えば性別、年齢、健康状態、または既往歴の少なくとも１つに関する情報、検査履歴情報、服薬履歴情報、診察履歴情報、またはこれらの組み合わせ）を医師に提示してもよい。サーバ３０は、医師に提示する患者情報を、例えば、検査種別情報、または分類結果情報の少なくとも１つに基づいて決定してもよい。また、サーバ３０は、例えば、検査種別情報、または分類結果情報の少なくとも１つに基づいて、患者情報の提示態様（例えば、ディスプレイ６１に表示される画面における各情報要素の配置、大きさ、または装飾の少なくとも１つ）を決定してもよい。

医師は、医師端末５０を介して提示された情報を元に、検査結果に対する判断を行う。医師端末５０は、医師の指示に応じて、判断結果情報を生成する。医師端末５０は、判断結果情報をサーバ３０へ送信する。

判断結果情報は、検査結果に対する医師による判断（つまり、確定診断）の内容に関する情報を含む。判断結果情報は、さらに付加情報を含むことができる。付加情報は、例えば、患者に対する指導、処方、または助言に関する情報である。患者に対する指導には、生活指導、または服薬指導が含まれ得る。患者に対する助言には、遠隔診療もしくは医療機関の受診の勧奨、または特定の医療用製品（例えば、医薬品）の購入勧奨が含まれ得る。

ステップＳ１３４の後に、サーバ３０は、判断結果の取得（Ｓ１３５）を実行する。
具体的には、サーバ３０は、医師端末５０から判断結果情報を受信することで、検査結果に対する医師による判断結果を取得する。サーバ３０は、判断結果情報を、該当患者を識別する患者ＩＤに関連付けて記憶装置３１に保存する。

ステップＳ１３５の後に、サーバ３０および患者端末１０は、判断結果の提示（Ｓ１３６，Ｓ１１３）を実行する。
具体的には、サーバ３０は、ステップＳ１３６において取得した判断結果情報を、患者端末１０へ送信する。患者端末１０は、取得した判断結果情報をディスプレイ２１に表示することで、当該情報を患者に提示する。
サーバ３０および患者端末１０は、判断結果情報に加えて、他の情報（例えば、検査日時情報、検査種別情報、対象画像情報、または分類結果情報の少なくとも１つ）をユーザに提示してもよい。
ステップＳ１１３の終了を以て、図８の情報処理は完了する。

（５）小括
以上説明したように、サーバ３０は、検査キット７０を、識別子７２および判定部７３が撮影範囲に含まれるように撮影した検査画像を取得し、当該検査画像に写った識別子７２に基づいて当該検査キット７０に対応する検査種別を判定する。サーバ３０は、検査種別情報と、検査画像に写った識別子７２の位置および向きとに基づいて、補助情報を検査画像に付加することで、対象画像を生成し、検査種別情報および対象画像情報を医師端末５０へ送信する。これにより、患者は、検査キット７０を撮影する以外に、当該検査キット７０による検査結果に関して何らの認知・判断もすることなく、当該検査結果を外部装置へ送信することができる。つまり、情報処理システム１によれば、患者に課される操作または認知・判断上の負荷が小さいので、患者が検査結果に関する情報を提供することに対する敷居を下げ、かかる情報の収集・蓄積を促進することができる。

補助情報は、例えば、検査画像に写った判定部７３のうち検体に反応して外観の変化が現れる可能性がある１以上の領域の場所と、当該領域の種別とを示す情報であってよい。これにより、対象画像を目視した者（例えば、医師、または患者本人）は、検査キット７０の撮影条件に関わらず、外観上の変化が現れるべき場所と、その意味とを正しく認識して検査結果に関する判断を行うことができる。

サーバ３０は、検査画像を、検査種別に対して予め定義されている複数の検査結果類型のいずれかに分類し、分類結果情報を医師端末へ送信してもよい。これにより、医師による検査結果の判断を補助することができる。

サーバ３０は、患者情報を医師に提示してもよく、さらにサーバ３０は、検査種別情報、または分類結果情報の少なくとも１つに基づいて患者情報の提示態様を決定してもよい。これにより、医師が利用できる判断材料を充実させ、判断の質を向上させることができる。

サーバ３０は、検査画像に写った識別子７２の大きさ、位置、向き、または形状の少なくとも１つに基づいて、検査画像に対して、拡大、縮小、回転、または歪み補正の少なくとも１つの画像処理による補正を行ってもよい。この場合、サーバ３０は、補正が行われた検査画像に基づいて対象画像を生成する。これにより、検査キット７０の撮影条件に関わらず、対象画像における検査キット７０（特に、判定部７３）の見え方が安定化するので、医師による検査結果の判断を補助することができる。

サーバ３０は、判断結果情報を患者に提示してもよい。これにより、患者の検査結果に対する納得感を高めることができる。

サーバ３０は、患者ＩＤに関連付けて、検査画像または対象画像を記憶装置３１に保存してもよい。さらに、サーバ３０は、患者ＩＤに関連付けて、判断結果情報を記憶装置３１に保存してもよい。これにより、検査画像または対象画像を、例えば、検査履歴の閲覧、または機械学習などのために利活用することができる。

患者端末１０は、検査キット７０の撮影を補助する情報をディスプレイ２１に表示してもよい。これにより、患者は、検査キット７０を適切な条件で撮影するように促されるので、不適当な検査画像（例えば、識別子７２または判定部７３の一部が写っていない検査画像）が収集され、検査結果の自動分類および医師による判断が適切に行えなくなる事態を防ぐことができる。検査キット７０の撮影を補助する情報は、検査画像に占める検査キット７０の位置および大きさの目標を示すガイドであってもよい。これにより、患者に、検査画像における検査キット７０の理想的な位置および大きさを認識させることができる。また、患者端末１０は、検査画像に占める検査キット７０の位置および大きさの少なくとも１つの目標からの乖離が許容範囲を超える場合に、患者にフィードバック情報を提示してもよい。これにより、適切な検査画像を撮影できるように患者を案内することができる。

（６）変形例
記憶装置１１は、ネットワークＮＷを介して、患者端末１０と接続されてもよい。ディスプレイ２１およびカメラ２２は、患者端末１０の一部であってもよいし、外付けの周辺機器であってもよい。記憶装置３１は、ネットワークＮＷを介して、サーバ３０と接続されてもよい。記憶装置５１は、ネットワークＮＷを介して、医師端末５０と接続されてもよい。ディスプレイ６１は、医師端末５０の一部であってもよいし、外付けの周辺機器であってもよい。

上記の情報処理の各ステップは、患者端末１０、サーバ３０、および医師端末５０の何れでも実行可能である。例えば、検査種別の判定（Ｓ１１１）は、サーバ３０、または医師端末５０によって実行されてもよい。画像の補正（Ｓ１３０）～検査結果の判定（Ｓ１３２）は、患者端末１０または医師端末５０によって実行されてもよい。
一例として、患者端末１０は、検査キット７０を、識別子７２および判定部７３が撮影範囲に含まれるように撮影した検査画像を取得し、当該検査画像に写った識別子７２に基づいて当該検査キット７０に対応する検査種別を判定するように構成されてよい。さらに、患者端末１０は、検査種別情報と、検査画像に写った識別子７２の位置および向きとに基づいて、補助情報を検査画像に付加することで、対象画像を生成し、検査種別情報および対象画像情報をサーバ３０または医師端末５０へ送信するように構成されてよい。
また、上記説明では、情報処理において各ステップを特定の順序で実行する例を示したが、各ステップの実行順序は、依存関係がない限りは説明した例に制限されない。

実施形態の情報処理システムを、クライアント／サーバ型のシステムによって実装する例を示した。しかしながら、実施形態の情報処理システムは、スタンドアロン型のコンピュータによって実装することもできる。

上記説明では、検査画像に写った識別子７２の位置および向きに基づいて、当該検査画像における検査キット７０の位置および向きを特する例を示した。しかしながら、識別子７２とは異なる目印を検査キット７０の既定の位置に既定の向きで配置し、検査画像における当該目印の位置および向きに基づいて、当該検査画像における検査キット７０の位置および向きを特定してもよい。この場合に、目印の外観、位置および向きは、検査種別毎に任意に定めることができる。

上記説明では、学習済みモデルを用いて検査結果を自動分類する例を示した。患者から収集された検査画像と、当該検査画像に対して医師から収集された判断結果情報（教師ラベル）とを含む訓練データを用いて、学習済みモデルを運用後に再学習することも可能である。これにより、自動分類の精度を持続的に向上させることが可能となる。

患者端末１０、サーバ３０、または医師端末５０のいずれかは、検査種別情報に基づいて、前記検査画像の色調を補正してもよい。この場合に、対象画像は、色調の補正が行われた検査画像に基づいて生成される。一例として、色調の補正は、判定部７３における外観の変化によって呈示される可能性のある色の視認性を向上させる処理であってよい。また、補正量は、例えば、基準となる撮影条件下における識別子７２の色と、検査画像に写った識別子７２の色との差に基づいて決定されてもよい。或いは、補正量は、基準となる撮影条件下において判定部７３に呈示されるべき色と、検査画像に写った判定部７３に実際に呈示された色との差に基づいて決定されてもよい。これにより、検査画像に写った判定部７３における外観の変化が判別し難い場合であっても、対象画像における当該変化の有無を目視による判別するのを補助することができる。

上記説明では、患者ＩＤに関連付けて対象画像情報を保存する例を示した。しかしながら、対象画像情報の代わりに、検査画像に関する情報が保存されてもよい。この場合に、検査画像に対して行われるべき補正に関する情報、または検査画像に付加されるべき補助情報の少なくとも１つがさらに保存されてもよい。

判定部７３の外観の変化とは、人間が色として知覚可能でない光（つまり、例えば赤外光などの可視領域外の波長を持つ光線）の呈示を含み得る。判定部７３が検体に反応して例えば赤外光を呈示するように構成される場合に、患者端末１０は、検査種別の判定（Ｓ１１１）の結果に基づいて必要に応じて、カメラ２２を赤外撮影モードに自動的に遷移させてもよい。

上記説明では、判断結果の取得（Ｓ１３５）の後に、無条件に判断結果の提示（Ｓ１３６，Ｓ１１３）が行われる例を示した。しかしながら、判断結果の提示（Ｓ１３６，Ｓ１１３）は、患者から提示要求があったことを条件に行われてもよい。
また、判断結果の取得（Ｓ１３５）よりも前に、患者に分類結果情報の提示が行われてもよい。

以上、本発明の実施形態について詳細に説明したが、本発明の範囲は上記の実施形態に限定されない。また、上記の実施形態は、本発明の主旨を逸脱しない範囲において、種々の改良や変更が可能である。また、上記の実施形態及び変形例は、組合せ可能である。

１ ：情報処理システム
１０ ：患者端末
１１ ：記憶装置
１２ ：プロセッサ
１３ ：入出力インタフェース
１４ ：通信インタフェース
２１ ：ディスプレイ
２２ ：カメラ
３０ ：サーバ
３１ ：記憶装置
３２ ：プロセッサ
３３ ：入出力インタフェース
３４ ：通信インタフェースｄ
５０ ：医師端末
５１ ：記憶装置
５２ ：プロセッサ
５３ ：入出力インタフェース
５４ ：通信インタフェース
６１ ：ディスプレイ
７０ ：検査キット
７１ ：検体滴下部
７２ ：識別子
７３ ：判定部

Claims (15)

1. １以上のコンピュータを、
   患者から採取された検体に反応して判定部の外観が変化可能に構成され、かつ既定の位置に検査種別を特定可能な識別子が配置された検査キットを、当該識別子および判定部が撮影範囲に含まれるように撮影した検査画像を取得する手段、
   前記検査画像に写った前記識別子に基づいて、前記検査キットに対応する検査種別を判定する手段、
   前記検査種別の判定結果と、前記検査画像に写った前記識別子の位置および向きとに基づいて、前記検査キットによる検査結果に対する人間の判断を補助する情報である補助情報を前記検査画像に付加し、対象画像を生成する手段、
   前記対象画像と、前記検査種別の判定結果とに関する情報とを、所定の外部装置へ送信する手段、
   として機能させる、プログラム。
2. 前記補助情報は、前記検査画像に写った前記判定部のうち前記検体に反応して外観の変化が現れる可能性がある１以上の領域の場所と、当該領域の種別とを示す情報である、
   請求項１に記載のプログラム。
3. 前記コンピュータを、前記検査画像を、前記検査種別に対して予め定義されている複数の検査結果類型のいずれかに分類する手段としてさらに機能させ、
   前記送信する手段は、前記検査画像の分類結果に関する情報を前記外部装置へさらに送信する、
   請求項１または請求項２に記載のプログラム。
4. 前記コンピュータを、前記患者に関する情報を医師に提示する手段としてさらに機能させ、
   前記患者に関する情報を医師に提示する手段は、前記検査種別の判定結果、または前記検査画像の分類結果の少なくとも１つに基づいて当該情報の提示態様を決定する、
   請求項３に記載のプログラム。
5. 前記分類する手段は、学習済みモデルを用いて、前記検査画像を前記複数の検査結果類型のいずれかに分類し、
   前記コンピュータを、前記検査画像と、前記検査キットによる検査結果に対する医師による判断の結果を示す情報とを訓練データとして前記学習済みモデルの再学習を行う手段、としてさらに機能させる、
   請求項３または請求項４に記載のプログラム。
6. 前記コンピュータを、前記検査画像に写った前記識別子の大きさ、位置、向き、または形状の少なくとも１つに基づいて、前記検査画像に対して、拡大、縮小、回転、または歪み補正の少なくとも１つの画像処理による補正を行う手段、としてさらに機能させ、
   前記対象画像を生成する手段は、前記画像処理による補正が行われた検査画像に前記補助情報を付加する、
   請求項１乃至請求項５のいずれかに記載のプログラム。
7. 前記コンピュータを、前記検査キットによる検査結果に対する医師による判断の結果を示す情報を前記患者に提示する手段、としてさらに機能させる、
   請求項１乃至請求項６のいずれかに記載のプログラム。
8. 前記コンピュータを、前記患者を識別する情報に、前記検査画像または前記対象画像を関連付けて保存する手段、としてさらに機能させる、
   請求項１乃至請求項７のいずれかに記載のプログラム。
9. 前記保存する手段は、前記患者を識別する情報に、さらに、前記検査キットによる検査結果に対する医師による判断の結果を示す情報を関連付けて保存する、
   請求項８に記載のプログラム。
10. 前記コンピュータは、カメラおよびディスプレイを備えた患者端末を含み、
    前記検査画像は、前記患者端末によって撮影され、
    前記患者端末を、前記検査キットの撮影を補助する情報を前記ディスプレイに表示させる手段、としてさらに機能させる、
    請求項１乃至請求項９のいずれかに記載のプログラム。
11. 前記検査キットの撮影を補助する情報は、前記検査画像に占める前記検査キットの位置および大きさの目標を示すガイドであって、
    前記コンピュータを、前記検査種別の判定結果に応じて、前記ガイドの形状を制御する手段、としてさらに機能させる、
    請求項１０に記載のプログラム。
12. 前記コンピュータを、前記検査画像に占める前記検査キットの位置および大きさの少なくとも１つの目標からの乖離が許容範囲を超える場合に、前記患者にフィードバック情報を提示する手段としてさらに機能させる、
    請求項１０に記載のプログラム。
13. 前記コンピュータを、前記検査種別の判定結果に基づいて、前記検査画像の色調を補正する手段としてさらに機能させ、
    前記対象画像を生成する手段は、前記色調の補正が行われた検査画像に前記補助情報を付加する、
    請求項１乃至請求項１２のいずれかに記載のプログラム。
14. 患者から採取された検体に反応して判定部の外観が変化可能に構成され、かつ既定の位置に検査種別を特定可能な識別子が配置された検査キットを、当該識別子および判定部が撮影範囲に含まれるように撮影した検査画像を取得する手段と、
    前記検査画像に写った前記識別子に基づいて、前記検査キットに対応する検査種別を判定する手段と、
    前記検査種別の判定結果と、前記検査画像に写った前記識別子の位置および向きとに基づいて、前記検査キットによる検査結果に対する人間の判断を補助する情報である補助情報を前記検査画像に付加し、対象画像を生成する手段と、
    前記対象画像と、前記検査種別の判定結果とに関する情報とを、所定の外部装置へ送信する手段と
    を具備する、情報処理装置。
15. コンピュータが、
    患者から採取された検体に反応して判定部の外観が変化可能に構成され、かつ既定の位置に検査種別を特定可能な識別子が配置された検査キットを、当該識別子および判定部が撮影範囲に含まれるように撮影した検査画像を取得するステップと、
    前記検査画像に写った前記識別子に基づいて、前記検査キットに対応する検査種別を判定するステップと、
    前記検査種別の判定結果と、前記検査画像に写った前記識別子の位置および向きとに基づいて、前記検査キットによる検査結果に対する人間の判断を補助する情報である補助情報を前記検査画像に付加し、対象画像を生成するステップと、
    前記対象画像と、前記検査種別の判定結果とに関する情報とを、所定の外部装置へ送信するステップと
    を具備する、情報処理方法。
    

Images