JP2023047909A - 医用画像表示装置、方法およびプログラム - Google Patents

Abstract

【課題】医用画像表示装置、方法およびプログラムにおいて、ＣＡＤによる医用画像の解析結果が医師の読影結果にどのように影響を与えたかを確認できるようにする。【解決手段】プロセッサは、医用画像を表示し、ユーザが医用画像を読影することによる一次読影結果の入力を受け付け、一次読影結果を表すアノテーションを表示し、医用画像に対する解析結果を取得し、解析結果を表すアノテーションを表示し、解析結果の表示後にユーザが医用画像を読影することによる二次読影結果の入力を受け付け、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを区別して表示する。【選択図】図３

Description

本開示は、医用画像表示装置、方法およびプログラムに関する。

近年、ＣＴ(Computed Tomography)装置およびＭＲＩ（Magnetic Resonance Imaging）装置等の医療機器の進歩により、より質の高い高解像度の医用画像を用いての画像診断が可能となってきている。とくに、ＣＴ画像およびＭＲＩ画像等を用いた画像診断により、病変の領域を精度よく特定することができるため、特定した結果に基づいて適切な治療が行われるようになってきている。

また、ディープラーニング等により機械学習がなされた学習モデルを用いたＣＡＤ（Computer-Aided Diagnosis）により医用画像を解析して、医用画像に含まれる病変等の異常陰影を医用画像から検出することも行われている。このように、ＣＡＤの解析処理により生成される解析結果は、患者名、性別、年齢および医用画像を取得したモダリティ等の検査情報と対応づけられて、データベースに保存され、診断に供される。医師は、自身の読影端末において、配信された医用画像および解析結果を参照して医用画像の読影を行う。この際、読影医は、読影結果に基づいて、医用画像に含まれる異常陰影にアノテーションを付与する。例えば、異常陰影を囲む領域および異常陰影を示す矢印等のマーク、並びに疾患の種類およびサイズ等を表すテキスト等をアノテーションとして付与する。また、解析結果を参照する際には解析結果を表すアノテーションが医用画像に表示される。

一方、医師による医用画像の読影はＣＡＤによる解析結果に誘導されてはならない。このため、ＣＡＤによる医用画像の解析結果は、臨床現場においては、二次的な読影（セカンドリーディング）として利用されることが多い。例えば、読影に際して、まず医師がＣＡＤによる解析結果を参照することなく医用画像の一次的な読影を行い、読影結果を表すアノテーションを医用画像に付与する。その後、ＣＡＤによる解析結果に基づいてアノテーションが付与された医用画像を表示し、解析結果を表すアノテーションを参照しつつ医師が医用画像の二次的な読影を行う。このような一次読影および二次読影を行うことにより、疾患領域の見逃しを防止することができる。

また、医師による読影を効率よく行うための手法が提案されている。例えば、特許文献１には、医師による一次読影が完了した後にＣＡＤによる解析結果を医師による読影結果とを重ね合わせて表示したり並列に表示したりする手法が提案されている。

特開２００６－１１５９２１号公報

医師はＣＡＤによる解析結果を参照した後に一次読影の結果の修正を希望する場合がある。この場合、一次読影の結果を完全に削除してしまったり、ＣＡＤによる解析結果の参照の前後で同一の表示態様で読影結果を医用画像に付与したりすると、ＣＡＤによる解析結果が医師の最終的な読影結果にどのように影響を与えたのかが分からなくなってしまう。

本開示は上記事情に鑑みなされたものであり、ＣＡＤによる医用画像の解析結果が医師の読影結果にどのように影響を与えたかを確認できるようにすることを目的とする。

本開示による医用画像表示装置は、少なくとも１つのプロセッサを備え、
プロセッサは、医用画像を表示し、
ユーザが医用画像を読影することによる一次読影結果の入力を受け付け、
一次読影結果を表すアノテーションを表示し、
医用画像に対する解析結果を取得し、
解析結果を表すアノテーションを表示し、
解析結果の表示後にユーザが医用画像を読影することによる二次読影結果の入力を受け付け、
一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを区別して表示する。

「アノテーション」とは、読影により指摘されたあるいは解析により検出された異常陰影を囲む領域および異常陰影の位置を示すマーク、並びに異常陰影の性状およびサイズ等を表すテキスト等が挙げられる

なお、本開示による医用画像表示装置においては、プロセッサは、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを異なる色のマークおよび異なる形状のマークの少なくとも一方によって表示することにより、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを区別して表示するものであってもよい。

また、本開示による医用画像表示装置においては、プロセッサは、一次読影結果を表すアノテーションとして一次読影結果であることを表すテキストを表示し、二次読影結果を表すアノテーションとして二次読影結果であることを表すテキストを表示することにより、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを区別して表示するものであってもよい。

また、本開示による医用画像表示装置においては、プロセッサは、一次読影結果を表すアノテーションと解析結果を表すアノテーションと区別して表示するものであってもよい。

また、本開示による医用画像表示装置においては、プロセッサは、解析結果を表すアノテーションの表示後に一次読影結果の編集を禁止するものであってもよい。

また、本開示による医用画像表示装置においては、プロセッサは、解析結果を表すアノテーションの表示前に一次読影結果の編集が禁止されることを通知するものであってもよい。

また、本開示による医用画像表示装置においては、プロセッサは、編集が禁止されたことを視認可能に一次読影結果を表すアノテーションを表示するものであってもよい。

また、本開示による医用画像表示装置においては、プロセッサは、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを医用画像と関連付けて保存するものであってもよい。

本開示による医用画像表示方法は、医用画像を表示し、
ユーザが医用画像を読影することによる一次読影結果の入力を受け付け、
一次読影結果を表すアノテーションを表示し、
医用画像に対する解析結果を取得し、
解析結果を表すアノテーションを表示し、
解析結果の表示後にユーザが医用画像を読影することによる二次読影結果の入力を受け付け、
一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを区別して表示する。

なお、本開示による医用画像表示方法をコンピュータに実行させるためのプログラムとして提供してもよい。

本開示によれば、ＣＡＤによる医用画像の解析結果が医師の読影結果にどのように影響を与えたかを確認できる。

本開示の実施形態による医用画像表示装置を適用した医療情報システムの概略構成を示す図 本実施形態による医用画像表示装置の概略構成を示す図 本実施形態による医用画像表示装置の機能構成図 本実施形態において行われる処理を示すフローチャート 本実施形態において行われる処理を示すフローチャート 一次読影用の表示画面を示す図 一次読影結果を表すアノテーションが表示された表示画面を示す図 編集禁止の通知が表示された表示画面を示す図 解析結果を表すアノテーションが表示された表示画面を示す図 二次読影結果を表すアノテーションが表示された表示画面を示す図 解析結果の他の表示画面を示す図

以下、図面を参照して本開示の実施形態について説明する。まず、本実施形態による医用画像表示装置を適用した医療情報システム１の構成について説明する。図１は、医療情報システム１の概略構成を示す図である。図１に示す医療情報システム１は、公知のオーダリングシステムを用いた診療科の医師からの検査オーダに基づいて、被写体の検査対象部位の撮影、撮影により取得された医用画像の保管、読影医による医用画像の読影と読影レポートの作成、および依頼元の診療科の医師による読影レポートの閲覧と読影対象の医用画像の詳細観察とを行うためのシステムである。

図１に示すように、医療情報システム１は、複数の撮影装置２、読影端末である複数の読影ＷＳ（WorkStation）３、診療ＷＳ４、画像サーバ５、画像データベース（以下、画像ＤＢ（DataBase）とする）６、レポートサーバ７、レポートデータベース（以下レポートＤＢとする）８、および解析サーバ９が、有線または無線のネットワーク１０を介して互いに通信可能な状態で接続されて構成されている。

各機器は、医療情報システム１の構成要素として機能させるためのアプリケーションプログラムがインストールされたコンピュータである。アプリケーションプログラムは、ネットワーク１０に接続されたサーバコンピュータの記憶装置、若しくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じてコンピュータにダウンロードされ、インストールされる。または、ＤＶＤ（Digital Versatile Disc）およびＣＤ－ＲＯＭ（Compact Disc Read Only Memory）等の記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。

撮影装置２は、被写体の診断対象となる部位を撮影することにより、診断対象部位を表す医用画像を生成する装置（モダリティ）である。具体的には、単純Ｘ線撮影装置、ＣＴ装置、ＭＲＩ装置、およびＰＥＴ（Positron Emission Tomography)装置等である。撮影装置２により生成された医用画像は画像サーバ５に送信され、画像ＤＢ６に保存される。なお、単純Ｘ線撮影装置とは、被写体に１回放射線を照射することにより被写体の透過像である２次元の放射線画像を取得する装置である。

読影ＷＳ３は、例えば放射線科の読影医が、医用画像の読影および読影レポートの作成等に利用するコンピュータであり、本実施形態による医用画像表示装置２０を内包する。読影ＷＳ３では、画像サーバ５に対する医用画像の閲覧要求、画像サーバ５から受信した医用画像に対する各種画像処理、医用画像の表示、および医用画像に関する所見文の入力受け付け等が行われる。また、読影ＷＳ３では、読影レポートの作成、レポートサーバ７に対する読影レポートの登録要求と閲覧要求、およびレポートサーバ７から受信した読影レポートの表示等が行われる。これらの処理は、読影ＷＳ３が各処理のためのソフトウェアプログラムを実行することにより行われる。

診療ＷＳ４は、診療科の医師が、画像の詳細観察、読影レポートの閲覧、および電子カルテの作成等に利用するコンピュータであり、処理装置、ディスプレイ等の表示装置、並びにキーボードおよびマウス等の入力装置により構成される。診療ＷＳ４では、画像サーバ５に対する画像の閲覧要求、画像サーバ５から受信した画像の表示、レポートサーバ７に対する読影レポートの閲覧要求、およびレポートサーバ７から受信した読影レポートの表示が行われる。これらの処理は、診療ＷＳ４が各処理のためのソフトウェアプログラムを実行することにより行われる。

画像サーバ５は、汎用のコンピュータにデータベース管理システム（DataBase Management System: DBMS）の機能を提供するソフトウェアプログラムがインストールされたものである。また、画像サーバ５は画像ＤＢ６が構成されるストレージを備えている。このストレージは、画像サーバ５とデータバスとによって接続されたハードディスク装置であってもよいし、ネットワーク１０に接続されているＮＡＳ（Network Attached Storage）およびＳＡＮ（Storage Area Network）に接続されたディスク装置であってもよい。また、画像サーバ５は、撮影装置２からの医用画像の登録要求を受け付けると、その医用画像をデータベース用のフォーマットに整えて画像ＤＢ６に登録する。

画像ＤＢ６には、撮影装置２において取得された医用画像の画像データと付帯情報とが登録される。付帯情報には、例えば、個々の医用画像を識別するための画像ＩＤ(identification)、被写体を識別するための患者ＩＤ、検査を識別するための検査ＩＤ、医用画像毎に割り振られるユニークなＩＤ（ＵＩＤ：unique identification）、医用画像が生成された検査日、検査時刻、医用画像を取得するための検査で使用された撮影装置の種類、患者氏名、年齢、性別等の患者情報、検査部位（撮影部位）、撮影情報（撮影プロトコル、撮影シーケンス、撮像手法、撮影条件、造影剤の使用等）、１回の検査で複数の医用画像を取得した場合のシリーズ番号あるいは採取番号等の情報が含まれる。

また、画像サーバ５は、読影ＷＳ３および診療ＷＳ４からの閲覧要求をネットワーク１０経由で受信すると、画像ＤＢ６に登録されている医用画像を検索し、検索された医用画像を要求元の読影ＷＳ３および診療ＷＳ４に送信する。

レポートサーバ７には、汎用のコンピュータにデータベース管理システムの機能を提供するソフトウェアプログラムが組み込まれる。レポートサーバ７は、読影ＷＳ３からの読影レポートの登録要求を受け付けると、その読影レポートをデータベース用のフォーマットに整えてレポートＤＢ８に登録する。

レポートＤＢ８には、読影医が読影ＷＳ３を用いて作成した読影レポートが登録される。読影レポートは、例えば、読影対象の医用画像、医用画像を識別する画像ＩＤ、読影を行った読影医を識別するための読影医ＩＤ、疾患名、疾患の位置情報、および医用画像にアクセスするための情報等の情報を含んでいてもよい。

また、レポートサーバ７は、読影ＷＳ３および診療ＷＳ４からの読影レポートの閲覧要求をネットワーク１０経由で受信すると、レポートＤＢ８に登録されている読影レポートを検索し、検索された読影レポートを要求元の読影ＷＳ３および診療ＷＳ４に送信する。

解析サーバ９は、ＣＡＤ等により医用画像を解析して病変等の異常陰影を検出する機能を提供するソフトウェアプログラムが、コンピュータにインストールされたものである。解析サーバ９における医用画像の解析処理は、診療ＷＳ４または読影ＷＳ３からの指示により行われる。解析サーバ９は、医用画像の解析処理の指示を受信すると、画像サーバ５から処理の対象となる医用画像を取得する。そして、解析サーバ９は、取得した医用画像を解析し、解析結果を指示があった診療ＷＳ４または読影ＷＳ３に送信する。また、解析結果を画像サーバ５に送信して画像ＤＢ６に登録する。解析結果としては、解析により特定された医用画像中の異常陰影の位置を表す領域情報、異常陰影の輪郭の位置を表す輪郭情報、異常陰影の中心位置を表す座標情報、異常陰影のサイズを表すサイズ情報、および異常陰影の性状を表すテキスト情報等が挙げられる。

なお、ＣＡＤによる解析処理は、医用画像から異常陰影を検出するように機械学習がなされた学習モデルを用いて行うことができる。学習モデルは、医用画像における各画素（ボクセル）が、異常陰影を表すものであるか否かを判別するように、教師データを用いてディープラーニング（深層学習）がなされた畳み込みニューラルネットワーク（ＣＮＮ(Convolutional Neural Network)）からなる。

学習モデルは、例えば異常陰影を含む教師画像および教師画像における異常陰影の領域および異常陰影の性状を表す正解データからなる教師データ、並びに異常陰影を含まない教師画像からなる教師データを多数用いてＣＮＮを学習することにより構築される。学習モデルは、医用画像における各画素が異常陰影であることを表す確信度（尤度）を導出し、その確信度が予め定められたしきい値以上となる画素からなる領域を異常陰影の領域として検出し、検出した異常陰影の性状を導出する。ここで、確信度は０以上１以下の値となる。

また、学習モデルとしては、畳み込みニューラルネットワークの他、例えばサポートベクタマシン（ＳＶＭ(Support Vector Machine)）等の任意の学習モデルを用いることができる。

なお、本実施形態においては、医用画像は診断対象を肺とした単純Ｘ線撮影装置により取得された放射線画像とし、解析サーバ９においてＣＡＤにより肺に含まれる異常陰影を検出し、かつ異常陰影の性状を導出するものとする。なお、画像は放射線画像に限定されるものではなく、複数の断層画像からなるＣＴ画像またはＭＲＩ画像であってもよい。

ネットワーク１０は、病院内の各種機器を接続する有線または無線のローカルエリアネットワークである。読影ＷＳ３が他の病院あるいは診療所に設置されている場合には、ネットワーク１０は、各病院のローカルエリアネットワーク同士をインターネットまたは専用回線で接続した構成としてもよい。

次いで、本実施形態による医用画像表示装置について説明する。図２は、本実施形態による医用画像表示装置のハードウェア構成を説明する。図２に示すように、医用画像表示装置２０は、ＣＰＵ（Central Processing Unit）１１、不揮発性のストレージ１３、および一時記憶領域としてのメモリ１６を含む。また、医用画像表示装置２０は、液晶ディスプレイ等のディスプレイ１４、キーボードおよびマウス等のポインティングデバイス等からなる入力デバイス１５、並びにネットワーク１０に接続されるネットワークＩ／Ｆ（InterFace）１７を含む。ＣＰＵ１１、ストレージ１３、ディスプレイ１４、入力デバイス１５、メモリ１６およびネットワークＩ／Ｆ１７は、バス１８に接続される。なお、ＣＰＵ１１は、本開示におけるプロセッサの一例である。

ストレージ１３は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、およびフラッシュメモリ等によって実現される。記憶媒体としてのストレージ１３には、医用画像表示プログラム１２が記憶される。ＣＰＵ１１は、ストレージ１３から医用画像表示プログラム１２を読み出してメモリ１６に展開し、展開した医用画像表示プログラム１２を実行する。

ここで、本実施形態においては、読影ＷＳ３における読影レポートの作成に際して、読影医は、解析サーバ９に医用画像の解析指示を行う。そして読影医は医用画像をディスプレイ１４に表示して、自らの目で医用画像の読影を行う。その後、読影医は解析サーバ９から医用画像の解析結果を取得し、取得した解析結果に基づいて解析結果を表すアノテーションを医用画像に表示し、表示された解析結果を表すアノテーションを参照して２回目の読影を行う。１回目の読影を一次読影、解析結果表示後の解析結果を参照した２回目の読影を二次読影と称する。

次いで、本実施形態による医用画像表示装置の機能的な構成を説明する。図３は、本実施形態による医用画像表示装置の機能的な構成を示す図である。図３に示すように医用画像表示装置２０は、情報取得部２１、表示制御部２２、入力受付部２３および編集制御部２４を備える。そして、ＣＰＵ１１が、医用画像表示プログラム１２を実行することにより、ＣＰＵ１１は、情報取得部２１、表示制御部２２、入力受付部２３および編集制御部２４として機能する。

情報取得部２１は、操作者である読影医による入力デバイス１５からの指示により、画像サーバ５から読影レポートを作成するための処理対象となる医用画像Ｇ０を取得する。また、入力デバイス１５からの指示により、処理対象となる医用画像Ｇ０の解析の指示を解析サーバ９に対して行い、解析サーバ９からの解析結果を取得する。

表示制御部２２は、医用画像Ｇ０の表示、後述する読影結果および解析結果のそれぞれを表すアノテーションの表示を含む各種表示の制御を行う。

入力受付部２３は、読影医による入力デバイス１５からの読影結果の入力を受け付け、入力された情報を表示制御部２２へ出力する。

編集制御部２４は、後述するように解析結果を表すアノテーションが表示された後に、解析結果を表すアノテーションの表示前の一次読影によって読影医が入力した一次読影結果の編集を禁止する。また、解析結果を表すアノテーションが表示される際に、一次読影結果の編集が禁止されることを通知する。また、編集制御部２４は、一次読影結果を表すアノテーションと、解析結果を表すアノテーションが表示された後の二次読影によって読影医が入力した二次読影結果を表すアノテーションとを医用画像Ｇ０と関連付けて保存する。

以下、本実施形態において行われる処理について詳細に説明する。図４および図５は本実施形態において行われる処理を示すフローチャートである。なお、診断対象となる医用画像Ｇ０の取得および解析サーバ９への解析の指示は終了しているものとする。読影レポートの作成の指示がなされることにより処理が開始され、表示制御部２２が医用画像Ｇ０をディスプレイ１４に表示する（ステップＳＴ１）。これにより、読影医は表示された医用画像Ｇ０の一次読影を行う。

図６は一次読影用の表示画面を示す図である。図６に示すように表示画面４０には、画像表示領域４１と文章表示領域４２とが表示される。また、入力した内容を確定させるための確定ボタン４３も表示される。画像表示領域４１には医用画像Ｇ０が表示される。図６に示すように医用画像Ｇ０は人体の胸部の放射線画像である。医用画像Ｇ０には２つの異常陰影Ａ１，Ａ２が含まれる。また、文章表示領域４２には、読影医が入力した所見文が表示される。

次いで、入力受付部２３が、読影医による医用画像Ｇ０の一次読影結果の入力がなされたか否かを判定し（ステップＳＴ２）、ステップＳＴ２が肯定されると、表示制御部２２が医用画像Ｇ０に一次読影結果を表すアノテーション表示する（ステップＳＴ３）。ステップＳＴ２が否定されるとステップＳＴ１２の処理に進む。

図７は一次読影結果を表すアノテーションが表示された表示画面を示す図である。図７に示すように、表示画面４０Ａにおける医用画像Ｇ０には、読影医が医用画像Ｇ０を読影することにより特定した異常陰影Ａ１に、一次読影結果を表すアノテーションとして円形のマーク３０が付与されている。なお、図７においては１つのマーク３０のみしか表示されていないが、読影の結果、複数の異常陰影が見つかった場合には、そのそれぞれに対してマークが付与される。なお、マークは円形に限定されるものではなく、多角形の形状であってもよく、矢印等の任意の形状であってもよい。また、一次読影結果を表すアノテーションはマークに限定されるものではなく、医師の読影結果の内容が記載されたテキストであってもよい。テキストの場合、異常陰影に隣接してテキストの表示領域がアノテーションとして表示される。また、ここでは説明のために、一次読影によって、異常陰影Ａ２は特定されなかったものとして説明する。

次いで、入力受付部２３が、解析結果の表示の指示の入力がなされたか否かを判定し（ステップＳＴ４）、ステップＳＴ４が肯定されると、情報取得部２１が医用画像Ｇ０の解析結果を取得する（ステップＳＴ５）。なお、解析結果は、ステップＳＴ１～ＳＴ４の処理が行われている間に取得されるものであってもよく、ステップＳＴ１の処理の前に取得されるものであってもよい。一方、ステップＳＴ４が否定されるとステップＳＴ１２の処理に進む。

続いて、編集制御部２４が読影医の入力した一次読影結果の編集が禁止されることの通知を行う（ステップＳＴ６）。図８は編集禁止の通知が表示された表示画面を示す図である。図８に示すように表示画面４０Ｂには編集禁止の通知４４が表示される。編集禁止の通知４４には、「解析結果を見た後は、解析結果を参照して読影を行ったことが明記され、解析結果を見る前の読影結果の編集が不可能となります。よろしいですか？」のテキスト４５と、ＹＥＳボタン４６とＮＯボタン４７とが表示される。ＮＯボタン４７が選択されると（ステップＳＴ７；ＮＯ）、後述するステップＳＴ１２の処理に進む。

ＹＥＳボタン４６が選択されると（ステップＳＴ７；ＹＥＳ）、編集制御部２４が一次読影結果の編集を禁止に設定する（ステップＳＴ８）。具体的には、医用画像Ｇ０から一次読影結果を表すアノテーションであるマーク３０の削除、マーク３０の種類の変更およびマーク３０の位置の変更等ができなくなるように、一次読影結果を表す情報（異常陰影の位置およびマークの種類を表す情報等）に対して編集禁止のフラグを設定する。そして、表示制御部２２が取得した解析結果に基づいて、解析結果を表すアノテーションを医用画像Ｇ０に表示する（ステップＳＴ９）。このとき、取得した解析結果の情報をそのままアノテーションとして表示してもよく、取得した解析結果を加工して、解析結果を表す情報をアノテーションとして表示してもよい。

図９は解析結果を表すアノテーションが表示された表示画面を示す図である。図９に示すように、表示画面４０Ｃに表示された医用画像Ｇ０には、一次読影結果を表すアノテーションである円形のマーク３０に加えて、解析結果を表すアノテーションである三角形のマーク３１が表示されている。

ここで、一次読影結果を表すアノテーションは円形のマーク３０であり、解析結果を表すアノテーションは三角形のマーク３１であるため、一次読影結果を表すアノテーションと解析結果を表すアノテーションとは区別されて表示される。マーク３０とマーク３１とは、形状を異なるものとすることに加えてまたはこれに代えて色を異なるものとしたり、線の種類を異なるものとしたりしてもよい。この後読影医は、解析結果を参照して医用画像Ｇ０のさらなる読影、すなわち二次読影を行う。

なお、解析結果を表すアノテーションとして、解析結果に含まれる性状を表すテキストを表示するようにしてもよい。この場合、解析結果により検出した異常陰影に対してテキストボックスが対応づけられ、テキストボックスに性状が記述される。

次いで、入力受付部２３が、解析結果を参照しての読影医による医用画像Ｇ０の二次読影結果の入力がなされたか否かを判定し（ステップＳＴ１０）、ステップＳＴ１０が肯定されると、表示制御部２２が医用画像Ｇ０に二次読影結果を表すアノテーションを表示する（ステップＳＴ１１）。ステップＳＴ１０が否定されるとステップＳＴ１２の処理に進む。

図１０は二次読影結果を表すアノテーションが表示された表示画面を示す図である。図１０に示すように、表示画面４０Ｄの医用画像Ｇ０には、一次読影結果を表すアノテーションである円形のマーク３０および解析結果を表すアノテーションである三角形のマーク３１に加えて、二次読影結果を表すアノテーションである矩形のマーク３２が表示される。なお、矩形のマーク３２は、解析結果により特定された異常陰影Ａ２に対して付与されているため、三角形のマーク３１と矩形のマーク３２とは重なって表示される。

ここで、一次読影結果を表すアノテーションは円形のマーク３０であり、二次読影結果を表すアノテーションは矩形のマーク３２であるため、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとは区別されて表示される。マーク３０とマーク３２とは、形状を異なるものとすることに加えてまたはこれに代えて色を異なるものとしたり、線の種類を異なるものとしたりしてもよい。

続いて、編集制御部２４が、文章表示領域４２に対する読影医による所見文の入力を受け付ける（ステップＳＴ１２）。そして、編集制御部２４は確定ボタン４３が選択されたか否かを判定し（ステップＳＴ１３）、ステップＳＴ１３が否定されるとステップＳＴ１２に戻る。ステップＳＴ１３が肯定されると、編集制御部２４は医用画像Ｇ０において一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを医用画像Ｇ０と関連付けてストレージ１３に保存する（ステップＳＴ１４）。なお、ステップＳＴ２の処理が否定された場合には医用画像Ｇ０には読影結果を表すアノテーションは関連付けられない。ステップＳＴ４，ＳＴ７，ＳＴ１０の処理が否定された場合には、一次読影結果を表すアノテーションのみが医用画像Ｇ０に関連付けられて保存される。

さらに編集制御部２４は、所見文が記載された読影レポートを生成してレポートサーバ６に送信し、さらにストレージ１３に保存された医用画像Ｇ０を画像サーバ５に送信し（ステップＳＴ１５）、処理を終了する。

ここで、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを医用画像Ｇ０と関連付けて保存するとは、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを医用画像Ｇ０と一体不可分となるように保存することを意味する。具体的には、医用画像Ｇ０に重畳する、あるいは医用画像Ｇ０のタグ情報に書き込む等の態様を採用することができる。これにより、後で医用画像Ｇ０を表示したときに、その医用画像Ｇ０に関連付けられて保存されたアノテーションを併せて表示することにより、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを図９に示す表示画面４０Ｃまたは図１０に示す表示画面４０Ｄと同様に表示できることとなる。

このように、本実施形態においては、解析結果の表示前の一次読影結果を表すアノテーションと解析結果を表すアノテーションの表示後の二次読影結果を表すアノテーションとを区別して表示するようにした。このため、表示された医用画像において、ＣＡＤによる医用画像の解析結果が医師の読影結果にどのように影響を与えたかを確認できる。

また、解析結果を表すアノテーションの表示後に一次読影結果の編集を禁止することにより、解析結果を表すアノテーションの表示前における読影医による一次読影結果が改変されることを防止できる。このため、ＣＡＤによる医用画像の解析結果が医師の読影結果にどのように影響を与えたかをより正確に確認できる。

また、解析結果を表すアノテーションが表示される前に一次読影結果の編集が禁止されることを通知することにより、読影医は、一次読影結果の編集が禁止されることを事前に知ることができる。このため、解析結果の表示により慎重を期することができ、その結果、より慎重に解析結果表示前の読影を行うことを読影医に促すことができる。

また、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとを医用画像Ｇ０と関連付けて保存することにより、後で医用画像Ｇ０を表示した際に、ＣＡＤによる医用画像の解析結果が医師の読影結果にどのように影響を与えたかを確認できる。

なお、上記実施形態においては、解析結果の表示画面において、一次読影結果の編集が禁止されたことを視認可能に一次読影結果を表すアノテーションを表示してもよい。図１１は解析結果の他の表示画面を示す図である。図１１に示すように表示画面４０Ｅに表示された医用画像Ｇ０において、一次読影結果を表すアノテーションを表すマーク３３は円形のマークの下方に横方向に延びる線が付与されたものとなっている。なお、マーク３３に代えて、図９に示すマーク３０の色を変更したり、線を薄くしたりすることにより編集が禁止されたことを視認可能としてもよい。また、編集が禁止されたことのテキストをアノテーションとして表示することにより、編集が禁止されたことを視認可能としてもよい。

また、上記実施形態においては、解析サーバ９において医用画像Ｇ０の解析を行っているが、これに限定されるものではない。読影ＷＳ３において医用画像Ｇ０の解析を行うようにしてもよい。この場合、読影ＷＳ３においては、解析サーバ９と同様に、医用画像から異常陰影を検出するように機械学習がなされた学習モデルを用いて行うようにすればよい。

また、上記実施形態においては、一次読影結果、解析結果および二次読影結果のそれぞれを表すアノテーションを異なるマークとすることによりこれらを区別して表示しているが、これに限定されるものではない。一次読影結果を表すアノテーションとして一次読影結果であることを表すテキストを表示し、二次読影結果を表すアノテーションとして二次読影結果であることを表すテキストを表示することにより、一次読影結果、解析結果および二次読影結果のそれぞれを表すアノテーションを区別して表示するようにしてもよい。

また、上記実施形態においては、一次読影結果を表すアノテーションと解析結果を表すアノテーションとを区別して表示しているが、これに限定されるものではない。本実施形態においては、一次読影結果を表すアノテーションと二次読影結果を表すアノテーションとが区別されて表示されればよい。

また、上記各実施形態においては、診断対象を肺または肝臓とした医用画像を用いて読影レポートを作成する場合に本開示の技術を適用しているが、診断対象は肺または肝臓に限定されるものではない。肺の他に、心臓、脳、腎臓および四肢等の人体の任意の部位を診断対象とすることができる。

また、上記各実施形態において、例えば、情報取得部２１、表示制御部２２、入力受付部２３および編集制御部２４といった各種の処理を実行する処理部（Processing Unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（Processor）を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device :PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。

１つの処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせまたはＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。

複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントおよびサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアとの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:SoC）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。

さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（Circuitry）を用いることができる。

１ 医療情報システム
２ 撮影装置
３ 読影ＷＳ
４ 診療ＷＳ
５ 画像サーバ
６ 画像ＤＢ
７ レポートサーバ
８ レポートＤＢ
９ 解析サーバ
１０ ネットワーク
１１ ＣＰＵ
１２ 医用画像表示プログラム
１３ ストレージ
１４ ディスプレイ
１５ 入力デバイス
１６ メモリ
１７ ネットワークＩ／Ｆ
１８ バス
２０ 医用画像表示装置
２１ 情報取得部
２２ 表示制御部
２３ 入力受付部
２４ 編集制御部
３０，３１，３２，３３ マーク
４０，４０Ａ～４０Ｅ 表示画面
４１ 画像表示領域
４２ 文章表示領域
４３ 確定ボタン
４４ 通知
４５ テキスト
４６ ＹＥＳボタン
４７ ＮＯボタン
Ａ１，Ａ２ 異常陰影
Ｇ０ 医用画像

Claims (10)

1. 少なくとも１つのプロセッサを備え、
   前記プロセッサは、
   医用画像を表示し、
   ユーザが前記医用画像を読影することによる一次読影結果の入力を受け付け、
   前記一次読影結果を表すアノテーションを表示し、
   前記医用画像に対する解析結果を取得し、
   前記解析結果を表すアノテーションを表示し、
   前記解析結果の表示後に前記ユーザが前記医用画像を読影することによる二次読影結果の入力を受け付け、
   前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを区別して表示する医用画像表示装置。
2. 前記プロセッサは、前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを異なる色のマークおよび異なる形状のマークの少なくとも一方によって表示することにより、前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを区別して表示する請求項１に記載の医用画像表示装置。
3. 前記プロセッサは、前記一次読影結果を表すアノテーションとして前記一次読影結果であることを表すテキストを表示し、前記二次読影結果を表すアノテーションとして前記二次読影結果であることを表すテキストを表示することにより、前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを区別して表示する請求項１または２に記載の医用画像表示装置。
4. 前記プロセッサは、前記一次読影結果を表すアノテーションと前記解析結果を表すアノテーションと区別して表示する請求項１から３のいずれか１項に記載の医用画像表示装置。
5. 前記プロセッサは、前記解析結果を表すアノテーションの表示後に前記一次読影結果の編集を禁止する請求項１から３のいずれか１項に記載の医用画像表示装置。
6. 前記プロセッサは、前記解析結果を表すアノテーションの表示前に前記一次読影結果の編集が禁止されることを通知する請求項５に記載の医用画像表示装置。
7. 前記プロセッサは、前記編集が禁止されたことを視認可能に前記一次読影結果を表すアノテーションを表示する請求項５または６に記載の医用画像表示装置。
8. 前記プロセッサは、前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを前記医用画像と関連付けて保存する請求項１から７のいずれか１項に記載の医用画像表示装置。
9. 医用画像を表示し、
   ユーザが前記医用画像を読影することによる一次読影結果の入力を受け付け、
   前記一次読影結果を表すアノテーションを表示し、
   前記医用画像に対する解析結果を取得し、
   前記解析結果を表すアノテーションを表示し、
   前記解析結果の表示後に前記ユーザが前記医用画像を読影することによる二次読影結果の入力を受け付け、
   前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを区別して表示する医用画像表示方法。
10. 医用画像を表示する手順と、
    ユーザが前記医用画像を読影することによる一次読影結果の入力を受け付ける手順と、
    前記一次読影結果を表すアノテーションを表示する手順と、
    前記医用画像に対する解析結果を取得する手順と、
    前記解析結果を表すアノテーションを表示する手順と、
    前記解析結果の表示後に前記ユーザが前記医用画像を読影することによる二次読影結果の入力を受け付ける手順と、
    前記一次読影結果を表すアノテーションと前記二次読影結果を表すアノテーションとを区別して表示する手順とをコンピュータに実行させる医用画像表示プログラム。

Images