JP7212147B2 - 医療文書作成支援装置、方法およびプログラム - Google Patents

Description

本開示は、読影レポート等の医療文書の作成を支援する医療文書作成支援装置、方法およびプログラムに関する。

近年、ＣＴ(Computed Tomography)装置およびＭＲＩ（Magnetic Resonance Imaging）装置等の医療機器の進歩により、より質の高い高解像度の医用画像を用いての画像診断が可能となってきている。とくに、ＣＴ画像およびＭＲＩ画像等を用いた画像診断により、病変の領域を精度よく特定することができるため、特定した結果に基づいて適切な治療が行われるようになってきている。

また、ディープラーニング等により学習がなされた判別器を用いたＣＡＤ（Computer-Aided Diagnosis）により医用画像を解析して、医用画像に含まれる病変等の領域、位置および体積等を抽出し、これらを解析結果として取得することも行われている（例えば非特許文献１参照）。このように、解析処理により生成される解析結果は、患者名、性別、年齢および医用画像を取得したモダリティ等の検査情報と対応づけられて、データベースに保存されて、診断に供される。この際、医用画像を取得した放射線科等の技師が、医用画像に応じた読影医を決定し、医用画像およびＣＡＤによる解析結果が存在することを、決定した読影医に伝えるようにしている。読影医は、自身の読影端末において、配信された医用画像および解析結果を参照して医用画像の読影を行い、読影レポートを作成する。

一方、上述したＣＴ装置およびＭＲＩ装置の高性能化に伴い、読影を行う医用画像の数も増大している。しかしながら、読影医の数は医用画像の数に追いついていないことから、読影医の読影業務の負担を軽減することが望まれている。このため、読影レポート等の医療文書の作成を支援するための各種手法が提案されている。例えば、特許文献１には、ＣＡＤの解析結果の入力により病変の大きさ、形状および推定病名等の所見を出力するように学習がなされた判別器を用いて、ＣＡＤの解析結果から所見を生成する手法が提案されている（特許文献１参照）。また、このように推定された所見を含む読影レポートを定型文に基づいて生成する手法も提案されている（特許文献２参照）。このように読影レポートを自動で生成することにより、読影レポートを作成する際の読影医の負担を軽減することができる。

特開２０１３－３９２３０号公報 特開平７－３１５９１号公報

Pulmonary Nodules on Multi-Detector Row CT Scans: Performance Comparison of Radiologists and Computer-aided Detection、Rubin GD et al.、2005; 234: 274-283

一方、特許文献１，２に記載された手法によって自動で作成された読影レポートに含まれる所見が、画像を読影した医師の所見と異なっている場合がある。このように読影レポートの内容と医師が診た画像の所見とが異なっている場合は、読影レポートの修正が必要となる。しかしながら、上述したように読影を行う医用画像の数は増大していることから、読影レポートの修正を効率よく行うことが望まれている。

本開示は上記事情に鑑みなされたものであり、読影レポート等の医療文書の修正を効率よく行うことを目的とする。

本開示による医療文書作成支援装置は、医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む医療文書を、表示画面における第１の表示領域に表示する第１の表示制御部と、
複数の所見の一覧を、各所見を修正可能に表示画面における第２の表示領域に表示する第２の表示制御部と、
複数の所見の一覧における指定された所見に対する修正の指示により、医療文書を修正する修正部とを備える。

なお、本開示による医療文書作成支援装置においては、第２の表示制御部は、指定された所見についての修正候補の一覧をさらに表示し、
修正部は、修正候補の一覧における所望とされる修正候補の選択の指示により、医療文書を修正するものであってもよい。

また、本開示による医療文書作成支援装置においては、医用画像は複数の断層画像を含む３次元画像であり、
複数の断層画像を表示画面に切り替え表示し、切り替え表示中に異常陰影を含む断層画像が表示される場合、異常陰影を強調表示する画像表示制御部をさらに備え、
第１の表示制御部は、表示中の断層画像において異常陰影が選択される場合、第１の表示領域を表示し、
第２の表示制御部は、表示中の断層画像において異常陰影が選択される場合、第２の表示領域を表示するものであってもよい。

また、本開示による医療文書作成支援装置においては、第２の表示制御部は、第２の表示領域の表示の指示により第２の表示領域を表示するものであってもよい。

また、本開示による医療文書作成支援装置においては、医用画像に含まれる異常陰影を検出する画像解析部と、
異常陰影に含まれる所見を検出する所見検出部と、
検出された所見に基づいて医療文書を作成する文書作成部とをさらに備えるものであってもよい。

本開示による医療文書作成支援方法は、医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む医療文書を、表示画面における第１の表示領域に表示し、
複数の所見の一覧を、各所見を修正可能に表示画面における第２の表示領域に表示し、
複数の所見の一覧における指定された所見に対する修正の指示により、医療文書を修正する。

なお、本開示による医療文書作成方法をコンピュータに実行させるためのプログラムとして提供してもよい。

本開示による他の医療文書作成支援装置は、コンピュータに実行させるための命令を記憶するメモリと、
記憶された命令を実行するよう構成されたプロセッサとを備え、プロセッサは、
医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む医療文書を、表示画面における第１の表示領域に表示し、
複数の所見の一覧を、各所見を修正可能に表示画面における第２の表示領域に表示し、
複数の所見の一覧における指定された所見に対する修正の指示により、医療文書を修正する処理を実行する。

本開示によれば、医療文書の修正を効率よく行うことができる。

本開示の実施形態による医療文書作成支援装置を適用した医療情報システムの概略構成を示す図 本実施形態による医療文書作成支援装置の概略構成を示す図 医用画像を模式的に示す図 医用画像の表示画面を示す図 第１の表示領域および第２の表示領域が表示された表示画面を示す図 医用画像の表示画面の例を示す図 第１および第２の表示領域が表示された表示画面を示す図 選択された項目に対して修正候補のプルダウンメニューが表示された表示画面を示す図 所見が修正された表示画面を示す図 選択された項目に対して修正候補のプルダウンメニューが表示された表示画面を示す図 所見が修正された表示画面を示す図 修正が完了した修正画面を示す図 本実施形態において行われる処理を示すフローチャート 第１の表示領域のみが表示された表示画面を示す図 他の実施形態による医療文書作成支援装置の概略構成を示す図

以下、図面を参照して本開示の実施形態について説明する。図１は本開示の実施形態による医療文書作成支援装置を適用した医療情報システムの概略構成を示す図である。図１に示す医療情報システム１は、公知のオーダリングシステムを用いた診療科の医師からの検査オーダに基づいて、被写体の検査対象部位の撮影、撮影により取得された医用画像の保管、読影医による医用画像の読影と読影レポートの作成、および依頼元の診療科の医師による読影レポートの閲覧と読影対象の医用画像の詳細観察とを行うためのシステムである。図１に示すように、医療情報システム１は、複数のモダリティ（撮影装置）２、読影端末である複数の読影ワークステーション（ＷＳ）３、診療科ワークステーション（ＷＳ）４、画像サーバ５、画像データベース６、読影レポートサーバ７、読影レポートデータベース８、および解析サーバ９が、有線または無線のネットワーク１０を介して互いに通信可能な状態で接続されて構成されている。

各機器は、医療情報システム１の構成要素として機能させるためのアプリケーションプログラムがインストールされたコンピュータである。アプリケーションプログラムは、ＤＶＤ（Digital Versatile Disc）あるいはＣＤ－ＲＯＭ（Compact Disc Read Only Memory）等の記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。または、ネットワーク１０に接続されたサーバコンピュータの記憶装置、もしくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じてコンピュータにダウンロードされ、インストールされる。

モダリティ２は、被写体の診断対象となる部位を撮影することにより、診断対象部位を表す医用画像を生成する装置である。具体的には、単純Ｘ線撮影装置、ＣＴ装置、ＭＲＩ装置、およびＰＥＴ（Positron Emission Tomography）装置等である。モダリティ２により生成された医用画像は画像サーバ５に送信され、保存される。

読影ＷＳ３は、本実施形態による医療文書作成支援装置を内包する。読影ＷＳ３の構成については後述する。

診療科ＷＳ４は、診療科の医師が画像の詳細観察、読影レポートの閲覧、および電子カルテの作成等に利用するコンピュータであり、処理装置、ディスプレイ等の表示装置、並びにキーボードおよびマウス等の入力装置により構成される。診療科ＷＳ４では、患者のカルテ（電子カルテ）の作成、画像サーバ５に対する画像の閲覧要求、画像サーバ５から受信した画像の表示、画像中の病変らしき部分の自動検出または強調表示、読影レポートサーバ７に対する読影レポートの閲覧要求、および読影レポートサーバ７から受信した読影レポートの表示等の各処理が、各処理のためのソフトウェアプログラムを実行することにより行われる。

画像サーバ５は、汎用のコンピュータにデータベース管理システム（DataBase Management System: DBMS）の機能を提供するソフトウェアプログラムがインストールされたものである。また、画像サーバ５は画像データベース６が構成されるストレージを備えている。このストレージは、画像サーバ５とデータバスとによって接続されたハードディスク装置であってもよいし、ネットワーク１０に接続されているＮＡＳ（Network Attached Storage）およびＳＡＮ（Storage Area Network）に接続されたディスク装置であってもよい。また、画像サーバ５は、モダリティ２からの医用画像の登録要求を受け付けると、その医用画像をデータベース用のフォーマットに整えて画像データベース６に登録する。

画像データベース６には、モダリティ２において取得された医用画像の画像データと付帯情報とが登録される。付帯情報には、例えば、個々の医用画像を識別するための画像ＩＤ(identification)、被写体を識別するための患者ＩＤ、検査を識別するための検査ＩＤ、医用画像毎に割り振られるユニークなＩＤ（ＵＩＤ：unique identification）、医用画像が生成された検査日、検査時刻、医用画像を取得するための検査で使用されたモダリティの種類、患者氏名、年齢、性別等の患者情報、検査部位（撮影部位）、撮影情報（撮影プロトコル、撮影シーケンス、撮像手法、撮影条件、造影剤の使用等）、１回の検査で複数の医用画像を取得したときのシリーズ番号あるいは採取番号等の情報が含まれる。

また、画像サーバ５は、読影ＷＳ３からの閲覧要求をネットワーク１０経由で受信すると、画像データベース６に登録されている医用画像を検索し、検索された医用画像を要求元の読影ＷＳ３に送信する。

読影レポートサーバ７には、汎用のコンピュータにデータベース管理システムの機能を提供するソフトウェアプログラムが組み込まれる。読影レポートサーバ７は、読影ＷＳ３からの読影レポートの登録要求を受け付けると、その読影レポートをデータベース用のフォーマットに整えて読影レポートデータベース８に登録する。また、読影レポートの検索要求を受け付けると、その読影レポートを読影レポートデータベース８から検索する。

読影レポートデータベース８には、例えば、読影対象の医用画像を識別する画像ＩＤ、読影を行った画像診断医を識別するための読影医ＩＤ、病変名、病変の位置情報、所見、および所見の確信度等の情報が記録された読影レポートが登録される。

解析サーバ９は、ＣＡＤ等により医用画像を解析して病変等の異常陰影を検出する機能を提供するソフトウェアプログラム、異常陰影についての所見を検出する機能を提供するソフトウェアプログラム、並びにＣＡＤによる解析結果および所見の検出結果を用いて読影レポートを作成する機能を提供するソフトウェアプログラムが、コンピュータにインストールされたものである。解析サーバ９における医用画像の解析処理、所見の検出処理および読影レポートの作成処理は、診療科ＷＳ４または読影ＷＳ３からの指示により行われる。解析サーバ９は、医用画像の解析処理、所見の検出処理および読影レポートの作成処理の指示を受信すると、画像サーバ５から処理の対象となる医用画像を取得する。そして、解析サーバ９は、取得した医用画像を解析し、所見を検出し、さらに読影レポートを作成し、作成した読影レポートを読影レポートサーバ７に送信して登録する。この場合、読影レポートの登録要求は、解析サーバ９から行われることとなる。なお、本実施形態においては、読影レポートと併せて、所見の検出処理により検出された所見、並びに異常陰影の位置およびサイズの情報を含む所見情報も、読影レポートサーバ７に送信される。

なお、ＣＡＤによる解析処理としては、例えば上記非特許文献１に記載された手法を用いることができる。また、ＣＡＤによる解析処理から所見を生成し、所見から読影レポートを作成する手法は、例えば上記特許文献１，２に記載された手法を用いることができる。しかしながら、ＣＡＤによる解析処理および読影レポートを作成する手法は、これらに限定されるものではない。

また、本実施形態においては、医用画像は診断対象を肺とした、複数の断層画像からなるＣＴ画像とし、ＣＡＤにより肺に含まれる異常陰影を検出し、検出した異常陰影についての所見を検出し、検出した所見を用いて、肺に含まれる異常陰影についての読影レポートを医療文書として作成するものとする。なお、画像はＣＴ画像に限定されるものではなく、ＭＲＩ画像であってもよい。また、単純Ｘ線撮影装置により取得された単純２次元画像であってもよい。

ネットワーク１０は、病院内の各種機器を接続する有線または無線のローカルエリアネットワークである。読影ＷＳ３が他の病院あるいは診療所に設置されている場合には、ネットワーク１０は、各病院のローカルエリアネットワーク同士をインターネットまたは専用回線で接続した構成としてもよい。

以下、本実施形態による読影ＷＳ３について詳細に説明する。読影ＷＳ３は、医用画像の読影医が、医用画像の読影および読影レポートの作成に利用するコンピュータであり、処理装置、ディスプレイ等の表示装置、並びにキーボードおよびマウス等の入力装置により構成される。読影ＷＳ３では、画像サーバ５に対する医用画像の閲覧要求、画像サーバ５から受信した医用画像に対する各種画像処理、医用画像の表示、医用画像に対する解析処理、解析結果に基づく医用画像の強調表示、解析結果に基づく読影レポートの作成、読影レポートの作成の支援、読影レポートサーバ７に対する読影レポートの登録要求と閲覧要求、並びに読影レポートサーバ７から受信した読影レポートの表示等の各処理が、各処理のためのソフトウェアプログラムを実行することにより行われる。なお、これらの処理のうち、本実施形態の医療文書作成支援装置が行う処理以外の処理は、周知のソフトウェアプログラムにより行われるため、ここでは詳細な説明は省略する。また、本実施形態の医療文書作成支援装置が行う処理以外の処理を読影ＷＳ３において行わず、別途その処理を行うコンピュータをネットワーク１０に接続しておき、読影ＷＳ３からの処理の要求に応じて、そのコンピュータにおいて要求された処理を行うようにしてもよい。

読影ＷＳ３は、本実施形態による医療文書作成支援装置が内包されてなる。このため、読影ＷＳ３には、本実施形態による医療文書作成支援プログラムがインストールされてなる。医療文書作成支援プログラムは、ネットワークに接続されたサーバコンピュータの記憶装置、もしくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて読影ＷＳ３にダウンロードされ、インストールされる。または、ＤＶＤあるいはＣＤ－ＲＯＭ等の記録媒体に記録されて配布され、その記録媒体から読影ＷＳ３にインストールされる。

図２は、医療文書作成支援プログラムをインストールすることにより実現される、本実施形態による医療文書作成支援装置の概略構成を示す図である。図２に示すように、医療文書作成支援装置２０は、標準的なコンピュータの構成として、ＣＰＵ（Central Processing Unit）１１、メモリ１２およびストレージ１３を備えている。また、医療文書作成支援装置２０には、液晶ディスプレイ等の表示装置（以下「表示部」とする）１４、並びにキーボードおよびマウス等の入力装置（以下、「入力部」とする）１５が接続されている。

ストレージ１３は、ハードディスクまたはＳＳＤ（Solid State Drive）等のストレージデバイスからなる。ストレージ１３には、ネットワーク１０を経由して画像サーバ５から取得した、医用画像および医療文書作成支援装置２０の処理に必要な情報を含む各種情報が記憶されている。

また、メモリ１２には、医療文書作成支援プログラムが記憶されている。医療文書作成支援プログラムは、ＣＰＵ１１に実行させる処理として、読影レポート、上述した所見情報および医用画像を取得する情報取得処理、医用画像を構成する複数の断層画像を表示画面に切り替え表示し、切り替え表示中に異常陰影を含む断層画像が表示されると、異常陰影を強調表示する画像表示制御処理、医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む読影レポートを、表示画面における第１の表示領域に表示する第１の表示制御処理、複数の所見の一覧を、各所見を修正可能に表示画面における第２の表示領域に表示する第２の表示制御処理、並びに所見の一覧における指定された所見に対する修正の指示により、読影レポートを修正する修正処理を規定する。

そして、ＣＰＵ１１が医療文書作成支援プログラムに従いこれらの処理を実行することによって、コンピュータは、情報取得部２１、画像表示制御部２２、第１の表示制御部２３、第２の表示制御部２４および修正部２５として機能する。

情報取得部２１は、ネットワーク１０と接続されたインターフェースからなり、操作者である読影医による入力部１５からの指示により、読影レポートサーバ７から読影レポートおよび所見情報を取得する。また、読影レポートの内容の確認のために、読影レポートを作成した医用画像を、画像サーバ５から取得する。

画像表示制御部２２は、操作者による入力部１５からの指示により、医用画像Ｇ０を表示部１４に表示される表示画面に表示する。この際、操作者による入力部１５からの切り替え表示の指示により、医用画像Ｇ０を構成する複数の断層画像を、表示画面に順に切り替え表示する。図３は医用画像Ｇ０を模式的に示す図である。本実施形態においては、医用画像Ｇ０はｍ枚の断層画像Ｄ１～Ｄｍからなる３次元画像であり、解析サーバ９における解析の結果、例えば２カ所に異常陰影Ａ１，Ａ２が特定されているものとする。

ここで、本実施形態においては、情報取得部２１が取得した所見情報には、異常陰影のサイズおよび位置の情報が含まれる。画像表示制御部２２は、断層画像Ｄｋ（ｋ＝１～ｍ）の切り替え表示中に、異常陰影を含む断層画像が表示されると、その断層画像に含まれる異常陰影のサイズおよび位置を所見情報に基づいて特定し、特定した異常陰影を強調表示する。なお、異常陰影のサイズとは、断層画像Ｄ１～Ｄｍのそれぞれにおける異常陰影の縦および横のサイズとすることができる。また、異常陰影は円形に近い形状を有するため、異常陰影を円形に近似させたときの直径をサイズとして用いてもよい。異常陰影の位置は、例えば各断層画像における異常陰影の重心位置とすることができる。

図４は医用画像の表示画面を示す図である。図４に示すように、表示画面３０は画像表示領域４０を含み、画像表示領域４０に医用画像Ｇ０が表示される。画像表示制御部２２は、入力部１５からの操作者による切り替え表示の指示により、複数の断層画像を画像表示領域４０に切り替え表示する。そして、医用画像Ｇ０における異常陰影Ａ１を含む断層画像ＤＴ１が画像表示領域に表示されると、画像表示制御部２２は、異常陰影Ａ１を強調表示する。図４においては、所見情報に含まれる異常陰影Ａ１の位置およびサイズに応じた破線の矩形領域５０によって異常陰影Ａ１を囲むことにより、異常陰影Ａ１を強調表示している。矩形領域５０は破線に限定されるものではなく、実線等の他の線種でもよい。なお、強調表示はこれに限定されるものではなく、異常陰影Ａ１に矢印等のマークを付与したり、異常陰影Ａ１を囲む領域の線に色を付与したりしてもよい。

なお、表示部１４にはカーソル５１が表示される。操作者は入力部１５を操作して表示画面３０上の所望とする位置にカーソル５１を移動させることができる。

第１の表示制御部２３は、表示画面３０に第１の表示領域４１を表示し、医用画像Ｇ０に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む読影レポートを第１の表示領域４１に表示する（図５を参照する）。

第２の表示制御部２４は、表示画面３０に第２の表示領域を表示し、複数の所見の一覧を各所見を修正可能に第２の表示領域に表示する（図５を参照する）。

本実施形態においては、図４に示すように画像表示領域４０に表示されている断層画像ＤＴ１において、操作者が入力部１５を用いて異常陰影Ａ１を囲んでいる矩形領域５０をカーソル５１により選択すると、第１の表示制御部２３および第２の表示制御部２４が、図５に示すように、第１の表示領域４１および第２の表示領域４２を並べて表示画面３０に表示する。第１の表示制御部２３は、「左上葉に長径３４．０ｍｍの充実型腫瘤を認めます。辺縁にスピキュラ胸膜陥入を伴い、内部に気管支透亮像を認めます。石灰化はありません。」の読影レポートを、第１の表示領域４１に表示する。第２の表示制御部２４は、解析サーバ９が検出した所見情報に基づく所見の一覧を第２の表示領域４２に修正可能に表示する。所見の一覧は、所見の項目と項目に対応する所見を含む。所見の項目は、境界、辺縁、吸収値、気管支透亮像、空洞、石灰化、脂肪、胸膜陥入、胸膜／壁接触および胸膜／壁浸潤を含むが、これらに限定されるものではない。また、図５においては、辺縁の所見が「スピキュラあり」、吸収値の所見が「充実型」、気管支透亮像の所見が「あり」、石灰化の所見が「なし」、胸膜陥入の所見が「あり」となっている。これら以外の項目の所見については、所見が検出されなかったことを表す「－」が示されている。

また、第２の表示領域４２の下部には、閉じるボタン４３およびキャンセルボタン４４が表示されている。閉じるボタン４３およびキャンセルボタン４４については後述する。

操作者は、画像表示領域に表示された断層画像を読影し、第１の表示領域４１に表示された読影レポートに対する修正の要否を判断する。修正が必要でない場合は、操作者が閉じるボタン４３またはキャンセルボタン４４を選択すると、第１の表示領域４１および第２の表示領域４２が閉じられる。

修正が必要でない場合、操作者は入力部１５を用いて画像表示制御部２２に指示を行い、画像表示領域４０において断層画像を引き続き切り替え表示する。これにより、図６に示すように画像表示領域４０には、異常陰影Ａ１とは異なる異常陰影Ａ２を含む断層画像ＤＴ２を表示することができる。画像表示制御部２２は、断層画像ＤＴ２において、断層画像ＤＴ１と同様に異常陰影Ａ２を矩形領域５０によって囲むことにより、異常陰影Ａ２を強調表示する。

操作者が、入力部１５を用いて異常陰影Ａ２を囲んでいる矩形領域５０をカーソル５１により選択すると、第１の表示制御部２３および第２の表示制御部２４が、図７に示すように、第１の表示領域４１および第２の表示領域４２を並べて表示画面３０に表示する。第１の表示制御部２３は、「右下葉に長径２５．４ｍｍの部分充実型の結節を認めます。」の読影レポートを第１の表示領域４１に表示する。第２の表示制御部２４は所見情報に基づく所見の一覧を修正可能に第２の表示領域４２に表示する。図７においては、第２の表示領域４２における吸収値の所見が「部分充実型」となっている。

操作者は、画像表示領域に表示された断層画像を読影し、第１の表示領域４１に表示された読影レポートに対する修正の要否を判断する。修正が必要である場合は、操作者は、第２の表示領域４２に表示された所見の一覧において、修正を所望する項目をカーソル５１により選択する。第２の表示制御部２４は、選択された項目を反転表示する。さらに、第２の表示制御部２４は、選択された項目に対して修正候補のプルダウンメニューを表示する。図８は選択された項目に対して修正候補のプルダウンメニュー４５が表示された表示画面を示す図である。図８に示すように第２の表示領域４２において、「境界」の項目がカーソル５１により選択されている。なお、図８においては反転表示を斜線を付与することにより示している。項目が選択されると、第２の表示制御部２４は選択した項目に対応する修正候補のプルダウンメニュー４５を表示する。プルダウンメニュー４５には、選択された「境界」の項目に対応する所見が表示される。図８には、「境界不明瞭」、「境界やや不明瞭」、「境界比較的不明瞭」、「境界明瞭」および「境界一部不明瞭」の所見が表示されている。

操作者は、修正候補のプルダウンメニュー４５においてカーソル５１を移動させることにより、修正候補から所望とする所見を選択することができる。第２の表示制御部２４は、選択された所見を反転表示する。図８においては、「境界不明瞭」が選択されている。

修正部２５は、第２の表示領域４２に表示された所見の一覧における指定された所見に対する修正の指示により、読影レポートを修正する。このために、修正部２５は修正された所見を用いて文章を作成するように学習がなされた学習済みモデルを有する。学習済みモデルは、例えば、ディープラーニング（深層学習）がなされた畳み込みニューラルネットワーク（ＣＮＮ（Convolutional Neural Network））からなる。しかしながら、ＣＮＮの他、サポートベクタマシン（ＳＶＭ(Support Vector Machine)）、ディープニューラルネットワーク（ＤＮＮ(Deep Neural Network)）およびリカレントニューラルネットワーク（ＲＮＮ(Recurrent Neural Network)）等を用いることができる。

修正部２５は、第２の表示領域４２において所見の修正が行われると、修正された所見から所見文を生成する。例えば、図８に示すように、境界の項目に対して「境界不明瞭」とする修正がされると、「辺縁はスリガラス状で境界不明瞭です。」の所見文を生成する。第１の表示制御部２３は、生成された所見文を第１の表示領域４１に表示する。図９は所見が修正された表示画面を示す図である。図９に示す表示画面３０には、図７と比較すると、第２の表示領域４２における境界の所見が「境界不明瞭」となっており、第１の表示領域４１に表示される読影レポートには、「辺縁はスリガラス状で境界不明瞭です。」の所見文が追加されている。

操作者は、さらに修正が必要な場合には、修正を所望する項目をさらにカーソル５１により選択する。これにより、第２の表示制御部２４は、選択された項目に対する所見の修正候補のプルダウンメニューを表示する。図１０はさらに選択された項目に対して修正候補のプルダウンメニュー４６が表示された状態を示している。図１０に示すように第２の表示領域４２において、「気管支透亮像」の項目がカーソル５１により選択されている。第２の表示制御部２４は、項目が選択されると修正候補のプルダウンメニュー４６を表示する。修正候補のプルダウンメニュー４６には、選択された「気管支透亮像」の項目に対応する所見が表示される。図１０においては、「気管支透亮像あり」、「気管支透亮像なし」、「気管支拡張あり」の所見が表示されている。

操作者は、プルダウンメニュー４６においてカーソル５１を移動させることにより、修正候補から所望とする所見を選択することができる。第２の表示制御部２４は、選択された所見を反転表示する。図１０においては、「気管支透亮像あり」が選択されている。これにより、修正部２５は、第１の表示領域４１に表示された読影レポートに含まれる「辺縁はすりガラス状で境界不明瞭です。」の所見文を、「境界不明瞭で内部に気管支透亮像を認めます。」に修正する。図１１はさらに所見が修正された表示画面を示す図である。図１１に表示画面３０は、図９と比較すると、第２の表示領域４２における気管支透亮像の所見が「あり」となっており、第１の表示領域４１に表示される読影レポートの「辺縁はスリガラス状で境界不明瞭です。」の所見文が「境界不明瞭で内部に気管支透亮像を認めます。」に修正されている。

操作者は、上記と同様に修正を所望する所見の修正を行い、読影レポートを修正する。これにより、最終的に図１２に示すように読影レポートの修正が完了する。修正が完了した読影レポートは、「右下葉に長径２５．４ｍｍの部分充実型の結節を認めます。辺縁はスリガラス状で境界不明瞭です。胸膜陥入を伴います。内部に気管支透亮像を認めます。」に修正されている。また、所見の一覧には、「吸収値」に加えて、「境界」、「気管支透亮像」および「胸膜陥入」の項目の所見が追加されている。

操作者は、読影レポートの修正が完了すると閉じるボタン４３を選択する。これにより、修正部２５は、修正内容を反映させるべく読影レポートおよび所見情報を更新し、読影レポートサーバ７に送信する。読影レポートサーバ７においては、更新された読影レポートおよび更新された所見情報により、保存されている読影レポートおよび所見情報が更新される。また、修正をやり直す場合、操作者はキャンセルボタン４４を選択する。これにより、修正の操作がキャンセルされ、それまでに行った修正が破棄される。操作者は矩形領域５０を再度選択することにより、第１の表示領域４１および第２の表示領域４２を表示して、読影レポートおよび所見情報の修正を行うことができる。

なお、閉じるボタン４３およびキャンセルボタン４４の表示は修正部２５が行えばよいが、第１の表示制御部２３が行ってもよく、第２の表示制御部２４が行ってもよい。

次いで、本実施形態において行われる処理について説明する。図１３は本実施形態において行われる処理を示すフローチャートである。操作者が医用画像の読影の指示を入力部１５から行うことにより処理が開始され、情報取得部２１が、医用画像Ｇ０を画像サーバ５から取得し、読影レポートサーバ７から読影レポートおよび所見情報を取得する（情報取得；ステップＳＴ１）。そして、画像表示制御部２２が、医用画像を切り替え表示可能に表示画面３０に表示する（画像切り替え表示；ステップＳＴ２）。

画像表示制御部２２は、表示された断層画像に含まれる矩形領域を選択することにより、異常陰影が選択されたか否かの監視を開始する（ステップＳＴ３）。矩形領域が選択されると（ステップＳＴ３：ＹＥＳ）、第１の表示制御部２３が第１の表示領域４１を表示画面３０に表示し（ステップＳＴ４）、第２の表示制御部２４が第２の表示領域４２を表示画面３０に表示する（ステップＳＴ５）。なお、上述したように第１の表示領域４１には読影レポートが表示され、第２の表示領域４２には、所見の一覧が表示される。

修正部２５は、第２の表示制御部２４を用いての所見情報の修正の指示があったか否かを判定する（ステップＳＴ６）。ステップＳＴ６が肯定されると、修正部２５は修正された所見に応じて読影レポートを修正し（ステップＳＴ７）、ステップＳＴ６に戻る。ステップＳＴ６が否定されると、修正部２５はキャンセルボタン４４が選択されたか否かを判定する（ステップＳＴ８）。ステップＳＴ８が肯定されると、それまでになされた修正を破棄し（ステップＳＴ９）、処理を終了する。ステップＳＴ８が否定されると、修正部２５は閉じるボタン４３が選択されたか否かを判定する（ステップＳＴ１０）。ステップＳＴ１０が否定されるとステップＳＴ６に戻り、ステップＳＴ６以降の処理を繰り返す。ステップＳＴ１０が肯定されると、修正部２５は、読影レポートおよび所見情報を修正された内容に更新し（情報更新；ステップＳＴ１１）、更新された読影レポートおよび所見情報を読影レポートサーバ７に送信し（情報送信；ステップＳＴ１２）、処理を終了する。

このように、本実施形態においては、医用画像Ｇ０に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む読影レポートを第１の表示領域４１に表示し、所見の一覧を修正可能に第２の表示領域４２に表示し、所見の一覧における指定された所見に対する修正の指示により、読影レポートを修正するようにした。このため、操作者は、第２の表示領域４２における所見を修正する作業を行えば、読影レポートが修正されることとなる。したがって、本実施形態によれば、読影レポートの修正を効率よく行うことができる。

なお、上記実施形態においては、第１の表示領域４１および第２の表示領域４２を同時に表示しているが、これに限定されるものではない。まず、図１４に示すように、第１の表示領域４１のみを表示してもよい。この場合、第１の表示領域４１の下方には、閉じるボタン４３および修正ボタン４７が表示される。そして、操作者が修正ボタン４７を選択した場合にのみ、図５に示すように、第２の表示領域４２を表示してもよい。これにより、異常陰影を選択した際に表示される情報を簡潔なものとすることができる。

また、上記実施形態においては、読影ＷＳ３は、読影レポートおよび所見情報を読影レポートサーバ７から取得しているが、読影ＷＳ３において、医用画像を解析して、所見情報および読影レポートを作成してもよい。この場合、図１５に示すように、読影ＷＳ３にインストールされている医療文書作成支援プログラムは、医用画像を解析して異常陰影を検出する画像解析処理、検出された異常陰影についての所見を検出する所見検出処理、および検出された所見を用いて読影レポートを作成する文書作成処理をさらに規定するものとなる。これにより、読影ＷＳ３は、画像解析部２６、所見検出部２７および文書作成部２８としてさらに機能するものとなる。また、画像解析処理、所見検出処理および文書作成処理を行うプログラムを、読影ＷＳ３にインストールしてもよい。

また、上記実施形態においては、第２の表示領域４２に表示された所見を修正する際にプルダウンメニュー４５，４６を表示しているが、これに限定されるものではない。第２の表示領域４２において選択された所見の項目に対して、入力部１５を用いて文字を入力することにより、所見の修正を行うようにしてもよい。

また、上記実施形態においては、第１の表示領域４１に表示された読影レポートに対して、入力部１５からの入力によって修正を行うことができるようにしてもよい。これにより、読影レポートの内容の細かな修正を行うことができる。なお、文字の入力は音声により行ってもよい。

また、上記実施形態においては、医療文書として読影レポートを作成する際に、本開示を適用しているが、電子カルテおよび診断レポート等の読影レポート以外の医療文書を作成する場合にも、本開示を適用できることはもちろんである。

また、上記実施形態においては、診断対象を肺とした医用画像を用いて医療文書の作成支援処理を行っているが、診断対象は肺に限定されるものではない。肺の他に、心臓、肝臓、脳、および四肢等の人体の任意の部位を診断対象とすることができる。この場合、解析サーバ９または画像解析部２６、所見検出部２７および文書作成部２８は、診断対象に応じた解析処理、所見の検出処理および文書の作成処理を行うものが用意され、診断対象に応じた、解析処理、所見の検出処理および文書の作成処理が選択され、実行される。また、修正部２５も、診断対象に応じた修正の処理が用意され、診断対象に応じた修正処理が実行される。

また、上記実施形態において、例えば、情報取得部２１、画像表示制御部２２、第１の表示制御部２３、第２の表示制御部２４、修正部２５、画像解析部２６、所見検出部２７および文書作成部２８といった各種の処理を実行する処理部（Processing Unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（Processor）を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device :PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。

１つの処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせまたはＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。

複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントおよびサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアとの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:SoC）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。

さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（Circuitry）を用いることができる。

１ 医療情報システム
２ モダリティ
３ 読影ワークステーション
４ 診療科ワークステーション
５ 画像サーバ
６ 画像データベース
７ 読影レポートサーバ
８ 読影レポートデータベース
９ 解析サーバ
１０ ネットワーク
１１ ＣＰＵ
１２ メモリ
１３ ストレージ
１４ 表示部
１５ 入力部
２０ 医療文書作成支援装置
２１ 情報取得部
２２ 画像表示制御部
２３ 第１の表示制御部
２４ 第２の表示制御部
２５ 修正部
２６ 画像解析部
２７ 所見検出部
２８ 文書作成部
３０ 表示画面
４０ 画像表示領域
４１ 第１の表示領域
４２ 第２の表示領域
４３ 閉じるボタン
４４ キャンセルボタン
４５，４６ 修正候補のプルダウンメニュー
４７ 修正ボタン
５０ 矩形領域
５１ カーソル
Ａ１，Ａ２ 異常陰影
Ｄ１～Ｄｍ、ＤＴ１、ＤＴ２ 断層画像
Ｇ０ 医用画像

Claims (7)

1. 医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む医療文書を、表示画面における第１の表示領域に表示する第１の表示制御部と、
   前記複数の所見の一覧を、各所見を修正可能に前記表示画面における第２の表示領域に表示する第２の表示制御部と、
   前記複数の所見の一覧における指定された所見に対する修正の指示により、前記医療文書を修正する修正部とを備えた医療文書作成支援装置。
2. 前記第２の表示制御部は、前記指定された所見についての修正候補の一覧をさらに表示し、
   前記修正部は、前記修正候補の一覧における所望とされる修正候補の選択の指示により、前記医療文書を修正する請求項１に記載の医療文書作成支援装置。
3. 前記医用画像は複数の断層画像を含む３次元画像であり、
   前記複数の断層画像を前記表示画面に切り替え表示し、該切り替え表示中に前記異常陰影を含む断層画像が表示される場合、該異常陰影を強調表示する画像表示制御部をさらに備え、
   前記第１の表示制御部は、前記表示中の断層画像において前記異常陰影が選択される場合、前記第１の表示領域を表示し、
   前記第２の表示制御部は、前記表示中の断層画像において前記異常陰影が選択される場合、前記第２の表示領域を表示する請求項１または２に記載の医療文書作成支援装置。
4. 前記第２の表示制御部は、前記第２の表示領域の表示の指示により該第２の表示領域を表示する請求項１から３のいずれか１項に記載の医療文書作成支援装置。
5. 前記医用画像に含まれる前記異常陰影を検出する画像解析部と、
   前記異常陰影に含まれる前記所見を検出する所見検出部と、
   前記検出された所見に基づいて前記医療文書を作成する文書作成部とをさらに備えた請求項１から４のいずれか１項に記載の医療文書作成支援装置。
6. 医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む医療文書を、表示画面における第１の表示領域にコンピュータが表示し、
   前記複数の所見の一覧を、各所見を修正可能に前記表示画面における第２の表示領域にコンピュータが表示し、
   前記複数の所見の一覧における指定された所見に対する修正の指示により、コンピュータが前記医療文書を修正する医療文書作成支援方法。
7. 医用画像に含まれる異常陰影に関する特徴を表す複数の所見のうちの、少なくとも１つの所見を含む医療文書を、表示画面における第１の表示領域に表示する手順と、
   前記複数の所見の一覧を、各所見を修正可能に前記表示画面における第２の表示領域に表示する手順と、
   前記複数の所見の一覧における指定された所見に対する修正の指示により、前記医療文書を修正する手順とをコンピュータに実行させる医療文書作成支援プログラム。

Images