JP6397277B2 - 読影レポート作成のための支援装置およびその制御方法 - Google Patents

Description

本発明は、読影レポートの作成を支援する支援装置およびその制御方法に関する。

医療の分野では、Ｘ線ＣＴ装置やＭＲＩ等の撮影装置により得られた医用画像データを医師が読影して診断を行う画像診断が行われている。画像診断では、主治医からの読影の依頼に応じて、医師が、画像から得られる所見（読影所見）や各種測定値を総合的に判断して画像に写る病変の症状を特定する。そして、医師は、その診断に至った経緯を読影所見や測定値を利用して、依頼元の主治医への読影レポートとしてまとめる。

このような読影レポートの作成において、読影者の視線を検知することにより、読影レポート作成時の医用画像データの確認状況を把握する技術が知られている。特許文献１には、レポート作成時の入力情報と、その入力情報を入力している時に医用画像データ内で注目している部分（注目情報）を対応づけて格納する技術が記載されている。この技術によれば、医用画像データのどの部分に注目して読影レポートを作成したのかを把握することができる。特許文献２には、検査情報やコンピュータ支援診断機能を用いて観察すべき観察箇所を特定し、特定された観察箇所を視線情報に基づき確認したかを判定する技術が記載されている。この技術によれば、事前に定められた観察すべき箇所を確認したかを把握することができる。

特開２００９−０４５１３１号公報 特開２００６−２７１５２８号公報

神山他：「融合移動グラフカットに基づく腹部ＣＴ像からの複数臓器同時抽出」、信学技報、ＭＩ２０１０−１２２、２０１１−０１

しかしながら、特許文献１では入力情報と注目情報を対応づけて格納するにとどまり、入力が行われていない注目領域（ユーザが注目したものの、レポートには記述されていない領域）や、入力情報と注目情報との整合性について考慮されていない。また、特許文献２の技術によれば、事前に定められた観察すべき観察箇所で入力が行われたかを判定することは可能であるが、事前に定められていない領域について入力が行われたかを判定することはできない。換言すると、観察するよう促されていない領域について医師が所見を持ったもののそれを入力し忘れた場合（以下、記述漏れと称する）には、注意を促すことはできなかった。また、入力内容と注目情報の整合性が考慮されていないため、たとえば、入力内容で指摘された領域が注目情報にないような不一致（以下、確認漏れと称する）が発生した場合に、注意を促すことはできなかった。

本発明は、上述したような課題に鑑みてなされたものであり、記述漏れおよび／または確認漏れの発生を低減して適切な読影レポートを作成するための支援を提供することを目的とする。

上記の目的を達成するための本発明の一態様による支援装置は以下の構成を備える。すなわち、
読影レポートの作成を支援する支援装置であって、
読影対象の医用画像データを表示する表示手段と、
前記表示手段により表示された前記医用画像データにおいて読影時に注目された領域と判定された注目領域の集合を取得する第１の取得手段と、
前記医用画像データに対応するレポート文に記述されている医学的な領域である記述領域の集合を取得する第２の取得手段と、
前記注目領域の集合と前記記述領域の集合の整合性を判定する判定手段と、
前記判定手段による判定の結果を提示する提示手段と、を備える。

本発明によれば、読影レポートの作成において、記述漏れまたは確認漏れの発生を低減することができる。

読影レポート作成支援装置の機能構成例を示すブロック図。 読影レポート作成支援装置のハードウェア構成例を示すブロック図。 実施形態による読影レポート作成支援処理の手順を示すフローチャート。 領域情報のデータ構成例を示した図。 モニタにおける読影時の表示例を示した図。 注視領域の抽出を説明する図。 第１実施形態による提示情報の表示例を示す図。 第２実施形態による提示情報の表示例を示す図。 注目領域の他の例を示す図。

以下、添付の図面を参照しながら、本発明の好適な実施形態について説明する。ただし、発明の範囲は図示例に限定されるものではない。

［第１実施形態］
第１実施形態に係る読影レポート作成支援装置は、診断対象である症例に係る医用情報（医用画像データや電子カルテの情報など）や、ユーザからの入力情報（ユーザの視線情報やレポート文など）を取得し、当該症例に係る読影レポートの作成を支援する。ユーザとは、たとえば、医用画像データを読影する読影者である。以下では、医用画像データの一例として３次元の胸部Ｘ線ＣＴ画像データを扱う例を用いて説明する。もちろん本発明による読影の支援対象はこれに限定されるものではなく、たとえば、単純Ｘ線撮影による２次元画像や超音波断層像などの読影の支援にも適用可能である。以下に示す実施形態は、何れも読影レポート作成支援装置の処理の工程を説明するための一例に過ぎない。

図１は、第１実施形態に係る読影レポート作成支援装置（以下、支援装置１００）の機能構成例を示す。第１実施形態における支援装置１００は、表示部２００と症例情報端末３００とに接続されている。表示部２００は、モニタ１００５（図２）を有し、システムやユーザの指示により様々な情報を表示する。モニタ１００５に表示する具体的な内容に関しては後述する。

症例情報端末３００は、診断対象である症例に関する医用情報、たとえば肺の異常陰影に係る医用情報（３次元医用画像データや電子カルテの情報など）を不図示のサーバから取得する。或いは、症例情報端末３００は、外部記憶装置、例えばＦＤＤ、ＨＤＤ、ＣＤドライブ、ＤＶＤドライブ、ＭＯドライブ、ＺＩＰドライブ等を接続し、それらのドライブから医用情報を取得するようにしてもよい。また、症例情報端末３００は、ユーザの要求に従い、肺の異常陰影に関する付随データ（腫瘍マーカー値などの臨床データや、対象患者の過去症例のレポートなど）を取得する。取得された医用情報や付随データはＬＡＮ等を介して支援装置１００へと送信される。

支援装置１００は、レポート作成部１０１と、領域情報取得部１０２と、視線情報取得部１０４と、レポート文取得部１０６と、注目領域取得部１０８と、記述領域取得部１１０と、判定部１１２と、提示情報作成部１１４とを備える。なお、支援装置１００と症例情報端末３００を別々の装置として示したが、これらは一体化されてもよい。

レポート作成部１０１は、レポート作成時の全体的な処理を行う。たとえば、レポート作成部１０１は、読影レポート作成画面（図５により後述）を表示部２００のモニタ１００５に表示する。読影レポート作成画面には、症例情報端末３００から受信した読影対象の医用情報（医用画像データ）が表示され、ユーザは表示された医用画像データを読影して、後述のキーボード１００７等を用いて読影レポートを入力する。こうして、ユーザは表示された医用情報（医用画像データなど）を観察することにより読影を行うことができる。

領域情報取得部１０２は、症例情報端末３００から送信された医用画像データの座標位置と領域の対応付け情報（領域情報）を取得する。より具体的には、医用画像データの座標位置と医学的に分割された領域との対応付け情報を取得する。本実施形態では、医学的に分割された領域として解剖学的構造（たとえば、心臓、肝臓、右上葉など）が用いられる。取得した対応付け情報は注目領域取得部１０８、記述領域取得部１１０へと出力する。なお、このような領域情報の取得は、医用画像データに対し既知のセグメンテーション手法を適用し、セグメンテーション結果と画像の座標位置を対応づけることで実現できる。この様なセグメンテーション手法としては、たとえば、非特許文献１に記載の腹部の複数臓器同時抽出技術があげられる。なお、領域情報は、領域情報取得部１０２が読影対象の医用画像データを解析して取得してもよいし、症例情報端末３００から送信される医用画像データに予め領域情報が含まれていてもよい。或いは、ユーザがマニュアルで解剖学的構造に対応する領域と名称を指定するようにしてもよい。

視線情報取得部１０４は、ユーザが、医用画像データのどの位置を見ているかという視線情報を取得する。本実施形態では、視線情報取得部１０４は、モニタ１００５上の視線位置を検出し、モニタ１００５上における医用画像データの表示位置と検出された視線位置の座標に基づいて、対応する医用画像データ上の座標位置を取得し、これを視線情報とする。取得された視線情報は、注目領域取得部１０８へ出力される。なお、視線情報取得部１０４は、例えば複数の視点から同期撮影可能なビデオカメラやアイトラッカー等の視線追尾装置１０４５（図５）を用いてモニタ上の視線位置を検出することで実現できる。具体的には、ユーザの顔や目を複数の視点から撮影し、撮影により得られたステレオ画像に対して所定の画像認識処理を施すことにより、モニタ上で視線が向いた場所の座標位置を検出できる。視線追尾装置１０４５は、例えばモニタの端（モニタ直下など）などに配置される。

レポート文取得部１０６は、読影レポート作成画面を用いて入力された、ユーザが医用画像データを読影した結果であるレポート文（テキストデータ）を取得する。取得したレポート文は記述領域取得部１１０へと出力する。

注目領域取得部１０８は、表示された医用画像データの医学的に分割された領域（たとえば、解剖学的構造に基づいて分割された領域）のうち、読影時にユーザが注目した領域である注目領域の集合を取得する。たとえば、注目領域取得部１０８は、領域情報取得部１０２が取得した領域情報と、視線情報取得部１０４が取得した視線情報を基に、表示されている医用画像データ上で注目した領域である注目領域を取得する。注目領域の具体的な内容については後述する。取得された注目領域は判定部１１２へと出力される。

記述領域取得部１１０は、医用画像データに対応するレポート文に記述されている医学的な領域（たとえば、解剖学的構造に基づく領域）である記述領域の集合を取得する。たとえば、記述領域取得部１１０は、領域情報取得部１０２が取得した領域情報と、レポート文取得部１０６が取得したレポート文を基に、記述領域を取得する。取得された記述領域は判定部１１２へと出力される。

判定部１１２は、注目領域取得部１０８で取得した注目領域の集合と、記述領域取得部１１０で取得した記述領域の集合を基に、注目領域と記述領域の整合性を判定する。判定した結果は提示情報作成部１１４へと出力する。提示情報作成部１１４は、判定部１１２で判定した結果を基に提示情報を作成する。作成した提示情報は、例えば表示部２００へ出力され、モニタ１００５により提示される。

なお、図１に示した支援装置１００の各部の少なくとも一部は独立した装置として実現してもよい。また、夫々が機能を実現するソフトウェアとして実現してもよい。本実施形態では各部はそれぞれ所定のソフトウェアをコンピュータが実行することにより実現されているものとする。

図２は、図１に示した各部の夫々の機能をソフトウェアを実行することで実現するためのコンピュータ装置の基本的なハードウェア構成を示す図である。すなわち、本実施形態の支援装置１００は、コンピュータ装置により実現され得る。ＣＰＵ１００１は、主として各構成要素の動作を制御する。主メモリ１００２は、ＣＰＵ１００１が実行する制御プログラムを格納したり、ＣＰＵ１００１によるプログラム実行時の作業領域を提供したりする。磁気ディスク１００３は、オペレーティングシステム（ＯＳ）、周辺機器のデバイスドライブ、後述する処理等を行うためのプログラムを含む各種アプリケーションソフト等を格納する。

表示メモリ１００４は、表示用データを一時記憶する。モニタ１００５は、例えばＣＲＴモニタや液晶モニタ等であり、表示メモリ１００４からのデータに基づいて画像やテキストなどの表示を行う。マウス１００６及びキーボード１００７は、ユーザによるポインティング入力及び文字等の入力をそれぞれ行う。インターフェース１００８は、支援装置１００をネットワーク等に接続する。たとえば、インターフェース１００８を介して症例情報端末３００が支援装置１００に接続される。上記各構成要素は、共通バス１００９により互いに通信可能に接続されている。

次に、以上のような構成を備えた本実施形態の支援装置１００が行う処理（読影時のレポート作成を支援する処理）について、図３のフローチャートを用いて説明する。本実施形態では、ＣＰＵ１００１が主メモリ１００２に格納されている各部の機能を実現するプログラムを実行することにより実現される。なお、以下の説明では、モニタ１００５の画面上の位置（画素）をＭＮ座標系、医用画像データでの位置（ボクセル）をＸＹＺ座標系で表す。また、以下の説明では、視線情報取得部１０４による視線情報の検出は、予め決められたサンプリングレート（例えば0.1秒）で取得するものとする。そして、ある時点での視線情報をOt(otx, oty,otz)（t = 1, 2, …）とする。

ステップＳ３００において、レポート作成部１０１は、モニタ１００５に、読影レポート作成画面を表示する。図５に示されるように、読影レポート作成画面は、読影対象の医用画像データを表示するための断層画像表示領域５０１、ユーザによるレポート（テキストデータ）の入力を受け付けるレポート文入力領域５０２、読影終了ボタン５０３を含む。断層画像表示領域５０１には、たとえば、医用画像データのaxial断層像が表示される。なお、図５に示される２つの画面は、１つのモニタの画面に同時に表示されてもよいし、１つのモニタの画面に切り替えて表示されてもよいし、２つのモニタを用いて別々に表示されてもよい。本実施形態では２つのモニタを用いて別々に表示されるものとし、後述の視線情報の取得は、医用画像データを表示したモニタに対して行われるものとする。

次に、ステップＳ３０１において、領域情報取得部１０２は、症例情報端末３００から送信された医用画像データ、すなわち読影対象の医用画像データの座標位置と被写体の解剖学的構造との対応付け情報（領域情報）を取得する。この領域情報は、例えば、解剖学的構造ごとに異なるラベルを割り当て、各ボクセルにラベルを紐づけた対応表として取得される。あるいは条件式の形で取得してもよい。夫々の例を図４（ａ）（ｂ）に示す。図４（ａ）では、個々のボクセルに解剖学的構造を示すラベルが紐づけられた領域情報が示されている。また、図４（ｂ）では、それぞれの解剖学的構造のラベルにボクセルの座標範囲を規定した領域情報が示されている。もちろん、これ以外の形式で領域情報を構成してもよい。以降では、図４（ａ）に示したような対応表の形式で領域情報を取得した場合を説明する。

次に、ステップＳ３０２において、視線情報取得部１０４は、ユーザが、医用画像データのどの位置を見ているかという視線情報を取得する。また、レポート文取得部１０６は、ユーザが医用画像データを読影しその結果をまとめたレポート文を取得する。本実施形態では、レポート作成部１０１の制御下で、ユーザが図５に示すレポート文入力領域５０２にキーボード１００７を用いてレポート文を入力することができる。

ここで、視線情報取得部１０４による視線情報の取得について説明する。図５はモニタ１００５に読影レポート作成画面と読影対象の医用画像データを表示した例である。この例では、医用画像データから構成したaxial断層像が表示されている。axial断層像は体の上下（頭尾、体軸）に対して垂直な断層画像であり、本実施形態の座標系では、あるＺ座標（体軸上のある位置）におけるＸＹ平面の断層像として表される。モニタ１００５の下には視線追尾装置１０４５が備え付けられており、ユーザがモニタ１００５のどの位置（表示画素）を見ているかを、ＭＮ座標系の座標として検出する。

いま、簡単のために、モニタの表示画素とaxial断層像（ＸＹ平面）の画素の大きさが完全に一致する場合を考える。さらに、モニタの表示画素を示す座標（m, n）とaxial断層像の画素を示す座標（x, y）の対応関係が、x=m-a、y=n-bによって表されるものとする。換言すると、医用画像データの一ボクセルの値を、モニタの一画素で表示している場合を考える。この状態でモニタの一点（m, n）に着目すると、医用画像データでのx（= m-a）とy（= n-b）の値が定まる。さらに、表示されるaxial断層像に応じてzの位置が定まるため、モニタ上の座標（m, n）が定まると、医用画像データ上の座標（x, y, z）が一意に定まる。このことを利用して、視線追尾装置１０４５が検出したモニタ１００５上の視線の座標から医用画像データ上で視線が向いた位置の座標（すなわち視線情報）を得ることができる。

なお、モニタの表示画素とaxial断層像（ＸＹ平面）の画素の大きさが一致していない場合は、画素の大きさの比率を用いて医用画像データ上の位置の座標を計算することができる。また、視野を考慮し、モニタ１００５の表示画素に対応するaxial断層像の画素の周辺の画素が示す医用画像データ上の座標位置も視線が向いた位置の座標として取得してもよい。すなわち、取得された一つの視線位置について複数の医用画像データ上の座標位置が取得されるようにしてもよい。

ユーザは読影終了ボタン５０３を押下することにより、レポート文の入力終了を支援装置１００に通知する。レポート文の入力終了が通知されると、処理はステップＳ３０２からステップＳ３０３へ進む。なお、ステップＳ３０３で読影終了ボタン５０３が押下されていないと判定された場合は、処理はステップＳ３０２に戻り、視線情報取得およびレポート文の入力の処理を継続する。

ステップＳ３０４において、注目領域取得部１０８は、読影時に検出した視線位置に基づいて注目領域の集合を取得する。すなわち、注目領域取得部１０８は、ステップＳ３００で取得した領域情報と、ステップＳ３０１において取得した視線情報を基に、医用画像データ上の医学的に分割された領域のうちのユーザによって注目された領域である注目領域を取得する。領域Ａが注目領域か否かの判定方法としては、たとえば、
（１）読影時に断層画像表示領域５０１に表示された領域Ａにおいて、視線位置が検出された画素（またはボクセル）の数NoAを取得し、
（２）表示された領域Ａの全画素数（全ボクセル数）NaAを取得して、領域Ａに含まれる画素の全数に対する視線位置が検出された画素の数の割合（NoA／NaA）が所定値を超える領域を注目領域とする、といった方法があげられる。なお、領域内に視線位置が存在した時間が所定時間を超える領域を注目領域とする、といった方法も考えられるが、時間のみで判定すると領域Ａの全体を俯瞰していなくても注目した領域として判定されてしまう。したがって、視線位置が存在した時間を用いた判定と上述した割合（NoA／NaA）を用いた判定を組み合わせることが望ましい。たとえば、NoA／NaAが所定値を超え、且つ、領域Ａに視線位置が存在した時間の合計が所定時間を超える場合に、領域Ａを注目領域と判定するようにするのが好ましい。

本実施形態では、上記（１）、（２）の手順を用いる。より具体的には、一度でも観測されたボクセルを観測された領域とみなし、解剖学的構造が割り当てられたラベルごとに観測されたボクセル数を計数する。そしてラベルごとに観測されたボクセル数とそのラベルを持つボクセルの総数をもとに、そのラベル（すなわち解剖学的構造）が注視されたか判定する。例えば、あるラベルを持つボクセルの総数の一定割合より多いボクセルを観測した場合に、そのラベルに対応する解剖学的構造を注視したものと判定する。したがって、以下では、（１）（２）の手順で判定された注目領域を注視領域とも称する。

図６を用いて説明する。図６において、６０１は領域情報と視線情報とあるＺ位置（Ｚ＝６）でのaxial断層像を示したものである。６０２は、領域情報取得部１０２がaxial断層像６０１について取得した領域情報を示す。また、６０３は、視線情報取得部１０４が取得した視線情報である。

axial断層像６０１の各ピクセル（x,y）に書かれた数字は、領域情報６０２が示す、各ボクセル（x, y, 6）に割り当てられたラベルを示したものである。例えば、ピクセル(3, 7)（すなわち、ボクセル(3, 7, 6)）はラベルが「１」なので右上葉であることを示す。また、グレーで塗られたピクセルは、視線情報６０３により示されるピクセル（すなわち観測されたボクセル）を示す。視線情報６０３では、時刻Ｏtにおける視線位置(x,y,z)（ボクセルの座標）が時系列に（Ｏt＝Ｏ1、Ｏ2、Ｏ3…の順に）記録されている。この断層像の例では、観測されたボクセルは「０（体表外）」が２個、「１（右上葉）」が１４個、「２（右中葉）」が９個、「３（右下葉）」が１０個、「４（左上葉）」が６個、「５（左下葉）」が１９個、「９（その他）」が２３個となる。これを医用画像データ全体に適用することにより、医用画像データ全体での、ラベル毎の観測されたボクセル数を計数することができる。

本実施形態では、ラベルkの観測されたボクセル数をNok、ラベルkに属するボクセル総数をNakとし、Nok／Nak＞0.8を満たす場合に、ラベルkの示す解剖学的構造を注視したものとする。なお、以下の説明では、「右上葉」と「右下葉」を注視領域として観測したものとする。

ステップＳ３０５において、記述領域取得部１１０は、ステップＳ３０１で取得した領域情報と、ステップＳ３０３で取得したレポート文を基にレポート文に記述された領域である記述領域を取得する。本実施形態では、領域情報の各ラベルが示す解剖学的構造名をキーワードとし、レポート文に対してキーワードマッチングを用いて記述領域を取得するものとする。なお、類義語やオントロジーを用いてキーワードを拡張してマッチングを行ってもよい。例えば、図５に示したレポート文の例（レポート文入力領域５０２に示した例）では、「左上葉」と「右下葉」が記述領域として取得される。

ステップＳ３０６において、判定部１１２は、ステップＳ３０３で取得した注目領域（注視領域）と、ステップＳ３０５で取得した記述領域を基に、注目領域と記述領域の整合性を判定する。本実施形態では、注目領域（注視領域）に含まれていて記述領域に含まれていない情報があるかどうかを判定する。すなわち、注視したにも関わらずレポート文に記載していない記述漏れがあるかどうかを判定する。上記の例では、注視領域である「右上葉」が記述領域に含まれていないため、記述漏れがあると判定する。

ステップＳ３０７において、提示情報作成部１１４は、ステップＳ３０６で判定した結果を基に提示情報を作成する。本実施形態では、提示情報としてメッセージボックスを作成するものとする。前述した例では、「右上葉」が記述領域に含まれていないため、その旨を通知するメッセージボックスを作成する。そして、ステップＳ３０８において、提示情報作成部１１４は、作成したメッセージボックスをモニタ１００５に表示する。

図７は、本実施形態においてモニタ１００５に表示される提示情報の一例を示す。提示情報はメッセージボックス７０４の形式で表示される。ここで、メッセージボックス７０４の「はい」ボタンを押下すると、レポート文の修正（再入力）が可能である。すなわち、ステップＳ３０９において修正を行う支持が入力されたと判定され、処理がステップＳ３０２へ戻り、レポート作成部１０１によるレポート文の作成（編集）が可能となる。一方「いいえ」ボタンを押下すると、処理はステップＳ３１０へ進み、レポート作成部１０１はレポート文を磁気ディスク１００３等に保存してレポート作成支援処理を終了する。

なお、ステップＳ３０６において整合性の判定に合格した場合（記述漏れが無いと判定された場合）は、たとえば、その旨を表示するメッセージボックスを生成して表示し、レポート文の作成を継続するか否かを問い合わせるようにしてもよい。あるいは、記述漏れがなかったと判定された場合には、上述した「いいえ」ボタンを押下した場合と同様に、レポート文を保存して終了するようにしてもよい。

以上のように、本実施形態によれば、読影時に注視していたにも関わらずレポート文に記述されていない領域に関し、医師に記述漏れの注意喚起を行うことができる。そのため、医師は記述漏れのないレポート文を作成することができる。特に、医用画像データを一通り閲覧した後、一括してレポート文を記載する読影スタイルにおいて有効に作用することが期待できる。これにより、医師は適切な読影レポートを作成することができる。

［第２実施形態］
第１実施形態では、注目領域の集合と記述領域の集合の整合性の判定により「記述漏れ」を検出し、注意喚起を行う構成を説明した。第２実施形態に関わる読影レポート作成支援装置は、医師がレポート文に記述していたにも関わらず、読影時に注視していない領域に関し、医師に注意喚起を行う。すなわち、第２実施形態では、確認漏れに対する注意喚起を行う構成を説明する。

第２施形態に係る読影レポート作成のための支援装置１００の構成は第１実施形態（図１）と同様である。また、ソフトウェアの実行によって支援装置１００の読影レポート作成支援処理を実現するコンピュータの基本構成も、第１実施形態（図２）と同様である。また、支援装置１００が行う全体の処理を説明するフローチャートは図３と同様である。ただし、処理の一部が第１実施形態とは異なっている。以下、図３のフローチャートを参照して、第２実施形態に係る支援装置１００が行う全体の処理について説明する。

ステップＳ３００からステップＳ３０５、ステップＳ３０７からステップＳ３１０の処理は第１実施形態における処理と同様である。ステップＳ３０６において、判定部１１２は、ステップＳ３０４で取得した注目領域の集合と、ステップＳ３０５で取得した記述領域の集合を基に、注目領域と記述領域の整合性を判定する。

本実施形態では、記述領域に含まれていて注目領域に含まれていない情報があるかどうかを判定する。なお、第１実施例と同様に、注視領域を用いるものとする。すなわち、医師が記述したにも関わらず読影時に注視していなかった確認漏れがあるかどうかを判定する。例えば、第１実施形態で説明した例のように、注視領域が「右上葉」「右下葉」で、記述領域が「左上葉」と「右下葉」である場合を考える。この場合は、記述領域である「左上葉」が注視領域に含まれていないため、確認漏れがあると判定する。

なお、本実施形態では、ステップＳ３０８で提示される提示情報としてシェーマ画像を含むメッセージボックスを作成するものとする。具体的には、確認漏れの領域に対応する解剖学的構造を強調した画像を含むメッセージボックスを作成するものとする。前述した例では、「左上葉」が注視領域に含まれていないため、「左上葉」を強調したシェーマ画像を含むメッセージボックスを作成する。そして、作成したメッセージボックスをモニタ１００５へと表示する。

図８は、本実施形態においてモニタ１００５に表示される提示情報の一例を示す。提示情報はメッセージボックス８０５の形式で表示される。ここで、メッセージボックス８０５の「はい」ボタンを押下すると、再度読影をすることが可能である（すなわち、ステップＳ３０１の処理へと戻る）。一方「いいえ」を押下すると、支援装置１００はレポート文を保存して終了する。

なお、ステップＳ３０６において確認漏れがなかったと判定された場合には、先ほど説明した「いいえ」を押下した場合と同様に、レポート文を保存して終了する。なお、ステップＳ３０６において確認漏れがなかったと判定された場合に、その旨を表示するメッセージボックスを生成して表示し、レポート文の作成を継続するか否かを問い合わせるようにしてもよい。

以上のように、第２実施形態によれば、医師がレポート文に記述したにも関わらず、読影時に注視してなかった領域に関し、医師に確認漏れの注意喚起を行うことができる。そのため、医師が注視していない領域に関して記述することを防ぐことができる。

また、別の効果として、過去の読影レポートが存在するフォローアップ症例の読影において、過去の読影レポートを流用してレポート文を作成した場合に有効に作用することが期待できる。すなわち、過去のレポートを流用して現在の状態にそぐわない記述をそのまま残してしまった場合に、確認漏れの警告がでることで、医師が現在の状態に対するレポートにおいて不要な記述の存在に気づくことが期待できる。以上のような構成により、医師は適切な読影レポートを作成することができる。

（変形例１）
第１および第２実施形態では、ステップＳ３０４において、注目領域として、断層画像表示領域５０１に表示されたaxial断層像が示す領域の中で視線情報が得られた注視領域を用いた例を説明した。しかしながら、領域が注目されたか否かを判定する方法として、必ずしも視線位置が検出されたか否かを用いる必要はない。変形例１では、axial断層像のうちの表示された領域を視線位置が検出された領域と同等に扱って注目領域を決定する。すなわち、第１実施形態で説明した、領域Ａのうちの視線位置が検出された画素（ボクセル）の数NoAとして、領域Ａのうちのモニタ１００５により表示された部分の画素数が用いられる。

図９はモニタで表示した領域を注目領域とする例を説明する図である。図９（ａ）は、一般的な医用画像ビューアの機能でaxial断層像９０６を平行移動した状態で読影している場合を示した例である。この場合、断層画像表示領域５０１内で表示されている部分のみを注目領域とする。この例ではaxial断層像９０６のうち、ハッチングされた部分が医用画像データのうちの読影時に表示された部分となる。したがって、医用画像データ（axial断層像９０６）のハッチングされた部分に少なくとも一部が属している医学的な領域のそれぞれについて、読影時に表示された画素数とその領域の総画素数との比からその領域が注目領域か否かが判定される。図９（ｂ）は一般的な医用画像ビューアの機能でaxial断層像９０６を拡大表示した状態で読影している場合を示した例である。この例ではaxial断層像９０６のうち、ハッチングされた部分が読影時に表示される領域となる。上述したように、医用画像データ（axial断層像９０６）の医学的に分割された領域のうち少なくとも一部がハッチングされた部分に属している領域が、注目領域か否かを判定する対象となる。なお、axial断層像９０６を縮小表示した状態（すなわち、断層画像表示領域５０１にaxial断層像９０６の全体が収まっている場合）は、当然、axial断層像９０６が示す領域全てが注目領域となる。

（変形例２）
第１および第２実施形態では、ステップＳ３０４において、具体的な解剖学的構造として注目領域を取得し、ステップＳ３０５において取得した解剖学的構造を示す記述領域を基に、ステップＳ３０６において整合性を判定していた。しかし、整合性の判定はこの方法に限定されない。

例えば、ステップＳ３０４では、注目領域取得部１０８が観測されたボクセル（視線が存在したボクセル）の全てを注目領域として取得し、ステップＳ３０１で取得した領域情報を用いて解剖学的構造ごとのボクセル群へと変換する。そして、ステップＳ３０６において、判定部１１２が、記述領域が示す解剖学的構造ごとのボクセル群に、注目領域として取得されたボクセルがどれくらい含まれているかにより整合性を判定するようにしてもよい。

（変形例３）
第１および第２実施形態では、第１実施形態の方法により記述漏れの判定を、第２実施形態の方法により確認漏れの判定を別々に行っていた。しかし、必ずしも別々に行う必要はなく、記述漏れの判定と確認漏れの判定を同時に行ってもよい。すなわち、整合性の判定において、第１実施形態で説明した記述漏れ、第２実施形態で説明した確認漏れの両方を判定するようにしてもよい。また、その場合に、注目領域の集合の取得の仕方を、記述漏れの検出と確認漏れの検出とで異ならせてもよい。たとえば、記述漏れを検出するための注目領域の集合は視線が一度でも存在した領域の集合とし、確認漏れを検出するための注目領域の集合は注視領域の集合とするようにしてもよい。

また、第１および第２実施形態では、注目領域の同定に読影レポート作成画面に表示されたこと、視線位置が存在したことを用いたが、これらに限られるものではない。たとえば、モニタ１００５にタッチパネル等のタッチ入力部を設け、読影中にユーザが注目した位置をタッチ入力するようにするようにしてもよい。この場合、注目領域取得部１０８は、このタッチ入力位置に基づいて注目領域を取得する。

また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

１００：読影レポート作成支援装置、１０２：領域情報取得部、１０４：視線情報取得部、１０６：レポート文取得部、１０８：注目領域取得部、１１０：記述領域取得部、１１２：判定部、１１４：提示部、２００：表示部

Claims (12)

1. 読影レポートの作成を支援する支援装置であって、
   読影対象の医用画像データを表示する表示手段と、
   前記表示手段により表示された前記医用画像データにおいて読影時に注目された領域と判定された注目領域の集合を取得する第１の取得手段と、
   前記医用画像データに対応するレポート文に記述されている医学的な領域である記述領域の集合を取得する第２の取得手段と、
   前記注目領域の集合と前記記述領域の集合の整合性を判定する判定手段と、
   前記判定手段による判定の結果を提示する提示手段と、を備えることを特徴とする支援装置。
2. 読影者の視線位置を検出する検出手段をさらに備え、
   前記第１の取得手段は、読影時に検出した視線位置に基づいて前記注目領域の集合を取得することを特徴とする請求項１に記載の支援装置。
3. 前記第１の取得手段は、前記医用画像データの医学的に分割された領域のうち、領域に含まれる画素の全数に対する視線位置が検出された画素の数の割合が所定値を超える領域を前記注目領域として取得することを特徴とする請求項２に記載の支援装置。
4. 前記第１の取得手段は、前記医用画像データの分割された領域のうち、領域内に視線位置が検出された時間が所定時間を超える領域を前記注目領域として取得することを特徴とする請求項２または３に記載の支援装置。
5. 前記第１の取得手段は、前記医用画像データの医学的に分割された領域のうち、読影時に少なくとも一部が、前記表示手段に設けられた表示領域に表示された領域であって、領域に含まれる画素の全数に対する表示された画素の数の割合が所定値を超える領域を前記注目領域として取得することを特徴とする請求項１に記載の支援装置。
6. 前記表示手段はタッチ入力手段を有し、
   前記第１の取得手段は、前記医用画像データを表示する前記表示手段へのタッチ入力位置に基づいて前記注目領域の集合を取得することを特徴とする請求項１に記載の支援装置。
7. 前記医用画像データの医学的に分割された領域は、解剖学的構造に基づいて分割された領域であり、
   前記第２の取得手段は、前記レポート文に記述されている解剖学的構造名を前記記述領域として取得することを特徴とする請求項１乃至６のいずれか１項に記載の支援装置。
8. 前記第２の取得手段は、前記医用画像データを解剖学的構造に基づいて分割して得られたすべての領域の解剖学的構造名をキーワードとして、前記レポート文からキーワードマッチングにより前記記述領域の集合を取得することを特徴とする請求項７に記載の支援装置。
9. 前記判定手段は、前記注目領域の集合に存在し前記記述領域の集合に存在しない領域が存在する場合に、前記レポート文に記述漏れがあると判定することを特徴とする請求項１乃至８のいずれか１項に記載の支援装置。
10. 前記判定手段は、前記記述領域の集合に存在し前記注目領域の集合に存在しない領域が存在する場合に、前記医用画像データに対する確認漏れがあると判定することを特徴とする請求項１乃至９のいずれか１項に記載の支援装置。
11. 読影レポートの作成を支援する支援装置の制御方法であって、
    読影対象の医用画像データを表示手段に表示する表示工程と、
    前記表示手段に表示された前記医用画像データの医学的に分割された領域のうち、読影時に注目した領域と判定された注目領域の集合を取得する第１の取得工程と、
    前記医用画像データに対応するレポート文に記述されている医学的な領域である記述領域の集合を取得する第２の取得工程と、
    前記注目領域の集合と前記記述領域の集合の整合性を判定する判定工程と、
    前記判定工程による判定の結果を提示する提示工程と、を有することを特徴とする支援装置の制御方法。
12. 請求項１１に記載された支援装置の制御方法の各工程をコンピュータに実行させるためのプログラム。

Images