JP6827706B2 - 情報処理装置及びその方法、情報処理システム、コンピュータプログラム - Google Patents

Description

本発明は情報処理装置及びその方法、情報処理システム、コンピュータプログラムに関し、特に、医用画像の表示技術に関する。

医療現場では、Ｘ線ＣＴ（コンピュータ断層撮影）装置、ＭＲＩ（核磁気共鳴画像法）装置、ＰＥＴ（ポジトロン断層法）装置などの医用画像撮影装置により、患者が撮像されている。ここで、ＣＴはComputed Tomography、ＭＲＩはMagnetic Resonance Imaging、ＰＥＴはPositron Emission Tomographyの略称である。撮像によって得られた撮像データには、様々な画像処理が施されて医用画像が作成され、病院内のデータサーバに一定期間保存される。医師の画像診断業務は、医用画像表示装置（Ｖｉｅｗｅｒとも呼ばれる）を用いて目的の医用画像を検索してモニタ上に表示し、医用画像表示装置の様々な機能を用いることで行われる。また、医師は画像診断した結果を読影レポートとして記録する。

記録された読影レポートを参照する際には、ユーザは、医用画像と読影レポートの記載内容を対応づけながら参照する。しかし、読影レポートの記載内容が示す医用画像上の位置が、容易にわからない場合がある。また、医用画像と読影レポートの２つの情報を対応付けながら参照することには、ユーザの手間がかかった。

特許文献１には、医用画像上に読影レポートに示された病変の情報を表示することが記載されている。この構成によれば読影レポート内の文字列と当該文字列が示す医用画像上の位置がリンク付けされ、当該文字列を当該位置の近傍に表示する。そのため、ユーザは読影レポートに記載された当該文字列が医用画像上のどの位置を指しているかを正確に把握することができ、手間をかけずに正確に読影レポートを参照することができる。

特開２０１１−０８３５９０号公報

しかしながら、特許文献１の構成では、医用画像上に表示する文字列の医用画像上における表示位置は、解剖学的構造や読影レポートの内容を考慮せずに決定されていた。そのため、当該文字列が、解剖学的に重要な医用画像上の位置や読影レポートの内容に関連する医用画像上の位置に重なって表示されてしまうことがあった。そのような場合、ユーザは解剖学的構造や読影レポートの内容を、医用画像上で確認することが難しかった。

本発明は上記課題を鑑みてなされたものであり、医用画像と読影レポートとの対応関係をより容易に把握することが可能な技術を提供することを目的とする。

上記目的を達成するため、本発明による情報処理装置は以下の構成を備える。即ち、
被検体の医用画像における注目領域と、当該注目領域に関連づけられたコメント情報とを含むレポート情報を取得するレポート取得手段と、
前記コメント情報に含まれる文字列から抽出されたキーワードに基づく画像処理を前記医用画像に対して適用し、前記医用画像における前記注目領域に関連する関連領域の位置情報を取得する関連領域取得手段と、
前記位置情報に基づいて、前記医用画像内の前記関連領域に重ならない領域に、前記コメント情報の表示領域の表示位置を決定し、前記関連領域と前記表示領域の重複が不可避の場合には、前記表示領域のサイズを小さくする変更をして前記表示領域の表示位置を決定する決定手段と、
前記決定された表示位置に前記コメント情報の前記表示領域またはサイズが変更された前記表示領域を含む前記医用画像を表示手段に表示させる表示制御手段と
を備える。

本発明によれば、ユーザは医用画像と読影レポートとの対応関係をより容易に把握することができる。

医用画像システムの構成を示すブロック図 医用画像システムによる処理手順を説明するフローチャート 読影レポート作成画面の例を示す図 医用画像及び文字列表示領域の例を示す図 医用画像上に文字列表示領域をオーバーレイ表示した例を示す図 文字列表示領域の表示位置を一意に決定する例を説明する図 医用画像上に文字列表示領域をオーバーレイ表示した例を示す図 スライス画像と文字列を表示する範囲を模式的に示す図 医用画像上に文字列表示領域をオーバーレイ表示した例を示す図 スライス画像と文字列を表示する範囲を模式的に示す図 現在画像、過去画像、差分画像を説明する図 医用画像上に文字列表示領域をオーバーレイ表示した例を示す図 医用画像上に文字列表示領域をオーバーレイ表示した例を示す図 キーワードと取得領域の関係を示す図 医用画像上に文字列表示領域をオーバーレイ表示した例を示す図 画像表示領域の詳細な表示例を示す図

以下に、図面を参照しながら、本発明を実施するための形態（実施形態）について説明する。ただし、本発明の範囲は以下の構成例に限定されるものではない。

［実施形態１］
（医用画像システム）
図１は、本発明の一実施形態（実施形態１）に係わる医用画像表示装置を含む医用画像システム（医用画像表示システム）の全体構成を示す図である。情報処理システムとしての医用画像システムは、医用画像表示装置１０とデータベース２２を含んでおり、これらの装置は、通信装置を介して互いに通信可能に接続されている。本実施形態においては、通信装置はＬＡＮ（Local Area Network）２１で構成される例を説明するが、無線通信装置（無線ＬＡＮ等）や公衆通信網等によって構成してもよい。

データベース２２は、医用画像や読影レポートなどの検査情報を管理する。データベース２２は、医用画像と読影レポートとを対応づけて保持する。医用画像表示装置１０は、データベース２２で管理された医用画像や読影レポートを、ＬＡＮ２１を介して取得する。

情報処理装置としての医用画像表示装置１０は、その機能的な構成として、通信ＩＦ３１、ＲＯＭ３２、ＲＡＭ３３、記憶部３４、操作部３５、表示部３６、制御部３７を具備する。通信ＩＦ（Interface、インターフェイス）３１は、例えば、ＬＡＮカード等で実現され、ＬＡＮ２１を介した外部装置（例えば、データベース２２）と医用画像表示装置１０との間の通信を司る。ＲＯＭ（Read Only Memory）３２は、不揮発性のメモリ等で実現された読出し専用メモリであり、各種プログラム等を記憶する。ＲＡＭ（Random Access Memory）３３は、揮発性のメモリ等で実現された書込み可能メモリであり、各種情報を一時的に記憶する。記憶部３４は、例えば、ＨＤＤ（Hard Disk Drive）等で実現されたストレージ装置であり、各種情報を記憶する。操作部３５は、例えば、キーボードやポインティングデバイス等で実現され、ユーザからの指示を装置内に入力する。表示部３６は、例えば、ディスプレイ等で実現され、各種情報をユーザ（例えば、医師）に向けて表示する。制御部３７は、例えば、ＣＰＵ（Central Processing Unit）等で実現され、医用画像表示装置１０における処理を統括制御する。

制御部３７は、その機能的な構成として、医用画像取得部４１、読影レポート取得部４２、キーワード抽出部４３、領域取得部４４、表示位置決定部４５、表示処理部４６を具備する。医用画像取得部４１は、操作部３５によって入力されるユーザの操作に従って、通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から当該患者の医用画像を取得する。そして、領域取得部４４、表示位置決定部４５及び表示処理部４６へと出力する。

読影レポート取得部４２は、操作部３５によって入力されるユーザの操作に従って、通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から読影レポート（レポート情報）を取得する。なお、読影レポートは医用画像取得部４１によって取得される医用画像に対する読影レポートであり、その具体的な作成手法は後述する。また、レポート情報とは、被検体の医用画像における注目領域と、当該注目領域に関連づけられたコメント情報とを含む情報であり、読影レポートに含まれる情報、のサブセット、あるいは読影レポートそのものである。ここで、読影レポートとは、読影医によって読影レポートのサーバに登録された読影レポートだけでなく、読影レポートの編集画面に入力された、登録前、編集中の読影レポートも含む。この場合上述のレポート情報は、編集中の読影レポートに含まれる情報であって、被検体の医用画像における注目領域と、当該注目領域に関連づけられたコメント情報とを含む情報である。
そして、取得した読影レポートの一部または全てをキーワード抽出部４３、表示位置決定部４５及び表示処理部４６へと出力する。

キーワード抽出部４３は、読影レポート取得部４２によって取得された読影レポートに対して後述する処理を行い、キーワードを抽出する。そして、抽出したキーワードを領域取得部４４へ出力する。

関連領域取得手段としての領域取得部４４は、キーワード抽出部４３によって取得されたキーワードに基づいて、医用画像取得部４１により取得された医用画像に対して、後述する画像処理を行い、医用画像中の解剖学的な領域を取得する。そして取得した解剖学的な領域を表示位置決定部４５へと出力する。

表示位置決定部４５は、読影レポート取得部４２よって取得された読影レポート内の文字列を、医用画像取得部４１によって取得された医用画像上に表示する表示位置を決定する。ここでいう読影レポート内の文字列とは、読影レポートに記載される文章の一部または全てをいう。なお、表示位置は当該医用画像と当該読影レポートと領域取得部４４によって取得された領域の一部または全てに基づいて、後述する処理により決定される。そして、決定した表示位置を表示処理部４６へと出力する。

表示処理部４６は、医用画像取得部４１で取得された医用画像を、表示位置決定部４５で決定された表示位置上に読影レポート取得部４２で取得された読影レポート内の文字列をオーバーレイして、表示部３６に表示する。

なお、制御部３７が具備する各部の少なくとも一部は独立した装置として実現してもよい。また、夫々が機能を実現するソフトウェア（コンピュータプログラム）として実現してもよい。この場合、機能を実現するソフトウェアは、クラウドをはじめとするネットワークを介したサーバ上で動作してもよい。本実施形態では各部はローカル環境におけるソフトウェアにより夫々実現されている例を説明する。

（処理手順）
次に図２〜図４を用いて、本実施形態における制御部３７による全体の処理手順を説明する。また、以下では、例としてＸ線ＣＴ装置によって被検体の胸部領域が撮像された場合に作成される医用画像を対象として説明するが、対象となる医用画像はこれに限定されるものではない。

図２は、制御部３７が行う処理のフローチャートである。Ｓ２０１において、医用画像取得部４１は、操作部３５によって入力されるユーザの操作に従って、通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から医用画像を読み出す。

Ｓ２０２において、読影レポート取得部４２は、通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から、Ｓ２０１で読み出した医用画像に対応する読影レポートを取得する。ここで、本実施形態では読影レポートは、以下のようにして作成され、データベース２２に登録される。

図３に読影レポート作成画面の一例として、読影レポート作成画面３００を示す。図３中の画像表示領域３１０は医用画像を表示する画面領域を示す。なお画像表示領域３１０に表示された医用画像に対しては、画像全体の拡大・縮小機能、濃度値変換機能、表示位置の平行移動機能、図形描画機能、濃度値計測機能等の医用画像Ｖｉｅｗｅｒの様々な機能が使用可能となる。レポート表示領域３２０はユーザが医用画像を読影した結果を文章として記載する画面領域を示す。以下では、読影した結果が記載された文章を、読影文章（コメント情報）と称す。図３においては、レポート表示領域３２０に読影文章として「右肺Ｓ２領域に、充実性の結節を認める。」と記載されている。ボタン３２１は注目位置設定ボタンであり、ボタン３２１を選択することで、ユーザが読影文章を記載する際に注目した医用画像上の位置（以下では、注目位置と称す）を設定することができる。また、×印で示される記号３１１は、ユーザが設定した注目位置を示す記号である。なお、注目位置は画像中のあるピクセルまたはボクセルとしてもよいが、複数のピクセルまたはボクセルを含む領域としてもよい。以下、ユーザが設定した位置または領域を注目領域と称する。なお、ユーザが操作入力により注目位置を設定する場合、当該設定された注目位置の情報と、当該注目位置に対応する病変に関連する領域の情報とを、注目領域の情報として医用画像システムが管理してもよい。

読影レポートの作成手法の一例について具体的に説明する。ユーザは、読影すべき医用画像をデータベース２２から読み出し、画像表示領域３１０に表示する。そして、上述したような医用画像Ｖｉｅｗｅｒの様々な機能を用いて、当該医用画像を詳しく観察する。そして、ユーザは観察した結果を読影文章としてレポート表示領域３２０に記載する。図３では、当該読影文章は自由文で記載されているが、構造化された文章であってもよい。そして、ユーザはボタン３２１を選択し、当該読影文章の注目位置を設定する。注目位置の設定は、不図示の操作部３５を用いて行われる。例えば、ユーザがポインティングデバイスを用いて注目位置をクリックすることで設定される。もちろん、注目位置の設定手法は、注目位置を示す位置情報（以下では、注目位置情報と称す）を特定できればどのような方式であってもよく、これに限定されない。ここで、注目位置情報とは、例えば医用画像中の座標値などである。また図３においては、設定された注目位置上に記号３１１が描画されているが、医用画像表示装置１０の内部で注目位置情報を記録できればよく、注目位置を示す記号の描画は必ずしも必要ではない。そして、医用画像表示装置１０は、読影文章と注目位置情報（ないし注目領域情報）とを関連づけてデータベース２２に保存する。したがって、Ｓ２０２においては、読影レポートとして、読影文章と注目位置情報とが読み出される。

Ｓ２０３においてキーワード抽出部４３は、Ｓ２０２で読み出した読影文章から、予め設定されたキーワードをキーワードマッチングにより抽出する。本実施形態においては、キーワードは、臓器名など医用画像内に表示される解剖学的な情報を示す文字列とする。例えば、大脳、小脳、眼球、鼻、歯、肺、気管支、心臓、肝臓、脾臓、膵臓、胃、大腸、小腸、空腸、回腸、直腸、前立腺、子宮、前腕、上腕、大腿、下腿、乳房、筋肉、骨、脊椎、仙骨、尾骨、骨盤などである。もちろん、ここに記載されている臓器名は例であり、これに限定されない。また、キーワードは医用画像内における位置が特定できる文字列であれば、臓器名に限定されず、どのような文字列であってもよい。以下では、読影レポートの読影文章として図３に示すように「右肺Ｓ２領域に、充実性の結節を認める。」と記載されている場合を例として説明する。この場合、キーワードとして「肺」を抽出する。あるいは、より厳密に医用画像内の位置を特定できる「右肺」または「右肺Ｓ２」をキーワードとして設定しておき、抽出してもよい。なお、ここではキーワードマッチングによりキーワードを抽出したが、既知の自然言語処理など他の方式を用いて抽出してもよい。

Ｓ２０４において領域取得部４４は、Ｓ２０３によって抽出したキーワードに対応する解剖学的領域を、Ｓ２０１で取得された医用画像において抽出し、その領域を注目領域に関連する関連領域として取得する。ここでは、Ｓ２０３において、キーワードとして「肺」が抽出された場合を例として説明する。本例の場合、領域取得部４４は、当該医用画像から肺領域を取得する。具体的には、まずＳ２０１で取得した医用画像に対して、平滑化フィルタを用いてノイズ除去を行う。次に、医用画像の画素値に対する所定の閾値（例えば、ＨＵ値：−２００）を用いて二値化処理を行い、当該医用画像を体内領域と体外領域に分離する。次に、分離した体内領域の内部において、別の閾値（例えばＨＵ値：‐５００）を用いて肺領域とその他の領域に分離し、肺領域を抽出し取得する。なお、解剖学的領域の抽出処理は、読み出した当該医用画像から定められた領域を抽出できればよく、本手法に限定されない。例えば、グラフカット処理をはじめとするその他の臓器セグメンテーション処理を用いて解剖学的領域を抽出してもよい。

Ｓ２０５において表示位置決定部４５は、Ｓ２０２で読み出した読影文章を構成する文字列の一部または全てを、Ｓ２０１で読み出した医用画像上にオーバーレイ表示する表示位置を決定する。本実施形態では、読影文章の表示領域が解剖学的領域に重ならないように、その表示領域を決定する。図４及び図５を用いて、表示位置の決定手法を説明する。図４における医用画像４１０は、Ｓ２０１で読み出された医用画像を示す。本例においては、当該医用画像は胸部Ｘ線ＣＴ装置によって撮像されたアキシャル（水平）断面の画像であり、そのスライス位置はＳ２０２で注目位置を設定した位置である。以下では、そのスライス位置の画像を、注目スライス画像と称す。また破線４１１は医用画像４１０における肺野内とその外部の境界線を表す。また、記号４１２は病変（結節）を表す。さらに、文字列表示領域４２０はＳ２０２で読み出した読影文章（コメント情報）の一部または全ての文字列（以下、表示文字列と称す）を表示する領域（以下、文字列表示領域と称す）を表す。本実施形態において、文字列表示領域４２０は、ある一定のサイズ及び形状である。この場合、文字列表示領域に対して当該表示文字列が多い場合は、表示文字列の全てを文字列表示領域内に表示できないことがある。その場合は文字列表示領域４２１に示すように、スクロールバー４２２を用いて表示文字列をスクロール表示してもよい。または、文字列表示領域４２３に示すように、表示文字列のフォントを変更して、文字列領事領域内に全てが表示できるようにしてもよい。あるいは、表示文字列の中で文字列表示領域内に表示できなかった文字列を非表示にしてもよいし、既知の自然言語処理を用いて表示文字列の要約文を自動生成し表示してもよい。

以下では、文字列表示領域４２０を医用画像４１０上にオーバーレイ表示する場合について説明する。なお、Ｓ２０３において読影文章のキーワードとして「肺」が抽出され、Ｓ２０４において医用画像４１０の肺領域が取得された場合の例を説明する。

表示位置決定部４５は、予め決められた条件（以下では、表示位置決定条件と称す）に基づいて文字列表示領域４２０の表示位置を決定する。表示位置決定条件の例を、「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」として説明する。この場合、文字列表示領域４２０の表示位置は、医用画像４１０の内部で、且つ、破線４１１の外側の領域に決定される。図５に、表示位置の例を示す。図５の（Ａ）及び（Ｂ）では、文字列表示領域４２０の表示位置は、医用画像４１０の内部で且つ破線４１１の外側である。したがって、図５の（Ａ）及び（Ｂ）で示される文字列表示領域の表示位置は、本条件を満たす適切な表示位置である。また、図５の（Ｃ）では、文字列表示領域４２０の表示位置は、一部が医用画像４１０の外部であり、破線４１１の外側である。したがって、図５の（Ｃ）で示される文字列表示領域の表示位置は、本条件を満たさない不適切な表示位置である。さらに、図５の（Ｄ）では、文字列表示領域４２０の表示位置は、医用画像４１０の内部だが、破線４１１の内側である。したがって、図５の（Ｄ）で示される文字列表示領域の表示位置は、本条件を満たさない不適切な表示位置である。

また、上述した２つの表示位置決定条件だけでは、文字列表示領域の表示位置は一意に決まらない。そのため、上述した例においては、文字列表示領域の表示位置は上述した表示位置決定条件を満たす医用画像上の位置であればどこでもよい。ここで、文字列表示領域の表示位置を一意に決定したい場合は、「注目位置と文字列表示領域の中心が最も近い位置である」のような表示位置決定条件をさらに設定するとよい。図６に、医用画像４１０と文字列表示領域４２０を用いた例を示す。Ｓ２０２で取得した注目位置４１３と、文字列表示領域４２０の中心４２１の中心間距離を算出し、他の表示位置決定条件を満たしつつ当該中心間距離が最も短くなる位置に文字列表示領域４２１を表示する。

Ｓ２０６において、表示処理部４６は、Ｓ２０１で取得された医用画像上に、Ｓ２０２で取得された読影文章を構成する文字列の一部または全てを含む文字列表示領域を、Ｓ２０５で決定された表示位置上にオーバーレイする。そして、読影文章を含む文字列表示領域がオーバーレイした当該医用画像を表示部３６に表示させる表示制御を行う。

以上のように、本実施形態に係る医用画像表示装置１０によれば、以下の効果を得られる。すなわち、医用画像上に読影文章を構成する文字列の一部または全てをオーバーレイ表示させる際に、その表示位置を読影文章の内容に応じて決定する。したがって、読影文章の内容に関連が近い医用画像上の領域に、文字列をオーバーレイ表示することを避けることができる。そのため、ユーザは文字列がオーバーレイ表示されている医用画像上を見ても、当該文字列の内容を確認することが妨げられず、医用画像と読影レポートとの対応関係をより容易に把握することが可能となる。

また、カンファレンス用のシステムなど、読影者以外のユーザが読影レポートと医用画像を参照する場合は、読影者以外のユーザは当該読影レポートの内容を理解することが一般に困難である。そこで、このような場合においても、読影レポートの読影文章を、注目領域に関連する関連領域に重ならない位置に医用画像とともに表示することで、読影者以外のユーザにとっても医用画像と読影レポートとの対応関係の把握をより容易にすることができる。また、本実施形態では、医用画像が占める領域内に、文字列表示領域の表示位置を決定するため、読影文章は対応する医用画像の領域の近傍に表示され、読影文章と対応する医用画像の領域との関係を容易に認識することが可能となる。

なお、本実施形態では、読影文章（コメント情報）の文字列表示領域が注目領域に関連する関連領域に重ならないように考慮する。注目領域に関連する関連領域として、注目領域を含む解剖学的領域を取得する例を説明したが、関連領域はこれに限られない。すなわち、関連領域は、読影文章を閲覧する際に参照する可能性がある、被検体が医用画像に占める領域の任意の部分領域とすることができる。例えば、右肺の疾患について読影文章が作成されている場合、読影文章の表示位置を決定する際に、関連領域として、右肺野が占める領域だけでなく、その疾患に関連しうるその他の臓器（例えば、左肺野や気管支）も考慮してもよい。または、癌のような転移する可能性のある疾患については、注目領域に存在する疾患が転移する可能性のある領域も関連領域としてもよい。あるいは、注目位置から一定距離（例えば、１０ｃｍ）の範囲を関連領域としてもよい。

また、表示位置決定部４５は読影文章（コメント情報）の修正に応じて、当該読影文章の文字列表示領域の表示位置を変更し、表示処理部４６は、変更された表示位置に修正された読影文章をオーバーレイした医用画像を表示部３６に表示させてもよい。このように読影文章の修正に応じて、その読影文章の文字列表示領域の医用画像上の表示位置を変更することで、ユーザは、常に読影文章とそれに対応する医用画像の領域との対応関係を容易に把握することができる。

また、表示処理部４６は、領域取得部４４により読影文章に含まれる文字列からキーワードが抽出されたことに応じて、文字列表示領域に表示される文字列のうちキーワードに対応する部分を他の文字列と区別可能に表示させるようにしてもよい。例えば、キーワードに対応する部分の文字色や背景色を他の部分と異なる色で表示したり、下線を付したり、フォントを変更したり、ハイライト表示したりしてもよい。このようにすることで、ユーザは、読影文章に含まれるキーワードを一見して認識することができ、読影文章の内容を容易に把握することが可能となる。

また、本実施形態では、読影文章に含まれる文字列のキーワードに基づいて読影文章の文字列表示領域の表示位置を決定する例を説明した。しかし、読影文章の文字列表示領域が注目領域の関連領域に重ならないならば、読影文章の文字列表示領域の表示位置の決定手法はキーワードに基づくものに限られない。例えば、医用画像における注目領域の位置に基づいて、関連領域としての解剖学的領域を取得して、読影文章の文字列表示領域の表示位置を決定してもよい。あるいは、読影文章にキーワードが含まれていない場合のように、文字列に基づいて解剖学的領域を取得することができなかった場合に、医用画像における注目領域の位置に基づいて、解剖学的領域を取得するようにしてもよい。これにより、キーワードに基づかなくても、読影文章とともに参照する可能性の高い解剖学的領域に重ならないように読影文章を表示することができ、医用画像と読影レポートとの対応関係の把握をより容易することが可能となる。

また、表示位置決定部４５により決定された文字列表示領域の表示位置を示す表示位置情報と、読影文章とを含む医用画像の画像ファイルを作成するようにしてもよい。これにより、本実施形態の医用画像表示装置１０のような機能を持たない装置においても、その画像ファイルを読み込み可能な装置であれば、かかる画像ファイルを読み出し、ディスプレイに出力することで、読影文章と対応する領域との関係を表示できる。例えば画像ファイルのフォーマットはＤＩＣＯＭファイル形式とするコとができる。当該ＤＩＣＯＭ画像ファイルに、注目領域の情報と、当該注目領域に対応する読影文章（コメント情報）、読影文章（コメント情報）を表示させる表示領域の情報とを含ませておけばよい。コメント情報及びその表示領域の情報は、例えばＤＩＣＯＭで定義されるＧＳＰＳのAnnotationに対応するデータとして持たせて置けばよい。ＧＳＰＳはGrayscale Softcopy Presentation Stateの略称である。また、ＤＩＣＯＭ画像ファイルには、上述の読影文章（コメント情報）の表示領域を表示させるスライス画像の情報も含ませることとする。

また、読影文章の文字列表示領域をユーザからの操作入力に応じて移動させるようにしてもよい。例えば、文字列表示領域（第１の表示領域）を注目領域の関連領域（第２の表示領域）に重なる位置に移動させる操作入力がなされたとする。この場合、第１の表示領域と第２の表示領域とが重ならないように、第１の表示領域と第２の表示領域との少なくともいずれかの表示位置を決定する。これにより、読影文章の文字列表示領域の移動の前後わたって、読影文章の文字列表示領域が関連領域に重なることを防ぐことができ、医用画像と読影文章との対応関係を明瞭に表示することが可能となる。

［実施形態２］
実施形態１では、Ｓ２０３において読影文章から抽出するキーワードとして、臓器名など医用画像内に表示される解剖学的な情報を示す文字列が予め設定されていた。しかし、予め設定されるキーワードはこれに限定されない。例えば、結節、癌、肺炎、気腫、抗酸菌症、などの疾病名であってもよい。

ここでは、キーワードとして「結節」が設定された場合の、文字列表示領域の表示位置の決定手法について図７の（Ａ）を用いて説明する。図７の医用画像４１０、破線４１１及び黒円４１２は図４に示したものと同様である。

まず、Ｓ２０２において、読影文章として「右肺Ｓ２領域に、充実性の結節を認める。」が取得される。そして、Ｓ２０３において、キーワードとして「結節」が設定されているので、読影文章から「結節」が抽出される。そして、Ｓ２０４において、医用画像から「結節」の領域が取得される。ここで、結節の領域抽出は、グラフカット処理を始めとする領域セグメンテーション処理により行われる。

さらに、Ｓ２０５において、表示位置決定条件を実施形態１と同様に「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」とする。この場合、文字列表示領域の表示位置は、医用画像４１０の内部で、且つ、黒円４１２の外側の領域に決定される。さらに、この条件によれば、実施形態１と異なり、破線４１１の内部であっても外部であってもよい。図７の（Ａ）では、文字列表示領域の表示位置は、医用画像４１０の内部で且つ黒円４１２の外側である。したがって、図７の（Ａ）で示される文字列表示領域の表示位置は、本条件を満たす適切な表示位置である。

さらに別の例として、キーワードとして「肺炎」が設定された例について図７の（Ｂ）を用いて説明する。図７の（Ｂ）の斜線領域４１４は、医用画像内に肺炎像が描出されている領域を示す。まず、Ｓ２０２において、読影文章として「左肺の背側に、間質性肺炎の初期像を認める。」が取得される。そして、Ｓ２０３において、キーワードとして「肺炎」が設定されているので、読影文章から「肺炎」が抽出される。そして、Ｓ２０４において、医用画像から「肺炎」の領域が取得される。ここで、肺炎の領域は、例えば肺炎を示すテクスチャパタンを予め記憶しておき、当該医用画像内における当該テクスチャパタンを有する領域を抽出することにより行われる。他にも臓器内の特定のパタンを有する疾病領域の抽出処理については、既知の手法により実施することができる。そして、Ｓ２０５において、表示位置決定条件を実施形態１と同様に「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」とする。この場合、文字列表示領域の表示位置は、医用画像４１０の内部で、且つ、斜線領域４１４の外側の領域に決定される。図７の（Ｂ）では、文字列表示領域の表示位置は、医用画像４１０の内部で且つ斜線領域４１４の外側である。したがって、図７の（Ｂ）で示される文字列表示領域の表示位置は、本条件を満たす適切な表示位置である。

上記のように、疾病名等のキーワードに基づき、疾患が生じている領域に重ならないように読影文章を表示することで、医用画像の注目領域と読影レポートとの対応関係をより容易に把握することが可能となる。なお、ここで説明した予め設定するキーワードはあくまで一例であり、この例に限定されない。

［実施形態３］
実施形態１では、Ｓ２０５において、文字列表示領域の表示位置は、注目スライス画像についてのみ決定していたが、別スライス位置の画像においても決定してもよい。別スライス位置の画像においても文字列表示領域の表示位置を決定する場合について、図８を用いて説明する。図８における、８０１〜８０７は各スライス位置の医用画像であり、８０４は注目スライス画像である。

図８では、注目スライス画像のスライス位置から、予め決められた範囲のスライス位置における医用画像において文字列表示領域の表示位置を決定する例を示す。ここで、予め決められた範囲とは、「注目スライス画像のスライス位置の前後２枚のスライス位置」のように固定値で決定してもよい。この場合、図８では８０２〜８０６のスライス位置における医用画像に文字列表示領域の表示位置を決定する。別の例として、Ｓ２０４で抽出された領域のサイズに基づいて、文字列表示領域の表示位置を決定するスライス位置の範囲を設定してもよい。具体的には、抽出された領域のサイズが小さい場合は、当該範囲も狭く設定し、領域のサイズが大きい場合は当該範囲を広く設定する。さらには、当該範囲をユーザが手動で設定できるようにしてもよい。

ここで、別スライス位置における文字列表示領域の表示位置は、注目スライス画像において文字列表示領域の表示位置を決定するために用いられた表示位置決定条件と同様の表示位置決定条件を用いて決定してもよい。または、各スライス位置における文字列表示領域の表示位置は、注目スライス画像と同じであってもよい。このような場合は、スライス位置によってはＳ２０４で抽出した領域の内部に文字列表示領域が表示されることがあり、表示位置決定条件を満たさない場合もある。その場合は、表示位置決定条件として、「文字列表示領域の全てが医用画像の内部である」、「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」、且つ「全てのスライス位置における表示位置は同一である」とする。これにより、各スライス位置における文字列表示領域の表示位置が変化せず、また、読影文章の内容に関連が近い医用画像上の領域を表示位置とすることを避けることができる。

上記のように、表示対象の医用画像は同一の被検体から取得された複数のスライス画像であるところ、表示位置決定部４５は、複数のスライス画像の中から読影文章を含む文字列表示領域を表示させるスライス画像を決定する。そして、表示処理部４６は、決定されたスライス画像に読影文章を含む文字列表示領域を表示させる。したがって、本実施形態によれば、医用画像上に表示される文字列が、複数のスライス位置にまたがって表示されるため、ユーザは当該文字列をより認識しやすくなる。

また、本実施形態では、表示処理部４６は、注目領域に関連づけられた読影文章を、当該注目領域からスライス画像の断面に直交する方向に所定の距離内に存在するスライス画像の各々とともに表示させる。このため、疾患が立体的に分布しているような場合であっても、ユーザは、疾患が生じている領域と読影文章との対応関係を容易に把握することができる。

［実施形態４］
実施形態１では、読影レポートの注目位置情報として医用画像中の特定の座標を示す位置が記録され活用されていた。しかし、注目位置情報はこれに限定されない。例えば、ユーザは注目位置を範囲（以下、注目範囲）として設定してもよい。より具体的には、ＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）やＶＯＩ（Ｖｏｌｕｍｅ Ｏｆ Ｉｎｔｅｒｅｓｔ）を設定する。

ＲＯＩが設定された場合の例を、図９を用いて説明する。図９の医用画像４１０、破線４１１は図４に示したものと同様である。またユーザによって当該医用画像の読影文章に対応する注目範囲が、ＲＯＩ４１５として設定されている。この場合の文字列表示領域の表示位置の決定手法について説明する。

Ｓ２０１からＳ２０４の処理は、実施形態１と同様である。図９の（Ａ）では、Ｓ２０５における表示位置決定条件を「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は注目位置領域の内部に重ならない」とする。この場合、文字列表示領域の表示位置は、医用画像４１０の内部で、且つ、ＲＯＩ４１５の外側の領域に決定される。さらには、実施形態１と異なり、破線４１１の内部であっても外部であってもよい。図９の（Ａ）では、文字列表示領域の表示位置は、医用画像４１０の内部で且つＲＯＩ４１５の外側である。したがって、図９の（Ａ）で示される文字列表示領域の表示位置は、本条件を満たす適切な表示位置である。なお、Ｓ２０５において予め設定される条件が、図９の（Ａ）のように、医用画像内の解剖学的領域の情報を使用しない場合は、Ｓ２０３及びＳ２０４の処理は省略することができる。

別の例として、Ｓ２０５における表示位置決定条件を以下のように設定する。すなわち、「文字列表示領域の全てが医用画像の内部である」、「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」、且つ「文字列表示領域は注目位置領域の内部に重ならない」とする。この場合、文字列表示領域４２０の表示位置は、医用画像４１０の内部であって、破線４１１の外側の領域であり、且つ、ＲＯＩ４１５の外側の領域に決定される。図９の（Ｂ）では、文字列表示領域の表示位置は、医用画像４１０の内部で且つ破線４１１の外側で且つＲＯＩ４１５の外側である。したがって、図９の（Ｂ）で示される文字列表示領域の表示位置は、本条件を満たす適切な表示位置である。さらに、上記条件では文字列表示領域の辺縁とＲＯＩの辺縁が連続することがあり、ＲＯＩが見にくくなる場合がある。このような場合は、表示位置決定条件を以下のように設定する。すなわち、「文字列表示領域の全てが医用画像の内部である」、「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」、且つ「文字列表示領域は注目位置領域の一定の距離離れた外部である」とする。ここで、一定の距離は予め定めてもよいし、ユーザが設定してもよい。図９の（Ｃ）では、文字列表示領域の表示位置は、医用画像４１０の内部で且つ破線４１１の外側で且つＲＯＩ４１５から一定距離離れた外側である。したがって、図９の（Ｃ）で示される文字列表示領域の表示位置は、本条件を満たす適切な表示位置である。

またユーザが注目範囲としてＲＯＩではなくＶＯＩを設定した場合、注目スライス画像においては、上記ＲＯＩと同様の処理によって、文字列表示領域の表示位置を決定することができる。ここで、実施形態３のように予め定められた範囲の複数のスライス位置において、文字列表示領域の表示位置を決定する場合は、ＶＯＩが設定されているスライス位置を当該範囲として設定してもよい。複数のスライス位置において表示位置を決定する場合について、図１０を用いて説明する。図１０における、１００１〜１００７は各スライス位置の医用画像であり、１００４は注目スライス画像である。また、１００３〜１００５のスライス位置の医用画像にＶＯＩが設定されている場合の例を説明する。この場合、１００３〜１００５のスライス位置を当該範囲として設定する。また別の例として、ＶＯＩが設定されているスライス位置の、少し前のスライス位置から少し後のスライス位置までを文字列表示領域を表示させる範囲として設定してもよい。図１０の（Ｂ）は、ＶＯＩが設定されているスライス位置の２つ前のスライス位置から１つ後のスライス位置までを当該範囲として設定した例である。この場合、１００１〜１００６のスライス位置が当該範囲として設定される。

図１６は、図３に示した画像表示領域３１０の詳細な表示例を示す図である。図１６では、図９（Ｃ）を用いて説明した方法によって文字列表示領域の表示位置を決定している。

図１６において、画像表示領域３１０は、以下の部分領域を含む。検査リスト１６０１は、現在検査対象となっている患者の全検査（過去及び現在の検査）をリスト形式で表示する領域である。サムネイル・リスト１６０２は、検査リスト１６０１に表示された検査リスト中からユーザによって選択された検査に含まれる全画像を、サムネイルのリスト形式で表示する領域である。検査に含まれる各画像は、１枚のスライス画像であってもよいし、複数のスライス画像からなるシリーズ画像（３次元画像）であってもよい。サムネイルは、通常、１枚のスライス画像を縮小した画像である。シリーズ画像からサムネイルを作成する際は、シリーズ画像中の代表画像（例えば、スライス位置が中央に位置するスライス画像）を縮小して作成する。

ツールバー１６０３は、複数のボタン（アイコン）を並べて表示した領域である。ツールバー１６０３の各ボタンをユーザが選択することで、予めボタンに対応付けられた機能（画像の表示形態の変更、図形の描画、文字列表示領域の描画など）が実行される。画像・所見表示タイル１６０４は、後述の画像表示タイル１６０５、所見リスト１６０６、診断支援情報リスト（ＣＡＤリスト）１６０７を表示する領域である。

画像・所見表示タイル１６０４は、ユーザの指示により、１つ以上〜所定の上限数以下の数だけ表示可能である。図１６には、４つの画像・所見表示タイル１６０４を、縦２ｘ横２の配置で表示している例を示している。画像表示タイル１６０５は、ユーザが選択したサムネイルに対応する画像を表示する領域である。画像表示タイル１６０５に表示した画像は、ユーザ指示に従って、表示するスライス位置の変更、画像の平行移動／拡大／回転、濃度値変換などの操作が可能である。また、ユーザ指示に従って、画像表示タイル１６０５に表示した画像上への図形描画や図形削除が可能である。図１６に示した例では、ユーザがマウス等の操作部３５を用いて、画像の注目領域（ＲＯＩ）を囲む楕円形の図形が描画されており、図９（Ｃ）で説明した方法により、文字列表示領域が表示されている。この文字列表示領域には、ユーザがキーボード等の操作部３５を用いて、任意の文字列（以下、所見と記す）を入力または編集することができる。

所見リスト１６０６は、画像表示タイル１６０５に表示する画像（シリーズ画像の場合は複数のスライス画像）上に配置したすべての所見をリスト形式で表示する領域である。所見リスト１６０６に表示された任意の所見をユーザが選択すると、選択された所見が配置されたスライス画像が、画像表示タイル１６０５に表示される。ＣＡＤリスト１６０７は、制御部３７が備える非表示の診断支援情報取得手段により得られたすべての診断支援情報をリスト形式で表示する領域である。診断支援情報は、ユーザが指定したＲＯＩに対して取得することもできるし、制御部３７が備える非表示のＲＯＩ検出手段によって取得することもできる。ＣＡＤリスト１６０７に表示された任意の診断支援情報をユーザが選択すると、選択された診断支援情報に対応するＲＯＩが存在するスライス画像が、画像表示タイル１６０５に表示される。

上記のように、本実施形態では、ＲＯＩやＶＯＩに基づき読影文章の文字列表示領域の表示位置を決定するため、ユーザは、医用画像において関心のある領域と読影文章との対応関係を容易に把握することができる。

［実施形態５］
実施形態１では、当該医用画像とそれに対応する読影レポートから文字列表示領域の表示位置を決定していた。しかし、複数時点の医用画像及びそれに対応する読影レポートから決定してもよい。例えば、同一患者における過去の医用画像や読影レポートを利用してもよい。

複数時点の医用画像や読影レポートから文字列表示領域の表示位置を決定する場合について、図１１及び図１２を用いて説明する。図１１において、医用画像（現在画像）１１１０は、ユーザにより記載された文字列表示領域１１００に示される読影文章に対応する医用画像である。そして、医用画像（過去画像）１１２０は、医用画像１１１０が撮像された時点より過去の時点で撮像された同一患者の画像である。また、差分画像１１３０は、医用画像１１１０と医用画像１１２０の間の差分画像である。ここで、差分画像は、例えば、ＦＦＤ（Ｆｒｅｅ−Ｆｏｒｍ Ｄｅｆｏｒｍａｔｉｏｎ）手法を始めとする変形位置合わせ処理を利用して、医用画像１１１０と医用画像１１２０を変形位置合わせし、両画像を減算処理することで生成することができる。また、差分画像１１３０上の斜線領域１１３１は、現在画像１１１０と過去画像１１２０において差がある領域を示す。また図１２の斜線領域１２００は、差分画像１１３０上の斜線領域１１３１に対応する現在画像１１１０上での位置を示す。

まず、Ｓ２０１において現在の医用画像１１１０が読み出される。次に、Ｓ２０２において医用画像１１１０に対して作成された読影レポートを読み出す。ここで、作成された読影レポートにおける読影文章は、図１１の文字列表示領域１１００に示される「前回と比較して、肺内結節は全体的に増大しています」という文章である例を説明する。次に、Ｓ２０３において読影文章から抽出されるキーワードとして、予め「前回と比較」、「前と比して」、「以前と比べて」が設定される。この場合、キーワードとして「前回と比較」が設定されているので、読影文章から「前回と比較」が抽出される。なお、ここで説明した予め設定するキーワードはあくまで一例であり、ユーザが経時的に過去の医用画像と比較して読影文章を作成したと考えられる文字列であれば、この例に限定されない。

次に、Ｓ２０４において、まず過去画像１１２０を読み出し、前述した手法を用いて差分画像１１３０を生成する。そして、ある閾値以上の差分値を持つ差分画像上の領域（例えば、斜線領域１１３１）を取得する。ここで、差分値の閾値は予め設定しておいてもいいし、ユーザが任意の値を設定してもよい。次に、Ｓ２０５において、表示位置決定条件が「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」とする。この場合は、文字列表示領域の表示位置は医用画像１１１０の内部で、且つ、差分画像上の斜線領域１１３１の位置に対応する現在画像１１１０上の斜線領域１２００の外側に決定される。図１２では、文字列表示領域の表示位置は、医用画像１１１０の内部で且つ斜線領域１２００の外側である。したがって、図１２で示される文字列表示領域１１００の表示位置は、本条件を満たす適切な表示位置である。

上記のように、本実施形態では、医用画像とその他の医用画像との差分画像を取得し、この差分画像の画素値に基づいて、読影文章の文字列表示領域の表示位置を決定する。このため、疾患が拡大している箇所など、診断の上で重要な領域と読影文章との対応を示して表示することにより医師の診断を促進することが可能となる。

［実施形態６］
実施形態１では、Ｓ２０５において文字列表示領域はある一定のサイズの領域及び形状である例を説明した。しかし、文字列表示領域のサイズや形状などは、文字列表示領域の表示位置、表示する文字列の量、オーバーレイ表示する医用画像、抽出される領域などによって随時変更可能であってもよい。

図１３を用いて説明する。まず、Ｓ２０１において医用画像１３００が読み出される。次に、Ｓ２０２において医用画像１３００に対して作成された読影レポートを読み出す。ここで、作成された読影レポートにおける読影文章は、図１３の文字列表示領域１３０２に示される「右肺Ｓ２領域に、充実性の結節を認める。結節は不整形でスピキュラを有し、肺癌を第一に考えます。」という文章の例を説明する。次に、Ｓ２０３において、読影文章からキーワードとして「肺」を抽出する。次に、Ｓ２０４において、医用画像１３００からキーワードに対応する肺領域１３０１を抽出する。さらにＳ２０５において、表示位置決定条件を実施形態１と同様に「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」とする。

ここで、図１３（Ａ）の場合は、文字列表示領域１３０２が大きいため、表示位置決定条件を満たす位置が医用画像内に存在せず、文字列表示領域は医用画像内に収まらない例を示している。この様な場合は、文字列表示領域を表示できる領域が存在しないことを、ユーザに警告してもよい。または、図１３の（Ｂ）の文字列表示領域１３０３に示す通り、文字列表示領域のサイズを、表示位置決定条件を満たす位置が医用画像内に存在可能となるサイズまで小さくしてもよい。図１３の（Ｂ）においては、文字列表示領域に表示される読影文章のフォントサイズを小さくすることで、読影文章の内容は変えずに、表示位置決定条件を満たす位置に文字列表示領域１３０３を表示している。

また別の例として、図１３の（Ｃ）に示す例について説明する。この場合は、Ｓ２０３において、読影文章からキーワードとして「右肺」を抽出し、Ｓ２０４において、右肺領域１３０５を抽出する。そして、Ｓ２０５において、表示位置決定条件を実施形態１と同様に「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」とする。本例において、図１３の（Ｃ）の文字列表示領域１３０４は、図１３の（Ａ）の文字列表示領域１３０２と比較すると、文字列表示領域の形状を変化させ、表示位置決定条件を満たす位置に表示している。

本実施形態によれば、医用画像に含まれる関連領域の分布等に基づき文字列表示領域のサイズや形状を変化させて医用画像上に表示する。このため、読影文章の量やサイズによらずに、読影文章と注目領域との対応関係を示すことが可能となる。

［実施形態７］
実施形態１では、Ｓ２０３で抽出した一つのキーワードに対応する一つの医用画像上の領域をＳ２０４で取得し、Ｓ２０５において表示位置決定条件として利用していた。しかし、一つのキーワードに対応して複数の医用画像上の領域を取得し、表示位置決定条件として利用してもよい。

図１４及び図１５を用いて説明する。図１４はＳ２０３において読影文章から抽出される予め設定されたキーワードと、そのキーワードに対してＳ２０４において取得される領域の関係を示すテーブル情報の例を示す図である。例えば、図１４を参照すると、Ｓ２０３において読影文章からキーワードとして「脳」が抽出された場合は、Ｓ２０４において「大脳」領域と「小脳」領域が取得される。また別の例として、Ｓ２０３において読影文章からキーワードとして「肺」が抽出された場合は、Ｓ２０４において「右肺野」、「左肺野」及び「気管支」の領域が取得される。このように、テーブル情報においては、被検体の医用画像における注目領域に関連づけられた文字列と、解剖学的領域の種類を示す文字列とが対応づけられている。

図１５は、Ｓ２０３において「肺」が抽出され、Ｓ２０４において「右肺野」、「左肺野」及び「気管支」の領域が取得された際の、文字列表示領域が医用画像中に表示される例を示す。具体的には、Ｓ２０１において医用画像１５００が読み出される。次にＳ２０２において医用画像１５００に対して作成された読影レポートを読み出す。ここで、作成された読影レポートにおける読影文章は、図１５の文字列表示領域１５０４に示される「右肺Ｓ２領域に、充実性の結節を認める。」という文章の例を説明する。

次にＳ２０３において、読影文章からキーワードとして「肺」を抽出する。次に、Ｓ２０４において、図１２を参照し医用画像１５００からキーワードに対応する右肺領域１５０１、左肺領域１５０２及び気管支領域１５０３を抽出する。次に、Ｓ２０５において、表示位置決定条件を実施形態１と同様に「文字列表示領域の全てが医用画像の内部である」且つ「文字列表示領域は読影文章のキーワードから抽出される領域の内部に重ならない」とする。この場合は、文字列表示領域１５０４の表示位置は医用画像１５００の内部で、右肺領域１５０１の外側で、左肺領域１５０２の外側で、且つ、気管支領域１５０３の外側に決定される。図１５では、文字列表示領域の表示位置は、医用画像１５００の内部で且つ右肺領域１５０１、左肺領域１５０２及び気管支領域１５０３の外側である。したがって、図１５で示される文字列表示領域１５０４の表示位置は、本条件を満たす適切な表示位置である。

本実施形態においては、読影文章におけるキーワードに対応する領域と解剖学的または医学的に関連が深い別の領域をも考慮して文字列表示領域の表示位置を決定する。したがって、ユーザは当該文字列をより容易に認識することが可能となる。

なお、読影レポートは、医用画像における複数の注目領域と注目領域に関連づけられた複数の読影文章（コメント情報）とを含み、表示位置決定部４５は、複数の読影文章の各々について互いに重複しない文字列表示領域の表示位置を決定するようにしてもよい。これにより、一つの医用画像に複数の注目領域とそれに対する読影文章（コメント情報）を同時に重複せずに表示することができる。

［実施形態８］
実施形態１では、Ｓ２０６において表示処理部４６は、医用画像上に文字列をオーバーレイして表示部３６に表示していた。しかし、文字列を医用画像に直接埋め込んだ医用画像を作成し表示してもよい。

Ｓ２０１からＳ２０５までの処理は、実施形態１と同様である。Ｓ２０６において、Ｓ２０１で読み出した医用画像上のＳ２０５で決定された表示位置上に、Ｓ２０２で取得された読影文章を構成する文字列の一部または全てを埋め込んだ第二の医用画像を作成する。そして、当該第二の医用画像を表示部３６に表示する。

このように、本実施形態では、文字列表示領域の表示値に読影文章が配置された新たな医用画像を生成し、この新たな医用画像を、読影文章を含む医用画像として、表示部３６に表示させる。このため、医用画像上に文字列をオーバーレイして表示する場合と同様に、読影文章が関連領域に重ならずに医用画像と読影文章との対応関係を示すことができる。

［実施形態９］
実施形態１では、医用画像表示装置１０の各部はローカル環境におけるソフトウェアにより実現されていた。しかし、ＬＡＮを用いて、医用画像表示装置１０の制御部３７が具備する少なくとも一部をサーバで実施するクライアントサーバ構成としてもよい。

例えば、計算量が多いことが予想される医用画像取得部４１、読影レポート取得部４２、キーワード抽出部４３、領域取得部４４及び表示位置決定部４５の処理はサーバで実現される。そして、最終的にユーザに医用画像を表示する処理を行う表示処理部４６の処理はクライアント側で実現してもよい。具体的には、クライアント側で不図示のリストから症例番号を選択すると、選択された症例番号がＬＡＮを通じてサーバに送信される。サーバ側では選択された症例番号を基に、医用画像と読影レポートを取得し、前述の処理を行い、最終的に読影文章の表示位置を決定する（Ｓ２０１〜Ｓ２０５）。次いで、サーバは医用画像、読影レポート、読影文章及び読影文章の表示位置をクライアント側に送信する。そして、クライアント側で送信内容を基に医用画像と読影文章の表示を行う（Ｓ２０６）。

本実施形態によれば、クライアント側の計算リソースが小さい場合であっても、サーバを利用することにより、医用画像と読影文章との対応を明瞭に表示することができる。

以上のように、本発明の各実施形態においては医用画像上の注目位置または注目範囲と注目位置または前記注目範囲に対する読影文章（コメント情報）とを取得し、医用画像上におけるコメント情報（文字列等）の表示位置を文字列の内容に基づいて決定する。このため、医用画像上に文字列を表示する際の表示位置を文字列の内容に応じて決定し、医用画像上の当該表示位置に当該文字列をオーバーレイ表示することができる。これにより、当該文字列を、解剖学的に重要な医用画像上の位置や当該文字列の内容に関連する医用画像上の位置に、重ねて表示されることを避けることができる。したがって、ユーザが当該文字列の内容を確認することを妨げないように表示する医用画像表示技術を提供することができる。

＜＜その他の実施形態＞＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０：医用画像表示装置、２１：ＬＡＮ、２２：データベース、３１：通信インターフェイス、３２：ＲＯＭ、３３：ＲＡＭ、３４：記憶部、３５：操作部、３６：表示部、３７：制御部、４１：医用画像取得部、４２：読影レポート取得部、４３：キーワード抽出部、４４：領域取得部、４５：表示位置決定部、４６：表示処理部

Claims (19)

1. 被検体の医用画像における注目領域と、当該注目領域に関連づけられたコメント情報とを含むレポート情報を取得するレポート取得手段と、
   前記コメント情報に含まれる文字列から抽出されたキーワードに基づく画像処理を前記医用画像に対して適用し、前記医用画像における前記注目領域に関連する関連領域の位置情報を取得する関連領域取得手段と、
   前記位置情報に基づいて、前記医用画像内の前記関連領域に重ならない領域に、前記コメント情報の表示領域の表示位置を決定し、前記関連領域と前記表示領域の重複が不可避の場合には、前記表示領域のサイズを小さくする変更をして前記表示領域の表示位置を決定する決定手段と、
   前記決定された表示位置に前記コメント情報の前記表示領域またはサイズが変更された前記表示領域を含む前記医用画像を表示手段に表示させる表示制御手段と
   を備えることを特徴とする情報処理装置。
2. 前記決定手段は、前記コメント情報が修正されたことに応じて、前記表示領域の表示位置を変更し、
   前記表示制御手段は、前記変更された表示位置の前記表示領域に前記コメント情報を含む前記医用画像を表示させる
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記関連領域取得手段は、前記関連領域として、前記被検体が前記医用画像に占める領域の部分領域である、前記注目領域を含む解剖学的領域を取得することを特徴とする請求項１又は２に記載の情報処理装置。
4. 前記関連領域取得手段は、前記関連領域として、前記解剖学的領域に関連するその他の解剖学的領域をさらに取得することを特徴とする請求項３に記載の情報処理装置。
5. 前記関連領域取得手段は、被検体の医用画像における注目領域に関連づけられた文字列と、解剖学的領域の種類を示す文字列とが対応づけられたテーブル情報に基づいて、前記関連領域としての解剖学的領域を取得することを特徴とする請求項３または４に記載の情報処理装置。
6. 前記表示制御手段は、前記関連領域取得手段により前記コメント情報に含まれる文字列からキーワードが抽出されたことに応じて、前記表示領域に表示される前記文字列のうち該キーワードに対応する部分を他の文字列と区別可能に表示させることを特徴とする請求項１から５のいずれか１項に記載の情報処理装置。
7. 前記関連領域取得手段は、前記キーワードとして臓器名又は疾病名を抽出することを特徴とする請求項１から６のいずれか１項に記載の情報処理装置。
8. 前記関連領域取得手段は、前記コメント情報に含まれる文字列に基づいて解剖学的領域を取得することができなかった場合に、前記医用画像における注目領域の位置に基づいて、前記解剖学的領域を取得することを特徴とする請求項３または４に記載の情報処理装置。
9. 表示対象の前記医用画像は同一の被検体から取得された複数のスライス画像であり、
   前記決定手段は、前記複数のスライス画像の中から前記コメント情報とともに表示させるスライス画像をさらに決定し、
   前記表示制御手段は、前記決定されたスライス画像の前記表示領域に前記コメント情報を含む画像を表示させる
   ことを特徴とする請求項１から８のいずれか１項に記載の情報処理装置。
10. 表示対象の前記医用画像は同一の被検体から取得された複数のスライス画像であり、
    前記表示制御手段は、前記注目領域に関連づけられたコメント情報を、当該注目領域から前記スライス画像の断面に直交する方向に所定の距離内に存在するスライス画像の各々とともに表示させる
    ことを特徴とする請求項１から８のいずれか１項に記載の情報処理装置。
11. 前記医用画像とその他の医用画像との差分画像を取得する画像取得手段をさらに備え、
    前記決定手段は、前記差分画像の画素値に基づいて、前記表示領域の表示位置を決定する
    ことを特徴とする請求項１から１０のいずれか１項に記載の情報処理装置。
12. 前記決定手段は、前記医用画像が占める領域に含まれるように前記表示領域の表示位置を決定することを特徴とする請求項１から１１のいずれか１項に記載の情報処理装置。
13. 前記決定手段により決定された表示位置に表示された表示領域に前記コメント情報が配置された新たな医用画像を生成する生成手段をさらに備え、
    前記表示制御手段は、前記コメント情報を含む医用画像として、前記新たな医用画像を表示させる
    ことを特徴とする請求項１から１２のいずれか１項に記載の情報処理装置。
14. 前記決定手段により決定された表示領域を示す領域情報と、前記コメント情報とを含む前記医用画像の画像ファイルを作成する作成手段をさらに備えることを特徴とする請求項１から１３のいずれか１項に記載の情報処理装置。
15. 前記レポート情報は、医用画像における複数の注目領域と、該注目領域に関連づけられた複数のコメント情報とを含み、
    前記決定手段は、前記複数のコメント情報の各々の表示領域について、互いに重複しない表示位置を決定する
    ことを特徴とする請求項１から１４のいずれか１項に記載の情報処理装置。
16. 前記コメント情報の表示領域をユーザからの操作入力に応じて移動させる移動手段をさらに備え、
    第１の表示領域を第２の表示領域に重なる位置に移動させる操作入力がなされた場合に、前記決定手段は、該第１の表示領域と第２の表示領域とが重ならないように、該第１の表示領域と第２の表示領域との少なくともいずれかの表示位置を決定する
    ことを特徴とする請求項１から１５のいずれか１項に記載の情報処理装置。
17. 被検体の医用画像における注目領域と、当該注目領域に関連づけられたコメント情報とを含むレポート情報を取得するレポート取得手段と、
    前記コメント情報に含まれる文字列から抽出されたキーワードに基づく画像処理を前記医用画像に対して適用し、前記医用画像における前記注目領域に関連する関連領域の位置情報を取得する関連領域取得手段と、
    前記位置情報に基づいて、前記医用画像内の前記関連領域に重ならない領域に、前記コメント情報の表示領域の表示位置を決定し、前記関連領域と前記表示領域の重複が不可避の場合には、前記表示領域のサイズを小さくする変更をして前記表示領域の表示位置を決定する決定手段と、
    前記決定された表示位置に前記コメント情報の前記表示領域またはサイズが変更された前記表示領域を含む前記医用画像を表示手段に表示させる表示制御手段と
    を備えることを特徴とする情報処理システム。
18. レポート取得手段が、被検体の医用画像における注目領域と、当該注目領域に関連づけられたコメント情報とを含むレポート情報を取得するレポート取得工程と、
    関連領域取得手段が、前記コメント情報に含まれる文字列から抽出されたキーワードに基づく画像処理を前記医用画像に対して適用し、前記医用画像における前記注目領域に関連する関連領域の位置情報を取得する関連領域取得工程と、
    決定手段が、前記位置情報に基づいて、前記医用画像内の前記関連領域に重ならない領域に、前記コメント情報の表示領域の表示位置を決定し、前記関連領域と前記表示領域の重複が不可避の場合には、前記表示領域のサイズを小さくする変更をして前記表示領域の表示位置を決定する決定工程と、
    表示制御手段が、前記決定された表示位置に前記コメント情報の前記表示領域またはサイズが変更された前記表示領域を含む前記医用画像を表示手段に表示させる表示制御工程と
    を備えることを特徴とする情報処理方法。
19. 請求項１８に記載の情報処理方法をコンピュータに実行させるためのコンピュータプログラム。