JP2016012346A - 制御方法及びプログラム - Google Patents

Abstract

【課題】読影対象の医用画像と類似する医用画像を検索する情報端末を更に改善する。【解決手段】情報端末のコンピュータに対して、対象医用画像の中の関心領域に応じて、関心領域の特徴量と所定の類似度を有する複数の類似医用画像を症例検索システムから受信させ、受信した複数の類似医用画像を表示する表示画面をタッチパネルディスプレイに表示させ、表示画面は、受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、表示領域に表示されている複数の類似医用画像のうち第１類似医用画像の選択が検知されると、第１類似医用画像を表示領域の全体に表示させ、第１類似医用画像に対するスワイプ操作を検知した場合、複数の類似医用画像の中で類似度が第１類似医用画像の次に高い第２類似医用画像を、第２類似医用画像に含まれる対応関心領域を表示領域の所定位置に合わせて、表示領域に表示させる。【選択図】図２

Description

本開示は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末の制御方法及びプログラムに関する。

近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）等の医用画像装置が発達および普及している。これらＣＴ又はＭＲＩなどは、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。

特開２００８−２５７２９２号公報

大沢 哲、外４名、"画像診断を支援する類似症例検索システム「ＳＹＮＡＰＳＥ Ｃａｓｅ Ｍａｔｃｈ」の開発"、富士フイルム研究報告、富士フイルム株式会社、平成２５年３月２７日、第５８号、ｐ．１１−１４

しかしながら、更なる改善が必要とされていた。

本開示の非限定的で例示的な一態様は、更なる改善が可能である。

本開示の一態様の付加的な恩恵及び有利な点は本明細書及び図面から明らかとなる。この恩恵及び／又は有利な点は、本明細書及び図面に開示した様々な態様及び特徴により個別に提供され得るものであり、その１以上を得るために全てが必要ではない。

本開示の一態様に係る制御方法は、
医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末の制御方法であって、
前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す指定情報を検知させ、
前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
前記第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記表示領域に表示させるものである。

なお、これらの包括的または具体的な態様は、システム、装置、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能な記録媒体で実現されてもよく、装置、システム、方法、集積回路、コンピュータプログラムおよびコンピュータ読み取り可能な記録媒体の任意な組み合わせで実現されてもよい。コンピュータ読み取り可能な記録媒体は、例えばＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの不揮発性の記録媒体を含む。

本開示によれば、更なる改善が実現できる。

本実施の形態における情報端末が適用された病院情報システムの全体構成図である。 情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。 情報端末の実装形態の構成例を示す図である。 情報端末にて、医師が診断画像を閲覧するときにディスプレイに表示される閲覧画面の一例を示す図である。 ディスプレイに表示される基本画面の一例を示す図である。 ディスプレイに表示される基本画面の一例を示す図である。 ＤＩＣＯＭビューワモードでの基本画面の一例を示す図である。 病名リスト表示領域の拡大図である。 「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。 「転移性肺癌」で類似症例が絞り込まれたときの基本画面を示す図である。 ディスプレイに表示される基本画面の一例を示す図である。 ディスプレイに表示される基本画面の一例を示す図である。 分布リスト表示領域の拡大図である。 両側性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 両側性の病変分布で絞り込みがかけられた基本画面を示した図である。 ディスプレイに表示される基本画面の一例を示す図である。 気道性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 気道性の病変分布で絞り込みがかけられた基本画面において、１行１列目のサムネイル画像が選択されたときに表示される基本画面を示した図である。 胸膜下のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 胸膜下の病変分布で絞り込みがかけられた基本画面において、１行１列目のサムネイル画像が選択されたときに表示される基本画面を示した図である。 患者情報のデータ構成を示す図である。 図１９に示す患者情報に登録された検査情報のデータ構成を示す図である。 医用画像データベースのデータ構成を示す図である。 診断レポートのデータ構成を示す図である。 類似症例データのデータ構成を示す図である。 スライス画像に設定された関心領域を模式的に示した図である。 情報端末が、医用情報管理システムに対して読影対象検査リストの要求を行ってから、症例検索システムが、情報端末からの類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 読影対象検査リストの表示画面の一例を示す図である。 検査が選択された後の読影対象検査リストの表示画面の一例を示す図である。 症例検索システムが、情報端末からの類似症例検索の要求を受け取った後、情報端末が、症例検索システムからの類似症例検索結果に基づき基本画面を表示するまでの処理を示すシーケンス図である。 図２８のＳ６５０に示す初期の基本画面を生成する処理の詳細を示すフローチャートである。 図２８のＳ１３００で生成される病名リストのデータ構成を示す図である。 病名リスト表示領域の第１表示例を示した図である。 病名リスト表示領域の第２表示例を示した図である。 病名リスト表示領域の第３表示例を示した図である。 図３２に示す病名リスト表示領域の画面遷移を示す図である。 図２９のＳ１４００で生成される分布リストのデータ構成を示す図である。 図２５及び図２８のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。 症例検索システムが画像特徴を抽出する態様を採用した場合の情報端末、医用情報管理システム、及び症例検索システムのブロック図である。 図３７の構成において、情報端末が、関心領域の設定を行ってから、症例検索システムからの類似症例検索結果に基づき基本画面を表示するまでの処理を示すシーケンス図である。 図３７の構成において、情報端末が、医用情報管理システムに対して読影対象検査リストの要求を行ってから、症例検索システムからの類似症例検索結果に基づき基本画面を表示するまでの処理を、アプリケーションのレベルで着目したときのシーケンス図である。 情報端末において、スワイプ操作の入力に基づき、ディスプレイに表示される類似症例を切り替える処理を示すシーケンス図である。 図４０のシーケンス図に対応する処理の内容を示すフローチャートである。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 画像生成部の詳細な構成を示すブロック図である。 表示領域決定部により決定される表示領域の座標を概略的に示す図である。 情報端末において、スワイプ操作により類似症例のサムネイル画像の表示を切り替えた後、一定時間、スワイプ操作を行わなかった場合の処理を示すシーケンス図である。 図５０に示されるシーケンスにおいてディスプレイに表示される基本画面の一例を示す図である。 図５０に示されるシーケンスにおいてディスプレイに表示される基本画面の一例を示す図である。 ユーザが拡大操作を行った後、次の類似症例のサムネイル画像に切り替えるまでの処理を示すシーケンス図である。 図５３のシーケンス図に対応する処理を示すフローチャートである。 ユーザがサムネイル画像に対して行うピンチアウト操作を示す図である。 ユーザがサムネイル画像に対して行うピンチアウト操作を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 ユーザのスワイプ操作により症例表示領域に表示されているサムネイル画像が切り替えられる基本画面を示す図である。 実施の形態２の画像生成部の詳細な構成を示すブロック図である。 拡大率と表示領域との関係を概略的に表す図である。 拡大処理前後の基準サムネイル画像及び次に表示されるサムネイル画像を概略的に示す図である。

（基礎となった知見）
まず、本開示に係る一態様の着眼点について説明する。

特許文献１は、診断対象画像に基づく画像診断時に疾患の判断に有用な症例画像又はその疾患に関する統計情報等を提示する画像診断支援装置を開示する。当該画像診断支援装置による検索結果の画面は、診断対象画像及び疾患別の代表症例の情報を表示する。具体的には、前記検索結果の画面は、ｉ）上位３つの疾患Ａ、Ｄ、Ｇの代表症例の画像、ｉｉ）疾患別に診断対象画像との類似度、登録症例数及び代表症例数、ｉｉｉ）検索件数（検索された疾患の総数）、及び、ｉｖ）一画面に表示できない他の疾患の情報を参照するための「ページ送り」のソフトボタン等を表示する（特許文献１の段落［００６２］から［００６３］及び図６（Ｅ）参照）。

しかし、特許文献１では、検索結果画面（特許文献１の図６（Ｅ）参照）は、「ページ送り」のソフトボタンを有している。従って、次の疾患別の代表症例を見るためには「ページ送り」のソフトボタンを選択して、次頁の検索結果画面を表示させる必要がある。検索結果の数が、例えば２００件から３００件等と膨大である場合、前記ソフトボタンを何回も繰り返し操作する必要がある。また、医師が確認しなければならない膨大な数の画像の中で病変の位置は必ずしも同じ位置にある訳ではない。そのため、医師は、ページを送る度に視線を動かして病変位置を探す必要がある。従って、特許文献１では、診断対象画像を用いて患者の疾患名を判断するにあたって、相当な労力を医師に強いるという問題があった。その結果、医師は、効率的にまたは適切に患者の疾患名を特定できないおそれもある。

非特許文献１は、病変画像を用いて過去の類似症例を検索する機能により、上述のＰＡＣＳなどに蓄積された臨床知識から、瞬時に的確な情報を抽出し提示し、医師の画像診断をサポートする類似症例検索システムを開示する。具体的には、本システムは、検査画像の病変の特徴が類似した症例画像を検索し、類似順に複数表示する。そして、表示された複数の症例画像より１つの参考症例画像を選択し、検査画像と並列に表示する（非特許文献１のｐ．１２「２．２ 本システムの特徴」及びＦｉｇ．３）。

しかし、非特許文献１に開示されたシステムでは、表示されている参考症例画像の中に選択すべき画像がない場合、次の参考症例画像を表示させることになると思われる。しかし、非特許文献１のＦｉｇ．３に示すように、参考症例画像の表示サイズは表示画面全体と比較すると小さい。加えて、医師が確認しなければならない参考症例画像の数は膨大であり、その膨大な数の画像の中で病変の位置は必ずしも同じ位置にあるとは限らない。そのため、医師は、次の参考症例画像を表示させる度に、表示サイズが小さい画像の中において視線を動かして病変位置を探す必要がある。従って、非特許文献１では、検査画像を用いて患者の疾患名を判断するにあたって、相当な労力を医師に強いるという問題があった。その結果、医師は、効率的にまたは適切に、患者の疾患名を特定できないおそれもある。

未だ病名が特定されていない読影対象の医用画像に表れている病変を検討するにあたって、既に病名が特定されている他の医用画像の中で前記読影対象の医用画像と類似する類似医用画像を参照することは有効であると考えられる。しかし、このようなシステムを構築した場合、前記医用画像データベースに膨大な数の医用画像が登録されることになる。このような場合であっても、前記読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示することが望まれる。

以上の考察により、以下の各態様を想到するに至った。

本開示の第１の態様は、
医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末の制御方法であって、
前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す指定情報を検知させ、
前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
前記第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記表示領域に表示させるものである。

前記複数の類似医用画像において、それぞれの前記対応関心領域の位置はばらばらである場合がある。一方、前記対象医用画像の関心領域との関係で前記所定の類似度を有する類似医用画像を受信させている。従って、それぞれの前記対応関心領域の位置が異なると、スワイプ操作毎に、医師は、前記異なる位置にある前記対応関心領域を探すために、目線を移動させる必要がある。このことが、複数の類似医用画像の前記対応関心領域を連続して観察する際に、前記対応関心領域を探すために余計な時間又は手間を取らせ、効率を低下させることがあり得る。

本態様によると、スワイプ操作により類似度が前記第１類似医用画像の次に高い第２類似医用画像を表示させる際、単に前記第２類似医用画像を表示させるのではない。前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記第２類似医用画像を前記表示領域に表示させる。

そのため、スワイプ操作によって第１類似医用画像から第２類似医用画像に前記対応関心領域を連続して観察する場合であっても、医師は、表示される類似医用画像が入れ替わる度に目線の位置を変えて前記対応関心領域を探す必要がない。したがって、それぞれの前記対応関心領域を観察することに医師を集中させることができる。その結果、スワイプ操作によって第１類似医用画像から第２類似医用画像に前記対応関心領域を連続して観察する場合に、観察にかかる身体的負担を軽減し、前記対応関心領域の読影効率を向上させ、診察効率の向上に寄与できる。

また、上記第１の態様において、例えば、
前記第２類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第２類似医用画像の次に高い第３類似医用画像を、前記第３類似医用画像に含まれる前記対応関心領域を前記表示領域の前記所定位置に合わせて、前記表示領域に表示させるようにしてもよい。

本態様によると、スワイプ操作により第２類似医用画像から第３類似医用画像に連続して観察する際、それぞれの前記対応関心領域は前記所定位置に表示されることになる。したがって、医師は、表示される類似医用画像が入れ替わる度に目線の位置を変えて前記対応関心領域を探す必要がない。

また、上記第１の態様において、例えば、
前記第１類似医用画像を前記表示領域に表示させる際に、前記第１類似医用画像に含まれる前記対応関心領域を前記表示領域の前記所定位置に合わせて、前記第１類似医用画像を前記表示領域に表示させるようにしてもよい。

本態様によると、最初に表示されれる類似医用画像である前記第１類似医用画像についても前記対応関心領域が前記所定位置に合わせた状態で表示されることになる。

また、上記第１の態様において、例えば、
前記表示領域の前記所定位置は、前記表示領域の中心に相当する位置を含むようにしてもよい。

本態様によると、前記対応関心領域の位置が前記第１類似医用画像と第２類似医用画像とにおいてばらばらであっても、前記各対応関心領域が例えば前記表示領域の隅に偏った状態で観察するのではなく、前記各対応関心領域を前記表示領域の中心に配置して、前記各対応関心領域の周辺を均等に含めて観察できる。

また、上記第１の態様において、例えば、
前記表示領域の前記所定位置は、前記第１類似医用画像の中での前記第１類似医用画像に含まれる前記対応関心領域の位置を含むようにしてもよい。

本態様によると、最初に表示される類似医用画像である前記第１類似医用画像に含まれる前記対応関心領域の位置が、前記所定位置となる。そのため、医師は、最初に表示される類似医用画像である前記第１類似医用画像に含まれる前記対応関心領域の位置に、目線を合わせて、そのまま継続して、前記第２類似医用画像に含まれる前記対応関心領域を観察できる。

また、上記第１の態様において、例えば、
前記第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記表示領域に表示させる際、前記第２類似医用画像のうち前記表示領域外の部分は非表示とされ、前記表示領域のうち前記第２類似医用画像外の部分には背景画像が表示されるようにしてもよい。

また、上記第１の態様において、例えば、
前記第２類似医用画像が前記表示領域に表示された時点から、前記第２類似医用画像に対するスワイプ操作を所定期間検知しなかった場合、前記第２類似医用画像の表示位置を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせた位置から、前記第２類似医用画像の全体が前記表示領域の全体に表示される位置に移動させるようにしてもよい。

スワイプ操作が行われた後にスワイプ操作が止まった場合、医師は、前記スワイプ操作が止まったときの類似医用画像に関心があると考えることができる。即ち、スワイプ操作の際は多くの類似医用画像をサーチしている状態であり、一方、スワイプ操作が止まった場合は観察している状態である場合が多いと考えられる。

本態様によると、スワイプ操作を所定期間検知しなかった場合、前記スワイプ操作が止まったときの類似医用画像の表示位置を全体が表示される位置に移動させる。これにより、医師は、前記スワイプ操作が止まったときの類似医用画像を通常の表示状態で観察できる。そのため、前記スワイプ操作のときは、前記対応関心領域に注意を集中させてサーチを効率化する。また、前記スワイプ操作が止まったときは、表示中の類似医用画像に含まれる全ての情報を観察させて、診療判断の精度向上に寄与できる。また、スワイプ操作を止めるだけで通常の表示状態に戻す。したがって、通常の表示状態に戻すのに特別な操作は不要となり、操作処理の効率化を図ることができる。

また、上記第１の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるようにしてもよい。

また、上記第１の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるようにしてもよい。

本開示の第２の態様は、
医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末の制御方法であって、
前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す指定情報を検知させ、
前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
前記表示領域の全体に表示されている前記第１類似医用画像に対する拡大操作が検知されると、前記第１類似医用画像を、前記第１類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせて拡大させ、
前記拡大された第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせ、且つ、前記第２類似医用画像に含まれる前記対応関心領域の表示サイズを前記拡大された第１類似医用画像に含まれる前記対応関心領域の表示サイズに合わせて、拡大して前記表示領域に表示させるものである。

前記複数の類似医用画像において、それぞれの前記対応関心領域の位置はばらばらである場合がある。一方、前記対象医用画像の関心領域との関係で前記所定の類似度を有する類似医用画像を受信させている。従って、それぞれの前記対応関心領域の位置が異なると、スワイプ操作毎に、医師は、前記異なる位置にある前記対応関心領域を探すために、目線を移動させる必要がある。このことが、複数の類似医用画像の前記対応関心領域を連続して観察する際に、前記対応関心領域を探すために余計な時間又は手間を取らせ、効率を低下させることがあり得る。

本態様によると、スワイプ操作により類似度が前記第１類似医用画像の次に高い第２類似医用画像を表示させる際、単に前記第２類似医用画像を表示させるのではない。前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記第２類似医用画像を前記表示領域に表示させる。

そのため、スワイプ操作によって第１類似医用画像から第２類似医用画像に前記対応関心領域を連続して観察する場合であっても、医師は、表示される類似医用画像が入れ替わる度に目線の位置を変えて前記対応関心領域を探す必要がない。したがって、それぞれの前記対応関心領域を観察することに医師を集中させることができる。その結果、スワイプ操作によって第１類似医用画像から第２類似医用画像に前記対応関心領域を連続して観察する場合に、観察にかかる身体的負担を軽減し、前記対応関心領域の読影効率を向上させ、診察効率の向上に寄与できる。

また、前記複数の類似医用画像において、それぞれの前記対応関心領域の位置だけではなく、それぞれの前記対応関心領域の大きさも、ばらばらである場合がある。従って、それぞれの前記対応関心領域の位置は同じであっても、次に表示される第２類似医用画像に含まれる前記対応関心領域が小さくなる度合いが、第１類似医用画像と比較して大きいと、医師は、次の第２類似医用画像をより一層凝視する必要がある。また、複数の類似医用画像の前記対応関心領域を連続して観察する際に、同様のサイズで観察できなくなる。このため、医師に余計な時間又は手間を取らせ、読影効率が低下することがあり得る。

本態様によると、前記第１類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせて、前記第１類似医用画像が拡大されて表示されている。この状態で、第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせ、且つ、前記第２類似医用画像に含まれる前記対応関心領域の表示サイズを前記拡大された第１類似医用画像に含まれる前記対応関心領域の表示サイズに合わせて、拡大して前記表示領域に表示させる。

そのため、スワイプ操作によって第１類似医用画像から第２類似医用画像に前記対応関心領域を連続して観察する場合であっても、医師は、表示される類似医用画像が入れ替わる度に目線の位置を変えて前記対応関心領域を探す必要がなく、且つ、同じようなサイズで、それぞれの前記対応関心領域を観察できる。その結果、スワイプ操作によって第１類似医用画像から第２類似医用画像に前記対応関心領域を連続して観察する場合に、観察にかかる身体的負担を軽減し、前記対応関心領域の読影効率を向上させ、診察効率の向上に寄与できる。

また、上記第２の態様において、例えば、
前記第２類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第２類似医用画像の次に高い第３類似医用画像を、前記第３類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせ、且つ、前記第３類似医用画像に含まれる前記対応関心領域の表示サイズを前記拡大された第１類似医用画像に含まれる前記対応関心領域の表示サイズに合わせて、拡大して前記表示領域に表示させるようにしてもよい。

本態様によると、スワイプ操作により前記第２類似医用画像から前記第３類似医用画像まで連続して観察する際、それぞれの前記対応関心領域を前記表示領域の中心に相当する位置に、且つ同様の表示サイズに表示させることができる。

そのため、スワイプ操作によって第２類似医用画像から第３類似医用画像に前記対応関心領域を連続して観察する場合であっても、医師は、表示される類似医用画像が入れ替わる度に目線の位置を変えて前記対応関心領域を探す必要がなく、且つ、同じようなサイズで、それぞれの前記対応関心領域を観察できる。その結果、スワイプ操作によって第２類似医用画像から第３類似医用画像に前記対応関心領域を連続して観察する場合に、観察にかかる身体的負担を軽減し、前記対応関心領域の読影効率を向上させ、診察効率の向上に寄与できる。

また、上記第２の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるようにしてもよい。

また、上記第２の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるようにしてもよい。

本開示の他の態様は、
タッチパネルディスプレイの第１表示領域に表示された第１画像と第２画像を含む複数の画像に代えて、第１変換画像を前記第１表示領域に表示し、
前記第１変換画像は、前記第１画像の第１領域の第３画像を拡大した画像であり、
前記第１変換画像がスワイプされた時、前記第１表示領域に表示された前記第１変換画像に代えて、第２変換画像を前記第１表示領域に表示し、
前記第２変換画像は、前記第２画像の第２領域の第４画像を拡大した画像であり、
前記複数の画像と複数の予め定められた領域は１対１対応し、
前記複数の画像の各々は前記複数の予め定められた領域のうち対応する予め定められた領域を含み、
前記第１領域は前記複数の予め定められた領域に含まれる第１の予め定められた領域を含み、
前記第３画像は前記第１の予め定められた領域に含まれる第５画像を含み、
前記第２領域は前記複数の予め定められた領域に含まれる第２の予め定められた領域を含み、
前記第４画像は前記第２の予め定められた領域に含まれる第６画像を含み、
前記複数の予め定められた領域に含まれる画像のうち、最も特定の画像に類似する画像は前記第５画像であり、
前記複数の予め定められた領域に含まれる画像のうち、２番目に前記特定の画像に類似する画像は前記第６画像であり、
前記第１変換画像が前記第１表示領域に表示される時は、前記第１の予め定められた領域が前記第１表示領域の中心に表示され、
前記第２変換画像が前記第１表示領域に表示される時は、前記第２の予め定められた領域が前記第１表示領域の中心に表示される制御方法である。

（実施の形態１）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。

図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、及び症例検索システム３００を備えている。

情報端末１００、医用情報管理システム２００、及び症例検索システム３００はネットワーク４００を介して相互に通信可能に接続されている。

なお、医用情報管理システム２００及び症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバ等の上で動作するソフトウェアであってもよい。医用情報管理システム２００及び症例検索システム３００が病院内に設置されている場合、ネットワーク４００としては、ローカルエリアネットワークが採用できる。ローカルネットワークとしては、ＩＥＥＥ８０２．３シリーズの有線ＬＡＮ、ＩＥＥＥ８０２．１１シリーズの無線ＬＡＮ、或いは両者が混在するネットワークが採用できる。医用情報管理システム２００及び症例検索システム３００が病院外のサーバを用いて実現される場合、ネットワーク４００としては、インターネットが採用できる。

情報端末１００としては、パーソナルコンピュータやタブレット端末等の情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）や電子カルテシステム等が採用される。

図２は、情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、及び画像生成部１１２を備える。

ディスプレイ１０１は、例えば、タッチパネルを有する液晶モニタにより構成され、診断対象となる医用画像及びカルテ画像を表示すると共に、診断結果を記入するためのレポート入力画像等を表示する。

操作部１０２は、例えばタッチパネルにより構成され、情報端末１００に対してユーザにより入力される種々の操作を受け付ける。例えば、操作部１０２は、ディスプレイ１０１に表示される医用画像及びカルテ画像に対するユーザからの操作、並びにレポート入力画面に対して診断結果を入力する操作等を受け付ける。

入力制御部１０３は、操作部１０２へのユーザの操作を検知すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２から接触物（例えばユーザの指）のタッチパネルへの接触位置の座標データを受け取り、表示制御部１０４で生成されたＧＵＩの座標と比較することにより、ＧＵＩにおけるボタンオブジェクトが選択されたか否かを判定し、他の構成要素に操作内容を通知する。

表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。

ＲＯＩ管理部１０５は、類似症例検索を行う際に、後述する検索クエリ画像に対して設定される関心領域（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を示す関心領域情報を生成してメモリに格納し、関心領域情報を管理する。

病名リスト管理部１０８は、症例表示領域７１０（図５）に表示された類似症例の病名リスト（図３０）を生成してメモリに格納し、病名リストを管理する。

分布リスト管理部１０９は、症例表示領域７１０に表示された類似症例の病変分布を示す分布リスト（図３５）を生成してメモリに格納し、分布リストを管理する。

通信制御部１１０は、例えば、情報端末１００をネットワーク４００に接続するための通信装置を含み、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１１０は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。

画像生成部１１２は、事前に作成された類似症例のサムネイル画像を取得し、ユーザの操作内容に応じて、ディスプレイ１０１への表示領域を変更したサムネイル画像を生成し、生成したサムネイル画像を表示制御部１０４に出力する。

画像生成部１１２は、入力制御部１０３から、操作部１０２へのユーザ操作内容を取得する。画像生成部１１２は、類似症例検索部３０３からは類似症例データ（類似度、関心領域情報）を、通信制御部１１０を介して受信する。ユーザがスワイプ操作を行った場合には、画像生成部１１２は、類似症例のサムネイル画像における対応関心領域の中心座標が、サムネイル画像が表示される表示領域の中心位置に一致するように、サムネイル画像を生成する。スワイプ操作に基づくサムネイル画像の生成については後に詳述する。

図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、及び通信制御部２０６を備える。

患者情報蓄積部２０１は、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録された患者情報１０００（図１９）を蓄積する。

患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された患者情報１０００（図１９）に対して、ユーザから入力されたデータを登録して患者情報１０００を更新する処理、及び患者情報１０００を表示制御部１０４に出力する処理等を実行し、患者情報１０００を管理する。医用画像データ蓄積部２０３は、患者の検査画像である医用画像データを蓄積する。

医用画像データ管理部２０４は、医用画像データを医用画像データ蓄積部２０３に蓄積し、医用画像データを管理する。

診断レポート管理部２０５は、患者に対して行われた各検査に対する医師による診断結果を示す診断レポート３０００（図２２）を管理する。

通信制御部２０６は、例えば、医用情報管理システム２００をネットワーク４００に接続するための通信装置を含み、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。

図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、及び類似症例検索部３０３を備える。

類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている類似症例のうち、類似症例検索の対象データとして選定された多数の類似症例から抽出された画像特徴や、生成されたサムネイル画像等が登録された類似症例データ４０００（図２３）を蓄積する。

画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。

画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。なお、関心領域情報は、関心領域を示す指定情報の一例である。

類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された１以上の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。

通信制御部３０４は、例えば、症例検索システム３００をネットワーク４００に接続させる通信装置で構成され、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。

図３は、情報端末１００の実装形態の構成例を示す図である。図３に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。

アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。

ここで、アプリケーション５０１は、医用情報管理アプリケーション及び類似症例検索アプリケーションを含む。医用情報管理アプリケーションは、情報端末１００を医用情報管理システム２００と連携させるためのアプリケーションであり、類似症例検索アプリケーションは、情報端末１００を症例検索システム３００と連携させるためのアプリケーションである。そして、両アプリケーションは、相互にデータを送受し、情報端末１００において、医用情報管理システム２００及び症例検索システム３００が提供するサービスを統合させる。

ＯＳ５０２は、情報端末１００の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。

情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、及び画像生成部１１２の機能が実現される。

但し、本実施の形態では、情報端末１００は、アプリケーション５０１のみ単独で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。

図４は、情報端末１００にて、医師が診断画像を閲覧するときにディスプレイ１０１に表示される閲覧画面Ｋ１の一例を示す図である。図４に示すように、ディスプレイ１０１に表示された情報端末１００の基本画面は、１つの医用画像ビューワ７０５、読影対象検査リストボタン７０１、ＲＯＩ入力ボタン７０２、類似症例検索ボタン７０３、読影レポート入力ボタン７０４、スクロールバー７０６を含む。

医用画像は、通常、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ ＣＯｍｍｕｎｉｃａｔｉｏｎ ｉｎ Ｍｅｄｉｃｉｎｅ）フォーマットで記録されている。医用画像ビューワ７０５は、ＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、多数の断層画像（以下、「スライス画像」ともいう）で構成される胸部ＣＴ画像とする。但し、これは一例に過ぎず、他の部位（例えば、頭部、腹部、脚、或いは腕）のＣＴ画像が採用されてもよい。

医用画像ビューワ７０５に表示された胸部ＣＴ画像は、タッチパネルへの操作により、スライス画像が切り替えられる。ここで、胸部ＣＴ画像を構成するスライス画像は、例えば、首側から腹側に向かう順番に配置されている。

なお、医用画像としては、胸部ＣＴ画像に代えて、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像が採用されてもよい。また、図４の例では、医用画像ビューワ７０５に表示される医用画像の表示数は１個とされているが、これは一例にすぎず、２個や４個など別の個数が採用されてもよい。医用画像ビューワ７０５に表示される個数が多くなると同時に比較できる医用画像が増えるが、１画像当たりの表示面積が狭くなる。このため、医用画像の表示数は、ディスプレイ１０１の表示サイズに応じて適宜変更可能な構成を採用すればよい。なお、ユーザまたは管理者が、医用画像の表示数の設定を自由に変更できるものとする。

類似症例検索アプリケーションが起動される前には、医用画像ビューワ７０５には、類似症例検索を起動する元となる、ある患者の胸部ＣＴ画像が表示されている。特に、胸部ＣＴ画像のうち、読影者が類似症例検索を起動する際のスライス位置の画像（すなわち、検索クエリ画像）が表示されている。なお、表示制御部１０４は、検索クエリ画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を重畳表示してもよい。検索クエリ画像は、読影対象の医用画像である対象医用画像の一例である。

読影対象検査リストボタン７０１は、ディスプレイ１０１の表示画面を、図４の診断画像の閲覧画面Ｋ１から、読影対象を選択する読影対象検査リストの表示画面Ｋ５（後述の図２６）に変更するためのボタンである。

ＲＯＩ入力ボタン７０２は、医師が類似症例検索を行う際、医用画像ビューワ７０５に表示されている検索クエリ画像に関心領域を入力できる状態に切り替えるためのボタンである。ＲＯＩ入力ボタン７０２をタップしたあと、タッチパネルに座標を入力することにより、図４に示す関心領域ＲＯＩを入力することができる。

類似症例検索ボタン７０３は、類似症例検索アプリケーションを起動するためのボタンである。ユーザが、関心領域ＲＯＩを入力した後、類似症例検索ボタン７０３をタップすることにより、類似症例検索アプリケーションが起動される。

読影レポート入力ボタン７０４は、図４の診断画像の閲覧画面Ｋ１から、診断レポート３０００（後述の図２２）を作成するための作成画面に表示画面を変更するためのボタンである。

なお、読影対象検査リストボタン７０１、ＲＯＩ入力ボタン７０２、類似症例検索ボタン７０３、読影レポート入力ボタン７０４は、一例である。それぞれ、ボタン以外の入力方法で入力するようにしてもよい。

スクロールバー７０６は、医用画像ビューワ７０５に表示されている医用画像を別のスライス画像に切り替えるために用いられる。表示制御部１０４は、スクロールバー７０６の位置に対応する位置のスライス画像を表示する。

例えば、ユーザが接触物（例えばユーザの指）でスクロールバー７０６に接触し、接触した状態で接触物を上向き又は下向きに移動させると、上記接触及び移動を入力制御部１０３が検知する。すると、表示制御部１０４は、接触物の移動に応じてスクロールバー７０６の表示位置を移動させる。また、表示制御部１０４は、スクロールバー７０６の表示位置に応じた位置のスライス画像に、医用画像ビューワ７０５に表示されているスライス画像を切り替える。

図４のスライス位置表示部７０５Ａには「２４／８２」と表示されている。これは、図４の医用画像ビューワ７０５に表示されている医用画像は８２枚のスライス画像を含むことと、図４のスライス画像は、８２枚のスライス画像のうち２４番目のスライス画像であることとを表す。

図５は、情報端末１００にて、類似症例検索アプリケーションが起動された後にディスプレイ１０１に表示される基本画面Ｋ２の一例を示す図である。図５に示すように、類似症例検索アプリケーションが起動されると、診断中の医用画像（読影対象の医用画像である対象医用画像）の閲覧画面Ｋ１（図４）から、類似症例のサムネイル画像を表示する基本画面Ｋ２に切り替わる。図５に示すように、ディスプレイ１０１に表示された基本画面Ｋ２（表示画面の一例）は、対象表示領域７０８、症例表示領域７１０（表示領域の一例）、病名リスト表示領域７３０、分布リスト表示領域７５０を備える。

対象表示領域７０８は、類似症例検索を行う元となった検索クエリ画像（対象医用画像）を表示する領域である。

症例表示領域７１０は、検索クエリ画像に類似した類似症例のサムネイル画像を類似度順に表示する領域である。ここで、類似症例のサムネイル画像は、類似医用画像の一例である。

例えばタブレットなどのタッチパネルを有するディスプレイ１０１は、表示領域が大きくない場合が多い。その場合、多数の類似症例のサムネイル画像を並べて表示すると、１つのサムネイル画像の表示サイズが小さくなってしまい、類似症例の閲覧性が悪くなる。そのため、症例表示領域７１０の基本画面では、図６Ａ（後述）に示すように、検索クエリ画像に最も類似する類似症例のサムネイル画像を１枚表示する。

症例表示領域７１０には、ＤＩＣＯＭ画像から解像度や画素値の変換を行った画像が表示される。また、症例表示領域７１０には多数の類似症例が表示されるため、解像度や画素値の変換をその場で行うと処理に時間がかかってしまう。よって、初期画面におけるサムネイル画像は、予めオリジナルのＤＩＣＯＭ画像から作成され、症例検索システム３００に保存されている。

以下、解像度や画素値の変換について少し補足する。オリジナルのＣＴ画像（スライス画像）の解像度は５１２×５１２画素であるが、サムネイル画像はより低解像であるため、解像度変換を行う必要がある。そこで、サムネイル画像は、元となるＣＴ画像（スライス画像）に対して低解像度処理及び階調変換処理が行われて生成される。

階調変換処理は例えば、下記のように行われる。ＣＴで取得したＤＩＣＯＭ画像（スライス画像）では、各画素値（ＣＴ値）が−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ Ｕｎｉｔ）の２０００階調の値をとり、そのままでは通常の８ビット階調のディスプレイには表示できない。また、表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約−９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜−５０ＨＵ）、水（ＣＴ値：０ＨＵ）、及び骨（ＣＴ値：１０００ＨＵ）を人間が肉眼で区別することは難しい。

よって、通常、スライス画像は、各画素値に対してウィンドウレベル及びウィンドウ幅が設定され、８ビットの画素値に再構成されて、ディスプレイに表示される。ここで、ウインドウレベルは、ウインドウの中心となるＣＴ値を示し、ウインドウ幅は、ウインドウ中心の上下の幅を示す。

例えば、肺野条件でＤＩＣＯＭ画像が再構成される場合、ウインドウレベルが−５５０〜−８００に設定され、ウインドウ幅が１０００〜１６００に設定される。したがって、サムネイル画像も、元となるスライス画像から上記の処理によって画素値が８ビットに落とされることで生成される。

なお、基本画面Ｋ２（図５）で症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が所定の閾値以下の類似症例を示すサムネイル画像である。基本画面Ｋ３（後述の図６Ａ）で症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が最も短い類似症例を示すサムネイル画像である。ここでは距離としては、例えば、ユークリッド距離が用いられる。なお、距離としては、市街地距離等の別の距離尺度が採用されてもよい。比較対象となる２つの画像は、距離が近いほど類似している。また、特徴ベクトルは、サムネイル画像から得られたものではなく、元画像であるＤＩＣＯＭ画像から得られたものが採用される。

図５において、基本画面Ｋ２の例えば左上には、検索結果件数表示領域７１４が配置されている。検索結果件数表示領域７１４には、検索処理の結果、症例検索システム３００から取得された、診断対象症例に類似する類似症例の数が表示される。

なお、類似症例の数が膨大である場合、症例表示領域７１０は全ての類似症例を一度に表示することができない。そこで、症例表示領域７１０の例えば右側には、上下方向に長尺のスクロールバー７１６が設けられている。表示制御部１０４は、スクロールバー７１６の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を上下方向にスクロール表示させる。これにより、ユーザは、非表示状態にあった類似症例を症例表示領域７１０に表示させ、その類似症例を観察できる。

なお、スクロールバー７１６は左右方向に長尺であってもよい。この場合、表示制御部１０４は、スクロールバー７１６の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を左右方向にスクロール表示させればよい。

なお、情報端末１００は、検索クエリ画像との距離が所定の閾値以下のサムネイル画像を症例検索システム３００から取得するとしたが、これは一例に過ぎない。例えば、情報端末１００は、類似度が高い順に、常に一定数のサムネイル画像を症例検索システム３００から取得してもよい。或いは、情報端末１００は、常にある確定診断病名のサムネイル画像が一定数含まれるようにサムネイル画像を症例検索システム３００から取得してもよい。

なお、症例表示領域７１０におけるサムネイル画像の表示手法としては、例えば、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法が採用できる。つまり、症例表示領域７１０において、左上から右下に向けて蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法が採用できる。

もちろん、本実施の形態は別の表示手法が採用されてもよい。例えば、左から１列目の上端に距離が最短のサムネイル画像を表示し、下側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一列の下端に達すると、左から２列目の上端に次に距離が大きいサムネイル画像を表示するという表示手法が採用されてもよい。また、これら複数の表示手法をユーザが切り替え可能な構成が採用されてもよい。

また、上記の例では、距離として、特徴ベクトルに対する距離が採用されたが、特徴量に対する距離でもよい。また、上記の例では、類似度として距離が採用されたが、コサイン類似度のような画像同士の類似性を示す指標であればどのような指標が採用されてもよい。コサイン類似度が採用された場合、値が１に近づくにつれて比較対象となる２つの画像の類似性が高くなる。

なお、詳細は後述するが、症例表示領域７１０に表示する類似症例は、病名リスト表示領域７３０に表示された病名や、分布リスト表示領域７５０に表示された病変分布で絞り込むことができる。現在設定されている類似症例の絞込条件は、表示条件表示領域７１５に表示される。図５の例では、類似症例検索直後の状態であり、何も絞り込みがなされていないため、表示条件表示領域７１５には「全疾患」と表示されている。

図６Ａは、ディスプレイ１０１に表示される基本画面Ｋ３の一例を示す図である。図５に示される基本画面Ｋ２において、ユーザが、いずれかのサムネイル画像を接触物（例えばユーザの指）で例えばダブルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図６Ａに示されるように、選択されたサムネイル画像が症例表示領域７１０の全体に表示された基本画面Ｋ３をディスプレイ１０１に表示する。

図６Ａに示される症例表示領域７１０の下部には、確定診断病名表示領域７１１、距離表示領域７１２、及び類似順位表示領域７１３が配置されている。確定診断病名表示領域７１１には、対象となる類似症例の確定診断病名が表示される。確定診断病名とは、対象となる類似症例に対して診断が確定された病名を指す。距離表示領域７１２には、対象となる類似症例のスライス画像の特徴ベクトルと、検索クエリ画像の特徴ベクトルとの距離が表示される。類似順位表示領域７１３には、対象となる類似症例と検索クエリ画像との類似度の順位が表示される。

図６Ａの例では、確定診断病名表示領域７１１には、「肺膿瘍」と表示されているため、このサムネイル画像は「肺膿瘍」と確定診断がされた類似症例のサムネイル画像を示す。また、距離表示領域７１２には、「０．０５」と表示されているため、この類似症例のスライス画像と検索クエリ画像との距離が「０．０５」であることが示されている。また、類似順位表示領域７１３には、「１／６２」と表示されているため、この類似症例は、６２件のうちで最も検索クエリ画像との類似度が高いことが示されている。すなわち、図６Ａの例は、図５に示される基本画面Ｋ２において、ユーザが、１行１列目のサムネイル画像を選択したことを表している。

図６Ａに示されるように、症例表示領域７１０に表示されるサムネイル画像は、対応関心領域ＣＲＯＩを含む。対応関心領域ＣＲＯＩは、検索クエリ画像（読影対象の医用画像）に設定された関心領域ＲＯＩ（図４）に対応する領域（つまり関心領域に類似する領域）である。なお、以下では、対応関心領域は、単に「関心領域」とも称される。

図６Ａに示される症例表示領域７１０の上部には、スクロールバー７０７が配置されている。スワイプ操作によって、症例表示領域７１０に表示される類似症例を別の類似症例に切り替えることができる。スワイプ操作による類似症例の切り替えについては、後に詳述される。

スクロールバー７０７は、検索された類似症例の全件における、症例表示領域７１０に表示されている類似症例の類似度の位置を表す。図６Ａの例では、類似順位表示領域７１３に「１／６２」と表示されている通り、最も類似度の高い類似症例が、症例表示領域７１０に表示されている。このため、スクロールバー７０７は、左端に位置している。

図６Ａに示される基本画面Ｋ３において、ユーザが、症例表示領域７１０に表示されているサムネイル画像を接触物で例えばシングルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図５に示される基本画面Ｋ２をディスプレイ１０１に表示する。

図６Ｂは、ＤＩＣＯＭビューワモードでの基本画面Ｋ４の一例を示す図である。図６Ａに示される基本画面Ｋ３において、ユーザが、症例表示領域７１０に表示されているサムネイル画像を接触物で例えばダブルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図６Ｂに示されるように、ＤＩＣＯＭビューワモードでの基本画面Ｋ４をディスプレイ１０１に表示する。

図６Ｂに示されるように、症例表示領域７１０に表示されているサムネイル画像の上部には、スライス番号表示領域７１０Ａとモード表示領域７１０Ｂとが配置されている。また、症例表示領域７１０の右側には、スクロールバー７０６が配置されている。モード表示領域７１０Ｂには、「Ｍｏｄｅ：ＤＩＣＯＭ Ｖｉｅｗｅｒ」と表示され、ＤＩＣＯＭビューワモードであることが示されている。

スライス番号表示領域７１０Ａには、現在表示されているサムネイル画像のスライス番号が表示される。図６Ｂの例では、スライス番号表示領域７１０Ａに、「３２／７５」と表示されている。図６Ｂのスライス番号表示領域７１０Ａは、図６Ｂに示されている類似症例（つまり図５の１行１列目の類似症例）が、７５枚のスライス画像を含むことを表す。また、図６Ｂのスライス番号表示領域７１０Ａは、図６Ｂに示されているサムネイル画像が、７５枚のうちの３２番目のスライス画像であることを表す。

ここで、図６ＢのＤＩＣＯＭビューワモードの利用目的が説明される。図５に示されるように、類似症例検索アプリケーションの起動後に表示される基本画面Ｋ２には、対応関心領域ＣＲＯＩを有するスライス画像がサムネイル画像として表示される。ユーザは、対応関心領域ＣＲＯＩを有するスライス画像の前後のスライス画像を確認したい場合に、図６ＢのＤＩＣＯＭビューワモードの基本画面Ｋ４を表示させる。

図６Ｂにおいて、ユーザが接触物でスクロールバー７０６に接触し、接触した状態で接触物を上向き又は下向きに移動させると、上記接触及び移動を入力制御部１０３が検知する。すると、表示制御部１０４は、接触物の移動に応じてスクロールバー７０６の表示位置を移動させる。また、表示制御部１０４は、スクロールバー７０６の表示位置に応じた位置のスライス画像に、症例表示領域７１０に表示されているサムネイル画像を切り替える。この操作によって、ユーザは、対応関心領域ＣＲＯＩを有するスライス画像の前後のスライス画像を確認することができる。

図６Ｂに示されるＤＩＣＯＭビューワモードでの基本画面Ｋ４において、ユーザが、症例表示領域７１０に表示されているサムネイル画像を接触物で例えばダブルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図６Ａに示される基本画面Ｋ３をディスプレイ１０１に表示する。なお、例えば図６Ｂに示されるＤＩＣＯＭビューワモードでの基本画面Ｋ４に「戻るボタン」を表示してもよい。この「戻るボタン」が選択されると、図６Ｂに示されるＤＩＣＯＭビューワモードでの基本画面Ｋ４から図６Ａに示される基本画面Ｋ３に戻るようにしてもよい。

図５に戻って、基本画面Ｋ２の左側の上段には、「病名リスト」との見出しが付けられた病名リスト表示領域７３０が配置されている。病名リスト表示領域７３０には、類似症例の検索結果として取得された全ての類似症例の確定診断病名が表示される。診断対象症例は、診断が終了して確定診断病名が付与された後、類似症例として、症例検索システム３００に蓄積される。したがって、各類似症例には、それぞれ、診断によって付与された確定診断病名が予め付与されている。

図７は、病名リスト表示領域７３０の拡大図である。図７では、確定診断病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２、７３３、７３５、７３６、７３８、７３９、７４０、７４２、７４３、７４５）とに分けて表示されている。図７の例では、大分類の病名として、真菌症７３１（ｍｙｃｏｓｉｓ）、腫瘍性７３４（ｎｅｏｐｌａｓｔｉｃ）、非腫瘍性７３７（ｎｏｎｎｅｏｐｌａｓｔｉｃ）、ミコバクテリア症７４１（ｍｙｃｏｂａｃｔｅｒｉｏｓｉｓ）、及びその他７４４が表示されている。

また、図７の例では、真菌症７３１の詳細分類の病名として、アスペルギルス症７３２（ａｓｐｅｒｇｉｌｌｏｓｉｓ）、クリプトコッカス症７３３（ｃｒｙｐｔｏｃｏｃｃｏｓｉｓ）が表示されている。また、腫瘍性７３４の詳細分類の病名として、原発性肺癌７３５（ｌｕｎｇ ｃａｎｃｅｒ）、転移性肺癌７３６（ｍｅｔａｓｔａｔｉｃ ｌｕｎｇ ｃａｎｃｅｒ）が表示されている。また、非腫瘍性７３７の詳細分類の病名として、肺膿瘍７３８（ｌｕｎｇ ａｂｓｃｅｓｓ）、サルコイドーシス７３９（ｓａｒｃｏｉｄｏｓｉｓ）、敗血性塞栓７４０（ｓｅｐｔｉｃ ｅｍｂｏｌｉ）が表示されている。また、ミコバクテリア症７４１の詳細分類の病名として、非結核性抗酸菌症７４２（ＮＴＭ：ｎｏｎｔｕｂｅｒｃｕｌｏｕｓ ｍｙｃｏｂａｃｔｅｒｉａ）、肺結核７４３（ｔｕｂｅｒｃｕｌｏｓｉｓ）が表示されている。また、その他７４４の詳細分類の病名として気管支拡張症７４５（ｂｒｏｎｃｈｉｅｃｔａｓｉｓ）が表示されている。

また、大分類の病名及び詳細分類の病名の横には、その病名の症例数が表示されている。ユーザは、この病名リスト表示領域７３０における大分類の病名または詳細分類の病名の任意の行を選択することで、症例表示領域７１０に表示される類似症例を絞り込むことができる。図５に示すように類似症例の検索直後の状態では、多様な疾患を含む６２個の類似症例が表示対象になっているが、図７の真菌症７３１の行が接触物でタップされた場合、表示制御部１０４は、図８に示すように真菌症の類似症例のみを症例表示領域７１０に表示する。また、図７の転移性肺癌７３６の行が接触物でタップされた場合は、表示制御部１０４は、図９に示すように、転移性肺癌の類似症例のみを症例表示領域７１０に表示する。

この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例がどのような絞り込み条件であるが分かるように、表示条件表示領域７１５に、絞り込んだ病名を表示する。図８は、「真菌症」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。図９は、「転移性肺癌」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。

図８の例では、「真菌症」で絞り込みがかけられたため、表示条件表示領域７１５には「真菌症」と表示され、図９の例では「転移性肺癌」で絞り込みがかけられたため、表示条件表示領域７１５には「転移性肺癌」と表示されている。

また、この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例の件数が分かるように、検索結果件数表示領域７１４にその件数を表示する。図８の例では、「真菌症」に該当する類似症例は１４件であったため、検索結果件数表示領域７１４には１４件と表示され、図９の例では、「転移性肺癌」に該当する類似症例は３件であったため、検索結果件数表示領域７１４には３件と表示されている。

この機能により、画像診断の対象として医師が想定する病名のみの類似症例が症例表示領域７１０に表示され、医師は、診断対象症例が想定した病名と矛盾しないかどうかを容易に確認できる。

図１０、図１１は、ディスプレイ１０１に表示される基本画面Ｋ３の一例を示す図である。図８に示される基本画面Ｋ２において、ユーザが、例えば１行１列目のサムネイル画像を接触物で例えばダブルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図１０に示されるように、選択されたサムネイル画像が症例表示領域７１０の全体に表示された基本画面Ｋ３をディスプレイ１０１に表示する。同様に、図９に示される基本画面Ｋ２において、例えば１行１列目のサムネイル画像が選択されると、図１１に示される基本画面Ｋ３が表示される。

図１０、図１１に示される基本画面Ｋ３は、図６Ａに示される基本画面Ｋ３と同様の表示画面であり、画面遷移も同様に行われる。

すなわち、図１０に示される基本画面Ｋ３において、ユーザが、症例表示領域７１０に表示されているサムネイル画像を接触物で例えばシングルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図８に示される基本画面Ｋ２をディスプレイ１０１に表示する。同様に、図１１に示される基本画面Ｋ３において、シングルタップされると、図９に示される基本画面Ｋ２が表示される。

また、図１０、図１１に示される基本画面Ｋ３において、ユーザが、症例表示領域７１０に表示されているサムネイル画像を接触物で例えばダブルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、それぞれ、ＤＩＣＯＭビューワモードでの基本画面Ｋ４をディスプレイ１０１に表示する。

図５に戻って、基本画面Ｋ２の左側の中段には、「病変分布」との見出しが付けられた分布リスト表示領域７５０が配置されている。分布リスト表示領域７５０には、類似症例を検索した結果、症例検索システム３００から取得された全ての類似症例の病変分布の種類が表示される。

図１２は分布リスト表示領域７５０の拡大図である。図１２の例では、７つの病変分布の名称が表示されており、各病変分布の名称の左側にはチェックボックスが配置されている。図１２の例では病変分布として、びまん性７５１（ｄｉｆｆｕｓｅ）、区域性７５２（ｓｅｇｍｅｎｔａｌ）、気道性７５３（ｂｒｏｎｃｈｉａｌ）、両側性７５４（ｂｉｌａｔｅｒａｌ）、多発性７５５（ｍｕｌｔｉｐｌｅ）、胸膜下７５６（ｓｕｂｐｌｅｕｒａｌ）、及び血行性７５７（ｈｅｍａｔｏｇｅｎｏｕｓ）が表示されている。

これらの病変分布は予め定義されており、各類似症例には、予め、びまん性７５１〜血行性７５７のいずれに該当するか否かを示す分布フラグ値（該当：１、非該当：０）が付与されている。類似症例によっては、全ての分布フラグ値が非該当（：０）に設定されている場合もあれば、複数の分布フラグ値が該当（：１）に設定されている場合もある。

本実施の形態の症例検索システム３００は、ユーザが診断対象症例のスライス画像に設定した関心領域に対し、類似する関心領域を持つ類似症例を検索する。ユーザが関心領域を設定したスライス画像以外にも、病変は存在することもある。そして、ユーザは関心領域を設定したスライス画像で類似症例を検索した後、そのスライス画像以外のスライス画像と、検索された類似症例とを比較したい場合もある。この場合、ユーザは、医用画像ビューワ７０５（図４）において、スライス送りの操作を入力して他のスライス画像を表示させ、検索された類似症例と比較する作業を行う。この場合、検索された全ての類似症例のうち注目する病変に関連する類似症例のみが症例表示領域７１０に表示されていれば、関心領域が設定されたスライス画像以外のスライス画像の中から所望の病変を持つスライス画像を抽出する作業をスムーズに行うことができる。そこで、本実施の形態では、この作業をよりスムーズに行うために、検索された類似症例を所望の病変分布で絞りこむ機能が設けられている。

本実施の形態では、肺野領域内での病変分布として、図１２のびまん性７５１〜血行性７５７で示す病変分布が採用されている。また、図１２のように、チェックボックス及び病名分布の名称について、表示制御部１０４は、絞り込みが可能な病変分布をアクティブ状態で表示し、絞り不可能な病変分布を非アクティブ状態で表示する。ここでは、アクティブ状態としては、輝度が非アクティブ状態に比べて高い状態が採用され、非アクティブ状態としては、輝度がアクティブ状態に比べて低い状態が採用されている。

図１２の例では、びまん性７５１、気道性７５３〜血行性７５７がアクティブ状態で表示され、区域性７５２は、非アクティブ状態で表示されている。これは、現在、類似症例の検索によって取得された全ての類似症例のうち、少なくともいずれか１つの類似症例において、びまん性７５１、気道性７５３〜血行性７５７の分布フラグ値が１（該当）に設定され、取得された全ての類似症例のうち、いずれの類似症例においても、区域性７５２の分布フラグ値が０（非該当）に設定されていたからである。

アクティブ状態のチェックボックスのうち、１以上のチェックボックスにチェックマークが入力されたことを入力制御部１０３が検知すると、表示制御部１０４は、チェックマークが入力された病変条件に該当する類似症例のみを症例表示領域７１０に表示させる。

なお、区域性７５２については、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）に設定されている。そのため、区域性７５２にチェックマークが入力可能な構成を採用すると、これらの病変分布にチェックマークを入力した場合、症例表示領域７１０には類似症例が何も表示されず、チェックマークを入力する意味が無くなってしまう。そこで、本実施の形態では、このような事態を避けるために、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）である病変分布は非アクティブ状態で表示する。

図１３は、両側性７５４のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図１４Ａは、両側性７５４の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図１３に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図１４Ａに示すように、症例表示領域７１０に、両側性の病変分布を持つ類似症例のみを表示する。この例では、両側性の病変分布を持つ類似症例は１０件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１４に「１０件」と表示している。また、表示制御部１０４は、表示条件表示領域７１５に、表示対象の病名と、病変分布の名称である「両側性」とを表示する。図１４Ａの例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１５には「全疾患」と表示されている。

図１４Ｂは、ディスプレイ１０１に表示される基本画面Ｋ３の一例を示す図である。図１４Ａに示される基本画面Ｋ２において、ユーザが、例えば１行１列目のサムネイル画像を接触物で例えばダブルタップすることにより選択すると、その選択を入力制御部１０３が検知する。すると、表示制御部１０４は、図１４Ｂに示されるように、選択されたサムネイル画像が症例表示領域７１０の全体に表示された基本画面Ｋ３をディスプレイ１０１に表示する。図１４Ｂに示される基本画面Ｋ３は、図６Ａに示される基本画面Ｋ３と同様の表示画面であり、画面遷移も同様に行われる。

同様に、多発性７５５のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、多発性の病変分布を持つ類似症例のみを表示する。同様に、びまん性７５１のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、びまん性の病変分布を持つ類似症例のみを表示する。同様に、血行性７５７のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、血行性の病変分布を持つ類似症例のみを表示する。

図１５は、気道性７５３のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図１６は、気道性７５３の病変分布で絞り込みがかけられた基本画面において、１行１列目のサムネイル画像が選択されたときに表示される基本画面Ｋ３を示した図である。図１５に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、気道性の病変分布を持つ類似症例のみを表示する。そして、１行１列目のサムネイル画像が選択されると、図１６に示されるように、選択されたサムネイル画像が症例表示領域７１０の全体に表示される。図１６の例では、気道性の病変分布を持つ類似症例は１２件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１４に「１２件」と表示している。また、表示制御部１０４は、表示条件表示領域７１５に、表示対象の病名と、病変分布の名称である「気道性」とを表示する。図１６の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１５には「全疾患」と表示されている。

同様に、区域性７５２のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、区域性の病変分布を持つ類似症例のみを表示する。

図１７は、胸膜下７５６のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図１８は、胸膜下７５６の病変分布で絞り込みがかけられた基本画面において、１行１列目のサムネイル画像が選択されたときに表示される基本画面Ｋ３を示した図である。図１７に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、胸膜下の病変分布を持つ類似症例のみを表示する。そして、１行１列目のサムネイル画像が選択されると、図１８に示されるように、選択されたサムネイル画像が症例表示領域７１０の全体に表示される。図１８の例では、胸膜下の病変分布を持つ類似症例は７件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１４に「７件」と表示している。また、表示制御部１０４は、表示条件表示領域７１５に、表示対象の病名と、病変分布の名称である「胸膜下」とを表示する。図１８の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１５には「全疾患」と表示されている。

図１９は、患者情報１０００のデータ構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報管理部２０２により、患者別に患者情報蓄積部２０１に蓄積されて管理される。患者情報１０００には、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録されている。図１９に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、及び確定診断１９００を備える。

患者ＩＤ１１００は、患者に固有の識別子である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、及び主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、及び主訴である。検査情報１８００は、図２０に示すように、当該患者が過去に受けた１以上の検査に関する情報を表す。

図２０は、図１９に示す検査情報１８００のデータ構成を示す図である。検査情報１８００は、患者に対して行われた検査に関する情報であり、１つの検査に対応して１つずつ作成される。検査情報１８００は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、及び検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別子である。検査日時１８２０は、検査が行われた日時である。検査種１８３０は、検査の種類である。検査の種類としては、例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影等がある。

検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ、及びＧＰＴ等各種指標の値が該当する。また、検査結果１８４０は、各種指標を基に医師が下した判断等も該当する。また、単純Ｘ線撮影やＣＴ撮影等の画像検査であれば、撮影された画像へのポインタ情報や画像診断結果のレポートへのポインタ情報が含まれる。なお、検査で撮影された画像は、ＤＩＣＯＭのフォーマットで医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積される。

また、検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、これらの医用画像データは医用情報管理システム２００の医用画像データ蓄積部２０３が記憶する医用画像データベース２０００に蓄積される。

図２１は、医用画像データベース２０００のデータ構成を示す図である。医用画像データベース２０００は、検査ＩＤ１８１０及びシリーズＩＤ２１００を持つ。１回の検査で、複数の種類の撮影（例えば、単純ＣＴと造影ＣＴ等）が行われる場合があるので、１つの検査ＩＤ１８１０に対し、複数のシリーズＩＤ２１００が対応付けられている場合もある。つまり、撮影の種類に応じた個数のシリーズが得られるのである。

また、シリーズは、撮影の種類以外にも、撮影された画像の再構成の条件毎に得られる。例えば、撮影された画像が肺野条件及び縦隔条件で再構成された場合、これらの条件毎に１つのシリーズが得られる。なお、肺野条件で再構成された画像は肺の中の血管、気管支、及び肺胞等が強調表示される。また、縦隔条件で再構成された画像は、血管やリンパ節等の縦隔が強調表示される。肺野条件及び縦隔条件は１度の撮影で得られた画像を再構成することで得られるため、単純ＣＴと造影ＣＴとで２度の撮影が行われ、これら２度の撮影のそれぞれにつき肺野条件及び縦隔条件で画像が再構成された場合、２つの肺野条件のシリーズが得られ、２つの縦隔条件のシリーズが得られる。

ＣＴ及びＭＲＩの画像検査の場合、１回の撮影で複数のスライス画像が取得されるので、１つのシリーズＩＤ２１００には、複数のスライスＩＤ２２００が対応付けられている。図２１の検査ＩＤ「１３２２７９８９」には２つのシリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」が対応付けられているため、この検査から２つのシリーズのＣＴ画像が得られたことが分かる。また、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のそれぞれに対して、スライスＩＤ２２００が複数対応付けられていることが分かる。

検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５には、図２２に示すような診断レポート３０００が蓄積される。診断レポート３０００には、各検査に対する医師による診断結果が登録されている。

図２２は、診断レポート３０００のデータ構成を示す図である。診断レポート３０００は、検査ＩＤ１８１０、所見３１００、及び診断３２００を備える。検査ＩＤ１８１０は、図２０で示した検査ＩＤ１８１０と同じである。これにより、診断レポート３０００と検査情報１８００とが対応付けられる。所見３１００は、検査に対する医師の所見を示す文言が登録されている。診断３２００は、検査に対する医師の診断を示す文言が登録されている。

図２３は、類似症例データ４０００のデータ構成を示す図である。類似症例データ４０００は、診断対象症例に対して類似する類似症例を検索する際に参照されるデータであり、１つの類似症例に対応して１つずつ作成されている。なお、類似症例データ４０００は、類似症例の付加情報の一例である。類似症例データ４０００は、症例検索システム３００の類似症例データ蓄積部３０１において、類似症例毎に蓄積されている。図２３に示すように、類似症例データ４０００は、類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、画像特徴データ４４００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、及び確定診断（詳細分類病名）４８００を備える。

類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。ここでは、類似症例のスライス画像に設定された関心領域毎に１つの類似症例データが生成されるため、類似症例ＩＤ４１００は、関心領域の識別子とも言える。図２３の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。

スライスＩＤ４２００は、関心領域が設定されたスライス画像の識別子であり、図２１に示すスライスＩＤ２２００と同一である。関心領域情報４３００は、スライス画像に設定された関心領域の位置を示す情報である。図２４は、スライス画像３１０１に設定された関心領域ＲＯＩを模式的に示した図である。図２４の例では、関心領域ＲＯＩは矩形状に設定されている。したがって、関心領域情報４３００は、関心領域ＲＯＩの左上の頂点の座標（ｘｌ，ｙｔ）と、右下の頂点の座標（ｘｒ，ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域情報４３００として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域情報４３００として採用される。

画像特徴データ４４００は、関心領域情報４３００で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４５００は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。ここで、サムネイル画像データ４５００は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。

病変分布情報４６００は、対象となる類似症例が予め定められたびまん性４６１０〜血行性４６７０で表される病変分布のいずれに該当するか否かを表す分布フラグ値（１：該当、０：非該当）である。

確定診断（大分類病名）４７００は、対象となる類似症例に対して確定された大分類の病名である。確定診断（大分類名）４７００は、類似症例を大分類の病名で絞り込む際に使用される。

確定診断（詳細分類病名）４８００は、対象となる類似症例に対して確定された詳細分類の病名である。確定診断（詳細分類病名）４８００は、類似症例を小分類の病名で絞り込む際に使用される。

予め、確定診断（大分類病名）４７００は、確定診断（詳細分類病名）４８００に対して一意に対応する大分類病名が定義されており、その対応関係を用いて類似症例データ４０００に格納されている。

確定診断（詳細分類病名）４８００は、医用画像データ蓄積部２０３において、図２１に示すスライスＩＤ２２００からシリーズＩＤ２１００が特定される。そして、特定されたシリーズＩＤから患者情報蓄積部２０１において、検査ＩＤ１８１０が特定され、検査ＩＤ１８１０から対応する患者情報１０００（図１９）が特定され、特定された患者情報１０００から該当する患者の確定診断１９００が特定される。

次に、情報端末１００が医用情報管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。

図２５は、情報端末１００が、医用情報管理システム２００に対して読影対象検査リストの要求を行ってから、症例検索システム３００が、情報端末１００からの類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。なお、図２５において、シーケンス図の左側に示す矩形は、該当するステップの処理によりディスプレイ１０１に表示される画面を示す。また、図２５において、情報端末の「Ａ」は、医用情報管理アプリケーションを示し、「Ｂ」は、類似症例検索アプリケーションを示す。このシーケンスが開始される前に医用情報管理アプリケーションは予め起動されているものとする。

まず、情報端末１００は、読影対象検査リストボタン７０１（図４）によりユーザ（読影を行う医師）の読影対象となる読影対象検査リストの表示要求を受け付け、入力制御部１０３及び通信制御部１１０を通して、医用情報管理システム２００の通信制御部２０６へ読影対象検査リストの表示要求を送信する（Ｓ５１０）。

医用情報管理システム２００の患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成する。そして、患者情報管理部２０２は、通信制御部２０６を通して、生成した読影対象検査リストを情報端末１００の通信制御部１１０に送信する（Ｓ５２０）。ここで、読影対象検査リストには、該当する患者の患者情報１０００及び検査情報１８００が含まれる。

情報端末１００の表示制御部１０４は、通信制御部１１０で受信された読影対象検査リストをディスプレイ１０１に表示する（Ｓ５３０）。

図２６は、読影対象検査リストの表示画面Ｋ５の一例を示す図である。読影対象検査リストは、読影が未終了の検査に対応する患者を表示する患者リスト表示領域８００と、検査に含まれるシリーズに関する情報を表示する検査リスト表示領域８１０とを備える。患者リスト表示領域８００には、「患者ＩＤ」、「患者氏名」、「検査日時」、「検査ＩＤ」、及び「検査種」の欄が設けられている。「患者ＩＤ」、「患者氏名」の欄には、患者情報１０００に登録された患者ＩＤ１１００及び氏名１２００が表示され、「検査日時」、「検査ＩＤ」、及び「検査種」の欄には、検査情報１８００に登録された検査日時１８２０、検査ＩＤ１８１０、及び検査種１８３０が表示される。検査リスト表示領域８１０は、患者リスト表示領域８００でユーザにより選択された検査の詳細を表示するための領域であり、「シリーズＩＤ」、「定義」、及び「画像」の欄が設けられている。ここでは、患者リスト表示領域８００においてユーザにより検査（行に対応）が選択されていないために、検査リスト表示領域８１０には何も表示されていない。

ユーザは、患者リスト表示領域８００に表示された検査の中から、これから読影を行う検査を選択する。この選択が入力制御部１０３で検知されると、図２５に示すように、通信制御部１１０は、選択された検査の検査ＩＤに含まれる全シリーズの表示要求を、医用情報管理システム２００へ送信する（Ｓ５４０）。

医用情報管理システム２００の通信制御部２０６がこの表示要求を受信すると、患者情報管理部２０２は、図２１に示す医用画像データベース２０００を参照し、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像を取得し、通信制御部２０６を通して、情報端末１００に送信する（Ｓ５５０）。例えば、図２１の例において、検査ＩＤ「１３２２７９８９」の検査がユーザにより選択されると、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のシリーズに含まれる全てのスライス画像がＳ５５０で送信される。

情報端末１００の通信制御部１１０が全シリーズの画像を取得すると、表示制御部１０４は、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを検査リスト表示領域８１０に表示する（Ｓ５６０）。

図２７は、検査が選択された後の読影対象検査リストの表示画面Ｋ５の一例を示す図である。図２７の患者リスト表示領域８００では選択された行の背後にハイライトが付されている。図２７の例では、患者リスト表示領域８００において、２行目の「パナ太郎」の検査が選択されている。そのため、検査リスト表示領域８１０では、選択された検査についての「シリーズＩＤ」、「定義」、及び「画像」が表示されている。ここで、「シリーズＩＤ」の欄には、医用画像データベース２０００において、選択された検査の検査ＩＤに対応付けられたシリーズＩＤが表示され、「画像」の欄には、表示されたシリーズＩＤを代表する１枚のスライス画像のサムネイル画像が表示される。ここで、シリーズＩＤを代表する１枚のスライス画像としては、所定のスライス位置の画像が採用される。所定のスライス位置としては先頭のスライス位置であってもよいし、中央のスライス位置であってもよい。「定義」は、該当するシリーズに対する撮影条件や再構成の条件を示す。この「定義」は、図示は省略されているが、例えば、図２１の医用画像データベース２０００において、シリーズＩＤと対応付けて登録されている。

図２５に戻って、検査リスト表示領域８１０において、ユーザにより読影対象のシリーズが選択され、その選択を入力制御部１０３が検知すると、表示制御部１０４は、図４に示すように、医用画像ビューワ７０５に、選択されたシリーズの先頭のスライス画像を表示する（Ｓ５７０）。図４を参照して上述したように、表示制御部１０４は、選択されたシリーズの全てのスライス画像をスライス送りできる状態でディスプレイ１０１に表示する。ユーザは、スライス送りの操作を入力しながら画像診断を行う。そして、ユーザは画像診断に迷った場合、類似症例検索アプリケーションを起動する。

ここで、類似症例検索アプリケーションを起動する前に、ユーザは、ＲＯＩ入力ボタン７０２（図４）を接触物（例えばユーザの指）でタップして、関心領域入力モードの起動を指示する。関心領域入力モードの起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、情報端末１００は、関心領域（ＲＯＩ）の受け付け待ち状態になる。

ユーザは、操作部１０２を通して、ディスプレイ１０１の医用画像ビューワ７０５に表示されたスライス画像上の病変に関心領域（ＲＯＩ）を設定する（Ｓ５８０）。ここで、ユーザは、図２４に示すように、例えば、ディスプレイ１０１を接触物でタップして、スライス画像３１０１における関心領域ＲＯＩの左上の頂点の座標を入力する。そして、ユーザは、ディスプレイ１０１に接触物を接触させた状態で接触物を右斜め下方向にドラッグし、接触物をディスプレイ１０１から離すことで、関心領域ＲＯＩの右下の頂点を入力すればよい。

関心領域を設定する操作を入力制御部１０３が検知すると、ＲＯＩ管理部１０５は、入力制御部１０３から関心領域の左上及び右下の頂点の座標データを受け取り、受け取った座標データを関心領域情報として生成する。

ここで、ユーザは、類似症例検索ボタン７０３を接触物でタップして、類似症例検索アプリケーションを起動する。すると、ＲＯＩ管理部１０５は、生成した関心領域情報を通信制御部１１０に送信する（Ｓ５９０）。

同時に、ＲＯＩ管理部１０５は、診断対象症例のスライス画像を通信制御部１１０に送信する（Ｓ６００）。この場合、Ｓ５５０において、情報端末１００が医用情報管理システム２００から受け取った全シリーズのスライス画像のうち、ユーザが選択したシリーズにおいてユーザにより関心領域が設定された１枚のスライス画像（検索クエリ画像）が送信される。

次に、通信制御部１１０は、ＲＯＩ管理部１０５から送信された関心領域情報を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０１）。

同時に、通信制御部１１０は、ＲＯＩ管理部１０５から送信されたスライス画像を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０２）。

ここで、Ｓ６００、Ｓ６０１において、スライス画像そのものを送信するとしたが、スライス画像のスライスＩＤのみが送信されても構わない。この場合は、スライスＩＤを受信した症例検索システム３００は、そのスライスＩＤを指定して、医用情報管理システム２００からスライス画像を取得すればよい。

次に、症例検索システム３００が類似症例検索を行い、情報端末１００が類似症例検索結果を初期表示するまでの処理を説明する。

図２８は、症例検索システム３００が、情報端末１００からの類似症例検索の要求を受け取った後、情報端末１００が、症例検索システム３００からの類似症例検索結果に基づき基本画面を表示するまでの処理を示すシーケンス図である。

症例検索システム３００の画像特徴抽出部３０２は、検索クエリ画像に設定された関心領域から予め定められた複数次元の画像特徴を抽出する（Ｓ６１０）。

「画像特徴」としては、医用画像における臓器若しくは病変部分の形状に関する画像特徴、又は輝度分布に関する画像特徴等が採用できる。例えば、非特許文献：「根本、清水、萩原、小畑、縄野、“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”、電子情報通信学会論文誌Ｄ−ＩＩ、Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ、Ｎｏ．２、ｐｐ．４１６−４２６、２００５年２月」には、４９０次元の画像特徴を用いることが記載されている。本実施の形態においては、例えば、この非特許文献に記載された画像特徴が採用される。但し、これは一例にすぎず、他の画像特徴が採用されてもよい。

類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された各類似症例の画像特徴とを比較する（Ｓ６２０）。ここで、類似症例検索部３０３は、検索クエリ画像から抽出された画像特徴データと、類似症例データ蓄積部３０１に類似症例毎に蓄積された類似症例データ４０００（図２３）に登録された画像特徴データ４４００との距離を算出することで、両画像特徴を比較する。

次に、類似症例検索部３０３は、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の類似症例として決定する（Ｓ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部３０１に蓄積された類似症例データ４０００のうち、送信対象として決定された類似症例の類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００、及び類似症例検索部３０３で算出された距離を情報端末１００に送信する（Ｓ６４０）。

次に、表示制御部１０４は、送信された情報を基に、類似症例検索結果が表示された初期の基本画面Ｋ２（図５）を生成する（Ｓ６５０）。

図２９は、図２８のＳ６５０に示す初期の基本画面Ｋ２を生成する処理の詳細を示すフローチャートである。

まず、Ｓ１０００にて、表示制御部１０４は、図２８のＳ６４０で受信された類似症例の数をカウントし、カウント値を検索結果件数表示領域７１４に表示する。

次に、Ｓ１１００にて、表示制御部１０４は、表示条件表示領域７１５に、「全疾患」と表示する。ここで、「全疾患」と表示されるのは、初期の基本画面Ｋ２では、ユーザにより病名や病変分布での絞り込みがかけられていないからである。

次に、Ｓ１２００にて、表示制御部１０４は、図２８のＳ６４０で受信された類似症例のうち、症例表示領域７１０にサムネイル画像が表示可能な類似症例の件数分だけ、症例表示領域７１０に類似症例のサムネイル画像を表示すると共に、各サムネイル画像に対応付けて確定診断及び類似度を表示する。

症例表示領域７１０に表示可能な類似症例の件数の最大値は、図５の例では２０である。この最大値は予め定められている。また、この最大値はユーザが自由に変更できる構成にしてもよい。図２８のＳ６４０で受信された類似症例の数が、最大値よりも多い場合、表示制御部１０４は、症例表示領域７１０の右端に縦方向に長尺のスクロールバー７１６（図５）を表示する。これにより、ユーザは、スクロールバー７１６を移動させ、初期の基本画面Ｋ２で非表示であった類似症例のサムネイル画像を閲覧できる。

次に、Ｓ１３００にて、病名リストが生成されて表示される。まず、図２８のＳ６４０で受信された類似症例から、病名リストが生成される。病名リストは、Ｓ６４０で受信された類似症例が、確定診断病名毎に分類されたリストである。

ここで、Ｓ６４０で受信された類似症例の件数をＮＣ件とする。病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を用いて、病名リストを生成する。生成された病名リストは、図３０に示すようにテーブル形式のデータとして、病名リスト管理部１０８で管理される。

図３０は、図２９のＳ１３００で生成される病名リストのデータ構成を示す図である。病名リストには、「病名ＩＤ」、「大分類病名」、「詳細分類病名」、「件数」、及び「類似症例ＩＤ」の欄が含まれる。「病名ＩＤ」は、確定診断病名毎に付与される識別子である。ここでは、大分類病名と詳細分類病名との１つの組み合わせに対して１つの病名ＩＤが付与されている。

「大分類病名」は、類似症例データ４０００に登録された確定診断（大分類病名）４７００が示す確定診断病名である。「詳細分類病名」は、類似症例データ４０００に登録された確定診断（詳細分類病名）４８００が示す確定診断病名である。「件数」は、「病名ＩＤ」が示す確定診断病名に該当する類似症例の件数である。「類似症例ＩＤ」は、「病名ＩＤ」が示す病名に該当する類似症例を示す類似症例ＩＤである。

病名リスト管理部１０８は、Ｓ６４０で受信した全ての類似症例データ４０００について、確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を抽出し、両者が同じ類似症例データ４０００を同じ確定診断病名の類似症例として分類する。そして、病名リスト管理部１０８は、確定診断病名が同じ類似症例の件数をカウントし、該当する確定診断病名のレコードの「件数」の欄に登録する。また、病名リスト管理部１０８は、同じ確定診断病名に分類した類似症例の類似症例ＩＤを該当する確定診断病名のレコードの「類似症例ＩＤ」の欄に登録する。

図３０の例では、大分類病名が「腫瘍性」、詳細分類病名が「原発性肺癌」の確定診断病名に対して病名ＩＤ「ＤＩＳ５２８」が付与されている。そして、この確定診断病名に該当する類似症例の件数が１０件であったため、該当するレコードの「件数」の欄に１０が登録され、この確定診断病名に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５８」、「ＳＩＭ５５１」、「ＳＩＭ１２０９」、及び「ＳＩＭ２３４１」等が、該当するレコードの「類似症例ＩＤ」の欄に登録されている。

そして、表示制御部１０４は、このようにして生成された病名リストを用いて病名リスト表示領域７３０を生成し、ディスプレイ１０１に表示する。

図３１、図３２、図３３は、それぞれ、病名リスト表示領域７３０の第１表示例、第２表示例、第３表示例を示した図である。図３１に示すように第１表示例では、類似症例検索の結果得られた類似症例が、詳細分類病名の件数の多い順に件数と対応付けて一覧表示されている。

図３２に示すように第２表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示されている。

図３３に示すように第３表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示され、且つ、大分類病名毎にその中に含まれる詳細分類病名が件数の多い順に件数と対応付けて一覧表示されている。この場合、患確定診断病名が、大分類病名と詳細分類病名との階層構造で表現される。

図３４は、図３２に示す病名リスト表示領域７３０の画面遷移を示す図である。図３４の上段に示すように、一覧表示された大分類病名のうち、１の大分類病名がユーザにより選択される操作を入力制御部１０３が検知すると、表示制御部１０４は、図３４の下段に示すように、選択された大分類病名に属する詳細分類病名を件数が多い順に件数と対応付けて表示する。ここで、ユーザは、例えば、病名リスト表示領域７３０において一覧表示された大分類病名のうち、所望する１の大分類病名を例えばダブルタップ或いはシングルタップすることで１の大分類病名を選択すればよい。図３４の例では非腫瘍性がダブルタップされているため、非腫瘍性に属する詳細分類病名が一覧表示されている。

図３４の下段において、詳細分類病名が一覧表示されている領域がユーザによりダブルタップ或いはシングルタップされると、表示制御部１０４は、該当する領域に表示されていた詳細分類病名を非表示にすればよい。

なお、表示制御部１０４は、病名リスト（図３０）を参照することで、大分類病名に属する詳細分類病名を判定すればよい。例えば、図３０の例では、真菌症に対して、アスペルギルス症及びクリプトコッカス症が対応付けられているため、表示制御部１０４は、真菌症にはアスペルギルス症及びクリプトコッカス症が属すると判断すればよい。

図２９に戻り、Ｓ１４００にて、分布リストが生成されて表示される。まず、Ｓ６４０で受信された類似症例から、分布リストが生成される。分布リストは、Ｓ６４０で受信された類似症例が、病変分布毎に分類されたリストである。

病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている病変分布情報４６００を用いて、分布リストを生成する。生成された分布リストは、図３５に示すようにテーブル形式のデータとして、分布リスト管理部１０９で管理される。

図３５は、図２９のＳ１４００で生成される分布リストのデータ構成を示す図である。分布リストには、「分布名」、「症例数」、及び「類似症例ＩＤ」の欄が含まれる。「分布名」は、びまん性、区域性といった予め定められた複数の病変分布の名称である。「症例数」は、病変分布に該当する類似症例の件数である。「類似症例ＩＤ」は、病変分布に該当する類似症例を示す類似症例ＩＤである。

分布リスト管理部１０９は、Ｓ６４０で受信した全ての類似症例データ４０００について、病変分布情報４６００を抽出し、抽出した病変分布情報４６００において、分布フラグ値に１（該当）が設定されている病変分布の数をカウントし、カウント値を該当する病変分布のレコードの「症例数」の欄に登録する。また、分布リスト管理部１０９は、分布フラグ値に１が設定されている類似症例の類似症例ＩＤを該当する病変分布のレコードの「類似症例ＩＤ」の欄に登録する。

図３５の例では、びまん性に該当する類似症例の件数が３件であったため、びまん性のレコードの「症例数」の欄に３が登録されている。また、びまん性に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５２１」、「ＳＩＭ４１２３」、及び「ＳＩＭ５２２５」がびまん性のレコードの「類似症例ＩＤ」の欄に登録されている。

そして、表示制御部１０４は、このようにして生成された分布リストを用いて分布リスト表示領域７５０を生成し、ディスプレイ１０１に表示する。

図３５に示す分布リストを用いて生成された分布リスト表示領域７５０は、図１２である。図３５において、区域性の症例数は０であるため、図１２では、区域性７５２が非アクティブ状態で表示され、これら以外の病変分布は、症例数が１以上であるため、アクティブ状態で表示されている。

図２９に戻り、Ｓ１５００にて、表示制御部１０４は、図５に示されるように、症例表示領域７１０に類似症例のサムネイル画像が表示された基本画面Ｋ２をディスプレイ１０１に表示する。

図２８に戻り、Ｓ６５１にて、症例表示領域７１０に表示されているサムネイル画像の中から、例えば、１つのサムネイル画像をダブルタップすることにより、１つの類似症例が選択される。すると、Ｓ６５２にて、表示制御部１０４は、症例表示領域７１０の全体に、選択された１つの類似症例のサムネイル画像が表示された基本画面Ｋ３（図６Ａ）をディスプレイ１０１に表示する。なお、類似症例の選択操作は、シングルタップなど、ダブルタップ以外の操作方法でもよい。

次に、図２５、図２８のシーケンス図をアプリケーションのレベルで着目したときの情報端末１００、医用情報管理システム２００、及び症例検索システム３００の処理について説明する。

図３６は、図２５及び図２８のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。図３６において、図２５、図２８と同じ処理には同じ符号を付している。

図３６において、「Ａ」は情報端末１００が実行する医用情報管理アプリケーションの処理を示し、「Ｂ」は情報端末１００が実行する類似症例検索アプリケーションの処理を示す。以下、医用情報管理アプリケーションを「アプリＡ」と記述し、類似症例検索アプリケーションを「アプリＢ」と記述する。

まず、アプリＡは、ユーザから読影対象となる検査リストの表示要求を受け付け、医用情報管理システム２００に送信する（Ｓ５１０）。医用情報管理システム２００は検査リストの表示要求を受信すると、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成し、アプリＡに送信する。

読影対象検査リストを受信したアプリＡは、図２６に示すように、読影対象検査リストをディスプレイ１０１に表示し、読影対象検査リストの中から１の検査がユーザにより選択されると（Ｓ５３０）、選択された検査の表示要求を医用情報管理システム２００に送信する（Ｓ５４０）。

検査の表示要求を受信した医用情報管理システム２００は、検査の表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像をアプリＡに送信する（Ｓ５５０）。

次に、アプリＡは、図２７に示すように、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを表示する（Ｓ５６０）。

次に、アプリＡは、シリーズリストの中から読影対象のシリーズがユーザにより選択されると、図４に示すように、選択されたシリーズの最初のスライド位置のスライド画像を医用画像ビューワ７０５に表示する（Ｓ５７０）。このとき、ユーザは、スライス送りする操作を入力し、医用画像ビューワ７０５に所望のスライス画像を表示させる。

次に、アプリＡは、医用画像ビューワ７０５に表示されたスライス画像において、関心領域を設定する操作をユーザから受け付ける（Ｓ５８０）。

次に、アプリＡは、ユーザにより設定された関心領域を示す関心領域情報を生成し、関心領域が設定されたスライス画像（診断対象症例のスライス画像）と共に、アプリＢに送信する（Ｓ５９０、Ｓ６００）。

次に、アプリＢは、診断対象症例のスライス画像及び関心領域情報を受信すると、そのスライス画像及び関心領域情報を症例検索システム３００に送信する（Ｓ６０１、Ｓ６０２）。

スライス画像及び関心領域情報を受信すると、症例検索システム３００は、図２８と同様、Ｓ６１０〜Ｓ６４０の処理を実行する。

次に、アプリＢは、Ｓ６４０で送信された類似症例データを用いて、図５に示すように、初期の基本画面Ｋ２を生成する（Ｓ６５０）。そして、アプリＢは、図２８と同様に、Ｓ６５１〜Ｓ６５２の処理を実行する。

ここでは、症例検索システム３００が画像特徴を抽出する例を示したが、情報端末１００が画像特徴を抽出してもよい。図３７は、症例検索システム３００が画像特徴を抽出する態様を採用した場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００のブロック図である。

図２との違いは、情報端末１００に画像特徴抽出部１１３が追加された点、及び症例検索システム３００から画像特徴抽出部３０２が省かれた点にある。

図３８は、図３７の構成において、情報端末１００が、関心領域の設定を行ってから、症例検索システム３００からの類似症例検索結果に基づき基本画面を表示するまでの処理を示すシーケンス図である。

図２５、図２８との違いは、ＲＯＩ管理部１０５が、診断対象症例のスライス画像を通信制御部１１０に送信する処理（Ｓ６００）の後、画像特徴の抽出が情報端末１００で行われ（Ｓ６０３）、抽出された画像特徴が症例検索システム３００に送信（Ｓ６０４）されている点にある。画像特徴の抽出（Ｓ６０４）の処理内容は、画像特徴の抽出が症例検索システム３００で行われる場合と同様である。

図３９は、図３７の構成において、情報端末１００が、医用情報管理システム２００に対して読影対象検査リストの要求を行ってから、症例検索システム３００からの類似症例検索結果に基づき基本画面を表示するまでの処理を、アプリケーションのレベルで着目したときのシーケンス図である。図３９において、図２５、図２８、図３６と同じ処理には同じ符号を付している。

図３９において、「Ａ」は情報端末１００が実行する医用情報管理アプリケーションの処理を示し、「Ｂ」は情報端末１００が実行する類似症例検索アプリケーションの処理を示す。以下、医用情報管理アプリケーションを「アプリＡ」と記述し、類似症例検索アプリケーションを「アプリＢ」と記述する。

図３６との相違点は、Ｓ６０３、Ｓ６０４にある。図３９では、画像特徴は情報端末１００で抽出されている。よって、アプリＢが診断対象症例のスライス画像に設定された関心領域から画像特徴を抽出し（Ｓ６０３）、抽出した画像特徴を症例検索システム３００に送信している（Ｓ６０４）。

次に、ユーザが情報端末１００のディスプレイ１０１上でスワイプ操作を行い、ディスプレイ１０１に表示される類似症例を切り替える処理を説明する。

図４０は、情報端末１００において、スワイプ操作の入力に基づき、ディスプレイ１０１に表示される類似症例を切り替える処理を示すシーケンス図である。図４１は、図４０のシーケンス図に対応する処理の内容を示すフローチャートである。図４２〜図４７は、ユーザのスワイプ操作により症例表示領域７１０に表示されているサムネイル画像が切り替えられる基本画面Ｋ３を示す図である。

なお、図４０、図４１の処理の開始時点では、情報端末１００のディスプレイ１０１には、図６Ａに示される基本画面Ｋ３が表示されている。図６Ａに示される基本画面Ｋ３の症例表示領域７１０の全体には、図５の症例表示領域７１０における１行１列目のサムネイル画像（つまり類似度が最も高い類似症例のサムネイル画像）が表示されている。

図４０、図４１のＳ７００では、まず、情報端末１００の入力制御部１０３は、ユーザが行ったスワイプ操作を検知する。入力制御部１０３は、スワイプ操作があった旨を画像生成部１１２に通知する。

次に、Ｓ７１０では、画像生成部１１２は、入力制御部１０３からの通知に基づき、類似度が次に高い類似症例のサムネイル画像（つまり図５の症例表示領域７１０における１行２列目のサムネイル画像）を生成する。画像生成部１１２は、生成したサムネイル画像を表示制御部１０４に出力する。

続いて、Ｓ７２０では、画像生成部１１２は、図４２、図４３に示すように、接触物３５０（ユーザの指）によるスワイプ操作中に、スワイプ操作に追従させるように、類似症例の切り替え前のサムネイル画像と切り替え後のサムネイル画像とを隣り合わせた中間画像を生成する。画像生成部１１２は、生成した中間画像を表示制御部１０４に出力する。表示制御部１０４は、画像生成部１１２から入力された中間画像を症例表示領域７１０に表示する。

次に、Ｓ７３０では、表示制御部１０４は、スワイプ操作が終了すると、図４４に示すように、Ｓ７１０で画像生成部１１２から入力された、類似度が次に高い類似症例のサムネイル画像を症例表示領域７１０の全体に表示する。

図４４の基本画面Ｋ３がディスプレイ１０１に表示された状態で、さらに同様のスワイプ操作が行われると、先に述べたＳ７００，Ｓ７１０の処理を経て、Ｓ７２０において、表示制御部１０４は、図４５、図４６に示されるように、中間画像を症例表示領域７１０に表示する。続いて、Ｓ７３０において、表示制御部１０４は、スワイプ操作が終了すると、図４７に示すように、類似度が次に高い類似症例のサムネイル画像（つまり図５の症例表示領域７１０における１行３列目のサムネイル画像）を症例表示領域７１０の全体に表示する。

ここで、実施の形態１では、図４４及び図４７に示されるように、表示制御部１０４は、スワイプ操作時には、対応関心領域ＣＲＯＩの中心が症例表示領域７１０の中心になるように、画像位置を調整して、サムネイル画像を表示する。表示制御部１０４は、図４４及び図４７に示されるように、症例表示領域７１０内であってサムネイル画像外の領域７１０Ｂには、背景画像を表示する。背景画像は、グレーでもよく、白べたでもよく、黒べたでもよい。これによって、領域７１０Ｂが区別可能にされている。以下では、図４８を用いて、図４４及び図４７に示されるようなサムネイル画像の生成処理を行う画像生成部１１２の処理の詳細が説明される。

図４８は、画像生成部１１２の詳細な構成を示すブロック図である。画像生成部１１２は、入力判定部１１２１、表示症例決定部１１２２、表示領域決定部１１２３、表示画像生成部１１２４、及び経過時間判定部１１２５を含む。なお、情報端末１００のディスプレイ１０１には、図６Ａに示される基本画面Ｋ３が表示されている。

入力制御部１０３は、操作部１０２に対するユーザの操作を検知すると、検知内容を入力判定部１１２１に出力する。入力判定部１１２１は、入力制御部１０３から入力された検知内容に基づき、操作部１０２に対するユーザの操作内容がスワイプ操作か否かを判定する。操作内容がスワイプ操作と判定した場合には、入力判定部１１２１は、操作内容がスワイプ操作であることと、スワイプ操作の向き（例えば左向きまたは右向き）とを、表示症例決定部１１２２に出力する。

表示症例決定部１１２２は、症例表示領域７１０に表示中の類似症例の、類似症例ＩＤ４１００（図２３）と、類似症例検索部３０３により算出された距離とを参照する。入力判定部１１２１から入力されたスワイプ操作の向きが左向きの場合には、表示症例決定部１１２２は、現在、症例表示領域７１０に表示されている類似症例の次に距離が小さい類似症例（つまり、現在の類似症例の次に類似度が高い類似症例）の類似症例ＩＤを取得する。

一方、入力判定部１１２１から入力されたスワイプ操作の向きが右向きの場合には、表示症例決定部１１２２は、現在、症例表示領域７１０に表示されている類似症例より距離が小さい次の類似症例（つまり、現在の類似症例より類似度が高い次の類似症例）の類似症例ＩＤを取得する。

表示症例決定部１１２２は、取得した類似症例ＩＤの類似症例を次に表示される類似症例に決定する。表示症例決定部１１２２は、類似症例ＩＤを取得できなかった場合は、現在表示されている類似症例を、次に表示される類似症例に決定する。つまり、症例表示領域７１０に表示される類似症例は変わらない。例えば、図６Ａに示される基本画面Ｋ３が表示されている状態で、右向きのスワイプ操作を行っても、現在、症例表示領域７１０に表示されている類似症例の類似度が最も高いため、表示画面は変わらない。

表示領域決定部１１２３は、表示症例決定部１１２２により決定された類似症例の類似症例データ４０００の関心領域情報４３００（図２３）を参照する。表示領域決定部１１２３は、対応関心領域ＣＲＯＩの中心座標が、症例表示領域７１０の中心になるように、類似症例のサムネイル画像の表示領域の座標を決定する。

図４９は、表示領域決定部１１２３により決定される表示領域の座標を概略的に示す図である。図４９に示される、表示領域の左上の座標（ｘｄｌ，ｙｄｔ）と、右下の座標（ｘｄｒ，ｙｄｂ）とは、対応関心領域ＣＲＯＩの中心座標（ｘｃ，ｙｃ）と、表示領域の縦寸法ｈ及び横寸法ｗとを用いると、以下の式で計算することができる。

ｘｄｌ＝ｘｃ−ｗ／２
ｙｄｔ＝ｙｃ−ｈ／２
ｘｄｒ＝ｘｃ＋ｗ／２
ｙｄｂ＝ｙｃ＋ｈ／２
このとき、表示領域の座標（ｘｄｌ，ｙｄｔ）、（ｘｄｒ，ｙｄｂ）が、元のサムネイル画像の外側（例えば、負の値）になる場合には、上述のように、例えば画素値が０の背景画像として、黒く表示されるようにしてもよい。また、このときに色はユーザが指定できるようにしてもよい。図４９では、左上の座標（ｘｄｌ，ｙｄｔ）が、元のサムネイル画像の外側になっており、領域７１０Ｂに背景画像が表示されている。

表示画像生成部１１２４は、表示領域決定部１１２３で決定された表示領域の座標と、表示症例決定部１１２２により決定された類似症例のサムネイル画像とから、症例表示領域７１０に表示される画像を生成する。表示画像生成部１１２４は、生成した画像を表示制御部１０４に出力する。

以上の処理により、症例表示領域７１０に表示されているサムネイル画像が、次のサムネイル画像に切り替えられても、次のサムネイル画像は、対応関心領域ＣＲＯＩの位置が症例表示領域７１０の中心になるように、表示される。

通常、類似症例の対応関心領域ＣＲＯＩの位置は、類似症例ごとに異なる。このため、サムネイル画像をそのままの状態で切り替えると、医師は、目線の位置を変えて対応関心領域ＣＲＯＩを探す必要がある。この目線を変える動作によって、画像枚数が増えると身体的な負荷が大きくなる。

これに対して、この実施の形態１によれば、医師は、類似症例のサムネイル画像が入れ替わる度に、目線の位置を変えて対応関心領域を探す必要がない。このため、対応関心領域をすぐに観察できる。その結果、スワイプ操作によって複数の類似症例のサムネイル画像の対応関心領域を連続して観察する場合に、観察にかかる身体的負担を軽減し、読影効率を向上させ、診察効率の向上に寄与できる。

次に、ユーザが、情報端末１００のディスプレイ１０１にスワイプ操作を行うことにより、症例表示領域７１０に表示される類似症例のサムネイル画像を切り替えた後、一定時間、スワイプ操作を行わなかった場合の処理を、図４８及び図５０を用いて説明する。

図５０は、情報端末１００において、ユーザが、スワイプ操作により類似症例のサムネイル画像の表示を切り替えた後、一定時間、スワイプ操作を行わなかった場合の処理を示すシーケンス図である。

図４８において、入力制御部１０３は、ユーザのスワイプ操作を検知すると、スワイプ操作の検知ごとに検知信号を経過時間判定部１１２５に出力する。経過時間判定部１１２５は、入力制御部１０３からの検知信号に基づき、ユーザによる最新のスワイプ操作からの経過時間をカウントする。経過時間判定部１１２５は、カウントされた経過時間が予め設定された閾値（例えば１０秒）以上になると、その旨を表す経過信号を表示領域決定部１１２３に出力する。

図５０のＳ７４０において、経過時間判定部１１２５から経過信号が表示領域決定部１１２３に出力されると、表示領域決定部１１２３は、症例表示領域７１０に表示されているサムネイル画像の表示領域を変更する処理を開始する。表示領域決定部１１２３は、元のサムネイル画像の中心が症例表示領域７１０の中心になるように、サムネイル画像の表示領域を決定する。

続いて、Ｓ７５０において、表示領域決定部１１２３により決定された表示領域に基づき、表示画像生成部１１２４は、元のサムネイル画像を生成する。表示画像生成部１１２４は、生成した元のサムネイル画像を表示制御部１０４に出力する。

次に、Ｓ７６０において、表示制御部１０４は、表示画像生成部１１２５で生成されたサムネイル画像をディスプレイ１０１の症例表示領域７１０に表示する。

図５１、図５２は、図５０に示されるシーケンスにおいてディスプレイ１０１に表示される基本画面Ｋ３の一例を示す図である。

図５０のＳ７４０では、最後のスワイプ操作が終了した後の、図４７に示される基本画面Ｋ３がディスプレイ１０１に表示されている。

この状態で、スワイプ操作が行われないまま、最後のスワイプ操作からの経過時間が閾値（例えば１０秒）以上になると、元のサムネイル画像の中心が症例表示領域７１０の中心になるように表示領域が決定された、図５１に示される基本画面Ｋ３が、ディスプレイ１０１に表示される。

なお、図４７に示される基本画面Ｋ３から図５１に示される基本画面Ｋ３に、中心位置を一度に大きく変更すると、医師が、対応関心領域ＣＲＯＩを探す作業が発生してしまう恐れがある。このため、中心位置を元のサムネイル画像の状態に戻す場合には、図５２に示すように、画像生成部１１２は、表示領域が図４７と図５１との間のサムネイル画像を生成し、表示制御部１０４は、生成されたサムネイル画像をディスプレイ１０１に表示するようにしてもよい。なお、図５２のサムネイル画像だけではなく、図４７と図５１との間に複数のサムネイル画像を表示してもよい。この場合には、図１０のＳ７４０〜Ｓ７６０を複数回繰り返して、サムネイル画像の生成を複数回行えばよい。これによって、サムネイル画像の中心位置を滑らかに変更させることができる。

スワイプ操作が行われなくなったということは、ユーザは、その画像に注目しているということを意味する。したがって、画像全体を確認したいというニーズが考えられる。そこで、この実施の形態１では、図４７、図５０〜図５２を用いて説明されたように、最後のスワイプ操作からの経過時間が閾値（例えば１０秒）以上になると、元のサムネイル画像の中心が症例表示領域７１０の中心になるような基本画面Ｋ３がディスプレイ１０１に表示される。これによって、サムネイル画像の全体を見るための操作数を低減することができる。

（実施の形態２）
次に、実施の形態２が説明される。実施の形態２では、ユーザは、情報端末１００に表示されている類似症例のサムネイル画像を拡大した後に、スワイプ操作を行い、表示されている類似症例のサムネイル画像を切り替えている。

図５３は、ユーザが拡大操作を行った後、次の類似症例のサムネイル画像に切り替えるまでの処理を示すシーケンス図である。図５４は、図５３のシーケンス図に対応する処理を示すフローチャートである。図５５、図５６は、ユーザがサムネイル画像に対して行うピンチアウト操作を示す図である。図５７〜図５９は、ユーザのスワイプ操作により症例表示領域７１０に表示されているサムネイル画像が切り替えられる基本画面Ｋ３を示す図である。図５４では、図５３と同じ処理には同じ符号が付されている。

情報端末１００の入力制御部１０３は、図５５、図５６に示すように、ユーザが行った拡大操作（図５５、図５６では、ピンチアウト操作）を検知する（Ｓ８００）。図５５及び図５６に示されるように、ユーザは、接触物３５０（例えばユーザの二本の指）を用いてピンチアウト操作を行っている。なお、拡大操作は、ピンチアウト操作以外の操作、例えば、タップ操作でもよい。

次に、画像生成部１１２は、ユーザが行ったピンチアウト操作の操作量に応じた拡大率で類似症例のサムネイル画像を拡大する（Ｓ８１０）。表示制御部１０４は、図５６に示すように、画像生成部１１２で生成された、拡大されたサムネイル画像をディスプレイ１０１の症例表示領域７１０に表示する（Ｓ８２０）。

情報端末１００の入力制御部１０３は、ユーザが行ったスワイプ操作を検知する（Ｓ８３０）。次に、画像生成部１１２は、スワイプ操作に基づき、次に表示される類似症例のサムネイル画像を生成する。画像生成部１１２は、生成したサムネイル画像を表示制御部１０４に出力する（Ｓ８４０）。

画像生成部１１２は、図５７、図５８に示すように、接触物３５０（ユーザの指）によるスワイプ操作中に、スワイプ操作に追従させるように、類似症例の切り替え前のサムネイル画像と切り替え後のサムネイル画像とを隣り合わせた中間画像を生成する。画像生成部１１２は、生成した中間画像を表示制御部１０４に出力する。表示制御部１０４は、入力された中間画像を症例表示領域７１０に表示する（Ｓ８５０）。

表示制御部１０４は、スワイプ操作が終了すると、図５９に示すように、類似度が次に高い類似症例のサムネイル画像を症例表示領域７１０の全体に表示する（Ｓ８６０）。

図５５では、図５の１行１列目のサムネイル画像が症例表示領域７１０の全体に表示されている。ピンチアウト操作が行われると、図５６に示されるように、ピンチアウト操作の操作量に応じた拡大率で、サムネイル画像が拡大される。このとき、表示制御部１０４は、図５６に示されるように、対応関心領域ＣＲＯＩの中心が症例表示領域７１０の中心に一致するように、拡大されたサムネイル画像を表示する。

本実施の形態２では、スワイプ操作が行われると、図５８、図５９に示されるように、上記実施の形態１と同様に、対応関心領域ＣＲＯＩの中心が症例表示領域７１０の中心になるように画像位置が調整される。そして、図５９では、図５の１行２列目のサムネイル画像が拡大された画像が、症例表示領域７１０に表示されている。

さらに、本実施の形態２では、図５６と図５９とを比較すると分かるように、対応関心領域ＣＲＯＩの大きさが同一になるように、各類似症例のサムネイル画像の拡大率が変更される。以下では、図６０を用いて、実施の形態２における画像生成部１１２の処理の詳細が説明される。

図６０は、実施の形態２の画像生成部１１２の詳細な構成を示すブロック図である。図６０では、図４８と同一要素には、同一符号が付され、詳細な説明は省略される。

本実施の形態２における画像生成部１１２は、入力判定部１１２１、表示症例決定部１１２２、表示領域決定部１１２３、表示画像生成部１１２４、基準拡大率決定部１１２６、拡大率決定部１１２７、及び画像拡大部１１２８を含む。

入力制御部１０３は、操作部１０２に対するユーザの操作を検知すると、検知内容を入力判定部１１２１に出力する。入力判定部１１２１は、入力制御部１０３から入力された検知内容に基づき、操作部１０２に対するユーザの操作内容を判定する。

判定した操作内容がスワイプ操作の場合には、入力判定部１１２１は、操作内容がスワイプ操作であることと、スワイプ操作の向き（例えば左向きまたは右向き）とを、表示症例決定部１１２２に出力する。

一方、判定した操作内容がピンチアウト操作の場合には、入力判定部１１２１は、操作内容がピンチアウト操作であることと、ピンチアウト操作の操作量（ディスプレイ１０１上における接触物の移動量）とを、基準拡大率決定部１１２６に出力する。

基準拡大率決定部１１２６は、入力判定部１１２１から入力されたピンチアウト操作の操作量（ディスプレイ１０１上における接触物の移動量）に基づき、ピンチアウト操作中のサムネイル画像に対する拡大率を決定する。基準拡大率決定部１１２６は、例えば、ディスプレイ１０１上における接触物の移動量に予め定められた係数を掛けた値を算出し、この算出値をピンチアウト操作中のサムネイル画像に対する拡大率に決定する。基準拡大率決定部１１２６は、決定した基準拡大率を拡大率決定部１１２７に出力する。以下では、ピンチアウト操作が行われたサムネイル画像が「基準サムネイル画像」と称され、ピンチアウト操作が行われたサムネイル画像に対して決定された拡大率が「基準拡大率」と称される。

拡大率決定部１１２７は、基準サムネイル画像の関心領域の面積と、表示症例決定部１１２２で決定された次に表示される類似症例の関心領域の面積と、基準拡大率決定部１１２６で決定された基準拡大率とから、次に表示される類似症例のサムネイル画像の拡大率を決定する。

まず、拡大率決定部１１２７は、基準サムネイル画像に対応する類似症例の関心領域情報４３００（図２３）に基づき、基準サムネイル画像の関心領域の面積を算出する。ここで、基準サムネイル画像の関心領域の面積をＳｒとし、関心領域の左上の座標を（ｘｌ，ｙｔ）とし、関心領域の右下の座標を（ｘｒ，ｙｂ）とすると、関心領域の面積Ｓｒは以下の式で算出することができる。

Ｓｒ＝｜ｘｌ−ｘｒ｜×｜ｙｔ−ｙｂ｜
次に、拡大率決定部１１２７は、次に表示される類似症例の関心領域情報４３００から関心領域の面積を算出する。ここで、次に表示される類似症例ｉの関心領域の面積をＳｉとし、関心領域の左上の座標を（ｘｌｉ，ｙｔｉ）とし、関心領域の右下の座標を（ｘｒｉ，ｙｂｉ）とすると、関心領域の面積Ｓｉは以下の式で算出することができる。

Ｓｉ＝｜ｘｌｉ−ｘｒｉ｜×｜ｙｔｉ−ｙｂｉ｜
最後に、拡大率決定部１１２７は、基準サムネイル画像の関心領域の面積Ｓｒと、次に表示される類似症例の関心領域の面積Ｓｉと、基準サムネイル画像に対する基準拡大率とに基づき、次に表示される類似症例ｉの拡大率を算出する。ここで、基準サムネイル画像に対する拡大率をｋｒとすると、次に表示される類似症例ｉの拡大率ｋｉは、以下の式で算出することができる。

ｋｉ＝ｋｒ（Ｓｒ／Ｓｉ）
これによって、図６２（後述）に示すように、基準サムネイル画像と次に表示されるサムネイル画像とで、拡大後の関心領域のサイズが一致するような拡大率が算出される。

画像拡大部１１２８は、表示症例決定部１１２２で決定された次に表示される類似症例のサムネイル画像を、拡大率決定部１１２７で決定された拡大率で拡大する。

表示領域決定部１１２３は、拡大率決定部１１２７で決定された拡大率と、次に表示される類似症例の類似症例ＩＤの関心領域情報４３００（図２３）とに基づき、画像拡大部１１２８で拡大されたサムネイル画像において、関心領域の中心座標が症例表示領域７１０の中心になるように、拡大されたサムネイル画像の表示領域の座標を決定する。図６１を用いて、表示領域決定部１１２３により決定される表示領域が説明される。

図６１は、拡大率と表示領域との関係を概略的に表す図である。拡大率がｋｉ倍の場合は、画像拡大部１１２８によって、図６１の左図に示されるサムネイル画像から図６１の右図に示される拡大されたサムネイル画像が生成される。

拡大前の関心領域の中心座標を（ｘｃ，ｙｃ）とすると、図６１に示すように、拡大前の関心領域の中心座標に拡大率ｋｉを掛けて得られる座標（ｋｉ×ｘｃ，ｋｉ×ｙｃ）が拡大後の関心領域の中心座標となる。

図６１の左図に示されるように、表示領域７２０ａは、横寸法ｗ、縦寸法ｈに設定されている。この場合、図６１の右図に示される矩形領域が表示領域７２０ｂとなる。この表示領域７２０ｂの左上座標は（ｋｉ×ｘｃ−ｗ／２，ｋｉ×ｙｃ−ｈ／２）であり、右下座標は（ｋｉ×ｘｃ＋ｗ／２，ｋｉ×ｙｃ＋ｈ／２）である。

図６２は、拡大処理前後の基準サムネイル画像及び次に表示されるサムネイル画像を概略的に示す図である。図６２の上左図は、拡大処理前の基準サムネイル画像を示す。図６２の上右図は、拡大処理後の基準サムネイル画像を示す。図６２の下左図は、拡大処理前の次に表示されるサムネイル画像を示す。図６２の下右図は、拡大処理後の次に表示されるサムネイル画像を示す。

図６２の上左図に示される基準サムネイル画像を拡大率ｋｒで拡大すると、図６２の上右図に示されるサムネイル画像が得られる。表示領域決定部１１２３は、図６２の上右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｄの中心位置に一致するように、表示領域７２０ｄを決定する。表示領域決定部１１２３は、表示領域７２０ｄのサイズを拡大処理前の表示領域７２０ｃのサイズと同じサイズに維持している。

図６２の下左図に示される次に表示されるサムネイル画像を拡大率ｋｉで拡大すると、図６２の下右図に示されるサムネイル画像が得られる。表示領域決定部１１２３は、図６２の下右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｆの中心位置に一致するように、表示領域７２０ｆを決定する。表示領域決定部１１２３は、表示領域７２０ｆのサイズを拡大処理前の表示領域７２０ｅのサイズと同じサイズに維持している。

図６２では、基準サムネイル画像の拡大率ｋｒに対して、関心領域の面積比に応じて次に表示されるサムネイル画像ｉの拡大率ｋｉを決定している。したがって、図６２に示すように、拡大後の関心領域ＲＯＩのサイズが一致している。

図６０に戻って、表示画像生成部１１２４は、表示領域決定部１１２３で決定された表示領域の座標と、画像拡大部１１２８で拡大されたサムネイル画像とから、症例表示領域７１０に表示する画像を生成する。表示画像生成部１１２４は、生成した画像を表示制御部１０４に出力する。

以上の処理により、実施の形態２によれば、サムネイル画像が例えばピンチアウト操作により拡大された後、表示されるサムネイル画像がスワイプ操作により切り替えられた場合に、切り替えにより新たに表示される拡大されたサムネイル画像は、その関心領域が症例表示領域７１０の中心になるように、表示される。

通常、類似症例の関心領域の位置は、類似症例ごとに異なる。このため、拡大されたサムネイル画像を切り替えたときに、拡大が解除される場合には、再度、拡大操作（ピンチアウト操作）が必要になる。一方、拡大が維持される場合に、そのままの状態でサムネイル画像を切り替えたのでは、表示領域に関心領域が収まらない、または、関心領域の位置がまったく違うという事態が発生する可能性がある。その場合には、拡大率変更と位置変更の操作が必要になる。この操作により、画像枚数が増えると、身体的な負荷が大きくなる。

しかし、本実施の形態２によれば、医師は、類似症例のサムネイル画像が入れ替わる度に、目線の位置を変えて関心領域を探す必要がなく、また、拡大率の変更及び位置変更を行うことなく、関心領域をすぐに観察できる。その結果、スワイプ操作によって複数の類似症例のサムネイル画像の関心領域を連続して観察する場合に、観察にかかる身体的負担を軽減し、読影効率を向上させ、診察効率の向上に寄与できる。

本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。

１００ 情報端末
１０１ ディスプレイ
１０２ 操作部
１０３ 入力制御部
１０４ 表示制御部
１１２ 画像生成部
２００ 医用情報管理システム
３００ 症例検索システム
７１０ 症例表示領域
ＣＲＯＩ 対応関心領域
Ｋ２ 基本画面
ＲＯＩ 関心領域

Claims (16)

1. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末の制御方法であって、
   前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
   前記情報端末のコンピュータに対して、
   前記対象医用画像の中の関心領域を示す指定情報を検知させ、
   前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
   前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
   前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
   前記第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記表示領域に表示させる、
   制御方法。
2. 前記第２類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第２類似医用画像の次に高い第３類似医用画像を、前記第３類似医用画像に含まれる前記対応関心領域を前記表示領域の前記所定位置に合わせて、前記表示領域に表示させる、
   請求項１記載の制御方法。
3. 前記第１類似医用画像を前記表示領域に表示させる際に、前記第１類似医用画像に含まれる前記対応関心領域を前記表示領域の前記所定位置に合わせて、前記第１類似医用画像を前記表示領域に表示させる、
   請求項１から請求項２のいずれか一に記載の制御方法。
4. 前記表示領域の前記所定位置は、前記表示領域の中心に相当する位置を含む、
   請求項１から請求項３のいずれか一に記載の制御方法。
5. 前記表示領域の前記所定位置は、前記第１類似医用画像の中での前記第１類似医用画像に含まれる前記対応関心領域の位置を含む、
   請求項１から請求項３のいずれか一に記載の制御方法。
6. 前記第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記表示領域に表示させる際、前記第２類似医用画像のうち前記表示領域外の部分は非表示とされ、前記表示領域のうち前記第２類似医用画像外の部分には背景画像が表示される、
   請求項１から請求項５のいずれか一に記載の制御方法。
7. 前記第２類似医用画像が前記表示領域に表示された時点から、前記第２類似医用画像に対するスワイプ操作を所定期間検知しなかった場合、前記第２類似医用画像の表示位置を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせた位置から、前記第２類似医用画像の全体が前記表示領域の全体に表示される位置に移動させる、
   請求項１から請求項６のいずれか一に記載の制御方法。
8. 前記制御方法は、
   前記情報端末のコンピュータに対して、
   前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
   前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
   請求項１から請求項７のいずれか一に記載の制御方法。
9. 前記制御方法は、
   前記情報端末のコンピュータに対して、
   前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
   前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
   請求項１から請求項７のいずれか一に記載の制御方法。
10. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末の制御方法であって、
    前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す指定情報を検知させ、
    前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
    前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
    前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
    前記表示領域の全体に表示されている前記第１類似医用画像に対する拡大操作が検知されると、前記第１類似医用画像を、前記第１類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせて拡大させ、
    前記拡大された第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせ、且つ、前記第２類似医用画像に含まれる前記対応関心領域の表示サイズを前記拡大された第１類似医用画像に含まれる前記対応関心領域の表示サイズに合わせて、拡大して前記表示領域に表示させる、
    制御方法。
11. 前記第２類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第２類似医用画像の次に高い第３類似医用画像を、前記第３類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせ、且つ、前記第３類似医用画像に含まれる前記対応関心領域の表示サイズを前記拡大された第１類似医用画像に含まれる前記対応関心領域の表示サイズに合わせて、拡大して前記表示領域に表示させる、
    請求項１０記載の制御方法。
12. 前記制御方法は、
    前記情報端末のコンピュータに対して、
    前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
    前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
    請求項１０から請求項１１のいずれか一に記載の制御方法。
13. 前記制御方法は、
    前記情報端末のコンピュータに対して、
    前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
    前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
    請求項１０から請求項１１のいずれか一に記載の制御方法。
14. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末において実行されるプログラムであって、
    前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す指定情報を検知させ、
    前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
    前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
    前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
    前記第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の所定位置に合わせて、前記表示領域に表示させる、
    プログラム。
15. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、タッチパネルディスプレイを有する情報端末において実行されるプログラムであって、
    前記タッチパネルディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す指定情報を検知させ、
    前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
    前記受信した複数の類似医用画像を表示する表示画面を前記タッチパネルディスプレイに表示させ、前記表示画面は、前記受信した複数の類似医用画像のうちの少なくとも一部の複数の類似医用画像を表示する表示領域を含み、
    前記表示領域に表示されている前記少なくとも一部の複数の類似医用画像のうち第１類似医用画像の選択が検知されると、前記第１類似医用画像を前記表示領域の全体に表示させ、
    前記表示領域の全体に表示されている前記第１類似医用画像に対する拡大操作が検知されると、前記第１類似医用画像を、前記第１類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせて拡大させ、
    前記拡大された第１類似医用画像に対するスワイプ操作を検知した場合、前記複数の類似医用画像の中で前記類似度が前記第１類似医用画像の次に高い第２類似医用画像を、前記第２類似医用画像に含まれる前記対応関心領域を前記表示領域の中心に相当する位置に合わせ、且つ、前記第２類似医用画像に含まれる前記対応関心領域の表示サイズを前記拡大された第１類似医用画像に含まれる前記対応関心領域の表示サイズに合わせて、拡大して前記表示領域に表示させる、
    プログラム。
16. タッチパネルディスプレイの第１表示領域に表示された第１画像と第２画像を含む複数の画像に代えて、第１変換画像を前記第１表示領域に表示し、
    前記第１変換画像は、前記第１画像の第１領域の第３画像を拡大した画像であり、
    前記第１変換画像がスワイプされた時、前記第１表示領域に表示された前記第１変換画像に代えて、第２変換画像を前記第１表示領域に表示し、
    前記第２変換画像は、前記第２画像の第２領域の第４画像を拡大した画像であり、
    前記複数の画像と複数の予め定められた領域は１対１対応し、
    前記複数の画像の各々は前記複数の予め定められた領域のうち対応する予め定められた領域を含み、
    前記第１領域は前記複数の予め定められた領域に含まれる第１の予め定められた領域を含み、
    前記第３画像は前記第１の予め定められた領域に含まれる第５画像を含み、
    前記第２領域は前記複数の予め定められた領域に含まれる第２の予め定められた領域を含み、
    前記第４画像は前記第２の予め定められた領域に含まれる第６画像を含み、
    前記複数の予め定められた領域に含まれる画像のうち、最も特定の画像に類似する画像は前記第５画像であり、
    前記複数の予め定められた領域に含まれる画像のうち、２番目に前記特定の画像に類似する画像は前記第６画像であり、
    前記第１変換画像が前記第１表示領域に表示される時は、前記第１の予め定められた領域が前記第１表示領域の中心に表示され、
    前記第２変換画像が前記第１表示領域に表示される時は、前記第２の予め定められた領域が前記第１表示領域の中心に表示される
    制御方法。