JPWO2015155808A1 - 情報端末の制御方法及びプログラム - Google Patents

情報端末の制御方法及びプログラム Download PDF

Info

Publication number
JPWO2015155808A1
JPWO2015155808A1 JP2015533776A JP2015533776A JPWO2015155808A1 JP WO2015155808 A1 JPWO2015155808 A1 JP WO2015155808A1 JP 2015533776 A JP2015533776 A JP 2015533776A JP 2015533776 A JP2015533776 A JP 2015533776A JP WO2015155808 A1 JPWO2015155808 A1 JP WO2015155808A1
Authority
JP
Japan
Prior art keywords
similar
image
interest
display
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015533776A
Other languages
English (en)
Other versions
JP5815167B1 (ja
Inventor
和紀 小塚
和紀 小塚
和豊 高田
和豊 高田
近藤　堅司
堅司 近藤
浩彦 木村
浩彦 木村
豊彦 坂井
豊彦 坂井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Application granted granted Critical
Publication of JP5815167B1 publication Critical patent/JP5815167B1/ja
Publication of JPWO2015155808A1 publication Critical patent/JPWO2015155808A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425—Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G06F3/04855—Interaction with scrollbars
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A61B6/032—Transmission computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

本開示の情報端末の制御方法は、対象医用画像を表示する第１表示領域と、ＮＣ個の類似医用画像の中のＭ個の類似医用画像を対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面をディスプレイに表示させる。第２表示領域は、Ｍ個の類似医用画像を表示するためのＮＤ個の個別領域を含む。Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、一つの指示を検知した際に第２表示領域に表示されているＭ個の範囲でＭ個以下の各類似医用画像について、第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、Ｍ個以下の各類似医用画像の中の対応関心領域を、各個別領域の中心に相当する位置に合わせて拡大させる。

Description

本発明は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末の制御方法及びプログラムに関する。
近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）等の医用画像装置が発達及び普及している。これらＣＴ又はＭＲＩ等は、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。
しかしながら、更なる改善が必要とされていた。
特開２００８−２５７２９２号公報 特開２０１４−４２５２号公報
大沢 哲、外４名、"画像診断を支援する類似症例検索システム「ＳＹＮＡＰＳＥ Ｃａｓｅ Ｍａｔｃｈ」の開発"、富士フイルム研究報告、富士フイルム株式会社、平成２５年３月２７日、第５８号、ｐ．１１−１４
上記課題を解決するため、本開示の一態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させるものである。
上記態様により、更なる改善が実現できる。
本実施の形態における情報端末が適用された病院情報システムの全体構成図である。 情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。 ２台のディスプレイの外観図である。 情報端末の実装形態の構成例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 症例表示領域に表示されるある１つの類似症例の表示領域を取り出して示した図である。 症例表示領域に表示されたサムネイル画像のうち１のサムネイル画像が選択されたときの基本画面を示す図である。 症例表示領域に表示されているサムネイル画像の一部が拡大されたときの基本画面を示す図である。 症例表示領域に表示されているサムネイル画像の一部が拡大されたときの図９と異なる基本画面を示す図である。 症例表示領域に表示されているサムネイル画像の一部が拡大されたときの図９、図１０と異なる基本画面を示す図である。 図９と同じサムネイル画像が拡大されたときの異なる表示態様を示す図である。 症例表示領域に表示されたサムネイル画像のうち図８と異なるサムネイル画像が選択されたときの基本画面を示す図である。 症例表示領域に表示されている全てのサムネイル画像が拡大されたときの基本画面を示す図である。 症例表示領域に表示されている全てのサムネイル画像が拡大されたときの図１４と異なる基本画面を示す図である。 病名リスト表示領域の拡大図である。 「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。 「転移性肺癌」で類似症例が絞り込まれたときの基本画面を示す図である。 分布リスト表示領域の拡大図である。 両側性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 両側性の病変分布で絞り込みがかけられた基本画面を示した図である。 気道性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 気道性の病変分布で絞り込みがかけられた基本画面を示した図である。 胸膜下のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 胸膜下の病変分布で絞り込みがかけられた基本画面を示した図である。 患者情報のデータ構成を示す図である。 図２２に示す患者情報に登録された検査情報のデータ構成を示す図である。 医用画像データベースのデータ構成を示す図である。 診断レポートのデータ構成を示す図である。 類似症例データのデータ構成を示す図である。 スライス画像に設定された関心領域を模式的に示した図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムに対して類似症例検索の要求を行い、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 検査リストの画面図である。 検査が選択された後の検査リストの画面図である。 ユーザによりシリーズが選択された際に医用画像ビューワに表示されるスライス画像を示した図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。 表示ボックス管理情報のデータ構成を示す図である。 表示ボックスが３行２列で設定されたレイアウト領域を持つ基本画面を示す図である。 レイアウト管理情報の一例を示す図である。 レイアウト管理情報の一例を示す図である。 図３６ＡのＳ６７０に示す初期の基本画面を生成する処理の詳細を示すフローチャートである。 図３７に示すＳ１５００の処理を示すフローチャートである。 図３７のＳ１３００で生成される病名リストのデータ構成を示す図である。 病名リスト表示領域の第１表示例を示した図である。 病名リスト表示領域の第２表示例を示した図である。 病名リスト表示領域の第３表示例を示した図である。 図４１に示す病名リスト表示領域の画面遷移を示す図である。 図３７のＳ１４００で生成される分布リストのデータ構成を示す図である。 図４４Ａに示す分布リストを用いて生成された分布リスト表示領域を示す図である。 症例検索システムが画像特徴を抽出する態様を採用した場合の情報端末、医用情報管理システム、及び症例検索システムのブロック図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。 症例表示領域に表示されているサムネイル画像の拡大処理を示すフローチャートである。 図４８のＳ４４００のサブルーチンの処理を示すフローチャートである。 拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。 図４８のＳ４５００のサブルーチンの処理を示すフローチャートである。 拡大率と表示領域との関係を概略的に表す図である。 拡大されたサムネイル画像が症例表示領域に表示された後に、ユーザがスクロールバーを操作した場合のサムネイル画像の拡大処理を示すフローチャートである。 拡大されたサムネイル画像が症例表示領域に表示された状態の基本画面を示す図である。 拡大されたサムネイル画像が図５３Ｂの状態から移動した基本画面を示す図である。 分布リスト表示領域に表示された病変分布が選択されたときの処理を示すフローチャートである。 胸膜領域情報が追加された類似症例データのデータ構成を示す図である。 胸膜領域を説明する図である。 実施の形態２において、類似症例検索により検索された類似症例のサムネイル画像が症例表示領域に表示された状態の基本画面を示す図である。 第２指示ボタンがユーザにより選択された場合の基本画面を示す図である。 第３指示ボタンがユーザにより選択された場合の基本画面を示す図である。 ユーザが拡大率変更ボタンの選択を行ったときの拡大処理を示すフローチャートである。 症例検索システムが類似症例検索結果を情報端末に送信した後、情報端末において拡大率変更ボタンが選択されてから拡大されたサムネイル画像を情報端末のディスプレイに表示するまでの処理を示すシーケンス図である。 症例検索システムにおいて実行される事前処理と、図６１に示される処理とを示すフローチャートである。 拡大サムネイルデータのデータ構成を示す図である。 図２８及び図３２のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。 情報端末において類似症例のサムネイル画像がドラッグアンドドロップされる際の処理をアプリケーションのレベルで着目したときのシーケンス図である。
（本開示に係る一態様を発明するに至った経緯）
まず、本開示に係る一態様の着眼点について説明する。
特許文献１は、診断対象画像に基づく画像診断時に疾患の判断に有用な症例画像又はその疾患に関する統計情報等を提示する画像診断支援装置を開示する。当該画像診断支援装置による検索結果の画面は、診断対象画像及び疾患別の代表症例の情報を表示する。具体的には、前記検索結果の画面は、ｉ）上位３つの疾患Ａ、Ｄ、Ｇの代表症例の画像、ｉｉ）疾患別に診断対象画像との類似度、登録症例数及び代表症例数、ｉｉｉ）検索件数（検索された疾患の総数）、及び、ｉｖ）一画面に表示できない他の疾患の情報を参照するための「ページ送り」のソフトボタン等を表示する（段落［００６２］から［００６３］及び図６（Ｅ））。
特許文献１では、検索結果の画面において、代表症例の画像を拡大させることについての記載は一切ない。したがって、特許文献１は、単純に代表症例の画像を拡大することさえ開示をしないので、画像表示数に制約がある検索結果の画面において、例えば、代表症例の画像に含まれる病変部位を中心に、前記代表症例の画像の各々を拡大させる等の工夫をも開示していない。
特許文献２は、同一患者の医用画像について比較読影の効率向上を実現する医用画像表示装置を開示する。ここで、比較読影とは、ｉ）同一の患者に対し異なる画像診断装置あるいは撮影条件によって得られた画像データを用いた比較読影又はｉｉ）同一の患者に対し同一画像診断装置によって得られた過去及び最新の画像データを用いた比較読影をいう。即ち、特許文献２の比較読影は、同一の患者の画像データを用いた比較読影である。
当該医用画像表示装置の表示画面には、サムネイル表示エリアに表示されるサムネイル画像を拡大又は縮小するための「標準」、「拡大率基準」及び「サイズ基準」の３種類のソフトボタンが表示される（段落［００４０］及び図６）。「拡大率基準」又は「サイズ基準」が選択されると、サムネイル画像は、病変範囲又は病変位置を含むように拡大して表示される。これにより、一覧表示されたサムネイル画像による病変確認は、「標準」が選択された場合と比較して容易になる。また、「サイズ基準」が選択された場合、サムネイル画像のサムネイルサイズは、表示一覧性を保持するため、「標準」が選択された場合と同一サイズになる（段落［００４１］から［００４３］及び図７）。尚、特許文献２では、サムネイル画像は時系列順に表示される（例えば、特許文献２の図６参照）。
特許文献２では、「拡大率基準」又は「サイズ基準」が選択されると、病変範囲又は病変位置を含む全てのサムネイル画像が拡大されることになる。即ち、サムネイル表示エリアに表示されているサムネイル画像に加え、サムネイル表示エリアに表示し切れないサムネイル画像も拡大される（例えば、特許文献２の図６及び図７参照）。
これは、同一患者の画像を時間の経過を追って比較すること（比較読影）を前提としているためである。なぜならば、比較読影は、主に経過観察のため、半年又は１年近くの期間をおいて医用画像が撮影されることが通常だからである。そのため、医用画像数が膨大である可能性が低く、全てのサムネイル画像を拡大したとしても、システムの処理負荷はさほど大きくなることはない。
また、サムネイル画像は全て同一患者の画像である。このため、読影対象の画像と他の患者の画像とを比較する場合とは異なり、各サムネイル画像が類似しているか否かを検討する作業は不要となる。即ち、特許文献２のサムネイル画像は、同一患者の病変変化を時系列に沿って検討するために用いられる。そのため、拡大表示する際に、他の患者の画像との類似関係に基づき一部のサムネイル画像は拡大し、他のサムネイル画像は拡大しないといった作業はそもそも発生しない。
非特許文献１は、病変画像を用いて過去の類似症例を検索する機能により、上述のＰＡＣＳなどに蓄積された臨床知識から、瞬時に的確な情報を抽出し提示し、医師の画像診断をサポートする類似症例検索システムを開示する。具体的には、本システムは、検査画像の病変の特徴が類似した症例画像を検索し、類似順に複数表示する。そして、表示された複数の症例画像より１つの参考症例画像を選択し、検査画像と並列に表示する（ｐ．１２「２．２ 本システムの特徴」及びＦｉｇ．３）。
非特許文献１に開示されたシステムは、類似順に複数表示された症例画像を拡大させることについての記載は一切ない。したがって、非特許文献１は、単純に症例画像を拡大することさえ開示をしないので、画像表示数に制約がある検索結果の画面において、例えば、代表症例の画像に含まれる病変部位を中心に、前記代表症例の画像の各々を拡大させる等の工夫をも開示しない。
未だ病名が特定されていない読影対象の医用画像に表れている病変を検討するにあたって、既に病名が特定されている他の医用画像の中で前記読影対象の医用画像と類似する類似医用画像を参照することは有効であると考えられる。しかし、このようなシステムを構築した場合、前記医用画像データベースに膨大な数の医用画像が登録されることになる。このような場合であっても、前記読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示することが望まれる。
以上の考察により、本願発明者らは、以下の発明の各態様を想到するに至った。
本開示の第１の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させるものである。
本態様によると、前記読影対象の対象医用画像の中の関心領域と所定の類似度を有する類似医用画像であって既に病名が特定されているＮＣ個の類似医用画像を前記症例検索システムから受信し、前記ＮＣ個の類似医用画像の中のＭ個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する。これにより、前記医用画像データベースに登録されている膨大な医用画像の中から、前記対象医用画像に表れている病変の病名を検討するために参考となる類似医用画像を効率的に抽出して、医師に提示できる。
また、表示されている類似医用画像の中で医師が関心を示した画像を拡大することもできる。その際、本態様では、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる。
これにより、前記表示されている類似医用画像の各々について個々の拡大指示が不要となる。したがって、操作効率を向上できる。また、前記類似医用画像を拡大する際、前記類似医用画像の各個別領域のサイズは同一サイズに維持される。そのため、前記Ｍ個以下の類似医用画像を拡大させつつも、画像表示数に制約がある表示画面を有効活用して、前記Ｍ個以下の類似医用画像の各々を拡大表示させることができる。また、前記各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる。そのため、前記Ｍ個以下の類似医用画像の中で医師が関心を持つ領域を中心に、前記Ｍ個以下の類似医用画像の各々が拡大されることになる。
このように、一つの指示によって、画像表示数に制約がある表示画面を有効活用しながら、医師が関心を持つ領域を中心に、前記Ｍ個以下の類似医用画像の各々を拡大させる。その結果、例えば、前記医用画像データベースに膨大な数の医用画像が登録されている場合であっても、前記読影対象の対象医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示する。したがって、診断精度の向上に寄与できる。
また、前記Ｍ個以下の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示によって、前記Ｍ個以下の類似医用画像が拡大されることになる。そのため、医師が前記Ｍ個以下の類似医用画像の中で、拡大してより詳細を確認するためにいずれか一の類似医用画像を選択すると、前記Ｍ個の類似医用画像の中の他の類似医用画像までも拡大される。即ち、前記Ｍ個の類似医用画像の拡大のための特別の操作を医師に要求するものではなく、医師が拡大により詳細を確認するためにいずれか一の類似医用画像を選択するという自然な操作の流れに沿って、前記Ｍ個の類似医用画像の中の他の類似医用画像までも拡大される。その結果、前記Ｍ個以下の類似医用画像を効率的に拡大する。したがって、医師の操作負担を軽減して、その分、医師を専門的な判断に集中させて、診断精度の向上を図ることができる。
また、本態様では、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像を拡大させる。
即ち、前記医用画像データベースに登録されている膨大な医用画像の中から、前記読影対象の医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記症例検索システムから受信する場合でも、前記受信するＮＣ個の類似医用画像は、例えば、２００画像、３００画像と画像数は多い。この際、一つの指示により画像を拡大するにしても、前記受信したＮＣ個の類似医用画像の全てを拡大するのは非効率である。従って、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、前記一つの拡大指示により画像を拡大する方が望ましい。
ここで、前記読影対象の医用画像である対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記対象医用画像との類似度が高い順序で表示して、前記対象医用画像に表れている病変の病名を検討する趣旨からすると、前記一つの拡大指示を検知した場合、前記一の類似医用画像と一定の類似関係にある画像に限定して拡大することが望ましい。一方で、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知する毎に、前記一の類似医用画像と一定の類似関係にある画像はどれかを算出することは効率が悪い。
そこで、本態様では、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲は、前記一の類似医用画像と一定の類似関係ある画像と近似しているものと擬制している。そして、本態様では、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像を拡大させるようにした。
即ち、本態様では、前記受信したＮＣ個の類似医用画像の全てを拡大するのではなく、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、即ち、前記一の類似医用画像と一定の類似関係にあると擬制できる範囲の画像に限定して、拡大する。
このように、本態様では、前記読影対象の医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記読影対象の医用画像との類似度が高い順序で表示する。また、前記表示されている類似医用画像の中で医師が関心を示した画像を拡大する際、前記一の類似医用画像と一定の類似関係にあると擬制できる画像に限定して拡大する。そのため、膨大な数の類似医用画像を受信した場合でも、前記読影対象の医用画像に表れている病変の病名を検討する趣旨に沿った範囲で前記類似医用画像を拡大する。したがって、システムの処理負荷を大幅に軽減させつつ、前記検討に必要な情報を効果的に医師に提供し、診療判断の精度の向上に寄与できる。
また、上記第１の態様において、例えば、
前記表示画面はスクロールバーを有し、
前記スクロールバーの移動を検知すると、前記第２表示領域に表示される類似医用画像をスクロールさせ、
前記類似医用画像がスクロールされるに応じて、前記拡大される類似医用画像を増加させるようにしてもよい。
本態様によると、前記類似医用画像がスクロールされるに応じて、前記拡大される類似医用画像を増加させる。即ち、前記一つの拡大指示により画像を拡大する範囲について、当初範囲は少なく抑えつつ、前記範囲を事後的に可変させている。
これにより、一度拡大した画像については事後的に縮小する必要はなく、新たに前記第２表示領域に表示された例えば前記ＮＤ個の範囲を継続して、前記一の類似医用画像と一定の類似関係ある画像と近似しているものと擬制する。
そのため、前記類似医用画像がスクロールされた場合であっても、前記読影対象の医用画像に表れている病変の病名を検討する趣旨に沿った範囲で前記類似医用画像を継続して拡大する。したがって、システムの処理負荷を大幅に軽減させつつ、前記検討に必要な情報を継続して医師に提供し、診療判断の精度の向上に寄与できる。
また、上記第１の態様において、例えば、
前記受信したＮＣ個の類似医用画像の総数ＮＣを示す情報が前記表示画面に表示されるようにしてもよい。
また、上記第１の態様において、例えば、
前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるようにしてもよい。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記Ｍ個以下の類似医用画像の各々に含まれる前記対応関心領域を、前記Ｍ個以下の類似医用画像に共通する一定の割合で拡大した場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記Ｍ個以下の類似医用画像を拡大しても、拡大された前記対応関心領域の大きさは、ばらばらとなる。
本態様によると、例えば、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させる。
これによると、前記Ｍ個以下の類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさのばらつきを、前記Ｍ個以下の類似医用画像間で、一定範囲に収束できる。
そのため、前記Ｍ個以下の類似医用画像について、前記拡大された対応関心領域を医師はほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、本開示の第２の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、
前記指示ボタンによる一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させるものである。
本態様では、前記Ｍ個の類似医用画像に共通の指示ボタンによる一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させる。これにより、前記表示されているＭ個の類似医用画像の各々について個々の指示が不要となる。したがって、操作効率を向上できる。また、前記Ｍ個の類似医用画像の表示サイズを変化させる際、前記Ｍ個の類似医用画像の各個別領域のサイズは同一サイズに維持される。そのため、前記Ｍ個の類似医用画像の表示サイズを変化させつつも、画像表示数に制約がある表示画面を有効活用して、前記Ｍ個の類似医用画像の各々の表示サイズを変化させることができる。
このように、前記Ｍ個の類似医用画像に共通の一つの指示によって、画像表示数に制約がある表示画面を有効活用しながら、医師が関心を持つ領域を中心に、前記Ｍ個の類似医用画像の各々の表示サイズを変化できる。その結果、例えば、前記医用画像データベースに膨大な数の医用画像が登録されている場合であっても、前記対象医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示する。したがって、診療判断の精度の向上に寄与できる。
また、前記Ｍ個の類似医用画像に共通の一つの指示によって、前記Ｍ個の類似医用画像の表示サイズを変化させることになる。そのため、医師が前記Ｍ個の類似医用画像の中で、表示サイズを変化させながらより詳細を確認するために指示ボタンに対する一つの操作を行うと、前記Ｍ個の類似医用画像の全てが拡大される。即ち、前記Ｍ個の類似医用画像の表示サイズを変化させるための個別の操作を医師に要求するものではなく、医師が表示サイズを変化させてより詳細を確認するために、指示ボタンに対する一つの操作を行うという自然な操作の流れに沿って、前記Ｍ個の類似医用画像の全ての表示サイズが変化する。その結果、前記Ｍ個の類似医用画像の表示サイズを効率的に変化させる。したがって、医師の操作負担を軽減して、その分、医師を専門的な判断に集中させて、診断精度の向上を図ることができる。
また、本態様では、前記Ｍ個の類似医用画像に共通の一つの指示ボタンによる指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像の表示サイズを変化させる。即ち、前記医用画像データベースに登録されている膨大な医用画像の中から、前記対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記症例検索システムから受信する場合でも、前記受信するＮＣ個の類似医用画像は、例えば、ＮＣが２００画像、３００画像と画像数は多い。この際、一つの指示により類似医用画像の表示サイズを変化させるにしても、前記受信したＮＣ個の類似医用画像の全ての表示サイズを変化させるのは非効率である。従って、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、前記一つの指示により類似医用画像の表示サイズを変化させる方が望ましい。
ここで、前記読影対象の医用画像である対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記対象医用画像との類似度が高い順序で表示して、前記対象医用画像に表れている病変の病名を検討する趣旨からすると、前記一つの指示を検知した場合、前記対象医用画像と一定の類似関係にある画像に限定して表示サイズを変化させることが望ましい。一方で、前記対象医用画像が変わる毎に、また、前記類似医用画像が変わる毎に、前記対象医用画像と一定の類似関係にある画像を算出することは効率が悪い。
本態様では、前記対象医用画像との類似度が高い順序で前記類似医用画像を表示している。したがって、前記指示ボタンによる一つの指示を検知した場合、前記対象医用画像との関係で、前記一つの指示を検知した際に表示されている前記Ｍ個の類似医用画像については、前記対象医用画像と一定の類似関係ある画像と近似しているものと擬制できる。そこで、本態様では、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像について表示サイズを変更させるようにした。即ち、本態様では、前記受信したＮＣ個の類似医用画像の全てについて表示サイズを変更するのではなく、前記受信した類似医用画像の中から一定範囲の画像に限定して、即ち、前記読影対象の医用画像と一定の類似関係にあると擬制できる範囲の画像に限定して、表示サイズを変更する。
このように、本態様では、前記対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記対象医用画像との類似度が高い順序で表示し、前記表示されているＭ個の類似医用画像の中で医師が関心を示した画像の表示サイズを変更する際、前記一の類似医用画像と一定の類似関係にあると擬制できる画像に限定して表示サイズを変更する。そのため、膨大な数の類似医用画像を受信した場合でも、前記対象医用画像に表れている病変の病名を検討する趣旨に沿った範囲で前記類似医用画像の表示サイズを変更する。したがって、システムの処理負荷を大幅に軽減させつつ、前記検討に必要に情報を効果的に医師に提供し、診療判断の精度の向上に寄与できる。
また、上記第２態様において、例えば、
前記表示画面は、前記一以上の指示ボタンとして、少なくとも、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる第１指示ボタン、及び、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる第２指示ボタンを含み、
前記第１指示ボタン又は前記第２指示ボタンによるいずれか一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを一律に変化させるようにしてもよい。
本態様によると、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる際には、医師は前記第１指示ボタンという一つの指示を選択すればよい。また、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる際には、医師は前記第２指示ボタンという一つの指示を選択すればよい。これにより、前記第１指示ボタン又は前記第２指示ボタンのいずれか一の指示によって、前記Ｍ個の類似医用画像を表示する各個別領域のサイズは同一サイズを維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズは一律に変化する。
そのため、前記Ｍ個の類似医用画像を初期表示サイズにて表示することも、また、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示することも、医師は一つの指示にてすることができるので、操作数を大幅に低減できる。
また、上記第２の態様において、例えば、
前記表示画面は、前記一以上の指示ボタンとして、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さい所定倍に拡大表示させる第３指示ボタンを含み、
前記第３指示ボタンによる一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させるようにしてもよい。
本態様によると、前記表示画面は、前記一以上の指示ボタンとして、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さい所定倍に拡大表示させる第３指示ボタンを含んでいる。
これにより、前記Ｍ個の類似医用画像を初期表示サイズにて表示させる場合と、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる場合との中間に相当する表示サイズに各対応関心領域の表示サイズを変化させる場合に、医師は一つの指示にて行うことができる。
また、上記第２の態様において、例えば、
前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記所定倍は個々の類似医用画像毎に異なり、
前記第３指示ボタンによる一つの指示を検知すると、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各対応関心領域の表示サイズを変化させるようにしてもよい。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記Ｍ個の類似医用画像の各々に含まれる前記対応関心領域の表示サイズを、前記Ｍ個の類似医用画像に共通する一定の割合で変化させた場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記Ｍ個の類似医用画像を拡大しても、拡大された前記対応関心領域の表示サイズは、ばらばらとなる。
本態様によると、例えば、前記所定倍は個々の類似医用画像毎に異なり、前記第３指示ボタンによる一つの指示を検知すると、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各対応関心領域の表示サイズを変化させる。
これによると、前記各対応関心領域の表示サイズを変化させる場合、前記変化した前記各対応関心領域の表示サイズのばらつきを、前記Ｍ個の類似医用画像間で、一定範囲に収束できる。
そのため、前記Ｍ個の類似医用画像について、前記変化した表示サイズの前記各対象関心領域を医師はほぼ同様の大きさにて観察できる。その結果、一部の類似医用画像の前記対象関心領域の表示サイズが他の類似医用画像の前記対象関心領域の表示サイズより小さい状態に変化したために、見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第１の態様又は上記第２の態様において、例えば、
前記第２指定情報が示す前記対応関心領域の大きさが第１サイズの場合、前記第２指定情報が示す前記対応関心領域の大きさが前記第１サイズより大きい第２サイズの場合に比べて、前記対応関心領域を大きく拡大させるようにしてもよい。
本態様によると、前記類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさのばらつきを、前記類似医用画像間で、一定範囲に収束できる。具体的には、前記対応関心領域の大きさが第１サイズの場合、前記対応関心領域の大きさが前記第１サイズより大きい第２サイズの場合に比べて、前記対応関心領域を大きく拡大させる。これにより、前記対応関心領域の大きさに依存することなく、前記拡大された前記対応関心領域の大きさを、同様の大きさにすることができる。
そのため、医師は、前記類似医用画像について、前記拡大された対応関心領域をほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第１の態様又は上記第２の態様において、例えば、
前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記各類似医用画像の中の前記対応関心領域を中心として拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させるようにしてもよい。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記類似医用画像の各々に含まれる前記対応関心領域を一定の割合で拡大した場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記類似医用画像を拡大しても、拡大された前記対応関心領域の大きさは、ばらばらとなる。
本態様によると、例えば、前記各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させる。
これによると、前記類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさを、前記各個別領域のサイズとの関係でほぼ同様に揃えることかできる。
そのため、前記類似医用画像について、前記拡大された対応関心領域を医師はほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第１又は上記第２の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるとしてもよい。
また、上記第１又は上記第２の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
前記対象医用及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるとしてもよい。
また、上記第１又は上記第２の態様において、例えば、
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第２表示領域は、
前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
前記第１分布情報から前記第３分布情報の中のいずれか一の選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第２表示領域に表示させるとしてもよい。
本態様によると、前記第２表示領域に表示されたＮＤ個の類似医用画像を、さらに、前記対応関心領域の分布類型に基づいて仕分けできる。これにより、例えば、多数表示された類似医用画像の中から、前記対象医用画像に含まれる前記関心領域に症状が類似した類似医用画像を、効率的に選択できる。
また、上記第１又は上記第２の態様において、例えば、
前記第１分布情報の選択が検知された場合、前記第１分布情報に対応する類似医用画像を、対応する個別領域に初期表示サイズにて表示させ、
前記第２分布情報の選択が検知された場合、前記第２分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させ、
前記第３分布情報の選択が検知された場合、前記第３分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させるとしてもよい。
本態様によると、前記対応関心領域の分布類型に基づいて類似医用画像を仕分けした際、単に仕分けするのみならず、前記分布類型に応じた表示をする。これにより、操作者は、前記対応関心領域の分布類型に基づいて類似医用画像を仕分けし、その後、前記分布類型に応じて類似医用画像を拡大し若しくは前記対応関心領域を中心にする処理などを別途行う必要がない。そのため、前記対応関心領域の分布類型に基づいて仕分けされたとは言え、その次に、前記仕分けされた多数の類似医用画像の一つ一つに対して同様の操作を繰り返し行う煩雑さを大幅に軽減できる。その結果、診療判断に向けられるべき医師の思考若しくは医師の集中力が操作の煩雑さにより中断されるのを大幅に軽減し、医師の思考若しくは医師の集中力を本来の診療判断に向けることができるので、診療判断の精度の向上を図ることができる。
また、上記第１又は上記第２の態様において、例えば、
前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報であるとしてもよい。
本態様によると、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は類似医用画像が初期表示サイズで表示される。区域性又は気道性のカテゴリーに属する分布の場合は類似医用画像が拡大表示される。胸膜下のカテゴリーに属する分布の場合は胸膜を含んだ状態で類似医用画像が拡大表示される。
両側性、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は、肺全体に病変部が広がっている可能性又は肺の広範囲に病変部が生じている可能性が高い。このため、類似医用画像を初期表示サイズ、即ち、拡大させることなく表示させたいという医学的見地に基づくニーズが存在する。
一方、区域性又は気道性のカテゴリーに属する分布の場合は、上述のような可能性が低い。そのため、区域性又は気道性のカテゴリーに属する分布を選択することにより類似医用を拡大表示させることで、拡大表示させるという１工程を省略させ、医師の集中力が中断されることを防止できる。また、胸膜下のカテゴリーに属する分布の場合は、胸膜と病変部との位置関係が診断においては重要な指標となるため、胸膜を含んだ状態で類似医用画像を拡大表示させたいという医学的見地に基づくニーズが存在する。
（実施の形態１）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。
図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、及び症例検索システム３００を備えている。
情報端末１００、医用情報管理システム２００、及び症例検索システム３００はネットワーク４００を介して相互に通信可能に接続されている。
なお、医用情報管理システム２００及び症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバ等の上で動作するソフトウェアであってもよい。医用情報管理システム２００及び症例検索システム３００が病院内に設置されている場合、ネットワーク４００としては、ローカルエリアネットワークが採用できる。ローカルネットワークとしては、ＩＥＥＥ８０２．３シリーズの有線ＬＡＮ、ＩＥＥＥ８０２．１１シリーズの無線ＬＡＮ、或いは両者が混在するネットワークが採用できる。医用情報管理システム２００及び症例検索システム３００が病院外のサーバを用いて実現される場合、ネットワーク４００としては、インターネットが採用できる。
情報端末１００としては、パーソナルコンピュータやタブレット端末等の情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）や電子カルテシステム等が採用される。
図２は、情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、ボックスレイアウト管理部１１１、及び拡大画像生成部１１２を備える。
ディスプレイ１０１は、例えば、液晶モニタにより構成され、診断対象となる医用画像及びカルテ画像を表示すると共に、診断結果を記入するためのレポート入力画像等を表示する。なお、ディスプレイ１０１は最低１台必要だが、通常、画像診断においては２〜３台のディスプレイ１０１が用いられる。本実施の形態では２台のディスプレイ１０１が用いられ、一方のディスプレイ１０１をディスプレイ１０１ａとし、他方のディスプレイ１０１をディスプレイ１０１ｂとする（図３参照）。
図３は、２台のディスプレイ１０１ａ、１０１ｂの外観図である。図３では、ディスプレイ１０１ａには、４つの医用画像ビューワが２行２列の配置で表示されており、ディスプレイ１０１ｂには症例検索システム３００の画面が表示されている。なお、ディスプレイ１０１を１台とした場合、２つの表示画面が１台のディスプレイ１０１の表示画面上に領域を分けて表示される。
操作部１０２は、例えば、キーボード及びマウスを含み、情報端末１００に対してユーザにより入力される種々の操作を受け付ける。例えば、操作部１０２は、ディスプレイ１０１に表示される医用画像及びカルテ画像に対するユーザからの操作、並びにレポート入力画面に対して診断結果を入力する操作等を受け付ける。
入力制御部１０３は、操作部１０２へのユーザの操作を検知すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２としてのマウスから出力される座標データからディスプレイ１０１上におけるマウスポインタの位置を検知し、ディスプレイ１０１上にマウスポインタを表示させる。そして、入力制御部１０３は、マウスがクリックされたことを検知したときにマウスポインタの表示位置に表示制御部１０４で生成されたＧＵＩ部品（例えば、ＧＵＩボタン）が表示されていれば、そのＧＵＩをユーザが選択したと判定し、他の構成要素にそのＧＵＩ部品がユーザにより選択されたことを通知する。
表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。
ＲＯＩ管理部１０５は、類似症例検索を行う際に、後述する検索クエリ画像に対して設定される関心領域（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を示す関心領域情報を生成してメモリに格納し、関心領域情報を管理する。
表示ボックス管理部１０６は、後述する表示ボックス管理情報４４１０（図３６Ｂ）をメモリに格納し、表示ボックス管理情報４４１０を管理する。
病名リスト管理部１０８は、症例表示領域７１０（図６）に表示された類似症例の病名リスト（図３９）を生成してメモリに格納し、病名リストを管理する。
分布リスト管理部１０９は、症例表示領域７１０に表示された類似症例の病変分布を示す分布リスト（図４４Ａ）を生成してメモリに格納し、分布リストを管理する。
通信制御部１１０は、例えば、情報端末１００をネットワーク４００に接続するための通信装置を含み、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１１０は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
ボックスレイアウト管理部１１１は、後述するレイアウト管理情報４２００（図３６Ｅ）を生成してメモリに格納し、レイアウト管理情報４２００を管理する。
拡大画像生成部１１２は、類似症例のサムネイル画像の拡大画像を生成する。拡大画像生成部１１２は、操作部１０２に対するユーザの操作量を入力制御部１０３から取得する。拡大画像生成部１１２は、症例検索システム３００から送信された、類似症例データ（類似度、関心領域情報を含む）を通信制御部１１０から受け取る。拡大画像生成部１１２は、類似症例検索により取得した類似症例の件数（例えばＮＣ件）のうち、症例表示領域７１０に表示される件数分のみに対して、各サムネイル画像毎に別々の拡大率を算出し、表示される件数分の拡大画像を生成する。
図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、及び通信制御部２０６を備える。
患者情報蓄積部２０１は、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録された患者情報１０００（図２６）を蓄積する。
患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された患者情報１０００（図２６）に対して、ユーザから入力されたデータを登録して患者情報１０００を更新する処理、及び患者情報１０００を表示制御部１０４に出力する処理等を実行し、患者情報１０００を管理する。医用画像データ蓄積部２０３は、患者の検査画像である医用画像データを蓄積する。
医用画像データ管理部２０４は、医用画像データを医用画像データ蓄積部２０３に蓄積し、医用画像データを管理する。
診断レポート管理部２０５は、患者に対して行われた各検査に対する医師による診断結果を示す診断レポート３０００（図２９）を管理する。
通信制御部２０６は、例えば、医用情報管理システム２００をネットワーク４００に接続するための通信装置を含み、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、及び類似症例検索部３０３を備える。
類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている類似症例のうち、類似症例検索の対象データとして選定された多数の類似症例から抽出された画像特徴や、生成されたサムネイル画像等が登録された類似症例データ４０００（図３０）を蓄積する。
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。なお、関心領域情報は、関心領域を示す第１指定情報の一例である。
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された１以上の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。
通信制御部３０４は、例えば、症例検索システム３００をネットワーク４００に接続させる通信装置で構成され、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。
図４は、情報端末１００の実装形態の構成例を示す図である。図４に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。
アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。
ここで、アプリケーション５０１は、医用情報管理アプリケーション及び類似症例検索アプリケーションを含む。医用情報管理アプリケーションは、情報端末１００を医用情報管理システム２００と連携させるためのアプリケーションであり、類似症例検索アプリケーションは、情報端末１００を症例検索システム３００と連携させるためのアプリケーションである。そして、両アプリケーションは、相互にデータを送受し、情報端末１００において、医用情報管理システム２００及び症例検索システム３００が提供するサービスを統合させる。
ＯＳ５０２は、情報端末１００の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。
情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、ボックスレイアウト管理部１１１、及び拡大画像生成部１１２の機能が実現される。
但し、本実施の形態では、情報端末１００は、アプリケーション５０１のみ単独で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。
図５は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ａに表示される基本画面Ｋ１の一例を示す図である。図５に示す基本画面Ｋ１は、４つの医用画像ビューワ６１０〜６４０で構成されている。医用画像は、通常、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ ｉｎ Ｍｅｄｉｃｉｎｅ）フォーマットで記録されており、医用画像ビューワ６１０〜６４０はＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、ＤＩＣＯＭフォーマットの多数の断層画像（以下、スライス画像と呼ぶ。）で構成される胸部ＣＴ画像とする。但し、これは一例に過ぎず、他の部位（例えば、頭部、腹部、脚、或いは腕）のＣＴ画像が採用されてもよい。
医用画像ビューワ６１０〜６４０に表示された胸部ＣＴ画像は、マウスやキーボードの操作により、スライス画像が切り替えられる。ここで、胸部ＣＴ画像を構成するスライス画像は、例えば、首側から腹側に向かう順番に配置されている。
例えば、医用画像ビューワ６１０上にマウスポインタが位置決めされ、マウスホイールの回転が入力制御部１０３で検知されると、表示制御部１０４は、検知された回転量に応じて医用画像ビューワ６１０に表示されているスライス画像を切り替える。ここで、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの後方側に１クリック分回転されると、表示中のスライス画像を次のスライス位置のスライス画像に切り替える。一方、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの前方側に１クリック分回転されると、表示中のスライス画像をスライス位置が１つ前のスライス画像に切り替える。よって、医師等のユーザはマウスホイールを前方側又は後方側に回転させながら、医用画像ビューワ６１０に表示されるスライス画像を適宜切り替え、所望のスライス画像を探索する。
なお、医用画像としては、胸部ＣＴ画像に代えて、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像が採用されてもよい。また、図５の例では、医用画像ビューワの個数は４個とされているが、これは一例にすぎず、６個や８個等別の個数が採用されてもよい。医用画像ビューワの個数が多くなると同時に比較できる画像が増えるが、１画像当たりの表示面積が狭くなる。そのため、この個数はディスプレイ１０１ａの表示サイズに応じて適宜変更可能な構成を採用すればよい。ここでは、医用画像ビューワの個数は、ユーザ又は管理者が自由に変更できるものとする。
類似症例検索アプリケーションが起動される前には、ディスプレイ１０１ａの全域には、ある患者の胸部ＣＴ画像のスライス画像が表示されている。そして、この状態で、読影者等のユーザにより類似症例検索アプリケーションが起動されると医用画像ビューワ６１０には、ディスプレイ１０１ａの全域に表示されていたスライス画像が表示される。
つまり、医用画像ビューワ６１０には、ユーザが類似症例検索アプリケーションを起動させたときに、ディスプレイ１０１ａの全域に表示されていた検索クエリ画像が初期表示される。なお、表示制御部１０４は、検索クエリ画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を重畳表示してもよい。検索クエリ画像は読影対象の医用画像である対象医用画像の一例である。
図５では、他の医用画像ビューワ６２０〜６４０には何の画像も表示されていないが、診断対象となる患者の検査画像が複数あり、類似症例検索アプリケーションが起動される前に、ディスプレイ１０１ａに複数の検査画像が表示されていた場合、表示制御部１０４は、医用画像ビューワ６２０〜６４０にこれら複数の検査画像をそのまま表示すればよい。
図６は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ｂに表示される基本画面Ｋ２の一例を示す図である。図６に示す基本画面Ｋ２は、症例表示領域７１０、レイアウト領域７２０、病名リスト表示領域７３０、及び分布リスト表示領域７５０を備える。なお、レイアウト領域７２０は第１表示領域の一例であり、症例表示領域７１０は第２表示領域の一例である。
症例表示領域７１０は、検索クエリ画像に類似した類似症例のサムネイル画像を類似度順に表示する領域である。ここで、類似症例のサムネイル画像は、類似医用画像の一例である。
症例表示領域７１０には多数の類似症例が表示されるため、解像度や画素値の変換をその場で行うと処理に時間がかかってしまう。よって、サムネイル画像は、オリジナルのスライス画像から予め作成され、症例検索システム３００に保存されている。
以下、解像度や画素値の変換について少し補足する。オリジナルのスライス画像の解像度は５１２×５１２画素であるが、サムネイル画像はより低解像であるため、解像度変換を行う必要がある。そこで、サムネイル画像は、元となるスライス画像に対して低解像度処理及び階調変換処理が行われて生成される。
階調変換処理は例えば、下記のように行われる。ＣＴで取得したスライス画像は各画素値（ＣＴ値）が−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ Ｕｎｉｔ）の２０００階調の値をとり、そのままでは通常の８ビット階調のディスプレイに表示できない。また、表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約−９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜−５０ＨＵ）、水（ＣＴ値：０ＨＵ）、及び骨（ＣＴ値：１０００ＨＵ）を人間が肉眼で区別することは難しい。
よって、通常、スライス画像は、各画素値に対してウィンドウレベル及びウィンドウ幅が設定され、８ビットの画素値に再構成されて、ディスプレイに表示される。ここで、ウインドウレベルは、ウインドウの中心となるＣＴ値を示し、ウインドウ幅は、ウインドウ中心の上下の幅を示す。
例えば、肺野条件でＤＩＣＯＭ画像が再構成される場合、ウインドウレベルが−５５０〜−８００に設定され、ウインドウ幅が１０００〜１６００に設定される。したがって、サムネイル画像も、元となるスライス画像から上記の処理によって画素値が８ビットに落とされることで生成される。
なお、症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が所定の閾値以下の類似症例を示すサムネイル画像である。ここでは距離としては、例えば、ユークリッド距離が用いられる。なお、距離としては、市街地距離等の別の距離尺度が採用されてもよい。比較対象となる２つの画像は、距離が近いほど類似している。また、特徴ベクトルは、サムネイル画像から得られたものではなく、元画像であるＤＩＣＯＭ画像から得られたものが採用される。
図７は、症例表示領域７１０に表示されるある１つの類似症例の表示領域７０１（個別領域の一例）を取り出して示した図である。類似症例の表示領域７０１には、サムネイル画像が表示されており、このサムネイル画像の下部には、確定診断病名表示領域７１１及び距離表示領域７１２が配置されている。確定診断病名表示領域７１１には、対象となる類似症例の確定診断病名が表示される。確定診断病名とは、対象となる類似症例に対して診断が確定された病名を指す。距離表示領域７１２には、対象となる類似症例のスライス画像の特徴ベクトルと、検索クエリ画像の特徴ベクトルとの距離が表示される。図７の例では、確定診断病名表示領域７１１には、「非結核性抗酸菌症」と表示されているため、このサムネイル画像は「非結核性抗酸菌症」と確定診断がされた類似症例のサムネイル画像を示す。また、距離表示領域７１２には、「０．０５」と表示されているため、この類似症例のスライス画像と探索クエリ画像との距離が「０．０５」であることが示されている。
図７に示されるように、類似症例の表示領域７０１に示されるサムネイル画像は、対応関心領域ＣＲＯＩを含む。対応関心領域ＣＲＯＩは、検索クエリ画像（読影対象の医用画像）に設定された関心領域に対応する領域（つまり関心領域に類似する領域）である。なお、以下では、対応関心領域は、単に「関心領域」とも称される。
図６に戻り、基本画面Ｋ２の例えば左上には、検索結果件数表示領域７１３が配置されている。検索結果件数表示領域７１３には、検索処理の結果、症例検索システム３００から取得された、診断対象症例に類似する類似症例の数が表示される。
なお、類似症例の数が膨大である場合、症例表示領域７１０は全ての類似症例を一度に表示することができない。そこで、症例表示領域７１０の例えば右側には、上下方向に長尺のスクロールバー７１５が設けられている。表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を上下方向にスクロール表示させる。これにより、ユーザは、非表示状態にあった類似症例を症例表示領域７１０に表示させ、その類似症例を観察できる。
なお、スクロールバー７１５は左右方向に長尺であってもよい。この場合、表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を左右方向にスクロール表示させればよい。
なお、情報端末１００は、探索クエリ画像との距離が所定の閾値以下のサムネイル画像を症例検索システム３００から取得するとしたが、これは一例に過ぎない。例えば、情報端末１００は、類似度が高い順に、常に一定数のサムネイル画像を症例検索システム３００から取得してもよい。或いは、情報端末１００は、常にある確定診断病名のサムネイル画像が一定数含まれるようにサムネイル画像を症例検索システム３００から取得してもよい。
なお、症例表示領域７１０におけるサムネイル画像の表示手法としては、例えば、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法が採用できる。つまり、症例表示領域７１０において、左上から右下に向けて蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法が採用できる。
もちろん、本実施の形態は別の表示手法が採用されてもよい。例えば、左から１列目の上端に距離が最短のサムネイル画像を表示し、下側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一列の下端に達すると、左から２列目の上端に次に距離が大きいサムネイル画像を表示するという表示手法が採用されてもよい。また、これら複数の表示手法をユーザが切り替え可能な構成が採用されてもよい。
また、上記の例では、類似度として距離が採用されたが、コサイン類似度のような画像同士の類似性を示す指標であればどのような指標が採用されてもよい。コサイン類似度が採用された場合、値が１に近づくにつれて比較対象となる２つの画像の類似性が高くなる。
なお、詳細は後述するが、症例表示領域７１０に表示する類似症例は、病名リスト表示領域７３０に表示された病名や、分布リスト表示領域７５０に表示された病変分布で絞り込むことができる。現在設定されている類似症例の絞込条件は、表示条件表示領域７１４に表示される。図６の例では、類似症例検索直後の状態であり、何も絞り込みがなされていないため、表示条件表示領域７１４には「全疾患」と表示されている。
症例表示領域７１０に表示されている類似症例のサムネイル画像は、ユーザの操作により拡大することが可能に構成されている。以下、類似症例のサムネイル画像の拡大表示が説明される。
図８は、症例表示領域７１０に表示されたサムネイル画像のうち１のサムネイル画像が選択されたときの基本画面Ｋ２を示す図である。図８に示されるように、類似症例検索直後の基本画面Ｋ２が表示された状態では、各表示領域には、サムネイル画像の画像全体が表示されている。症例表示領域７１０は、サムネイル画像をそれぞれ表示する所定数ＮＤ（この実施の形態ではＮＤ＝２０）の表示領域を含む。
情報端末１００の入力制御部１０３は、マウス等の操作部１０２を通しての入力を常時モニタリングしている。そして、入力制御部１０３は、マウスをクリックする操作がユーザにより入力され、その操作により、症例表示領域７１０に表示された類似症例のサムネイル画像の１つが選択されたことを検知する。すると、表示制御部１０４は、選択されたサムネイル画像の背景の色を変更する。
図８の例では、症例表示領域７１０において、２行４列目の表示領域８０１に表示された類似症例のサムネイル画像が選択されている。そのため、表示領域８０１内のサムネイル画像の背景の色が変更されている。具体的には選択されたサムネイル画像の外周を取り囲む枠状の領域の色が変更されている。これにより、ユーザに対して当該サムネイル画像が選択状態になったことを知らせることができる。
ここで、背景の色としては、例えば、症例表示領域７１０の背景の色との差が明確に現れる色が採用される。図８の例では例えば黄色が採用されている。なお、図８の例ではサムネイル画像の枠状の領域の色を変更する態様を示したが、枠状の領域を点滅させる態様や枠状の領域の輝度を明るくする態様が採用されてもよい。
図８に示すようにサムネイル画像の１つが選択された状態で、ユーザが、例えばマウスのホイールを回転させることにより拡大操作を行うと、入力制御部１０３は、マウスのホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば検知された回転量を用いて拡大率を決定し、決定した拡大率でサムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。
図９は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの基本画面Ｋ２を示す図である。具体的には、図９では、選択されたサムネイル画像だけではなく、選択されたサムネイル画像の上に隣接するサムネイル画像（１行４列目）から、選択されたサムネイル画像の下に隣接するサムネイル画像（３行４列目）まで、横並びの順に、合計１１個のサムネイル画像が拡大されている。これにより、症例検索システム３００から受信した類似症例データ６２件の全てのサムネイル画像を拡大する場合と比較して、情報端末１００における処理負担を大きく軽減することができる。
なお、表示されているサムネイル画像を拡大する際には、拡大画像生成部１１２は、図９に示すように、対応関心領域ＣＲＯＩの中心位置が表示領域８０１の中心位置になるように、拡大画像を生成する。また、表示制御部１０４は、サムネイル画像を拡大する際に、図９に示すように、表示領域８０１のサイズを拡大せず、同じサイズに維持する。
また、拡大画像生成部１１２は、拡大率をサムネイル画像毎に異なる値に設定してもよい。これによって、図９に示されるように、拡大後の各サムネイル画像が同じ大きさになるように拡大することができる。
図９では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図９ではＭ＝２０）の類似症例のサムネイル画像が表示されており、Ｍ個以下（図９では１１個）のサムネイル画像が拡大されている。
図１０は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの図９と異なる基本画面Ｋ２を示す図である。図１０では、拡大画像生成部１１２は、選択されたサムネイル画像の上に隣接するサムネイル画像（１行４列目）から、選択されたサムネイル画像の下に隣接するサムネイル画像（３行４列目）まで、横並びの順に、合計１１個のサムネイル画像を拡大している。また、拡大画像生成部１１２は、対応関心領域ＣＲＯＩのサイズが表示領域８０１のサイズと同じサイズになるように、１１個のサムネイル画像を拡大している。
図１１は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの図９、図１０と異なる基本画面Ｋ２を示す図である。図１１では、ユーザは、図９と異なるサムネイル画像を選択している。これによって、拡大されるサムネイル画像が変更されている。すなわち、図１１では、３行３列目の表示領域１１０１に表示された類似症例のサムネイル画像が選択されている。その結果、拡大画像生成部１１２は、選択されたサムネイル画像の上に隣接するサムネイル画像（２行３列目）から、選択されたサムネイル画像の下に隣接するサムネイル画像（４行３列目）まで、横並びの順に、合計１１個のサムネイル画像を拡大している。
図１２は、図９と同じサムネイル画像（２行４列目）が拡大されたときの異なる表示態様を示す図である。図１２に示すように、表示制御部１０４は、拡大されるサムネイル画像を強調表示している。図１２の例では、選択されたサムネイル画像と同様に、拡大されたサムネイル画像の外周を取り囲む枠状の領域の色が変更されている。これによって、ユーザに対して拡大されたサムネイル画像を強調することができる。その結果、図１２に示されるように、症例表示領域７１０において拡大されたサムネイル画像と拡大されないサムネイル画像とが混在する場合でも、ユーザは、両者を容易に区別することができる。
このように、画像診断を行う医師が注目した類似症例のサムネイル画像の一つを拡大操作するだけで、注目した類似症例と類似した類似症例も連動して拡大表示される。このため、医師は一つの指示にて複数の類似症例を詳細に比較することができる。したがって、操作数を大幅に低減できる。
なお、症例表示領域７１０の一部のサムネイル画像が拡大される場合について説明したが、本開示は、これに限定されない。例えば、ユーザにより任意の一つのサムネイル画像が選択された場合に、症例表示領域７１０に表示されている２０個のサムネイル画像全てを拡大してもよい。
図１３は、症例表示領域７１０に表示されたサムネイル画像のうち図８と異なるサムネイル画像が選択されたときの基本画面Ｋ２を示す図である。図１３では、１行４列目の表示領域１３０１に表示されたサムネイル画像がユーザによって選択されている。
図１３に示されるように、１行４列目のサムネイル画像が選択された状態で、ユーザが、例えばマウスのホイールを回転させることにより拡大操作を行うと、入力制御部１０３は、マウスのホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば通知された回転量を用いて各サムネイル画像の拡大率をそれぞれ決定し、決定した拡大率で全てのサムネイル画像を拡大する。表示制御部１０４は、例えば図１４または図１５に示されるように、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。
図１４は、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されたときの基本画面Ｋ２を示す図である。なお、図１４でも、図９と同様に、拡大画像生成部１１２は、対応関心領域ＣＲＯＩの中心位置が表示領域の中心位置になるように、拡大されたサムネイル画像をそれぞれ生成している。
図１５は、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されたときの図１４と異なる基本画面Ｋ２を示す図である。図１５では、図１０と同様に、拡大画像生成部１１２は、対応関心領域ＣＲＯＩのサイズが表示領域のサイズと同じサイズになるように、拡大されたサムネイル画像をそれぞれ生成している。
図１４または図１５の場合によれば、症例表示領域７１０において、拡大されているサムネイル画像と拡大されていないサムネイル画像とが混在しない。このため、見易い利点がある。
なお、上記では、ユーザによる拡大操作は、マウスのホイールの回転としているが、本開示は、これに限られない。例えば、症例表示領域７１０に表示されている一つのサムネイル画像上にマウスのポインタを配置して、マウスのボタンを押した状態で、キーボードの例えば上方向キーまたは下方向キーを押すことにより、拡大操作を行うようにしてもよい。この場合には、入力制御部１０３は、上方向キーまたは下方向キーが押されている時間をカウントしてもよい。拡大画像生成部１１２は、例えば上方向キーまたは下方向キーが押されている時間を用いて拡大率を決定してもよい。
なお、サムネイル画像の具体的な拡大処理手順の詳細は後述する。
図６に戻り、レイアウト領域７２０は、例えば、図６に示す基本画面の左下に配置されている。そして、レイアウト領域７２０は、症例表示領域７１０に表示された類似症例サムネイル画像のうちユーザが詳細に観察したい画像を、ディスプレイ１０１ａの医用画像ビューワに表示させるために用いられる。図５に示す通り、ディスプレイ１０１ａには４つの医用画像ビューワ６１０〜６４０が２行２列で表示されている。また、レイアウト領域７２０には、２行２列で４つの表示ボックス７２１〜７２４が存在する。このように、ディスプレイ１０１ａに表示される医用画像ビューワ６１０〜６４０の数及び配置と、レイアウト領域７２０における表示ボックス７２１〜７２４の数及び配置とは揃えられている。図５の通り、医用画像ビューワ６１０に、検索クエリ画像が表示されているのに合わせ、表示ボックス７２１には、検索クエリ画像のサムネイル画像が初期表示される。
他の表示ボックス７２２〜７２４には、医用画像ビューワ６２０〜６４０と連動させて類似症例のサムネイル画像が表示される。つまり、入力制御部１０３が表示ボックス７２２〜７２４のいずれか１の表示ボックスに症例表示領域７１０に表示された１のサムネイル画像のドラッグアンドドロップを検知すると、表示制御部１０４はその表示ボックスに１のサムネイル画像を表示させると共に、その表示ボックスに対応する医用画像ビューワにそのサムネイル画像に対応するスライス画像を表示する。このように、医用画像ビューワ６１０〜６４０は、表示ボックス７２１〜７２４と１対１で対応付けられている。
図６の例では、表示ボックス７２２〜７２４は空白であるため、図５に示す医用画像ビューワ６２０〜６４０も空白になっている。
ユーザは、マウスをドラッグアンドドロップすることで、詳細に観察したいサムネイル画像を、症例表示領域７１０からレイアウト領域７２０に移動させる。例えば、ユーザが表示ボックス７２２にサムネイル画像を移動させたとすると、表示ボックス７２２に対応する医用画像ビューワ６２０には、このサムネイル画像に対応するスライス画像が表示される。同様に、ユーザが表示ボックス７２３にサムネイル画像を移動させたとすると、表示ボックス７２３に対応する医用画像ビューワ６３０には、このサムネイル画像に対応するスライス画像が表示される。すなわち、表示ボックス７２１〜７２４のうち任意の表示ボックスにサムネイル画像を移動させると、検索クエリ画像のサムネイル画像に隣接して類似症例のサムネイル画像が表示される。そのため、ユーザはサムネイル画像のレベルで診断対象症例と類似症例との対比ができ、両症例の類似性を速やかに判断できる。つまり、サムネイル画像は、スライス画像に比べて情報量が少ないため、ユーザは、レイアウト領域７２０において隣接配置された診断対象症例と類似症例とがどの程度類しているかのおよその検討をつけることができる。そのため、ユーザは、症例表示領域７１０に表示された多数の類似症例の中から、対象診断症例との比較をスライス画像のレベルで詳細に行う必要がある類似症例の最終候補の絞り込みを効率良く行うことができる。
同様に、ディスプレイ１０１ａにも、レイアウト領域７２０と同じ配置関係で検索クエリ画像及び類似症例のスライス画像が表示される。そのため、レイアウト領域７２０において最終候補となる類似症例を絞り込む作業が終了すると、何らの操作を入力しなくても、ディスプレイ１０１ａには、診断対象症例と最終候補として絞り込んだ類似症例とがスライス画像のレベルで表示されている。そのため、ユーザは対象診断と最終候補の類似症例とを詳細に読影するという次の作業ステップに円滑に移行できる。
図６に示す基本画面の左側の上段には、「病名リスト」との見出しが付けられた病名リスト表示領域７３０が配置されている。病名リスト表示領域７３０には、類似症例の検索結果として取得された全ての類似症例の確定診断病名が表示される。診断対象症例は、診断が終了して確定診断病名が付与された後、類似症例として、症例検索システム３００に蓄積される。したがって、各類似症例には、それぞれ、診断によって付与された確定診断病名が予め付与されている。
図１６は、病名リスト表示領域７３０の拡大図である。図１６では、確定診断病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２、７３３、７３５、７３６、７３８、７３９、７４０、７４２、７４３、７４５）とに分けて表示されている。図１６の例では、大分類の病名として、真菌症７３１（ｍｙｃｏｓｉｓ）、腫瘍性７３４（ｎｅｏｐｌａｓｔｉｃ）、非腫瘍性７３７（ｎｏｎｎｅｏｐｌａｓｔｉｃ）、ミコバクテリア症７４１（ｍｙｃｏｂａｃｔｅｒｉｏｓｉｓ）、及びその他７４４が表示されている。
また、図１６の例では、真菌症７３１の詳細分類の病名として、アスペルギルス症７３２（ａｓｐｅｒｇｉｌｌｏｓｉｓ）、クリプトコッカス症７３３（ｃｒｙｐｔｏｃｏｃｃｏｓｉｓ）が表示されている。また、腫瘍性７３４の詳細分類の病名として、原発性肺癌７３５（ｌｕｎｇ ｃａｎｃｅｒ）、転移性肺癌７３６（ｍｅｔａｓｔａｔｉｃ ｌｕｎｇ ｃａｎｃｅｒ）が表示されている。また、非腫瘍性７３７の詳細分類の病名として、肺膿瘍７３８（ｌｕｎｇ ａｂｓｃｅｓｓ）、サルコイドーシス７３９（ｓａｒｃｏｉｄｏｓｉｓ）、敗血性塞栓７４０（ｓｅｐｔｉｃ ｅｍｂｏｌｉ）が表示されている。また、ミコバクテリア症７４１の詳細分類の病名として、非結核性抗酸菌症７４２（ＮＴＭ：ｎｏｎｔｕｂｅｒｃｕｌｏｕｓ ｍｙｃｏｂａｃｔｅｒｉａ）、肺結核７４３（ｔｕｂｅｒｃｕｌｏｓｉｓ）が表示されている。また、その他７４４の詳細分類の病名として気管支拡張症７４５（ｂｒｏｎｃｈｉｅｃｔａｓｉｓ）が表示されている。
また、大分類の病名及び詳細分類の病名の横には、その病名の症例数が表示されている。ユーザは、この病名リスト表示領域７３０における大分類の病名または詳細分類の病名の任意の行を選択することで、症例表示領域７１０に表示される類似症例を絞り込むことができる。図６に示すように類似症例の検索直後の状態では、多様な疾患を含む６２個の類似症例が表示対象になっているが、図１６の真菌症７３１の行がマウスでクリックされた場合、表示制御部１０４は、図１７に示すように真菌症の類似症例のみを症例表示領域７１０に表示する。また、図１６の転移性肺癌７３６の行がマウスでクリックされた場合は、表示制御部１０４は、図１８に示すように、転移性肺癌の類似症例のみを症例表示領域７１０に表示する。
この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例がどのような絞り込み条件であるが分かるように、表示条件表示領域７１４に、絞り込んだ病名を表示する。図１７は、「真菌症」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。図１８は、「転移性肺癌」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。
図１７の例では、「真菌症」で絞り込みがかけられたため、表示条件表示領域７１４には「真菌症」と表示され、図１８の例では「転移性肺癌」で絞り込みがかけられたため、表示条件表示領域７１４には「転移性肺癌」と表示されている。
また、この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例の件数が分かるように、検索結果件数表示領域７１３にその件数を表示する。図１７の例では、「真菌症」に該当する類似症例は１４件であったため、検索結果件数表示領域７１３には１４件と表示され、図１８の例では、「転移性肺癌」に該当する類似症例は３件であったため、検索結果件数表示領域７１３には３件と表示されている。
この機能により、画像診断の対象として医師が想定する病名のみの類似症例が症例表示領域７１０に表示され、医師は、診断対象症例が想定した病名と矛盾しないかどうかを容易に確認できる。
図１７では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図１７ではＭ＝１４）の類似症例のサムネイル画像が表示されている。
図６に示す基本画面Ｋ２の左側の中段には、「病変分布」との見出しが付けられた分布リスト表示領域７５０が配置されている。分布リスト表示領域７５０には、類似症例を検索した結果、症例検索システム３００から取得された全ての類似症例の病変分布の種類が表示される。
図１９は分布リスト表示領域７５０の拡大図である。図１９の例では、７つの病変分布の名称が表示されており、各病変分布の名称の左側にはチェックボックスが配置されている。図１９の例では病変分布として、びまん性７５１（ｄｉｆｆｕｓｅ）、区域性７５２（ｓｅｇｍｅｎｔａｌ）、気道性７５３（ｂｒｏｎｃｈｉａｌ）、両側性７５４（ｂｉｌａｔｅｒａｌ）、多発性７５５（ｍｕｌｔｉｐｌｅ）、胸膜下７５６（ｓｕｂｐｌｅｕｒａｌ）、及び血行性７５７（ｈｅｍａｔｏｇｅｎｏｕｓ）が表示されている。
これらの病変分布は予め定義されており、各類似症例には、予め、びまん性７５１〜血行性７５７のいずれに該当するか否かを示す分布フラグ値（該当：１、非該当：０）が付与されている。類似症例によっては、全ての分布フラグ値が非該当（：０）に設定されている場合もあれば、複数の分布フラグ値が該当（：１）に設定されている場合もある。
本実施の形態の症例検索システム３００は、ユーザが診断対象症例のスライス画像に設定した関心領域に対し、類似する関心領域を持つ類似症例を検索する。ユーザが関心領域を設定したスライス画像以外にも、病変は存在することもある。そして、ユーザは関心領域を設定したスライス画像で類似症例を検索した後、そのスライス画像以外のスライス画像と、検索された類似症例とを比較したい場合もある。この場合、ユーザは、医用画像ビューワ６１０において、スライス送りの操作を入力して他のスライス画像を表示させ、検索された類似症例と比較する作業を行う。この場合、検索された全ての類似症例のうち注目する病変に関連する類似症例のみが症例表示領域７１０に表示されていれば、関心領域が設定されたスライス画像以外のスライス画像の中から所望の病変を持つスライス画像を抽出する作業をスムーズに行うことができる。そこで、本実施の形態では、この作業をよりスムーズに行うために、検索された類似症例を所望の病変分布で絞りこむ機能が設けられている。
本実施の形態では、肺野領域内での病変分布として、図１９のびまん性７５１〜血行性７５７で示す病変分布が採用されている。また、図１９のように、チェックボックス及び病名分布の名称について、表示制御部１０４は、絞り込みが可能な病変分布をアクティブ状態で表示し、絞り不可能な病変分布を非アクティブ状態で表示する。ここでは、アクティブ状態としては、輝度が非アクティブ状態に比べて高い状態が採用され、非アクティブ状態としては、輝度がアクティブ状態に比べて低い状態が採用されている。
図１９の例では、びまん性７５１、気道性７５３〜血行性７５７がアクティブ状態で表示され、区域性７５２は、非アクティブ状態で表示されている。これは、現在、類似症例の検索によって取得された全ての類似症例のうち、少なくともいずれか１つの類似症例において、びまん性７５１、気道性７５３〜血行性７５７の分布フラグ値が１（該当）に設定され、取得された全ての類似症例のうち、いずれの類似症例においても、区域性７５２の分布フラグ値が０（非該当）に設定されていたからである。
アクティブ状態のチェックボックスのうち、１以上のチェックボックスにチェックマークが入力されたことを入力制御部１０３が検知すると、表示制御部１０４は、チェックマークが入力された病変条件に該当する類似症例のみを症例表示領域７１０に表示させる。
なお、区域性７５２については、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）に設定されている。そのため、区域性７５２にチェックマークが入力可能な構成を採用すると、これらの病変分布にチェックマークを入力した場合、症例表示領域７１０には類似症例が何も表示されず、チェックマークを入力する意味が無くなってしまう。そこで、本実施の形態では、このような事態を避けるために、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）である病変分布は非アクティブ状態で表示する。
図２０は、両側性７５４のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２１は、両側性７５４の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２０に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２１に示すように、症例表示領域７１０に、両側性の病変分布を持つ類似症例のみを表示する。この例では、両側性の病変分布を持つ類似症例は１０件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１０件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「両側性」とを表示する。図２１の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２０に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、図２１に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「両側性」が選択された場合には、肺の両側が観測できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、多発性７５５のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、多発性の病変分布を持つ類似症例のみを表示する。病変分布名「多発性」が選択された場合には、多発している病変の分布を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、びまん性７５１のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、びまん性の病変分布を持つ類似症例のみを表示する。病変分布名「びまん性」が選択された場合には、広範囲に広がるびまん性病変の分布を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、血行性７５７のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、血行性の病変分布を持つ類似症例のみを表示する。血行性の場合は注目病変以外への病変の転移の可能性がある。したがって、画像全体を確認する必要がある。このため、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
図２２は、気道性７５３のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２３は、気道性７５３の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２２に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２３に示すように、症例表示領域７１０に、気道性の病変分布を持つ類似症例のみを表示する。この例では、気道性の病変分布を持つ類似症例は１２件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１２件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「気道性」とを表示する。図２３の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２２に示すように、気道性７５３のチェックボックスにチェックマークが入力された場合、図２３に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「気道性」が選択された場合には、気道性か否かを判定できるようにする必要がある。そこで、拡大画像生成部１１２は、関心領域の面積が表示領域の２分の１程度になるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
同様に、区域性７５２のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、区域性の病変分布を持つ類似症例のみを表示する。病変分布名「区域性」が選択された場合には、区域性病変の詳細を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、関心領域の面積が表示領域の２分の１程度になるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
図２４は、胸膜下７５６のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２５は、胸膜下７５６の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２４に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２４に示すように、症例表示領域７１０に、胸膜下の病変分布を持つ類似症例のみを表示する。この例では、胸膜下の病変分布を持つ類似症例は７件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「７件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「胸膜下」とを表示する。図２５の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２４に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、図２５に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「胸膜下」が選択された場合には、胸膜との位置関係を観察できるようにする必要がある。そこで、拡大画像生成部１１２は、胸膜が含まれるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
なお、図２１、図２３、図２５における病変分布選択時の各サムネイル画像に対する拡大処理の詳細は後述する。
図２６は、患者情報１０００のデータ構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報管理部２０２により、患者別に患者情報蓄積部２０１に蓄積されて管理される。患者情報１０００には、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録されている。図２６に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、及び確定診断１９００を備える。
患者ＩＤ１１００は、患者に固有の識別子である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、及び主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、及び主訴である。検査情報１８００は、図２７に示すように、当該患者が過去に受けた１以上の検査に関する情報を表す。
図２７は、図２６に示す検査情報１８００のデータ構成を示す図である。検査情報１８００は、患者に対して行われた検査に関する情報であり、１つの検査に対応して１つずつ作成される。検査情報１８００は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、及び検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別子である。検査日時１８２０は、検査が行われた日時である。検査種１８３０は、検査の種類である。検査の種類としては、例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影等がある。
検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ、及びＧＰＴ等各種指標の値が該当する。また、検査結果１８４０は、各種指標を基に医師が下した判断等も該当する。また、単純Ｘ線撮影やＣＴ撮影等の画像検査であれば、撮影された画像へのポインタ情報や画像診断結果のレポートへのポインタ情報が含まれる。なお、検査で撮影された画像は、ＤＩＣＯＭのフォーマットで医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積される。
また、検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、これらの医用画像データは医用情報管理システム２００の医用画像データ蓄積部２０３が記憶する医用画像データベース２０００に蓄積される。
図２８は、医用画像データベース２０００のデータ構成を示す図である。医用画像データベース２０００は、検査ＩＤ１８１０及びシリーズＩＤ２１００を持つ。１回の検査で、複数の種類の撮影（例えば、単純ＣＴと造影ＣＴ等）が行われる場合があるので、１つの検査ＩＤ１８１０に対し、複数のシリーズＩＤ２１００が対応付けられている場合もある。つまり、撮影の種類に応じた個数のシリーズが得られるのである。
また、シリーズは、撮影の種類以外にも、撮影された画像の再構成の条件毎に得られる。例えば、撮影された画像が肺野条件及び縦隔条件で再構成された場合、これらの条件毎に１つのシリーズが得られる。なお、肺野条件で再構成された画像は肺の中の血管、気管支、及び肺胞等が強調表示される。また、縦隔条件で再構成された画像は、血管やリンパ節等の縦隔が強調表示される。肺野条件及び縦隔条件は１度の撮影で得られた画像を再構成することで得られるため、単純ＣＴと造影ＣＴとで２度の撮影が行われ、これら２度の撮影のそれぞれにつき肺野条件及び縦隔条件で画像が再構成された場合、２つの肺野条件のシリーズが得られ、２つの縦隔条件のシリーズが得られる。
ＣＴ及びＭＲＩの画像検査の場合、１回の撮影で複数のスライス画像が取得されるので、１つのシリーズＩＤ２１００には、複数のスライスＩＤ２２００が対応付けられている。図２８の検査ＩＤ「１３２２７９８９」には２つのシリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」が対応付けられているため、この検査から２つのシリーズのＣＴ画像が得られたことが分かる。また、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のそれぞれに対して、スライスＩＤ２２００が複数対応付けられていることが分かる。
検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５には、図２９に示すような診断レポート３０００が蓄積される。診断レポート３０００には、各検査に対する医師による診断結果が登録されている。
図２９は、診断レポート３０００のデータ構成を示す図である。診断レポート３０００は、検査ＩＤ１８１０、所見３１００、及び診断３２００を備える。検査ＩＤ１８１０は、図２７で示した検査ＩＤ１８１０と同じである。これにより、診断レポート３０００と検査情報１８００とが対応付けられる。所見３１００は、検査に対する医師の所見を示す文言が登録されている。診断３２００は、検査に対する医師の診断を示す文言が登録されている。
図３０は、類似症例データ４０００のデータ構成を示す図である。類似症例データ４０００は、診断対象症例に対して類似する類似症例を検索する際に参照されるデータであり、１つの類似症例に対応して１つずつ作成されている。なお、類似症例データ４０００は、類似症例データの付加情報の一例である。類似症例データ４０００は、症例検索システム３００の類似症例データ蓄積部３０１において、類似症例毎に蓄積されている。図３０に示すように、類似症例データ４０００は、類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、画像特徴データ４４００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、及び確定診断（詳細分類病名）４８００を備える。
類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。ここでは、類似症例のスライス画像に設定された関心領域毎に１つの類似症例データが生成されるため、類似症例ＩＤ４１００は、関心領域の識別子とも言える。図３０の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。
スライスＩＤ４２００は、関心領域が設定されたスライス画像の識別子であり、図２８に示すスライスＩＤ２２００と同一である。関心領域情報４３００は、スライス画像に設定された関心領域の位置を示す情報である。図３１は、スライス画像３１０１に設定された関心領域ＲＯＩを模式的に示した図である。図３１の例では、関心領域ＲＯＩは矩形状に設定されている。したがって、関心領域情報４３００は、関心領域ＲＯＩの左上の頂点の座標（ｘｌ、ｙｔ）と、右下の頂点の座標（ｘｒ、ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域情報４３００として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域情報４３００として採用される。
画像特徴データ４４００は、関心領域情報４３００で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４５００は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。ここで、サムネイル画像データ４５００は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。
病変分布情報４６００は、対象となる類似症例が予め定められたびまん性４６１０〜血行性４６７０で表される病変分布のいずれに該当するか否かを表す分布フラグ値（１：該当、０：非該当）である。
確定診断（大分類病名）４７００は、対象となる類似症例に対して確定された大分類の病名である。確定診断（大分類名）４７００は、類似症例を大分類の病名で絞り込む際に使用される。
確定診断（詳細分類病名）４８００は、対象となる類似症例に対して確定された詳細分類の病名である。確定診断（詳細分類病名）４８００は、類似症例を小分類の病名で絞り込む際に使用される。
予め、確定診断（大分類病名）４７００は、確定診断（詳細分類病名）４８００に対して一意に対応する大分類病名が定義されており、その対応関係を用いて類似症例データ４０００に格納されている。
確定診断（詳細分類病名）４８００は、医用画像データ蓄積部２０３において、図２８に示すスライスＩＤ２２００からシリーズＩＤ２１００が特定される。そして、特定されたシリーズＩＤから患者情報蓄積部２０１において、検査ＩＤ１８１０が特定され、検査ＩＤ１８１０から対応する患者情報１０００（図２６）が特定され、特定された患者情報１０００から該当する患者の確定診断１９００が特定される。
次に、情報端末１００が医用情報管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。
図３２は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００に対して類似症例検索の要求を行い、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。なお、図３２において、シーケンス図の左側に示す２列の矩形は、該当するステップの処理によりディスプレイ１０１ａ、１０１ｂに表示される画面を示す。また、図３２において、情報端末の「Ａ」は、医用情報管理アプリケーションを示し、「Ｂ」は、類似症例検索アプリケーションを示す。このシーケンスが開始される前に医用情報管理アプリケーションは予め起動されているものとする。
まず、情報端末１００は、操作部１０２を通してユーザ（読影を行う医師）の読影対象となる検査リストの表示要求を受け付け、入力制御部１０３及び通信制御部１１０を通して、医用情報管理システム２００の通信制御部２０６へ検査リストの表示要求を送信する（Ｓ５１０）。
医用情報管理システム２００の患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成する。そして、患者情報管理部２０２は、通信制御部２０６を通して、生成した検査リストを情報端末１００の通信制御部１１０に送信する（Ｓ５２０）。ここで、検査リストには、該当する患者の患者情報１０００及び検査情報１８００が含まれる。
情報端末１００の表示制御部１０４は、通信制御部１１０で受信された検査リストをディスプレイ１０１に表示する（Ｓ５３０）。
この場合、ディスプレイ１０１ａに検査リストが表示され、ディスプレイ１０１ｂには何も表示されない。
図３３は、検査リストの画面図である。検査リストは、読影が未終了の検査を表示する領域８００と、検査に含まれるシリーズに関する情報を表示する領域８１０とを備える。領域８００には、「患者ＩＤ」、「患者氏名」、「検査日時」、「検査ＩＤ」、及び「検査種」の欄が設けられている。「患者ＩＤ」、「患者氏名」の欄には、患者情報１０００に登録された患者ＩＤ１１００及び氏名１２００が表示され、「検査日時」、「検査ＩＤ」、及び「検査種」の欄には、検査情報１８００に登録された検査日時１８２０、検査ＩＤ１８１０、及び検査種１８３０が表示される。領域８１０は、領域８００でユーザにより選択された検査の詳細を表示するための領域であり、「シリーズＩＤ」、「定義」、及び「画像」の欄が設けられている。ここでは、領域８００においてユーザにより検査（行に対応）が選択されていないために、領域８１０には何も表示されていない。
ユーザは、領域８００に表示された検査の中から、これから読影を行う検査を選択する。この選択が入力制御部１０３で検知されると、図３２に示すように、通信制御部１１０は、選択された検査の検査ＩＤに含まれる全シリーズの表示要求を、医用情報管理システム２００へ送信する（Ｓ５４０）。
医用情報管理システム２００の通信制御部２０６がこの表示要求を受信すると、患者情報管理部２０２は、図２８に示す医用画像データベース２０００を参照し、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像を取得し、通信制御部２０６を通して、情報端末１００に送信する（Ｓ５５０）。例えば、図２８の例において、検査ＩＤ「１３２２７９８９」の検査がユーザにより選択されると、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のシリーズに含まれる全てのスライス画像がＳ５５０で送信される。
情報端末１００の通信制御部１１０が全シリーズの画像を取得すると、表示制御部１０４は、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを領域８１０に表示する（Ｓ５６０）。
この場合、ディスプレイ１０１ａに表示された検査リストの領域８１０には、領域８００で選択された検査に対応するシリーズのシリーズリストが表示され、ディスプレイ１０１ｂには何も表示されない。
図３４は、検査が選択された後の検査リストの画面図である。図３４の領域８００では選択された行の背後にハイライトが付されている。図３４の例では、領域８００において、２行目の「パナ太郎」の検査が選択されている。そのため、領域８１０では、選択された検査についての「シリーズＩＤ」、「定義」、及び「画像」が表示されている。ここで、「シリーズＩＤ」の欄には、医用画像データベース２０００において、選択された検査の検査ＩＤに対応付けられたシリーズＩＤが表示され、「画像」の欄には、表示されたシリーズＩＤを代表する１枚のスライス画像のサムネイル画像が表示される。ここで、シリーズＩＤを代表する１枚のスライス画像としては、所定のスライス位置の画像が採用される。所定のスライス位置としては先頭のスライス位置であってもよいし、中央のスライス位置であってもよい。「定義」は、該当するシリーズに対する撮影条件や再構成の条件を示す。この「定義」は、図示は省略されているが、例えば、図２８の医用画像データベース２０００において、シリーズＩＤと対応付けて登録されている。
領域８１０において、ユーザにより読影対象のシリーズが選択され、その選択を入力制御部１０３が検知すると、表示制御部１０４は、図３５に示すように、選択されたシリーズの先頭のスライス画像をディスプレイ１０１ａに表示する（Ｓ５７０）。図３５は、ユーザによりシリーズが選択された際にディスプレイ１０１ａに表示されるスライス画像を示した図である。図３５は、胸部ＣＴ撮影での先頭スライスを示す図であり、肺尖部よりももう少し頭方向の肩位置でのスライス画像である。ここで、表示制御部１０４は、選択されたシリーズの全てのスライス画像をシリーズ送りできる状態でディスプレイ１０１ａに表示する。なお、ディスプレイ１０１ｂには何も表示されない。例えば、ユーザにより、ディスプレイ１０１ａ上にマウスポインタが位置決めされマウスホイールを回転するスライス送りの操作が入力され、その操作を入力制御部１０３が検知する。すると、表示制御部１０４は、マウスホイールの回転量に応じて、ディスプレイ１０１ａに表示されたスライス画像を別のスライス位置のスライス画像に切り替える。ユーザは、スライス送りの操作を入力しながら画像診断を行う。そして、ユーザは画像診断に迷った場合、類似症例検索アプリケーションを起動する。
ここで、類似症例検索アプリケーションは、操作部１０２のキーボードにおいて、予め定められたショートカットキーが入力されて起動されてもよいし、マウスの右クリックで医用画像ビューワのメニューを表示させ、そのメニューの中から類似症例検索メニューが指定されて起動されてもよい。類似症例検索アプリケーションの起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、情報端末１００は、関心領域（ＲＯＩ）の受け付け待ち状態になる。
ユーザは、操作部１０２を通して、ディスプレイ１０１ａに表示されたスライス画像上の病変に関心領域（ＲＯＩ）を設定する（Ｓ５８０）。ここで、ユーザは、図３１に示すように、例えば、マウスを左クリックして、スライス画像３１０１における関心領域ＲＯＩの左上の頂点の座標を入力する。そして、ユーザは、左クリックした状態でマウスを右斜め下方向にドラッグし、左クリックを解除することで、関心領域ＲＯＩの右下の頂点を入力すればよい。
関心領域を設定する操作を入力制御部１０３が検知すると、ＲＯＩ管理部１０５は、入力制御部１０３から関心領域の左上及び右下の頂点の座標データを受け取り、受け取った座標データを関心領域情報として生成する。そして、ＲＯＩ管理部１０５は、生成した関心領域情報を通信制御部１１０に送信する（Ｓ５９０）。
同時に、ＲＯＩ管理部１０５は、診断対象症例のスライス画像を通信制御部１１０に送信する（Ｓ６００）。この場合、Ｓ５５０において、情報端末１００が医用情報管理システム２００から受け取った全シリーズのスライス画像のうち、ユーザが選択したシリーズにおいてユーザにより関心領域が設定された１枚のスライス画像（検索クエリ画像）が送信される。
次に、通信制御部１１０は、ＲＯＩ管理部１０５から送信された関心領域情報を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０１）。
同時に、通信制御部１１０は、ＲＯＩ管理部１０５から送信されたスライス画像を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０２）。
ここで、Ｓ６００、Ｓ６０１において、スライス画像そのものを送信するとしたが、スライス画像のスライスＩＤのみが送信されても構わない。この場合は、スライスＩＤを受信した症例検索システム３００は、そのスライスＩＤを指定して、医用情報管理システム２００からスライス画像を取得すればよい。
次に、症例検索システム３００が類似症例検索を行い、情報端末１００が類似症例検索結果を初期表示するまでの処理を説明する。
図３６Ａは、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。
症例検索システム３００の画像特徴抽出部３０２は、検索クエリ画像に設定された関心領域から予め定められた複数次元の画像特徴を抽出する（Ｓ６１０）。
「画像特徴」としては、医用画像における臓器若しくは病変部分の形状に関する画像特徴、又は輝度分布に関する画像特徴等が採用できる。例えば、非特許文献：「根本、清水、萩原、小畑、縄野、“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”、電子情報通信学会論文誌Ｄ−ＩＩ、Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ、Ｎｏ．２、ｐｐ．４１６−４２６、２００５年２月」には、４９０次元の画像特徴を用いることが記載されている。本実施の形態においては、例えば、この非特許文献に記載された画像特徴が採用される。但し、これは一例にすぎず、他の画像特徴が採用されてもよい。
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された各類似症例の画像特徴とを比較する（Ｓ６２０）。ここで、類似症例検索部３０３は、検索クエリ画像から抽出された画像特徴データと、類似症例データ蓄積部３０１に類似症例毎に蓄積された類似症例データ４０００（図３０）に登録された画像特徴データ４４００との距離を算出することで、両画像特徴を比較する。
次に、類似症例検索部３０３は、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の類似症例として決定する（Ｓ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部３０１に蓄積された類似症例データ４０００のうち、送信対象として決定された類似症例の類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００、及び類似症例検索部３０３で算出された距離を情報端末１００に送信する（Ｓ６４０）。
以下、類似症例検索結果が表示された初期の基本画面Ｋ２（図６）を生成する処理が実行される。まず、初期の基本画面Ｋ２において、レイアウト領域７２０を生成する際に使用される管理情報について説明する。
まず、症例検索システム３００の通信制御部３０４は、レイアウト情報を情報端末１００に送信する（Ｓ６５０）。ここで、レイアウト情報は、レイアウト領域７２０を構成する表示ボックスの行数、列数を指定する情報である。
次に、情報端末１００の通信制御部１１０がレイアウト情報を受信すると、表示ボックス管理部１０６は、送信されたレイアウト情報が指定する表示ボックスの行数及び列数を表示ボックス管理情報４４１０（図３６Ｂ）に登録すると共に、検索クエリ画像のスライスＩＤを表示ボックス管理情報（図３６Ｂ）に登録する（Ｓ６６０）。
図３６Ｂは、表示ボックス管理情報４４１０のデータ構成を示す図である。表示ボックス管理情報４４１０には、行数及び列数が登録されるテーブル４４１１と、各表示ボックスに表示されるスライス画像のスライスＩＤが登録されるテーブル４４１２とが含まれる。したがって、表示ボックス管理部１０６は、症例検索システム３００から送信されたレイアウト情報が指定する行数及び列数をテーブル４４１１の行数及び列数の欄に登録する。また、本実施の形態では、４つの表示ボックス７２１〜７２４のうち、左上の表示ボックス７２１に検索クエリ画像のサムネイル画像が表示される。そこで、表示ボックス管理部１０６は、医用情報管理システム２００から送信された検索クエリ画像のスライスＩＤをテーブル４４１２の１行１列目の項目に登録する。
ここで、レイアウト領域７２０を構成する表示ボックスの行数及び列数のデフォルト値は症例検索システム３００により予め設定されている。ここで、行数及び列数のデフォルト値は例えば２行及び２列である。そのため、図３６Ｂに示す表示ボックス管理情報４４１０には、「２行２列」が登録されている。
図６の例では、レイアウト領域７２０において、表示ボックス７２１〜７２４は２行２列で表示されている。このレイアウト領域７２０における行数及び列数はユーザが自由に設定できる。
図３６Ｃは、表示ボックスが３行２列で設定されたレイアウト領域７２０を持つ基本画面Ｋ２を示す図である。レイアウト領域７２０を構成する表示ボックスをＭ行Ｎ列で一般化すると、Ｍ≠Ｎの場合、ディスプレイ１０１が縦型のディスプレイであれば、Ｍ＞Ｎであることが望ましく、ディスプレイ１０１が横型のディスプレであれば、Ｍ＜Ｎであることが望ましい。
ここで、レイアウト領域７２０を構成する表示ボックスのうち、１つの表示ボックスに対象診断症例のサムネイル画像を表示することが、本実施の形態の重要な特徴の一つである。つまり、類似症例と診断対象症例とを隣接して表示すれば、ユーザは、両症例の類似性の判断がし易くなる。よって、レイアウト領域７２０における表示ボックスの配列は３行３列までにすることが望ましい。
また、表示ボックスの配列が３行２列の場合、２行１列目の表示ボックス或いは２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。また、表示ボックスの配列が２行３列の場合は、１行２列目或いは２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。また、表示ボックスの配列が３行３列の場合は、２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。こうすることで、常に、レイアウト領域７２０には、対象診断症例に対して類似症例が隣接して表示されることになる。
ユーザが設定したレイアウト領域７２０のレイアウト情報は、図３６Ｄ又は図３６Ｅに示すレイアウト管理情報４２００に登録される。
なお、レイアウト管理情報４２００を保存するボックスレイアウト管理部１１１は、症例検索システム３００が備えてもよい。
同じユーザであっても情報端末１００のディスプレイ１０１のサイズや画面のタイプ（縦型又は横型）に適合するようにレイアウト領域７２０のレイアウトが変更されることもある。そのため、図３６Ｄに示すように、ユーザが設定したレイアウト情報は、ユーザＩＤと端末ＩＤと関連付けてレイアウト管理情報４２００に登録されてもよい。図３６Ｄは、レイアウト管理情報４２００の一例を示す図である。このレイアウト管理情報４２００では、「ユーザＩＤ」、「端末ＩＤ」、「列数」、「行数」、及び「診断対象症例の位置」とが対応付けられている。ここで、「ユーザＩＤ」は情報端末１００を使用するユーザに対して予め付与されたユーザの識別子である。「端末ＩＤ」は、該当するユーザの使用が想定される情報端末１００の識別子である。
図３６Ｄの例では、ユーザＩＤ「Ｕ０１」のユーザは、端末ＩＤ「Ｔ０２」及び「Ｔ０４」の使用が想定されているため、ユーザＩＤ「Ｕ０１」が端末ＩＤ「Ｔ０２」、「Ｔ０４」と対応付けられている。「行数」及び「列数」は該当するユーザが設定したレイアウト領域７２０の行数及び列数が登録されている。「診断対象症例の位置」は、診断対象症例を表示する表示ボックスの位置である。例えば、端末ＩＤ「Ｔ０４」の情報端末１００では、レイアウト領域７２０が２行３列に設定されており、診断対象症例を全ての類似症例と隣接表示させるために、「診断対象症例の位置」として２行１列を示す（２、１）が登録されている。
なお、図３６Ｄでは、レイアウト情報をユーザＩＤと端末ＩＤと対応付けて管理する態様を示したが、レイアウト情報はユーザＩＤのみと対応付けて管理されてもよい。図３６Ｅは、レイアウト管理情報４２００の一例を示す図である。図３６Ｅに示すレイアウト管理情報４２００では、図３６Ｄに示すレイアウト管理情報４２００において、「端末ＩＤ」の欄が省かれている。それ以外、図３６Ｅのレイアウト管理情報４２００は図３６Ｄのレイアウト管理情報４２００と同じである。なお、図３６Ｅの態様では、１のユーザは１の情報端末１００の使用が想定されているため、「端末ＩＤ」の欄が省かれている。
なお、レイアウト情報が症例検索システム３００で管理される場合、図３６ＡのＳ６５０において、該当するユーザのレイアウト情報が情報端末１００に送信される。
次に、Ｓ６４０で送信された類似症例データ及びＳ６６０で保存した表示ボックス管理情報４４１０を用いて、表示制御部１０４は、類似症例検索結果が表示された初期の基本画面Ｋ２を生成する（Ｓ６７０）。
この場合、ディスプレイ１０１ｂには図６に示す基本画面Ｋ２が表示される。また、ディスプレイ１０１ａには、検索クエリ画像が表示されている。
図３７は、図３６ＡのＳ６７０に示す初期の基本画面Ｋ２を生成する処理の詳細を示すフローチャートである。
まず、Ｓ１０００にて、表示制御部１０４は、図３６ＡのＳ６４０で受信された類似症例の数をカウントし、カウント値を検索結果件数表示領域７１３に表示する。
次に、Ｓ１１００にて、表示制御部１０４は、表示条件表示領域７１４に、「全疾患」と表示する。ここで、「全疾患」と表示されるのは、初期の基本画面Ｋ２では、ユーザにより病名や病変分布での絞り込みがかけられていないからである。
次に、Ｓ１２００にて、表示制御部１０４は、図３６ＡのＳ６４０で受信された類似症例のうち、症例表示領域７１０にサムネイル画像が表示可能な類似症例の件数分だけ、症例表示領域７１０に類似症例のサムネイル画像を表示すると共に、各サムネイル画像に対応付けて確定診断及び類似度を表示する。
症例表示領域７１０に表示可能な類似症例の件数の最大値は、図６の例では２０である。この最大値は予め定められている。また、この最大値はユーザが自由に変更できる構成にしてもよい。図３６ＡのＳ６４０で受信された類似症例の数が、最大値よりも多い場合、表示制御部１０４は、症例表示領域７１０の右端に縦方向に長尺のスクロールバー７１５を表示する。これにより、ユーザは、スクロールバー７１５を移動させ、初期の基本画面Ｋ２で非表示であった類似症例のサムネイル画像を閲覧できる。
次に、Ｓ１３００にて、病名リストが生成されて表示される。まず、図３６ＡのＳ６４０で受信された類似症例から、病名リストが生成される。病名リストは、Ｓ６４０で受信された類似症例が、確定診断病名毎に分類されたリストである。
ここで、Ｓ６４０で受信された類似症例の件数をＮＣ件とする。病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を用いて、病名リストを生成する。生成された病名リストは、図３８に示すようにテーブル形式のデータとして、病名リスト管理部１０８で管理される。
図３９は、図３７のＳ１３００で生成される病名リストのデータ構成を示す図である。病名リストには、「病名ＩＤ」、「大分類病名」、「詳細分類病名」、「件数」、及び「類似症例ＩＤ」の欄が含まれる。「病名ＩＤ」は、確定診断病名毎に付与される識別子である。ここでは、大分類病名と詳細分類病名との１つの組み合わせに対して１つの病名ＩＤが付与されている。
「大分類病名」は、類似症例データ４０００に登録された確定診断（大分類病名）４７００が示す確定診断病名である。「詳細分類病名」は、類似症例データ４０００に登録された確定診断（詳細分類病名）４８００が示す確定診断病名である。「件数」は、「病名ＩＤ」が示す確定診断病名に該当する類似症例の件数である。「類似症例ＩＤ」は、「病名ＩＤ」が示す病名に該当する類似症例を示す類似症例ＩＤである。
病名リスト管理部１０８は、Ｓ６４０で受信した全ての類似症例データ４０００について、確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を抽出し、両者が同じ類似症例データ４０００を同じ確定診断病名の類似症例として分類する。そして、病名リスト管理部１０８は、確定診断病名が同じ類似症例の件数をカウントし、該当する確定診断病名のレコードの「件数」の欄に登録する。また、病名リスト管理部１０８は、同じ確定診断病名に分類した類似症例の類似症例ＩＤを該当する確定診断病名のレコードの「類似症例ＩＤ」の欄に登録する。
図３９の例では、大分類病名が「腫瘍性」、詳細分類病名が「原発性肺癌」の確定診断病名に対して病名ＩＤ「ＤＩＳ５２８」が付与されている。そして、この確定診断病名に該当する類似症例の件数が１０件であったため、該当するレコードの「件数」の欄に１０が登録され、この確定診断病名に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５８」、「ＳＩＭ５５１」、「ＳＩＭ１２０９」、及び「ＳＩＭ２３４１」等が、該当するレコードの「類似症例ＩＤ」の欄に登録されている。
そして、表示制御部１０４は、このようにして生成された病名リストを用いて病名リスト表示領域７３０を生成し、ディスプレイ１０１に表示する。
図４０、図４１、図４２は、それぞれ、病名リスト表示領域７３０の第１表示例、第２表示例、第３表示例を示した図である。図４０に示すように第１表示例では、類似症例検索の結果得られた類似症例が、詳細分類病名の件数の多い順に件数と対応付けて一覧表示されている。
図４１に示すように第２表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示されている。
図４２に示すように第３表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示され、且つ、大分類病名毎にその中に含まれる詳細分類病名が件数の多い順に件数と対応付けて一覧表示されている。この場合、患確定診断病名が、大分類病名と詳細分類病名との階層構造で表現される。
図４３は、図４１に示す病名リスト表示領域７３０の画面遷移を示す図である。図４３の上段に示すように、一覧表示された大分類病名のうち、１の大分類病名がユーザにより選択される操作を入力制御部１０３が検知すると、表示制御部１０４は、図４３の下段に示すように、選択された大分類病名に属する詳細分類病名を件数が多い順に件数と対応付けて表示する。ここで、ユーザは、例えば、病名リスト表示領域７３０において一覧表示された大分類病名のうち、所望する１の大分類病名を例えばダブルクリック或いはシングルクリックすることで１の大分類病名を選択すればよい。図４３の例では非腫瘍性がダブルクリックされているため、非腫瘍性に属する詳細分類病名が一覧表示されている。
図４３の下段において、詳細分類病名が一覧表示されている領域がユーザによりダブルクリック或いはシングルクリックされると、表示制御部１０４は、該当する領域に表示されていた詳細分類病名を非表示にすればよい。
なお、表示制御部１０４は、病名リスト（図３９）を参照することで、大分類病名に属する詳細分類病名を判定すればよい。例えば、図３９の例では、真菌症に対して、アスペルギルス症及びクリプトコッカス症が対応付けられているため、表示制御部１０４は、真菌症にはアスペルギルス症及びクリプトコッカス症が属すると判断すればよい。
図３７に戻り、Ｓ１４００にて、分布リストが生成されて表示される。まず、Ｓ６４０で受信された類似症例から、分布リストが生成される。分布リストは、Ｓ６４０で受信された類似症例が、病変分布毎に分類されたリストである。
病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている病変分布情報４６００を用いて、分布リストを生成する。生成された分布リストは、図４４Ａに示すようにテーブル形式のデータとして、分布リスト管理部１０９で管理される。
図４４Ａは、図３７のＳ１４００で生成される分布リストのデータ構成を示す図である。分布リストには、「分布名」、「症例数」、及び「類似症例ＩＤ」の欄が含まれる。「分布名」は、びまん性、区域性といった予め定められた複数の病変分布の名称である。「症例数」は、病変分布に該当する類似症例の件数である。「類似症例ＩＤ」は、病変分布に該当する類似症例を示す類似症例ＩＤである。
分布リスト管理部１０９は、Ｓ６４０で受信した全ての類似症例データ４０００について、病変分布情報４６００を抽出し、抽出した病変分布情報４６００において、分布フラグ値に１（該当）が設定されている病変分布の数をカウントし、カウント値を該当する病変分布のレコードの「症例数」の欄に登録する。また、分布リスト管理部１０９は、分布フラグ値に１が設定されている類似症例の類似症例ＩＤを該当する病変分布のレコードの「類似症例ＩＤ」の欄に登録する。
図４４Ａの例では、びまん性に該当する類似症例の件数が３件であったため、びまん性のレコードの「症例数」の欄に３が登録されている。また、びまん性に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５２１」、「ＳＩＭ４１２３」、及び「ＳＩＭ５２２５」がびまん性のレコードの「類似症例ＩＤ」の欄に登録されている。
そして、表示制御部１０４は、このようにして生成された分布リストを用いて分布リスト表示領域７５０を生成し、ディスプレイ１０１に表示する。
図４４Ｂは、図４４Ａに示す分布リストを用いて生成された分布リスト表示領域７５０を示す図である。図４４Ａにおいて、区域性及び胸膜下の症例数は０であるため、図４４Ｂでは、区域性７５２及び胸膜下７５６が非アクティブ状態で表示され、これら以外の病変分布は、症例数が１以上であるため、アクティブ状態で表示されている。
図３７に戻り、Ｓ１５００にて、レイアウト領域７２０が表示される。この処理は、表示制御部１０４によって行われる。
図３８は、図３７に示すＳ１５００の処理を示すフローチャートである。Ｓ１５１０にて、表示制御部１０４は、レイアウト領域７２０を構成する表示ボックスの行数及び列数を、Ｓ６６０で設定された表示ボックス管理情報４４１０から取得する。図３６Ｂの表示ボックス管理情報４４１０の例では、行数及び列数として２行２列が設定されているため、「２行２列」という情報が取得される。なお、ユーザが表示ボックスの行数及び列数を変更した場合、レイアウト領域７２０を構成する表示ボックスの行数及び列数は、図３６Ｄ又は図３６Ｅに示すレイアウト管理情報４２００から取得される。
次に、Ｓ１５２０にて、表示制御部１０４は、Ｓ１５１０で取得した表示ボックスの行数及び列数に合わせて、表示ボックスを描画する。
最後に、Ｓ１５３０にて、表示制御部１０４は、表示ボックス管理情報４４１０から各表示ボックスのスライスＩＤを特定し、特定したスライスＩＤに対応するサムネイル画像を、対応する各表示ボックス内に描画する。
図３６Ｂの例では、１行１列目の表示ボックスに診断対象症例のスライスＩＤが格納されている。そのため、表示制御部１０４は、図３２のＳ６００で送信された診断対象症例のスライス画像からサムネイル画像を生成し、生成したサムネイル画像を表示ボックス７２１に描画する。
この段階では、残りの表示ボックス（１行２列目、２行１列目、２行２列目の表示ボックス７２２、７２３、７２４）にはスライスＩＤが格納されていないため、表示制御部１０４は、これらの表示ボックスに何も表示しない。これらの表示ボックスには、後述する処理により、類似症例のサムネイル画像が表示されることになる。
図３６Ａに戻り、通信制御部１１０は、表示ボックス管理部１０６に格納された表示ボックス管理情報４４１０を表示制御部１０４に送信する（Ｓ６８０）。
次に、表示制御部１０４は、レイアウト領域７２０の表示状態及びレイアウトと同じ表示状態及びレイアウトで医用画像ビューワを起動させる（Ｓ６９０）。
ここでは、症例検索システム３００が画像特徴を抽出する例を示したが、情報端末１００が画像特徴を抽出してもよい。図４５は、症例検索システム３００が画像特徴を抽出する態様を採用した場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００のブロック図である。
図２との違いは、情報端末１００に画像特徴抽出部１１３が追加された点、及び症例検索システム３００から画像特徴抽出部３０２が省かれた点にある。
図４６は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
図３２との違いは、ＲＯＩ管理部１０５が、診断対象症例のスライス画像を通信制御部１１０に送信する処理（Ｓ６００）の後、画像特徴の抽出が情報端末１００で行われ（Ｓ６０３）、抽出された画像特徴が症例検索システム３００に送信（Ｓ６０４）されている点にある。画像特徴の抽出（Ｓ６０４）の処理内容は、画像特徴の抽出が症例検索システム３００で行われる場合と同様である。
図４７は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。図３６Ａとの違いは、画像特徴の抽出が情報端末１００側で行われるため、図４７では、図３６Ａにはあった画像特徴の抽出（Ｓ６１０）が省かれている点にある。
次に、図８〜図１５を用いて説明された、症例表示領域７１０に表示されているサムネイル画像の拡大処理を説明する。
図４８は、症例表示領域７１０に表示されているサムネイル画像の拡大処理を示すフローチャートである。
Ｓ４０００では、拡大画像生成部１１２は、ユーザが選択したサムネイル画像（図８では２行４列目）の類似症例ＩＤ４１００（図３０）を取得する。以下では、ユーザが選択したサムネイル画像を基準サムネイル画像と呼ぶ。拡大画像生成部１１２は、この基準サムネイル画像に対するユーザの拡大操作と連動させて、症例表示領域７１０に表示されている他のサムネイル画像の拡大率を決定する。
Ｓ４１００では、拡大画像生成部１１２は、ユーザが操作部１０２に入力した基準サムネイル画像に対する拡大操作の操作量を、入力制御部１０３から取得する。そして、拡大画像生成部１１２は、取得した操作量に基づき、基準サムネイル画像に対する拡大率を決定する。
具体的には、入力制御部１０３は、操作部１０２に拡大操作として入力されるマウスのホイールの回転量を検知する。入力制御部１０３は、検知した回転量を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、回転量に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出する。
上述のように、ユーザによる拡大操作は、キーボードの上方向キーまたは下方向キーでもよい。この場合には、入力制御部１０３は、キーの押下時間を検知してもよい。拡大画像生成部１１２は、キーの押下時間に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出してもよい。
Ｓ４２００では、拡大画像生成部１１２は、症例検索システム３００から取得した多数の類似症例のうち、拡大処理を行う対象の類似症例を決定する。表示制御部１０４は、図６に示されるように、症例検索システム３００の類似症例検索部３０３により検索されたＮＣ件（図６ではＮＣ＝６２）の類似症例データ中の、症例表示領域７１０で予め定められた最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の類似症例のサムネイル画像を症例表示領域７１０に表示している。
本ステップでは、拡大画像生成部１１２は、ユーザが選択したサムネイル画像を含むようにＮＤ以下の範囲で拡大処理を行う対象の類似症例を決定する。この実施の形態では、拡大画像生成部１１２は、拡大処理を行う対象をＮＺ個の類似症例に決定する。ここで、ＮＺ≦ＮＤである。本ステップにより、ＮＣ件の全ての類似症例のサムネイル画像を拡大する場合と比較して、情報端末１００における処理負荷を軽減することができる。
Ｓ４３００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺに到達するまで（Ｓ４３００でＹＥＳ）、Ｓ４４００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４４００、Ｓ４５００の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺを超えると（Ｓ４３００でＮＯ）、図４８の処理は終了する。
Ｓ４４００では、拡大画像生成部１１２は、拡大対象の類似症例ｉのサムネイル画像の拡大率を算出する。Ｓ４１００で決定した基準サムネイル画像に対する拡大率と、基準サムネイル画像に対応する類似症例の関心領域情報４３００（図３０）と、拡大対象の類似症例ｉの関心領域情報４３００（図３０）とに基づき、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率を算出する。
図４９は、図４８のＳ４４００のサブルーチンの処理を示すフローチャートである。
Ｓ４４１０では、拡大画像生成部１１２は、基準サムネイル画像に対応する類似症例の関心領域情報４３００に基づき、基準サムネイル画像の関心領域の面積を算出する。ここで、基準サムネイル画像の関心領域の面積をＳｒとし、関心領域の左上の座標を（ｘｌ、ｙｔ）とし、関心領域の右下の座標を（ｘｒ、ｙｂ）とすると、関心領域の面積Ｓｒは以下の式で算出することができる。
Ｓｒ＝｜ｘｌ−ｘｒ｜×｜ｙｔ−ｙｂ｜
Ｓ４４２０では、拡大画像生成部１１２は、拡大対象の類似症例ｉの関心領域情報４３００に基づき、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積を算出する。ここで、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとし、関心領域の左上の座標を（ｘｌｉ、ｙｔｉ）とし、関心領域の右下の座標を（ｘｒｉ、ｙｂｉ）とすると、関心領域の面積Ｓｉは以下の式で算出することができる。
Ｓｉ＝｜ｘｌｉ−ｘｒｉ｜×｜ｙｔｉ−ｙｂｉ｜
Ｓ４４３０では、拡大画像生成部１１２は、Ｓ４４１０で算出した基準サムネイル画像の関心領域の面積Ｓｒと、Ｓ４４２０で算出した拡大対象の類似症例ｉのサムネイル画像の関心領域の面積Ｓｉと、Ｓ４１００で決定した基準サムネイル画像に対する拡大率とに基づき、拡大対象の類似症例ｉの拡大率を算出する。ここで、基準サムネイル画像に対する拡大率をｋｒとすると、拡大対象の類似症例ｉの拡大率ｋｉは、以下の式で算出することができる。
ｋｉ＝ｋｒ（Ｓｒ／Ｓｉ）
図５０は、拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。図５０の上左図は、拡大処理前の基準サムネイル画像を示す。図５０の上右図は、拡大処理後の基準サムネイル画像を示す。図５０の下左図は、拡大処理前の拡大対象のサムネイル画像を示す。図５０の下右図は、拡大処理後の拡大対象のサムネイル画像を示す。
図５０の上左図に示される基準サムネイル画像を拡大率ｋｒで拡大すると、図５０の上右図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５０の上右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｄの中心位置に一致するように、表示領域７２０ｄを決定する。拡大画像生成部１１２は、表示領域７２０ｄのサイズを拡大処理前の表示領域７２０ｃのサイズと同じサイズに維持している。
図５０の下左図に示される拡大対象のサムネイル画像を拡大率ｋｉで拡大すると、図５０の下右図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５０の下右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｆの中心位置に一致するように、表示領域７２０ｆを設定する。拡大画像生成部１１２は、表示領域７２０ｆのサイズを拡大処理前の表示領域７２０ｅのサイズと同じサイズに維持している。
図５０では、基準サムネイル画像の拡大率ｋｒに対して、関心領域の面積比に応じて拡大対象のサムネイル画像ｉの拡大率ｋｉを決定している。したがって、図５０に示すように、拡大後の関心領域ＲＯＩのサイズが一致している。
図４８に戻って、Ｓ４５００では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率と、類似症例データ４０００（図３０）内の、関心領域情報４３００及びサムネイル画像データ４５００とに基づき、拡大対象の類似症例ｉの拡大されたサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２により生成されたサムネイル画像を表示する。
図５１は、図４８のＳ４５００のサブルーチンの処理を示すフローチャートである。図５２は、拡大率と表示領域との関係を概略的に表す図である。以下、図５１及び図５２を用いて、関心領域の中心位置が拡大されたサムネイル画像の中心位置に一致するように、拡大画像を生成する処理の詳細について説明する。
Ｓ４５１０では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率と、類似症例データ４０００（図３０）内のサムネイル画像データ４５００とに基づき、拡大画像を生成する。拡大率がｋｉ倍の場合は、図５２の左図に示されるサムネイル画像から図５２の右図に示される拡大されたサムネイル画像が生成される。
Ｓ４５２０では、拡大画像生成部１１２は、類似症例データ４０００（図３０）内の関心領域情報４３００と、Ｓ４４００で算出した拡大率とに基づき、拡大後のサムネイル画像における関心領域の中心座標を算出する。ここで、拡大前の関心領域の中心座標を（ｘｃ、ｙｃ）とすると、図５２に示すように、拡大前の関心領域の中心座標に拡大率を掛けて得られる座標（ｋｉ×ｘｃ、ｋｉ×ｙｃ）が拡大後の関心領域の中心座標となる。
Ｓ４５３０では、拡大画像生成部１１２は、Ｓ４５２０で算出した拡大後の関心領域の中心座標（ｋｉ×ｘｃ、ｋｉ×ｙｃ）と、予め定められた表示領域のサイズとから、拡大後のサムネイル画像ｉにおける表示領域を決定する。ここで、図５２の左図に示されるように、表示領域７２０ａは、横寸法ｗ、縦寸法ｈに設定されている。この場合、図５２の右図に示される矩形領域７２０ｂが表示領域となる。この矩形領域７２０ｂの左上座標は（ｋｉ×ｘｃ−ｗ／２、ｋｉ×ｙｃ−ｈ／２）であり、右下座標は（ｋｉ×ｘｃ＋ｗ／２、ｋｉ×ｙｃ＋ｈ／２）である。
Ｓ４５４０では、表示制御部１０４は、拡大画像生成部１１２によりＳ４５１０で生成された拡大画像のうち、Ｓ４５３０で算出された表示領域７２０ｂの画像を、症例表示領域７１０の類似症例ｉの表示領域に表示する。図５１に示される処理により、関心領域の中心位置が表示領域の中心位置となる拡大されたサムネイル画像ｉを生成することが可能となる。
以上の処理により、症例表示領域７１０には、ユーザが指定した任意の拡大率で、サムネイル画像が表示される。ユーザによる一つのサムネイル画像に対する拡大操作で症例表示領域７１０内の全てのサムネイル画像の拡大率を変更できる。このため、ユーザの操作負担が減少する。また、症例表示領域７１０において、関心領域のサイズが揃えられてサムネイル画像が表示される。このため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対してのみ、拡大処理が行われる。このため、システムへの負荷が大幅に軽減される。
次に、症例表示領域７１０に拡大されたサムネイル画像が表示された後に、ユーザがスクロールバー７１５を操作した場合のサムネイル画像の拡大処理の流れを説明する。この場合では、図１４または図１５に示されるように、症例表示領域７１０に表示されているサムネイル画像の全てが拡大されるものとする。
図５３Ａは、拡大されたサムネイル画像が症例表示領域７１０に表示された後に、ユーザがスクロールバー７１５を操作した場合のサムネイル画像の拡大処理を示すフローチャートである。図５３Ｂは、拡大されたサムネイル画像が症例表示領域７１０に表示された状態の基本画面Ｋ２を示す図である。
図５３Ｂに示される状態において、ユーザがスクロールバー７１５を下向きに操作すると、その操作量を入力制御部１０３が検知し、検知した操作量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、図５３Ａの処理を開始する。
Ｓ４６００では、拡大画像生成部１１２は、ユーザによるスクロールバー７１５の操作によって、新たに症例表示領域７１０に表示される症例数Ｎｓを取得する。具体的には、拡大画像生成部１１２は、症例表示領域７１０で予め定められた最大表示件数ＮＤを表示制御部１０４から取得する。この実施形態では、図６に示されるように、最大表示件数ＮＤは、４行５列の２０件である。したがって、新たに５個のサムネイル画像が表示対象となるため、拡大画像生成部１１２は、Ｎｓ＝５を取得する。
また、Ｓ４６００では、拡大画像生成部１１２は、新たに症例表示領域７１０に表示されるサムネイル画像の類似症例ＩＤを特定する。このとき、拡大画像生成部１１２は、症例検索システム３００の類似症例検索部３０３から受信した類似症例の類似度を参照する。現在は、表示制御部１０４は、類似度の最も高い類似症例からＮＤ件の類似症例のサムネイル画像を表示している。そこで、拡大画像生成部１１２は、類似度の最も高い類似症例から数えて（ＮＤ＋１）番目から（ＮＤ＋Ｎｓ）番目までの類似症例を拡大対象症例とする。拡大画像生成部１１２は、これらの拡大対象の類似症例ＩＤを特定する。
Ｓ４７００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮｓに到達するまで、Ｓ４８００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４８００、Ｓ４５００の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮｓを超えると（Ｓ４７００でＮＯ）、図５３Ａの処理は終了する。
Ｓ４８００では、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率ｋｉを算出する。すでに症例表示領域７１０には拡大されたサムネイル画像が表示されている。そこで、拡大画像生成部１１２は、図４８のＳ４１００で決定した基準サムネイル画像に対する拡大率ｋｒを用いる。そして、拡大画像生成部１１２は、図４８のＳ４４００と同様にして、拡大対象の類似症例ｉの拡大率ｋｉを算出する。続くＳ４５００は、図４８のＳ４５００と同じであるため、詳細な説明は省略する。図５３Ａの処理により、図５３Ｃに示される画面が得られる。
図５３Ｃは、拡大されたサムネイル画像が図５３Ｂの状態から移動した基本画面Ｋ２を示す図である。図５３Ｃに示されるように、症例表示領域７１０に表示されている類似症例のサムネイル画像は、スクロールバー７１５の操作により上方向に移動している。
なお、ユーザがスクロールバー７１５の操作を続けた場合には、拡大画像生成部１１２は、さらに、図５３Ａの処理を実行する。
以上の処理により、類似症例が多数であっても、拡大画像生成部１１２は、スクロールバー７１５の操作により新たに症例表示領域７１０に表示されるサムネイル画像に対してのみ拡大処理を行えばよい。このため、システムへの負荷が大幅に軽減される。
次に、図２０、図２２、図２４に示す分布リスト表示領域７５０に表示された病変分布が選択されたときの拡大処理について説明する。図５４は、分布リスト表示領域７５０に表示された病変分布が選択されたときの処理を示すフローチャートである。
Ｓ２０００では、分布リスト表示領域７５０に表示された病変分布（分布チェック項目）のうち、いずれか１の分布チェック項目を選択する操作を入力制御部１０３が検知すると、拡大画像生成部１１２は、検知された分布チェック項目が第１〜第３分布情報のいずれに該当するかを判定する。第１分布情報の場合、処理がＳ１３０１に進められ、第２分布情報の場合、処理がＳ１３０２に進められ、第３分布情報の場合、処理がＳ１３０３に進められる。
第１分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属するサムネイル画像を選択させるための情報である。ここでは、第１分布情報としては、「両側性」、「多発性」、「びまん性」、及び「血行性」が該当する。よって、第１範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
第２分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域の一部であることを示す所定の第２範囲（第１範囲より低い：第２範囲の上限値が第１範囲の下限値以下）に属するサムネイル画像を選択させるための情報である。ここでは、第２分布情報としては、「気道性」及び「区域性」が該当する。よって、第２範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
第３分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、胸膜の辺縁に存在するサムネイル画像を選択させるための情報である。ここでは、第３分布情報としては、「胸膜下」が該当する。
Ｓ１３０１では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第１分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数（この実施の形態では２０件）以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ１として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉ（ｉは抽出された類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺ１に到達するまで、Ｓ２１００、Ｓ１５０１の処理を繰り返す。拡大画像生成部１１２は、Ｓ２１００、Ｓ１５０１の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺ１を超えると（Ｓ１３０１でＮＯ）、図５４の処理は終了する。
Ｓ２１００では、拡大画像生成部１１２は、類似症例ｉについての第１分布情報に対応する第１拡大率を算出する。ここでは、第１拡大率としては、例えば、１．０が採用される。但し、これは一例であり第１分布情報が示す病変分布を診断する際に設定される関心領域の全域が表示領域に収まるような値であれば、１．０以外の拡大率が第１拡大率として採用されてもよい。
Ｓ１５０１では、図４８のＳ４５００と同様に処理が行われる。その結果、表示制御部１０４は、類似症例ｉのサムネイル画像を類似症例ｉの第１拡大率で拡大した画像を症例表示領域７１０に表示する。
上述の図２１では、両側性が選択されている。この場合、類似症例のうち病変分布が両側性に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、この場合、拡大率は１．０であるため、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像が表示されている。すなわち、関心領域ＲＯＩの中心が表示領域６８０１の中心に位置するようにサムネイル画像の表示位置が調整されず、且つ、拡大されずに、サムネイル画像が表示される。
Ｓ１３０２では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第２分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ２として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺ２に到達するまで、Ｓ２２００、Ｓ１５０２の処理を繰り返す。拡大画像生成部１１２は、Ｓ２２００、Ｓ１５０２の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺ２を超えると（Ｓ１３０２でＮＯ）、図５４の処理は終了する。
Ｓ２２００では、拡大画像生成部１１２は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報とを用いて、類似症例ｉについての第２分布情報に対応する第２拡大率を算出する。
第２分布情報が選択された場合、拡大画像生成部１１２は、類似症例ｉを、関心領域のサイズが表示領域のサイズの１／２程度になるように、拡大する。そのため、拡大画像生成部１１２は、例えば、下記の数式で類似症例ｉに対する第２拡大率ｋｉを計算する。表示領域の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとすると、第２拡大率ｋｉは以下の式で算出できる。
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ１５０２では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像を第２拡大率ｋｉで拡大する。表示制御部１０４は、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０に拡大画像生成部１１２により拡大されたサムネイル画像を表示する。
上述の図２３では、気道性が選択されている。この場合、類似症例のうち病変分布が気道性に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域６９０１の中心に位置するように第２拡大率で拡大されている。
Ｓ１３０３では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第３分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ３として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺ３に到達するまで、Ｓ２３００、Ｓ１５０３の処理を繰り返す。拡大画像生成部１１２は、Ｓ２３００、Ｓ１５０３の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺ３を超えると（Ｓ１３０３でＮＯ）、図５４の処理は終了する。
Ｓ２３００では、拡大画像生成部１１２は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報と、胸膜領域情報４９００とを用いて、類似症例ｉについての第３分布情報に対応する第３拡大率を算出する。
図５５は、胸膜領域情報４９００が追加された類似症例データ４０００のデータ構成を示す図である。なお、類似症例データ４０００に胸膜領域情報４９００が登録されていない場合、胸膜領域情報４９００が得られない。この場合、拡大画像生成部１１２は、第３拡大率を、第１拡大率と同じ値である１．０に設定すればよい。ここで、胸膜領域情報４９００は、類似症例において、胸膜領域を示す情報である。
Ｓ１５０３では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像でを第３拡大率ｋｉで拡大する。表示制御部１０４は、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０に拡大画像生成部１１２により拡大されたサムネイル画像を表示する。
図５６は、胸膜領域７１０１を説明する図である。図５６に示すように、胸膜領域７１０１は、胸膜を含む領域であって、中心が関心領域ＲＯＩの中心に位置し且つ関心領域ＲＯＩよりも少しサイズの大きな矩形状の領域である。ここで、胸膜領域情報４９００には、胸膜領域７１０１の左上の頂点の座標（ｘｐｌ、ｙｐｔ）と右下の頂点の座標（ｘｐｒ、ｙｐｂ）との４値が含まれる。第３分布情報が選択された場合には、胸膜領域を拡大表示するため、拡大画像生成部１１２は、以下の式で第３拡大率ｋｉを計算する。表示領域７１０２の面積をＳｄ、胸膜領域７１０１の面積をＳｐとすると第３拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝Ｓｄ／Ｓｐ
なお、胸膜領域情報４９００は、類似症例データ４０００の作成時に関心領域情報と共にユーザにより入力されてもよい。或いは、胸膜領域情報４９００は、画像処理装置により、スライス画像から肺の領域を自動的に抽出させ、胸膜位置を判定させることで自動的に作成されてもよい。
上述の図２５では、胸膜下が選択されている。この場合、類似症例のうち病変分布が胸膜下に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域７００１の中心に位置するように第３拡大率で拡大されている。
以上の処理により、症例表示領域７１０には、病変分布に関する診断内容が反映された拡大率でサムネイル画像が表示される。そして、症例表示領域７１０において、関心領域のサイズが揃えられてサムネイル画像が表示される。そのため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対してのみ、拡大処理が行われるため、システムへの負荷が大幅に軽減される。
（実施の形態２）
上記実施の形態１では、ユーザの操作部１０２に対する操作量に応じて、類似症例のサムネイル画像の拡大率を制御している。これに対して、実施の形態２では、基本画面に設けられた拡大率変更ボタンに対するユーザの操作によって、拡大率を制御している。
図５７は、実施の形態２において、類似症例検索により検索された類似症例のサムネイル画像が症例表示領域７１０に表示された状態の基本画面Ｋ２を示す図である。以下では、上記実施の形態１と異なる部分を中心に説明する。
実施の形態２では、基本画面Ｋ２は、拡大率変更ボタン７１６（指示ボタンの一例）を備える。図５７に示されるように、基本画面Ｋ２は、拡大率変更ボタン７１６として、第１指示ボタン７１７、第２指示ボタン７１８、及び第３指示ボタン７１９を含む。
実施の形態２において、拡大率変更ボタン７１６に含まれる第１指示ボタン７１７、第２指示ボタン７１８、及び第３指示ボタン７１９のいずれかをユーザが選択すると、その選択を入力制御部１０３が検知する。すると、入力制御部１０３は、ユーザが選択したボタンの情報を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、通知されたボタンの情報に応じて、症例表示領域７１０に表示されている全てのサムネイル画像の拡大率を変更する。
拡大画像生成部１１２は、第１指示ボタン７１７がユーザにより選択されると、拡大率を１．０と算出する。なお、類似症例検索後の初期の基本画面Ｋ２では、第１指示ボタン７１７が選択された状態になっている。このため、図５７の基本画面Ｋ２におけるサムネイル画像の拡大率は１．０倍である。また、図５７では、表示制御部１０４は、第１指示ボタン７１７の色を変更している。
図５８は、第２指示ボタン７１８がユーザにより選択された場合の基本画面Ｋ２を示す図である。図５９は、第３指示ボタン７１９がユーザにより選択された場合の基本画面Ｋ２を示す図である。
図５８では、表示制御部１０４は、第２指示ボタン７１８の色を変更している。また、図５９では、表示制御部１０４は、第３指示ボタン７１９の色を変更している。
拡大画像生成部１１２は、図５７または図５９に示される基本画面Ｋ２において、第２指示ボタン７１８がユーザにより選択されると、図５８に示されるように、関心領域ＲＯＩのサイズが表示領域５８０１のサイズの１／２程度に拡大されるように、各サムネイル画像の拡大率を算出する。
拡大画像生成部１１２は、図５７または図５８に示される基本画面Ｋ２において、第３指示ボタン７１９がユーザにより選択されると、図５９に示されるように、関心領域ＲＯＩのサイズが表示領域５９０１のサイズと同程度に拡大されるように、各サムネイル画像の拡大率を算出する。
図５８、図５９では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図５８、図５９ではＭ＝２０）の類似症例のサムネイル画像が表示されており、Ｍ個（図５８、図５９では２０個）のサムネイル画像が拡大されている。このように、実施の形態２では、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されている。例えば図１７のようにＭ＝１４の場合には、１４個全てのサムネイル画像が拡大されることになる。
次に、ユーザが拡大率変更ボタン７１６の選択を行ったときの拡大処理について説明する。
図６０は、ユーザが拡大率変更ボタン７１６の選択を行ったときの拡大処理を示すフローチャートである。
Ｓ２８００では、拡大画像生成部１１２は、類似症例検索により取得した多数の類似症例のうち、拡大処理を行う対象を決定する。
実施の形態２では、実施の形態１の図４８のＳ４１００のような、基準となる類似症例のサムネイル画像の選択がユーザにより行われず、拡大率変更ボタン７１６の選択のみがユーザにより行われる。そのため、拡大画像生成部１１２は、ユーザによる拡大率変更ボタン７１６の選択時に症例表示領域７１０に表示されている全ての類似症例を、拡大処理を行う対象とする。そこで、拡大画像生成部１１２は、症例表示領域７１０に表示されている全てのサムネイル画像の類似症例ＩＤを、類似症例データ４０００（図３０）から取得する。
Ｓ２４００では、拡大画像生成部１１２は、入力制御部１０３から通知されたボタンの情報に基づき、ユーザが選択したボタンの種類を判定する。ユーザにより選択されたボタン種が第１指示ボタン７１７の場合はＳ２４５１に進み、選択されたボタン種が第２指示ボタン７１８の場合はＳ２４５２に進み、選択されたボタン種が第３指示ボタン７１９の場合はＳ２５４３に進む。
Ｓ２４５１では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＤに到達するまで、Ｓ２５００、Ｓ４５０１の処理を繰り返す。拡大画像生成部１１２は、Ｓ２５００、Ｓ４５０１の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＤを超えると（Ｓ２４５１でＮＯ）、図６０の処理は終了する。
Ｓ２５００では、第１指示ボタン７１７がユーザにより選択されている。このため、Ｓ２５００では、拡大画像生成部１１２は、拡大率を１．０として算出する。
Ｓ４５０１では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大率は１．０であるため、表示制御部１０４は、図５７に示されるように、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像を表示する。
Ｓ２４５２では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＤに到達するまで、Ｓ２６００、Ｓ４５０２の処理を繰り返す。拡大画像生成部１１２は、Ｓ２６００、Ｓ４５０２の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＤを超えると（Ｓ２４５２でＮＯ）、図６０の処理は終了する。
Ｓ２６００では、第２指示ボタン７１８がユーザにより選択されている。このため、Ｓ２６００では、拡大画像生成部１１２は、上述のように、関心領域のサイズが表示領域のサイズの１／２程度になるように、拡大対象のサムネイル画像ｉの拡大率を算出する。拡大画像生成部１１２は、表示領域のサイズと、拡大対象のサムネイル画像ｉの類似症例データ４０００（図３０）内の関心領域情報４３００とに基づき、拡大率を算出する。拡大画像生成部１１２は、以下のような式で拡大率ｋｉを計算する。表示領域５７０１（図５７）の面積をＳｄ、拡大対象のサムネイル画像ｉの関心領域ＲＯＩ（図５７）の面積をＳｉとすると、拡大対象の類似症例ｉのサムネイル画像の拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ４５０２では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像の関心領域の中心が表示領域の中心に位置するように、サムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２により生成された、拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、この実施の形態２では、拡大画像生成部１１２は、第２指示ボタン７１８が選択されたときの拡大率を、表示領域のサイズに対する関心領域のサイズの比率が１／２程度になるように算出している。しかし、本開示では、上記比率は１／２に限られない。例えば、上記比率は１／３、２／３などの他の値でもよい。
Ｓ２４５３では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＤに到達するまで、Ｓ２７００、Ｓ４５０３の処理を繰り返す。拡大画像生成部１１２は、Ｓ２７００、Ｓ４５０３の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＤを超えると（Ｓ２４５３でＮＯ）、図６０の処理は終了する。
Ｓ２７００では、第３指示ボタン７１９がユーザにより選択されている。このため、Ｓ２７００では、拡大画像生成部１１２は、上述のように、関心領域のサイズが表示領域のサイズと同程度になるように、拡大対象のサムネイル画像ｉの拡大率を算出する。拡大画像生成部１１２は、表示領域のサイズと、拡大対象の類似症例ｉの類似症例データ４０００（図３０）内の関心領域情報４３００とに基づき、拡大率を算出する。拡大画像生成部１１２は、以下のような式で拡大率ｋｉを計算する。表示領域５７０１（図５７）の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域ＲＯＩ（図５７）の面積をＳｉとすると、拡大対象の類似症例ｉのサムネイル画像の拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝Ｓｄ／Ｓｉ
Ｓ４５０３では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像の関心領域の中心が表示領域の中心に位置するように、サムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２により生成された、拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、この実施の形態２では、拡大画像生成部１１２は、第３指示ボタン７１９が選択されたときの拡大率を、表示領域のサイズに対する関心領域のサイズの比率が１．０程度になるように算出している。しかし、本開示では、上記比率は１．０に限られない。例えば、上記比率は１．１、０．９などの他の値でもよい。
以上の処理により、症例表示領域７１０において、個々の表示領域内の関心領域ＲＯＩのサイズを揃えることができる。その結果、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。このとき、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対してのみ、拡大処理が行われる。このため、システムへの負荷が大幅に軽減される。
以上では、サムネイル画像の拡大率の変更処理を情報端末１００において実行する例を示した。実施の形態２における拡大率変更ボタン７１６を用いた拡大率の変更処理の場合には、拡大率の変更処理を症例検索システム３００で実行してもよい。この場合には、症例検索システム３００は、拡大率が変更されたサムネイル画像を予め生成しておいてもよい。そして、拡大率変更ボタンが操作された時に、症例検索システム３００から情報端末１００にサムネイル画像を送信してもよい。
図６１は、症例検索システム３００が類似症例検索結果を情報端末１００に送信した後、情報端末１００において拡大率変更ボタン７１６が選択されてから拡大されたサムネイル画像を情報端末１００のディスプレイ１０１ｂに表示するまでの処理を示すシーケンス図である。図６２は、症例検索システム３００において実行される事前処理と、図６１に示される処理とを示すフローチャートである。図６２では、図６１に示される処理と同じ処理については同じ符号が付されている。図６１、図６２を用いて、処理の詳細を説明する。
まず、症例検索システム３００で実行される事前処理が説明される。図６２のＳ３１００では、症例検索システム３００は、拡大率変更ボタン７１６の第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９の各々に対して各サムネイル画像の拡大率を決定する。なお、拡大率決定の手順は、上述の図６０のＳ２５００、Ｓ２６００、Ｓ２７００で説明された手順を用いればよい。
Ｓ３１１０では、症例検索システム３００は、Ｓ３１００で決定した拡大率と、類似症例データ４０００（図３０）のサムネイル画像データ４５００とに基づき、第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９に対する拡大されたサムネイル画像データをそれぞれ生成する。症例検索システム３００は、生成した拡大サムネイル画像データを、図６３に示すように、類似症例データ４０００（図３０）とは別に、拡大サムネイルデータ５０００として、類似症例データ蓄積部３０１に格納する。
図６３は、拡大サムネイルデータ５０００のデータ構成を示す図である。拡大サムネイルデータ５０００は、拡大されたサムネイル画像データを類似症例データ蓄積部３０１に保存するためのデータである。拡大サムネイルデータ５０００は、図６３に示されるように、類似症例ＩＤ５１００に対応付けられて、第１指示ボタン７１７に対応する拡大サムネイル画像データ５２００と、第２指示ボタン７１８に対応する拡大サムネイル画像データ５３００と、第３指示ボタン７１９に対応する拡大サムネイル画像データ５４００とを含む。
次に、図６１、図６２を用いて、情報端末１００において、ユーザにより拡大率変更ボタンが選択された場合の処理について説明する。
Ｓ３０１０では、入力制御部１０３は、ユーザが拡大率変更ボタン７１６を選択したときの指示ボタンの種類を検知する。つまり、入力制御部１０３は、第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９のいずれをユーザが選択したかを検知する。
Ｓ３０２０では、表示制御部１０４は、拡大率変更ボタン７１６がユーザにより選択された時に症例表示領域７１０に表示されているＮＤ個（この実施の形態ではＮＤ＝２０）の類似症例の類似症例ＩＤを類似症例データ４０００（図３０）から取得する。また、表示制御部１０４は、取得した類似症例ＩＤを拡大対象の類似症例として決定する。
Ｓ３０３０では、通信制御部１１０は、Ｓ３０１０で入力制御部１０３が検知した拡大率変更ボタン７１６の種類と、Ｓ３０２０で表示制御部１０４が取得した拡大対象の類似症例ＩＤ（ＮＤ個）とを、症例検索システム３００に送信する。
Ｓ３０４０では、症例検索システム３００の通信制御部３０４は、Ｓ３０３０で情報端末１００から送信された拡大率変更ボタン７１６の種類と拡大対象の類似症例ＩＤ（ＮＤ個）とを受信する。
Ｓ３０５０では、症例検索システム３００は、受信した類似症例ＩＤと拡大率変更ボタン７１６の種類とから、拡大サムネイルデータ５０００の拡大サムネイル画像データ５２００，５３００，５４００のうち表示に使用する画像データを特定する。症例検索システム３００の通信制御部３０４は、特定した拡大サムネイル画像データを情報端末１００に送信する。
Ｓ３０６０では、情報端末１００の通信制御部１１０は、症例検索システム３００から送信された拡大サムネイル画像データを受信する。
Ｓ３０７０では、情報端末１００の表示制御部１０４は、Ｓ３０６０で通信制御部１１０が受信した拡大サムネイル画像データに基づき、類似症例の拡大されたサムネイル画像を情報端末１００のディスプレイ１０１ｂの症例表示領域７１０に表示する。
（実施の形態１の補足）
次に、図３２、図３６Ａのシーケンス図をアプリケーションのレベルで着目したときの情報端末１００、医用情報管理システム２００、及び症例検索システム３００の処理について説明する。
図６４は、図３２及び図３６Ａのシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。図６４において、図３２と同じ処理には同じ符号を付している。
図６４、図６５において、「Ａ」は情報端末１００が実行する医用情報管理アプリケーションの処理を示し、「Ｂ」は情報端末１００が実行する類似症例検索アプリケーションの処理を示す。以下、医用情報管理アプリケーションを「アプリＡ」と記述し、類似症例検索アプリケーションを「アプリＢ」と記述する。
まず、アプリＡは、ユーザから読影対象となる検査リストの表示要求を受け付け、医用情報管理システム２００に送信する（Ｓ５１０）。医用情報管理システム２００は検査リストを受信すると、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成し、アプリＡに送信する。
検査リストを受信したアプリＡは、図３３に示すように、検査リストをディスプレイ１０１に表示し、検査リストの中から１の検査がユーザにより選択されると（Ｓ５３０）、選択された検査の表示要求を医用情報管理システム２００に送信する（Ｓ５４０）。
検査要求を受信した医用情報管理システム２００は、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像をアプリＡに送信する（Ｓ５５０）。
次に、アプリＡは、図３４に示すように、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを表示する（Ｓ５６０）。
次に、アプリＡは、シリーズリストの中から読影対象のシリーズがユーザにより選択されると、選択されたシリーズの最初のスライド位置のスライド画像を医用画像ビューワ６１０に表示する（Ｓ５７０）。このとき、ユーザは、スライス送りする操作を入力し、医用画像ビューワ６１０に所望のスライス画像を表示させる。
次に、アプリＡは、医用画像ビューワ６１０に表示されたスライス画像において、関心領域を設定する操作をユーザから受け付ける（Ｓ５８０）。
次に、アプリＡは、ユーザにより設定された関心領域を示す関心領域情報を生成し、関心領域が設定されたスライス画像（診断対象症例のスライス画像）と共に、アプリＢに送信する（Ｓ５９０、Ｓ６００）。
次に、アプリＢは、診断対象症例のスライス画像及び関心領域情報を受信すると、そのスライス画像及び関心領域情報を症例検索システムに送信する（Ｓ６０１、Ｓ６０２）。
スライス画像及び関心領域情報を受信すると、症例検索システム３００は、図３６Ａと同様、Ｓ６１０〜Ｓ６４０の処理を実行する。
次に、アプリＢは、Ｓ６４０で送信された類似症例データ及び表示ボックス管理情報４４１０を用いて初期の基本画面を生成する（Ｓ６７０）。そして、アプリＢは、図３７に詳細が示されるＳ６７０の処理を実行する。
図６５は、情報端末１００において類似症例のサムネイル画像がドラッグアンドドロップされる際の処理をアプリケーションのレベルで着目したときのシーケンス図である。
図６４との相違点は、Ｓ６０３、Ｓ６０４にある。図６５では、画像特徴は情報端末１００で抽出されている。よって、アプリＢが診断対象症例のスライス画像に設定された関心領域から画像特徴を抽出し（Ｓ６０３）、抽出した画像特徴を症例検索システム３００に送信している（Ｓ６０４）。
本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。
本発明は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末の制御方法及びプログラムに関する。
近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）等の医用画像装置が発達及び普及している。これらＣＴ又はＭＲＩ等は、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。
しかしながら、更なる改善が必要とされていた。
特開２００８−２５７２９２号公報 特開２０１４−４２５２号公報
大沢 哲、外４名、"画像診断を支援する類似症例検索システム「ＳＹＮＡＰＳＥ Ｃａｓｅ Ｍａｔｃｈ」の開発"、富士フイルム研究報告、富士フイルム株式会社、平成２５年３月２７日、第５８号、ｐ．１１−１４
上記課題を解決するため、本開示の一態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるものである。
上記態様により、更なる改善が実現できる。
本実施の形態における情報端末が適用された病院情報システムの全体構成図である。 情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。 ２台のディスプレイの外観図である。 情報端末の実装形態の構成例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 症例表示領域に表示されるある１つの類似症例の表示領域を取り出して示した図である。 症例表示領域に表示されたサムネイル画像のうち１のサムネイル画像が選択されたときの基本画面を示す図である。 症例表示領域に表示されているサムネイル画像の一部が拡大されたときの基本画面を示す図である。 症例表示領域に表示されているサムネイル画像の一部が拡大されたときの図９と異なる基本画面を示す図である。 症例表示領域に表示されているサムネイル画像の一部が拡大されたときの図９、図１０と異なる基本画面を示す図である。 図９と同じサムネイル画像が拡大されたときの異なる表示態様を示す図である。 症例表示領域に表示されたサムネイル画像のうち図８と異なるサムネイル画像が選択されたときの基本画面を示す図である。 症例表示領域に表示されている全てのサムネイル画像が拡大されたときの基本画面を示す図である。 症例表示領域に表示されている全てのサムネイル画像が拡大されたときの図１４と異なる基本画面を示す図である。 病名リスト表示領域の拡大図である。 「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。 「転移性肺癌」で類似症例が絞り込まれたときの基本画面を示す図である。 分布リスト表示領域の拡大図である。 両側性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 両側性の病変分布で絞り込みがかけられた基本画面を示した図である。 気道性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 気道性の病変分布で絞り込みがかけられた基本画面を示した図である。 胸膜下のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 胸膜下の病変分布で絞り込みがかけられた基本画面を示した図である。 患者情報のデータ構成を示す図である。 図２２に示す患者情報に登録された検査情報のデータ構成を示す図である。 医用画像データベースのデータ構成を示す図である。 診断レポートのデータ構成を示す図である。 類似症例データのデータ構成を示す図である。 スライス画像に設定された関心領域を模式的に示した図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムに対して類似症例検索の要求を行い、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 検査リストの画面図である。 検査が選択された後の検査リストの画面図である。 ユーザによりシリーズが選択された際に医用画像ビューワに表示されるスライス画像を示した図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。 表示ボックス管理情報のデータ構成を示す図である。 表示ボックスが３行２列で設定されたレイアウト領域を持つ基本画面を示す図である。 レイアウト管理情報の一例を示す図である。 レイアウト管理情報の一例を示す図である。 図３６ＡのＳ６７０に示す初期の基本画面を生成する処理の詳細を示すフローチャートである。 図３７に示すＳ１５００の処理を示すフローチャートである。 図３７のＳ１３００で生成される病名リストのデータ構成を示す図である。 病名リスト表示領域の第１表示例を示した図である。 病名リスト表示領域の第２表示例を示した図である。 病名リスト表示領域の第３表示例を示した図である。 図４１に示す病名リスト表示領域の画面遷移を示す図である。 図３７のＳ１４００で生成される分布リストのデータ構成を示す図である。 図４４Ａに示す分布リストを用いて生成された分布リスト表示領域を示す図である。 症例検索システムが画像特徴を抽出する態様を採用した場合の情報端末、医用情報管理システム、及び症例検索システムのブロック図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。 症例表示領域に表示されているサムネイル画像の拡大処理を示すフローチャートである。 図４８のＳ４４００のサブルーチンの処理を示すフローチャートである。 拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。 図４８のＳ４５００のサブルーチンの処理を示すフローチャートである。 拡大率と表示領域との関係を概略的に表す図である。 拡大されたサムネイル画像が症例表示領域に表示された後に、ユーザがスクロールバーを操作した場合のサムネイル画像の拡大処理を示すフローチャートである。 拡大されたサムネイル画像が症例表示領域に表示された状態の基本画面を示す図である。 拡大されたサムネイル画像が図５３Ｂの状態から移動した基本画面を示す図である。 分布リスト表示領域に表示された病変分布が選択されたときの処理を示すフローチャートである。 胸膜領域情報が追加された類似症例データのデータ構成を示す図である。 胸膜領域を説明する図である。 実施の形態２において、類似症例検索により検索された類似症例のサムネイル画像が症例表示領域に表示された状態の基本画面を示す図である。 第２指示ボタンがユーザにより選択された場合の基本画面を示す図である。 第３指示ボタンがユーザにより選択された場合の基本画面を示す図である。 ユーザが拡大率変更ボタンの選択を行ったときの拡大処理を示すフローチャートである。 症例検索システムが類似症例検索結果を情報端末に送信した後、情報端末において拡大率変更ボタンが選択されてから拡大されたサムネイル画像を情報端末のディスプレイに表示するまでの処理を示すシーケンス図である。 症例検索システムにおいて実行される事前処理と、図６１に示される処理とを示すフローチャートである。 拡大サムネイルデータのデータ構成を示す図である。 図２８及び図３２のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。 情報端末において類似症例のサムネイル画像がドラッグアンドドロップされる際の処理をアプリケーションのレベルで着目したときのシーケンス図である。
（本開示に係る一態様を発明するに至った経緯）
まず、本開示に係る一態様の着眼点について説明する。
特許文献１は、診断対象画像に基づく画像診断時に疾患の判断に有用な症例画像又はその疾患に関する統計情報等を提示する画像診断支援装置を開示する。当該画像診断支援装置による検索結果の画面は、診断対象画像及び疾患別の代表症例の情報を表示する。具体的には、前記検索結果の画面は、ｉ）上位３つの疾患Ａ、Ｄ、Ｇの代表症例の画像、ｉｉ）疾患別に診断対象画像との類似度、登録症例数及び代表症例数、ｉｉｉ）検索件数（検索された疾患の総数）、及び、ｉｖ）一画面に表示できない他の疾患の情報を参照するための「ページ送り」のソフトボタン等を表示する（段落［００６２］から［００６３］及び図６（Ｅ））。
特許文献１では、検索結果の画面において、代表症例の画像を拡大させることについての記載は一切ない。したがって、特許文献１は、単純に代表症例の画像を拡大することさえ開示をしないので、画像表示数に制約がある検索結果の画面において、例えば、代表症例の画像に含まれる病変部位を中心に、前記代表症例の画像の各々を拡大させる等の工夫をも開示していない。
特許文献２は、同一患者の医用画像について比較読影の効率向上を実現する医用画像表示装置を開示する。ここで、比較読影とは、ｉ）同一の患者に対し異なる画像診断装置あるいは撮影条件によって得られた画像データを用いた比較読影又はｉｉ）同一の患者に対し同一画像診断装置によって得られた過去及び最新の画像データを用いた比較読影をいう。即ち、特許文献２の比較読影は、同一の患者の画像データを用いた比較読影である。
当該医用画像表示装置の表示画面には、サムネイル表示エリアに表示されるサムネイル画像を拡大又は縮小するための「標準」、「拡大率基準」及び「サイズ基準」の３種類のソフトボタンが表示される（段落［００４０］及び図６）。「拡大率基準」又は「サイズ基準」が選択されると、サムネイル画像は、病変範囲又は病変位置を含むように拡大して表示される。これにより、一覧表示されたサムネイル画像による病変確認は、「標準」が選択された場合と比較して容易になる。また、「サイズ基準」が選択された場合、サムネイル画像のサムネイルサイズは、表示一覧性を保持するため、「標準」が選択された場合と同一サイズになる（段落［００４１］から［００４３］及び図７）。尚、特許文献２では、サムネイル画像は時系列順に表示される（例えば、特許文献２の図６参照）。
特許文献２では、「拡大率基準」又は「サイズ基準」が選択されると、病変範囲又は病変位置を含む全てのサムネイル画像が拡大されることになる。即ち、サムネイル表示エリアに表示されているサムネイル画像に加え、サムネイル表示エリアに表示し切れないサムネイル画像も拡大される（例えば、特許文献２の図６及び図７参照）。
これは、同一患者の画像を時間の経過を追って比較すること（比較読影）を前提としているためである。なぜならば、比較読影は、主に経過観察のため、半年又は１年近くの期間をおいて医用画像が撮影されることが通常だからである。そのため、医用画像数が膨大である可能性が低く、全てのサムネイル画像を拡大したとしても、システムの処理負荷はさほど大きくなることはない。
また、サムネイル画像は全て同一患者の画像である。このため、読影対象の画像と他の患者の画像とを比較する場合とは異なり、各サムネイル画像が類似しているか否かを検討する作業は不要となる。即ち、特許文献２のサムネイル画像は、同一患者の病変変化を時系列に沿って検討するために用いられる。そのため、拡大表示する際に、他の患者の画像との類似関係に基づき一部のサムネイル画像は拡大し、他のサムネイル画像は拡大しないといった作業はそもそも発生しない。
非特許文献１は、病変画像を用いて過去の類似症例を検索する機能により、上述のＰＡＣＳなどに蓄積された臨床知識から、瞬時に的確な情報を抽出し提示し、医師の画像診断をサポートする類似症例検索システムを開示する。具体的には、本システムは、検査画像の病変の特徴が類似した症例画像を検索し、類似順に複数表示する。そして、表示された複数の症例画像より１つの参考症例画像を選択し、検査画像と並列に表示する（ｐ．１２「２．２ 本システムの特徴」及びＦｉｇ．３）。
非特許文献１に開示されたシステムは、類似順に複数表示された症例画像を拡大させることについての記載は一切ない。したがって、非特許文献１は、単純に症例画像を拡大することさえ開示をしないので、画像表示数に制約がある検索結果の画面において、例えば、代表症例の画像に含まれる病変部位を中心に、前記代表症例の画像の各々を拡大させる等の工夫をも開示しない。
未だ病名が特定されていない読影対象の医用画像に表れている病変を検討するにあたって、既に病名が特定されている他の医用画像の中で前記読影対象の医用画像と類似する類似医用画像を参照することは有効であると考えられる。しかし、このようなシステムを構築した場合、前記医用画像データベースに膨大な数の医用画像が登録されることになる。このような場合であっても、前記読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示することが望まれる。
以上の考察により、本願発明者らは、以下の発明の各態様を想到するに至った。
本開示の第１の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるものである。
本態様によると、前記読影対象の対象医用画像の中の関心領域と所定の類似度を有する類似医用画像であって既に病名が特定されているＮＣ個の類似医用画像を前記症例検索システムから受信し、前記ＮＣ個の類似医用画像の中のＭ個の類似医用画像を表示する。これにより、前記医用画像データベースに登録されている膨大な医用画像の中から、前記対象医用画像に表れている病変の病名を検討するために参考となる類似医用画像を効率的に抽出して、医師に提示できる。
また、表示されている類似医用画像の中で医師が関心を示した画像を拡大することもできる。その際、本態様では、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる。
これにより、前記表示されている類似医用画像の各々について個々の拡大指示が不要となる。したがって、操作効率を向上できる。また、前記類似医用画像を拡大する際、前記類似医用画像の各個別領域のサイズは同一サイズに維持される。そのため、前記Ｍ個以下の類似医用画像を拡大させつつも、画像表示数に制約がある表示画面を有効活用して、前記Ｍ個以下の類似医用画像の各々を拡大表示させることができる。また、前記各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる。そのため、前記Ｍ個以下の類似医用画像の中で医師が関心を持つ領域を中心に、前記Ｍ個以下の類似医用画像の各々が拡大されることになる。
このように、一つの指示によって、画像表示数に制約がある表示画面を有効活用しながら、医師が関心を持つ領域を中心に、前記Ｍ個以下の類似医用画像の各々を拡大させる。その結果、例えば、前記医用画像データベースに膨大な数の医用画像が登録されている場合であっても、前記読影対象の対象医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示する。したがって、診断精度の向上に寄与できる。
また、前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるようにしてもよい。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記Ｍ個以下の類似医用画像の各々に含まれる前記対応関心領域を、前記Ｍ個以下の類似医用画像に共通する一定の割合で拡大した場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記Ｍ個以下の類似医用画像を拡大しても、拡大された前記対応関心領域の大きさは、ばらばらとなる。
本態様によると、例えば、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させる。
これによると、前記Ｍ個以下の類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさのばらつきを、前記Ｍ個以下の類似医用画像間で、一定範囲に収束できる。
そのため、前記Ｍ個以下の類似医用画像について、前記拡大された対応関心領域を医師はほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第１の態様において、例えば、
前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で前記第２表示領域に表示させ、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させてもよい。
この場合、前記Ｍ個以下の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示によって、前記Ｍ個以下の類似医用画像が拡大されることになる。そのため、医師が前記Ｍ個以下の類似医用画像の中で、拡大してより詳細を確認するためにいずれか一の類似医用画像を選択すると、前記Ｍ個の類似医用画像の中の他の類似医用画像までも拡大される。即ち、前記Ｍ個の類似医用画像の拡大のための特別の操作を医師に要求するものではなく、医師が拡大により詳細を確認するためにいずれか一の類似医用画像を選択するという自然な操作の流れに沿って、前記Ｍ個の類似医用画像の中の他の類似医用画像までも拡大される。その結果、前記Ｍ個以下の類似医用画像を効率的に拡大する。したがって、医師の操作負担を軽減して、その分、医師を専門的な判断に集中させて、診断精度の向上を図ることができる。
また、本態様では、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像を拡大させる。
即ち、前記医用画像データベースに登録されている膨大な医用画像の中から、前記読影対象の医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記症例検索システムから受信する場合でも、前記受信するＮＣ個の類似医用画像は、例えば、２００画像、３００画像と画像数は多い。この際、一つの指示により画像を拡大するにしても、前記受信したＮＣ個の類似医用画像の全てを拡大するのは非効率である。従って、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、前記一つの拡大指示により画像を拡大する方が望ましい。
ここで、前記読影対象の医用画像である対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記対象医用画像との類似度が高い順序で表示して、前記対象医用画像に表れている病変の病名を検討する趣旨からすると、前記一つの拡大指示を検知した場合、前記一の類似医用画像と一定の類似関係にある画像に限定して拡大することが望ましい。一方で、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知する毎に、前記一の類似医用画像と一定の類似関係にある画像はどれかを算出することは効率が悪い。
そこで、本態様では、前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲は、前記一の類似医用画像と一定の類似関係ある画像と近似しているものと擬制している。そして、本態様では、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像を拡大させるようにした。
即ち、本態様では、前記受信したＮＣ個の類似医用画像の全てを拡大するのではなく、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、即ち、前記一の類似医用画像と一定の類似関係にあると擬制できる範囲の画像に限定して、拡大する。
このように、本態様では、前記読影対象の医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記読影対象の医用画像との類似度が高い順序で表示する。また、前記表示されている類似医用画像の中で医師が関心を示した画像を拡大する際、前記一の類似医用画像と一定の類似関係にあると擬制できる画像に限定して拡大する。そのため、膨大な数の類似医用画像を受信した場合でも、前記読影対象の医用画像に表れている病変の病名を検討する趣旨に沿った範囲で前記類似医用画像を拡大する。したがって、システムの処理負荷を大幅に軽減させつつ、前記検討に必要な情報を効果的に医師に提供し、診療判断の精度の向上に寄与できる。
また、上記第１の態様において、例えば、
前記表示画面はスクロールバーを有し、
前記スクロールバーの移動を検知すると、前記第２表示領域に表示される類似医用画像をスクロールさせ、
前記類似医用画像がスクロールされるに応じて、前記拡大される類似医用画像を増加させるようにしてもよい。
本態様によると、前記類似医用画像がスクロールされるに応じて、前記拡大される類似医用画像を増加させる。即ち、前記一つの拡大指示により画像を拡大する範囲について、当初範囲は少なく抑えつつ、前記範囲を事後的に可変させている。
これにより、一度拡大した画像については事後的に縮小する必要はなく、新たに前記第２表示領域に表示された例えば前記ＮＤ個の範囲を継続して、前記一の類似医用画像と一定の類似関係ある画像と近似しているものと擬制する。
そのため、前記類似医用画像がスクロールされた場合であっても、前記読影対象の医用画像に表れている病変の病名を検討する趣旨に沿った範囲で前記類似医用画像を継続して拡大する。したがって、システムの処理負荷を大幅に軽減させつつ、前記検討に必要な情報を継続して医師に提供し、診療判断の精度の向上に寄与できる。
また、上記第１の態様において、例えば、
前記受信したＮＣ個の類似医用画像の総数ＮＣを示す情報が前記表示画面に表示されるようにしてもよい。
また、本開示の第２の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、前記一以上の指示ボタンは、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さい所定倍に拡大表示させる第１指示ボタンを含み、前記所定倍は個々の類似医用画像毎に異なり、
前記第１指示ボタンによる一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させるものである。
本態様では、前記Ｍ個の類似医用画像に共通の指示ボタンによる一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させる。これにより、前記表示されているＭ個の類似医用画像の各々について個々の指示が不要となる。したがって、操作効率を向上できる。また、前記Ｍ個の類似医用画像の表示サイズを変化させる際、前記Ｍ個の類似医用画像の各個別領域のサイズは同一サイズに維持される。そのため、前記Ｍ個の類似医用画像の表示サイズを変化させつつも、画像表示数に制約がある表示画面を有効活用して、前記Ｍ個の類似医用画像の各々の表示サイズを変化させることができる。
このように、前記Ｍ個の類似医用画像に共通の一つの指示によって、画像表示数に制約がある表示画面を有効活用しながら、医師が関心を持つ領域を中心に、前記Ｍ個の類似医用画像の各々の表示サイズを変化できる。その結果、例えば、前記医用画像データベースに膨大な数の医用画像が登録されている場合であっても、前記対象医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示する。したがって、診療判断の精度の向上に寄与できる。
また、前記Ｍ個の類似医用画像に共通の一つの指示によって、前記Ｍ個の類似医用画像の表示サイズを変化させることになる。そのため、医師が前記Ｍ個の類似医用画像の中で、表示サイズを変化させながらより詳細を確認するために指示ボタンに対する一つの操作を行うと、前記Ｍ個の類似医用画像の全てが拡大される。即ち、前記Ｍ個の類似医用画像の表示サイズを変化させるための個別の操作を医師に要求するものではなく、医師が表示サイズを変化させてより詳細を確認するために、指示ボタンに対する一つの操作を行うという自然な操作の流れに沿って、前記Ｍ個の類似医用画像の全ての表示サイズが変化する。その結果、前記Ｍ個の類似医用画像の表示サイズを効率的に変化させる。したがって、医師の操作負担を軽減して、その分、医師を専門的な判断に集中させて、診断精度の向上を図ることができる。
また、前記一以上の指示ボタンは、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さい所定倍に拡大表示させる第１指示ボタンを含み、
前記第１指示ボタンによる一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させるようにしてもよい。
本態様によると、前記表示画面は、前記一以上の指示ボタンとして、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さい所定倍に拡大表示させる第１指示ボタンを含んでいる。
これにより、前記Ｍ個の類似医用画像を初期表示サイズにて表示させる場合と、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる場合との中間に相当する表示サイズに各対応関心領域の表示サイズを変化させる場合に、医師は一つの指示にて行うことができる。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記Ｍ個の類似医用画像の各々に含まれる前記対応関心領域の表示サイズを、前記Ｍ個の類似医用画像に共通する一定の割合で変化させた場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記Ｍ個の類似医用画像を拡大しても、拡大された前記対応関心領域の表示サイズは、ばらばらとなる。
本態様によると、例えば、前記所定倍は個々の類似医用画像毎に異なり、前記第１指示ボタンによる一つの指示を検知すると、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各対応関心領域の表示サイズを変化させる。
これによると、前記各対応関心領域の表示サイズを変化させる場合、前記変化した前記各対応関心領域の表示サイズのばらつきを、前記Ｍ個の類似医用画像間で、一定範囲に収束できる。
そのため、前記Ｍ個の類似医用画像について、前記変化した表示サイズの前記各対象関心領域を医師はほぼ同様の大きさにて観察できる。その結果、一部の類似医用画像の前記対象関心領域の表示サイズが他の類似医用画像の前記対象関心領域の表示サイズより小さい状態に変化したために、見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第２の態様において、例えば、
前記ＮＣ個の類似医用画像の中のＭ個の類似医用画像を前記対象医用画像との類似度が高い順序で前記第２表示領域に表示させ、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させてもよい。
この場合、前記Ｍ個の類似医用画像に共通の一つの指示ボタンによる指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像の表示サイズを変化させる。即ち、前記医用画像データベースに登録されている膨大な医用画像の中から、前記対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記症例検索システムから受信する場合でも、前記受信するＮＣ個の類似医用画像は、例えば、ＮＣが２００画像、３００画像と画像数は多い。この際、一つの指示により類似医用画像の表示サイズを変化させるにしても、前記受信したＮＣ個の類似医用画像の全ての表示サイズを変化させるのは非効率である。従って、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、前記一つの指示により類似医用画像の表示サイズを変化させる方が望ましい。
ここで、前記読影対象の医用画像である対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記対象医用画像との類似度が高い順序で表示して、前記対象医用画像に表れている病変の病名を検討する趣旨からすると、前記一つの指示を検知した場合、前記対象医用画像と一定の類似関係にある画像に限定して表示サイズを変化させることが望ましい。一方で、前記対象医用画像が変わる毎に、また、前記類似医用画像が変わる毎に、前記対象医用画像と一定の類似関係にある画像を算出することは効率が悪い。
本態様では、前記対象医用画像との類似度が高い順序で前記類似医用画像を表示している。したがって、前記指示ボタンによる一つの指示を検知した場合、前記対象医用画像との関係で、前記一つの指示を検知した際に表示されている前記Ｍ個の類似医用画像については、前記対象医用画像と一定の類似関係ある画像と近似しているものと擬制できる。そこで、本態様では、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像について表示サイズを変更させるようにした。即ち、本態様では、前記受信したＮＣ個の類似医用画像の全てについて表示サイズを変更するのではなく、前記受信した類似医用画像の中から一定範囲の画像に限定して、即ち、前記読影対象の医用画像と一定の類似関係にあると擬制できる範囲の画像に限定して、表示サイズを変更する。
このように、本態様では、前記対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記対象医用画像との類似度が高い順序で表示し、前記表示されているＭ個の類似医用画像の中で医師が関心を示した画像の表示サイズを変更する際、前記一の類似医用画像と一定の類似関係にあると擬制できる画像に限定して表示サイズを変更する。そのため、膨大な数の類似医用画像を受信した場合でも、前記対象医用画像に表れている病変の病名を検討する趣旨に沿った範囲で前記類似医用画像の表示サイズを変更する。したがって、システムの処理負荷を大幅に軽減させつつ、前記検討に必要に情報を効果的に医師に提供し、診療判断の精度の向上に寄与できる。
また、上記第２態様において、例えば、
前記表示画面は、前記一以上の指示ボタンとして、少なくとも、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる第２指示ボタン、及び、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる第３指示ボタンを含み、
前記第２指示ボタン又は前記第３指示ボタンによるいずれか一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを一律に変化させるようにしてもよい。
本態様によると、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる際には、医師は前記第２指示ボタンという一つの指示を選択すればよい。また、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる際には、医師は前記第３指示ボタンという一つの指示を選択すればよい。これにより、前記第２指示ボタン又は前記第３指示ボタンのいずれか一の指示によって、前記Ｍ個の類似医用画像を表示する各個別領域のサイズは同一サイズを維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズは一律に変化する。
そのため、前記Ｍ個の類似医用画像を初期表示サイズにて表示することも、また、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示することも、医師は一つの指示にてすることができるので、操作数を大幅に低減できる。
また、上記第１の態様又は上記第２の態様において、例えば、
前記第２指定情報が示す前記対応関心領域の大きさが第１サイズの場合、前記第２指定情報が示す前記対応関心領域の大きさが前記第１サイズより大きい第２サイズの場合に比べて、前記対応関心領域を大きく拡大させるようにしてもよい。
本態様によると、前記類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさのばらつきを、前記類似医用画像間で、一定範囲に収束できる。具体的には、前記対応関心領域の大きさが第１サイズの場合、前記対応関心領域の大きさが前記第１サイズより大きい第２サイズの場合に比べて、前記対応関心領域を大きく拡大させる。これにより、前記対応関心領域の大きさに依存することなく、前記拡大された前記対応関心領域の大きさを、同様の大きさにすることができる。
そのため、医師は、前記類似医用画像について、前記拡大された対応関心領域をほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
本開示の第３の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させるものである。
本開示の第４の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、
前記指示ボタンによる一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させるものである。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記類似医用画像の各々に含まれる前記対応関心領域を一定の割合で拡大した場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記類似医用画像を拡大しても、拡大された前記対応関心領域の大きさは、ばらばらとなる。
本態様によると、例えば、前記各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させる。
これによると、前記類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさを、前記各個別領域のサイズとの関係でほぼ同様に揃えることかできる。
そのため、前記類似医用画像について、前記拡大された対応関心領域を医師はほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第１の態様から上記第４の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるとしてもよい。
また、上記第１の態様から上記第４の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
前記対象医用及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるとしてもよい。
また、上記第１の態様から上記第４の態様において、例えば、
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第２表示領域は、
前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
前記第１分布情報から前記第３分布情報の中のいずれか一の選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第２表示領域に表示させるとしてもよい。
本態様によると、前記第２表示領域に表示されたＮＤ個の類似医用画像を、さらに、前記対応関心領域の分布類型に基づいて仕分けできる。これにより、例えば、多数表示された類似医用画像の中から、前記対象医用画像に含まれる前記関心領域に症状が類似した類似医用画像を、効率的に選択できる。
また、上記第１の態様から上記第４の態様において、例えば、
前記第１分布情報の選択が検知された場合、前記第１分布情報に対応する類似医用画像を、対応する個別領域に初期表示サイズにて表示させ、
前記第２分布情報の選択が検知された場合、前記第２分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させ、
前記第３分布情報の選択が検知された場合、前記第３分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させるとしてもよい。
本態様によると、前記対応関心領域の分布類型に基づいて類似医用画像を仕分けした際、単に仕分けするのみならず、前記分布類型に応じた表示をする。これにより、操作者は、前記対応関心領域の分布類型に基づいて類似医用画像を仕分けし、その後、前記分布類型に応じて類似医用画像を拡大し若しくは前記対応関心領域を中心にする処理などを別途行う必要がない。そのため、前記対応関心領域の分布類型に基づいて仕分けされたとは言え、その次に、前記仕分けされた多数の類似医用画像の一つ一つに対して同様の操作を繰り返し行う煩雑さを大幅に軽減できる。その結果、診療判断に向けられるべき医師の思考若しくは医師の集中力が操作の煩雑さにより中断されるのを大幅に軽減し、医師の思考若しくは医師の集中力を本来の診療判断に向けることができるので、診療判断の精度の向上を図ることができる。
また、上記第１の態様から上記第４の態様において、例えば、
前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報であるとしてもよい。
本態様によると、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は類似医用画像が初期表示サイズで表示される。区域性又は気道性のカテゴリーに属する分布の場合は類似医用画像が拡大表示される。胸膜下のカテゴリーに属する分布の場合は胸膜を含んだ状態で類似医用画像が拡大表示される。
両側性、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は、肺全体に病変部が広がっている可能性又は肺の広範囲に病変部が生じている可能性が高い。このため、類似医用画像を初期表示サイズ、即ち、拡大させることなく表示させたいという医学的見地に基づくニーズが存在する。
一方、区域性又は気道性のカテゴリーに属する分布の場合は、上述のような可能性が低い。そのため、区域性又は気道性のカテゴリーに属する分布を選択することにより類似医用を拡大表示させることで、拡大表示させるという１工程を省略させ、医師の集中力が中断されることを防止できる。また、胸膜下のカテゴリーに属する分布の場合は、胸膜と病変部との位置関係が診断においては重要な指標となるため、胸膜を含んだ状態で類似医用画像を拡大表示させたいという医学的見地に基づくニーズが存在する。
（実施の形態１）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。
図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、及び症例検索システム３００を備えている。
情報端末１００、医用情報管理システム２００、及び症例検索システム３００はネットワーク４００を介して相互に通信可能に接続されている。
なお、医用情報管理システム２００及び症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバ等の上で動作するソフトウェアであってもよい。医用情報管理システム２００及び症例検索システム３００が病院内に設置されている場合、ネットワーク４００としては、ローカルエリアネットワークが採用できる。ローカルネットワークとしては、ＩＥＥＥ８０２．３シリーズの有線ＬＡＮ、ＩＥＥＥ８０２．１１シリーズの無線ＬＡＮ、或いは両者が混在するネットワークが採用できる。医用情報管理システム２００及び症例検索システム３００が病院外のサーバを用いて実現される場合、ネットワーク４００としては、インターネットが採用できる。
情報端末１００としては、パーソナルコンピュータやタブレット端末等の情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）や電子カルテシステム等が採用される。
図２は、情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、ボックスレイアウト管理部１１１、及び拡大画像生成部１１２を備える。
ディスプレイ１０１は、例えば、液晶モニタにより構成され、診断対象となる医用画像及びカルテ画像を表示すると共に、診断結果を記入するためのレポート入力画像等を表示する。なお、ディスプレイ１０１は最低１台必要だが、通常、画像診断においては２〜３台のディスプレイ１０１が用いられる。本実施の形態では２台のディスプレイ１０１が用いられ、一方のディスプレイ１０１をディスプレイ１０１ａとし、他方のディスプレイ１０１をディスプレイ１０１ｂとする（図３参照）。
図３は、２台のディスプレイ１０１ａ、１０１ｂの外観図である。図３では、ディスプレイ１０１ａには、４つの医用画像ビューワが２行２列の配置で表示されており、ディスプレイ１０１ｂには症例検索システム３００の画面が表示されている。なお、ディスプレイ１０１を１台とした場合、２つの表示画面が１台のディスプレイ１０１の表示画面上に領域を分けて表示される。
操作部１０２は、例えば、キーボード及びマウスを含み、情報端末１００に対してユーザにより入力される種々の操作を受け付ける。例えば、操作部１０２は、ディスプレイ１０１に表示される医用画像及びカルテ画像に対するユーザからの操作、並びにレポート入力画面に対して診断結果を入力する操作等を受け付ける。
入力制御部１０３は、操作部１０２へのユーザの操作を検知すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２としてのマウスから出力される座標データからディスプレイ１０１上におけるマウスポインタの位置を検知し、ディスプレイ１０１上にマウスポインタを表示させる。そして、入力制御部１０３は、マウスがクリックされたことを検知したときにマウスポインタの表示位置に表示制御部１０４で生成されたＧＵＩ部品（例えば、ＧＵＩボタン）が表示されていれば、そのＧＵＩをユーザが選択したと判定し、他の構成要素にそのＧＵＩ部品がユーザにより選択されたことを通知する。
表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。
ＲＯＩ管理部１０５は、類似症例検索を行う際に、後述する検索クエリ画像に対して設定される関心領域（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を示す関心領域情報を生成してメモリに格納し、関心領域情報を管理する。
表示ボックス管理部１０６は、後述する表示ボックス管理情報４４１０（図３６Ｂ）をメモリに格納し、表示ボックス管理情報４４１０を管理する。
病名リスト管理部１０８は、症例表示領域７１０（図６）に表示された類似症例の病名リスト（図３９）を生成してメモリに格納し、病名リストを管理する。
分布リスト管理部１０９は、症例表示領域７１０に表示された類似症例の病変分布を示す分布リスト（図４４Ａ）を生成してメモリに格納し、分布リストを管理する。
通信制御部１１０は、例えば、情報端末１００をネットワーク４００に接続するための通信装置を含み、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１１０は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
ボックスレイアウト管理部１１１は、後述するレイアウト管理情報４２００（図３６Ｅ）を生成してメモリに格納し、レイアウト管理情報４２００を管理する。
拡大画像生成部１１２は、類似症例のサムネイル画像の拡大画像を生成する。拡大画像生成部１１２は、操作部１０２に対するユーザの操作量を入力制御部１０３から取得する。拡大画像生成部１１２は、症例検索システム３００から送信された、類似症例データ（類似度、関心領域情報を含む）を通信制御部１１０から受け取る。拡大画像生成部１１２は、類似症例検索により取得した類似症例の件数（例えばＮＣ件）のうち、症例表示領域７１０に表示される件数分のみに対して、各サムネイル画像毎に別々の拡大率を算出し、表示される件数分の拡大画像を生成する。
図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、及び通信制御部２０６を備える。
患者情報蓄積部２０１は、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録された患者情報１０００（図２６）を蓄積する。
患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された患者情報１０００（図２６）に対して、ユーザから入力されたデータを登録して患者情報１０００を更新する処理、及び患者情報１０００を表示制御部１０４に出力する処理等を実行し、患者情報１０００を管理する。医用画像データ蓄積部２０３は、患者の検査画像である医用画像データを蓄積する。
医用画像データ管理部２０４は、医用画像データを医用画像データ蓄積部２０３に蓄積し、医用画像データを管理する。
診断レポート管理部２０５は、患者に対して行われた各検査に対する医師による診断結果を示す診断レポート３０００（図２９）を管理する。
通信制御部２０６は、例えば、医用情報管理システム２００をネットワーク４００に接続するための通信装置を含み、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、及び類似症例検索部３０３を備える。
類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている類似症例のうち、類似症例検索の対象データとして選定された多数の類似症例から抽出された画像特徴や、生成されたサムネイル画像等が登録された類似症例データ４０００（図３０）を蓄積する。
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。なお、関心領域情報は、関心領域を示す第１指定情報の一例である。
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された１以上の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。
通信制御部３０４は、例えば、症例検索システム３００をネットワーク４００に接続させる通信装置で構成され、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。
図４は、情報端末１００の実装形態の構成例を示す図である。図４に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。
アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。
ここで、アプリケーション５０１は、医用情報管理アプリケーション及び類似症例検索アプリケーションを含む。医用情報管理アプリケーションは、情報端末１００を医用情報管理システム２００と連携させるためのアプリケーションであり、類似症例検索アプリケーションは、情報端末１００を症例検索システム３００と連携させるためのアプリケーションである。そして、両アプリケーションは、相互にデータを送受し、情報端末１００において、医用情報管理システム２００及び症例検索システム３００が提供するサービスを統合させる。
ＯＳ５０２は、情報端末１００の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。
情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、ボックスレイアウト管理部１１１、及び拡大画像生成部１１２の機能が実現される。
但し、本実施の形態では、情報端末１００は、アプリケーション５０１のみ単独で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。
図５は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ａに表示される基本画面Ｋ１の一例を示す図である。図５に示す基本画面Ｋ１は、４つの医用画像ビューワ６１０〜６４０で構成されている。医用画像は、通常、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ ｉｎ Ｍｅｄｉｃｉｎｅ）フォーマットで記録されており、医用画像ビューワ６１０〜６４０はＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、ＤＩＣＯＭフォーマットの多数の断層画像（以下、スライス画像と呼ぶ。）で構成される胸部ＣＴ画像とする。但し、これは一例に過ぎず、他の部位（例えば、頭部、腹部、脚、或いは腕）のＣＴ画像が採用されてもよい。
医用画像ビューワ６１０〜６４０に表示された胸部ＣＴ画像は、マウスやキーボードの操作により、スライス画像が切り替えられる。ここで、胸部ＣＴ画像を構成するスライス画像は、例えば、首側から腹側に向かう順番に配置されている。
例えば、医用画像ビューワ６１０上にマウスポインタが位置決めされ、マウスホイールの回転が入力制御部１０３で検知されると、表示制御部１０４は、検知された回転量に応じて医用画像ビューワ６１０に表示されているスライス画像を切り替える。ここで、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの後方側に１クリック分回転されると、表示中のスライス画像を次のスライス位置のスライス画像に切り替える。一方、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの前方側に１クリック分回転されると、表示中のスライス画像をスライス位置が１つ前のスライス画像に切り替える。よって、医師等のユーザはマウスホイールを前方側又は後方側に回転させながら、医用画像ビューワ６１０に表示されるスライス画像を適宜切り替え、所望のスライス画像を探索する。
なお、医用画像としては、胸部ＣＴ画像に代えて、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像が採用されてもよい。また、図５の例では、医用画像ビューワの個数は４個とされているが、これは一例にすぎず、６個や８個等別の個数が採用されてもよい。医用画像ビューワの個数が多くなると同時に比較できる画像が増えるが、１画像当たりの表示面積が狭くなる。そのため、この個数はディスプレイ１０１ａの表示サイズに応じて適宜変更可能な構成を採用すればよい。ここでは、医用画像ビューワの個数は、ユーザ又は管理者が自由に変更できるものとする。
類似症例検索アプリケーションが起動される前には、ディスプレイ１０１ａの全域には、ある患者の胸部ＣＴ画像のスライス画像が表示されている。そして、この状態で、読影者等のユーザにより類似症例検索アプリケーションが起動されると医用画像ビューワ６１０には、ディスプレイ１０１ａの全域に表示されていたスライス画像が表示される。
つまり、医用画像ビューワ６１０には、ユーザが類似症例検索アプリケーションを起動させたときに、ディスプレイ１０１ａの全域に表示されていた検索クエリ画像が初期表示される。なお、表示制御部１０４は、検索クエリ画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を重畳表示してもよい。検索クエリ画像は読影対象の医用画像である対象医用画像の一例である。
図５では、他の医用画像ビューワ６２０〜６４０には何の画像も表示されていないが、診断対象となる患者の検査画像が複数あり、類似症例検索アプリケーションが起動される前に、ディスプレイ１０１ａに複数の検査画像が表示されていた場合、表示制御部１０４は、医用画像ビューワ６２０〜６４０にこれら複数の検査画像をそのまま表示すればよい。
図６は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ｂに表示される基本画面Ｋ２の一例を示す図である。図６に示す基本画面Ｋ２は、症例表示領域７１０、レイアウト領域７２０、病名リスト表示領域７３０、及び分布リスト表示領域７５０を備える。なお、レイアウト領域７２０は第１表示領域の一例であり、症例表示領域７１０は第２表示領域の一例である。
症例表示領域７１０は、検索クエリ画像に類似した類似症例のサムネイル画像を類似度順に表示する領域である。ここで、類似症例のサムネイル画像は、類似医用画像の一例である。
症例表示領域７１０には多数の類似症例が表示されるため、解像度や画素値の変換をその場で行うと処理に時間がかかってしまう。よって、サムネイル画像は、オリジナルのスライス画像から予め作成され、症例検索システム３００に保存されている。
以下、解像度や画素値の変換について少し補足する。オリジナルのスライス画像の解像度は５１２×５１２画素であるが、サムネイル画像はより低解像であるため、解像度変換を行う必要がある。そこで、サムネイル画像は、元となるスライス画像に対して低解像度処理及び階調変換処理が行われて生成される。
階調変換処理は例えば、下記のように行われる。ＣＴで取得したスライス画像は各画素値（ＣＴ値）が−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ Ｕｎｉｔ）の２０００階調の値をとり、そのままでは通常の８ビット階調のディスプレイに表示できない。また、表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約−９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜−５０ＨＵ）、水（ＣＴ値：０ＨＵ）、及び骨（ＣＴ値：１０００ＨＵ）を人間が肉眼で区別することは難しい。
よって、通常、スライス画像は、各画素値に対してウィンドウレベル及びウィンドウ幅が設定され、８ビットの画素値に再構成されて、ディスプレイに表示される。ここで、ウインドウレベルは、ウインドウの中心となるＣＴ値を示し、ウインドウ幅は、ウインドウ中心の上下の幅を示す。
例えば、肺野条件でＤＩＣＯＭ画像が再構成される場合、ウインドウレベルが−５５０〜−８００に設定され、ウインドウ幅が１０００〜１６００に設定される。したがって、サムネイル画像も、元となるスライス画像から上記の処理によって画素値が８ビットに落とされることで生成される。
なお、症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が所定の閾値以下の類似症例を示すサムネイル画像である。ここでは距離としては、例えば、ユークリッド距離が用いられる。なお、距離としては、市街地距離等の別の距離尺度が採用されてもよい。比較対象となる２つの画像は、距離が近いほど類似している。また、特徴ベクトルは、サムネイル画像から得られたものではなく、元画像であるＤＩＣＯＭ画像から得られたものが採用される。
図７は、症例表示領域７１０に表示されるある１つの類似症例の表示領域７０１（個別領域の一例）を取り出して示した図である。類似症例の表示領域７０１には、サムネイル画像が表示されており、このサムネイル画像の下部には、確定診断病名表示領域７１１及び距離表示領域７１２が配置されている。確定診断病名表示領域７１１には、対象となる類似症例の確定診断病名が表示される。確定診断病名とは、対象となる類似症例に対して診断が確定された病名を指す。距離表示領域７１２には、対象となる類似症例のスライス画像の特徴ベクトルと、検索クエリ画像の特徴ベクトルとの距離が表示される。図７の例では、確定診断病名表示領域７１１には、「非結核性抗酸菌症」と表示されているため、このサムネイル画像は「非結核性抗酸菌症」と確定診断がされた類似症例のサムネイル画像を示す。また、距離表示領域７１２には、「０．０５」と表示されているため、この類似症例のスライス画像と探索クエリ画像との距離が「０．０５」であることが示されている。
図７に示されるように、類似症例の表示領域７０１に示されるサムネイル画像は、対応関心領域ＣＲＯＩを含む。対応関心領域ＣＲＯＩは、検索クエリ画像（読影対象の医用画像）に設定された関心領域に対応する領域（つまり関心領域に類似する領域）である。なお、以下では、対応関心領域は、単に「関心領域」とも称される。
図６に戻り、基本画面Ｋ２の例えば左上には、検索結果件数表示領域７１３が配置されている。検索結果件数表示領域７１３には、検索処理の結果、症例検索システム３００から取得された、診断対象症例に類似する類似症例の数が表示される。
なお、類似症例の数が膨大である場合、症例表示領域７１０は全ての類似症例を一度に表示することができない。そこで、症例表示領域７１０の例えば右側には、上下方向に長尺のスクロールバー７１５が設けられている。表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を上下方向にスクロール表示させる。これにより、ユーザは、非表示状態にあった類似症例を症例表示領域７１０に表示させ、その類似症例を観察できる。
なお、スクロールバー７１５は左右方向に長尺であってもよい。この場合、表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を左右方向にスクロール表示させればよい。
なお、情報端末１００は、探索クエリ画像との距離が所定の閾値以下のサムネイル画像を症例検索システム３００から取得するとしたが、これは一例に過ぎない。例えば、情報端末１００は、類似度が高い順に、常に一定数のサムネイル画像を症例検索システム３００から取得してもよい。或いは、情報端末１００は、常にある確定診断病名のサムネイル画像が一定数含まれるようにサムネイル画像を症例検索システム３００から取得してもよい。
なお、症例表示領域７１０におけるサムネイル画像の表示手法としては、例えば、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法が採用できる。つまり、症例表示領域７１０において、左上から右下に向けて蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法が採用できる。
もちろん、本実施の形態は別の表示手法が採用されてもよい。例えば、左から１列目の上端に距離が最短のサムネイル画像を表示し、下側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一列の下端に達すると、左から２列目の上端に次に距離が大きいサムネイル画像を表示するという表示手法が採用されてもよい。また、これら複数の表示手法をユーザが切り替え可能な構成が採用されてもよい。
また、上記の例では、類似度として距離が採用されたが、コサイン類似度のような画像同士の類似性を示す指標であればどのような指標が採用されてもよい。コサイン類似度が採用された場合、値が１に近づくにつれて比較対象となる２つの画像の類似性が高くなる。
なお、詳細は後述するが、症例表示領域７１０に表示する類似症例は、病名リスト表示領域７３０に表示された病名や、分布リスト表示領域７５０に表示された病変分布で絞り込むことができる。現在設定されている類似症例の絞込条件は、表示条件表示領域７１４に表示される。図６の例では、類似症例検索直後の状態であり、何も絞り込みがなされていないため、表示条件表示領域７１４には「全疾患」と表示されている。
症例表示領域７１０に表示されている類似症例のサムネイル画像は、ユーザの操作により拡大することが可能に構成されている。以下、類似症例のサムネイル画像の拡大表示が説明される。
図８は、症例表示領域７１０に表示されたサムネイル画像のうち１のサムネイル画像が選択されたときの基本画面Ｋ２を示す図である。図８に示されるように、類似症例検索直後の基本画面Ｋ２が表示された状態では、各表示領域には、サムネイル画像の画像全体が表示されている。症例表示領域７１０は、サムネイル画像をそれぞれ表示する所定数ＮＤ（この実施の形態ではＮＤ＝２０）の表示領域を含む。
情報端末１００の入力制御部１０３は、マウス等の操作部１０２を通しての入力を常時モニタリングしている。そして、入力制御部１０３は、マウスをクリックする操作がユーザにより入力され、その操作により、症例表示領域７１０に表示された類似症例のサムネイル画像の１つが選択されたことを検知する。すると、表示制御部１０４は、選択されたサムネイル画像の背景の色を変更する。
図８の例では、症例表示領域７１０において、２行４列目の表示領域８０１に表示された類似症例のサムネイル画像が選択されている。そのため、表示領域８０１内のサムネイル画像の背景の色が変更されている。具体的には選択されたサムネイル画像の外周を取り囲む枠状の領域の色が変更されている。これにより、ユーザに対して当該サムネイル画像が選択状態になったことを知らせることができる。
ここで、背景の色としては、例えば、症例表示領域７１０の背景の色との差が明確に現れる色が採用される。図８の例では例えば黄色が採用されている。なお、図８の例ではサムネイル画像の枠状の領域の色を変更する態様を示したが、枠状の領域を点滅させる態様や枠状の領域の輝度を明るくする態様が採用されてもよい。
図８に示すようにサムネイル画像の１つが選択された状態で、ユーザが、例えばマウスのホイールを回転させることにより拡大操作を行うと、入力制御部１０３は、マウスのホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば検知された回転量を用いて拡大率を決定し、決定した拡大率でサムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。
図９は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの基本画面Ｋ２を示す図である。具体的には、図９では、選択されたサムネイル画像だけではなく、選択されたサムネイル画像の上に隣接するサムネイル画像（１行４列目）から、選択されたサムネイル画像の下に隣接するサムネイル画像（３行４列目）まで、横並びの順に、合計１１個のサムネイル画像が拡大されている。これにより、症例検索システム３００から受信した類似症例データ６２件の全てのサムネイル画像を拡大する場合と比較して、情報端末１００における処理負担を大きく軽減することができる。
なお、表示されているサムネイル画像を拡大する際には、拡大画像生成部１１２は、図９に示すように、対応関心領域ＣＲＯＩの中心位置が表示領域８０１の中心位置になるように、拡大画像を生成する。また、表示制御部１０４は、サムネイル画像を拡大する際に、図９に示すように、表示領域８０１のサイズを拡大せず、同じサイズに維持する。
また、拡大画像生成部１１２は、拡大率をサムネイル画像毎に異なる値に設定してもよい。これによって、図９に示されるように、拡大後の各サムネイル画像が同じ大きさになるように拡大することができる。
図９では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図９ではＭ＝２０）の類似症例のサムネイル画像が表示されており、Ｍ個以下（図９では１１個）のサムネイル画像が拡大されている。
図１０は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの図９と異なる基本画面Ｋ２を示す図である。図１０では、拡大画像生成部１１２は、選択されたサムネイル画像の上に隣接するサムネイル画像（１行４列目）から、選択されたサムネイル画像の下に隣接するサムネイル画像（３行４列目）まで、横並びの順に、合計１１個のサムネイル画像を拡大している。また、拡大画像生成部１１２は、対応関心領域ＣＲＯＩのサイズが表示領域８０１のサイズと同じサイズになるように、１１個のサムネイル画像を拡大している。
図１１は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの図９、図１０と異なる基本画面Ｋ２を示す図である。図１１では、ユーザは、図９と異なるサムネイル画像を選択している。これによって、拡大されるサムネイル画像が変更されている。すなわち、図１１では、３行３列目の表示領域１１０１に表示された類似症例のサムネイル画像が選択されている。その結果、拡大画像生成部１１２は、選択されたサムネイル画像の上に隣接するサムネイル画像（２行３列目）から、選択されたサムネイル画像の下に隣接するサムネイル画像（４行３列目）まで、横並びの順に、合計１１個のサムネイル画像を拡大している。
図１２は、図９と同じサムネイル画像（２行４列目）が拡大されたときの異なる表示態様を示す図である。図１２に示すように、表示制御部１０４は、拡大されるサムネイル画像を強調表示している。図１２の例では、選択されたサムネイル画像と同様に、拡大されたサムネイル画像の外周を取り囲む枠状の領域の色が変更されている。これによって、ユーザに対して拡大されたサムネイル画像を強調することができる。その結果、図１２に示されるように、症例表示領域７１０において拡大されたサムネイル画像と拡大されないサムネイル画像とが混在する場合でも、ユーザは、両者を容易に区別することができる。
このように、画像診断を行う医師が注目した類似症例のサムネイル画像の一つを拡大操作するだけで、注目した類似症例と類似した類似症例も連動して拡大表示される。このため、医師は一つの指示にて複数の類似症例を詳細に比較することができる。したがって、操作数を大幅に低減できる。
なお、症例表示領域７１０の一部のサムネイル画像が拡大される場合について説明したが、本開示は、これに限定されない。例えば、ユーザにより任意の一つのサムネイル画像が選択された場合に、症例表示領域７１０に表示されている２０個のサムネイル画像全てを拡大してもよい。
図１３は、症例表示領域７１０に表示されたサムネイル画像のうち図８と異なるサムネイル画像が選択されたときの基本画面Ｋ２を示す図である。図１３では、１行４列目の表示領域１３０１に表示されたサムネイル画像がユーザによって選択されている。
図１３に示されるように、１行４列目のサムネイル画像が選択された状態で、ユーザが、例えばマウスのホイールを回転させることにより拡大操作を行うと、入力制御部１０３は、マウスのホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば通知された回転量を用いて各サムネイル画像の拡大率をそれぞれ決定し、決定した拡大率で全てのサムネイル画像を拡大する。表示制御部１０４は、例えば図１４または図１５に示されるように、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。
図１４は、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されたときの基本画面Ｋ２を示す図である。なお、図１４でも、図９と同様に、拡大画像生成部１１２は、対応関心領域ＣＲＯＩの中心位置が表示領域の中心位置になるように、拡大されたサムネイル画像をそれぞれ生成している。
図１５は、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されたときの図１４と異なる基本画面Ｋ２を示す図である。図１５では、図１０と同様に、拡大画像生成部１１２は、対応関心領域ＣＲＯＩのサイズが表示領域のサイズと同じサイズになるように、拡大されたサムネイル画像をそれぞれ生成している。
図１４または図１５の場合によれば、症例表示領域７１０において、拡大されているサムネイル画像と拡大されていないサムネイル画像とが混在しない。このため、見易い利点がある。
なお、上記では、ユーザによる拡大操作は、マウスのホイールの回転としているが、本開示は、これに限られない。例えば、症例表示領域７１０に表示されている一つのサムネイル画像上にマウスのポインタを配置して、マウスのボタンを押した状態で、キーボードの例えば上方向キーまたは下方向キーを押すことにより、拡大操作を行うようにしてもよい。この場合には、入力制御部１０３は、上方向キーまたは下方向キーが押されている時間をカウントしてもよい。拡大画像生成部１１２は、例えば上方向キーまたは下方向キーが押されている時間を用いて拡大率を決定してもよい。
なお、サムネイル画像の具体的な拡大処理手順の詳細は後述する。
図６に戻り、レイアウト領域７２０は、例えば、図６に示す基本画面の左下に配置されている。そして、レイアウト領域７２０は、症例表示領域７１０に表示された類似症例サムネイル画像のうちユーザが詳細に観察したい画像を、ディスプレイ１０１ａの医用画像ビューワに表示させるために用いられる。図５に示す通り、ディスプレイ１０１ａには４つの医用画像ビューワ６１０〜６４０が２行２列で表示されている。また、レイアウト領域７２０には、２行２列で４つの表示ボックス７２１〜７２４が存在する。このように、ディスプレイ１０１ａに表示される医用画像ビューワ６１０〜６４０の数及び配置と、レイアウト領域７２０における表示ボックス７２１〜７２４の数及び配置とは揃えられている。図５の通り、医用画像ビューワ６１０に、検索クエリ画像が表示されているのに合わせ、表示ボックス７２１には、検索クエリ画像のサムネイル画像が初期表示される。
他の表示ボックス７２２〜７２４には、医用画像ビューワ６２０〜６４０と連動させて類似症例のサムネイル画像が表示される。つまり、入力制御部１０３が表示ボックス７２２〜７２４のいずれか１の表示ボックスに症例表示領域７１０に表示された１のサムネイル画像のドラッグアンドドロップを検知すると、表示制御部１０４はその表示ボックスに１のサムネイル画像を表示させると共に、その表示ボックスに対応する医用画像ビューワにそのサムネイル画像に対応するスライス画像を表示する。このように、医用画像ビューワ６１０〜６４０は、表示ボックス７２１〜７２４と１対１で対応付けられている。
図６の例では、表示ボックス７２２〜７２４は空白であるため、図５に示す医用画像ビューワ６２０〜６４０も空白になっている。
ユーザは、マウスをドラッグアンドドロップすることで、詳細に観察したいサムネイル画像を、症例表示領域７１０からレイアウト領域７２０に移動させる。例えば、ユーザが表示ボックス７２２にサムネイル画像を移動させたとすると、表示ボックス７２２に対応する医用画像ビューワ６２０には、このサムネイル画像に対応するスライス画像が表示される。同様に、ユーザが表示ボックス７２３にサムネイル画像を移動させたとすると、表示ボックス７２３に対応する医用画像ビューワ６３０には、このサムネイル画像に対応するスライス画像が表示される。すなわち、表示ボックス７２１〜７２４のうち任意の表示ボックスにサムネイル画像を移動させると、検索クエリ画像のサムネイル画像に隣接して類似症例のサムネイル画像が表示される。そのため、ユーザはサムネイル画像のレベルで診断対象症例と類似症例との対比ができ、両症例の類似性を速やかに判断できる。つまり、サムネイル画像は、スライス画像に比べて情報量が少ないため、ユーザは、レイアウト領域７２０において隣接配置された診断対象症例と類似症例とがどの程度類しているかのおよその検討をつけることができる。そのため、ユーザは、症例表示領域７１０に表示された多数の類似症例の中から、対象診断症例との比較をスライス画像のレベルで詳細に行う必要がある類似症例の最終候補の絞り込みを効率良く行うことができる。
同様に、ディスプレイ１０１ａにも、レイアウト領域７２０と同じ配置関係で検索クエリ画像及び類似症例のスライス画像が表示される。そのため、レイアウト領域７２０において最終候補となる類似症例を絞り込む作業が終了すると、何らの操作を入力しなくても、ディスプレイ１０１ａには、診断対象症例と最終候補として絞り込んだ類似症例とがスライス画像のレベルで表示されている。そのため、ユーザは対象診断と最終候補の類似症例とを詳細に読影するという次の作業ステップに円滑に移行できる。
図６に示す基本画面の左側の上段には、「病名リスト」との見出しが付けられた病名リスト表示領域７３０が配置されている。病名リスト表示領域７３０には、類似症例の検索結果として取得された全ての類似症例の確定診断病名が表示される。診断対象症例は、診断が終了して確定診断病名が付与された後、類似症例として、症例検索システム３００に蓄積される。したがって、各類似症例には、それぞれ、診断によって付与された確定診断病名が予め付与されている。
図１６は、病名リスト表示領域７３０の拡大図である。図１６では、確定診断病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２、７３３、７３５、７３６、７３８、７３９、７４０、７４２、７４３、７４５）とに分けて表示されている。図１６の例では、大分類の病名として、真菌症７３１（ｍｙｃｏｓｉｓ）、腫瘍性７３４（ｎｅｏｐｌａｓｔｉｃ）、非腫瘍性７３７（ｎｏｎｎｅｏｐｌａｓｔｉｃ）、ミコバクテリア症７４１（ｍｙｃｏｂａｃｔｅｒｉｏｓｉｓ）、及びその他７４４が表示されている。
また、図１６の例では、真菌症７３１の詳細分類の病名として、アスペルギルス症７３２（ａｓｐｅｒｇｉｌｌｏｓｉｓ）、クリプトコッカス症７３３（ｃｒｙｐｔｏｃｏｃｃｏｓｉｓ）が表示されている。また、腫瘍性７３４の詳細分類の病名として、原発性肺癌７３５（ｌｕｎｇ ｃａｎｃｅｒ）、転移性肺癌７３６（ｍｅｔａｓｔａｔｉｃ ｌｕｎｇ ｃａｎｃｅｒ）が表示されている。また、非腫瘍性７３７の詳細分類の病名として、肺膿瘍７３８（ｌｕｎｇ ａｂｓｃｅｓｓ）、サルコイドーシス７３９（ｓａｒｃｏｉｄｏｓｉｓ）、敗血性塞栓７４０（ｓｅｐｔｉｃ ｅｍｂｏｌｉ）が表示されている。また、ミコバクテリア症７４１の詳細分類の病名として、非結核性抗酸菌症７４２（ＮＴＭ：ｎｏｎｔｕｂｅｒｃｕｌｏｕｓ ｍｙｃｏｂａｃｔｅｒｉａ）、肺結核７４３（ｔｕｂｅｒｃｕｌｏｓｉｓ）が表示されている。また、その他７４４の詳細分類の病名として気管支拡張症７４５（ｂｒｏｎｃｈｉｅｃｔａｓｉｓ）が表示されている。
また、大分類の病名及び詳細分類の病名の横には、その病名の症例数が表示されている。ユーザは、この病名リスト表示領域７３０における大分類の病名または詳細分類の病名の任意の行を選択することで、症例表示領域７１０に表示される類似症例を絞り込むことができる。図６に示すように類似症例の検索直後の状態では、多様な疾患を含む６２個の類似症例が表示対象になっているが、図１６の真菌症７３１の行がマウスでクリックされた場合、表示制御部１０４は、図１７に示すように真菌症の類似症例のみを症例表示領域７１０に表示する。また、図１６の転移性肺癌７３６の行がマウスでクリックされた場合は、表示制御部１０４は、図１８に示すように、転移性肺癌の類似症例のみを症例表示領域７１０に表示する。
この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例がどのような絞り込み条件であるが分かるように、表示条件表示領域７１４に、絞り込んだ病名を表示する。図１７は、「真菌症」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。図１８は、「転移性肺癌」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。
図１７の例では、「真菌症」で絞り込みがかけられたため、表示条件表示領域７１４には「真菌症」と表示され、図１８の例では「転移性肺癌」で絞り込みがかけられたため、表示条件表示領域７１４には「転移性肺癌」と表示されている。
また、この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例の件数が分かるように、検索結果件数表示領域７１３にその件数を表示する。図１７の例では、「真菌症」に該当する類似症例は１４件であったため、検索結果件数表示領域７１３には１４件と表示され、図１８の例では、「転移性肺癌」に該当する類似症例は３件であったため、検索結果件数表示領域７１３には３件と表示されている。
この機能により、画像診断の対象として医師が想定する病名のみの類似症例が症例表示領域７１０に表示され、医師は、診断対象症例が想定した病名と矛盾しないかどうかを容易に確認できる。
図１７では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図１７ではＭ＝１４）の類似症例のサムネイル画像が表示されている。
図６に示す基本画面Ｋ２の左側の中段には、「病変分布」との見出しが付けられた分布リスト表示領域７５０が配置されている。分布リスト表示領域７５０には、類似症例を検索した結果、症例検索システム３００から取得された全ての類似症例の病変分布の種類が表示される。
図１９は分布リスト表示領域７５０の拡大図である。図１９の例では、７つの病変分布の名称が表示されており、各病変分布の名称の左側にはチェックボックスが配置されている。図１９の例では病変分布として、びまん性７５１（ｄｉｆｆｕｓｅ）、区域性７５２（ｓｅｇｍｅｎｔａｌ）、気道性７５３（ｂｒｏｎｃｈｉａｌ）、両側性７５４（ｂｉｌａｔｅｒａｌ）、多発性７５５（ｍｕｌｔｉｐｌｅ）、胸膜下７５６（ｓｕｂｐｌｅｕｒａｌ）、及び血行性７５７（ｈｅｍａｔｏｇｅｎｏｕｓ）が表示されている。
これらの病変分布は予め定義されており、各類似症例には、予め、びまん性７５１〜血行性７５７のいずれに該当するか否かを示す分布フラグ値（該当：１、非該当：０）が付与されている。類似症例によっては、全ての分布フラグ値が非該当（：０）に設定されている場合もあれば、複数の分布フラグ値が該当（：１）に設定されている場合もある。
本実施の形態の症例検索システム３００は、ユーザが診断対象症例のスライス画像に設定した関心領域に対し、類似する関心領域を持つ類似症例を検索する。ユーザが関心領域を設定したスライス画像以外にも、病変は存在することもある。そして、ユーザは関心領域を設定したスライス画像で類似症例を検索した後、そのスライス画像以外のスライス画像と、検索された類似症例とを比較したい場合もある。この場合、ユーザは、医用画像ビューワ６１０において、スライス送りの操作を入力して他のスライス画像を表示させ、検索された類似症例と比較する作業を行う。この場合、検索された全ての類似症例のうち注目する病変に関連する類似症例のみが症例表示領域７１０に表示されていれば、関心領域が設定されたスライス画像以外のスライス画像の中から所望の病変を持つスライス画像を抽出する作業をスムーズに行うことができる。そこで、本実施の形態では、この作業をよりスムーズに行うために、検索された類似症例を所望の病変分布で絞りこむ機能が設けられている。
本実施の形態では、肺野領域内での病変分布として、図１９のびまん性７５１〜血行性７５７で示す病変分布が採用されている。また、図１９のように、チェックボックス及び病名分布の名称について、表示制御部１０４は、絞り込みが可能な病変分布をアクティブ状態で表示し、絞り不可能な病変分布を非アクティブ状態で表示する。ここでは、アクティブ状態としては、輝度が非アクティブ状態に比べて高い状態が採用され、非アクティブ状態としては、輝度がアクティブ状態に比べて低い状態が採用されている。
図１９の例では、びまん性７５１、気道性７５３〜血行性７５７がアクティブ状態で表示され、区域性７５２は、非アクティブ状態で表示されている。これは、現在、類似症例の検索によって取得された全ての類似症例のうち、少なくともいずれか１つの類似症例において、びまん性７５１、気道性７５３〜血行性７５７の分布フラグ値が１（該当）に設定され、取得された全ての類似症例のうち、いずれの類似症例においても、区域性７５２の分布フラグ値が０（非該当）に設定されていたからである。
アクティブ状態のチェックボックスのうち、１以上のチェックボックスにチェックマークが入力されたことを入力制御部１０３が検知すると、表示制御部１０４は、チェックマークが入力された病変条件に該当する類似症例のみを症例表示領域７１０に表示させる。
なお、区域性７５２については、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）に設定されている。そのため、区域性７５２にチェックマークが入力可能な構成を採用すると、これらの病変分布にチェックマークを入力した場合、症例表示領域７１０には類似症例が何も表示されず、チェックマークを入力する意味が無くなってしまう。そこで、本実施の形態では、このような事態を避けるために、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）である病変分布は非アクティブ状態で表示する。
図２０は、両側性７５４のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２１は、両側性７５４の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２０に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２１に示すように、症例表示領域７１０に、両側性の病変分布を持つ類似症例のみを表示する。この例では、両側性の病変分布を持つ類似症例は１０件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１０件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「両側性」とを表示する。図２１の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２０に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、図２１に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「両側性」が選択された場合には、肺の両側が観測できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、多発性７５５のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、多発性の病変分布を持つ類似症例のみを表示する。病変分布名「多発性」が選択された場合には、多発している病変の分布を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、びまん性７５１のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、びまん性の病変分布を持つ類似症例のみを表示する。病変分布名「びまん性」が選択された場合には、広範囲に広がるびまん性病変の分布を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、血行性７５７のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、血行性の病変分布を持つ類似症例のみを表示する。血行性の場合は注目病変以外への病変の転移の可能性がある。したがって、画像全体を確認する必要がある。このため、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
図２２は、気道性７５３のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２３は、気道性７５３の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２２に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２３に示すように、症例表示領域７１０に、気道性の病変分布を持つ類似症例のみを表示する。この例では、気道性の病変分布を持つ類似症例は１２件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１２件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「気道性」とを表示する。図２３の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２２に示すように、気道性７５３のチェックボックスにチェックマークが入力された場合、図２３に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「気道性」が選択された場合には、気道性か否かを判定できるようにする必要がある。そこで、拡大画像生成部１１２は、関心領域の面積が表示領域の２分の１程度になるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
同様に、区域性７５２のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、区域性の病変分布を持つ類似症例のみを表示する。病変分布名「区域性」が選択された場合には、区域性病変の詳細を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、関心領域の面積が表示領域の２分の１程度になるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
図２４は、胸膜下７５６のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２５は、胸膜下７５６の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２４に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２４に示すように、症例表示領域７１０に、胸膜下の病変分布を持つ類似症例のみを表示する。この例では、胸膜下の病変分布を持つ類似症例は７件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「７件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「胸膜下」とを表示する。図２５の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２４に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、図２５に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「胸膜下」が選択された場合には、胸膜との位置関係を観察できるようにする必要がある。そこで、拡大画像生成部１１２は、胸膜が含まれるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
なお、図２１、図２３、図２５における病変分布選択時の各サムネイル画像に対する拡大処理の詳細は後述する。
図２６は、患者情報１０００のデータ構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報管理部２０２により、患者別に患者情報蓄積部２０１に蓄積されて管理される。患者情報１０００には、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録されている。図２６に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、及び確定診断１９００を備える。
患者ＩＤ１１００は、患者に固有の識別子である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、及び主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、及び主訴である。検査情報１８００は、図２７に示すように、当該患者が過去に受けた１以上の検査に関する情報を表す。
図２７は、図２６に示す検査情報１８００のデータ構成を示す図である。検査情報１８００は、患者に対して行われた検査に関する情報であり、１つの検査に対応して１つずつ作成される。検査情報１８００は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、及び検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別子である。検査日時１８２０は、検査が行われた日時である。検査種１８３０は、検査の種類である。検査の種類としては、例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影等がある。
検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ、及びＧＰＴ等各種指標の値が該当する。また、検査結果１８４０は、各種指標を基に医師が下した判断等も該当する。また、単純Ｘ線撮影やＣＴ撮影等の画像検査であれば、撮影された画像へのポインタ情報や画像診断結果のレポートへのポインタ情報が含まれる。なお、検査で撮影された画像は、ＤＩＣＯＭのフォーマットで医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積される。
また、検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、これらの医用画像データは医用情報管理システム２００の医用画像データ蓄積部２０３が記憶する医用画像データベース２０００に蓄積される。
図２８は、医用画像データベース２０００のデータ構成を示す図である。医用画像データベース２０００は、検査ＩＤ１８１０及びシリーズＩＤ２１００を持つ。１回の検査で、複数の種類の撮影（例えば、単純ＣＴと造影ＣＴ等）が行われる場合があるので、１つの検査ＩＤ１８１０に対し、複数のシリーズＩＤ２１００が対応付けられている場合もある。つまり、撮影の種類に応じた個数のシリーズが得られるのである。
また、シリーズは、撮影の種類以外にも、撮影された画像の再構成の条件毎に得られる。例えば、撮影された画像が肺野条件及び縦隔条件で再構成された場合、これらの条件毎に１つのシリーズが得られる。なお、肺野条件で再構成された画像は肺の中の血管、気管支、及び肺胞等が強調表示される。また、縦隔条件で再構成された画像は、血管やリンパ節等の縦隔が強調表示される。肺野条件及び縦隔条件は１度の撮影で得られた画像を再構成することで得られるため、単純ＣＴと造影ＣＴとで２度の撮影が行われ、これら２度の撮影のそれぞれにつき肺野条件及び縦隔条件で画像が再構成された場合、２つの肺野条件のシリーズが得られ、２つの縦隔条件のシリーズが得られる。
ＣＴ及びＭＲＩの画像検査の場合、１回の撮影で複数のスライス画像が取得されるので、１つのシリーズＩＤ２１００には、複数のスライスＩＤ２２００が対応付けられている。図２８の検査ＩＤ「１３２２７９８９」には２つのシリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」が対応付けられているため、この検査から２つのシリーズのＣＴ画像が得られたことが分かる。また、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のそれぞれに対して、スライスＩＤ２２００が複数対応付けられていることが分かる。
検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５には、図２９に示すような診断レポート３０００が蓄積される。診断レポート３０００には、各検査に対する医師による診断結果が登録されている。
図２９は、診断レポート３０００のデータ構成を示す図である。診断レポート３０００は、検査ＩＤ１８１０、所見３１００、及び診断３２００を備える。検査ＩＤ１８１０は、図２７で示した検査ＩＤ１８１０と同じである。これにより、診断レポート３０００と検査情報１８００とが対応付けられる。所見３１００は、検査に対する医師の所見を示す文言が登録されている。診断３２００は、検査に対する医師の診断を示す文言が登録されている。
図３０は、類似症例データ４０００のデータ構成を示す図である。類似症例データ４０００は、診断対象症例に対して類似する類似症例を検索する際に参照されるデータであり、１つの類似症例に対応して１つずつ作成されている。なお、類似症例データ４０００は、類似症例データの付加情報の一例である。類似症例データ４０００は、症例検索システム３００の類似症例データ蓄積部３０１において、類似症例毎に蓄積されている。図３０に示すように、類似症例データ４０００は、類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、画像特徴データ４４００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、及び確定診断（詳細分類病名）４８００を備える。
類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。ここでは、類似症例のスライス画像に設定された関心領域毎に１つの類似症例データが生成されるため、類似症例ＩＤ４１００は、関心領域の識別子とも言える。図３０の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。
スライスＩＤ４２００は、関心領域が設定されたスライス画像の識別子であり、図２８に示すスライスＩＤ２２００と同一である。関心領域情報４３００は、スライス画像に設定された関心領域の位置を示す情報である。図３１は、スライス画像３１０１に設定された関心領域ＲＯＩを模式的に示した図である。図３１の例では、関心領域ＲＯＩは矩形状に設定されている。したがって、関心領域情報４３００は、関心領域ＲＯＩの左上の頂点の座標（ｘｌ、ｙｔ）と、右下の頂点の座標（ｘｒ、ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域情報４３００として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域情報４３００として採用される。
画像特徴データ４４００は、関心領域情報４３００で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４５００は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。ここで、サムネイル画像データ４５００は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。
病変分布情報４６００は、対象となる類似症例が予め定められたびまん性４６１０〜血行性４６７０で表される病変分布のいずれに該当するか否かを表す分布フラグ値（１：該当、０：非該当）である。
確定診断（大分類病名）４７００は、対象となる類似症例に対して確定された大分類の病名である。確定診断（大分類名）４７００は、類似症例を大分類の病名で絞り込む際に使用される。
確定診断（詳細分類病名）４８００は、対象となる類似症例に対して確定された詳細分類の病名である。確定診断（詳細分類病名）４８００は、類似症例を小分類の病名で絞り込む際に使用される。
予め、確定診断（大分類病名）４７００は、確定診断（詳細分類病名）４８００に対して一意に対応する大分類病名が定義されており、その対応関係を用いて類似症例データ４０００に格納されている。
確定診断（詳細分類病名）４８００は、医用画像データ蓄積部２０３において、図２８に示すスライスＩＤ２２００からシリーズＩＤ２１００が特定される。そして、特定されたシリーズＩＤから患者情報蓄積部２０１において、検査ＩＤ１８１０が特定され、検査ＩＤ１８１０から対応する患者情報１０００（図２６）が特定され、特定された患者情報１０００から該当する患者の確定診断１９００が特定される。
次に、情報端末１００が医用情報管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。
図３２は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００に対して類似症例検索の要求を行い、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。なお、図３２において、シーケンス図の左側に示す２列の矩形は、該当するステップの処理によりディスプレイ１０１ａ、１０１ｂに表示される画面を示す。また、図３２において、情報端末の「Ａ」は、医用情報管理アプリケーションを示し、「Ｂ」は、類似症例検索アプリケーションを示す。このシーケンスが開始される前に医用情報管理アプリケーションは予め起動されているものとする。
まず、情報端末１００は、操作部１０２を通してユーザ（読影を行う医師）の読影対象となる検査リストの表示要求を受け付け、入力制御部１０３及び通信制御部１１０を通して、医用情報管理システム２００の通信制御部２０６へ検査リストの表示要求を送信する（Ｓ５１０）。
医用情報管理システム２００の患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成する。そして、患者情報管理部２０２は、通信制御部２０６を通して、生成した検査リストを情報端末１００の通信制御部１１０に送信する（Ｓ５２０）。ここで、検査リストには、該当する患者の患者情報１０００及び検査情報１８００が含まれる。
情報端末１００の表示制御部１０４は、通信制御部１１０で受信された検査リストをディスプレイ１０１に表示する（Ｓ５３０）。
この場合、ディスプレイ１０１ａに検査リストが表示され、ディスプレイ１０１ｂには何も表示されない。
図３３は、検査リストの画面図である。検査リストは、読影が未終了の検査を表示する領域８００と、検査に含まれるシリーズに関する情報を表示する領域８１０とを備える。領域８００には、「患者ＩＤ」、「患者氏名」、「検査日時」、「検査ＩＤ」、及び「検査種」の欄が設けられている。「患者ＩＤ」、「患者氏名」の欄には、患者情報１０００に登録された患者ＩＤ１１００及び氏名１２００が表示され、「検査日時」、「検査ＩＤ」、及び「検査種」の欄には、検査情報１８００に登録された検査日時１８２０、検査ＩＤ１８１０、及び検査種１８３０が表示される。領域８１０は、領域８００でユーザにより選択された検査の詳細を表示するための領域であり、「シリーズＩＤ」、「定義」、及び「画像」の欄が設けられている。ここでは、領域８００においてユーザにより検査（行に対応）が選択されていないために、領域８１０には何も表示されていない。
ユーザは、領域８００に表示された検査の中から、これから読影を行う検査を選択する。この選択が入力制御部１０３で検知されると、図３２に示すように、通信制御部１１０は、選択された検査の検査ＩＤに含まれる全シリーズの表示要求を、医用情報管理システム２００へ送信する（Ｓ５４０）。
医用情報管理システム２００の通信制御部２０６がこの表示要求を受信すると、患者情報管理部２０２は、図２８に示す医用画像データベース２０００を参照し、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像を取得し、通信制御部２０６を通して、情報端末１００に送信する（Ｓ５５０）。例えば、図２８の例において、検査ＩＤ「１３２２７９８９」の検査がユーザにより選択されると、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のシリーズに含まれる全てのスライス画像がＳ５５０で送信される。
情報端末１００の通信制御部１１０が全シリーズの画像を取得すると、表示制御部１０４は、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを領域８１０に表示する（Ｓ５６０）。
この場合、ディスプレイ１０１ａに表示された検査リストの領域８１０には、領域８００で選択された検査に対応するシリーズのシリーズリストが表示され、ディスプレイ１０１ｂには何も表示されない。
図３４は、検査が選択された後の検査リストの画面図である。図３４の領域８００では選択された行の背後にハイライトが付されている。図３４の例では、領域８００において、２行目の「パナ太郎」の検査が選択されている。そのため、領域８１０では、選択された検査についての「シリーズＩＤ」、「定義」、及び「画像」が表示されている。ここで、「シリーズＩＤ」の欄には、医用画像データベース２０００において、選択された検査の検査ＩＤに対応付けられたシリーズＩＤが表示され、「画像」の欄には、表示されたシリーズＩＤを代表する１枚のスライス画像のサムネイル画像が表示される。ここで、シリーズＩＤを代表する１枚のスライス画像としては、所定のスライス位置の画像が採用される。所定のスライス位置としては先頭のスライス位置であってもよいし、中央のスライス位置であってもよい。「定義」は、該当するシリーズに対する撮影条件や再構成の条件を示す。この「定義」は、図示は省略されているが、例えば、図２８の医用画像データベース２０００において、シリーズＩＤと対応付けて登録されている。
領域８１０において、ユーザにより読影対象のシリーズが選択され、その選択を入力制御部１０３が検知すると、表示制御部１０４は、図３５に示すように、選択されたシリーズの先頭のスライス画像をディスプレイ１０１ａに表示する（Ｓ５７０）。図３５は、ユーザによりシリーズが選択された際にディスプレイ１０１ａに表示されるスライス画像を示した図である。図３５は、胸部ＣＴ撮影での先頭スライスを示す図であり、肺尖部よりももう少し頭方向の肩位置でのスライス画像である。ここで、表示制御部１０４は、選択されたシリーズの全てのスライス画像をシリーズ送りできる状態でディスプレイ１０１ａに表示する。なお、ディスプレイ１０１ｂには何も表示されない。例えば、ユーザにより、ディスプレイ１０１ａ上にマウスポインタが位置決めされマウスホイールを回転するスライス送りの操作が入力され、その操作を入力制御部１０３が検知する。すると、表示制御部１０４は、マウスホイールの回転量に応じて、ディスプレイ１０１ａに表示されたスライス画像を別のスライス位置のスライス画像に切り替える。ユーザは、スライス送りの操作を入力しながら画像診断を行う。そして、ユーザは画像診断に迷った場合、類似症例検索アプリケーションを起動する。
ここで、類似症例検索アプリケーションは、操作部１０２のキーボードにおいて、予め定められたショートカットキーが入力されて起動されてもよいし、マウスの右クリックで医用画像ビューワのメニューを表示させ、そのメニューの中から類似症例検索メニューが指定されて起動されてもよい。類似症例検索アプリケーションの起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、情報端末１００は、関心領域（ＲＯＩ）の受け付け待ち状態になる。
ユーザは、操作部１０２を通して、ディスプレイ１０１ａに表示されたスライス画像上の病変に関心領域（ＲＯＩ）を設定する（Ｓ５８０）。ここで、ユーザは、図３１に示すように、例えば、マウスを左クリックして、スライス画像３１０１における関心領域ＲＯＩの左上の頂点の座標を入力する。そして、ユーザは、左クリックした状態でマウスを右斜め下方向にドラッグし、左クリックを解除することで、関心領域ＲＯＩの右下の頂点を入力すればよい。
関心領域を設定する操作を入力制御部１０３が検知すると、ＲＯＩ管理部１０５は、入力制御部１０３から関心領域の左上及び右下の頂点の座標データを受け取り、受け取った座標データを関心領域情報として生成する。そして、ＲＯＩ管理部１０５は、生成した関心領域情報を通信制御部１１０に送信する（Ｓ５９０）。
同時に、ＲＯＩ管理部１０５は、診断対象症例のスライス画像を通信制御部１１０に送信する（Ｓ６００）。この場合、Ｓ５５０において、情報端末１００が医用情報管理システム２００から受け取った全シリーズのスライス画像のうち、ユーザが選択したシリーズにおいてユーザにより関心領域が設定された１枚のスライス画像（検索クエリ画像）が送信される。
次に、通信制御部１１０は、ＲＯＩ管理部１０５から送信された関心領域情報を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０１）。
同時に、通信制御部１１０は、ＲＯＩ管理部１０５から送信されたスライス画像を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０２）。
ここで、Ｓ６００、Ｓ６０１において、スライス画像そのものを送信するとしたが、スライス画像のスライスＩＤのみが送信されても構わない。この場合は、スライスＩＤを受信した症例検索システム３００は、そのスライスＩＤを指定して、医用情報管理システム２００からスライス画像を取得すればよい。
次に、症例検索システム３００が類似症例検索を行い、情報端末１００が類似症例検索結果を初期表示するまでの処理を説明する。
図３６Ａは、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。
症例検索システム３００の画像特徴抽出部３０２は、検索クエリ画像に設定された関心領域から予め定められた複数次元の画像特徴を抽出する（Ｓ６１０）。
「画像特徴」としては、医用画像における臓器若しくは病変部分の形状に関する画像特徴、又は輝度分布に関する画像特徴等が採用できる。例えば、非特許文献：「根本、清水、萩原、小畑、縄野、“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”、電子情報通信学会論文誌Ｄ−ＩＩ、Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ、Ｎｏ．２、ｐｐ．４１６−４２６、２００５年２月」には、４９０次元の画像特徴を用いることが記載されている。本実施の形態においては、例えば、この非特許文献に記載された画像特徴が採用される。但し、これは一例にすぎず、他の画像特徴が採用されてもよい。
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された各類似症例の画像特徴とを比較する（Ｓ６２０）。ここで、類似症例検索部３０３は、検索クエリ画像から抽出された画像特徴データと、類似症例データ蓄積部３０１に類似症例毎に蓄積された類似症例データ４０００（図３０）に登録された画像特徴データ４４００との距離を算出することで、両画像特徴を比較する。
次に、類似症例検索部３０３は、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の類似症例として決定する（Ｓ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部３０１に蓄積された類似症例データ４０００のうち、送信対象として決定された類似症例の類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００、及び類似症例検索部３０３で算出された距離を情報端末１００に送信する（Ｓ６４０）。
以下、類似症例検索結果が表示された初期の基本画面Ｋ２（図６）を生成する処理が実行される。まず、初期の基本画面Ｋ２において、レイアウト領域７２０を生成する際に使用される管理情報について説明する。
まず、症例検索システム３００の通信制御部３０４は、レイアウト情報を情報端末１００に送信する（Ｓ６５０）。ここで、レイアウト情報は、レイアウト領域７２０を構成する表示ボックスの行数、列数を指定する情報である。
次に、情報端末１００の通信制御部１１０がレイアウト情報を受信すると、表示ボックス管理部１０６は、送信されたレイアウト情報が指定する表示ボックスの行数及び列数を表示ボックス管理情報４４１０（図３６Ｂ）に登録すると共に、検索クエリ画像のスライスＩＤを表示ボックス管理情報（図３６Ｂ）に登録する（Ｓ６６０）。
図３６Ｂは、表示ボックス管理情報４４１０のデータ構成を示す図である。表示ボックス管理情報４４１０には、行数及び列数が登録されるテーブル４４１１と、各表示ボックスに表示されるスライス画像のスライスＩＤが登録されるテーブル４４１２とが含まれる。したがって、表示ボックス管理部１０６は、症例検索システム３００から送信されたレイアウト情報が指定する行数及び列数をテーブル４４１１の行数及び列数の欄に登録する。また、本実施の形態では、４つの表示ボックス７２１〜７２４のうち、左上の表示ボックス７２１に検索クエリ画像のサムネイル画像が表示される。そこで、表示ボックス管理部１０６は、医用情報管理システム２００から送信された検索クエリ画像のスライスＩＤをテーブル４４１２の１行１列目の項目に登録する。
ここで、レイアウト領域７２０を構成する表示ボックスの行数及び列数のデフォルト値は症例検索システム３００により予め設定されている。ここで、行数及び列数のデフォルト値は例えば２行及び２列である。そのため、図３６Ｂに示す表示ボックス管理情報４４１０には、「２行２列」が登録されている。
図６の例では、レイアウト領域７２０において、表示ボックス７２１〜７２４は２行２列で表示されている。このレイアウト領域７２０における行数及び列数はユーザが自由に設定できる。
図３６Ｃは、表示ボックスが３行２列で設定されたレイアウト領域７２０を持つ基本画面Ｋ２を示す図である。レイアウト領域７２０を構成する表示ボックスをＭ行Ｎ列で一般化すると、Ｍ≠Ｎの場合、ディスプレイ１０１が縦型のディスプレイであれば、Ｍ＞Ｎであることが望ましく、ディスプレイ１０１が横型のディスプレであれば、Ｍ＜Ｎであることが望ましい。
ここで、レイアウト領域７２０を構成する表示ボックスのうち、１つの表示ボックスに対象診断症例のサムネイル画像を表示することが、本実施の形態の重要な特徴の一つである。つまり、類似症例と診断対象症例とを隣接して表示すれば、ユーザは、両症例の類似性の判断がし易くなる。よって、レイアウト領域７２０における表示ボックスの配列は３行３列までにすることが望ましい。
また、表示ボックスの配列が３行２列の場合、２行１列目の表示ボックス或いは２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。また、表示ボックスの配列が２行３列の場合は、１行２列目或いは２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。また、表示ボックスの配列が３行３列の場合は、２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。こうすることで、常に、レイアウト領域７２０には、対象診断症例に対して類似症例が隣接して表示されることになる。
ユーザが設定したレイアウト領域７２０のレイアウト情報は、図３６Ｄ又は図３６Ｅに示すレイアウト管理情報４２００に登録される。
なお、レイアウト管理情報４２００を保存するボックスレイアウト管理部１１１は、症例検索システム３００が備えてもよい。
同じユーザであっても情報端末１００のディスプレイ１０１のサイズや画面のタイプ（縦型又は横型）に適合するようにレイアウト領域７２０のレイアウトが変更されることもある。そのため、図３６Ｄに示すように、ユーザが設定したレイアウト情報は、ユーザＩＤと端末ＩＤと関連付けてレイアウト管理情報４２００に登録されてもよい。図３６Ｄは、レイアウト管理情報４２００の一例を示す図である。このレイアウト管理情報４２００では、「ユーザＩＤ」、「端末ＩＤ」、「列数］、「行数」、及び「診断対象症例の位置」とが対応付けられている。ここで、「ユーザＩＤ」は情報端末１００を使用するユーザに対して予め付与されたユーザの識別子である。「端末ＩＤ」は、該当するユーザの使用が想定される情報端末１００の識別子である。
図３６Ｄの例では、ユーザＩＤ「Ｕ０１」のユーザは、端末ＩＤ「Ｔ０２」及び「Ｔ０４」の使用が想定されているため、ユーザＩＤ「Ｕ０１」が端末ＩＤ「Ｔ０２」、「Ｔ０４」と対応付けられている。「行数」及び「列数」は該当するユーザが設定したレイアウト領域７２０の行数及び列数が登録されている。「診断対象症例の位置」は、診断対象症例を表示する表示ボックスの位置である。例えば、端末ＩＤ「Ｔ０４」の情報端末１００では、レイアウト領域７２０が２行３列に設定されており、診断対象症例を全ての類似症例と隣接表示させるために、「診断対象症例の位置」として２行１列を示す（２、１）が登録されている。
なお、図３６Ｄでは、レイアウト情報をユーザＩＤと端末ＩＤと対応付けて管理する態様を示したが、レイアウト情報はユーザＩＤのみと対応付けて管理されてもよい。図３６Ｅは、レイアウト管理情報４２００の一例を示す図である。図３６Ｅに示すレイアウト管理情報４２００では、図３６Ｄに示すレイアウト管理情報４２００において、「端末ＩＤ」の欄が省かれている。それ以外、図３６Ｅのレイアウト管理情報４２００は図３６Ｄのレイアウト管理情報４２００と同じである。なお、図３６Ｅの態様では、１のユーザは１の情報端末１００の使用が想定されているため、「端末ＩＤ」の欄が省かれている。
なお、レイアウト情報が症例検索システム３００で管理される場合、図３６ＡのＳ６５０において、該当するユーザのレイアウト情報が情報端末１００に送信される。
次に、Ｓ６４０で送信された類似症例データ及びＳ６６０で保存した表示ボックス管理情報４４１０を用いて、表示制御部１０４は、類似症例検索結果が表示された初期の基本画面Ｋ２を生成する（Ｓ６７０）。
この場合、ディスプレイ１０１ｂには図６に示す基本画面Ｋ２が表示される。また、ディスプレイ１０１ａには、検索クエリ画像が表示されている。
図３７は、図３６ＡのＳ６７０に示す初期の基本画面Ｋ２を生成する処理の詳細を示すフローチャートである。
まず、Ｓ１０００にて、表示制御部１０４は、図３６ＡのＳ６４０で受信された類似症例の数をカウントし、カウント値を検索結果件数表示領域７１３に表示する。
次に、Ｓ１１００にて、表示制御部１０４は、表示条件表示領域７１４に、「全疾患」と表示する。ここで、「全疾患」と表示されるのは、初期の基本画面Ｋ２では、ユーザにより病名や病変分布での絞り込みがかけられていないからである。
次に、Ｓ１２００にて、表示制御部１０４は、図３６ＡのＳ６４０で受信された類似症例のうち、症例表示領域７１０にサムネイル画像が表示可能な類似症例の件数分だけ、症例表示領域７１０に類似症例のサムネイル画像を表示すると共に、各サムネイル画像に対応付けて確定診断及び類似度を表示する。
症例表示領域７１０に表示可能な類似症例の件数の最大値は、図６の例では２０である。この最大値は予め定められている。また、この最大値はユーザが自由に変更できる構成にしてもよい。図３６ＡのＳ６４０で受信された類似症例の数が、最大値よりも多い場合、表示制御部１０４は、症例表示領域７１０の右端に縦方向に長尺のスクロールバー７１５を表示する。これにより、ユーザは、スクロールバー７１５を移動させ、初期の基本画面Ｋ２で非表示であった類似症例のサムネイル画像を閲覧できる。
次に、Ｓ１３００にて、病名リストが生成されて表示される。まず、図３６ＡのＳ６４０で受信された類似症例から、病名リストが生成される。病名リストは、Ｓ６４０で受信された類似症例が、確定診断病名毎に分類されたリストである。
ここで、Ｓ６４０で受信された類似症例の件数をＮＣ件とする。病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を用いて、病名リストを生成する。生成された病名リストは、図３８に示すようにテーブル形式のデータとして、病名リスト管理部１０８で管理される。
図３９は、図３７のＳ１３００で生成される病名リストのデータ構成を示す図である。病名リストには、「病名ＩＤ」、「大分類病名」、「詳細分類病名」、「件数」、及び「類似症例ＩＤ」の欄が含まれる。「病名ＩＤ」は、確定診断病名毎に付与される識別子である。ここでは、大分類病名と詳細分類病名との１つの組み合わせに対して１つの病名ＩＤが付与されている。
「大分類病名」は、類似症例データ４０００に登録された確定診断（大分類病名）４７００が示す確定診断病名である。「詳細分類病名」は、類似症例データ４０００に登録された確定診断（詳細分類病名）４８００が示す確定診断病名である。「件数」は、「病名ＩＤ」が示す確定診断病名に該当する類似症例の件数である。「類似症例ＩＤ」は、「病名ＩＤ」が示す病名に該当する類似症例を示す類似症例ＩＤである。
病名リスト管理部１０８は、Ｓ６４０で受信した全ての類似症例データ４０００について、確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を抽出し、両者が同じ類似症例データ４０００を同じ確定診断病名の類似症例として分類する。そして、病名リスト管理部１０８は、確定診断病名が同じ類似症例の件数をカウントし、該当する確定診断病名のレコードの「件数」の欄に登録する。また、病名リスト管理部１０８は、同じ確定診断病名に分類した類似症例の類似症例ＩＤを該当する確定診断病名のレコードの「類似症例ＩＤ」の欄に登録する。
図３９の例では、大分類病名が「腫瘍性」、詳細分類病名が「原発性肺癌」の確定診断病名に対して病名ＩＤ「ＤＩＳ５２８」が付与されている。そして、この確定診断病名に該当する類似症例の件数が１０件であったため、該当するレコードの「件数」の欄に１０が登録され、この確定診断病名に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５８」、「ＳＩＭ５５１」、「ＳＩＭ１２０９」、及び「ＳＩＭ２３４１」等が、該当するレコードの「類似症例ＩＤ」の欄に登録されている。
そして、表示制御部１０４は、このようにして生成された病名リストを用いて病名リスト表示領域７３０を生成し、ディスプレイ１０１に表示する。
図４０、図４１、図４２は、それぞれ、病名リスト表示領域７３０の第１表示例、第２表示例、第３表示例を示した図である。図４０に示すように第１表示例では、類似症例検索の結果得られた類似症例が、詳細分類病名の件数の多い順に件数と対応付けて一覧表示されている。
図４１に示すように第２表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示されている。
図４２に示すように第３表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示され、且つ、大分類病名毎にその中に含まれる詳細分類病名が件数の多い順に件数と対応付けて一覧表示されている。この場合、患確定診断病名が、大分類病名と詳細分類病名との階層構造で表現される。
図４３は、図４１に示す病名リスト表示領域７３０の画面遷移を示す図である。図４３の上段に示すように、一覧表示された大分類病名のうち、１の大分類病名がユーザにより選択される操作を入力制御部１０３が検知すると、表示制御部１０４は、図４３の下段に示すように、選択された大分類病名に属する詳細分類病名を件数が多い順に件数と対応付けて表示する。ここで、ユーザは、例えば、病名リスト表示領域７３０において一覧表示された大分類病名のうち、所望する１の大分類病名を例えばダブルクリック或いはシングルクリックすることで１の大分類病名を選択すればよい。図４３の例では非腫瘍性がダブルクリックされているため、非腫瘍性に属する詳細分類病名が一覧表示されている。
図４３の下段において、詳細分類病名が一覧表示されている領域がユーザによりダブルクリック或いはシングルクリックされると、表示制御部１０４は、該当する領域に表示されていた詳細分類病名を非表示にすればよい。
なお、表示制御部１０４は、病名リスト（図３９）を参照することで、大分類病名に属する詳細分類病名を判定すればよい。例えば、図３９の例では、真菌症に対して、アスペルギルス症及びクリプトコッカス症が対応付けられているため、表示制御部１０４は、真菌症にはアスペルギルス症及びクリプトコッカス症が属すると判断すればよい。
図３７に戻り、Ｓ１４００にて、分布リストが生成されて表示される。まず、Ｓ６４０で受信された類似症例から、分布リストが生成される。分布リストは、Ｓ６４０で受信された類似症例が、病変分布毎に分類されたリストである。
病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている病変分布情報４６００を用いて、分布リストを生成する。生成された分布リストは、図４４Ａに示すようにテーブル形式のデータとして、分布リスト管理部１０９で管理される。
図４４Ａは、図３７のＳ１４００で生成される分布リストのデータ構成を示す図である。分布リストには、「分布名」、「症例数」、及び「類似症例ＩＤ」の欄が含まれる。「分布名」は、びまん性、区域性といった予め定められた複数の病変分布の名称である。「症例数」は、病変分布に該当する類似症例の件数である。「類似症例ＩＤ」は、病変分布に該当する類似症例を示す類似症例ＩＤである。
分布リスト管理部１０９は、Ｓ６４０で受信した全ての類似症例データ４０００について、病変分布情報４６００を抽出し、抽出した病変分布情報４６００において、分布フラグ値に１（該当）が設定されている病変分布の数をカウントし、カウント値を該当する病変分布のレコードの「症例数」の欄に登録する。また、分布リスト管理部１０９は、分布フラグ値に１が設定されている類似症例の類似症例ＩＤを該当する病変分布のレコードの「類似症例ＩＤ」の欄に登録する。
図４４Ａの例では、びまん性に該当する類似症例の件数が３件であったため、びまん性のレコードの「症例数」の欄に３が登録されている。また、びまん性に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５２１」、「ＳＩＭ４１２３」、及び「ＳＩＭ５２２５」がびまん性のレコードの「類似症例ＩＤ」の欄に登録されている。
そして、表示制御部１０４は、このようにして生成された分布リストを用いて分布リスト表示領域７５０を生成し、ディスプレイ１０１に表示する。
図４４Ｂは、図４４Ａに示す分布リストを用いて生成された分布リスト表示領域７５０を示す図である。図４４Ａにおいて、区域性及び胸膜下の症例数は０であるため、図４４Ｂでは、区域性７５２及び胸膜下７５６が非アクティブ状態で表示され、これら以外の病変分布は、症例数が１以上であるため、アクティブ状態で表示されている。
図３７に戻り、Ｓ１５００にて、レイアウト領域７２０が表示される。この処理は、表示制御部１０４によって行われる。
図３８は、図３７に示すＳ１５００の処理を示すフローチャートである。Ｓ１５１０にて、表示制御部１０４は、レイアウト領域７２０を構成する表示ボックスの行数及び列数を、Ｓ６６０で設定された表示ボックス管理情報４４１０から取得する。図３６Ｂの表示ボックス管理情報４４１０の例では、行数及び列数として２行２列が設定されているため、「２行２列」という情報が取得される。なお、ユーザが表示ボックスの行数及び列数を変更した場合、レイアウト領域７２０を構成する表示ボックスの行数及び列数は、図３６Ｄ又は図３６Ｅに示すレイアウト管理情報４２００から取得される。
次に、Ｓ１５２０にて、表示制御部１０４は、Ｓ１５１０で取得した表示ボックスの行数及び列数に合わせて、表示ボックスを描画する。
最後に、Ｓ１５３０にて、表示制御部１０４は、表示ボックス管理情報４４１０から各表示ボックスのスライスＩＤを特定し、特定したスライスＩＤに対応するサムネイル画像を、対応する各表示ボックス内に描画する。
図３６Ｂの例では、１行１列目の表示ボックスに診断対象症例のスライスＩＤが格納されている。そのため、表示制御部１０４は、図３２のＳ６００で送信された診断対象症例のスライス画像からサムネイル画像を生成し、生成したサムネイル画像を表示ボックス７２１に描画する。
この段階では、残りの表示ボックス（１行２列目、２行１列目、２行２列目の表示ボックス７２２、７２３、７２４）にはスライスＩＤが格納されていないため、表示制御部１０４は、これらの表示ボックスに何も表示しない。これらの表示ボックスには、後述する処理により、類似症例のサムネイル画像が表示されることになる。
図３６Ａに戻り、通信制御部１１０は、表示ボックス管理部１０６に格納された表示ボックス管理情報４４１０を表示制御部１０４に送信する（Ｓ６８０）。
次に、表示制御部１０４は、レイアウト領域７２０の表示状態及びレイアウトと同じ表示状態及びレイアウトで医用画像ビューワを起動させる（Ｓ６９０）。
ここでは、症例検索システム３００が画像特徴を抽出する例を示したが、情報端末１００が画像特徴を抽出してもよい。図４５は、症例検索システム３００が画像特徴を抽出する態様を採用した場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００のブロック図である。
図２との違いは、情報端末１００に画像特徴抽出部１１３が追加された点、及び症例検索システム３００から画像特徴抽出部３０２が省かれた点にある。
図４６は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
図３２との違いは、ＲＯＩ管理部１０５が、診断対象症例のスライス画像を通信制御部１１０に送信する処理（Ｓ６００）の後、画像特徴の抽出が情報端末１００で行われ（Ｓ６０３）、抽出された画像特徴が症例検索システム３００に送信（Ｓ６０４）されている点にある。画像特徴の抽出（Ｓ６０４）の処理内容は、画像特徴の抽出が症例検索システム３００で行われる場合と同様である。
図４７は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。図３６Ａとの違いは、画像特徴の抽出が情報端末１００側で行われるため、図４７では、図３６Ａにはあった画像特徴の抽出（Ｓ６１０）が省かれている点にある。
次に、図８〜図１５を用いて説明された、症例表示領域７１０に表示されているサムネイル画像の拡大処理を説明する。
図４８は、症例表示領域７１０に表示されているサムネイル画像の拡大処理を示すフローチャートである。
Ｓ４０００では、拡大画像生成部１１２は、ユーザが選択したサムネイル画像（図８では２行４列目）の類似症例ＩＤ４１００（図３０）を取得する。以下では、ユーザが選択したサムネイル画像を基準サムネイル画像と呼ぶ。拡大画像生成部１１２は、この基準サムネイル画像に対するユーザの拡大操作と連動させて、症例表示領域７１０に表示されている他のサムネイル画像の拡大率を決定する。
Ｓ４１００では、拡大画像生成部１１２は、ユーザが操作部１０２に入力した基準サムネイル画像に対する拡大操作の操作量を、入力制御部１０３から取得する。そして、拡大画像生成部１１２は、取得した操作量に基づき、基準サムネイル画像に対する拡大率を決定する。
具体的には、入力制御部１０３は、操作部１０２に拡大操作として入力されるマウスのホイールの回転量を検知する。入力制御部１０３は、検知した回転量を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、回転量に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出する。
上述のように、ユーザによる拡大操作は、キーボードの上方向キーまたは下方向キーでもよい。この場合には、入力制御部１０３は、キーの押下時間を検知してもよい。拡大画像生成部１１２は、キーの押下時間に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出してもよい。
Ｓ４２００では、拡大画像生成部１１２は、症例検索システム３００から取得した多数の類似症例のうち、拡大処理を行う対象の類似症例を決定する。表示制御部１０４は、図６に示されるように、症例検索システム３００の類似症例検索部３０３により検索されたＮＣ件（図６ではＮＣ＝６２）の類似症例データ中の、症例表示領域７１０で予め定められた最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の類似症例のサムネイル画像を症例表示領域７１０に表示している。
本ステップでは、拡大画像生成部１１２は、ユーザが選択したサムネイル画像を含むようにＮＤ以下の範囲で拡大処理を行う対象の類似症例を決定する。この実施の形態では、拡大画像生成部１１２は、拡大処理を行う対象をＮＺ個の類似症例に決定する。ここで、ＮＺ≦ＮＤである。本ステップにより、ＮＣ件の全ての類似症例のサムネイル画像を拡大する場合と比較して、情報端末１００における処理負荷を軽減することができる。
Ｓ４３００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺに到達するまで（Ｓ４３００でＹＥＳ）、Ｓ４４００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４４００、Ｓ４５００の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺを超えると（Ｓ４３００でＮＯ）、図４８の処理は終了する。
Ｓ４４００では、拡大画像生成部１１２は、拡大対象の類似症例ｉのサムネイル画像の拡大率を算出する。Ｓ４１００で決定した基準サムネイル画像に対する拡大率と、基準サムネイル画像に対応する類似症例の関心領域情報４３００（図３０）と、拡大対象の類似症例ｉの関心領域情報４３００（図３０）とに基づき、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率を算出する。
図４９は、図４８のＳ４４００のサブルーチンの処理を示すフローチャートである。
Ｓ４４１０では、拡大画像生成部１１２は、基準サムネイル画像に対応する類似症例の関心領域情報４３００に基づき、基準サムネイル画像の関心領域の面積を算出する。ここで、基準サムネイル画像の関心領域の面積をＳｒとし、関心領域の左上の座標を（ｘｌ、ｙｔ）とし、関心領域の右下の座標を（ｘｒ、ｙｂ）とすると、関心領域の面積Ｓｒは以下の式で算出することができる。
Ｓｒ＝｜ｘｌ−ｘｒ｜×｜ｙｔ−ｙｂ｜
Ｓ４４２０では、拡大画像生成部１１２は、拡大対象の類似症例ｉの関心領域情報４３００に基づき、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積を算出する。ここで、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとし、関心領域の左上の座標を（ｘｌｉ、ｙｔｉ）とし、関心領域の右下の座標を（ｘｒｉ、ｙｂｉ）とすると、関心領域の面積Ｓｉは以下の式で算出することができる。
Ｓｉ＝｜ｘｌｉ−ｘｒｉ｜×｜ｙｔｉ−ｙｂｉ｜
Ｓ４４３０では、拡大画像生成部１１２は、Ｓ４４１０で算出した基準サムネイル画像の関心領域の面積Ｓｒと、Ｓ４４２０で算出した拡大対象の類似症例ｉのサムネイル画像の関心領域の面積Ｓｉと、Ｓ４１００で決定した基準サムネイル画像に対する拡大率とに基づき、拡大対象の類似症例ｉの拡大率を算出する。ここで、基準サムネイル画像に対する拡大率をｋｒとすると、拡大対象の類似症例ｉの拡大率ｋｉは、以下の式で算出することができる。
ｋｉ＝ｋｒ（Ｓｒ／Ｓｉ）
図５０は、拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。図５０の上左図は、拡大処理前の基準サムネイル画像を示す。図５０の上右図は、拡大処理後の基準サムネイル画像を示す。図５０の下左図は、拡大処理前の拡大対象のサムネイル画像を示す。図５０の下右図は、拡大処理後の拡大対象のサムネイル画像を示す。
図５０の上左図に示される基準サムネイル画像を拡大率ｋｒで拡大すると、図５０の上右図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５０の上右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｄの中心位置に一致するように、表示領域７２０ｄを決定する。拡大画像生成部１１２は、表示領域７２０ｄのサイズを拡大処理前の表示領域７２０ｃのサイズと同じサイズに維持している。
図５０の下左図に示される拡大対象のサムネイル画像を拡大率ｋｉで拡大すると、図５０の下右図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５０の下右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｆの中心位置に一致するように、表示領域７２０ｆを設定する。拡大画像生成部１１２は、表示領域７２０ｆのサイズを拡大処理前の表示領域７２０ｅのサイズと同じサイズに維持している。
図５０では、基準サムネイル画像の拡大率ｋｒに対して、関心領域の面積比に応じて拡大対象のサムネイル画像ｉの拡大率ｋｉを決定している。したがって、図５０に示すように、拡大後の関心領域ＲＯＩのサイズが一致している。
図４８に戻って、Ｓ４５００では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率と、類似症例データ４０００（図３０）内の、関心領域情報４３００及びサムネイル画像データ４５００とに基づき、拡大対象の類似症例ｉの拡大されたサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２により生成されたサムネイル画像を表示する。
図５１は、図４８のＳ４５００のサブルーチンの処理を示すフローチャートである。図５２は、拡大率と表示領域との関係を概略的に表す図である。以下、図５１及び図５２を用いて、関心領域の中心位置が拡大されたサムネイル画像の中心位置に一致するように、拡大画像を生成する処理の詳細について説明する。
Ｓ４５１０では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率と、類似症例データ４０００（図３０）内のサムネイル画像データ４５００とに基づき、拡大画像を生成する。拡大率がｋｉ倍の場合は、図５２の左図に示されるサムネイル画像から図５２の右図に示される拡大されたサムネイル画像が生成される。
Ｓ４５２０では、拡大画像生成部１１２は、類似症例データ４０００（図３０）内の関心領域情報４３００と、Ｓ４４００で算出した拡大率とに基づき、拡大後のサムネイル画像における関心領域の中心座標を算出する。ここで、拡大前の関心領域の中心座標を（ｘｃ、ｙｃ）とすると、図５２に示すように、拡大前の関心領域の中心座標に拡大率を掛けて得られる座標（ｋｉ×ｘｃ、ｋｉ×ｙｃ）が拡大後の関心領域の中心座標となる。
Ｓ４５３０では、拡大画像生成部１１２は、Ｓ４５２０で算出した拡大後の関心領域の中心座標（ｋｉ×ｘｃ、ｋｉ×ｙｃ）と、予め定められた表示領域のサイズとから、拡大後のサムネイル画像ｉにおける表示領域を決定する。ここで、図５２の左図に示されるように、表示領域７２０ａは、横寸法ｗ、縦寸法ｈに設定されている。この場合、図５２の右図に示される矩形領域７２０ｂが表示領域となる。この矩形領域７２０ｂの左上座標は（ｋｉ×ｘｃ−ｗ／２、ｋｉ×ｙｃ−ｈ／２）であり、右下座標は（ｋｉ×ｘｃ＋ｗ／２、ｋｉ×ｙｃ＋ｈ／２）である。
Ｓ４５４０では、表示制御部１０４は、拡大画像生成部１１２によりＳ４５１０で生成された拡大画像のうち、Ｓ４５３０で算出された表示領域７２０ｂの画像を、症例表示領域７１０の類似症例ｉの表示領域に表示する。図５１に示される処理により、関心領域の中心位置が表示領域の中心位置となる拡大されたサムネイル画像ｉを生成することが可能となる。
以上の処理により、症例表示領域７１０には、ユーザが指定した任意の拡大率で、サムネイル画像が表示される。ユーザによる一つのサムネイル画像に対する拡大操作で症例表示領域７１０内の全てのサムネイル画像の拡大率を変更できる。このため、ユーザの操作負担が減少する。また、症例表示領域７１０において、関心領域のサイズが揃えられてサムネイル画像が表示される。このため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対してのみ、拡大処理が行われる。このため、システムへの負荷が大幅に軽減される。
次に、症例表示領域７１０に拡大されたサムネイル画像が表示された後に、ユーザがスクロールバー７１５を操作した場合のサムネイル画像の拡大処理の流れを説明する。この場合では、図１４または図１５に示されるように、症例表示領域７１０に表示されているサムネイル画像の全てが拡大されるものとする。
図５３Ａは、拡大されたサムネイル画像が症例表示領域７１０に表示された後に、ユーザがスクロールバー７１５を操作した場合のサムネイル画像の拡大処理を示すフローチャートである。図５３Ｂは、拡大されたサムネイル画像が症例表示領域７１０に表示された状態の基本画面Ｋ２を示す図である。
図５３Ｂに示される状態において、ユーザがスクロールバー７１５を下向きに操作すると、その操作量を入力制御部１０３が検知し、検知した操作量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、図５３Ａの処理を開始する。
Ｓ４６００では、拡大画像生成部１１２は、ユーザによるスクロールバー７１５の操作によって、新たに症例表示領域７１０に表示される症例数Ｎｓを取得する。具体的には、拡大画像生成部１１２は、症例表示領域７１０で予め定められた最大表示件数ＮＤを表示制御部１０４から取得する。この実施形態では、図６に示されるように、最大表示件数ＮＤは、４行５列の２０件である。したがって、新たに５個のサムネイル画像が表示対象となるため、拡大画像生成部１１２は、Ｎｓ＝５を取得する。
また、Ｓ４６００では、拡大画像生成部１１２は、新たに症例表示領域７１０に表示されるサムネイル画像の類似症例ＩＤを特定する。このとき、拡大画像生成部１１２は、症例検索システム３００の類似症例検索部３０３から受信した類似症例の類似度を参照する。現在は、表示制御部１０４は、類似度の最も高い類似症例からＮＤ件の類似症例のサムネイル画像を表示している。そこで、拡大画像生成部１１２は、類似度の最も高い類似症例から数えて（ＮＤ＋１）番目から（ＮＤ＋Ｎｓ）番目までの類似症例を拡大対象症例とする。拡大画像生成部１１２は、これらの拡大対象の類似症例ＩＤを特定する。
Ｓ４７００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮｓに到達するまで、Ｓ４８００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４８００、Ｓ４５００の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮｓを超えると（Ｓ４７００でＮＯ）、図５３Ａの処理は終了する。
Ｓ４８００では、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率ｋｉを算出する。すでに症例表示領域７１０には拡大されたサムネイル画像が表示されている。そこで、拡大画像生成部１１２は、図４８のＳ４１００で決定した基準サムネイル画像に対する拡大率ｋｒを用いる。そして、拡大画像生成部１１２は、図４８のＳ４４００と同様にして、拡大対象の類似症例ｉの拡大率ｋｉを算出する。続くＳ４５００は、図４８のＳ４５００と同じであるため、詳細な説明は省略する。図５３Ａの処理により、図５３Ｃに示される画面が得られる。
図５３Ｃは、拡大されたサムネイル画像が図５３Ｂの状態から移動した基本画面Ｋ２を示す図である。図５３Ｃに示されるように、症例表示領域７１０に表示されている類似症例のサムネイル画像は、スクロールバー７１５の操作により上方向に移動している。
なお、ユーザがスクロールバー７１５の操作を続けた場合には、拡大画像生成部１１２は、さらに、図５３Ａの処理を実行する。
以上の処理により、類似症例が多数であっても、拡大画像生成部１１２は、スクロールバー７１５の操作により新たに症例表示領域７１０に表示されるサムネイル画像に対してのみ拡大処理を行えばよい。このため、システムへの負荷が大幅に軽減される。
次に、図２０、図２２、図２４に示す分布リスト表示領域７５０に表示された病変分布が選択されたときの拡大処理について説明する。図５４は、分布リスト表示領域７５０に表示された病変分布が選択されたときの処理を示すフローチャートである。
Ｓ２０００では、分布リスト表示領域７５０に表示された病変分布（分布チェック項目）のうち、いずれか１の分布チェック項目を選択する操作を入力制御部１０３が検知すると、拡大画像生成部１１２は、検知された分布チェック項目が第１〜第３分布情報のいずれに該当するかを判定する。第１分布情報の場合、処理がＳ１３０１に進められ、第２分布情報の場合、処理がＳ１３０２に進められ、第３分布情報の場合、処理がＳ１３０３に進められる。
第１分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属するサムネイル画像を選択させるための情報である。ここでは、第１分布情報としては、「両側性」、「多発性」、「びまん性」、及び「血行性」が該当する。よって、第１範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
第２分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域の一部であることを示す所定の第２範囲（第１範囲より低い：第２範囲の上限値が第１範囲の下限値以下）に属するサムネイル画像を選択させるための情報である。ここでは、第２分布情報としては、「気道性」及び「区域性」が該当する。よって、第２範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
第３分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、胸膜の辺縁に存在するサムネイル画像を選択させるための情報である。ここでは、第３分布情報としては、「胸膜下」が該当する。
Ｓ１３０１では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第１分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数（この実施の形態では２０件）以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ１として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉ（ｉは抽出された類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺ１に到達するまで、Ｓ２１００、Ｓ１５０１の処理を繰り返す。拡大画像生成部１１２は、Ｓ２１００、Ｓ１５０１の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺ１を超えると（Ｓ１３０１でＮＯ）、図５４の処理は終了する。
Ｓ２１００では、拡大画像生成部１１２は、類似症例ｉについての第１分布情報に対応する第１拡大率を算出する。ここでは、第１拡大率としては、例えば、１．０が採用される。但し、これは一例であり第１分布情報が示す病変分布を診断する際に設定される関心領域の全域が表示領域に収まるような値であれば、１．０以外の拡大率が第１拡大率として採用されてもよい。
Ｓ１５０１では、図４８のＳ４５００と同様に処理が行われる。その結果、表示制御部１０４は、類似症例ｉのサムネイル画像を類似症例ｉの第１拡大率で拡大した画像を症例表示領域７１０に表示する。
上述の図２１では、両側性が選択されている。この場合、類似症例のうち病変分布が両側性に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、この場合、拡大率は１．０であるため、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像が表示されている。すなわち、関心領域ＲＯＩの中心が表示領域６８０１の中心に位置するようにサムネイル画像の表示位置が調整されず、且つ、拡大されずに、サムネイル画像が表示される。
Ｓ１３０２では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第２分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ２として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺ２に到達するまで、Ｓ２２００、Ｓ１５０２の処理を繰り返す。拡大画像生成部１１２は、Ｓ２２００、Ｓ１５０２の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺ２を超えると（Ｓ１３０２でＮＯ）、図５４の処理は終了する。
Ｓ２２００では、拡大画像生成部１１２は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報とを用いて、類似症例ｉについての第２分布情報に対応する第２拡大率を算出する。
第２分布情報が選択された場合、拡大画像生成部１１２は、類似症例ｉを、関心領域のサイズが表示領域のサイズの１／２程度になるように、拡大する。そのため、拡大画像生成部１１２は、例えば、下記の数式で類似症例ｉに対する第２拡大率ｋｉを計算する。表示領域の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとすると、第２拡大率ｋｉは以下の式で算出できる。
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ１５０２では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像を第２拡大率ｋｉで拡大する。表示制御部１０４は、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０に拡大画像生成部１１２により拡大されたサムネイル画像を表示する。
上述の図２３では、気道性が選択されている。この場合、類似症例のうち病変分布が気道性に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域６９０１の中心に位置するように第２拡大率で拡大されている。
Ｓ１３０３では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第３分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ３として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺ３に到達するまで、Ｓ２３００、Ｓ１５０３の処理を繰り返す。拡大画像生成部１１２は、Ｓ２３００、Ｓ１５０３の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＺ３を超えると（Ｓ１３０３でＮＯ）、図５４の処理は終了する。
Ｓ２３００では、拡大画像生成部１１２は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報と、胸膜領域情報４９００とを用いて、類似症例ｉについての第３分布情報に対応する第３拡大率を算出する。
図５５は、胸膜領域情報４９００が追加された類似症例データ４０００のデータ構成を示す図である。なお、類似症例データ４０００に胸膜領域情報４９００が登録されていない場合、胸膜領域情報４９００が得られない。この場合、拡大画像生成部１１２は、第３拡大率を、第１拡大率と同じ値である１．０に設定すればよい。ここで、胸膜領域情報４９００は、類似症例において、胸膜領域を示す情報である。
Ｓ１５０３では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像でを第３拡大率ｋｉで拡大する。表示制御部１０４は、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０に拡大画像生成部１１２により拡大されたサムネイル画像を表示する。
図５６は、胸膜領域７１０１を説明する図である。図５６に示すように、胸膜領域７１０１は、胸膜を含む領域であって、中心が関心領域ＲＯＩの中心に位置し且つ関心領域ＲＯＩよりも少しサイズの大きな矩形状の領域である。ここで、胸膜領域情報４９００には、胸膜領域７１０１の左上の頂点の座標（ｘｐｌ、ｙｐｔ）と右下の頂点の座標（ｘｐｒ、ｙｐｂ）との４値が含まれる。第３分布情報が選択された場合には、胸膜領域を拡大表示するため、拡大画像生成部１１２は、以下の式で第３拡大率ｋｉを計算する。表示領域７１０２の面積をＳｄ、胸膜領域７１０１の面積をＳｐとすると第３拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝Ｓｄ／Ｓｐ
なお、胸膜領域情報４９００は、類似症例データ４０００の作成時に関心領域情報と共にユーザにより入力されてもよい。或いは、胸膜領域情報４９００は、画像処理装置により、スライス画像から肺の領域を自動的に抽出させ、胸膜位置を判定させることで自動的に作成されてもよい。
上述の図２５では、胸膜下が選択されている。この場合、類似症例のうち病変分布が胸膜下に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域７００１の中心に位置するように第３拡大率で拡大されている。
以上の処理により、症例表示領域７１０には、病変分布に関する診断内容が反映された拡大率でサムネイル画像が表示される。そして、症例表示領域７１０において、関心領域のサイズが揃えられてサムネイル画像が表示される。そのため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対してのみ、拡大処理が行われるため、システムへの負荷が大幅に軽減される。
（実施の形態２）
上記実施の形態１では、ユーザの操作部１０２に対する操作量に応じて、類似症例のサムネイル画像の拡大率を制御している。これに対して、実施の形態２では、基本画面に設けられた拡大率変更ボタンに対するユーザの操作によって、拡大率を制御している。
図５７は、実施の形態２において、類似症例検索により検索された類似症例のサムネイル画像が症例表示領域７１０に表示された状態の基本画面Ｋ２を示す図である。以下では、上記実施の形態１と異なる部分を中心に説明する。
実施の形態２では、基本画面Ｋ２は、拡大率変更ボタン７１６（指示ボタンの一例）を備える。図５７に示されるように、基本画面Ｋ２は、拡大率変更ボタン７１６として、第１指示ボタン７１７、第２指示ボタン７１８、及び第３指示ボタン７１９を含む。
実施の形態２において、拡大率変更ボタン７１６に含まれる第１指示ボタン７１７、第２指示ボタン７１８、及び第３指示ボタン７１９のいずれかをユーザが選択すると、その選択を入力制御部１０３が検知する。すると、入力制御部１０３は、ユーザが選択したボタンの情報を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、通知されたボタンの情報に応じて、症例表示領域７１０に表示されている全てのサムネイル画像の拡大率を変更する。
拡大画像生成部１１２は、第１指示ボタン７１７がユーザにより選択されると、拡大率を１．０と算出する。なお、類似症例検索後の初期の基本画面Ｋ２では、第１指示ボタン７１７が選択された状態になっている。このため、図５７の基本画面Ｋ２におけるサムネイル画像の拡大率は１．０倍である。また、図５７では、表示制御部１０４は、第１指示ボタン７１７の色を変更している。
図５８は、第２指示ボタン７１８がユーザにより選択された場合の基本画面Ｋ２を示す図である。図５９は、第３指示ボタン７１９がユーザにより選択された場合の基本画面Ｋ２を示す図である。
図５８では、表示制御部１０４は、第２指示ボタン７１８の色を変更している。また、図５９では、表示制御部１０４は、第３指示ボタン７１９の色を変更している。
拡大画像生成部１１２は、図５７または図５９に示される基本画面Ｋ２において、第２指示ボタン７１８がユーザにより選択されると、図５８に示されるように、関心領域ＲＯＩのサイズが表示領域５８０１のサイズの１／２程度に拡大されるように、各サムネイル画像の拡大率を算出する。
拡大画像生成部１１２は、図５７または図５８に示される基本画面Ｋ２において、第３指示ボタン７１９がユーザにより選択されると、図５９に示されるように、関心領域ＲＯＩのサイズが表示領域５９０１のサイズと同程度に拡大されるように、各サムネイル画像の拡大率を算出する。
図５８、図５９では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図５８、図５９ではＭ＝２０）の類似症例のサムネイル画像が表示されており、Ｍ個（図５８、図５９では２０個）のサムネイル画像が拡大されている。このように、実施の形態２では、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されている。例えば図１７のようにＭ＝１４の場合には、１４個全てのサムネイル画像が拡大されることになる。
次に、ユーザが拡大率変更ボタン７１６の選択を行ったときの拡大処理について説明する。
図６０は、ユーザが拡大率変更ボタン７１６の選択を行ったときの拡大処理を示すフローチャートである。
Ｓ２８００では、拡大画像生成部１１２は、類似症例検索により取得した多数の類似症例のうち、拡大処理を行う対象を決定する。
実施の形態２では、実施の形態１の図４８のＳ４１００のような、基準となる類似症例のサムネイル画像の選択がユーザにより行われず、拡大率変更ボタン７１６の選択のみがユーザにより行われる。そのため、拡大画像生成部１１２は、ユーザによる拡大率変更ボタン７１６の選択時に症例表示領域７１０に表示されている全ての類似症例を、拡大処理を行う対象とする。そこで、拡大画像生成部１１２は、症例表示領域７１０に表示されている全てのサムネイル画像の類似症例ＩＤを、類似症例データ４０００（図３０）から取得する。
Ｓ２４００では、拡大画像生成部１１２は、入力制御部１０３から通知されたボタンの情報に基づき、ユーザが選択したボタンの種類を判定する。ユーザにより選択されたボタン種が第１指示ボタン７１７の場合はＳ２４５１に進み、選択されたボタン種が第２指示ボタン７１８の場合はＳ２４５２に進み、選択されたボタン種が第３指示ボタン７１９の場合はＳ２５４３に進む。
Ｓ２４５１では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＤに到達するまで、Ｓ２５００、Ｓ４５０１の処理を繰り返す。拡大画像生成部１１２は、Ｓ２５００、Ｓ４５０１の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＤを超えると（Ｓ２４５１でＮＯ）、図６０の処理は終了する。
Ｓ２５００では、第１指示ボタン７１７がユーザにより選択されている。このため、Ｓ２５００では、拡大画像生成部１１２は、拡大率を１．０として算出する。
Ｓ４５０１では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大率は１．０であるため、表示制御部１０４は、図５７に示されるように、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像を表示する。
Ｓ２４５２では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＤに到達するまで、Ｓ２６００、Ｓ４５０２の処理を繰り返す。拡大画像生成部１１２は、Ｓ２６００、Ｓ４５０２の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＤを超えると（Ｓ２４５２でＮＯ）、図６０の処理は終了する。
Ｓ２６００では、第２指示ボタン７１８がユーザにより選択されている。このため、Ｓ２６００では、拡大画像生成部１１２は、上述のように、関心領域のサイズが表示領域のサイズの１／２程度になるように、拡大対象のサムネイル画像ｉの拡大率を算出する。拡大画像生成部１１２は、表示領域のサイズと、拡大対象のサムネイル画像ｉの類似症例データ４０００（図３０）内の関心領域情報４３００とに基づき、拡大率を算出する。拡大画像生成部１１２は、以下のような式で拡大率ｋｉを計算する。表示領域５７０１（図５７）の面積をＳｄ、拡大対象のサムネイル画像ｉの関心領域ＲＯＩ（図５７）の面積をＳｉとすると、拡大対象の類似症例ｉのサムネイル画像の拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ４５０２では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像の関心領域の中心が表示領域の中心に位置するように、サムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２により生成された、拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、この実施の形態２では、拡大画像生成部１１２は、第２指示ボタン７１８が選択されたときの拡大率を、表示領域のサイズに対する関心領域のサイズの比率が１／２程度になるように算出している。しかし、本開示では、上記比率は１／２に限られない。例えば、上記比率は１／３、２／３などの他の値でもよい。
Ｓ２４５３では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＤに到達するまで、Ｓ２７００、Ｓ４５０３の処理を繰り返す。拡大画像生成部１１２は、Ｓ２７００、Ｓ４５０３の処理を実行する度に、インデックスｉを１ずつインクリメントする。ｉがＮＤを超えると（Ｓ２４５３でＮＯ）、図６０の処理は終了する。
Ｓ２７００では、第３指示ボタン７１９がユーザにより選択されている。このため、Ｓ２７００では、拡大画像生成部１１２は、上述のように、関心領域のサイズが表示領域のサイズと同程度になるように、拡大対象のサムネイル画像ｉの拡大率を算出する。拡大画像生成部１１２は、表示領域のサイズと、拡大対象の類似症例ｉの類似症例データ４０００（図３０）内の関心領域情報４３００とに基づき、拡大率を算出する。拡大画像生成部１１２は、以下のような式で拡大率ｋｉを計算する。表示領域５７０１（図５７）の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域ＲＯＩ（図５７）の面積をＳｉとすると、拡大対象の類似症例ｉのサムネイル画像の拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝Ｓｄ／Ｓｉ
Ｓ４５０３では、図４８のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像の関心領域の中心が表示領域の中心に位置するように、サムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２により生成された、拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、この実施の形態２では、拡大画像生成部１１２は、第３指示ボタン７１９が選択されたときの拡大率を、表示領域のサイズに対する関心領域のサイズの比率が１．０程度になるように算出している。しかし、本開示では、上記比率は１．０に限られない。例えば、上記比率は１．１、０．９などの他の値でもよい。
以上の処理により、症例表示領域７１０において、個々の表示領域内の関心領域ＲＯＩのサイズを揃えることができる。その結果、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。このとき、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対してのみ、拡大処理が行われる。このため、システムへの負荷が大幅に軽減される。
以上では、サムネイル画像の拡大率の変更処理を情報端末１００において実行する例を示した。実施の形態２における拡大率変更ボタン７１６を用いた拡大率の変更処理の場合には、拡大率の変更処理を症例検索システム３００で実行してもよい。この場合には、症例検索システム３００は、拡大率が変更されたサムネイル画像を予め生成しておいてもよい。そして、拡大率変更ボタンが操作された時に、症例検索システム３００から情報端末１００にサムネイル画像を送信してもよい。
図６１は、症例検索システム３００が類似症例検索結果を情報端末１００に送信した後、情報端末１００において拡大率変更ボタン７１６が選択されてから拡大されたサムネイル画像を情報端末１００のディスプレイ１０１ｂに表示するまでの処理を示すシーケンス図である。図６２は、症例検索システム３００において実行される事前処理と、図６１に示される処理とを示すフローチャートである。図６２では、図６１に示される処理と同じ処理については同じ符号が付されている。図６１、図６２を用いて、処理の詳細を説明する。
まず、症例検索システム３００で実行される事前処理が説明される。図６２のＳ３１００では、症例検索システム３００は、拡大率変更ボタン７１６の第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９の各々に対して各サムネイル画像の拡大率を決定する。なお、拡大率決定の手順は、上述の図６０のＳ２５００、Ｓ２６００、Ｓ２７００で説明された手順を用いればよい。
Ｓ３１１０では、症例検索システム３００は、Ｓ３１００で決定した拡大率と、類似症例データ４０００（図３０）のサムネイル画像データ４５００とに基づき、第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９に対する拡大されたサムネイル画像データをそれぞれ生成する。症例検索システム３００は、生成した拡大サムネイル画像データを、図６３に示すように、類似症例データ４０００（図３０）とは別に、拡大サムネイルデータ５０００として、類似症例データ蓄積部３０１に格納する。
図６３は、拡大サムネイルデータ５０００のデータ構成を示す図である。拡大サムネイルデータ５０００は、拡大されたサムネイル画像データを類似症例データ蓄積部３０１に保存するためのデータである。拡大サムネイルデータ５０００は、図６３に示されるように、類似症例ＩＤ５１００に対応付けられて、第１指示ボタン７１７に対応する拡大サムネイル画像データ５２００と、第２指示ボタン７１８に対応する拡大サムネイル画像データ５３００と、第３指示ボタン７１９に対応する拡大サムネイル画像データ５４００とを含む。
次に、図６１、図６２を用いて、情報端末１００において、ユーザにより拡大率変更ボタンが選択された場合の処理について説明する。
Ｓ３０１０では、入力制御部１０３は、ユーザが拡大率変更ボタン７１６を選択したときの指示ボタンの種類を検知する。つまり、入力制御部１０３は、第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９のいずれをユーザが選択したかを検知する。
Ｓ３０２０では、表示制御部１０４は、拡大率変更ボタン７１６がユーザにより選択された時に症例表示領域７１０に表示されているＮＤ個（この実施の形態ではＮＤ＝２０）の類似症例の類似症例ＩＤを類似症例データ４０００（図３０）から取得する。また、表示制御部１０４は、取得した類似症例ＩＤを拡大対象の類似症例として決定する。
Ｓ３０３０では、通信制御部１１０は、Ｓ３０１０で入力制御部１０３が検知した拡大率変更ボタン７１６の種類と、Ｓ３０２０で表示制御部１０４が取得した拡大対象の類似症例ＩＤ（ＮＤ個）とを、症例検索システム３００に送信する。
Ｓ３０４０では、症例検索システム３００の通信制御部３０４は、Ｓ３０３０で情報端末１００から送信された拡大率変更ボタン７１６の種類と拡大対象の類似症例ＩＤ（ＮＤ個）とを受信する。
Ｓ３０５０では、症例検索システム３００は、受信した類似症例ＩＤと拡大率変更ボタン７１６の種類とから、拡大サムネイルデータ５０００の拡大サムネイル画像データ５２００，５３００，５４００のうち表示に使用する画像データを特定する。症例検索システム３００の通信制御部３０４は、特定した拡大サムネイル画像データを情報端末１００に送信する。
Ｓ３０６０では、情報端末１００の通信制御部１１０は、症例検索システム３００から送信された拡大サムネイル画像データを受信する。
Ｓ３０７０では、情報端末１００の表示制御部１０４は、Ｓ３０６０で通信制御部１１０が受信した拡大サムネイル画像データに基づき、類似症例の拡大されたサムネイル画像を情報端末１００のディスプレイ１０１ｂの症例表示領域７１０に表示する。
（実施の形態１の補足）
次に、図３２、図３６Ａのシーケンス図をアプリケーションのレベルで着目したときの情報端末１００、医用情報管理システム２００、及び症例検索システム３００の処理について説明する。
図６４は、図３２及び図３６Ａのシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。図６４において、図３２と同じ処理には同じ符号を付している。
図６４、図６５において、「Ａ」は情報端末１００が実行する医用情報管理アプリケーションの処理を示し、「Ｂ」は情報端末１００が実行する類似症例検索アプリケーションの処理を示す。以下、医用情報管理アプリケーションを「アプリＡ」と記述し、類似症例検索アプリケーションを「アプリＢ」と記述する。
まず、アプリＡは、ユーザから読影対象となる検査リストの表示要求を受け付け、医用情報管理システム２００に送信する（Ｓ５１０）。医用情報管理システム２００は検査リストを受信すると、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成し、アプリＡに送信する。
検査リストを受信したアプリＡは、図３３に示すように、検査リストをディスプレイ１０１に表示し、検査リストの中から１の検査がユーザにより選択されると（Ｓ５３０）、選択された検査の表示要求を医用情報管理システム２００に送信する（Ｓ５４０）。
検査要求を受信した医用情報管理システム２００は、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像をアプリＡに送信する（Ｓ５５０）。
次に、アプリＡは、図３４に示すように、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを表示する（Ｓ５６０）。
次に、アプリＡは、シリーズリストの中から読影対象のシリーズがユーザにより選択されると、選択されたシリーズの最初のスライド位置のスライド画像を医用画像ビューワ６１０に表示する（Ｓ５７０）。このとき、ユーザは、スライス送りする操作を入力し、医用画像ビューワ６１０に所望のスライス画像を表示させる。
次に、アプリＡは、医用画像ビューワ６１０に表示されたスライス画像において、関心領域を設定する操作をユーザから受け付ける（Ｓ５８０）。
次に、アプリＡは、ユーザにより設定された関心領域を示す関心領域情報を生成し、関心領域が設定されたスライス画像（診断対象症例のスライス画像）と共に、アプリＢに送信する（Ｓ５９０、Ｓ６００）。
次に、アプリＢは、診断対象症例のスライス画像及び関心領域情報を受信すると、そのスライス画像及び関心領域情報を症例検索システムに送信する（Ｓ６０１、Ｓ６０２）。
スライス画像及び関心領域情報を受信すると、症例検索システム３００は、図３６Ａと同様、Ｓ６１０〜Ｓ６４０の処理を実行する。
次に、アプリＢは、Ｓ６４０で送信された類似症例データ及び表示ボックス管理情報４４１０を用いて初期の基本画面を生成する（Ｓ６７０）。そして、アプリＢは、図３７に詳細が示されるＳ６７０の処理を実行する。
図６５は、情報端末１００において類似症例のサムネイル画像がドラッグアンドドロップされる際の処理をアプリケーションのレベルで着目したときのシーケンス図である。
図６４との相違点は、Ｓ６０３、Ｓ６０４にある。図６５では、画像特徴は情報端末１００で抽出されている。よって、アプリＢが診断対象症例のスライス画像に設定された関心領域から画像特徴を抽出し（Ｓ６０３）、抽出した画像特徴を症例検索システム３００に送信している（Ｓ６０４）。
本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。
上記課題を解決するため、本開示の一態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるものである。
本開示の第１の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるものである。
本態様によると、前記読影対象の対象医用画像の中の関心領域と所定の類似度を有する類似医用画像であって既に病名が特定されているＮＣ個の類似医用画像を前記症例検索システムから受信し、前記ＮＣ個の類似医用画像の中のＭ個の類似医用画像を表示する。これにより、前記医用画像データベースに登録されている膨大な医用画像の中から、前記対象医用画像に表れている病変の病名を検討するために参考となる類似医用画像を効率的に抽出して、医師に提示できる。
このように、一つの指示によって、画像表示数に制約がある表示画面を有効活用しながら、医師が関心を持つ領域を中心に、前記Ｍ個以下の類似医用画像の各々を拡大させる。その結果、例えば、前記医用画像データベースに膨大な数の医用画像が登録されている場合であっても、前記読影対象の対象医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示する。したがって、診断精度の向上に寄与できる。
また、前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させるようにしてもよい。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記Ｍ個以下の類似医用画像の各々に含まれる前記対応関心領域を、前記Ｍ個以下の類似医用画像に共通する一定の割合で拡大した場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記Ｍ個以下の類似医用画像を拡大しても、拡大された前記対応関心領域の大きさは、ばらばらとなる。
本態様によると、例えば、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させる。
これによると、前記Ｍ個以下の類似医用画像を拡大した場合、拡大された前記対応関心領域の大きさのばらつきを、前記Ｍ個以下の類似医用画像間で、一定範囲に収束できる。
そのため、前記Ｍ個以下の類似医用画像について、前記拡大された対応関心領域を医師はほぼ同様の大きさにて観察できる。その結果、前記対応関心領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第１の態様において、例えば、
前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で前記第２表示領域に表示させ、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させてもよい。
この場合、前記Ｍ個以下の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示によって、前記Ｍ個以下の類似医用画像が拡大されることになる。そのため、医師が前記Ｍ個以下の類似医用画像の中で、拡大してより詳細を確認するためにいずれか一の類似医用画像を選択すると、前記Ｍ個の類似医用画像の中の他の類似医用画像までも拡大される。即ち、前記Ｍ個の類似医用画像の拡大のための特別の操作を医師に要求するものではなく、医師が拡大により詳細を確認するためにいずれか一の類似医用画像を選択するという自然な操作の流れに沿って、前記Ｍ個の類似医用画像の中の他の類似医用画像までも拡大される。その結果、前記Ｍ個以下の類似医用画像を効率的に拡大する。したがって、医師の操作負担を軽減して、その分、医師を専門的な判断に集中させて、診断精度の向上を図ることができる。
また、本開示の第２の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、前記一以上の指示ボタンは、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さいサイズになるように所定倍に拡大表示させる第１指示ボタンを含み、前記所定倍は個々の類似医用画像毎に異なり、
前記第１指示ボタンによる一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させるものである。
また、前記Ｍ個の類似医用画像に共通の一つの指示によって、前記Ｍ個の類似医用画像の表示サイズを変化させることになる。そのため、医師が前記Ｍ個の類似医用画像の中で、表示サイズを変化させながらより詳細を確認するために指示ボタンに対する一つの操作を行うと、前記Ｍ個の類似医用画像の全てが拡大される。即ち、前記Ｍ個の類似医用画像の表示サイズを変化させるための個別の操作を医師に要求するものではなく、医師が表示サイズを変化させてより詳細を確認するために、指示ボタンに対する一つの操作を行うという自然な操作の流れに沿って、前記Ｍ個の類似医用画像の全ての表示サイズが変化する。その結果、前記Ｍ個の類似医用画像の表示サイズを効率的に変化させる。したがって、医師の操作負担を軽減して、その分、医師を専門的な判断に集中させて、診断精度の向上を図ることができる。
また、前記一以上の指示ボタンは、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さいサイズになるように所定倍に拡大表示させる第１指示ボタンを含み、
前記第１指示ボタンによる一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させるようにしてもよい。
本態様によると、前記表示画面は、前記一以上の指示ボタンとして、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さいサイズになるように所定倍に拡大表示させる第１指示ボタンを含んでいる。
これにより、前記Ｍ個の類似医用画像を初期表示サイズにて表示させる場合と、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる場合との中間に相当する表示サイズに各対応関心領域の表示サイズを変化させる場合に、医師は一つの指示にて行うことができる。
ＮＣ個の類似医用画像において、前記対応関心領域の大きさは同じではない。個々の類似医用画像に含まれる病変の大きさが異なり、また、過去に前記対応関心領域を付与した医師も異なるなどの理由がある。
そのため、前記Ｍ個の類似医用画像の各々に含まれる前記対応関心領域の表示サイズを、前記Ｍ個の類似医用画像に共通する一定の割合で変化させた場合、前記対応関心領域が比較的小さいものは、前記対応関心領域は比較的小さく拡大され、一方、前記対応関心領域が比較的大きいものは、前記対応関心領域は比較的大きく拡大される。即ち、前記Ｍ個の類似医用画像を拡大しても、拡大された前記対応関心領域の表示サイズは、ばらばらとなる。
本態様によると、例えば、前記所定倍は個々の類似医用画像毎に異なり、前記第１指示ボタンによる一つの指示を検知すると、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各対応関心領域の表示サイズを変化させる。
これによると、前記各対応関心領域の表示サイズを変化させる場合、前記変化した前記各対応関心領域の表示サイズのばらつきを、前記Ｍ個の類似医用画像間で、一定範囲に収束できる。
そのため、前記Ｍ個の類似医用画像について、前記変化した表示サイズの前記各対象関心領域を医師はほぼ同様の大きさにて観察できる。その結果、一部の類似医用画像の前記対象関心領域の表示サイズが他の類似医用画像の前記対象関心領域の表示サイズより小さい状態に変化したために、見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
また、上記第２の態様において、例えば、
前記情報端末のコンピュータに対して、
前記ＮＣ個の類似医用画像の中のＭ個の類似医用画像を前記対象医用画像との類似度が高い順序で前記第２表示領域に表示させ、
前記共通の一以上の指示ボタンによる一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させてもよい。
この場合、前記Ｍ個の類似医用画像に共通の一つの指示ボタンによる指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像の表示サイズを変化させる。即ち、前記医用画像データベースに登録されている膨大な医用画像の中から、前記対象医用画像の中の関心領域と所定の類似度を有する類似医用画像を前記症例検索システムから受信する場合でも、前記受信するＮＣ個の類似医用画像は、例えば、ＮＣが２００画像、３００画像と画像数は多い。この際、一つの指示により類似医用画像の表示サイズを変化させるにしても、前記受信したＮＣ個の類似医用画像の全ての表示サイズを変化させるのは非効率である。従って、前記受信したＮＣ個の類似医用画像の中から一定範囲の画像に限定して、前記一つの指示により類似医用画像の表示サイズを変化させる方が望ましい。
また、上記第２態様において、例えば、
前記表示画面は、前記一以上の指示ボタンとして、少なくとも、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる第２指示ボタン、及び、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる第３指示ボタンを含み、
前記第２指示ボタン又は前記第３指示ボタンによるいずれか一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを一律に変化させるようにしてもよい。
本態様によると、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる際には、医師は前記第２指示ボタンという一つの指示を選択すればよい。また、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる際には、医師は前記第３指示ボタンという一つの指示を選択すればよい。これにより、前記第２指示ボタン又は前記第３指示ボタンのいずれか一の指示によって、前記Ｍ個の類似医用画像を表示する各個別領域のサイズは同一サイズを維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズは一律に変化する。
本開示の第３の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させるものである。
本開示の第４の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記受信したＮＣ個の類似医用画像の各々は、前記関心領域に対応する対応関心領域を含み、かつ、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、
前記指示ボタンによる一つの指示を検知した場合、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させ、かつ、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させるものである。
また、上記第１の態様から上記第４の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるとしてもよい。
また、上記第１の態様から上記第４の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
前記対象医用及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるとしてもよい。
また、上記第１の態様から上記第４の態様において、例えば、
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第２表示領域は、
前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
前記第１分布情報から前記第３分布情報の中のいずれか一の選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第２表示領域に表示させるとしてもよい。
また、上記第１の態様から上記第４の態様において、例えば、
前記第１分布情報の選択が検知された場合、前記第１分布情報に対応する類似医用画像を、対応する個別領域に初期表示サイズにて表示させ、
前記第２分布情報の選択が検知された場合、前記第２分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させ、
前記第３分布情報の選択が検知された場合、前記第３分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させるとしてもよい。
また、上記第１の態様から上記第４の態様において、例えば、
前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリー
に属する分布を示す情報であり、
前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報であるとしてもよい。

Claims (17)

  1. 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
    前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
    前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
    前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、
    前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる、
    制御方法。
  2. 前記表示画面はスクロールバーを有し、
    前記スクロールバーの移動を検知すると、前記第２表示領域に表示される類似医用画像をスクロールさせ、
    前記類似医用画像がスクロールされるに応じて、前記拡大される類似医用画像を増加させる、
    請求項１記載の制御方法。
  3. 前記受信したＮＣ個の類似医用画像の総数ＮＣを示す情報が前記表示画面に表示される、
    請求項１から請求項２のいずれか一に記載の制御方法。
  4. 前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
    前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各類似医用画像を拡大させる、
    請求項１から請求項３のいずれか一に記載の制御方法。
  5. 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
    前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
    前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
    前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、
    前記指示ボタンによる一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させる、
    制御方法。
  6. 前記表示画面は、前記一以上の指示ボタンとして、少なくとも、前記Ｍ個の類似医用画像を前記各個別領域に初期表示サイズにて表示させる第１指示ボタン、及び、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズに合わせて拡大表示させる第２指示ボタンを含み、
    前記第１指示ボタン又は前記第２指示ボタンによるいずれか一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを一律に変化させる、
    請求項５記載の制御方法。
  7. 前記表示画面は、前記一以上の指示ボタンとして、前記Ｍ個の類似医用画像に含まれる各対応関心領域を前記各個別領域のサイズより小さい所定倍に拡大表示させる第３指示ボタンを含み、
    前記第３指示ボタンによる一の指示を検知すると、前記一の指示に応じて、前記Ｍ個の類似医用画像を表示する各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させる、
    請求項５から請求項６のいずれか一に記載の制御方法。
  8. 前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
    前記所定倍は個々の類似医用画像毎に異なり、
    前記第３指示ボタンによる一つの指示を検知すると、前記第２指定情報が示す前記対応関心領域の大きさに応じて、前記各対応関心領域の表示サイズを変化させる、
    請求項７記載の制御方法。
  9. 前記第２指定情報が示す前記対応関心領域の大きさが第１サイズの場合、前記第２指定情報が示す前記対応関心領域の大きさが前記第１サイズより大きい第２サイズの場合に比べて、前記対応関心領域を大きく拡大させる、
    請求項４又は８に記載の制御方法。
  10. 前記受信したＮＣ個の類似医用画像の各々は、前記各類似医用画像の中の前記対応関心領域を示す第２指定情報を含み、
    前記各類似医用画像の中の前記対応関心領域を中心として拡大させる際、前記第２指定情報が示す前記対応関心領域の大きさが、前記類似医用画像の各個別領域のサイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させる、
    請求項１から請求項３又は請求項５から請求項７のいずれか一に記載の制御方法。
  11. 前記制御方法は、
    前記情報端末のコンピュータに対して、
    前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
    前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
    請求項１から請求項１０いずれか一に記載の制御方法。
  12. 前記制御方法は、
    前記情報端末のコンピュータに対して、
    前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
    前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
    請求項１から請求項１０のいずれか一に記載の制御方法。
  13. 前記対象医用画像は肺の医用画像であり、
    前記類似医用画像は肺の医用画像であり、
    前記第２表示領域は、
    前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
    前記第１分布情報から前記第３分布情報の中のいずれか一の選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第２表示領域に表示させる、
    請求項１から請求項１２のいずれか一に記載の制御方法。
  14. 前記第１分布情報の選択が検知された場合、前記第１分布情報に対応する類似医用画像を、対応する個別領域に初期表示サイズにて表示させ、
    前記第２分布情報の選択が検知された場合、前記第２分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させ、
    前記第３分布情報の選択が検知された場合、前記第３分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する個別領域内に拡大表示させる、
    請求項１３記載の制御方法。
  15. 前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
    前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
    前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報である、
    請求項１３又は請求項１４に記載の制御方法。
  16. 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末において実行されるプログラムであって、
    前記ディスプレイには読影対象候補の中から選択された読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
    前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
    前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＤ以下の整数）個の個別領域を含み、
    前記Ｍ個の類似医用画像の中のいずれか一の類似医用画像を拡大する一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個以下の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個以下の各類似医用画像の中の前記対応関心領域を、前記各個別領域の中心に相当する位置に合わせて拡大させる、
    プログラム。
  17. 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末において実行されるプログラムであって、
    前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、前記対象医用画像の付加情報には病名情報が設定されておらず、
    前記情報端末のコンピュータに対して、
    前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
    前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有するＮＣ（ＮＣは２以上の整数）個の類似医用画像を前記症例検索システムから受信させ、前記ＮＣ個の類似医用画像の付加情報には病名情報が設定されており、前記ＮＣ個の類似医用画像は、前記関心領域に対応する対応関心領域を含み、
    前記対象医用画像を表示する第１表示領域と、前記ＮＣ個の類似医用画像の中のＭ（Ｍは１以上ＮＣ以下の整数）個の類似医用画像を前記対象医用画像との類似度が高い順序で表示する第２表示領域とを含む表示画面を、前記ディスプレイに表示させ、前記第２表示領域は、前記Ｍ個の類似医用画像を表示するためのＮＤ（ＮＤはＭ以上ＮＣ以下の整数）個の個別領域を含み、前記表示画面は前記Ｍ個の類似医用画像の表示サイズを変化させる前記Ｍ個の類似医用画像に共通の一以上の指示ボタンを含み、
    前記指示ボタンによる一つの指示を検知した場合、前記一つの指示を検知した際に前記第２表示領域に表示されている前記Ｍ個の範囲で前記Ｍ個の各類似医用画像について、前記第２表示領域における各個別領域のサイズを同一サイズに維持しつつ、前記Ｍ個の類似医用画像に含まれる各対応関心領域の表示サイズを変化させる、
    プログラム。
JP2015533776A 2014-04-09 2014-04-09 情報端末の制御方法及びプログラム Active JP5815167B1 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/002057 WO2015155808A1 (ja) 2014-04-09 2014-04-09 情報端末の制御方法及びプログラム

Publications (2)

Publication Number Publication Date
JP5815167B1 JP5815167B1 (ja) 2015-11-17
JPWO2015155808A1 true JPWO2015155808A1 (ja) 2017-04-13

Family

ID=54287414

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015533776A Active JP5815167B1 (ja) 2014-04-09 2014-04-09 情報端末の制御方法及びプログラム

Country Status (3)

Country Link
US (3) US10327640B2 (ja)
JP (1) JP5815167B1 (ja)
WO (1) WO2015155808A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10586618B2 (en) 2014-05-07 2020-03-10 Lifetrack Medical Systems Private Ltd. Characterizing states of subject
JP6224561B2 (ja) * 2014-09-16 2017-11-01 富士フイルム株式会社 携帯型コンソール、携帯型コンソールの制御方法、携帯型コンソール用プログラム及び放射線撮影システム
JP6527771B2 (ja) * 2015-07-21 2019-06-05 富士フイルム株式会社 情報分析支援装置とその作動方法および作動プログラム、並びに情報分析支援システム
KR102522539B1 (ko) * 2015-08-17 2023-04-18 삼성전자주식회사 의료영상 표시장치 및 의료영상 처리방법
CN106560827B (zh) * 2015-09-30 2021-11-26 松下知识产权经营株式会社 控制方法
US10535135B2 (en) * 2015-10-29 2020-01-14 Canon Kabushiki Kaisha Image processing apparatus, control method thereof, and storage medium
AU2017204494B2 (en) * 2016-09-01 2019-06-13 Casio Computer Co., Ltd. Diagnosis assisting device, image processing method in diagnosis assisting device, and non-transitory storage medium having stored therein program
JP6853095B2 (ja) * 2017-03-31 2021-03-31 キヤノンメディカルシステムズ株式会社 医用情報処理装置及び医用情報処理方法
JP6885896B2 (ja) * 2017-04-10 2021-06-16 富士フイルム株式会社 自動レイアウト装置および自動レイアウト方法並びに自動レイアウトプログラム
US10878024B2 (en) * 2017-04-20 2020-12-29 Adobe Inc. Dynamic thumbnails
JP7121470B2 (ja) * 2017-05-12 2022-08-18 キヤノン株式会社 画像処理システム、制御方法、及び、プログラム
US11380045B2 (en) 2018-10-29 2022-07-05 Autodesk, Inc. Shaped-based techniques for exploring design spaces
US11741662B2 (en) 2018-10-29 2023-08-29 Autodesk, Inc. Shaped-based techniques for exploring design spaces
US11126330B2 (en) * 2018-10-29 2021-09-21 Autodesk, Inc. Shaped-based techniques for exploring design spaces
CA3147361A1 (en) * 2019-08-09 2021-02-18 Clearview Ai, Inc. Methods for providing information about a person based on facial recognition
US11551357B2 (en) * 2019-09-09 2023-01-10 PAIGE.AI, Inc. Systems and methods for processing images of slides for digital pathology
JP2021078824A (ja) * 2019-11-20 2021-05-27 キヤノンメディカルシステムズ株式会社 Ｘ線診断装置
CN111354444A (zh) * 2020-02-28 2020-06-30 上海商汤智能科技有限公司 病理切片图像的展示方法及装置、电子设备和存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3883979B2 (ja) * 2003-03-31 2007-02-21 富士フイルムホールディングス株式会社 画像再生装置およびプログラム
US7725837B2 (en) * 2005-03-31 2010-05-25 Microsoft Corporation Digital image browser
JP4820680B2 (ja) * 2006-04-12 2011-11-24 株式会社東芝 医用画像表示装置
JP2007287018A (ja) 2006-04-19 2007-11-01 Fujifilm Corp 診断支援システム
US8249315B2 (en) * 2006-05-22 2012-08-21 Upmc System and method for improved viewing and navigation of digital images
JP4997892B2 (ja) * 2006-09-19 2012-08-08 富士ゼロックス株式会社 検索システム、検索方法及び検索プログラム
JP5128161B2 (ja) 2007-03-30 2013-01-23 富士フイルム株式会社 画像診断支援装置及びシステム
JP5562525B2 (ja) * 2008-03-04 2014-07-30 株式会社東芝 医用情報表示装置および医用情報表示プログラム
JP5572440B2 (ja) * 2009-09-15 2014-08-13 富士フイルム株式会社 診断支援システム、診断支援プログラムおよび診断支援方法
EP2486503A2 (en) * 2009-10-07 2012-08-15 Hologic, Inc. Processing and displaying computer-aided detection information associated with breast x-ray images
US20110283242A1 (en) * 2010-05-14 2011-11-17 Sap Ag Report or application screen searching
US20120069049A1 (en) * 2010-09-16 2012-03-22 Omnyx, LLC Digital pathology image manipulation
JP6021468B2 (ja) * 2012-06-26 2016-11-09 東芝メディカルシステムズ株式会社 医用画像表示装置

Also Published As

Publication number Publication date
US20190231190A1 (en) 2019-08-01
US20200146551A1 (en) 2020-05-14
US10327640B2 (en) 2019-06-25
US10568512B2 (en) 2020-02-25
WO2015155808A1 (ja) 2015-10-15
US11185228B2 (en) 2021-11-30
US20150317452A1 (en) 2015-11-05
JP5815167B1 (ja) 2015-11-17

Similar Documents

Publication Publication Date Title
JP6874193B2 (ja) 情報端末、制御方法及びプログラム
JP6907381B2 (ja) 制御方法及びプログラム
JP5815167B1 (ja) 情報端末の制御方法及びプログラム
JP6960612B2 (ja) 制御方法及びプログラム
US11179036B2 (en) Control method of information terminal and computer-readable recording medium
JP6799115B2 (ja) 情報端末の制御方法及びプログラム
JP6578135B2 (ja) 制御方法及びプログラム
JP6722857B2 (ja) 制御方法及びプログラム
JP6697743B2 (ja) 情報端末の制御方法及びプログラム
JP6675099B2 (ja) 制御方法及びプログラム
JP6664113B2 (ja) 情報端末の制御方法及びプログラム
JP2018130408A (ja) 情報端末の制御方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20150831

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150908

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150918

R151 Written notification of patent or utility model registration

Ref document number: 5815167

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151