JP2019087272A - 情報端末、制御方法及びプログラム - Google Patents

情報端末、制御方法及びプログラム Download PDF

Info

Publication number
JP2019087272A
JP2019087272A JP2019001937A JP2019001937A JP2019087272A JP 2019087272 A JP2019087272 A JP 2019087272A JP 2019001937 A JP2019001937 A JP 2019001937A JP 2019001937 A JP2019001937 A JP 2019001937A JP 2019087272 A JP2019087272 A JP 2019087272A
Authority
JP
Japan
Prior art keywords
medical image
image
similar
display
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019001937A
Other languages
English (en)
Inventor
和紀 小塚
Kazuki Kozuka
和紀 小塚
和豊 高田
Kazutoyo Takada
和豊 高田
近藤　堅司
Kenji Kondo
堅司 近藤
浩彦 木村
Hirohiko Kimura
浩彦 木村
豊彦 坂井
Toyohiko Sakai
豊彦 坂井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of JP2019087272A publication Critical patent/JP2019087272A/ja
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/465—Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/468—Arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/469—Arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/56—Details of data transmission or power supply, e.g. use of slip rings
    • A61B6/563—Details of data transmission or power supply, e.g. use of slip rings involving image data transmission via a network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/732—Query formulation
    • G06F16/7335—Graphical querying, e.g. query-by-region, query-by-sketch, query-by-trajectory, GUIs for designating a person/face/object as a query predicate
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Human Computer Interaction (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Engineering & Computer Science (AREA)
  • Pathology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Optics & Photonics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

【課題】読影対象の医用画像と類似する医用画像を検索する情報端末を更に改善する。【解決手段】読影対象の医用画像の中から選択された対象医用画像を表示させる表示制御部と、対象医用画像の中の関心領域を示す指定情報を検知させるＲＯＩ管理部と、指定情報によって示された関心領域に応じて、関心領域の特徴量と所定の類似度を有し、かつそれぞれ関心領域に対応する対応関心領域を含む、複数の類似医用画像を症例検索システムから受信する通信制御部とを備える。表示制御部は、受信した複数の類似医用画像の中の所定数以下の類似医用画像を表示し、かつ対象医用画像を表示する第１表示領域と類似医用画像を表示するための所定数の表示枠を含む第２表示領域とを含む、表示画面を表示させるとともに、類似医用画像の拡大指示を検知した場合、表示画面における表示枠のサイズを同一サイズに維持しつつ、類似医用画像に含まれる対応関心領域を拡大表示させる。【選択図】図２

Description

本開示は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末、制御方法及びプログラムに関する。
近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）等の医用画像装置が発達および普及している。これらＣＴ又はＭＲＩなどは、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。
特開２００８−２５７２９２号公報 特開２００４−２１５０４１号公報
大沢 哲、外４名、"画像診断を支援する類似症例検索システム「ＳＹＮＡＰＳＥ Ｃａｓｅ Ｍａｔｃｈ」の開発"、富士フイルム研究報告、富士フイルム株式会社、平成２５年３月２７日、第５８号、ｐ．１１−１４
しかしながら、更なる改善が必要とされていた。本開示の非限定的で例示的な一態様は、更なる改善が可能である。
本開示の一態様の付加的な恩恵及び有利な点は本明細書及び図面から明らかとなる。この恩恵及び／又は有利な点は、本明細書及び図面に開示した様々な態様及び特徴により個別に提供され得るものであり、その１以上を得るために全てが必要ではない。
上記課題を解決するために、本開示の非限定的で例示的な一態様にかかる情報端末は、医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続する情報端末であって、
読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像を表示させる表示制御部と、
前記対象医用画像の中の関心領域を示す指定情報を検知させるＲＯＩ管理部と、
前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像であって、かつそれぞれ前記関心領域に対応する対応関心領域を含む複数の類似医用画像を前記症例検索システムから受信する通信制御部とを備え、
前記表示制御部は、前記受信した複数の類似医用画像の中の所定数以下の類似医用画像を表示する表示画面であって、かつ前記対象医用画像を表示する第１表示領域と、前記類似医用画像を表示するための前記所定数の表示枠を含む第２表示領域とを含む表示画面を表示させ、
前記表示制御部は、前記表示されている類似医用画像を拡大する指示を検知した場合、前記表示画面における各表示枠のサイズを同一サイズに維持しつつ、前記類似医用画像に含まれる前記対応関心領域を拡大表示させる。
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能な記録媒体で実現されてもよく、装置、システム、方法、集積回路、コンピュータプログラムおよびコンピュータ読み取り可能な記録媒体の任意な組み合わせで実現されてもよい。コンピュータ読み取り可能な記録媒体は、例えばＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの不揮発性の記録媒体を含む。
本開示によれば、更なる改善が実現できる。
本実施の形態における情報端末が適用された病院情報システムの全体構成図である。 情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。 ２台のディスプレイの外観図である。 情報端末の実装形態の構成例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 症例表示領域に表示されるある１つの類似症例の表示領域を取り出して示した図である。 症例表示領域に表示されたサムネイル画像のうち１のサムネイル画像が選択されたときの基本画面を示す図である。 症例表示領域に表示されたサムネイル画像のうち図８と異なるサムネイル画像が選択されたときの基本画面を示す図である。 症例表示領域に表示されている全てのサムネイル画像が拡大されたときの基本画面を示す図である。 症例表示領域に表示されている全てのサムネイル画像が拡大されたときの図１０と異なる基本画面を示す図である。 サムネイル画像の拡大表示後に、症例表示領域に表示されたサムネイル画像のうち１つのサムネイルが選択されたときの基本画面を示す図である。 基本画面が表示された状態でユーザによって行われるドラッグ操作を概略的に示す図である。 症例表示領域に表示されているサムネイル画像の表示領域が移動されたときの基本画面を示す図である。 図１４のように基本画面が表示された状態で、さらにユーザによって行われるドラッグ操作を概略的に示す図である。 図１５に示されるドラッグ操作によって、症例表示領域に表示されているサムネイル画像の表示領域が移動されたときの基本画面を示す図である。 病名リスト表示領域の拡大図である。 「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。 「転移性肺癌」で類似症例が絞り込まれたときの基本画面を示す図である。 分布リスト表示領域の拡大図である。 両側性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 両側性の病変分布で絞り込みがかけられた基本画面を示した図である。 気道性のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 気道性の病変分布で絞り込みがかけられた基本画面を示した図である。 胸膜下のチェックボックスにチェックマークが入力された分布リスト表示領域を示す図である。 胸膜下の病変分布で絞り込みがかけられた基本画面を示した図である。 図２４に示される基本画面が表示された状態でユーザによって行われるドラッグ操作を概略的に示す図である。 図２６に示される基本画面が表示された状態でユーザによって行われるドラッグ操作を概略的に示す図である。 患者情報のデータ構成を示す図である。 図２３に示す患者情報に登録された検査情報のデータ構成を示す図である。 医用画像データベースのデータ構成を示す図である。 診断レポートのデータ構成を示す図である。 類似症例データのデータ構成を示す図である。 スライス画像に設定された関心領域を模式的に示した図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムに対して類似症例検索の要求を行い、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 検査リストの画面図である。 検査が選択された後の検査リストの画面図である。 ユーザによりシリーズが選択された際に医用画像ビューワに表示されるスライス画像を示した図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。 表示ボックス管理情報のデータ構成を示す図である。 表示ボックスが３行２列で設定されたレイアウト領域を持つ基本画面を示す図である。 レイアウト管理情報の一例を示す図である。 レイアウト管理情報の一例を示す図である。 図３９のＳ６７０に示す初期の基本画面を生成する処理の詳細を示すフローチャートである。 図４４に示すＳ１５００の処理を示すフローチャートである。 図４４のＳ１３００で生成される病名リストのデータ構成を示す図である。 病名リスト表示領域の第１表示例を示した図である。 病名リスト表示領域の第２表示例を示した図である。 病名リスト表示領域の第３表示例を示した図である。 図４８に示す病名リスト表示領域の画面遷移を示す図である。 図４４のＳ１４００で生成される分布リストのデータ構成を示す図である。 図５１に示す分布リストを用いて生成された分布リスト表示領域を示す図である。 症例検索システムが画像特徴を抽出する態様を採用した場合の情報端末、医用情報管理システム、及び症例検索システムのブロック図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。 症例表示領域に表示されているサムネイル画像の拡大処理を示すフローチャートである。 図５６のＳ４４００のサブルーチンの処理を示すフローチャートである。 拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。 図５６のＳ４５００のサブルーチンの処理を示すフローチャートである。 拡大率と表示領域との関係を概略的に表す図である。 情報端末のディスプレイに類似症例検索結果のサムネイル画像を拡大表示した後、表示領域を変更するまでの処理を示すシーケンス図である。 拡大画像生成部の詳細な構成を示すブロック図である。 拡大後のサムネイル画像における表示領域の移動を概略的に表す図である。 拡大されたサムネイル画像の表示領域の変更処理を示すフローチャートである。 図６２と異なる拡大画像生成部の詳細な構成を示すブロック図である。 図６５の構成を用いた場合の表示領域の変更処理を示すフローチャートである。 拡大後のサムネイル画像の一例を示す図である。 図６７Ａに示されるサムネイル画像の拡大前のサムネイル画像全体を示す図である。 拡大前のサムネイル画像における表示領域の移動を概略的に示す図である。 拡大されたサムネイル画像が症例表示領域に表示された後に、ユーザがスクロールバーを操作した場合のサムネイル画像の拡大処理を示すフローチャートである。 拡大されたサムネイル画像が症例表示領域に表示された状態の基本画面を示す図である。 拡大されたサムネイル画像が図６９の状態から移動した基本画面を示す図である。 分布リスト表示領域に表示された病変分布が選択されたときの処理を示すフローチャートである。 胸膜領域情報が追加された類似症例データのデータ構成を示す図である。 胸膜領域を説明する図である。 実施の形態２において、類似症例検索により検索された類似症例のサムネイル画像が症例表示領域に表示された状態の基本画面を示す図である。 第２指示ボタンがユーザにより選択された場合の基本画面を示す図である。 第３指示ボタンがユーザにより選択された場合の基本画面を示す図である。 第２指示ボタンがユーザにより選択された場合の基本画面（図７５）が表示された状態でユーザによって行われるドラッグ操作を概略的に示す図である。 第３指示ボタンがユーザにより選択された場合の基本画面（図７６）が表示された状態でユーザによって行われるドラッグ操作を概略的に示す図である。 ユーザが拡大率変更ボタンの選択を行ったときの拡大処理を示すフローチャートである。 実施の形態２における拡大画像生成部の詳細な構成を示すブロック図である。 拡大されたサムネイル画像の表示領域の変更処理を示すフローチャートである。 図８０と異なる拡大画像生成部の詳細な構成を示すブロック図である。 症例検索システムが類似症例検索結果を情報端末に送信した後、情報端末において拡大率変更ボタンが選択されてから拡大されたサムネイル画像を情報端末のディスプレイに表示するまでの処理を示すシーケンス図である。 症例検索システムにおいて実行される事前処理と、図８３に示される処理とを示すフローチャートである。 拡大サムネイルデータのデータ構成を示す図である。 図３１及び図３５のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。 図５４及び図５５のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。
（基礎となった知見）
まず、本開示に係る一態様の着眼点について説明する。
特許文献１は、診断対象画像に基づく画像診断時に疾患の判断に有用な症例画像又はその疾患に関する統計情報等を提示する画像診断支援装置を開示する。当該画像診断支援装置による検索結果の画面は、診断対象画像及び疾患別の代表症例の情報を表示する。具体的には、前記検索結果の画面は、ｉ）上位３つの疾患Ａ、Ｄ、Ｇの代表症例の画像、ｉｉ）疾患別に診断対象画像との類似度、登録症例数及び代表症例数、ｉｉｉ）検索件数（検索された疾患の総数）、及び、ｉｖ）一画面に表示できない他の疾患の情報を参照するための「ページ送り」のソフトボタン等を表示する（特許文献１の段落［００６２］から［００６３］及び図６（Ｅ））。
しかし、特許文献１では、前記検索結果の画面に表示された代表症例の画像を拡大させる点、及び、拡大後に代表症例の画像を表示枠内で移動させる点については一切記載がない。したがって、特許文献１は、代表症例の画像を拡大する点、及び、拡大後に代表症例の画像を表示枠内で移動させる点についてさえ開示をしないので、例えば、代表症例の画像に含まれる病変部位の大きさに応じて、前記代表症例の画像の各々を移動させる等の工夫をも開示していない。
特許文献２は、複数の画像同士を操作性良く比較することが可能な画像処理装置を開示する。当該画像処理装置により表示された画面には、比較したい２つの画像が画像表示領域５１ａ及び５１ｂにそれぞれ表示される（特許文献２の図７（Ｃ）〜（Ｆ）、図８（Ｃ）〜（Ｆ）及び図９（Ｃ）〜（Ｄ）参照）。当該画像処理装置は、画像表示領域５１ａに表示される画像を画像表示領域５１ａ内で移動させると、画像表示領域５１ｂに表示される画像を画像表示領域５１ｂ内で連動して移動させる（特許文献２の段落［００６０］、段落［００７２］、段落［００８８］及び段落［０１００］参照）。
しかし、特許文献２において比較される複数の画像は、そもそも、個人ユーザがデジタルカメラなどで撮影した画像を前提としている（特許文献２の段落［０００２］から［０００５］）。特許文献２には、病変部位を有する医用画像同士を比較することについては一切記載がない。したがって、特許文献２は、医用画像に含まれる病変部位を確認する技術に単純に適用できるものではない。したがって、特許文献２は、例えば、医用画像に含まれる病変部位の大きさに応じて、前記医用画像の各々を連動して移動させる等の工夫をも開示していない。
非特許文献１は、病変画像を用いて過去の類似症例を検索する機能により、上述のＰＡＣＳなどに蓄積された臨床知識から、瞬時に的確な情報を抽出し提示し、医師の画像診断をサポートする類似症例検索システムを開示する。具体的には、本システムは、検査画像の病変の特徴が類似した症例画像を検索し、類似順に複数表示する。そして、表示された複数の症例画像より１つの参考症例画像を選択し、検査画像と並列に表示する（非特許文献１のｐ．１２「２．２ 本システムの特徴」及びＦｉｇ．３）。
しかし、非特許文献１に開示されたシステムは、表示された症例画像を拡大させる点、及び、拡大後に症例画像を枠内で移動させる点については一切記載がない。したがって、非特許文献１は、症例画像を拡大する点、及び、拡大後に症例画像を枠内で移動させる点についてさえ開示をしないので、例えば、代表症例の画像に含まれる病変部位の大きさに応じて、前記代表症例の画像の各々を移動させる等の工夫をも開示しない。
未だ病名が特定されていない読影対象の医用画像に表れている病変を検討するにあたって、既に病名が特定されている他の医用画像の中で前記読影対象の医用画像と類似する類似医用画像を参照することは有効であると考えられる。しかし、このようなシステムを構築した場合、前記医用画像データベースに膨大な数の医用画像が登録されることになる。このような場合であっても、前記読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示することが望まれる。
以上の考察により、以下の各態様を想到するに至った。
本開示の一態様は、医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続され、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには、読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す指定情報を検知させ、
前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、前記複数の類似医用画像は、それぞれ前記関心領域に対応する対応関心領域を含み、
前記受信した複数の類似医用画像の中の所定数以下の類似医用画像を表示する表示画面を、前記ディスプレイに表示させ、前記表示画面は、前記類似医用画像を表示するための前記所定数の表示枠を含み、
前記表示されている類似医用画像を拡大する指示を検知した場合、前記表示画面における各表示枠のサイズを同一サイズに維持しつつ、前記類似医用画像に含まれる前記対応関心領域を拡大表示させ、
前記拡大表示された類似医用画像の中で選択された一の選択類似医用画像を対応する表示枠内で移動させる指示を検知した場合、前記選択類似医用画像の移動に連動させて、前記選択類似医用画像以外の非選択類似医用画像を、前記非選択類似医用画像に対応する表示枠の中で、前記選択類似医用画像の移動方向と同一の移動方向に移動させ、
前記選択類似医用画像の移動距離と前記非選択類似医用画像の移動距離との比率を、前記選択類似医用画像に含まれる前記対応関心領域の面積と前記非選択類似医用画像に含まれる前記対応関心領域の面積との比率に対応させるものである。
本態様によると、まず、各表示枠のサイズが同一サイズに維持されたまま、前記表示されている類似医用画像に含まれる前記対応関心領域が拡大される。これにより、前記類似医用画像の表示領域が前記表示枠内に制約されている場合であっても、前記類似医用画像に含まれる前記対応関心領域が拡大される。したがって、ユーザは、前記類似医用画像の中で必要な箇所を効率的に観察することができる。
次に、前記拡大された類似医用画像の中で選択された一の選択類似医用画像を対応する表示枠内で移動させる指示が検知されると、前記選択類似医用画像の移動に連動させて、前記選択類似医用画像以外の非選択類似医用画像が、前記非選択類似医用画像に対応する表示枠の中で、前記選択類似医用画像の移動方向と同一の移動方向に移動する。即ち、前記一の選択類似医用画像を移動させる指示が検知されると、前記表示されている類似医用画像のうちで一つの選択類似医用画像だけが移動するのではない。むしろ、前記非選択類似医用画像が表示されている表示枠の中で、非選択類似医用画像が前記選択類似医用画像の移動方向と同一の移動方向に移動する。
これにより、ユーザは、前記対応関心領域に加え、前記対応関心領域の周辺をも、前記表示されている類似医用画像について効率的に観察することができる。例えば、前記対応関心領域の周辺には、副病変が存在する可能性がある。本態様によると、ユーザは、前記表示されている類似医用画像の中の必要な箇所を効率的に観察することができる。
このように、本態様では、前記選択類似医用画像を移動させる一つの操作で、前記非選択類似医用画像も、前記選択類似医用画像の移動に連動して移動する。したがって、前記対応関心領域に加え、前記対応関心領域の周辺についても、ユーザは、前記表示されている類似医用画像について一括して必要な箇所を確認することができる。
その結果、前記表示されている類似医用画像を個々に移動させる操作の手間を省き、医師を診療判断に集中させることができる。したがって、診療判断の精度を効果的に向上させることができる。
また、前記選択類似医用画像に含まれる前記対応関心領域の面積と、前記非選択類似医用画像に含まれる前記対応関心領域の面積とは、必ずしも同一ではない。例えば、前記選択類似医用画像に含まれる前記対応関心領域の面積が、前記非選択類似医用画像に含まれる前記対応関心領域の面積より大きい場合が考えられる。この場合、前記選択類似医用画像の移動距離と前記非選択類似医用画像の移動距離とが同一であると、前記非選択類似医用画像の移動の結果、前記非選択類似医用画像に含まれる前記対応関心領域は大きく移動し、前記非選択類似医用画像に含まれる前記対応関心領域から離れた周辺がより多く表示されることになる。一般には、前記非選択類似医用画像に含まれる前記対応関心領域に近い周辺に副病変が存在する可能性がある。そのため、前記非選択類似医用画像の移動の結果、前記非選択類似医用画像に含まれる前記対応関心領域から離れた周辺が表示されると、副病変を見過ごすおそれがあり得る。
本態様によると、前記選択類似医用画像の移動距離と前記非選択類似医用画像の移動距離との比率は、前記選択類似医用画像に含まれる前記対応関心領域の面積と前記非選択類似医用画像に含まれる前記対応関心領域の面積との比率に対応している。
これにより、例えば、前記選択類似医用画像に含まれる前記対応関心領域の面積が、前記非選択類似医用画像に含まれる前記対応関心領域の面積より大きい場合であっても、前記選択類似医用画像の移動距離と前記非選択類似医用画像の移動距離とは同一とはならない。そのため、前記非選択類似医用画像の移動の結果、前記非選択類似医用画像に含まれる前記対応関心領域から離れた周辺が表示されることを防止できる。
その結果、本態様は、前記表示されている類似医用画像を個々に移動させる操作の手間を省きながらも、副病変を見過ごす可能性を低減させて、医師を診療判断に集中させることができる。したがって、診療判断の精度を効果的に向上させることができる。
また、上記態様において、例えば、
前記選択類似医用画像に含まれる前記対応関心領域の面積が、前記非選択類似医用画像に含まれる前記対応関心領域の面積より大きい場合、前記非選択類似医用画像の移動距離を前記選択類似医用画像の移動距離より短くするようにしてもよい。
また、上記態様において、例えば、
前記対象医用画像の付加情報には、前記対象医用画像に表れる病変の病名情報が設定されておらず、
前記受信した複数の類似医用画像の各々の付加情報には、前記受信した複数の類似医用画像の各々に表れる病変の病名情報が設定されているようにしてもよい。
本態様によると、前記対象医用画像を観察して、前記対象医用画像に表れた病変の病名を特定するにあたって、既に病名が特定された病変を表す類似医用画像を参照することで、診断精度の向上に寄与できる。
また、上記態様において、例えば、
前記表示画面は、前記対象医用画像を表示する第１表示領域と、前記所定数の前記表示枠を含む第２表示領域とを含むようにしてもよい。
本態様によると、前記対象医用画像を観察して、前記対象医用画像に表れた病変の病名を特定するにあたって、前記対象医用画像と前記類似医用画像とを同一の表示画面の中で対比させることで、診断精度の向上に寄与できる。
また、上記態様において、例えば、
前記受信した複数の類似医用画像の中の前記所定数以下の類似医用画像を、前記対象医用画像との類似度が高い順序で前記各表示枠に表示させるようにしてもよい。
本態様によると、前記対象医用画像と前記類似医用画像とを対比するにあたって、前記受信した複数の類似医用画像を、前記対象医用画像との類似度が高い順序で表示させることにより、類似度が高い順番に前記類似医用画像を前記対象医用画像と対比することができる。したがって、効率的に前記対象医用画像に表れた病変の病名を特定させることができ、診断精度の向上に寄与できる。
また、上記態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるようにしてもよい。
また、上記態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信させ、
前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させるようにしてもよい。
また、上記態様において、例えば、
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記表示画面は、
前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
前記第１分布情報から前記第３分布情報の中のいずれかの選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記表示画面に表示させるようにしてもよい。
本態様によると、前記表示画面に表示された複数の類似医用画像を、さらに、前記対応関心領域の分布類型に基づいて仕分けできる。これにより、例えば、多数表示された類似医用画像の中から、前記対象医用画像に含まれる前記関心領域に症状が類似した類似医用画像を、効率的に選択できる。
また、上記態様において、例えば、
前記第１分布情報の選択が検知された場合、前記第１分布情報に対応する類似医用画像を、対応する表示枠に初期表示サイズにて表示させ、
前記第２分布情報の選択が検知された場合、前記第２分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する表示枠内に拡大表示させ、
前記第３分布情報の選択が検知された場合、前記第３分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する表示枠内に拡大表示させるようにしてもよい。
本態様によると、前記対応関心領域の分布類型に基づいて類似医用画像を仕分けした際、前記分布類型に応じた表示をする。これにより、操作者は、前記対応関心領域の分布類型に基づいて類似医用画像を仕分けし、その後、前記分布類型に応じて類似医用画像を拡大し若しくは前記対応関心領域を中心にする処理などを別途行う必要がない。そのため、前記対応関心領域の分布類型に基づいて仕分けされたとは言え、その次に、前記仕分けされた多数の類似医用画像の一つ一つに対して同様の操作を繰り返し行う煩雑さを大幅に軽減できる。その結果、診療判断に向けられるべき医師の思考若しくは医師の集中力が操作の煩雑さにより中断されるのを大幅に軽減し、医師の思考若しくは医師の集中力を本来の診療判断に向けることができる。したがって、診療判断の精度の向上を図ることができる。
また、上記態様において、例えば、
前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報であるとしてもよい。
本態様によると、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は類似医用画像が初期表示サイズで表示される。区域性又は気道性のカテゴリーに属する分布の場合は類似医用画像が拡大表示される。胸膜下のカテゴリーに属する分布の場合は胸膜を含んだ状態で類似医用画像が拡大表示される。
両側性、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は、肺全体に病変部が広がっている可能性又は肺の広範囲に病変部が生じている可能性が高い。このため、類似医用画像を初期表示サイズ、即ち、拡大させることなく表示させたいという医学的見地に基づくニーズが存在する。
一方、区域性又は気道性のカテゴリーに属する分布の場合は、上述のような可能性が低い。そのため、区域性又は気道性のカテゴリーに属する分布を選択することにより類似医用画像を拡大表示させることで、拡大表示させるという１工程を省略させ、医師の集中力が中断されることを防止できる。また、胸膜下のカテゴリーに属する分布の場合は、胸膜と病変部との位置関係が診断においては重要な指標となるため、胸膜を含んだ状態で類似医用画像を拡大表示させたいという医学的見地に基づくニーズが存在する。
本開示の一態様である制御方法は、表示装置の第１表示領域に表示された第１画像に代えて、第１領域に含まれる画像を拡大した第１変換画像を前記第１表示領域に表示し、
前記第１画像は第２領域を含む前記第１領域と、第３領域を含み、
前記表示装置の第２表示領域に表示された第２画像に代えて、第４領域に含まれる画像を拡大した第２変換画像を前記第２表示領域に表示し、
前記第２画像は第５領域を含む前記第４領域と、第６領域を含み、
前記第１変換画像を前記第１表示領域に表示することに代えて、前記第３領域に含まれる画像を拡大した第３変換画像を前記第１表示領域に表示する指示を受け取った時、前記第２変換画像を前記第２表示領域に表示することに代えて、前記第６領域に含まれる画像を拡大した第４変換画像を前記第２表示領域に表示し、
前記第１領域の中心と前記第３領域の中心の距離はＬ１であり、
前記第４領域の中心と前記第６領域の中心の距離はＬ２であり、
比率Ｌ１／Ｌ２は、前記第２領域の面積Ｓ１と前記第５領域の面積Ｓ２との比率Ｓ２／Ｓ１に比例する。
（実施の形態１）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。
図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、及び症例検索システム３００を備えている。
情報端末１００、医用情報管理システム２００、及び症例検索システム３００はネットワーク４００を介して相互に通信可能に接続されている。
なお、医用情報管理システム２００及び症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバ等の上で動作するソフトウェアであってもよい。医用情報管理システム２００及び症例検索システム３００が病院内に設置されている場合、ネットワーク４００としては、ローカルエリアネットワークが採用できる。ローカルネットワークとしては、ＩＥＥＥ８０２．３シリーズの有線ＬＡＮ、ＩＥＥＥ８０２．１１シリーズの無線ＬＡＮ、或いは両者が混在するネットワークが採用できる。医用情報管理システム２００及び症例検索システム３００が病院外のサーバを用いて実現される場合、ネットワーク４００としては、インターネットが採用できる。
情報端末１００としては、パーソナルコンピュータやタブレット端末等の情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）や電子カルテシステム等が採用される。
図２は、情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、ボックスレイアウト管理部１１１、及び拡大画像生成部１１２を備える。
ディスプレイ１０１は、例えば、液晶モニタにより構成され、診断対象となる医用画像及びカルテ画像を表示すると共に、診断結果を記入するためのレポート入力画像等を表示する。なお、ディスプレイ１０１は最低１台必要だが、通常、画像診断においては２〜３台のディスプレイ１０１が用いられる。本実施の形態では２台のディスプレイ１０１が用いられ、一方のディスプレイ１０１をディスプレイ１０１ａとし、他方のディスプレイ１０１をディスプレイ１０１ｂとする（図３参照）。
図３は、２台のディスプレイ１０１ａ、１０１ｂの外観図である。図３では、ディスプレイ１０１ａには、４つの医用画像ビューワが２行２列の配置で表示されており、ディスプレイ１０１ｂには症例検索システム３００の画面が表示されている。なお、ディスプレイ１０１を１台とした場合、２つの表示画面が１台のディスプレイ１０１の表示画面上に領域を分けて表示される。
操作部１０２は、例えば、キーボード及びマウスを含み、情報端末１００に対してユーザにより入力される種々の操作を受け付ける。例えば、操作部１０２は、ディスプレイ１０１に表示される医用画像及びカルテ画像に対するユーザからの操作、並びにレポート入力画面に対して診断結果を入力する操作等を受け付ける。
入力制御部１０３は、操作部１０２へのユーザの操作を検知すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２としてのマウスから出力される座標データからディスプレイ１０１上におけるマウスポインタの位置を検知し、ディスプレイ１０１上にマウスポインタを表示させる。そして、入力制御部１０３は、マウスがクリックされたことを検知したときにマウスポインタの表示位置に表示制御部１０４で生成されたＧＵＩ部品（例えば、ＧＵＩボタン）が表示されていれば、そのＧＵＩをユーザが選択したと判定し、他の構成要素にそのＧＵＩ部品がユーザにより選択されたことを通知する。
表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。
ＲＯＩ管理部１０５は、類似症例検索を行う際に、後述する検索クエリ画像に対して設定される関心領域（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を示す関心領域情報を生成してメモリに格納し、関心領域情報を管理する。
表示ボックス管理部１０６は、後述する表示ボックス管理情報４４１０（図４０）をメモリに格納し、表示ボックス管理情報４４１０を管理する。
病名リスト管理部１０８は、症例表示領域７１０（図６）に表示された類似症例の病名リスト（図４６）を生成してメモリに格納し、病名リストを管理する。
分布リスト管理部１０９は、症例表示領域７１０に表示された類似症例の病変分布を示す分布リスト（図５１）を生成してメモリに格納し、分布リストを管理する。
通信制御部１１０は、例えば、情報端末１００をネットワーク４００に接続するための通信装置を含み、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１１０は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
ボックスレイアウト管理部１１１は、後述するレイアウト管理情報４２００（図４３）を生成してメモリに格納し、レイアウト管理情報４２００を管理する。
拡大画像生成部１１２は、類似症例のサムネイル画像の拡大画像を生成する。拡大画像生成部１１２は、操作部１０２に対するユーザの操作量を入力制御部１０３から取得する。拡大画像生成部１１２は、症例検索システム３００から送信された、類似症例データ（類似度、関心領域情報を含む）を通信制御部１１０から受け取る。拡大画像生成部１１２は、類似症例検索により取得した類似症例の件数（例えばＮＣ件）のうち、症例表示領域７１０に表示される件数分に対して、各サムネイル画像毎に別々の拡大率を算出し、表示される件数分の拡大画像を生成する。
図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、及び通信制御部２０６を備える。
患者情報蓄積部２０１は、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録された患者情報１０００（図２９）を蓄積する。
患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された患者情報１０００（図２９）に対して、ユーザから入力されたデータを登録して患者情報１０００を更新する処理、及び患者情報１０００を表示制御部１０４に出力する処理等を実行し、患者情報１０００を管理する。医用画像データ蓄積部２０３は、患者の検査画像である医用画像データを蓄積する。
医用画像データ管理部２０４は、医用画像データを医用画像データ蓄積部２０３に蓄積し、医用画像データを管理する。
診断レポート管理部２０５は、患者に対して行われた各検査に対する医師による診断結果を示す診断レポート３０００（図３２）を管理する。
通信制御部２０６は、例えば、医用情報管理システム２００をネットワーク４００に接続するための通信装置を含み、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、及び類似症例検索部３０３を備える。
類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている類似症例のうち、類似症例検索の対象データとして選定された多数の類似症例から抽出された画像特徴や、生成されたサムネイル画像等が登録された類似症例データ４０００（図３３）を蓄積する。
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。なお、関心領域情報は、関心領域を示す第１指定情報の一例である。
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された１以上の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。
通信制御部３０４は、例えば、症例検索システム３００をネットワーク４００に接続させる通信装置で構成され、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。
図４は、情報端末１００の実装形態の構成例を示す図である。図４に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。
アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。
ここで、アプリケーション５０１は、医用情報管理アプリケーション及び類似症例検索アプリケーションを含む。医用情報管理アプリケーションは、情報端末１００を医用情報管理システム２００と連携させるためのアプリケーションであり、類似症例検索アプリケーションは、情報端末１００を症例検索システム３００と連携させるためのアプリケーションである。そして、両アプリケーションは、相互にデータを送受し、情報端末１００において、医用情報管理システム２００及び症例検索システム３００が提供するサービスを統合させる。
ＯＳ５０２は、情報端末１００の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。
情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、通信制御部１１０、ボックスレイアウト管理部１１１、及び拡大画像生成部１１２の機能が実現される。
但し、本実施の形態では、情報端末１００は、アプリケーション５０１単独で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。
図５は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ａに表示される基本画面Ｋ１の一例を示す図である。図５に示す基本画面Ｋ１は、４つの医用画像ビューワ６１０〜６４０で構成されている。医用画像は、通常、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ ｉｎ
Ｍｅｄｉｃｉｎｅ）フォーマットで記録されており、医用画像ビューワ６１０〜６４０はＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、ＤＩＣＯＭフォーマットの多数の断層画像（以下、スライス画像と呼ぶ。）で構成される胸部ＣＴ画像とする。但し、これは一例に過ぎず、他の部位（例えば、頭部、腹部、脚、或いは腕）のＣＴ画像が採用されてもよい。
医用画像ビューワ６１０〜６４０に表示された胸部ＣＴ画像は、マウスやキーボードの操作により、スライス画像が切り替えられる。ここで、胸部ＣＴ画像を構成するスライス画像は、例えば、首側から腹側に向かう順番に配置されている。
例えば、医用画像ビューワ６１０上にマウスポインタが位置決めされ、マウスホイールの回転が入力制御部１０３で検知されると、表示制御部１０４は、検知された回転量に応じて医用画像ビューワ６１０に表示されているスライス画像を切り替える。ここで、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの後方側に１クリック分回転されると、表示中のスライス画像を次のスライス位置のスライス画像に切り替える。一方、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの前方側に１クリック分回転されると、表示中のスライス画像をスライス位置が１つ前のスライス画像に切り替える。よって、医師等のユーザはマウスホイールを前方側又は後方側に回転させながら、医用画像ビューワ６１０に表示されるスライス画像を適宜切り替え、所望のスライス画像を探索する。
なお、医用画像としては、胸部ＣＴ画像に代えて、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像が採用されてもよい。また、図５の例では、医用画像ビューワの個数は４個とされているが、これは一例にすぎず、６個や８個等別の個数が採用されてもよい。医用画像ビューワの個数が多くなると同時に比較できる画像が増えるが、１画像当たりの表示面積が狭くなる。そのため、この個数はディスプレイ１０１ａの表示サイズに応じて適宜変更可能な構成を採用すればよい。ここでは、医用画像ビューワの個数は、ユーザ又は管理者が自由に変更できるものとする。
類似症例検索アプリケーションが起動される前には、ディスプレイ１０１ａの全域には、ある患者の胸部ＣＴ画像のスライス画像が表示されている。そして、この状態で、読影者等のユーザにより類似症例検索アプリケーションが起動されると医用画像ビューワ６１０には、ディスプレイ１０１ａの全域に表示されていたスライス画像が表示される。
つまり、医用画像ビューワ６１０には、ユーザが類似症例検索アプリケーションを起動させたときに、ディスプレイ１０１ａの全域に表示されていた検索クエリ画像が初期表示される。なお、表示制御部１０４は、検索クエリ画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を重畳表示してもよい。検索クエリ画像は読影対象の医用画像である対象医用画像の一例である。
図５では、他の医用画像ビューワ６２０〜６４０には何の画像も表示されていないが、診断対象となる患者の検査画像が複数あり、類似症例検索アプリケーションが起動される前に、ディスプレイ１０１ａに複数の検査画像が表示されていた場合、表示制御部１０４は、医用画像ビューワ６２０〜６４０にこれら複数の検査画像をそのまま表示すればよい。
図６は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ｂに表示される基本画面Ｋ２の一例を示す図である。図６に示す基本画面Ｋ２は、症例表示領域７１０、レイアウト領域７２０、病名リスト表示領域７３０、及び分布リスト表示領域７５０を備える。なお、レイアウト領域７２０は第１表示領域の一例であり、症例表示領域７１０は第２表示領域の一例である。
症例表示領域７１０は、検索クエリ画像に類似した類似症例のサムネイル画像を類似度順に表示する領域である。ここで、類似症例のサムネイル画像は、類似医用画像の一例である。
症例表示領域７１０には多数の類似症例が表示されるため、解像度や画素値の変換をその場で行うと処理に時間がかかってしまう。よって、サムネイル画像は、オリジナルのスライス画像から予め作成され、症例検索システム３００に保存されている。
以下、解像度や画素値の変換について少し補足する。オリジナルのスライス画像の解像度は５１２×５１２画素であるが、サムネイル画像はより低解像であるため、解像度変換を行う必要がある。そこで、サムネイル画像は、元となるスライス画像に対して低解像度処理及び階調変換処理が行われて生成される。
階調変換処理は例えば、下記のように行われる。ＣＴで取得したスライス画像は各画素値（ＣＴ値）が−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ Ｕｎｉｔ）の２０００階調の値をとり、そのままでは通常の８ビット階調のディスプレイに表示できない。また、表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約−９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜−５０ＨＵ）、水（ＣＴ値：０ＨＵ）、及び骨（ＣＴ値：１０００ＨＵ）を人間が肉眼で区別することは難しい。
よって、通常、スライス画像は、各画素値に対してウィンドウレベル及びウィンドウ幅が設定され、８ビットの画素値に再構成されて、ディスプレイに表示される。ここで、ウインドウレベルは、ウインドウの中心となるＣＴ値を示し、ウインドウ幅は、ウインドウ中心の上下の幅を示す。
例えば、肺野条件でＤＩＣＯＭ画像が再構成される場合、ウインドウレベルが−５５０〜−８００に設定され、ウインドウ幅が１０００〜１６００に設定される。したがって、サムネイル画像も、元となるスライス画像から上記の処理によって画素値が８ビットに落とされることで生成される。
なお、症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が所定の閾値以下の類似症例を示すサムネイル画像である。ここでは距離としては、例えば、ユークリッド距離が用いられる。なお、距離としては、市街地距離等の別の距離尺度が採用されてもよい。比較対象となる２つの画像は、距離が近いほど類似している。また、特徴ベクトルは、サムネイル画像から得られたものではなく、元画像であるＤＩＣＯＭ画像から得られたものが採用される。
図７は、症例表示領域７１０に表示されるある１つの類似症例の表示領域７０１（表示枠の一例）を取り出して示した図である。類似症例の表示領域７０１には、サムネイル画像が表示されており、このサムネイル画像の下部には、確定診断病名表示領域７１１及び距離表示領域７１２が配置されている。確定診断病名表示領域７１１には、対象となる類似症例の確定診断病名が表示される。確定診断病名とは、対象となる類似症例に対して診断が確定された病名を指す。距離表示領域７１２には、対象となる類似症例のスライス画像の特徴ベクトルと、検索クエリ画像の特徴ベクトルとの距離が表示される。図７の例では、確定診断病名表示領域７１１には、「非結核性抗酸菌症」と表示されているため、このサムネイル画像は「非結核性抗酸菌症」と確定診断がされた類似症例のサムネイル画像を示す。また、距離表示領域７１２には、「０．０５」と表示されているため、この類似症例のスライス画像と検索クエリ画像との距離が「０．０５」であることが示されている。
図７に示されるように、類似症例の表示領域７０１に示されるサムネイル画像は、対応関心領域ＣＲＯＩを含む。対応関心領域ＣＲＯＩは、検索クエリ画像（読影対象の医用画像）に設定された関心領域に対応する領域（つまり関心領域に類似する領域）である。なお、以下では、対応関心領域は、単に「関心領域」とも称される。
図６に戻り、基本画面Ｋ２の例えば左上には、検索結果件数表示領域７１３が配置されている。検索結果件数表示領域７１３には、検索処理の結果、症例検索システム３００から取得された、診断対象症例に類似する類似症例の数が表示される。
なお、類似症例の数が膨大である場合、症例表示領域７１０は全ての類似症例を一度に表示することができない。そこで、症例表示領域７１０の例えば右側には、上下方向に長尺のスクロールバー７１５が設けられている。表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を上下方向にスクロール表示させる。これにより、ユーザは、非表示状態にあった類似症例を症例表示領域７１０に表示させ、その類似症例を観察できる。
なお、スクロールバー７１５は左右方向に長尺であってもよい。この場合、表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を左右方向にスクロール表示させればよい。
なお、情報端末１００は、検索クエリ画像との距離が所定の閾値以下のサムネイル画像を症例検索システム３００から取得するとしたが、これは一例に過ぎない。例えば、情報端末１００は、類似度が高い順に、常に一定数のサムネイル画像を症例検索システム３００から取得してもよい。或いは、情報端末１００は、常にある確定診断病名のサムネイル画像が一定数含まれるようにサムネイル画像を症例検索システム３００から取得してもよい。
なお、症例表示領域７１０におけるサムネイル画像の表示手法としては、例えば、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法が採用できる。つまり、症例表示領域７１０において、左上から右下に向けて蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法が採用できる。
もちろん、本実施の形態は別の表示手法が採用されてもよい。例えば、左から１列目の上端に距離が最短のサムネイル画像を表示し、下側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一列の下端に達すると、左から２列目の上端に次に距離が大きいサムネイル画像を表示するという表示手法が採用されてもよい。また、これら複数の表示手法をユーザが切り替え可能な構成が採用されてもよい。
また、上記の例では、類似度として距離が採用されたが、コサイン類似度のような画像同士の類似性を示す指標であればどのような指標が採用されてもよい。コサイン類似度が採用された場合、値が１に近づくにつれて比較対象となる２つの画像の類似性が高くなる。
なお、詳細は後述するが、症例表示領域７１０に表示する類似症例は、病名リスト表示領域７３０に表示された病名や、分布リスト表示領域７５０に表示された病変分布で絞り込むことができる。現在設定されている類似症例の絞込条件は、表示条件表示領域７１４に表示される。図６の例では、類似症例検索直後の状態であり、何も絞り込みがなされていないため、表示条件表示領域７１４には「全疾患」と表示されている。
症例表示領域７１０に表示されている類似症例のサムネイル画像は、ユーザの操作により拡大することが可能に構成されている。以下、類似症例のサムネイル画像の拡大表示が説明される。
図８は、症例表示領域７１０に表示されたサムネイル画像のうち１のサムネイル画像が選択されたときの基本画面Ｋ２を示す図である。図８に示されるように、類似症例検索直後の基本画面Ｋ２が表示された状態では、各表示領域には、サムネイル画像の画像全体が表示されている。症例表示領域７１０は、サムネイル画像をそれぞれ表示する所定数ＮＤ（この実施の形態ではＮＤ＝２０）の表示領域を含む。
情報端末１００の入力制御部１０３は、マウス等の操作部１０２を通しての入力を常時モニタリングしている。そして、入力制御部１０３は、マウスをクリックする操作がユーザにより入力され、その操作により、症例表示領域７１０に表示された類似症例のサムネイル画像の１つが選択されたことを検知する。すると、表示制御部１０４は、選択されたサムネイル画像の背景の色を変更する。
図８の例では、症例表示領域７１０において、１行４列目の表示領域１３０１に表示された類似症例のサムネイル画像が選択されている。そのため、表示領域１３０１内のサムネイル画像の背景の色が変更されている。具体的には選択されたサムネイル画像の外周を取り囲む枠状の領域の色が変更されている。これにより、ユーザに対して当該サムネイル画像が選択状態になったことを知らせることができる。
ここで、背景の色としては、例えば、症例表示領域７１０の背景の色との差が明確に現れる色が採用される。図８の例では例えば黄色が採用されている。なお、図８の例ではサムネイル画像の枠状の領域の色を変更する態様を示したが、枠状の領域を点滅させる態様や枠状の領域の輝度を明るくする態様が採用されてもよい。
図８に示されるように、１つのサムネイル画像が選択された状態で、ユーザが、例えばマウスのホイールを回転させることにより拡大操作を行うと、入力制御部１０３は、マウスのホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば通知された回転量を用いて各サムネイル画像の拡大率をそれぞれ決定し、決定した拡大率で全てのサムネイル画像を拡大する。表示制御部１０４は、例えば図９または図１０に示されるように、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。
図９は、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されたときの基本画面Ｋ２を示す図である。図９に示されるように、症例表示領域７１０に表示されている２０個のサムネイル画像が拡大されている。これにより、症例検索システム３００から受信した類似症例データ６２件の全てのサムネイル画像を拡大する場合と比較して、情報端末１００における処理負担を大きく軽減することができる。
図１０は、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されたときの図９と異なる基本画面Ｋ２を示す図である。図１０では、拡大画像生成部１１２は、対応関心領域ＣＲＯＩのサイズが表示領域のサイズと同じサイズになるように、拡大されたサムネイル画像をそれぞれ生成している。
なお、表示されているサムネイル画像を拡大する際には、拡大画像生成部１１２は、図９または図１０に示すように、対応関心領域ＣＲＯＩの中心位置が表示領域１３０１の中心位置になるように、拡大画像を生成する。また、表示制御部１０４は、サムネイル画像を拡大する際に、図９または図１０に示すように、表示領域１３０１のサイズを拡大せず、同じサイズに維持する。
また、拡大画像生成部１１２は、拡大率をサムネイル画像毎に異なる値に設定してもよい。これによって、図９または図１０に示されるように、拡大後の各サムネイル画像の対応関心領域ＣＲＯＩが同じ大きさになるように拡大することができる。
このように、画像診断を行う医師が注目した類似症例のサムネイル画像の一つを拡大操作するだけで、表示されている他の全ての類似症例のサムネイル画像も連動して拡大表示される。このため、医師は一つの指示にて複数の類似症例を詳細に比較することができる。したがって、操作数を大幅に低減できる。
なお、図８では、１行４列目の表示領域１３０１に表示された類似症例のサムネイル画像が選択されている。しかし、ユーザが選択するサムネイル画像は任意である。ユーザは、表示されている２０個のサムネイル画像のいずれかを選択すればよい。
図１１は、症例表示領域７１０に表示されたサムネイル画像のうち図８と異なるサムネイル画像が選択されたときの基本画面Ｋ２を示す図である。図１１では、２行４列目の表示領域８０１に表示されたサムネイル画像がユーザによって選択されている。図１１の場合でも、２行４列目のサムネイル画像が選択された状態で、ユーザが、例えばマウスのホイールを回転させることにより拡大操作を行うと、入力制御部１０３は、マウスのホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば通知された回転量を用いて各サムネイル画像の拡大率をそれぞれ決定し、決定した拡大率で全てのサムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、上記では、ユーザによる拡大操作は、マウスのホイールの回転としているが、本開示は、これに限られない。例えば、症例表示領域７１０に表示されている一つのサムネイル画像上にマウスのポインタを配置して、マウスのボタンを押した状態で、キーボードの例えば上方向キーまたは下方向キーを押すことにより、拡大操作を行うようにしてもよい。この場合には、入力制御部１０３は、上方向キーまたは下方向キーが押されている時間をカウントしてもよい。拡大画像生成部１１２は、例えば上方向キーまたは下方向キーが押されている時間を用いて拡大率を決定してもよい。
なお、サムネイル画像の具体的な拡大処理手順の詳細は後述する。
症例表示領域７１０に表示されているサムネイル画像は、ユーザの操作により表示領域を変更することが可能に構成されている。以下では、類似症例のサムネイル画像の表示領域変更について説明する。
図１２は、サムネイル画像の拡大表示後に、症例表示領域７１０に表示されたサムネイル画像のうち１つのサムネイルが選択されたときの基本画面Ｋ２を示す図である。図１２に示すように、サムネイル画像の拡大表示後の基本画面Ｋ２が表示された状態では、各表示領域にはサムネイル画像が拡大して表示されている。
情報端末１００の入力制御部１０３は、マウス等の操作部１０２を通しての入力を常時モニタリングしている。そして、入力制御部１０３は、マウスをクリックする操作がユーザにより入力され、その操作により、症例表示領域７１０に表示された類似症例のサムネイル画像の１つが選択されたことを検知する。すると、表示制御部１０４は、選択されたサムネイル画像の背景の色を変更する。
図１２の例では、症例表示領域７１０において、２行４列目の表示領域１２０１に表示された類似症例のサムネイル画像が選択されている。そのため、表示領域１２０１内のサムネイル画像の背景の色が変更されている。具体的には選択されたサムネイル画像の外周を取り囲む枠状の領域の色が変更されている。これにより、ユーザに対して当該サムネイル画像が選択状態になったことを知らせることができる。
ここで、背景の色としては、例えば、症例表示領域７１０の背景の色との差が明確に現れる色が採用される。図１２の例では、例えば、黄色が採用されている。なお、図１２の例では、サムネイル画像の枠状の領域の色を変更する態様を示したが、枠状の領域を点滅させる態様や枠状の領域の輝度を明るくする態様が採用されてもよい。
図１２に示すように、サムネイル画像の一つが選択された状態で、ユーザが、例えば、マウスの左ボタンを押しながらマウス位置を変更する（ドラッグ）操作を行う。
図１３は、基本画面Ｋ２が表示された状態でユーザによって行われるドラッグ操作１２０２を概略的に示す図である。ユーザによってドラッグ操作１２０２が行われると、入力制御部１０３は、マウスの移動量を検知し、検知した移動量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、検知されたマウス移動量を用いて、サムネイル画像の表示領域の移動量を決定し、決定した量だけ表示領域を移動したサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２によって移動されたサムネイル画像を症例表示領域７１０に表示する。
図１４は、症例表示領域７１０に表示されているサムネイル画像の表示領域が移動されたときの基本画面Ｋ２を示す図である。具体的には、図１４では、選択されたサムネイル画像だけでなく、症例表示領域７１０に表示されている合計２０個のサムネイル画像の表示領域が移動されている。
なお、表示されているサムネイル画像の表示領域を移動する際には、拡大画像生成部１１２は、図１４に示すように、症例表示領域７１０に表示されている全てのサムネイル画像の対応関心領域ＣＲＯＩの位置が表示領域１２０１内で同じ量だけ移動されるように移動後のサムネイル画像を生成する。具体的には、例えばユーザがマウスを左向きにドラッグ操作を行った場合には、拡大表示された計２０個のサムネイル画像の表示領域を対応関心領域ＣＲＯＩのより右側が表示されるように移動する。
図１５は、図１４のように基本画面Ｋ２が表示された状態で、さらにユーザによって行われるドラッグ操作１５０１を概略的に示す図である。図１５に示すように、図１４の状態から、ユーザがさらにマウスの左ボタンを押しながらマウス位置を変更する操作を行うと、入力制御部１０３は、マウスの移動量を検知し、検知した移動量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、検知されたマウス移動量を用いて、サムネイル画像の表示領域の移動量を決定し、決定した量だけ表示領域を移動したサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２によって移動されたサムネイル画像を症例表示領域７１０に表示する。
図１６は、図１５に示されるドラッグ操作によって、症例表示領域７１０に表示されているサムネイル画像の表示領域が移動されたときの基本画面Ｋ２を示す図である。具体的には、図１４と同様、図１６では、選択されたサムネイル画像だけでなく、症例表示領域７１０に表示されている合計２０個のサムネイル画像の表示領域が移動されている。図１６においても、表示されているサムネイル画像の表示領域を移動する際には、拡大画像生成部１１２は、症例表示領域７１０に表示されている全てのサムネイル画像の対応関心領域ＣＲＯＩの位置が表示領域内で同じ量だけ移動されるように、移動後のサムネイル画像を生成する。具体的には、ユーザがマウスを左にドラッグ操作した場合には、サムネイルを拡大表示した計２０個の画像の表示領域をＲＯＩのより右側が表示されるように移動する。なお、サムネイル画像の表示領域の移動処理の詳細は後述する。
例えば、肺腺癌や肺結核などでは、主病変から癌細胞や菌が排出される過程で他の部位に再吸入され、細気管支に広がる散布巣が見られることがある。そのため、医師は、画像診断時に、主病変だけでなく、その周りに存在する副病変を観察する。
類似症例検索においては、現在診断中の類似症例の主病変が読影対象の症例に類似していると判断した後、その周りに存在する副病変も含めて類似しているか否かを判定して、検索された類似症例を絞り込んで病名の絞り込みを行いたいというニーズが存在する。そのため、類似症例のサムネイル画像において、対応関心領域が付与されている主病変だけでなく、ユーザの操作により、その表示領域を移動させて周辺領域を観察することができる機能は、画像診断時に有効である。特に、主病変が類似する複数の疾患の区別をする際、周辺に存在する副病変を比較することになるため、複数の類似症例の周辺領域を一度に比較できることが好ましい。
この機能により、画像診断を行う医師が注目した類似症例のサムネイル画像の表示領域を操作するだけで、注目した類似症例以外の類似症例も連動して表示領域が移動される。したがって、医師は一つの指示にて詳細比較することができるので、操作数を大幅に低減できる。
図１４、図１６に示した通り、拡大画像生成部１１２は、症例表示領域７１０に表示されている全てのサムネイル画像の対応関心領域ＣＲＯＩの位置が表示領域１２０１内で同じ量だけ移動されるように移動後のサムネイル画像を生成する。しかしながら、ユーザが選択した類似医用画像（図１２〜図１６の例では２行４列目の表示領域１２０１に表示されたサムネイル画像）に含まれる対応関心領域ＣＲＯＩの面積と、他の類似医用画像に含まれる対応関心領域ＣＲＯＩの面積とは必ずしも同一ではない。
そこで、ユーザにより入力された操作量に対して、各サムネイル画像の拡大率を掛けた値を表示領域の移動量とする。例えば、ユーザが選択した類似医用画像（選択類似医用画像の一例）に含まれる対応関心領域ＣＲＯＩの面積が、他の類似医用画像（非選択類似医用画像の一例）に含まれる対応関心領域ＣＲＯＩの面積より大きい場合を考える。この場合、ユーザが選択した類似医用画像の移動距離と他の類似医用画像の移動距離とが同一であると、他の類似医用画像を移動した結果、他の類似医用画像に含まれる対応関心領域ＣＲＯＩは大きく移動し、他の類似医用画像に含まれる対応関心領域ＣＲＯＩから離れた周辺がより多く表示されることになる。一般には、他の類似医用画像に含まれる対応関心領域ＣＲＯＩに近い周辺に副病変が存在する可能性がある。
そのため、選択類似医用画像以外の他の類似医用画像の移動の結果、他の類似医用画像に含まれる対応関心領域ＣＲＯＩから離れた周辺が表示されると、副病変を見過ごすおそれがあり得る。そこで、図１４、図１６に示すように、症例表示領域７１０に表示される拡大されたサムネイル画像の移動量が表示領域１２０１内で同じに見えるようにサムネイル画像の表示領域を移動する。これによって、例えば、ユーザが選択した類似医用画像に含まれる対応関心領域ＣＲＯＩの面積が、他の類似医用画像に含まれる対応関心領域ＣＲＯＩの面積より大きい場合であっても、ユーザが選択した類似医用画像の移動距離と他の類似医用画像の移動距離とは同一とはならない。そのため、他の類似医用画像の移動の結果、他の類似医用画像に含まれる対応関心領域ＣＲＯＩから離れた周辺が表示されることを防止できる。
その結果、複数の類似医用画像を個々に移動させる操作の手間を省きながらも、副病変を見過ごす可能性を低減させて、医師を診療判断に集中させることができる。したがって、診療判断の精度を効果的に向上させることができる。
図６に戻り、レイアウト領域７２０は、例えば、図６に示す基本画面の左下に配置されている。そして、レイアウト領域７２０は、症例表示領域７１０に表示された類似症例サムネイル画像のうちユーザが詳細に観察したい画像を、ディスプレイ１０１ａの医用画像ビューワに表示させるために用いられる。図５に示す通り、ディスプレイ１０１ａには４つの医用画像ビューワ６１０〜６４０が２行２列で表示されている。また、レイアウト領域７２０には、２行２列で４つの表示ボックス７２１〜７２４が存在する。このように、ディスプレイ１０１ａに表示される医用画像ビューワ６１０〜６４０の数及び配置と、レイアウト領域７２０における表示ボックス７２１〜７２４の数及び配置とは揃えられている。図５の通り、医用画像ビューワ６１０に、検索クエリ画像が表示されているのに合わせ、表示ボックス７２１には、検索クエリ画像のサムネイル画像が初期表示される。
他の表示ボックス７２２〜７２４には、医用画像ビューワ６２０〜６４０と連動させて類似症例のサムネイル画像が表示される。つまり、入力制御部１０３が表示ボックス７２２〜７２４のいずれか１の表示ボックスに症例表示領域７１０に表示された１のサムネイル画像のドラッグアンドドロップを検知すると、表示制御部１０４はその表示ボックスに１のサムネイル画像を表示させると共に、その表示ボックスに対応する医用画像ビューワにそのサムネイル画像に対応するスライス画像を表示する。このように、医用画像ビューワ６１０〜６４０は、表示ボックス７２１〜７２４と１対１で対応付けられている。
図６の例では、表示ボックス７２２〜７２４は空白であるため、図５に示す医用画像ビューワ６２０〜６４０も空白になっている。
ユーザは、マウスをドラッグアンドドロップすることで、詳細に観察したいサムネイル画像を、症例表示領域７１０からレイアウト領域７２０に移動させる。例えば、ユーザが表示ボックス７２２にサムネイル画像を移動させたとすると、表示ボックス７２２に対応する医用画像ビューワ６２０には、このサムネイル画像に対応するスライス画像が表示される。同様に、ユーザが表示ボックス７２３にサムネイル画像を移動させたとすると、表示ボックス７２３に対応する医用画像ビューワ６３０には、このサムネイル画像に対応するスライス画像が表示される。すなわち、表示ボックス７２１〜７２４のうち任意の表示ボックスにサムネイル画像を移動させると、検索クエリ画像のサムネイル画像に隣接して類似症例のサムネイル画像が表示される。そのため、ユーザはサムネイル画像のレベルで診断対象症例と類似症例との対比ができ、両症例の類似性を速やかに判断できる。つまり、サムネイル画像は、スライス画像に比べて情報量が少ないため、ユーザは、レイアウト領域７２０において隣接配置された診断対象症例と類似症例とがどの程度類しているかのおよその検討をつけることができる。そのため、ユーザは、症例表示領域７１０に表示された多数の類似症例の中から、対象診断症例との比較をスライス画像のレベルで詳細に行う必要がある類似症例の最終候補の絞り込みを効率良く行うことができる。
同様に、ディスプレイ１０１ａにも、レイアウト領域７２０と同じ配置関係で検索クエリ画像及び類似症例のスライス画像が表示される。そのため、レイアウト領域７２０において最終候補となる類似症例を絞り込む作業が終了すると、何らの操作を入力しなくても、ディスプレイ１０１ａには、診断対象症例と最終候補として絞り込んだ類似症例とがスライス画像のレベルで表示されている。そのため、ユーザは対象診断と最終候補の類似症例とを詳細に読影するという次の作業ステップに円滑に移行できる。
図６に示す基本画面の左側の上段には、「病名リスト」との見出しが付けられた病名リスト表示領域７３０が配置されている。病名リスト表示領域７３０には、類似症例の検索結果として取得された全ての類似症例の確定診断病名が表示される。診断対象症例は、診断が終了して確定診断病名が付与された後、類似症例として、症例検索システム３００に蓄積される。したがって、各類似症例には、それぞれ、診断によって付与された確定診断病名が予め付与されている。
図１７は、病名リスト表示領域７３０の拡大図である。図１７では、確定診断病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２、７３３、７３５、７３６、７３８、７３９、７４０、７４２、７４３、７４５）とに分けて表示されている。図１７の例では、大分類の病名として、真菌症７３１（ｍｙｃｏｓｉｓ）、腫瘍性７３４（ｎｅｏｐｌａｓｔｉｃ）、非腫瘍性７３７（ｎｏｎｎｅｏｐｌａｓｔｉｃ）、ミコバクテリア症７４１（ｍｙｃｏｂａｃｔｅｒｉｏｓｉｓ）、及びその他７４４が表示されている。
また、図１７の例では、真菌症７３１の詳細分類の病名として、アスペルギルス症７３２（ａｓｐｅｒｇｉｌｌｏｓｉｓ）、クリプトコッカス症７３３（ｃｒｙｐｔｏｃｏｃｃｏｓｉｓ）が表示されている。また、腫瘍性７３４の詳細分類の病名として、原発性肺癌７３５（ｌｕｎｇ ｃａｎｃｅｒ）、転移性肺癌７３６（ｍｅｔａｓｔａｔｉｃ ｌｕｎｇ ｃａｎｃｅｒ）が表示されている。また、非腫瘍性７３７の詳細分類の病名として、肺膿瘍７３８（ｌｕｎｇ ａｂｓｃｅｓｓ）、サルコイドーシス７３９（ｓａｒｃｏｉｄｏｓｉｓ）、敗血性塞栓７４０（ｓｅｐｔｉｃ ｅｍｂｏｌｉ）が表示されている。また、ミコバクテリア症７４１の詳細分類の病名として、非結核性抗酸菌症７４２（ＮＴＭ：ｎｏｎｔｕｂｅｒｃｕｌｏｕｓ ｍｙｃｏｂａｃｔｅｒｉａ）、肺結核７４３（ｔｕｂｅｒｃｕｌｏｓｉｓ）が表示されている。また、その他７４４の詳細分類の病名として気管支拡張症７４５（ｂｒｏｎｃｈｉｅｃｔａｓｉｓ）が表示されている。
また、大分類の病名及び詳細分類の病名の横には、その病名の症例数が表示されている。ユーザは、この病名リスト表示領域７３０における大分類の病名または詳細分類の病名の任意の行を選択することで、症例表示領域７１０に表示される類似症例を絞り込むことができる。図６に示すように類似症例の検索直後の状態では、多様な疾患を含む６２個の類似症例が表示対象になっているが、図１７の真菌症７３１の行がマウスでクリックされた場合、表示制御部１０４は、図１８に示すように真菌症の類似症例を症例表示領域７１０に表示する。また、図１７の転移性肺癌７３６の行がマウスでクリックされた場合は、表示制御部１０４は、図１９に示すように、転移性肺癌の類似症例を症例表示領域７１０に表示する。
この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例がどのような絞り込み条件であるが分かるように、表示条件表示領域７１４に、絞り込んだ病名を表示する。図１８は、「真菌症」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。図１９は、「転移性肺癌」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。
図１８の例では、「真菌症」で絞り込みがかけられたため、表示条件表示領域７１４には「真菌症」と表示され、図１９の例では「転移性肺癌」で絞り込みがかけられたため、表示条件表示領域７１４には「転移性肺癌」と表示されている。
また、この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例の件数が分かるように、検索結果件数表示領域７１３にその件数を表示する。図１８の例では、「真菌症」に該当する類似症例は１４件であったため、検索結果件数表示領域７１３には１４件と表示され、図１９の例では、「転移性肺癌」に該当する類似症例は３件であったため、検索結果件数表示領域７１３には３件と表示されている。
この機能により、画像診断の対象として医師が想定する病名の類似症例が症例表示領域７１０に表示され、医師は、診断対象症例が想定した病名と矛盾しないかどうかを容易に確認できる。
図１８では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図１８ではＭ＝１４）の類似症例のサムネイル画像が表示されている。
図６に示す基本画面Ｋ２の左側の中段には、「病変分布」との見出しが付けられた分布リスト表示領域７５０が配置されている。分布リスト表示領域７５０には、類似症例を検索した結果、症例検索システム３００から取得された全ての類似症例の病変分布の種類が表示される。
図２０は分布リスト表示領域７５０の拡大図である。図２０の例では、７つの病変分布の名称が表示されており、各病変分布の名称の左側にはチェックボックスが配置されている。図２０の例では病変分布として、びまん性７５１（ｄｉｆｆｕｓｅ）、区域性７５２（ｓｅｇｍｅｎｔａｌ）、気道性７５３（ｂｒｏｎｃｈｉａｌ）、両側性７５４（ｂｉｌａｔｅｒａｌ）、多発性７５５（ｍｕｌｔｉｐｌｅ）、胸膜下７５６（ｓｕｂｐｌｅｕｒａｌ）、及び血行性７５７（ｈｅｍａｔｏｇｅｎｏｕｓ）が表示されている。
これらの病変分布は予め定義されており、各類似症例には、予め、びまん性７５１〜血行性７５７のいずれに該当するか否かを示す分布フラグ値（該当：１、非該当：０）が付与されている。類似症例によっては、全ての分布フラグ値が非該当（：０）に設定されている場合もあれば、複数の分布フラグ値が該当（：１）に設定されている場合もある。
本実施の形態の症例検索システム３００は、ユーザが診断対象症例のスライス画像に設定した関心領域に対し、類似する関心領域を持つ類似症例を検索する。ユーザが関心領域を設定したスライス画像以外にも、病変は存在することもある。そして、ユーザは関心領域を設定したスライス画像で類似症例を検索した後、そのスライス画像以外のスライス画像と、検索された類似症例とを比較したい場合もある。この場合、ユーザは、医用画像ビューワ６１０において、スライス送りの操作を入力して他のスライス画像を表示させ、検索された類似症例と比較する作業を行う。この場合、検索された全ての類似症例のうち注目する病変に関連する類似症例が症例表示領域７１０に表示されていれば、関心領域が設定されたスライス画像以外のスライス画像の中から所望の病変を持つスライス画像を抽出する作業をスムーズに行うことができる。そこで、本実施の形態では、この作業をよりスムーズに行うために、検索された類似症例を所望の病変分布で絞りこむ機能が設けられている。
本実施の形態では、肺野領域内での病変分布として、図２０のびまん性７５１〜血行性７５７で示す病変分布が採用されている。また、図２０のように、チェックボックス及び病名分布の名称について、表示制御部１０４は、絞り込みが可能な病変分布をアクティブ状態で表示し、絞り不可能な病変分布を非アクティブ状態で表示する。ここでは、アクティブ状態としては、輝度が非アクティブ状態に比べて高い状態が採用され、非アクティブ状態としては、輝度がアクティブ状態に比べて低い状態が採用されている。
図２０の例では、びまん性７５１、気道性７５３〜血行性７５７がアクティブ状態で表示され、区域性７５２は、非アクティブ状態で表示されている。これは、現在、類似症例の検索によって取得された全ての類似症例のうち、少なくともいずれか１つの類似症例において、びまん性７５１、気道性７５３〜血行性７５７の分布フラグ値が１（該当）に設定され、取得された全ての類似症例のうち、いずれの類似症例においても、区域性７５２の分布フラグ値が０（非該当）に設定されていたからである。
アクティブ状態のチェックボックスのうち、１以上のチェックボックスにチェックマークが入力されたことを入力制御部１０３が検知すると、表示制御部１０４は、チェックマークが入力された病変条件に該当する類似症例を症例表示領域７１０に表示させる。
なお、区域性７５２については、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）に設定されている。そのため、区域性７５２にチェックマークが入力可能な構成を採用すると、これらの病変分布にチェックマークを入力した場合、症例表示領域７１０には類似症例が何も表示されず、チェックマークを入力する意味が無くなってしまう。そこで、本実施の形態では、このような事態を避けるために、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）である病変分布は非アクティブ状態で表示する。
図２１は、両側性７５４のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２２は、両側性７５４の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２１に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２２に示すように、症例表示領域７１０に、両側性の病変分布を持つ類似症例を表示する。この例では、両側性の病変分布を持つ類似症例は１０件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１０件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「両側性」とを表示する。図２２の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２１に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、図２２に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「両側性」が選択された場合には、肺の両側が観測できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、多発性７５５のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、多発性の病変分布を持つ類似症例を表示する。病変分布名「多発性」が選択された場合には、多発している病変の分布を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、びまん性７５１のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、びまん性の病変分布を持つ類似症例を表示する。病変分布名「びまん性」が選択された場合には、広範囲に広がるびまん性病変の分布を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
同様に、血行性７５７のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、血行性の病変分布を持つ類似症例を表示する。血行性の場合は注目病変以外への病変の転移の可能性がある。したがって、画像全体を確認する必要がある。このため、拡大画像生成部１１２は、拡大率を１．０倍に設定する。表示制御部１０４は、拡大率が１．０倍のサムネイル画像を表示する。
図２３は、気道性７５３のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２４は、気道性７５３の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２３に示すように、両側性７５４のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２４に示すように、症例表示領域７１０に、気道性の病変分布を持つ類似症例を表示する。この例では、気道性の病変分布を持つ類似症例は１２件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１２件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「気道性」とを表示する。図２４の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２３に示すように、気道性７５３のチェックボックスにチェックマークが入力された場合、図２４に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「気道性」が選択された場合には、気道性か否かを判定できるようにする必要がある。そこで、拡大画像生成部１１２は、関心領域の面積が表示領域の２分の１程度になるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
同様に、区域性７５２のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、症例表示領域７１０に、区域性の病変分布を持つ類似症例を表示する。病変分布名「区域性」が選択された場合には、区域性病変の詳細を確認できるようにする必要がある。そこで、拡大画像生成部１１２は、関心領域の面積が表示領域の２分の１程度になるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
図２５は、胸膜下７５６のチェックボックスにチェックマークが入力された分布リスト表示領域７５０を示す図である。図２６は、胸膜下７５６の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図２５に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図２５に示すように、症例表示領域７１０に、胸膜下の病変分布を持つ類似症例を表示する。この例では、胸膜下の病変分布を持つ類似症例は７件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「７件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「胸膜下」とを表示する。図２６の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
図２５に示すように、胸膜下７５６のチェックボックスにチェックマークが入力された場合、図２６に示すように、表示制御部１０４は、症例表示領域７１０において、選択された病変分布に対応する拡大率に拡大画像生成部１１２によって拡大されたサムネイル画像を表示する。病変分布名「胸膜下」が選択された場合には、胸膜との位置関係を観察できるようにする必要がある。そこで、拡大画像生成部１１２は、胸膜が含まれるような拡大率に決定する。表示制御部１０４は、拡大画像生成部１１２によって拡大された各サムネイル画像を表示する。
症例表示領域７１０に表示されているサムネイル画像は、所定の病変分布によって絞り込まれた状態でも、ユーザの操作によって、表示領域を変更することが可能に構成されている。
但し、図２１に示されるように、両側性７５４のチェックボックスにチェックが入れられた場合には、上述のように、表示制御部１０４は、拡大画像生成部１１２によって１．０倍拡大されたサムネイル画像を表示する。このため、図２２に示されるように、元のサムネイル画像全体が表示される。したがって、この場合には、表示領域の変更は行われない。
一方、図２３に示されるように、気道性７５３のチェックボックスにチェックが入れられた場合には、図２４に示されるように、各サムネイル画像は拡大表示される。このため、ユーザによって表示領域の移動が指示されると、サムネイル画像の表示領域が移動される。
図２７は、図２４に示される基本画面Ｋ２が表示された状態でユーザによって行われるドラッグ操作２７０１を概略的に示す図である。ユーザによってドラッグ操作２７０１が行われると、入力制御部１０３は、マウスの移動量を検知し、検知した移動量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、検知されたマウス移動量を用いて、サムネイル画像の表示領域の移動量を決定し、決定した量だけ表示領域を移動したサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２によって移動されたサムネイル画像を症例表示領域７１０に表示する。
また、図２５に示されるように、胸膜下７５６のチェックボックスにチェックが入れられた場合には、図２６に示されるように、各サムネイル画像は拡大表示される。このため、ユーザによって表示領域の移動が指示されると、サムネイル画像の表示領域が移動される。
図２８は、図２６に示される基本画面Ｋ２が表示された状態でユーザによって行われるドラッグ操作２８０１を概略的に示す図である。ユーザによってドラッグ操作２８０１が行われると、入力制御部１０３は、マウスの移動量を検知し、検知した移動量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、検知されたマウス移動量を用いて、サムネイル画像の表示領域の移動量を決定し、決定した量だけ表示領域を移動したサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２によって移動されたサムネイル画像を症例表示領域７１０に表示する。
なお、図２２、図２４、図２６における病変分布選択時の各サムネイル画像に対する拡大処理、表示領域移動処理の詳細は後述する。
図２９は、患者情報１０００のデータ構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報管理部２０２により、患者別に患者情報蓄積部２０１に蓄積されて管理される。患者情報１０００には、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録されている。図２９に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、及び確定診断１９００を備える。
患者ＩＤ１１００は、患者に固有の識別子である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、及び主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、及び主訴である。検査情報１８００は、図３０に示すように、当該患者が過去に受けた１以上の検査に関する情報を表す。
図３０は、図２９に示す検査情報１８００のデータ構成を示す図である。検査情報１８００は、患者に対して行われた検査に関する情報であり、１つの検査に対応して１つずつ作成される。検査情報１８００は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、及び検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別子である。検査日時１８２０は、検査が行われた日時である。検査種１８３０は、検査の種類である。検査の種類としては、例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影等がある。
検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ、及びＧＰＴ等各種指標の値が該当する。また、検査結果１８４０は、各種指標を基に医師が下した判断等も該当する。また、単純Ｘ線撮影やＣＴ撮影等の画像検査であれば、撮影された画像へのポインタ情報や画像診断結果のレポートへのポインタ情報が含まれる。なお、検査で撮影された画像は、ＤＩＣＯＭのフォーマットで医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積される。
また、検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、これらの医用画像データは医用情報管理システム２００の医用画像データ蓄積部２０３が記憶する医用画像データベース２０００に蓄積される。
図３１は、医用画像データベース２０００のデータ構成を示す図である。医用画像データベース２０００は、検査ＩＤ１８１０及びシリーズＩＤ２１００を持つ。１回の検査で、複数の種類の撮影（例えば、単純ＣＴと造影ＣＴ等）が行われる場合があるので、１つの検査ＩＤ１８１０に対し、複数のシリーズＩＤ２１００が対応付けられている場合もある。つまり、撮影の種類に応じた個数のシリーズが得られるのである。
また、シリーズは、撮影の種類以外にも、撮影された画像の再構成の条件毎に得られる。例えば、撮影された画像が肺野条件及び縦隔条件で再構成された場合、これらの条件毎に１つのシリーズが得られる。なお、肺野条件で再構成された画像は肺の中の血管、気管支、及び肺胞等が強調表示される。また、縦隔条件で再構成された画像は、血管やリンパ節等の縦隔が強調表示される。肺野条件及び縦隔条件は１度の撮影で得られた画像を再構成することで得られるため、単純ＣＴと造影ＣＴとで２度の撮影が行われ、これら２度の撮影のそれぞれにつき肺野条件及び縦隔条件で画像が再構成された場合、２つの肺野条件のシリーズが得られ、２つの縦隔条件のシリーズが得られる。
ＣＴ及びＭＲＩの画像検査の場合、１回の撮影で複数のスライス画像が取得されるので、１つのシリーズＩＤ２１００には、複数のスライスＩＤ２２００が対応付けられている。図３１の検査ＩＤ「１３２２７９８９」には２つのシリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」が対応付けられているため、この検査から２つのシリーズのＣＴ画像が得られたことが分かる。また、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のそれぞれに対して、スライスＩＤ２２００が複数対応付けられていることが分かる。
検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５には、図３２に示すような診断レポート３０００が蓄積される。診断レポート３０００には、各検査に対する医師による診断結果が登録されている。
図３２は、診断レポート３０００のデータ構成を示す図である。診断レポート３０００は、検査ＩＤ１８１０、所見３１００、及び診断３２００を備える。検査ＩＤ１８１０は、図３０で示した検査ＩＤ１８１０と同じである。これにより、診断レポート３０００と検査情報１８００とが対応付けられる。所見３１００は、検査に対する医師の所見を示す文言が登録されている。診断３２００は、検査に対する医師の診断を示す文言が登録されている。
図３３は、類似症例データ４０００のデータ構成を示す図である。類似症例データ４０００は、診断対象症例に対して類似する類似症例を検索する際に参照されるデータであり、１つの類似症例に対応して１つずつ作成されている。なお、類似症例データ４０００は、類似症例の付加情報の一例である。類似症例データ４０００は、症例検索システム３００の類似症例データ蓄積部３０１において、類似症例毎に蓄積されている。図３３に示すように、類似症例データ４０００は、類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、画像特徴データ４４００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、及び確定診断（詳細分類病名）４８００を備える。
類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。ここでは、類似症例のスライス画像に設定された関心領域毎に１つの類似症例データが生成されるため、類似症例ＩＤ４１００は、関心領域の識別子とも言える。図３３の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。
スライスＩＤ４２００は、関心領域が設定されたスライス画像の識別子であり、図３１に示すスライスＩＤ２２００と同一である。関心領域情報４３００は、スライス画像に設定された関心領域の位置を示す情報である。図３４は、スライス画像３１０１に設定された関心領域ＲＯＩを模式的に示した図である。図３４の例では、関心領域ＲＯＩは矩形状に設定されている。したがって、関心領域情報４３００は、関心領域ＲＯＩの左上の頂点の座標（ｘｌ，ｙｔ）と、右下の頂点の座標（ｘｒ，ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域情報４３００として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域情報４３００として採用される。
画像特徴データ４４００は、関心領域情報４３００で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４５００は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。ここで、サムネイル画像データ４５００は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。
病変分布情報４６００は、対象となる類似症例が予め定められたびまん性４６１０〜血行性４６７０で表される病変分布のいずれに該当するか否かを表す分布フラグ値（１：該当、０：非該当）である。
確定診断（大分類病名）４７００は、対象となる類似症例に対して確定された大分類の病名である。確定診断（大分類名）４７００は、類似症例を大分類の病名で絞り込む際に使用される。
確定診断（詳細分類病名）４８００は、対象となる類似症例に対して確定された詳細分類の病名である。確定診断（詳細分類病名）４８００は、類似症例を小分類の病名で絞り込む際に使用される。
予め、確定診断（大分類病名）４７００は、確定診断（詳細分類病名）４８００に対して一意に対応する大分類病名が定義されており、その対応関係を用いて類似症例データ４０００に格納されている。
確定診断（詳細分類病名）４８００は、医用画像データ蓄積部２０３において、図３１に示すスライスＩＤ２２００からシリーズＩＤ２１００が特定される。そして、特定されたシリーズＩＤから患者情報蓄積部２０１において、検査ＩＤ１８１０が特定され、検査ＩＤ１８１０から対応する患者情報１０００（図２９）が特定され、特定された患者情報１０００から該当する患者の確定診断１９００が特定される。
次に、情報端末１００が医用情報管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。
図３５は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００に対して類似症例検索の要求を行い、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。なお、図３５において、シーケンス図の左側に示す２列の矩形は、該当するステップの処理によりディスプレイ１０１ａ、１０１ｂに表示される画面を示す。また、図３５において、情報端末の「Ａ」は、医用情報管理アプリケーションを示し、「Ｂ」は、類似症例検索アプリケーションを示す。このシーケンスが開始される前に医用情報管理アプリケーションは予め起動されているものとする。
まず、情報端末１００は、操作部１０２を通してユーザ（読影を行う医師）の読影対象となる検査リストの表示要求を受け付け、入力制御部１０３及び通信制御部１１０を通して、医用情報管理システム２００の通信制御部２０６へ検査リストの表示要求を送信する（Ｓ５１０）。
医用情報管理システム２００の患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成する。そして、患者情報管理部２０２は、通信制御部２０６を通して、生成した検査リストを情報端末１００の通信制御部１１０に送信する（Ｓ５２０）。ここで、検査リストには、該当する患者の患者情報１０００及び検査情報１８００が含まれる。
情報端末１００の表示制御部１０４は、通信制御部１１０で受信された検査リストをディスプレイ１０１に表示する（Ｓ５３０）。
この場合、ディスプレイ１０１ａに検査リストが表示され、ディスプレイ１０１ｂには何も表示されない。
図３６は、検査リストの画面図である。検査リストは、読影が未終了の検査を表示する領域８００と、検査に含まれるシリーズに関する情報を表示する領域８１０とを備える。領域８００には、「患者ＩＤ」、「患者氏名」、「検査日時」、「検査ＩＤ」、及び「検査種」の欄が設けられている。「患者ＩＤ」、「患者氏名」の欄には、患者情報１０００に登録された患者ＩＤ１１００及び氏名１２００が表示され、「検査日時」、「検査ＩＤ」、及び「検査種」の欄には、検査情報１８００に登録された検査日時１８２０、検査ＩＤ１８１０、及び検査種１８３０が表示される。領域８１０は、領域８００でユーザにより選択された検査の詳細を表示するための領域であり、「シリーズＩＤ」、「定義」、及び「画像」の欄が設けられている。ここでは、領域８００においてユーザにより検査（行に対応）が選択されていないために、領域８１０には何も表示されていない。
ユーザは、領域８００に表示された検査の中から、これから読影を行う検査を選択する。この選択が入力制御部１０３で検知されると、図３５に示すように、通信制御部１１０は、選択された検査の検査ＩＤに含まれる全シリーズの表示要求を、医用情報管理システム２００へ送信する（Ｓ５４０）。
医用情報管理システム２００の通信制御部２０６がこの表示要求を受信すると、患者情報管理部２０２は、図３１に示す医用画像データベース２０００を参照し、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像を取得し、通信制御部２０６を通して、情報端末１００に送信する（Ｓ５５０）。例えば、図３１の例において、検査ＩＤ「１３２２７９８９」の検査がユーザにより選択されると、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のシリーズに含まれる全てのスライス画像がＳ５５０で送信される。
情報端末１００の通信制御部１１０が全シリーズの画像を取得すると、表示制御部１０４は、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを領域８１０に表示する（Ｓ５６０）。
この場合、ディスプレイ１０１ａに表示された検査リストの領域８１０には、領域８００で選択された検査に対応するシリーズのシリーズリストが表示され、ディスプレイ１０１ｂには何も表示されない。
図３７は、検査が選択された後の検査リストの画面図である。図３７の領域８００では選択された行の背後にハイライトが付されている。図３７の例では、領域８００において、２行目の「パナ太郎」の検査が選択されている。そのため、領域８１０では、選択された検査についての「シリーズＩＤ」、「定義」、及び「画像」が表示されている。ここで、「シリーズＩＤ」の欄には、医用画像データベース２０００において、選択された検査の検査ＩＤに対応付けられたシリーズＩＤが表示され、「画像」の欄には、表示されたシリーズＩＤを代表する１枚のスライス画像のサムネイル画像が表示される。ここで、シリーズＩＤを代表する１枚のスライス画像としては、所定のスライス位置の画像が採用される。所定のスライス位置としては先頭のスライス位置であってもよいし、中央のスライス位置であってもよい。「定義」は、該当するシリーズに対する撮影条件や再構成の条件を示す。この「定義」は、図示は省略されているが、例えば、図３１の医用画像データベース２０００において、シリーズＩＤと対応付けて登録されている。
領域８１０において、ユーザにより読影対象のシリーズが選択され、その選択を入力制御部１０３が検知すると、表示制御部１０４は、図３８に示すように、選択されたシリーズの先頭のスライス画像をディスプレイ１０１ａに表示する（Ｓ５７０）。図３８は、ユーザによりシリーズが選択された際にディスプレイ１０１ａに表示されるスライス画像を示した図である。図３８は、胸部ＣＴ撮影での先頭スライスを示す図であり、肺尖部よりももう少し頭方向の肩位置でのスライス画像である。ここで、表示制御部１０４は、選択されたシリーズの全てのスライス画像をスライス送りできる状態でディスプレイ１０１ａに表示する。なお、ディスプレイ１０１ｂには何も表示されない。例えば、ユーザにより、ディスプレイ１０１ａ上にマウスポインタが位置決めされマウスホイールを回転するスライス送りの操作が入力され、その操作を入力制御部１０３が検知する。すると、表示制御部１０４は、マウスホイールの回転量に応じて、ディスプレイ１０１ａに表示されたスライス画像を別のスライス位置のスライス画像に切り替える。ユーザは、スライス送りの操作を入力しながら画像診断を行う。そして、ユーザは画像診断に迷った場合、類似症例検索アプリケーションを起動する。
ここで、類似症例検索アプリケーションは、操作部１０２のキーボードにおいて、予め定められたショートカットキーが入力されて起動されてもよいし、マウスの右クリックで医用画像ビューワのメニューを表示させ、そのメニューの中から類似症例検索メニューが指定されて起動されてもよい。類似症例検索アプリケーションの起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、情報端末１００は、関心領域（ＲＯＩ）の受け付け待ち状態になる。
ユーザは、操作部１０２を通して、ディスプレイ１０１ａに表示されたスライス画像上の病変に関心領域（ＲＯＩ）を設定する（Ｓ５８０）。ここで、ユーザは、図３４に示すように、例えば、マウスを左クリックして、スライス画像３１０１における関心領域ＲＯＩの左上の頂点の座標を入力する。そして、ユーザは、左クリックした状態でマウスを右斜め下方向にドラッグし、左クリックを解除することで、関心領域ＲＯＩの右下の頂点を入力すればよい。
関心領域を設定する操作を入力制御部１０３が検知すると、ＲＯＩ管理部１０５は、入力制御部１０３から関心領域の左上及び右下の頂点の座標データを受け取り、受け取った座標データを関心領域情報として生成する。そして、ＲＯＩ管理部１０５は、生成した関心領域情報を通信制御部１１０に送信する（Ｓ５９０）。
同時に、ＲＯＩ管理部１０５は、診断対象症例のスライス画像を通信制御部１１０に送信する（Ｓ６００）。この場合、Ｓ５５０において、情報端末１００が医用情報管理システム２００から受け取った全シリーズのスライス画像のうち、ユーザが選択したシリーズにおいてユーザにより関心領域が設定された１枚のスライス画像（検索クエリ画像）が送信される。
次に、通信制御部１１０は、ＲＯＩ管理部１０５から送信された関心領域情報を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０１）。
同時に、通信制御部１１０は、ＲＯＩ管理部１０５から送信されたスライス画像を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０２）。
ここで、Ｓ６００、Ｓ６０１において、スライス画像そのものを送信するとしたが、スライス画像のスライスＩＤが送信されても構わない。この場合は、スライスＩＤを受信した症例検索システム３００は、そのスライスＩＤを指定して、医用情報管理システム２００からスライス画像を取得すればよい。
次に、症例検索システム３００が類似症例検索を行い、情報端末１００が類似症例検索結果を初期表示するまでの処理を説明する。
図３９は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。
症例検索システム３００の画像特徴抽出部３０２は、検索クエリ画像に設定された関心領域から予め定められた複数次元の画像特徴を抽出する（Ｓ６１０）。
「画像特徴」としては、医用画像における臓器若しくは病変部分の形状に関する画像特徴、又は輝度分布に関する画像特徴等が採用できる。例えば、非特許文献：「根本、清水、萩原、小畑、縄野、“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”、電子情報通信学会論文誌Ｄ−ＩＩ、Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ、Ｎｏ．２、ｐｐ．４１６−４２６、２００５年２月」には、４９０次元の画像特徴を用いることが記載されている。本実施の形態においては、例えば、この非特許文献に記載された画像特徴が採用される。但し、これは一例にすぎず、他の画像特徴が採用されてもよい。
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された各類似症例の画像特徴とを比較する（Ｓ６２０）。ここで、類似症例検索部３０３は、検索クエリ画像から抽出された画像特徴データと、類似症例データ蓄積部３０１に類似症例毎に蓄積された類似症例データ４０００（図３３）に登録された画像特徴データ４４００との距離を算出することで、両画像特徴を比較する。
次に、類似症例検索部３０３は、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の類似症例として決定する（Ｓ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部３０１に蓄積された類似症例データ４０００のうち、送信対象として決定された類似症例の類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００、及び類似症例検索部３０３で算出された距離を情報端末１００に送信する（Ｓ６４０）。
以下、類似症例検索結果が表示された初期の基本画面Ｋ２（図６）を生成する処理が実行される。まず、初期の基本画面Ｋ２において、レイアウト領域７２０を生成する際に使用される管理情報について説明する。
まず、症例検索システム３００の通信制御部３０４は、レイアウト情報を情報端末１００に送信する（Ｓ６５０）。ここで、レイアウト情報は、レイアウト領域７２０を構成する表示ボックスの行数、列数を指定する情報である。
次に、情報端末１００の通信制御部１１０がレイアウト情報を受信すると、表示ボックス管理部１０６は、送信されたレイアウト情報が指定する表示ボックスの行数及び列数を表示ボックス管理情報４４１０（図４０）に登録すると共に、検索クエリ画像のスライスＩＤを表示ボックス管理情報（図４０）に登録する（Ｓ６６０）。
図４０は、表示ボックス管理情報４４１０のデータ構成を示す図である。表示ボックス管理情報４４１０には、行数及び列数が登録されるテーブル４４１１と、各表示ボックスに表示されるスライス画像のスライスＩＤが登録されるテーブル４４１２とが含まれる。したがって、表示ボックス管理部１０６は、症例検索システム３００から送信されたレイアウト情報が指定する行数及び列数をテーブル４４１１の行数及び列数の欄に登録する。また、本実施の形態では、４つの表示ボックス７２１〜７２４のうち、左上の表示ボックス７２１に検索クエリ画像のサムネイル画像が表示される。そこで、表示ボックス管理部１０６は、医用情報管理システム２００から送信された検索クエリ画像のスライスＩＤをテーブル４４１２の１行１列目の項目に登録する。
ここで、レイアウト領域７２０を構成する表示ボックスの行数及び列数のデフォルト値は症例検索システム３００により予め設定されている。ここで、行数及び列数のデフォルト値は例えば２行及び２列である。そのため、図４０に示す表示ボックス管理情報４４１０には、「２行２列」が登録されている。
図６の例では、レイアウト領域７２０において、表示ボックス７２１〜７２４は２行２列で表示されている。このレイアウト領域７２０における行数及び列数はユーザが自由に設定できる。
図４１は、表示ボックスが３行２列で設定されたレイアウト領域７２０を持つ基本画面Ｋ２を示す図である。レイアウト領域７２０を構成する表示ボックスをＭ行Ｎ列で一般化すると、Ｍ≠Ｎの場合、ディスプレイ１０１が縦型のディスプレイであれば、Ｍ＞Ｎであることが望ましく、ディスプレイ１０１が横型のディスプレであれば、Ｍ＜Ｎであることが望ましい。
ここで、レイアウト領域７２０を構成する表示ボックスのうち、１つの表示ボックスに対象診断症例のサムネイル画像を表示することが、本実施の形態の重要な特徴の一つである。つまり、類似症例と診断対象症例とを隣接して表示すれば、ユーザは、両症例の類似性の判断がし易くなる。よって、レイアウト領域７２０における表示ボックスの配列は３行３列までにすることが望ましい。
また、表示ボックスの配列が３行２列の場合、２行１列目の表示ボックス或いは２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。また、表示ボックスの配列が２行３列の場合は、１行２列目或いは２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。また、表示ボックスの配列が３行３列の場合は、２行２列目の表示ボックスに検索クエリ画像のサムネイル画像を表示することが好ましい。こうすることで、常に、レイアウト領域７２０には、対象診断症例に対して類似症例が隣接して表示されることになる。
ユーザが設定したレイアウト領域７２０のレイアウト情報は、図４２又は図４３に示すレイアウト管理情報４２００に登録される。
なお、レイアウト管理情報４２００を保存するボックスレイアウト管理部１１１は、症例検索システム３００が備えてもよい。
同じユーザであっても情報端末１００のディスプレイ１０１のサイズや画面のタイプ（縦型又は横型）に適合するようにレイアウト領域７２０のレイアウトが変更されることもある。そのため、図４２に示すように、ユーザが設定したレイアウト情報は、ユーザＩＤと端末ＩＤと関連付けてレイアウト管理情報４２００に登録されてもよい。図４２は、レイアウト管理情報４２００の一例を示す図である。このレイアウト管理情報４２００では、「ユーザＩＤ」、「端末ＩＤ」、「列数」、「行数」、及び「診断対象症例の位置」とが対応付けられている。ここで、「ユーザＩＤ」は情報端末１００を使用するユーザに対して予め付与されたユーザの識別子である。「端末ＩＤ」は、該当するユーザの使用が想定される情報端末１００の識別子である。
図４２の例では、ユーザＩＤ「Ｕ０１」のユーザは、端末ＩＤ「Ｔ０２」及び「Ｔ０４」の使用が想定されているため、ユーザＩＤ「Ｕ０１」が端末ＩＤ「Ｔ０２」、「Ｔ０４」と対応付けられている。「行数」及び「列数」は該当するユーザが設定したレイアウト領域７２０の行数及び列数が登録されている。「診断対象症例の位置」は、診断対象症例を表示する表示ボックスの位置である。例えば、端末ＩＤ「Ｔ０４」の情報端末１００では、レイアウト領域７２０が２行３列に設定されており、診断対象症例を全ての類似症例と隣接表示させるために、「診断対象症例の位置」として２行１列を示す（２、１）が登録されている。
なお、図４２では、レイアウト情報をユーザＩＤと端末ＩＤと対応付けて管理する態様を示したが、レイアウト情報はユーザＩＤと対応付けて管理されてもよい。図４３は、レイアウト管理情報４２００の一例を示す図である。図４３に示すレイアウト管理情報４２００では、図４２に示すレイアウト管理情報４２００において、「端末ＩＤ」の欄が省かれている。それ以外、図４３のレイアウト管理情報４２００は図４２のレイアウト管理情報４２００と同じである。なお、図４３の態様では、１のユーザは１の情報端末１００の使用が想定されているため、「端末ＩＤ」の欄が省かれている。
なお、レイアウト情報が症例検索システム３００で管理される場合、図３９のＳ６５０において、該当するユーザのレイアウト情報が情報端末１００に送信される。
次に、Ｓ６４０で送信された類似症例データ及びＳ６６０で保存した表示ボックス管理情報４４１０を用いて、表示制御部１０４は、類似症例検索結果が表示された初期の基本画面Ｋ２を生成する（Ｓ６７０）。
この場合、ディスプレイ１０１ｂには図６に示す基本画面Ｋ２が表示される。また、ディスプレイ１０１ａには、検索クエリ画像が表示されている。
図４４は、図３９のＳ６７０に示す初期の基本画面Ｋ２を生成する処理の詳細を示すフローチャートである。
まず、Ｓ１０００にて、表示制御部１０４は、図３９のＳ６４０で受信された類似症例の数をカウントし、カウント値を検索結果件数表示領域７１３に表示する。
次に、Ｓ１１００にて、表示制御部１０４は、表示条件表示領域７１４に、「全疾患」と表示する。ここで、「全疾患」と表示されるのは、初期の基本画面Ｋ２では、ユーザにより病名や病変分布での絞り込みがかけられていないからである。
次に、Ｓ１２００にて、表示制御部１０４は、図３９のＳ６４０で受信された類似症例のうち、症例表示領域７１０にサムネイル画像が表示可能な類似症例の件数分だけ、症例表示領域７１０に類似症例のサムネイル画像を表示すると共に、各サムネイル画像に対応付けて確定診断及び類似度を表示する。
症例表示領域７１０に表示可能な類似症例の件数の最大値は、図６の例では２０である。この最大値は予め定められている。また、この最大値はユーザが自由に変更できる構成にしてもよい。図３９のＳ６４０で受信された類似症例の数が、最大値よりも多い場合、表示制御部１０４は、症例表示領域７１０の右端に縦方向に長尺のスクロールバー７１５を表示する。これにより、ユーザは、スクロールバー７１５を移動させ、初期の基本画面Ｋ２で非表示であった類似症例のサムネイル画像を閲覧できる。
次に、Ｓ１３００にて、病名リストが生成されて表示される。まず、図３９のＳ６４０で受信された類似症例から、病名リストが生成される。病名リストは、Ｓ６４０で受信された類似症例が、確定診断病名毎に分類されたリストである。
ここで、Ｓ６４０で受信された類似症例の件数をＮＣ件とする。病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を用いて、病名リストを生成する。生成された病名リストは、図４６に示すようにテーブル形式のデータとして、病名リスト管理部１０８で管理される。
図４６は、図４４のＳ１３００で生成される病名リストのデータ構成を示す図である。病名リストには、「病名ＩＤ」、「大分類病名」、「詳細分類病名」、「件数」、及び「類似症例ＩＤ」の欄が含まれる。「病名ＩＤ」は、確定診断病名毎に付与される識別子である。ここでは、大分類病名と詳細分類病名との１つの組み合わせに対して１つの病名ＩＤが付与されている。
「大分類病名」は、類似症例データ４０００に登録された確定診断（大分類病名）４７００が示す確定診断病名である。「詳細分類病名」は、類似症例データ４０００に登録された確定診断（詳細分類病名）４８００が示す確定診断病名である。「件数」は、「病名ＩＤ」が示す確定診断病名に該当する類似症例の件数である。「類似症例ＩＤ」は、「病名ＩＤ」が示す病名に該当する類似症例を示す類似症例ＩＤである。
病名リスト管理部１０８は、Ｓ６４０で受信した全ての類似症例データ４０００について、確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を抽出し、両者が同じ類似症例データ４０００を同じ確定診断病名の類似症例として分類する。そして、病名リスト管理部１０８は、確定診断病名が同じ類似症例の件数をカウントし、該当する確定診断病名のレコードの「件数」の欄に登録する。また、病名リスト管理部１０８は、同じ確定診断病名に分類した類似症例の類似症例ＩＤを該当する確定診断病名のレコードの「類似症例ＩＤ」の欄に登録する。
図４６の例では、大分類病名が「腫瘍性」、詳細分類病名が「原発性肺癌」の確定診断病名に対して病名ＩＤ「ＤＩＳ５２８」が付与されている。そして、この確定診断病名に該当する類似症例の件数が１０件であったため、該当するレコードの「件数」の欄に１０が登録され、この確定診断病名に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５８」、「ＳＩＭ５５１」、「ＳＩＭ１２０９」、及び「ＳＩＭ２３４１」等が、該当するレコードの「類似症例ＩＤ」の欄に登録されている。
そして、表示制御部１０４は、このようにして生成された病名リストを用いて病名リスト表示領域７３０を生成し、ディスプレイ１０１に表示する。
図４７、図４８、図４９は、それぞれ、病名リスト表示領域７３０の第１表示例、第２表示例、第３表示例を示した図である。図４７に示すように第１表示例では、類似症例検索の結果得られた類似症例が、詳細分類病名の件数の多い順に件数と対応付けて一覧表示されている。
図４８に示すように第２表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示されている。
図４９に示すように第３表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示され、且つ、大分類病名毎にその中に含まれる詳細分類病名が件数の多い順に件数と対応付けて一覧表示されている。この場合、患確定診断病名が、大分類病名と詳細分類病名との階層構造で表現される。
図５０は、図４８に示す病名リスト表示領域７３０の画面遷移を示す図である。図５０の上段に示すように、一覧表示された大分類病名のうち、１の大分類病名がユーザにより選択される操作を入力制御部１０３が検知すると、表示制御部１０４は、図５０の下段に示すように、選択された大分類病名に属する詳細分類病名を件数が多い順に件数と対応付けて表示する。ここで、ユーザは、例えば、病名リスト表示領域７３０において一覧表示された大分類病名のうち、所望する１の大分類病名を例えばダブルクリック或いはシングルクリックすることで１の大分類病名を選択すればよい。図５０の例では非腫瘍性がダブルクリックされているため、非腫瘍性に属する詳細分類病名が一覧表示されている。
図５０の下段において、詳細分類病名が一覧表示されている領域がユーザによりダブルクリック或いはシングルクリックされると、表示制御部１０４は、該当する領域に表示されていた詳細分類病名を非表示にすればよい。
なお、表示制御部１０４は、病名リスト（図４６）を参照することで、大分類病名に属する詳細分類病名を判定すればよい。例えば、図４６の例では、真菌症に対して、アスペルギルス症及びクリプトコッカス症が対応付けられているため、表示制御部１０４は、真菌症にはアスペルギルス症及びクリプトコッカス症が属すると判断すればよい。
図４４に戻り、Ｓ１４００にて、分布リストが生成されて表示される。まず、Ｓ６４０で受信された類似症例から、分布リストが生成される。分布リストは、Ｓ６４０で受信された類似症例が、病変分布毎に分類されたリストである。
病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている病変分布情報４６００を用いて、分布リストを生成する。生成された分布リストは、図５１に示すようにテーブル形式のデータとして、分布リスト管理部１０９で管理される。
図５１は、図４４のＳ１４００で生成される分布リストのデータ構成を示す図である。分布リストには、「分布名」、「症例数」、及び「類似症例ＩＤ」の欄が含まれる。「分布名」は、びまん性、区域性といった予め定められた複数の病変分布の名称である。「症例数」は、病変分布に該当する類似症例の件数である。「類似症例ＩＤ」は、病変分布に該当する類似症例を示す類似症例ＩＤである。
分布リスト管理部１０９は、Ｓ６４０で受信した全ての類似症例データ４０００について、病変分布情報４６００を抽出し、抽出した病変分布情報４６００において、分布フラグ値に１（該当）が設定されている病変分布の数をカウントし、カウント値を該当する病変分布のレコードの「症例数」の欄に登録する。また、分布リスト管理部１０９は、分布フラグ値に１が設定されている類似症例の類似症例ＩＤを該当する病変分布のレコードの「類似症例ＩＤ」の欄に登録する。
図５１の例では、びまん性に該当する類似症例の件数が３件であったため、びまん性のレコードの「症例数」の欄に３が登録されている。また、びまん性に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５２１」、「ＳＩＭ４１２３」、及び「ＳＩＭ５２２５」がびまん性のレコードの「類似症例ＩＤ」の欄に登録されている。
そして、表示制御部１０４は、このようにして生成された分布リストを用いて分布リスト表示領域７５０を生成し、ディスプレイ１０１に表示する。
図５２は、図５１に示す分布リストを用いて生成された分布リスト表示領域７５０を示す図である。図５１において、区域性及び胸膜下の症例数は０であるため、図５２では、区域性７５２及び胸膜下７５６が非アクティブ状態で表示され、これら以外の病変分布は、症例数が１以上であるため、アクティブ状態で表示されている。
図４４に戻り、Ｓ１５００にて、レイアウト領域７２０が表示される。この処理は、表示制御部１０４によって行われる。
図４５は、図４４に示すＳ１５００の処理を示すフローチャートである。Ｓ１５１０にて、表示制御部１０４は、レイアウト領域７２０を構成する表示ボックスの行数及び列数を、Ｓ６６０で設定された表示ボックス管理情報４４１０から取得する。図４０の表示ボックス管理情報４４１０の例では、行数及び列数として２行２列が設定されているため、「２行２列」という情報が取得される。なお、ユーザが表示ボックスの行数及び列数を変更した場合、レイアウト領域７２０を構成する表示ボックスの行数及び列数は、図４２又は図４３に示すレイアウト管理情報４２００から取得される。
次に、Ｓ１５２０にて、表示制御部１０４は、Ｓ１５１０で取得した表示ボックスの行数及び列数に合わせて、表示ボックスを描画する。
最後に、Ｓ１５３０にて、表示制御部１０４は、表示ボックス管理情報４４１０から各表示ボックスのスライスＩＤを特定し、特定したスライスＩＤに対応するサムネイル画像を、対応する各表示ボックス内に描画する。
図４０の例では、１行１列目の表示ボックスに診断対象症例のスライスＩＤが格納されている。そのため、表示制御部１０４は、図３５のＳ６００で送信された診断対象症例のスライス画像からサムネイル画像を生成し、生成したサムネイル画像を表示ボックス７２１に描画する。
この段階では、残りの表示ボックス（１行２列目、２行１列目、２行２列目の表示ボックス７２２、７２３、７２４）にはスライスＩＤが格納されていないため、表示制御部１０４は、これらの表示ボックスに何も表示しない。これらの表示ボックスには、後述する処理により、類似症例のサムネイル画像が表示されることになる。
図３９に戻り、通信制御部１１０は、表示ボックス管理部１０６に格納された表示ボックス管理情報４４１０を表示制御部１０４に送信する（Ｓ６８０）。
次に、表示制御部１０４は、レイアウト領域７２０の表示状態及びレイアウトと同じ表示状態及びレイアウトで医用画像ビューワを起動させる（Ｓ６９０）。
ここでは、症例検索システム３００が画像特徴を抽出する例を示したが、情報端末１００が画像特徴を抽出してもよい。図５３は、症例検索システム３００が画像特徴を抽出する態様を採用した場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００のブロック図である。
図２との違いは、情報端末１００に画像特徴抽出部１１３が追加された点、及び症例検索システム３００から画像特徴抽出部３０２が省かれた点にある。
図５４は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
図３５との違いは、ＲＯＩ管理部１０５が、診断対象症例のスライス画像を通信制御部１１０に送信する処理（Ｓ６００）の後、画像特徴の抽出が情報端末１００で行われ（Ｓ６０３）、抽出された画像特徴が症例検索システム３００に送信（Ｓ６０４）されている点にある。画像特徴の抽出（Ｓ６０４）の処理内容は、画像特徴の抽出が症例検索システム３００で行われる場合と同様である。
図５５は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。図３９との違いは、画像特徴の抽出が情報端末１００側で行われるため、図５５では、図３９にはあった画像特徴の抽出（Ｓ６１０）が省かれている点にある。
次に、図８〜図１１を用いて説明された、症例表示領域７１０に表示されているサムネイル画像の拡大処理を説明する。
図５６は、症例表示領域７１０に表示されているサムネイル画像の拡大処理を示すフローチャートである。
Ｓ４０００では、拡大画像生成部１１２は、ユーザが選択したサムネイル画像（図８では１行４列目）の類似症例ＩＤ４１００（図３３）を取得する。以下では、ユーザが選択したサムネイル画像を基準サムネイル画像と呼ぶ。拡大画像生成部１１２は、この基準サムネイル画像に対するユーザの拡大操作と連動させて、症例表示領域７１０に表示されている他のサムネイル画像の拡大率を決定する。
Ｓ４１００では、拡大画像生成部１１２は、ユーザが操作部１０２に入力した基準サムネイル画像に対する拡大操作の操作量を、入力制御部１０３から取得する。そして、拡大画像生成部１１２は、取得した操作量に基づき、基準サムネイル画像に対する拡大率を決定する。
具体的には、入力制御部１０３は、操作部１０２に拡大操作として入力されるマウスのホイールの回転量を検知する。入力制御部１０３は、検知した回転量を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、回転量に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出する。
上述のように、ユーザによる拡大操作は、キーボードの上方向キーまたは下方向キーでもよい。この場合には、入力制御部１０３は、キーの押下時間を検知してもよい。拡大画像生成部１１２は、キーの押下時間に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出してもよい。
Ｓ４２００では、拡大画像生成部１１２は、症例検索システム３００から取得した多数の類似症例のうち、拡大処理を行う対象の類似症例を決定する。表示制御部１０４は、図６に示されるように、症例検索システム３００の類似症例検索部３０３により検索されたＮＣ件（図６ではＮＣ＝６２）の類似症例データ中の、症例表示領域７１０で予め定められた最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の類似症例のサムネイル画像を症例表示領域７１０に表示している。
本ステップでは、拡大画像生成部１１２は、ユーザが選択したサムネイル画像を含むようにＮＤ以下の範囲で拡大処理を行う対象の類似症例を決定する。この実施の形態では、拡大画像生成部１１２は、拡大処理を行う対象をＮＺ個の類似症例に決定する。ここで、ＮＺ≦ＮＤである。本ステップにより、ＮＣ件の全ての類似症例のサムネイル画像を拡大する場合と比較して、情報端末１００における処理負荷を軽減することができる。
Ｓ４３００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＺに到達するまで（Ｓ４３００でＹＥＳ）、Ｓ４４００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４４００、Ｓ４５００の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＺを超えると（Ｓ４３００でＮＯ）、図５６の処理は終了する。
Ｓ４４００では、拡大画像生成部１１２は、拡大対象の類似症例ｉのサムネイル画像の拡大率を算出する。Ｓ４１００で決定した基準サムネイル画像に対する拡大率と、基準サムネイル画像に対応する類似症例の関心領域情報４３００（図３３）と、拡大対象の類似症例ｉの関心領域情報４３００（図３３）とに基づき、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率を算出する。
図５７は、図５６のＳ４４００のサブルーチンの処理を示すフローチャートである。
Ｓ４４１０では、拡大画像生成部１１２は、基準サムネイル画像に対応する類似症例の関心領域情報４３００に基づき、基準サムネイル画像の関心領域の面積を算出する。ここで、基準サムネイル画像の関心領域の面積をＳｒとし、関心領域の左上の座標を（ｘｌ、ｙｔ）とし、関心領域の右下の座標を（ｘｒ、ｙｂ）とすると、関心領域の面積Ｓｒは以下の式で算出することができる。
Ｓｒ＝｜ｘｌ−ｘｒ｜×｜ｙｔ−ｙｂ｜
Ｓ４４２０では、拡大画像生成部１１２は、拡大対象の類似症例ｉの関心領域情報４３００に基づき、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積を算出する。ここで、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとし、関心領域の左上の座標を（ｘｌｉ、ｙｔｉ）とし、関心領域の右下の座標を（ｘｒｉ、ｙｂｉ）とすると、関心領域の面積Ｓｉは以下の式で算出することができる。
Ｓｉ＝｜ｘｌｉ−ｘｒｉ｜×｜ｙｔｉ−ｙｂｉ｜
Ｓ４４３０では、拡大画像生成部１１２は、Ｓ４４１０で算出した基準サムネイル画像の関心領域の面積Ｓｒと、Ｓ４４２０で算出した拡大対象の類似症例ｉのサムネイル画像の関心領域の面積Ｓｉと、Ｓ４１００で決定した基準サムネイル画像に対する拡大率とに基づき、拡大対象の類似症例ｉの拡大率を算出する。ここで、基準サムネイル画像に対する拡大率をｋｒとすると、拡大対象の類似症例ｉの拡大率ｋｉは、以下の式で算出することができる。
ｋｉ＝ｋｒ（Ｓｒ／Ｓｉ）
図５８は、拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。図５８の上左図は、拡大処理前の基準サムネイル画像を示す。図５８の上右図は、拡大処理後の基準サムネイル画像を示す。図５８の下左図は、拡大処理前の拡大対象のサムネイル画像を示す。図５８の下右図は、拡大処理後の拡大対象のサムネイル画像を示す。
図５８の上左図に示される基準サムネイル画像を拡大率ｋｒで拡大すると、図５８の上右図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５８の上右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｄの中心位置に一致するように、表示領域７２０ｄを決定する。拡大画像生成部１１２は、表示領域７２０ｄのサイズを拡大処理前の表示領域７２０ｃのサイズと同じサイズに維持している。
図５８の下左図に示される拡大対象のサムネイル画像を拡大率ｋｉで拡大すると、図５８の下右図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５８の下右図において、関心領域ＲＯＩの中心位置が表示領域７２０ｆの中心位置に一致するように、表示領域７２０ｆを決定する。拡大画像生成部１１２は、表示領域７２０ｆのサイズを拡大処理前の表示領域７２０ｅのサイズと同じサイズに維持している。
図５８では、基準サムネイル画像の拡大率ｋｒに対して、関心領域の面積比に応じて拡大対象のサムネイル画像ｉの拡大率ｋｉを決定している。したがって、図５８に示すように、拡大後の関心領域ＲＯＩのサイズが一致している。
図５６に戻って、Ｓ４５００では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率と、類似症例データ４０００（図３３）内の、関心領域情報４３００及びサムネイル画像データ４５００とに基づき、拡大対象の類似症例ｉの拡大されたサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２により生成されたサムネイル画像を表示する。
図５９は、図５６のＳ４５００のサブルーチンの処理を示すフローチャートである。図６０は、拡大率と表示領域との関係を概略的に表す図である。以下、図５９及び図６０を用いて、関心領域の中心位置が拡大されたサムネイル画像の中心位置に一致するように、拡大画像を生成する処理の詳細について説明する。
Ｓ４５１０では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率と、類似症例データ４０００（図３３）内のサムネイル画像データ４５００とに基づき、拡大画像を生成する。拡大率がｋｉ倍の場合は、図６０の左図に示されるサムネイル画像から図６０の右図に示される拡大されたサムネイル画像が生成される。
Ｓ４５２０では、拡大画像生成部１１２は、類似症例データ４０００（図３３）内の関心領域情報４３００と、Ｓ４４００で算出した拡大率とに基づき、拡大後のサムネイル画像における関心領域の中心座標を算出する。ここで、拡大前の関心領域の中心座標を（ｘｃ，ｙｃ）とすると、図６０に示すように、拡大前の関心領域の中心座標に拡大率を掛けて得られる座標（ｋｉ×ｘｃ，ｋｉ×ｙｃ）が拡大後の関心領域の中心座標となる。
Ｓ４５３０では、拡大画像生成部１１２は、Ｓ４５２０で算出した拡大後の関心領域の中心座標（ｋｉ×ｘｃ，ｋｉ×ｙｃ）と、予め定められた表示領域のサイズとから、拡大後のサムネイル画像ｉにおける表示領域を決定する。ここで、図６０の左図に示されるように、表示領域７２０ａは、横寸法ｗ、縦寸法ｈに設定されている。この場合、図６０の右図に示される矩形領域が表示領域７２０ｂとなる。この表示領域７２０ｂの左上座標は（ｋｉ×ｘｃ−ｗ／２，ｋｉ×ｙｃ−ｈ／２）であり、右下座標は（ｋｉ×ｘｃ＋ｗ／２，ｋｉ×ｙｃ＋ｈ／２）である。
Ｓ４５４０では、表示制御部１０４は、拡大画像生成部１１２によりＳ４５１０で生成された拡大画像のうち、Ｓ４５３０で算出された表示領域７２０ｂの画像を、症例表示領域７１０の類似症例ｉの表示領域に表示する。図５９に示される処理により、関心領域の中心位置が表示領域の中心位置となる拡大されたサムネイル画像ｉを生成することが可能となる。
以上の処理により、症例表示領域７１０には、ユーザが指定した任意の拡大率で、サムネイル画像が表示される。ユーザによる一つのサムネイル画像に対する拡大操作で症例表示領域７１０内の全てのサムネイル画像の拡大率を変更できる。このため、ユーザの操作負担が減少する。また、症例表示領域７１０において、関心領域のサイズが揃えられてサムネイル画像が表示される。このため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対して、拡大処理が行われる。このため、システムへの負荷が大幅に軽減される。
次に、情報端末１００に類似症例検索結果のサムネイル画像を拡大表示した後、ユーザの操作によりサムネイル画像の表示領域を変更するまでの処理について説明する。
図６１は、情報端末１００のディスプレイ１０１ｂに類似症例検索結果のサムネイル画像を拡大表示した後、表示領域を変更するまでの処理を示すシーケンス図である。
まず、情報端末１００の入力制御部１０３は、操作部１０２に対するユーザの操作（例えばマウスの左ボタンの操作）によるサムネイル画像の選択を検知する（Ｓ５０００）。
次に、ユーザがマウス位置を変更する（ドラッグ）操作を行うと、入力制御部１０３は、マウスの移動量を検知し、検知したマウスの移動量を拡大画像生成部１１２に通知する（Ｓ５１００）。
続いて、拡大画像生成部１１２は、検知されたマウスの移動量を用いて、サムネイル画像の表示領域の移動量を決定し、決定した量だけ表示領域を移動したサムネイル画像を生成する（Ｓ５２００）。
次いで、表示制御部１０４は、拡大画像生成部１１２によって生成されたサムネイル画像を症例表示領域７１０に表示する（Ｓ５３００）。
上記Ｓ５２００の処理の詳細について説明する。Ｓ５２００の処理は拡大画像生成部１１２により行われる。以下では、まず拡大画像生成部１１２の処理ブロックの詳細について説明し、その後、表示領域の変更処理のフローについて説明する。
図６２は、拡大画像生成部１１２の詳細な構成を示すブロック図である。拡大画像生成部１１２は、入力判定部１１２１、基準拡大率決定部１１２２、対象決定部１１２３、拡大率決定部１１２４、画像拡大部１１２５、第１表示領域決定部１１２６、移動量決定部１１２７、表示画像生成部１１２９、及び第２表示領域決定部１１２８を含む。拡大画像生成部１１２は、拡大率変更処理と表示領域変更処理とを行う。以下、拡大画像生成部１１２の各部について説明する。
入力判定部１１２１は、入力制御部１０３から通知された、操作部１０２に対するユーザの操作内容を判定する。判定した操作内容が拡大率変更操作（例えばマウスのホイールの回転）の場合には、入力判定部１１２１は、その操作量（ホイールの回転量）と操作種類（マウスのホイールの回転）とを、基準拡大率決定部１１２２に出力する。また、入力判定部１１２１は、対象決定部１１２３及び拡大率決定部１１２４に、操作内容情報を出力する。ここで出力される操作内容情報は、拡大率変更を表す情報である。例えば、拡大率変更を表す情報に対応する値として予め設定された値「１」が、入力判定部１１２１から対象決定部１１２３及び拡大率決定部１１２４に出力される。
なお、拡大率変更操作として入力制御部１０３から通知される操作内容は、マウスのホイールの回転操作に限られない。例えば、上述のように、キーボードの上方向キーまたは下方向キーでもよい。その場合には、入力制御部１０３は、上方向キーまたは下方向キーが押されている時間をカウントすればよい。入力判定部１１２１は、上方向キーまたは下方向キーが押されている時間を操作量とすればよい。
判定した操作内容が表示領域変更操作（例えばマウスのドラッグ）の場合には、入力判定部１１２１は、その操作量（例えばマウスのドラッグの開始位置及び終了位置）を移動量決定部１１２７に出力する。また、入力判定部１１２１は、対象決定部１１２３に、操作内容情報を出力する。ここで出力される操作内容情報は、表示領域変更を表す情報である。例えば、表示領域変更を表す情報に対応する値として予め設定された値「２」が、入力判定部１１２１から対象決定部１１２３に出力される。
なお、表示領域変更操作として入力制御部１０３から通知される操作内容は、マウスのドラッグに限られない。例えば、キーボードのコントロールボタン及び方向キーの同時操作でもよい。その場合には、入力制御部１０３は、コントロールボタン及び方向キーが押されている時間をカウントすればよい。入力判定部１１２１は、コントロールボタン及び方向キーが押されている時間を操作量とすればよい。また、入力判定部１１２１は、操作された方向キーの方向を移動方向と判定すればよい。
判定した操作内容が病変分布の選択（分布リスト表示領域７５０のチェックボックスに対するチェックマークの入力）である場合には、入力判定部１１２１は、その選択された病変分布を表す情報を拡大率決定部１１２４に出力する。また、入力判定部１１２１は、対象決定部１１２３に、操作内容情報を出力する。ここで出力される操作内容情報は、病変分布の選択による拡大率変更を表す情報である。例えば、病変分布の選択による拡大率変更を表す情報に対応する値として予め設定された値「３」が、入力判定部１１２１から対象決定部１１２３に出力される。
なお、入力判定部１１２１から拡大率決定部１１２４に出力される情報は、選択された病変分布を表す情報に限られない。後述のように、病変分布は、第１分布情報、第２分布情報、及び第３分布情報に分けられている。そこで、入力判定部１１２１は、選択された病変分布が属する分布情報（第１分布情報、第２分布情報または第３分布情報）を、拡大率決定部１１２４に出力するようにしてもよい。
基準拡大率決定部１１２２は、ユーザが選択したサムネイル画像の拡大率を決定する。基準拡大率決定部１１２２には、上述のように、入力判定部１１２１から、ユーザが操作部１０２を用いて操作した操作量及び操作種類が出力される。基準拡大率決定部１１２２は、入力制御部１０３から、ユーザが選択した領域を表す情報（例えば図１２では２行４列目）を取得する。基準拡大率決定部１１２２は、ユーザが選択したサムネイル画像の類似症例データ４０００（図３３）を参照して、その類似症例ＩＤ４１００を取得する。
基準拡大率決定部１１２２は、操作種類がマウスのホイールの回転の場合には、操作量としてホイールの回転量を取得する。基準拡大率決定部１１２２は、操作種類がキーボードの方向キーの場合は、操作量として方向キーの押下時間を取得する。基準拡大率決定部１１２２は、操作量に予め定められた係数を掛けた値を算出し、算出値を基準サムネイル画像に対する拡大率に決定する。基準拡大率決定部１１２２は、類似症例ＩＤ４１００と決定された拡大率とを拡大率決定部１１２４に出力する。
対象決定部１１２３は、入力判定部１１２１から入力された操作内容情報に基づき、サムネイル画像の拡大処理又は表示領域の変更処理を行う対象とする類似症例を決定する。
操作内容情報が拡大率変更を表す情報の場合には、対象決定部１１２３は、入力制御部１０３から、ユーザが選択した領域を表す情報（例えば図１２では２行４列目）を取得する。対象決定部１１２３は、ユーザが選択したサムネイル画像の類似症例データ４０００（図３３）を参照して、その類似症例ＩＤ４１００を取得する。対象決定部１１２３は、ユーザが選択したサムネイル画像を含むようにＮＤ個以下の類似症例を拡大対象に決定する。対象決定部１１２３は、その個数と類似症例ＩＤ４１００とを拡大率決定部１１２４に出力する。
操作内容情報が表示領域変更を表す情報の場合には、対象決定部１１２３は、拡大率変更処理時に決定した拡大対象の類似症例を、そのまま表示領域変更処理の対象として採用する。
操作内容情報が病変分布の選択による拡大率変更を表す情報の場合には、対象決定部１１２３は、病変分布の選択時に絞り込まれた類似症例ＩＤ４１００と、その個数とを拡大率決定部１１２４に出力する。
拡大率決定部１１２４は、対象決定部１１２３で決定された拡大対象となる類似症例の拡大率を決定する。入力判定部１１２１から、操作内容情報として選択された病変分布を表す情報が入力されている場合には、拡大率決定部１１２４は、選択された病変分布に対応する所定の拡大率を算出する。拡大率決定部１１２４は、決定した拡大率と、対象決定部１１２３から入力された拡大対象の類似症例ＩＤ４１００及びその個数とを画像拡大部１１２５に出力する。病変分布に対応する所定の拡大率は、上記図２１〜図２６を参照して説明された通りである。
入力判定部１１２１から、操作内容情報として拡大率変更を表す情報が入力されている場合には、拡大率決定部１１２４は、対象決定部１１２３から入力された拡大対象の類似症例ＩＤ４１００（図３３）に対応する関心領域情報４３００を抽出する。拡大率決定部１１２４は、抽出した関心領域情報４３００と、基準拡大率決定部１１２２から入力された基準サムネイル画像に対する拡大率とを用いて、上記図５７で説明された手順により、各類似症例の拡大率を算出する。拡大率決定部１１２４は、算出された拡大率と、拡大対象の類似症例ＩＤ４１００及びその個数とを画像拡大部１１２５に出力する。
画像拡大部１１２５は、拡大率決定部１１２４から入力された拡大率と、拡大対象の類似症例ＩＤ４１００及びその個数とを用いて、入力された類似症例ＩＤ４１００のサムネイル画像を拡大したサムネイル画像を生成する。画像拡大部１１２５は、生成した拡大されたサムネイル画像を表示画像生成部１１２９に出力する。
第１表示領域決定部１１２６は、拡大対象となる類似症例の拡大後のサムネイル画像における表示領域を決定する。第１表示領域決定部１１２６は、拡大率決定部１１２４から入力された拡大対象の類似症例ＩＤ４１００（図３３）に対応する関心領域情報４３００を抽出する。第１表示領域決定部１１２６は、拡大率決定部１１２４から入力された拡大率と、抽出した関心領域情報４３００とを用いて、上記図５９のＳ４５２０，Ｓ４５３０の手順により、拡大後のサムネイル画像における表示領域の座標を算出する。第１表示領域決定部１１２６は、拡大対象の類似症例ＩＤ４１００と、対応する表示領域の座標とを、表示画像生成部１１２９及び第２表示領域決定部１１２８に出力する。
移動量決定部１１２７は、拡大後のサムネイル画像における表示領域の移動量を決定する。移動量決定部１１２７は、入力判定部１１２１から入力された操作量（例えばマウスのドラッグの開始位置及び終了位置）に、予め定められた係数を掛けた値を算出し、この算出値を拡大後のサムネイル画像における表示領域の移動量に決定する。
例えば、ユーザによる操作部１０２の操作がマウスのドラッグである場合を考える。また、ｘ方向の係数がａと定義され、ｙ方向の係数がｂと定義され、ドラッグの開始位置がｐｓ（ｘｓ，ｙｓ）と定義され、ドラッグの終了位置がｐｅ（ｘｅ，ｙｅ）と定義される。この場合、移動量ｄは、下式で表される。
ｄ（ａ（ｘｅ−ｘｓ），ｂ（ｙｅ−ｙｓ））
移動量決定部１１２７は、算出した移動量を第２表示領域決定部１１２８に出力する。
図６３は、拡大後のサムネイル画像における表示領域の移動を概略的に表す図である。図６３の左図は、図６０の右図に相当し、拡大後のサムネイル画像を示す。図６３の右図は、図６３の左図から移動された表示領域を示す。
図６３の左図では、拡大後のサムネイル画像の表示領域Ａ６３１の中心座標が下式で表されている。
（ｋｉ×ｘｄ，ｋｉ×ｙｄ）
このサムネイル画像の表示領域が、図６３の左図の状態から上記移動量ｄだけ移動した場合には、図６３の右図に示される移動後の表示領域Ａ６３２の中心座標は、下式で表される。
（ｋｉ×ｘｄ＋ａ（ｘｅ−ｘｓ），ｋｉ×ｙｄ＋ｂ（ｙｅ−ｙｓ））
このとき、表示領域Ａ６３１，Ａ６３２のサイズに変更はなく、拡大されたサムネイル画像に対する表示領域の位置が変更される。
図６２に戻り、第２表示領域決定部１１２８は、表示領域の移動時における類似症例のサムネイル画像の表示領域を決定する。第２表示領域決定部１１２８は、移動量決定部１１２７から入力された移動量と、第１表示領域決定部１１２６から入力された、拡大対象の類似症例ＩＤ４１００に対応する表示領域とを用いて、表示領域が移動した後の表示領域の座標を決定する。第２表示領域決定部１１２８は、決定した表示領域の座標を表示画像生成部１１２９に出力する。
表示画像生成部１１２９は、画像拡大部１１２５、第１表示領域決定部１１２６、及び第２表示領域決定部１１２８から入力された情報において、表示画像に変更がある場合には表示画像を更新する。
具体的には、表示画像生成部１１２９は、画像拡大部１１２５から入力された、拡大対象の類似症例の拡大されたサムネイル画像に対する、第１表示領域決定部１１２６または第２表示領域決定部１１２８から入力された、表示領域の座標の範囲を、拡大されたサムネイル画像として生成する。表示画像生成部１１２９は、その生成したサムネイル画像を表示制御部１０４に出力する。
なお、上述のように、病変分布の選択による拡大率変更が行われた場合において、両側性７５４が選択されたときは（図２１）、拡大率が１．０でサムネイル画像全体が表示されるため（図２２）、表示領域の変更は行われない。図２０において、びまん性７５１、多発性７５５、及び血行性７５７が選択されたときも同様である。これらの「びまん性」、「両側性」、「多発性」、及び「血行性」の病変分布は、第１分布情報（後述）に属する。すなわち、第１分布情報に属する病変分布が選択されたときには、拡大率が１．０でサムネイル画像全体が表示され、表示領域の変更は行われない。
したがって、第１分布情報に属する病変分布の選択により拡大率変更が行われた場合には、入力判定部１１２１は、判定した操作内容が表示領域変更操作であっても、その操作量を移動量決定部１１２７に出力しなくてもよい。また、対象決定部１１２３は、いずれの類似症例も、表示領域変更処理の対象にしないと決定してもよい。
次に、拡大されたサムネイル画像の表示領域の変更処理の流れについて説明する。
図６４は、拡大されたサムネイル画像の表示領域の変更処理を示すフローチャートである。Ｓ６０００では、入力判定部１１２１は、入力制御部１０３から、操作部１０２に対するユーザの操作内容及び操作量を取得する。
Ｓ６１００では、入力判定部１１２１は、Ｓ６０００で取得した操作内容を判定する。判定した操作内容が拡大率変更操作である場合には、処理は、例えば図５６に示される拡大処理に進む。判定した操作内容が病変分布の選択である場合には、処理は、例えば図７１（後述）に示される処理に進む。判定した操作内容が表示領域変更操作である場合には、処理は、Ｓ６２００に進む。
Ｓ６２００では、対象決定部１１２３は、表示領域の変更処理を行う移動対象の類似症例を取得する。この実施の形態では、対象決定部１１２３は、Ｓ６２００において、拡大率変更処理で拡大率を変更した類似症例を移動対象の類似症例として採用する。表示領域の変更処理を行う時には、症例表示領域７１０に、類似症例検索部３０３から受信したＮＣ個の類似症例のうち、症例表示領域７１０に表示可能なＮＤ個（この実施の形態ではＮＤ＝２０）以下のＮＺ個の類似症例のサムネイル画像が拡大表示されている。図１２の例では、２０個のサムネイル画像が拡大表示されている。
Ｓ６３００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＺに到達するまで（Ｓ６３００でＹＥＳ）、Ｓ６４００〜Ｓ６７００の処理を繰り返す。拡大画像生成部１１２は、Ｓ６４００〜Ｓ６７００の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＺを超えると（Ｓ６３００でＮＯ）、図６４の処理は終了する。
Ｓ６４００では、移動量決定部１１２７は、処理対象の類似症例ｉのサムネイル画像の移動量を算出する。移動量決定部１１２７は、入力判定部１１２１から入力された操作量に、予め定められた係数を掛けた値を算出し、この算出値を表示領域の移動量に決定する。
Ｓ６５００では、第２表示領域決定部１１２８は、Ｓ４５３０（図５９）で決定した表示領域と、Ｓ６４００で決定した移動量とから、変更後のサムネイル画像の表示領域を決定する。Ｓ６６００では、表示画像生成部１１２９は、Ｓ４５１０（図５９）で生成された拡大画像を取得する。Ｓ６７００では、表示画像生成部１１２９は、Ｓ６５００で決定した表示領域とＳ６６００で取得した拡大画像とから、表示画像を生成する。
なお、上述のように、第１分布情報に属する病変分布が選択されたときには、表示領域の変更は行われない。したがって、第１分布情報に属する病変分布の選択により拡大率変更が行われた後の場合には、Ｓ６２００において、対象決定部１１２３は、いずれの類似症例も、表示領域変更処理の対象にしないと決定して、処理を終了してもよい。あるいはまた、Ｓ６２００において、対象決定部１１２３は、ＮＺを超える値にインデックスｉを設定して、Ｓ６３００でＮＯとなるようにしてもよい。
なお、拡大画像生成部１１２による表示領域の変更処理は、上記図６２の構成に限られない。次に、表示領域の変更処理の変形例について説明する。以下では、まず拡大画像生成部１１２の処理ブロックの詳細について説明し、その後、表示領域の変更処理のフローについて説明する。
図６５は、図６２と異なる拡大画像生成部１１２の詳細な構成を示すブロック図である。拡大画像生成部１１２は、入力判定部１１２１、基準拡大率決定部１１２２、対象決定部１１２３、拡大率決定部１１２４、移動量決定部１１３０、表示領域決定部１１３１、及び画像拡大部１１３２を含む。図６５では、図６２と同じ処理ブロックには同じ符号が付され、詳細な説明は省略される。
移動量決定部１１３０は、基準拡大率決定部１１２２から、基準サムネイル画像の拡大率を取得する。移動量決定部１１３０は、拡大率決定部１１２４から、決定された各サムネイル画像の拡大率を取得する。移動量決定部１１３０は、入力判定部１１２１から、操作量を取得する。移動量決定部１１３０は、各サムネイル画像の拡大率と操作量とから，拡大前のサムネイル画像における移動量を算出する。移動量決定部１１３０は、算出した移動量と、各サムネイル画像の拡大率とを、表示領域決定部１１３１に出力する。
表示領域決定部１１３１は、第１表示領域決定部１１２６と同様に、拡大対象となる類似症例の拡大後のサムネイル画像における表示領域を決定する。すなわち、表示領域決定部１１３１は、拡大率決定部１１２４から拡大対象の類似症例ＩＤ４１００（図３３）を取得する。表示領域決定部１１３１は、取得した拡大対象の類似症例ＩＤ４１００（図３３）に対応する関心領域情報４３００を抽出する。表示領域決定部１１３１は、拡大率決定部１１２４から入力された拡大率と、抽出した関心領域情報４３００とを用いて、上記図５９のＳ４５２０，Ｓ４５３０の手順により、拡大後のサムネイル画像における表示領域の座標を算出する。
表示領域決定部１１３１は、基準拡大率決定部１１２２から、基準サムネイル画像の拡大率を取得する。表示領域決定部１１３１は、拡大率決定部１１２４から、各サムネイル画像の拡大率を取得する。表示領域決定部１１３１は、移動量決定部１１３０から、拡大前のサムネイル画像における移動量を取得する。表示領域決定部１１３１は、算出した拡大後のサムネイル画像における表示領域の座標と、取得した拡大率とから，移動前の拡大前のサムネイル画像における表示領域の座標を算出する。
表示領域決定部１１３１は、算出した移動前の拡大前のサムネイル画像における表示領域の座標に、取得した拡大前のサムネイル画像における移動量を加えて、移動後の拡大前のサムネイル画像における表示領域の座標を算出する。表示領域決定部１１３１は、算出した移動後の拡大前のサムネイル画像における表示領域の座標を画像拡大部１１３２に出力する。
画像拡大部１１３２は、基準拡大率決定部１１２２から、基準サムネイル画像の拡大率を取得する。画像拡大部１１３２は、拡大率決定部１１２４から、各サムネイル画像の拡大率を取得する。画像拡大部１１３２は、表示領域決定部１１３１から入力された、移動後の拡大前のサムネイル画像における表示領域の座標と、取得した各サムネイル画像の拡大率とから、その表示領域内のサムネイル画像を拡大する。画像拡大部１１３２は、生成した拡大されたサムネイル画像を表示制御部１０４に出力する。
図６６は、図６５の構成を用いた場合の表示領域の変更処理を示すフローチャートである。図６７Ａは、拡大後のサムネイル画像の一例を示す図である。図６７Ｂは、図６７Ａに示されるサムネイル画像の拡大前のサムネイル画像全体を示す図である。図６７Ｃは、拡大前のサムネイル画像における表示領域の移動を概略的に示す図である。なお、図６４と同じステップには同じ符号が付され、詳細な説明は省略される。
Ｓ６８００では、移動量決定部１１３０は、取得した操作量と各サムネイル画像の拡大率とから、拡大前のサムネイル画像における移動量を算出する。
例えば、ユーザによる操作部１０２の操作がマウスのドラッグである場合を考える。また、ｘ方向の係数がａと定義され、ｙ方向の係数がｂと定義され、ドラッグの開始位置がｐｓ（ｘｓ，ｙｓ）と定義され、ドラッグの終了位置がｐｅ（ｘｅ，ｙｅ）と定義される。この場合、表示領域の位置を移動させると、拡大後のサムネイル画像におけるｘ，ｙ方向の移動量ｄａは下式で表される。
ｄａ＝（ａ（ｘｅ−ｘｓ），ｂ（ｙｅ−ｙｓ））
また、拡大前のサムネイル画像におけるｘ，ｙ方向の移動量ｄｂは下式で表される。
ｄｂ＝（ａ（ｘｅ−ｘｓ）／ｋｉ，ｂ（ｙｅ−ｙｓ）／ｋｉ）
Ｓ６９００では、表示領域決定部１１３１は、算出した移動前の拡大前のサムネイル画像における表示領域の座標に、移動量決定部１１３０から入力された、拡大前のサムネイル画像における移動量を加えて、移動後の拡大前のサムネイル画像における表示領域の座標を算出する。
図６７Ａに示すように、拡大後のサムネイル画像の表示領域の中心座標が（ｘｄｐ，ｙｄｐ）と定義され、このサムネイル画像の拡大率がｋｉと定義される。この場合、図６７Ｂに示される拡大前のサムネイル画像における中心座標Ｃ６７Ｂは、下式で表される。
（ｘｄｐ／ｋｉ，ｙｄｐ／ｋｉ）
図６７Ｃの左図に示される、ユーザによる移動操作後の拡大前のサムネイル画像における表示領域の中心座標Ｃ６７Ｃは、上記移動量ｄｂを用いると、下式で表される。
（ｘｄｐ／ｋｉ＋ａ（ｘｅ−ｘｓ）／ｋｉ，ｙｄｐ／ｋｉ＋ｂ（ｙｅ−ｙｓ）／ｋｉ）
したがって、拡大前のサムネイル画像における移動後の表示領域は、図６７Ｃの左図に示されるサムネイル画像における矩形領域Ａ６７Ｃとなる。この矩形領域Ａ６７Ｃの右下座標Ｒ６７Ｃは、下式で表される。
（ｘｄｐ／ｋｉ＋ａ（ｘｅ−ｘｓ）＋ｗｄ／２ｋｉ，ｙｄｐ／ｋｉ＋ｂ（ｙｅ−ｙｓ）／ｋｉ＋ｈｄ／２ｋｉ）
図６６に戻って、Ｓ７０００では、画像拡大部１１３２は、表示領域決定部１１３１から入力された、移動後の拡大前のサムネイル画像における表示領域の座標と、取得した各サムネイル画像の拡大率とから、その表示領域における拡大されたサムネイル画像を生成する。すなわち、画像拡大部１１３２は、図６７Ｃの左図に示す矩形領域Ａ６７Ｃ内の画素値を拡大対象とし、サムネイル画像を拡大して、図６７Ｃの右図に示す拡大されたサムネイル画像を生成する。
次に、症例表示領域７１０に拡大されたサムネイル画像が表示された後に、ユーザがスクロールバー７１５を操作した場合のサムネイル画像の拡大処理の流れを説明する。なお、この実施の形態では、図１０または図１１に示されるように、症例表示領域７１０に表示されているサムネイル画像の全てが拡大されている。
図６８は、拡大されたサムネイル画像が症例表示領域７１０に表示された後に、ユーザがスクロールバー７１５を操作した場合のサムネイル画像の拡大処理を示すフローチャートである。図６９は、拡大されたサムネイル画像が症例表示領域７１０に表示された状態の基本画面Ｋ２を示す図である。
図６９に示される状態において、ユーザがスクロールバー７１５を下向きに操作すると、その操作量を入力制御部１０３が検知し、検知した操作量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、図６８の処理を開始する。
Ｓ４６００では、拡大画像生成部１１２は、ユーザによるスクロールバー７１５の操作によって、新たに症例表示領域７１０に表示される症例数Ｎｓを取得する。具体的には、拡大画像生成部１１２は、症例表示領域７１０で予め定められた最大表示件数ＮＤを表示制御部１０４から取得する。この実施形態では、図６に示されるように、最大表示件数ＮＤは、４行５列の２０件である。したがって、新たに５個のサムネイル画像が表示対象となるため、拡大画像生成部１１２は、Ｎｓ＝５を取得する。
また、Ｓ４６００では、拡大画像生成部１１２は、新たに症例表示領域７１０に表示されるサムネイル画像の類似症例ＩＤを特定する。このとき、拡大画像生成部１１２は、症例検索システム３００の類似症例検索部３０３から受信した類似症例の類似度を参照する。現在は、表示制御部１０４は、類似度の最も高い類似症例からＮＤ件の類似症例のサムネイル画像を表示している。そこで、拡大画像生成部１１２は、類似度の最も高い類似症例から数えて（ＮＤ＋１）番目から（ＮＤ＋Ｎｓ）番目までの類似症例を拡大対象症例とする。拡大画像生成部１１２は、これらの拡大対象の類似症例ＩＤを特定する。
Ｓ４７００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮｓに到達するまで、Ｓ４８００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４８００、Ｓ４５００の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮｓを超えると（Ｓ４７００でＮＯ）、図６８の処理は終了する。
Ｓ４８００では、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率ｋｉを算出する。すでに症例表示領域７１０には拡大されたサムネイル画像が表示されている。そこで、拡大画像生成部１１２は、図５６のＳ４１００で決定した基準サムネイル画像に対する拡大率ｋｒを用いる。そして、拡大画像生成部１１２は、図５６のＳ４４００と同様にして、拡大対象の類似症例ｉの拡大率ｋｉを算出する。続くＳ４５００は、図５６のＳ４５００と同じであるため、詳細な説明は省略する。図６８の処理により、図７０に示される画面が得られる。
図７０は、拡大されたサムネイル画像が図６９の状態から移動した基本画面Ｋ２を示す図である。図７０に示されるように、症例表示領域７１０に表示されている類似症例のサムネイル画像は、スクロールバー７１５の操作により上方向に移動している。
なお、ユーザがスクロールバー７１５の操作を続けた場合には、拡大画像生成部１１２は、さらに、図６８の処理を実行する。
以上の処理により、類似症例が多数であっても、拡大画像生成部１１２は、スクロールバー７１５の操作により新たに症例表示領域７１０に表示されるサムネイル画像に対して拡大処理を行えばよい。このため、システムへの負荷が大幅に軽減される。
次に、図２１、図２３、図２５に示す分布リスト表示領域７５０に表示された病変分布が選択されたときの拡大処理について説明する。図７１は、分布リスト表示領域７５０に表示された病変分布が選択されたときの処理を示すフローチャートである。
Ｓ２０００では、分布リスト表示領域７５０に表示された病変分布（分布チェック項目）のうち、いずれか１の分布チェック項目を選択する操作を入力制御部１０３が検知すると、拡大画像生成部１１２は、検知された分布チェック項目が第１〜第３分布情報のいずれに該当するかを判定する。第１分布情報の場合、処理がＳ１３０１に進められ、第２分布情報の場合、処理がＳ１３０２に進められ、第３分布情報の場合、処理がＳ１３０３に進められる。
第１分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属するサムネイル画像を選択させるための情報である。ここでは、第１分布情報としては、「両側性」、「多発性」、「びまん性」、及び「血行性」が該当する。よって、第１範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
第２分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域の一部であることを示す所定の第２範囲（第１範囲より低い：第２範囲の上限値が第１範囲の下限値以下）に属するサムネイル画像を選択させるための情報である。ここでは、第２分布情報としては、「気道性」及び「区域性」が該当する。よって、第２範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
第３分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、胸膜の辺縁に存在するサムネイル画像を選択させるための情報である。ここでは、第３分布情報としては、「胸膜下」が該当する。
Ｓ１３０１では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第１分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数（この実施の形態では２０件）以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ１として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉ（ｉは抽出された類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＺ１に到達するまで、Ｓ２１００、Ｓ１５０１の処理を繰り返す。拡大画像生成部１１２は、Ｓ２１００、Ｓ１５０１の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＺ１を超えると（Ｓ１３０１でＮＯ）、図７１の処理は終了する。
Ｓ２１００では、拡大画像生成部１１２は、類似症例ｉについての第１分布情報に対応する第１拡大率を算出する。ここでは、第１拡大率としては、例えば、１．０が採用される。但し、これは一例であり第１分布情報が示す病変分布を診断する際に設定される関心領域の全域が表示領域に収まるような値であれば、１．０以外の拡大率が第１拡大率として採用されてもよい。
Ｓ１５０１では、図５６のＳ４５００と同様に処理が行われる。その結果、表示制御部１０４は、類似症例ｉのサムネイル画像を類似症例ｉの第１拡大率で拡大した画像を症例表示領域７１０に表示する。
上述の図２２では、両側性が選択されている。この場合、類似症例のうち病変分布が両側性に該当する類似症例のサムネイル画像が症例表示領域７１０に表示される。また、この場合、拡大率は１．０であるため、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像が表示されている。すなわち、関心領域ＲＯＩの中心が表示領域６８０１の中心に位置するようにサムネイル画像の表示位置が調整されず、且つ、拡大されずに、サムネイル画像が表示される。
Ｓ１３０２では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第２分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ２として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＺ２に到達するまで、Ｓ２２００、Ｓ１５０２の処理を繰り返す。拡大画像生成部１１２は、Ｓ２２００、Ｓ１５０２の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＺ２を超えると（Ｓ１３０２でＮＯ）、図７１の処理は終了する。
Ｓ２２００では、拡大画像生成部１１２は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報とを用いて、類似症例ｉについての第２分布情報に対応する第２拡大率を算出する。
第２分布情報が選択された場合、拡大画像生成部１１２は、類似症例ｉを、関心領域のサイズが表示領域のサイズの１／２程度になるように、拡大する。そのため、拡大画像生成部１１２は、例えば、下記の数式で類似症例ｉに対する第２拡大率ｋｉを計算する。表示領域の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとすると、第２拡大率ｋｉは以下の式で算出できる。
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ１５０２では、図５６のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像を第２拡大率ｋｉで拡大する。表示制御部１０４は、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０に拡大画像生成部１１２により拡大されたサムネイル画像を表示する。
上述の図２４では、気道性が選択されている。この場合、類似症例のうち病変分布が気道性に該当する類似症例のサムネイル画像が症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域６９０１の中心に位置するように第２拡大率で拡大されている。
Ｓ１３０３では、拡大画像生成部１１２は、類似症例検索により得られた類似症例であって、ユーザが第３分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ３として決定する。そして、拡大画像生成部１１２は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＺ３に到達するまで、Ｓ２３００、Ｓ１５０３の処理を繰り返す。拡大画像生成部１１２は、Ｓ２３００、Ｓ１５０３の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＺ３を超えると（Ｓ１３０３でＮＯ）、図７１の処理は終了する。
Ｓ２３００では、拡大画像生成部１１２は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報と、胸膜領域情報４９００とを用いて、類似症例ｉについての第３分布情報に対応する第３拡大率を算出する。
図７２は、胸膜領域情報４９００が追加された類似症例データ４０００のデータ構成を示す図である。なお、類似症例データ４０００に胸膜領域情報４９００が登録されていない場合、胸膜領域情報４９００が得られない。この場合、拡大画像生成部１１２は、第３拡大率を、第１拡大率と同じ値である１．０に設定すればよい。ここで、胸膜領域情報４９００は、類似症例において、胸膜領域を示す情報である。
Ｓ１５０３では、図５６のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像でを第３拡大率ｋｉで拡大する。表示制御部１０４は、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０に拡大画像生成部１１２により拡大されたサムネイル画像を表示する。
図７３は、胸膜領域７１０１を説明する図である。図７３に示すように、胸膜領域７１０１は、胸膜を含む領域であって、中心が関心領域ＲＯＩの中心に位置し且つ関心領域ＲＯＩよりも少しサイズの大きな矩形状の領域である。ここで、胸膜領域情報４９００には、胸膜領域７１０１の左上の頂点の座標（ｘｐｌ、ｙｐｔ）と右下の頂点の座標（ｘｐｒ、ｙｐｂ）との４値が含まれる。第３分布情報が選択された場合には、胸膜領域を拡大表示するため、拡大画像生成部１１２は、以下の式で第３拡大率ｋｉを計算する。表示領域７１０２の面積をＳｄ、胸膜領域７１０１の面積をＳｐとすると第３拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝Ｓｄ／Ｓｐ
なお、胸膜領域情報４９００は、類似症例データ４０００の作成時に関心領域情報と共にユーザにより入力されてもよい。或いは、胸膜領域情報４９００は、画像処理装置により、スライス画像から肺の領域を自動的に抽出させ、胸膜位置を判定させることで自動的に作成されてもよい。
上述の図２６では、胸膜下が選択されている。この場合、類似症例のうち病変分布が胸膜下に該当する類似症例のサムネイル画像のみが症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域７００１の中心に位置するように第３拡大率で拡大されている。
以上の処理により、症例表示領域７１０には、病変分布に関する診断内容が反映された拡大率でサムネイル画像が表示される。そして、症例表示領域７１０において、関心領域のサイズが揃えられてサムネイル画像が表示される。そのため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対して、拡大処理が行われるため、システムへの負荷が大幅に軽減される。
（実施の形態２）
上記実施の形態１では、ユーザの操作部１０２に対する操作量に応じて、類似症例のサムネイル画像の拡大率を制御している。これに対して、実施の形態２では、基本画面に設けられた拡大率変更ボタンに対するユーザの操作によって、拡大率を制御している。
図７４は、実施の形態２において、類似症例検索により検索された類似症例のサムネイル画像が症例表示領域７１０に表示された状態の基本画面Ｋ２を示す図である。以下では、上記実施の形態１と異なる部分を中心に説明する。
実施の形態２では、基本画面Ｋ２は、拡大率変更ボタン７１６（指示ボタンの一例）を備える。図７４に示されるように、基本画面Ｋ２は、拡大率変更ボタン７１６として、第１指示ボタン７１７、第２指示ボタン７１８、及び第３指示ボタン７１９を含む。
実施の形態２において、拡大率変更ボタン７１６に含まれる第１指示ボタン７１７、第２指示ボタン７１８、及び第３指示ボタン７１９のいずれかをユーザが選択すると、その選択を入力制御部１０３が検知する。すると、入力制御部１０３は、ユーザが選択したボタンの情報を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、通知されたボタンの情報に応じて、症例表示領域７１０に表示されている全てのサムネイル画像の拡大率を変更する。
拡大画像生成部１１２は、第１指示ボタン７１７がユーザにより選択されると、拡大率を１．０と算出する。なお、類似症例検索後の初期の基本画面Ｋ２では、第１指示ボタン７１７が選択された状態になっている。このため、図７４の基本画面Ｋ２におけるサムネイル画像の拡大率は１．０倍である。また、図７４では、表示制御部１０４は、第１指示ボタン７１７の色を変更している。
図７５は、第２指示ボタン７１８がユーザにより選択された場合の基本画面Ｋ２を示す図である。図７６は、第３指示ボタン７１９がユーザにより選択された場合の基本画面Ｋ２を示す図である。
図７５では、表示制御部１０４は、第２指示ボタン７１８の色を変更している。また、図７６では、表示制御部１０４は、第３指示ボタン７１９の色を変更している。
拡大画像生成部１１２は、図７４または図７６に示される基本画面Ｋ２において、第２指示ボタン７１８がユーザにより選択されると、図７５に示されるように、関心領域ＲＯＩのサイズが表示領域５８０１のサイズの１／２程度に拡大されるように、各サムネイル画像の拡大率を算出する。
拡大画像生成部１１２は、図７４または図７５に示される基本画面Ｋ２において、第３指示ボタン７１９がユーザにより選択されると、図７６に示されるように、関心領域ＲＯＩのサイズが表示領域５９０１のサイズと同程度に拡大されるように、各サムネイル画像の拡大率を算出する。
図７５、図７６では、最大表示件数ＮＤ（この実施の形態ではＮＤ＝２０）の症例表示領域７１０に、Ｍ個（図７５、図７６ではＭ＝２０）の類似症例のサムネイル画像が表示されており、Ｍ個（図７５、図７６では２０個）のサムネイル画像が拡大されている。このように、実施の形態２では、症例表示領域７１０に表示されている全てのサムネイル画像が拡大されている。例えば図１８のようにＭ＝１４の場合には、１４個全てのサムネイル画像が拡大されることになる。
図７７は、第２指示ボタン７１８がユーザにより選択された場合の基本画面Ｋ２（図７５）が表示された状態でユーザによって行われるドラッグ操作７７０１を概略的に示す図である。図７８は、第３指示ボタン７１９がユーザにより選択された場合の基本画面Ｋ２（図７６）が表示された状態でユーザによって行われるドラッグ操作７７０１を概略的に示す図である。
図７７、図７８に示すように、ユーザは、拡大されたサムネイル画像の一つを症例表示領域７１０から選択する。図７７、図７８では、３行３列目の表示領域７７０２のサムネイル画像が選択されている。この状態で、ユーザによってドラッグ操作７７０１が行われると、入力制御部１０３は、マウスの移動量を検知し、検知した移動量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、検知されたマウス移動量を用いて、サムネイル画像の表示領域の移動量を決定し、決定した量だけ表示領域を移動したサムネイル画像を生成する。表示制御部１０４は、拡大画像生成部１１２によって移動されたサムネイル画像を症例表示領域７１０に表示する。
具体的には、図７７、図７８に示されるように、ユーザがマウスのドラッグ操作７７０１を左向きに行った場合には、症例表示領域７１０に拡大表示されている２０個のサムネイル画像の表示領域は、対応関心領域ＣＲＯＩのより右側が表示されるように移動する。これにより、ユーザは症例表示領域７１０で拡大表示されている２０個の類似症例を個々に移動操作をする必要がなくなり、操作数を大幅に削減できる。
次に、ユーザが拡大率変更ボタン７１６の選択を行ったときの拡大処理について説明する。
図７９は、ユーザが拡大率変更ボタン７１６の選択を行ったときの拡大処理を示すフローチャートである。
Ｓ２８００では、拡大画像生成部１１２は、類似症例検索により取得した多数の類似症例のうち、拡大処理を行う対象を決定する。
実施の形態２では、実施の形態１の図５６のＳ４１００のような、基準となる類似症例のサムネイル画像の選択がユーザにより行われず、拡大率変更ボタン７１６の選択がユーザにより行われる。そのため、拡大画像生成部１１２は、ユーザによる拡大率変更ボタン７１６の選択時に症例表示領域７１０に表示されている全ての類似症例を、拡大処理を行う対象とする。そこで、拡大画像生成部１１２は、症例表示領域７１０に表示されている全てのサムネイル画像の類似症例ＩＤを、類似症例データ４０００（図３３）から取得する。
Ｓ２４００では、拡大画像生成部１１２は、入力制御部１０３から通知されたボタンの情報に基づき、ユーザが選択したボタンの種類を判定する。ユーザにより選択されたボタン種が第１指示ボタン７１７の場合はＳ２４５１に進み、選択されたボタン種が第２指示ボタン７１８の場合はＳ２４５２に進み、選択されたボタン種が第３指示ボタン７１９の場合はＳ２５４３に進む。
Ｓ２４５１では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＤに到達するまで、Ｓ２５００、Ｓ４５０１の処理を繰り返す。拡大画像生成部１１２は、Ｓ２５００、Ｓ４５０１の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＤを超えると（Ｓ２４５１でＮＯ）、図７９の処理は終了する。
Ｓ２５００では、第１指示ボタン７１７がユーザにより選択されている。このため、Ｓ２５００では、拡大画像生成部１１２は、拡大率を１．０として算出する。
Ｓ４５０１では、図５６のＳ４５００と同様に処理が行われる。その結果、拡大率は１．０であるため、表示制御部１０４は、図７４に示されるように、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像を表示する。
Ｓ２４５２では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＤに到達するまで、Ｓ２６００、Ｓ４５０２の処理を繰り返す。拡大画像生成部１１２は、Ｓ２６００、Ｓ４５０２の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＤを超えると（Ｓ２４５２でＮＯ）、図７９の処理は終了する。
Ｓ２６００では、第２指示ボタン７１８がユーザにより選択されている。このため、Ｓ２６００では、拡大画像生成部１１２は、上述のように、関心領域のサイズが表示領域のサイズの１／２程度になるように、拡大対象のサムネイル画像ｉの拡大率を算出する。拡大画像生成部１１２は、表示領域のサイズと、拡大対象のサムネイル画像ｉの類似症例データ４０００（図３３）内の関心領域情報４３００とに基づき、拡大率を算出する。拡大画像生成部１１２は、以下のような式で拡大率ｋｉを計算する。表示領域５７０１（図７４）の面積をＳｄ、拡大対象のサムネイル画像ｉの関心領域ＲＯＩ（図７４）の面積をＳｉとすると、拡大対象の類似症例ｉのサムネイル画像の拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ４５０２では、図５６のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像の関心領域の中心が表示領域の中心に位置するように、サムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２により生成された、拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、この実施の形態２では、拡大画像生成部１１２は、第２指示ボタン７１８が選択されたときの拡大率を、表示領域のサイズに対する関心領域のサイズの比率が１／２程度になるように算出している。しかし、本開示では、上記比率は１／２に限られない。例えば、上記比率は１／３、２／３などの他の値でもよい。
Ｓ２４５３では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、インデックスｉがＮＤに到達するまで、Ｓ２７００、Ｓ４５０３の処理を繰り返す。拡大画像生成部１１２は、Ｓ２７００、Ｓ４５０３の処理を実行する度に、インデックスｉを１ずつインクリメントする。インデックスｉがＮＤを超えると（Ｓ２４５３でＮＯ）、図７９の処理は終了する。
Ｓ２７００では、第３指示ボタン７１９がユーザにより選択されている。このため、Ｓ２７００では、拡大画像生成部１１２は、上述のように、関心領域のサイズが表示領域のサイズと同程度になるように、拡大対象のサムネイル画像ｉの拡大率を算出する。拡大画像生成部１１２は、表示領域のサイズと、拡大対象の類似症例ｉの類似症例データ４０００（図３３）内の関心領域情報４３００とに基づき、拡大率を算出する。拡大画像生成部１１２は、以下のような式で拡大率ｋｉを計算する。表示領域５７０１（図７４）の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域ＲＯＩ（図７４）の面積をＳｉとすると、拡大対象の類似症例ｉのサムネイル画像の拡大率ｋｉは、以下の式で算出できる。
ｋｉ＝Ｓｄ／Ｓｉ
Ｓ４５０３では、図５６のＳ４５００と同様に処理が行われる。その結果、拡大画像生成部１１２は、類似症例ｉのサムネイル画像の関心領域の中心が表示領域の中心に位置するように、サムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２により生成された、拡大されたサムネイル画像を症例表示領域７１０に表示する。
なお、この実施の形態２では、拡大画像生成部１１２は、第３指示ボタン７１９が選択されたときの拡大率を、表示領域のサイズに対する関心領域のサイズの比率が１．０程度になるように算出している。しかし、本開示では、上記比率は１．０に限られない。例えば、上記比率は１．１、０．９などの他の値でもよい。
以上の処理により、症例表示領域７１０において、個々の表示領域内の関心領域ＲＯＩのサイズを揃えることができる。その結果、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。このとき、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対して、拡大処理が行われる。このため、システムへの負荷が大幅に軽減される。
次に、情報端末１００に類似症例検索結果のサムネイル画像を拡大表示した後、ユーザの操作によりサムネイル画像の表示領域を変更するまでの処理について説明する。以下では、まず拡大画像生成部１１２の処理ブロックの詳細について説明し、その後、表示領域の変更処理のフローについて説明する。
図８０は、実施の形態２における拡大画像生成部１１２の詳細な構成を示すブロック図である。拡大画像生成部１１２は、入力判定部１１４１、対象決定部１１４２、拡大率決定部１１４３、画像拡大部１１２５、第１表示領域決定部１１２６、移動量決定部１１２７、表示画像生成部１１２９、及び第２表示領域決定部１１２８を含む。拡大画像生成部１１２は、拡大率変更処理と表示領域変更処理とを行う。なお、実施の形態１と同一の処理ブロックについては同一符号を付し、詳細な説明は省略する。
入力判定部１１４１は、入力制御部１０３から通知された、操作部１０２に対するユーザの操作内容を判定する。判定した操作内容が拡大率変更操作（この実施の形態２ではボタン選択）の場合には、入力判定部１１４１は、その選択されたボタンの種別（つまり第１指示ボタン７１７、第２指示ボタン７１８、又は第３指示ボタン７１９）を拡大率決定部１１４３に出力する。入力判定部１１４１は、対象決定部１１４２に、操作内容情報（拡大率変更を表す情報、例えば、拡大率変更を表す情報に対応する値として予め設定された値「１」）を出力する。
判定した操作内容が表示領域変更操作（例えばマウスのドラッグ）の場合には、入力判定部１１４１は、その操作量（例えばマウスのドラッグの開始位置及び終了位置）を移動量決定部１１２７に出力する。また、入力判定部１１４１は、対象決定部１１４２に、操作内容情報（表示領域変更を表す情報、例えば、表示領域変更を表す情報に対応する値として予め設定された値「２」）を出力する。
判定した操作内容が病変分布の選択（分布リスト表示領域７５０のチェックボックスに対するチェックマークの入力）である場合には、入力判定部１１４１は、その選択された病変分布が属する分布情報、つまり第１分布情報、第２分布情報、又は第３分布情報を拡大率決定部１１４３に出力する。入力判定部１１４１は、対象決定部１１４２に、操作内容情報（病変分布の選択による拡大率変更を表す情報、例えば、病変分布の選択による拡大率変更を表す情報に対応する値として予め設定された値「３」）を出力する。
対象決定部１１４２は、入力判定部１１４１から入力された操作内容情報に基づき、サムネイル画像の拡大処理又は表示領域の変更処理を行う対象とする類似症例を決定する。
この実施の形態２では、拡大率変更操作は、第１指示ボタン７１７、第２指示ボタン７１８、または第３指示ボタン７１９の操作である。そこで、操作内容情報が拡大率変更を表す情報の場合には、対象決定部１１４２は、ディスプレイ１０１に表示されている全て（図７４〜図７６の例では２０個）の類似症例を拡大処理の対象に決定する。対象決定部１１４２は、その個数と類似症例ＩＤ４１００とを拡大率決定部１１４３に出力する。
操作内容情報が表示領域変更を表す情報の場合には、対象決定部１１４２は、拡大率変更処理時に決定した拡大対象の類似症例を、そのまま表示領域変更処理の対象として採用する。
操作内容情報が病変分布の選択による拡大率変更を表す情報の場合には、対象決定部１１４２は、病変分布の選択時に絞り込まれた類似症例ＩＤ４１００と、その個数とを拡大率決定部１１４３に出力する。
拡大率決定部１１４３は、対象決定部１１４２で決定された拡大対象となる類似症例の拡大率を決定する。入力判定部１１４１から、操作内容情報として選択された病変分布を表す情報が入力されている場合には、拡大率決定部１１４３は、選択された病変分布に対応する所定の拡大率を算出する。拡大率決定部１１４３は、決定した拡大率と、対象決定部１１４２から入力された拡大対象の類似症例ＩＤ４１００及びその個数とを画像拡大部１１２５に出力する。病変分布に対応する所定の拡大率は、上記図２１〜図２６を参照して説明された通りである。
入力判定部１１４１から、操作内容情報として拡大率変更を表す情報が入力されている場合には、拡大率決定部１１４３は、対象決定部１１４２から入力された拡大対象の類似症例ＩＤ４１００（図３３）に対応する関心領域情報４３００を抽出する。拡大率決定部１１４３は、抽出した関心領域情報４３００と、入力判定部１１４１から入力されたボタンの種別（つまり第１指示ボタン７１７、第２指示ボタン７１８、又は第３指示ボタン７１９）とを用いて、上記図７９で説明された手順により、各類似症例の拡大率を算出する。拡大率決定部１１４３は、算出された拡大率と、拡大対象の類似症例ＩＤ４１００及びその個数とを画像拡大部１１２５に出力する。
なお、この実施の形態２においても、上記実施の形態１と同様に、第１分布情報に属する病変分布が選択されたときには、表示領域の変更は行われない。さらに、この実施の形態２では、第１指示ボタン７１７の操作により拡大率変更が行われた場合には、図７４に示されるように、拡大率が１．０でサムネイル画像全体が表示される。このため、第１指示ボタン７１７の操作により拡大率変更が行われた場合にも、表示領域の変更は行われない。
したがって、この実施の形態２では、第１分布情報に属する病変分布の選択及び第１指示ボタン７１７の操作により拡大率変更が行われた場合には、入力判定部１１４１は、判定した操作内容が表示領域変更操作であっても、その操作量を移動量決定部１１２７に出力しなくてもよい。また、対象決定部１１４２は、いずれの類似症例も、表示領域変更処理の対象にしないと決定してもよい。
次に、拡大されたサムネイル画像の表示領域の変更処理の流れについて説明する。
図８１は、拡大されたサムネイル画像の表示領域の変更処理を示すフローチャートである。図６４と同一のステップには、同一の符号が付され、詳細な説明は省略される。
Ｓ７１００では、対象決定部１１４２は、表示領域の変更処理を行う移動対象の類似症例を取得する。この実施の形態２では、上記実施の形態１と同様に、対象決定部１１４２は、Ｓ７１００において、拡大率変更処理で拡大率を変更した類似症例を移動対象の類似症例として採用する。本ステップにより、類似症例検索部３０３から受信したＮＣ個の全ての類似症例の表示領域を移動する場合と比較して、情報端末１００における処理負荷を軽減することができる。
なお、上述のように、この実施の形態２では、第１分布情報に属する病変分布の選択及び第１指示ボタン７１７の操作により拡大率変更が行われた場合には、表示領域の変更は行われない。
したがって、第１分布情報に属する病変分布の選択及び第１指示ボタン７１７の操作により拡大率変更が行われた後の場合には、Ｓ７１００において、対象決定部１１４２は、いずれの類似症例も、表示領域変更処理の対象にしないと決定して、処理を終了してもよい。あるいはまた、Ｓ７１００において、対象決定部１１４２は、ＮＺを超える値にインデックスｉを設定して、Ｓ６３００でＮＯとなるようにしてもよい。
なお、拡大画像生成部１１２による表示領域の変更処理は、上記図８０の構成に限られない。次に、表示領域の変更処理の変形例について説明する。
図８２は、図８０と異なる拡大画像生成部１１２の詳細な構成を示すブロック図である。拡大画像生成部１１２は、入力判定部１１４１、対象決定部１１４２、拡大率決定部１１４３、移動量決定部１１３０、表示領域決定部１１３１、及び画像拡大部１１３２を含む。図８２では、図６５、図８０と同じ処理ブロックには同じ符号が付されている。
移動量決定部１１３０は、拡大率決定部１１４３から、決定された各サムネイル画像の拡大率を取得する。移動量決定部１１３０は、入力判定部１１２１から、操作量を取得する。移動量決定部１１３０は、各サムネイル画像の拡大率と操作量とから，拡大前のサムネイル画像における移動量を算出する。移動量決定部１１３０は、算出した移動量と、各サムネイル画像の拡大率とを、表示領域決定部１１３１に出力する。
表示領域決定部１１３１は、第１表示領域決定部１１２６と同様に、拡大対象となる類似症例の拡大後のサムネイル画像における表示領域を決定する。すなわち、表示領域決定部１１３１は、拡大率決定部１１４３から拡大対象の類似症例ＩＤ４１００（図３３）を取得する。表示領域決定部１１３１は、取得した拡大対象の類似症例ＩＤ４１００（図３３）に対応する関心領域情報４３００を抽出する。表示領域決定部１１３１は、拡大率決定部１１４３から入力された拡大率と、抽出した関心領域情報４３００とを用いて、上記図５９のＳ４５２０，Ｓ４５３０の手順により、拡大後のサムネイル画像における表示領域の座標を算出する。
表示領域決定部１１３１は、拡大率決定部１１４３から、各サムネイル画像の拡大率を取得する。表示領域決定部１１３１は、移動量決定部１１３０から、拡大前のサムネイル画像における移動量を取得する。表示領域決定部１１３１は、算出した拡大後のサムネイル画像における表示領域の座標と、取得した拡大率とから，移動前の拡大前のサムネイル画像における表示領域の座標を算出する。
表示領域決定部１１３１は、算出した移動前の拡大前のサムネイル画像における表示領域の座標に、取得した拡大前のサムネイル画像における移動量を加えて、移動後の拡大前のサムネイル画像における表示領域の座標を算出する。表示領域決定部１１３１は、算出した移動後の拡大前のサムネイル画像における表示領域の座標を画像拡大部１１３２に出力する。
画像拡大部１１３２は、拡大率決定部１１４３から、各サムネイル画像の拡大率を取得する。画像拡大部１１３２は、表示領域決定部１１３１から入力された、移動後の拡大前のサムネイル画像における表示領域の座標と、取得した各サムネイル画像の拡大率とから、その表示領域内のサムネイル画像を拡大する。画像拡大部１１３２は、生成した拡大されたサムネイル画像を表示制御部１０４に出力する。
ここで、図６５及び図８２に示される変形例の意義が説明される。図６０を用いて説明されたように、図６０の左図に示される元のサムネイル画像から、図６０の右図に示される拡大されたサムネイル画像が生成される。例えば、図６０の右図に示される拡大されたサムネイル画像全体が保存されている場合には、図６３を用いて説明されたように、拡大されたサムネイル画像において、ユーザの操作量に基づき、表示領域を変更（移動）すればよい。
一方、図６０の右図に示される拡大されたサムネイル画像のうち、図６７Ａに示される表示領域の部分だけが保存されている場合があり得る。特に、実施の形態２では、拡大変更処理は、びまん性７５１〜血行性７５７（例えば図２０）の病変分布の選択または第１〜第３指示ボタン７１７〜７１９（例えば図７４）の操作によって行われる。すなわち、実施の形態２では、拡大率は、ユーザの操作量に依存せず、予め定められている。
そこで、実施の形態２では、元のサムネイル画像が定められた拡大率で拡大されたサムネイル画像を予め作成し、症例表示領域７１０に表示される表示領域の部分（図６７Ａ）だけを保存しておくことが考えられる。この場合には、拡大されたサムネイル画像において直接、表示領域を移動させる図６３のような手法は困難となる。この場合、図６５及び図８２に示される変形例の構成によって、図６７Ａ〜６７Ｃを用いて説明された手順で表示領域を変更（移動）することが有効となる。
以上では、サムネイル画像の拡大率の変更処理を情報端末１００において実行する例を示した。実施の形態２における拡大率変更ボタン７１６を用いた拡大率の変更処理の場合には、拡大率の変更処理を症例検索システム３００で実行してもよい。この場合には、症例検索システム３００は、拡大率が変更されたサムネイル画像を予め生成しておいてもよい。そして、拡大率変更ボタンが操作された時に、症例検索システム３００から情報端末１００にサムネイル画像を送信してもよい。
図８３は、症例検索システム３００が類似症例検索結果を情報端末１００に送信した後、情報端末１００において拡大率変更ボタン７１６が選択されてから拡大されたサムネイル画像を情報端末１００のディスプレイ１０１ｂに表示するまでの処理を示すシーケンス図である。図８４は、症例検索システム３００において実行される事前処理と、図８３に示される処理とを示すフローチャートである。図８４では、図８３に示される処理と同じ処理については同じ符号が付されている。図８３、図８４を用いて、処理の詳細を説明する。
まず、症例検索システム３００で実行される事前処理が説明される。図８４のＳ３１００では、症例検索システム３００は、拡大率変更ボタン７１６の第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９の各々に対して各サムネイル画像の拡大率を決定する。なお、拡大率決定の手順は、上述の図７９のＳ２５００、Ｓ２６００、Ｓ２７００で説明された手順を用いればよい。
Ｓ３１１０では、症例検索システム３００は、Ｓ３１００で決定した拡大率と、類似症例データ４０００（図３３）のサムネイル画像データ４５００とに基づき、第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９に対する拡大されたサムネイル画像データをそれぞれ生成する。症例検索システム３００は、生成した拡大サムネイル画像データを、図８５に示すように、類似症例データ４０００（図３３）とは別に、拡大サムネイルデータ５０００として、類似症例データ蓄積部３０１に格納する。
図８５は、拡大サムネイルデータ５０００のデータ構成を示す図である。拡大サムネイルデータ５０００は、拡大されたサムネイル画像データを類似症例データ蓄積部３０１に保存するためのデータである。拡大サムネイルデータ５０００は、図８５に示されるように、類似症例ＩＤ５１００に対応付けられて、第１指示ボタン７１７に対応する拡大サムネイル画像データ５２００と、第２指示ボタン７１８に対応する拡大サムネイル画像データ５３００と、第３指示ボタン７１９に対応する拡大サムネイル画像データ５４００とを含む。
次に、図８３、図８４を用いて、情報端末１００において、ユーザにより拡大率変更ボタンが選択された場合の処理について説明する。
Ｓ３０１０では、入力制御部１０３は、ユーザが拡大率変更ボタン７１６を選択したときの指示ボタンの種類を検知する。つまり、入力制御部１０３は、第１指示ボタン７１７、第２指示ボタン７１８、第３指示ボタン７１９のいずれをユーザが選択したかを検知する。
Ｓ３０２０では、表示制御部１０４は、拡大率変更ボタン７１６がユーザにより選択された時に症例表示領域７１０に表示されているＮＤ個（この実施の形態ではＮＤ＝２０）の類似症例の類似症例ＩＤを類似症例データ４０００（図３３）から取得する。また、表示制御部１０４は、取得した類似症例ＩＤを拡大対象の類似症例として決定する。
Ｓ３０３０では、通信制御部１１０は、Ｓ３０１０で入力制御部１０３が検知した拡大率変更ボタン７１６の種類と、Ｓ３０２０で表示制御部１０４が取得した拡大対象の類似症例ＩＤ（ＮＤ個）とを、症例検索システム３００に送信する。
Ｓ３０４０では、症例検索システム３００の通信制御部３０４は、Ｓ３０３０で情報端末１００から送信された拡大率変更ボタン７１６の種類と拡大対象の類似症例ＩＤ（ＮＤ個）とを受信する。
Ｓ３０５０では、症例検索システム３００は、受信した類似症例ＩＤと拡大率変更ボタン７１６の種類とから、拡大サムネイルデータ５０００の拡大サムネイル画像データ５２００，５３００，５４００のうち表示に使用する画像データを特定する。症例検索システム３００の通信制御部３０４は、特定した拡大サムネイル画像データを情報端末１００に送信する。
Ｓ３０６０では、情報端末１００の通信制御部１１０は、症例検索システム３００から送信された拡大サムネイル画像データを受信する。
Ｓ３０７０では、情報端末１００の表示制御部１０４は、Ｓ３０６０で通信制御部１１０が受信した拡大サムネイル画像データに基づき、類似症例の拡大されたサムネイル画像を情報端末１００のディスプレイ１０１ｂの症例表示領域７１０に表示する。
（実施の形態１の補足）
次に、図３５、図３９のシーケンス図をアプリケーションのレベルで着目したときの情報端末１００、医用情報管理システム２００、及び症例検索システム３００の処理について説明する。
図８６は、図３５及び図３９のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。図８６において、図３５、図３９と同じ処理には同じ符号を付している。
図８６、図８７において、「Ａ」は情報端末１００が実行する医用情報管理アプリケーションの処理を示し、「Ｂ」は情報端末１００が実行する類似症例検索アプリケーションの処理を示す。以下、医用情報管理アプリケーションを「アプリＡ」と記述し、類似症例検索アプリケーションを「アプリＢ」と記述する。
まず、アプリＡは、ユーザから読影対象となる検査リストの表示要求を受け付け、医用情報管理システム２００に送信する（Ｓ５１０）。医用情報管理システム２００は検査リストの表示要求を受信すると、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成し、アプリＡに送信する。
検査リストを受信したアプリＡは、図３６に示すように、検査リストをディスプレイ１０１に表示し、検査リストの中から１の検査がユーザにより選択されると（Ｓ５３０）、選択された検査の表示要求を医用情報管理システム２００に送信する（Ｓ５４０）。
検査の表示要求を受信した医用情報管理システム２００は、検査の表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像をアプリＡに送信する（Ｓ５５０）。
次に、アプリＡは、図３７に示すように、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを表示する（Ｓ５６０）。
次に、アプリＡは、シリーズリストの中から読影対象のシリーズがユーザにより選択されると、選択されたシリーズの最初のスライド位置のスライド画像を医用画像ビューワ６１０に表示する（Ｓ５７０）。このとき、ユーザは、スライス送りする操作を入力し、医用画像ビューワ６１０に所望のスライス画像を表示させる。
次に、アプリＡは、医用画像ビューワ６１０に表示されたスライス画像において、関心領域を設定する操作をユーザから受け付ける（Ｓ５８０）。
次に、アプリＡは、ユーザにより設定された関心領域を示す関心領域情報を生成し、関心領域が設定されたスライス画像（診断対象症例のスライス画像）と共に、アプリＢに送信する（Ｓ５９０、Ｓ６００）。
次に、アプリＢは、診断対象症例のスライス画像及び関心領域情報を受信すると、そのスライス画像及び関心領域情報を症例検索システム３００に送信する（Ｓ６０１、Ｓ６０２）。
スライス画像及び関心領域情報を受信すると、症例検索システム３００は、図３９と同様、Ｓ６１０〜Ｓ６４０の処理を実行する。
次に、アプリＢは、Ｓ６４０で送信された類似症例データ及び表示ボックス管理情報４４１０を用いて初期の基本画面を生成する（Ｓ６７０）。そして、アプリＢは、図４４に詳細が示されるＳ６７０の処理を実行する。
図８７は、図５４及び図５５のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。図８７において、図５４、図５５と同じ処理には同じ符号を付している。
図８６との相違点は、Ｓ６０３、Ｓ６０４にある。図８７では、画像特徴は情報端末１００で抽出されている。よって、アプリＢが診断対象症例のスライス画像に設定された関心領域から画像特徴を抽出し（Ｓ６０３）、抽出した画像特徴を症例検索システム３００に送信している（Ｓ６０４）。
本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。
１００ 情報端末
１０１ ディスプレイ
１０２ 操作部
１０３ 入力制御部
１０４ 表示制御部
１１２ 拡大画像生成部
２００ 医用情報管理システム
３００ 症例検索システム
７１０ 症例表示領域
ＣＲＯＩ 対応関心領域
Ｋ２ 基本画面
ＲＯＩ 関心領域

Claims (19)

  1. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続する情報端末であって、
    読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像を表示させる表示制御部と、
    前記対象医用画像の中の関心領域を示す指定情報を検知させるＲＯＩ管理部と、
    前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像であって、かつそれぞれ前記関心領域に対応する対応関心領域を含む複数の類似医用画像を前記症例検索システムから受信する通信制御部とを備え、
    前記表示制御部は、前記受信した複数の類似医用画像の中の所定数以下の類似医用画像を表示する表示画面であって、かつ前記対象医用画像を表示する第１表示領域と、前記類似医用画像を表示するための前記所定数の表示枠を含む第２表示領域とを含む表示画面を表示させ、
    前記表示制御部は、前記表示されている類似医用画像を拡大する指示を検知した場合、前記表示画面における各表示枠のサイズを同一サイズに維持しつつ、前記類似医用画像に含まれる前記対応関心領域を拡大表示させる、
    情報端末。
  2. 前記表示制御部は、前記受信した複数の類似医用画像の中の前記所定数以下の類似医用画像を、前記対象医用画像との類似度が高い順序で前記各表示枠に表示させる、
    請求項１記載の情報端末。
  3. 前記対象医用画像の付加情報には、前記対象医用画像に表れる病変の病名情報が設定されておらず、
    前記通信制御部において前記受信した複数の類似医用画像の各々の付加情報には、前記受信した複数の類似医用画像の各々に表れる病変の病名情報が設定されている、
    請求項１記載の情報端末。
  4. 前記通信制御部は、前記関心領域の特徴量を示す情報を前記症例検索システムに送信し、
    前記通信制御部は、前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信する、
    請求項１記載の情報端末。
  5. 前記通信制御部は、前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信し、
    前記通信制御部は、前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信する、
    請求項１記載の情報端末。
  6. 前記対象医用画像は、部位の医用画像であり、
    前記類似医用画像は、部位の医用画像であり、
    前記表示制御部は、前記対応関心領域の大きさが部位の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報と、前記対応関心領域の大きさが部位の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報とを表示させる、
    請求項１に記載の情報端末。
  7. 前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
    前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報である、
    請求項６に記載の情報端末。
  8. 前記対象医用画像は肺の医用画像であり、
    前記類似医用画像は肺の医用画像であり、
    前記表示制御部は、前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を表示させ、
    前記表示制御部は、前記第１分布情報から前記第３分布情報の中のいずれかの選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して表示させる、
    請求項１記載の情報端末。
  9. 前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
    前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
    前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報である、
    請求項８記載の情報端末。
  10. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続する情報端末において実行されるプログラムであって、
    前記情報端末のコンピュータに対して、
    読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像を表示させ、
    前記対象医用画像の中の関心領域を示す指定情報を検知させ、
    前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像であって、かつそれぞれ前記関心領域に対応する対応関心領域を含む複数の類似医用画像を前記症例検索システムから受信し、
    前記受信した複数の類似医用画像の中の所定数以下の類似医用画像を表示する表示画面であって、かつ前記対象医用画像を表示する第１表示領域と、前記類似医用画像を表示するための前記所定数の表示枠を含む第２表示領域とを含む表示画面を表示させ、
    前記表示されている類似医用画像を拡大する指示を検知した場合、前記表示画面における各表示枠のサイズを同一サイズに維持しつつ、前記類似医用画像に含まれる前記対応関心領域を拡大表示させる、
    プログラム。
  11. 前記受信した複数の類似医用画像の中の前記所定数以下の類似医用画像を、前記対象医用画像との類似度が高い順序で前記各表示枠に表示させる、
    請求項１０記載のプログラム。
  12. 前記対象医用画像の付加情報には、前記対象医用画像に表れる病変の病名情報が設定されておらず、
    前記受信した複数の類似医用画像の各々の付加情報には、前記受信した複数の類似医用画像の各々に表れる病変の病名情報が設定されている、
    請求項１０記載のプログラム。
  13. 前記関心領域の特徴量を示す情報を前記症例検索システムに送信し、
    前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信する、
    請求項１０記載のプログラム。
  14. 前記対象医用画像及び前記関心領域を示す指定情報を前記症例検索システムに送信し、
    前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信する、
    請求項１０記載のプログラム。
  15. 前記対象医用画像は、部位の医用画像であり、
    前記類似医用画像は、部位の医用画像であり、
    前記対応関心領域の大きさが部位の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報と、前記対応関心領域の大きさが部位の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報とを表示させる、
    請求項１０記載のプログラム。
  16. 前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
    前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報である、
    請求項１５に記載のプログラム。
  17. 前記対象医用画像は肺の医用画像であり、
    前記類似医用画像は肺の医用画像であり、
    前記対応関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記対応関心領域の大きさが、肺の領域の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第３分布情報を表示させ、
    前記第１分布情報から前記第３分布情報の中のいずれかの選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して表示させる、
    請求項１０記載のプログラム。
  18. 前記第１分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
    前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
    前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報である、
    請求項１７記載のプログラム。
  19. 医用画像が登録された医用画像データベースを参照して医用画像を検索する症例検索システムに接続する情報端末の制御方法であって、
    前記情報端末のコンピュータに対して、
    読影対象候補の医用画像の中から選択された読影対象の医用画像である対象医用画像を表示させ、
    前記対象医用画像の中の関心領域を示す指定情報を検知させ、
    前記指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する複数の類似医用画像であって、かつそれぞれ前記関心領域に対応する対応関心領域を含む複数の類似医用画像を前記症例検索システムから受信し、
    前記受信した複数の類似医用画像の中の所定数以下の類似医用画像を表示する表示画面であって、かつ前記対象医用画像を表示する第１表示領域と、前記類似医用画像を表示するための前記所定数の表示枠を含む第２表示領域とを含む表示画面を表示させ、
    前記表示されている類似医用画像を拡大する指示を検知した場合、前記表示画面における各表示枠のサイズを同一サイズに維持しつつ、前記類似医用画像に含まれる前記対応関心領域を拡大表示させる、
    制御方法。
JP2019001937A 2014-06-04 2019-01-09 情報端末、制御方法及びプログラム Pending JP2019087272A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014116172 2014-06-04
JP2014116172 2014-06-04

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015109401A Division JP6466782B2 (ja) 2014-06-04 2015-05-29 制御方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020082452A Division JP6874193B2 (ja) 2014-06-04 2020-05-08 情報端末、制御方法及びプログラム

Publications (1)

Publication Number Publication Date
JP2019087272A true JP2019087272A (ja) 2019-06-06

Family

ID=54769780

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2015109401A Active JP6466782B2 (ja) 2014-06-04 2015-05-29 制御方法及びプログラム
JP2019001937A Pending JP2019087272A (ja) 2014-06-04 2019-01-09 情報端末、制御方法及びプログラム
JP2020082452A Active JP6874193B2 (ja) 2014-06-04 2020-05-08 情報端末、制御方法及びプログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015109401A Active JP6466782B2 (ja) 2014-06-04 2015-05-29 制御方法及びプログラム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2020082452A Active JP6874193B2 (ja) 2014-06-04 2020-05-08 情報端末、制御方法及びプログラム

Country Status (2)

Country Link
US (3) US10216762B2 (ja)
JP (3) JP6466782B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112609581A (zh) * 2020-12-08 2021-04-06 上海市机械施工集团有限公司 一种大跨度钢箱梁的施工方法
US11321409B2 (en) 2020-01-21 2022-05-03 International Business Machines Corporation Performing a search based on position information

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5677348B2 (ja) * 2012-03-23 2015-02-25 富士フイルム株式会社 症例検索装置、症例検索方法及びプログラム
JP6387003B2 (ja) * 2013-06-18 2018-09-05 キヤノン株式会社 トモシンセシス撮影の制御装置、撮影装置、撮影システム、制御方法および当該制御方法をコンピュータに実行させるためのプログラム
JP6224561B2 (ja) * 2014-09-16 2017-11-01 富士フイルム株式会社 携帯型コンソール、携帯型コンソールの制御方法、携帯型コンソール用プログラム及び放射線撮影システム
CN106560827B (zh) * 2015-09-30 2021-11-26 松下知识产权经营株式会社 控制方法
US10758196B2 (en) * 2015-12-15 2020-09-01 Canon Kabushiki Kaisha Radiation imaging apparatus, control method for radiation imaging apparatus, and program
US10305869B2 (en) * 2016-01-20 2019-05-28 Medicom Technologies, Inc. Methods and systems for transferring secure data and facilitating new client acquisitions
JP6637607B2 (ja) * 2016-09-12 2020-01-29 富士フイルム株式会社 超音波診断システムおよび超音波診断システムの制御方法
DE102017203025A1 (de) * 2017-02-24 2018-08-30 Siemens Healthcare Gmbh Verfahren zu einem Unterstützen einer Planung einer Magnetresonanzuntersuchung an einem Patienten mit einer Magnetresonanzvorrichtung sowie eine Magnetresonanzvorrichtung zu einem Ausführen des Verfahrens
EP3603481B1 (en) * 2017-03-30 2023-05-03 FUJIFILM Corporation Medical image processing device, endoscope system, and method for operating medical image processing device
JP6885896B2 (ja) * 2017-04-10 2021-06-16 富士フイルム株式会社 自動レイアウト装置および自動レイアウト方法並びに自動レイアウトプログラム
JP6751815B2 (ja) * 2017-04-28 2020-09-09 オリンパス株式会社 内視鏡診断支援システム、内視鏡診断支援プログラム及び内視鏡診断支援システムの作動方法
JP7121470B2 (ja) * 2017-05-12 2022-08-18 キヤノン株式会社 画像処理システム、制御方法、及び、プログラム
US10671896B2 (en) * 2017-12-04 2020-06-02 International Business Machines Corporation Systems and user interfaces for enhancement of data utilized in machine-learning based medical image review
JP7406740B2 (ja) 2019-02-12 2023-12-28 株式会社スカイマティクス 対象の検査と報告書の作成のためのシステム
JP7308258B2 (ja) * 2019-02-19 2023-07-13 富士フイルム株式会社 医療画像処理装置及び医療画像処理装置の作動方法
JP7172796B2 (ja) * 2019-03-28 2022-11-16 コニカミノルタ株式会社 表示システム、表示制御装置及び表示制御方法
JP7347497B2 (ja) * 2019-03-28 2023-09-20 日本電気株式会社 管理装置、制御方法及びプログラム
KR102057277B1 (ko) 2019-05-14 2019-12-18 주식회사 코어라인소프트 의료 영상의 정량화 및 분석에 기반한 빅데이터 데이터베이스를 구축하기 위한 서버 및 서버 기반의 의료 영상 분석 방법
KR102318959B1 (ko) * 2019-09-10 2021-10-27 계명대학교 산학협력단 의료 영상을 해석하는 인공지능 모델을 이용한 폐암 발병 가능성 예측 방법 및 의료 영상 분석 장치
CN112732146B (zh) * 2019-10-28 2022-06-21 广州极飞科技股份有限公司 图像的展示方法及装置、存储介质
JP2021078824A (ja) * 2019-11-20 2021-05-27 キヤノンメディカルシステムズ株式会社 Ｘ線診断装置
US10970064B1 (en) * 2020-07-28 2021-04-06 Bank Of America Corporation Dynamically updating a software program to resolve errors
USD986262S1 (en) * 2021-07-01 2023-05-16 Olympus Medical Systems Corporation Display screen with graphical user interface

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002125937A (ja) * 2000-10-24 2002-05-08 Toshiba Corp 画像処理装置
JP2006305204A (ja) * 2005-04-28 2006-11-09 Morita Mfg Co Ltd Ｃｔ画像表示方法及び装置
JP2011092286A (ja) * 2009-10-27 2011-05-12 Canon Inc 情報処理装置、情報処理方法及びプログラム
JP2011224086A (ja) * 2010-04-16 2011-11-10 Morita Mfg Co Ltd 画像処理装置、ｘ線撮影装置、画像表示方法、画像比較方法、および画像表示プログラム
JP2014127011A (ja) * 2012-12-26 2014-07-07 Sony Corp 情報処理装置、情報処理方法、およびプログラム

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3012342B2 (ja) * 1990-01-19 2000-02-21 オリンパス光学工業株式会社 医療用画像表示装置
JP3344528B2 (ja) * 1995-06-29 2002-11-11 インターナショナル・ビジネス・マシーンズ・コーポレーション ウィンドウの表示方法およびそのシステム
JP3878259B2 (ja) * 1996-11-13 2007-02-07 東芝医用システムエンジニアリング株式会社 医用画像処理装置
US6901156B2 (en) * 2000-02-04 2005-05-31 Arch Development Corporation Method, system and computer readable medium for an intelligent search workstation for computer assisted interpretation of medical images
US6925199B2 (en) * 2000-11-29 2005-08-02 Fujitsu Limited Computer readable recording medium recorded with diagnosis supporting program, diagnosis supporting apparatus and diagnosis supporting method
US6901277B2 (en) * 2001-07-17 2005-05-31 Accuimage Diagnostics Corp. Methods for generating a lung report
JP2004005364A (ja) * 2002-04-03 2004-01-08 Fuji Photo Film Co Ltd 類似画像検索システム
JP2004215041A (ja) 2003-01-06 2004-07-29 Olympus Corp 画像処理装置、画像処理プログラム、記録媒体、および画像処理方法
JP2005073817A (ja) * 2003-08-29 2005-03-24 Hitachi Medical Corp 医用画像表示装置
US7724959B2 (en) * 2004-09-23 2010-05-25 Fuji Xerox Co., Ltd. Determining regions of interest in photographs and images
US8016758B2 (en) * 2004-10-30 2011-09-13 Sonowise, Inc. User interface for medical imaging including improved pan-zoom control
US7787672B2 (en) * 2004-11-04 2010-08-31 Dr Systems, Inc. Systems and methods for matching, naming, and displaying medical images
US7676760B1 (en) * 2005-02-25 2010-03-09 Adobe Systems Incorporated Methods and apparatus for analysis of access logs
US8165908B2 (en) * 2005-07-29 2012-04-24 Siemens Aktiengesellschaft Tool tip with additional information and task-sensitive direct access help for a user
JP5128154B2 (ja) * 2006-04-10 2013-01-23 富士フイルム株式会社 レポート作成支援装置、レポート作成支援方法およびそのプログラム
JP4899068B2 (ja) * 2006-05-02 2012-03-21 国立大学法人名古屋大学 医療画像観察支援装置
US8280483B2 (en) * 2006-06-14 2012-10-02 Koninklijke Philips Electronics N.V. Multi-modality medical image viewing
US7940970B2 (en) * 2006-10-25 2011-05-10 Rcadia Medical Imaging, Ltd Method and system for automatic quality control used in computerized analysis of CT angiography
JP4905967B2 (ja) * 2007-03-02 2012-03-28 富士フイルム株式会社 類似症例検索装置、方法、およびプログラム
JP5128161B2 (ja) 2007-03-30 2013-01-23 富士フイルム株式会社 画像診断支援装置及びシステム
US20090228834A1 (en) * 2008-02-29 2009-09-10 Christopher Reynolds Flow radiology user interface
JP4740971B2 (ja) * 2008-03-14 2011-08-03 京セラ株式会社 表示機能付き端末装置
US8265339B2 (en) * 2008-04-25 2012-09-11 Panasonic Corporation Image processing device, image processing method, and integrated circuit for processing images
JP5173700B2 (ja) * 2008-09-25 2013-04-03 キヤノン株式会社 データ検索装置およびその制御方法、データ検索システム
US8321144B2 (en) * 2008-10-23 2012-11-27 Microsoft Corporation Non-contiguous regions processing
US20100131873A1 (en) * 2008-11-25 2010-05-27 General Electric Company Clinical focus tool systems and methods of use
US8073220B2 (en) * 2009-04-20 2011-12-06 Siemens Aktiengesellschaft Methods and systems for fully automatic segmentation of medical images
JP5394218B2 (ja) * 2009-12-15 2014-01-22 富士フイルム株式会社 医用画像表示装置および方法、並びにプログラム
US20120069049A1 (en) * 2010-09-16 2012-03-22 Omnyx, LLC Digital pathology image manipulation
WO2012101272A1 (en) * 2011-01-28 2012-08-02 Flir Systems Ab A method for managing ir image data
US9254112B2 (en) * 2011-03-23 2016-02-09 Siemens Corporation Respiratory interval-based correlation and processing of dynamic imaging data
JP6005905B2 (ja) * 2011-04-06 2016-10-12 東芝メディカルシステムズ株式会社 画像処理システム、画像処理装置及び画像処理方法
US9715751B2 (en) * 2011-07-13 2017-07-25 Apple Inc. Zooming to faces depicted in images
EP2780888B1 (en) * 2011-11-17 2019-08-14 Koninklijke Philips N.V. Processing an image containing one or more artifacts
JP5677348B2 (ja) * 2012-03-23 2015-02-25 富士フイルム株式会社 症例検索装置、症例検索方法及びプログラム
US9224200B2 (en) * 2012-04-27 2015-12-29 Parasite Technologies A/S Computer vision based method for extracting features relating to the developmental stages of Trichuris spp. eggs
EP2860688A4 (en) * 2012-06-11 2016-01-06 Sony Corp INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING SYSTEM, INFORMATION PROCESSING PROCESS AND PROGRAM
JP6021468B2 (ja) * 2012-06-26 2016-11-09 東芝メディカルシステムズ株式会社 医用画像表示装置
MX2015006351A (es) * 2012-11-23 2016-03-15 Cadens Medical Imaging Inc Metodo y sistema para exhibir a un usuario una transicion entre una primera proyeccion proporcionada y una segunda proyeccion proporcionada.
JP5883378B2 (ja) * 2012-12-27 2016-03-15 株式会社東芝 画像処理装置
WO2015015699A1 (ja) * 2013-08-01 2015-02-05 パナソニック株式会社 類似症例検索装置、症例データベース、類似症例検索方法、およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002125937A (ja) * 2000-10-24 2002-05-08 Toshiba Corp 画像処理装置
JP2006305204A (ja) * 2005-04-28 2006-11-09 Morita Mfg Co Ltd Ｃｔ画像表示方法及び装置
JP2011092286A (ja) * 2009-10-27 2011-05-12 Canon Inc 情報処理装置、情報処理方法及びプログラム
JP2011224086A (ja) * 2010-04-16 2011-11-10 Morita Mfg Co Ltd 画像処理装置、ｘ線撮影装置、画像表示方法、画像比較方法、および画像表示プログラム
JP2014127011A (ja) * 2012-12-26 2014-07-07 Sony Corp 情報処理装置、情報処理方法、およびプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
大沢 哲 その外４名: "画像診断を支援する類似症例検索システム「SYNAPSE Case Match」の開発", 富士フイルム研究報告, JPN6014019849, 27 March 2013 (2013-03-27), pages 11 - 14, ISSN: 0004323626 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11321409B2 (en) 2020-01-21 2022-05-03 International Business Machines Corporation Performing a search based on position information
CN112609581A (zh) * 2020-12-08 2021-04-06 上海市机械施工集团有限公司 一种大跨度钢箱梁的施工方法

Also Published As

Publication number Publication date
US20190155836A1 (en) 2019-05-23
US11250048B2 (en) 2022-02-15
JP6874193B2 (ja) 2021-05-19
JP2016012345A (ja) 2016-01-21
JP6466782B2 (ja) 2019-02-06
US10216762B2 (en) 2019-02-26
US20210133231A1 (en) 2021-05-06
US10860643B2 (en) 2020-12-08
US20150356271A1 (en) 2015-12-10
JP2020149698A (ja) 2020-09-17

Similar Documents

Publication Publication Date Title
JP6874193B2 (ja) 情報端末、制御方法及びプログラム
JP6907381B2 (ja) 制御方法及びプログラム
JP6960612B2 (ja) 制御方法及びプログラム
JP5815167B1 (ja) 情報端末の制御方法及びプログラム
JP6799115B2 (ja) 情報端末の制御方法及びプログラム
JP5810251B1 (ja) 情報端末の制御方法及びプログラム
JP6722857B2 (ja) 制御方法及びプログラム
JP6578135B2 (ja) 制御方法及びプログラム
JP6664113B2 (ja) 情報端末の制御方法及びプログラム
JP6675099B2 (ja) 制御方法及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200602

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200729

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200818