JP2008200373A - Similar case retrieval apparatus and its method and program and similar case database registration device and its method and program - Google Patents
Similar case retrieval apparatus and its method and program and similar case database registration device and its method and program Download PDFInfo
- Publication number
- JP2008200373A JP2008200373A JP2007041658A JP2007041658A JP2008200373A JP 2008200373 A JP2008200373 A JP 2008200373A JP 2007041658 A JP2007041658 A JP 2007041658A JP 2007041658 A JP2007041658 A JP 2007041658A JP 2008200373 A JP2008200373 A JP 2008200373A
- Authority
- JP
- Japan
- Prior art keywords
- image
- similar case
- information
- interpretation
- slice thickness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims description 49
- 238000003745 diagnosis Methods 0.000 claims abstract description 133
- 238000012545 processing Methods 0.000 claims abstract description 39
- 230000008569 process Effects 0.000 claims description 17
- 238000002059 diagnostic imaging Methods 0.000 description 24
- 230000006870 function Effects 0.000 description 13
- 238000003384 imaging method Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 238000002591 computed tomography Methods 0.000 description 11
- 230000003902 lesion Effects 0.000 description 10
- 238000001514 detection method Methods 0.000 description 9
- 238000000605 extraction Methods 0.000 description 8
- 230000006872 improvement Effects 0.000 description 7
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000000052 comparative effect Effects 0.000 description 4
- 238000011282 treatment Methods 0.000 description 4
- 238000013170 computed tomography imaging Methods 0.000 description 3
- 229940079593 drug Drugs 0.000 description 3
- 239000003814 drug Substances 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 2
- 210000001015 abdomen Anatomy 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003703 image analysis method Methods 0.000 description 2
- 201000005202 lung cancer Diseases 0.000 description 2
- 208000020816 lung neoplasm Diseases 0.000 description 2
- 238000002600 positron emission tomography Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 208000017667 Chronic Disease Diseases 0.000 description 1
- 206010020751 Hypersensitivity Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000007815 allergy Effects 0.000 description 1
- 238000004159 blood analysis Methods 0.000 description 1
- 238000009534 blood test Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000002872 contrast media Substances 0.000 description 1
- 238000002483 medication Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
Images
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
Description
本発明は、3次元医用画像から再構成された断層画像についての類似症例の検索やデータベース登録を行う装置、方法、および、この方法をコンピュータに実行させるプログラムに関するものである。 The present invention relates to an apparatus and method for searching for similar cases and registering a database for a tomographic image reconstructed from a three-dimensional medical image, and a program for causing a computer to execute the method.
読影医による医用画像の読影や臨床医による医用画像に基づく診断を支援するために、医用画像とその画像に関連する読影結果や診断結果等の情報をデータベースに蓄積しておき、読影/診断対象の医用画像と類似する画像やその画像に関連づけられた読影/診断結果等の情報をデータベースから検索する類似症例検索システムが提案されている。 In order to support the interpretation of medical images by interpreting doctors and diagnosis based on medical images by clinicians, medical images and information related to the images, such as interpretation results and diagnosis results, are stored in a database, and the interpretation / diagnosis target A similar case retrieval system has been proposed that retrieves from a database information such as an image similar to a medical image and information such as interpretation / diagnosis results associated with the image.
例えば、被写体画像を表す画像データを多数保存している画像データベースの中から、入力された検索画像データと画像の特性が類似している部分を有する類似画像データを検索し、検索結果を出力するシステムが知られている(例えば、特許文献1)。 For example, search similar image data having a portion whose image characteristics are similar to the input search image data from an image database storing a large number of image data representing subject images, and output the search results. A system is known (for example, Patent Document 1).
また、被写体画像の特徴量(形状情報やテクスチャ情報)とその画像に関連した診断情報とをデータベースに保存しておき、入力された検索画像データから算出された特徴量とデータベースに保存された特徴量とに基づいて、検索画像に類似する画像に関連した診断情報を検索し、検索結果を出力するシステムが知られている(例えば、特許文献2)。
CTやMRI等で得られる3次元医用画像の再構成によって得られる、検査対象部位をスライスした断面を表す断層画像に対する類似症例検索を従来の類似症例検索システムで実現しようとした場合、3次元医用画像からは多数の断層画像が得られるため、画像データをそのまま画像データベースに保存している特許文献1記載のシステムでは、データベース容量が非常に大きくなってしまう。また、画像の類似性を判断するために画像の特性を表す特徴量を求める必要があるが、このシステムでは、検索の都度、データベース中の画像の特性を表す特徴量の類似性を求める必要が生じるので、データベースに格納されている画像の数が増加すると、システムの処理負荷も非常に高くなってしまう。
When a similar case search for a tomographic image representing a cross-section obtained by slicing a region to be examined obtained by reconstruction of a three-dimensional medical image obtained by CT, MRI or the like is to be realized with a conventional similar case search system, a three-dimensional medical Since a large number of tomographic images can be obtained from the image, the database capacity of the system described in
また、3次元医用画像を再構成して得られる断層画像では、スライス厚を変化させると、画像の特性も変化し、画像の特性を表す特徴量も変化するが、上記の各文献に記載のシステムでは、スライス厚を考慮していないため、検索対象の断層画像のスライス厚とデータベースに登録されている断層画像のスライス厚が異なっていると、画像の特性が類似する画像を正しく検索できなくなり、検索精度の低下を招いてしまう可能性がある。 In addition, in a tomographic image obtained by reconstructing a three-dimensional medical image, when the slice thickness is changed, the characteristics of the image also change, and the feature amount representing the characteristics of the image also changes. Since the slice thickness is not taken into consideration in the system, if the slice thickness of the tomographic image to be searched is different from the slice thickness of the tomographic image registered in the database, images with similar image characteristics cannot be searched correctly. There is a possibility that the search accuracy will be lowered.
本発明は、上記事情に鑑みてなされたものであり、3次元医用画像から得られる断層画像に対する類似症例検索において、より低い処理負荷で、より高い精度の検索を可能にする装置、方法およびプログラムを提供することを目的とするものである。 The present invention has been made in view of the above circumstances, and an apparatus, a method, and a program that enable a higher-accuracy search with a lower processing load in a similar case search for a tomographic image obtained from a three-dimensional medical image. Is intended to provide.
本発明は、1以上の被検体の特定の検査対象部位を所定のスライス厚でスライスした断面を表す断層画像のスライス厚と、その断層画像の少なくとも一部の領域の内容的特徴を表す特徴量と、その内容的特徴が類似する断層画像の読影および/またはその類似する画像に基づく診断を支援する読影/診断支援情報とが関連づけられた類似症例情報が登録される類似症例データベースに、スライス厚が異なる複数の断層画像についての類似症例情報を登録し、このデータベースを用いて類似症例の検索を行うようにしたことを特徴とする。 The present invention relates to a slice thickness of a tomographic image representing a cross section obtained by slicing a specific examination target site of one or more subjects with a predetermined slice thickness, and a feature amount representing a content feature of at least a part of the tomographic image. Slice thickness in a similar case database in which similar case information in which tomographic images having similar content features and / or interpretation / diagnosis support information supporting diagnosis based on the similar images is associated is registered. Similar case information about a plurality of tomographic images having different values is registered, and similar cases are searched using this database.
すなわち、本発明の類似症例検索装置は、1以上の被検体の特定の検査対象部位を所定のスライス厚でスライスした断面を表す断層画像のスライス厚と、その断層画像の少なくとも一部の領域の内容的特徴を表す特徴量と、その内容的特徴が類似する断層画像の読影および/またはその類似する画像に基づく診断を支援する読影/診断支援情報とが関連づけられた類似症例情報が登録された類似症例データベースであって、スライス厚が異なる複数の断層画像についての類似症例情報が登録されたものと、被検体のその特定の検査対象部位をスライスした断面を表す検索対象の断層画像の少なくとも一部の領域の前記の内容的特徴を表す特徴量を取得する特徴量取得手段と、類似症例データベースを参照し、検索対象の画像のスライス厚および特徴量との一致の度合が所定の基準を満たすスライス厚および特徴量と関連づけられた類似症例情報を取得する類似症例検索手段とを設けたことを特徴とする。 That is, the similar case retrieval apparatus of the present invention includes a slice thickness of a tomographic image representing a cross section obtained by slicing a specific examination target region of one or more subjects with a predetermined slice thickness, and at least a partial region of the tomographic image. Similar case information is registered in which feature quantities representing content features and interpretation / diagnosis support information that supports interpretation of tomographic images with similar content features and / or diagnosis based on similar images are registered A similar case database, in which similar case information for a plurality of tomographic images having different slice thicknesses is registered, and at least one of tomographic images to be searched representing a cross section obtained by slicing the specific examination target part of the subject The feature amount acquisition means for acquiring the feature amount representing the content feature of the part area, the similar case database, and the slice thickness and the search target image Characterized in that the degree of match between the feature amount is provided a similar case search means for obtaining the similar case information associated with slice thickness and the feature meets a predetermined criterion.
本発明の類似症例検索方法は、被検体の特定の検査対象部位をスライスした断面を表す検索対象の断層画像の少なくとも一部の領域の内容的特徴を表す特徴量を取得するステップと、1以上の被検体のその特定の検査対象部位を所定のスライス厚でスライスした断面を表す断層画像のスライス厚と、その断層画像の少なくとも一部の領域の前記の内容的特徴を表す特徴量と、その内容的特徴が類似する断層画像の読影および/またはその類似する画像に基づく診断を支援する読影/診断支援情報とが関連づけられた類似症例情報が登録された類似症例データベースであって、スライス厚が異なる複数の断層画像についての類似症例情報が登録されたものを参照し、検索対象の画像のスライス厚および特徴量との一致の度合が所定の基準を満たすスライス厚および特徴量と関連づけられた類似症例情報を取得するステップとを有することを特徴とする。 The similar case search method of the present invention includes a step of acquiring a feature amount representing a content feature of at least a partial region of a tomographic image to be searched that represents a cross section obtained by slicing a specific examination target region of a subject, and one or more steps A slice thickness of a tomographic image representing a cross section obtained by slicing the specific examination target portion of the subject with a predetermined slice thickness, a feature amount representing the content feature of at least a partial region of the tomographic image, and A similar case database in which similar case information associated with interpretation / diagnosis support information associated with interpretation / diagnosis support information for assisting diagnosis based on interpretation of tomographic images with similar content features and / or similar images is registered. By referring to the registered similar case information for multiple different tomographic images, the degree of matching with the slice thickness and feature amount of the image to be searched satisfies the predetermined criteria. Characterized by a step of acquiring similar case information associated with slice thickness and the feature.
本発明の類似症例検索プログラムは、上記の類似症例検索方法の各ステップをコンピュータに実行させるものである。 The similar case search program of the present invention causes a computer to execute each step of the above similar case search method.
本発明の他の態様となる類似症例データベース登録装置は、1以上の被検体の特定の検査対象部位を所定のスライス厚でスライスした断面を表す断層画像のスライス厚と、その断層画像の少なくとも一部の領域の内容的特徴を表す特徴量と、その内容的特徴が類似する断層画像の読影および/またはその類似する画像に基づく診断を支援する読影/診断支援情報とを関連づけてデータベースに登録する登録手段を備えた類似症例データベース登録装置に、1つの被検体の前記の検査対象部位を表す3次元医用画像から、異なる複数のスライス厚で、その3次元医用画像中の関心領域を含むようにスライスした断面を表す複数の断層画像を再構成する画像再構成手段と、再構成された各々の断層画像の少なくとも前記の関心領域の前記の内容的特徴を表す特徴量を取得する特徴量取得手段とを設け、登録手段が、その1つの被検体の前記の検査対象部位についての読影/診断支援情報に対して、画像再構成手段によって再構成された各々の断層画像のスライス厚と特徴量とを関連づけて登録するようにしたことを特徴とする。 The similar case database registration apparatus according to another aspect of the present invention includes a slice thickness of a tomographic image representing a cross section obtained by slicing a specific examination target region of one or more subjects with a predetermined slice thickness, and at least one of the tomographic images. A feature amount representing the content feature of a part area and an interpretation / diagnosis support information that supports interpretation of a tomographic image with similar content feature and / or diagnosis based on the similar image are registered in the database in association with each other. The similar case database registration apparatus having registration means includes a region of interest in the three-dimensional medical image with a plurality of different slice thicknesses from the three-dimensional medical image representing the examination target part of one subject. Image reconstruction means for reconstructing a plurality of tomographic images representing sliced cross sections, and the content of at least the region of interest of each reconstructed tomographic image A feature amount acquisition unit that acquires a feature amount representing a symptom, and the registration unit is reconstructed by the image reconstruction unit with respect to the interpretation / diagnosis support information about the examination target region of the one subject. In addition, the slice thickness and the feature amount of each tomographic image are registered in association with each other.
本発明の類似症例データベース登録方法は、1つの被検体の特定の検査対象部位を表す3次元医用画像から、異なる複数のスライス厚で、その3次元医用画像中の関心領域を含むようにスライスした断面を表す複数の断層画像を再構成するステップと、再構成された各々の断層画像の少なくとも前記の関心領域の内容的特徴を表す特徴量を取得するステップと、その1つの被検体の前記の検査対象部位の断面を表す断層画像と前記の内容的特徴が類似する断層画像の読影および/またはその類似する画像に基づく診断を支援する読影/診断支援情報に対して、再構成された各々の断層画像のスライス厚と特徴量とを関連づけてデータベースに登録するステップとを有することを特徴とする。 The similar case database registration method of the present invention slices from a three-dimensional medical image representing a specific examination target region of one subject so as to include a region of interest in the three-dimensional medical image with a plurality of different slice thicknesses. Reconstructing a plurality of tomographic images representing a cross section; obtaining a feature quantity representing at least the content feature of the region of interest of each reconstructed tomographic image; and Each of the reconstructed information for the interpretation / diagnosis support information for supporting the interpretation of the tomographic image representing the cross-section of the examination target region and the tomographic image having the similar content feature and / or the diagnosis based on the similar image. And a step of associating the slice thickness of the tomographic image with the feature quantity and registering them in a database.
本発明の類似症例データベース登録プログラムは、コンピュータに上記の類似症例データベース登録方法の各ステップを実行させるものである。 The similar case database registration program of this invention makes a computer perform each step of said similar case database registration method.
次に、本発明の詳細について説明する。 Next, details of the present invention will be described.
「被検体」とは検査対象部位を表す画像の撮影を受けた個体であり、人間以外であってもよい。 The “subject” is an individual who has taken an image representing a region to be examined, and may be other than a human being.
「特定の検査対象部位」の具体例としては、人間の胸部等が挙げられる。 A specific example of the “specific examination site” includes a human chest.
「断層画像」は、CTやMRI等のモダリティで取得された3次元医用画像から再構成されたものであり、具体的には、3次元医用画像中の、所定の視線方向に垂直な断面とその視線方向における厚さを表すスライス厚とによって特定される3次元領域内の画素を、その視線方向に垂直な投影面に投影する処理によって得られるものである。 The “tomographic image” is reconstructed from a three-dimensional medical image acquired by a modality such as CT or MRI. Specifically, a cross-section perpendicular to a predetermined line-of-sight direction in the three-dimensional medical image This is obtained by a process of projecting a pixel in a three-dimensional region specified by a slice thickness representing a thickness in the line-of-sight direction onto a projection plane perpendicular to the line-of-sight direction.
「断層画像の一部の領域」の具体例としては、断層画像中の関心領域が挙げられる。関心領域は、読影や診断を行うときに注目され、その領域の特徴が診断に与える影響が大きい領域であり、通常ROI(Region of Interest)と称されている領域のことである。この関心領域は、断層画像の観察者が画像の表示された画面を見ながらポインティングデバイス等によって指定することによって特定されるものであってもよいし、公知の画像解析手法によって検出されたものであってもよいし、これらを組み合わせて、例えば、前者の方法で指定された領域に対して後者の方法で輪郭を抽出したものであってもよいし、後者の方法で検出された領域から前者の方法により選択したものであってよい。 Specific examples of the “partial region of the tomographic image” include a region of interest in the tomographic image. The region of interest is a region that is noticed when interpretation or diagnosis is performed, and has a large influence on the diagnosis by the characteristics of the region, and is usually a region called ROI (Region of Interest). This region of interest may be specified by the observer of the tomographic image by using a pointing device or the like while viewing the screen on which the image is displayed, or may be detected by a known image analysis method. For example, a contour extracted by the latter method may be extracted from the region specified by the former method, or the former may be extracted from the region detected by the latter method. It may be selected by the method.
「内容的特徴」とは、画像の内容に関する特徴であり、具体例としては、輝度、エッジ、形状、大きさ、孤立領域等の特徴が挙げられる。また、複数の種類の特徴を組み合わせたものであってもよい。 The “content feature” is a feature related to the content of the image, and specific examples include features such as brightness, edge, shape, size, and isolated region. Further, a combination of a plurality of types of features may be used.
「特徴量」は、上記の内容的特徴を定量化したものであり、公知の画像解析手法によって得ることができる。 The “feature amount” is obtained by quantifying the content features described above, and can be obtained by a known image analysis method.
「断層画像の少なくとも一部の領域の内容的特徴を表す」とは、断層画像中の関心領域等の一部の領域の内容的特徴を表すものであってもよいし、断層画像全体の内容的特徴を表すものであってもよいし、これらの両方を表すものであってもよいし、断層画像中の一部の領域の内容的特徴を表すものとその一部以外の領域の内容的特徴を表すものとの組合せであってもよい。 “Representing the characteristic features of at least a part of the tomographic image” may represent the characteristic features of a part of the tomographic image, such as the region of interest, or the entire tomographic image. May represent a characteristic of the image, may represent both of them, or may represent a characteristic of a part of a region in a tomographic image, and a content of a region other than the part It may be a combination with a feature.
「読影/診断支援情報」の具体例としては、放射線科医等によるその断層画像の読影レポート、その被検体のその検査対象部位についての最終確定診断情報等が挙げられる他、その被検体のその検査対象部位についての断層画像自体であってもよい。以下、各具体例の詳細について説明する。 Specific examples of the “interpretation / diagnosis support information” include an interpretation report of the tomographic image by a radiologist and the like, final definitive diagnosis information on the examination target part of the subject, and the like of the subject. It may be a tomographic image itself of the examination target site. Details of each specific example will be described below.
読影レポートや最終確定診断情報は、被検体の医用画像の読影結果を表す読影情報および/またはその被検体に対する診断内容を表す診断情報を、その被検体の医用画像との関連づけがなされた状態で記憶する記憶手段から取得された読影情報および/または診断情報に基づいて生成されたものであってもよい。 The interpretation report and the final confirmed diagnosis information are obtained by associating the interpretation information indicating the interpretation result of the medical image of the subject and / or the diagnostic information indicating the diagnostic content of the subject with the medical image of the subject. It may be generated based on interpretation information and / or diagnosis information acquired from the storage means for storing.
この記憶手段の具体例としては、放射線部門情報管理システム(Radiology Information System : RIS)や、医用画像保管通信システム(Picture Archive and Communication System : PACS)、病院情報システムHIS(Hospital Information System : HIS)等の医療情報を管理するシステムに備えられた読影レポートや電子カルテ等を蓄積・記憶するデータベースが挙げられる。 Specific examples of this storage means include Radiology Information Management System (RIS), Medical Image Storage and Communication System (PACS), Hospital Information System HIS (Hospital Information System: HIS), etc. A database for storing and storing interpretation reports and electronic medical records provided in a system for managing medical information.
また、「(読影情報および/または診断情報を)医用画像との関連づけがなされた状態で記憶する」とは、読影情報および/または診断情報と医用画像の一方の一部の情報に基づいて、直接的または間接的に、他方にアクセス可能な状態で記憶することを意味する。「直接的にアクセス可能な状態」の具体例としては、読影情報には自らを識別するレポートIDと読影された医用画像を識別する画像IDが含まれており、一方、医用画像には自らを識別する画像IDとその画像の読影レポートを識別するレポートIDが付帯されており、読影情報側からはこの画像IDに基づいて直接的に医用画像にアクセスしたり、逆に、医用画像側からは、このレポートIDに基づいて直接的に読影情報にアクセスしたりすることができるように記憶されている場合が挙げられる。「間接的にアクセス可能な状態」の具体例としては、診断情報には自らを識別する患者IDとその患者が受けた検査を識別する検査IDが含まれており、一方、医用画像には、自らを識別する画像IDとその画像の撮影を含む検査を識別する検査IDが付帯されており、さらに、検査を識別する検査IDと検査を受けた患者を識別する患者IDと検査で撮影された画像を識別する画像IDが含まれる検査情報が存在し、診断情報側からは、検査IDに基づいて検査情報を特定し、その検査情報に含まれる画像IDに基づいて検査で撮影された画像を特定することによって、診断情報に基づいて医用画像に間接的にアクセスしたり、医用画像側からは、検査IDに基づいて検査情報を特定し、その検査情報に含まれる患者IDに基づいてその患者の診断情報を特定することによって、医用画像に基づいて診断情報に間接的にアクセスしたりすることができる状態が挙げられる。 In addition, “stores (interpretation information and / or diagnosis information) in a state in which the medical image is associated with the medical image” is based on the interpretation information and / or the diagnosis information and a part of information of the medical image. It means storing directly or indirectly in a state where it can access the other. As a specific example of “directly accessible state”, the interpretation information includes a report ID for identifying itself and an image ID for identifying the interpreted medical image, while the medical image identifies itself. An image ID to be identified and a report ID to identify an interpretation report of the image are attached. From the interpretation information side, a medical image is directly accessed based on the image ID, or conversely, from the medical image side. A case where the information is stored so that the interpretation information can be directly accessed based on the report ID. As a specific example of “indirectly accessible state”, the diagnostic information includes a patient ID for identifying itself and an examination ID for identifying an examination that the patient has received, while medical images include An image ID for identifying itself and an examination ID for identifying an examination including imaging of the image are attached, and further, an examination ID for identifying the examination, a patient ID for identifying the patient who has undergone the examination, and an examination were taken. There is examination information including an image ID for identifying an image. From the diagnosis information side, examination information is specified based on the examination ID, and an image photographed in the examination based on the image ID included in the examination information is displayed. By specifying, the medical image is indirectly accessed based on the diagnostic information, or from the medical image side, the examination information is identified based on the examination ID, and the patient is identified based on the patient ID included in the examination information. By identifying the diagnostic information, it includes conditions that can be or indirect access to diagnostic information based on the medical image.
なお、この「記憶手段」が読影情報および/または診断情報と関連づけられた医用画像自体を記憶している必要はない。 Note that the “storage unit” does not need to store the medical image itself associated with the interpretation information and / or the diagnostic information.
また、「読影情報」は、複数の放射線科医等による読影結果が記載された読影レポートであってもよく、「診断情報」には、最終確定診断情報の他、その医用画像に基づく所見に限らず、他の検査や問診の結果、処置の内容等の、その被検体に対する診断の過程で生じるすべての情報を含みうる。 Further, the “interpretation information” may be an interpretation report in which the interpretation results by a plurality of radiologists are described, and the “diagnosis information” includes the final confirmed diagnosis information and the findings based on the medical image. The present invention is not limited to this, and may include all information generated in the course of diagnosis for the subject, such as the results of other examinations and interviews, and the contents of treatment.
また、「読影情報および/または診断情報に基づいて読影/診断支援情報を生成する」とは、読影情報および/または診断情報から所定の情報を抽出して読影/診断支援情報を生成することであってもよいし、読影情報および/または診断情報をそのまま読影/診断支援情報とすることであってもよい。 “Generate interpretation / diagnosis support information based on interpretation information and / or diagnosis information” means that predetermined information is extracted from the interpretation information and / or diagnosis information to generate interpretation / diagnosis support information. The interpretation information and / or diagnosis information may be used as interpretation / diagnosis support information as they are.
読影レポートや最終確定診断情報を類似症例データベースに登録する際には、まず、1つの被検体の特定の検査対象部位を表す3次元医用画像から、異なる複数のスライス厚で、その3次元医用画像中の関心領域を含むようにスライスした断面を表す複数の断層画像を再構成し、上記記憶手段から、その3次元医用画像とその3次元医用画像から再構成された断層画像のうちの少なくとも1つの画像と関連づけられた読影情報および/または診断情報を取得し、取得した読影情報および/または診断情報に基づいて読影/診断支援情報を生成し、生成された読影/診断支援情報に対して、前記の再構成された断層画像のスライス厚と特徴量とを関連づけて登録するようにしてもよいし、先に、上記記憶手段から読影情報および/または診断情報を取得し、取得した読影情報および/または診断情報に基づいて読影/診断支援情報を生成し、取得した読影情報および/または診断情報と関連づけられた3次元医用画像から、異なる複数のスライス厚で、該3次元医用画像中の関心領域を含むようにスライスした断面を表す複数の断層画像を再構成し、先に生成された読影/診断支援情報に対して、再構成された断層画像のスライス厚と特徴量とを関連づけて登録するようにしてもよい。 When registering an interpretation report and final confirmed diagnosis information in the similar case database, first, the three-dimensional medical image having a plurality of different slice thicknesses from a three-dimensional medical image representing a specific examination target region of one subject. And reconstructing a plurality of tomographic images representing sliced slices so as to include the region of interest, and at least one of the three-dimensional medical image and the tomographic image reconstructed from the three-dimensional medical image from the storage unit. Interpretation information and / or diagnosis information associated with one image is generated, interpretation / diagnosis support information is generated based on the acquired interpretation information and / or diagnosis information, and for the generated interpretation / diagnosis support information, The slice thickness and the feature amount of the reconstructed tomographic image may be registered in association with each other. First, the interpretation information and / or diagnostic information is stored from the storage unit. And generating interpretation / diagnosis support information based on the obtained interpretation information and / or diagnosis information, and from the three-dimensional medical image associated with the obtained interpretation information and / or diagnosis information, at a plurality of different slice thicknesses , Reconstructing a plurality of tomographic images representing cross sections sliced so as to include a region of interest in the three-dimensional medical image, and reconstructing slices of the reconstructed tomographic image with respect to the previously generated interpretation / diagnosis support information The thickness and the feature quantity may be registered in association with each other.
また、「読影/診断支援情報」に、その被検体のその検査対象部位についての複数の断層画像のうちの2以上を含むようにし、それら2以上の断層画像の各々と、各画像のスライス厚とが関連づけられたものとし、類似症例の検索の際に、読影/診断支援情報に含まれる2以上の断層画像のうち、検索対象の画像のスライス厚との一致の度合が所定の基準を満たすスライス厚の断層画像を取得するようにすることが好ましい。 Further, the “interpretation / diagnosis support information” includes two or more of the plurality of tomographic images of the examination target region of the subject, and each of the two or more tomographic images and the slice thickness of each image. When searching for similar cases, the degree of coincidence with the slice thickness of the image to be searched among two or more tomographic images included in the interpretation / diagnosis support information satisfies a predetermined criterion. It is preferable to acquire a slice thickness tomographic image.
なお、「読影/診断支援情報」は、その実体的内容が記憶されている場所を示すリンク情報であってもよい。具体例としては、その断層画像の読影レポートやその被検体の電子カルテ、その断層画像自体が記憶されているデータベースの名前やその情報を取得するための検索キー情報等が挙げられる。 The “interpretation / diagnosis support information” may be link information indicating a place where the substantial content is stored. Specific examples include an interpretation report of the tomographic image, an electronic medical record of the subject, a name of a database in which the tomographic image itself is stored, search key information for acquiring the information, and the like.
「類似症例情報」は、1つの被検体の前記の検査対象部位についての読影/診断支援情報に対して、その1つの被検体の前記の検査対象部位の断面を表す、スライス厚の異なる複数の断層画像の各々のスライス厚および前記の特徴量とが関連づけられたものとしてもよい。すなわち、「類似症例情報」を1つの被検体の読影/診断支援情報に対して、複数のスライス厚と、スライス厚毎の特徴量とを関連づけたものとすることができる。上記の本発明による類似症例データベースの登録装置・方法・プログラムは、このような類似症例情報を登録するためのものである。 The “similar case information” is a plurality of different slice thicknesses representing a cross section of the examination target portion of one subject with respect to the interpretation / diagnosis support information about the examination target portion of one subject. The slice thickness of each tomographic image and the feature amount may be associated with each other. That is, “similar case information” can be obtained by associating a plurality of slice thicknesses with feature amounts for each slice thickness with respect to interpretation / diagnosis support information of one subject. The similar case database registration apparatus / method / program according to the present invention is for registering such similar case information.
検索における「(スライス厚および特徴量の一致の度合についての)所定の基準」は、特にスライス厚については、検索対象の断層画像のスライス厚と類似症例情報に関連づけられたスライス厚とが一致することが好ましいが、両スライス厚の差が最小である、または所定の閾値以下である等の基準であってもよい。また、特徴量については、検索対象の断層画像の特徴量と類似症例情報に関連づけられた特徴量との差が最小である、または、前記の差が所定の閾値以下である、前記の差が小さいものから所定の数以内である等の基準が考えられる。したがって、検索によって複数件の類似症例情報が取得されることもありうる。 The “predetermined criterion (for the degree of matching of slice thickness and feature amount)” in the search is the slice thickness of the tomographic image to be searched and the slice thickness associated with the similar case information, especially for the slice thickness. Although it is preferable, it may be a criterion such that the difference between the thicknesses of the two slices is the minimum or not more than a predetermined threshold. As for the feature amount, the difference between the feature amount of the tomographic image to be searched and the feature amount associated with the similar case information is the minimum, or the difference is equal to or less than a predetermined threshold. A criterion such as being within a predetermined number from a small one can be considered. Therefore, a plurality of similar case information may be acquired by the search.
検索時の処理の流れとしては、まず、検索対象の断層画像のスライス厚との一致の度合が所定の基準を満たすスライス厚と関連づけられた類似症例情報を取得し、次に、取得した類似症例情報の中から、検索対象の断層画像の特徴量との一致の度合が所定の基準を満たす特徴量と関連づけられたものを取得することが考えられる。また、前記の所定の基準を満たすスライス厚と関連づけられた類似症例情報が存在すると判断した後に、検索対象の断層画像の前記の特徴量を取得するようにしてもよい。一方、検索対象の画像のスライス厚との一致の度合が所定の基準を満たすスライス厚の類似症例情報が類似症例データベースに登録されていなければ、その検索対象の断層画像の再構成のもとになった3次元医用画像から、類似症例データベースに登録されている類似症例情報のスライス厚との一致の度合が所定の基準を満たすスライス厚で、検索対象の画像のスライス位置を含むようにスライスした断面を表す断層画像を再構成し、再構成された画像を新たな検索対象画像として再度検索を行うようにしてもよい。 As a processing flow at the time of search, first, similar case information associated with a slice thickness whose degree of match with the slice thickness of the tomographic image to be searched satisfies a predetermined criterion is acquired, and then the acquired similar case It is conceivable to acquire information associated with a feature amount whose degree of matching with a feature amount of a tomographic image to be searched satisfies a predetermined criterion. Further, after determining that there is similar case information associated with a slice thickness that satisfies the predetermined criterion, the feature amount of the tomographic image to be searched may be acquired. On the other hand, if similar case information with a slice thickness that satisfies the predetermined criteria for the degree of matching with the slice thickness of the search target image is not registered in the similar case database, the tomographic image of the search target is reconstructed. The sliced image is sliced from the 3D medical image so that the degree of matching with the slice thickness of the similar case information registered in the similar case database satisfies the predetermined criteria and includes the slice position of the search target image. A tomographic image representing a cross section may be reconstructed, and the reconstructed image may be searched again as a new search target image.
また、本発明の類似症例検索装置に、検索によって取得された類似症例情報を出力する
手段を付加することも考えられる。具体的には、ディスプレイ画面への表示による出力や印刷による出力や、電子データとしての装置の記憶媒体への出力等が考えられる。また、出力対象は、類似症例情報のすべてであってもよいし、一部であってもよいし、検索によって所定の基準を満たす類似症例情報が取得されなかった場合には、その旨を表す情報であってもよい。
It is also conceivable to add means for outputting similar case information acquired by searching to the similar case searching apparatus of the present invention. Specifically, output by display on a display screen, output by printing, output to a storage medium of an apparatus as electronic data, and the like can be considered. Further, the output target may be all or a part of the similar case information, and if similar case information satisfying a predetermined criterion is not acquired by the search, this is indicated. It may be information.
なお、本発明の類似症例検索装置に、本発明の類似症例データベース登録装置をさらに設けてもよい。 Note that the similar case retrieval apparatus of the present invention may be further provided with the similar case database registration apparatus of the present invention.
本発明の類似症例検索では、スライス厚の異なる複数の断層画像のスライス厚と特徴量と類似症例情報とが関連づけられた類似症例データベースを参照し、検索対象の断層画像のスライス厚および特徴量との一致の度合が所定の基準を満たすスライス厚および特徴量と関連づけられた類似症例情報を取得するので、画像のスライス厚を考慮しつつ、特徴量に基づく画像の内容的特徴の類似性の判定を行うことが可能になり、類似症例の検索の精度が向上する。また、類似症例データベースに、検索対象の画像との類似性の判定のために断層画像そのものを登録せずに、断層画像の特徴量を登録するようにしたので、データベースに登録するデータ容量が減少するとともに、検索の都度、データベース中の断層画像から特徴量を算出する処理を行う必要がなくなり、システムの処理負荷も軽減される。 In the similar case search of the present invention, the slice thickness and the feature amount of the tomographic image to be searched are referred to by referring to the similar case database in which the slice thickness, feature amount, and similar case information of a plurality of tomographic images having different slice thicknesses are associated. Similar case information associated with slice thicknesses and feature quantities whose degree of coincidence satisfies a predetermined criterion is acquired, so that similarity of content features of an image based on feature quantities is determined while considering slice thickness of the image And the accuracy of the search for similar cases is improved. In addition, the feature amount of the tomographic image is registered in the similar case database without registering the tomographic image itself in order to determine the similarity with the image to be searched, so the data capacity to be registered in the database is reduced. At the same time, it is not necessary to perform a process of calculating the feature amount from the tomographic image in the database every time the search is performed, and the processing load on the system is reduced.
また、検索対象の断層画像のスライス厚との一致の度合が所定の基準を満たすスライス厚と関連づけられた類似症例情報を取得した後で、取得した類似症例情報の中から、検索対象の断層画像の特徴量との一致の度合が所定の基準を満たす特徴量と関連づけられたものを取得するようにした場合には、スライス厚が所定の基準を満たさない類似症例情報との特徴量の判定を行わないようになるので、スライス厚が異なっているために画像の特性が異なる画像と関連づけられた類似症例情報を取得しなくなり、検索精度が向上する。さらに、前記の所定の基準を満たすスライス厚と関連づけられた類似症例情報が存在すると判断した後に、検索対象の断層画像の前記の特徴量を取得するようすれば、スライス厚が所定の基準を満たす類似症例情報が存在しない場合には検索対象の断層画像からの特徴量の取得を行わないので、システムの処理負荷が軽減される。 In addition, after acquiring similar case information associated with a slice thickness whose degree of match with the slice thickness of the tomographic image to be searched satisfies a predetermined criterion, the tomographic image to be searched is acquired from the acquired similar case information If the feature amount is related to a feature amount satisfying a predetermined criterion, the feature amount is determined for similar case information whose slice thickness does not satisfy the predetermined criterion. Since the slice thickness is different, similar case information associated with images having different image characteristics is not acquired and the search accuracy is improved. Furthermore, if it is determined that there is similar case information associated with a slice thickness that satisfies the predetermined criterion, the slice thickness satisfies the predetermined criterion if the feature amount of the tomographic image to be searched is acquired. When there is no similar case information, the feature amount is not acquired from the tomographic image to be searched, so that the processing load on the system is reduced.
また、類似症例データベースへの登録の際に、1つの被検体の3次元医用画像から、スライス厚の異なる複数の断層画像を再構成し、その被検体の読影/診断支援情報に対して、再構成された各々の断層画像のスライス厚と特徴量とを関連づけて登録するようにすれば、1つの読影/診断支援情報を効率的に登録することができ、類似症例情報の有効活用に資する。また、検索の際には、その類似症例情報にヒットする可能性が高くなり、検索精度の向上にも資する。 In addition, when registering in the similar case database, a plurality of tomographic images having different slice thicknesses are reconstructed from the three-dimensional medical image of one subject, and the interpretation / diagnosis support information of the subject is reconstructed. If the slice thickness and the feature quantity of each configured tomographic image are registered in association with each other, one interpretation / diagnosis support information can be efficiently registered, which contributes to effective use of similar case information. Further, when searching, the possibility of hitting the similar case information is increased, which contributes to improvement of search accuracy.
さらに、読影/診断支援情報に、その情報と関連づけられる断層画像自体を含むようにすれば、検索対象画像の読影や検索対象画像に基づく診断の際に、読影/診断支援情報として得られた断層画像を参照することが可能になり、両画像の比較読影に資する。ここで、読影/診断支援情報に、その情報と関連づけられる複数の断層画像を含むようにするとともに、複数の断層画像と各画像のスライス厚とを関連づけ、検索の際、検索対象画像のスライス厚との一致の度合が所定の基準を満たす断層画像を読影/診断支援情報として取得するようにすれば、検索対象画像と読影/診断支援情報として取得された断層画像との間にスライス厚の相違がなくなるので、より精度の高い比較読影が可能になり、読影/診断精度の向上に資する。 Furthermore, if the interpretation / diagnosis support information includes the tomographic image itself associated with the information, the tomogram obtained as the interpretation / diagnosis support information at the time of interpretation of the search target image or diagnosis based on the search target image. It becomes possible to refer to images, which contributes to comparative interpretation of both images. Here, the interpretation / diagnosis support information includes a plurality of tomographic images associated with the information, and associates the plurality of tomographic images with the slice thickness of each image, and at the time of retrieval, the slice thickness of the retrieval target image. If a tomographic image whose degree of coincidence with a predetermined criterion is acquired as interpretation / diagnosis support information, a difference in slice thickness between the search target image and the tomographic image acquired as interpretation / diagnosis support information Therefore, comparative interpretation with higher accuracy is possible, which contributes to improvement of interpretation / diagnosis accuracy.
また、類似症例情報中の特徴量を、画像中の関心領域の特徴量とし、検索の際には、検索対象画像中の関心領域の特徴量との一致の度合を判定するようにすれば、画像中の重要部分での内容的特徴の類似性を判定することによって、より適切な類似症例の検索が可能になり、読影/診断精度の向上に資する。その際、検索画像中の関心領域を自動的に検出するようにすれば、読影者/診断者の作業負担の軽減や、画像中の病変部の見落としの軽減に資する。 Further, if the feature amount in the similar case information is set as the feature amount of the region of interest in the image and the search is performed, the degree of matching with the feature amount of the region of interest in the search target image is determined. By determining the similarity of the content features in the important part in the image, it is possible to search for a more appropriate similar case, which contributes to improvement in interpretation / diagnosis accuracy. At that time, if the region of interest in the search image is automatically detected, it contributes to a reduction in the work burden of the interpreter / diagnostic person and a reduction in oversight of a lesion in the image.
また、検索の結果、検索対象の画像のスライス厚との一致の度合が所定の基準を満たすスライス厚の類似症例情報が類似症例データベースに登録されていなかった場合、検索対象の画像のもととなる3次元医用画像から、類似症例データベースに登録されている類似症例情報のスライス厚との一致の度合が所定の基準を満たすスライス厚で、検索対象の画像のスライス位置を含むようにスライスした断面を表す断層画像を再構成し、再構成された画像に基づいて再度検索を行うようにすれば、該当する類似症例がないというケースが減少し、検索精度が向上し、読影/診断精度の向上にも資する。 As a result of the search, if similar case information having a slice thickness whose degree of matching with the slice thickness of the image to be searched satisfies a predetermined criterion is not registered in the similar case database, A slice obtained by slicing a 3D medical image to include a slice position of an image to be searched with a slice thickness that satisfies a predetermined standard with a matching degree with a slice thickness of similar case information registered in the similar case database If the tomographic image representing the image is reconstructed and the search is performed again based on the reconstructed image, the case where there is no corresponding similar case is reduced, the search accuracy is improved, and the interpretation / diagnosis accuracy is improved. Also contribute to.
また、類似症例データベースへの登録の際、RISや、PACS、HIS等の他の医療情報システムに記憶されている読影/診断情報を取得して読影/診断支援情報を生成するようにした場合には、読影/診断支援情報を一から手作業で生成する手間を省くことが可能になるとともに、医療機関における他のシステムとの連携が強化され、情報資源の有効活用が図られる。さらに、読影/診断支援情報を、読影/診断情報や画像データに対するリンク情報とした場合には、同じ内容の情報を複数箇所に記憶することによる記憶容量の無駄を省くことができるとともに、複数の箇所に記憶される情報の一方のみが更新されることによって発生するデータ内容の不整合を回避することができるので、情報の信頼性が高まり、また、このような不整合を回避するためのデータの同期処理も不要になることから、システムの処理負荷が軽減される。特に、診断情報の一例である電子カルテの情報等は随時更新される性質のものであるから、このデータ内容の不整合の問題が回避される効果は高い。 In addition, when registering in the similar case database, interpretation / diagnosis information stored in other medical information systems such as RIS, PACS, and HIS is acquired to generate interpretation / diagnosis support information. This makes it possible to save the trouble of manually generating the interpretation / diagnosis support information from scratch, and enhances the cooperation with other systems in the medical institution, thereby effectively utilizing the information resources. Furthermore, when the interpretation / diagnosis support information is link information for interpretation / diagnosis information or image data, it is possible to save waste of storage capacity by storing information of the same contents in a plurality of locations, and Data content inconsistency that occurs when only one of the information stored in the location is updated can be avoided, so the reliability of the information is improved, and data for avoiding such inconsistency Since this synchronization processing is also unnecessary, the processing load on the system is reduced. In particular, since information on electronic medical records, which is an example of diagnostic information, has the property of being updated as needed, the effect of avoiding this data content inconsistency problem is high.
以下、図面を参照しつつ、本発明の実施の形態について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1に、本発明の第1の実施形態における類似症例検索装置が導入された医療情報システムの概略構成を示す。図に示すように、このシステムは、医用画像の撮影装置(モダリティ)1、画像品質チェック用ワークステーション(QA−WS)2、画像診断医用ワークステーション3(3a,3b)、画像情報管理サーバ4、画像情報データベース5、読影レポートサーバ6、読影レポートデータベース7、類似症例検索サーバ8、類似症例データベース9が、ネットワーク19を介して互いに通信可能な状態で接続されて構成されている。各種データベースを除く各機器は、CD−ROM等の記録媒体からインストールされたプログラムによって制御される。また、プログラムは、インターネット等のネットワーク経由で接続されたサーバからダウンロードされた後にインストールされたものであってもよい。
FIG. 1 shows a schematic configuration of a medical information system in which the similar case retrieval apparatus according to the first embodiment of the present invention is introduced. As shown in the figure, this system includes a medical image photographing device (modality) 1, an image quality check workstation (QA-WS) 2, an image diagnostic medical workstation 3 (3 a, 3 b), and an image
モダリティ1には、被検体の検査対象部位を撮影することにより、その部位を3次元的に表した画像の画像データを生成し、その画像データにDICOM規格で規定された付帯情報を付加して、画像情報として出力する装置が含まれる。具体例としては、CT(Computed Tomography)、MR(Magnetic Resonance)、PET(Positron Emission Tomography)、超音波撮影装置などが挙げられる。なお、以下では、被写体を表す画像データと画像データの付帯情報の組を「画像情報」と称することとする。すなわち「画像情報」の中には画像に係るテキスト情報も含まれる。
The
QA−WS2は、汎用の処理装置(コンピュータ)と1台または2台の高精細ディスプレイとキーボード・マウスなどの入力機器により構成される。処理装置には、検査技師の作業を支援するためのソフトウェアが組み込まれている。QA−WS2は、そのソフトウェアプログラムの実行によって実現される機能により、モダリティ1からDICOMに準拠した画像情報を受信し、受信した画像情報に含まれる画像データと付帯情報の内容を画面に表示することで検査技師に確認を促す。そして、検査技師による確認が済んだ画像情報を、ネットワーク19を介して画像情報管理サーバ4に転送し、その画像情報の画像情報データベース5への登録を要求する。
The QA-
画像診断医用ワークステーション3は、画像診断医が画像の読影や読影レポートの作成に利用する装置であり、処理装置と1台または2台の高精細ディスプレイとキーボード・マウスなどの入力機器により構成される。この装置では、画像情報管理サーバ4に対する画像の閲覧要求や、画像情報管理サーバ4から受信した画像の表示、画像中の病変らしき部分の自動検出・強調表示、読影レポートの作成の支援、読影レポートサーバ6に対する読影レポートの登録要求や閲覧要求、読影レポートサーバ6から受信した読影レポートの表示、類似症例検索サーバ8への類似症例情報の閲覧要求や、類似症例検索サーバ8から受信した類似症例情報の表示、類似症例検索サーバへの類似症例情報の登録要求等が行われる。
The image diagnostic
画像情報管理サーバ4は、汎用の比較的処理能力の高いコンピュータにデータベース管理システム(DataBase Management System: DBMS)の機能を提供するソフトウェアプログラムを組み込んだものである。画像情報管理サーバ4は画像情報データベース5が構成される大容量ストレージを備えている。このストレージは、画像情報管理サーバ4とデータバスによって接続された大容量のハードディスク装置であってもよいし、ネットワーク19に接続されているNAS(Network Attached Storage)やSAN(Storage Area Network)に接続されたディスク装置であってもよい。
The image
画像情報データベース5には、被写体画像を表す画像データと付帯情報とが登録される。付帯情報には、例えば、個々の画像を識別するための画像ID、被写体を識別するための患者ID、検査を識別するための検査ID、画像情報ごとに割り振られるユニークなID(UID)、その画像情報が生成された検査日、検査時刻、その画像情報を取得するための検査で使用されたモダリティの種類、患者氏名、年齢、性別などの患者情報、検査部位(撮影部位)、撮影条件(造影剤の使用有無/使用された色素、放射線核種、放射線量など)、1回の検査で複数の画像を取得したときのシリーズ番号あるいは採取番号などの情報が含まれうる。画像情報は、例えばXMLやSGMLデータとして管理されうる。
In the
画像情報管理サーバ4は、QA−WS2からの画像情報の登録要求を受け付けると、その画像情報をデータベース用のフォーマットに整えて画像情報データベース5に登録する。
When the image
また、画像管理サーバ4は、画像診断医用ワークステーション3からの閲覧要求をネットワーク19経由で受信すると、上記画像情報データベース5に登録されている画像情報を検索し、抽出された画像情報を要求元の画像診断医用ワークステーション3に送信する。
Further, when the
画像診断医用ワークステーション3は、画像診断医等のユーザによって読影対象画像の閲覧を要求する操作が行われると、画像管理サーバ8に対して閲覧要求を送信し、読影に必要な画像情報を取得する。そして、その画像情報をモニタ画面に表示し、画像診断医からの要求に応じて病変の自動検出処理などを実行する。
When an operation requesting browsing of an image to be interpreted is performed by a user such as an image diagnostician, the diagnostic imaging
さらに、画像診断医用ワークステーション3は、読影レポートの作成を支援するレポート作成画面をモニタに表示し、放射線科医から読影に基づいて行った診断(所見など)の内容を示すテキストが入力されたときに、入力された情報と読影の対象とされた画像(以下、読影対象画像)を記録した読影レポートを生成する。読影対象画像が複数あるときは、読影レポートには、診断に与えた影響が最も大きい代表的な画像(以下、代表画像)を記録する。画像診断医用ワークステーション3は、生成した読影レポートを、ネットワーク19を介して読影レポートサーバ6に転送し、その読影レポートの読影レポートデータベース7への登録を要求する。
Furthermore, the image diagnostic
読影レポートサーバ6は、汎用の比較的処理能力の高いコンピュータにデータベース管理システム(DataBase Management System: DBMS)の機能を提供するソフトウェアプログラムを組み込んだものであり、画像診断医用ワークステーション3からの読影レポートの登録要求を受け付けると、その読影レポートをデータベース用のフォーマットに整えて読影レポートデータベース7に登録する。
The
読影レポートデータベース7には、例えば、読影対象画像もしくは代表画像を識別する画像IDや、読影を行った画像診断医を識別するための読影者ID、関心領域の位置情報、所見、所見の確信度といった情報が登録される。この他、画像の読影時に画像情報の付帯情報を参照することで取得された検査番号、患者番号、さらには、読影対象画像または代表画像の画像データ自体も等も含まれうる。画像データは、画像情報データベース5に登録されている画像データをそのままコピーしたものでもよいが、画像情報データベース5に登録されている画像データよりも画素数が少ない(間引きされた)縮小画像データでもよい。また、画像データは、画像情報データベース5内の画像データの保管場所(フォルダなど)およびファイル名を示すリンク情報であってもよい。また、関心領域の位置情報は、読影レポートデータベース7ではなく、画像データの付帯情報として画像情報データベース5に登録しておいてもよい。なお、読影レポートは、例えばXMLやSGMLデータとして管理されうる。
The
読影レポートサーバ6は、画像診断医用ワークステーション3からの閲覧要求をネットワーク19経由で受信すると、読影レポートデータベース7に登録されている読影レポートを検索し、抽出された読影レポートを要求元の画像診断医用ワークステーション3に送信する。
When the image
類似症例検索サーバ8は、汎用の比較的処理能力の高いコンピュータにデータベース管理システム(DataBase Management System: DBMS)の機能を提供するソフトウェアプログラムを組み込んだものである。また、類似症例データベース9には、過去に読影された画像とその画像の読影結果とが類似症例情報として登録されている。本発明の実施形態となる類似症例検索装置は、画像診断医用ワークステーション3と類似症例データベース9を有する類似症例検索サーバ8がネットワーク19によって接続されたクライアント・サーバ型のシステムとして実装されている。詳細については後述する。
The similar
ネットワーク19は病院内の各種装置を接続するローカルエリアネットワークである。但し、画像診断医用ワークステーション3が他の病院あるいは診療所にも設置されている場合には、ネットワーク19は、各病院のローカルエリアネットワーク同士をインターネットもしくは専用回線で接続した構成としてもよい。いずれの場合にも、ネットワーク9は光ネットワークなど画像情報の高速転送を実現できるものとすることが望ましい。
The
以下、CTによって取得された人間の胸部の3次元医用画像を所定のスライス厚で再構成することによって得られる断層画像を読影対象とした場合を例にして、本発明の第1の実施形態となる類似症例検索装置の詳細について説明する。図2は、この類似症例検索装置の構成を模式的に示したブロック図である。図に示したように、この装置は、読影対象画像の読影を支援する読影支援情報、すなわち、過去に読影された画像およびその画像の読影結果が、その画像のスライス厚やその画像中の関心領域の特徴量と関連づけられて類似症例情報として登録されている類似症例データベース9と、画像取得部21によって画像情報データベース5から取得された読影対象画像I1のスライス厚T1を取得するスライス厚取得部22と、読影対象画像I1中の関心領域R1を設定する関心領域設定部23と、設定された関心領域R1の特徴量C1を取得する特徴量取得部24と、スライス厚T1と特徴量C1とに基づいて、読影対象画像I1の読影を支援する読影支援情報A1、すなわち、読影対象画像I1と類似する画像およびその画像の読影・診断結果を表す情報を類似症例データベース9から取得する類似症例検索部25とから構成される。
Hereinafter, taking as an example a case where a tomographic image obtained by reconstructing a three-dimensional medical image of a human chest acquired by CT with a predetermined slice thickness is used as an interpretation target, the first embodiment of the present invention and Details of the similar case retrieval apparatus will be described. FIG. 2 is a block diagram schematically showing the configuration of the similar case retrieval apparatus. As shown in the figure, this apparatus uses interpretation support information that supports interpretation of an image to be interpreted, that is, an image that has been interpreted in the past and an interpretation result of the image, the slice thickness of the image and the interest in the image. A
類似症例検索部25は、読影対象画像I1のスライス厚T1との一致の度合が所定の基準を満たすスライス厚(T1'とする)と関連づけられた類似症例情報が存在するかどうかを検索するスライス厚検索部25aと、スライス厚がT1'で、かつ、特徴量が、読影対象画像I1の関心領域R1の特徴量C1との一致の度合が所定の基準を満たす類似症例情報(P1とする)が存在するかどうかを検索する特徴量検索部25bと、類似症例情報P1に基づいて読影支援情報A1を取得する読影支援情報取得部25cとから構成される。
Similar
図3は、類似症例データベース9の構成を模式的に表したものである。図に示したように、類似症例データベース9は、そのデータベースに登録されているスライス厚の種類が登録されているスライス厚テーブル26と、過去に読影された画像のファイル名およびその画像の読影・診断結果を含む診断情報のファイル名とがその画像のスライス厚とその画像中の関心領域の特徴量と関連づけて登録されているスライス厚別特徴量テーブル27(27a,27b,27c)と、過去に読影された画像の画像ファイルが格納されている画像ファイル群28と、その画像の所見やその画像に基づく最終確定診断情報等の読影・診断結果を含む診断情報のファイルが格納されている診断情報ファイル群29とから構成されている。この実施形態では、スライス厚の具体例として、スライス厚1mm、2mm、5mmの画像に関する特徴量、画像ファイル名、診断情報ファイル名が、各々、テーブル27a,27b,27cに登録されているものとする。したがって、スライス厚テーブル26には、1mm、2mm、5mmの3件のレコードが登録されている。また、スライス厚別特徴量テーブル27a,27b,27cの画像ファイル名、診断情報ファイル名は、各々、画像ファイル群28、診断情報ファイル群29におけるそのファイルの格納場所を示すポインタとして機能する。また、特徴量の具体例としては、関心領域中の異常陰影の位置や大きさ(径)、輝度ヒストグラムの他、特許文献2記載のAAM(T.F.クーツ(Cootes), G.J.エドワーズ(Edwards), C.J.テイラー(Taylor)、「動的見えモデル(Active Appearance Models)」、第5回計算機視覚欧州会議報(In Proc. 5th European Conference on Computer Vision)、ドイツ、シュプリンガー(Springer)、1998年、vol.2、p.p.484-498)の手法によって得られる、関心領域中の病変部の形状情報やテキスチャ情報等が挙げられる。なお、特徴量は複数の種類を組み合わせたものであってもよい。
FIG. 3 schematically shows the configuration of the
なお、各処理部は、画像診断医用ワークステーション3や類似症例検索サーバ8、ネットワーク19の性能や、画像診断医用ワークステーション3の設置台数、類似症例検索サーバ8に対するアクセス頻度、応答時間等の様々な性能要件に応じて、適宜分散して実装される。例えば、画像取得部21とスライス厚取得部22、関心領域設定部23、特徴量取得部24を画像診断医用ワークステーション3に実装し、類似症例検索部25のみ類似画像検索サーバに実装する形態や、画像取得部21とスライス厚取得部22、関心領域設定部23を画像診断医用ワークステーション3に実装し、特徴量取得部24と類似症例検索部25を類似症例検索サーバ8に実装する形態等が考えられる。
Each processing unit has various functions such as the performance of the diagnostic imaging
次に、図4のフローチャートを用いて、類似症例検索処理の詳細と処理の流れについて説明する。 Next, the details of the similar case search process and the flow of the process will be described using the flowchart of FIG.
まず、画像診断医は、この医療情報システムへのアクセスのためのユーザID・パスワード、指紋等の生体情報等によるユーザ認証を画像診断医用ワークステーション3で行う。ユーザ認証に成功すると、オーダリングシステムによって発行された画像診断オーダに基づく検査(読影)対象画像リストがディスプレイに表示される。画像診断医は、マウス等の入力機器を用いて検査対象画像リストから読影対象の画像I1を選択する。画像取得部21が、選択された画像I1の画像IDを検索キーとする画像情報管理サーバ4への閲覧要求を行い、この要求を受信した画像情報管理サーバ4が画像情報データベース5に対する検索を行って、読影対象画像I1の画像ファイルを取得し、要求を送信した画像診断医用ワークステーション3にその画像ファイルを送信する。画像ファイルを受信した画像診断医用ワークステーション3は、その画像ファイルの画像データに基づいて読影対象画像I1をディスプレイに表示する(#1)。
First, the image diagnostician performs user authentication by means of the image diagnostic
画像診断医は、図5の画面例に示すように、マウスの右クリックを行うと、画像の読影を支援する各種機能を一覧化したメニューが表示される。ここで、画像診断医がマウス等を用いて「類似症例検索」を選択して左クリックを行うと、画像診断医用ワークステーション3では、メニュー中の「類似症例検索」項目に対する左クリックイベントを検出し(#2; YES)、後続の類似症例検索処理が行われる。一方、それ以外の項目が選択された場合には、選択された処理が行われる(#2; NO)。
As shown in the screen example of FIG. 5, when the image diagnostician performs a right click of the mouse, a menu listing various functions for supporting image interpretation is displayed. Here, when the image diagnostician selects “similar case search” using a mouse or the like and performs a left click, the image diagnostic
「類似症例検索」が選択された場合(#2; YES)、スライス厚取得部22が、表示されている読影対象画像I1のDICOM情報を読み取り、読影対象画像I1を元のCT画像データから再構成して生成した際のスライス厚T1を取得する(#3)。ここでは、具体例として、読影対象画像I1のスライス厚T1が2mmであったとする。
When “similar case search” is selected (# 2; YES), the slice
スライス厚検索部25aは、読影対象画像I1のスライス厚T1を検索キーとして、類似症例データベース9のスライス厚テーブル26を参照し、スライス厚T1との一致の度合が所定の基準を満たすスライス厚T1'と関連づけられた類似症例情報が存在するかどうかを検索する(#4)。ここでは、読影対象画像のスライス厚と一致する類似症例情報が登録されている場合に所定の基準を満たすと判定するものとする(すなわち、T1=T1')。上記の具体例では、読影対象画像I1のスライス厚T1は2mmであり、スライス厚「2mm」のレコードがスライス厚テーブル26に存在するので、所定の基準を満たすと判定される(#5; YES)。なお、スライス厚T1が所定の基準を満たさない場合、すなわち、ここでは、スライス厚T1と一致するスライス厚のレコードがスライス厚テーブル26に存在しない場合には(#5; NO)、「類似症例なし」を示すメッセージが画像診断医用ワークステーション3のディスプレイに表示される(#11)。
Slice
スライス厚T1が所定の基準を満たす場合には(#5; YES)、画像診断医は、画像診断医用ワークステーション3のディスプレイに表示される、関心領域の選択を促すメッセージに応じて、マウス等を用いて関心領域R1を選択する。これにより、関心領域設定部23は、関心領域R1の位置情報を特定する(#6)。
When the slice thickness T 1 satisfies a predetermined criterion (# 5; YES), the image diagnostician responds to a message prompting the user to select a region of interest displayed on the display of the image
特徴量取得部24は、所定の方法によって関心領域R1の特徴量C1を算出する(#7)。ここで、所定の方法とは、スライス厚別特徴量テーブル27cに登録されている特徴量の算出方法と同じ方法を意味する。
The feature
特徴量検索部25bは、スライス厚別特徴量テーブル27のうちスライス厚がT1'のものを参照し、読影対象画像I1の関心領域R1の特徴量C1との一致の度合が所定の基準を満たす特徴量である類似症例情報P1が存在するかどうかを検索する(#8)。ここでは、スライス厚別特徴量テーブル27に登録されている特徴量と読影対象画像I1から得られた特徴量C1との差が最小となり、かつ、その差が所定の閾値以下となる場合に所定の基準を満たすと判定するものとする。上記の具体例では、算出された特徴量C1を検索キーとして、スライス厚=2mmの特徴量テーブル27bを参照し、この基準を満たす類似症例情報レコードP1を取得する。なお、この基準を満たすレコードがスライス厚別特徴量テーブル27に存在しない場合には(#9; NO)、「類似症例なし」を示すメッセージが画像診断医用ワークステーション3のディスプレイに表示される(#11)。
The feature
一方、この基準を満たすレコードP1がスライス厚別特徴量テーブル27に存在する場合には(#9; YES)、読影支援情報取得部25cが、レコードP1の画像ファイル名と診断情報ファイル名を読み取り、そのファイルを、各々、画像ファイル群28、診断情報ファイル群29から取得し、これらのファイル、すなわち読影支援情報A1を画像診断医用ワークステーション3に転送する。画像診断医用ワークステーション3では、受信した画像ファイルと診断情報ファイルが読み込まれ、画像と診断情報とが画像診断医用ワークステーション3のディスプレイに表示される(#11)。
On the other hand, when the record P 1 satisfying this criterion exists in the slice thickness feature quantity table 27 (# 9; YES), the image interpretation support
このように、本発明の第1の実施形態となる類似症例検索装置では、類似症例検索部25が、類似症例データベース9を参照し、読影対象画像I1のスライス厚T1および関心領域R1の特徴量C1との一致の度合が所定の基準を満たすスライス厚および特徴量と関連づけられた類似症例情報に基づいて、読影支援情報A1を取得するので、読影対象画像のスライス厚を考慮しつつ、特徴量に基づく画像の内容的特徴の類似性の判定を行うことが可能になり、類似症例の検索の精度が向上する。また、類似症例データベース9に、読影対象の画像との類似性の判定のために断層画像そのものを登録せずに、断層画像の特徴量を登録するようにしたので、データベースに登録するデータ容量を削減できるとともに、検索の都度、データベース中の断層画像から特徴量を算出する処理を行う必要がなくなり、システムの処理負荷も軽減される。
Thus, in the similar case retrieval apparatus according to the first embodiment of the present invention, similar
また、類似症例検索部25のスライス厚検索部25aが、類似症例データベース9のスライス厚テーブル26を参照し、読影対象画像I1のスライス厚T1との一致の度合が所定の基準を満たすスライス厚の類似症例情報を類似症例データベース9に登録されているかどうかを判定し、登録がある場合にのみ、関心領域設定部23による関心領域R1の設定以降の処理が行われるようにしたので、スライス厚が異なっているために画像の特性が異なっているにもかかわらず、画像中の関心領域の特徴量が近似するような画像と関連づけられた類似症例情報が誤って取得されることがなくなり、検索精度が向上する。また、上記の登録がある場合にのみ、関心領域設定部23による関心領域R1の設定や特徴量取得部24による特徴量C1の算出等の処理を行うので、スライス厚が所定の基準を満たさないために読影対象画像I1に対する適切な類似症例情報が存在しない場合には、結果的に不要な処理となる関心領域R1の設定や特徴量C1の算出を行わなくなり、画像診断医の作業負荷やシステムの処理負荷が軽減される。さらに、類似症例データベース9に登録されているスライス厚の種類をインデックス化したスライス厚テーブル26を設けたので、スライス厚検索部25aが類似症例データベース9に登録されているすべてのレコードにアクセスする必要がなくなり、システムの処理時間が短縮され、処理負荷も軽減される。
Also, slice
また、類似症例データベース9には、読影支援情報A1として断層画像自体が含まれるので、読影対象画像の読影の際に、読影支援情報A1として得られた断層画像を参照することが可能になり、両画像の比較読影に資する。
Further, in the
さらに、この類似症例検索で取り扱う特徴量を、画像中の関心領域の特徴量としたので、画像中の重要部分での内容的特徴の類似性を判定することによって、より適切な類似症例の検索が可能になり、読影精度の向上に資する。 Furthermore, since the feature quantity handled in this similar case search is the feature quantity of the region of interest in the image, it is possible to search for a more appropriate similar case by determining the similarity of the content features in the important part of the image. Can contribute to the improvement of interpretation accuracy.
上記の実施形態では、画像診断医が読影対象画像I1中の関心領域R1を手作業で指定するようにしていたが、画像I1中の病変候補領域を関心領域R1として自動検出するようにしてもよい。この場合、図4のステップ#1で読影対象画像I1をディスプレイに表示する際に、検出された関心領域R1をマーキング等によって識別可能な態様にして表示してもよいし、例えば図5のようにマウスの右クリックによって表示されるメニューに「自動検出結果表示」という項目を追加しておき、画像診断医がこの項目を左クリックして選択したら、自動検出処理および検出結果の表示を行うようにしてもよい。また、自動検出方法の具体例は特開2005-198887号公報や特開2005-246032号公報等に記載の公知の方法でよい。さらに、自動検出の結果、病変候補領域が複数ある場合には、画像診断医がその中の1つを関心領域R1として選択するようにしてもよいし、自動検出による病変候補領域を修正するユーザーインターフェースを設けてもよい。このように、読影対象画像I1中の関心領域R1を自動的に検出するようにすれば、読影者の作業負担の軽減や、画像中の病変部の見落としの軽減に資する。なお、上記の実施形態のように手作業で関心領域R1を指定する場合でも自動検出処理を組み合わせることが考えられる。例えば、画像診断医が病変候補を含む矩形領域を指定し、その領域から病変候補領域を関心領域R1として自動検出することが考えられる。
In the above embodiments, the imaging diagnostician is but a region of interest R 1 in interpretation target images I 1 had to be specified manually, automatically detects a lesion candidate region in the image I 1 as a region of interest R 1 You may do it. In this case, when the image to be interpreted I 1 is displayed on the display in
また、上記の実施形態では、スライス厚検索部25aにおいて、読影対象画像I1のスライス厚とスライス厚テーブル26に登録されているスライス厚とが一致することを基準としていたが、スライス厚テーブル26に登録されているスライス厚のうち、読影対象画像I1のスライス厚との差が最小となるものを所定の基準を満たすものとしてもよい。
In the above embodiment, the slice
同様に、特徴量検索部25bにおいても、スライス厚別特徴量テーブル27で、スライス厚検索部25aで検索されたスライス厚と関連づけられた類似症例情報のうち、類似症例情報中の特徴量と読影対象画像I1の関心領域R1の特徴量C1との差が小さいものから所定の数の類似症例情報を所定の基準を満たすものとしてもよいし、上記の差が所定の閾値以下のものすべてを所定の基準を満たすものとしてもよい。また、特徴量が複数種類の尺度から構成されている場合には、各尺度による値に対して重みづけを行うことによって総合的特徴量を求め、この総合的特徴量について所定の基準に基づく判定を行うようにしてもよいし、各尺度による値をそのまま用いて多次元の特徴量とし、多次元空間における距離の大小によって類似・非類似の判定を行うようにしてもよい。
Similarly, in the feature
さらに、スライス厚を特徴量の一尺度として取り扱うことも可能である。例えば、スライス厚に対する重みづけを他の尺度よりも大きくして総合的特徴量を求めるようにすることが考えられる。この場合、類似症例検索部25において、スライス厚検索部25aを設けず、類似症例データベース9においては、スライス厚テーブル26、スライス厚別特徴量テーブル27の代わりに総合的特徴量と画像ファイル名、診断情報ファイル名を関連づけたテーブルとし、特徴量検索部25bは、読影対象画像I1についての総合的特徴量とこのテーブルに登録されている総合的特徴量との比較により、所定の基準を満たす類似症例情報を取得するようにすればよい。
Furthermore, the slice thickness can be handled as a measure of the feature amount. For example, it is conceivable that the total feature amount is obtained by making the weight for the slice thickness larger than other scales. In this case, the similar
上記の実施形態では、類似症例データベース9の検索の結果、所定の基準を満たすスライス厚と関連づけられた類似症例情報が登録されていなかった場合に、「類似症例なし」を示すメッセージが画像診断医用ワークステーション3のディスプレイに表示されるようにしていたが(図4:#9; NO、#11)、読影対象画像の再構成元の画像である3次元医用画像から所定の基準を満たすスライス厚の画像を再構成し、類似症例データベース9の検索を行うようにしてもよい。図6は、このような類似症例検索装置の構成を模式的に示したブロック図である。この装置は、上記第1の実施形態の類似症例検索装置(図2)に、読影対象画像I1の再構成元の3次元医用画像I0を取得する3次元画像取得部30と、取得された3次元医用画像I0から、スライス厚テーブル26に登録されているスライス厚T2のスライス画像を再構成する画像再構成部31とをさらに付加した構成となっている。
In the above-described embodiment, if similar case information associated with a slice thickness that satisfies a predetermined criterion is not registered as a result of searching the
図7は、図6の類似症例検索装置による処理の流れを示すフローチャートである。図に示したように、この類似症例検索装置では、上記の実施例と同様にして、読影対象の画像I1の選択・表示を行った後(#1)、画像診断医によって「類似症例検索」が選択されると(#2)、スライス厚取得部22が読影対象画像I1を取得し(#3)、スライス厚検索部25aが、読影対象画像I1のスライス厚T1を検索キーとして、類似症例データベース9のスライス厚テーブル26を参照する(#4)。
FIG. 7 is a flowchart showing the flow of processing by the similar case search apparatus of FIG. As shown in the figure, in this similar case search apparatus, after selecting / displaying the image I 1 to be interpreted (# 1) in the same manner as in the above-described embodiment, the image diagnostician performs “similar case search”. When "is selected (# 2), acquired slice
ここで、スライス厚T1との一致の度合が所定の基準を満たすスライス厚T1'と関連づけられた類似症例情報が存在しなかった場合に(#5; NO)、3次元画像取得部30は、スライス厚テーブル26に登録されているスライス厚のうち、読影対象画像I1のスライス厚T1に最も近いもの(T2)を取得し、さらに、読影対象画像I1のDICOM情報からこの画像の再構成元の3次元医用画像(CT画像)データI0を識別する情報を取得し、この情報に基づいて画像情報データベース5を検索し、再構成元の3次元医用画像データI0を取得する(#12)。次に、画像再構成部31は、3次元医用画像データI0から、スライス厚T2の画像I2を再構成する(#13)。
Here, when a similar case information the degree of match between the slice thickness T 1 is associated with a slice thickness T 1 'satisfying a predetermined criterion does not exist (# 5; NO), 3-dimensional
以下、画像I2を対象として、上記の実施形態と同様に、関心領域設定部23が関心領域R2の選択を受け付けてその位置情報を特定し(#6)、特徴量取得部24が関心領域R2の特徴量C2を算出し(#7)、特徴量検索部25bは、スライス厚別特徴量テーブル27のうちのスライス厚がT2のものを参照し、そのテーブル27に登録されている類似症例情報のうち、類似症例情報中の特徴量と再構成された画像I2の関心領域R2の特徴量C2との一致の度合が所定の基準を満たすもの(P2)を取得し(#8,#9)、類似症例情報取得部25cが類似症例情報P2と関連づけられた画像ファイルと診断情報ファイルを取得・表示する(#10)。
Subsequently, for the image I 2 , as in the above embodiment, the region-of-
このように、読影対象画像I1のスライス厚に対して所定の基準を満たすスライス厚と関連づけられた類似症例情報が類似症例データベース9に登録されていなかった場合に、3次元画像取得部30が読影対象画像I1の再構成元の3次元医用画像I0を取得し、画像再構成部31が、取得された3次元医用画像I0から、類似症例データベース9に登録されている類似症例情報と関連づけられたスライス厚T2のスライス画像I2を再構成し、再構成された画像I2の類似症例情報P2を取得するようにすれば、読影対象画像に対する類似症例がないというケースが減少し、検索精度が向上し、読影/診断精度の向上にも資する。
As described above, when the similar case information associated with the slice thickness satisfying the predetermined criterion with respect to the slice thickness of the image to be interpreted I 1 is not registered in the
次に、本発明の第2の実施形態となる類似症例データベース登録装置について説明する。この装置は、上記の類似症例検索装置による検索の際にアクセスされる類似症例データベース9に類似症例情報を登録するためのものである。
Next, a similar case database registration apparatus according to the second embodiment of the present invention will be described. This apparatus is for registering similar case information in the
図8は、この類似症例データベース登録装置の構成を模式的に示したブロック図である。図に示したように、この装置は、CTによって得られた複数のスライス画像Snを取得するスライス画像取得部33と、スライス画像Snまたはスライス画像Snから再構成された画像の読影結果を表す読影レポートM0を読影レポートデータベース7から取得する読影レポート取得部32と、複数のスライス画像Snからの、所望のスライス画像(キースライス)Skの選択を受け付けるキースライス選択部34と、キースライス画像Sk中の関心領域Rkを設定する関心領域設定部23と、キースライス画像Skと、その近傍のスライス画像とからスライス厚の異なる複数の断層画像Inを再構成する画像再構成部31と、断層画像In中の、関心領域Rkに対応する関心領域Rnを抽出する関心領域抽出部35と、関心領域Rk、Rnの特徴量Ck、Cnを取得する特徴量取得部24と、キースライス画像Sk、断層画像Inの各々に対して読影レポートM0を関連づけて類似症例データベース9に登録する類似症例情報登録部36とから構成される。
FIG. 8 is a block diagram schematically showing the configuration of the similar case database registration apparatus. As shown, the apparatus includes a slice
なお、各処理部は、例えば、スライス画像取得部33は、ネットワーク19に接続された画像診断医用ワークステーション3と画像情報管理サーバ4、および画像情報データベース5による前述の画像閲覧処理と同様にして実現し、読影レポート取得部32は、ネットワーク19に接続された画像診断医用ワークステーション3と読影レポートサーバ6、および読影レポートデータベース7による前述の読影レポート閲覧処理と同様にして実現することができる。また、キースライス画像選択部34、関心領域設定部23、画像再構成部31、関心領域抽出部35、特徴量取得部24は画像診断医用ワークステーション3に実装し、類似症例情報登録部36は類似症例検索サーバ8に実装することが考えられるが、画像診断医用ワークステーション3や類似症例検索サーバ8、ネットワーク19の性能や、画像診断医用ワークステーション3の設置台数、類似症例検索サーバ8に対するアクセス頻度、応答時間等の様々な性能要件に応じて、適宜分散して実装されうる。
Each processing unit, for example, the slice
次に、図9のフローチャートを用いて、類似症例情報の登録処理の詳細と処理の流れについて説明する。 Next, details of the similar case information registration process and the flow of the process will be described with reference to the flowchart of FIG.
まず、画像診断医は、画像診断医用ワークステーション3を操作して登録対象のスライス画像Snの画像IDを検索キーとする画像情報管理サーバ4への閲覧要求を行い、この要求を受信した画像情報管理サーバ4が画像情報データベース5に対する検索を行って、スライス画像Snの画像ファイルを取得し、要求を送信した画像診断医用ワークステーション3にその画像ファイルを送信する。画像ファイルを受信した画像診断医用ワークステーション3は、その画像ファイルの画像データに基づいてスライス画像Snをディスプレイに表示する(#21)。表示方法は、各スライス画像を1枚ずつ順次表示する方法、1画面中に複数のスライス画像を同時に表示する方法、これらを組み合わせた方法等、種々の方法が考えられる。
First, the imaging diagnostician carries out viewing request to the image
また、画像診断医は、画像診断医用ワークステーション3を操作して登録対象のスライス画像Snまたはスライス画像Snから再構成された画像の画像IDを検索キーとする読影レポートサーバ6への閲覧要求を行う。ここで、検索キーの設定には、画像診断医が検索キー(画像ID)を入力するユーザインターフェースや、ディスプレイに表示されているスライス画像Snの画像IDを自動的に検索キーとして設定するユーザインターフェースを用いることが考えられる。この要求を受信した読影レポートサーバ6が読影レポートデータベース7に対する検索を行って、スライス画像Snまたはスライス画像Snから再構成された画像の読影レポートM0を取得し、要求を送信した画像診断医用ワークステーション3にその読影レポートM0を送信する。読影レポートM0を受信した画像診断医用ワークステーション3は、その読影レポートM0をディスプレイに表示する(#22)。なお、このステップと上記ステップ#21の順序は逆でもよい。
Further, the imaging diagnostician, browse to the
次に、画像診断医は、ディスプレイに表示されたスライス画像Snと読影レポートM0とに基づいて、類似症例情報として最も適切な画像をキースライス画像Skとして選択する(#23)。この操作は、例えば、選択したい画像を右クリックすることによって表示されるメニューから「キースライスとして選択」を選択して左クリックすることによって実現される。 Then, the imaging diagnostician, based on the slice image S n and interpretation report M 0, which is displayed on the display, to select the most appropriate image as the similar case information as a key slice image S k (# 23). This operation is realized, for example, by selecting “Select as Key Slice” from the menu displayed by right-clicking the image to be selected and left-clicking.
さらに、画像診断医が選択されたキースライス画像Skに対して関心領域の選択を行い、関心領域設定部23が、選択された関心領域Rkの位置情報を特定する(#24)。
Furthermore, and selects the region of interest for the key slice image S k of the imaging diagnostician is selected, the
それと同時に、画像再構成部31が、キースライス画像Skと、その近傍のスライス画像とからスライス厚の異なる複数の断層画像Inを再構成する(#25)。ここで、断層画像Inの再構成元となるスライス画像にはキースライス画像Skが必ず含まれる。例えば、各スライス画像Snのスライス厚が1mmであった場合、画像再構成部31は、キースライス画像Skと、その前後のスライス画像1枚ずつを再構成することによってスライス厚3mmの画像を再構成し、さらに、キースライス画像Skと、その前後のスライス画像2枚ずつを再構成することによってスライス厚5mmの画像を再構成する。類似症例データベース9の構成が図3に示したものの場合、再構成の際のスライス厚はスライス厚テーブル26に登録済みのものとすることが好ましい。なお、各スライス厚の画像の再構成方法は、公知の手法を用いることができる。
At the same time, the
関心領域抽出部35は、関心領域Rkの位置情報に基づき、再構成された断層画像Inの各々の、関心領域Rkに対応する領域を関心領域Rnとして抽出する(#26)。
特徴量取得部24は、関心領域Rk、Rnの特徴量Ck、Cnを算出する(#27)。
The feature
最後に類似症例情報登録部36は、キースライス画像Skと読影レポートM0とを関連づけるとともに、断層画像Inの各々にも読影レポートM0を関連づけて類似症例データベース9に登録する(#28)。具体的には、図3に示した構成の類似症例データベース9の場合、登録対象のキースライス画像Skまたは断層画像Inの画像ファイルを画像ファイル群28に保存し、読影レポートM0を診断情報ファイル群29に保存し、登録対象のスライス厚と同じスライス厚の情報が登録されているスライス厚別特徴量テーブル27に対して、登録対象の画像の関心領域RkまたはRnの特徴量CkまたはCnと、その画像のファイル名と、読影レポートM0のファイル名を登録する。なお、画像や読影レポートM0のファイル名は、各々、画像ファイル群28や診断情報ファイル群29でのファイル名の重複を避けるため、類似症例情報登録部36が所定の命名規則にしたがって自動的に決定するようにすることが好ましい。
Finally similar case
このように、本発明の第2の実施形態となる類似症例データベース登録装置では、画像再構成部31が、複数のスライス画像Snからキースライス選択部34によって選択されたキースライス画像Skとその近傍のスライス画像とからスライス厚の異なる複数の断層画像Inを複数のスライス画像Snから再構成し、類似症例情報登録部36が、スライス画像Snと直接的または間接的に関連づけられて読影レポートデータベース7に登録されていた読影レポートM0に対して、キースライス画像Skおよび再構成された各々の断層画像Inのスライス厚と関心領域Rk、Rnの特徴量Ck、Cnとを関連づけて類似症例データベース9に登録するので、1つの読影レポートM0を効率的に類似症例情報として登録することができ、類似症例情報の有効活用に資する。また、検索の際には、読影レポートM0が各スライス厚における特徴量と関連づけられているので、類似症例として正確にヒットする可能性が高くなり、検索精度の向上にも資する。
Thus, in a similar case database registration apparatus according to the second embodiment of the present invention, the
また、類似症例データベース9には、キースライス画像Skおよび断層画像Inというスライス厚の異なる複数の画像が読影/診断支援情報として含まれているので、検索の際には、検索対象画像と類似症例データベース9から取得された画像との間にスライス厚の相違が小さくなり、より精度の高い比較読影が可能になり、読影/診断精度の向上に資する。
Further, in the
なお、上記の実施形態では、類似症例データベース9に登録されている各スライス厚に対して、そのスライス厚と同じスライス厚の画像(キースライス画像Skまたは断層画像In)を登録するようにしていたが、各スライス厚に対して、そのスライス厚の画像中の関心領域の特徴量を関連づけるとともに、同一の画像、例えばキースライス画像Skを関連づけて登録するようにしてもよい。このようにすれば、同一の被検体の画像を複数登録する必要がなくなるので、データベースの容量が削減される。
In the above embodiment, as for each slice thickness that is registered in the
また、上記第1・第2の実施形態を統合したワークフローを実現するシステムも考えられる。図10は、このような類似症例検索・登録システムの構成を模式的に示したブロック図である。図に示したように、このシステムは、読影対象画像の読影を支援する読影支援情報、すなわち、過去に読影された画像およびその画像の読影結果が、その画像のスライス厚やその画像中の関心領域の特徴量と関連づけられて類似症例情報として登録されている類似症例データベース9と、画像取得部21によって画像情報データベース5から取得された読影対象画像I1のスライス厚T1を取得するスライス厚取得部22と、読影対象画像I1中の関心領域R1を設定する関心領域設定部23と、関心領域R1、Rnの特徴量C1、Cnを取得する特徴量取得部24と、スライス厚T1と特徴量C1とに基づいて、読影対象画像I1の読影を支援する読影支援情報A1、すなわち、読影対象画像I1と類似する画像およびその画像の読影・診断結果を表す情報を類似症例データベース9から取得する類似症例検索部25と、読影対象画像I1の再構成元の3次元医用画像I0を取得する3次元画像取得部30と、取得された3次元医用画像I0からスライス厚がT1と異なる複数の断層画像Inを再構成する画像再構成部31と、断層画像In中の、関心領域R1に対応する関心領域Rnを抽出する関心領域抽出部35と、画像診断医による読影レポートM0の作成を支援するとともに、作成された読影レポートM0の読影レポートデータベース7への登録を行う読影レポート生成部37と、読影対象画像I1、断層画像In、各画像のスライス厚T1、Tn、各画像の関心領域R1、Rnの特徴量C1、Cn、読影レポートM0を関連づけて類似症例データベース9に登録する類似症例情報登録部36とから構成される。 A system that realizes a workflow that integrates the first and second embodiments is also conceivable. FIG. 10 is a block diagram schematically showing the configuration of such a similar case search / registration system. As shown in the figure, this system uses interpretation support information that supports interpretation of an image to be interpreted, that is, an image that has been interpreted in the past and an interpretation result of the image, the slice thickness of the image and the interest in the image. A similar case database 9 registered as similar case information in association with the feature quantity of the region, and a slice thickness for acquiring the slice thickness T 1 of the image to be interpreted I 1 acquired from the image information database 5 by the image acquisition unit 21 an acquiring unit 22, an ROI setting unit 23 that sets a region of interest R 1 in the image to be interpreted I 1, and characteristic amount obtaining section 24 for obtaining the feature amount C 1, C n region of interest R 1, R n , based on the slice thickness T 1 and the feature amount C 1, interpretation support information a 1 to support the interpretation of the interpretation target images I 1, i.e., image interpretation and diagnosis results of the image and the image similar to the image to be interpreted I 1 A similar case search unit 25 that acquires information representing the same from the similar case database 9, a three-dimensional image acquisition unit 30 that acquires a three-dimensional medical image I 0 that is a reconstruction source of the interpretation target image I 1 , and the acquired three-dimensional extracting an image reconstruction unit 31 slice thickness from the medical image I 0 reconstructs a plurality of tomographic images I n which is different from the T 1, in the tomographic image I n, the region of interest R n corresponding to the region of interest R 1 The region-of-interest extraction unit 35, an interpretation report generation unit 37 that supports the creation of the interpretation report M 0 by the image diagnostician and registers the created interpretation report M 0 in the interpretation report database 7, and the interpretation target image I 1 , tomographic image I n , slice thickness T 1 , T n of each image, feature amount C 1 , C n of region of interest R 1 , R n of each image, and interpretation report M 0 are associated and registered in similar case database 9 Similar case information registration It consists of 36 Metropolitan.
各構成要素については、前述の実施形態と同様の構成要素には同じ符号を付しており、前述と同様の機能を有している。また、読影レポート生成部37は、前述の画像診断医用ワークステーション3における読影レポート作成支援機能、読影レポートサーバ6の機能に該当する。
About each component, the same code | symbol is attached | subjected to the component similar to the above-mentioned embodiment, and it has the same function as the above-mentioned. The interpretation
次に、図11のフローチャートを用いて、このシステムによって実現される類似症例の検索と登録が統合されたワークフローについて説明する。 Next, a workflow in which similar case retrieval and registration realized by this system are integrated will be described using the flowchart of FIG.
まず、画像診断医が読影対象画像I1に対する類似症例の検索を行い、読影支援情報A1を取得する(#31)。ここで行われる処理の詳細は、図4のフローチャートの#1から#11と同様である。 First, the imaging diagnostician carries out the search of the similar case with respect to the image to be interpreted I 1, to obtain the interpretation support information A 1 (# 31). The details of the processing performed here are the same as those in # 1 to # 11 in the flowchart of FIG.
次に、画像診断医は、画像診断医用ワークステーション3のディスプレイに表示された
読影支援情報A1を参照しながら、読影対象画像I1の読影を行い、読影結果のレポートM0を作成し、作成された読影レポートM0を読影レポートデータベース7に登録する(#32)。
Next, the image diagnostician reads the interpretation target image I 1 while referring to the interpretation support information A 1 displayed on the display of the
ここで、画像診断医が、読影対象画像I1が他の画像の読影の際に類似症例情報として役立つと判断し、ディスプレイに表示されている画面でのマウス等の操作によって「類似症例情報として登録」のメニュー選択を行った場合(#33; YES)、以下の処理が自動的に実行される。 Here, the image diagnostician determines that the image to be interpreted I 1 is useful as similar case information when interpreting other images, and operates the mouse on the screen displayed on the display as “similar case information”. When the “Register” menu is selected (# 33; YES), the following processing is automatically executed.
この場合、3次元画像取得部30が、読影対象画像I1のDICOM情報からこの画像の再構成元の3次元医用画像(CT画像)データI0を識別する情報を取得し、この情報に基づいて画像情報データベース5を検索し、再構成元の3次元医用画像データI0を取得する(#34)。
In this case, the three-dimensional
次に、画像再構成部31が、取得された3次元医用画像I0からスライス厚がT1と異なる複数の断層画像Inを再構成する(#35)。ここで、断層画像Inは、読影対象画像I1中の関心領域R1に対応する3次元医用画像I0中の領域を元にして再構成されたものであることが好ましい。
Then, the
さらに、関心領域抽出部35が、断層画像In中の、関心領域R1に対応する関心領域Rnを抽出し(#36)、特徴量取得部24が、関心領域Rnの特徴量Cnを算出する(#37)。
Furthermore, the region of
最後に、類似症例情報登録部36が、読影対象画像I1、断層画像In、各画像のスライス厚T1、Tn、各画像の関心領域R1、Rnの特徴量C1、Cn、読影レポートM0を関連づけて類似症例データベース9に登録する(#37)。
Finally, the similar case
このように、上記の第1の実施形態の類似症例検索装置と第2の実施形態の類似症例登録装置を適宜組み合わせることにより、画像の読影の際に、読影対象画像の取得から、類似症例の検索、読影、レポート作成、類似症例情報の登録までに至る統合的なワークフローが実現され、読影・診断効率の向上に資する。 As described above, by appropriately combining the similar case retrieval apparatus of the first embodiment and the similar case registration apparatus of the second embodiment, when the image is interpreted, the acquisition of the interpretation target image is performed. An integrated workflow from search, interpretation, report creation, and registration of similar case information is realized, contributing to improvement in interpretation and diagnosis efficiency.
次に、本発明の第3の実施形態となる類似症例検索・登録装置について説明する。この装置は、RISや、PACS、HIS等の他の医療情報システムで保管されているデータと連携した類似症例検索を可能にするためのものである。 Next, a similar case search / registration device according to a third embodiment of the present invention will be described. This apparatus is for enabling similar case retrieval in cooperation with data stored in other medical information systems such as RIS, PACS, and HIS.
図12は、本実施形態の装置が導入された医療情報システムの概略構成を示す。図に示すように、医用画像の撮影装置(モダリティ)1、画像品質チェック用ワークステーション(QA−WS)2、画像診断医用ワークステーション3(3a,3b)、画像情報管理サーバ4、画像情報データベース5、読影レポートサーバ6、読影レポートデータベース7、類似症例検索サーバ8、類似症例データベース9、診察医用ワークステーション10(10a,10b)、電子カルテ管理サーバ11、電子カルテデータベース12が、ネットワーク19を介して互いに通信可能な状態で接続されて構成されている。第1、第2の実施形態におけるシステム構成(図1)と比較すると、本実施形態は、診察医用ワークステーション10(10a,10b)、電子カルテ管理サーバ11、電子カルテデータベース12が新たに接続された構成となっている。
FIG. 12 shows a schematic configuration of a medical information system in which the apparatus of this embodiment is introduced. As shown in the figure, a medical image photographing device (modality) 1, an image quality check workstation (QA-WS) 2, an image diagnostic medical workstation 3 (3a, 3b), an image
診察医用ワークステーション10は、診察医が読影レポートおよび読影の対象とされた画像を参照するのに利用する装置であり、処理装置と1台または2台の高精細ディスプレイとキーボード・マウスなどの入力機器により構成される。この処理装置には、各患者の診察、検査、治療(投薬など)の履歴を電子データとして記録に残すためのカルテ情報作成機能と、検査のオーダー情報を作成して放射線科のオーダーシステム(図示せず)に送信する検査オーダー機能が組み込まれている。
The
診察医用ワークステーション10は、患者の初診時に、患者情報、診察目的などを記録したカルテ情報を新規に作成し、ネットワーク19を介して電子カルテ管理サーバ11に転送し、そのカルテ情報の電子カルテデータベース12への登録を要求する。電子カルテ管理サーバ11は、カルテ情報の登録要求を受け付けると、そのカルテ情報をデータベース用のフォーマットに整えて電子カルテデータベース12に登録する。
The
また、診察医用ワークステーション10は、診察の過程で、上記検査オーダー機能により検査がオーダーされたときは、画像診断科のシステムから通知された検査番号、検査日などをカルテ情報に追加する。さらに、検査が終了して画像診断医により読影レポートが作成され、診察医により読影レポートが参照されたときに、読影レポートに記録されている一部の情報(例えば画像診断医の所見情報)を、カルテ情報に追加する。
When the examination is ordered by the examination order function during the examination, the examination
一方、カルテ情報には、診察医が自ら入力した情報も随時追加される。例えば、血液検査など撮影を伴わない検査の場合には、診察医が検査結果を参照して入力した所見情報が、カルテ情報に追加される。また、投薬その他の治療の記録も、診察医が入力した情報が、カルテ情報に追加される。診察医用ワークステーション10は、更新されたカルテ情報もしくは変更部分のみを示す差分情報を電子カルテ管理サーバ11に転送し、該当するカルテ情報の更新を要求する。
On the other hand, information entered by the examiner himself / herself is added to the chart information as needed. For example, in the case of a test that does not involve imaging, such as a blood test, finding information input by a doctor referring to the test result is added to the chart information. In addition, for the record of medication and other treatments, information input by the doctor is added to the chart information. The
電子カルテ管理サーバ11は、カルテ情報の更新要求を受け付けたときには、電子カルテデータベース12を検索して該当するカルテ情報をメモリ上に呼び出し、メモリ上で内容を更新した後、更新されたカルテ情報をストレージに書き込む。これにより、電子カルテデータベース12の内容が更新される。
When the electronic medical
なお、電子カルテデータベース12に登録されるカルテ情報の例は、例えばXMLやSGMLデータとして管理され、前述したように、初診時に登録された患者情報、その患者の受信歴、検査歴、投薬をはじめとする治療暦、その他、既往症、持病、アレルギーなど、診察、治療に必要な情報が記録されている。さらに、検査歴の一項目として、読影レポートと同様の縮小画像データや画像情報へのリンク情報を記録しておいてもよい。
Examples of medical record information registered in the electronic
図13は、本実施形態における各データベースの関連や構成を模式的に表したものである。図に示したように、類似症例データベース9は、類似症例の画像を識別する画像ID、その画像の患者を識別する患者ID、画像の類似性の判断に用いられるスライス厚と特徴量が関連づけられて登録されている。なお、類似症例データベース9への登録処理の詳細については後述する。読影レポートデータベース7は、読影された画像を識別する画像ID、その画像の読影者(画像診断医)を識別する読影者ID、その画像中の関心領域(ROI)の位置情報、その画像の所見(読影結果)が関連づけられて登録されている。画像情報データベース5は、画像ID、その画像の取得が行われた検査を識別する検査ID,その画像のスライス位置、スライス厚、その画像の再構成元となる画像を識別する原画像ID、画像データ等が関連づけられている。電子カルテデータベース12は、患者情報テーブル12a、患者検査履歴テーブル12b、患者診察履歴テーブル12c、検査情報テーブル12d、診察情報テーブル12eから構成されている。患者情報テーブル12aは、患者の初診の際にその患者の属性が新たに登録されるものであり、具体的には、患者を識別する患者ID、その患者の生年月日、性別等が関連づけられている。患者検査履歴テーブル12bは、患者に対する検査予約時または検査実施時に登録されるものであり、患者IDとその患者が受けた検査を識別する検査IDとを関連づけることによって、患者が受けた検査の履歴が管理される。患者診察履歴テーブル12cは、患者の診察予約時または診察実施時に登録されるものであり、患者IDとその患者が受けた診察を識別する診察IDとを関連づけることによって、患者が受けた診察の履歴が管理される。検査情報テーブル12dは、各検査の内容が登録されるものであり、具体的には、検査ID、検査日時、検査種別(CT撮影、血液検査等)、検査部位(胸部、腹部等)、撮影された画像のうち代表的なものを識別する代表画像ID等が関連づけられている。このテーブルには、例えば、検査予約時に新たな情報が登録されるが、代表画像IDは、画像診断実施時や診察による確定診断時に設定される。診察情報テーブル12eは、各診察の内容が登録されるものであり、具体的には、診察ID、診察日時、その診察で確定された診断内容を表す確定診断情報等が関連づけられている。このテーブルも、例えば、診察予約時に新たな情報が登録され、診察時に確定診断情報等が設定される。なお、各データベース、テーブルの登録・更新のタイミングは、各医療機関におけるワークフローに依存して変更可能である。
FIG. 13 schematically shows the relationship and configuration of each database in the present embodiment. As shown in the figure, the
また、各データベースにおける画像ID、検査ID、患者ID、診察IDは同一の体系によるものであり、これらのIDによって各データベース、テーブルの関連づけがなされており、例えば、患者情報テーブル12aの患者IDに基づいて患者検査履歴テーブル12bからその患者が過去に受けた検査の検査IDを取得し、また、その検査IDに基づいて検査情報テーブル12dからその患者に対して過去に行った胸部CT撮影(検査種別・部位)で得られた代表画像の画像IDを取得することができる。さらに、その代表画像IDに基づいて画像情報データベース5からその代表画像の画像データを取得したり、読影レポートデータベース7からその画像に対する所見を取得したりすることも可能である。
In addition, the image ID, examination ID, patient ID, and examination ID in each database are based on the same system, and these databases and tables are associated with each other by, for example, the patient ID in the patient information table 12a. Based on the patient examination history table 12b, the examination ID of the examination that the patient has received in the past is acquired, and based on the examination ID, chest CT imaging (examination that has been performed on the patient in the past from the examination information table 12d) The image ID of the representative image obtained by (type / part) can be acquired. Furthermore, based on the representative image ID, the image data of the representative image can be acquired from the
本実施形態における類似症例検索処理では、前述の第1の実施形態と同様に、読影対象画像I1のスライス厚T1および関心領域R1の特徴量C1を取得した後、類似症例検索部25が、スライス厚T1および特徴量C1との一致の度合が所定の基準を満たすスライス厚および特徴量と関連づけられた画像IDおよび患者IDを類似症例データベース9から取得し、さらに、その画像IDに基づいて画像情報データベース5からその画像の画像データを取得するともに、その画像IDに基づいて読影レポートデータベース7からその画像のROI情報や所見を取得する。そして、取得された画像データとROI情報とに基づいてROI部分にマーキングした画像を生成し、類似症例の画像としてその画像の読影時の所見ともに画像診断医用ワークステーション10のディスプレイに表示する。さらに、取得した患者IDに基づいて、患者情報テーブル12aから患者の生年月日や性別を取得し、生年月日から年齢を算出し、年齢と性別を類似症例情報としてディスプレイに表示するとともに、患者IDに基づいてさらに患者診察履歴テーブル12cを参照してその患者が受けた診察を識別する診察IDを取得し、その診察IDに基づいて診察情報テーブル12eを参照し、その患者の確定診断情報を取得してディスプレイに表示することもできる。
In a similar case search processing in this embodiment, like the first embodiment described above, after obtaining the feature amount C 1 in the image to be interpreted I 1 of the slice thickness T 1 and ROI R 1, similar
一方、本実施形態において、前述の第2の実施形態と同様に類似症例データベース9への登録を行う場合には、類似症例情報登録部36が、キースライス画像Skおよび再構成された各々の断層画像Inのスライス厚と関心領域Rk、Rnの特徴量Ck、Cnと、各画像の画像ID、その画像の患者を識別する患者IDを関連づけて登録を行う。このとき同時に、キースライス画像Skおよび再構成された各々の断層画像Inの情報が新たに画像情報データベース5に登録される。
On the other hand, in this embodiment, when performing registration in the
次に、本実施形態において類似症例データベース9への登録を行う他の方法として、所望の条件を満たす画像を検索し、その検索によって抽出された画像を類似症例として登録する方法について説明する。図14は、この方法を実現する類似症例データベース登録装置の構成を模式的に示したブロック図である。図に示したように、画像診断医や診察医等の操作者による所望の検索条件の設定を受け付け、その検索条件に基づいて画像情報データベース5、読影レポートデータベース7、電子カルテデータベース12に対して検索を行い、検索条件を満たす画像I1、その原画像I0、画像I1の関心領域の位置情報R1、関心領域の特徴量C1、その画像の患者の電子カルテ情報K1を取得する登録対象画像検索部38と、画像I1と、その原画像I0とからスライス厚の異なる複数の断層画像Inを再構成する画像再構成部31と、断層画像In中の、関心領域R1に対応する関心領域Rnを抽出する関心領域抽出部35と、関心領域Rnの特徴量Cnを取得する特徴量取得部24と、画像I1、断層画像Inの各々のスライス厚、特徴量C1、Cn、電子カルテ情報K1を関連づけて類似症例データベース9に登録する類似症例情報登録部36とから構成される。
Next, as another method for performing registration in the
ここで、登録対象画像検索部38は、例えば、ワークステーション3または10のディスプレイに表示されるメニューから「類似症例登録対象画像の検索」を選択することによって起動され、検索条件を操作者が設定するためのユーザインターフェースを提供する。検索条件の具体例としては、患者の生年月日や性別等の属性情報、確定診断情報等の診察情報、検査種別、検査部位等の検査情報、読影者ID、読影所見等の読影結果情報、スライス位置、スライス厚等の画像情報等が挙げられ、例えば、「40代女性の胸部CT画像で、原発性肺がんとの確定診断が下され、読影時に所見ありのもの」といった検索条件が操作者によって設定されうる。この検索条件例では、登録対象画像検索部38は、例えば、診察情報テーブル12eの確定診断情報に「原発性肺がん」と登録されている診察IDを抽出し、抽出された診察IDと関連づけられた患者IDを患者診察履歴テーブル12cから取得し、取得した患者IDに基づいて患者情報テーブル12aを参照して生年月日と性別に基づいて「40代女性」の患者の患者IDを抽出する。さらに、抽出された患者IDと関連づけられた検査IDを患者検査履歴テーブル12bから取得し、取得した検査IDに基づいて検査情報テーブル12dを参照して検査種別と検査部位に基づいて「胸部CT撮影」の検査における代表画像IDを抽出する。そして、抽出された代表画像IDに基づいて読影レポートデータベース7を参照して所見に基づいて「所見あり」の画像の画像IDを抽出する。以上の検索により、最終的に抽出された画像IDに対応する画像が上記の画像I1に相当する。
Here, the registration target
画像再構成部31、関心領域抽出部35、特徴量算出部24の処理の詳細は、上記第2の実施形態のものと同様である。なお、画像I1のスライス厚は画像情報データベース5から取得可能であり、また、画像I1中の関心領域R1は、読影レポートデータベース7のROI情報から取得可能であるため、上記第2の実施形態における関心領域設定部23や、画像I1に対する特徴量取得部24の処理は不要である。
The details of the processing of the
類似症例情報登録部36は、画像I1、断層画像Inの各々の画像ID,スライス厚、特徴量C1、Cn、その画像の患者の患者ID(電子カルテ情報K1)を関連づけて類似症例データベース9に登録する。
Similar case
このように、本発明の第3の実施形態となる類似症例検索・登録装置では、類似症例データベースへの登録の際、電子カルテデータベース12に記憶されている診断情報を取得して読影/診断支援情報を生成するので、読影/診断支援情報を一から手作業で生成する手間を省くことが可能になるとともに、電子カルテシステムのような他のシステムとの連携が強化され、情報資源の有効活用が図られる。さらに、読影/診断支援情報を、画像IDや患者IDのみとし、これらのIDからのリンクによって画像情報データベース5、読影レポートデータベース7、電子カルテデータベース12から読影/診断情報を取得できるようにしたので、同じ内容の情報を複数箇所に記憶することによる記憶容量の無駄を省くことができるとともに、複数の箇所に記憶される情報の一方のみが更新されることによって発生するデータ内容の不整合を回避することができるので、情報の信頼性が高まり、また、このような不整合を回避するためのデータの同期処理も不要になることから、システムの処理負荷が軽減される。特に、診断情報の一例である電子カルテの情報等は随時更新される性質のものであるから、このデータ内容の不整合の問題が回避される効果は高い。
As described above, in the similar case search / registration apparatus according to the third embodiment of the present invention, the diagnostic information stored in the electronic
以上の実施形態では、CTによって取得された人間の胸部の3次元医用画像を再構成することによって得られる断層画像を読影対象とした類似症例データベースへの検索・登録について、説明してきたが、画像を取得するモダリティはMR等であってもよいし、被検体は人間以外であってもよいし、検査部位も腹部や頭部等であってもよい。また、複数のモダリティによる画像に関連づけられた類似症例情報を類似症例データベースに登録する場合には、モダリティの種類を識別する情報も類似症例情報に関連づけておき、検索の際には、このモダリティを識別する情報も検索キーとすることが検索効率や検索精度の維持・向上の上では好ましい。同様に、被検体や検査部位についても、複数の種類のものが類似症例データベースに登録される場合には、各々を識別する情報を類似症例情報に関連づけておき、検索キーとすることが好ましい。 In the above embodiment, the search / registration to the similar case database in which the tomographic image obtained by reconstructing the three-dimensional medical image of the human chest acquired by CT has been described has been described. The modality for acquiring the image may be MR or the like, the subject may be other than a human, and the examination site may be an abdomen or a head. In addition, when registering similar case information associated with images by a plurality of modalities in the similar case database, information for identifying the type of modality is also associated with the similar case information, and this modality is used when searching. The information to be identified is preferably a search key in order to maintain and improve search efficiency and search accuracy. Similarly, when a plurality of types of subjects and examination sites are registered in the similar case database, it is preferable that information for identifying each is associated with similar case information and used as a search key.
なお、上記の実施形態におけるシステム構成、処理フロー、データベース構成、ユーザインターフェース等に対して、本発明の趣旨から逸脱しない範囲で様々な改変を行ったものも、本発明の技術的範囲に含まれる。また、上記の実施形態はあくまでも例示であり、上記のすべての説明が本発明の技術的範囲を限定的に解釈するために利用されるべきものではない。 In addition, the technical scope of the present invention includes various modifications made to the system configuration, processing flow, database configuration, user interface, and the like in the above embodiment without departing from the spirit of the present invention. . Moreover, said embodiment is an illustration to the last and all the above description should not be utilized in order to interpret the technical scope of this invention restrictively.
1 3次元画像撮影装置(モダリティ)
2 画像品質チェック用ワークステーション(QA−WS)
3,3a,3b 画像診断医用ワークステーション
4 画像情報管理サーバ
5 画像情報データベース
6 読影レポートサーバ
7 読影レポートデータベース
8 類似症例検索サーバ
9 類似症例データベース
10,10a,10b 診察医用ワークステーション
11 電子カルテ管理サーバ
12 電子カルテデータベース
12a 患者情報テーブル
12b 患者検査履歴テーブル
12c 患者診察履歴テーブル
12d 検査情報テーブル
12e 診察情報テーブル
19 ネットワーク
21 画像取得部
22スライス厚取得部
23 関心領域設定部
24 特徴量取得部
25 類似症例検索部
25a スライス厚検索部
25b 特徴量検索部
25c 類似症例情報取得部
26 スライス厚テーブル
27,27a,27b,27c スライス厚別特徴量テーブル
28 画像ファイル群
29 診断情報ファイル群
30 3次元画像取得部
31 画像再構成部
32読影レポート取得部
33 スライス画像取得部
34 キースライス画像選択部
35 関心領域抽出部
36 類似症例情報登録部
37 読影レポート生成部
38 登録対象画像検索部
1 3D image capture device (modality)
2 Workstation for checking image quality (QA-WS)
3, 3a, 3b Image diagnostic
Claims (20)
被検体の前記検査対象部位をスライスした断面を表す検索対象の断層画像の少なくとも一部の領域の前記内容的特徴を表す特徴量を取得する特徴量取得手段と、
前記類似症例データベースを参照し、前記検索対象の画像のスライス厚および前記特徴量との一致の度合が所定の基準を満たすスライス厚および前記特徴量と関連づけられた前記類似症例情報を取得する類似症例検索手段とを備えたことを特徴とする類似症例検索装置。 Slice thickness of a tomographic image representing a cross-section obtained by slicing a specific examination target region of one or more subjects with a predetermined slice thickness, a feature amount representing a content feature of at least a part of the tomographic image, and the content A similar case database in which similar case information associated with interpretation / diagnosis support information associated with interpretation / diagnosis support information for assisting diagnosis based on the interpretation of the tomographic image having similar features is used. The registered similar case information for a plurality of different tomographic images, and
A feature amount acquisition means for acquiring a feature amount representing the content feature of at least a partial area of a tomographic image to be searched representing a cross section obtained by slicing the examination target portion of the subject;
A similar case that refers to the similar case database and obtains the similar case information associated with the slice thickness and the feature amount in which the degree of matching with the slice thickness and the feature amount of the image to be searched satisfies a predetermined criterion A similar case retrieval apparatus comprising a retrieval means.
前記類似症例検索手段は、前記読影/診断支援情報に含まれる前記2以上の断層画像のうち、前記検索対象の画像のスライス厚との一致の度合が所定の基準を満たすスライス厚の断層画像を取得するものであることを特徴とする請求項5記載の類似症例検索装置。 The interpretation / diagnosis support information includes two or more of the plurality of tomographic images, and the two or more tomographic images are associated with each slice thickness of the tomographic image. ,
The similar case retrieval unit selects a tomographic image having a slice thickness that satisfies a predetermined criterion in a degree of coincidence with a slice thickness of the image to be retrieved among the two or more tomographic images included in the interpretation / diagnosis support information. The similar case search device according to claim 5, wherein the similar case search device is acquired.
前記特徴量取得手段が、前記検索対象の画像中の関心領域を指定する手段をさらに備えたものであることを特徴とする請求項1から6のいずれか1項に記載の類似症例検索装置。 The partial region of the tomographic image is a region of interest in the image,
The similar case search apparatus according to claim 1, wherein the feature amount acquisition unit further includes a unit for designating a region of interest in the search target image.
前記特徴量取得手段が、前記検索対象の画像中の関心領域を検出する手段をさらに備えたものであることを特徴とする請求項1から6のいずれか1項に記載の類似症例検索装置。 The partial region of the tomographic image is a region of interest in the image,
The similar case search apparatus according to claim 1, wherein the feature amount acquisition unit further includes a unit that detects a region of interest in the search target image.
前記類似症例検索手段による処理の結果、前記検索対象の画像のスライス厚との一致の度合が所定の基準を満たすスライス厚の前記類似症例情報が前記類似症例データベースに登録されていなかった場合、前記3次元医用画像から、前記類似症例データベースに登録されている前記類似症例情報のスライス厚との一致の度合が所定の基準を満たすスライス厚で、前記検索対象の画像のスライス位置を含むようにスライスした断面を表す断層画像を再構成する画像再構成手段をさらに備え、
前記特徴量取得手段および前記類似症例検索手段が、前記画像再構成手段によって再構成された画像を新たな検索対象画像として再度処理を行うものであることを特徴とする請求項1から8のいずれか1項に記載の類似症例検索装置。 The search target image is reconstructed based on a three-dimensional medical image representing the examination target part of the subject;
As a result of the processing by the similar case search means, when the similar case information of the slice thickness satisfying a predetermined standard with the degree of matching with the slice thickness of the image to be searched is not registered in the similar case database, Slice from a three-dimensional medical image so that the degree of matching with the slice thickness of the similar case information registered in the similar case database satisfies a predetermined criterion and includes the slice position of the search target image Further comprising image reconstruction means for reconstructing a tomographic image representing the cross section obtained,
9. The method according to claim 1, wherein the feature amount acquisition unit and the similar case search unit re-process the image reconstructed by the image reconstruction unit as a new search target image. The similar case search device according to claim 1.
1つの被検体の前記検査対象部位を表す3次元医用画像から、異なる複数のスライス厚で、該3次元医用画像中の関心領域を含むようにスライスした断面を表す複数の断層画像を再構成する画像再構成手段と、
前記再構成された各々の断層画像の少なくとも前記関心領域の前記内容的特徴を表す特徴量を取得する特徴量取得手段とをさらに備え、
前記登録手段が、前記1つの被検体の前記検査対象部位についての前記読影/診断支援情報に対して、前記再構成された各々の断層画像のスライス厚と前記特徴量とを関連づけて登録するものであることを特徴とする類似症例データベース登録装置。 Slice thickness of a tomographic image representing a cross-section obtained by slicing a specific examination target region of one or more subjects with a predetermined slice thickness, a feature amount representing a content feature of at least a part of the tomographic image, and the content A similar case database registration device comprising registration means for registering in the database in association with interpretation / diagnosis support information that supports interpretation of the tomographic image and / or diagnosis based on the similar image having similar characteristics,
A plurality of tomographic images representing cross sections sliced so as to include a region of interest in the three-dimensional medical image are reconstructed from a three-dimensional medical image representing the examination target part of one subject with different slice thicknesses. Image reconstruction means;
A feature quantity acquisition means for acquiring a feature quantity representing at least the content feature of the region of interest of each reconstructed tomographic image;
The registration unit registers the slice thickness of each reconstructed tomographic image and the feature amount in association with the interpretation / diagnosis support information for the examination target region of the one subject. A similar case database registration device characterized in that:
前記登録手段が、該2つ以上の断層画像を該断層画像の各々のスライス厚を関連づけて登録するものであることを特徴とする請求項12記載の類似症例データベース登録装置。 The interpretation / diagnosis support information includes two or more of the reconstructed tomographic images;
13. The similar case database registration apparatus according to claim 12, wherein the registration unit registers the two or more tomographic images in association with slice thicknesses of the tomographic images.
前記登録手段が、生成された前記読影/診断支援情報に対して、前記スライス厚と前記特徴量とを関連づけて登録するものであることを特徴とする請求項11から13のいずれか1項に記載の類似症例データベース登録装置。 From the storage means for storing the interpretation information representing the interpretation result of the medical image of the subject and / or the diagnostic information representing the diagnostic content of the subject in a state associated with the medical image of the subject, the three-dimensional The interpretation information and / or the diagnosis information associated with a medical image and at least one of the plurality of tomographic images is acquired, and the interpretation / diagnosis is performed based on the acquired interpretation information and / or the diagnosis information. It further comprises interpretation / diagnosis support information generating means for generating support information,
14. The registration unit according to any one of claims 11 to 13, wherein the registration unit registers the slice thickness and the feature amount in association with the generated interpretation / diagnosis support information. The similar case database registration device described.
前記画像再構成手段が、前記読影情報および/または前記診断情報と関連づけられた3次元医用画像から前記複数の断層画像を再構成するものであり、
前記登録手段が、前記読影/診断支援情報生成手段によって生成された前記読影/診断支援情報に対して、前記スライス厚と前記特徴量とを関連づけて登録するものであることを特徴とする請求項11から13のいずれか1項に記載の類似症例データベース登録装置。 Interpretation information indicating the interpretation result of the medical image of the subject and / or diagnostic information indicating the diagnostic content of the subject in a state of being associated with the medical image of the subject and the interpretation information and And / or further comprising interpretation / diagnosis support information generating means for acquiring the diagnostic information and generating the interpretation / diagnosis support information based on the acquired interpretation information and / or the diagnostic information.
The image reconstruction means reconstructs the plurality of tomographic images from a three-dimensional medical image associated with the interpretation information and / or the diagnostic information;
The registration unit is configured to register the slice thickness and the feature amount in association with the interpretation / diagnosis support information generated by the interpretation / diagnosis support information generation unit. The similar case database registration device according to any one of 11 to 13.
1以上の被検体の前記検査対象部位を所定のスライス厚でスライスした断面を表す断層画像のスライス厚と、該断層画像の少なくとも一部の領域の前記内容的特徴を表す特徴量と、該内容的特徴が類似する前記断層画像の読影および/または該類似する画像に基づく診断を支援する読影/診断支援情報とが関連づけられた類似症例情報が登録された類似症例データベースであって、スライス厚が異なる複数の前記断層画像についての前記類似症例情報が登録されたものを参照し、前記検索対象の画像のスライス厚および前記特徴量との一致の度合が所定の基準を満たすスライス厚および前記特徴量と関連づけられた前記類似症例情報を取得するステップとを有することを特徴とする類似症例検索方法。 Obtaining a feature amount representing a characteristic feature of at least a partial region of a tomographic image to be searched representing a cross section obtained by slicing a specific examination target region of a subject; and
A slice thickness of a tomographic image representing a cross-section obtained by slicing the examination site of one or more subjects with a predetermined slice thickness, a feature amount representing the content feature of at least a partial region of the tomographic image, and the content A similar case database in which similar case information associated with interpretation / diagnosis support information associated with interpretation / diagnosis support information for assisting diagnosis based on the interpretation of the tomographic image having similar features is used. The slice thickness and the feature quantity satisfying a predetermined criterion with respect to the slice thickness of the image to be searched and the degree of coincidence with the feature quantity with reference to the registered similar case information for a plurality of different tomographic images And acquiring the similar case information associated with a similar case retrieval method.
前記再構成された各々の断層画像の少なくとも前記関心領域の内容的特徴を表す特徴量を取得するステップと、
前記1つの被検体の前記検査対象部位の断面を表す断層画像と前記内容的特徴が類似する前記断層画像の読影および/または該類似する画像に基づく診断を支援する読影/診断支援情報に対して、前記再構成された各々の断層画像のスライス厚と前記特徴量とを関連づけてデータベースに登録するステップとを有することを特徴とする類似症例データベース登録方法。 Reconstructing a plurality of tomographic images representing a cross-section sliced so as to include a region of interest in the three-dimensional medical image with a plurality of different slice thicknesses from a three-dimensional medical image representing a specific examination target part of one subject And steps to
Obtaining a feature amount representing a content feature of at least the region of interest of each reconstructed tomographic image;
For interpretation / diagnosis support information for supporting interpretation of a tomographic image having a similar content feature to a tomographic image representing a cross section of the examination target region of the one subject and / or diagnosis based on the similar image And a similar case database registration method comprising the step of registering the slice thickness of each reconstructed tomographic image and the feature amount in a database in association with each other.
被検体の特定の検査対象部位をスライスした断面を表す検索対象の断層画像の少なくとも一部の領域の内容的特徴を表す特徴量を取得するステップと、
1以上の被検体の前記検査対象部位を所定のスライス厚でスライスした断面を表す断層画像のスライス厚と、該断層画像の少なくとも一部の領域の前記内容的特徴を表す特徴量と、該内容的特徴が類似する前記断層画像の読影および/または該類似する画像に基づく診断を支援する読影/診断支援情報とが関連づけられた類似症例情報が登録された類似症例データベースであって、スライス厚が異なる複数の前記断層画像についての前記類似症例情報が登録されたものを参照し、前記検索対象の画像のスライス厚および前記特徴量との一致の度合が所定の基準を満たすスライス厚および前記特徴量と関連づけられた前記類似症例情報を取得するステップとを実行させることを特徴とする類似症例検索プログラム。 On the computer,
Obtaining a feature amount representing a characteristic feature of at least a partial region of a tomographic image to be searched representing a cross section obtained by slicing a specific examination target region of a subject; and
A slice thickness of a tomographic image representing a cross-section obtained by slicing the examination site of one or more subjects with a predetermined slice thickness, a feature amount representing the content feature of at least a partial region of the tomographic image, and the content A similar case database in which similar case information associated with interpretation / diagnosis support information associated with interpretation / diagnosis support information for assisting diagnosis based on the interpretation of the tomographic image having similar features is used. The slice thickness and the feature quantity satisfying a predetermined criterion with respect to the slice thickness of the image to be searched and the degree of coincidence with the feature quantity with reference to the registered similar case information for a plurality of different tomographic images And a step of acquiring the similar case information associated with a similar case search program.
1つの被検体の特定の検査対象部位を表す3次元医用画像から、異なる複数のスライス厚で、該3次元医用画像中の関心領域を含むようにスライスした断面を表す複数の断層画像を再構成するステップと、
前記再構成された各々の断層画像の少なくとも前記関心領域の内容的特徴を表す特徴量を取得するステップと、
前記1つの被検体の前記検査対象部位の断面を表す断層画像と前記内容的特徴が類似する前記断層画像の読影および/または該類似する画像に基づく診断を支援する読影/診断支援情報に対して、前記再構成された各々の断層画像のスライス厚と前記特徴量とを関連づけてデータベースに登録するステップとを実行させることを特徴とする類似症例データベース登録プログラム。 On the computer,
Reconstructing a plurality of tomographic images representing a cross-section sliced so as to include a region of interest in the three-dimensional medical image with a plurality of different slice thicknesses from a three-dimensional medical image representing a specific examination target part of one subject And steps to
Obtaining a feature amount representing a content feature of at least the region of interest of each reconstructed tomographic image;
For interpretation / diagnosis support information for supporting interpretation of a tomographic image having a similar content feature to a tomographic image representing a cross section of the examination target region of the one subject and / or diagnosis based on the similar image A similar case database registration program for executing a step of registering the slice thickness of each reconstructed tomographic image and the feature amount in association with each other in a database.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007041658A JP2008200373A (en) | 2007-02-22 | 2007-02-22 | Similar case retrieval apparatus and its method and program and similar case database registration device and its method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007041658A JP2008200373A (en) | 2007-02-22 | 2007-02-22 | Similar case retrieval apparatus and its method and program and similar case database registration device and its method and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008200373A true JP2008200373A (en) | 2008-09-04 |
Family
ID=39778448
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007041658A Withdrawn JP2008200373A (en) | 2007-02-22 | 2007-02-22 | Similar case retrieval apparatus and its method and program and similar case database registration device and its method and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008200373A (en) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011115279A (en) * | 2009-12-01 | 2011-06-16 | Shizuoka Prefecture | Case image search apparatus, method and program |
WO2012058217A2 (en) * | 2010-10-29 | 2012-05-03 | The Johns Hopkins University | Image search engine |
JP2013042767A (en) * | 2011-08-22 | 2013-03-04 | Asahikawa Medical College | Image processor, image processing method, and program |
JP2013116335A (en) * | 2013-02-01 | 2013-06-13 | Nippon Seigyo Kk | Ct image distribution method |
JP2017058936A (en) * | 2015-09-16 | 2017-03-23 | 富士ゼロックス株式会社 | Medical document management device, medical document management system, and program |
JP2017164043A (en) * | 2016-03-14 | 2017-09-21 | 富士通株式会社 | Similar image retrieval program, similar image retrieval method, and similar image retrieval device |
JP2018110944A (en) * | 2018-04-18 | 2018-07-19 | キヤノン株式会社 | Medical image display device, display control device, display control method, and program |
JP2019082881A (en) * | 2017-10-31 | 2019-05-30 | 富士フイルム株式会社 | Image retrieval device, method and program |
JP2019180866A (en) * | 2018-04-10 | 2019-10-24 | キヤノンメディカルシステムズ株式会社 | Medical image processing apparatus, teacher data creation program, and teacher data creation method |
WO2021187483A1 (en) * | 2020-03-17 | 2021-09-23 | 富士フイルム株式会社 | Document creation assistance device, method, and program |
JP7483528B2 (en) | 2020-06-29 | 2024-05-15 | キヤノン株式会社 | Image processing device, image processing method, and program |
-
2007
- 2007-02-22 JP JP2007041658A patent/JP2008200373A/en not_active Withdrawn
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011115279A (en) * | 2009-12-01 | 2011-06-16 | Shizuoka Prefecture | Case image search apparatus, method and program |
WO2012058217A2 (en) * | 2010-10-29 | 2012-05-03 | The Johns Hopkins University | Image search engine |
WO2012058217A3 (en) * | 2010-10-29 | 2012-07-26 | The Johns Hopkins University | Image search engine |
JP2013545520A (en) * | 2010-10-29 | 2013-12-26 | ザ・ジョンズ・ホプキンス・ユニバーシティ | Image search engine |
JP2013042767A (en) * | 2011-08-22 | 2013-03-04 | Asahikawa Medical College | Image processor, image processing method, and program |
JP2013116335A (en) * | 2013-02-01 | 2013-06-13 | Nippon Seigyo Kk | Ct image distribution method |
JP2017058936A (en) * | 2015-09-16 | 2017-03-23 | 富士ゼロックス株式会社 | Medical document management device, medical document management system, and program |
JP2017164043A (en) * | 2016-03-14 | 2017-09-21 | 富士通株式会社 | Similar image retrieval program, similar image retrieval method, and similar image retrieval device |
JP2019082881A (en) * | 2017-10-31 | 2019-05-30 | 富士フイルム株式会社 | Image retrieval device, method and program |
JP2019180866A (en) * | 2018-04-10 | 2019-10-24 | キヤノンメディカルシステムズ株式会社 | Medical image processing apparatus, teacher data creation program, and teacher data creation method |
JP7066491B2 (en) | 2018-04-10 | 2022-05-13 | キヤノンメディカルシステムズ株式会社 | Medical image processing device, teacher data creation program and teacher data creation method |
JP2018110944A (en) * | 2018-04-18 | 2018-07-19 | キヤノン株式会社 | Medical image display device, display control device, display control method, and program |
WO2021187483A1 (en) * | 2020-03-17 | 2021-09-23 | 富士フイルム株式会社 | Document creation assistance device, method, and program |
JP7483528B2 (en) | 2020-06-29 | 2024-05-15 | キヤノン株式会社 | Image processing device, image processing method, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4905967B2 (en) | Similar case retrieval apparatus, method, and program | |
JP4976164B2 (en) | Similar case retrieval apparatus, method, and program | |
JP2008200373A (en) | Similar case retrieval apparatus and its method and program and similar case database registration device and its method and program | |
CN104584018B (en) | Automated detection and retrieval of prior annotations relevant for efficient viewing and reporting of imaging studies | |
US7949166B2 (en) | Diagnosis support system | |
US8189888B2 (en) | Medical reporting system, apparatus and method | |
US8751259B2 (en) | Method, apparatus, and program for generating diagnostic result explanation reports | |
JP5383431B2 (en) | Information processing apparatus, information processing method, and program | |
US20060142647A1 (en) | Diagnosis aiding apparatus, method, and computer program | |
US20130024208A1 (en) | Advanced Multimedia Structured Reporting | |
EP2169577A1 (en) | Method and system for medical imaging reporting | |
US10950019B2 (en) | Automatic layout apparatus, automatic layout method, and automatic layout program | |
WO2015146521A1 (en) | Similar medical case search device, similar medical case search method, and similar medical case search program | |
US11468659B2 (en) | Learning support device, learning support method, learning support program, region-of-interest discrimination device, region-of-interest discrimination method, region-of-interest discrimination program, and learned model | |
JP7086759B2 (en) | Diagnostic support device, diagnostic support method, and diagnostic support program | |
JP6738305B2 (en) | Learning data generation support device, learning data generation support device operating method, and learning data generation support program | |
US20160267221A1 (en) | Medical imaging reference retrieval | |
US10803986B2 (en) | Automatic layout apparatus, automatic layout method, and automatic layout program | |
JP5631914B2 (en) | Database search apparatus, method, and program | |
US20080120140A1 (en) | Managing medical imaging data | |
JP2008234309A (en) | Case collection system | |
US20090245609A1 (en) | Anatomical illustration selecting method, anatomical illustration selecting device, and medical network system | |
JP5646400B2 (en) | Image processing flow evaluation method and image processing apparatus for executing the method | |
JP2008217426A (en) | Case registration system | |
US20220391599A1 (en) | Information saving apparatus, method, and program and analysis record generation apparatus, method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20100511 |