JP2010079398A - 類似画像提示装置及びプログラム - Google Patents

類似画像提示装置及びプログラム Download PDF

Info

Publication number
JP2010079398A
JP2010079398A JP2008244253A JP2008244253A JP2010079398A JP 2010079398 A JP2010079398 A JP 2010079398A JP 2008244253 A JP2008244253 A JP 2008244253A JP 2008244253 A JP2008244253 A JP 2008244253A JP 2010079398 A JP2010079398 A JP 2010079398A
Authority
JP
Japan
Prior art keywords
image
lesion
local
topic
expected value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008244253A
Other languages
English (en)
Other versions
JP5056695B2 (ja
Inventor
Sukeji Kato
典司 加藤
Takashi Isozaki
隆司 磯崎
Motofumi Fukui
基文 福井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2008244253A priority Critical patent/JP5056695B2/ja
Priority to US12/557,137 priority patent/US8311962B2/en
Publication of JP2010079398A publication Critical patent/JP2010079398A/ja
Application granted granted Critical
Publication of JP5056695B2 publication Critical patent/JP5056695B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N7/00Computing arrangements based on specific mathematical models
    • G06N7/01Probabilistic graphical models, e.g. probabilistic networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30096Tumor; Lesion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images
    • G06V2201/032Recognition of patterns in medical or anatomical images of protuberances, polyps nodules, etc.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Algebra (AREA)
  • Artificial Intelligence (AREA)
  • Computational Mathematics (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

【課題】病変中に複数種類もしくは複数の進行度・重症度が混在した場合でも、類似した画像を提示する。
【解決手段】類似画像提示装置は、病変分類部15により分類された病変であって局所画像特徴抽出部12により抽出された各々の局所画像特徴とトピック変数との相関係数を局所画像特徴−トピック変数相関保存部16から取得して、取得した相関係数を用いて病変中の局所特徴を生成したトピック変数の生起確率の期待値を推定する期待値推定部17と、診断画像と、前記診断画像について予め算出されたトピック変数の生起確率の期待値と、を対応付けて記憶する画像保存部18と、期待値推定部17により推定されたトピック変数の生起確率の期待値に最も近似するトピック生起確率の期待値に対応する診断画像を類似画像として提示する類似画像提示部20と、を備えている。
【選択図】図1

Description

本発明は、類似画像提示装置及びプログラムに関する。
近年、CT(Computed Tomography)、MRI(Magnetic Resonance Imaging)といった医療装置の普及により、容易にデジタル化された診断画像が取得できるようになっている。また、病院では、日々取得される大量の診断画像を電子的にファイリングして、容易に保管でき、診断画像を複数の医師で共有することが可能になっている。
これらの医療画像には、通常、画像を読影してその画像所見や診断結果を示した読影レポートが紐付けられているため、多量の症例のデータベースとして利用可能である。そこで、これらの大量に蓄積された症例を医療診断に役立てようという試みがなされている。そのひとつに、診断しようとしている画像と類似した画像に紐付けられた症例を検索し、検索された症例に記された診断結果を参考にして診断の精度を高めようという試みがある。
類似した医療画像を検索するために、非特許文献1の技術は、あらかじめ病名のラベルがつけられた病変部位画像を用意し、病名を識別する決定木を作成する。検索のためのキー画像はこの決定木に入力され、識別されたリーフに属する画像を検索結果として出力する。これにより、同じ病名の過去症例を検索することはできる。
しかしながら、同じ病名でも、進行度や重症度が似た画像を検索したい場合があるが、進行度や重傷度の違いをあらかじめラベル付けすることは困難である。そこで、非特許文献2では、同じ病名の病変画像から抽出した画像特徴の集合を混合ガウス分布により教師なしでサブクラスに分割することにより、進行度や重症度の異なる画像特徴への分類を試みている。
非特許文献2の技術では、まず、キー画像を決定木により病名を識別し、識別された病変のラベルが付与された画像群から病変に応じた特徴量を用いて類似した画像を検索している。病変に応じた特徴量は、サブクラス内の分散を小さく、サブクラス間の分散を大きくするように選択され、従ってサブクラス間の分離度を大きくする特徴となっており、それにより進行度や重症度に応じた類似検索が期待できる。
これらの非特許文献1及び2の技術は、病変領域全体から特徴量を抽出しているため、病変領域全体が同じ進行度や重症度であれば、特徴空間中のサブクラスとして表現することができる。
Chi-Ren Shyu他"ASSERT: A Physician-in-the-Loop Content-Based Retrieval System for HRCT Image Databases", Computer Vision and Image Understanding, Vol.75, No.1, 1999, pp.111-132 JG Dy他 "The custumized-queries approach to image retrieval", IEEE Transactions on Pattern Recognition and Machine Intelligence, Vol.25, 2003, pp.373-378
本発明は、病変中に複数種類もしくは複数の進行度・重症度が混在した場合でも、類似した画像を提示することができる類似画像提示装置及びプログラムを提供することを目的とする。
請求項1の発明である類似画像提示装置は、診断対象画像から病変部位を抽出する病変部位抽出手段と、前記病変部位抽出手段により抽出された病変部位を局所画像に分割し、各局所画像の特徴である局所画像特徴を抽出する局所画像特徴抽出手段と、前記局所画像特徴抽出手段により抽出された局所画像特徴を量子化して量子化データを出力する量子化手段と、量子化手段により出力された量子化データに基づいて病変を分類する病変分類手段と、病変の種類毎に、局所画像特徴と病変の進行度又は重症度を示すトピック変数との相関係数を記憶する記憶手段と、前記病変分類手段により分類された病変であって前記局所画像特徴抽出手段により抽出された各々の局所画像特徴とトピック変数との相関係数を前記記憶手段から取得して、取得した相関係数を用いて病変中の局所特徴を生成したトピック変数の生起確率の期待値を推定する期待値推定手段と、診断画像と、前記診断画像について予め算出されたトピック生起確率の期待値と、を対応付けて記憶する画像記憶手段と、前記画像記憶手段に記憶された診断画像のうち、前記期待値推定手段により推定されたトピック生起確率の期待値に最も近似するトピック生起確率の期待値に対応する診断画像を類似画像として提示する提示手段と、を備えている。
請求項2の発明は、請求項1に記載の類似画像提示装置であって、前記画像記憶手段は、前記診断画像についての診断結果を示す診断結果データを前記診断画像に対応付けて更に記憶し、前記提示手段は、前記診断画像と共に前記診断画像に対応する診断結果データに基づく情報を更に提示する。
請求項3の発明である類似画像提示プログラムは、コンピュータを、診断対象画像から病変部位を抽出する病変部位抽出手段と、前記病変部位抽出手段により抽出された病変部位を局所画像に分割し、各局所画像の特徴である局所画像特徴を抽出する局所画像特徴抽出手段と、前記局所画像特徴抽出手段により抽出された局所画像特徴を量子化して量子化データを出力する量子化手段と、量子化手段により出力された量子化データに基づいて病変を分類する病変分類手段と、病変の種類毎に、局所画像特徴と病変の進行度又は重症度を示すトピック変数との相関係数を記憶する記憶手段と、前記病変分類手段により分類された病変であって前記局所画像特徴抽出手段により抽出された各々の局所画像特徴とトピック変数との相関係数を前記記憶手段から取得して、取得した相関係数を用いて病変中の局所特徴を生成したトピック変数の生起確率の期待値を推定する期待値推定手段と、診断画像と、前記診断画像について予め算出されたトピック生起確率の期待値と、を対応付けて記憶する画像記憶手段と、前記画像記憶手段に記憶された診断画像のうち、前記期待値推定手段により推定されたトピック生起確率の期待値に最も近似するトピック生起確率の期待値に対応する診断画像を類似画像として提示手段に提示させる制御を行う制御手段と、して機能させる。
請求項1及び3の発明によれば、診断対象画像に病変の進行度又は重症度の異なる領域が混合された場合であっても、類似した画像を提示することができる。
請求項2の発明によれば、診断対象画像に病変の進行度又は重症度の異なる領域が混合された場合であっても、診断対象画像に類似する画像の診断結果を提示することができる。
以下、本発明の好ましい実施の形態について図面を参照しながら詳細に説明する。
[構成]
図1は、本発明の実施の形態に係る類似画像提示装置の構成を示すブロック図である。類似画像提示装置は、ユーザの提示した症例画像を検索のキー画像とし、キー画像と類似した過去の症例画像を検索して提示する。
類似画像提示装置は、キー画像から病変部位を抽出する病変部位抽出部11、局所画像の画像特徴を抽出する局所画像特徴抽出部12、量子化コードブックを作成して保存する量子化コードブック生成・保存部13、局所画像特徴を量子化する局所画像特徴量子化部14、を備えている。
また、類似画像提示装置は、病変を分類する病変分類部15と、局所画像特徴とトピック変数との相関係数を記憶する局所画像特徴−トピック変数相関保存部16と、病変中の局所特徴を生成したトピック変数の生起確率の期待値を推定する期待値推定部17と、を備えている。
さらに、類似画像提示装置は、画像と共にトピック変数の生起確率の期待値及びレポートデータを保存する画像保存部18と、特徴量を比較する特徴量比較部19と、検索された類似画像を提示する類似画像提示部20と、を備えている。
ここで、局所画像特徴−トピック変数相関保存部16は、病変の種類毎にあらかじめ学習された、局所画像特徴とトピック変数間の相関を保存する。トピック変数とは、ひとつの種類の病変において、さらにその進行度や重症度といったサブクラスを表すものである。
図2は、局所画像特徴−トピック変数相関保存部16の内部構成を示す図である。本実施形態では、病気の進行速度にそれぞれ対応する3つのトピック変数A、B、Cが用いられる。同図に示すように、病変毎に、複数の局所画像特徴と各トピック変数との相関係数が保存されている。局所画像特徴とトピック変数とは予め複数の病変画像を後述のように学習することにより対応付けられる。
ここで、トピック変数は、上述のようにサブクラスを表すものであるが、進行度や重症度などはラベル付けが困難である。そこで、サブクラスは、教師付学習でなく、教師なし学習により取得される。また、本実施形態では、サブクラスを病変部位の特徴量から学習するために、次の生成モデルを考える。
図3は、トピック変数による生成モデルを示す模式図である。この例では、病気の進行度に対応する3つのトピックA,B,Cが存在し、ある病変領域に対してそれぞれP,P,Pの確率で各トピック変数が生起する確率が与えられ、その確率に従い各局所領域に対してトピック変数が生起する。
各トピック変数はその局所領域に対してある確率で特定の局所特徴を生成する。例えば図3では、生起したトピック変数がAの場合は進行度Aの局所特徴が生成される確率が高くなっている。なお、トピック変数が局所特徴を生成する確率は病変画像を与えて学習することによって決まるが、この学習については後述する。
また、画像保存部18には、診断画像、トピック生起確率の期待値、レポートデータが記憶されている。
図4は、画像保存部18の構成を示す図である。画像保存部18には、過去に撮影された診断画像(病変がある場合はその領域)、その診断画像に対して予め算出されたトピック生起確率の期待値、その診断画像に対するレポートデータが記憶されている。
診断画像は例えば医用画像と通信の標準規格であるDICOM(Digital Imaging and Communication in Medicine)フォーマットのファイルであり、そのヘッダ中には患者ID、検査日時等の情報が保存されている。トピック生起確率の期待値は、診断画像を検索するための使用されるものであり、予め算出されている。レポートデータは、各々の診断画像について、医師がどのように診断してどこにどのような病変が存在するかという所見と、その結果推測される病名と、を示すものである。
[学習]
トピック変数が局所特徴を生成する確率は次のような病変画像を与えて学習することによって決まる。トピック変数自体は観測できない隠れ変数であるが、病変画像に対して各トピック変数が生起した確率の期待値を計算することができる。その期待値は、図2でいえば、病変A,B,Cの面積に相当すると考えられる。従って、トピック変数の生起確率の期待値を病変画像の特徴量として用いることにより、進行度や重症度の異なる領域が混合された病変においても、類似した画像が検索出来るようになる。
生成モデルの具体的な形としては、例えばD.Blei, A.Ng, M.Jordan, “Latent Dirichlet Allocation”, Journal of Machine Learning Research 3 (2003) pp.993-1022にあるようなLatent Dirichlet Allocationモデル(LDAモデル)が考えられる。
図5は、LDAモデルを説明するための図である。ここで、モデルにはDirichlet分布のパラメータα、各トピックから局所特徴を生成する確率βがある。αとβは、学習により計算されるパラメータである。具体的には、αはDirichlet分布を示し、βはj番目のトピックからi番目のワードができる確率P(Wi|topic j)を示す。
なお、LDAモデルは統計的言語処理で広く使用されるものであり、本発明では単語Wが局所画像特徴に対応する。なお、N個の単語Wは1DOCとなり、M個のDOCで学習する。Zはトピック変数である。θは1つのDOCにどれくらいの確率でトピックが生起されるかを示している。
各トピックの生起確率はDirichlet分布を事前確率とした多項分布と仮定する。ひとつの病変領域に対して、各トピックの生起確率が決まり、その確率に基づいて、各局所領域に対してトピックが生起し、そのトピックから局所特徴が独立に生成される。これらのα及びβは複数の病変領域を与えることにより学習される。複数の病変領域に対して尤度が次式により定義できる。
ここで、Nは、局所画像特徴抽出部12により分割された領域数を示す。kは、トピック数であり、本実施形態では進行度の種類(3種類)を示す。Vは、k-meansのクラスタ数を示す。
学習においては、上記式により定義される尤度を最大にすることにより、パラメータα、βが決定される。最大化の方法については、変分ベイズ法や、モンテカルロ法といった手法が知られている。一方、学習されたパラメータα、βを用いて、入力された病変画像に対する各トピックの生起確率の期待値を計算することができる。計算された生起確率の期待値は、病変領域の特徴量として用いられる。
[類似画像提示処理]
以上のように構成された類似画像提示装置は、検索キーとして、ユーザにより現在診断を下そうとしているキー画像が入力されると、次のような処理を行う。
病変部位抽出部11は、キー画像から病変部位を抽出する。病変部位抽出部11は、例えば、キー画像の所定範囲の輝度の領域を病変部位としてもよいし、病変部のない正常な画像とキー画像とを比較して、輝度の差分が一定以上の領域を病変部位として抽出してもよい。また、ユーザがマウス等のポインティングデバイスを用いて病変部位を指定することも可能である。
局所画像特徴抽出部12は、病変部位抽出部11で抽出された病変部位を一定サイズの局所領域に分割し、各局所領域の画像(局所画像)に対して画像特徴を計算する。画像特徴としては、局所領域の各画素の輝度値を成分とするベクトル量や、局所領域の各画素において計算されたSobelフィルタ結果を領域内でヒストグラム化したエッジ特徴や、輝度レベル共起行列を用いたテクスチャ特徴などが考えられる。
量子化コードブック生成・保存部13は、図示しないデータベース中の局所画像特徴の集合をk-meansクラスタなどによりクラスタリングし、各クラスタの中心値を保存する。局所画像特徴量子化部14は、量子化コードブック生成・保存部13に保存されている量子化コードブックに基づいて、局所画像特徴抽出部12で抽出された局所画像特徴を量子化する。例えば、局所画像特徴量子化部14は、局所画像特徴に最も近いクラスタを求め、そのクラスタに割り当てられているクラスタ番号を量子化結果として出力する。
病変分類部15は、病変領域中の局所画像特徴量子化部14により量子化された局所画像特徴(クラスタ番号)のヒストグラムを算出し、そのヒストグラムを用いて病変を分類する。病変の分類手法は特に限定されるものではないが、病変分類部15は、例えば、サポートベクタマシン等の様々な識別器を用いて病変を分類することができる。そのため、病変分類部15は、予め病変画像とその診断結果を教師データとして学習しておくとよい。
期待値推定部17は、病変分類部15での分類結果に応じて、局所画像特徴−トピック変数相関保存部16に保存された局所画像特徴とトピック変数間の相関係数を取得する。例えば、期待値推定部17は、病変分類部15で病変1が分類された場合、病変1についての局所画像特徴及びそれに対応するトピック変数の相関係数を取得する。
次に、期待値推定部17は、取得した相関を用いて、局所画像特徴抽出部12で抽出された全部の局所画像特徴とトピック変数との相関係数を取得し、取得した相関係数に基づいてトピック変数の生起確率の期待値を推定する。
例えば、期待値推定部17は、与えられた局所特徴に対して(1)式を最大化することにより求められる。推定されたトピックの生起確率の期待値を成分とするベクトルは、検索のための特徴量として用いられる。
特徴量比較部19は、キー画像中の病変部位に対して期待値推定部17により推定されたトピックの生起確率の期待値と、画像保存部20に記憶された各診断画像に対応付けられたトピックの生起確率の期待値とを比較し、画像保存部18に記憶されているトピックの生起確率の期待値の中から、推定されたトピックの生起確率の期待値に最も近似するトピックの生起確率の期待値を選択する。
類似画像提示部20は、例えばディスプレイで構成され、画像保存部18に記憶されている診断画像のうち、特徴量比較部19で選択されたトピックの生起確率の期待値に対応付けられた診断画像を類似画像として表示すると共に、この診断画像に付帯情報として対応付けられたレポートデータに基づく医師の所見及び病名を表示する。
図6は、トピックの生起確率の期待値に対応する診断画像を提示する一例を示す図である。類似画像提示部20には、同図に示すように、トピック確率が(1,0,0)、(0,1,0)、(0,0,1)、(0.2,0.3,0.5)にそれぞれ対応する診断画像が提示される。
なお、本発明は、上述した実施の形態に限定されるものではなく、特許請求の範囲に記載された範囲内で設計上の変更をされたものにも適用可能であるのは勿論である。例えば、トピックの生起確率の期待値は、上述した式から求められる値に限定されるものではなく、各々のトピック変数の示す状態になる確率の期待値が分かればよい。
本発明の実施の形態に係る類似画像提示装置の構成を示すブロック図である。 局所画像特徴−トピック変数相関保存部16の内部構成を示す図である。 トピック変数による生成モデルを示す模式図である。 画像保存部の構成を示す図である。 LDAモデルを説明するための図である。 トピックの生起確率の期待値に対応する診断画像を提示する一例を示す図である。
符号の説明
11 病変部位抽出部
12 局所画像特徴抽出部
13 量子化コードブック生成・保存部
14 局所画像特徴量子化部
15 病変分類部
16 局所画像特徴−トピック変数相関保存部
17 期待値推定部
18 画像保存部
19 特徴量比較部
20 類似画像提示部

Claims (3)

  1. 診断対象画像から病変部位を抽出する病変部位抽出手段と、
    前記病変部位抽出手段により抽出された病変部位を局所画像に分割し、各局所画像の特徴である局所画像特徴を抽出する局所画像特徴抽出手段と、
    前記局所画像特徴抽出手段により抽出された局所画像特徴を量子化して量子化データを出力する量子化手段と、
    量子化手段により出力された量子化データに基づいて病変を分類する病変分類手段と、
    病変の種類毎に、局所画像特徴と病変の進行度又は重症度を示すトピック変数との相関係数を記憶する記憶手段と、
    前記病変分類手段により分類された病変であって前記局所画像特徴抽出手段により抽出された各々の局所画像特徴とトピック変数との相関係数を前記記憶手段から取得して、取得した相関係数を用いて病変中の局所特徴を生成したトピック変数の生起確率の期待値を推定する期待値推定手段と、
    診断画像と、前記診断画像について予め算出されたトピック生起確率の期待値と、を対応付けて記憶する画像記憶手段と、
    前記画像記憶手段に記憶された診断画像のうち、前記期待値推定手段により推定されたトピック生起確率の期待値に最も近似するトピック生起確率の期待値に対応する診断画像を類似画像として提示する提示手段と、
    を備えた類似画像提示装置。
  2. 前記画像記憶手段は、前記診断画像についての診断結果を示す診断結果データを前記診断画像に対応付けて更に記憶し、
    前記提示手段は、前記診断画像と共に前記診断画像に対応する診断結果データに基づく情報を更に提示する
    請求項1に記載の類似画像提示装置。
  3. コンピュータを、
    診断対象画像から病変部位を抽出する病変部位抽出手段と、
    前記病変部位抽出手段により抽出された病変部位を局所画像に分割し、各局所画像の特徴である局所画像特徴を抽出する局所画像特徴抽出手段と、
    前記局所画像特徴抽出手段により抽出された局所画像特徴を量子化して量子化データを出力する量子化手段と、
    量子化手段により出力された量子化データに基づいて病変を分類する病変分類手段と、
    病変の種類毎に、局所画像特徴と病変の進行度又は重症度を示すトピック変数との相関係数を記憶する記憶手段と、
    前記病変分類手段により分類された病変であって前記局所画像特徴抽出手段により抽出された各々の局所画像特徴とトピック変数との相関係数を前記記憶手段から取得して、取得した相関係数を用いて病変中の局所特徴を生成したトピック変数の生起確率の期待値を推定する期待値推定手段と、
    診断画像と、前記診断画像について予め算出されたトピック生起確率の期待値と、を対応付けて記憶する画像記憶手段と、
    前記画像記憶手段に記憶された診断画像のうち、前記期待値推定手段により推定されたトピック生起確率の期待値に最も近似するトピック生起確率の期待値に対応する診断画像を類似画像として提示手段に提示させる制御を行う制御手段と、
    して機能させるための類似画像提示プログラム。
JP2008244253A 2008-09-24 2008-09-24 類似画像提示装置及びプログラム Expired - Fee Related JP5056695B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2008244253A JP5056695B2 (ja) 2008-09-24 2008-09-24 類似画像提示装置及びプログラム
US12/557,137 US8311962B2 (en) 2008-09-24 2009-09-10 Method and apparatus that divides, clusters, classifies, and analyzes images of lesions using histograms and correlation coefficients

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008244253A JP5056695B2 (ja) 2008-09-24 2008-09-24 類似画像提示装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2010079398A true JP2010079398A (ja) 2010-04-08
JP5056695B2 JP5056695B2 (ja) 2012-10-24

Family

ID=42038655

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008244253A Expired - Fee Related JP5056695B2 (ja) 2008-09-24 2008-09-24 類似画像提示装置及びプログラム

Country Status (2)

Country Link
US (1) US8311962B2 (ja)
JP (1) JP5056695B2 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011248740A (ja) * 2010-05-28 2011-12-08 Nec Corp データ出力装置、データ出力方法およびデータ出力プログラム
JP2012115446A (ja) * 2010-11-30 2012-06-21 Canon Inc 診断支援装置、診断支援装置の制御方法、およびプログラム
JP2016045662A (ja) * 2014-08-21 2016-04-04 富士フイルム株式会社 類似画像検索装置、類似画像検索装置の作動方法、および類似画像検索プログラム
US9305349B2 (en) 2013-06-28 2016-04-05 Samsung Electronics Co., Ltd. Apparatus and method for detecting lesion
JP2017096853A (ja) * 2015-11-26 2017-06-01 株式会社リコー 情報処理装置、欠陥検出方法およびプログラム
JP2017111731A (ja) * 2015-12-18 2017-06-22 キヤノンマーケティングジャパン株式会社 情報処理システム、情報処理方法、プログラム
JP2018050671A (ja) * 2016-09-26 2018-04-05 カシオ計算機株式会社 診断支援装置、及び診断支援装置における画像処理方法、並びにプログラム
WO2018116727A1 (ja) * 2016-12-19 2018-06-28 富士フイルム株式会社 類似症例検索装置とその作動方法および作動プログラム、並びに類似症例検索システム
JP2019092694A (ja) * 2017-11-21 2019-06-20 日本メナード化粧品株式会社 キメ評価装置、キメ評価方法
WO2020044735A1 (ja) * 2018-08-31 2020-03-05 富士フイルム株式会社 類似度決定装置、方法およびプログラム
WO2020110776A1 (ja) * 2018-11-28 2020-06-04 富士フイルム株式会社 分類装置、分類方法及びプログラム、分類結果表示装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2453376B1 (en) * 2010-11-15 2019-02-20 Fujifilm Corporation Medical image recording/reproducing apparatus, medical image recording/reproducing method and program
WO2013076930A1 (ja) * 2011-11-25 2013-05-30 パナソニック株式会社 医用画像圧縮装置、医用画像圧縮方法、及び予測知識データベース作成装置
JP2014127011A (ja) 2012-12-26 2014-07-07 Sony Corp 情報処理装置、情報処理方法、およびプログラム
JP5880454B2 (ja) * 2013-01-11 2016-03-09 富士ゼロックス株式会社 画像識別装置及びプログラム
KR102204437B1 (ko) * 2013-10-24 2021-01-18 삼성전자주식회사 컴퓨터 보조 진단 방법 및 장치
KR102156440B1 (ko) * 2013-12-10 2020-09-17 한국전자통신연구원 시각언어 기반의 영상주석 자동 생성 장치 및 방법
US20160113546A1 (en) * 2014-10-23 2016-04-28 Khalifa University of Science, Technology & Research Methods and systems for processing mri images to detect cancer

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002230518A (ja) * 2000-11-29 2002-08-16 Fujitsu Ltd 診断支援プログラム、診断支援プログラムを記録したコンピュータ読取可能な記録媒体、診断支援装置及び診断支援方法
JP2007279942A (ja) * 2006-04-05 2007-10-25 Fujifilm Corp 類似症例検索装置、類似症例検索方法およびそのプログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8790118B2 (en) * 1998-11-03 2014-07-29 Shade Analyzing Technologies, Inc. Interactive dental restorative network
US7309867B2 (en) * 2003-04-18 2007-12-18 Medispectra, Inc. Methods and apparatus for characterization of tissue samples
US7508961B2 (en) * 2003-03-12 2009-03-24 Eastman Kodak Company Method and system for face detection in digital images
KR20050025927A (ko) * 2003-09-08 2005-03-14 유웅덕 홍채인식을 위한 동공 검출 방법 및 형상기술자 추출방법과 그를 이용한 홍채 특징 추출 장치 및 그 방법과홍채인식 시스템 및 그 방법
US7949186B2 (en) * 2006-03-15 2011-05-24 Massachusetts Institute Of Technology Pyramid match kernel and related techniques

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002230518A (ja) * 2000-11-29 2002-08-16 Fujitsu Ltd 診断支援プログラム、診断支援プログラムを記録したコンピュータ読取可能な記録媒体、診断支援装置及び診断支援方法
JP2007279942A (ja) * 2006-04-05 2007-10-25 Fujifilm Corp 類似症例検索装置、類似症例検索方法およびそのプログラム

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011248740A (ja) * 2010-05-28 2011-12-08 Nec Corp データ出力装置、データ出力方法およびデータ出力プログラム
JP2012115446A (ja) * 2010-11-30 2012-06-21 Canon Inc 診断支援装置、診断支援装置の制御方法、およびプログラム
US9305349B2 (en) 2013-06-28 2016-04-05 Samsung Electronics Co., Ltd. Apparatus and method for detecting lesion
JP2016045662A (ja) * 2014-08-21 2016-04-04 富士フイルム株式会社 類似画像検索装置、類似画像検索装置の作動方法、および類似画像検索プログラム
JP2017096853A (ja) * 2015-11-26 2017-06-01 株式会社リコー 情報処理装置、欠陥検出方法およびプログラム
JP2017111731A (ja) * 2015-12-18 2017-06-22 キヤノンマーケティングジャパン株式会社 情報処理システム、情報処理方法、プログラム
JP2018050671A (ja) * 2016-09-26 2018-04-05 カシオ計算機株式会社 診断支援装置、及び診断支援装置における画像処理方法、並びにプログラム
US10930396B2 (en) 2016-12-19 2021-02-23 Fujifilm Corporation Similar case search apparatus, method for operating similar case search apparatus, and similar case search system
JPWO2018116727A1 (ja) * 2016-12-19 2019-10-24 富士フイルム株式会社 類似症例検索装置とその作動方法および作動プログラム、並びに類似症例検索システム
WO2018116727A1 (ja) * 2016-12-19 2018-06-28 富士フイルム株式会社 類似症例検索装置とその作動方法および作動プログラム、並びに類似症例検索システム
JP2019092694A (ja) * 2017-11-21 2019-06-20 日本メナード化粧品株式会社 キメ評価装置、キメ評価方法
WO2020044735A1 (ja) * 2018-08-31 2020-03-05 富士フイルム株式会社 類似度決定装置、方法およびプログラム
JPWO2020044735A1 (ja) * 2018-08-31 2021-06-03 富士フイルム株式会社 類似度決定装置、方法およびプログラム
JP7004829B2 (ja) 2018-08-31 2022-01-21 富士フイルム株式会社 類似度決定装置、方法およびプログラム
US11854190B2 (en) 2018-08-31 2023-12-26 Fujifilm Corporation Similarity determination apparatus, similarity determination method, and similarity determination program
WO2020110776A1 (ja) * 2018-11-28 2020-06-04 富士フイルム株式会社 分類装置、分類方法及びプログラム、分類結果表示装置

Also Published As

Publication number Publication date
JP5056695B2 (ja) 2012-10-24
US8311962B2 (en) 2012-11-13
US20100076921A1 (en) 2010-03-25

Similar Documents

Publication Publication Date Title
JP5056695B2 (ja) 類似画像提示装置及びプログラム
US11145059B2 (en) Medical scan viewing system with enhanced training and methods for use therewith
Villegas et al. General overview of ImageCLEF at the CLEF 2015 labs
US9122955B2 (en) Method and system of classifying medical images
Al-Ayyoub et al. Machine learning approach for brain tumor detection
WO2015092633A1 (en) Automatic creation of a finding centric longitudinal view of patient findings
JP2014029644A (ja) 類似症例検索装置および類似症例検索方法
Mall et al. Modeling visual search behavior of breast radiologists using a deep convolution neural network
Simpson et al. Literature-based biomedical image classification and retrieval
Darapureddy et al. Optimal weighted hybrid pattern for content based medical image retrieval using modified spider monkey optimization
US11699508B2 (en) Method and apparatus for selecting radiology reports for image labeling by modality and anatomical region of interest
Depeursinge et al. Comparative performance analysis of state-of-the-art classification algorithms applied to lung tissue categorization
Sagayam et al. A cognitive perception on content-based image retrieval using an advanced soft computing paradigm
Zhou et al. Automatic microaneurysms detection based on multifeature fusion dictionary learning
Asherov et al. Lung texture classification using bag of visual words
Kharrat et al. Classification of brain tumors using personalized deep belief networks on MRImages: PDBN-MRI
Phan et al. A Hounsfield value-based approach for automatic recognition of brain haemorrhage
Baâzaoui et al. Dynamic distance learning for joint assessment of visual and semantic similarities within the framework of medical image retrieval
CN115036034B (zh) 一种基于患者表征图的相似患者识别方法及系统
del Toro et al. Texture classification of anatomical structures in CT using a context-free machine learning approach
Murugan et al. Efficient clustering of unlabeled brain DICOM images based on similarity
Kale et al. Differentiation of several interstitial lung disease patterns in hrct images using support vector machine: role of databases on performance
Li et al. Tbidoc: 3d content-based ct image retrieval system for traumatic brain injury
Tarando et al. Cascade of convolutional neural networks for lung texture classification: overcoming ontological overlapping
JP2011048481A (ja) 画像処理装置及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110822

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120622

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120703

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120716

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150810

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees