JP4356327B2 - Medical image processing apparatus and medical image processing method - Google Patents

Medical image processing apparatus and medical image processing method Download PDF

Info

Publication number
JP4356327B2
JP4356327B2 JP2003024028A JP2003024028A JP4356327B2 JP 4356327 B2 JP4356327 B2 JP 4356327B2 JP 2003024028 A JP2003024028 A JP 2003024028A JP 2003024028 A JP2003024028 A JP 2003024028A JP 4356327 B2 JP4356327 B2 JP 4356327B2
Authority
JP
Japan
Prior art keywords
image
display
sub
medical
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003024028A
Other languages
Japanese (ja)
Other versions
JP2004230001A (en
Inventor
亜紀子 柳田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2003024028A priority Critical patent/JP4356327B2/en
Priority to US10/764,413 priority patent/US20040151358A1/en
Publication of JP2004230001A publication Critical patent/JP2004230001A/en
Application granted granted Critical
Publication of JP4356327B2 publication Critical patent/JP4356327B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Analysis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、医用画像に対し、医師の読影診断の効率化を図るための加工を施して画像記録装置に出力する医用画像処理装置及び医用画像処理方法に関する。
【0002】
【従来の技術】
従来、医師が診断に用いる医用画像としては、放射線撮影に供された増感紙/フィルム等のアナログ画像又は輝尽性蛍光体によるデジタル画像入力システムから得られた画像を銀塩フィルム等のハードコピーとして出力したものがあり、医師は、各診療室においてこれらの医用画像をシャウカステン等の画像観察装置を用いて読影するのが一般的である。
【0003】
一方、近年、画像診断支援装置(例えば、特許文献1参照)により、読影用の医用画像に異常陰影候補検出結果等の診断支援情報を付加してCRT(Cathode Ray Tube)モニタ、液晶モニタ等に出力し、医師の診断の支援を行うシステムが提案されている。また、モニタに原画像を表示するとともに、異常陰影候補等に対応する部分領域の拡大画像をオーバーレイ表示する技術が提案されている(例えば、特許文献2参照)。医用画像をモニタ等に出力して読影する場合、読影時にモニタの輝度及びコントラストをモニタ付属の調整手段によって変化させたり、階調処理や周波数処理等の画像処理条件を画像表示ソフトウエアによりリアルタイムで変化させたりすることが可能である。また、画像表示ソフトウエアにより画像の拡大縮小や移動が可能である。このように、モニタによる医用画像の読影時には、表示のフォーマット変更等がリアルタイムで操作でき、自由度が大きい。
【0004】
【特許文献1】
特開2000−287957号公報
【特許文献2】
特開2000−287955号公報
【0005】
【発明が解決しようとする課題】
しかしながら、医用画像をモニタ表示する場合、読影に適した画像を提供するためにはモニタが高性能であることが要求され、高価で、配置するためのスペースを必要とし、消費電力や排熱も大きい。そのため、大病院等一部の病院を除いて、医用画像を表示するためのモニタを放射線科の読影室や各診療室の全てに設置することは現実的に困難であった。
【0006】
また、病院内に表示用モニタを導入するには、医師がモニタシステムの操作に慣れる必要があり、更に撮影から読影までの院内作業の流れが大きく変化するため、ワークフローの変更や人的資源の調整等の大きな課題が発生する。
【0007】
一方、従来多くの病院で実施されているように、医用画像を銀塩フィルム等のハードコピーとして出力して読影する方法においては、読影しようとする医用画像の階調や周波数特性が診断上好ましくない、或いは診断支援情報の表示方法や画像サイズが診断上好ましくないことが明らかになった場合、画像処理や画像サイズ等の表示フォーマットを手動調整した上でフィルムを再出力して診療室等の読影場所まで運ぶことが必要になり、フィルムコスト及び作業に要する時間や人件費がかかるという問題点がある。
【0008】
本発明の課題は、医用画像のハードコピーを、自動的に診断に適した表示用フォーマットで出力できるようにすることにより、安価なシステムで、従来の院内作業の流れを変えずに、医師が読影において診断支援情報を容易にかつ迅速に参照及び活用することができ、それにより医師の診断性能及び作業効率を向上することのできる医用画像処理装置を提供することである。
【0009】
【課題を解決するための手段】
上記課題を解決するため、請求項1に記載の発明の医用画像処理装置は、
医用画像を解析することにより、診断支援情報を生成する診断支援情報生成手段と、
前記医用画像に少なくとも階調処理を含む画像処理を施して、同一の前記医用画像から少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成する画像処理手段と、
前記副画像に対して前記診断支援情報生成手段により生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する表示用フォーマッティング手段と、
前記表示用画像を画像記録装置に出力する画像出力手段と、
前記表示用フォーマッティング手段により前記医用画像に施された表示用画像作成条件又は前記表示用フォーマッティング手段により作成された表示用画像の画像データを前記医用画像の画像データと対応付けて保存する表示用フォーマット保存手段と、
を備え、
前記表示用フォーマッティング手段は、前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成することを特徴としている。
【0010】
請求項23に記載の発明の医用画像処理方法は、
医用画像を解析することにより、診断支援情報を生成する工程と、
前記医用画像に少なくとも階調処理を含む画像処理を施して、同一の前記医用画像から少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成する工程と、
前記副画像に対して前記生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する工程と、
前記表示用画像を画像記録装置に出力する工程と、
前記医用画像に施された表示用画像作成条件又は前記作成された表示用画像の画像データを前記医用画像の画像データと対応付けて表示用フォーマット保存手段に保存する工程と、
前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成する工程と、
を含むことを特徴としている。
【0011】
請求項1、23に記載の発明によれば、医用画像を解析することにより診断支援情報を生成し、この医用画像に少なくとも階調処理を含む画像処理を施して少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成し、副画像に対して、生成された診断支援情報に対応するアノテーションを付加するとともに主画像と副画像を合成して一枚の表示用画像を作成し、画像記録装置に出力する。そして、医用画像に施された表示用画像作成条件又は作成された表示用画像の画像データを医用画像の画像データと対応付けて表示用フォーマット保存手段に保存し、表示用画像を再出力する際に、表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して表示用画像を作成する。従って、画像記録装置から診断用の主画像と診断支援情報に対応するアノテーションを付加した副画像を合成した画像を媒体上にハードコピーとして出力することが可能となる。その結果、高価なモニタを必要とすることなく、従来の院内作業の流れを変えずに、医師は診断支援情報を容易にかつ迅速に参照及び活用することができ、それにより医師の診断性能及び作業効率を向上させることができる。また、表示用生成条件又は表示用画像データを保存しておくことで、出力された医用画像を再出力する際に、表示用画像作成のための計算を再度行う必要がなくなる。更に、表示用画像生成条件を画像データと対応付けて保存することにより、医師がどのようなフィルム出力に基づいて診断を確定したのかの記録が残るため、EBM(Evidence Based Medicine)の観点や医療訴訟等の対応において望ましい情報管理が可能となる。
【0012】
請求項2に記載の発明は、請求項1に記載の発明において、
前記画像処理手段は、前記医用画像を解析することにより主画像用の画像処理条件及び副画像用の画像処理条件を決定し、当該決定された画像処理条件を用いて少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成することを特徴としている。
【0013】
請求項2に記載の発明によれば、医用画像を解析することにより主画像用の画像処理条件及び副画像用の画像処理条件を決定し、当該決定された画像処理条件を用いて少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成する。従って、診断を目的とした主画像と参照を目的とした副画像の各々に適した互いに異なる画像処理を施すことが可能となる。
【0014】
請求項3に記載の発明は、請求項2に記載の発明において、
前記画像処理条件が階調処理条件であり、
前記画像処理手段は、前記主画像の平均グラディエントに比べて前記副画像の平均グラディエントが相対的に小さくなるように階調処理条件を決定することを特徴としている。
【0015】
請求項3に記載の発明によれば、主画像の平均グラディエントに比べて副画像の平均グラディエントが相対的に小さくなるように階調処理条件を決定して主画像及び副画像を作成する。従って、診断を目的とした主画像において、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像全体を見やすい濃度範囲に収めて被写体とアノテーションの位置関係をわかりやすく表現することができる。
【0016】
請求項4に記載の発明は、請求項2に記載の発明において、
前記画像処理条件が階調処理条件であり、
前記画像処理手段は、前記主画像の平均グラディエントに比べて前記副画像の平均グラディエントが逆符号の値をもつように階調処理条件を決定することを特徴としている。
【0017】
請求項4に記載の発明によれば、主画像の平均グラディエントに比べて副画像の平均グラディエントが逆符号の値をもつように階調処理条件を決定して主画像及び副画像を作成する。従って、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像の白黒を反転することにより、被写体と背景の境界を見やすい濃度で示し、被写体とアノテーションの位置関係をわかりやすく表現することができる。
【0018】
請求項5に記載の発明は、請求項2〜4の何れか一項に記載の発明において、
前記画像処理条件が周波数処理条件であり、
前記画像処理手段は、前記主画像の低周波成分に比べて副画像の低周波成分が相対的に減弱されるように周波数処理条件を決定することを特徴としている。
【0019】
請求項5に記載の発明によれば、主画像の低周波成分に比べて副画像の低周波成分が相対的に減弱されるように周波数処理条件を決定して主画像及び副画像を作成する。従って、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像全体を見やすい濃度範囲に収めて、付加されたアノテーションの位置関係をわかりやすく表現することができる。
【0020】
請求項6に記載の発明は、請求項1〜5の何れか一項に記載の発明において、
前記画像記録装置に対応する画像記録装置情報を保存する画像記録装置情報保存手段を備え、
前記画像処理手段は、前記医用画像の解析結果および前記画像記録装置情報に基づいて前記画像処理の条件を決定することを特徴としている。
【0021】
請求項6に記載の発明によれば、画像記録装置に対応する画像記録装置情報を保存し、記画像処理手段は、医用画像の解析結果および保存された画像記録装置情報に基づいて画像処理の条件を決定する。従って、画像記録装置に応じた最適な処理画像を自動的に作成することができる。
【0022】
請求項7に記載の発明の医用画像処理装置は、
医用画像を解析することにより、診断支援情報を生成する診断支援情報生成手段と、
前記医用画像に少なくとも階調処理を含む画像処理を施すことにより、少なくとも一つの主画像を作成する画像処理手段と、
前記医用画像を解析することによりシェーマを自動的に作成し、該シェーマを表した少なくとも一つの副画像を作成するシェーマ画像作成手段と、
前記副画像に対して、前記診断支援情報生成手段により生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する表示用フォーマッティング手段と、
前記表示用画像を画像記録装置に出力する画像出力手段と、
前記表示用フォーマッティング手段により前記医用画像に施された表示用画像作成条件又は前記表示用フォーマッティング手段により作成された表示用画像の画像データを前記医用画像の画像データと対応付けて保存する表示用フォーマット保存手段と、
を備え、
前記表示用フォーマッティング手段は、前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成することを特徴としている。
【0023】
請求項24に記載の発明の医用画像処理方法は、
医用画像を解析することにより、診断支援情報を生成する工程と、
前記医用画像に少なくとも階調処理を含む画像処理を施すことにより、少なくとも一つの主画像を作成する工程と、
前記医用画像を解析することによりシェーマを自動的に作成し、該シェーマを表した少なくとも一つの副画像を作成する工程と、
前記副画像に対して、前記生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する工程と、
前記表示用画像を画像記録装置に出力する工程と、
前記医用画像に施された表示用画像作成条件又は前記作成された表示用画像の画像データを前記医用画像の画像データと対応付けて表示用フォーマット保存手段に保存する工程と、
前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成する工程と、
を含むことを特徴としている。
【0024】
請求項7、24に記載の発明によれば、医用画像を解析することにより診断支援情報を生成し、医用画像に少なくとも階調処理を含む画像処理を施すことにより、少なくとも一つの主画像を作成する。また、医用画像を解析することによりシェーマを自動的に作成し、該シェーマを表した少なくとも一つの副画像を作成する。そして、副画像に対して、生成された診断支援情報に対応するアノテーションを付加するとともに、主画像及び副画像を合成することにより一枚の表示用画像を作成し画像記録装置に出力する。医用画像に施された表示用画像作成条件又は作成された表示用画像の画像データは、医用画像の画像データと対応付けて表示用フォーマット保存手段に保存し、表示用画像を再出力する際に、表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して表示用画像を作成する。従って、画像記録装置から診断用の主画像と診断支援情報に対応するアノテーションを付加した副画像を合成した画像を媒体上にハードコピーとして出力することが可能となる。その結果、高価なモニタを必要とすることなく、従来の院内作業の流れを変えずに、医師は診断支援情報を容易にかつ迅速に参照及び活用することができ、それにより医師の診断性能及び作業効率を向上させることができる。また、表示用生成条件又は表示用画像データを保存しておくことで、出力された医用画像を再出力する際に、表示用画像作成のための計算を再度行う必要がなくなる。更に、表示用画像生成条件を画像データと対応付けて保存することにより、医師がどのようなフィルム出力に基づいて診断を確定したのかの記録が残るため、EBM(Evidence Based Medicine)の観点や医療訴訟等の対応において望ましい情報管理が可能となる。
【0025】
請求項8に記載の発明は、請求項1〜7の何れか一項に記載の発明において、
前記副画像の表示/非表示を指定するための情報を外部入力する副画像表示指定情報入力手段を備え、
前記表示用フォーマッティング手段は、前記外部入力された副画像表示指定情報に基づいて前記副画像を表示した表示用画像又は前記副画像を表示しない表示用画像を作成することを特徴としている。
【0026】
請求項8に記載の発明によれば、副画像の表示/非表示を指定するための情報を外部入力すると、外部入力された副画像表示指定情報に基づいて副画像を表示した表示用画像又は副画像を表示しない表示用画像を作成する。従って、必要に応じて診断支援情報を付加しない医用画像を出力することができる。
【0027】
請求項9に記載の発明は、請求項1〜8の何れか一項に記載の発明において、
前記診断支援情報生成手段は、前記医用画像内の異常陰影候補を検出し、検出された異常陰影候補に関する該医用画像内の位置情報を含む診断支援情報を生成することを特徴としている。
【0028】
請求項9に記載の発明によれば、医用画像内の異常陰影候補を検出し、検出された異常陰影候補に関する該医用画像内の位置情報を含む診断支援情報を生成する。従って、病変に関わる異常陰影候補を提示することにより、医師による病変の見落としを低減し、医師の読影の負担を軽減することができる。
【0029】
請求項10に記載の発明は、請求項1〜9の何れか一項に記載の発明において、
前記診断支援情報生成手段は、前記医用画像において画像計測を行い、この計測結果に関する該医用画像内の位置情報を含む診断支援情報を生成することを特徴としている。
【0030】
請求項10に記載の発明によれば、医用画像において画像計測を行い、この計測結果に関する該医用画像内の位置情報を含む診断支援情報を生成する。従って、計測結果を提示することにより、医師による画像計測の精度を向上し読影の負担を低減することができる。
【0031】
請求項11に記載の発明は、請求項5〜10の何れか一項に記載の発明において、
前記画像出力手段は、複数の前記画像記録装置に対応する複数の出力チャンネルを有し、
前記画像記録装置情報保存手段は、前記出力チャンネル毎に設定された画像記録装置の画像記録装置情報を保存し、
前記複数の出力チャンネルのうちのいずれに画像出力するかを選択する出力チャンネル選択手段を備え、
前記表示用フォーマッティング手段は、前記画像記録装置情報保存手段に保存された、前記出力チャンネル選択手段により選択された出力チャンネルに対応する画像記録装置情報に基づいて前記表示用画像を作成することを特徴としている。
【0032】
請求項11に記載の発明によれば、複数の画像記録装置に対応する複数の出力チャンネルを有し、出力チャンネル毎に設定された画像記録装置の画像記録装置情報を対応付けて保存し、選択された画像記録装置の情報に基づいて表示用画像を作成する。従って、複数の画像記録装置の中から出力する画像記録装置が選択されると、選択された画像記録装置に対して最適なフォーマットを自動的に適用することができる。
【0033】
請求項12に記載の発明は、請求項1〜11の何れか一項に記載の発明において、
前記表示用フォーマッティング手段において作成された表示用画像をモニタ表示する画像表示手段と、
前記表示用画像を修正するための修正情報を外部入力する表示用画像修正情報入力手段と、
前記外部入力された表示用画像修正情報に基づいて前記表示用画像を修正する表示用画像修正手段と、
を有することを特徴としている。
【0034】
請求項12に記載の発明によれば、作成された表示用画像をモニタ表示し、表示用画像を修正するための修正情報を外部入力すると、外部入力された表示用画像修正情報に基づいて表示用画像を修正する。従って、ユーザがモニタで画像を確認しながら表示フォーマットを修正することが可能となる。
【0035】
請求項13に記載の発明は、請求項1〜12の何れか一項に記載の発明において、
前記診断支援情報を前記医用画像の画像データと対応付けて保存する診断支援情報保存手段を有し、
前記表示用フォーマッティング手段は、前記診断支援情報保存手段に保存された診断支援情報を読み出して該診断支援情報に基づいて前記表示用画像を作成することを特徴としている。
【0036】
請求項13に記載の発明によれば、診断支援情報を医用画像の画像データと対応付けて保存し、保存された診断支援情報を読み出して、読み出した診断支援情報に基づいて表示用画像を作成する。従って、表示用フォーマッティングの条件を変更して再出力する際に、診断支援情報を生成するための計算を再度行う必要がなくなる。
【0037】
請求項14に記載の発明は、請求項1〜13の何れか一項に記載の発明において、
前記画像処理手段により前記医用画像に施された画像処理の条件を前記医用画像の画像データと対応付けて保存する画像処理条件保存手段を有し、
前記画像処理手段は、前記画像処理条件保存手段に保存された画像処理条件を読み出して該画像処理条件に基づいて前記処理画像を作成することを特徴としている。
【0038】
請求項14に記載の発明によれば、医用画像に施された画像処理の条件を医用画像の画像データと対応付けて保存し、保存された画像処理条件を読み出して、読み出した画像処理条件に基づいて処理画像を作成することを特徴としている。従って、画像処理以外の表示用フォーマッティングの条件を変更して再出力する際に、画像処理条件決定のための計算を再度行う必要がなくなる。
【0041】
請求項15記載の発明は、請求項7〜14の何れか一項に記載の発明において、
前記シェーマの画像データを前記医用画像の画像データと対応付けて保存するシェーマ画像データ保存手段を有し、
前記表示用フォーマッティング手段は、前記シェーマ画像保存手段に保存されたシェーマ画像データを読み出して該シェーマ画像データに基づいて前記表示用画像を作成することを特徴としている。
【0042】
請求項15に記載の発明によれば、シェーマの画像データを医用画像の画像データと対応付けて保存し、保存されたシェーマ画像データを読み出して、該シェーマ画像データに基づいて表示用画像を作成する。従って、シェーマ以外の表示用フォーマッティングの条件を変更して再出力する際に、画像処理条件決定のための計算を再度行う必要がなくなる。
【0043】
請求項16に記載の発明は、請求項1〜15の何れか一項に記載の発明において、
前記表示用フォーマッティング手段は、
前記主画像及び前記副画像の各々についてサイズ調整を行う画像サイズ調整手段と、
前記サイズ調整を行った主画像と副画像を合成する画像合成手段と、
を有することを特徴としている。
【0044】
請求項16に記載の発明によれば、主画像及び副画像の各々についてサイズ調整を行い、サイズ調整を行った主画像と副画像を合成する。従って、主画像と副画像の各々についてサイズ調整を行うことができる。
【0045】
請求項17に記載の発明は、請求項16に記載の発明において、
前記画像サイズ調整手段は、前記副画像の画像サイズが前記主画像の画像サイズに比べて小さくなるようにサイズ調整を行うことを特徴としている。
【0046】
請求項17に記載の発明によれば、副画像の画像サイズが主画像の画像サイズに比べて小さくなるようにサイズ調整を行う。従って、例えば、読影の主体となる主画像を実物大で精細に表現するとともに、読影の参考としての副画像を同一画像上に配置することが可能となる。
【0047】
請求項18に記載の発明は、請求項16又は17に記載の発明において、
前記画像合成手段は、前記サイズ調整された主画像における所定の領域に、前記サイズ調整された副画像をはめ込む形で合成することを特徴としている。
【0048】
請求項18に記載の発明によれば、サイズ調整された主画像における所定の領域に、サイズ調整された副画像をはめ込む形で合成する。従って、例えば、読影の主体となる主画像を実物大で精細に表現するとともに、読影の参考としての副画像を読影の妨げにならない所定領域に配置することが可能となる。
【0049】
請求項19に記載の発明は、請求項18に記載の発明において、
前記画像合成手段は、前記医用画像の画像属性情報に基づいて、前記サイズ調整された副画像のはめ込み位置を決定することを特徴としている。
【0050】
請求項19に記載の発明によれば、医用画像の画像属性情報に基づいて、サイズ調整された副画像のはめ込み位置を決定する。従って、医用画像の撮影部位/体位や撮影サイズ等の画像属性情報に基づいて読影の妨げにならない位置に副画像を配置することが可能となる。
【0051】
請求項20に記載の発明は、請求項18に記載の発明において、
前記表示用フォーマッティング手段は、前記医用画像を解析することにより被写体領域を認識する被写体領域認識手段を有し、
前記画像合成手段は、前記認識された被写体領域の情報に基づいて、前記サイズ調整された副画像のはめ込み位置を決定することを特徴としている。
【0052】
請求項20に記載の発明によれば、医用画像を解析することにより被写体領域を認識し、認識された被写体領域の情報に基づいて、サイズ調整された副画像のはめ込み位置を決定する。従って、読影の妨げにならない、被写体領域と重ならない位置に副画像を自動的に配置することができる。
【0053】
請求項21に記載の発明は、請求項18に記載の発明において、
前記画像サイズ調整手段は、前記認識された被写体領域の情報に基づいて、前記副画像のサイズを調整することを特徴としている。
【0054】
請求項21に記載の発明によれば、認識された被写体領域の情報に基づいて、副画像のサイズを調整する。従って、読影の妨げにならない、被写体領域と重ならない大きさで副画像を配置することができる。
【0055】
請求項22に記載の発明は、請求項1〜21の何れか一項に記載の発明において、
前記診断支援情報生成手段は、同一の前記医用画像から、互いに異なる複数の診断支援情報を生成し、
前記画像処理手段または前記シェーマ画像作成手段は、前記複数の診断支援情報の各々について少なくとも一つの副画像を作成することを特徴としている。
【0056】
請求項22に記載の発明によれば、同一の医用画像から、互いに異なる複数の診断支援情報を生成し、生成された複数の診断支援情報の各々について少なくとも一つの副画像を作成する。従って、複数の異なる種類の異常陰影候補や計測結果が存在する場合であっても副画像が煩雑にならず、見易い副画像を提供することができる。
【0057】
【発明の実施の形態】
〔第1の実施の形態〕
以下、図を参照して本発明の実施の形態を詳細に説明する。
まず、構成を説明する。
図1は、本実施の形態における画像処理装置10の内部構成を示す図である。図1において、画像処理装置10は、画像入力手段11、画像データ記憶手段12、診断支援情報生成手段13、診断支援情報保存手段14、画像処理手段15、画像処理条件保存手段16、表示用フォーマッティング手段17、画像表示手段18、操作入力手段19、画像出力手段20、表示用フォーマット保存手段21、画像記録装置情報保存手段22を備えて構成されている。
【0058】
画像入力手段11は、例えばレーザデジタイザを用いて、患者を撮影した医用画像が記録されたフィルム上をレーザビームで走査し、透過した光量を測定し、その値をアナログデジタル変換することにより、画像データとして入力するものである。
【0059】
また、画像入力手段11による画像の入力は、上記レーザデジタイザに限らず、例えばCCD(Charge Coupled Device)等の光センサを用いることとしてもよい。この場合、フィルム上を光走査し、その反射光をCCDにより光電変換して画像データを得る。また、フィルムに記録された画像を読み取るのではなく、特開昭55−12429号公報に開示のように、蓄積性蛍光体を用いて撮影された医用画像をデジタル変換して出力する撮影装置を接続してこの撮影装置から画像データを得ることとしてもよい。この場合には、デジタル画像処理、デジタル画像保存による画像管理、及びネットワークを介した画像共有や画像通信等のデジタル特有の利点が生じる。
【0060】
また、2次元的に配列された複数の検出素子により放射線画像を撮像して電気信号として出力するフラットパネルディテクタ(FPD)から得た画像データを入力するものであってもよい。例えば、特開平6−342098号公報には、照射された放射線の強度に応じた電荷を生成する光導電層と、生成された電荷を2次元的に配列された複数のコンデンサに蓄積する技術が開示されている。
【0061】
また、特開平9−90048号公報に記載されているように、放射線を増感紙等の蛍光体層に吸収させて蛍光を発生させ、その蛍光強度を画素毎に設けたフォトダイオード等の光検出器で検出して医用画像を入力することとしてもよい。蛍光強度の検出手段としては他にCCDやC−MOSセンサを用いる方法もある。また、放射線の照射により可視光を発する放射線シンチレータと、レンズアレイ及び各々のレンズに対応するエリアセンサとを組み合わせた構成であってもよい。
【0062】
なお、上述した種々の構成によりデジタル医用画像を得る際には、撮影部位や診断目的にもよるが、例えばマンモグラム(乳房の放射線画像)に対しては、画像の実効画素サイズが200μm以下であることが好ましく、更には100μm以下であることが好ましい。この発明の画像処理装置の性能を最大限に発揮させるためには、例えば実効画素サイズ50μm程度で入力した画像データを用いる構成が好ましい。
【0063】
また、単純X線画像に限る必要はなく、CT(Computed Tomography)やMRI(磁気共鳴イメージング)、超音波診断装置などの撮影装置から得られた画像データを入力する構成をとることも可能である。
【0064】
また、画像入力手段11は、画像データの入力とともにその画像データに関する画像属性情報、例えば撮影された患者の患者氏名、患者ID、年齢、性別等の患者に関する患者情報、撮影日、撮影ID、撮影部位、撮影条件(体位、撮影方向等)、撮影装置等の撮影情報、画像データの画素数、サンプリングピッチ、ビット数等の画像データ情報を入力し、画像データ記憶手段12に画像データを出力する際は、この画像属性情報を画像データに対応付けて出力することとする。なお、画像入力手段11は、画像処理装置10に必ずしも備えられている必要はなく、例えば画像データを保存したCD−ROMやフロッピー(登録商標)等の各種記憶媒体から画像データを読み取ることとしてもよいし、ネットワークを介して接続される外部装置から転送されることとしてもよい。
【0065】
画像データ記憶手段12は、画像入力手段11により入力された画像データに必要に応じてデータ圧縮を施して格納する。ここで、データ圧縮方法としては、公知のJPEG、DPCM(Differential Pulse Code Modulation)、ウェーブレット圧縮等の手法を用いた可逆圧縮又は不可逆圧縮が用いられるが、データ圧縮に伴う診断情報の劣化が無い可逆圧縮が好ましい。
【0066】
小規模な診断では、画像入力手段11から入力されるデータ量はさほど多くはないので、画像データを圧縮せずに磁気ディスクに格納することができる。この場合、光磁気ディスクに比べて画像データの格納及び読み出しは非常に高速にできるようになる。画像の読影時には、高速なサイクルタイムが必要であるため、必要な画像データを半導体メモリに格納することも行われる。
【0067】
診断支援情報生成手段13は、異常陰影候補情報生成部13a及び計測情報生成部13bにより構成されている。
【0068】
異常陰影候補情報生成部13aは、画像データ記憶手段12から画像データを読み出して画像解析を行うことにより、マンモグラムにおける微小石灰化クラスタや腫瘤陰影、胸部画像における結節性陰影等の異常陰影と思われる候補を検出し、この異常陰影候補の画像内における位置情報を含む診断支援情報を生成する。図2(a)に微小石灰化クラスタの一例を示す。微小石灰化が集まって(クラスタ化して)存在すると、そこが初期癌である可能性が高いため、早期の乳癌を発見するための重要な所見の一つである。マンモグラム上では、略円錐構造を持った白っぽく丸い陰影として見られる。また、図2(b)に示す腫瘤陰影は、有る程度の大きさを持った塊、マンモグラム上では、ガウス分布に近い、白っぽく丸い陰影として見られる。
【0069】
腫瘤陰影検出方法には、以下の論文に記載された公知の検出方法を用いることが可能である。
(1)腫瘤陰影
・左右乳房を比較することによって検出する方法
(Med.Phys.,Vol.21.No.3,pp.445-452)
・アイリスフィルタを用いて検出する方法
(信学論(D-11),Vol.J75-D-11,no.3,pp.663-670,1992)
・Quoitフィルタを用いて検出する方法
(信学論(D-11),Vol.J76-D-11,no.3,pp.279-287,1993)
・分割した乳房領域の画素値のヒストグラムに基づく2値化により検出する方法
(JAMIT Frontier 講演論文集,pp.84-85,1995)
・方向性のある多数のラプラシアンフィルタの最小出力をとる最小方向差分フィルタ)
(信学論(D-11),Vol.J76-D-11,no.2,pp.241-249,1993)
【0070】
・フラクタル次元を利用して腫瘤陰影の良悪性を鑑別する方法
(Medical Imaging Technology17(5),pp.577-584,1999)
【0071】
また、微小石灰化クラスタの異常陰影候補検出方法としては、以下の論文に記載された公知の検出方法を用いることが可能である。
(2)微小石灰化クラスタ
・乳房領域から石灰化の疑いがある領域を局部化し、陰影像の光学濃度差や境界濃度差の標準偏差値等から偽陽性候補を削除する方法
(IEEE Trance Biomed Eng BME-26(4):213-219,1979)
・ラプラシアンフィルタ処理を行った画像を用いて検出する方法
(信学論(D-11),Vol.J71-D-11,no.10,pp.1994-2001,1988)
・乳腺等の背景パターンの影響を抑えるためにモルフォロジー解析した画像を使用する検出方法
(信学論(D-11),Vol.J71-D-11,no.7,pp.1170-1176,1992)
【0072】
また、その他の異常陰影候補の検出方法としては、例えば以下の公知の検出方法を用いることが可能である。
(3)胸部画像における結節性陰影の検出
・特開平6−121792号公報
(4)胸部画像における間質性疾患陰影の検出
・特開平2−185240号公報
【0073】
計測情報生成部13bは、画像データ記憶手段12から画像データを読み出して画像計測を行い、計測結果に関する画像内の位置情報を含む診断支援情報を生成する。画像計測としては、例えば、胸部画像において心臓肥大の診断に用いられる心胸郭比の計測、下肢画像において手術計画等に用いられる下肢骨長の計測、脊椎画像において脊椎側弯症の診断に用いられるCobb角の計測等を行う。計測は、自動処理により行う構成としても良いし(例えば、Medical Physics,Vol17,No.3,pp.342-350,1990、特開平7−381号公報)、操作者が画像表示手段に表示された画像を観察しながらマウス等のポインティングデバイスを用いて入力した情報に基づいて計算される構成(例えば、特開平8−256993号公報)としてもよい。
【0074】
診断支援情報保存手段14は、異常陰影候補情報生成部13aにより生成された診断支援情報を画像データと対応付けて保存する異常陰影候補ファイル141及び計測情報生成部13bにより生成された診断支援情報を画像データと対応付けて保存する計測情報ファイル142を有している。
【0075】
異常陰影候補ファイル141は、図3(a)に示すように、撮影ID領域141a、異常の種類領域141b、位置情報領域141c、大きさ領域141d等を有しており、撮影IDで特定される画像データに関して異常陰影候補情報生成部13aで生成された診断支援情報である異常の種類、位置情報、大きさを互いに対応付けて格納しており、撮影IDにより、画像データ記憶手段12に格納されている画像データと、異常陰影候補ファイル141内の診断支援情報とが対応付けられている。
【0076】
異常の種類領域141bは、検出された異常陰影候補の種類を示すデータ(例えば、腫瘤陰影、微小石灰化、結節性陰影・・・)を「異常の種類」として格納する。位置情報領域141cは、異常陰影候補の重心の位置を座標値を示すデータ(例えば、(x、y)=(100,1200)、(300、700)、(400、500)、・・・)を「位置情報」として格納する。位置情報としては、これに限定されず、例えば異常陰影候補の画像領域を示す座標値であってもよい。また、特徴的な正常組織までの距離で示すこととしてもよく、例えば撮影部位が胸部である場合、異常陰影候補の重心と特徴的な正常組織である肺野領域の重心との距離により位置を示すこととしてもよい。特徴的な正常組織とは、心臓や肺、椎骨等の臓器や骨のように位置変化が少ない生体組織であり、異常陰影候補の位置の経時変化の指標となりうるものが好ましい。大きさ情報領域141dは、異常陰影候補の画像領域が占める面積を示すデータ(例えば、225mm2、300mm2、310mm2、・・・)を「大きさ」として格納する。大きさ情報は、異常陰影候補の重心から辺縁までの平均距離や最長距離(例えば、15mm等)で示すこととしてもよい。
【0077】
計測情報ファイル142は、図3(b)に示すように、撮影ID領域142a、計測対象領域142b、位置情報領域142c、計測結果領域142d等を有しており、撮影IDで特定される画像データに関して計測情報生成部14b生成された診断支援情報である計測対象、位置情報、計測結果を互いに対応付けて格納しており、撮影IDにより、画像データ記憶手段12に格納されている画像データと、計測情報ファイル142内の診断支援情報とが対応付けられている。
【0078】
計測対象領域142bは、計測対象を示すデータ(例えば、胸部−心胸郭比(%)、下肢骨−骨長(cm)、脊椎側弯−Cobb角(度)、・・・)を「計測対象」として格納する。位置情報領域142cは、計測に用いた地点の画像上の座標値で示すデータ(例えば、{(200,1200)、(700,1200)、(1340,1200)、(1800,1200)}、{(300,1200)、(300,100)}、{(900,500)、(1000,770)、(1000,1000)}、・・・)を「位置情報」として格納する。計測結果領域142dは、計測結果を示す数値データ(例えば、40、75、20、・・・)を「計測結果」として格納する。計測結果の単位は、計測対象毎に予め設定されている。
【0079】
なお、各診断支援情報の保存の態様は、これに限定されるものではなく、例えば、画像データ記憶手段12の画像データのヘッダ情報内に保存するようにしてもよい。
【0080】
画像処理手段15は、画像データ記憶手段12から入力された画像データ(原画像)を解析することにより、2種類の異なる画像処理条件、即ち主画像用画像処理条件及び副画像用画像処理条件を決定し、これらを前記原画像に適用することにより、主画像データ及び診断支援情報を示すアノテーション(annotation)を付加するための副画像データを作成して、表示用フォーマッティング手段17に出力する。画像処理には、画像のコントラストを調整する階調処理、鮮鋭度を調整する周波数強調処理やダイナミックレンジの広い画像を被写体の細部のコントラストを低下させることなく見やすい濃度範囲に収めるためのダイナミックレンジ圧縮処理等が含まれる。また、撮影部位、撮影条件等の画像属性情報に基づいて、画像を診断に適した向きや大きさに修正するための回転処理、反転処理、トリミング処理等が含まれる。
【0081】
階調処理においては、はじめに主画像用の階調処理条件を決定する。主画像用の階調処理条件の決定方法として、2つの例を示す。
・方法1
まず、画像データを解析し、特開平3−218578に示される胸部画像における肺野領域の抽出手法や、日本乳癌検診学会誌,Vol.17,No.1,pp87-102,1998に示されるマンモグラフィにおける厚い乳腺領域の抽出手法等を用いて、被写体の所望の部分に対応する画像領域を設定する。次いで、図4(a)に示すように、特開昭63−262141号公報や特開平8−62751号公報に示す手法を用いて、領域内のヒストグラム解析を行い、診断上重要な信号領域に対応する領域aを決定する。領域aの決定後、領域a内の累積ヒストグラムを計算し、所定の累積ヒストグラム値(例えば、5%、95%)に対応する信号値S1、S2を求め、このS1、S2を基準信号値として決定する。
【0082】
次に、特開昭59−83149号公報に示されるように、予め作成された数種の基準階調曲線の中から選択した基準階調曲線を変形することにより、図4(b)に示す入力信号値Sinにおいて、先に求めた基準信号値S1、S2がそれぞれ出力信号値SoutにおけるS1´、S2´に変換されるような関数F(Sin)に対応する階調変換曲線を定める。
<式1> Sout=F(Sin)
ここで、S1´、S2´は、それぞれ予め定められた基準出力濃度D1、D2に対応する値であり、出力信号値Soutと濃度Dとの関係は、画像を出力する出力先となる画像記録装置の特性により定められる。画像記録装置の特性は、後述する画像記録装置情報保存手段に保存されている画像記録装置情報(機種、出力画像サイズ(フィルムサイズ・縦横画素数)、最大及び最小濃度、濃度分解能、階調特性、周波数特性等)である。
【0083】
・方法2
まず、上述した方法1と同様の手法により基準信号値S1、S2を求める。次いで、図4(c)に示すように、予め作成された基準階調曲線の中から選択した基準階調曲線G(Sstd)を用意する。そして、入力信号値Sinに対し、基準信号値S1、S2がそれぞれ所定の規格化信号値Sstd1、Sstd2に変換されるような1次関数L(Sin)で表される規格化直線を定める。
<式2> Sstd=L(Sin)
ここで、規格化信号値Sstd1、Sstd2は、基準階調曲線Gstdを用いて変換した際にそれぞれ定められた基準出力濃度D1、D2に対応する出力信号値S1´、S2´を出力するような信号値として定められている。
【0084】
階調処理における入出力の関係を、横軸を到達X線量の対数、縦軸を出力濃度として曲線グラフで表現した場合、所定の二点の出力濃度(例えば、0.25と2.0)間の曲線の平均的な傾きを平均グラディエントと呼ぶ。
【0085】
主画像用の階調処理条件としては、病変陰影等を詳細に観察するために高い平均グラティエントを有することが求められ、具体的には、マンモグラフィで2.0以上、マンモグラフィ以外の撮影部位で1.5以上が好ましく、さらに好ましくはマンモグラフィで2.5以上、マンモグラフィ以外の撮影部位で2.0以上であることが好ましい。
【0086】
主画像用の階調処理条件決定後、副画像用の階調処理条件を決定する。
・上述した方法1を用いて主画像用の階調処理条件を決定した場合には、主画像用の階調変換曲線F(Sin)を決定した後、副画像用の階調変換曲線を決定する。副画像用の階調変換曲線の決定方法としては、F(Sin)に所定の係数α(α<1.0)を乗じることにより、副画像用の階調変換曲線Fsub(sin)を作成する(図4(b)参照)。
・上述した方法2を用いて主画像用の階調処理条件を決定した場合には、主画像用の規格化直線L(Sin)を決定した後、L(Sin)に所定の係数α(α<1.0)を乗じることにより、副画像用の規格化直線Lsub(Sin)を作成する(図4(c)参照)。
・或いは、副画像用の基準出力濃度Dsub1、Dsub2として、主画像用の基準出力濃度D1、D2よりも小さい値を予め設定し、Dsub1、Dsub2を用いて上述した主画像用の階調処理条件の決定方法1又は2と同一の手順をふむことにより、副画像用の階調処理条件を決定する方法を用いてもよい。ここで、(Dsub2−Dsub1)の値が(D2−D1)よりも小さくなるようにDsub1、Dsub2を設定する。
【0087】
副画像用としては、被写体全体から背景部までを見やすい濃度範囲で表現するために、比較的低い平均グラディエントの階調処理条件を設定する。具体的には、マンモグラフィで3.5以下、マンモグラフィ以外の撮影部位で3.0以下が好ましく、さらに好ましくはマンモグラフィで3.0以下、マンモグラフィ以外の撮影部位で2.5以下であることが好ましい。更に、副画像用の平均グラディエントは、主画像の平均グラディエントに対して80%以下の値であることが好ましい。
【0088】
このように、主画像データの平均グラディエント(傾き)に比べて副画像データの平均グラディエントが相対的に小さくなるように階調変換曲線F(Sin)、Fsub(Sin)又は規格化直線L(Sin)、Lsub(Sin)を決定することにより、診断を目的とした主画像において、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては画像全体を見やすい濃度範囲に収めて、アノテーションの位置関係を分かりやすく表現することができる。
【0089】
更に、副画像用の階調処理条件は、下記のようにして決定してもよい。
・主画像用の階調変換曲線F(Sin)、又は主画像用の規格化直線L(Sin)を縦軸方向に反転する。
・上述した方法により平均グラディエントが主画像より低くなるように作成した階調変換曲線Fsub(Sin)又は規格化直線Lsub(Sin)を縦軸方向に反転する。
【0090】
このように、主画像データの階調変換曲線又は規格化直線の平均グラディエントに対して、或いは平均グラディエントが主画像より低くなるように作成した階調変換曲線又は規格化直線の平均グラディエントに対して、副画像データの平均グラディエントが逆符号の値をもつように副画像データの階調変換曲線又は規格化直線を決定する。これにより、診断を目的とした主画像において、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像において、画像の白黒を反転することにより被写体と背景の境界を見やすい濃度で示し、被写体とアノテーションの位置関係をわかりやすく表現することができる。特に、マンモグラフィにおいて、この処理は有効である。
【0091】
副画像データの階調処理条件の決定については、操作入力手段19によりユーザが選択指示することができる。
【0092】
なお、階調処理に先だって、放射線の照射野領域を検出する照射野認識処理を行うと、認識された照射野領域内の画像データに基づいて各種画像処理条件を設定することにより、診断に必要とされる画像部分の画像処理を適正に行うことができるので好ましい。この照射野認識処理の方法としては、例えば、特開昭63−259538号公報、特開平5−7579号公報、特開平7−181609号公報に示される手段を用いることができる。
【0093】
周波数処理においては、例えば特公昭62−62373号公報、特公昭62−62376号公報に示される非鮮鋭マスク処理や、特開平9−44645号公報に示される多重解像度法等の手段によって、画像の鮮鋭度を制御する。このとき、主画像データの低周波数成分に比べ、副画像データの低周波数成分が相対的に減弱されるように周波数処理条件を決定する。これにより、診断を目的とした主画像において、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像全体を見やすい濃度範囲に収めて、アノテーションの位置関係を分かりやすく表現することができる。また、副画像データの低周波成分が相対的に減弱されるようにするための別の態様として、ダイナミックレンジ圧縮処理において、主画像データに比べて副画像データの低周波成分の圧縮の程度が大きくなるようにダイナミックレンジ圧縮処理条件を決定するようにしてもよい。
【0094】
ここで、周波数処理やダイナミックレンジ圧縮処理の画像処理条件は、画像データの解析結果と共に、画像を出力する出力先となる画像記録装置の特性により定められる。画像記録装置の特性は、階調処理の項で述べたものと同様の画像記録装置情報である。
【0095】
また、画像処理手段15は、撮影部位や操作入力手段19からの指示に基づいて画像の回転や反転処理を行う。更に、画像処理手段15は、表示用画像修正手段としての機能を有し、操作入力手段17から主画像又は副画像に対するコントラスト、濃度等の修正指示が入力されると、入力指示に従って、指示された画像に対して再度階調処理を行う。
【0096】
画像処理手段15で決定された主画像データ及び副画像データの画像処理条件は、画像処理条件保存手段16により、画像データ記憶手段12に記憶されている画像データと対応付けて保存される。具体的には、画像データと各画像処理条件は、画像データを特定するための撮影IDにより対応付けられる。或いは、画像データ記憶手段12の画像データのヘッダ情報内に各画像処理条件を保存するようにしてもよい。このように、画像データとその画像処理条件を対応付けて保存することで、画像処理条件以外の条件を変更して再出力する際に、画像処理条件決定のための計算を再度行う必要がなくなり、処理負荷を低減させることができる。
【0097】
表示用フォーマッティング手段17は、画像サイズ調整手段17a、画像合成手段17b、被写体領域認識手段17cを有している。画像サイズ調整手段17aは、副画像の画像サイズが主画像の画像サイズに比べて小さくなるように画像のサイズ調整を行う。このサイズ調整は、被写体領域認識手段17cにより認識された被写体領域の外側に配置できるサイズに副画像のサイズを調整することが望ましい。
【0098】
画像合成手段17aは、画像データに関する画像属性情報、例えば上述した患者情報、撮影情報、画像データ情報、画像処理条件を参照し、撮影部位/体位や撮影サイズ、患者情報を表示する領域として画像内に予め設定されている患者情報表示領域の位置から、予め設定されたルールに基づいて、画像上のどの領域に診断上注目される領域(注目領域)が存在するかを判断し、この領域の外側に副画像の配置位置を決定する。例えば、胸部正面画像であれば、肺野領域が注目領域であるので、この肺野領域と重ならない画像の右上又は左上領域のうち、患者情報表示領域と重ならない位置を、マンモグラフィであれば乳房が注目領域であるので、この乳房と重ならない領域、即ち、胸壁と反対側の画像端のうち、患者情報表示領域と重ならない位置を副画像の配置位置として決定する。具体的には、被写体領域認識手段17cにより認識された注目領域及び患者情報表示領域と重ならない矩形領域を副画像配置位置として決定する。そして、画像合成手段17aは、異常陰影候補ファイル141又は計測情報ファイル142から画像データに対応する診断支援情報を読み出して、これに応じたアノテーション(診断支援情報を記号、文字、マーカ等で図示したもの)を作成し、サイズ調整された副画像データに付加し、主画像領域内の副画像配置位置に副画像をはめ込む形で1枚の画像を合成する。更に、本実施の形態においては、同一撮影方向の左右乳房の主画像に各副画像をはめ込んで2枚の画像を合成し、これら2枚を対向させた状態で1枚のフィルム上に並べて出力する。ここで、画像データの解析に基づいて左右の乳房の位置合わせを行う位置合わせ処理(特開2000−287957号公報)を行っても良い。
【0099】
被写体領域認識手段17cは、画像データ内の被写体の輪郭線抽出等により被写体領域を認識する。例えば、画像の濃度データを適当な閾値を用いて2値化し、「0」と「1」の境界を追跡して輪郭線とし、この輪郭線及び撮影部位/体位、撮影方向に応じて注目領域を決定する。或いは、人体領域又は人体内部の所定の解剖学的構造に対応する領域の輪郭線抽出方法(日本乳癌検診学会誌,Vol.17,No.1,pp87-102,1998、特開昭63−240832号公報)を用いて注目領域を決定する。
【0100】
表示用フォーマッティング手段17は、画像記録装置情報保存手段22に保存されている出力チャンネル毎に設定されている画像記録装置情報(機種、出力画像サイズ(フィルムサイズ・縦横画素数)、最大及び最小濃度、濃度分解能、階調特性、周波数特性等)のうち、出力先として指定されている画像記録装置の情報に基づいて、合成された画像データの出力を調整して表示用画像を作成し、画像表示手段18に出力する。
【0101】
更に、表示用フォーマッティング手段17は、表示用画像修正手段としての機能を有し、操作入力手段19から主画像サイズ、副画像サイズ、レイアウト、アノテーションに関する変更の指示が入力されると、入力指示に従って、画像合成手段17bにより表示用画像を再合成して画像表示手段18に出力する。
【0102】
表示用フォーマッティング手段17により作成された表示用画像の画像データ又は当該表示用画像を作成するために医用画像に施された表示用画像作成条件は、画像データ記憶手段12に記憶されている画像データと対応付けて表示用フォーマット保存手段21に保存される。具体的には、画像データ記憶手段12の画像データと各表示用画像の画像データ又は表示用フォーマッティング条件は、画像データを特定するための撮影IDにより対応付けられる。或いは、画像データ記憶手段12の画像データのヘッダ情報内に各表示用画像やその表示用画像作成条件を保存するようにしてもよい。これにより、再出力の際に、表示用画像作成のための計算を再度行う必要がなくなる。また、画像データと表示用画像作成条件を対応付けて保存することにより、医師がどのようなフィルム出力に基づいて診断を確定したかの記録を残すことができる。
【0103】
画像表示手段18は、CRT(Cathode Ray Tube)、液晶ディスプレイ、プラズマディスプレイ等であり、表示用フォーマッティング手段17から入力された表示用画像をモニタ表示する。
【0104】
ここで、画像表示手段18は、モニタ表示とハードコピーの見え方の一貫性を実現するための表示用階調変換処理(特開2002−366952号公報)の機能を有することが好ましい。
【0105】
操作入力手段19は、カーソルキーや数字入力キー、決定キー等の各種機能に対応した機能キーを備えたキーボード、マウス等のポインティングディバイスを備え、キーボードによる押下信号やマウスによる操作信号を出力する。また、表示手段17と一体化したタッチパネルとしてもよい。操作入力手段19は、入力操作に基づいて、画像出力手段20に画像記録装置の指定や出力の指示を出力する。また、副画像表示指定情報入力手段として、入力操作に基づいて、副画像の表示の有無を表示用フォーマッティング手段17に出力する。また、表示用画像修正手段として、画像表示手段18に表示されている主画像、副画像のサイズ、レイアウト、アノテーションパターンの変更、又はコメントの付加等の修正指示を表示用フォーマッティング手段17に出力し、階調変更の指示を画像処理手段15に出力する。
【0106】
図5に、画像表示手段18により表示される医用画像モニタ画面181の一例を示す。画像入力手段11により入力された画像データは、診断支援情報生成手段13においてその診断支援情報が生成され、画像処理手段15により階調処理を始めとする画像処理が施され、表示用フォーマッティング手段17によりサイズ調整、画像合成等が行われることにより、画像出力手段20で出力するための表示用画像が生成される。そして、この表示用画像は、画像表示手段18において、医用画像モニタ画面181としてモニタ表示される。
【0107】
医用画像モニタ画面181には、図5に示すように、主画像181a、副画像181b、患者情報181cが表示されている。医用画像モニタ画面181下部には、様々な機能ボタンが表示されている。このうち「副画像表示」ボタンをマウスでクリックすると、表示用フォーマッティング手段17により主画像のみの表示用画像が生成され、主画像及び副画像から成る表示用画像と、主画像のみの表示用画像とが切り替え表示される。「変更」ボタンが押下されると、図6に示す表示画像修正画面182が表示される。ここで、ユーザIDを入力し、変更事項を設定して「OK」ボタンを押下すると、修正変更された画像が医用画像モニタ画面181に表示される。なお、主画像、副画像のサイズは、マウスで画像の辺部をドラッグすることにより調整することができる。また、レイアウトは、副画像をドラッグすることにより変更することができる。「チャンネル選択」ボタンを押下すると、出力先を選択するための画面が表示され、出力先となる画像記録装置を指定することができる。「出力」ボタンを押下すると、指定された出力チャンネルから画像記録装置へ表示されている画像が出力される。
【0108】
なお、操作入力手段19から入力された表示用画像の修正事項は、修正履歴ファイル191として保存する修正履歴保存手段を備えることが望ましい。図7に修正履歴ファイル191の一例を示す。図7に示すように、修正履歴ファイル191は、修正を指示した医師又は技師(ユーザ)を特定するために一意的に割り当てられたコード(例えば、001、002、・・・)を格納するユーザID領域と、指示された変更項目を示すデータ(例えば、アノテーション、副画像サイズ、・・・)を格納する変更項目領域と、指示された変更内容を示すデータ(例えば、矢印、6cm×6cm、・・・)を格納する内容領域と、当該修正を行った撮影部位/体位等の撮影条件を示すデータ(例えば、胸部P→A、左乳房MLO、・・・)を有している。
【0109】
読影を行う医師のユーザIDが入力された場合、画像処理手段15及び表示用フォーマッティング手段17において修正履歴ファイル191を参照し、このユーザが過去に行った修正履歴に基づいて画像処理や表示用画像の生成を行うことにより、ユーザに応じた表示画像を生成することができ、その都度修正を入力する必要がなくなる。
【0110】
画像出力手段20は、複数の出力チャンネルを有しており、出力チャンネル毎に、その出力チャンネルにより表示用画像を出力する出力先となる画像記録装置の情報(画像記録装置機種、出力画像サイズ(フィルムサイズ・縦横画素数)、最大及び最小濃度、濃度分解能、階調特性、周波数特性等)がそれぞれ設定されている。この設定内容は、画像記録装置情報保存手段22に保存されている(図8参照)。何れの出力チャンネルから画像を出力するかは、出力チャンネル選択手段としての操作入力手段19により指定することができる。また、撮影部位や診療科等の画像属性情報と出力チャンネルとを予め対応付けておき、出力する画像の画像属性情報に基づいて出力チャンネルが自動的に選択される構成としてもよい。画像の出力が指示されると、画像出力手段20は、表示用フォーマッティング手段17から入力された表示用画像データを、指定された出力チャンネルから画像記録装置へ出力する。画像記録装置とは、レーザフィルムプリンタ、インクジェットプリンタ、サーマルプリンタ等、画像を媒体上にハードコピーとして記録する装置である。
【0111】
図9に、画像記録装置から出力された医用画像のハードコピー200の一例を示す。図9に示すように、ハードコピー200には、1枚のフィルム上に、右乳房のマンモグラム、左乳房のマンモグラムの2枚の表示用画像(主画像と副画像の組)がプリントされている。図9に示す200a−1は右乳房のマンモグラムの主画像、200b−1はその副画像であり、200a−2は左乳房のマンモグラムの主画像、200b−2はその副画像である。各副画像には、異常陰影候補がアノテーションで表示されている。副画像中の「M」は腫瘤候補、「C」は微小石灰化クラスタを示している。ハードコピー左上には、患者ID等の患者情報200cが表示されている。
【0112】
図10に、画像記録装置から出力された医用画像のハードコピー201の一例を示す。図10に示すように、ハードコピー201には、主画像の胸部正面画像201aと、この胸部正面画像から計測した心胸郭比を表示した副画像201bが1枚のハードコピーに表示されている。副画像上には、計測した位置と、計測結果「40%」が表示されている。ハードコピー左上には、患者ID等の患者情報201cが表示されている。
【0113】
このように、上述した画像処理装置10においては、画像入力手段11から入力された画像データに関する診断支援情報を作成し、入力された画像データに診断に適した画像処理を施して主画像を作成し、参照に適した画像処理を施して副画像を作成する。そして、副画像が主画像の診断の妨げにならないように各画像のサイズ調整及び副画像のはめ込み位置決定を行い、副画像に診断支援情報を付加して主画像と副画像を合成し、1枚のハードコピーとして出力する。
【0114】
従って、入力された画像データに対して診断に適した画像処理、サイズ調整、配置を自動的に実現し、主画像と診断支援情報を表示する副画像からなる1枚の表示用画像を作成して出力することができる。その結果、従来から行われている、シャウカステン等の画像観察装置を用いて銀塩フィルム等のハードコピーを読影する際においても、診断支援情報を容易にかつ迅速に参照及び活用することができるようになり、院内作業の流れを変えずに医師の診断性能及び作業効率を向上させることができる。また、1枚のフィルムに読影用の主画像と参照用の副画像が表示されるので、フィルムコストを削減することができる。更に、出力された画像は診断に適した画像処理、サイズ調整、配置が行われているので、読影時に階調や周波数特性が診断上好ましくない、或いは副画像のサイズや位置が診断上好ましくないといったことが判明し、画像処理またはサイズを手動調整した上でフィルムを再出力して読影場所まで運ぶといった煩雑な作業が減少し、再出力に伴うフィルムコスト及び作業に要する時間や人件費を削減することができる。
【0115】
なお、画像処理手段15、診断支援情報生成手段13、表示用フォーマッティング手段17は、CPU(Central Processing Unit)とROM(Read Only Memory)に記憶されているプログラムとの協働によるソフトウエア処理によって実現されるようにしてもよいし、専用のハードウエアにより構成するようにしてもよい。また、画像データ記憶手段12、診断支援情報保存手段14、画像処理条件保存手段16、表示用フォーマット保存手段21、画像記録装置情報保存手段22は、同一の記録装置、記録媒体に保存される態様としてもよい。
【0116】
また、本実施の形態では、画像処理手段15において原画像に画像処理を施して処理画像を作成した後に、表示用フォーマッティング手段17において処理画像のサイズ調整及び配置を行う構成を示したが、原画像に対して画像処理とサイズ調整及び配置を同時に実行する構成とすることもできる。
【0117】
また、1つの画像データに対して複数の異なる種類の異常陰影候補や計測結果が存在する場合には、各診断支援情報毎に1つの副画像を作成するようにしてもよい。このようにすると、副画像が煩雑にならず、診断支援情報を適切に医師に伝達することができる。更に、異常陰影候補の検出を行っても検出件数が0の場合は、副画像を表示しないようにしてもよい。
【0118】
〔第2の実施の形態〕
次に、本発明の第2の実施の形態について説明する。
図11に示すように、第2の実施の形態において、画像処理装置10は、第1の実施の形態の構成にシェーマ(schema)画像作成手段23及びシェーマ画像保存手段24を追加した構成となっている。
【0119】
シェーマ画像作成手段23は、画像データ記憶手段12から入力された画像データを解析することにより輪郭抽出を行い、シェーマを生成する。輪郭の抽出方法としては、例えば特開昭63−240832号公報に示すように、画像データにおける1つの行或いは列について注目し、その1次元の濃度データ列の中で前後のデータの値の関係が予め定められた特定のパターン(例えば、極小となる点、傾きが最大となる点、傾きが最小となる点等)をその行或いは列における輪郭の点とし、必要な範囲の行或いは列について輪郭の点を求めてそれらの点を結んだ線を輪郭線とする。或いは他の公知の輪郭線抽出方法(例えば、マンモグラフィにおいては、医用電子と生体工学,Vol.39,No.4,pp297-304,2001)を用いてもよい。このようにして作成されたシェーマ画像は、シェーマ画像保存手段24に保存される。
【0120】
シェーマ画像保存手段24は、シェーマ画像作成手段23により作成されたシェーマ画像を画像データと対応付けて保存する。具体的には、画像データとシェーマ画像は、画像データを特定するための撮影IDにより対応付けられる。或いは、画像データ記憶手段12の画像データのヘッダ情報内にシェーマ画像を保存するようにしてもよい。このように、画像データとそのシェーマ画像を対応付けて保存することで、シェーマ以外の表示用フォーマッティング条件を変更して再出力する際に、表示用フォーマッティング手段17において、保存されたシェーマ画像を読み出して表示用画像を作成すればよく、再度シェーマ画像を作成する必要がなくなり、処理負荷を低減させることができる。
【0121】
画像処理手段15は、画像データに対して階調処理、周波数処理、ダイナミックレンジ圧縮処理等の画像処理を施し、表示用フォーマッティング手段17へ出力する。
【0122】
表示用フォーマッティング手段17は、画像処理手段15から画像データが出力されると、対応するシェーマ画像をシェーマ画像保存手段24から読出し、画像データを主画像、シェーマ画像を副画像として、第1の実施の形態で説明したのと同様のサイズ調整、画像合成、画像調整等を行い、画像表示手段18に出力する。
【0123】
画像処理装置10のその他の構成については、上述した第1の実施の形態と同様であるので、説明を省略する。
【0124】
図12に、画像記録装置から出力された医用画像のハードコピー202の一例を示す。図12に示すように、ハードコピー202には、1枚のフィルム上に、右乳房のマンモグラム、左乳房のマンモグラムの2枚の表示用画像がプリントされている。図12に示す202a−1は右乳房のマンモグラムの主画像、202b−1、202b−3はその副画像であり、202a−2は左乳房のマンモグラムの主画像、202b−2はその副画像である。各副画像には、異常陰影候補がアノテーションで表示されている。副画像は全てシェーマ画像である。副画像中の三角形で指示されている部分は腫瘤候補、○で囲まれている部分は微小石灰化を示している。右乳房については、腫瘤候補、微小石灰化の2つの異常陰影候補が検出されており、各候補に対して1の副画像が表示されている。ハードコピー左上には、患者ID等の患者情報202cが表示されている。
【0125】
このように、1つの副画像には1つの診断結果のみを表示するので、画像が煩雑にならず、診断支援情報を適切に医師に伝達することができる。異常陰影候補の検出を行っても検出件数が0の場合は、副画像を表示しないようにしてもよい。
【0126】
以上説明したように、上述した画像処理装置10においては、画像入力手段11から入力された画像データに関する診断支援情報を作成し、入力された画像データに診断に適した画像処理を施して主画像を作成するとともにシェーマ副画像を作成する。そして、副画像が主画像の診断の妨げにならないように各画像のサイズ調整及び副画像のはめ込み位置決定を行い、副画像に診断支援情報を付加して主画像と副画像を合成し、1枚のハードコピーとして出力する。
【0127】
従って、入力された画像データに対して診断に適した画像処理、サイズ調整、配置を自動的に実現し、主画像と診断支援情報を表示するシェーマ副画像からなる1枚の表示用画像を作成して出力することができる。その結果、従来から行われている、シャウカステン等の画像観察装置を用いて銀塩フィルム等のハードコピーを読影する際においても、診断支援情報を容易にかつ迅速に参照及び活用することができるようになり、院内作業の流れを変えずに医師の診断性能及び作業効率を向上させることができる。また、1枚のフィルムに読影用の主画像と参照用の副画像が表示されるので、フィルムコストを削減することができる。更に、出力された画像は診断に適した画像処理、サイズ調整、配置が行われているので、読影時に階調や周波数特性が診断上好ましくない、或いは副画像のサイズや位置が診断上好ましくないといったことが判明し、画像処理またはサイズを手動調整した上でフィルムを再出力して読影場所まで運ぶといった煩雑な作業が減少し、再出力に伴うフィルムコスト及び作業に要する時間や人件費を削減することができる。
【0128】
なお、上記実施1及び2の形態における記述内容は、本発明に係る医用画像処理装置10の好適な一例であり、これに限定されるものではない。例えば、第2の実施の形態における画像処理手段15は、第1の実施の形態と同様に副画像を作成する機能を有し、ユーザが副画像の出力形態を画像処理した画像とするか、シェーマ画像とするかを選択できるようにしてもよい。
【0129】
その他、画像処理装置10の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【0130】
【発明の効果】
請求項1、23に記載の発明によれば、医用画像を解析することにより診断支援情報を生成し、この医用画像に少なくとも階調処理を含む画像処理を施して少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成し、副画像に対して、生成された診断支援情報に対応するアノテーションを付加するとともに主画像と副画像を合成して一枚の表示用画像を作成し、画像記録装置に出力する。そして、医用画像に施された表示用画像作成条件又は作成された表示用画像の画像データを医用画像の画像データと対応付けて表示用フォーマット保存手段に保存し、表示用画像を再出力する際に、表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して表示用画像を作成する。従って、画像記録装置から診断用の主画像と診断支援情報に対応するアノテーションを付加した副画像を合成した画像を媒体上にハードコピーとして出力することが可能となる。その結果、高価なモニタを必要とすることなく、従来の院内作業の流れを変えずに、医師は診断支援情報を容易にかつ迅速に参照及び活用することができ、それにより医師の診断性能及び作業効率を向上させることができる。また、表示用生成条件又は表示用画像データを保存しておくことで、出力された医用画像を再出力する際に、表示用画像作成のための計算を再度行う必要がなくなる。更に、表示用画像生成条件を画像データと対応付けて保存することにより、医師がどのようなフィルム出力に基づいて診断を確定したのかの記録が残るため、EBM(Evidence Based Medicine)の観点や医療訴訟等の対応において望ましい情報管理が可能となる。
【0131】
請求項2に記載の発明によれば、医用画像を解析することにより主画像用の画像処理条件及び副画像用の画像処理条件を決定し、当該決定された画像処理条件を用いて少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成する。従って、診断を目的とした主画像と参照を目的とした副画像の各々に適した互いに異なる画像処理を施すことが可能となる。
【0132】
請求項3に記載の発明によれば、主画像の平均グラディエントに比べて副画像の平均グラディエントが相対的に小さくなるように階調処理条件を決定して主画像及び副画像を作成する。従って、診断を目的とした主画像において、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像全体を見やすい濃度範囲に収めて被写体とアノテーションの位置関係をわかりやすく表現することができる。
【0133】
請求項4に記載の発明によれば、主画像の平均グラディエントに比べて副画像の平均グラディエントが逆符号の値をもつように階調処理条件を決定して主画像及び副画像を作成する。従って、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像の白黒を反転することにより、被写体と背景の境界を見やすい濃度で示し、被写体とアノテーションの位置関係をわかりやすく表現することができる。
【0134】
請求項5に記載の発明によれば、主画像の低周波成分に比べて副画像の低周波成分が相対的に減弱されるように周波数処理条件を決定して主画像及び副画像を作成する。従って、病変陰影の読影に十分なコントラストを与えると同時に、参照を目的とした副画像においては、画像全体を見やすい濃度範囲に収めて、付加されたアノテーションの位置関係をわかりやすく表現することができる。
【0135】
請求項6に記載の発明によれば、画像記録装置に対応する画像記録装置情報を保存し、記画像処理手段は、医用画像の解析結果および保存された画像記録装置情報に基づいて画像処理の条件を決定する。従って、画像記録装置に応じた最適な処理画像を自動的に作成することができる。
【0136】
請求項7、24に記載の発明によれば、医用画像を解析することにより診断支援情報を生成し、医用画像に少なくとも階調処理を含む画像処理を施すことにより、少なくとも一つの主画像を作成する。また、医用画像を解析することによりシェーマを自動的に作成し、該シェーマを表した少なくとも一つの副画像を作成する。そして、副画像に対して、生成された診断支援情報に対応するアノテーションを付加するとともに、主画像及び副画像を合成することにより一枚の表示用画像を作成し画像記録装置に出力する。医用画像に施された表示用画像作成条件又は作成された表示用画像の画像データは、医用画像の画像データと対応付けて表示用フォーマット保存手段に保存し、表示用画像を再出力する際に、表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して表示用画像を作成する。従って、画像記録装置から診断用の主画像と診断支援情報に対応するアノテーションを付加した副画像を合成した画像を媒体上にハードコピーとして出力することが可能となる。その結果、高価なモニタを必要とすることなく、従来の院内作業の流れを変えずに、医師は診断支援情報を容易にかつ迅速に参照及び活用することができ、それにより医師の診断性能及び作業効率を向上させることができる。また、表示用生成条件又は表示用画像データを保存しておくことで、出力された医用画像を再出力する際に、表示用画像作成のための計算を再度行う必要がなくなる。更に、表示用画像生成条件を画像データと対応付けて保存することにより、医師がどのようなフィルム出力に基づいて診断を確定したのかの記録が残るため、EBM(Evidence Based Medicine)の観点や医療訴訟等の対応において望ましい情報管理が可能となる。
【0137】
請求項8に記載の発明によれば、副画像の表示/非表示を指定するための情報を外部入力すると、外部入力された副画像表示指定情報に基づいて副画像を表示した表示用画像又は副画像を表示しない表示用画像を作成する。従って、必要に応じて診断支援情報を付加しない医用画像を出力することができる。
【0138】
請求項9に記載の発明によれば、医用画像内の異常陰影候補を検出し、検出された異常陰影候補に関する該医用画像内の位置情報を含む診断支援情報を生成する。従って、病変に関わる異常陰影候補を提示することにより、医師による病変の見落としを低減し、医師の読影の負担を軽減することができる。
【0139】
請求項10に記載の発明によれば、医用画像において画像計測を行い、この計測結果に関する該医用画像内の位置情報を含む診断支援情報を生成する。従って、計測結果を提示することにより、医師による画像計測の精度を向上し読影の負担を低減することができる。
【0140】
請求項11に記載の発明によれば、複数の画像記録装置に対応する複数の出力チャンネルを有し、出力チャンネル毎に設定された画像記録装置の画像記録装置情報を対応付けて保存し、選択された画像記録装置の情報に基づいて表示用画像を作成する。従って、複数の画像記録装置の中から出力する画像記録装置が選択されると、選択された画像記録装置に対して最適なフォーマットを自動的に適用することができる。
【0141】
請求項12に記載の発明によれば、作成された表示用画像をモニタ表示し、表示用画像を修正するための修正情報を外部入力すると、外部入力された表示用画像修正情報に基づいて表示用画像を修正する。従って、ユーザがモニタで画像を確認しながら表示フォーマットを修正することが可能となる。
【0142】
請求項13に記載の発明によれば、診断支援情報を医用画像の画像データと対応付けて保存し、保存された診断支援情報を読み出して、読み出した診断支援情報に基づいて表示用画像を作成する。従って、表示用フォーマッティングの条件を変更して再出力する際に、診断支援情報を生成するための計算を再度行う必要がなくなる。
【0143】
請求項14に記載の発明によれば、医用画像に施された画像処理の条件を医用画像の画像データと対応付けて保存し、保存された画像処理条件を読み出して、読み出した画像処理条件に基づいて処理画像を作成することを特徴としている。従って、画像処理以外の表示用フォーマッティングの条件を変更して再出力する際に、画像処理条件決定のための計算を再度行う必要がなくなる。
【0145】
請求項15に記載の発明によれば、シェーマの画像データを医用画像の画像データと対応付けて保存し、保存されたシェーマ画像データを読み出して、該シェーマ画像データに基づいて表示用画像を作成する。従って、シェーマ以外の表示用フォーマッティングの条件を変更して再出力する際に、画像処理条件決定のための計算を再度行う必要がなくなる。
【0146】
請求項16に記載の発明によれば、主画像及び副画像の各々についてサイズ調整を行い、サイズ調整を行った主画像と副画像を合成する。従って、主画像と副画像の各々についてサイズ調整を行うことができる。
【0147】
請求項17に記載の発明によれば、副画像の画像サイズが主画像の画像サイズに比べて小さくなるようにサイズ調整を行う。従って、例えば、読影の主体となる主画像を実物大で精細に表現するとともに、読影の参考としての副画像を同一画像上に配置することが可能となる。
【0148】
請求項18に記載の発明によれば、サイズ調整された主画像における所定の領域に、サイズ調整された副画像をはめ込む形で合成する。従って、例えば、読影の主体となる主画像を実物大で精細に表現するとともに、読影の参考としての副画像を読影の妨げにならない所定領域に配置することが可能となる。
【0149】
請求項19に記載の発明によれば、医用画像の画像属性情報に基づいて、サイズ調整された副画像のはめ込み位置を決定する。従って、医用画像の撮影部位/体位や撮影サイズ等の画像属性情報に基づいて読影の妨げにならない位置に副画像を配置することが可能となる。
【0150】
請求項20に記載の発明によれば、医用画像を解析することにより被写体領域を認識し、認識された被写体領域の情報に基づいて、サイズ調整された副画像のはめ込み位置を決定する。従って、読影の妨げにならない、被写体領域と重ならない位置に副画像を自動的に配置することができる。
【0151】
請求項21に記載の発明によれば、認識された被写体領域の情報に基づいて、副画像のサイズを調整する。従って、読影の妨げにならない、被写体領域と重ならない大きさで副画像を配置することができる。
【0152】
請求項22に記載の発明によれば、同一の医用画像から、互いに異なる複数の診断支援情報を生成し、生成された複数の診断支援情報の各々について少なくとも一つの副画像を作成する。従って、複数の異なる種類の異常陰影候補や計測結果が存在する場合であっても副画像が煩雑にならず、見易い副画像を提供することができる。
【図面の簡単な説明】
【図1】本発明の第1の実施の形態における画像処理装置10の機能的構成を示すブロック図である。
【図2】(a)は微小石灰化クラスタの一例を示す図であり、(b)は腫瘤陰影の一例を示す図である。
【図3】図1の診断支援情報保存手段14が保存する異常陰影候補ファイル141及び計測情報ファイル142のデータ格納例を示す図である。
【図4】(a)はヒストグラム解析の一例を示す図、(b)は階調変換曲線の決定方法の一例を示す図、(c)は規格化直線の決定方法を示す図である。
【図5】図1の画像表示手段18により表示される医用画像モニタ画面181の一例を示す図である。
【図6】図1の画像表示手段18により表示される表示画像修正画面182の一例を示す図である。
【図7】修正履歴ファイル191のデータ格納例を示す図である。
【図8】図1の画像出力手段20の各出力チャンネルに設定されている情報の一例を示す図である。
【図9】画像記録装置から出力されるハードコピー200の一例を示す図である。
【図10】画像記録装置から出力されるハードコピー201の一例を示す図である。
【図11】本発明の第2の実施の形態における画像処理装置10の機能的構成を示すブロック図である。
【図12】画像記録装置から出力されるハードコピー202の一例を示す図である。
【符号の説明】
10 画像処理装置
11 画像入力手段
12 画像データ記憶手段
13 診断支援情報生成手段
13a 異常陰影候補情報生成部
13b 計測情報生成部
14 診断支援情報保存手段
15 画像処理手段
16 画像処理条件保存手段
17 表示用フォーマッティング手段
17a 画像サイズ調整手段
17b 画像合成手段
17c 被写体領域認識手段
18 画像表示手段
19 操作入力手段
20 画像出力手段
21 表示用フォーマット保存手段
22 画像記録装置情報保存手段
23 シェーマ画像作成手段
24 シェーマ画像保存手段
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a medical image processing apparatus and a medical image processing method for processing a medical image to improve the efficiency of interpretation interpretation by a doctor and outputting the processed image to an image recording apparatus.
[0002]
[Prior art]
Conventionally, as a medical image used by a doctor for diagnosis, an analog image such as an intensifying screen / film used for radiography or an image obtained from a digital image input system using a stimulable phosphor is used as a hardware image such as a silver salt film. Some of the images are output as copies, and doctors generally interpret these medical images using an image observation apparatus such as Schaukasten in each clinic.
[0003]
On the other hand, in recent years, diagnostic support information such as abnormal shadow candidate detection results is added to a medical image for interpretation by an image diagnosis support device (for example, see Patent Document 1), and the result is applied to a CRT (Cathode Ray Tube) monitor, a liquid crystal monitor, or the like. A system for outputting and supporting doctor's diagnosis has been proposed. In addition, a technique has been proposed in which an original image is displayed on a monitor and an enlarged image of a partial region corresponding to an abnormal shadow candidate or the like is displayed in an overlay manner (see, for example, Patent Document 2). When a medical image is output to a monitor for interpretation, the brightness and contrast of the monitor are changed by the adjustment means attached to the monitor at the time of interpretation, and image processing conditions such as gradation processing and frequency processing are changed in real time by image display software. It is possible to change. Further, the image can be enlarged / reduced or moved by image display software. As described above, when the medical image is read by the monitor, the display format can be changed in real time, and the degree of freedom is high.
[0004]
[Patent Document 1]
JP 2000-287957 A
[Patent Document 2]
JP 2000-287955 A
[0005]
[Problems to be solved by the invention]
However, when a medical image is displayed on a monitor, in order to provide an image suitable for interpretation, the monitor is required to have high performance, is expensive, requires a space for placement, and consumes power and heat. large. Therefore, except for some hospitals such as large hospitals, it has been practically difficult to install monitors for displaying medical images in all of the radiology department's interpretation rooms and clinics.
[0006]
Also, in order to introduce a display monitor in a hospital, doctors need to get used to the operation of the monitor system, and the flow of in-hospital work from radiography to image interpretation changes greatly. Major issues such as adjustment occur.
[0007]
On the other hand, as is practiced in many hospitals, in the method of outputting and interpreting a medical image as a hard copy such as a silver salt film, the gradation and frequency characteristics of the medical image to be interpreted are preferable for diagnosis. If the display method or image size of diagnosis support information is not preferable for diagnosis, manually adjust the display format such as image processing or image size, then re-output the film and There is a problem that it is necessary to carry to the interpretation location, and film costs, work time and labor costs are required.
[0008]
An object of the present invention is to enable a doctor to output a hard copy of a medical image automatically in a display format suitable for diagnosis without changing the flow of conventional hospital operations with an inexpensive system. It is an object of the present invention to provide a medical image processing apparatus that can easily and quickly refer to and utilize diagnosis support information in interpretation, thereby improving the diagnostic performance and work efficiency of a doctor.
[0009]
[Means for Solving the Problems]
  In order to solve the above problems, the invention according to claim 1.Medical image processing apparatusIs
  A diagnostic support information generating means for generating diagnostic support information by analyzing a medical image;
  The medical image is subjected to image processing including at least gradation processing.Image processing means for creating a plurality of processed images composed of at least one main image and at least one sub-image from the same medical image;
An annotation for adding the annotation corresponding to the diagnosis support information generated by the diagnosis support information generating means to the sub-image and creating one display image by synthesizing the main image and the sub-image Formatting means;
  Image output means for outputting the display image to an image recording device;
  A display format for storing display image creation conditions applied to the medical image by the display formatting means or image data of the display image created by the display formatting means in association with image data of the medical image Storage means;
With
When the display formatting unit re-outputs the display image, the display formatting unit reads the display image generation condition or display image data stored in the display format storage unit and creates the display image.It is characterized by that.
[0010]
  Claim23Invention described inMedical image processing methodIs
  Generating diagnostic support information by analyzing medical images;
  The medical image is subjected to image processing including at least gradation processing.Creating a plurality of processed images comprising at least one main image and at least one sub-image from the same medical image;
Adding an annotation corresponding to the generated diagnosis support information to the sub-image and creating one display image by combining the main image and the sub-image;
  Outputting the display image to an image recording device;
  Storing the display image creation condition applied to the medical image or the image data of the created display image in the display format storage unit in association with the image data of the medical image;
When re-outputting the display image, reading the display image generation conditions or display image data stored in the display format storage means to create the display image;
includingIt is characterized by that.
[0011]
  Claim 1,23According to the invention described above, diagnosis support information is generated by analyzing a medical image, and the medical image is subjected to image processing including at least gradation processing, and includes at least one main image and at least one sub-image. An image recording apparatus that creates a plurality of processed images, adds an annotation corresponding to the generated diagnosis support information to the sub-image, and combines the main image and the sub-image to create a single display image. Output to.When the display image creation condition applied to the medical image or the created image data of the display image is stored in the display format storage unit in association with the image data of the medical image, and the display image is output again In addition, the display image generation condition or display image data stored in the display format storage means is read to create a display image.Accordingly, it is possible to output an image obtained by combining the main image for diagnosis and the sub-image added with the annotation corresponding to the diagnosis support information from the image recording apparatus on the medium as a hard copy. As a result, doctors can easily and quickly refer to and utilize diagnosis support information without requiring an expensive monitor and without changing the flow of conventional in-hospital work. Work efficiency can be improved.Further, by storing the display generation conditions or the display image data, it is not necessary to perform the calculation for creating the display image again when the output medical image is output again. Furthermore, since the display image generation conditions are stored in association with the image data, a record of what film output the doctor has determined based on the diagnosis remains, so that EBM (Evidence Based Medicine) viewpoints and medical Desirable information management is possible in response to lawsuits.
[0012]
The invention according to claim 2 is the invention according to claim 1,
The image processing means determines an image processing condition for a main image and an image processing condition for a sub image by analyzing the medical image, and at least one main image and at least one main image is determined using the determined image processing condition. It is characterized in that a plurality of processed images composed of one sub-image are created.
[0013]
According to the second aspect of the present invention, an image processing condition for the main image and an image processing condition for the sub image are determined by analyzing the medical image, and at least one image processing condition is determined using the determined image processing condition. A plurality of processed images including a main image and at least one sub-image are created. Therefore, it is possible to perform different image processing suitable for each of the main image for the purpose of diagnosis and the sub-image for the purpose of reference.
[0014]
The invention according to claim 3 is the invention according to claim 2,
The image processing condition is a gradation processing condition;
The image processing means is characterized in that the gradation processing condition is determined so that the average gradient of the sub-image is relatively smaller than the average gradient of the main image.
[0015]
According to the third aspect of the present invention, the gradation processing conditions are determined so that the average gradient of the sub image is relatively smaller than the average gradient of the main image, and the main image and the sub image are created. Therefore, in the main image for the purpose of diagnosis, sufficient contrast is provided for the interpretation of the lesion shadow, and at the same time, in the sub-image for the purpose of reference, the positional relationship between the subject and the annotation is kept within the density range that makes it easy to see the entire image. Can be expressed in an easy-to-understand manner.
[0016]
The invention according to claim 4 is the invention according to claim 2,
The image processing condition is a gradation processing condition;
The image processing means is characterized in that the gradation processing condition is determined so that the average gradient of the sub-image has an opposite sign value compared to the average gradient of the main image.
[0017]
According to the fourth aspect of the present invention, the gradation processing conditions are determined so that the average gradient of the sub-image has an inverse sign value compared to the average gradient of the main image, and the main image and the sub-image are created. Therefore, at the same time as giving sufficient contrast to the interpretation of lesion shadows, in the sub-image for reference purposes, the black and white of the image is reversed so that the boundary between the subject and the background can be easily seen and the position of the subject and annotation The relationship can be expressed in an easy-to-understand manner.
[0018]
The invention according to claim 5 is the invention according to any one of claims 2 to 4,
The image processing condition is a frequency processing condition;
The image processing means determines the frequency processing condition so that the low-frequency component of the sub-image is relatively attenuated compared to the low-frequency component of the main image.
[0019]
According to the fifth aspect of the present invention, the main image and the sub-image are generated by determining the frequency processing conditions so that the low-frequency component of the sub-image is relatively attenuated compared to the low-frequency component of the main image. . Therefore, sufficient contrast is provided for the interpretation of the lesion shadow, and at the same time, in the sub-image for the purpose of reference, the entire image can be placed in an easy-to-view density range, and the positional relationship of the added annotation can be expressed in an easy-to-understand manner. .
[0020]
The invention according to claim 6 is the invention according to any one of claims 1 to 5,
Image recording device information storage means for storing image recording device information corresponding to the image recording device;
The image processing means determines the image processing condition based on the analysis result of the medical image and the image recording apparatus information.
[0021]
According to the sixth aspect of the invention, the image recording device information corresponding to the image recording device is stored, and the recording image processing means performs image processing based on the analysis result of the medical image and the stored image recording device information. Determine the conditions. Accordingly, it is possible to automatically create an optimal processed image corresponding to the image recording apparatus.
[0022]
  A medical image processing apparatus according to a seventh aspect of the present invention provides:
  A diagnostic support information generating means for generating diagnostic support information by analyzing a medical image;
  Image processing means for creating at least one main image by performing image processing including at least gradation processing on the medical image;
  A schema image generating means for automatically generating a schema by analyzing the medical image and generating at least one sub-image representing the schema;
  A display that adds an annotation corresponding to the diagnosis support information generated by the diagnosis support information generation means to the sub-image and creates one display image by combining the main image and the sub-image Formatting means for
  Image output means for outputting the display image to an image recording device;
  A display format for storing display image creation conditions applied to the medical image by the display formatting means or image data of the display image created by the display formatting means in association with image data of the medical image Storage means;
With
When the display formatting unit re-outputs the display image, the display formatting unit reads the display image generation condition or display image data stored in the display format storage unit and creates the display image.It is characterized by that.
[0023]
  Claim24Of the invention described inMedical image processing methodIs
  Generating diagnostic support information by analyzing medical images;
  Creating at least one main image by performing image processing including at least gradation processing on the medical image;
  Automatically creating a schema by analyzing the medical image and creating at least one sub-image representing the schema;
  Adding an annotation corresponding to the generated diagnosis support information to the sub-image, and creating one display image by combining the main image and the sub-image;
  Outputting the display image to an image recording device;
  Storing the display image creation condition applied to the medical image or the image data of the created display image in the display format storage unit in association with the image data of the medical image;
When re-outputting the display image, reading the display image generation conditions or display image data stored in the display format storage means to create the display image;
  It is characterized by including.
[0024]
  Claim 7,24According to the invention described above, diagnosis support information is generated by analyzing a medical image, and at least one main image is created by performing image processing including at least gradation processing on the medical image. Further, a schema is automatically created by analyzing the medical image, and at least one sub-image representing the schema is created. Then, an annotation corresponding to the generated diagnosis support information is added to the sub-image, and a single display image is created by combining the main image and the sub-image and output to the image recording apparatus.The display image creation condition applied to the medical image or the created image data of the display image is stored in the display format storage unit in association with the image data of the medical image, and the display image is output again. Then, the display image generation condition or display image data stored in the display format storage means is read to create a display image.Accordingly, it is possible to output an image obtained by combining the main image for diagnosis and the sub-image added with the annotation corresponding to the diagnosis support information from the image recording apparatus on the medium as a hard copy. As a result, doctors can easily and quickly refer to and utilize diagnosis support information without requiring an expensive monitor and without changing the flow of conventional in-hospital work. Work efficiency can be improved.Further, by storing the display generation conditions or the display image data, it is not necessary to perform the calculation for creating the display image again when the output medical image is output again. Furthermore, since the display image generation conditions are stored in association with the image data, a record of what film output the doctor has determined based on the diagnosis remains, so that EBM (Evidence Based Medicine) viewpoints and medical Desirable information management is possible in response to lawsuits.
[0025]
The invention according to claim 8 is the invention according to any one of claims 1 to 7,
Sub-image display designation information input means for externally inputting information for designating display / non-display of the sub-image,
The display formatting means creates a display image displaying the sub-image or a display image not displaying the sub-image based on the externally input sub-image display designation information.
[0026]
According to the eighth aspect of the present invention, when information for designating display / non-display of the sub-image is externally input, a display image that displays the sub-image based on the externally-input sub-image display designation information or A display image that does not display a sub-image is created. Therefore, a medical image without adding diagnosis support information can be output as necessary.
[0027]
The invention according to claim 9 is the invention according to any one of claims 1 to 8,
The diagnostic support information generation means detects an abnormal shadow candidate in the medical image, and generates diagnostic support information including position information in the medical image related to the detected abnormal shadow candidate.
[0028]
According to the ninth aspect of the present invention, an abnormal shadow candidate in a medical image is detected, and diagnosis support information including position information in the medical image related to the detected abnormal shadow candidate is generated. Therefore, by presenting abnormal shadow candidates related to the lesion, it is possible to reduce oversight of the lesion by the doctor and reduce the burden of interpretation by the doctor.
[0029]
The invention according to claim 10 is the invention according to any one of claims 1 to 9,
The diagnostic support information generation means performs image measurement on the medical image and generates diagnostic support information including position information in the medical image related to the measurement result.
[0030]
According to the invention described in claim 10, image measurement is performed on a medical image, and diagnosis support information including position information in the medical image related to the measurement result is generated. Therefore, by presenting the measurement result, it is possible to improve the accuracy of image measurement by the doctor and reduce the burden of interpretation.
[0031]
The invention according to claim 11 is the invention according to any one of claims 5 to 10,
The image output means has a plurality of output channels corresponding to the plurality of image recording devices,
The image recording device information storage means stores image recording device information of the image recording device set for each output channel;
Output channel selection means for selecting which of the plurality of output channels to output an image to,
The display formatting means creates the display image based on the image recording apparatus information corresponding to the output channel selected by the output channel selection means and stored in the image recording apparatus information storage means. It is said.
[0032]
According to the eleventh aspect, the image recording device information of the image recording device having a plurality of output channels corresponding to the plurality of image recording devices and set for each output channel is stored in association with each other and selected. A display image is created on the basis of the information of the image recording apparatus. Therefore, when an image recording apparatus to be output is selected from among a plurality of image recording apparatuses, an optimum format can be automatically applied to the selected image recording apparatus.
[0033]
The invention according to claim 12 is the invention according to any one of claims 1 to 11,
Image display means for displaying a display image created in the display formatting means on a monitor;
Display image correction information input means for externally inputting correction information for correcting the display image;
Display image correcting means for correcting the display image based on the externally input display image correction information;
It is characterized by having.
[0034]
According to the invention of claim 12, when the created display image is displayed on the monitor and the correction information for correcting the display image is externally input, the display image is displayed based on the externally input display image correction information. Correct the image. Accordingly, the user can correct the display format while checking the image on the monitor.
[0035]
Invention of Claim 13 in the invention as described in any one of Claims 1-12,
Diagnostic support information storage means for storing the diagnostic support information in association with the image data of the medical image;
The display formatting means reads the diagnosis support information stored in the diagnosis support information storage means and creates the display image based on the diagnosis support information.
[0036]
According to the invention described in claim 13, diagnosis support information is stored in association with image data of a medical image, the stored diagnosis support information is read, and a display image is created based on the read diagnosis support information To do. Accordingly, when the display formatting conditions are changed and re-outputted, it is not necessary to perform the calculation for generating the diagnosis support information again.
[0037]
The invention according to claim 14 is the invention according to any one of claims 1 to 13,
Image processing condition storage means for storing image processing conditions applied to the medical image by the image processing means in association with image data of the medical image;
The image processing means reads the image processing conditions stored in the image processing condition storage means and creates the processed image based on the image processing conditions.
[0038]
According to the invention described in claim 14, the image processing conditions applied to the medical image are stored in association with the image data of the medical image, the stored image processing conditions are read, and the read image processing conditions are set. It is characterized in that a processed image is created based on this. Therefore, when the display formatting conditions other than the image processing are changed and re-outputted, it is not necessary to perform the calculation for determining the image processing conditions again.
[0041]
  Claim15The invention described in claims 7 to 714In the invention described in any one of the above,
  A schema image data storage means for storing the image data of the schema in association with the image data of the medical image;
  The display formatting means reads the schema image data stored in the schema image storage means and creates the display image based on the schema image data.
[0042]
  Claim15According to the invention described above, the schema image data is stored in association with the medical image image data, the stored schema image data is read, and a display image is created based on the schema image data. Therefore, when the display formatting conditions other than the schema are changed and re-outputted, it is not necessary to perform the calculation for determining the image processing conditions again.
[0043]
    Claim16The invention described in claim 115In the invention described in any one of the above,
  The display formatting means includes:
  Image size adjusting means for adjusting the size of each of the main image and the sub-image;
  Image combining means for combining the size-adjusted main image and sub-image;
  It is characterized by having.
[0044]
  Claim16According to the invention described in (1), the size adjustment is performed for each of the main image and the sub image, and the main image and the sub image that have been subjected to the size adjustment are synthesized. Therefore, size adjustment can be performed for each of the main image and the sub-image.
[0045]
  Claim17The invention described in claim16In the invention described in
  The image size adjustment means adjusts the size so that the image size of the sub-image is smaller than the image size of the main image.
[0046]
  Claim17According to the invention described in (1), the size adjustment is performed so that the image size of the sub-image is smaller than the image size of the main image. Therefore, for example, it is possible to express the main image, which is the main subject of interpretation, in full size and in detail, and to arrange a sub-image as a reference for interpretation on the same image.
[0047]
  Claim18The invention described in claim16Or17In the invention described in
  The image synthesizing unit synthesizes the size-adjusted sub-image in a predetermined region in the size-adjusted main image.
[0048]
  Claim18According to the invention described in (1), the size-adjusted sub-image is combined in a predetermined area in the size-adjusted main image. Therefore, for example, it is possible to express the main image that is the subject of interpretation in full scale and in detail, and to arrange the sub-image as a reference for interpretation in a predetermined area that does not interfere with interpretation.
[0049]
  Claim19The invention described in claim18In the invention described in
The image synthesizing means determines an inset position of the size-adjusted sub-image based on image attribute information of the medical image.
[0050]
  Claim19According to the above-described invention, the fitting position of the size-adjusted sub-image is determined based on the image attribute information of the medical image. Accordingly, it is possible to place the sub-image at a position that does not hinder interpretation based on the image attribute information such as the imaging part / body position and imaging size of the medical image.
[0051]
  Claim20The invention described in claim18In the invention described in
  The display formatting means includes subject area recognition means for recognizing a subject area by analyzing the medical image;
  The image synthesizing means determines an inset position of the size-adjusted sub-image based on the recognized subject area information.
[0052]
  Claim20According to the invention, the subject area is recognized by analyzing the medical image, and the fitting position of the size-adjusted sub-image is determined based on the recognized subject area information. Therefore, the sub-image can be automatically arranged at a position that does not interfere with interpretation and does not overlap with the subject area.
[0053]
  Claim21The invention described in claim18In the invention described in
  The image size adjusting means adjusts the size of the sub-image based on the recognized subject area information.
[0054]
  Claim21According to the invention described in (1), the size of the sub-image is adjusted based on the recognized subject area information. Therefore, the sub-image can be arranged in a size that does not interfere with interpretation and does not overlap with the subject area.
[0055]
  Claim22The invention described in claim1-21In the invention described in any one of the above,
  The diagnosis support information generating means generates a plurality of different diagnosis support information from the same medical image,
  The image processing means or the schema image creating means creates at least one sub-image for each of the plurality of diagnosis support information.
[0056]
  Claim22According to the above-described invention, a plurality of different diagnosis support information is generated from the same medical image, and at least one sub-image is created for each of the generated plurality of diagnosis support information. Therefore, even when there are a plurality of different types of abnormal shadow candidates and measurement results, the sub-image is not complicated and an easy-to-view sub-image can be provided.
[0057]
DETAILED DESCRIPTION OF THE INVENTION
[First Embodiment]
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
First, the configuration will be described.
FIG. 1 is a diagram illustrating an internal configuration of an image processing apparatus 10 according to the present embodiment. In FIG. 1, an image processing apparatus 10 includes an image input unit 11, an image data storage unit 12, a diagnosis support information generation unit 13, a diagnosis support information storage unit 14, an image processing unit 15, an image processing condition storage unit 16, and a display formatting. Means 17, image display means 18, operation input means 19, image output means 20, display format storage means 21, and image recording device information storage means 22 are provided.
[0058]
The image input means 11 uses a laser digitizer, for example, to scan a film on which a medical image obtained by imaging a patient is recorded with a laser beam, measure the amount of light transmitted, and convert the value into an analog to digital image. It is input as data.
[0059]
The image input by the image input means 11 is not limited to the laser digitizer, and may be an optical sensor such as a CCD (Charge Coupled Device). In this case, the film is optically scanned, and the reflected light is photoelectrically converted by the CCD to obtain image data. In addition, as disclosed in Japanese Patent Application Laid-Open No. 55-12429, an image capturing apparatus that digitally converts a medical image captured using a storage phosphor and outputs it, instead of reading an image recorded on a film. It is good also as connecting and obtaining image data from this imaging device. In this case, digital-specific advantages such as digital image processing, image management by digital image storage, and image sharing and image communication via a network occur.
[0060]
Alternatively, image data obtained from a flat panel detector (FPD) that captures a radiation image by a plurality of two-dimensionally arranged detection elements and outputs the image as an electrical signal may be input. For example, Japanese Patent Laid-Open No. 6-342098 discloses a technique for accumulating the generated electric charge in a plurality of capacitors arranged two-dimensionally, and a photoconductive layer that generates electric charge according to the intensity of irradiated radiation. It is disclosed.
[0061]
Further, as described in Japanese Patent Laid-Open No. 9-90048, light such as a photodiode in which radiation is absorbed by a phosphor layer such as an intensifying screen to generate fluorescence and the fluorescence intensity is provided for each pixel. It is good also as inputting a medical image, detecting with a detector. As another means for detecting the fluorescence intensity, there is a method using a CCD or a C-MOS sensor. Moreover, the structure which combined the radiation scintillator which emits visible light by irradiation of a radiation, the area sensor corresponding to each lens array and each lens may be sufficient.
[0062]
When obtaining a digital medical image with the various configurations described above, the effective pixel size of the image is 200 μm or less, for example, for a mammogram (breast radiation image), depending on the imaging region and the diagnostic purpose. It is preferable that the thickness is 100 μm or less. In order to maximize the performance of the image processing apparatus of the present invention, for example, a configuration using image data input with an effective pixel size of about 50 μm is preferable.
[0063]
Moreover, it is not necessary to be limited to a simple X-ray image, and it is possible to adopt a configuration in which image data obtained from an imaging apparatus such as CT (Computed Tomography), MRI (Magnetic Resonance Imaging), or an ultrasonic diagnostic apparatus is input. .
[0064]
Further, the image input means 11 inputs image data and image attribute information related to the image data, for example, patient information related to the patient such as the patient name, patient ID, age, and sex of the imaged patient, imaging date, imaging ID, and imaging. Image data such as a part, imaging conditions (body position, imaging direction, etc.), imaging information such as an imaging device, the number of pixels of image data, a sampling pitch, and the number of bits are input, and the image data is output to the image data storage means 12 In this case, the image attribute information is output in association with the image data. Note that the image input unit 11 is not necessarily provided in the image processing apparatus 10. For example, the image input unit 11 may read image data from various storage media such as a CD-ROM or a floppy (registered trademark) that stores image data. Alternatively, it may be transferred from an external device connected via a network.
[0065]
The image data storage means 12 stores the image data input by the image input means 11 with data compression as necessary. Here, as a data compression method, reversible compression or irreversible compression using a known method such as JPEG, DPCM (Differential Pulse Code Modulation), wavelet compression or the like is used, but there is no loss of diagnostic information due to data compression. Compression is preferred.
[0066]
In a small-scale diagnosis, the amount of data input from the image input unit 11 is not so large, so that the image data can be stored on the magnetic disk without being compressed. In this case, image data can be stored and read out much faster than the magneto-optical disk. At the time of image interpretation, since a fast cycle time is required, necessary image data is also stored in a semiconductor memory.
[0067]
The diagnosis support information generation unit 13 includes an abnormal shadow candidate information generation unit 13a and a measurement information generation unit 13b.
[0068]
The abnormal shadow candidate information generation unit 13a reads out image data from the image data storage unit 12 and performs image analysis, thereby causing abnormal shadows such as microcalcification clusters and tumor shadows in the mammogram and nodular shadows in the chest image. A candidate is detected, and diagnosis support information including position information in the image of the abnormal shadow candidate is generated. An example of a microcalcification cluster is shown to Fig.2 (a). When microcalcifications are gathered (clustered), they are likely to be early cancers, which is an important finding for finding early breast cancer. On the mammogram, it appears as a whitish round shadow with a substantially conical structure. Moreover, the mass shadow shown in FIG. 2B is seen as a whitish and round shadow close to a Gaussian distribution on a lump or mammogram having a certain size.
[0069]
A known detection method described in the following paper can be used for the method for detecting a shadow of a tumor.
(1) Mass shadow
・ Method to detect by comparing left and right breasts
(Med.Phys., Vol.21.No.3, pp.445-452)
・ Detection method using iris filter
(Science theory (D-11), Vol.J75-D-11, no.3, pp.663-670,1992)
・ Detection method using Quiit filter
(Science Theory (D-11), Vol. J76-D-11, no. 3, pp. 279-287, 1993)
A method of detection by binarization based on a histogram of pixel values of divided breast regions
(JAMIT Frontier Proceedings, pp.84-85,1995)
・ Minimum direction difference filter that takes the minimum output of many directional Laplacian filters)
(Science Theory (D-11), Vol.J76-D-11, no.2, pp.241-249, 1993)
[0070]
・ Method to differentiate benign and malignant masses using fractal dimension
(Medical Imaging Technology17 (5), pp.577-584, 1999)
[0071]
In addition, as a method for detecting an abnormal shadow candidate for a microcalcification cluster, a known detection method described in the following paper can be used.
(2) Microcalcification cluster
・ Localize the area suspected of calcification from the breast area, and delete false positive candidates from the optical density difference of the shadow image and the standard deviation value of the boundary density difference.
(IEEE Trance Biomed Eng BME-26 (4): 213-219,1979)
・ Detection method using images after Laplacian filter processing
(Science theory (D-11), Vol. J71-D-11, no. 10, pp. 1994-2001, 1988)
・ A detection method that uses morphologically analyzed images to suppress the influence of background patterns such as mammary glands
(Science Theory (D-11), Vol. J71-D-11, no. 7, pp. 1170-1176, 1992)
[0072]
Further, as other abnormal shadow candidate detection methods, for example, the following known detection methods can be used.
(3) Detection of nodular shadows in chest images
・ JP-A-6-121792
(4) Detection of interstitial disease shadows in chest images
・ Japanese Patent Laid-Open No. 2-185240
[0073]
The measurement information generation unit 13b reads image data from the image data storage unit 12, performs image measurement, and generates diagnosis support information including position information in the image related to the measurement result. As image measurement, for example, measurement of a cardiothoracic ratio used for diagnosis of cardiac hypertrophy in a chest image, measurement of bone length of a lower limb used for surgery planning in a lower limb image, Cobb used for diagnosis of scoliosis in a spine image Measure corners. The measurement may be performed by automatic processing (for example, Medical Physics, Vol17, No.3, pp.342-350, 1990, Japanese Patent Laid-Open No. 7-381), and the operator is displayed on the image display means. It is also possible to employ a configuration that is calculated based on information input using a pointing device such as a mouse while observing the captured image (for example, Japanese Patent Laid-Open No. 8-256993).
[0074]
The diagnostic support information storage unit 14 stores the diagnostic support information generated by the abnormal shadow candidate file 141 and the measurement information generation unit 13b that store the diagnostic support information generated by the abnormal shadow candidate information generation unit 13a in association with the image data. A measurement information file 142 is stored in association with image data.
[0075]
As shown in FIG. 3A, the abnormal shadow candidate file 141 includes a shooting ID area 141a, an abnormality type area 141b, a position information area 141c, a size area 141d, and the like, and is specified by the shooting ID. The abnormality type, position information, and size, which are diagnosis support information generated by the abnormal shadow candidate information generation unit 13a with respect to the image data, are stored in association with each other, and stored in the image data storage unit 12 by the photographing ID. The associated image data and the diagnostic support information in the abnormal shadow candidate file 141 are associated with each other.
[0076]
The abnormality type area 141b stores data indicating the types of detected abnormal shadow candidates (for example, mass shadow, microcalcification, nodular shadow,...) As “abnormality type”. The position information area 141c is data indicating the coordinate value of the position of the center of gravity of the abnormal shadow candidate (for example, (x, y) = (100, 1200), (300, 700), (400, 500),...)). Is stored as “position information”. The position information is not limited to this, and may be a coordinate value indicating an abnormal shadow candidate image area, for example. It may also be indicated by the distance to the characteristic normal tissue.For example, when the imaging part is the chest, the position is determined by the distance between the centroid of the abnormal shadow candidate and the centroid of the lung field region that is the characteristic normal tissue. It may be shown. The characteristic normal tissue is a biological tissue with little positional change such as an organ or bone such as the heart, lungs, and vertebrae, and is preferably a tissue that can serve as an index of the temporal change in the position of the abnormal shadow candidate. The size information area 141d stores data indicating the area occupied by the image area of the abnormal shadow candidate (for example, 225 mm 2, 300 mm 2, 310 mm 2,...) As “size”. The size information may be indicated by an average distance or a longest distance (for example, 15 mm) from the center of gravity of the abnormal shadow candidate to the edge.
[0077]
As shown in FIG. 3B, the measurement information file 142 includes a shooting ID area 142a, a measurement target area 142b, a position information area 142c, a measurement result area 142d, and the like, and image data specified by the shooting ID. The measurement object, position information, and measurement result, which are diagnostic support information generated with respect to the measurement information generation unit 14b, are stored in association with each other, and the image data stored in the image data storage unit 12 by the photographing ID, The diagnosis support information in the measurement information file 142 is associated.
[0078]
The measurement target region 142b includes data indicating the measurement target (for example, chest-cardiothoracic ratio (%), lower limb bone-bone length (cm), spinal scissors-Cobb angle (degree),...) “Measurement target. ". The position information area 142c includes data (for example, {(200, 1200), (700, 1200), (1340, 1200), (1800, 1200)}) represented by coordinate values on the image of the point used for measurement, { (300, 1200), (300, 100)}, {(900, 500), (1000, 770), (1000, 1000)},...) Are stored as “position information”. The measurement result area 142d stores numerical data indicating the measurement result (for example, 40, 75, 20,...) As “measurement result”. The unit of the measurement result is set in advance for each measurement target.
[0079]
Note that the manner of saving each diagnosis support information is not limited to this. For example, the diagnosis support information may be saved in the header information of the image data in the image data storage unit 12.
[0080]
The image processing unit 15 analyzes the image data (original image) input from the image data storage unit 12 to thereby set two different image processing conditions, that is, the main image image processing condition and the sub image image processing condition. By determining and applying these to the original image, sub-image data for adding annotations indicating main image data and diagnosis support information is created and output to the display formatting means 17. Image processing includes gradation processing to adjust the contrast of the image, frequency enhancement processing to adjust the sharpness, and dynamic range compression to keep an image with a wide dynamic range within an easy-to-view density range without reducing the contrast of the details of the subject. Processing etc. are included. Also included are rotation processing, inversion processing, trimming processing, and the like for correcting an image to a direction and size suitable for diagnosis based on image attribute information such as an imaging region and imaging conditions.
[0081]
In gradation processing, first, gradation processing conditions for the main image are determined. Two examples are shown as methods for determining the gradation processing conditions for the main image.
Method 1
First, image data is analyzed, and a method for extracting a lung field region in a chest image disclosed in Japanese Patent Laid-Open No. 3-218578, or a mammography disclosed in Journal of Breast Cancer Examination Society of Japan, Vol.17, No.1, pp87-102,1998. An image region corresponding to a desired portion of the subject is set using a thick mammary region extraction method in FIG. Next, as shown in FIG. 4 (a), histogram analysis in the region is performed using the method shown in Japanese Patent Laid-Open No. 63-262141 and Japanese Patent Laid-Open No. 8-62751, and signal regions important for diagnosis are obtained. The corresponding area a is determined. After the region a is determined, a cumulative histogram in the region a is calculated, signal values S1 and S2 corresponding to predetermined cumulative histogram values (for example, 5% and 95%) are obtained, and these S1 and S2 are used as reference signal values. decide.
[0082]
Next, as shown in Japanese Patent Application Laid-Open No. 59-83149, a reference gradation curve selected from several kinds of reference gradation curves prepared in advance is modified to show in FIG. 4B. In the input signal value Sin, a gradation conversion curve corresponding to a function F (Sin) is determined that converts the previously obtained reference signal values S1 and S2 into S1 ′ and S2 ′ in the output signal value Sout, respectively.
<Formula 1> Sout = F (Sin)
Here, S1 ′ and S2 ′ are values corresponding to predetermined reference output densities D1 and D2, respectively, and the relationship between the output signal value Sout and the density D is an image recording that is an output destination for outputting an image. It is determined by the characteristics of the device. The characteristics of the image recording apparatus are: image recording apparatus information (model, output image size (film size / number of vertical and horizontal pixels)), maximum and minimum density, density resolution, gradation characteristics, which are stored in an image recording apparatus information storage means described later. , Frequency characteristics, etc.).
[0083]
Method 2
First, the reference signal values S1 and S2 are obtained by the same method as the method 1 described above. Next, as shown in FIG. 4C, a reference gradation curve G (Sstd) selected from the reference gradation curves prepared in advance is prepared. Then, a standardized straight line represented by a linear function L (Sin) is determined for the input signal value Sin so that the reference signal values S1 and S2 are converted into predetermined standardized signal values Sstd1 and Sstd2, respectively.
<Formula 2> Sstd = L (Sin)
Here, the normalized signal values Sstd1 and Sstd2 output output signal values S1 ′ and S2 ′ corresponding to the reference output densities D1 and D2 respectively determined when converted using the reference gradation curve Gstd. It is defined as a signal value.
[0084]
When the relationship between input and output in gradation processing is expressed by a curve graph with the horizontal axis representing the logarithm of the X-ray dose and the vertical axis representing the output density, the output density at two predetermined points (for example, 0.25 and 2.0) The average slope of the curve in between is called the average gradient.
[0085]
As the gradation processing conditions for the main image, it is required to have a high average gradient in order to observe the lesion shadow in detail. Specifically, it is 2.0 or more for mammography, and at a photographing site other than mammography. It is preferably 1.5 or more, more preferably 2.5 or more in mammography, and 2.0 or more in imaging regions other than mammography.
[0086]
After determining the gradation processing conditions for the main image, the gradation processing conditions for the sub-image are determined.
When the gradation processing conditions for the main image are determined using the method 1 described above, the gradation conversion curve for the sub-image is determined after determining the gradation conversion curve F (Sin) for the main image. To do. As a method for determining the gradation conversion curve for the sub-image, a gradation conversion curve Fsub (sin) for the sub-image is created by multiplying F (Sin) by a predetermined coefficient α (α <1.0) (FIG. 4 (b)).
When the gradation processing conditions for the main image are determined using the method 2 described above, after determining the standardized straight line L (Sin) for the main image, a predetermined coefficient α (α By multiplying <1.0), a normalized straight line Lsub (Sin) for the sub-image is created (see FIG. 4C).
Alternatively, a value smaller than the reference output densities D1 and D2 for the main image is set in advance as the reference output densities Dsub1 and Dsub2 for the sub-image, and the gradation processing conditions for the main image described above using Dsub1 and Dsub2 A method of determining the gradation processing conditions for the sub-image by using the same procedure as the determination method 1 or 2 may be used. Here, Dsub1 and Dsub2 are set so that the value of (Dsub2-Dsub1) is smaller than (D2-D1).
[0087]
For the sub-image, a relatively low average gradient gradation processing condition is set in order to express the entire subject to the background in a density range that is easy to see. Specifically, it is preferably 3.5 or less for mammography, 3.0 or less for imaging parts other than mammography, more preferably 3.0 or less for mammography, and 2.5 or less for imaging parts other than mammography. . Furthermore, the average gradient for the sub-image is preferably 80% or less with respect to the average gradient of the main image.
[0088]
As described above, the gradation conversion curves F (Sin), Fsub (Sin), or the normalized straight line L (Sin) so that the average gradient of the sub-image data becomes relatively smaller than the average gradient (slope) of the main image data. ), Lsub (Sin) is determined to provide sufficient contrast for the interpretation of the lesion shadow in the main image intended for diagnosis, and at the same time, in the sub-image intended for reference, in a density range that makes it easy to see the entire image. It is possible to express the positional relationship between annotations in an easy-to-understand manner.
[0089]
Further, the gradation processing conditions for the sub-image may be determined as follows.
Invert the main image gradation conversion curve F (Sin) or the main image normalization line L (Sin) in the vertical axis direction.
The gradation conversion curve Fsub (Sin) or the normalized straight line Lsub (Sin) created so that the average gradient is lower than that of the main image by the method described above is inverted in the vertical axis direction.
[0090]
In this way, with respect to the average gradient of the gradation conversion curve or standardized line of the main image data, or the average gradient of the gradation conversion curve or standardized line created so that the average gradient is lower than that of the main image. The gradation conversion curve or the normalization line of the sub-image data is determined so that the average gradient of the sub-image data has the value of the reverse sign. This provides sufficient contrast for the interpretation of lesion shadows in the main image for diagnosis, and at the same time, in the sub-image for reference purposes, it is a density that makes it easy to see the boundary between the subject and the background by inverting the black and white of the image It is possible to express the positional relationship between the subject and the annotation in an easy-to-understand manner. This processing is particularly effective in mammography.
[0091]
Regarding the determination of the gradation processing conditions of the sub-image data, the user can instruct selection by the operation input means 19.
[0092]
Prior to gradation processing, if irradiation field recognition processing is performed to detect the radiation field area, it is necessary for diagnosis by setting various image processing conditions based on the image data in the recognized irradiation field area. This is preferable because image processing of the image portion can be appropriately performed. As a method for this irradiation field recognition processing, for example, means disclosed in JP-A-63-259538, JP-A-5-7579, and JP-A-7-181609 can be used.
[0093]
In the frequency processing, for example, a non-sharp mask process disclosed in Japanese Patent Publication No. 62-62373 and Japanese Patent Publication No. 62-62376, or a multi-resolution method disclosed in Japanese Patent Application Laid-Open No. 9-44645 is used. Control the sharpness. At this time, the frequency processing condition is determined so that the low-frequency component of the sub-image data is relatively attenuated compared to the low-frequency component of the main image data. This provides sufficient contrast for the interpretation of lesion shadows in the main image for diagnosis, and at the same time, in the sub-images for reference purposes, the entire image is within an easy-to-view density range, and the positional relationship of the annotations It can be expressed in an easy-to-understand manner. Further, as another aspect for relatively reducing the low-frequency component of the sub-image data, in the dynamic range compression process, the degree of compression of the low-frequency component of the sub-image data is higher than that of the main image data. The dynamic range compression processing condition may be determined so as to increase.
[0094]
Here, the image processing conditions for the frequency processing and dynamic range compression processing are determined by the characteristics of the image recording apparatus serving as an output destination for outputting an image, together with the analysis result of the image data. The characteristic of the image recording apparatus is image recording apparatus information similar to that described in the section of gradation processing.
[0095]
In addition, the image processing unit 15 performs image rotation and inversion processing based on an instruction from the imaging region and the operation input unit 19. Further, the image processing means 15 has a function as a display image correcting means. When a correction instruction such as contrast and density for the main image or the sub-image is input from the operation input means 17, the image processing means 15 is instructed according to the input instruction. The gradation processing is performed again on the obtained image.
[0096]
The image processing conditions of the main image data and the sub-image data determined by the image processing unit 15 are stored in association with the image data stored in the image data storage unit 12 by the image processing condition storage unit 16. Specifically, the image data and each image processing condition are associated with each other by a shooting ID for specifying the image data. Alternatively, each image processing condition may be stored in the header information of the image data in the image data storage unit 12. In this way, by storing image data and its image processing conditions in association with each other, it is not necessary to perform calculations for determining image processing conditions again when re-outputting after changing conditions other than the image processing conditions. The processing load can be reduced.
[0097]
The display formatting means 17 includes an image size adjustment means 17a, an image composition means 17b, and a subject area recognition means 17c. The image size adjusting unit 17a adjusts the image size so that the image size of the sub-image is smaller than the image size of the main image. In this size adjustment, it is desirable to adjust the size of the sub-image to a size that can be arranged outside the subject area recognized by the subject area recognition means 17c.
[0098]
The image synthesizing unit 17a refers to the image attribute information related to the image data, for example, the above-described patient information, imaging information, image data information, and image processing conditions. From the position of the patient information display area set in advance, based on a preset rule, it is determined in which area on the image there is an area (attention area) that is focused on for diagnosis. An arrangement position of the sub image is determined on the outside. For example, in the case of a chest front image, since the lung field region is a region of interest, the position that does not overlap with the patient information display region in the upper right or upper left region of the image that does not overlap with this lung field region, Is a region of interest, a region that does not overlap with the breast, that is, a position that does not overlap the patient information display region in the image end on the opposite side of the chest wall is determined as the sub-image placement position. Specifically, a rectangular area that does not overlap the attention area recognized by the subject area recognition unit 17c and the patient information display area is determined as a sub-image arrangement position. Then, the image compositing means 17a reads diagnostic support information corresponding to the image data from the abnormal shadow candidate file 141 or the measurement information file 142, and an annotation corresponding thereto (the diagnostic support information is illustrated with symbols, characters, markers, etc. Is added to the sub-image data whose size has been adjusted, and one image is synthesized in such a manner that the sub-image is inserted into the sub-image arrangement position in the main image area. Further, in the present embodiment, two images are combined by inserting the sub-images into the main images of the left and right breasts in the same photographing direction, and the two images are opposed to each other and output on one film. To do. Here, an alignment process (Japanese Patent Laid-Open No. 2000-287957) for aligning the left and right breasts based on the analysis of the image data may be performed.
[0099]
The subject area recognition means 17c recognizes the subject area by extracting the outline of the subject in the image data. For example, the density data of the image is binarized using an appropriate threshold value, the boundary between “0” and “1” is traced to form a contour line, and the region of interest according to the contour line, the imaging region / body position, and the imaging direction To decide. Alternatively, a method for extracting a contour line of a human body region or a region corresponding to a predetermined anatomical structure inside the human body (Japan Breast Cancer Screening Society Journal, Vol. 17, No. 1, pp 87-102, 1998, JP-A 63-240832 The region of interest is determined using
[0100]
The display formatting means 17 includes image recording apparatus information (model, output image size (film size / number of vertical and horizontal pixels), maximum and minimum density) set for each output channel stored in the image recording apparatus information storage means 22. , Density resolution, gradation characteristics, frequency characteristics, etc.), based on the information of the image recording device designated as the output destination, adjust the output of the synthesized image data to create a display image, It outputs to the display means 18.
[0101]
Further, the display formatting means 17 has a function as a display image correcting means. When an instruction to change the main image size, sub-image size, layout, and annotation is input from the operation input means 19, the display formatting means 17 follows the input instruction. Then, the display image is re-synthesized by the image synthesizing unit 17b and output to the image display unit 18.
[0102]
The image data of the display image created by the display formatting means 17 or the display image creation conditions applied to the medical image for creating the display image is the image data stored in the image data storage means 12. Are stored in the display format storage means 21 in association with each other. Specifically, the image data in the image data storage unit 12 and the image data of each display image or the display formatting conditions are associated with each other by a shooting ID for specifying the image data. Alternatively, each display image and its display image creation conditions may be stored in the header information of the image data in the image data storage unit 12. This eliminates the need to perform calculations for creating a display image again at the time of re-output. Further, by storing the image data and the display image creation conditions in association with each other, it is possible to leave a record of what film output the doctor has determined based on the diagnosis.
[0103]
The image display means 18 is a CRT (Cathode Ray Tube), a liquid crystal display, a plasma display or the like, and displays the display image input from the display formatting means 17 on a monitor.
[0104]
Here, it is preferable that the image display means 18 has a function of display gradation conversion processing (Japanese Patent Laid-Open No. 2002-36652) for realizing consistency between the monitor display and the appearance of the hard copy.
[0105]
The operation input means 19 includes a pointing device such as a keyboard and a mouse having function keys corresponding to various functions such as a cursor key, a numeric input key, and a determination key, and outputs a pressing signal from the keyboard and an operation signal from the mouse. A touch panel integrated with the display unit 17 may be used. The operation input means 19 outputs an image recording device designation and output instruction to the image output means 20 based on the input operation. Further, as the sub image display designation information input means, the presence / absence of the display of the sub image is output to the display formatting means 17 based on the input operation. Further, as the display image correction means, a correction instruction such as a change of the main image, sub-image size, layout, annotation pattern, or addition of a comment displayed on the image display means 18 is output to the display formatting means 17. The tone change instruction is output to the image processing means 15.
[0106]
FIG. 5 shows an example of the medical image monitor screen 181 displayed by the image display means 18. The diagnostic support information generating unit 13 generates diagnostic support information for the image data input by the image input unit 11, the image processing unit 15 performs image processing such as gradation processing, and the display formatting unit 17. By performing size adjustment, image synthesis, and the like, a display image to be output by the image output unit 20 is generated. The display image is displayed on the monitor as a medical image monitor screen 181 by the image display means 18.
[0107]
As shown in FIG. 5, a main image 181a, a sub image 181b, and patient information 181c are displayed on the medical image monitor screen 181. Various function buttons are displayed at the bottom of the medical image monitor screen 181. When the “sub image display” button is clicked with the mouse, the display formatting means 17 generates a display image of only the main image, and a display image composed of the main image and the sub image, and a display image of only the main image. And are displayed. When the “change” button is pressed, a display image correction screen 182 shown in FIG. 6 is displayed. Here, when the user ID is input, the change item is set, and the “OK” button is pressed, the corrected and changed image is displayed on the medical image monitor screen 181. Note that the sizes of the main image and the sub image can be adjusted by dragging the side of the image with the mouse. The layout can be changed by dragging the sub-image. When the “select channel” button is pressed, a screen for selecting an output destination is displayed, and an image recording apparatus as an output destination can be designated. When the “output” button is pressed, an image displayed on the image recording apparatus is output from the designated output channel.
[0108]
It should be noted that it is desirable to provide correction history storage means for storing the display image correction items input from the operation input means 19 as a correction history file 191. FIG. 7 shows an example of the correction history file 191. As shown in FIG. 7, the correction history file 191 stores a code (for example, 001, 002,...) Uniquely assigned to specify a doctor or engineer (user) who instructed the correction. An ID area, a change item area for storing data indicating the specified change item (for example, annotation, sub-image size,...), And data indicating the specified change content (for example, an arrow, 6 cm × 6 cm, ..) And a data area (for example, chest P → A, left breast MLO,...) Indicating imaging conditions such as an imaging region / body position where the correction is performed.
[0109]
When a user ID of a doctor who performs interpretation is input, the correction history file 191 is referred to in the image processing means 15 and the display formatting means 17, and image processing and display images are performed based on the correction history performed by the user in the past. By generating the above, it is possible to generate a display image according to the user, and there is no need to input a correction each time.
[0110]
The image output means 20 has a plurality of output channels, and for each output channel, information on an image recording apparatus (image recording apparatus model, output image size ( Film size / number of vertical and horizontal pixels), maximum and minimum density, density resolution, gradation characteristics, frequency characteristics, etc.) are set. The setting contents are stored in the image recording apparatus information storage unit 22 (see FIG. 8). Which output channel the image is output from can be designated by the operation input means 19 as output channel selection means. Further, it may be configured such that image attribute information such as an imaging region or medical department is associated with an output channel in advance, and an output channel is automatically selected based on image attribute information of an image to be output. When the output of the image is instructed, the image output means 20 outputs the display image data input from the display formatting means 17 to the image recording apparatus from the designated output channel. The image recording apparatus is an apparatus that records an image as a hard copy on a medium, such as a laser film printer, an ink jet printer, or a thermal printer.
[0111]
FIG. 9 shows an example of a hard copy 200 of a medical image output from the image recording apparatus. As shown in FIG. 9, in the hard copy 200, two display images (a set of a main image and a sub image) of a right breast mammogram and a left breast mammogram are printed on one film. . 9, 200a-1 is the main image of the mammogram of the right breast, 200b-1 is its sub image, 200a-2 is the main image of the mammogram of the left breast, and 200b-2 is its sub image. In each sub-image, abnormal shadow candidates are displayed as annotations. “M” in the sub-image indicates a tumor candidate, and “C” indicates a microcalcification cluster. On the upper left of the hard copy, patient information 200c such as a patient ID is displayed.
[0112]
FIG. 10 shows an example of a hard copy 201 of a medical image output from the image recording apparatus. As shown in FIG. 10, on the hard copy 201, a chest front image 201a of the main image and a sub-image 201b displaying a cardiothoracic ratio measured from the chest front image are displayed on one hard copy. The measured position and the measurement result “40%” are displayed on the sub-image. On the upper left of the hard copy, patient information 201c such as a patient ID is displayed.
[0113]
As described above, in the image processing apparatus 10 described above, diagnostic support information relating to the image data input from the image input unit 11 is generated, and the main image is generated by performing image processing suitable for diagnosis on the input image data. Then, image processing suitable for reference is performed to create a sub-image. Then, the size of each image is adjusted and the insertion position of the sub-image is determined so that the sub-image does not interfere with the diagnosis of the main image, the diagnosis support information is added to the sub-image, and the main image and the sub-image are combined. Output as a hard copy.
[0114]
Therefore, image processing, size adjustment, and arrangement suitable for diagnosis are automatically realized with respect to the input image data, and a single display image consisting of a main image and a sub-image for displaying diagnosis support information is created. Can be output. As a result, it is possible to easily and quickly refer to and use the diagnosis support information even when reading a hard copy of a silver halide film or the like using a conventional image observation apparatus such as Saucusten. Thus, the diagnostic performance and work efficiency of the doctor can be improved without changing the in-hospital work flow. In addition, since the main image for image interpretation and the sub-image for reference are displayed on one film, the film cost can be reduced. Furthermore, since the output image is subjected to image processing, size adjustment, and arrangement suitable for diagnosis, gradation and frequency characteristics are not preferable for diagnosis at the time of interpretation, or the size and position of the sub-image are not preferable for diagnosis. It turns out that troublesome work such as re-outputting the film and carrying it to the interpretation location after adjusting the image processing or size manually reduces the film cost and time and labor cost required for re-output. can do.
[0115]
The image processing means 15, the diagnosis support information generating means 13, and the display formatting means 17 are realized by software processing in cooperation with a CPU (Central Processing Unit) and a program stored in a ROM (Read Only Memory). It may be configured to be configured by dedicated hardware. Further, the image data storage unit 12, the diagnosis support information storage unit 14, the image processing condition storage unit 16, the display format storage unit 21, and the image recording device information storage unit 22 are stored in the same recording device and recording medium. It is good.
[0116]
Further, in the present embodiment, a configuration is shown in which the image processing unit 15 performs image processing on the original image to create a processed image, and then the display formatting unit 17 adjusts and arranges the size of the processed image. It is also possible to adopt a configuration in which image processing, size adjustment, and arrangement are simultaneously performed on an image.
[0117]
Further, when there are a plurality of different types of abnormal shadow candidates and measurement results for one image data, one sub-image may be created for each diagnosis support information. In this way, the sub-image is not complicated, and the diagnosis support information can be appropriately transmitted to the doctor. Furthermore, if the number of detected cases is 0 even if an abnormal shadow candidate is detected, the sub-image may not be displayed.
[0118]
[Second Embodiment]
Next, a second embodiment of the present invention will be described.
As shown in FIG. 11, in the second embodiment, the image processing apparatus 10 has a configuration in which a schema image creation unit 23 and a schema image storage unit 24 are added to the configuration of the first embodiment. ing.
[0119]
The schema image creation means 23 analyzes the image data input from the image data storage means 12 to perform contour extraction and generate a schema. As a contour extraction method, for example, as shown in Japanese Patent Laid-Open No. 63-240832, attention is paid to one row or column in image data, and the relationship between the values of preceding and following data in the one-dimensional density data sequence. Is a predetermined pattern (for example, a point with a minimum, a point with the maximum inclination, a point with the minimum inclination, etc.) as a contour point in the row or column, and a row or column in a necessary range. A contour point is obtained and a line connecting these points is defined as a contour line. Alternatively, other known contour extraction methods (for example, in mammography, medical electronics and biotechnology, Vol. 39, No. 4, pp 297-304, 2001) may be used. The schema image created in this way is stored in the schema image storage unit 24.
[0120]
The schema image storage unit 24 stores the schema image created by the schema image creation unit 23 in association with image data. Specifically, the image data and the schema image are associated with each other by a shooting ID for specifying the image data. Alternatively, the schema image may be stored in the header information of the image data in the image data storage unit 12. In this way, by storing the image data and the schema image in association with each other, when the display formatting conditions other than the schema are changed and output again, the display formatter 17 reads the stored schema image. Thus, it is only necessary to create a display image, and it is not necessary to create a schema image again, and the processing load can be reduced.
[0121]
The image processing unit 15 performs image processing such as gradation processing, frequency processing, and dynamic range compression processing on the image data, and outputs the processed image data to the display formatting unit 17.
[0122]
When the image data is output from the image processing unit 15, the display formatting unit 17 reads the corresponding schema image from the schema image storage unit 24, and uses the image data as the main image and the schema image as the sub-image. The same size adjustment, image synthesis, image adjustment, and the like as described in the above embodiment are performed and output to the image display means 18.
[0123]
The other configuration of the image processing apparatus 10 is the same as that of the first embodiment described above, and a description thereof will be omitted.
[0124]
FIG. 12 shows an example of a hard copy 202 of a medical image output from the image recording apparatus. As shown in FIG. 12, the hard copy 202 has two display images, a right breast mammogram and a left breast mammogram, printed on one film. 202a-1 shown in FIG. 12 is a main image of a mammogram of the right breast, 202b-1 and 202b-3 are subimages thereof, 202a-2 is a main image of a mammogram of the left breast, and 202b-2 is a subimage thereof. is there. In each sub-image, abnormal shadow candidates are displayed as annotations. All sub-images are schema images. A portion indicated by a triangle in the sub-image indicates a tumor candidate, and a portion surrounded by ◯ indicates microcalcification. For the right breast, two abnormal shadow candidates, a tumor candidate and microcalcification, are detected, and one sub-image is displayed for each candidate. On the upper left of the hard copy, patient information 202c such as a patient ID is displayed.
[0125]
As described above, since only one diagnosis result is displayed on one sub-image, the image is not complicated, and the diagnosis support information can be appropriately transmitted to the doctor. Even if an abnormal shadow candidate is detected, if the number of detected cases is 0, the sub-image may not be displayed.
[0126]
As described above, in the image processing apparatus 10 described above, diagnostic support information relating to the image data input from the image input unit 11 is created, and the input image data is subjected to image processing suitable for diagnosis and the main image. And a schema sub-image. Then, the size of each image is adjusted and the insertion position of the sub-image is determined so that the sub-image does not interfere with the diagnosis of the main image, the diagnosis support information is added to the sub-image, and the main image and the sub-image are combined. Output as a hard copy.
[0127]
Therefore, image processing, size adjustment, and arrangement suitable for diagnosis are automatically realized for the input image data, and one display image consisting of a main image and a schema sub-image for displaying diagnosis support information is created. Can be output. As a result, it is possible to easily and quickly refer to and use the diagnosis support information even when reading a hard copy of a silver halide film or the like using a conventional image observation apparatus such as Saucusten. Thus, the diagnostic performance and work efficiency of the doctor can be improved without changing the in-hospital work flow. In addition, since the main image for image interpretation and the sub-image for reference are displayed on one film, the film cost can be reduced. Furthermore, since the output image is subjected to image processing, size adjustment, and arrangement suitable for diagnosis, gradation and frequency characteristics are not preferable for diagnosis at the time of interpretation, or the size and position of the sub-image are not preferable for diagnosis. It turns out that troublesome work such as re-outputting the film and carrying it to the interpretation location after adjusting the image processing or size manually reduces the film cost and time and labor cost required for re-output. can do.
[0128]
In addition, the description content in the said Embodiment 1 and 2 is a suitable example of the medical image processing apparatus 10 which concerns on this invention, and is not limited to this. For example, the image processing means 15 in the second embodiment has a function of creating a sub-image as in the first embodiment, and the output form of the sub-image is an image processed by the user, It may be possible to select whether to use a schema image.
[0129]
In addition, the detailed configuration and detailed operation of the image processing apparatus 10 can be appropriately changed without departing from the spirit of the present invention.
[0130]
【The invention's effect】
  Claim 1,23According to the invention described above, diagnosis support information is generated by analyzing a medical image, and the medical image is subjected to image processing including at least gradation processing, and includes at least one main image and at least one sub-image. An image recording apparatus that creates a plurality of processed images, adds an annotation corresponding to the generated diagnosis support information to the sub-image, and combines the main image and the sub-image to create a single display image. Output to.When the display image creation condition applied to the medical image or the created image data of the display image is stored in the display format storage unit in association with the image data of the medical image, and the display image is output again In addition, the display image generation condition or display image data stored in the display format storage means is read to create a display image.Accordingly, it is possible to output an image obtained by combining the main image for diagnosis and the sub-image added with the annotation corresponding to the diagnosis support information from the image recording apparatus on the medium as a hard copy. As a result, doctors can easily and quickly refer to and utilize diagnosis support information without requiring an expensive monitor and without changing the flow of conventional in-hospital work. Work efficiency can be improved.Further, by storing the display generation conditions or the display image data, it is not necessary to perform the calculation for creating the display image again when the output medical image is output again. Furthermore, since the display image generation conditions are stored in association with the image data, a record of what film output the doctor has determined based on the diagnosis remains, so that EBM (Evidence Based Medicine) viewpoints and medical Desirable information management is possible in response to lawsuits.
[0131]
According to the second aspect of the present invention, an image processing condition for the main image and an image processing condition for the sub image are determined by analyzing the medical image, and at least one image processing condition is determined using the determined image processing condition. A plurality of processed images including a main image and at least one sub-image are created. Therefore, it is possible to perform different image processing suitable for each of the main image for the purpose of diagnosis and the sub-image for the purpose of reference.
[0132]
According to the third aspect of the present invention, the gradation processing conditions are determined so that the average gradient of the sub image is relatively smaller than the average gradient of the main image, and the main image and the sub image are created. Therefore, in the main image for the purpose of diagnosis, sufficient contrast is provided for the interpretation of the lesion shadow, and at the same time, in the sub-image for the purpose of reference, the positional relationship between the subject and the annotation is kept within the density range that makes it easy to see the entire image. Can be expressed in an easy-to-understand manner.
[0133]
According to the fourth aspect of the present invention, the gradation processing conditions are determined so that the average gradient of the sub-image has an inverse sign value compared to the average gradient of the main image, and the main image and the sub-image are created. Therefore, at the same time as giving sufficient contrast to the interpretation of lesion shadows, in the sub-image for reference purposes, the black and white of the image is reversed so that the boundary between the subject and the background can be easily seen and the position of the subject and annotation The relationship can be expressed in an easy-to-understand manner.
[0134]
According to the fifth aspect of the present invention, the main image and the sub-image are generated by determining the frequency processing conditions so that the low-frequency component of the sub-image is relatively attenuated compared to the low-frequency component of the main image. . Therefore, sufficient contrast is provided for the interpretation of the lesion shadow, and at the same time, in the sub-image for the purpose of reference, the entire image can be placed in an easy-to-view density range, and the positional relationship of the added annotation can be expressed in an easy-to-understand manner. .
[0135]
According to the sixth aspect of the invention, the image recording device information corresponding to the image recording device is stored, and the recording image processing means performs image processing based on the analysis result of the medical image and the stored image recording device information. Determine the conditions. Accordingly, it is possible to automatically create an optimal processed image corresponding to the image recording apparatus.
[0136]
  Claim 7,24According to the invention described above, diagnosis support information is generated by analyzing a medical image, and at least one main image is created by performing image processing including at least gradation processing on the medical image. Further, a schema is automatically created by analyzing the medical image, and at least one sub-image representing the schema is created. Then, an annotation corresponding to the generated diagnosis support information is added to the sub-image, and a single display image is created by combining the main image and the sub-image and output to the image recording apparatus.The display image creation condition applied to the medical image or the created image data of the display image is stored in the display format storage unit in association with the image data of the medical image, and the display image is output again. Then, the display image generation condition or display image data stored in the display format storage means is read to create a display image.Accordingly, it is possible to output an image obtained by combining the main image for diagnosis and the sub-image added with the annotation corresponding to the diagnosis support information from the image recording apparatus on the medium as a hard copy. As a result, doctors can easily and quickly refer to and utilize diagnosis support information without requiring an expensive monitor and without changing the flow of conventional in-hospital work. Work efficiency can be improved.Further, by storing the display generation conditions or the display image data, it is not necessary to perform the calculation for creating the display image again when the output medical image is output again. Furthermore, since the display image generation conditions are stored in association with the image data, a record of what film output the doctor has determined based on the diagnosis remains, so that EBM (Evidence Based Medicine) viewpoints and medical Desirable information management is possible in response to lawsuits.
[0137]
According to the eighth aspect of the present invention, when information for designating display / non-display of the sub-image is externally input, a display image that displays the sub-image based on the externally-input sub-image display designation information or A display image that does not display a sub-image is created. Therefore, a medical image without adding diagnosis support information can be output as necessary.
[0138]
According to the ninth aspect of the present invention, an abnormal shadow candidate in a medical image is detected, and diagnosis support information including position information in the medical image related to the detected abnormal shadow candidate is generated. Therefore, by presenting abnormal shadow candidates related to the lesion, it is possible to reduce oversight of the lesion by the doctor and reduce the burden of interpretation by the doctor.
[0139]
According to the invention described in claim 10, image measurement is performed on a medical image, and diagnosis support information including position information in the medical image related to the measurement result is generated. Therefore, by presenting the measurement result, it is possible to improve the accuracy of image measurement by the doctor and reduce the burden of interpretation.
[0140]
According to the eleventh aspect, the image recording device information of the image recording device having a plurality of output channels corresponding to the plurality of image recording devices and set for each output channel is stored in association with each other and selected. A display image is created on the basis of the information of the image recording apparatus. Therefore, when an image recording apparatus to be output is selected from among a plurality of image recording apparatuses, an optimum format can be automatically applied to the selected image recording apparatus.
[0141]
According to the invention of claim 12, when the created display image is displayed on the monitor and the correction information for correcting the display image is externally input, the display image is displayed based on the externally input display image correction information. Correct the image. Accordingly, the user can correct the display format while checking the image on the monitor.
[0142]
According to the invention described in claim 13, diagnosis support information is stored in association with image data of a medical image, the stored diagnosis support information is read, and a display image is created based on the read diagnosis support information To do. Accordingly, when the display formatting conditions are changed and re-outputted, it is not necessary to perform the calculation for generating the diagnosis support information again.
[0143]
According to the invention described in claim 14, the image processing conditions applied to the medical image are stored in association with the image data of the medical image, the stored image processing conditions are read, and the read image processing conditions are set. It is characterized in that a processed image is created based on this. Therefore, when the display formatting conditions other than the image processing are changed and re-outputted, it is not necessary to perform the calculation for determining the image processing conditions again.
[0145]
  Claim15According to the invention described above, the schema image data is stored in association with the medical image image data, the stored schema image data is read, and a display image is created based on the schema image data. Therefore, when the display formatting conditions other than the schema are changed and re-outputted, it is not necessary to perform the calculation for determining the image processing conditions again.
[0146]
  Claim16According to the invention described in (1), the size adjustment is performed for each of the main image and the sub image, and the main image and the sub image that have been subjected to the size adjustment are synthesized. Therefore, size adjustment can be performed for each of the main image and the sub-image.
[0147]
  Claim17According to the invention described in (1), the size adjustment is performed so that the image size of the sub-image is smaller than the image size of the main image. Therefore, for example, it is possible to express the main image, which is the main subject of interpretation, in full size and in detail, and to arrange a sub-image as a reference for interpretation on the same image.
[0148]
  Claim18According to the invention described in (1), the size-adjusted sub-image is combined in a predetermined area in the size-adjusted main image. Therefore, for example, it is possible to express the main image that is the subject of interpretation in full scale and in detail, and to arrange the sub-image as a reference for interpretation in a predetermined area that does not interfere with interpretation.
[0149]
  Claim19According to the above-described invention, the fitting position of the size-adjusted sub-image is determined based on the image attribute information of the medical image. Accordingly, it is possible to place the sub-image at a position that does not hinder interpretation based on the image attribute information such as the imaging part / body position and imaging size of the medical image.
[0150]
  Claim20According to the invention, the subject area is recognized by analyzing the medical image, and the fitting position of the size-adjusted sub-image is determined based on the recognized subject area information. Therefore, the sub-image can be automatically arranged at a position that does not interfere with interpretation and does not overlap with the subject area.
[0151]
  Claim21According to the invention described in (1), the size of the sub-image is adjusted based on the recognized subject area information. Therefore, the sub-image can be arranged in a size that does not interfere with interpretation and does not overlap with the subject area.
[0152]
  Claim22According to the above-described invention, a plurality of different diagnosis support information is generated from the same medical image, and at least one sub-image is created for each of the generated plurality of diagnosis support information. Therefore, even when there are a plurality of different types of abnormal shadow candidates and measurement results, the sub-image is not complicated and an easy-to-view sub-image can be provided.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a functional configuration of an image processing apparatus 10 according to a first embodiment of the present invention.
FIG. 2A is a diagram showing an example of a microcalcification cluster, and FIG. 2B is a diagram showing an example of a tumor shadow.
3 is a diagram illustrating a data storage example of an abnormal shadow candidate file 141 and a measurement information file 142 stored by the diagnosis support information storage unit 14 of FIG. 1. FIG.
4A is a diagram illustrating an example of histogram analysis, FIG. 4B is a diagram illustrating an example of a method for determining a gradation conversion curve, and FIG. 4C is a diagram illustrating a method for determining a normalized line;
5 is a diagram showing an example of a medical image monitor screen 181 displayed by the image display means 18 of FIG.
6 is a diagram showing an example of a display image correction screen 182 displayed by the image display means 18 of FIG.
7 is a diagram illustrating an example of data storage in a correction history file 191. FIG.
8 is a diagram showing an example of information set for each output channel of the image output means 20 of FIG. 1. FIG.
FIG. 9 is a diagram illustrating an example of a hard copy 200 output from the image recording apparatus.
FIG. 10 is a diagram illustrating an example of a hard copy 201 output from the image recording apparatus.
FIG. 11 is a block diagram showing a functional configuration of an image processing apparatus 10 according to a second embodiment of the present invention.
FIG. 12 is a diagram illustrating an example of a hard copy 202 output from the image recording apparatus.
[Explanation of symbols]
10 Image processing device
11 Image input means
12 Image data storage means
13 Diagnosis support information generation means
13a Abnormal shadow candidate information generation unit
13b Measurement information generator
14 Diagnosis support information storage means
15 Image processing means
16 Image processing condition storage means
17 Display formatting means
17a Image size adjusting means
17b Image composition means
17c Subject area recognition means
18 Image display means
19 Operation input means
20 Image output means
21 Display format storage means
22 Image recording device information storage means
23 Schema image creation means
24 Schema image storage means

Claims (24)

医用画像を解析することにより、診断支援情報を生成する診断支援情報生成手段と、
前記医用画像に少なくとも階調処理を含む画像処理を施して、同一の前記医用画像から少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成する画像処理手段と、
前記副画像に対して前記診断支援情報生成手段により生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する表示用フォーマッティング手段と、
前記表示用画像を画像記録装置に出力する画像出力手段と、
前記表示用フォーマッティング手段により前記医用画像に施された表示用画像作成条件又は前記表示用フォーマッティング手段により作成された表示用画像の画像データを前記医用画像の画像データと対応付けて保存する表示用フォーマット保存手段と、
を備え、
前記表示用フォーマッティング手段は、前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成することを特徴とする医用画像処理装置。
A diagnostic support information generating means for generating diagnostic support information by analyzing a medical image;
Image processing means for performing image processing including at least gradation processing on the medical image to create a plurality of processed images including at least one main image and at least one sub-image from the same medical image;
An annotation for adding the annotation corresponding to the diagnosis support information generated by the diagnosis support information generating means to the sub-image and creating one display image by synthesizing the main image and the sub-image Formatting means;
Image output means for outputting the display image to an image recording device;
A display format for storing display image creation conditions applied to the medical image by the display formatting means or image data of the display image created by the display formatting means in association with image data of the medical image Storage means;
With
The display formatting means reads the display image generation conditions or display image data stored in the display format storage means to generate the display image when re-outputting the display image. A medical image processing apparatus.
前記画像処理手段は、前記医用画像を解析することにより主画像用の画像処理条件及び副画像用の画像処理条件を決定し、当該決定された画像処理条件を用いて少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成することを特徴とする請求項1に記載の医用画像処理装置。  The image processing means determines an image processing condition for a main image and an image processing condition for a sub image by analyzing the medical image, and at least one main image and at least one main image is determined using the determined image processing condition. The medical image processing apparatus according to claim 1, wherein a plurality of processed images composed of one sub-image are created. 前記画像処理条件が階調処理条件であり、
前記画像処理手段は、前記主画像の平均グラディエントに比べて前記副画像の平均グラディエントが相対的に小さくなるように階調処理条件を決定することを特徴とする請求項2に記載の医用画像処理装置。
The image processing condition is a gradation processing condition;
3. The medical image processing according to claim 2, wherein the image processing unit determines a gradation processing condition so that an average gradient of the sub-image is relatively smaller than an average gradient of the main image. apparatus.
前記画像処理条件が階調処理条件であり、
前記画像処理手段は、前記主画像の平均グラディエントに比べて前記副画像の平均グラディエントが逆符号の値をもつように階調処理条件を決定することを特徴とする請求項2に記載の医用画像処理装置。
The image processing condition is a gradation processing condition;
3. The medical image according to claim 2, wherein the image processing unit determines the gradation processing condition so that the average gradient of the sub-image has an opposite sign value compared to the average gradient of the main image. Processing equipment.
前記画像処理条件が周波数処理条件であり、
前記画像処理手段は、前記主画像の低周波成分に比べて副画像の低周波成分が相対的に減弱されるように周波数処理条件を決定することを特徴とする請求項2〜4の何れか一項に記載の医用画像処理装置。
The image processing condition is a frequency processing condition;
5. The frequency processing condition according to claim 2, wherein the image processing means determines a frequency processing condition so that a low frequency component of a sub-image is relatively attenuated as compared with a low frequency component of the main image. The medical image processing apparatus according to one item.
前記画像記録装置に対応する画像記録装置情報を保存する画像記録装置情報保存手段を備え、
前記画像処理手段は、前記医用画像の解析結果および前記画像記録装置情報に基づいて前記画像処理の条件を決定することを特徴とする請求項1〜5の何れか一項に記載の医用画像処理装置。
Image recording device information storage means for storing image recording device information corresponding to the image recording device;
The medical image processing according to any one of claims 1 to 5, wherein the image processing means determines the conditions of the image processing based on the analysis result of the medical image and the image recording apparatus information. apparatus.
医用画像を解析することにより、診断支援情報を生成する診断支援情報生成手段と、
前記医用画像に少なくとも階調処理を含む画像処理を施すことにより、少なくとも一つの主画像を作成する画像処理手段と、
前記医用画像を解析することによりシェーマを自動的に作成し、該シェーマを表した少なくとも一つの副画像を作成するシェーマ画像作成手段と、
前記副画像に対して、前記診断支援情報生成手段により生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する表示用フォーマッティング手段と、
前記表示用画像を画像記録装置に出力する画像出力手段と、
前記表示用フォーマッティング手段により前記医用画像に施された表示用画像作成条件又は前記表示用フォーマッティング手段により作成された表示用画像の画像データを前記医用画像の画像データと対応付けて保存する表示用フォーマット保存手段と、
を備え、
前記表示用フォーマッティング手段は、前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成することを特徴とする医用画像処理装置。
A diagnostic support information generating means for generating diagnostic support information by analyzing a medical image;
Image processing means for creating at least one main image by performing image processing including at least gradation processing on the medical image;
A schema image generating means for automatically generating a schema by analyzing the medical image and generating at least one sub-image representing the schema;
A display that adds an annotation corresponding to the diagnosis support information generated by the diagnosis support information generation means to the sub-image and creates one display image by combining the main image and the sub-image Formatting means for
Image output means for outputting the display image to an image recording device;
A display format for storing display image creation conditions applied to the medical image by the display formatting means or image data of the display image created by the display formatting means in association with image data of the medical image Storage means;
With
The display formatting means reads the display image generation conditions or display image data stored in the display format storage means to generate the display image when re-outputting the display image. A medical image processing apparatus.
前記副画像の表示/非表示を指定するための情報を外部入力する副画像表示指定情報入力手段を備え、
前記表示用フォーマッティング手段は、前記外部入力された副画像表示指定情報に基づいて前記副画像を表示した表示用画像又は前記副画像を表示しない表示用画像を作成することを特徴とする請求項1〜7の何れか一項に記載の医用画像処理装置。
Sub-image display designation information input means for externally inputting information for designating display / non-display of the sub-image,
2. The display formatting means creates a display image that displays the sub-image or a display image that does not display the sub-image based on the externally input sub-image display designation information. The medical image processing apparatus as described in any one of -7.
前記診断支援情報生成手段は、前記医用画像内の異常陰影候補を検出し、検出された異常陰影候補に関する該医用画像内の位置情報を含む診断支援情報を生成することを特徴とする請求項1〜8の何れか一項に記載の医用画像処理装置。  2. The diagnostic support information generation unit detects an abnormal shadow candidate in the medical image and generates diagnostic support information including position information in the medical image related to the detected abnormal shadow candidate. The medical image processing apparatus as described in any one of -8. 前記診断支援情報生成手段は、前記医用画像において画像計測を行い、この計測結果に関する該医用画像内の位置情報を含む診断支援情報を生成することを特徴とする請求項1〜9の何れか一項に記載の医用画像処理装置。  The diagnostic support information generation unit performs image measurement on the medical image and generates diagnostic support information including position information in the medical image related to the measurement result. The medical image processing apparatus according to Item. 前記画像出力手段は、複数の前記画像記録装置に対応する複数の出力チャンネルを有し、
前記画像記録装置情報保存手段は、前記出力チャンネル毎に設定された画像記録装置の画像記録装置情報を保存し、
前記複数の出力チャンネルのうちのいずれに画像出力するかを選択する出力チャンネル選択手段を備え、
前記表示用フォーマッティング手段は、前記画像記録装置情報保存手段に保存された、前記出力チャンネル選択手段により選択された出力チャンネルに対応する画像記録装置情報に基づいて前記表示用画像を作成することを特徴とする請求項5〜10の何れか一項に記載の医用画像処理装置。
The image output means has a plurality of output channels corresponding to the plurality of image recording devices,
The image recording device information storage means stores image recording device information of the image recording device set for each output channel;
Output channel selection means for selecting which of the plurality of output channels to output an image to,
The display formatting means creates the display image based on the image recording apparatus information corresponding to the output channel selected by the output channel selection means and stored in the image recording apparatus information storage means. The medical image processing apparatus according to any one of claims 5 to 10.
前記表示用フォーマッティング手段において作成された表示用画像をモニタ表示する画像表示手段と、
前記表示用画像を修正するための修正情報を外部入力する表示用画像修正情報入力手段と、
前記外部入力された表示用画像修正情報に基づいて前記表示用画像を修正する表示用画像修正手段と、
を有することを特徴とする請求項1〜11の何れか一項に記載の医用画像処理装置。
Image display means for displaying a display image created in the display formatting means on a monitor;
Display image correction information input means for externally inputting correction information for correcting the display image;
Display image correcting means for correcting the display image based on the externally input display image correction information;
The medical image processing apparatus according to any one of claims 1 to 11, further comprising:
前記診断支援情報を前記医用画像の画像データと対応付けて保存する診断支援情報保存手段を有し、
前記表示用フォーマッティング手段は、前記診断支援情報保存手段に保存された診断支援情報を読み出して該診断支援情報に基づいて前記表示用画像を作成することを特徴とする請求項1〜12の何れか一項に記載の医用画像処理装置。
Diagnostic support information storage means for storing the diagnostic support information in association with the image data of the medical image;
13. The display formatting unit reads out the diagnostic support information stored in the diagnostic support information storage unit and creates the display image based on the diagnostic support information. The medical image processing apparatus according to one item.
前記画像処理手段により前記医用画像に施された画像処理の条件を前記医用画像の画像データと対応付けて保存する画像処理条件保存手段を有し、
前記画像処理手段は、前記画像処理条件保存手段に保存された画像処理条件を読み出して該画像処理条件に基づいて前記処理画像を作成することを特徴とする請求項1〜13の何れか一項に記載の医用画像処理装置。
Image processing condition storage means for storing image processing conditions applied to the medical image by the image processing means in association with image data of the medical image;
The image processing means reads the image processing conditions stored in the image processing condition storage means and creates the processed image based on the image processing conditions. The medical image processing apparatus described in 1.
前記シェーマの画像データを前記医用画像の画像データと対応付けて保存するシェーマ画像データ保存手段を有し、
前記表示用フォーマッティング手段は、前記シェーマ画像保存手段に保存されたシェーマ画像データを読み出して該シェーマ画像データに基づいて前記表示用画像を作成することを特徴とする請求項7〜14の何れか一項に記載の医用画像処理装置。
A schema image data storage means for storing the image data of the schema in association with the image data of the medical image;
The display formatting section, the schema any one of claims 7 to 14, characterized in that said creating a display image on the basis of reading the schema image data stored in the image storage unit to the schema image data The medical image processing apparatus according to Item.
前記表示用フォーマッティング手段は、
前記主画像及び前記副画像の各々についてサイズ調整を行う画像サイズ調整手段と、
前記サイズ調整を行った主画像と副画像を合成する画像合成手段と、
を有することを特徴とする請求項1〜15の何れか一項に記載の医用画像処理装置。
The display formatting means includes:
Image size adjusting means for adjusting the size of each of the main image and the sub-image;
Image combining means for combining the size-adjusted main image and sub-image;
The medical image processing apparatus according to any one of claim 1 to 15, characterized in that it has a.
前記画像サイズ調整手段は、前記副画像の画像サイズが前記主画像の画像サイズに比べて小さくなるようにサイズ調整を行うことを特徴とする請求項16に記載の医用画像処理装置。The medical image processing apparatus according to claim 16 , wherein the image size adjustment unit performs size adjustment so that an image size of the sub-image is smaller than an image size of the main image. 前記画像合成手段は、前記サイズ調整された主画像における所定の領域に、前記サイズ調整された副画像をはめ込む形で合成することを特徴とする請求項16又は17に記載の医用画像処理装置。The medical image processing apparatus according to claim 16 or 17 , wherein the image synthesizing unit synthesizes the size-adjusted sub-image in a predetermined region of the size-adjusted main image. 前記画像合成手段は、前記医用画像の画像属性情報に基づいて、前記サイズ調整された副画像のはめ込み位置を決定することを特徴とする請求項18に記載の医用画像処理装置。19. The medical image processing apparatus according to claim 18 , wherein the image synthesizing unit determines a fitting position of the size-adjusted sub-image based on image attribute information of the medical image. 前記表示用フォーマッティング手段は、前記医用画像を解析することにより被写体領域を認識する被写体領域認識手段を有し、
前記画像合成手段は、前記認識された被写体領域の情報に基づいて、前記サイズ調整された副画像のはめ込み位置を決定する請求項18に記載の医用画像処理装置。
The display formatting means includes subject area recognition means for recognizing a subject area by analyzing the medical image;
19. The medical image processing apparatus according to claim 18 , wherein the image synthesizing unit determines a fitting position of the size-adjusted sub-image based on the recognized subject area information.
前記画像サイズ調整手段は、前記認識された被写体領域の情報に基づいて、前記副画像のサイズを調整することを特徴とする請求項20に記載の医用画像処理装置。21. The medical image processing apparatus according to claim 20 , wherein the image size adjusting unit adjusts the size of the sub-image based on information of the recognized subject area. 前記診断支援情報生成手段は、同一の前記医用画像から、互いに異なる複数の診断支援情報を生成し、
前記画像処理手段または前記シェーマ画像作成手段は、前記複数の診断支援情報の各々について少なくとも一つの副画像を作成することを特徴とする請求項1〜21の何れか一項に記載の医用画像処理装置。
The diagnosis support information generating means generates a plurality of different diagnosis support information from the same medical image,
The medical image processing according to any one of claims 1 to 21 , wherein the image processing unit or the schema image creating unit creates at least one sub-image for each of the plurality of diagnosis support information. apparatus.
医用画像を解析することにより、診断支援情報を生成する工程と、
前記医用画像に少なくとも階調処理を含む画像処理を施して、同一の前記医用画像から少なくとも一つの主画像と少なくとも一つの副画像から成る複数の処理画像を作成する工程と、
前記副画像に対して前記生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する工程と、
前記表示用画像を画像記録装置に出力する工程と、
前記医用画像に施された表示用画像作成条件又は前記作成された表示用画像の画像データを前記医用画像の画像データと対応付けて表示用フォーマット保存手段に保存する工程と、
前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成する工程と、
を含むことを特徴とする医用画像処理方法。
Generating diagnostic support information by analyzing medical images;
Performing image processing including at least gradation processing on the medical image to create a plurality of processed images including at least one main image and at least one sub-image from the same medical image;
Adding an annotation corresponding to the generated diagnosis support information to the sub-image and creating one display image by combining the main image and the sub-image;
Outputting the display image to an image recording device;
Storing the display image creation condition applied to the medical image or the image data of the created display image in the display format storage unit in association with the image data of the medical image;
When re-outputting the display image, reading the display image generation conditions or display image data stored in the display format storage means to create the display image;
The medical image processing method, which comprises a.
医用画像を解析することにより、診断支援情報を生成する工程と、
前記医用画像に少なくとも階調処理を含む画像処理を施すことにより、少なくとも一つの主画像を作成する工程と、
前記医用画像を解析することによりシェーマを自動的に作成し、該シェーマを表した少なくとも一つの副画像を作成する工程と、
前記副画像に対して、前記生成された診断支援情報に対応するアノテーションを付加するとともに、前記主画像及び副画像を合成することにより一枚の表示用画像を作成する工程と、
前記表示用画像を画像記録装置に出力する工程と、
前記医用画像に施された表示用画像作成条件又は前記作成された表示用画像の画像データを前記医用画像の画像データと対応付けて表示用フォーマット保存手段に保存する工程と、
前記表示用画像を再出力する際に、前記表示用フォーマット保存手段に保存された表示用画像生成条件又は表示用画像データを読み出して前記表示用画像を作成する工程と、
を含むことを特徴とする医用画像処理方法。
Generating diagnostic support information by analyzing medical images;
Creating at least one main image by performing image processing including at least gradation processing on the medical image;
Automatically creating a schema by analyzing the medical image and creating at least one sub-image representing the schema;
Adding an annotation corresponding to the generated diagnosis support information to the sub-image, and creating one display image by combining the main image and the sub-image;
Outputting the display image to an image recording device;
Storing the display image creation condition applied to the medical image or the image data of the created display image in the display format storage unit in association with the image data of the medical image;
When re-outputting the display image, reading the display image generation conditions or display image data stored in the display format storage means to create the display image;
A medical image processing method comprising:
JP2003024028A 2003-01-31 2003-01-31 Medical image processing apparatus and medical image processing method Expired - Fee Related JP4356327B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2003024028A JP4356327B2 (en) 2003-01-31 2003-01-31 Medical image processing apparatus and medical image processing method
US10/764,413 US20040151358A1 (en) 2003-01-31 2004-01-23 Medical image processing system and method for processing medical image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003024028A JP4356327B2 (en) 2003-01-31 2003-01-31 Medical image processing apparatus and medical image processing method

Publications (2)

Publication Number Publication Date
JP2004230001A JP2004230001A (en) 2004-08-19
JP4356327B2 true JP4356327B2 (en) 2009-11-04

Family

ID=32952672

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003024028A Expired - Fee Related JP4356327B2 (en) 2003-01-31 2003-01-31 Medical image processing apparatus and medical image processing method

Country Status (1)

Country Link
JP (1) JP4356327B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021177799A1 (en) * 2020-03-05 2021-09-10 (주)제이엘케이 Image-based coronavirus infection quantitative classification method and system

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006122299A (en) * 2004-10-28 2006-05-18 Ge Medical Systems Global Technology Co Llc Ultrasonic imaging apparatus
EP1859413A2 (en) * 2005-02-11 2007-11-28 Philips Intellectual Property & Standards GmbH Analysis of pulmonary nodules from ct scans using the contrast agent enhancement as a function of distance to the boundary of the nodule
JP2006218233A (en) 2005-02-14 2006-08-24 Olympus Corp Endoscope apparatus
JP5268242B2 (en) * 2005-11-01 2013-08-21 株式会社東芝 Medical image display system and medical image display program
JP5361194B2 (en) * 2008-01-09 2013-12-04 キヤノン株式会社 Image processing apparatus, image processing method, and computer program
JP5523791B2 (en) 2008-10-27 2014-06-18 株式会社東芝 X-ray diagnostic apparatus and image processing apparatus
JP5708483B2 (en) * 2009-03-26 2015-04-30 コニカミノルタ株式会社 Interpretation report creation support device and program
JP2012139456A (en) * 2011-01-05 2012-07-26 Olympus Corp Endoscopic image reproducing apparatus
JP5972570B2 (en) * 2011-12-27 2016-08-17 東芝メディカルシステムズ株式会社 Medical image display device and medical image storage system
WO2013137280A1 (en) * 2012-03-12 2013-09-19 株式会社 東芝 Report creation assistance device, and report browsing device
JP6076762B2 (en) * 2013-02-01 2017-02-08 東芝メディカルシステムズ株式会社 Report creation support system and report creation support program
JP5784082B2 (en) * 2013-08-27 2015-09-24 キヤノン株式会社 Diagnosis support apparatus and diagnosis support method
CN105942960B (en) * 2016-07-01 2017-06-16 华中科技大学 A kind of endoscopic system and method that may indicate that ureter position
JP7049474B2 (en) * 2018-09-20 2022-04-06 オリンパス株式会社 Image processing equipment, endoscopic systems, and image processing methods
CN113380386B (en) * 2021-06-17 2024-04-23 南阳柯丽尔科技有限公司 Medical electronic film image adjusting method, device, equipment and storage medium

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021177799A1 (en) * 2020-03-05 2021-09-10 (주)제이엘케이 Image-based coronavirus infection quantitative classification method and system

Also Published As

Publication number Publication date
JP2004230001A (en) 2004-08-19

Similar Documents

Publication Publication Date Title
US7388974B2 (en) Medical image processing apparatus
US20040151358A1 (en) Medical image processing system and method for processing medical image
JP5026939B2 (en) Image processing apparatus and program thereof
JP4356327B2 (en) Medical image processing apparatus and medical image processing method
JP6945474B2 (en) Learning data creation support device, learning data creation support method, and learning data creation support program
JP2004216008A (en) Image diagnosis support device
CN102576471A (en) Generating views of medical images
JP2002162705A (en) Phase contrast radiation image processor
JP2004046594A (en) Device for supporting video diagnosis
JP2004105746A (en) Mammography apparatus
JP2005124617A (en) Medical image diagnosis support system
JP2002044413A (en) Radiographic image processing method and processor thereof
JP2004357866A (en) Medical image processing apparatus and display controlling method
JP4385707B2 (en) Medical image processing system, medical image processing method and program
JP4631260B2 (en) Image diagnosis support apparatus, image diagnosis support method, and program
JP5363962B2 (en) Diagnosis support system, diagnosis support program, and diagnosis support method
JP2006263055A (en) X-ray image processing system and x-ray image processing method
JP4591142B2 (en) Medical imaging system
JP4475054B2 (en) Breast image processing method and breast image output system
JP2006102044A (en) Medical image processing system and medical image processing method
JP2002125961A (en) Diagnostic imaging supporting unit
JP4438305B2 (en) Medical image processing device
JP4639035B2 (en) Image processing apparatus and method, program, computer-readable storage medium
JP2005173818A (en) Medical image diagnostic support system
JP4483250B2 (en) Image diagnosis support apparatus, image diagnosis support method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060118

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080502

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090306

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090714

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090727

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120814

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130814

Year of fee payment: 4

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees