JP2014067343A - 画像処理装置および画像処理方法、並びに、画像処理プログラム - Google Patents

画像処理装置および画像処理方法、並びに、画像処理プログラム Download PDF

Info

Publication number
JP2014067343A
JP2014067343A JP2012213636A JP2012213636A JP2014067343A JP 2014067343 A JP2014067343 A JP 2014067343A JP 2012213636 A JP2012213636 A JP 2012213636A JP 2012213636 A JP2012213636 A JP 2012213636A JP 2014067343 A JP2014067343 A JP 2014067343A
Authority
JP
Japan
Prior art keywords
region
area
histogram
major axis
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012213636A
Other languages
English (en)
Other versions
JP5955723B2 (ja
Inventor
Yuanzhong Li
元中 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2012213636A priority Critical patent/JP5955723B2/ja
Priority to EP13841846.2A priority patent/EP2902969B1/en
Priority to PCT/JP2013/005555 priority patent/WO2014050043A1/ja
Publication of JP2014067343A publication Critical patent/JP2014067343A/ja
Priority to US14/669,382 priority patent/US9483705B2/en
Application granted granted Critical
Publication of JP5955723B2 publication Critical patent/JP5955723B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/162Segmentation; Edge detection involving graph-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/187Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/457Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by analysing connectivity, e.g. edge linking, connected component analysis or slices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/50Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • G06V10/507Summing image-intensity values; Histogram projection analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20072Graph-based image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30096Tumor; Lesion

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Image Analysis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Measurement Of Radiation (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Nuclear Medicine (AREA)
  • Image Processing (AREA)

Abstract

【課題】入力画像から特定領域を精度よく抽出する。
【解決手段】
設定された特定領域RAの長径Lに基づいて、特定領域RAである蓋然性が高いと推定される第1領域R1と背景領域RBである蓋然性が高いと推定される第2領域R2を入力画像内に設定し、第1領域R1内の各画素の濃度ヒストグラムと第2領域R2内の各画素の濃度ヒストグラムとに基づいて、濃度値ごとに、濃度値が特定領域RAを表している確からしさを表す第1評価値を算出し、入力画像I中の隣接する2つの画素ごとに、その隣接する2つの画素にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさを表す第2評価値を算出し、第2評価値に基づいて、入力画像Iの各隣接する2つの画素をそれぞれ表す複数の頂点間の接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより入力画像Iから特定領域RAを抽出する。
【選択図】図3

Description

本発明は、入力画像中の画素の濃度値に基づいて特定領域を抽出する画像処理装置および画像処理方法、並びに、画像処理プログラムに関する。
従来、医療分野においては、高い診断性能を有する画像を提供するために、医用画像中の病変領域、臓器領域等の特定領域を抽出して表示する処理が行われている。
非特許文献1は、腫瘍を治療する際の病気の悪化状況および治療効果判定のための指標として、病変領域の長径およびその長径に直交する方向の最長距離を用いることを推奨している。近年では、病気の治療効果判定を正確に行うために、腫瘍領域などの特定領域のサイズをさらに正確に評価したいという要求もあり、非特許文献2にも示されるように、病気の治療効果判定の指標として病変領域の面積や体積を用いる手法も提案されている。
画像中の特定領域を抽出する方法として、特許文献1などに示すように、ユーザに医用画像中の病変領域内に任意の点を指定させ、その指定された点を基準に判別領域を設定し、その領域内の各画素が病変領域の輪郭を示す画素であるかどうかを評価し、その評価結果に基づいて病変領域の輪郭を決定するようにしたものがある。ここで、各画素が輪郭を示す画素であるかどうかの評価は、輪郭が既知である病変領域を含む多数のサンプル画像を予め機械学習することによって求められた評価関数により行われる。
特開2007−307358号公報
Patrick Therasse, et al,"New Guidelines to Evaluate the Response to Treatment in Solid Tumors", Journal of the National Cancer Institute, 2000, volume 92, No. 3, pp. 205-216 Shingo Iwano, et al,"Semi-automatic Volumetric of Lung Cancer Using Multi-detector CT: Effects of Nodule Characteristics", Academic Radiology, volume 16, No. 10, 2009, pp. 1179-1186
しかしながら、特許文献1に記載された方法では、医用画像中の特定領域内に指定した任意の点に基づいて、サンプル画像の機械学習結果を用いて特定領域を抽出するため、精度よく特定領域の抽出を行うために、特定領域の種類に応じた適切なサンプル画像の機械学習結果を用いる必要があった。このため、このようなサンプル画像の機械学習結果の種類などに左右されず、それぞれ異なる濃度値や形状やサイズなどを有する多様な種類の特定領域を精度よく抽出する技術が求められている。
本発明は、かかる問題点に鑑みて、入力画像から精度よく特定領域を抽出することができる画像処理装置、画像処理方法、及び画像処理プログラムを提供することを目的とする。
上記目的を達成するために、本発明に係る画像処理装置は、特定領域を含む入力画像上で特定領域の長径を設定する長径設定部と、設定された長径に基づいて、特定領域である蓋然性が高いと推定される第1領域を入力画像内に設定し、特定領域以外の領域である蓋然性が高いと推定される第2領域を入力画像内に設定する領域設定部と、第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、第1ヒストグラムと第2ヒストグラムに基づいて、濃度値ごとに、濃度値が特定領域を表している確からしさを表す第1評価値を算出し、入力画像中の隣接する2つの画素ごとに、隣接する2つの画素の濃度値にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する評価部と、特定領域に属する第1の基準頂点と、背景領域に属する第2の基準頂点と、入力画像中の各画素をそれぞれ表す複数の頂点を定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、特定領域を抽出する特定領域抽出部を備えたことを特徴とする。
本発明に係る画像処理方法は、上記画像処理装置に実行させる画像処理方法において、特定領域を含む入力画像上で特定領域の長径を設定する長径設定ステップと、設定された長径に基づいて、特定領域である蓋然性が高いと推定される第1領域を入力画像内に設定し、特定領域以外の領域である蓋然性が高いと推定される第2領域を入力画像内に設定する領域設定ステップと、第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、第1ヒストグラムと第2ヒストグラムに基づいて、濃度値ごとに、濃度値が特定領域を表している確からしさを表す第1評価値を算出し、入力画像中の隣接する2つの画素ごとに、隣接する2つの画素の濃度値にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する評価ステップと、特定領域に属する第1の基準頂点と、背景領域に属する第2の基準頂点と、入力画像中の各画素をそれぞれ表す複数の頂点を定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、特定領域を抽出する特定領域抽出ステップとを有することを特徴とする。
本発明に係る画像処理プログラムは、コンピュータに、上記方法を実行させることを特徴とする。
本発明に係る画像処理装置において、入力画像は、特定領域を1つ以上含むものであればいかなるものであってもよい。例えば、入力画像を、PET、CT、MRI、SPECT、超音波画像などの任意のモダリティで被写体を撮影して得られた医用画像とし、特定領域は病変、腫瘍などの異常陰影領域を表すものとすることができる。
また、本発明に係る画像処理装置において、上記「特定領域の長径」は、特定領域の長径をおおむね表していると認められるものであればよい。例えば、「特定領域の長径」は、入力画像上でユーザが特定領域の長径と判断して入力した、長径を特定する情報に基づいて設定されたものであれば厳密には特定領域の最も長い径と一致しない場合も含む。
また、本発明に係る画像処理装置において、上記「隣接する2つの画素」は、互いに直接隣接している2つの画素だけでなく、画素間の距離が入力画像のサイズに対して隣接していると認められる程度に十分近接している2つの画素を含む。
また、上記「第1領域」は、上記「特定領域の長径」に基づいて、特定領域である蓋然性が高いと推定される領域であれば、任意の大きさおよび任意の形状を有する領域であってよい。また、特定領域である蓋然性を判断可能な任意の推定方法が適用可能である。なお、「第1領域」の位置は、特定領域である蓋然性が高いと推定される位置であれば、入力画像内の任意の位置に配置してよい。また、「第1領域」は、1つの領域から構成されるものであってもよく、複数の領域から構成されるものであってもよい。
例えば、第1領域は、設定された長径を長径とする楕円領域に含まれる領域とすることが好ましい。また、この場合、「設定された長径を長径とする楕円領域に含まれる領域」は、設定された長径の全体をその楕円領域の長径とする楕円領域全体としてもよく、この楕円領域の部分領域としてもよい。
上記「第2領域」は、上記「特定領域の長径」に基づいて、特定領域以外の領域である背景領域である蓋然性が高いと推定される領域であれば、任意の大きさおよび任意の形状を有する領域であってよい。また、特定領域以外の領域である蓋然性を判断可能な任意の推定方法が適用可能である。なお、「第2領域」の位置は、特定領域以外の領域である蓋然性が高いと推定される位置であれば、入力画像内の任意の位置に配置してよい。また、「第2領域」は、1つの領域から構成されるものであってもよく、複数の領域から構成されるものであってもよい。
例えば、第2領域は、設定された長径を直径とする円の外側に位置する所定形状の領域とすることが好ましい。なお、ここでいう「所定形状の領域」とは、設定された長径を直径とする円の外側に位置する所定の拡がりを持った領域であれば任意の形状の領域として設定できる。例えば、設定された長径を直径とする円の外側に所定の幅に広がる輪状の領域であってもよく、設定された長径を直径とする円の外側に位置する矩形などの多角形領域であってもよい。
上記「第1評価値」は、濃度値ごとに、各濃度値が特定領域を表している確からしさを表すものであれば、第1ヒストグラムと第2ヒストグラムに基づいて、任意の方法によって定義されたものであってよい。例えば、第1評価値は、濃度値ごとに、第2ヒストグラムの頻度の値と第1ヒストグラムの頻度の値の比の対数値を表していてもよく、第1評価値は、濃度値ごとに、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差を表していてもよい。
上記「第2評価値」は、入力画像中の画素ごとに、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表すものであれば、隣接する2つの画素の濃度値にそれぞれ対応する第1評価値に基づいて、任意の方法によって定義されたものであってよい。例えば、第2評価値が、隣接する2つの画素にそれぞれ対応する第1評価値との差が大きくなるほど、輪郭らしさが大きくなるように算出されることが好ましい。
また、本発明の画像処理装置において、特定領域抽出部は、特定領域に属する第1の基準頂点と、背景領域に属する第2の基準頂点と、入力画像中の各画素をそれぞれ表す複数の頂点を定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、特定領域を抽出する任意の方法を用いることができる。例えば、入力画像を、特定領域に属する第1の基準頂点と、背景領域に属する第2の基準頂点と、各画素をそれぞれ表す複数の頂点と、各頂点をつなぐ辺とで定義してグラフとして表し、グラフカット法を用いて、グラフの各頂点の接続コストの総和を表す所定の評価関数を最小化することによりグラフの接続コストを最小化して、グラフを特定領域と背景領域に分割することにより、特定領域を抽出することができる。なお、所定の評価関数として、グラフカット法に適用可能な任意の評価関数を用いることができる。
また、「第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、」とは、第1の基準頂点と画素を表す頂点間の接続しやすさを表す接続コストと、第2の基準頂点と画素を表す頂点間の接続しやすさを表す接続コストと、複数の画素をそれぞれ表す複数の頂点間の接続しやすさを表す接続コストから選択される接続コストの少なくとも一部が、第2評価値に基づいて設定されていることを意味する。
例えば、本発明の画像処理装置において、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素にそれぞれ対応する頂点が接続されにくくなるように接続コストが設定されることが好ましい。
また、本発明の画像処理装置において、設定された長径に基づいて、長径から所定の範囲内に位置する頂点と第1の基準頂点とが接続されやすくなるように接続コストが設定されることが好ましい。なお、上記所定の範囲とは、特定領域に属する蓋然性の高い任意の範囲に設定でき、長径との距離が小さい範囲であることが好ましい。例えば、長径上に位置する画素に対応する頂点である第1の頂点の接続コストが、第1の基準頂点と接続されやすくなるように設定されることが好ましい。
また、本発明の画像処理装置において、設定された長径に基づいて、長径の延びる方向に長径の両端より外側に位置する画素に対応する頂点と、第2の基準頂点とが接続されやすくなるように接続コストが設定されることが好ましい。なお、ここでいう「長径の延びる方向に」とは、長径の延びる方向と厳密に一致する必要はなく、例えば長径から30度以下の傾きを有する方向とすることができる。例えば、長径の延長線上であって、直径の両端より外側に位置する画素に対応する頂点である第2の頂点が第2の基準頂点と接続されやすくなるように接続コストが設定されることが好ましい。
また、頂点の接続コストが「接続されやすくなるように設定され」とは、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されやすいと評価するものである場合には、接続コストが相対的に大きくなるよう設定されることを意味し、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されにくいと評価するものである場合には、接続コストが相対的に小さくなるよう設定されることを意味する。また、接続コストが「接続されにくくなるように設定され」とは、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されやすいと評価するものである場合には、接続コストが相対的に小さくなるよう設定されることを意味し、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されにくいと評価するものである場合には、接続コストが相対的に大きくなるよう設定されることを意味する。
本発明による画像処理装置および方法並びにプログラムによれば、設定された特定領域の長径に基づいて、特定領域である蓋然性が高いと推定される第1領域と特定領域以外の領域である蓋然性が高いと推定される第2領域を入力画像内に設定し、設定された第1領域内の各画素の濃度ヒストグラムと第2領域内の各画素の濃度ヒストグラムとを算出し、これらの濃度ヒストグラムに基づいて、濃度値ごとに、濃度値が特定領域を表している確からしさを表す第1評価値を算出し、入力画像中の画素ごとに、隣接する2つの画素の濃度値にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出し、特定領域に属する第1の基準頂点と、背景領域に属する第2の基準頂点と、入力画像中の各画素をそれぞれ表す複数の頂点を定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、特定領域を抽出している。このため、特定領域の長径を特定する情報を有効に利用して、精度よく特定領域の抽出を行うことができる。
本発明の一実施形態における画像処理装置の電気的な概略ブロック図である。 本発明の一実施形態において、特定領域に設定された長径の一例を示す図である。 図2で示された長径に基づいて設定された第1領域と第2領域の一例を示す図である。 本発明の一実施形態における第1ヒストグラムの一例を示す図である。 本発明の一実施形態における第2ヒストグラムの一例を示す図である。 図4Bに示す第2ヒストグラムの頻度に対する図4Aに示す第1ヒストグラムの頻度の比の対数値(第1評価値の一例)を示す図である。 図4Aに示す第1ヒストグラムの頻度と図4Bに示す第2ヒストグラムの頻度の差(第1評価値の他の一例)を示す図である。 本発明の一実施形態における特定領域抽出処理を説明する図である。 本発明の一実施形態における画像処理装置の動作を示すフローチャートである。 本発明の画像処理装置により抽出された腫瘍の例を説明する図である。
以下、本発明の画像処理装置、画像処理プログラムおよび画像処理方法の実施形態について、図面を参照しながら詳細に説明する。本発明は、入力画像中の特定領域を抽出する処理を行う様々な分野で応用可能であるが、ここでは、医療分野における画像診断における異常陰影領域の抽出に本発明を適用した例をもとに説明を行う。
図1に、医師が使用するワークステーションに、画像処理プログラムをインストールすることにより実現された画像処理装置の概略構成を示す。画像処理装置1は、標準的なワークステーションの構成として、プロセッサおよびメモリ(いずれも図示せず)を備え、さらに、HDD(Hard Disk Drive)等のストレージ2を備えている。また、画像処理装置1には、ディスプレイ3と、マウス、キーボード等の入力装置4が接続されている。
画像処理プログラムと画像処理プログラムが参照するデータは、インストール時にストレージ2に記憶され、起動時にメモリにロードされる。画像処理プログラムは、CPUに実行させる処理として、画像取得処理と、長径設定処理と、領域設定処理と、評価処理と、特定領域抽出処理と、表示制御処理とを規定している。
そして、プログラムの規定にしたがって、CPUが上記各処理を実行することにより、汎用のワークステーションは、後述の画像取得部11と、長径設定部12と、領域設定部13と、評価部14と、特定領域抽出部15と、表示制御部16として機能する。
画像取得部11は、入力画像Iをストレージ2からメモリに取得する。ストレージ2には、撮影を担当する検査部門から転送された、もしくはデータベース検索により取得されたボリュームデータが記憶されている。本実施の形態では、ある患者の検査において、患者の腹部をCT撮影して得られた、複数のスライス画像から構成されるボリュームデータVが検査部門から転送され、ストレージ2に記憶されている。本実施形態においては、画像取得部11は、ボリュームデータVに含まれる個々のスライス画像をそれぞれ入力画像Iとして取得する。そして、各スライス画像に対して本画像処理装置による画像処理が個々に行われるものとする。
長径設定部12は、上記画像処理プログラムに係る所定の選択メニューにおいて長径入力機能が選択されたことを検出すると、ユーザに、長径の特定に必要な情報の選択または入力を促す。そして、ユーザの入力装置4の操作により、長径Lの両端の位置が特定されると、画像取得部11は、長径Lの両端の位置の座標を、特定領域RAの長径Lを特定する情報として、メモリに取得する。図2は、入力画像I中の特定領域RA内に長径Lが設定された例を示す図である。
なお、上記に限定されず、長径設定部12は、自動的に長径Lを計測する任意の方法によって取得された長径Lを特定する情報を用いてもよい。
領域設定部13は、設定された長径Lに基づいて、特定領域RAである蓋然性が高いと推定される第1領域R1を入力画像Iの中に設定し、特定領域RA以外の領域である背景領域RBである蓋然性が高いと推定される第2領域R2を入力画像Iの中に設定する。図3は、図2に示された長径Lに基づいて、第1領域R1と第2領域R2が設定された例を示す図である。
第1領域R1は、特定領域RAである蓋然性が高いと推定される領域である。入力画像I中の特定領域RAである異常陰影領域は、長径Lの中点を中心に広がる領域である可能性が高いため、長径Lの近傍の領域は特定領域RAである可能性が高いと推定できる。このため、本実施形態では、図3に示すように、長径Lの近傍を含む所定の形状である楕円領域を第1領域R1とする。また、楕円領域の短径は、長径Lに所定の比率を乗算した値に設定される。長径Lの近傍を含む所定の形状である楕円領域に含まれる領域を第1領域R1とすることにより、特定領域RAである蓋然性が高い領域を簡易かつ好適に第1領域R1として設定することができるからである。
なお、ここでは、第1領域R1は、設定された長径の全体をその楕円領域の長径そのものとする楕円領域として設定されるが、例えば、上記楕円領域の部分領域を第1領域R1として設定してもよい。
第1領域R1は、長径Lに基づいて、特定領域RAである蓋然性が高いと推定される領域であれば、任意の大きさおよび任意の形状を有する領域であってよく、任意の位置に配置されてよい。また、上記第1領域R1を、長径Lの近傍を含み、背景領域RBを含みにくい形状とすることが好ましい。また、特定領域RAである蓋然性を判断可能な任意の推定方法が適用可能である。また、「第1領域」は、1つの領域から構成されるものであってもよく、複数の領域から構成されるものであってもよい。
第2領域R2は、背景領域RBである蓋然性が高いと推定される領域である。先述の通り、医用画像中の特定領域RAである異常陰影領域は長径Lの中点を中心に広がる領域である可能性が高く、長径Lは長径の延びる方向に特定領域RAの最大径を表していると判断できるため、長径Lより外側では、特定領域RAが存在しないか、または、特定領域RAに含まれる領域よりも背景領域RBに含まれる領域の割合が相対的に大きいと推定できる。
このため、第2領域R2を、設定された長径Lを直径とする円C1の外側に位置する所定形状の領域として設定することにより、長径Lの情報を利用して、簡易かつ好適に背景領域RBである蓋然性が高い領域を第2領域R2とすることができる。なお、所定形状の領域は、円C1の外側に位置する所定の拡がりを持った領域であれば任意の形状の領域として設定できる。例えば、円C1の外側に位置する矩形などの多角形領域であってもよい。
本実施形態では、図3に示すように、第2領域R2を、設定された長径を直径とする円C1の外側に広がる輪状の領域として設定する。なお、本実施形態において、第2領域R2は、設定された長径Lを直径とする円C1と、長径Lよりも長い直径を有する円C2との間の輪状領域として設定される。円C2の中心は円C1の中心と一致するように設定され、円C2の直径の長さは設定された長径Lの長さに1より大きい所定の比率を乗算することにより設定される。
第2領域R2は、上記長径Lに基づいて、特定領域以外の領域である蓋然性が高いと推定される領域であれば、任意の大きさおよび任意の形状を有する領域であってよく、任意の位置に配置されてよい。また、特定領域RA以外の領域である蓋然性を判断可能な任意の推定方法が適用可能である。また、第2領域R2は、1つの領域から構成されるものであってもよく、複数の領域から構成されるものであってもよい。
さらに、評価部14は、第1領域内R1の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域R2内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、第1ヒストグラムと第2ヒストグラムに基づいて、濃度値ごとに、濃度値が特定領域RAを表している確からしさを表す第1評価値を算出する。
図4Aは、本実施形態における第1ヒストグラムの一例を示す図であり、図4Bは、本実施形態における第2ヒストグラムの一例を示す図であり、図4Cは、本実施形態における第1評価値の例を示す図である。
第1ヒストグラムは、特定領域である蓋然性が高い領域(第1領域R1)の濃度値のみを用いて算出した濃度ヒストグラムである。このため、第1ヒストグラムにおける頻度は、その濃度値が特定領域RAを表している確からしさを表していると考えられる。つまり、第1ヒストグラムにおいて頻度が大きいほど、その頻度に対応する濃度値は、特定領域を表す確からしさが大きくなると考えられる。
第2ヒストグラムに表す頻度は、は、背景領域である蓋然性が高い領域(第2領域R2)の濃度値のみを用いて算出した濃度ヒストグラムである。このため、第2ヒストグラムにおける頻度は、その濃度値が背景領域RBを表している確からしさを表していると考えられる。言い換えると、第2ヒストグラムにおいて頻度が大きいほど、その頻度に対応する濃度値は、背景領域RBを表す確からしさが大きくなると考えられる。また、第2ヒストグラムにおいて頻度に応じて背景領域RBを表す確からしさが大きくなると、これに伴って特定領域である確からしさが小さくなると考えられる。
なお、第1ヒストグラムと第2ヒストグラムは、縦軸同士のスケールと横軸同士のスケールがそれぞれ一致するように正規化されることが好ましい。後述の第1評価値が、第1ヒストグラムと第2ヒストグラムを互いに比較することにより算出されるためである。ここでは、第1ヒストグラムと第2ヒストグラムの表す濃度値の範囲が一致するように正規化される。具体的には、両ヒストグラムの濃度値の範囲が調整され、第1ヒストグラムの算出に用いられた全画素数は、第2ヒストグラムの算出に用いられた全画素数と一致するように適宜調整される。
第1評価値は、第1ヒストグラムと第2ヒストグラムとに基づいて、濃度値ごとに、各濃度値が特定領域RAを表す確からしさを表すものである。本実施形態では、評価部14は、同じ濃度値範囲ごとに、第2ヒストグラムの頻度の値に対する第1ヒストグラムの頻度の値の比の対数値を第1評価値として算出する。第1評価値は、背景領域RBである確からしさに対する特定領域である確からしさの比であるため、濃度値ごとに特定領域RAを好適に表している確からしさを表していると考えられる。例えば、第1評価値が1以上の場合には背景領域らしさよりも特定領域らしさが相対的に大きいため、特定領域らしさが高いと評価でき、第1評価値が大きくなるほど特定領域RAを表す確からしさが大きくなると評価できる。
なお、上記実施形態に限定されず、第1評価値は、濃度値ごとに、各濃度値が特定領域を表している確からしさを表すものであれば、第1ヒストグラムと第2ヒストグラムに基づいて、任意の方法によって定義されたものであってよい。例えば、評価部14は、同じ濃度値範囲ごとに、第1ヒストグラムの頻度の値に対する第2ヒストグラムの頻度の値の比の対数値を第1評価値として算出してもよい。この場合には、第1評価値は、特定領域である確からしさに対する背景領域RBである確からしさの比であるため、例えば、第1評価値が1以下の場合には特定領域らしさが高いと評価でき、第1評価値が大きくなるほど特定領域RAを表す確からしさが小さくなると考えられる。
第1ヒストグラムと第2ヒストグラムを用いて、各濃度値が特定領域を表している確からしさを表すように第1評価値を算出した場合は、背景領域RBである確からしさと特定領域である確からしさの両方に基づいて、特定領域である確からしさの評価値である第1評価値を算出しているため、第1評価値によって精度よく特定領域である確からしさを表すことができる。
また、第1評価値が、濃度値ごとに、第1ヒストグラムの頻度の値に対する第2ヒストグラムの頻度の値の比の対数値を表すものとした場合には、簡易に第1評価値を算出できる。また、第1評価値を、濃度値ごとに、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差を表すものとした場合にも、同様の効果が得られる。
図4Dは、本実施形態における第1評価値の他の例を示す図である。図4Dのように、例えば、第1評価値を、濃度値ごとに、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差を表すものとしてもよい。上述のように、第2ヒストグラムにおける頻度は、その濃度値が背景領域RBを表している確からしさを表しているため、第2ヒストグラムにおける頻度は、特定領域でない確からしさを示しているとも考えることができる。このため、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差は、特定領域を表す確からしさと特定領域でない確からしさとの差を表すものとなり、この差を第1評価値とした場合にも、第1評価値は特定領域を表す確からしさを表しているといえる。図4Dのように、第1評価値を、第1ヒストグラムの頻度の値から第2ヒストグラムの頻度の値を減算した値を表すようにした場合にも、第1評価値が大きいほど特定領域らしさが大きくなると評価できる。
また、評価部14は、入力画像中の隣接する2つの画素ごとに、その2つの画素の濃度値に基づいて、隣接する2つの画素のそれぞれの第1評価値を取得し、取得された隣接する2つの画素にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する。
ここで、隣接する2つの画素が輪郭を表す輪郭らしさは、隣接する2つの画素が互いに異なる2つの領域(特定領域RAと背景領域RB)にそれぞれ属する確からしさと捉えることができる。そして、特定領域RAに位置する画素と、背景領域RBに位置する画素とでは特定領域である確からしさである第1の評価値が異なる値を取る可能性が高いと推定できる。このため、2つの隣接する画素が両方とも特定領域RA(または背景領域RB)に属する場合よりも、2つの隣接する画素の一方が特定領域RAに属し、他方が背景領域RBに属する場合の方が、2つの隣接する画素にそれぞれ対応する第1評価値の差が大きくなると考えられる。このことを利用して、本実施形態では、入力画像I中の画素の第1評価値と、その画素に隣接する隣接画素の第1評価値との差の絶対値を第2評価値として算出し、第2評価値が大きくなるほど、その隣接する2つの画素が輪郭を表している確からしさである輪郭らしさが大きくなると評価する。
なお、上記実施形態に限定されず、第2評価値は、入力画像中の互いに隣接する2つの画素ごとに、その画素のペアが輪郭を表している確からしさ(輪郭らしさ)を表すものであれば、互いに隣接する2つの画素にそれぞれ対応する第1評価値に基づいて、任意の方法によって定義されたものであってよい。
上記のように、評価部14が、入力画像中の画素ごとに、特定領域らしさを表す第1評価値に基づいて、入力画像I内の隣接する2つの画素ごとに、隣接する画素のペアの特定領域らしさの差(第1評価値の差)が大きくなるほど、輪郭らしさを表す第2評価値が大きくなるように第2評価値を算出している場合には、簡易かつ好適に輪郭らしさを表す第2評価値を算出できる。これに対し、例えば、輪郭らしさを、隣接する2つの画素の濃度値の差の情報だけに基づいて、隣接する2つの画素の濃度値の差が大きいほど輪郭らしさが大きいと定義した場合には、例えば図7で示す入力画像Iのように特定領域RAまたは背景領域RB内で濃度値が変動する画像Iの輪郭を正確に判別することが難しい。
特定領域抽出部15は、特定領域RAに属する第1の基準頂点Sと、特定領域RBに属する第2の基準頂点Tと、入力画像I中の各画素をそれぞれ表す複数の頂点Nijを定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、特定領域RAを抽出するものである。
本実施形態では、特定領域抽出部15は、図5に示すように、入力画像Iを、特定領域RAに属する第1の基準頂点S(頂点S)と、特定領域RBに属する第2の基準頂点T(頂点T)と、入力画像I中の各画素を表す複数の頂点Nijと複数の頂点間を結ぶ辺とで構成されるグラフとして定義し、第2評価値に基づいて、互いに隣接する2つの画素の輪郭らしさが大きくなるほど、その画素に対応する頂点とその隣接する画素に対応する頂点とが接続されにくくなるように接続コストを設定し、接続コストに基づいて、グラフカット法によりグラフから特定領域RAを抽出する。なお、図5におけるグラフは、説明のために頂点の間隔や頂点の個数が簡略化されている。また、グラフカット法の詳細については、特許文献1にも記載されている。
入力画像Iの全領域を判別領域Dとすると、特定領域抽出部15は、図5に示すように、まず、判別領域D中の各画素を表す頂点Nijと、各画素が取り得るラベルを表す頂点S、Tと、隣接する画素の頂点同士をつなぐ辺からなるn−linkと、各画素を表す頂点Nijと特定領域を表す頂点Sまたは背景領域RBを表す頂点Tとをつなぐ辺からなるt−linkと、から構成されるグラフを作成する。
ここで、n−linkは、隣接する画素が同一領域の画素である確からしさを接続コストの大きさ(図5中における辺の太さ)で表すものである。ここでは、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素に対応する頂点が互いに接続されにくくなるように(辺が細くなるように)、n−linkの接続コストが設定されている。なお、上記n−linkの接続コストは、隣接する画素間の距離または濃度値の差などに基づいて、さらに重み付けされてもよい。また、ここでは、頂点間の辺の太さは、接続コストの大きさを示しており、辺が太いほど大きい接続コストが設定されているものとする。
各画素を表す頂点Nijと特定領域RAを表す頂点Sをつなぐt−linkは、各画素が特定領域RAに含まれる画素である確からしさを表すものであり、各画素を表す頂点Nijと背景領域RBを表す頂点Tをつなぐt−linkは、各画素が背景領域RBに含まれる画素である確からしさを表すものである。
本実施形態では、設定された長径Lを特定する情報を利用して、その画素が特定領域RAに属すると判別できる場合には、その画素に対応する頂点が特定領域RAを表す頂点Sに接続されやすくなるように(その画素に対応する頂点と特定領域RAを表す頂点Sを結ぶ辺が太くなるように)、t−linkの接続コストを設定する。また、その画素が背景領域RBに属すると判別できる場合には、その画素に対応する頂点が背景領域RBを表す頂点Tに接続されやすくなるように(その画素に対応する頂点と背景領域RBを表す頂点Tを結ぶ辺が太くなるように)、t−linkの接続コストを設定する。
具体的には、以下の4つの条件(1)〜(4)に基づいて、t−linkの接続コストを設定する。
(1)長径L上に位置する画素に対応する頂点(第1の頂点)は、特定領域RAに属する可能性が高い画素であるため、頂点Sと接続されやすくなるように接続コストが設定される。
(2)長径Lの延長線上であって、長径Lの両端より外側に位置する画素に対応する頂点(第2の頂点、図5における破線L1上に位置する頂点)は、背景領域RBに属する可能性が高い画素であるため、頂点Tと接続されやすくなるように接続コストが設定される。
(3)入力画像中の第2領域R2の外側の輪郭に位置する画素に対応する頂点(第3の頂点、図5における円C2上に位置する頂点)は、背景領域RB(特定領域以外の領域)に属する可能性が高い画素であるため、頂点Tと接続されやすくなるように接続コストが設定される。
(4)入力画像Iを表すグラフを構成する頂点のうち、第1から第3の頂点のいずれにも該当しない頂点は、頂点Sおよび頂点Tの両方に接続されにくくなるように接続コストが設定される。
図5に示す例では、N33、N34、N35、N36が第1の頂点に相当し、上記条件(1)に基づいて頂点Sと接続されている。また、N31、N32、N37、N38が第2の頂点に相当し、上記条件(2)に基づいて頂点Tと接続されている。また、N13、N15、N21、N48、N54、N56が第3の頂点に相当し、上記条件(3)に基づいて頂点Tと接続されている。また、図5に示す上記第1から第3の頂点に該当しない頂点は、頂点Sおよび頂点Tの両方に接続されないように(接続コストが0となるように)設定されている。
特定領域RAは、長径Lを中心に広がっている可能性が高いと推定される。このため、上記(1)のように、長径L上に位置する頂点(第1の頂点)は特定領域RAに属する可能性が高いと判別して、第1の頂点を頂点Sに接続されやすくなるように接続コストを設定した場合には、設定された長径Lを特定する情報を好適に利用して、精度よく入力画像を表すグラフから特定領域RAを抽出することができる。
なお、上記条件(1)に換えて、設定された長径Lに基づいて、長径Lから所定の範囲内に位置する頂点と頂点Sとが接続されやすくなるように任意の方法で接続コストを決定してもよい。なお、上記所定の範囲とは、特定領域に属する蓋然性の高い任意の範囲に設定でき、長径との距離が小さい範囲であることが好ましい。
また、長径Lは、長径Lの延びる方向の特定領域RAの最大径を表していると判断できるため、長径Lの延びる方向に、長径Lの両端より外側には特定領域RAが存在する可能性は低いと考えられる。このため、上記(2)のように、長径Lの延長線上であって、長径Lの両端より外側に位置する頂点(第2の頂点)を背景領域RBに属する可能性が高いと判別して、第2の頂点を頂点Tに接続されやすくなるようにした場合にも、設定された長径Lを特定する情報を好適に利用して、精度よく入力画像を表すグラフから特定領域RAを抽出することができる。
なお、上記条件(2)に換えて、設定された長径Lに基づいて、長径Lの延びる方向に、長径Lの両端より外側に位置する画素に対応する頂点とT頂点とが接続されやすくなるように任意の方法で接続コストを設定してもよい。
また、設定された長径Lから十分離れた領域に位置する頂点は背景領域Bに属する可能性が高いと考えられる。このため、上記(3)のように、背景領域RBである蓋然性が高い領域である第2領域R2の外側の輪郭に位置する頂点(第3の頂点)を背景領域RBに属する可能性が高いと判別して、第3の頂点を頂点Tに接続されやすくなるように接続コストを設定した場合には、第3の頂点は長径Lから十分離間して位置するものであるため、設定された長径Lを特定する情報を好適に利用して、精度よく入力画像を表すグラフから特定領域RAを抽出することができる。
なお、上記(3)に換えて、設定された長径Lに基づいて、長径Lから所定の距離以上離れて位置する頂点と頂点Tとが接続されやすくなるように任意の方法で接続コストを決定してもよい。なお、上記所定の距離とは、背景領域RBに属する蓋然性の高い任意の範囲に設定でき、長径Lとの距離が大きい範囲であることが好ましい。
本実施形態に限定されず、特定領域RAと背景領域RBを分離可能にt−linkの接続コストを設定可能であればあらゆる方法でt−linkの接続コストを設定してよい。このために、特定領域RAと背景領域RBを分離可能にt−linkの接続コストを設定可能な範囲で、上記(1)から(4)に基づく接続コストの設定の一部または全てを省略してもよく、上記(1)から(4)に基づく接続コストの設定の一部または全てに換えて別の手法で接続コストを設定してもよい。
なお、上記t−linkの接続コストの設定は、その画素が特定領域RA又は背景領域RBのいずれかを示す画素であるかの情報がすでに与えられている場合には、その与えられた情報に従って任意の方法で設定できる。また、そのような情報が与えられてない場合には、特定領域RAまたは背景領域RBを示す画素であることが既知である1以上の画素における濃度値の統計的な特徴に基づいて算出してもよい。
そして、特定領域抽出部15は、上記のグラフにおけるt−linkとn−linkの接続コストの総和を表す評価関数Fを、最大流最小切断法などのグラフカット法に適用可能な周知の方法により最小化することにより領域分割をする。この結果、図5に点線で示すように、全てのt−linkおよびn−linkのうち適当なリンクが切断されて、頂点Sが頂点Tから切り離され、入力画像は特定領域RAと背景領域RBに分割される。
表示制御部16は、入力画像I、上記画像処理の過程で作成された諸画像、抽出された特定領域RAなどを、ユーザの指示やプログラムの要求などの必要に応じて適宜ディスプレイ3に表示するよう指示するものである。
図6は、本実施形態の画像処理装置1の処理の流れを示すフローチャートである。以下、図6に従って、本実施形態の画像処理装置1の各処理を順に説明する。
まず、画像取得部11が、入力画像Iをストレージ2から取得する(S01)。次いで、長径設定部12が、ユーザ操作により入力された長径を特定する情報を受け取ることにより長径Lを設定する(S02)。領域設定部13は、設定された長径Lに基づいて、長径Lを長径とする楕円領域である第1領域R1と、長径Lを直径とする円C1と円C2との間の輪状領域である第2領域R2を設定する(S03)。
次に、評価部14は、第1領域R1における各画素の濃度値に基づいて第1ヒストグラムを作成し、第2領域R2における各画素の濃度値に基づいて第2ヒストグラムを作成して、両ヒストグラムを正規化する(S04)。そして、評価部14は、濃度値ごとに、第2ヒストグラムの頻度の値に対する第1ヒストグラムの頻度の値の比の対数値を、特定領域RAを表す確からしさを表す第1評価値として算出する(S05)。さらに、評価部14は、入力画像Iにおける隣接する2つの画素ごとに、隣接する2つの画素にそれぞれ対応する第1評価値の差の絶対値を、輪郭らしさを表す第2評価値として算出する(S06)。
次いで、特定領域抽出部15は、入力画像Iを、特定領域RAに属する第1の基準頂点Sと、背景領域RAに属する第2の基準頂点Tと、入力画像I中の各画素を表す複数の頂点と複数の頂点間を結ぶ辺とで構成されるグラフとして定義する。そして、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素にそれぞれ対応する頂点が互いに接続されにくくなるようにn−linkの接続コストを設定する。また、設定された長径Lに基づいて、特定領域RAに属すると推定される第1の頂点が特定領域RAを表す頂点Sと接続され、背景領域RBに属すると推定される第2の頂点および第3の頂点が背景領域RBを表す頂点Tと接続されるようにt−linkの接続コストを設定する。そして、接続コストに基づいて、評価関数Fを最小化することによりグラフを分割し、入力画像Iから特定領域を抽出する(S07)。
そして、表示制御部16は、抽出された特定領域RAをディスプレイに表示して(S08)、処理を終了する。以上のように領域分割して抽出した特定領域RAの一例を図7に示す。
以上、本実施形態の画像処理装置1によれば、特定領域RAの長径Lを特定する情報を有効に利用して、第1領域R1と第2領域R2を適切に設定し、第1領域R1と第2領域R2の画素の濃度ヒストグラムに基づいて第1評価値を算出し、第1評価値に基づいて隣接する2つの画素の輪郭らしさである第2評価値を算出し、第2評価値に基づいて特定領域を抽出しているため、特定領域の形状や大きさに関して機械学習結果などの情報がない場合でも、精度よく特定領域の抽出を行うことができる。
また、長径設定部12が、上記実施形態のようにユーザ入力に基づいて長径Lを設定している場合には、入力画像に対するユーザの判断を利用できるため、より正確に長径Lを設定できる。
また、領域設定部13が、特定領域RAが長径Lの中点を中心に広がる領域であり、長径Lの長さが長径Lの延びる方向の特定領域RAの最大径であるという判断に基づいて、第1領域R1を長径Lを長径とする楕円とし、第2領域R2を長径Lを直径とする円C1の外側に広がる領域として設定しているため、評価部14は、長径Lの情報を好適に利用して、特定領域らしさを表す第1評価値をより精度よく算出することができ、この第1評価値に基づいて輪郭らしさを表す第2評価値を正確に算出することができる。
そして、特定領域抽出部15が、特定領域RAに属する第1の基準頂点Sと、背景領域RAに属する第2の基準頂点Tと、入力画像Iの画素をそれぞれ表す複数の頂点を定義し、この第2評価値を用いて、隣接する2つの画素の輪郭らしさが大きい場合には、隣接する2つの画素を表す頂点が接続されにくくなるように接続コストを設定して、接続コストに基づいて複数の頂点をそれぞれ接続することにより、輪郭らしさが大きい2つの画素間で、精度よく特定領域RAと背景領域RBが適切に分離されやすくなり、特定領域RAを精度良く抽出することができる。
また、上記の実施形態では、特定領域抽出部15が、特定領域RAに属する可能性が高い画素に対応する頂点と、背景領域RBに属する可能性が高い画素に対応する頂点を第1から第3の頂点として好適に判別し、判別された第1から第3の頂点を、適宜特定領域RAを表す第1の基準頂点または背景領域RBを表す第2の基準頂点に接続されやすくなるように各頂点を接続しているため、長径Lの情報を好適に利用して、より精度よく特定領域を抽出することができる。
上記の各実施形態はあくまでも例示であり、上記のすべての説明が本発明の技術的範囲を限定的に解釈するために利用されるべきものではない。
この他、上記の実施形態におけるシステム構成、ハードウェア構成、処理フロー、モジュール構成、ユーザインターフェースや具体的処理内容等に対して、本発明の趣旨から逸脱しない範囲で様々な改変を行ったものも、本発明の技術的範囲に含まれる。
また、画像処理装置1は、複数台のコンピュータにより、上記各部としての機能を分担する構成としてもよい。また、入力装置、ディスプレイ等、システムを構成する装置としては、公知のあらゆる装置を採用することができる。
1 画像処理装置、 2 ストレージ、 3 ディスプレイ(表示装置)
4 入力装置
11 画像取得部
12 長径設定部
13 領域設定部
14 第1評価部
15 特定領域抽出部
16 表示制御部
R1 第1領域
R2 第2領域
RA 特定領域
RB 背景領域
I 入力画像
L 長径

Claims (11)

  1. 特定領域を含む入力画像上で前記特定領域の長径を設定する長径設定部と、
    設定された前記長径に基づいて、前記特定領域である蓋然性が高いと推定される第1領域を前記入力画像内に設定し、前記特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域を前記入力画像内に設定する領域設定部と、
    前記第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、前記第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、前記第1ヒストグラムと前記第2ヒストグラムに基づいて、濃度値ごとに、該濃度値が前記特定領域を表している確からしさを表す第1評価値を算出し、前記入力画像中の隣接する2つの画素ごとに、該隣接する2つの画素の濃度値にそれぞれ対応する前記第1評価値に基づいて、前記隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する評価部と、
    前記特定領域に属する第1の基準頂点と、前記背景領域に属する第2の基準頂点と、前記入力画像中の各画素をそれぞれ表す複数の頂点とを定義し、前記第2評価値に基づいて、前記各頂点間の接続しやすさを表す接続コストを設定し、設定された該接続コストに基づいて前記各頂点を接続して、前記特定領域を抽出する特定領域抽出部とを備えたことを特徴とする画像処理装置。
  2. 前記第1評価値が、前記第1ヒストグラムの頻度の値と前記第2ヒストグラムの頻度の値の比の対数値を表していることを特徴とする請求項1記載の画像処理装置。
  3. 前記第1評価値が、前記第1ヒストグラムの頻度の値と前記第2ヒストグラムの頻度の値との差を表していることを特徴とする請求項1記載の画像処理装置。
  4. 前記入力画像中の画素ごとに、前記隣接する2つの画素の前記第1評価値の差が大きくなるほど、前記輪郭らしさが大きくなるように前記第2評価値が算出されることを特徴とする請求項1から3のいずれか1項記載の画像処理装置。
  5. 前記第2評価値に基づいて、前記隣接する2つの画素の前記輪郭らしさが大きくなるほど、前記隣接する2つの画素にそれぞれ対応する前記頂点が接続されにくくなるように前記接続コストが設定されることを特徴とする請求項1から4のいずれか1項記載の画像処理装置。
  6. 設定された前記長径に基づいて、前記長径から所定の範囲内に位置する前記頂点と前記第1の基準頂点とが接続されやすくなるように前記接続コストが設定されることを特徴とする請求項1から5のいずれか1項記載の画像処理装置。
  7. 設定された前記長径に基づいて、該長径の延びる方向に前記長径の両端より外側に位置する画素に対応する前記頂点と前記第2の基準頂点とが接続されやすくなるように前記接続コストが設定されることを特徴とする請求項1から6のいずれか1項記載の画像処理装置。
  8. 前記第1領域が、設定された前記長径を長径とする楕円領域に含まれる領域であることを特徴とする請求項1から7のいずれか1項記載の画像処理装置。
  9. 前記第2領域が、設定された前記長径を直径とする円の外側に位置する、所定形状の領域であることを特徴とする請求項1から8のいずれか1項記載の画像処理装置。
  10. 画像処理装置における画像処理方法であって、
    特定領域を含む入力画像上で前記特定領域の長径を設定する長径設定ステップと、
    設定された前記長径に基づいて、前記特定領域である蓋然性が高いと推定される第1領域を前記入力画像内に設定し、前記特定領域以外の領域である蓋然性が高いと推定される第2領域を前記入力画像内に設定する領域設定ステップと、
    前記第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、前記第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、前記第1ヒストグラムと前記第2ヒストグラムに基づいて、濃度値ごとに、該濃度値が前記特定領域を表している確からしさを表す第1評価値を算出し、前記入力画像中の隣接する2つの画素ごとに、該隣接する2つの画素の濃度値にそれぞれ対応する前記第1評価値に基づいて、前記隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する評価ステップと、
    前記特定領域に属する第1の基準頂点と、前記背景領域に属する第2の基準頂点と、前記入力画像中の各画素をそれぞれ表す複数の頂点とを定義し、前記第2評価値に基づいて、前記各頂点の接続しやすさを表す接続コストを設定し、該接続コストに基づいて前記複数の頂点を接続することにより、前記特定領域を抽出する特定領域抽出ステップとを有することを特徴とする画像処理方法。
  11. コンピュータに、
    特定領域を含む入力画像上で前記特定領域の長径を設定する長径設定ステップと、
    設定された前記長径に基づいて、前記特定領域である蓋然性が高いと推定される第1領域を前記入力画像内に設定し、前記特定領域以外の領域である蓋然性が高いと推定される第2領域を前記入力画像内に設定する領域設定ステップと、
    前記第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、前記第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、前記第1ヒストグラムと前記第2ヒストグラムに基づいて、濃度値ごとに、該濃度値が前記特定領域を表している確からしさを表す第1評価値を算出し、前記入力画像中の隣接する2つの画素ごとに、該隣接する2つの画素の濃度値にそれぞれ対応する前記第1評価値に基づいて、前記隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する評価ステップと、
    前記特定領域に属する第1の基準頂点と、前記背景領域に属する第2の基準頂点と、前記入力画像中の各画素をそれぞれ表す複数の頂点とを定義し、前記第2評価値に基づいて、前記各頂点の接続しやすさを表す接続コストを設定し、該接続コストに基づいて前記複数の頂点を接続することにより、前記特定領域を抽出する特定領域抽出ステップとを実行させることを特徴とする画像処理プログラム。
JP2012213636A 2012-09-27 2012-09-27 画像処理装置および画像処理方法、並びに、画像処理プログラム Active JP5955723B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2012213636A JP5955723B2 (ja) 2012-09-27 2012-09-27 画像処理装置および画像処理方法、並びに、画像処理プログラム
EP13841846.2A EP2902969B1 (en) 2012-09-27 2013-09-20 Image processing device, image processing method, and image processing program
PCT/JP2013/005555 WO2014050043A1 (ja) 2012-09-27 2013-09-20 画像処理装置および画像処理方法、並びに、画像処理プログラム
US14/669,382 US9483705B2 (en) 2012-09-27 2015-03-26 Image processing device, image processing method, and image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012213636A JP5955723B2 (ja) 2012-09-27 2012-09-27 画像処理装置および画像処理方法、並びに、画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2014067343A true JP2014067343A (ja) 2014-04-17
JP5955723B2 JP5955723B2 (ja) 2016-07-20

Family

ID=50387484

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012213636A Active JP5955723B2 (ja) 2012-09-27 2012-09-27 画像処理装置および画像処理方法、並びに、画像処理プログラム

Country Status (4)

Country Link
US (1) US9483705B2 (ja)
EP (1) EP2902969B1 (ja)
JP (1) JP5955723B2 (ja)
WO (1) WO2014050043A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5881625B2 (ja) * 2013-01-17 2016-03-09 富士フイルム株式会社 領域分割装置、プログラムおよび方法
US10277906B2 (en) * 2015-03-23 2019-04-30 Arris Enterprises Llc System and method for selectively compressing images
US10729622B2 (en) 2015-05-29 2020-08-04 3M Innovative Properties Company Process for taking a dental impression and curable composition for use in a dental impressioning and retraction process
JP7036742B2 (ja) 2016-05-16 2022-03-15 キャスワークス リミテッド 血管評価システム
CN110473252A (zh) * 2019-08-28 2019-11-19 北京理工大学 基于矩阵运算计算任意形状接触面积的方法及模块

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020048401A1 (en) * 2000-09-01 2002-04-25 Yuri Boykov Graph cuts for binary segmentation of n-dimensional images from object and background seeds
JP2007307358A (ja) * 2006-04-17 2007-11-29 Fujifilm Corp 画像処理方法および装置ならびにプログラム
WO2011055930A2 (ko) * 2009-11-04 2011-05-12 (주)올라웍스 그래프 컷의 초기값을 설정하는 방법, 단말 장치, 및 컴퓨터 판독 가능한 기록 매체

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4493679B2 (ja) * 2007-03-29 2010-06-30 富士フイルム株式会社 対象領域抽出方法および装置ならびにプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020048401A1 (en) * 2000-09-01 2002-04-25 Yuri Boykov Graph cuts for binary segmentation of n-dimensional images from object and background seeds
JP2007307358A (ja) * 2006-04-17 2007-11-29 Fujifilm Corp 画像処理方法および装置ならびにプログラム
WO2011055930A2 (ko) * 2009-11-04 2011-05-12 (주)올라웍스 그래프 컷의 초기값을 설정하는 방법, 단말 장치, 및 컴퓨터 판독 가능한 기록 매체

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6015043489; 神山 隼一 ほか: '条件付き形状モデルとグラフカットの組合せを用いた複数臓器同時抽出' 電子情報通信学会技術研究報告 Vol.111 No.389 第111巻 第389号, 20120112, pp.299-304, 社団法人電子情報通信学会 *

Also Published As

Publication number Publication date
WO2014050043A1 (ja) 2014-04-03
EP2902969A1 (en) 2015-08-05
EP2902969B1 (en) 2019-05-01
US9483705B2 (en) 2016-11-01
US20150199587A1 (en) 2015-07-16
JP5955723B2 (ja) 2016-07-20
EP2902969A4 (en) 2016-07-27

Similar Documents

Publication Publication Date Title
Xu et al. Texture analysis on 18 F-FDG PET/CT images to differentiate malignant and benign bone and soft-tissue lesions
US9282929B2 (en) Apparatus and method for estimating malignant tumor
US9159127B2 (en) Detecting haemorrhagic stroke in CT image data
US9230320B2 (en) Computer aided diagnostic system incorporating shape analysis for diagnosing malignant lung nodules
US9014456B2 (en) Computer aided diagnostic system incorporating appearance analysis for diagnosing malignant lung nodules
US9953423B2 (en) Image processing apparatus, image processing method, and storage medium for image processing based on priority
US10319093B2 (en) Image processing apparatus, image processing method, and program
EP2796089A1 (en) Image processing device and image processing method, and image processing program
US9547896B2 (en) Lesion classification apparatus, and method of modifying lesion classification data
JP5955723B2 (ja) 画像処理装置および画像処理方法、並びに、画像処理プログラム
US11854195B2 (en) Systems and methods for automated analysis of medical images
US20090052768A1 (en) Identifying a set of image characteristics for assessing similarity of images
US20090016589A1 (en) Computer-Assisted Detection of Colonic Polyps Using Convex Hull
US11348229B2 (en) Determining regions of hyperdense lung tissue in an image of a lung
US20080137970A1 (en) Automatic Nodule Measurements
JP5961512B2 (ja) 画像処理装置およびその作動方法並びに画像処理プログラム
US11823377B2 (en) Information processing apparatus, information processing method, and non-transitory computer-readable storage medium
JP5122650B2 (ja) 経路近傍レンダリング
JP2017189394A (ja) 情報処理装置および情報処理システム
WO2006110398A2 (en) Estimation of solitary pulmonary nodule diameters with a hybrid segmentation approach
US8090208B2 (en) Robust segmentation of a mass candidate in digital mammography images
US20230342994A1 (en) Storage medium, image identification method, image identification device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141024

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160524

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160615

R150 Certificate of patent or registration of utility model

Ref document number: 5955723

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250