JP2018038815A - 画像処理装置、画像処理方法およびプログラム - Google Patents
画像処理装置、画像処理方法およびプログラム Download PDFInfo
- Publication number
- JP2018038815A JP2018038815A JP2017165126A JP2017165126A JP2018038815A JP 2018038815 A JP2018038815 A JP 2018038815A JP 2017165126 A JP2017165126 A JP 2017165126A JP 2017165126 A JP2017165126 A JP 2017165126A JP 2018038815 A JP2018038815 A JP 2018038815A
- Authority
- JP
- Japan
- Prior art keywords
- image
- search area
- difference
- value
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 120
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000004364 calculation method Methods 0.000 claims abstract description 55
- 238000000034 method Methods 0.000 claims description 82
- 230000008569 process Effects 0.000 claims description 51
- 238000009499 grossing Methods 0.000 claims description 27
- 238000003384 imaging method Methods 0.000 claims description 20
- 238000006243 chemical reaction Methods 0.000 claims description 14
- 238000009826 distribution Methods 0.000 claims description 5
- 230000009467 reduction Effects 0.000 description 27
- 230000006870 function Effects 0.000 description 17
- 230000000694 effects Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 230000003902 lesion Effects 0.000 description 5
- 230000002441 reversible effect Effects 0.000 description 5
- 238000003860 storage Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 238000003745 diagnosis Methods 0.000 description 3
- 238000002059 diagnostic imaging Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000011946 reduction process Methods 0.000 description 3
- 230000002457 bidirectional effect Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- VZSRBBMJRBPUNF-UHFFFAOYSA-N 2-(2,3-dihydro-1H-inden-2-ylamino)-N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]pyrimidine-5-carboxamide Chemical class C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)C(=O)NCCC(N1CC2=C(CC1)NN=N2)=O VZSRBBMJRBPUNF-UHFFFAOYSA-N 0.000 description 1
- 238000012935 Averaging Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000002603 single-photon emission computed tomography Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 210000000115 thoracic cavity Anatomy 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/254—Analysis of motion involving subtraction of images
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/13—Tomography
- A61B8/14—Echo-tomography
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01T—MEASUREMENT OF NUCLEAR OR X-RADIATION
- G01T1/00—Measuring X-radiation, gamma radiation, corpuscular radiation, or cosmic radiation
- G01T1/16—Measuring radiation intensity
- G01T1/161—Applications in the field of nuclear medicine, e.g. in vivo counting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/97—Determining parameters from multiple pictures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20224—Image subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Theoretical Computer Science (AREA)
- Biophysics (AREA)
- High Energy & Nuclear Physics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Radiology & Medical Imaging (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Multimedia (AREA)
- Image Processing (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
Abstract
Description
前記第1の画像上の注目位置と、該注目位置に対応する前記第2の画像上の対応位置とを取得する位置取得手段と、前記第2の画像上の前記対応位置の周囲に、前記探索領域サイズからなる探索領域を設定する探索領域設定手段と、前記第1の画像上の前記注目位置の濃度値と、前記第2の画像上の前記探索領域内の複数位置の濃度値に基づき、前記注目位置に対応する差分値を決定する差分手段と、を有する。
本実施形態に係る画像処理装置は、複数の3次元画像(第1の画像と第2の画像)間の3次元差分画像を生成する装置である。本実施形態の画像処理装置は、画像間の細部の差分を算出するために、第1の画像と第2の画像の夫々を画素サイズ(ボクセルサイズ)が元の画像と異なるように解像度を変換した第1の変換画像と第2の変換画像を取得する。そして、第1の変換画像上の注目位置と対応する第2の変換画像上の対応位置を取得し、対応位置を中心に探索領域を第2の変換画像上に設定する。このとき、比較する画像間で離散化位置のずれによって元の撮像信号が最も反映される画素の位置が最大で半画素サイズ分ずれることを利用して、探索領域のサイズを、解像度を変換する前の第1の画像と第2の画像の夫々の画素サイズに基づいて算出する。そして、第1の変換画像上の注目位置の濃度値と、第2の変換画像上の対応位置の周辺に設定した探索領域内の複数の画素の濃度値とに基づいて、注目位置の差分を算出し、その値を3次元差分画像上の注目位置の濃度値とした3次元差分画像を生成する。これにより、必要最低限のサイズの探索領域から差分値を算出することで、ユーザは、経時的な変化による差分のような診断に必要な信号を極力消さずに、離散化位置のずれによるノイズが低減された3次元差分画像を観察できる。以下、図1から図4を用いて本実施形態の構成および処理を説明する。
ステップS2000において、データ取得部1010は、画像処理装置100に入力される第1の画像と第2の画像を取得する。そして、取得した第1の画像と第2の画像を、変換画像取得部1020へと出力する。また、第1の画像と第2の画像の画素サイズに関する情報を、探索領域サイズ算出部1040へと出力する。
ステップS2010において、変換画像取得部1020は、第1の画像を画素サイズが異なるように解像度を変換した第1の変換画像、および、第2の画像を、画素サイズが異なるように解像度を変換した第2の変換画像を取得する。例えば、元の画像の画素サイズが非等方な場合に、後の処理で行う画像間の位置合わせを高精度に実施できるように、画素サイズを等方化した画像を取得する。例えば、第1の画像と第2の画像が一般的なCT画像の場合には、スライス間の距離に対してスライス面内の解像度が高いため、スライス面内の解像度に合わせてスライス間方向の画素をアップサンプリングする処理を行う。同様に、第1の画像と第2の画像の画素サイズが一致していない場合には、少なくとも一方の画像の解像度を変換して、夫々の画像の画素サイズを揃える処理を行う。通常は、解像度が高いほうの画像に解像度を揃えるように変換する。そして、生成した変換画像を、変形情報取得部1030および位置取得部1050、探索領域設定部1060、差分算出部1070へと出力する。
ステップS2020において、変形情報取得部1030は、第1の変換画像と第2の変換画像間で同一部位を表す画素が略一致するように変形情報を取得する。すなわち、第1の変換画像と第2の変換画像との間の位置合わせ処理(変形推定処理)を行う。そして、取得した変形情報を位置取得部1050へと出力する。すなわち、変形情報取得部1030は、第1の変換画像を参照画像としたときに参照画像と第2の変換画像との間の変形情報を取得する。
ステップS2030において、探索領域サイズ算出部1040は、第1の画像の画素サイズと第2の画像の画素サイズに基づいて、差分値の算出に用いる探索領域サイズを算出する。そして、算出した探索領域サイズを探索領域設定部1060へと出力する。
ステップS2040において、位置取得部1050は、第1の変換画像上の注目位置(参照画像上の注目位置)を取得し、ステップS2020で取得した変形情報を利用して注目位置と対応する第2の変換画像上の対応位置を取得する。そして、取得した位置を探索領域取得部1060および差分算出部1070へと出力する。
ステップS2050において、探索領域設定部1060は、ステップS2030で算出した探索領域サイズからなる探索領域を、第2の変換画像上の対応位置を中心とした周囲に設定する。そして、設定した探索領域の情報を差分算出部1070へと出力する。
ステップS2060において、差分算出部1070は、ステップS2040で取得した第1の変換画像上の注目位置の濃度値と第2の変換画像上の探索領域内の画素夫々の濃度値とに基づいて、差分画像に与える差分値を取得する。例えば、非特許文献1に記載のボクセルマッチングと同様の処理を行う。すなわち、第1の変換画像上の注目位置の濃度値と第2の変換画像上の探索領域内の画素夫々の濃度値との差分を算出し、その中の最小値を差分画像に与える差分値として取得する。すなわち、差分算出部1070は、参照画像上の注目位置の濃度値と第2の変換画像上の探索領域内の複数位置の濃度値夫々との差分を算出している。そして、差分画像生成部1080へと出力する。
ステップS2070において、位置取得部1050は、第1の変換画像上のすべての位置(すべての画素)における差分値を算出したか否かの判定を行う。すべての位置の差分値を算出した場合、ステップS2080へと処理を進める。一方、すべての位置における差分値を取得していない場合、ステップS2040へと処理を戻す。
ステップS2080において、差分画像生成部1080は、第1の変換画像上の夫々の位置における差分値を濃度値とした差分画像(第1の差分画像)を生成する。そして、得られた差分画像をデータサーバ110へと保存する。また、表示制御部1090へと出力する。なお、ステップS2060で算出した第2の差分値(第1の変換画像上の注目位置の濃度値と第2の変換画像上の対応位置の濃度値との差分)を濃度値とした一般的な差分画像(第2の差分画像)も合わせて生成するようにしてもよい。
ステップS2090において、表示制御部1090は、ステップS2080で生成した差分画像(第1の差分画像)を表示部120に表示する制御を行う。
本実施形態では、注目する画素間の差分を求める際に、画素サイズに基づいて定めたサイズの探索領域を画素の周辺に設定してその領域内の濃度値を用いる手法を、差分画像生成時のノイズ軽減に用いた。しかし、この方法は、注目する画素間の比較を行う他の場面でも用いることができる。例えば、ステップS2020において、変形情報取得部1030は、公知の画像処理手法を利用して画像類似度を取得したが、画像位置合わせのために画像類似度を取得する処理においてもこの手法を用いることができる。すなわち、SSDのように、画像間のある画素ペアの濃度値の差分を算出する際に、当該画素ペアを注目位置及び対応位置とおいて、ステップS2050とステップS2060と同様の処理によって差分値を算出してもよい。画像類似度が高くなるように繰り返し変形情報の最適化を行う位置合わせにおいては、最適化の各ステップでユーザが最終的に観察するノイズ低減された画像と同様のステップにより算出した差分値に基づいて取得した画像類似度を評価する。これにより、離散化位置のずれを考慮した画像類似度を算出することができ、結果としてノイズがより低減される差分画像を取得することができる。
本実施形態では、ステップS2070において、第1の変換画像上のすべての位置(すべての画素)、または、あらかじめ公知の画像処理技術により抽出した一部の位置としていたが、ユーザが位置を指定してもよい。すなわち、あらかじめユーザが指定した領域内のすべての位置、または、一部の位置を対象として、ノイズを低減した差分画像の生成処理を行ってもよい。また、第2の差分画像のみを生成して表示し、ユーザがインタラクティブに指定した注目位置の近傍領域のみにステップS2040〜S2080の処理を施し、当該近傍領域のみを第1の差分画像に置換して表示するようにしてもよい。これにより、必要最低限の位置のみノイズを低減することで、ノイズ低減に要する時間をできる。さらに、ユーザがノイズではないと判断する位置は、ノイズ低減処理の対象から外すことができるため、信号を消しすぎてしまうことを防ぐことができる。
本実施形態に係る画像処理装置は、第1実施形態と同様、第1の画像と第2の画像の3次元差分画像を生成する装置である。本実施形態に係る画像処理装置は、入力画像の画素サイズに応じて、ノイズ低減処理を実行するか否かを判断し、判断に応じた方法で3次元差分画像を生成することを特徴とする。本実施形態の画像処理装置は、第1実施形態と同様に、第1の画像と第2の画像の画素サイズに基づいて探索領域サイズを算出する。このとき、第1の画像および第2の画像の画素サイズが所定の閾値未満である場合、離散化位置のずれが小さいものと判断し、ノイズ低減処理を実施せずに差分画像を生成する。一方、画素サイズが所定の閾値以上である場合、第1実施形態と同様にノイズ低減処理を実施した差分画像を生成する。これにより、離散化位置のずれが小さい場合に、画像間の濃度値の差分を消しすぎてしまうことを抑えることができる。また、ノイズ低減に要する処理時間を短縮できる。以下、図1と図5を用いて本実施形態の構成および処理を説明する。
ステップS5025において、探索領域サイズ算出部1040は、第1の画像と第2の画像の画素サイズに基づいて、ノイズ低減処理を実施するか否かを判断する。
ステップS5100において、差分算出部1070は、第1の変換画像と第2の変換画像間で対応する位置の濃度値の差分値(第1実施形態における第2の差分値)を算出する。このとき、ステップS5040と同様に変形情報を利用して画像間の対応する位置を取得する。
本実施形態に係る画像処理装置は、第1実施形態と同様、第1の画像と第2の画像の3次元差分画像を生成する装置である。本実施形態に係る画像処理装置は、画像間の同一部位が略一致するように変形位置合わせした変形画像上に探索領域を投影した変形探索領域を利用して、ノイズを低減した3次元差分画像を生成することを特徴とする。本実施形態の画像処理装置は、第1実施形態と同様に、第1の画像と第2の画像の夫々を解像度が元の画像と異なるように変換した第1の変換画像と第2の変換画像を取得し、第1の変換画像上の注目位置と対応する第2の変換画像上の対応位置周囲に探索領域を設定する。そして、第1の変換画像と各画素の濃度値が類似するように第2の変換画像を変形位置合わせして取得した第2の変形変換画像上に、変形情報を利用して探索領域を投影する。そして、第1の変換画像上の注目位置の濃度値と、第2の変形変換画像上の対応位置の周辺に設定した変形探索領域内の複数の画素の濃度値とに基づいて、注目位置の差分を算出し、その値を3次元差分画像上の注目位置の濃度値とした3次元差分画像を生成する。第1の画像と画像上の同一部位の位置が略一致した第2の画像の変形画像と差分画像を取得できるため、これらの画像を並べて表示することで、差分画像上の差分値を第1の画像と変形画像のどの位置の濃度値から算出したかをユーザが容易に確認できる。以下、図6と図7を用いて本実施形態の構成および処理を説明する。
ステップS7052において、変形画像取得部1610は、ステップS7020で取得した変形情報を用いて、第2の変換画像を変形させた第2の変形変換画像を取得する。そして、取得した第2の変形変換画像を探索領域投影部1720および差分算出部1070へと出力する。
ステップS7054において、探索領域投影部1620は、ステップS7020で取得した変形情報を用いて、ステップS7050で第2の変換画像上に設定した探索領域を第2の変形変換画像上に変形探索領域として投影する。そして、それを差分算出部1070へと出力する。
ステップS7060において、差分算出部1080は、ステップS7060で取得した第1の変換画像上の注目位置の濃度値と、ステップS7054で投影した第2の変形変換画像上の変形探索領域内の画素夫々の濃度値とに基づいて、差分画像に与える差分値を取得する。第1実施形態におけるステップS2060の処理との違いは、第2の変換画像が第2の変形変換画像に、探索領域が変形探索領域に変更されただけであり、それ以外の処理は同様である。
第1実施形態の変形例1−1と同様に、画像類似度を算出する際に離散化位置のずれによるノイズを低減した差分値に基づいて画像類似度を取得してもよい。ここでは、第1の変換画像上の注目位置の濃度値と第2の変形変換画像上の変形探索領域内の夫々の濃度値との差分の最小値を利用する。これにより、離散化位置のずれを考慮した画像類似度を取得することができ、結果としてノイズがより低減される差分画像を取得することができる。
本実施形態に係る画像処理装置は、第1実施形態と同様、3次元画像間の差分画像を生成する装置である。本実施形態に係る画像処理装置は、第1の変換画像の注目位置と第2の変換画像の対応位置の両方に探索領域を設定し、夫々の探索領域内の画素の濃度値に基づいて注目位置における差分値を求めることを特徴とする。ここで、第1実施形態と同様に、第2の変換画像上に探索領域を設定して第1の変換画像上の注目位置との差分を求める方向を順方向とする。また、第1の変換画像上に探索領域を設定して第2の変換画像上の対応位置との差分を求める方向を逆方向とする。本実施形態の画像処理装置は、差分画像上の注目位置において順方向と逆方向の夫々で差分値を求め、その二つの差分値を統合した代表差分値を、生成する差分画像の濃度値とする。これにより、一方の方向だけの計算では捉えることができない信号を差分画像に残すことが可能となる。以下、図1と図8を用いて本実施形態の構成および処理を説明する。
ステップS8050において、探索領域設定部1060は、ステップS8030で算出した探索領域サイズからなる第1の探索領域を、第1の変換画像上の注目位置を中心とした周囲に設定する。また、第1実施形態のステップS2050と同様に、第2の変換画像上の対応位置を中心とした周囲に、ステップS8030で算出した探索領域サイズからなる第2の探索領域を設定する。そして、設定した第1の探索領域と第2の探索領域の情報を差分算出部1070へと出力する。
ステップS8060において、差分算出部1070は、第1実施形態のステップS2060と同様に、第1の変換画像上の注目位置の濃度値と、第2の変換画像上の第2の探索領域内の画素夫々の濃度値とに基づいて、注目位置における(順方向の)差分値を算出する。さらに、差分算出部1070は、第2の変換画像上の対応位置の濃度値と、第1の変換画像上の第1の探索領域内の画素夫々の濃度値とに基づいて、注目位置における(逆方向の)差分値を算出する。この処理は、注目位置と対応位置を入れ替えただけであり、第1実施形態のステップS2060と同様に行うことができる。なお、差分値の算出には、ステップS2060に記載した様々な方法を用いることができる。
ステップS8065において、差分算出部1070は、ステップS8060で算出した順方向の差分値と逆方向の差分値を統合して、代表差分値を算出する。例えば、両者の絶対値を比較し、絶対値が大きい方の差分値を代表差分値として取得する。そして、取得した代表差分値を、当該注目位置における差分画像の濃度値として、差分画像生成部1080へと出力する。
本実施形態に係る画像処理装置は、第1実施形態と同様に、複数の3次元画像(第1の画像と第2の画像)間の3次元差分画像を生成する装置である。本実施形態では、より簡易な構成で本発明を実施する例を説明する。以下、図9と図10を用いて本実施形態の構成および処理を説明する。
ステップS10000において、データ取得部1010は、画像処理装置900に入力される第1の画像と第2の画像を取得する。そして、取得した第1の画像と第2の画像を、変形情報取得部1030および位置取得部1050、探索領域設定部1060、差分算出部1070へと出力する。また、第1の画像と第2の画像の画素サイズに関する情報を、探索領域サイズ算出部1040へと出力する。
ステップS10020において、変形情報取得部1030は、第1の画像と第2の画像間で同一部位を表す画素が略一致するように変形情報を取得する。すなわち、第1の画像と第2の画像との間の位置合わせ処理(変形推定処理)を行う。そして、取得した変形情報を位置取得部1050へと出力する。
ステップS10030において、探索領域サイズ算出部1040は、第1の画像の画素サイズと第2の画像の画素サイズに基づいて、差分値の算出に用いる探索領域サイズを算出する。そして、算出した探索領域サイズを探索領域設定部1060へと出力する。
ステップS10040において、位置取得部1050は、第1の画像上の注目位置(注目画素)を取得し、ステップS10020で取得した変形情報を利用して注目位置と対応する第2の画像上の対応位置を取得する。そして、取得した位置を探索領域設定部1060および差分算出部1070へと出力する。
ステップS10050において、探索領域設定部1060は、ステップS10030で算出した探索領域サイズからなる探索領域を、第2の画像上の対応位置を中心とした周囲に設定する。そして、設定した探索領域の情報を差分算出部1070へと出力する。
ステップS10060において、差分算出部1070は、ステップS10040で取得した第1の画像上の注目位置の濃度値と第2の画像上の探索領域内の複数の位置の夫々における濃度値とに基づいて、差分画像に与える差分値を取得する。そして、差分画像生成部1080へと出力する。
ステップS10070において、位置取得部1050は、第1の画像上のすべての位置(すべての画素)における差分値を算出したか否かの判定を行う。すべての位置の差分値を算出した場合、ステップS10080へと処理を進める。一方、すべての位置における差分値を取得していない場合、ステップS10040へと処理を戻す。
ステップS10080において、差分画像生成部1080は、第1の画像上の夫々の位置(画素)における差分値を濃度値とした差分画像(第1の差分画像)を生成する。そして、得られた差分画像をデータサーバ110へと保存する。また、表示制御部1090へと出力する。なお、ステップS10060で算出した第2の差分値(第1の画像上の注目位置の濃度値と第2の画像上の対応位置の濃度値との差分)を濃度値とした一般的な差分画像(第2の差分画像)も合わせて生成するようにしてもよい。
本実施形態に係る画像処理装置は、第1実施形態と同様、第1の画像と第2の画像の3次元差分画像を生成する装置である。ただし、本実施形態に係る画像処理装置は、画像間の画素サイズが異なる場合に、画素サイズが異なることで生じる画像間の濃度値の差異に起因するノイズを低減した差分画像を生成することを特徴とする。以下では、本実施形態に係る画像処理装置の説明をする。
ステップS10000において、データ取得部1010は、画像処理装置1100に入力される第1の画像と第2の画像を取得する。そして、取得した第1の画像と第2の画像を、平滑化画像取得部1910へと出力する。また、第1の画像と第2の画像の画素サイズに関する情報を、探索領域サイズ算出部1040へと出力する。
ステップS12010において、平滑化画像取得部1910は、第2の画像の画素サイズが第1の画像より小さい場合には、第2の画像を平滑化した第2の平滑化画像を取得する。そして、取得した第2の平滑化画像と第1の画像を、変換画像取得部1020へと出力する。この場合、画像処理装置1100は、第2の平滑化画像を第2の画像と置き換えて以降の処理を行う。一方、第1の画像の画素サイズが第2の画像より小さい場合には、第1の画像を平滑化した第1の平滑化画像を取得する。そして、取得した第1の平滑化画像と第2の画像を、変換画像取得部1020へと出力する。この場合、画像処理装置1100は、第1の平滑化画像を第1の画像と置き換えて以降の処理を行う。
ステップS12020において、変換画像取得部1020は、第1実施形態と同様に、2つの画像間の画素サイズが同じになるように、第1の画像(または第1の平滑化画像)の解像度を変換した第1の変換画像、および、第2の画像(または第2の平滑化画像)の解像度を変換した第2の変換画像を取得する。そして、生成した変換画像を、変形情報取得部1030および位置取得部1050、探索領域設定部1060、差分算出部1070へと出力する。
本実施形態において、平滑化処理後の画像を用いて変形情報を取得したが、変形情報をデータサーバ110から取得する構成として、変形情報を取得する処理をスキップしてもよい。そして、その変形情報を用いて、第1の画像もしくは第1の変換画像と、第2の平滑化画像との間で差分画像を生成してもよい。例えば、第1実施形態の画像処理装置によって生成された差分画像を観察したユーザが、画素サイズの違いにより生じたノイズを低減する必要があると判断した場合、既に取得した変形情報を利用して、本実施形態の画像処理装置により、ノイズが低減された差分画像を生成できる。これによると、変形情報を取得する処理をスキップできるため、処理の高速化ができる。
本実施形態において、第1の画像の画素サイズが第2の画像に対して奇数倍となるように、第2の画像の解像度を変換した画像を平滑化したが、必ずしも解像度を変換しなくてもよい。例えば、第2の画像上の平滑化対象の画素を中心に、第1の画像の画素サイズと同じ第1の領域を設定し、第1の領域に含まれる画素の濃度値と画素の体積比に応じて、平滑化処理を施してもよい。より具体的には、第1の領域内に第2の画像の画素が完全に含まれている場合、その画素の濃度値に係る重み係数を1とする。一方、第1の領域内に画素の半分しか含まれていない画素は、その濃度値に係る重み係数を0.5とする。そして、第1の領域に含まれる全画素の濃度値の重み付き平均値を濃度値とした第2の平滑化画像を取得できる。これによると、第1の画像の画素サイズが第2の画像に対して奇数倍となるように、第2の画像の解像度を変換しなくとも、同等の効果を得ることができる。
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム若しくは記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器(例えば、ホストコンピュータ、インタフェース機器、撮像装置、Webアプリケーション等)から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
Claims (14)
- 被検体を撮像した第1の画像と第2の画像を取得する画像取得手段と、
前記第1の画像と前記第2の画像の少なくとも一方の画像の画素サイズに基づいて探索領域サイズを算出する探索領域サイズ算出手段と、
前記第1の画像上の注目位置と、該注目位置に対応する前記第2の画像上の対応位置とを取得する位置取得手段と、
前記第2の画像上の前記対応位置の周囲に、前記探索領域サイズからなる探索領域を設定する探索領域設定手段と、
前記第1の画像上の前記注目位置の濃度値と、前記第2の画像上の前記探索領域内の複数位置の濃度値に基づき、前記注目位置に対応する差分値を決定する差分手段と、
を有することを特徴とする画像処理装置。 - 被検体を撮像した第1の画像と第2の画像を取得する画像取得手段と、
前記第1の画像と前記第2の画像の少なくとも一方の画像の画素サイズに基づいて探索領域サイズを算出する探索領域サイズ算出手段と、
前記第2の画像を画素サイズが異なるように解像度を変換した第2の変換画像を取得する変換手段と、
前記第1の画像または前記第1の画像を画素サイズが異なるように解像度を変換した第1の変換画像を参照画像としたときに、前記参照画像と前記第2の変換画像との間の変形情報を取得する変形情報取得手段と、
前記変形情報に基づき、前記参照画像上の注目位置と、該注目位置に対応する前記第2の変換画像上の対応位置とを取得する位置取得手段と、
前記第2の変換画像上の前記対応位置の周囲に、前記探索領域サイズからなる探索領域を設定する探索領域設定手段と、
前記参照画像上の前記注目位置の濃度値と、前記第2の変換画像上の前記探索領域内の複数位置の濃度値に基づき、前記注目位置に対応する差分値を決定する差分手段と、
を有することを特徴とする画像処理装置。 - 前記探索領域サイズ算出手段は、前記第1の画像と前記第2の画像の各軸方向の画素サイズの和に基づいて、前記探索領域サイズを算出することを特徴とする請求項1に記載の画像処理装置。
- 前記第1の画像と前記第2の画像との間の変形情報を取得する変形情報取得手段をさらに有し、
前記位置取得手段は、前記変形情報に基づいて前記注目位置に対応する前記対応位置を取得し、
前記探索領域サイズ算出手段は、前記変形情報の取得方法に基づいて前記探索領域サイズに乗じる定数を取得することを特徴とする請求項1に記載の画像処理装置。 - 前記差分手段は、前記第1の画像上の前記注目位置の濃度値と、前記第2の画像上の前記探索領域内の複数位置の濃度値夫々との差分値に基づいて、前記注目位置に対応する差分値を決定することを特徴とする請求項1に記載の画像処理装置。
- 前記差分手段は、前記第1の画像上の前記注目位置の濃度値と、前記第2の画像上の前記探索領域内の複数位置の濃度値から算出した値との差分値に基づいて、前記注目位置に対応する差分値を決定することを特徴とする請求項1に記載の画像処理装置。
- 被検体を撮像した第1の画像と第2の画像を取得する画像取得手段と、
前記第1の画像と前記第2の画像の少なくとも一方の画像の画素サイズに基づいて探索領域サイズを算出する探索領域サイズ算出手段と、
前記第1の画像と前記第2の画像との間の変形情報を取得する変形情報取得手段と、
前記変形情報に基づき、前記第1の画像上の注目位置と、該注目位置に対応する前記第2の画像上の対応位置とを取得する位置取得手段と、
前記第2の画像上の前記対応位置の周囲に、前記探索領域サイズからなる探索領域を設定する探索領域設定手段と、
前記変形情報に基づいて前記第2の画像を変形した変形画像上に、前記変形情報に基づき、前記探索領域を該変形画像上に投影した変形探索領域を取得する投影手段と、
前記第1の画像上の前記注目位置の濃度値と、前記変形画像上の前記変形探索領域内の複数位置の濃度値とに基づき、前記注目位置に対応する差分値を決定する差分手段と、
を有することを特徴とする画像処理装置。 - 被検体を撮像した第1の画像と第2の画像を取得する画像取得手段と、
前記第1の画像上の注目位置と、該注目位置に対応する前記第2の画像上の対応位置を取得する位置取得手段と、
前記第2の画像上の前記対応位置の周囲に探索領域を設定する探索領域設定手段と、
前記第1の画像上の前記第1の位置の濃度値と、前記第2の画像上の前記探索領域内の濃度値の分布情報とに基づいて、前記注目位置に対応する差分値を決定する差分手段と、
を有することを特徴とする画像処理装置。 - 前記濃度値の分布情報は、前記第2の画像上の前記探索領域内の濃度値の濃度レンジであることを特徴とする、請求項8に記載の画像処理装置。
- 被検体を撮像した第1の画像と第2の画像を取得する画像取得手段と、
前記第1の画像上の注目位置と、該注目位置に対応する前記第2の画像上の対応位置を取得する位置取得手段と、
前記第1の画像上の前記注目位置の周囲に第1の探索領域を設定し、前記第2の画像上の前記対応位置の周囲に第2の探索領域を設定する探索領域設定手段と、
前記第1の画像上の前記注目位置の濃度値と前記第2の画像上の前記第2の探索領域内の複数位置の濃度値とに基づく第1の差分値と、前記第2の画像上の前記対応位置の濃度値と前記第1の画像上の前記第1の探索領域内の複数位置の濃度値とに基づく第2の差分値とに基づいて、前記注目位置に対応する差分値を決定する差分手段と、
を有することを特徴とする画像処理装置。 - 前記第1の画像と前記第2の画像の画素サイズが小さい方の画像に平滑化処理を施した平滑化画像を生成する平滑化手段をさらに有し、
前記差分手段は、前記平滑化画像を当該画像の元画像である前記第1の画像または前記第2の画像と置き換えて前記差分値を決定することを特徴とする請求項2乃至請求項10のいずれか1項に記載の画像処理装置。 - 前記平滑化手段は、前記第1の画像と前記第2の画像の少なくとも一方の画素サイズに基づいて、前記平滑化処理のパラメータを決定することを特徴とする請求項11に記載の画像処理装置。
- 被検体を撮像した第1の画像と第2の画像を取得する画像取得工程と、
前記第1の画像と前記第2の画像の少なくとも一方の画像の画素サイズに基づいて探索領域サイズを算出する探索領域サイズ算出工程と、
前記第1の画像上の注目位置と、該注目位置に対応する前記第2の画像上の対応位置とを取得する位置取得工程と、
前記第2の画像上の前記対応位置の周囲に、前記探索領域サイズからなる探索領域を設定する探索領域設定工程と、
前記第1の画像上の前記注目位置の濃度値と、前記第2の画像上の前記探索領域内の複数位置の濃度値に基づき、前記注目位置に対応する差分値を決定する差分工程と、
を有することを特徴とする画像処理方法。 - 請求項13記載の画像処理方法をコンピュータに実行させることを特徴とするプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016169609 | 2016-08-31 | ||
JP2016169609 | 2016-08-31 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018038815A true JP2018038815A (ja) | 2018-03-15 |
JP7023641B2 JP7023641B2 (ja) | 2022-02-22 |
Family
ID=61301095
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017165126A Active JP7023641B2 (ja) | 2016-08-31 | 2017-08-30 | 画像処理装置、画像処理方法およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US11468589B2 (ja) |
EP (1) | EP3508127A4 (ja) |
JP (1) | JP7023641B2 (ja) |
CN (1) | CN109715070B (ja) |
WO (1) | WO2018043575A1 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019146926A (ja) * | 2018-02-28 | 2019-09-05 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP2020025786A (ja) * | 2018-08-14 | 2020-02-20 | 富士フイルム株式会社 | 画像処理装置、方法及びプログラム |
JP2020174861A (ja) * | 2019-04-17 | 2020-10-29 | キヤノン株式会社 | 情報処理装置、情報処理方法およびプログラム |
JP2021003394A (ja) * | 2019-06-26 | 2021-01-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
EP4239571A1 (en) | 2022-03-04 | 2023-09-06 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory storage medium |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7277131B2 (ja) * | 2018-12-26 | 2023-05-18 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP7387280B2 (ja) * | 2019-04-10 | 2023-11-28 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN110133556B (zh) * | 2019-05-29 | 2021-01-19 | 上海联影医疗科技股份有限公司 | 一种磁共振图像处理方法、装置、设备及存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090074276A1 (en) * | 2007-09-19 | 2009-03-19 | The University Of Chicago | Voxel Matching Technique for Removal of Artifacts in Medical Subtraction Images |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6738063B2 (en) * | 2002-02-07 | 2004-05-18 | Siemens Corporate Research, Inc. | Object-correspondence identification without full volume registration |
JP4858085B2 (ja) * | 2006-10-25 | 2012-01-18 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
US8559746B2 (en) * | 2008-09-04 | 2013-10-15 | Silicon Image, Inc. | System, method, and apparatus for smoothing of edges in images to remove irregularities |
US10032077B1 (en) * | 2015-10-29 | 2018-07-24 | National Technology & Engineering Solutions Of Sandia, Llc | Vehicle track identification in synthetic aperture radar images |
-
2017
- 2017-08-30 EP EP17846579.5A patent/EP3508127A4/en active Pending
- 2017-08-30 JP JP2017165126A patent/JP7023641B2/ja active Active
- 2017-08-30 WO PCT/JP2017/031194 patent/WO2018043575A1/ja unknown
- 2017-08-30 CN CN201780056800.7A patent/CN109715070B/zh active Active
-
2019
- 2019-02-28 US US16/288,931 patent/US11468589B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090074276A1 (en) * | 2007-09-19 | 2009-03-19 | The University Of Chicago | Voxel Matching Technique for Removal of Artifacts in Medical Subtraction Images |
Non-Patent Citations (3)
Title |
---|
BIRCHFIELD STAN ET AL.: "「A Pixel Dissimilarity Measure That Is Insensitive to Image Sampling」", IEEE TRANSACTION ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, vol. 20, no. 4, JPN6021030900, 30 April 1998 (1998-04-30), pages 401 - 406, XP000766680, ISSN: 0004566401, DOI: 10.1109/34.677269 * |
杉元 藍子 他: "「胸部単純X線画像におけるピクセルマッチング法を用いた経時的差分画像法の開発」", 日本放射線技術学会雑誌, vol. 69, no. 8, JPN6021030902, 31 August 2013 (2013-08-31), pages 855 - 863, ISSN: 0004566399 * |
板井 喜則 他: "「ボクセルマッチング法による経時差分画像上のアーチファクトの低減法」", 電子情報通信学会技術研究報告 MI 医用画像, vol. 107, no. 461, JPN6021030901, 25 January 2008 (2008-01-25), pages 281 - 284, ISSN: 0004566400 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019146926A (ja) * | 2018-02-28 | 2019-09-05 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
WO2019167731A1 (ja) * | 2018-02-28 | 2019-09-06 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
US11593941B2 (en) | 2018-02-28 | 2023-02-28 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium |
JP2020025786A (ja) * | 2018-08-14 | 2020-02-20 | 富士フイルム株式会社 | 画像処理装置、方法及びプログラム |
JP2020174861A (ja) * | 2019-04-17 | 2020-10-29 | キヤノン株式会社 | 情報処理装置、情報処理方法およびプログラム |
JP2021003394A (ja) * | 2019-06-26 | 2021-01-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP7451098B2 (ja) | 2019-06-26 | 2024-03-18 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
EP4239571A1 (en) | 2022-03-04 | 2023-09-06 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory storage medium |
Also Published As
Publication number | Publication date |
---|---|
JP7023641B2 (ja) | 2022-02-22 |
CN109715070B (zh) | 2023-05-05 |
CN109715070A (zh) | 2019-05-03 |
EP3508127A1 (en) | 2019-07-10 |
US20190197723A1 (en) | 2019-06-27 |
EP3508127A4 (en) | 2020-04-08 |
WO2018043575A1 (ja) | 2018-03-08 |
US11468589B2 (en) | 2022-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7023641B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
EP3447733B1 (en) | Selective image reconstruction | |
WO2019167731A1 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP5658686B2 (ja) | 貫壁性のかん流の勾配の画像分析 | |
JP6772123B2 (ja) | 画像処理装置、画像処理方法、画像処理システムおよびプログラム | |
US20200134823A1 (en) | Image processing apparatus, image processing method, and storage medium | |
JP2019028887A (ja) | 画像処理方法 | |
CN107705350B (zh) | 医学图像生成方法、装置及设备 | |
US10810717B2 (en) | Image processing apparatus, image processing method, and image processing system | |
US8805122B1 (en) | System, method, and computer-readable medium for interpolating spatially transformed volumetric medical image data | |
US11266322B2 (en) | Blood flow analysis apparatus, blood flow analysis method, and blood flow analysis program | |
US20220092745A1 (en) | Information processing apparatus, information processing method, and non-transitory recording medium | |
US11138736B2 (en) | Information processing apparatus and information processing method | |
JP7140475B2 (ja) | 画像処理装置、画像処理方法、画像処理システム及びプログラム | |
US11836923B2 (en) | Image processing apparatus, image processing method, and storage medium | |
CN108257088B (zh) | 利用斜率约束三次插值的图像处理方法和系统 | |
US10964021B2 (en) | Information processing apparatus, information processing method, and information processing system | |
JP2022049275A (ja) | 情報処理装置、情報処理方法及びプログラム | |
Walvoord et al. | Localization of fiducial skin markers in MR images using correlation pattern recognition for PET/MRI nonrigid breast image registration | |
KR20130011552A (ko) | 의료 영상 시스템에서 영상 보조 검출 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200701 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210810 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211007 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220111 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220209 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7023641 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |