JP6424623B2 - 画像処理装置及びプログラム - Google Patents
画像処理装置及びプログラム Download PDFInfo
- Publication number
- JP6424623B2 JP6424623B2 JP2014539649A JP2014539649A JP6424623B2 JP 6424623 B2 JP6424623 B2 JP 6424623B2 JP 2014539649 A JP2014539649 A JP 2014539649A JP 2014539649 A JP2014539649 A JP 2014539649A JP 6424623 B2 JP6424623 B2 JP 6424623B2
- Authority
- JP
- Japan
- Prior art keywords
- cycle
- moving image
- image
- target area
- reference moving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 121
- 238000000034 method Methods 0.000 claims description 112
- 230000008859 change Effects 0.000 claims description 105
- 230000008569 process Effects 0.000 claims description 57
- 210000004072 lung Anatomy 0.000 claims description 55
- 238000000605 extraction Methods 0.000 claims description 43
- 230000000737 periodic effect Effects 0.000 claims description 42
- 241001465754 Metazoa Species 0.000 claims description 15
- 239000000284 extract Substances 0.000 claims description 7
- 230000029058 respiratory gaseous exchange Effects 0.000 description 312
- 238000001514 detection method Methods 0.000 description 72
- 238000003384 imaging method Methods 0.000 description 59
- 230000000241 respiratory effect Effects 0.000 description 38
- 230000005855 radiation Effects 0.000 description 30
- 238000010586 diagram Methods 0.000 description 29
- 230000033001 locomotion Effects 0.000 description 29
- 230000000747 cardiac effect Effects 0.000 description 25
- 238000003860 storage Methods 0.000 description 22
- 238000003745 diagnosis Methods 0.000 description 21
- 238000004891 communication Methods 0.000 description 12
- 210000000038 chest Anatomy 0.000 description 11
- 230000001360 synchronised effect Effects 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 230000003434 inspiratory effect Effects 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 101100421907 Arabidopsis thaliana SOT14 gene Proteins 0.000 description 2
- 101100421908 Arabidopsis thaliana SOT15 gene Proteins 0.000 description 2
- -1 ST1B Proteins 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000017531 blood circulation Effects 0.000 description 2
- 230000000052 comparative effect Effects 0.000 description 2
- 238000004195 computer-aided diagnosis Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 230000010339 dilation Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000010363 phase shift Effects 0.000 description 2
- 238000002601 radiography Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001669679 Eleotris Species 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 210000001835 viscera Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
- G06T7/0014—Biomedical image inspection using an image reference approach
- G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5288—Devices using data or image processing specially adapted for radiation diagnosis involving retrospective matching to a physiological signal
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
- A61B6/541—Control of apparatus or devices for radiation diagnosis involving acquisition triggered by a physiological signal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
- G06T2207/10124—Digitally reconstructed radiograph [DRR]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30061—Lung
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Physiology (AREA)
- Pathology (AREA)
- High Energy & Nuclear Physics (AREA)
- Biophysics (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Optics & Photonics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
Description
本発明の第1実施形態に係る放射線動態画像撮影システムについて以下説明する。
第1実施形態に係る放射線動態画像撮影システムは、人体または動物の身体を被写体として、被写体の対象領域の放射線動態画像の撮影を行う。対象領域としては、例えば肺や心臓を含み、その状態が周期的に変化する領域が挙げられる。
撮像装置1は、例えば、X線撮像装置等によって構成され、呼吸に伴う被写体Mの胸部の動態を撮影する装置である。動態撮影は、被写体Mの胸部に対し、X線等の放射線を繰り返して照射しつつ、時間順次に複数の画像を取得することにより行う。この連続撮影により得られた一連の画像を動態画像(動画像)と呼ぶ。また、動態画像を構成する複数の画像のそれぞれをフレーム画像と呼ぶ。
撮影制御装置2は、放射線照射条件や画像読取条件を撮像装置1に出力して撮像装置1による放射線撮影及び放射線画像の読み取り動作を制御するとともに、撮像装置1により取得された動態画像を撮影技師によるポジショニングの確認や診断に適した画像であるか否かの確認用に表示する。
画像処理装置3は、撮像装置1から送信された動態画像を、撮影制御装置2を介して取得し、医師等が読影診断するための画像を表示する。
図1では心電計4は被検者Mとは離れて示されているが、実際には心電計4の各電極端子は被検者Mに装着されており、被検者Mの心電波形をデジタル信号として出力する。
図1に示すように、情報蓄積装置5は、例えばパーソナル・コンピュータまたはワークステーションを用いたデータベースサーバからなり、参照画像記憶部51を備えて構成され、制御部31とはバス36を介してデータの送受信を行う。参照画像記憶部51には、後述の基準動画像と比較すべき参照動画像が予め記憶されている。
この実施形態における画像処理装置3の詳細を説明する前提として、診断のために、複数の動画像同士を比較する際における問題点について説明しておく。一例として、肺領域に関し、過去に撮影された動画像と新たに撮影された動画像とを比較する場合について説明する。
本発明の第1実施形態における放射線動態画像撮影システム100の画像処理装置3は、動画像間の対象領域の周期的な動き(変化)が互いに異なる場合においても、周期毎に、各対象領域の変化が同期するように動画像を表示する。これにより、動態診断を適切かつ効率的に行うことが可能となる。
図6は、放射線動態画像撮影システム100における画像処理装置3において、CPU等が各種プログラムに従って動作することにより制御部31で実現される機能構成を他の構成とともに示す図である。図6で示されるように、撮像装置1と画像処理装置3との間に、撮影制御装置2が介在し、撮影制御装置2の記憶部22に記憶された検出データ(フレーム画像)が通信部25を介して、画像処理装置3の通信部35に出力される。なお、この実施形態の画像処理装置3は、主として心臓および両肺を含む胸部が撮影された動態画像を使用する。
動画像取得部200は、撮像装置1の読取制御装置14によって撮影された人体または動物の対象領域の物理的状態が周期的に変化する状態を捉えた基準動画像を取得する基準動画像取得部210と、人体または動物の対象領域の物理的状態が周期的に変化する状態を捉えた、基準動画像と比較すべき参照動画像を情報蓄積装置5の参照画像記憶部51から取得する参照動画像取得部220と、を備えて構成される。
周期抽出部300は、基準動画像(複数の基準フレーム画像SGから構成)に捉えられた、対象領域(肺野)の周期的な変化(呼吸サイクル)T1に基づいて第1の対象領域周期PC1を検出し、複数の基準フレーム画像SGを第1の対象領域周期PC1単位に分類する基準周期抽出部310と、参照動画像(複数の参照フレーム画像RGから構成)に捉えられた、対象領域(肺野)の周期的な変化(呼吸サイクル)T2に基づいて第2の対象領域周期PC2を検出し、複数の参照フレーム画像RGを第2の対象領域周期PC2単位に分類する参照周期抽出部320と、を備えて構成される(図6参照)。なお、基準周期抽出部310が複数の基準フレーム画像SGを第1の対象領域周期PC1単位に分類する機能を備えることは必須ではなく、また、参照周期抽出部320においても、複数の参照フレーム画像RGを第2の対象領域周期PC2単位に分類する機能を備えることは必須ではない。
本実施形態では、肺野領域の変化(呼吸サイクル)の検出方法(第1の検出方法)として、動画像を構成するフレーム画像の解析によって呼吸サイクルを検出する方法を採用している。図6で示されるように基準周期抽出部310は、基準動画像取得部210によって取得された複数の基準フレーム画像SGを用いて、肺野領域の面積を算出することで、第1の呼吸サイクルT1を検出する。同様に、参照周期抽出部320は、参照動画像取得部220によって取得された複数の参照フレーム画像RGを用いて、肺野領域の面積を算出することで、第2の呼吸サイクルT2を検出する。肺野領域の面積の求め方は、肺野領域の輪郭抽出を行い、輪郭に囲まれた領域の画素数を肺野領域として定義することが可能である。
ここで、呼吸サイクルの検出方法の更なる変形例として、上記第1の呼吸サイクルの検出方法に代えて採用可能な第2の呼吸サイクルの検出方法を説明する。
続いて、第1(第2)の呼吸サイクルT1(T2)に基づいて、呼吸周期を検出する方法について説明する。第1または第2の呼吸周期PC1(PC2)は、それぞれ、(a1)第1または第2の呼吸サイクルT1(T2)が基準期間内において最小値を示すタイミング又は基準期間内において最大値を示すタイミング、(a2)第1または第2の呼吸サイクルT1(T2)の傾きの正負が変わるタイミング、(a3)第1または第2の呼吸サイクルT1(T2)の変曲点のタイミング、(a4)第1または第2の呼吸サイクルT1(T2)が所定の閾値となるタイミング、及び、(a5)第1または第2の呼吸サイクルT1(T2)の傾きの絶対値が基準値より大きくなるタイミングに基づいて検出することが可能である。以下に、これらのタイミング(a1)〜(a5)を用いた第1〜5の呼吸周期の検出方法を説明するが、これらの検出方法のいずれかをユーザーによる選択によって選択可能に設けてもよいし、複数の検出方法で検出した結果に基づいて、例えば平均値を用いる等により、最終的な結果を得るようにしてもよい。なお、本実施形態においては、タイミング(a1)を用いた第1の呼吸周期の検出方法を採用している。したがって、以下に説明する第2〜5の呼吸周期の検出方法は、第1の呼吸周期の検出方法に代えて、または、第1の呼吸周期の検出方法に加えて採用されるものである。
第1の周期検出方法は、本実施形態において採用されたタイミング(a1)に基づく検出方法であり、呼吸サイクルの基準期間内における最大値(最大吸気時)B1、又は、基準期間内における最小値(最大呼気時)B2に基づいて呼吸周期を検出する。なお、ここでの最大値や最小値は近似値であっても構わない。すなわち、図14で示されるように、第1または第2の呼吸サイクルT1(T2)の基準期間S1内における最大値B1を示すタイミング又は基準期間S2内における最小値B2を示すタイミングに基づいて呼吸周期PC1(PC2)を検出する。ここで、最大値B1を探索するときの基準期間S1としては、最大振幅値AP1(図10参照)が1つ存在する期間(画像特徴量が平均的な値以上である期間であり、その中にピーク値を持つ)が設定される。最小値B2を探索するときの基準期間S2としては、最小振幅値AP2(図10参照)が1つ存在する期間(画像特徴量が平均的な値以下である期間であり、その中にピーク値を持つ)が設定される。
第2の周期検出方法は、タイミング(a2)に基づく検出方法であり、呼吸サイクル(変化曲線)の傾きの正負の変換点に基づいて呼吸周期を検出する。すなわち、図15(a)で示されるように、第1または第2の呼吸サイクルT1(T2)の曲線の傾きの正負が変わる変化点B10,B20に基づいて呼吸周期PC1(PC2)を検出する。なお、変化点B10,B20としては近似値を用いてもよい。
第3の周期検出方法としては、タイミング(a3)に基づく検出方法であり、呼吸サイクル(変化曲線)の変曲点に基づいて呼吸周期を検出する。すなわち、図16で示されるように、第1または第2の呼吸サイクルT1(T2)の変曲点B3,B4を示すタイミングに基づいて呼吸周期PC1(PC2)を検出する。なお、変曲点B3,B4としては近似値を用いてもよい。
第4の周期検出方法としては、タイミング(a4)に基づく検出方法であり、呼吸サイクルが所定の閾値となるタイミングに基づいて呼吸周期を検出する。すなわち、図17で示されるように、第1または第2の呼吸サイクルT1(T2)の一定の閾値v1となる点B30,B40に基づいて呼吸周期PC1(PC2)を検出する。ここでいう閾値v1は、第1または第2の呼吸サイクルT1(T2)における画素特徴量の中間の値とすることが好ましい。なお、点B30,B40としては近似値を用いてもよい。
第5の周期検出方法としては、タイミング(a5)に基づく検出方法であり、呼吸サイクル(変化曲線)の傾きの絶対値に基づいて呼吸周期を検出する。すなわち、図18で示されるように、第1または第2の呼吸サイクルT1(T2)の傾きの絶対値が基準値より大きくなるタイミングに基づいて呼吸周期PC1(PC2)を検出する。ここでいう基準値は、想定される第1または第2の呼吸サイクルT1(T2)の最大の傾きとなる値であり、経験的に知られた値などを用いることができる。
周期調整部400では、第1または第2の呼吸周期(対象領域周期)PC1,PC2毎に、基準動画像及び参照動画像の肺野領域(対象領域)の周期的な変化を特定の位相において同期させる周期調整処理を実施する。周期調整処理は、第1及び第2の呼吸サイクルT1,T2が、(b1)第1及び第2の呼吸周期PC1,PC2毎において最小となる第1の特徴点、(b2)第1及び第2の呼吸周期PC1,PC2毎において最大となる第2の特徴点、(b3)第1及び第2の呼吸周期PC1,PC2毎において変曲点となる第3の特徴点、(b4)第1及び第2の呼吸周期PC1,PC2毎において所定の閾値となる第4の特徴点、及び、(b5)第1及び第2の呼吸周期PC1,PC2毎において傾きの絶対値が最大となる第5の特徴点のうち、何れか1つの特徴点である調整用特徴点に基づいて実行することが可能である。この調整用特徴点が同期をとる特定の位相を示す。
図20は、本実施形態における上記の第1の特徴点に基づく周期調整処理の方法を示す。この調整方法では、図20で示されるように、第1及び第2の呼吸周期PC1,PC2毎において最小となる点1B2,点2B2を調整用の特徴点として周期調整処理を行う。
第2の特徴点に基づく調整方法としては、図20で示されるように、第1及び第2の呼吸周期PC1,PC2毎において最大となる点1B1,点2B1を調整用の特徴点として周期調整処理を行う。
図22及び図23は、上記の第3〜第5の特徴点に基づく調整方法と結果とを示す。また、図22及び図23において、第1の呼吸サイクルT1に対する中間点1B3,1B4、及び、第2の呼吸サイクルT2に対する中間点2B3,2B4は、上記の第3〜第5の周期検出方法により検出された点である。第3〜第5の特徴点に基づく調整方法(1)では、図22で示されるように、第1及び第2の呼吸周期PC1,PC2毎において中間点1B3,中間点2B3を各々調整用の特徴点として周期調整処理を行う。ここでいう中間点1B3及び中間点2B3は、第3の特徴点に基づく処理の場合は第3の周期検出方法により検出された変曲点B3に相当し、第4の特徴点に基づく処理の場合は第4の周期検出方法により検出された一定の閾値v1を基準に求められた点B30に相当し、第5の特徴点に基づく処理の場合は第5の周期検出方法により検出された傾きが最大となる点B31に相当する。
第3〜第5の特徴点に基づく調整方法(2)では、図22で示されるように、第1及び第2の呼吸周期PC1,PC2毎において中間点1B4,中間点2B4を調整用の特徴点として周期調整処理を行う。ここでいう中間点1B4及び中間点2B4は、第3の特徴点に基づく処理の場合は第3の周期検出方法により検出された変曲点B4に相当し、第4の特徴点に基づく処理の場合は第4の周期検出方法により検出された一定の閾値v1を基準に求められた点B40に相当し、第5の特徴点に基づく処理の場合は第5の周期検出方法により検出された傾きが最大となる点B41に相当する。
上述のように、図20〜図23の場合では、第2の呼吸サイクルT2を時間方向にシフトして第2の呼吸サイクルT2cとしたため、周期調整部400は、第1の呼吸サイクルT1と第2の呼吸サイクルT2cとを表示画像生成部500に出力する。そして、表示画像生成部500では、周期調整処理を施した後の第1及び第2の呼吸サイクルT1,T2cに基づいて表示用画像IGを生成し、表示用画像IGを表示部34に出力する(図6参照)。この表示用画像IGは、基準動画像及び参照動画像を比較表示するためのものであり、この表示において第1及び第2の呼吸サイクルT1,T2cは、周期調整処理が施された後のものとなっている。言い換えれば、第1の呼吸サイクルT1となるように、基準動画像を構成する複数の基準フレーム画像SGのそれぞれを表示用画像IGに用いるとともに、第2の呼吸サイクルT2cとなるように、参照動画像を構成する複数の参照フレーム画像RGのそれぞれを表示用画像IGに用いることになる。
図25は、本実施形態に係る画像処理装置3において実現される基本動作を説明するフローチャートである。既に各部の個別機能の説明は行ったため(図6参照)、ここでは全体の流れのみ説明する。
図26は、本発明の第2実施形態として構成された画像処理装置3Aで用いられる制御部31Aの機能構成を示す図である。この制御部31Aは、第1実施形態の画像処理装置3における制御部31(図6参照)の代替として使用される。第1実施形態と異なる点は、第1実施形態の周期調整部400に対応する周期調整部400Aが調整対象切替部450を更に備える点である。なお、残余の構成は画像処理装置3と同様である。
周期調整部400Aにおける調整対象切替部450は、調整用呼吸サイクルを第1の呼吸サイクルT1と第2の呼吸サイクルT2との間で切り替える。すなわち、切り替え前の調整用呼吸サイクルを第2の呼吸サイクルT2としていた場合には、調整対象切替部450によって調整用呼吸サイクルを第2の呼吸サイクルT2から第1の呼吸サイクルT1に切り替えることができ、逆に、切り替え前の調整用呼吸サイクルを第1の呼吸サイクルT1としていた場合には、調整対象切替部450によって調整用呼吸サイクルを第1の呼吸サイクルT1から第2の呼吸サイクルT2に切り替えることができる。
続いて、図27は、第2実施形態に係る画像処理装置3Aの動作フローを例示した図である。ここでは、調整用呼吸サイクルのデフォルト設定は、第2の呼吸サイクルT2である。なお、図27のうち、ステップST1A,ST2A,ST1B,ST2B,ST6は図25のステップS1A,S2A,S1B,S2B,S5と同様であるため、その説明は省略する。
図28は、本発明の第3実施形態として構成された画像処理装置3Bで用いられる制御部31Bの機能構成を示す図である。この制御部31Bは、第1実施形態の画像処理装置3における制御部31(図6参照)の代替として使用される。第1実施形態と異なる点は、第1実施形態の周期調整部400に対応する周期調整部400Bが周期一致処理部460を更に備える点である。なお、残余の構成は画像処理装置3と同様である。
周期調整部400Bにおける周期一致処理部460は、第1の呼吸サイクルT1及び第2の呼吸サイクルT2のうち、何れか一方を固定用呼吸サイクル、他方を調整の対象となる調整用呼吸サイクルとし、第1及び第2の周期PC1,PC2のうち固定用呼吸サイクルの周期を固定用周期、調整用呼吸サイクルの周期を調整用周期とし、調整用呼吸サイクルを変更して調整用周期を固定用周期に一致させる周期一致処理を行う。ここでいう周期一致処理は大別して2つの処理があるため、以下、処理毎に分説する。
第1の周期一致処理としては、次の2つのケースが挙げられる。1つ目のケースとしては、調整用周期が固定用周期より短い場合、周期一致処理は、調整用呼吸サイクルの変化速度を遅く変更する処理となる。調整用呼吸サイクルの変化速度を遅くするには、動画像を表示する際の単位時間当たりのフレーム画像の数(fps:frame per second)を減らせばよい。すなわち、動画像を構成するフレーム画像毎の表示時間を長くすることになる。
第2の周期一致処理は、調整用周期が固定用周期より短い場合に、調整用呼吸サイクルに対応する動画表示を一定期間、表示固定状態とする処理である。そして、この周期一致処理は固定用周期毎に繰り返し行われる。なお、上記第1実施形態の図24(a)では、固定用周期(周期調整処理の調整用特徴点の間の期間)の後に、表示固定状態となる期間STを設けたが、ここでは表示固定状態となる期間を固定用周期の途中に設ける。したがって、上記第1実施形態の図24(b)の例においても、この周期一致処理が実行されている。
続いて、図32は、第3実施形態に係る画像処理装置3Bの動作フローを例示した図である。ここでは、固定用呼吸サイクルを第1の呼吸サイクルT1とし、調整用呼吸サイクルを第2の呼吸サイクルT2とし、固定用周期を第1の呼吸周期PC1とするとともに、調整用周期を第2の呼吸周期PC2とする。なお、図32のうち、ステップSP1A,SP2A,SP1B,SP2B,SP3,SP5,SP6は図25のステップS1A,S2A,S1B,S2B,S3,S5,S6と同様であるため、その説明は省略する。
以上、本発明の実施形態について説明してきたが、本発明は、上記実施形態に限定されるものではなく、様々な変形が可能である。
心拍サイクルの第1の検出方法として、図6で示されるように基準周期抽出部310では、基準動画像取得部210によって取得された複数の基準フレーム画像SGを用いて、心臓壁の動き量を算出することで、第1の心拍サイクルT1(心拍情報)とするとともに、参照周期抽出部320では、参照動画像取得部220によって取得された複数の参照フレーム画像RGを用いて、心臓壁の動き量を算出することで、第2の心拍サイクルT2(心拍情報)とする。
心臓領域時間変化の第2の検出方法として、心電計の計測結果を用いる。すなわち、この検出方法は、複数の基準フレーム画像SG(または複数の基準フレーム画像SG)が撮影されるのと同期して外部より心拍情報が取得されている場合に採用可能である。図13は、被検者Mの心電図波形の一部を例示する図である。なお、図13では、横軸が時刻、縦軸が電気信号の大きさ(電圧)を示しており、いわゆるP波、Q波、R波、S波、T波及びU波の形状をそれぞれ示す曲線Pp,Qp,Rp,Sp,Tp及びUpを含む電気信号の変化を示す曲線が示されている。
続いて、第1(第2)の心拍サイクルT1(T2)における心拍周期を検出する方法について説明する。
※ 上記の実施形態では、画像処理装置3,3A,3Bを個別に実施されるように各実施形態に分けて記載したが、これらの個別機能は、互いに矛盾しない限り、相互に組み合わせてもよい。
2 撮影制御装置
3,3A,3B 画像処理装置
4 心電計
31,31A,31B 制御部
34 表示部
41 位相検出部
100,100A,100B 放射線動態画像撮影システム
200 動画像取得部
210 基準動画像取得部
220 参照動画像取得部
300 周期抽出部
310 基準周期抽出部
320 参照周期抽出部
400,400A,400B 周期調整部
450 調整対象切替部
460 周期一致処理部
500 表示画像生成部
T1 第1の対象領域時間変化
T2 第2の対象領域時間変化
PC1 第1の対象領域周期
PC2 第2の対象領域周期
SG 基準フレーム画像
RG 参照フレーム画像
IG 表示用画像
Claims (13)
- 人体または動物の対象領域の物理的状態が周期的に変化する状態を捉えた基準動画像を
取得する基準動画像取得部と、
人体または動物の前記対象領域の物理的状態が周期的に変化する状態を捉えた、前記基
準動画像と比較すべき参照動画像を取得する参照動画像取得部と、
前記基準動画像における前記対象領域の周期的な変化である第1の周期的変化に基づい
て第1の対象領域周期を抽出する基準周期抽出部と、
前記参照動画像における前記対象領域の周期的な変化である第2の周期的変化に基づい
て第2の対象領域周期を抽出する参照周期抽出部と、
前記第1または第2の対象領域周期毎に、前記第1及び第2の周期的変化を特定の位相
において同期させる周期調整処理を実施する周期調整部と、
前記周期調整処理を施した後の前記基準動画像及び前記参照動画像を比較できるように
表示する表示用画像を生成する表示画像生成部と、を備え、
前記表示画像生成部は、
前記第1の対象領域周期と前記第2の対象領域周期とが異なる場合に、前記第1の対象
領域周期と前記第2の対象領域周期との差の期間、前記第1及び第2の対象領域周期のう
ち周期の短い方と対応する前記基準動画像または前記参照動画像の表示を固定状態とする
ことを特徴とする、画像処理装置。 - 請求項1記載の画像処理装置であって、
前記周期調整部は、
前記第1の対象領域周期毎に、前記第1の周期的変化が前記特定の位相を示す時に、前
記第2の周期的変化が前記特定の位相となるように、前記第2の周期的変化を時間軸方向
にシフトすることを特徴とする、画像処理装置。 - 請求項1記載の画像処理装置であって、
前記周期調整部は、
前記第1及び第2の周期的変化のいずれか一方を固定用周期的変化とし、他方を調整用
周期的変化とし、前記固定用周期的変化が前記特定の位相を示す時に、前記調整用周期的
変化が前記特定の位相となるように、前記調整用周期的変化を時間軸方向にシフトすると
ともに、
前記調整用周期的変化を前記第1の周期的変化と前記第2の周期的変化との間で切り替
える調整対象切替部を含むことを特徴とする、画像処理装置。 - 人体または動物の対象領域の物理的状態が周期的に変化する状態を捉えた基準動画像を
取得する基準動画像取得部と、
人体または動物の前記対象領域の物理的状態が周期的に変化する状態を捉えた、前記基
準動画像と比較すべき参照動画像を取得する参照動画像取得部と、
前記基準動画像における前記対象領域の周期的な変化である第1の周期的変化に基づい
て第1の対象領域周期を抽出する基準周期抽出部と、
前記参照動画像における前記対象領域の周期的な変化である第2の周期的変化に基づい
て第2の対象領域周期を抽出する参照周期抽出部と、
前記第1または第2の対象領域周期毎に、前記第1及び第2の周期的変化を特定の位相
において同期させる周期調整処理を実施する周期調整部と、
前記周期調整処理を施した後の前記基準動画像及び前記参照動画像を比較できるように
表示する表示用画像を生成する表示画像生成部と、を備え、
前記周期調整部は、
前記第1の対象領域周期毎に、前記第1の周期的変化が前記特定の位相を示す時に、前
記第2の周期的変化が前記特定の位相となるように、前記第2の周期的変化を時間軸方向
にシフトすることを特徴とする、画像処理装置。 - 人体または動物の対象領域の物理的状態が周期的に変化する状態を捉えた基準動画像を
取得する基準動画像取得部と、
人体または動物の前記対象領域の物理的状態が周期的に変化する状態を捉えた、前記基
準動画像と比較すべき参照動画像を取得する参照動画像取得部と、
前記基準動画像における前記対象領域の周期的な変化である第1の周期的変化に基づい
て第1の対象領域周期を抽出する基準周期抽出部と、
前記参照動画像における前記対象領域の周期的な変化である第2の周期的変化に基づい
て第2の対象領域周期を抽出する参照周期抽出部と、
前記第1または第2の対象領域周期毎に、前記第1及び第2の周期的変化を特定の位相
において同期させる周期調整処理を実施する周期調整部と、
前記周期調整処理を施した後の前記基準動画像及び前記参照動画像を比較できるように
表示する表示用画像を生成する表示画像生成部と、を備え、
前記周期調整部は、
前記第1及び第2の周期的変化のいずれか一方を固定用周期的変化とし、他方を調整用
周期的変化とし、前記固定用周期的変化が前記特定の位相を示す時に、前記調整用周期的
変化が前記特定の位相となるように、前記調整用周期的変化を時間軸方向にシフトすると
ともに、
前記調整用周期的変化を前記第1の周期的変化と前記第2の周期的変化との間で切り替
える調整対象切替部を含むことを特徴とする、画像処理装置。 - 請求項1ないし請求項5のうち、いずれか1項記載の画像処理装置であって、
前記表示画像生成部は、
前記特定の位相において、前記基準動画像または前記参照動画像の表示を固定状態とす
ることを特徴とする、画像処理装置。 - 請求項1ないし請求項5のうち、いずれか1項記載の画像処理装置であって、
前記表示画像生成部は、
前記特定の位相とは逆の位相において、前記基準動画像または前記参照動画像の表示を
固定状態とすることを特徴とする、画像処理装置。 - 請求項1ないし請求項7のうち、いずれか1項記載の画像処理装置であって、
前記第1または第2の対象領域周期は、
(a1)前記対象領域の周期的な変化における基準期間内での最小値を示すタイミング
及び前記基準期間内での最大値を示すタイミングのうち、少なくとも一方のタイミング、
(a2)前記対象領域の周期的な変化を示す曲線の傾きの正負が変わる変化点を示すタ
イミング、
(a3)前記対象領域の周期的な変化を示す曲線の変曲点を示すタイミング、
(a4)前記対象領域の周期的な変化を示す値が所定の閾値となる点を示すタイミング
、及び、
(a5)前記対象領域の周期的な変化を示す曲線の傾きの絶対値が基準値より大きくな
る点を示すタイミングのうち、少なくとも1つのタイミングに基づいて抽出される、画像
処理装置。 - 請求項1ないし請求項8のうち、いずれか1項記載の画像処理装置であって、
前記周期調整処理は、前記第1及び第2の対象領域周期毎において、
(b1)前記基準動画像及び参照動画像における前記対象領域の周期的な変化が最小と
なる第1の特徴点、
(b2)前記基準動画像及び参照動画像における前記対象領域の周期的な変化が最大と
なる第2の特徴点、
(b3)前記基準動画像及び参照動画像における前記対象領域の周期的な変化を示す曲
線が変曲点となる第3の特徴点、
(b4)前記基準動画像及び参照動画像における前記対象領域の周期的な変化を示す値
が所定の閾値となる第4の特徴点、及び、
(b5)前記基準動画像及び参照動画像における前記対象領域の周期的な変化を示す曲
線の傾きの絶対値が最大となる第5の特徴点のうち、何れか1つの特徴点である調整用特
徴点に基づいて実行される、画像処理装置。 - 請求項1ないし請求項9のうち、いずれか1項記載の画像処理装置であって、
前記参照動画像は、2以上の動画像を含む、画像処理装置。 - 請求項1ないし請求項10のうち、いずれか1項記載の画像処理装置であって、
前記対象領域は、
肺であることを特徴とする、画像処理装置。 - 請求項1ないし請求項11のうち、いずれか1項記載の画像処理装置であって、
前記表示用画像を表示する表示部、を更に備えることを特徴とする、画像処理装置。 - 画像処理装置に含まれるコンピュータによって実行されることにより、前記コンピュー
タを、請求項1ないし請求項12のうち、いずれか1項記載の画像処理装置として機能さ
せるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012221999 | 2012-10-04 | ||
JP2012221999 | 2012-10-04 | ||
PCT/JP2013/074074 WO2014054379A1 (ja) | 2012-10-04 | 2013-09-06 | 画像処理装置及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018083030A Division JP6512338B2 (ja) | 2012-10-04 | 2018-04-24 | 画像処理装置及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2014054379A1 JPWO2014054379A1 (ja) | 2016-08-25 |
JP6424623B2 true JP6424623B2 (ja) | 2018-11-21 |
Family
ID=50434710
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014539649A Active JP6424623B2 (ja) | 2012-10-04 | 2013-09-06 | 画像処理装置及びプログラム |
JP2018083030A Active JP6512338B2 (ja) | 2012-10-04 | 2018-04-24 | 画像処理装置及びプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018083030A Active JP6512338B2 (ja) | 2012-10-04 | 2018-04-24 | 画像処理装置及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US9836842B2 (ja) |
JP (2) | JP6424623B2 (ja) |
CN (1) | CN104703539B (ja) |
WO (1) | WO2014054379A1 (ja) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2829231B1 (en) * | 2012-03-23 | 2018-08-01 | Konica Minolta, Inc. | Image-generating apparatus |
JP5578297B1 (ja) * | 2012-12-12 | 2014-08-27 | コニカミノルタ株式会社 | 画像処理装置及びプログラム |
US10245110B2 (en) * | 2014-03-04 | 2019-04-02 | Xact Robotics Ltd. | Dynamic planning method for needle insertion |
JP6532206B2 (ja) | 2014-10-01 | 2019-06-19 | キヤノン株式会社 | 医用画像処理装置、医用画像処理方法 |
JP6418091B2 (ja) * | 2015-07-10 | 2018-11-07 | コニカミノルタ株式会社 | 胸部画像表示システム及び画像処理装置 |
WO2017085894A1 (ja) * | 2015-11-20 | 2017-05-26 | 富士通株式会社 | 脈波分析装置、脈波分析方法、および脈波分析プログラム |
EP3424403B1 (en) * | 2016-03-03 | 2024-04-24 | Sony Group Corporation | Medical image processing device, system, method, and program |
US10165222B2 (en) * | 2016-06-09 | 2018-12-25 | Intel Corporation | Video capture with frame rate based on estimate of motion periodicity |
JP2017225475A (ja) * | 2016-06-20 | 2017-12-28 | コニカミノルタ株式会社 | 放射線画像処理システムおよび放射線画像処理装置 |
JP2018081063A (ja) * | 2016-11-18 | 2018-05-24 | 株式会社東芝 | 位置検出装置、処理装置、およびプログラム |
WO2018123801A1 (ja) * | 2016-12-28 | 2018-07-05 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 三次元モデル配信方法、三次元モデル受信方法、三次元モデル配信装置及び三次元モデル受信装置 |
JP6772908B2 (ja) * | 2017-03-10 | 2020-10-21 | コニカミノルタ株式会社 | 動態解析システム及びプログラム |
JP6962057B2 (ja) * | 2017-08-08 | 2021-11-05 | コニカミノルタ株式会社 | X線画像処理装置及びx線画像処理方法 |
JP6950483B2 (ja) * | 2017-11-20 | 2021-10-13 | コニカミノルタ株式会社 | 動態撮影システム |
JP7020125B2 (ja) * | 2018-01-12 | 2022-02-16 | コニカミノルタ株式会社 | 動態画像解析装置及びプログラム |
EP3579553B1 (en) * | 2018-06-05 | 2020-05-20 | Axis AB | A method, controller, and system for encoding a sequence of video frames |
JP7188051B2 (ja) * | 2018-12-18 | 2022-12-13 | コニカミノルタ株式会社 | 医用画像管理システム |
JP7211172B2 (ja) * | 2019-03-08 | 2023-01-24 | コニカミノルタ株式会社 | 動態画像解析システム及び動態画像処理装置 |
JP2021194139A (ja) * | 2020-06-11 | 2021-12-27 | コニカミノルタ株式会社 | 画像表示装置及びプログラム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5982953A (en) * | 1994-09-02 | 1999-11-09 | Konica Corporation | Image displaying apparatus of a processed image from temporally sequential images |
CN1106825C (zh) * | 1997-02-13 | 2003-04-30 | 通用电器横河医疗系统株式会社 | 识别被观察器官状态时间相位的超声波诊断装置 |
JP3793102B2 (ja) | 2002-02-22 | 2006-07-05 | キヤノン株式会社 | ダイナミックx線撮影方法及びダイナミックx線画像撮影を行うための制御装置 |
JP3639825B2 (ja) | 2002-04-03 | 2005-04-20 | キヤノン株式会社 | 動画像表示方法、プログラム、コンピュータ可読記憶媒体、及び動画像表示装置 |
US20050075213A1 (en) * | 2003-10-06 | 2005-04-07 | Arick Thomas P. | Exercise device independent, variable display rate visual exercise system |
JP4439882B2 (ja) * | 2003-11-14 | 2010-03-24 | キヤノン株式会社 | 放射線画像処理装置及び処理方法 |
EP1779325B1 (en) * | 2004-08-09 | 2011-06-08 | Bracco Suisse SA | An image registration method and apparatus for medical imaging based on multiple masks |
US7715654B2 (en) * | 2005-10-18 | 2010-05-11 | Siemens Medical Solutions Usa, Inc. | System and method for fast multimodal registration by least squares |
DE102007009019B3 (de) * | 2007-02-23 | 2008-09-18 | Siemens Ag | Verfahren zum Schaffen erweiterter Möglichkeiten bei der bildlichen Darstellung eines Patientenherzens |
JP2008206741A (ja) * | 2007-02-27 | 2008-09-11 | Fujifilm Corp | 放射線画像処理装置、放射線画像処理方法およびプログラム |
JP5029702B2 (ja) * | 2008-01-25 | 2012-09-19 | コニカミノルタホールディングス株式会社 | 画像生成装置、画像生成方法およびプログラム |
JP5624265B2 (ja) * | 2008-06-03 | 2014-11-12 | 株式会社東芝 | 画像表示装置、プログラム及び画像表示システム |
JP5157918B2 (ja) * | 2009-01-06 | 2013-03-06 | コニカミノルタホールディングス株式会社 | 動画像表示装置およびプログラム |
CN101658426B (zh) * | 2009-09-11 | 2011-08-31 | 昆明理工大学 | 基于三维正电子发射探测器灵敏度特性的呼吸门控技术 |
US20120010513A1 (en) * | 2010-07-08 | 2012-01-12 | Wong Stephen T C | Chemically-selective, label free, microendoscopic system based on coherent anti-stokes raman scattering and microelectromechanical fiber optic probe |
JP5874636B2 (ja) * | 2010-08-27 | 2016-03-02 | コニカミノルタ株式会社 | 診断支援システム及びプログラム |
JP5498989B2 (ja) * | 2011-05-30 | 2014-05-21 | 富士フイルム株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
WO2013003826A1 (en) * | 2011-06-29 | 2013-01-03 | The Regents Of The University Of Michigan | Analysis of temporal changes in registered tomographic images |
-
2013
- 2013-09-06 US US14/433,132 patent/US9836842B2/en not_active Expired - Fee Related
- 2013-09-06 JP JP2014539649A patent/JP6424623B2/ja active Active
- 2013-09-06 WO PCT/JP2013/074074 patent/WO2014054379A1/ja active Application Filing
- 2013-09-06 CN CN201380051962.3A patent/CN104703539B/zh active Active
-
2018
- 2018-04-24 JP JP2018083030A patent/JP6512338B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US9836842B2 (en) | 2017-12-05 |
CN104703539A (zh) | 2015-06-10 |
CN104703539B (zh) | 2018-04-10 |
JP2018138193A (ja) | 2018-09-06 |
JP6512338B2 (ja) | 2019-05-15 |
US20150254852A1 (en) | 2015-09-10 |
WO2014054379A1 (ja) | 2014-04-10 |
JPWO2014054379A1 (ja) | 2016-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6512338B2 (ja) | 画像処理装置及びプログラム | |
JP5408399B1 (ja) | 画像生成装置 | |
JP5408400B1 (ja) | 画像生成装置及びプログラム | |
US9901317B2 (en) | Image processing apparatus for acquiring a dynamic image and storage medium | |
JP6323451B2 (ja) | 画像処理装置及びプログラム | |
JP6350522B2 (ja) | 画像処理装置及びプログラム | |
JP6597548B2 (ja) | 動態解析システム | |
JP6772908B2 (ja) | 動態解析システム及びプログラム | |
JP6418091B2 (ja) | 胸部画像表示システム及び画像処理装置 | |
JP6743662B2 (ja) | 動態画像処理システム | |
JP2014079312A (ja) | 画像処理装置及びプログラム | |
JP2015043880A (ja) | 胸部診断支援システム | |
JP2021194140A (ja) | 画像処理装置及び画像処理方法 | |
US20190180440A1 (en) | Dynamic image processing device | |
JP2019092612A (ja) | 動態撮影システム | |
JP2020142018A (ja) | 動態画像解析システム及び動態画像処理装置 | |
JP2020203191A (ja) | 動態解析システム及びプログラム | |
JP2006051070A (ja) | 血管撮影画像処理装置及び血管撮影画像処理方法及び血管撮影画像処理プログラム | |
JP2020062394A (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160816 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170822 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171003 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180313 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180424 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180925 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181008 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6424623 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |