JP7054972B2 - 画像処理装置、画像処理方法、プログラム、及び画像処理システム - Google Patents
画像処理装置、画像処理方法、プログラム、及び画像処理システム Download PDFInfo
- Publication number
- JP7054972B2 JP7054972B2 JP2022506144A JP2022506144A JP7054972B2 JP 7054972 B2 JP7054972 B2 JP 7054972B2 JP 2022506144 A JP2022506144 A JP 2022506144A JP 2022506144 A JP2022506144 A JP 2022506144A JP 7054972 B2 JP7054972 B2 JP 7054972B2
- Authority
- JP
- Japan
- Prior art keywords
- interest
- image
- region
- image processing
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 249
- 238000003672 processing method Methods 0.000 title claims description 11
- 210000004204 blood vessel Anatomy 0.000 claims description 157
- 239000003550 marker Substances 0.000 claims description 128
- 206010002329 Aneurysm Diseases 0.000 claims description 78
- 238000011282 treatment Methods 0.000 claims description 64
- 230000003073 embolic effect Effects 0.000 claims description 60
- 238000001356 surgical procedure Methods 0.000 claims description 43
- 230000006870 function Effects 0.000 claims description 38
- 230000002792 vascular Effects 0.000 claims description 31
- 238000003860 storage Methods 0.000 claims description 25
- 230000008859 change Effects 0.000 claims description 24
- 238000001514 detection method Methods 0.000 claims description 24
- 238000009826 distribution Methods 0.000 claims description 24
- 230000001133 acceleration Effects 0.000 claims description 21
- 238000010191 image analysis Methods 0.000 claims description 19
- 238000003384 imaging method Methods 0.000 claims description 19
- 230000010102 embolization Effects 0.000 claims description 17
- 201000008450 Intracranial aneurysm Diseases 0.000 claims description 15
- 230000003902 lesion Effects 0.000 claims description 13
- 210000001367 artery Anatomy 0.000 claims description 10
- 239000002872 contrast media Substances 0.000 claims description 10
- 238000000605 extraction Methods 0.000 claims description 10
- 208000031481 Pathologic Constriction Diseases 0.000 claims description 8
- 230000036262 stenosis Effects 0.000 claims description 8
- 208000037804 stenosis Diseases 0.000 claims description 8
- 208000007536 Thrombosis Diseases 0.000 claims description 7
- 210000004369 blood Anatomy 0.000 claims description 7
- 239000008280 blood Substances 0.000 claims description 7
- 210000001627 cerebral artery Anatomy 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 7
- 230000015654 memory Effects 0.000 claims description 7
- 238000005520 cutting process Methods 0.000 claims description 6
- 239000000463 material Substances 0.000 claims description 6
- 210000002376 aorta thoracic Anatomy 0.000 claims description 5
- 210000000988 bone and bone Anatomy 0.000 claims description 5
- 238000011161 development Methods 0.000 claims description 4
- 201000010099 disease Diseases 0.000 claims description 4
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 4
- 208000000483 Central Nervous System Vascular Malformations Diseases 0.000 claims description 3
- 208000002263 Intracranial Arteriovenous Malformations Diseases 0.000 claims description 3
- 206010047163 Vasospasm Diseases 0.000 claims description 3
- 210000004004 carotid artery internal Anatomy 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 230000001143 conditioned effect Effects 0.000 claims description 3
- 206010003210 Arteriosclerosis Diseases 0.000 claims description 2
- 210000002551 anterior cerebral artery Anatomy 0.000 claims description 2
- 208000011775 arteriosclerosis disease Diseases 0.000 claims description 2
- 230000002308 calcification Effects 0.000 claims description 2
- 210000000711 cavernous sinus Anatomy 0.000 claims description 2
- 230000002490 cerebral effect Effects 0.000 claims description 2
- 210000003109 clavicle Anatomy 0.000 claims description 2
- 238000002224 dissection Methods 0.000 claims description 2
- 210000003657 middle cerebral artery Anatomy 0.000 claims description 2
- 210000004197 pelvis Anatomy 0.000 claims description 2
- 210000001994 temporal artery Anatomy 0.000 claims description 2
- 230000001960 triggered effect Effects 0.000 claims description 2
- 210000003462 vein Anatomy 0.000 claims description 2
- 230000002861 ventricular Effects 0.000 claims description 2
- 239000012530 fluid Substances 0.000 claims 1
- 230000035515 penetration Effects 0.000 claims 1
- 210000003388 posterior cerebral artery Anatomy 0.000 claims 1
- 238000010992 reflux Methods 0.000 claims 1
- 238000000034 method Methods 0.000 description 47
- 230000008569 process Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 16
- 238000013527 convolutional neural network Methods 0.000 description 15
- 239000000047 product Substances 0.000 description 15
- 206010028980 Neoplasm Diseases 0.000 description 6
- 206010068149 Vessel perforation Diseases 0.000 description 5
- 238000013459 approach Methods 0.000 description 5
- 239000012141 concentrate Substances 0.000 description 5
- 239000007788 liquid Substances 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 239000000126 substance Substances 0.000 description 5
- 238000002583 angiography Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 239000002245 particle Substances 0.000 description 4
- 206010069729 Collateral circulation Diseases 0.000 description 3
- 238000012276 Endovascular treatment Methods 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 208000026106 cerebrovascular disease Diseases 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 210000002216 heart Anatomy 0.000 description 3
- 208000034710 Cerebral arteriovenous malformation Diseases 0.000 description 2
- 206010015866 Extravasation Diseases 0.000 description 2
- 206010053648 Vascular occlusion Diseases 0.000 description 2
- 206010047249 Venous thrombosis Diseases 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 201000000034 arteriovenous malformations of the brain Diseases 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 210000001715 carotid artery Anatomy 0.000 description 2
- 206010008118 cerebral infarction Diseases 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 230000008034 disappearance Effects 0.000 description 2
- 230000036251 extravasation Effects 0.000 description 2
- 210000003414 extremity Anatomy 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000011176 pooling Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 238000013403 standard screening design Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 241001669679 Eleotris Species 0.000 description 1
- 208000005189 Embolism Diseases 0.000 description 1
- 208000032843 Hemorrhage Diseases 0.000 description 1
- 206010061216 Infarction Diseases 0.000 description 1
- 241000032989 Ipomoea lacunosa Species 0.000 description 1
- 206010067171 Regurgitation Diseases 0.000 description 1
- 208000032851 Subarachnoid Hemorrhage Diseases 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000003187 abdominal effect Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 210000002302 brachial artery Anatomy 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000010339 dilation Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 210000004013 groin Anatomy 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000007574 infarction Effects 0.000 description 1
- 201000007272 intracranial sinus thrombosis Diseases 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000010186 staining Methods 0.000 description 1
- 230000002966 stenotic effect Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000032258 transport Effects 0.000 description 1
- 231100000216 vascular lesion Toxicity 0.000 description 1
- 208000021331 vascular occlusion disease Diseases 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/12—Devices for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/464—Displaying means of special interest involving a plurality of displays
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/465—Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/467—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means
- A61B6/469—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/486—Diagnostic techniques involving generating temporal series of image data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/486—Diagnostic techniques involving generating temporal series of image data
- A61B6/487—Diagnostic techniques involving generating temporal series of image data involving fluoroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/50—Clinical applications
- A61B6/504—Clinical applications involving diagnosis of blood vessels, e.g. by angiography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
- A61B6/545—Control of apparatus or devices for radiation diagnosis involving automatic set-up of acquisition parameters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00115—Electrical control of surgical instruments with audible or visual output
- A61B2017/00119—Electrical control of surgical instruments with audible or visual output alarm; indicating an abnormal situation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/374—NMR or MRI
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/378—Surgical systems with images on a monitor during operation using ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/25—User interfaces for surgical systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/44—Constructional features of apparatus for radiation diagnosis
- A61B6/4429—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
- A61B6/4435—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
- A61B6/4441—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
- A61B6/547—Control of apparatus or devices for radiation diagnosis involving tracking of position of the device or parts of the device
Description
図1は、実施の形態に係る画像処理システムSの外観を模式的に示す図である。画像処理システムSは、画像処理装置1、表示装置2、及びX線撮像装置3を備える。以下、図1を参照して、実施の形態の概要を述べる。
図2は、実施の形態に係る画像処理装置1の機能構成を模式的に示す図である。画像処理装置1は、記憶部10と制御部11とを備える。図2において、矢印は主なデータの流れを示しており、図2に示していないデータの流れがあってもよい。図2において、各機能ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図2に示す機能ブロックは単一の装置内に実装されてもよく、あるいは複数の装置内に分かれて実装されてもよい。機能ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてもよい。
続いて、関心領域Rに設定される条件の具体例を説明する。
続いて、関心領域Rに設定される条件の別の例として、塞栓用コイルのデリバリーワイヤを誘導するガイディングカテーテルに関する条件について説明する。
続いて、関心領域Rに設定される条件のさらに別の例として、デバイスD(例えば、ガイドワイヤ)の形状に関する条件について説明する。
動脈瘤塞栓用カテーテルには、先端マーカ(1stマーカ)と2ndマーカ(通常は先端から3cmの位置)が付されている。動脈瘤内のどこにカテーテルの先端があるかを術者が把握することは、手術を安全に行うために重要であるが、動脈瘤内にコイルが入ると、先端マーカの位置がわかりにくくなり、安全性が低下する(図17を参照)。例えば、先端マーカが動脈瘤の奥に移動すると、その先端、もしくは、その先端から出るコイルによって動脈瘤を穿孔し、くも膜下出血という重大な合併症につながる。逆に先端マーカが動脈瘤から出そうになっていると、カテーテルやコイルが動脈瘤外に逸脱し、再度、動脈瘤内に入れなければならず、この操作に動脈瘤壁の穿孔の危険が伴う。
図22は、実施の形態に係る画像処理装置が実行する2ndマーカを利用したカテーテル先端位置の推定処理の流れを説明するためのフローチャートである。本フローチャートにおける処理は、例えば画像処理装置1が起動したとき、あるいはユーザまたは画像処理装置1により処理の開始が必要と判断されたときに開始される。
医療従事者は施術中、特定の場所を注目しているため、本開示に係るシステムが通知を発した際に、警告が出されたデバイスに注目していない場合、もしくは別の画面を見ている場合、警告発生以降に状況の把握に努めることになる。しかしリアルタイムの映像は刻々と更新されるため、警告が出た時刻周辺の詳細を確認することはしばしば困難である。また、警告の性質により、デバイスの動作自体の詳細、警告発生時点と現在の差異、警告発生時点からの経過時間、等の把握が必要となる。
図23は、実施の形態に係る画像処理装置が実行するリプレイ機能の処理の流れを説明するためのフローチャートである。本フローチャートにおける処理は、例えば画像処理装置1が起動したときに開始する。
ガイドワイヤ先端やガイディングカテーテル先端などの関心領域が、X線画角の範囲外へ移動(フレームアウト)することは危険なことであるが、危険度はその移動量により異なる。具体的には例えば、ガイドワイヤの先端が少し(5mm以内など)枠外に出ただけであれば血管穿孔の可能性は低いが、大きく枠外に出た場合(20mm以上など)、血管穿孔のリスクが高く、関心領域がフレームアウトした時には、X線画像の画角内に引き戻す必要がるが、状況等によっては即座に対処できない場合もある。このような場合に、フレームアウトした関心領域が、X線画角の範囲外へどの程度移動しているか、またその移動がどの程度危険であるかを知ることは重要である。よって、本発明の一部の態様は、フレームアウトした関心領域の位置、速度、加速度の状態を推定し、表示する装置に関する。
図24は、実施の形態に係る画像処理装置が実行するフレーム外の関心領域の位置の推定処理の流れを説明するためのフローチャートである。本フローチャートにおける処理は、例えば画像処理装置1が起動したときに開始する。
本発明の一部の態様では、画像解析の結果を、サイズの異なる2つの画面で表示することができる。上述のように、血管内手術では一般的に、複数の画面(例えば、4画面)を見ながら手術が行われ、術者は最低でも2画面(一般的には正面(AP方向もしくはF方向:Anterior-Posterior, Frontal)と側面(RL方向もしくはLAT方向:Right to Left, Lateral))を見ることにより立体的な情報を把握している。そのため、正面と側面の画像を表示しておくことは重要であり、物理的に限られたサイズのモニターに見やすく表示することは非常に重要である。実際の手術では、モニターは患者のベッド越しに1m以上離れて配置されることが多く、モニターを1cmでも術者に近づけるように指示が出されることも多い。なお、正面と側面は角度が立体的に動き、例えば正面の管球を用いて、右15度、頭側に10度の角度をつけて、斜めから見ることは常に行っている。これにより、3次元が2次元に投影された場合でも、2次元でもよく分かるように角度をつけて見ている。更に、4画面の場合は、正面のLiveとMask、側面のLiveとMaskとなる。Liveは通常の透視画像で一般的なレントゲン写真と似ており、それをリアルタイムで見ている。Maskは術者が選ぶ過去の任意のLive画像との差分(サブトラクション)を取っている。それにより、Liveで見えていた骨が消え、例えば、造影剤で写っている血管とデバイスのみが見えて、術者にわかりやすい映像が得られる。
本発明の一部の態様では、画面内にある関心領域は確率分布として出力されるため、関心領域の存在を確率で表現することも可能である。存在する領域の確率分布は数値、色、バーなどで表示しても良い。さらに、通知すべき場面かどうかも確率で表現することも可能である。通知すべき場面かどうかを確率に応じた数値、色、バーなどで表示しても良い。また、画面内のどの部分が責任部分かを確率分布としてのヒートマップなどによる表示をしても良い。
確率分布はわかりやすいように変換して表示しても良い。例えば、0~30%はlow、30~70%はmiddle、70~100%はhighとして文字表示したり、3色で表示したりしても良い。別の例として、70%未満の領域を少し暗くして、関心領域もしくは通知すべき領域がスポットライトのように明るく見えるようにしてもよい。
血管内治療で使用するデバイスは様々なものがあり、それぞれにおいて多くの種類が存在する。デバイスの例としては、様々なカテーテル、バルーン付きカテーテル、ガイドワイヤ、ステント、フローダイバータステント(メッシュの細かいステント)、コイル、塞栓物質(液体や粒子などの物質)、その他の塞栓デバイス(WEBなど)がある。また、それぞれのデバイスにおいて、様々な種類がある。例えばカテーテルでは、先端形状・長さ・内腔・外腔・硬さなどの規格がある。コイルでは、メーカー・太さ・全長・直径・硬さなどの規格があり、数百種類存在する。これらを全て覚えておくことは不可能であり、また、在庫もあるかわからないため、手術中にそれを術者が業者に確認しながら、治療を進めていく。組み合わせも重要であり、またコイルの大きさなどは画像を見ながら判断していく。コイルは動脈瘤であれば通常5~15本くらい使用するため、次にどれを使うかを考えなければならないが、在庫管理やラインナップなどを術者・助手は覚えることは困難である。新製品が出たり、旧製品がなくなったりするため、状況を把握することも困難であり、また施設によって揃えているラインナップが変わる。現在は、治療中に業者とコミュニケーションを取ることにより、デバイスの選択をしているが、スムーズではない。
本発明の一部の態様は、血管カテーテル手術支援システム、例えば、脳、心臓、四肢抹消、および腹部の血管、特に脳血管のカテーテル手術支援システムに関する。このようなシステムは、画像処理装置と、血管内に1又は複数のデバイスを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置とを備え、前記画像処理装置が、手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む領域(例えば、固定された領域)のX線画像を経時的に取得する画像取得部と、前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、前記画像において前記関心領域それぞれを追跡する追跡部と、前記関心領域の少なくともいずれか1つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部とを備え、前記1又は複数のデバイスがカテーテル、ガイドワイヤ、ステント及び/又はバルーンであり、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部、ステントの両端、バルーンの両端を含む領域が設定された場合において、前記関心領域が前記画像から消失すること、又は前記関心領域と前記画像の縁部との距離が所定の閾距離未満となること、または前記関心領域が一定距離ずれたことを条件として前記ユーザに通知する、システムでありうる。
図10は、実施の形態に係る画像処理装置1が実行する画像解析処理の流れを説明するためのフローチャートである。本フローチャートにおける処理は、例えば画像処理装置1が起動したときに開始する。
血管撮影の検査や治療において、造影によって血管の撮影を行い、病変を診断するが、見落とすことや、同日の前に撮った撮影や、別の日の撮影と比較して判断しなければならず、時間がかかったり、比較が難しかったりすることがある。また二次元に投影されるため、判断が難しいことがある。よって、本発明の一部の態様は、造影剤による血管撮影において、ディープラーニングなどを用いて、脳動脈瘤、狭窄、閉塞、血栓形成、血管穿孔(造影剤の流出)、シャント疾患、腫瘍血管の栄養血管・腫瘍濃染、静脈血栓症、毛細血管相の無血管領域(血管閉塞の所見)、側副血行路などを含むが、これらに限定はされない病変または部位を指摘する画像診断装置に関する。よって、本発明の一部の態様において、画像処理装置は、前記画像中の動脈瘤、狭窄、血管攣縮、解離、閉塞、再開通、血栓形成、血栓の部位と両端の位置、血管穿孔、造影剤の血管外への漏出、血管の石灰化、動脈硬化、シャント疾患やその栄養血管や流出血管、血液(造影剤)の逆流、脳動静脈奇形、硬膜動静脈瘻、無血管領域、骨のメルクマーク(内耳道、眼底、眼窩上縁、錐体部、大後頭孔、頚椎、鎖骨、肋骨・脊椎の番号、大腿骨頭、骨盤)、腫瘍血管の栄養血管・腫瘍濃染、静脈閉塞、静脈洞血栓症、毛細血管相の無血管領域、血管閉塞、コイルの動脈瘤内の形状や分布、バルーンの位置・膨らみ・形状、コイルの正常血管への逸脱、ステントの拡張不足や血管への密着度合いやねじれ、ステントの移動、ステントの両端の位置、穿刺部と血管の位置関係(狭窄がないか、分岐部近くにないか)、血管の蛇行、大動脈弓部のタイプ(右腕頭動脈が大動脈弓部のトップからどのくらい下にあるか)、液体塞栓物質の浸透範囲、血液(造影剤)の流れの遅延や停滞、血管のバリエーション(前交通動脈・前大脳動脈A1・後交通動脈・後大脳動脈P1・後下小脳動脈・前下小脳動脈・上小脳動脈・浅側頭動脈・各静脈洞・各静脈の有無・発達度合い)、もやもや血管(内頚動脈先端部の狭窄・閉塞とその先の側副血行路の発達)、動脈の分岐部とセグメント(内頚動脈錐体部・海綿静脈洞部・眼動脈部、中大脳動脈M1の分岐部)の位置、過去の手術痕跡(クリップ、コイル、プレート、シャントチューブ・バルブ、脳室チューブ、脳槽チューブ)、WEBデバイスの位置・開き具合、異物(義歯、プレート)、および側副血行路から成る群より選択される病変を認識する病変認識部をさらに含むことができる。指摘まで行わず、異常所見が疑わしい場合に通知したり、どのあたりが異常な可能性があるかを領域で指摘したりしても良い。その場合、最終的には医師が判断することができる。同様に、本発明の一部の態様は、血管撮影を行った際に、前の撮影と比較して、もしくは別の日に行った撮影と比較して、その変化を指摘する画像診断装置に関する。よって、本発明の一部の態様において、画像処理装置は、画像中の血管撮影像を以前に取得して記憶した血管撮影像と比較して、変化を通知する画像認識部をさらに含むことができる。例えば、血管攣縮の程度の変化、血栓形成の変化(出現、消失、拡大、縮小など)、閉塞血管の解除、血管の閉塞、コイルの逸脱、ステントの移動などを指摘することができる。
以上説明したように、実施の形態に係る画像処理装置1によれば、血管のカテーテル検査又は治療において、医療従事者であるユーザを注目部における作業に集中させ、注目部の判断をサポートするための技術を提供することができる。
上記では、脳血管の検査又は治療について主に説明した。しかしながら、本発明の適用対象は脳血管に限られず、心臓、四肢抹消、腹部など、循環器領域を含む血管内の検査及び治療に適用できる。
上記では、図7(a)-(b)のような2画面の装置を例に説明を行ったが、画面の数はこれに限定されず、例えば1画面や3画面以上であってもよい。
上記では、X線撮像装置3が被験者Pの術部の画像を撮影する場合について説明した。しかしながら、被験者Pの術部の画像を撮影する撮像装置はX線撮像装置3に限られない。この他、例えばMRI(Magnetic Resonance Imaging)や超音波撮影装置等のモダリティを用いて術部の画像を撮影してもよい。
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、本出願の開示事項は以下の付記に限定はされない。
画像処理装置であって、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と、
を備える画像処理装置。
(付記2)
前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が前記画像から消失することを条件として前記ユーザに通知する、
付記1に記載の画像処理装置。
(付記3)
前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域と前記画像の縁部との距離が所定の閾距離未満となることを条件として前記ユーザに通知する、
付記1に記載の画像処理装置。
(付記4)
前記通知部は、前記画像内における前記関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つがあらかじめ定められた閾値を超えることを条件として前記ユーザに通知する、
付記1から3のいずれか1項に記載の画像処理装置。
(付記5)
前記通知部は、前記関心領域と前記画像の縁部との距離を、前記画像を表示する表示装置に表示させる、
付記1から4のいずれか1項に記載の画像処理装置。
(付記6)
前記通知部は、前記関心領域と前記画像の縁部との距離の大きさに応じて、前記表示装置における前記距離の表示態様を変化させる、
付記5に記載の画像処理装置。
(付記7)
前記通知部は、前記関心領域と前記画像の縁部との距離を前記画像内における前記関心領域の移動速度で除算した値があらかじめ定められた閾値未満となることを条件として、前記ユーザに通知する、
付記1から6のいずれか1項に記載の画像処理装置。
(付記8)
塞栓用コイルのデリバリーワイヤに設けられたマーカであって、前記デリバリーワイヤを誘導するマイクロカテーテルの一部に設定された関心領域に接近するマーカを検出するマーカ検出部をさらに備え、
前記追跡部は、検出された前記マーカをさらに追跡し、
前記通知部は、前記マーカと前記関心領域とが重畳することを契機として、前記塞栓用コイルを前記デリバリーワイヤから切断してもよいタイミングを前記ユーザに通知する、
付記1から7のいずれか1項に記載の画像処理装置。
(付記9)
前記通知部は、前記マーカが前記関心領域を通過した場合、そのことを前記ユーザに通知する、
付記8に記載の画像処理装置。
(付記10)
前記通知部は、前記塞栓用コイルを前記デリバリーワイヤから切断するまでに前記マーカが移動すべき距離を表示装置に表示させる、
付記8又は9に記載の画像処理装置。
(付記11)
前記通知部は、前記関心領域に含まれる前記デバイスの形状を示す特徴量が所定の条件を満たす場合、そのことを前記画像処理装置のユーザに通知する、
付記1から10のいずれか1項に記載の画像処理装置。
(付記12)
前記特徴量は曲率であり、
前記通知部は、前記関心領域に含まれる前記デバイスの曲率が所定の閾曲率を超えること、もしくは曲率が変化しているのに先端が動かないことを条件として前記ユーザに通知する、
付記11に記載の画像処理装置。
(付記13)
前記通知部は、前記画像または関心領域に含まれる前記デバイスの長さから前記画像または関心領域に含まれる前記血管の中心線の長さを減じた値が所定の閾長さを超えることを条件として前記ユーザに通知する、
付記11又は12に記載の画像処理装置。
(付記14)
前記通知部は、前記関心領域を前記画像と異なる色に着色して表示させる、表示する文字のフォント、サイズもしくは色を変える、表示装置の画面全体もしくは一部の場所の色を変える、表示装置の画面全体もしくは枠外もしくは一部の場所に図形を表示する、関心領域を拡大表示する、または関心領域に付するマークの色もしくはサイズを変えることによりユーザに通知を行う、付記1から13のいずれか1項に記載の画像処理装置。
前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が動いたこと、または前記関心領域が、前記画像上において指定された特定の範囲を超えたことを条件として前記ユーザに通知する、
付記1から14のいずれか1項に記載の画像処理装置。
(付記16)
画像取得部から得た画像または動画を経時的に保存する映像記憶部をさらに含む、付記1から15のいずれか1項に記載の画像処理装置。
(付記17)
通知部が通知を発した前後の一定の期間の映像またはユーザが指定した任意の時間または期間の映像を前記映像記憶部より抽出する映像抽出部をさらに含む、付記16に記載の画像処理装置。
(付記18)
通知が発生した際の関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つに基づき、映像の抽出期間が自動で決定されることを特徴とする、付記17に記載の画像処理装置。
(付記19)
抽出された映像を表示装置に表示させる、付記17または18に記載の画像処理装置。
(付記20)
抽出された映像が、自動的に所定の回数繰り返して表示される、付記19に記載の画像処理装置。
(付記21)
再生、停止、早送り、巻き戻し、コマ送り、スロー再生、倍速再生を含む任意の操作に基づいて、抽出された映像が表示される、付記20に記載の画像処理装置。
(付記22)
通知が発生した時点からの経過時間、通知が発生した時点と任意の時間の経過後における関心領域の位置の比較、または追跡部が取得した関心領域の軌跡が、抽出された映像に重畳してさらに表示される、付記17から21のいずれか1項に記載の画像処理装置。
(付記23)
抽出された映像が、関心領域の近傍の一部の領域を切り出して表示される、付記17から22のいずれか1項に記載の画像処理装置。
(付記24)
抽出された映像が、関心領域の表示を妨げない位置に表示される、付記17から23のいずれか1項に記載の画像処理装置。
(付記25)
抽出された映像が、拡大されて表示される、付記17から24のいずれか1項に記載の画像処理装置。
(付記26)
抽出された映像が、通知の発生と同時または通知の発生から所定時間の経過後に表示される、付記17から25のいずれか1項に記載の画像処理装置。
(付記27)
複数の方向から撮影された映像が同時に表示される、付記17から26のいずれか1項に記載の画像処理装置。
(付記28)
前記関心領域が前記画像から消失する直前のカテーテルの先端部又はガイドワイヤの先端部の位置、速度および/または加速度に基づき、前記画像から消失したカテーテルの先端部又はガイドワイヤの先端部の現在位置および/または速度を推定する状態推定部をさらに備える、付記2から27のいずれか1項に記載の画像処理装置。
(付記29)
状態推定部が推定した関心領域の現在位置および/または速度が所定の閾値を超えた場合にユーザに警告が通知される、付記28に記載の画像処理装置。
(付記30)
前記画像を表示する表示装置が、2つの画像をサイズの異なる2つの画面に表示する、付記1から29のいずれか1項に記載の画像処理装置。
(付記31)
前記表示装置が、2つの画面のうち一方の画面の枠部分を光らせる、色を変える、または強調表示することにより、ユーザに注意を促す、付記30項に記載の画像処理装置。
(付記32)
前記画像を表示する表示装置が、血管内の検査用又は治療用のデバイスの製品一覧を表示する、付記1から31のいずれか1項に記載の画像処理装置。
(付記33)
前記表示装置が、サイズまたは在庫により絞り込んだ製品一覧を表示する、付記32に記載の画像処理装置。
(付記34)
前記表示装置が、画像解析結果、施設の情報、またはユーザの好みの情報に基づき、推奨される製品のリストを表示する、付記32または33に記載の画像処理装置。
(付記35)
使用されたデバイスの情報、取得された画像の情報、および画像解析結果を含む手術記録を自動で、またはユーザの選択に基づき作成する、付記1から34のいずれか1項に記載の画像処理装置。
(付記36)
前記通知部は、前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす確率に応じた数値、色、バーもしくはヒートマップ、または確率分布に任意の変換をほどこした値にもとづく数値、色、バーもしくはヒートマップを、前記画像を表示する表示装置に表示する、付記1から35のいずれか1項に記載の画像処理装置。
(付記37)
前記通知部は、前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす確率に応じた色もしくはヒートマップ、または確率分布を任意に変換した値に基づく色もしくはヒートマップにより、前記関心領域を着色して前記画像を表示する表示装置に表示する、あるいは条件を満たす確率を数値もしくは色に置き換えて前記画像を表示する表示装置に表示する、付記1から35のいずれか1項に記載の画像処理装置。
(付記38)
前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が動いたこと、または前記関心領域が、画像上において指定された特定の範囲を超えたことを条件として前記ユーザに通知する、付記1から37のいずれか1項に記載の画像処理装置。
(付記39)
前記特定の範囲の境界線が、直線、曲線、円形、矩形、または、その他の多角形により表される、付記38に記載の画像処理装置。
(付記40)
前記特定の範囲が、X線画像上に重畳表示される、付記38または39に記載の画像処理装置。
(付記41)
前記通知部は、前記関心領域と前記特定の範囲の縁部との距離を、前記画像を表示する表示装置に表示させる、付記38から40のいずれか1項に記載の画像処理装置。
(付記42)
前記通知部は、前記関心領域と前記特定の範囲の縁部との距離の大きさに応じて、前記表示装置における前記距離の表示態様を変化させる、付記41に記載の画像処理装置。
(付記43)
前記通知部は、前記関心領域と前記特定の範囲の縁部との距離を前記画像内における前記関心領域の移動速度で除算した値があらかじめ定められた閾値未満となることを条件として、前記ユーザに通知する、付記38から42のいずれか1項に記載の画像処理装置。
(付記44)
前記距離が、直線距離又は血管に沿った距離のいずれかにより決定される、付記3から43のいずれか1項に記載の画像処理装置。
(付記45)
血管内の検査用又は治療用のデバイスの任意の時点における位置および/もしくは形状を取得して記憶する記憶部を含み、記憶されたデバイスの位置および/もしくは形状が取得以降の画像に重畳表示される、付記1から44のいずれか1項に記載の画像処理装置。
(付記46)
前記画像中の脳動脈瘤、狭窄、閉塞、血栓形成、血管穿孔、造影剤の血管外への漏出、シャント疾患、腫瘍血管の栄養血管・腫瘍濃染、静脈血栓症、毛細血管相の無血管領域、血管閉塞、および側副血行路から成る群より選択される病変を認識する病変認識部をさらに含む、付記1から42のいずれか1項に記載の画像処理装置。
(付記47)
前記画像中の血管撮影像を以前に取得して記憶した血管撮影像と比較して、変化を通知する画像認識部をさらに含む、付記1から43のいずれか1項に記載の画像処理装置。
画像処理装置のプロセッサが、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得するステップと、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得するステップと、
前記画像において前記関心領域それぞれを追跡するステップと、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知するステップと、
を実行する画像処理方法。
コンピュータに、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する機能と、
前記X線画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する機能と、
前記X線画像において前記関心領域それぞれを追跡する機能と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記コンピュータのユーザに通知する機能と、
を実現させるプログラム。
付記1から44のいずれか1項に記載の画像処理装置と、
血管内の検査用又は治療用のデバイスを挿入した状態の人物の画像を撮像して前記画像処理装置に送信する撮像装置と、
を備える画像処理システム。
脳血管カテーテル手術支援システムであって、
画像処理装置と、
血管内に1又は複数のデバイスを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置と
を備え、
前記画像処理装置が、
手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む固定領域のX線画像を経時的に取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか1つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と
を備え、
前記1又は複数のデバイスがカテーテル、ガイドワイヤ、ステント及び/又はバルーンであり、
前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部、ステントの両端、バルーンの両端を含む領域が設定された場合において、前記関心領域が前記画像から消失すること、又は前記関心領域と前記画像の縁部との距離が所定の閾距離未満となることを条件として前記ユーザに通知する、
システム。
(付記52)
脳動脈瘤コイル塞栓術補助システムであって、
画像処理装置と、
血管内にガイディングカテーテルと塞栓用コイルのデリバリーワイヤとを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置と
を備え、
前記画像処理装置が、
患者の血管に生じた動脈瘤と、血管内に挿入されたカテーテルと、塞栓用コイルのデリバリーワイヤとを少なくとも含む固定領域のX線画像を経時的に取得する画像取得部と、
前記画像に含まれる前記ガイディングカテーテルの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記デリバリーワイヤに設けられたマーカであって、前記デリバリーワイヤを誘導する前記カテーテルの一部に設定された1又は複数の関心領域に接近するマーカを検出するマーカ検出部と、
前記画像において前記関心領域及び前記マーカそれぞれを追跡する追跡部と、
前記マーカと前記関心領域とが重畳することを契機として、塞栓用コイルを該デリバリーワイヤから切断してもよいタイミングをユーザに通知する通知部と
を備える、システム。
(付記53)
前記通知部が、前記関心領域と前記画像の縁部との距離又は前記マーカと前記関心領域との距離を、前記画像を表示する表示装置に表示させ、
ここで、前記通知部は、前記距離の大きさに応じて、前記表示装置における前記距離の表示態様を変化させることができ、表示態様の変化が、前記距離の大きさに応じて表示する文字のフォント、サイズ、もしくは色を変えること、前記距離の大きさに応じて表示装置の画面全体もしくは一部の場所の色を変えること、表示装置の画面全体もしくは枠外もしくは一部の場所に図形を表示する、前記距離の大きさに応じて関心領域を拡大表示する、又は前記距離の大きさに応じて関心領域に付するマークの色もしくはサイズを変えることを含む、付記51または52記載のシステム。
(付記54)
前記通知部が、前記距離の大きさに応じて通知音を鳴らすことができる、もしくは振動を伝えることができる、付記51から53のいずれか1項に記載のシステム。
(付記55)
前記距離が、直線距離又は血管に沿った距離のいずれかにより決定される、付記51から54のいずれか1項に記載のシステム。
(付記56)
脳動脈瘤コイル塞栓術補助システムであって、
画像処理装置と、
血管内にガイディングカテーテルと塞栓用コイルのデリバリーワイヤとを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置と
を備え、
前記画像処理装置が、
カテーテルの先端と2ndマーカとの位置関係を記憶する位置関係記憶部と、
動脈瘤のネックラインと1stマーカとの距離a及びその時点t1における2ndマーカの位置を記憶する位置記憶部と、
時点t2における2ndマーカの位置から移動距離bを算出し、カテーテルの先端の動脈瘤ネックラインからの距離a-bを推定する距離推定部と
推定された距離をユーザに通知する通知部と
を備える、システム。
(付記57)
推定された距離が確率分布により表される、付記546記載のシステム。
(付記58)
推定されるカテーテル先端の位置が確率分布に基づき着色して表示される、付記56または57に記載のシステム。
血管内手術支援システムであって、血管内の検査用又は治療用のデバイスの製品一覧を記憶した記憶部と、画像解析結果、施設の情報、またはユーザの好みの情報に基づき使用する製品を推奨する推奨部と、推奨される製品を表示する表示部とを含む、システム。
10・・・記憶部
11・・・制御部
110・・・画像取得部
111・・・関心領域取得部
112・・・追跡部
113・・・通知部
114・・・マーカ検出部
115・・・測距部
2・・・表示装置
3・・・X線撮像装置
30・・・X線照射器
31・・・X線検出器
32・・・寝台
D・・・デバイス
E・・・塞栓用コイル
P・・・被験者
S・・・画像処理システム
Claims (60)
- 血管カテーテル手術を支援するための画像処理装置であって、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と、
を備え、
前記画像取得部は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像を経時的に取得し、
前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が前記画像から消失することを条件として前記ユーザに通知する、
画像処理装置。 - 血管カテーテル手術を支援するための画像処理装置であって、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と、
を備え、
前記画像取得部は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像を経時的に取得し、
前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域と前記画像の縁部との距離が所定の閾距離未満となることを条件として前記ユーザに通知する、
画像処理装置。 - 血管カテーテル手術を支援するための画像処理装置であって、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と、
を備え、
前記画像取得部は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像を経時的に取得し、
前記通知部は、前記画像内における前記関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つがあらかじめ定められた閾値を超えることを条件として前記ユーザに通知する、
画像処理装置。 - 前記通知部は、さらに、前記画像内における前記関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つがあらかじめ定められた閾値を超えることを条件として前記ユーザに通知する、
請求項1または2に記載の画像処理装置。 - 画像処理装置であって、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と、
を備え、
前記通知部は、前記関心領域と前記画像の縁部との距離を、前記画像を表示する表示装置に表示させる、
画像処理装置。 - 前記通知部は、前記関心領域と前記画像の縁部との距離の大きさに応じて、前記表示装置における前記距離の表示態様を変化させる、
請求項5に記載の画像処理装置。 - 前記通知部は、前記関心領域と前記画像の縁部との距離を前記画像内における前記関心領域の移動速度で除算した値があらかじめ定められた閾値未満となることを条件として、前記ユーザに通知する、
請求項1から6のいずれか1項に記載の画像処理装置。 - 画像処理装置であって、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と、
を備え、
塞栓用コイルのデリバリーワイヤに設けられたマーカであって、前記デリバリーワイヤを誘導するマイクロカテーテルの一部に設定された関心領域に接近するマーカを検出するマーカ検出部をさらに備え、
前記追跡部は、検出された前記マーカをさらに追跡し、
前記通知部は、前記マーカと前記関心領域とが重畳することを契機として、前記塞栓用コイルを前記デリバリーワイヤから切断してもよいタイミングを前記ユーザに通知する、
画像処理装置。 - 前記通知部は、前記マーカが前記関心領域を通過した場合、そのことを前記ユーザに通知する、
請求項8に記載の画像処理装置。 - 前記通知部は、前記塞栓用コイルを前記デリバリーワイヤから切断するまでに前記マーカが移動すべき距離を表示装置に表示させる、
請求項8又は9に記載の画像処理装置。 - 前記通知部は、前記関心領域に含まれる前記デバイスの形状を示す特徴量が所定の条件を満たす場合、そのことを前記画像処理装置のユーザに通知する、
請求項1から10のいずれか1項に記載の画像処理装置。 - 前記特徴量は曲率であり、
前記通知部は、前記関心領域に含まれる前記デバイスの曲率が所定の閾曲率を超えること、もしくは曲率が変化しているのに先端が動かないことを条件として前記ユーザに通知する、
請求項11に記載の画像処理装置。 - 前記通知部は、前記画像または関心領域に含まれる前記デバイスの長さから前記画像または関心領域に含まれる前記血管の中心線の長さを減じた値が所定の閾長さを超えることを条件として前記ユーザに通知する、
請求項11又は12に記載の画像処理装置。 - 前記通知部は、前記関心領域を前記画像と異なる色に着色して表示させる、表示する文字のフォント、サイズもしくは色を変える、表示装置の画面全体もしくは一部の場所の色を変える、表示装置の画面全体もしくは枠外もしくは一部の場所に図形を表示する、関心領域を拡大表示する、または関心領域に付するマークの色もしくはサイズを変えることによりユーザに通知を行う、請求項1から13のいずれか1項に記載の画像処理装置。
- 前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が動いたこと、または前記関心領域が、前記画像上において指定された特定の範囲を超えたことを条件として前記ユーザに通知する、
請求項1から14のいずれか1項に記載の画像処理装置。 - 画像取得部から得た画像または動画を経時的に保存する映像記憶部と、
通知部が通知を発した前後の一定の期間の映像またはユーザが指定した任意の時間または期間の映像を前記映像記憶部より抽出する映像抽出部をさらに含み、
抽出された映像を表示装置に表示させる、請求項1から15のいずれか1項に記載の画像処理装置。 - 通知が発生した際の関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つに基づき、映像の抽出期間が自動で決定されることを特徴とする、請求項16に記載の画像処理装置。
- 抽出された映像が、自動的に所定の回数繰り返して表示される、請求項16または17に記載の画像処理装置。
- 再生、停止、早送り、巻き戻し、コマ送り、スロー再生、倍速再生を含む任意の操作に基づいて、抽出された映像が表示される、請求項16から18のいずれか1項に記載の画像処理装置。
- 通知が発生した時点からの経過時間、通知が発生した時点と任意の時間の経過後における関心領域の位置の比較、または追跡部が取得した関心領域の軌跡が、抽出された映像に重畳してさらに表示される、請求項16から19のいずれか1項に記載の画像処理装置。
- 抽出された映像が、関心領域の近傍の一部の領域を切り出して表示される、請求項16から20のいずれか1項に記載の画像処理装置。
- 抽出された映像が、関心領域の表示を妨げない位置に表示される、および/または、拡大されて表示される、請求項16から21のいずれか1項に記載の画像処理装置。
- 抽出された映像が、通知の発生と同時または通知の発生から所定時間の経過後に表示される、請求項16から22のいずれか1項に記載の画像処理装置。
- 複数の方向から撮影された映像が同時に表示される、請求項16から23のいずれか1項に記載の画像処理装置。
- 前記関心領域が前記画像から消失する直前のカテーテルの先端部又はガイドワイヤの先端部の位置、速度および/または加速度に基づき、前記画像から消失したカテーテルの先端部又はガイドワイヤの先端部の現在位置および/または速度を推定する状態推定部をさらに備える、請求項1から24のいずれか1項に記載の画像処理装置。
- 状態推定部が推定した関心領域の現在位置および/または速度が所定の閾値を超えた場合にユーザに警告が通知される、請求項25に記載の画像処理装置。
- 前記画像を表示する表示装置が、2つの画像をサイズの異なる2つの画面に表示する、請求項1から26のいずれか1項に記載の画像処理装置。
- 前記表示装置が、2つの画面のうち一方の画面の枠部分を光らせる、色を変える、または強調表示することにより、ユーザに注意を促す、請求項27項に記載の画像処理装置。
- 前記画像を表示する表示装置が、血管内の検査用又は治療用のデバイスの製品一覧を表示する、請求項1から28のいずれか1項に記載の画像処理装置。
- 前記表示装置が、サイズまたは在庫により絞り込んだ製品一覧を表示する、請求項29に記載の画像処理装置。
- 前記表示装置が、画像解析結果、施設の情報、またはユーザの好みの情報に基づき、推奨される製品のリストを表示する、請求項29または30に記載の画像処理装置。
- 使用されたデバイスの情報、取得された画像の情報、および画像解析結果を含む手術記録を自動で、またはユーザの選択に基づき作成する、請求項1から31のいずれか1項に記載の画像処理装置。
- 前記通知部は、前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす確率に応じた数値、色、バーもしくはヒートマップ、または確率分布に任意の変換をほどこした値にもとづく数値、色、バーもしくはヒートマップを、前記画像を表示する表示装置に表示する、請求項1から32のいずれか1項に記載の画像処理装置。
- 前記通知部は、前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす確率に応じた色もしくはヒートマップ、または確率分布を任意に変換した値に基づく色もしくはヒートマップにより、前記関心領域を着色して前記画像を表示する表示装置に表示する、あるいは条件を満たす確率を数値もしくは色に置き換えて前記画像を表示する表示装置に表示する、請求項1から33のいずれか1項に記載の画像処理装置。
- 前記通知部は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が動いたこと、または前記関心領域が、画像上において指定された特定の範囲を超えたことを条件として前記ユーザに通知する、請求項1から34のいずれか1項に記載の画像処理装置。
- 前記特定の範囲の境界線が、直線、曲線、円形、矩形、または、その他の多角形により表される、請求項35に記載の画像処理装置。
- 前記特定の範囲が、X線画像上に重畳表示される、請求項35または36に記載の画像処理装置。
- 前記通知部は、前記関心領域と前記特定の範囲の縁部との距離を、前記画像を表示する表示装置に表示させる、請求項35から37のいずれか1項に記載の画像処理装置。
- 前記通知部は、前記関心領域と前記特定の範囲の縁部との距離の大きさに応じて、前記表示装置における前記距離の表示態様を変化させる、請求項38に記載の画像処理装置。
- 前記通知部は、前記関心領域と前記特定の範囲の縁部との距離を前記画像内における前記関心領域の移動速度で除算した値があらかじめ定められた閾値未満となることを条件として、前記ユーザに通知する、請求項35から39のいずれか1項に記載の画像処理装置。
- 前記距離が、直線距離又は血管に沿った距離のいずれかにより決定される、請求項2から40のいずれか1項に記載の画像処理装置。
- 血管内の検査用又は治療用のデバイスの任意の時点における位置および/もしくは形状を取得して記憶する記憶部を含み、記憶されたデバイスの位置および/もしくは形状が取得以降の画像に重畳表示される、請求項1から41のいずれか1項に記載の画像処理装置。
- 前記画像中の動脈瘤、狭窄、血管攣縮、解離、閉塞、再開通、血栓形成、血栓の部位と両端の位置、血管穿孔、造影剤の血管外への漏出、血管の石灰化、動脈硬化、シャント疾患やその栄養血管や流出血管、血液(造影剤)の逆流、脳動静脈奇形、硬膜動静脈瘻、無血管領域、骨のメルクマーク(内耳道、眼底、眼窩上縁、錐体部、大後頭孔、頚椎、鎖骨、肋骨・脊椎の番号、大腿骨頭、骨盤)、腫瘍血管の栄養血管・腫瘍濃染、静脈閉塞、静脈洞血栓症、毛細血管相の無血管領域、血管閉塞、コイルの動脈瘤内の形状や分布、バルーンの位置・膨らみ・形状、コイルの正常血管への逸脱、ステントの拡張不足や血管への密着度合いやねじれ、ステントの移動、ステントの両端の位置、穿刺部と血管の位置関係(狭窄がないか、分岐部近くにないか)、血管の蛇行、大動脈弓部のタイプ(右腕頭動脈が大動脈弓部のトップからどのくらい下にあるか)、液体塞栓物質の浸透範囲、血液(造影剤)の流れの遅延や停滞、血管のバリエーション(前交通動脈・前大脳動脈A1・後交通動脈・後大脳動脈P1・後下小脳動脈・前下小脳動脈・上小脳動脈・浅側頭動脈・各静脈洞・各静脈の有無・発達度合い)、もやもや血管(内頚動脈先端部の狭窄・閉塞とその先の側副血行路の発達)、動脈の分岐部とセグメント(内頚動脈錐体部・海綿静脈洞部・眼動脈部、中大脳動脈M1の分岐部)の位置、過去の手術痕跡(クリップ、コイル、プレート、シャントチューブ・バルブ、脳室チューブ、脳槽チューブ)、WEBデバイスの位置・開き具合、異物(義歯、プレート)、および側副血行路から成る群より選択される病変を認識する病変認識部をさらに含む、請求項1から42のいずれか1項に記載の画像処理装置。
- 前記画像中の血管撮影像を以前に取得して記憶した血管撮影像と比較して、変化を通知する画像認識部をさらに含む、請求項1から43のいずれか1項に記載の画像処理装置。
- 画像処理装置のプロセッサが、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得するステップと、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得するステップと、
前記画像において前記関心領域それぞれを追跡するステップと、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知するステップと、
を実行する血管カテーテル手術を支援するための画像処理方法であって、
前記画像は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像であり、
前記通知するステップは、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が前記画像から消失することを条件として前記ユーザに通知する、
画像処理方法。 - コンピュータに、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含むX線画像を取得する機能と、
前記X線画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する機能と、
前記X線画像において前記関心領域それぞれを追跡する機能と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記コンピュータのユーザに通知する機能と、
を実現させる血管カテーテル手術を支援するためのプログラムであって、
前記画像は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像であり、
前記通知する機能は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域が前記画像から消失することを条件として前記ユーザに通知する、
プログラム。 - 請求項1から44のいずれか1項に記載の画像処理装置と、
血管内の検査用又は治療用のデバイスを挿入した状態の人物の画像を撮像して前記画像処理装置に送信する撮像装置と、
を備える画像処理システム。 - 脳血管カテーテル手術支援システムであって、
画像処理装置と、
血管内に1又は複数のデバイスを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置と
を備え、
前記画像処理装置が、
脳血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、患者の頭部に固定された領域のX線画像を経時的に取得する画像取得部と、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記画像において前記関心領域それぞれを追跡する追跡部と、
前記関心領域の少なくともいずれか1つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知する通知部と
を備え、
前記1又は複数のデバイスがカテーテル、ガイドワイヤ、ステント及び/又はバルーンであり、
前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部、ステントの両端、バルーンの両端を含む領域が設定された場合において、前記関心領域が前記画像から消失すること、又は前記関心領域と前記画像の縁部との距離が所定の閾距離未満となることを条件として前記ユーザに通知する、
システム。 - 脳動脈瘤コイル塞栓術補助システムであって、
画像処理装置と、
血管内にガイディングカテーテルと塞栓用コイルのデリバリーワイヤとを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置と
を備え、
前記画像処理装置が、
患者の血管に生じた動脈瘤と、血管内に挿入されたカテーテルと、塞栓用コイルのデリバリーワイヤとを少なくとも含む固定領域のX線画像を経時的に取得する画像取得部と、
前記画像に含まれる前記ガイディングカテーテルの少なくとも一部を含む1又は複数の領域を関心領域として取得する関心領域取得部と、
前記デリバリーワイヤに設けられたマーカであって、前記デリバリーワイヤを誘導する前記カテーテルの一部に設定された1又は複数の関心領域に接近するマーカを検出するマーカ検出部と、
前記画像において前記関心領域及び前記マーカそれぞれを追跡する追跡部と、
前記マーカと前記関心領域とが重畳することを契機として、塞栓用コイルを該デリバリーワイヤから切断してもよいタイミングをユーザに通知する通知部と
を備える、システム。 - 前記通知部が、前記関心領域と前記画像の縁部との距離又は前記マーカと前記関心領域との距離を、前記画像を表示する表示装置に表示させ、
ここで、前記通知部は、前記距離の大きさに応じて、前記表示装置における前記距離の表示態様を変化させることができ、表示態様の変化が、前記距離の大きさに応じて表示する文字のフォント、サイズ、もしくは色を変えること、前記距離の大きさに応じて表示装置の画面全体もしくは一部の場所の色を変えること、前記距離の大きさに応じて関心領域を拡大表示する、又は前記距離の大きさに応じて関心領域に付するマークの色もしくはサイズを変えることを含む、請求項48または49記載のシステム。 - 前記通知部が、前記距離の大きさに応じて通知音を鳴らすことができる、もしくは振動を伝えることができる、請求項48から50のいずれか1項に記載のシステム。
- 前記距離が、直線距離又は血管に沿った距離のいずれかにより決定される、請求項48から51のいずれか1項に記載のシステム。
- 脳動脈瘤コイル塞栓術補助システムであって、
画像処理装置と、
血管内にガイディングカテーテルと塞栓用コイルのデリバリーワイヤとを挿入した状態の患者のX線画像を撮像して前記画像処理装置に送信する画像撮像装置と
を備え、
前記画像処理装置が、
カテーテルの先端と2ndマーカとの位置関係を記憶する位置関係記憶部と、
動脈瘤のネックラインと1stマーカとの距離a及びその時点t1における2ndマーカの位置を記憶する位置記憶部と、
時点t2における2ndマーカの位置から移動距離bを算出し、カテーテルの先端の動脈瘤ネックラインからの距離a-bを推定する距離推定部と
推定された距離をユーザに通知する通知部と
を備える、システム。 - 推定された距離が確率分布により表される、請求項53に記載のシステム。
- 推定されるカテーテル先端の位置が確率分布に基づき着色して表示される、請求項53または54に記載のシステム。
- 血管内手術支援システムであって、請求項1から44のいずれか1項に記載の画像処理装置と、血管内の検査用又は治療用のデバイスの製品一覧を記憶した記憶部と、画像解析結果、施設の情報、またはユーザの好みの情報に基づき使用する製品を推奨する推奨部と、推奨される製品を表示する表示部とを含む、システム。
- 画像処理装置のプロセッサが、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得するステップと、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得するステップと、
前記画像において前記関心領域それぞれを追跡するステップと、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知するステップと、
を実行する血管カテーテル手術を支援するための画像処理方法であって、
前記画像は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像であり、
前記通知するステップは、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域と前記画像の縁部との距離が所定の閾距離未満となることを条件として前記ユーザに通知する、
画像処理方法。 - 画像処理装置のプロセッサが、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含む画像を取得するステップと、
前記画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得するステップと、
前記画像において前記関心領域それぞれを追跡するステップと、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記画像処理装置のユーザに通知するステップと、
を実行する血管カテーテル手術を支援するための画像処理方法であって、
前記画像は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像であり、
前記通知するステップは、前記画像内における前記関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つがあらかじめ定められた閾値を超えることを条件として前記ユーザに通知する、
画像処理方法。 - コンピュータに、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含むX線画像を取得する機能と、
前記X線画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する機能と、
前記X線画像において前記関心領域それぞれを追跡する機能と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記コンピュータのユーザに通知する機能と、
を実現させる血管カテーテル手術を支援するためのプログラムであって、
前記画像は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像であり、
前記通知する機能は、前記関心領域としてカテーテルの先端部又はガイドワイヤの先端部を含む領域が設定された場合において、前記関心領域と前記画像の縁部との距離が所定の閾距離未満となることを条件として前記ユーザに通知する、
プログラム。 - コンピュータに、
血管内の検査用又は治療用のデバイスを少なくとも被写体に含むX線画像を取得する機能と、
前記X線画像に含まれる前記デバイスの少なくとも一部を含む1又は複数の領域を関心領域として取得する機能と、
前記X線画像において前記関心領域それぞれを追跡する機能と、
前記関心領域の少なくともいずれか一つが前記関心領域毎に定められた条件を満たす場合、そのことを前記コンピュータのユーザに通知する機能と、
を実現させる血管カテーテル手術を支援するためのプログラムであって、
前記画像は、血管カテーテル手術の目的を達成するための注目部と、血管内に挿入されたデバイスとを少なくとも含む、被験者の病変部に固定された領域のX線画像であり、
前記通知する機能は、前記画像内における前記関心領域の移動距離、移動速度、及び加速度の少なくともいずれか1つがあらかじめ定められた閾値を超えることを条件として前記ユーザに通知する、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022052796A JP2022084882A (ja) | 2020-05-07 | 2022-03-29 | 画像処理装置、画像処理方法、プログラム、及び画像処理システム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020082171 | 2020-05-07 | ||
JP2020082171 | 2020-05-07 | ||
PCT/JP2021/017451 WO2021225155A1 (ja) | 2020-05-07 | 2021-05-07 | 画像処理装置、画像処理方法、プログラム、及び画像処理システム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022052796A Division JP2022084882A (ja) | 2020-05-07 | 2022-03-29 | 画像処理装置、画像処理方法、プログラム、及び画像処理システム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021225155A1 JPWO2021225155A1 (ja) | 2021-11-11 |
JPWO2021225155A5 JPWO2021225155A5 (ja) | 2022-04-08 |
JP7054972B2 true JP7054972B2 (ja) | 2022-04-15 |
Family
ID=78468035
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022506144A Active JP7054972B2 (ja) | 2020-05-07 | 2021-05-07 | 画像処理装置、画像処理方法、プログラム、及び画像処理システム |
JP2022052796A Pending JP2022084882A (ja) | 2020-05-07 | 2022-03-29 | 画像処理装置、画像処理方法、プログラム、及び画像処理システム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022052796A Pending JP2022084882A (ja) | 2020-05-07 | 2022-03-29 | 画像処理装置、画像処理方法、プログラム、及び画像処理システム |
Country Status (5)
Country | Link |
---|---|
EP (1) | EP4147643A4 (ja) |
JP (2) | JP7054972B2 (ja) |
CN (1) | CN115666392A (ja) |
CA (1) | CA3178103A1 (ja) |
WO (1) | WO2021225155A1 (ja) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002058658A (ja) | 2000-06-05 | 2002-02-26 | Toshiba Corp | インターベンショナルmri用の磁気共鳴イメージング装置及びその準備方法 |
JP2004229865A (ja) | 2003-01-30 | 2004-08-19 | Hitachi Medical Corp | 磁気共鳴イメージング装置 |
JP2004283373A (ja) | 2003-03-20 | 2004-10-14 | Toshiba Corp | 管腔状構造体の解析処理装置 |
JP2007075141A (ja) | 2005-09-09 | 2007-03-29 | Toshiba Corp | 治療用デバイス選択支援システム及び治療用デバイス選択方法 |
US20080275467A1 (en) | 2007-05-02 | 2008-11-06 | Siemens Corporate Research, Inc. | Intraoperative guidance for endovascular interventions via three-dimensional path planning, x-ray fluoroscopy, and image overlay |
JP2014004491A (ja) | 2013-10-18 | 2014-01-16 | Toshiba Corp | X線診断装置 |
JP2016123719A (ja) | 2015-01-05 | 2016-07-11 | 株式会社東芝 | X線診断装置 |
US20160256120A1 (en) | 2015-03-06 | 2016-09-08 | University Of Rochester | Catheter Detection, Tracking And Virtual Image Reconstruction |
JP2017522943A (ja) | 2014-06-25 | 2017-08-17 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | X線診断及び処置における自動式又は支援型関心領域位置決め |
JP2018520809A (ja) | 2015-07-27 | 2018-08-02 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 医療用配置アラーム |
JP2018531721A (ja) | 2015-10-28 | 2018-11-01 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 大動脈弁状態の情報伝達 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2802345A1 (en) * | 2010-06-13 | 2011-12-22 | Angiometrix Corporation | Methods and systems for determining vascular bodily lumen information and guiding medical devices |
KR102266904B1 (ko) * | 2014-05-09 | 2021-06-18 | 삼성전자주식회사 | 의료 영상 장치의 의료 영상 제공 방법 및 그 의료 영상 장치 |
US10548669B2 (en) | 2016-02-16 | 2020-02-04 | Mentice Ab | Systems and methods for routing a vessel line such as a catheter within a vessel |
EP3468668B1 (en) * | 2017-05-30 | 2020-01-01 | Brainlab AG | Soft tissue tracking using physiologic volume rendering |
US11918423B2 (en) * | 2018-10-30 | 2024-03-05 | Corindus, Inc. | System and method for navigating a device through a path to a target location |
-
2021
- 2021-05-07 JP JP2022506144A patent/JP7054972B2/ja active Active
- 2021-05-07 CA CA3178103A patent/CA3178103A1/en active Pending
- 2021-05-07 EP EP21798936.7A patent/EP4147643A4/en active Pending
- 2021-05-07 CN CN202180033882.XA patent/CN115666392A/zh active Pending
- 2021-05-07 WO PCT/JP2021/017451 patent/WO2021225155A1/ja active Application Filing
-
2022
- 2022-03-29 JP JP2022052796A patent/JP2022084882A/ja active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002058658A (ja) | 2000-06-05 | 2002-02-26 | Toshiba Corp | インターベンショナルmri用の磁気共鳴イメージング装置及びその準備方法 |
JP2004229865A (ja) | 2003-01-30 | 2004-08-19 | Hitachi Medical Corp | 磁気共鳴イメージング装置 |
JP2004283373A (ja) | 2003-03-20 | 2004-10-14 | Toshiba Corp | 管腔状構造体の解析処理装置 |
JP2007075141A (ja) | 2005-09-09 | 2007-03-29 | Toshiba Corp | 治療用デバイス選択支援システム及び治療用デバイス選択方法 |
US20080275467A1 (en) | 2007-05-02 | 2008-11-06 | Siemens Corporate Research, Inc. | Intraoperative guidance for endovascular interventions via three-dimensional path planning, x-ray fluoroscopy, and image overlay |
JP2014004491A (ja) | 2013-10-18 | 2014-01-16 | Toshiba Corp | X線診断装置 |
JP2017522943A (ja) | 2014-06-25 | 2017-08-17 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | X線診断及び処置における自動式又は支援型関心領域位置決め |
JP2016123719A (ja) | 2015-01-05 | 2016-07-11 | 株式会社東芝 | X線診断装置 |
US20160256120A1 (en) | 2015-03-06 | 2016-09-08 | University Of Rochester | Catheter Detection, Tracking And Virtual Image Reconstruction |
JP2018520809A (ja) | 2015-07-27 | 2018-08-02 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 医療用配置アラーム |
JP2018531721A (ja) | 2015-10-28 | 2018-11-01 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 大動脈弁状態の情報伝達 |
Also Published As
Publication number | Publication date |
---|---|
EP4147643A4 (en) | 2024-04-24 |
CN115666392A (zh) | 2023-01-31 |
JPWO2021225155A1 (ja) | 2021-11-11 |
WO2021225155A1 (ja) | 2021-11-11 |
EP4147643A1 (en) | 2023-03-15 |
CA3178103A1 (en) | 2021-11-11 |
JP2022084882A (ja) | 2022-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11918423B2 (en) | System and method for navigating a device through a path to a target location | |
JP5727583B2 (ja) | 医療介入中の脈管構造を記録する装置及び装置の作動方法 | |
US8295577B2 (en) | Method and apparatus for guiding a device in a totally occluded or partly occluded tubular organ | |
JP4988557B2 (ja) | Ptca血管造影図の制御に対するビューイング装置 | |
US20090281418A1 (en) | Determining tissue surrounding an object being inserted into a patient | |
JP2010519002A5 (ja) | ||
US20150201900A1 (en) | Multi-pane imaging transducer associated with a guidewire | |
JP7330686B2 (ja) | 医用画像処理装置及び医用画像処理プログラム | |
JP2008100055A (ja) | 閉塞管状器官を貫通してナビゲートするための方法およびシステム | |
JP2014500043A (ja) | 追跡可能な画像装置と画像ツールを用いる分岐の検出 | |
US10022101B2 (en) | X-ray/intravascular imaging colocation method and system | |
JP7054972B2 (ja) | 画像処理装置、画像処理方法、プログラム、及び画像処理システム | |
US20220313364A1 (en) | Devices and methods for targeting implant deployment in tissue | |
JP7409627B2 (ja) | 画像処理装置、画像処理方法、プログラム、及び画像処理システム | |
JP6188379B2 (ja) | 医用画像処理装置、医用画像処理システム、医用画像診断装置 | |
EP3389540B1 (en) | Navigation assistance system | |
WO2008050315A2 (en) | Method and apparatus for guiding a device in a totally occluded or partly occluded tubular organ | |
US20140294149A1 (en) | Image Support | |
JPWO2021225155A5 (ja) | ||
EP4275639A1 (en) | System and method for assistance in a surgical procedure | |
US11980423B2 (en) | Navigation assistance system | |
CN116245796A (zh) | 结果数据组的提供 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220128 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220128 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220307 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220322 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220329 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7054972 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |