JP2016507275A - 3d超音波画像と2dx線画像とを組み合わせたリアルタイムシーンモデリング - Google Patents
3d超音波画像と2dx線画像とを組み合わせたリアルタイムシーンモデリング Download PDFInfo
- Publication number
- JP2016507275A JP2016507275A JP2015550189A JP2015550189A JP2016507275A JP 2016507275 A JP2016507275 A JP 2016507275A JP 2015550189 A JP2015550189 A JP 2015550189A JP 2015550189 A JP2015550189 A JP 2015550189A JP 2016507275 A JP2016507275 A JP 2016507275A
- Authority
- JP
- Japan
- Prior art keywords
- ray
- ultrasound
- user
- view
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000002604 ultrasonography Methods 0.000 title claims abstract description 112
- 238000003384 imaging method Methods 0.000 claims abstract description 32
- 239000000523 sample Substances 0.000 claims abstract description 30
- 239000000463 material Substances 0.000 claims abstract description 9
- 230000002452 interceptive effect Effects 0.000 claims abstract description 7
- 238000000034 method Methods 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 17
- 239000003550 marker Substances 0.000 claims description 16
- 230000009467 reduction Effects 0.000 claims description 16
- 230000004044 response Effects 0.000 claims description 11
- 230000008859 change Effects 0.000 claims description 8
- 230000009471 action Effects 0.000 claims description 7
- 230000005855 radiation Effects 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 2
- 230000003213 activating effect Effects 0.000 claims 2
- 230000001172 regenerating effect Effects 0.000 claims 1
- 238000009877 rendering Methods 0.000 abstract description 6
- 230000001360 synchronised effect Effects 0.000 description 7
- 238000012285 ultrasound imaging Methods 0.000 description 7
- 210000003811 finger Anatomy 0.000 description 5
- 210000004115 mitral valve Anatomy 0.000 description 5
- 238000013519 translation Methods 0.000 description 5
- 238000007689 inspection Methods 0.000 description 4
- 210000004872 soft tissue Anatomy 0.000 description 4
- 230000000747 cardiac effect Effects 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- 230000003936 working memory Effects 0.000 description 2
- 210000003484 anatomy Anatomy 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000037237 body shape Effects 0.000 description 1
- 210000000748 cardiovascular system Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000003191 femoral vein Anatomy 0.000 description 1
- 125000001153 fluoro group Chemical group F* 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 210000005166 vasculature Anatomy 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/486—Diagnostic techniques involving generating temporal series of image data
- A61B6/487—Diagnostic techniques involving generating temporal series of image data involving fluoroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
- A61B8/5261—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from different diagnostic modalities, e.g. ultrasound and X-ray
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B2090/364—Correlation of different images or relation of image positions in respect to the body
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/378—Surgical systems with images on a monitor during operation using ultrasound
- A61B2090/3782—Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument
- A61B2090/3784—Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument both receiver and transmitter being in the instrument or receiver being also transmitter
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/25—User interfaces for surgical systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/44—Constructional features of apparatus for radiation diagnosis
- A61B6/4429—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
- A61B6/4435—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
- A61B6/4441—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/503—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of the heart
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0883—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the heart
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/12—Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/466—Displaying means of special interest adapted to display 3D data
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F04—POSITIVE - DISPLACEMENT MACHINES FOR LIQUIDS; PUMPS FOR LIQUIDS OR ELASTIC FLUIDS
- F04C—ROTARY-PISTON, OR OSCILLATING-PISTON, POSITIVE-DISPLACEMENT MACHINES FOR LIQUIDS; ROTARY-PISTON, OR OSCILLATING-PISTON, POSITIVE-DISPLACEMENT PUMPS
- F04C2270/00—Control; Monitoring or safety arrangements
- F04C2270/04—Force
- F04C2270/041—Controlled or regulated
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
- G06T2207/10121—Fluoroscopy
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10132—Ultrasound image
- G06T2207/10136—3D ultrasound image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30048—Heart; Cardiac
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Theoretical Computer Science (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- High Energy & Nuclear Physics (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
i)超音波プローブによって収集された物体の超音波画像データセットと、ii)物体をX線イメージャのX線源から放射される放射線に晒す投影方向における平面内のX線イメージャの検出器によって収集された物体のX線画像とを受け取る入力ポートと、
超音波画像データセットを、X線イメージャ及び超音波プローブの両方の共通座標フレームにおいて位置合わせする位置合わせユニットと、
X線イメージャ及び超音波プローブの両方の共通座標フレームにおいて、i)超音波画像データセットの(ユーザ選択可能ビューにおける)3D投影と、ii)検出器の平面におけるX線画像への透視3Dビューとの表現を提供するユーザ選択可能ビューにおける3Dシーンのグラフィックスディスプレイを、画面上に生成するグラフィックスディスプレイジェネレータと、
を含み、透視3Dビューは、(例えばX線イメージャのX線源の空間における位置によって規定される)X線投影方向及びユーザ選択ビューに対応し、上記ジェネレータは、3Dシーンへの第2のユーザ選択ビューに応じて及び反応して、3Dシーンをアップデートする。
2つのストリームが、装置Aの入力ポートINにおいて受け取られる。一実施形態では、各画像ストリームに専用の入力ポートがあっても、対応するX線フレームXFt又は超音波ボリュームUSVtを交互に受け取る組み合わされた画像受取ポートがあってもよい。
Claims (14)
- マルチモーダルイメージング環境において画像マテリアルを視覚化する装置であって、
i)超音波プローブによって収集された物体の超音波画像データセットと、
ii)前記物体をX線イメージャのX線源から放射される放射線に晒す投影方向における平面内の前記X線イメージャの検出器によって収集された前記物体のX線画像と、
を受け取る入力ポートと、
前記超音波画像データセットを、前記X線イメージャ及び前記超音波プローブの両方の共通基準フレームにおいて位置合わせする位置合わせユニットと、
前記X線イメージャ及び前記超音波プローブの両方の前記共通座標フレームにおいて、
i)前記超音波画像データセットの3D投影と、
ii)前記検出器の前記平面における前記X線画像への透視3Dビューと、の表現を提供するユーザ選択ビューにおける3Dシーンのグラフィックスディスプレイを、画面上に生成するグラフィックスディスプレイジェネレータと、
を含み、
前記透視3Dビューは、前記X線投影方向及び前記ユーザ選択ビューに対応し、
前記グラフィックスディスプレイジェネレータは、前記3Dシーンへの第2のユーザ選択ビューに応じて及び反応して、前記3Dシーンをアップデートする、装置。 - 前記グラフィックスディスプレイジェネレータは、縮小リクエストに反応して、前記X線イメージャのSIDの長さに適合するように、前記3Dシーンのズームアウトバージョンを、前記超音波画像データセットへの前記ユーザ選択ビューにおける前記検出器の前記平面における前記X線画像に対する前記X線源の位置を示す視覚的マーカーと共に、生成する、請求項1に記載の装置。
- 前記グラフィックスディスプレイジェネレータは、ユーザが前記X線画像において関心点を指定することに反応して、前記関心点から、前記3Dシーンへの前記ユーザ選択ビューにおける前記超音波画像データセットを横切り、前記X線源の前記位置まで延在する照準線を生成し、前記グラフィックスディスプレイジェネレータは、前記照準線上に対応する点を視覚的に指定するマーカーを生成し、前記照準線は、前記3Dシーンへの前記ユーザ選択ビューにおける前記超音波画像データセットと交差する、請求項2に記載の装置。
- 前記グラフィックスディスプレイジェネレータは、ユーザが前記3Dシーンへの前記ユーザ選択ビューにおける前記超音波画像データセットにおいて関心点を指定することに反応して、前記関心点から前記X線源の前記位置まで延在する照準線であって、また、前記照準線が前記X線画像と交差する前記X線画像における及び前記照準線上の対応する点まで延在する前記照準線を生成し、前記グラフィックスディスプレイジェネレータは、前記X線画像における前記対応する点を視覚的に指定するマーカーを生成する、請求項2に記載の装置。
- 超音波画像は、前記超音波画像データセットのストリームにおける1つであり、前記X線画像は、X線画像のストリームにおける1つであり、これら2つの画像ストリームは、前記共通基準フレームにおいて位置合わせされ、前記グラフィックスディスプレイジェネレータは、前記X線画像ストリーム又は前記超音波画像データセットストリームにおける前記関心点を経時的に追跡するトラッカーを含み、前記グラフィックスディスプレイジェネレータは、前記ストリーム中の各超音波画像データセットへの前記ユーザ選択ビューにおける、又は、前記ストリーム中の各X線画像における前記対応する点を再生成し、前記X線源又は前記超音波プローブの位置変化に反応して、前記照準線を適応させる、請求項1乃至4の何れか一項に記載の装置。
- 前記グラフィックスディスプレイは、インタラクティブグラフィックスディスプレイであり、第1のユーザ選択ビュー、前記第2のユーザ選択ビュー、又は、前記縮小リクエストを受け取るように構成される、請求項1乃至5の何れか一項に記載の装置。
- 前記画面は、タッチ画面であり、前記ビュー及び/又は前記縮小リクエストのユーザ選択は、前記画面上の手動タッチ又はスワイプ行為による、請求項6に記載の装置。
- 前記ビュー及び/又は前記縮小リクエストのユーザ選択は、前記装置と通信可能に結合されるキーボード上のキーを作動させること、又は、前記装置と通信可能に結合されるポインタツールを作動させることによる、請求項6に記載の装置。
- マルチモーダルイメージング環境において画像マテリアルを視覚化する方法であって、
i)超音波プローブによって収集された物体の超音波画像データセットと、
ii)前記物体をX線イメージャのX線源から放射される放射線に晒す投影方向における平面内の前記X線イメージャの検出器によって収集された前記物体のX線画像と、
を受け取るステップと、
前記超音波画像データセットを、前記X線イメージャ及び前記超音波プローブの両方の共通基準フレームにおいて位置合わせするステップと、
前記共通座標フレームにおいて、
i)前記超音波画像データセットの3D投影と、
ii)前記検出器の前記平面における前記X線画像への透視3Dビューと、の表現を提供するユーザ選択ビューにおける3Dシーンのグラフィックスディスプレイを、画面上に生成するステップと、
を含み、
前記透視3Dビューは、前記X線投影方向及び前記ユーザ選択ビューに対応し、
前記グラフィックスディスプレイジェネレータは、前記3Dシーンへの第2のユーザ選択ビューに応じて及び反応して、前記3Dシーンをアップデートする、方法。 - 縮小リクエストに反応して、前記X線イメージャのSIDの長さに適合するように、前記3Dシーンのズームアウトバージョンを、前記超音波画像データセットへの前記ユーザ選択ビューにおける前記検出器の前記平面における前記X線画像に対する前記X線源の位置を示す視覚的マーカーと共に、生成するステップを含む、請求項9に記載の方法。
- X線画像を収集するX線イメージャと、
超音波画像データセットを収集する第2のイメージングモダリティと、
請求項1乃至8の何れか一項に記載の装置と、
を含む、イメージングシステム。 - 前記第2のイメージングモダリティは、3D超音波イメージャである、請求項11に記載のイメージングシステム。
- 処理ユニットによって実行されるとき、請求項9及び10の方法ステップを行うために、請求項1乃至8の何れか一項に記載の装置を制御する、コンピュータプログラム。
- 請求項13のコンピュータプログラムを格納したコンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP12306698 | 2012-12-28 | ||
EP12306698.7 | 2012-12-28 | ||
PCT/IB2013/061307 WO2014102718A1 (en) | 2012-12-28 | 2013-12-24 | Real-time scene-modeling combining 3d ultrasound and 2d x-ray imagery |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016507275A true JP2016507275A (ja) | 2016-03-10 |
JP6339097B2 JP6339097B2 (ja) | 2018-06-06 |
Family
ID=47630127
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015550189A Active JP6339097B2 (ja) | 2012-12-28 | 2013-12-24 | 3d超音波画像と2dx線画像とを組み合わせたリアルタイムシーンモデリング |
Country Status (7)
Country | Link |
---|---|
US (1) | US10157491B2 (ja) |
EP (1) | EP2938260B1 (ja) |
JP (1) | JP6339097B2 (ja) |
CN (1) | CN104883975B (ja) |
BR (1) | BR112015015274A2 (ja) |
RU (1) | RU2015131134A (ja) |
WO (1) | WO2014102718A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019528899A (ja) * | 2016-09-23 | 2019-10-17 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 体外画像における器具に関連する画像オブジェクトの可視化 |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8870948B1 (en) | 2013-07-17 | 2014-10-28 | Cephea Valve Technologies, Inc. | System and method for cardiac valve repair and replacement |
US10121267B2 (en) * | 2014-07-03 | 2018-11-06 | Duke University | Spectral estimation and poly-energetic reconstruction methods and X-ray systems |
AU2015361260B2 (en) | 2014-12-09 | 2020-04-23 | Cephea Valve Technologies, Inc. | Replacement cardiac valves and methods of use and manufacture |
JP6285618B1 (ja) | 2015-02-17 | 2018-02-28 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 3d超音波画像ボリュームにマーカーを配置するためのデバイス及び方法 |
EP4335415A3 (en) | 2015-05-14 | 2024-05-29 | Cephea Valve Technologies, Inc. | Replacement mitral valves |
EP3294220B1 (en) | 2015-05-14 | 2023-12-06 | Cephea Valve Technologies, Inc. | Cardiac valve delivery devices and systems |
WO2017039663A1 (en) * | 2015-09-03 | 2017-03-09 | Siemens Healthcare Gmbh | Multi-view, multi-source registration of moving anatomies and devices |
JP6745879B2 (ja) | 2015-11-25 | 2020-08-26 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 身体部内の超音波プローブを追跡するためのシステム |
CN108471998B (zh) * | 2016-01-15 | 2022-07-19 | 皇家飞利浦有限公司 | 使用注释对临床视图进行自动化探头操纵的方法和系统 |
US10806468B2 (en) * | 2016-03-16 | 2020-10-20 | Koninklijke Philips N.V. | Optical camera selection in multi-modal X-ray imaging |
CN109155068B (zh) * | 2016-05-19 | 2023-04-04 | 皇家飞利浦有限公司 | 组合式x射线/相机介入中的运动补偿 |
EP3471665B1 (en) | 2016-06-17 | 2023-10-11 | Cephea Valve Technologies, Inc. | Cardiac valve delivery devices |
EP4209196A1 (en) | 2017-01-23 | 2023-07-12 | Cephea Valve Technologies, Inc. | Replacement mitral valves |
JP7046078B2 (ja) | 2017-01-23 | 2022-04-01 | セフィア・バルブ・テクノロジーズ,インコーポレイテッド | 置換僧帽弁 |
EP3406195A1 (en) * | 2017-05-24 | 2018-11-28 | Koninklijke Philips N.V. | Device and a corresponding method for providing spatial information of an interventional device in a live 2d x-ray image |
AU2018306296B2 (en) | 2017-07-25 | 2020-09-24 | Cephea Valve Technologies, Inc. | System and method for positioning a heart valve |
EP3496038A1 (en) * | 2017-12-08 | 2019-06-12 | Koninklijke Philips N.V. | Registration of static pre-procedural planning data to dynamic intra-procedural segmentation data |
DE102017223598B4 (de) * | 2017-12-21 | 2021-05-20 | Siemens Healthcare Gmbh | Verfahren zur Registrierung beim Einstellen einer Ausrichtung eines Instruments und Robotersystem |
JP2019146679A (ja) * | 2018-02-26 | 2019-09-05 | 株式会社島津製作所 | X線撮影装置 |
CN108805913B (zh) * | 2018-05-14 | 2021-12-03 | 首都医科大学附属北京安贞医院 | 一种冠状动脉ct影像与心脏超声应变成像的融合方法 |
WO2020033380A1 (en) * | 2018-08-07 | 2020-02-13 | Butterfly Network, Inc. | Methods and apparatuses for determining and displaying locations on images of body portions based on ultrasound data |
EP3659514A1 (en) * | 2018-11-29 | 2020-06-03 | Koninklijke Philips N.V. | Image-based device identification and localization |
CN115211961A (zh) * | 2021-04-17 | 2022-10-21 | 诺创智能医疗科技(杭州)有限公司 | 定位方法、装置、系统及计算机可读存储介质 |
EP4337133A1 (en) * | 2021-05-14 | 2024-03-20 | Edda Technology, Inc. | Method and system of depth determination in model fusion for laparscopic surgical guidance |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080095421A1 (en) * | 2006-10-20 | 2008-04-24 | Siemens Corporation Research, Inc. | Registering 2d and 3d data using 3d ultrasound data |
US20120245458A1 (en) * | 2009-12-09 | 2012-09-27 | Koninklijke Philips Electronics N.V. | Combination of ultrasound and x-ray systems |
US20120296202A1 (en) * | 2011-05-20 | 2012-11-22 | Siemens Aktiengesellschaft | Method and System for Registration of Ultrasound and Physiological Models to X-ray Fluoroscopic Images |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5810007A (en) | 1995-07-26 | 1998-09-22 | Associates Of The Joint Center For Radiation Therapy, Inc. | Ultrasound localization and image fusion for the treatment of prostate cancer |
US5776062A (en) | 1996-10-15 | 1998-07-07 | Fischer Imaging Corporation | Enhanced breast imaging/biopsy system employing targeted ultrasound |
WO2000051484A2 (en) | 1998-11-25 | 2000-09-08 | Fischer Imaging Corporation | User interface system for mammographic imager |
US7103205B2 (en) | 2000-11-24 | 2006-09-05 | U-Systems, Inc. | Breast cancer screening with ultrasound image overlays |
US7141020B2 (en) | 2002-02-20 | 2006-11-28 | Koninklijke Philips Electronics N.V. | Portable 3D ultrasound system |
EP1699361B1 (en) * | 2003-12-22 | 2009-12-09 | Koninklijke Philips Electronics N.V. | System for guiding a medical instrument in a patient body |
US8027710B1 (en) | 2005-01-28 | 2011-09-27 | Patrick Dannan | Imaging system for endoscopic surgery |
EP2048621B1 (en) * | 2007-10-09 | 2010-05-26 | Agfa HealthCare NV | Method and apparatus for volume rendering of medical data sets |
ATE548987T1 (de) * | 2006-11-28 | 2012-03-15 | Koninkl Philips Electronics Nv | Vorrichtung zur bestimmung einer position eines ersten objekts innerhalb eines zweiten objekts |
WO2008120136A1 (en) | 2007-03-30 | 2008-10-09 | Koninklijke Philips Electronics N.V. | 2d/3d image registration |
US8218727B2 (en) * | 2009-09-04 | 2012-07-10 | Siemens Medical Solutions Usa, Inc. | System for medical image processing, manipulation and display |
WO2011070492A1 (en) | 2009-12-09 | 2011-06-16 | Koninklijke Philips Electronics N.V. | Visualization of ultrasound in x-ray images |
JP5606076B2 (ja) | 2010-01-08 | 2014-10-15 | 株式会社東芝 | 超音波診断装置、医用画像処理装置及び医用画像処理プログラム |
US8827554B2 (en) * | 2010-04-13 | 2014-09-09 | Carestream Health, Inc. | Tube alignment for mobile radiography system |
US8976931B2 (en) * | 2010-04-13 | 2015-03-10 | Carestream Health, Inc. | Mobile radiography imaging apparatus using prior related images before current image exposure and methods for same |
CN104411244A (zh) * | 2012-04-24 | 2015-03-11 | 波特视觉医疗有限责任公司 | 移动成像系统和方法 |
-
2013
- 2013-12-24 CN CN201380068316.8A patent/CN104883975B/zh active Active
- 2013-12-24 WO PCT/IB2013/061307 patent/WO2014102718A1/en active Application Filing
- 2013-12-24 US US14/649,225 patent/US10157491B2/en active Active
- 2013-12-24 BR BR112015015274A patent/BR112015015274A2/pt not_active IP Right Cessation
- 2013-12-24 JP JP2015550189A patent/JP6339097B2/ja active Active
- 2013-12-24 EP EP13830116.3A patent/EP2938260B1/en active Active
- 2013-12-24 RU RU2015131134A patent/RU2015131134A/ru not_active Application Discontinuation
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080095421A1 (en) * | 2006-10-20 | 2008-04-24 | Siemens Corporation Research, Inc. | Registering 2d and 3d data using 3d ultrasound data |
US20120245458A1 (en) * | 2009-12-09 | 2012-09-27 | Koninklijke Philips Electronics N.V. | Combination of ultrasound and x-ray systems |
US20120296202A1 (en) * | 2011-05-20 | 2012-11-22 | Siemens Aktiengesellschaft | Method and System for Registration of Ultrasound and Physiological Models to X-ray Fluoroscopic Images |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019528899A (ja) * | 2016-09-23 | 2019-10-17 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 体外画像における器具に関連する画像オブジェクトの可視化 |
JP7049325B2 (ja) | 2016-09-23 | 2022-04-06 | コーニンクレッカ フィリップス エヌ ヴェ | 体外画像における器具に関連する画像オブジェクトの可視化 |
JP7049325B6 (ja) | 2016-09-23 | 2022-06-01 | コーニンクレッカ フィリップス エヌ ヴェ | 体外画像における器具に関連する画像オブジェクトの可視化 |
Also Published As
Publication number | Publication date |
---|---|
JP6339097B2 (ja) | 2018-06-06 |
US10157491B2 (en) | 2018-12-18 |
EP2938260A1 (en) | 2015-11-04 |
CN104883975B (zh) | 2019-04-05 |
US20150302634A1 (en) | 2015-10-22 |
BR112015015274A2 (pt) | 2017-07-11 |
RU2015131134A (ru) | 2017-02-02 |
WO2014102718A1 (en) | 2014-07-03 |
CN104883975A (zh) | 2015-09-02 |
EP2938260B1 (en) | 2019-11-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6339097B2 (ja) | 3d超音波画像と2dx線画像とを組み合わせたリアルタイムシーンモデリング | |
US11754971B2 (en) | Method and system for displaying holographic images within a real object | |
JP6527210B2 (ja) | 画像表示の生成方法 | |
JP5795769B2 (ja) | 超音波およびx線システムの組み合わせのための方法、コンピュータ・プログラム、及び、システム | |
EP2099378B1 (en) | Apparatus for determining a position of a first object within a second object | |
JP6511050B2 (ja) | イメージング装置を追跡装置と位置合わせする位置合わせシステム、イメージングシステム、介入システム、位置合わせ方法、イメージングシステムの作動方法、位置合わせコンピュータプログラム、及びイメージングコンピュータプログラム | |
JP6285355B2 (ja) | x線での軟組織運動の正確な可視化 | |
JP6078559B2 (ja) | オブジェクトを撮像するイメージング装置 | |
JP2018514352A (ja) | 後期マーカー配置による融合イメージベース誘導のためのシステムおよび方法 | |
WO2019070681A1 (en) | IMAGE ALIGNMENT ON THE REAL WORLD FOR MEDICAL APPLICATIONS OF INCREASED REALITY USING A REAL WORLD SPACE MAP | |
JP7170705B2 (ja) | 医療処置中のエフェクタの画像定位のためのシステム及び方法 | |
Gong et al. | Interactive initialization of 2D/3D rigid registration | |
JP7460355B2 (ja) | 医療ユーザインターフェース | |
CN104822323B (zh) | 超声和x射线模态的整合 | |
EP3855396A2 (en) | Orientation detection in fluoroscopic images | |
CN113855059A (zh) | 增强超声图像 | |
US20120057671A1 (en) | Data acquisition and visualization mode for low dose intervention guidance in computed tomography | |
JP2023504703A (ja) | 追跡システムとの画像の位置合わせ | |
WO2016147778A1 (ja) | 画像処理装置、方法、及びプログラム | |
JP2022510845A (ja) | 画像ベースの装置追跡 | |
JP5268318B2 (ja) | 画像表示装置及び画像表示方法 | |
EP4128145B1 (en) | Combining angiographic information with fluoroscopic images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161222 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170830 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170919 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180410 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180509 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6339097 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |