JPWO2019158350A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2019158350A5
JPWO2019158350A5 JP2020543184A JP2020543184A JPWO2019158350A5 JP WO2019158350 A5 JPWO2019158350 A5 JP WO2019158350A5 JP 2020543184 A JP2020543184 A JP 2020543184A JP 2020543184 A JP2020543184 A JP 2020543184A JP WO2019158350 A5 JPWO2019158350 A5 JP WO2019158350A5
Authority
JP
Japan
Prior art keywords
camera
probe
subject
imaging
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020543184A
Other languages
English (en)
Other versions
JP2021513412A (ja
Publication date
Priority claimed from EP18156749.6A external-priority patent/EP3528210A1/en
Application filed filed Critical
Publication of JP2021513412A publication Critical patent/JP2021513412A/ja
Publication of JPWO2019158350A5 publication Critical patent/JPWO2019158350A5/ja
Pending legal-status Critical Current

Links

Claims (11)

  1. 対象者の表面の下の前記対象者の関心構造の画像データを収集するために前記対象者の前記表面の上又は近くに配置されたプローブであって、
    前記プローブが、
    前記画像データを取得するためのイメージングトランスデューサと、
    前記表面の画像を収集する第1のカメラと、
    環境から補足情報を収集する第2のカメラであって、前記第2のカメラは1以上の固定された特徴を含む前記環境のリモートのシーンを向くように構成され、前記第2のカメラと前記リモートのシーンとの間の距離は前記第1のカメラと前記表面との間の距離よりも大きく、前記第2のカメラは前記リモートのシーンのキャプチャされた画像内での前記1以上の固定された特徴の移動を位置及び/又は配向の前記プローブの変化として識別し、前記イメージングトランスデューサ、前記第1のカメラ及び前記第2のカメラが、前記プローブに対する固定された位置及び配向の関係を有する、第2のカメラと、
    (i)前記対象者の前記表面の前記画像に基づく前記表面の形状及びテクスチャと(ii)前記第2のカメラの補足情報に基づく前記環境との表面モデルを構築するために、前記イメージングトランスデューサから収集された前記画像データと、前記第1のカメラ及び前記第2のカメラから収集された画像とを同期的に処理し、前記対象者の前記表面の前記形状及びテクスチャの、並びに前記環境の構築された前記表面モデルに基づいて前記表面上の前記プローブの位置及び/又は配向を追跡するプロセッサとを備える、プローブと、
    前記プローブの追跡された前記位置及び/又は配向に基づいて、異なる位置及び/又は配向において収集された前記画像データをスティッチするプロセッサと
    を備える、イメージングシステム。
  2. 前記プローブが、前記イメージングトランスデューサとして、
    超音波トランスデューサ、単一光子放出コンピュータ断層撮影(SPECT)イメージングデバイス、又はX線ユニット
    を備える、請求項1に記載のイメージングシステム。
  3. 前記画像データが2D画像を備え、スティッチされた前記画像データが、より大きい視野をもつ2D画像を備えるか、又は
    前記画像データが2D画像を備え、スティッチされた前記画像データが、3Dボリュームの3D画像を備える、
    請求項1又は2に記載のイメージングシステム。
  4. 前記プローブの前記プロセッサが、同時位置特定及びマッピング(SLAM)アルゴリズムを使用して前記対象者の前記表面モデルを構築する、請求項1から3のいずれか一項に記載のイメージングシステム。
  5. 前記第1のカメラ及び/又は前記第2のカメラが、光学、近赤外、又はハイパースペクトルカメラを備える、請求項1から4のいずれか一項に記載のイメージングシステム。
  6. 前記イメージングシステムがディスプレイデバイスを備え、前記プロセッサが、前記ディスプレイデバイスを使用して、前記対象者の前記表面の前記画像と前記画像データとを重ねて表示する、請求項1から5のいずれか一項に記載のイメージングシステム。
  7. 請求項1から6のいずれか一項に記載のイメージングシステムと、
    インターベンショナル手順を実行するための追加のシステムと
    を備え、前記インターベンショナル手順中に前記イメージングシステムが前記追加のシステムをガイドする、システム。
  8. イメージングトランスデューサと第1のカメラ及び第2のカメラとを備えるプローブを使用するイメージング方法であって、前記イメージングトランスデューサ、前記第1のカメラ及び前記第2のカメラが、前記プローブに対する固定された位置及び配向の関係を有し、前記イメージング方法が、
    対象者の表面の上又は近くに配置された前記プローブの前記イメージングトランスデューサを使用して、前記対象者の前記表面の下の前記対象者の関心構造の画像データを収集するステップと、
    前記第1のカメラで前記表面の画像を収集するステップと、
    前記第2のカメラを使用して、環境から補足情報を収集するステップであって、前記第2のカメラは1以上の固定された特徴を含む前記環境のリモートのシーンを向くように構成され、前記第2のカメラと前記リモートのシーンとの間の距離は前記第1のカメラと前記表面との間の距離よりも大きく、前記第2のカメラは前記リモートのシーンのキャプチャされた画像内での前記1以上の固定された特徴の移動を位置及び/又は配向の前記プローブの変化として識別する、補足情報を収集するステップと、
    前記プローブにおいて、前記プローブからの収集された前記画像データと前記第1のカメラ及び前記第2のカメラからの収集された前記画像とを同期的に処理するステップであって、前記処理するステップが、(i)前記対象者の前記表面の前記画像に基づく前記表面の形状及びテクスチャと(ii)前記第2のカメラの補足情報に基づく前記環境との表面モデルを構築するステップと、前記対象者の前記表面の前記形状及びテクスチャの、並びに前記環境の構築された前記表面モデルに基づいて前記表面上の前記プローブの位置及び/又は配向を追跡するステップとを有する、処理するステップと、
    前記プローブの追跡された前記位置及び/又は配向に基づいて、異なる位置及び/又は配向において収集された前記画像データをスティッチするステップと
    を有する、イメージング方法。
  9. 前記対象者の前記表面モデルを構築するステップが、同時位置特定及びマッピング(SLAM)アルゴリズムを使用する、請求項8に記載のイメージング方法。
  10. ディスプレイデバイスを使用して、前記第1のカメラからの信号と前記プローブからの信号とを同時に表示するステップを有する、請求項8又は9に記載のイメージング方法。
  11. コンピュータプログラムがコンピュータによって実行されたとき、前記コンピュータに請求項8から10のいずれか一項に記載のイメージング方法を実行させる命令を含む、コンピュータプログラム。
JP2020543184A 2018-02-14 2019-01-29 複数の画像のスティッチングによるイメージングシステム及び方法 Pending JP2021513412A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP18156749.6A EP3528210A1 (en) 2018-02-14 2018-02-14 An imaging system and method with stitching of multiple images
EP18156749.6 2018-02-14
PCT/EP2019/052029 WO2019158350A1 (en) 2018-02-14 2019-01-29 An imaging system and method with stitching of multiple images

Publications (2)

Publication Number Publication Date
JP2021513412A JP2021513412A (ja) 2021-05-27
JPWO2019158350A5 true JPWO2019158350A5 (ja) 2022-01-18

Family

ID=61223836

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020543184A Pending JP2021513412A (ja) 2018-02-14 2019-01-29 複数の画像のスティッチングによるイメージングシステム及び方法

Country Status (5)

Country Link
US (1) US20210012490A1 (ja)
EP (2) EP3528210A1 (ja)
JP (1) JP2021513412A (ja)
CN (1) CN111727459B (ja)
WO (1) WO2019158350A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3900635A1 (en) * 2020-04-23 2021-10-27 Koninklijke Philips N.V. Vascular system visualization

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6283919B1 (en) 1996-11-26 2001-09-04 Atl Ultrasound Ultrasonic diagnostic imaging with blended tissue harmonic signals
US6458083B1 (en) 1996-11-26 2002-10-01 Koninklijke Philips Electronics N.V. Ultrasonic harmonic imaging with adaptive image formation
US6013032A (en) 1998-03-13 2000-01-11 Hewlett-Packard Company Beamforming methods and apparatus for three-dimensional ultrasound imaging using two-dimensional transducer array
US5997479A (en) 1998-05-28 1999-12-07 Hewlett-Packard Company Phased array acoustic systems with intra-group processors
US6530885B1 (en) 2000-03-17 2003-03-11 Atl Ultrasound, Inc. Spatially compounded three dimensional ultrasonic images
US6443896B1 (en) 2000-08-17 2002-09-03 Koninklijke Philips Electronics N.V. Method for creating multiplanar ultrasonic images of a three dimensional object
US6468216B1 (en) 2000-08-24 2002-10-22 Kininklijke Philips Electronics N.V. Ultrasonic diagnostic imaging of the coronary arteries
US6554771B1 (en) * 2001-12-18 2003-04-29 Koninklijke Philips Electronics N.V. Position sensor in ultrasound transducer probe
JP5538667B2 (ja) * 2007-04-26 2014-07-02 キヤノン株式会社 位置姿勢計測装置及びその制御方法
CN101569541B (zh) * 2008-04-29 2011-04-06 香港理工大学 三维超声波成像系统
JP2010063647A (ja) * 2008-09-11 2010-03-25 Fujifilm Corp 超音波プローブ及びそれを用いた超音波診断装置
EP2680778B1 (en) * 2011-03-03 2019-07-31 Koninklijke Philips N.V. System and method for automated initialization and registration of navigation system
WO2013005123A1 (en) * 2011-07-01 2013-01-10 Koninklijke Philips Electronics N.V. Object-pose-based initialization of an ultrasound beamformer
CA2851659A1 (en) * 2011-10-09 2013-04-18 Clear Guide Medical, Llc Interventional in-situ image guidance by fusing ultrasound and video
CN104619250A (zh) * 2012-09-13 2015-05-13 皇家飞利浦有限公司 基于乳腺mr图像和放射性标记的乳腺外科手术引导
EP2961322B1 (en) * 2013-02-28 2022-09-28 Koninklijke Philips N.V. Segmentation of large objects from multiple three-dimensional views
US9076238B2 (en) * 2013-08-21 2015-07-07 Seiko Epson Corporation Intelligent weighted blending for ultrasound image stitching
US10259390B2 (en) * 2016-05-27 2019-04-16 GM Global Technology Operations LLC Systems and methods for towing vehicle and trailer with surround view imaging devices
US20180049622A1 (en) * 2016-08-16 2018-02-22 Insight Medical Systems, Inc. Systems and methods for sensory augmentation in medical procedures

Similar Documents

Publication Publication Date Title
US11678804B2 (en) Methods and systems for tracking and guiding sensors and instruments
JP5153620B2 (ja) 連続的にガイドされる内視鏡と関係する画像を重ね合わせるためのシステム
JP5858636B2 (ja) 画像処理装置、その処理方法及びプログラム
CN101190124B (zh) 交互式四维虚拟内窥镜检查术的方法和设备
US11995818B2 (en) Synchronized surface and internal tumor detection
JP6182045B2 (ja) 画像処理装置およびその方法
KR20140067526A (ko) 의료 영상들의 정합 방법 및 장치
CN104011773A (zh) 序列图像采集方法
JP6833533B2 (ja) 超音波診断装置および超音波診断支援プログラム
CN112386278A (zh) 用于相机辅助超声扫描设置和控制的方法和系统
JP2000185036A (ja) 医用画像表示装置
US20110176715A1 (en) Four-dimensional volume imaging system
KR20150129506A (ko) 의료 영상 정합 방법 및 그 장치
US20230320700A1 (en) Apparatus and method for automatic ultrasound segmentation for visualization and measurement
JPWO2019158350A5 (ja)
JP6461257B2 (ja) 画像処理装置およびその方法
CN111329587A (zh) 利用形状传感光纤网格进行手术配准系统
Sun Ultrasound probe localization by tracking skin features
CN107092774A (zh) 一种提供参考信息的方法及装置
Chen QUiLT (Quantitative Ultrasound in Longitudinal Tissue Tracking): Stitching 2D images into 3D Volumes for Organ Health Monitoring
KR20230024234A (ko) 증강 현실 및 가상 현실을 이용하여 원격으로 피부 질환을 진단하는 진단 방법 및 장치
KR20230163211A (ko) 의료영상 표시방법 및 그 장치