CN113729781A - 超声波摄像装置、治疗辅助系统以及图像显示方法 - Google Patents

超声波摄像装置、治疗辅助系统以及图像显示方法 Download PDF

Info

Publication number
CN113729781A
CN113729781A CN202110273858.5A CN202110273858A CN113729781A CN 113729781 A CN113729781 A CN 113729781A CN 202110273858 A CN202110273858 A CN 202110273858A CN 113729781 A CN113729781 A CN 113729781A
Authority
CN
China
Prior art keywords
ultrasonic
beacon
probe
ultrasonic probe
imaging apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110273858.5A
Other languages
English (en)
Other versions
CN113729781B (zh
Inventor
竹岛启纯
田中智彦
今井亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Healthcare Corp
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of CN113729781A publication Critical patent/CN113729781A/zh
Application granted granted Critical
Publication of CN113729781B publication Critical patent/CN113729781B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/12—Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0891—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/0841—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42—Details of probe positioning or probe attachment to the patient
    • A61B8/4209—Details of probe positioning or probe attachment to the patient by using holders, e.g. positioning frames
    • A61B8/4218—Details of probe positioning or probe attachment to the patient by using holders, e.g. positioning frames characterised by articulated arms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42—Details of probe positioning or probe attachment to the patient
    • A61B8/4245—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42—Details of probe positioning or probe attachment to the patient
    • A61B8/4245—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • A61B8/4254—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient using sensors mounted on the probe
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4444—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device related to the probe
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4477—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device using several separate ultrasound transducers or probes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4483—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer
    • A61B8/4488—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer the transducer being a phased array
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4483—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer
    • A61B8/4494—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer characterised by the arrangement of the transducer elements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/22—Implements for squeezing-off ulcers or the like on the inside of inner organs of the body; Implements for scraping-out cavities of body organs, e.g. bones; Calculus removers; Calculus smashing apparatus; Apparatus for removing obstructions in blood vessels, not otherwise provided for
    • A61B2017/22038—Implements for squeezing-off ulcers or the like on the inside of inner organs of the body; Implements for scraping-out cavities of body organs, e.g. bones; Calculus removers; Calculus smashing apparatus; Apparatus for removing obstructions in blood vessels, not otherwise provided for with a guide wire
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2048—Tracking techniques using an accelerometer or inertia sensor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2063—Acoustic tracking systems, e.g. using ultrasound
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/306—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using optical fibres
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/378—Surgical systems with images on a monitor during operation using ultrasound
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/378—Surgical systems with images on a monitor during operation using ultrasound
    • A61B2090/3782—Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument
    • A61B2090/3788—Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument transmitter only
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3925—Markers, e.g. radio-opaque or breast lesions markers ultrasonic
    • A61B2090/3929—Active markers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3937—Visible markers
    • A61B2090/3945—Active visible markers, e.g. light emitting diodes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5292—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves using additional data, e.g. patient information, image labeling, acquisition parameters

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Gynecology & Obstetrics (AREA)
  • Urology & Nephrology (AREA)
  • Robotics (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Vascular Medicine (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本发明提供超声波摄像装置、治疗辅助系统以及图像显示方法。提供能使用线性阵列探头来掌握导丝与血管等摄像对象的三维的位置关系的超声波摄像装置。超声波摄像装置具备：超声波探头，其对被检体照射超声波并接收所述超声波的反射波，并且接收来自插入被检体内部的信标的超声波；探头位置取得部，其取得超声波探头的三维位置和朝向；信标位置取得部，其根据从基于超声波探头中接收到的超声波的超声波图像求得的信标相对于超声波探头的相对位置或相对速度、和探头位置取得部中取得的超声波探头的三维位置和朝向来求取信标的三维位置；和显示图像形成部，其使用基于超声波探头中接收到的超声波的超声波图像来形成在显示部显示的图像。

Description

超声波摄像装置、治疗辅助系统以及图像显示方法
技术领域
本发明涉及将搭载了光声等超声波产生源的导丝(guide wire)插入体内来对超声波图像摄像的超声波摄像装置、治疗辅助系统以及图像显示方法。
背景技术
导管治疗由于与开胸等手术比较是患者负担更少的手术方式，因此主要在血管狭窄等治疗中广泛采用。在导管治疗中，掌握成为治疗对象的区域与导管的关系是重要的，作为对其进行辅助的摄像方法而利用X射线透视。另外，还有如专利文献1那样取代X射线透视图像而将超声波图像用作辅助图像的尝试。
详细地，在专利文献1中公开了如下技术：关于搭载于导丝的超声波产生源所产生的超声波，使用到达构成超声波探头的元件阵列的超声波(来自超声波产生源的超声波)的到达时间差或依赖于距摄像区域的距离的超声波产生源的图像来估计导丝前端位置，使用该估计结果来掌握摄像结果与导丝前端的相对位置关系。
现有技术文献
专利文献
专利文献1：JP特开2019-213680号公报
根据上述的现有技术，能估计插入物(导丝)的前端位置在摄像区域内的位置。但为了掌握作为摄像对象的血管等生物体与插入物前端部的三维的位置关系，需要使用将构成超声波探头的元件阵列矩阵状排列的二维阵列探头。
另外，一方面，能掌握相对于摄像区域的相对的导管等的位置关系，另一方面，不能检测绝对的位置，例如不能与用其他摄像手法得到的生物体的信息对位(位置匹配)。
发明内容
本发明目的在于，提供能使用线性阵列探头掌握导丝与血管等摄像对象的三维的位置关系的超声波摄像装置、治疗辅助系统以及图像显示方法。
为了解决所述课题，本发明的超声波摄像装置具备：超声波探头，其对被检体照射超声波并接收所述超声波的反射波，并且接收来自插入被检体内部的信标的超声波；探头位置取得部，其取得所述超声波探头的三维位置和朝向；信标位置取得部，其根据从基于所述超声波探头中接收到的超声波的超声波图像求得的所述信标相对于所述超声波探头的相对位置或相对速度、和所述探头位置取得部中取得的所述超声波探头的三维位置和朝向来求取所述信标的三维位置；和显示图像形成部，其使用基于所述超声波探头中接收到的超声波的超声波图像来形成在显示部显示的图像。
发明的效果
根据本发明，能使用线性阵列探头对手术者示出导丝与血管等摄像对象的三维的位置关系。
附图说明
图1是说明实施方式的医疗辅助系统的整体结构的图。
图2是说明导丝的前端部的样子的图。
图3是超声波摄像装置的框图。
图4是超声波摄像装置的处理流程图。
图5是说明超声波探头的坐标系的图。
图6是说明根据超声波探头和PA信号产生源的位置变化来检测PA信号产生源的绝对位置的方法的图。
图7是说明根据超声波探头的摄像面的旋转位置变化来检测PA信号产生源的绝对位置的方法的图。
图8是使用超声波探头的速度来检测PA信号产生源的绝对位置的处理流程图。
图9是其他结构的超声波摄像装置的框图。
图10是超声波摄像装置的其他处理流程图。
图11是表示显示部的显示例的图。
图12是表示显示部的其他显示例的图。
图13A是表示动作计划部的机械臂的移动计划的一例的图。
图13B是表示超声波探头的超声波图像的一例的图。
图14A是表示动作计划部的机械臂的移动计划的其他一例的图。
图14B是表示超声波探头的超声波图像的其他例的图。
附图标记的说明
10 超声波产生设备
11 导丝(生物体插入器具)
12 光纤
13 PA信号产生源(光声超声波产生源)(信标)
20 超声波探头
30 超声波摄像部
31 发送部
32 接收部
33 输入部
34 显示部
35 存储器
40 控制部
41 信号处理部
411 反射超声波信号处理部
412 PA信号解析部(超声波信号解析部)
42 PA声源位置检测部
421 相对位置检测部
422 相对速度测量部
423 位置滤波器
424 绝对位置检测部(信标位置取得部)
425 探头速度测量部(探头位置取得部)
43 显示图像形成部
44 3D解剖学的信息
45 动作计划部
51 显示图像
52 显示图像
80 被检体
90 机械臂
91 探头位置/姿态传感器(探头位置取得部)
100 医疗辅助系统
具体实施方式
以下参考附图来详细说明本发明的实施方式。
图1是说明本实施方式的超声波摄像装置和利用其的导管治疗辅助系统(以下略作医疗辅助系统)的整体结构的图。
另外，图2是说明导丝的前端部的样子的图。
如图1所示那样，医疗辅助系统100具备：搭载了包含超声波产生源13(信标)和光产生部15的超声波产生设备10的生物体插入器具11(导丝)；超声波探头20(探针)和机械臂90，并具备：取得被插入生物体插入器具11的被检体80的超声波图像的超声波摄像部30以及其显示部34。
生物体插入器具11例如是球囊导管、微导管、营养导管等治疗用器具、用于将这些治疗用器具送往目的部位的导丝等细长的管状的医疗器具。以下说明生物体插入器具是导丝的情况。
以下说明具备通过光声(PA、Photo acoustic)效应来发出超声波信号的PA信号产生源13的超声波产生设备10，但也可以通过压电元件产生超声波。
超声波产生设备10如图1、图2所示那样，具备：配置于柔软的中空的导丝11的中空部内的光纤12(不图示)；固定于光纤12的插入侧端面的光声超声波产生源13；和与光纤12的另一端(与固定光声超声波产生源13的端部相反一侧的端部)连接并产生激光的光产生部15。光纤12作为将光产生部15所产生的激光引导到前端的光声超声波产生源13的导光构件发挥功能。将这些超声波产生设备10和中空的导丝11包括在内而称作光声源搭载丝。
如图2所示那样，在超声波探头20检测插入血管82的导丝11的前端的光声超声波产生源13(以后记作PA信号产生源13)所发出的超声波。然后，超声波摄像部30在基于超声波探头20所发出的超声波形成的被检体80以及血管82的截面图像重叠检测到的PA信号产生源13的图像。
由此能掌握被检体80以及血管82中的导丝11的位置。
PA信号产生源13用通过接受激光并隔热膨胀而发出PA信号等超声波的材料、例如公知的色素(光敏剂)、金属纳米粒子、碳基化合物体等构成。包含PA信号产生源13的光纤12的前端被树脂性的密封构件覆盖。另外，在图2中，PA信号产生源13定位于导丝11的前端，但并不限于丝前端。
接下来说明构成实施方式的超声波摄像装置的超声波摄像部30的细节。图3是超声波摄像部30所包含的超声波摄像装置的框图。
超声波摄像部30具备：后述细节的控制部40；对超声波探头20发送超声波信号的发送部31；接收超声波探头20检测到的反射波(RF信号)并进行调相、加法运算等处理的接收部32；用于用户输入摄像所需的条件、指令的输入部33；显示超声波摄像部30取得的超声波图像、GUI(Graphic User Interface，图形用户接口)等的显示部34；和存储处理结果、根据处理结果在显示图像形成部43形成的显示图像等的存储器35。
控制部40具备：对在超声波探头20接收到的超声波图像(包含反射超声波信号和PA信号)进行处理的信号处理部41；根据在信号处理部41进行过处理的信号来检测PA信号的声源位置的PA声源位置检测部42；使用PA声源位置检测部42中检测到的PA声源位置和事前取得的被检者的事前取得3D解剖学的信息44来形成显示于显示部34的图像的显示图像形成部43；和使用PA声源位置检测部42中检测到的声源位置和事前取得被检者的事前取得3D解剖学的信息44来决定超声波探头20的操作位置的动作计划部45。
在事前取得3D解剖学的信息44中可以使用被检者在CT(Computer Tomography，计算机断层扫描)、MRI(Magnetic Resonance Imaging，磁共振成像)中取得的3D容积像，也可以使用由超声波摄像装置扫掠(sweep)而摄像的3D容积像。
信号处理部41具备：使用接收部32接收到的作为反射波的RF信号来作成B模式图像等超声波图像的反射超声波信号处理部411；基于光产生部15的激光的发光定时来检测从PA信号产生源13发出而由超声波探头20的各换能器(transducer)元件检测到的PA信号并进行处理的超声波信号解析部(PA信号解析部)412。
另外，控制部40除了追加接收PA信号的PA信号解析部412、和检测PA信号的产生位置的PA声源位置检测部42以外，具有与一般的超声波摄像装置同样的结构。
PA声源位置检测部42具备：根据PA信号解析部412中解析的PA信号来估计PA信号产生源13的摄像区域内的位置的相对位置检测部421；对相对位置检测部421中检测到的PA信号产生源13的位置进行微分来导出速度的相对速度测量部422；基于机械臂90的操作位置信息来测量超声波探头20的速度的探头速度测量部425；基于相对速度测量部422测量的速度和探头速度测量部425测量的超声波探头20的速度来检测PA信号产生源13的绝对位置的绝对位置检测部424；和将绝对位置检测部424中检测到的绝对位置进行滤波来减低误差的位置滤波器423。
位置滤波器423通过任意的滤波处理来减低绝对位置检测部424的检测结果中所含的误差。例如若是PA信号产生源13以低速进行移动的情况，则能通过基于移动平均滤波器、LPF(Low Pass Filter，低通滤波器)等滤波器的平滑化来减低位置检测误差。
另外，位置滤波器423也可以是考虑了将PA声源位置检测部42的位置检测手法中会在原理上产生的检测误差模型化的误差模型的滤波器。具体地，能综合考虑PA声源位置检测部42中检测的PA信号产生源13的位置和速度、超声波探头20的位置、速度和姿态、和PA声源位置检测部42的误差模型，来运用估计统计上概率最高的状态的伽马滤波器、粒子滤波器等。
PA声源位置检测部42中的其他结构的细节后述。
控制部40的功能的一部分或全部能在具备CPU或GPU和存储器的计算机中通过执行将其功能编程的软件而实现。另外还能用电子电路、ASIC、FPGA等硬件实现各部的功能的一部分或全部。另外，控制部40可以安装在单一的计算机，也可以按每个功能安装在多个计算机。
超声波探头20是具有一个大量换能器元件在一维方向上排列的阵列排列的1D阵列探头(线性阵列探头)。另外，能使用在与1D阵列探头的阵列排列方向正交的方向上具有二维或三维的阵列排列的1D3排列探头、在二维方向上具有大量阵列排列的2D阵列探头等种种超声波探头20。信号处理部41采用与所用的超声波探头20的种类相应的解析手法。
接下来说明实施方式的医疗辅助系统100的动作。
在此，在超声波摄像装置使用1D阵列探头的超声波探头20进行被检体80的超声波摄像的同时，手术实施者将引导导管等的在前端设置了PA信号产生源13的导丝11插入被检体的体内，超声波摄像装置根据PA信号来监控导丝11的前端位置。然后，说明超声波摄像装置操作机械臂90以使得超声波探头20追踪导丝的前端位置的情况。
图4是超声波摄像装置的处理流程图。
在步骤S401，超声波摄像装置判定对超声波探头20的追踪的辅助动作是否有效，若无效(S401“否”)，就结束处理。若有效(S401“是”)，则前进到步骤S402。
在步骤S402，超声波摄像装置进行基于超声波探头20的反射超声波摄像(以后称作摄像模式)。在该摄像模式下，进行与现有的超声波摄像装置同样的超声波摄像。
详细地，由超声波探头20从发送部31发送超声波，在超声波探头20接收发送的超声波从被检体内部的组织反射的反射波。接收部32对从超声波探头20按每帧接收到的接收信号进行调相、加法运算等处理，并送往信号处理部41。反射超声波信号处理部411使用来自接收部32的帧信号来作成超声波图像例如B模式图像，交到形成显示于显示部43的图像的显示图像形成部43。
在该摄像模式下，在超声波探头20为1D阵列探头时，由于能取得阵列探头的方向和深度方向的反射波强度的信息，因此能通过反射波强度的信息来得到二维的反射波强度的信息。
另外，在对超声波探头20使用2D阵列探头的情况下，在1次的摄像模式中，得到与将探头面和深度方向合起来的三维的反射波的强度对应的信息。
在步骤S403，超声波摄像装置接收基于超声波探头20的PA信号(以后称作PA接收模式)。在该PA接收模式下，对将导管插入被检体的体内例如血管内时的PA信号产生源13的PA信号进行监控。
详细地，在PA接收模式下，暂时停止发送部31的动作，使光产生部15工作，并从光产生部15照射脉冲状的激光。光产生部15所发出的光经由插入体内的导丝11的光纤12照射到PA信号产生源13。通过该照射光而从构成PA信号产生源13的光声材料产生PA信号(超声波)，在超声波探头20的各元件进行检测。
PA信号解析部412根据超声波探头20中接收到的PA信号来作成与来自光产生部15的光照射同步的信号数据，并交到PA声源位置检测部42的相对位置检测部421。在接收到的PA信号的同步中，可以根据光产生部15照射光时对PA信号解析部412输出的触发信号来取得光照射的定时，也可以从超声波探头20的各元件接收到的PA信号来推测光照射的定时。
另外，在利用了使用压电元件产生超声波的超声波产生设备10的情况下，除了能通过使用发送部31发送超声波来推测产生信号的定时以外，还可以与利用PA信号产生源时同样地，通过触发信号与外部的信号源来取得同步。
在步骤S404，PA声源位置检测部42根据从PA信号解析部412交来的PA信号、和从机械臂9交来的超声波探头20的绝对位置(三维)和姿态(方向)的信息来检测PA信号产生源13的位置。
详细地，在PA声源位置检测部42中，首先，相对位置检测部421根据从PA信号解析部412交来的PA信号来检测相对于超声波探头20的PA信号产生源13的相对位置。
接下来，根据相对速度测量部422检测到的相对位置的时间变化来检测相对速度，探头速度测量部425根据从机械臂90交来的超声波探头20的绝对位置和姿态(方向)的信息的时间变化来检测超声波探头20的速度和角速度。
另外，相对速度测量部422也可以使用在接收到的PA信号中产生的多普勒效应来测量相对速度。
然后，绝对位置检测部424根据这些值来检测PA信号产生源13的绝对位置。
检测到的PA信号产生源13的绝对位置通过位置滤波器423进行滤波，来减低检测误差。
在步骤S405，显示图像形成部43形成显示内容，显示于显示部34。
详细地，显示图像形成部43使用反射超声波信号处理部411中形成的反射超声波像、PA声源位置检测部42中检测到的PA信号产生源13的位置、和事前取得并记录于事前取得3D解剖学的信息44的关于被检体80的解剖学结构的3D容积像来形成使得手术实施者能掌握PA信号产生源13的立体的位置关系的显示图像，并显示于显示部34。
通过图11、图12来说明具体的显示部34的显示例。
在步骤S406，动作计划部45使用被检体80的事前取得3D解剖学的信息44、从机械臂90得到的探头的位置和坐标、和超声波摄像装置得到的反射超声波图像和PA声源位置来计划机械臂90的动作，对机械臂90指示操作位置。
例如动作计划部45驱动机械臂90，使得PA信号产生源13位于步骤S402的反射超声波图像的给定位置，追踪PA信号产生源13。由此，超声波探头20能持续接收从PA信号产生源13产生的PA信号(超声波)。
通过图13A、图14A后述更具体的超声波探头20的追踪例。
然后回到步骤S401，重复步骤S402～406。
另外，摄像模式(步骤402)和PA接收模式(步骤S403)并不限定于图4的流程图。例如，也可以重复执行4次摄像模式并执行1次PA接收模式的动作，还可以重复分别各执行1次摄像模式和PA接收模式的动作。
以后详细说明图4的步骤S404中的绝对位置检测部424的处理。
图5是在以后的说明时说明超声波探头20的坐标系的图。坐标系将作为1D阵列探头的超声波探头20的声元件阵列21的阵列排列方向设为长轴22，将与阵列接收面平行且与长轴22正交的轴设为短轴23，将与阵列接收面正交的轴设为深度轴24，将声元件阵列21的表面中的长轴方向和短轴方向的中心设为坐标系的原点。
在超声波探头20是在二维方向上具有大量阵列排列的2D阵列探头的情况下，可以任意决定长轴22和短轴23的朝向。
首先，通过图6来说明根据超声波探头20在短轴23的方向上并进而移动时的位置与姿态的关系、即根据PA信号产生源13与超声波探头20的位置变化(并进)来检测PA信号产生源13的绝对位置的方法。
如图6所示那样，在作为1D阵列探头的超声波探头20向短轴23的方向而使超声波探头20从712B向712A并进711的情况下，能通过机械臂90来取得712A和712B各自中的超声波探头20的绝对位置。另外，由于能由PA信号解析部412根据光产生部15的发光测量超声波探头20的PA信号的到达时间，因此能求取从712A和712B各自到PA信号产生源13的距离713A和713B。
因此，由于PA信号产生源13的位置715是距离713A的圆弧714A与距离713B的圆弧714B的交点，因此能根据712A和712B各自中的超声波探头20的绝对位置、和到PA信号产生源13的距离713A和713B来算出绝对位置。
详细地，若将移动前后的RA信号的到达时间设为ta、tb，则通过式(1)求取到PA信号产生源13的距离713A(la)和713B(lb)。
【数学式1】
lb＝c·tb，la＝c·ta (1)
这里c是音速。
然后，若将超声波探头20从712B向712A以速度v、微小时间Δt并进，则通过式(2)求取PA信号产生源13的位置715(yPA、zPA)。
【数学式2】
Figure BDA0002973026910000101
其中，y是短轴23方向的相对值，z是深度轴24方向的相对值，微小时间Δt设为十分短，近似为la≈lb。
在上述中，设为PA信号产生源13静止，但还有正在移动的情况。为此，虽然通过PA信号产生源13的移动确定的PA信号产生源13的绝对位置中会出现误差，但通过位置滤波器423减轻该误差。
接下来，通过图7来说明根据超声波探头20绕着深度轴24旋转移动时的位置与姿态的关系、即根据超声波探头20的摄像面的旋转位置变化来检测PA信号产生源13的绝对位置的方法。
如图7所示那样，在作为1D阵列探头的超声波探头20绕着深度轴24向旋转方向721而从722B向722A旋转的情况下，能由PA信号解析部412取得各个PA信号产生源13的长轴方向的位置723B和723A，能由机械臂90取得各个PA信号产生源13的长轴方向的位置723B和723A的绝对位置。
因此，PA信号产生源13的位置725由于是直线724A与直线724B的交点，因此能根据723A和723B的绝对位置来算出PA信号产生源13的位置725的绝对位置。
详细地，若将移动前后的PA信号产生源13中的长轴22方向的位置变化设为xPA，将绕着深度轴24的旋转721的角速度设为ω，将PA信号的到达时间设为t，将音速设为c，则通过式(3)求取PA信号产生源13的位置725(yPA，zPA)。
【数学式3】
Figure BDA0002973026910000111
在根据上述的超声波探头20和PA信号产生源13的位置变化、或超声波探头20的摄像面的旋转位置变化来检测PA信号产生源13的绝对位置的方法中，使用移动前后的位置来检测PA信号产生源13的绝对位置，但在移动前后的时间差短的情况下，使用超声波探头20的速度来检测PA信号产生源13的绝对位置。
通过图8来说明在PA声源位置检测部42中使用超声波探头20的速度来检测PA信号产生源13的绝对位置的处理流程。
在该流程中，从超声波探头20的移动提取并进和旋转，来检测PA信号产生源13的绝对位置。
在步骤S801，探头速度测量部425测量超声波探头20的移动的速度和角速度。在此，也可以从机械臂90取得超声波探头20的移动的速度和角速度。
在步骤S802，绝对位置检测部424从测量出的超声波探头20的移动的速度和角速度提取超声波探头20的短轴23的方向的并进速度和超声波探头20的绕着深度轴24的旋转速度分量。
在步骤S803，绝对位置检测部424判定提取的短轴23的方向的并进速度是否等于0，若等于0(S803的“＝0”)，则前进到步骤S805。若不等于0(S803的“≠0”)，则前进到步骤S804。
在步骤S804，绝对位置检测部424与通过图6说明的方法同样地，根据与PA信号产生源13的超声波探头20的短轴23的方向的并进速度来检测PA信号产生源13的绝对位置。详细地，设为PA信号产生源13以该并进速度从速度的测定时间分开的2点起位于与由PA信号解析部412测量的距离相等的点，来检测PA信号产生源13的绝对位置。然后前进到步骤S805。
在步骤S805，绝对位置检测部424判定提取的超声波探头20的绕着深度轴24的旋转速度是否等于0，若等于0(S805的“＝0”)，则前进到步骤S807。若不等于0(S805的“≠0”)，则前进到步骤S806。
在步骤S806中，绝对位置检测部424与通过图7说明的方法同样地，使用超声波探头20的绕着深度轴24的旋转速度来检测PA信号产生源13的绝对位置。详细地，设为PA信号产生源13位于该旋转速度的测定时间分开的2点的法线的交点，来检测PA信号产生源13的绝对位置。然后前进到步骤S807。
在步骤S807，位置滤波器423对步骤S804和步骤S806中求得的PA信号产生源13的绝对位置的至少一方进行滤波处理。由此进行位置检测的高精度化。
在上述中，说明了作为超声波探头20而使用1D阵列探头的情况，但对将2D阵列探头作为超声波探头20的情况进行说明。
在该情况下，由于不是通过超声波探头20的并进、旋转取得PA信号产生源13的三维位置，而是能取得相对于超声波探头20的PA信号产生源13的三维位置，因此能将在从机械臂90通知的超声波探头20的三维绝对位置和姿态中取得的三维相对位置进行加法运算来检测PA信号产生源13的三维绝对位置。
在上述的超声波摄像装置以及治疗辅助系统中，说明了机械臂90操作超声波探头20、基于机械臂90检测到的超声波探头20的绝对位置来检测PA信号产生源13的三维绝对位置，但也可以设为设置检测超声波探头20的绝对位置的探头位置/姿态传感器91的结构。另外，也可以由机械臂90操作超声波探头20，由探头位置/姿态传感器91检测超声波探头20的绝对位置。
探头位置/姿态传感器91可以内置于超声波探头20，也可以另外分体构成。
探头位置/姿态传感器91例如是使用组合地磁传感器等定位传感器、加速度传感器、陀螺仪传感器而构成的传感器、利用了外部的摄像机的传感器等，只要是能测量探头的位置和姿态的传感器，就并没有限定。
图9是表示由探头位置/姿态传感器91检测超声波探头20的绝对位置的超声波摄像装置以及治疗辅助系统的结构的框图。
图9的超声波摄像装置与图3说明的超声波摄像装置相比，在去除了机械臂90的动作计划部45而设置探头位置/姿态传感器91这点上不同，其他成为相同结构。
探头位置/姿态传感器91周期性地检测超声波探头20的绝对位置和姿态，并对控制部40通知。
探头速度测量部425取代机械臂90而根据从探头位置/姿态传感器91交来的超声波探头20的绝对位置和姿态(方向)的信息的时间变化检测超声波探头20的速度和角速度。
显示图像形成部43进行与基于机械臂90检测到的超声波探头20的绝对位置来检测PA信号产生源13的三维绝对位置的情况同样的处理。
图10是超声波摄像装置的处理流程图。
与图4中说明的超声波摄像装置的处理流程相比，不同点在于：去除了步骤S406的动作计划部对机械臂指示动作的处理这点、以及步骤S404取代成步骤S407这点不同。
在步骤S407，PA声源位置检测部42根据从PA信号解析部412交来的PA信号、从探头位置/姿态传感器91交来的超声波探头20的绝对位置(三维)和姿态(方向)的信息来检测PA信号产生源13的位置。
由此，即使是手动操作超声波探头20的情况，也能检测PA信号产生源13的三维绝对位置。
以上说明了PA信号产生源13的位置检测的实施方式，但各实施方式只要技术上没有矛盾，就能适宜组合，这样的组合也包含在本发明中。
在此说明在图4、图10的步骤S405显示于显示部34的显示图像。
图11是表示显示于显示部34的显示图像51的一例的图。
如图11所示那样，显示于显示部34的显示图像51显示：显示被检体80的血管82内的PA信号产生源13的位置并显示血管82的长轴截面的图像511；和显示血管82的圆切片截面的图像512。并且在图像511、512显示：被检体80的身体和血管82的显示；和PA信号产生源13的位置显示519和轨迹的显示518。这些显示要素可以显示全部，也可以显示一部分。
另外，显示图像511和图像512可以使用由超声波摄像部30摄像并由显示图像形成部43形成的显示图像来显示，也可以通过使用PA声源位置检测部42检测到的PA信号产生源13和事前取得的被检体80的事前取得3D解剖学的信息44以CG(Computer Graphics，计算机图形)形成，来由显示图像形成部43显示超声波摄像部30的摄像区域外的解剖学结构的信息。
显示于显示部34的图像的内容能包含辅助手术的任意的图像处理，能包含强调显示存在于所述超声波图像、所述CG内的血管、病变这样的关注点的显示、示出画面外的病变位置的显示等。
在基于所述CG的图像形成中，为了针对事前取得的被检体80的事前取得3D解剖学的信息44检测在机械臂90进行检测的绝对坐标上位于哪个位置并进行对位，将显示图像形成部43形成的超声波图像内的特征点和所述事前取得3D解剖学的信息44内的特征点进行比较，检测一致的部位。例如，作为特征点，能使用血管的分岔、骨，也可以使用其他特征点。
另外，在基于所述CG的图像形成中，可以直接使用所述事前取得3D解剖学的信息44来形成显示图像，也可以以手术中形成的反射超声波图像为参考，检测事前取得的解剖学结构和手术中的解剖学结构的变形，使用使事前取得的所述事前取得3D解剖学的信息44变形以使得事前取得的所述事前取得3D解剖学的信息44更适应手术中的结构的信息，来形成显示图像。例如考虑如下的处理等：辨识手术中形成的反射超声波图像内的血管壁，使事前取得的所述事前取得3D解剖学的信息44内中所含的血管壁变形成与反射超声波图像内的血管壁同样的形状。
显示于显示部34的图像的内容并不限定于显示图11例示的来自2方向的图像的画面，只要能提示病变与PA信号产生源13的立体的位置关系，也可以显示来自1方向的图像，还可以通过第3角度法显示图像。另外，还可以将来自任意的视点的图像显示4画面以上，显示方法和显示的图像的视点并没有限定。
图12是表示基于第3角法的显示图像52的一例的图。
显示图像52由血管的侧视图521、血管的圆切片图522和血管的顶视图523的来自3方向的图像构成。
图12的附图标记528表示PA信号产生源13的轨迹，附图标记529表示PA信号产生源13的位置。
接下来，详细说明图4的步骤S406中的动作计划部45所计划的机械臂的动作指示。
通过图13A、图14A来说明动作计划部45的机械臂90的移动计划的一例。
在图13A中，在PA信号产生源13从移动前的位置613向移动后的位置614移动时，机械臂90驱动超声波探头20，使得超声波探头20的摄像区域保持为将血管82设为圆切片，并且追踪PA信号产生源13从移动前的位置611向移动后的位置612移动。
图13B是使机械臂90如图13A那样驱动超声波探头20的情况下的超声波图像。
在超声波图像中描绘出被检体80的血管82和PA信号产生源13(位置615)，被检体80的血管82内的PA信号产生源13的位置615的掌握变得容易。
在图14A中，机械臂90驱动超声波探头20，使得追踪PA信号产生源13的移动前后的位置623和624，从移动前的位置621向移动后的位置622移动，使得超声波探头20的摄像区域包含血管82的长轴截面。
图14B是使机械臂90如图14A那样驱动超声波探头20的情况的超声波图像。
在超声波图像中描绘出被检体80的血管82和PA信号产生源13(位置625)，在被检体80的血管82中存在闭塞部83的情况下，能易于掌握闭塞部83与PA信号产生源13(位置625)的位置关系。
其中，关于超声波探头20的驱动方式，只要能在图4、图10的步骤S405的显示图像形成中取得为了形成显示图像所需的反射超声波信号和PA信号即足够，并不限定于图13A和图14A的活动方式。
例如如图8说明的那样，在图6说明的并进711和图7说明的旋转721的速度都不是0时能进行位置检测。
因此，通过机械臂90对超声波探头20进行摇动操作，使得超声波探头20的所述并进711的速度ve和所述旋转的角速度ωd成为式(4)，所述并进711和所述旋转721不会同时成为0。由此，能始终持续PA信号产生源13的位置检测。其中，v0和ω0是用于调整速度的常数，T是摇动的周期。
【数学式4】
Figure BDA0002973026910000161
以上说明了本发明的超声波摄像装置以及导管治疗辅助系统的实施方式，但各实施方式只要在技术上不矛盾，就能适宜组合，这样的组合也包含在本发明中。

Claims (14)

1.一种超声波摄像装置，其特征在于，具备：
超声波探头，其对被检体照射超声波并接收所述超声波的反射波，并且接收来自插入被检体内部的信标的超声波；
探头位置取得部，其取得所述超声波探头的三维位置和朝向；
信标位置取得部，其根据从基于所述超声波探头中接收到的超声波的超声波图像求得的所述信标相对于所述超声波探头的相对位置或相对速度、和所述探头位置取得部中取得的所述超声波探头的三维位置和朝向来求取所述信标的三维位置；和
显示图像形成部，其使用基于所述超声波探头中接收到的超声波的超声波图像来形成在显示部显示的图像。
2.根据权利要求1所述的超声波摄像装置，其特征在于，
所述超声波探头是线性阵列探头。
3.根据权利要求2所述的超声波摄像装置，其特征在于，
将所述信标插入被检者的血管并使所述信标沿着所述血管运动，
所述信标位置取得部根据所述超声波探头的摄像面中的所述信标与所述超声波探头的位置变化、和相对于所述信标的所述超声波探头的摄像面的旋转位置变化的至少一方，来求取所述信标相对于所述超声波探头的相对位置。
4.根据权利要求3所述的超声波摄像装置，其特征在于，
所述信标位置取得部在求取所述信标相对于所述超声波探头的相对位置时，进行滤波处理来进行误差减低。
5.根据权利要求4所述的超声波摄像装置，其特征在于，
所述信标位置取得部在求取所述信标相对于所述超声波探头的相对位置时，将误差进行模型化来进行滤波处理。
6.根据权利要求5所述的超声波摄像装置，其特征在于，
所述信标位置取得部根据误差模型、所述信标相对于所述超声波探头的位置以及位置变化、和所述超声波探头的位置以及位置变化来估计统计上概率最高的状态，从而进行滤波处理。
7.根据权利要求4所述的超声波摄像装置，其特征在于，
所述超声波摄像装置具备：操作所述超声波探头的机械臂，
所述探头位置取得部将所述机械臂的操作位置信息设为所述超声波探头的三维位置。
8.根据权利要求7所述的超声波摄像装置，其特征在于，
所述机械臂追踪所述信标，使得在用所述超声波探头摄像的血管的圆切片截面的摄像图像中辨识所述信标。
9.根据权利要求7所述的超声波摄像装置，其特征在于，
所述机械臂追踪所述信标，使得在用所述超声波探头摄像的血管的长轴截面的摄像图像中辨识所述信标。
10.根据权利要求7所述的超声波摄像装置，其特征在于，
所述机械臂追踪所述信标，使得所述信标位置取得部根据所述超声波探头的摄像面中的所述信标和所述超声波探头的位置变化、和相对于所述信标的所述超声波探头的摄像面的旋转位置变化的至少一方来求取所述信标相对于所述超声波探头的相对位置。
11.根据权利要求2所述的超声波摄像装置，其特征在于，
所述显示图像形成部基于事前取得的所述被检体的解剖学结构信息和所述信标位置取得部中求得的所述信标的三维位置来形成显示图像。
12.根据权利要求11所述的超声波摄像装置，其特征在于，
所述显示图像形成部通过加入生物体的变形来形成显示图像。
13.一种医疗辅助系统，其特征在于，具备：
权利要求1～12中任一项所述的超声波摄像装置；和
在前端具有信标的导丝。
14.一种图像显示方法，是超声波摄像装置的图像显示方法，所述超声波摄像装置具备：线性阵列探头，其对被检体照射超声波并接收所述超声波的反射波，并且接收来自插入被检体内部的信标的超声波，所述图像显示方法的特征在于，
取得所述线性阵列探头的三维位置和朝向，
从所述线性阵列探头中接收到的超声波图像求取相对于所述线性阵列探头的所述信标的相对位置，
根据所述信标的相对位置、和所述线性阵列探头的三维位置以及朝向来求取所述信标的三维位置，
基于所述信标的三维位置来操作所述线性阵列探头的位置，
显示基于用所述线性阵列探头接收到的超声波的超声波图像。
CN202110273858.5A 2020-05-29 2021-03-12 超声波摄像装置、治疗辅助系统以及图像显示方法 Active CN113729781B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-094987 2020-05-29
JP2020094987A JP2021186284A (ja) 2020-05-29 2020-05-29 超音波撮像装置、治療支援システムおよび画像表示方法

Publications (2)

Publication Number Publication Date
CN113729781A true CN113729781A (zh) 2021-12-03
CN113729781B CN113729781B (zh) 2024-03-19

Family

ID=78707174

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110273858.5A Active CN113729781B (zh) 2020-05-29 2021-03-12 超声波摄像装置、治疗辅助系统以及图像显示方法

Country Status (3)

Country Link
US (1) US20210369352A1 (zh)
JP (1) JP2021186284A (zh)
CN (1) CN113729781B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210401399A1 (en) * 2020-06-26 2021-12-30 Xenter, Inc. Nanoparticle-based imaging and therapy
DE102021205113A1 (de) * 2021-05-19 2022-11-24 Siemens Healthcare Gmbh Medizinisches Objekt zur Anordnung in einem Untersuchungsobjekt und System zur Erfassung eines medizinischen Objekts
CN115291167B (zh) * 2022-08-15 2024-05-14 国网上海市电力公司 一种基于超声波短基线阵列的人体姿态捕获及定位方法

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5724978A (en) * 1996-09-20 1998-03-10 Cardiovascular Imaging Systems, Inc. Enhanced accuracy of three-dimensional intraluminal ultrasound (ILUS) image reconstruction
US6246898B1 (en) * 1995-03-28 2001-06-12 Sonometrics Corporation Method for carrying out a medical procedure using a three-dimensional tracking and imaging system
JP2006271588A (ja) * 2005-03-29 2006-10-12 Hitachi Medical Corp 超音波装置
US20090299175A1 (en) * 2008-05-27 2009-12-03 Kyma Medical Technologies Location tracking of a metallic object in a living body
JP2013525057A (ja) * 2010-05-03 2013-06-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 介入器具に搭載される超音波トランスデューサの超音波トラッキング
JP2013192628A (ja) * 2012-03-16 2013-09-30 Konica Minolta Inc 超音波画像診断装置
US20160045184A1 (en) * 2013-03-15 2016-02-18 Colibri Technologies Inc. Active localization and visualization of minimally invasive devices using ultrasound
WO2017038300A1 (ja) * 2015-09-02 2017-03-09 株式会社日立製作所 超音波撮像装置、画像処理装置、及び方法
CN107041761A (zh) * 2016-02-09 2017-08-15 株式会社日立制作所 超声波诊断装置、旋转式探头的姿态计算装置及其方法
US20180132724A1 (en) * 2013-12-09 2018-05-17 Koninklijke Philips N.V, Imaging view steering using model-based segmentation
JP2019010346A (ja) * 2017-06-30 2019-01-24 キヤノン株式会社 被検体情報取得装置および超音波探触子
WO2019239647A1 (ja) * 2018-06-12 2019-12-19 株式会社日立製作所 超音波撮像装置
US20200069264A1 (en) * 2018-08-31 2020-03-05 Koninklijke Philips N.V. Intravascular device movement speed guidance and associated devices, systems, and methods

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2712553A3 (en) * 2005-01-11 2014-09-17 Volcano Corporation Vascular image co-registration
US8663116B2 (en) * 2012-01-11 2014-03-04 Angiodynamics, Inc. Methods, assemblies, and devices for positioning a catheter tip using an ultrasonic imaging system
US20170252002A1 (en) * 2016-03-07 2017-09-07 Toshiba Medical Systems Corporation Ultrasonic diagnostic apparatus and ultrasonic diagnosis support apparatus
EP3420914A1 (en) * 2017-06-30 2019-01-02 Koninklijke Philips N.V. Ultrasound system and method
CN112512409A (zh) * 2018-07-30 2021-03-16 皇家飞利浦有限公司 血管内成像流程特异性工作流程引导和相关联的设备、系统和方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6246898B1 (en) * 1995-03-28 2001-06-12 Sonometrics Corporation Method for carrying out a medical procedure using a three-dimensional tracking and imaging system
US5724978A (en) * 1996-09-20 1998-03-10 Cardiovascular Imaging Systems, Inc. Enhanced accuracy of three-dimensional intraluminal ultrasound (ILUS) image reconstruction
JP2006271588A (ja) * 2005-03-29 2006-10-12 Hitachi Medical Corp 超音波装置
US20090299175A1 (en) * 2008-05-27 2009-12-03 Kyma Medical Technologies Location tracking of a metallic object in a living body
JP2013525057A (ja) * 2010-05-03 2013-06-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 介入器具に搭載される超音波トランスデューサの超音波トラッキング
JP2013192628A (ja) * 2012-03-16 2013-09-30 Konica Minolta Inc 超音波画像診断装置
US20160045184A1 (en) * 2013-03-15 2016-02-18 Colibri Technologies Inc. Active localization and visualization of minimally invasive devices using ultrasound
US20180132724A1 (en) * 2013-12-09 2018-05-17 Koninklijke Philips N.V, Imaging view steering using model-based segmentation
WO2017038300A1 (ja) * 2015-09-02 2017-03-09 株式会社日立製作所 超音波撮像装置、画像処理装置、及び方法
CN107041761A (zh) * 2016-02-09 2017-08-15 株式会社日立制作所 超声波诊断装置、旋转式探头的姿态计算装置及其方法
JP2019010346A (ja) * 2017-06-30 2019-01-24 キヤノン株式会社 被検体情報取得装置および超音波探触子
WO2019239647A1 (ja) * 2018-06-12 2019-12-19 株式会社日立製作所 超音波撮像装置
US20200069264A1 (en) * 2018-08-31 2020-03-05 Koninklijke Philips N.V. Intravascular device movement speed guidance and associated devices, systems, and methods

Also Published As

Publication number Publication date
US20210369352A1 (en) 2021-12-02
JP2021186284A (ja) 2021-12-13
CN113729781B (zh) 2024-03-19

Similar Documents

Publication Publication Date Title
CN113729781B (zh) 超声波摄像装置、治疗辅助系统以及图像显示方法
EP3305202B1 (en) Pre-operative registration of anatomical images with a position-tracking system using ultrasound
EP3340918B1 (en) Apparatus for determining a motion relation
CN103997982B (zh) 将手术器械相对患者身体进行定位的机器人辅助装置
US11504095B2 (en) Three-dimensional imaging and modeling of ultrasound image data
JP5367215B2 (ja) 超音波イメージングデータの電気マッピングとの同期化
US7477763B2 (en) Computer generated representation of the imaging pattern of an imaging device
JP4920371B2 (ja) 超音波画像処理用カテーテルの方向付け制御
EP1699361B1 (en) System for guiding a medical instrument in a patient body
JP2023080220A (ja) 狭い通路における侵襲的手順の内視鏡画像
US20220361736A1 (en) Systems and methods for robotic bronchoscopy navigation
JP7171948B2 (ja) 対象の移動を追跡するための超音波システム及び方法
KR20240021747A (ko) 초음파 안내식 바늘 배치를 위한 의료용 로봇
EP3515288B1 (en) Visualization of an image object relating to an instrument in an extracorporeal image
EP3570756B1 (en) System for imaging and tracking interventional devices
EP3738515A1 (en) Ultrasound system and method for tracking movement of an object
JP2014204904A (ja) 医用ガイドシステム
CN117425448A (zh) 用于实时引导经皮干预治疗的配备超声探头的机器人
CN116887778A (zh) 用于将术中图像数据与微创医疗技术集成的系统
CN114901155A (zh) 经由套管针插入脑中的位置配准的侧视图超声(us)成像仪

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20211223

Address after: Chiba County, Japan

Applicant after: Fujifilm medical health Co.,Ltd.

Address before: Tokyo, Japan

Applicant before: Hitachi, Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant