CN102469971B - 医用图像摄影装置以及医用图像诊断装置 - Google Patents

医用图像摄影装置以及医用图像诊断装置 Download PDF

Info

Publication number
CN102469971B
CN102469971B CN201180002858.6A CN201180002858A CN102469971B CN 102469971 B CN102469971 B CN 102469971B CN 201180002858 A CN201180002858 A CN 201180002858A CN 102469971 B CN102469971 B CN 102469971B
Authority
CN
China
Prior art keywords
importance degree
operator
image
imaging apparatus
medical imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180002858.6A
Other languages
English (en)
Other versions
CN102469971A (zh
Inventor
南部恭二郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Publication of CN102469971A publication Critical patent/CN102469971A/zh
Application granted granted Critical
Publication of CN102469971B publication Critical patent/CN102469971B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/12Devices for detecting or locating foreign bodies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/467Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/469Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/48Diagnostic techniques
    • A61B6/486Diagnostic techniques involving generating temporal series of image data
    • A61B6/487Diagnostic techniques involving generating temporal series of image data involving fluoroscopy

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Human Computer Interaction (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

本发明提供一种医用图像摄影装置,能够自动地选出多个图像,容易地发现是否记录了作为目的的检查记录、以及作为目的的影像。实施方式的X射线诊断装置通过对被检体照射X射线并且检测透过所述被检体的X射线,来显示X射线运动图像,具有选出单元、以及显示单元。选出单元根据与进行被检体的手术的手术者的作业状态相关的作业状态信息,从X射线运动图像中选出重要度高的图像。显示单元将所选出的图像作为缩略图一览显示。

Description

医用图像摄影装置以及医用图像诊断装置
技术领域
本发明的实施方式涉及通过对被检体照射X射线并检测透过上述被检体的X射线的X射线透视检查,显示时序列地取得的X射线图像群的医用图像摄影装置以及医用图像诊断装置。
背景技术
近年来,由于针对被检体的低侵袭性等优点,向体内插入由细的索状部件构成的索状的插入器具来进行的技术得到了显著的普及。作为插入器具,有导管(catheter)以及与导管一起导入的导线(guidewire)等。另外,在本说明书中,以下,将包括这些的索状的插入器具称为“导丝(wire)”。一般,导丝相比于人体更易于吸收X射线,所以在X射线图像中被观察为比较清楚的黑色细线。
作为使用导丝的X射线透视检查的一个例子,有X射线透视下导管术。在X射线透视下导管术中,从大腿部的动脉等向体内插入导管,一边参照实时显示的X射线透视图像(运动图像),一边将导管导入至患部来进行治疗。
X射线透视下导管术中使用的医用图像摄影装置朝向插入了导管的状态的被检体照射透视用的X射线,并检测透过被检体的X射线,根据检测结果形成并显示描绘被检体内部的X射线透视图像。另外,医用图像摄影装置构成为能够根据输入操作所输入的信息,变更包括透视被检体时的X射线的射线剂量的透视条件,如果提高X射线的射线剂量,则作为其结果,显示更精细的X射线透视图像。在更精细的X射线透视图像中,能够易于视觉辨认包括血管的被检体内的组织(例如,专利文献1)。
另外,为了显示更精细的X射线透视图像,通过使造影剂偶尔从导管流出,并观察仅仅出现几秒的造影剂的像,能够确认应使导线进入的位置。
这样的X射线透视检查的结果是得到一连串的运动图。仅通过运动图,很难在以后从多个与患者相关的检查记录中找到目的的检查。因此,以往,使用从通过X射线透视检查得到的运动图中自动地或者手动地选择适合的1帧,并将该图像用作该检查的代表图像的方法。将该图像称为缩略图。
即使用以往的缩略图能找到目的的检查的记录,从该检查中,找出作为目的的场面也要花费时间。另外,在一件检查中以多个目的进行处理等的情况较多,但在该情况下,无法通过1张缩略图充分示出检查的特征。
作为从运动图中生成多个缩略图的方法,有针对所有通道同时再现并观察每隔几分钟采样几秒而得到的影像的方法。由此,能够大致把握是什么样的手术、器材及人员是什么样的配置、并且器材等什么时候运行。
然后,如果发现成为重要的局面、节眼的场面,则手动附加标记(提示符号:cue),以后如果选择提示符号,则能够访问与该时刻对应的帧。
例如,由于某种理由手术中断而人来回动作时、在手术进入到接下来的工序时进行器材、人员的布局调整等的情况等下,出现在运动图中影像的变化大的状态短暂持续的状况。通过对这样的时间带附加提示符号并采样其前后的帧,易于推测出手术处于哪个阶段。
作为与此类似的技术,有接受操作者的指定,在运动图的时间刻度上的任意定时产生书签数据并与书签数据关联起来记录帧的技术(例如,专利文献2)。
专利文献1:日本专利特开2001-149354号公报
专利文献2:日本专利特开2002-95640号公报
发明内容
如上所述,无法通过1张缩略图充分显示检查的特征,并且,虽然如果附加提示符号则能够访问重要的局面,但手动地附加提示符号来进行的作业花费时间。
因此,自动地生成多个(例如,10张、或者100张)缩略图。通过将它们一览显示,能够容易地发现目的的检查记录,进而,容易地找到在该检查记录中的哪个部分记录了作为目的的影像。
为此,本实施方式的目的在于提供一种医用图像摄影装置以及医用图像诊断装置,能够自动地选出X射线图像,容易发现是否记录了作为目的的检查记录、以及作为目的的影像。
为了解决上述课题,实施方式的医用图像摄影装置通过对被检体照射X射线并且检测透过上述被检体的X射线,而显示X射线运动图像,该医用图像摄影装置具有选出单元、以及显示单元。选出单元根据与进行被检体的手术的手术者的作业状态相关的作业状态信息,从X射线运动图像中选出重要度高的图像。显示单元将所选出的图像作为缩略图一览显示。
另外,另一实施方式的医用图像摄影装置通过对被检体照射X射线并且检测透过上述被检体的X射线,而显示X射线运动图像,医用图像摄影装置具有重要度决定单元、选出单元、以及显示单元。重要度决定单元决定X射线运动图像的图像的重要度。选出单元根据由重要度决定单元决定的重要度,从X射线运动图像中选出图像。显示单元将所选出的图像作为缩略图一览显示。
进而,实施方式的医用图像诊断装置拍摄与被检体相关的运动图像,医用图像诊断装置具有选出单元、以及显示单元。选出单元从运动图像中选出重要度高的图像,显示单元将所选出的图像一览显示为缩略图。
附图说明
图1是示出第1实施方式的医用图像摄影装置的整体结构的图。
图2是示出图1所示的医用图像摄影装置的控制系统的结构的框图。
图3是示出图1所示的医用图像摄影装置显示的、描绘出插入到体内的导丝的帧的图。
图4是示出图3所示的帧的概要的图。
图5是示出从图3所示的帧抽出的导丝的像的图。
图6是示出基于图5所示的导丝的像的二维曲线的图。
图7是示出基于由图1所示的医用图像摄影装置按照时序列得到的多个导丝的像的二维曲线的图。
图8是示出基于由图1所示的医用图像摄影装置按照时序列得到的多个导丝的像的二维曲线的图。
图9A是示出基于图7所示的邻接的两个帧的一方中的导丝的像的二维曲线的图。
图9B是示出基于图7所示的邻接的两个帧的另一方中的导丝的像的二维曲线的图。
图10是示出图9A以及图9B所示的两个二维曲线的重叠状态的图。
图11是示出根据X射线量的大小推定的重要度的图。
图12是示出根据X射线透视下导管术中的经过时间推定出的重要度的图。
图13是示出根据X射线图像的像素值的变化量推定出的重要度的图。
图14是示出通过综合所推定出的重要度而决定的综合重要度的图。
图15是示出选出多个重要度时的动作的流程图。
图16是示出逐个选出重要度时的动作的流程图。
图17是示出指定了作为代表缩略图显示的X射线图像时的动作的流程图。
图18是示出所决定的综合重要度的图。
图19是示出在变更综合重要度时使用的公式的图表。
图20是示出变更后的综合重要度的图。
图21是示出将X射线图像一览显示为缩略图时的图。
图22是示出作为第2实施方式的手术者传感器,使用了适配器中安装的固体话筒的例子的图。
图23是将图22所示的适配器的一部分放大而示出的图。
图24是示出作为第4实施方式的手术者传感器,使用了显示器中安装的照相机的例子的图。
图25是示出手术者正对着显示器时的露出区域的图。
图26是示出手术者没有正对显示器时的露出区域的图。
图27是示出在第5实施方式中,手术者正对着显示器时的眼睛的图像的图。
图28是示出手术者没有正对显示器时的眼睛的图像的图。
图29是示出在第6实施方式中,手术者佩带的反射标志的图。
图30是示出手术者传感器以及反射标志的图。
图31是针对反射标志描绘出角度θ与相对反射率的关系的图表。
图32是示出在第6实施方式的变形例中,手术者正对着显示器时的反射标志的图像的图。
图33是示出手术者没有正对液晶显示器时的反射标志的图像的图。
图34是示出第7实施方式的手术者传感器的图。
图35是示出压力传感垫上的重心位置的图。
图36是示出在第8实施方式中,没有操作导丝时的手术者的心拍数的图。
图37是示出操作导丝时的手术者的心拍数的图。
(符号说明)
1:被检体;2:顶板;4:X射线管;6:X射线检测器;20:运算控制装置;21:系统控制部;22:存储部;23:图像处理部;24:显示控制部;25:X射线量决定部;26:选出部;27:重要度决定部;31:显示部;32:操作部;33:检测部;41:导丝确定部;43:对位处理部。
具体实施方式
参照附图,详细说明医用图像摄影装置的实施方式的一个例子。
本实施方式的医用图像摄影装置用于向被检体的体内插入导丝而实施的手术。以下,特别详细说明应用于X射线透视下导管术的情况。该医用图像摄影装置从通过X射线透视下导管术而时序列地取得的X射线图像群中自动地选出适合的X射线图像,作为缩略图一览显示。通过将它们一览显示,容易发现目的的检查记录,进而,容易发现在该检查记录中的哪个部分中记录了作为目的的影像。
在本实施方式中,只要没有特别指出,则不区分“图像”和“图像数据”。医用图像摄影装置处理的图像数据一般是涂色数据(还称为栅格数据、位图数据等)。涂色数据是由像素(pixel)、体素(voxel)等像素形成并对各像素赋予值(像素值)而形成的图像数据。将该图像数据通过规定的计算机程序能够视觉辨认地表现出来后是图像。这样,图像数据和图像实质上一一对应。
在从X射线图像群中自动地选出适合的X射线图像时,根据表示X射线透视下导管术中的手术者的作业状态的数据来进行。既可以根据数据自身选出X射线图像,并且,也可以根据数据求出X射线图像的重要度,并根据该重要度选出X射线图像。另外,在以下的说明中,对于“手术者的作业状态”,只要没有特别限定,则是指包括手术者的作业人员的作业状态。另外,对于“手术者进行的活动”,只要没有特别限定,则是指包括手术者的作业人员进行的活动。
以下,详细说明如何取得表示手术者的作业状态的数据,并且,如何根据数据求出X射线图像的重要度。首先,作为手术者的作业状态,能够举出如下那样的状态。第1作业状态是指,例如,由手术者操作了器具(导丝)的状态那样的手术者进行的器具的操作状态。第2作业状态是指,例如,手术者观察用于显示X射线透视图像的显示器时的手术者的姿势。第3作业状态是指,在对手术者要求极其精密的作业的导丝的前端部的插入作业中手术者的呼吸被抑制时或者手术者进行紧张状态时的手术者的生物体信息。第4作业状态是指,手术者进行会话时那样的手术者的行动。第5作业状态是指,手术者或者X射线技师等对装置指示降低或增加射线剂量、或者中止或再次开始照射的操作。将上述第1至第5手术者的作业状态中的某一个或者某两个以上组合而得到求出X射线图像的重要度时的判断材料。
该医用图像摄影装置根据该判断材料求出X射线图像的重要度。作为判断材料,对于检测是上述第1至第5手术者的作业状态中的哪一个、以及检测的方法、以及在比较该检测出的结果时运用的判断基准、及其判断内容,举出各种实施方式进行详细说明。
<第1实施方式>
说明第1实施方式。首先,说明用于进行X射线透视下导管术的医用图像摄影装置的结构。接下来,说明在X射线透视下导管术中,作为对由手术者操作导丝的操作状态进行检测的结果,检测导丝的形状的变化量的例子。进而,接下来,说明根据检测结果,求出在X射线透视下导管术中取得的X射线图像的重要度的例子。
[装置结构]
说明本实施方式的医用图像摄影装置的结构。图1示出该医用图像摄影装置X射线诊断装置的结构例。该医用图像摄影装置具有与以往同样的机械结构。
被检体1表示实施X射线透视下导管术的患者。被检体1载置于顶板2上。顶板2是未图示的寝台装置的一部分。在寝台装置中设置了用于使顶板2移动的驱动机构。在本实施方式中,被检体1被载置成躺卧于顶板2。对于医用图像摄影装置,虽然还有时设置以站立状态支撑被检体的站立载置台,但在X射线透视下导管术中,通常,对在顶板上以仰卧状态支撑的被检体实施处置。
C臂3是形成为大致“C”字形状的支撑部件。在C臂3的一端侧支撑了X射线管4和X射线光圈5,在另一端侧支撑了X射线检测器6。由此,X射线管4以及X射线光圈5、和X射线检测器6隔着被检体1而配置于对向的位置。
C臂3被保持为能够通过驱动机构8移动。驱动机构8通过在运算控制装置20的控制之下使C臂3移动,而使X射线管4、X射线光圈5以及X射线检测器6的位置、倾斜角度改变。
X射线管4从高电压产生装置9施加高电压而产生X射线7。X射线光圈5具有规定从X射线管4产生的X射线7的照射范围(立体角、剖面形状)的光圈翼。光圈控制部10使光圈翼的位置移动而使X射线7的照射范围变更。由运算控制装置20控制高电压产生装置9以及光圈控制部10的动作。
将通过X射线光圈5规定了照射范围的X射线7照射到被检体1。将透过被检体1的X射线7投射到X射线检测器6。X射线检测器6检测X射线7,将该检测结果变换为电信号并发送到检测控制部11。检测控制部11将该电信号发送到运算控制装置20。另外,检测控制部11控制X射线检测器6的动作。
X射线检测器6例如能够使用平面检测器(Flat Panel Detector;FPD)、图像增强器(Image Intensifier;I.I.)构成。
在本实施方式中,以按照规定的时间间隔照射脉冲X射线7的方式,控制X射线管4。将该时间间隔设定为例如(1/30)秒~(1/5)秒(每秒的照射次数5~30次)左右。另外,在医用图像摄影装置中,例如最大能够实现几十次/秒的照射,但为了降低向被检体1、手术者的X射线辐射,选择这一程度的时间间隔。由此,得到5~30帧/秒左右的帧率的运动图像。还可以代替这样反复照射脉冲X射线,而连续地照射X射线。
运算控制装置20控制该医用图像摄影装置的各部,并且执行各种运算处理。运算控制装置20具有与例如一般的计算机同样的结构。作为其一个例子,运算控制装置20构成为包括微处理器、存储装置(RAM、ROM、硬盘驱动器等)、通信接口等。对运算控制装置20,连接了操作设备、输入设备、显示设备。
运算控制装置20中的系统控制部21控制该医用图像摄影装置的各部。作为其一个例子,有如下那样的例子:控制驱动机构8而使C臂3移动;控制高电压产生装置9而使X射线条件(X射线7的射线剂量、帧率等)改变,例如,进行后述X射线量的增减调整;控制光圈控制部10而使X射线7的照射范围变更;控制检测控制部11而控制X射线检测器6的动作。另外,系统控制部21控制运算控制装置20的各部。
图像处理部23根据从X射线检测器6经由检测控制部11发送的电信号,形成被检体1的图像(数字图像数据)。另外,图像处理部23对该图像实施各种图像处理。在后面详述图像处理部23。
显示控制部24接受系统控制部21的控制而使显示部31显示信息。显示部31是使用液晶显示器(Liquid Crystal Display;LCD)、CRT(Cathode Ray Tube,阴极射线管)等显示设备而构成的。
X射线量决定部25根据手术者得到的从活动检测部(以下,称为“检测部”)33输出的检测结果,判断是否减少现状的X射线量,在判断为减少现状的X射线量的情况下,输出控制信号以减少X射线量。系统控制部21根据从X射线量决定部25输出的控制信号,控制高电压产生装置9而使X射线条件(X射线量等)改变,例如,进行X射线量的增减调整。在后面详述X射线量决定部25。另外,系统控制部21还通过其他控制信号(例如,来自操作部32的指示信号),进行X射线量的增减调整。
选出部26包括根据检测部33的检测结果决定X射线图像群中包含的X射线图像的重要度的重要度决定部27。进而,选出部26根据所决定的重要度,选出一个或者多个X射线图像。对于重要度决定部27如何决定重要度、并且选出部26如何根据重要度选出X射线图像,在后面详述。此处,选出部26是本发明的“选出单元”的一个例子。另外,重要度决定部27是本发明的“重要度决定单元”的一个例子。
操作部32用于该医用图像摄影装置的操作、信息输入等。操作部32构成为包括键盘、鼠标、控制面板、脚踏操作部等操作设备、输入设备。脚踏操作部输出X射线照射开始、停止的指示信号,并输出使X射线量增加或者减少的指示信号。
检测部33根据运动图像中包含的多个帧中的某一个帧中的导丝的像和其过去的帧中的导丝的像之差,检测导丝的形状的变化量,输出检测结果。对于检测部33,在后面详述。
〔图像处理部〕
参照图2,进一步说明图像处理部23的结构例。在图像处理部23中,设置了导丝确定部41和对位处理部43。
图像处理部23实时地执行以下说明的处理。本实施方式中的实时处理是指,与将来自X射线检测器6的电信号(相当于一帧)输入到运算控制装置20对应地,即时执行针对该帧的处理并输出(显示)结果。由此,能够在实用上看起来没有迟滞的延迟时间内,将导丝的状况显示为运动图像。
(导丝确定部)
如上所述,在本实施方式中得到5~30帧/秒左右的帧率的运动图像。导丝确定部41确定构成该运动图像的多个帧的各个中的导线的像。
此处,帧是指,构成运动图像的一连串的静止图像的各个。另外,上述多个帧无需是构成运动图像的所有帧。例如,也可以是根据本实施方式的特征性的功能(后述)的开始定时和结束定时而决定的多个帧。另外,在手术中,长时间(例如几小时)地,持续生成每秒几帧至30帧左右的运动图像,但在本实施方式的功能中,使用的是其中的例如几分钟左右。图像处理部23与本实施方式的功能的使用开始的指示一起开始动作,执行以下那样的处理。成为由图像处理部23处理的处理对象的帧是在该使用开始的指示以后取得的一连串的帧。
详细说明导丝确定部41的动作。图3示出帧的一个例子。帧F表示将从大腿动脉插入的导管以及导线经由大动脉插入到冠状动脉。一般,在X射线图像中,以将X射线的透射量少的部位描绘得较黑,将X射线的透射量多的部位描绘得较白的方式显示的情况较多。图3也依照该显示方式。图4示出图3所示的图像的示意图。
在帧F中,看起来稍暗的带状的像C′是导管的影。另外,位于导管的像C′的前端部分并看起来稍微黑的像C是导线的影。导管的前端开口。导线的前端侧从该开口突出。另外,由于对从大动脉向冠状动脉的分支部嵌入了导管,而在导线的中央附近形成了大的弯曲。如果详细观察导线的像C的前端部位,则稍微大幅弯曲。其是为了易于向血管的分支部等插入导线,而预先对导线附加的弯曲部位。帧F描绘出这样的状态。
另外,在图4中,为易于观察,省略了描绘出血管、脏器、骨等体内组织的像(在以下的其他示意图中也同样)。在实际的帧中,如图3所示,还描绘出与体内组织相当的复杂的浓淡图案。另外,在本实施方式中,只要没有特别言及,则不区分像和其实体(导管、导线、体内组织等)。
在本实施方式中,处理图3所示那样的帧。为了更容易并且高精度地确定导丝的像C,首先,导丝确定部41进行强调处理而使像C更明了。作为该强调处理的例子,有实施进行非线性明度变换而降低导丝的像C的浓度不均,进而抽出图像的各种空间频率分量中的空间频率高的分量的图像滤波处理的方法。在该图像滤波处理中,去除大范围且平滑的层次,而仅留下局部且细致的变动分量。
强调处理不限于上述例。例如,能够根据所使用的医用图像摄影装置、被检体的特性,适宜地决定强调处理的内容。另外,能够适宜地组合公知的图像处理技术等而实现强调处理。
导丝确定部41对帧F实施适合的图案抽出处理来确定导丝的像C。作为该图案抽出处理,能够适宜地使用与像素值相关的阈值处理、空间滤波处理等任意的图像处理技术。另外,在导丝的像C的确定中,也可以代替确定像C的整体,而确定其轮廓。
数学上,导丝是埋入到实际空间(三维空间)的平滑的曲线(三维曲线)。另一方面,由医用图像摄影装置得到的图像是将该三维曲线投影到平面而得到的二维曲线。在该投影中,将X射线管4的位置(即X射线7的产生位置)作为视点,将X射线检测器6的检测面作为投影平面。因此,能够将特定的导丝的像C作为二维曲线捕捉(其也用相同的符号C来示出)。
导丝确定部41从帧F抽出特定的导丝的像C。对位处理部43将所抽出的像C显示为二维曲线(后述)。图5示出所抽出的导丝的像C的例子。另外,图6示出基于导丝的像C的二维曲线C的例子。
针对基于按照上述时间间隔从X射线检测器6依次送来的电信号的各帧,导丝确定部41实时地执行上述处理。由此,得到时序列的多个导丝的像。
图7示出在通过手术者的导丝操作使导丝进行了轴旋转的情况下,基于从时间上连续的帧群的各个抽出的导丝的像的二维曲线C。另外,图8示出在通过手术者的导丝操作使导丝前进的情况下,基于从时间上连续的帧群的各个抽出的导丝的像的二维曲线C。二维曲线C的位置、形状逐渐变化的原因在于,由于通过被检体1的呼吸、心拍等产生的运动所致的移动、和由于血管内的导丝的移动所致的导丝自身的变形。
在观察体内的导丝的情况下,优选从相对导丝尽可能正交的方向照射X射线。其原因为,由此导丝的活动在影像上(运动图像上)最显著。如果在时间上邻接的两个帧之间比较导丝的像C,则两者的差异是形状、长度的微少的变化,虽然由于由被检体1的运动所致的平行移动、旋转移动,而产生导丝的变形、位置的变化,但成为相互类似的形态。
另外,导丝的前端部位的形状有时由于旋拧导丝的操作、与血管壁的碰撞而形状有时急剧地变化。但是,其以外的部位反映导丝当前正在通过的位置的血管的形状,几乎没有急剧的变形。在本实施方式中,利用该事实执行如下那样的处理。
(对位处理部)
对位处理部43对成为本实施方式的功能的应用对象的一连串的帧中的、最初的帧以外的各帧,执行如下那样的处理。此时,将最初的帧在针对以后的帧的处理中作为位置的基准参照。对位处理部43以使该帧中的导丝的像C和比其过去的帧中的导丝的像C最良好地重叠的方式,使该帧和过去的帧对位。以下,详细说明帧的对位处理。
首先,对位处理部43求出表示各帧中的导丝的像C的形状的二维曲线C(参照图6)。此时,根据需要进行细线化处理等图像处理。
首先,说明使邻接的两个帧对位的处理的概要。图9A以及图9B分别示出基于图7所示的邻接的帧f、g中的导丝的像C的二维曲线。图9A示出与帧f对应的二维曲线Cf,图9B示出与帧g对应的二维曲线Cg。另外,考虑后述的重叠,用实线示出二维曲线Cf,用虚线示出二维曲线Cg。对于各图的坐标轴也是同样的。
接下来,对位处理部43求出使双方的二维曲线Cf、Cg最良好地一致那样的坐标变换。该坐标变换包括平行移动和旋转移动。能够将这样的坐标变换表现为仿射变换(Affine Transformation)。但是,此处使用的仿射变换不包括放大、缩小和镜像映射。
对于所得到的仿射变换,与帧f的导丝的像C符合地,使帧g的导丝的像C相对平行移动和/或旋转移动。将该仿射变换记载为T(g、f)。
在决定仿射变换T(g、f)时,需要考虑由于导丝在体内移动而引起的变形的影响。为此,并非将二维曲线Cf、Cg的整体完全对位,而容许在两端部位产生的偏移。特别,对于前端部位,如上所述,有时产生急剧的变形,所以甚至容许比较大的偏移。例如,如图10所示,对于二维曲线Cf、Cg的前端部位,无需如其他部位那样正确地重叠。
对位处理部43生成与各二维曲线Cf、Cg的各位置对应的权重函数Wf、Wg
一般,对于希望严密地进行重叠的部分,将权重设定得较大,对于容许偏移的部位,将权重设定得较小。对于导丝的前端部位的附近,由于如上所述易于变形,所以减小权重。另外,能够根据导丝的各点处的弯曲程度赋予权重。例如,优选导丝的弯曲越大的位置权重越大。通过鉴于这些事项适合地设定各位置处的权重,而生成权重函数Wf、Wg
通过对帧g应用式(1)所示的仿射变换T(g、f)来进行重叠,所以需要适合地决定其参数θ、u、v。此处,参数θ表示旋转移动量,参数u、v表示平行移动量。
【数1】
T ( g , f ) = cos &theta; - sin &theta; u sin &theta; cos &theta; v 0 0 1 - - - ( 1 )
将对帧g的二维曲线(xg,yg)应用仿射变换T(g、f)而得到的二维曲线设为(xg′,yg′)。如果将以适合的尺度评价帧f的二维曲线(xf,yf)与二维曲线(xg′、yg′)的不一致的程度而得到的结果设为E,则计算出使该E的值大致成为最小的参数θ、u、v。
作为更具体的结构,例如如下所述。在将二维曲线(xf,yf)上的各点p、与二维曲线(xg′、yg′)上的点且最接近点p的点q的距离设为D时,作为不一致的程度的评价尺度E考虑用下式表示。
【数2】
E = &Sigma; C D W f W g - - - ( 2 )
式(2)所示的总和是针对二维曲线(xf,yf)上的所有点取得的。如果使θ、u、v的值变化,则E的值也变化,所以搜索E成为大致最小的θ、u、v。该搜索能够通过公知的非线性最小二乘法等手法来执行。
如上所述,决定适合的仿射变换T(g、f)。如果将其应用于帧g,则帧f和帧g的相互的导丝的像C基本重叠,因此,这些帧f、g被对位。另外,在上述例子中,以使不一致的程度成为大致最小的方式,计算了仿射变换的参数,但当然也可以与此相逆地,以适合的尺度评价一致的程度,以使该一致的程度成为大致最大的方式,求出仿射变换的参数。
在以上的运算中,执行邻接的两个帧的对位。在本实施方式中,沿着时序列依次形成了帧,所以为了抑制运动图像中的导丝的像C的活动,需要使上述仿射变换依次累积。为此,对位处理部43执行如下那样的处理。
将实施抑制活动的处理的最初的帧的紧接着前面的帧设为帧F0,将其以后的帧依次设为帧F1、F2、F3、····(未图示)。此时,如果将应用于帧Fn(n=1、2、3、····)的仿射变换设为Tn,则对位处理部43如下式所示求出各仿射变换Tn
【数3】
T1=T(1,0)
Tn=T(n,n-1)Tn-1(3)
对位处理部43通过将这样依次得到的仿射变换Tn依次应用于对应的帧Fn,实时地执行依次取得的多个帧的对位。
由此,在针对最初的帧f对位了接下来的帧g之后,接着帧g的帧h相对于“针对最初的帧f对位了的g”而被对位。因此,帧h也大致正确地对位到帧f。以下相同。这样,能够生成导丝的像C几乎静止的运动图像。由此,在X射线透视下导管术中实时地观察的X射线透视图像中,能够抑制由被检体的运动引起的导丝的像的活动。
在以上说明的对位处理中,搜索出在使帧f和帧g的相互的导丝的像C基本重叠时,使不一致的程度的评价尺度E大致最小的参数θ、u、v。该参数θ、u、v对应于手术者对导丝进行了操作(轴旋转、前进以及后退)时的导丝的形状的变化量。因此,能够根据参数θ、u、v,检测导丝的形状的变化量。
接下来,示出检测部33根据参数θ、u、v,检测导丝的形状的变化量的动作的一个例子。
此处,在以规定的帧率得到的运动图像中,使用当使最新得到的帧和在比其前一个得到的帧的相互的导丝的像重叠时搜索出的参数θ、u、v、以及当使在前一个得到的帧和比其更前一个得到的帧的相互的导丝的像重叠时搜索出的参数θ’、u’、v’。根据这些参数θ、u、v、θ’、u’、v’,检测部33例如如下所述求出平均平方的残差。
首先,检测部33通过接下来的运算,求出参数的平均值θa、ua、va
【数4】
θa=(θ+θ′)/2
ua=(u+u′)/2    (4)
va=(v+v′)/2
接下来,通过以下的运算,求出针对平均值θa、ua、va的参数θ、u、v、θ’、u’、v’的平方和S。
【数5】
S=(θ-θa)2+(u-ua)2+(v-va)2
+(θ′-θa)2+(u′-ua)2+(v′-va)2    (5)
接下来,检测部33通过以下的运算,求出平均平方的残差R。
【数6】
R=S/D
D=N*(n-1)    (6)
另外,D表示变量中的能独立地选择的变量的数量即自由度,N表示观测数据通过一个运算结合了时的集合的数量即群数,n表示一个群内包含的观测数据的数量即观测值。此处,成为N=3、n=2。
根据使用了上述式(4)~(6)的运算,检测部33求出残差R。
(决定重要度时的判断材料)
这样求出的残差R成为判断是否使现状的X射线量增减时的判断材料。
X射线量决定部25将预定的阈值作为判断基准,判断残差R是否超过阈值,在得到了残差R没有超过阈值这样的判断结果时,判断是否有使现状的X射线量减少的余地。另外,在X射线量决定部25判断是否有使现状的X射线量减少的余地时,将管电流以及帧率作为判断材料。在X射线量决定部25判断为管电流以及帧率都是最低值的情况下,系统控制部21不将用于使管电流减少的控制信号以及用于降低帧率的控制信号输出到高电压产生装置9,而维持现状的X射线量。通过不使管电流减少,防止X射线透视图像的画质降低,并且,通过不降低帧率,防止运动图不平滑地动作。另一方面,在X射线量决定部25判断为管电流或者帧率的至少一方并非最低值的情况下,系统控制部21将用于使管电流减少的控制信号输出到高电压产生装置9,而使管电流减少。
另一方面,接收残差R超过阈值这样的X射线量决定部25的判断结果,系统控制部21在现状的管电流以及帧率都是上限值(设定的值)的情况下,不将用于使管电流增加的控制信号以及用于提高帧率的控制信号输出到高电压产生装置9,而维持现状的X射线量。在管电流或者帧率的至少一方并非上限值的情况下,将用于使管电流增加的控制信号或者用于提高帧率的控制信号输出到高电压产生装置9,而使X射线量增加。
这样增减或者维持的X射线量的大小成为,在该X射线量时推定在X射线透视下导管术中包括手术者的作业人员在做什么的一个判断材料。另外,对于X射线量的大小,作为X射线量的大小,既可以使用通过管电流以及管电压求出的X射线量的大小,并且,也可以使用控制与X射线量的大小对应的高压产生装置9的控制信号。以下,“X射线量的大小”时有时包括该控制信号。
X射线量的增减通过X射线图像的像素值的变化量来表现,所以取得时的X射线图像的像素值的变化量成为推定此时的包括手术者的作业人员的作业状态的判断材料。另外,例如,根据造影剂投入而X射线图像的像素值变化,所以通过将投入造影剂时的X射线图像的像素值的变化量用作判断材料,能够推定在X射线透视下导管术中作业人员是否进行了造影剂投入。
进而,导丝的形状的变化量成为推定手术者的导丝操作的判断材料。虽然还考虑将推定手术者是否进行了导丝操作时的判断材料设为X射线量的大小、或者X射线图像的像素值的变化量,但即使X射线量增加,也未必进行了导丝操作,并且,即使X图像的像素值的变化量变大,也未必进行了导丝操作,而手术者的导丝操作、和X射线量的大小、X射线图像的像素值的变化量也未必对应。对于该点,由于导丝的形状的变化量直接表示手术者的导丝操作,所以与手术者的导丝操作对应。
以上举出的X射线量的大小、X射线图像的像素值的变化量(造影剂的投入)、导丝的形状的变化量成为在X射线透视下导管术中推定成为重要的局面、节眼的场面时的判断材料。
(推定重要度来决定综合重要度的功能)
在本实施方式中,重要度决定部27通过根据多个判断材料推定重要度并对推定出的重要度进行综合,决定X射线图像的综合重要度。
说明在推定重要度时的判断材料中,使用了X射线量的大小的一个例子。系统控制部21将取得了X射线图像时的X射线量的大小与取得时的X射线图像对应起来存储到存储部22。图11示出重要度决定部27根据X射线量的大小推定出的重要度。在图11中,将横轴设为时间轴,将纵轴设为重要度,示出与照射了X射线时对应地,根据此时的X射线量的大小推定出的重要度。如从图11可知,在X射线量是上限值时,重要度变得最高,在没有照射X射线时,重要度变得最低。
接下来,说明作为推定重要度时的判断材料,使用了X射线透视下导管术中的X射线取得图像时期的例子。作为检测X射线取得图像时期的检测部33,例如,使用日本专利特开2008-301984号公报记载的例子。即,具有对当前时刻进行计时的单元,对时序列地取得的X射线图像群中包含的各X射线图像,赋予其取得时刻。也可以赋予一个X射线取得图像时刻、和帧率。
重要度决定部27根据表示取得了X射线图像的时刻在开始该取得到直至结束的全部期间中位于何处的时间(以下,称为“经过时间”)推定重要度。重要度决定部27根据取得开始时的数据以及取得结束时的数据(都与X射线图像对应起来存储到存储部22),求出该全部期间。重要度决定部27根据取得了X射线图像的经过时间,推定该X射线图像的重要度。
图12示出根据经过时间推定出的重要度。在图12中,将纵轴设为重要度,将横轴设为时间轴,示出重要度决定部27根据该X射线取得图像时刻推定出的重要度。如从图12可知,重要度决定部27将经过时间是布局阶段(最初阶段)的X射线图像的重要度推定为低,将从布局阶段到中盘阶段的X射线图像的重要度逐渐推定为高,将从中盘阶段到最终阶段的X射线图像的重要度推定为维持得高。这样,重要度决定部27推定重要度基于相比于布局阶段,在从中盘阶段到最终阶段,产生更多的成为重要的局面、节眼的场面这样的经验法则。
接下来,说明作为推定重要度时的判断材料,使用了时序列地取得的X射线图像的像素值的变化量的一个例子。作为检测像素值的变化量的检测部33,例如,有日本专利特开2009-240559号公报记载的例子。即,着眼于X射线图像中的关注部位,计算并比较时序列地连续的多个X射线图像中的各个关注部位的像素值,针对关注部位,计算像素值在时间上的变化量。另外,也可以不是关注部位,而针对X射线图像整体,根据对像素值进行总计而得到的值或者像素值的平均值,计算变化量。系统控制部21将这样计算出的X射线图像(或者关注部位)的像素值的变化量存储到存储部22,重要度决定部27根据该像素值的变化量推定重要度。
图13示出根据X射线图像的像素值的变化量推定出的重要度。在图13中,将横轴设为时间轴,将纵轴设为重要度,在取得X射线图像时刻的位置,示出了重要度决定部27根据该X射线图像的像素值的变化量推定出的重要度。为便于说明,在图13中,用棒线的长度来表示根据X射线图像的像素值的变化量推定出的重要度。
接下来,说明作为推定重要度时的判断材料之一,如上所述,使用了导丝的形状的变化量的例子。即,系统控制部21将通过使用了上述式(4)~(6)的运算求出的残差R存储到存储部22。在存储部22中,与在求出该残差R时使用的3张帧中最新得到的帧对应起来存储。重要度决定部27根据残差R推定重要度。重要度决定部27根据残差R的大小将重要度推定得较高。另外,重要度决定部27针对超过了规定的上限值的残差R的大小,将重要度推定为一定的最高值。
在示出根据导丝的形状的变化量(残差R的大小)推定出的重要度的图中,例如,将纵轴设为重要度,将横轴设为时间轴,在产生了其变化量的时间轴上的时刻的位置,示出根据导丝的形状的变化量推定出的重要度。另外,也可以在图13中,示出根据X射线图像的像素值的变化量以及导丝的形状的变化量推定出的重要度。
重要度决定部27将上述X射线量的大小、X射线取得图像时期、X射线图像的像素值的变化量(造影剂的投入)、以及导丝的形状的变化量作为判断材料,推定各重要度,根据各重要度决定综合重要度。图14示出各重要度以及综合重要度。为便于说明,在图14中,用棒线的长度来表示综合重要度。在图14中,示出从X射线图像的取得期间的中盘阶段到最终阶段,存在多个高的综合重要度(长的棒线),其表示从中盘阶段到最终阶段,产生了多个推定为重要的局面、节眼的场面。因此,如果将综合重要度高的多个X射线图像一览显示为缩略图,则手术者能够根据该缩略图想起成为重要的局面、节眼的场面。
(选出综合重要度的功能)
手术者为了根据一览显示的缩略图想起重要的局面等,需要从由重要度决定部27决定的综合重要度中,按照从高到低的顺序选出多个(例如10张或者100张)的综合重要度,并将所选出的综合重要度的X射线图像显示为缩略图。
此时,也可以在将多个综合重要度全部选出之后,将所选出的综合重要度的X射线图像全部显示为缩略图,并且,也可以首先选出最高的综合重要度,将该选出的最高的综合重要度的X射线图像显示为缩略图之后,选出剩余的数量(例如,9张或者99张)的综合重要度,并将该选出的剩余的数量的综合重要度的X射线图像作为缩略图全部显示。
在本实施方式中,在选出单元26将多个综合重要度全部选出之后,显示控制部24将所选出的综合重要度的X射线图像在显示部31中全部显示为缩略图。
接下来,参照图15~图20,说明选出单元26选出多个综合重要度时的动作。图15是示出选出多个X射线图像时的整体的动作的流程图。
首先,选出单元26选出综合重要度(图15所示的S101)。参照图16,说明该综合重要度的选出。图16是示出选出一个综合重要度时的动作的流程图。
选出单元26按照顺序(取得的顺序)读入存储部22中存储的综合重要度(S201)。接下来,选出单元26判断所读入的综合重要度是否高于存储器(例如,运算控制装置20或者选出单元26的内部存储器)中存储的综合重要度(S202)。在选出单元26判断为高的情况下(S202:“是”),改写所存储的综合重要度(S203)。接下来,选出单元26判断成为读入对象的X射线图像的综合重要度是否为最后(S204)。另一方面,在选出单元26判断为相同或者更低的情况下(S202:“否”),转移到成为读入对象的综合重要度是否为最后的选出单元26的判断(S204)。
在判断为并非最后的情况下(S204:“否”),返回到X射线图像的综合重要度的读入(S201)。在判断为最后的情况下(S204:“是”),选出单元26使存储器中存储的综合重要度结束,使综合重要度的选出结束。以上,选出一个综合重要度。
接下来,重要度决定部27根据所选出的综合重要度,变更其他综合重要度(图15所示的S102)。参照图18~图20,说明该综合重要度的变更。图18是示出重要度决定部27决定出的综合重要度的图、图19是示出在变更综合重要度时使用的公式的图表、图20是示出变更了的综合重要度的图。为便于说明,在图18以及图20中,用棒线来表示综合重要度。
在综合重要度的变更中,例如,如果选择单元26选择了综合重要度中的最高的重要度(在图18中用“a”表示的综合重要度),则重要度决定部27使用图19所示的规定的公式(图19所示),以使在取得了所选出的X射线图像的时刻的周边的时刻取得的X射线图像的综合重要度变低的方式,变更综合重要度。由此,时间上处于“a”的周边的“c”以及“d”的综合重要度变低,时间上远离“a”的“b”的综合重要度不变更(图20所示)。由此,“b”的综合重要度比“c”的综合重要度相对地变高,成为接下来选择的综合重要度。
在进行了以上的综合重要度的变更(S102)之后,选出单元26判断所选择出的综合重要度是否达到规定数(S103)。在选出单元26判断为没有达到规定数的情况下(S103:“否”),选出单元26返回到综合重要度的选出(S101),例如,在综合重要度是图20所示的状态时,选出“b”的综合重要度。这样,通过选出单元26,按照从高到低的顺序,选出综合重要度。在选出单元26判断为所选择出的综合重要度达到了规定数的情况下(S103:“是”),结束利用选出单元26的选出。以上,选出规定数的综合重要度。
(对X射线图像进行一览显示的功能)
接下来,参照图21,说明在选出规定数的综合重要度之后,将选出的综合重要度的X射线图像一览显示为缩略图。图21是将X射线图像一览显示为缩略图时的图。在图21中用T表示显示为缩略图的X射线图像。
在由选出单元26选出了规定数的综合重要度之后,显示控制部24从存储部22读出与所选出的综合重要度对应的X射线图像的数据,将这些X射线图像在显示部31中一览显示为缩略图。显示控制部24以及显示部31是本发明的“显示单元”的一个例子。
显示控制部24与时间刻度对应起来,显示多个X射线图像。作为时间刻度的一个例子,使用在轴上示出了时间尺的时间轴。显示控制部24使时间轴显示,将显示为缩略图的各个X射线图像、和与取得了该X射线图像的时刻相当的时间轴上的点对应起来显示。由此,手术者可知用时间轴上的点表示的时刻、与在此时刻取得的显示为缩略图的X射线图像的关系,易于想起在取得了X射线图像的时刻的周边进行的作业。此处,“与时间轴上的点对应起来显示”是指,用标记来表示时间轴上的点,或者用标记来指示该点,将X射线图像和标记对应起来显示。在本实施方式中,显示控制部24使时间轴TA显示,用标记M1来表示时间轴TA上的点,并且用标记M2指示该点,将圆形的图表即标记M1、以及连接该点和X射线图像的线即M2、和显示为缩略图的X射线图像T对应起来显示。通过显示控制部24使标记M1、M2显示,能够将标记M1、M2和X射线图像关联起来,以及将标记M1、M2和时间轴TA上的点关联起来,经由标记M1、M2,将时间轴TA上的点和X射线图像对应起来。
另外,在X射线透视下导管术中,如果在开始X射线图像的取得到结束的期间中,中止X射线照射,则包括没有取得X射线图像的时刻。如果手术者能够视觉辨认该没有取得X射线图像的时刻,则能够想起在此时刻的周边进行的作业,能够容易发现是否记录了作为目的的检查记录、作为目的的影像。
显示控制部24以相互不同的样式在时间轴TA上或者沿着时间轴TA显示与取得了X射线图像的时刻相当的部分(在图21中用实线A1示出)、和与没有取得的时刻相当的部分(在图21中用虚线A1示出)。另外,显示控制部24与时间轴TA的多个点对应地,显示与该各点对应的时刻。
通过显示控制部24将所选出的多个X射线图像一览显示为缩略图,某种程度上易于发现作为目的的检查记录等,但为了高效地发现作为目的的检查记录等,相比于根据手术者的直觉阅览一览显示的X射线图像,更优选根据具有与作为目的的检查记录等的关系性的综合重要度来阅览。如果使X射线图像和其综合重要度对应地显示,则能够阅览与综合重要度对应的X射线图像。由于一览显示的X射线图像和标记M1、M2关联起来,所以在本实施方式中,用标记M1、M2显示综合重要度。
显示控制部24使标记M1、M2以与综合重要度的高低对应的样式显示于显示部31。例如,也可以如图21所示,使标记M1的圆的大小对应于综合重要度的高低。作为其他样式,也可以以使标记M1的颜色不同的样式(从高的一方按照红→橙→黄→绿→蓝的顺序)显示,并且,也可以以使点灭频度不同的样式(越高,点灭频度越高)显示。
另外,也可以使用X射线图像来显示综合重要度。在该情况下,显示控制部24使X射线图像以与综合重要度的高低对应的样式显示于显示部31。作为该显示的一个例子,使用使缩略图的框线的粗细、框线的颜色、框线的点灭频度不同的样式。
另外,显示控制部24也可以显示使在显示部31的画面整体或者一部分中,示出了图14所示的综合重要度的图。
(其他功能)
以上,说明了该医用图像摄影装置的“推定重要度来决定综合重要度的功能”等。接下来,说明该医用图像摄影装置的其他功能。
显示控制部24在通过操作部32(例如,指示设备)选择了一览显示为缩略图的X射线图像中的某一个时,使显示部31再现包括所选择出的X射线图像的运动图。
虽然在再现的运动图的任意一个中包括该X射线图像即可,但优选再现比取得了所选择出的X射线图像的时刻在规定时间之前取得的X射线图像至比取得了的时刻在规定时间之后取得的X射线图像的一连串的运动图。通过观察在取得了所选择出的X射线图像的时刻的周边取得的X射线图像,能够想起在取得了的时刻的周边进行的作业,易于观察是否记录了作为目的的检查记录、作为目的的影像。显示控制部24以及显示部31是本发明的“再现单元”的一个例子。
另外,运动图的再现不限于此。例如,接受操作部32的指定的显示于显示部31的时间轴TA上的点,显示控制部24也可以使显示部31再现包括在与时间轴TA上的点对应的时刻取得的X射线图像的运动图。由此,能够简单地检查包括一览显示的X射线图像以外的X射线图像的运动图。
另外,也可以通过操作部32选择多个X射线图像。显示控制部24也可以将分别包括这些选择出的多个X射线图像的运动图自动地接合。或者,也可以通过操作部32指定时间轴TA上的多个点,显示控制部24也可以将分别包括与多个点对应的多个X射线图像的运动图自动地接合。由此,能够大幅缩短阅览运动图的时间。
以上,说明了推定重要度并选出综合重要度的功能、对X射线图像进行一览显示的功能、以及作为其他功能的运动图再现功能。能够通过这些功能,自动地选出最高的综合重要度,接下来,自动地选出其他综合重要度,将所选出的这些综合重要度的X射线图像一览显示为缩略图,并且,能够通过简单的操作再现从所选出的期望的时刻起的运动图。
但是,不限于手术者根据自动地选出的最高的综合重要度的X射线图像(在图21中用Tr示出),想起成为重要的局面、节眼的场面。对于手术者,有时根据其他X射线图像,更易于想起重要的局面等。
因此,选出单元26将一览显示为缩略图的多个X射线图像中的、综合重要度最高的X射线图像选出为代表缩略图,进而,接收来自操作部32的指示,代替该代表缩略图,将其他X射线图像选出为新的代表缩略图。作为其他X射线图像,例如,使用接着最高的综合重要度的选出而自动地选出,并与最高的综合重要度的X射线图像(在图21中用Tr示出)一起一览显示的其他综合重要度的X射线图像(在图21中用T示出)即可。通过这样更换代表缩略图,接着其选出的其他综合重要度也被变更。
参照图17,说明成为代表缩略图的X射线图像的选出、以及其他综合重要度的变更的详细内容。图17是示出指定了显示为代表缩略图的X射线图像时的动作的流程图。
如果所选出的综合重要度的数达到规定数(图15所示的S103:“是”),则显示控制部24将所选出的综合重要度的X射线图像在显示部31中一览显示为缩略图。此时,将最高的综合重要度的X射线图像作为代表缩略图显示。
为了将显示为代表缩略图的X射线图像更换为其他X射线图像,例如,通过操作部32指示与作为代表缩略图的X射线图像(在图21中用Tr示出)一起一览显示的X射线图像(图21中用T示出)中的某一个(S301)。接收操作部32的指定,选择单元26变更综合重要度(S302)。在该综合重要度的变更中,与图15所示的S102(基于选出的综合重要度的、其他综合重要度的变更)同样地,根据指定的X射线图像的综合重要度,变更其他综合重要度。
<第2实施方式>
在第1实施方式中,重要度决定部27将X射线量的大小、X射线取得图像时期、X射线图像的像素值的变化量(造影剂的投入)、以及导丝的形状的变化量作为判断材料,推定出各重要度,但作为推定重要度时的判断材料,使用手术者操作器具(导丝)的操作状态、手术者的姿势、手术者的生物体信息、以及手术者的行动中的至少一个即可。接下来,说明推定重要度时的判断材料中使用的其他例。
在第1实施方式中,示出了作为手术者是否操作着导丝的判断材料,使用了对导丝的形状的变化进行检测而得到的结果的例子,但作为判断导丝的操作状态时的判断材料,也可以使用对在操作了导丝时产生的声音·振动进行检测而得到的结果,并且,也可以使用对操作导丝的手术者的手的活动进行检测而得到的结果。
此处,示出作为判断导丝的操作状态时的判断材料,使用了对在操作了导丝时产生的声音·振动进行检测而得到的结果的例子。如果操作了导丝,则适配器内设置的阀(未图示)和导丝摩擦,而在特定的频带内产生声音·振动。在该声音·振动的产生频繁的情况下,能够推定为手术者操作着导丝。
参照图22以及图23,详细说明本实施方式。图22是使用了适配器中安装的固体话筒的例子的图,用箭头表示导丝的操作方向。图23是将适配器的部分放大而示出的图。通过适配器52中安装的固体话筒53检测导丝51与阀摩擦的声音·振动,来检测导丝操作的频度。重要度决定部27判断该频度是否超过预定的阈值(例如,10秒钟N次),对超过了阈值的次数(0、1、2、···m)进行计数,推定与超过了阈值的继续时间(例如,超过了阈值的次数*10秒)对应的X射线图像的重要度。超过了该阈值的继续时间是本发明的“插入器具的活动的继续时间”的一个例子。
接下来,示出作为判断导丝的操作状态时的判断材料,使用了对操作导丝的手术者的手的活动进行检测而得到的结果的例子。例如,也可以通过适配器中安装的红外线反射型位移传感器,在适配器的附近检测手术者的手的活动,针对每秒求出手术者的手的活动量的平均值,检测平均值成为一定量以上的次数。重要度决定部27预先将阈值(例如,10秒钟N次)作为判断基准,判断所检测出的次数是否超过阈值,对超过了阈值的继续时间(例如,超过了阈值的次数*10秒)进行计数。重要度决定部27推定与超过了阈值的继续时间对应的X射线图像的重要度。超过了该阈值的继续时间是本发明的“插入器具的活动的继续时间”的其他例。此处,作为红外线反射型位移传感器的一个例子,有在红外线聚光透镜的焦距处设置的探测范围内排列多个焦电元件,通过焦电元件将检测对象(手术者的手)的活动检测为电气量的变化的例子。
另外,作为检测操作导丝的手术者的手的活动的检测部33,也可以代替红外线反射型位移传感器,而在手术者的手上佩带加速度传感器。在该情况下,加速度传感器检测加速度成为一定量以上的次数,重要度决定部27根据该次数推定X射线图像的重要度。将预定的阈值(例如,10秒钟N次)作为判断基准。此处,作为加速度传感器的一个例子,有将由于加速度而产生的位置的变化作为膈的位置变化而通过压电电阻元件检测的例子。
<第3实施方式>
在第2实施方式的医用图像摄影装置中,检测手术者操作器具(导丝)的操作状态,将其检测结果作为判断材料,重要度决定部27推定X射线图像的重要度。相对于此,作为其他判断材料,也可以使用对手术者的姿势进行检测而得到的结果。另外,也可以将器具的操作状态的检测结果以及手术者的姿势的检测结果综合而作为判断材料,重要度决定部27推定X射线图像的重要度。进而,也可以通过组合该推定出的重要度和另外推定出的重要度,决定综合重要度。通过这样组合更多的推定出的重要度,使综合重要度与手术者的作业状态的对应关系变得更紧密。由此,易于从根据综合重要度由选出单元26选出的X射线图像,想起在取得该X射线图像时手术者进行的作业。能够容易发现作为目的的检查,并且,能够容易发现在检查记录中的哪个部分记录了作为目的的影像。
作为手术者的姿势的检测结果的一个例子,也可以使用对手术者是否观察着用于显示X射线透视图像的显示器(显示部31)进行检测而得到的结果。一般,在手术者接近显示着X射线透视图像的显示器时、或者手术者面向显示着X射线透视图像的显示器的方向时,能够推定为手术者良好地观察到X射线透视图像,能够推定为手术者的作业状态是面向重要的局面。作为手术者是否接近显示着X射线透视图像的显示器的判断材料的一个例子,能够使用显示器中安装的照相机等传感器来测定。有从显示器侧观察的手术者的位置的检测结果。另外,作为手术者是否面向显示着X射线透视图像的显示器的方向的判断材料的例子,有手术者的脸对着显示器的面积的检测结果、以及对着显示器的手术者的脸的朝向的检测结果。另外,也可以将这些检测结果中的某两个以上综合而作为判断材料,判断手术者是否观察着用于显示X射线透视图像的显示器。
此处,示出作为手术者是否接近显示着X射线透视图像的显示器的判断材料,使用了手术者相对显示器的位置的检测结果的例子。通过显示器中安装的超声波传感器,检测手术者相对显示器的位置。只要能够检测显示器和手术者的距离,则安装超声波传感器的场所不限于显示器,而是能够把握显示器和手术者的相对位置的场所即可。另外,作为超声波传感器的一个例子,有从传感器头发送超声波,并再次通过传感器头接收由对象物(手术者的脸)反射的超声波,并计测该声波的发送至接收的时间,从而检测对象物的位置的例子。
另外,检测手术者相对显示器的位置的设备不限于超声波传感器,而例如,也可以是具有脸识别功能的照相机。对从具有该脸识别功能的照相机向手术者的脸的方向进行检测,根据检测结果,计算显示器的画面至手术者的脸的位置的距离。作为图像识别功能,利用例如日本专利特开平8-275195号公报记载的、通过使用色差图像检测脸的特征即肌色区域来检测脸候补区域的图像处理功能。另外,具有该脸识别功能的照相机也可以简单地识别手术者的皮肤的颜色,在图像上检测手术者的脸的位置(手术者的脸存在的场所的位置)。
一般,在手术者的脸接近显示器时,手术者进行着重要的作业,所以能够推定为X射线图像的重要度高。另外,在手术者的脸远离显示器时(沿着与显示器的画面正交的方向离开了时、或者在相对与显示器的画面正交的方向倾斜的方向上离开了时),能够推定为X射线图像的重要度低。因此,重要度决定部27求出显示器的画面至手术者的脸的位置的距离,根据求出的结果推定X射线图像的重要度。
<第4实施方式>
在第3实施方式中,将手术者相对显示器的位置作为判断材料,推定了X射线图像的重要度。但是,有手术者并非为了良好地观察X射线图像,而只是简单地接近显示器的情况。在该情况下,无法说X射线图像的重要度高。因此,以下,说明通过作为判断材料使用手术者是否面向显示着X射线透视图像的显示器的方向的检测结果,来判别手术者简单地接近显示器、还是为了良好地观察X射线图像的例子。
说明本发明的其他实施方式。示出作为手术者是否面向显示着X射线透视图像的显示器的方向的检测结果,使用了手术者的脸相对显示器的面积的检测结果的例子。通过显示器或者在其附近安装的照相机,检测手术者的脸针对显示器的朝向。照相机具备上述图像识别机构。由于手术者穿着与皮肤的颜色不同的手术服、口罩,所以照相机能够识别手术者的皮肤的颜色,在图像上确定皮肤的颜色的位置,来检测脸的面积。脸的面积越小,推定为手术者没有正对着显示器的方向。图24示出显示器中安装的照相机、以及穿着手术服以及口罩的手术者。在手术者的脸中,由于手术服以及口罩,而仅其眼睛、鼻的周边露出,除此以外的部分被覆盖。以下,将露出的眼睛、鼻的周边区域称为“露出区域”。检测从照相机观察了时的露出区域的面积。
参照图25以及图26,说明从照相机观察了时的露出区域。图25是示出推定为手术者正对着显示器的方向的情况的露出区域的图,用实线包围而表示的露出区域的外形形状成为在脸的宽度方向上长长的大致矩形形状。图26是示出推定为手术者没有正对显示器的方向的情况的露出区域的图,用实线包围而表示的露出区域的外形形状成为大致矩形形状,但相比于图25的情况,脸的宽度方向变短。手术者越正对着显示器的方向,从照相机观察了时的露出区域的面积越小。因此,重要度决定部27求出现状的露出区域的面积,根据现状的露出区域的面积的值相对露出区域的面积的最大值(推定为手术者正对着显示器的方向的露出区域的面积的值)的比例,推定X射线图像的重要度。其原因为,手术者越面向显示器的方向,推定为X射线图像的重要度越高。
另外,也可以代替露出区域的面积,而检测露出区域,并抽出该露出区域的轮廓,将该轮廓作为判断材料。在露出区域的轮廓中,如果手术者接近显示器,则露出区域的图像变大,如果远离显示器,则露出区域的图像变小。因此,在轮廓中,例如,将帽子的下缘与口罩的上缘之间的长度(大致矩形形状的轮廓的纵的长度)作为基准,以使其长度在图像之间相等的方式,将比较对象的图像放大、缩小,将该尺寸调整后的轮廓作为判断材料。该图像的调整在将露出区域的面积作为判断材料时也有效。
<第5实施方式>
在第4实施方式中,示出了作为手术者是否面向显示着X射线透视图像的显示器的方向的检测结果,使用了手术者的脸相对显示器的面积(从照相机观察了时的露出区域的面积)的检测结果的例子。但是,露出区域的面积根据脸的大小、形状,对于每个手术者,存在差别,即使是相同的手术者,根据手术服、口罩的穿着方法也有差别。特别,在手术中移动了口罩的位置时也有差别。该差别有时成为正确地推定X射线图像的重要度时的障碍。因此,为了正确地推定X射线图像的重要度,将手术者的脸针对显示器的朝向的检测结果作为判断材料。
说明本发明的其他实施方式。作为将手术者是否面向显示着X射线透视图像的显示器的方向的检测结果作为判断材料的其他例,能够使用手术者的脸针对显示器的朝向的检测结果。通过显示器或者在其附近安装的具备特征检测机构的照相机抽出手术者的眼睛(黑眼珠和白眼球)的区域。作为特征检测机构,使用例如日本专利特开平2004-91917号公报记载的、从图像抽出瞳孔位置以及虹膜区域的轮廓的特征检测机构。例如,图27以及图28示出由特征检测机构抽出的黑眼珠(瞳孔以及虹膜)和白眼球的各区域。如图27所示,在推定为手术者面向显示器的方向的眼睛的区域中,黑眼珠区域62的重心位于白眼球区域61的宽度方向(从大眼角向外眼角的方向)的中心线上或者中心线附近。另外,如图28所示,在推定为手术者没有面向显示器的方向的眼睛的区域中,黑眼珠区域62的重心的位置远离白眼球区域61的宽度方向的中心线。因此,重要度决定部27根据对黑眼珠区域的重心相对白眼球区域的宽度方向的中心线的位置进行检测而得到的结果,推定X射线图像的重要。其原因为,手术者越面向显示器的方向,推定为X射线图像的重要度越高。
<第6实施方式>
在第5实施方式中,示出了作为手术者是否面向显示着X射线透视图像的显示器的方向的检测结果,使用了对黑眼珠区域的重心相对白眼球区域的宽度方向的中心线的位置进行检测而得到的结果的例子。但是,在手术者的眼睛(白眼球区域以及黑眼珠区域)的大小、形状中存在个人差。另外,由于来自手术者使用的眼镜的反射光等,取得手术者的眼睛的图像时的条件有时并不佳。这些手术者的个人差、取得图像时的恶劣条件成为增大检测结果的误差的一个原因,有时降低推定X射线图像的重要度时的正确性。为了更可靠地检测手术者是否面向显示器的方向,也可以检测手术者佩带的对象物。
作为将手术者的脸针对显示器的朝向的检测结果作为判断材料的其他例,举出对手术者佩带的对象物进行检测时的检测结果来说明。
示出作为手术者佩带的对象物,使用了手术者的帽子、口罩等在正中线上安装的反射标志的例子。反射标志是例如使具有可挠性的片形成为矩形形状的标志,并且是在片的表面例如通过溅射法、蒸镀法等形成了由铝等金属薄膜构成的反射层的标志。对反射标志照射红外线的红外线光源安装于显示器或者其附近,进而,将显示器的画面的正面区域(画面面向的区域、且从画面处于一定距离范围内的区域)作为摄影范围的照相机同样地安装于显示器或者其附近。
例如,如图29所示,在手术者的帽子的正中线上安装了反射标志71。另外,如图30所示,通过显示器中安装的红外线光源72以及照相机73,检测手术者的帽子(未图示)上安装的反射标志71。θ是红外线的反射光相对入射光所成的角度(入射角以及反射角之和)。
一般,由反射标志反射的红外线的反射光的检测量(通过照相机73得到)越大,反射标志越正对着显示器,所以该检测量越大,能够推定为手术者越正对着显示器。因此,重要度决定部27根据对来自反射标志的反射光的强度进行检测而得到的结果,求出相对反射率(现状的反射光的强度相对正对着时的反射光的强度的比例),根据该相对反射率,推定X射线图像的重要度。其原因为,相对反射率越高,手术者越面向显示器的方向,推定为此时取得的X射线图像的重要度越高。图31是描绘出角度θ与相对反射率的关系的图表。在图31中,示出从角度θ是0°(手术者正对着显示器时的角度)朝向角度θ是90°(手术者相对显示器面向正侧面时的角度),相对反射率减少。
(变形例)
以上,示出了作为判断材料使用了相对反射率的例子,但不限于此。与由照相机摄影的反射标志的图像相当的像素的亮度的总和越大,能够推定为手术者越正对着显示器。因此,重要度决定部27检测反射标志的亮度的总和,根据检测结果求出亮度的总和的比例(现状的亮度的总和相对正对着时的亮度的总和的比例),根据该像素的亮度的总和,推定X射线图像的重要度。其原因为,手术者越面向显示器的方向,推定为此时取得的X射线图像的重要度越高。
图32示出推定为手术者正对着显示器的情况的反射标志的图像,用高的亮度表示了其像素的反射标志的图像81的形状呈现对反射标志的外形形状大致进行拍摄而得到的形状。图33示出推定为手术者没有正对显示器的情况的反射标志的图像,反射标志的图像81的形状呈现相对反射标志的外形形状在水平方向上变窄的形状,形成图像81的像素的亮度低于形成图32所示的图像81的亮度。因此,在推定为手术者正对着显示器的情况的反射标志的图像时,比推定为没有正对的情况的反射标志的图像更大,形成图像的像素的亮度也更高。
在上述第3至第6实施方式的检测部33中,作为手术者的姿势,检测是否观察着显示器。但是,检测手术者的姿势的检测部33不限于此。
<第7实施方式>
在X射线透视下导管术中,在进行要求极其精密的作业的导丝操作时,通常,手术者不会大幅改变姿势而进行,所以手术者的体动的频度小。因此,在X射线透视下导管术中,在手术者的体动频繁的情况下,推定为没有进行导丝操作,所以能够推定为X射线图像的重要度低。着眼于该点,设置用于检测手术者的体动是否频繁的检测部33。
作为将检测手术者的体动是否频繁而得到的结果作为判断材料的例子,举出通过在手术者的脚之下设置的压力传感垫检测手术者的重心的检测结果而进行说明。此处的“体动”例如包括手术者将上身倒向前方或旁边、起身、手术者转换方向、移动站立位置时的活动,而不包括如导丝操作时那样使上身保持恒定的同时方向也不转换且主要仅使手、腕动作那样的活动。压力传感垫将来自手术者的脚的压力检测为二维的压力分布图案。重要度决定部27以一定时间(例如,0.1秒)间隔收集二维的压力分布图案,制作在此前的预定的时间(例如,过去3秒钟)内收集到的张数(例如,30张)的压力分布图案图像,根据压力分布图案图像,求出手术者的重心。此处,作为压力传感垫的一个例子,有在压力影响的范围内排列半导体压力传感器的受压面,并将施加到此处的压力作为电气量的变化检测的例子。
接下来,参照图34以及图35进一步详细说明。图34示出关于两脚整体的压力分布图案图像。形成图34所示的压力分布图案图像的像素具有压力值。在左脚的压力分布图案中,存在3个连接了相同的压力值的像素的线即等压线,相对于此,在右脚的压力分布图案中,存在2个等压线,所以可知手术者向左脚侧倾斜了体重。依据根据左脚的压力分布图案中的像素的压力值求出的与左脚相关的压力值的重心、和根据右脚的压力分布图案中的像素的压力值求出的与右脚相关的压力值的重心,求出关于两脚整体的压力分布图案中的像素的压力值的重心(手术者的重心)。在图35中,用黑圈表示所求出的压力值的重心(手术者的重心)的位置。
例如,针对在过去3秒钟收集到的多个重心位置,进行统计处理,求出差别(标准偏差)。标准偏差越大,能够推定为进行了越大的体动。因此,重要度决定部27根据手术者的重心位置的标准偏差,推定X射线图像的重要度。其原因为,手术者的体动越小(例如,并非手术者将上身倒向前方、旁边的活动),推定为线图像的重要度越高。
<第8实施方式>
在上述第3至第7实施方式的检测部33中,作为手术者的作业状态,检测手术者的姿势。其原因为,将X射线透视下导管术中的手术者的作业状态表现为一边观察显示器一边操作导丝的手术者的姿势。将X射线透视下导管术中的手术者的作业状态还表现为操作导丝时的呼吸的抑制等表示紧张状态的生物体信息。因此,也可以是检测作为手术者的作业状态的生物体信息的检测部33。此处,生物体信息是指,在生物体中,与根据刺激引起的运动等相关的信息。
示出使用了作为手术者的作业状态,检测手术者的生物体信息的检测部33的例子。在X射线透视下导管术中,在手术者抑制了呼吸的情况下,手术者进行导丝的精密的操作,而推定为此时取得的X射线图像的重要度高。因此,作为生物体信息,使用手术者的呼吸的抑制状态。
作为检测部33的一个例子,手术者佩带听诊器话筒(接触型话筒(skin-contact microphone)),收集并记录心拍音数据。另外,作为检测部33的其他例,也可以构成为手术者佩带ECG遥测计,而无线收集并记录心电图。
参照纵轴为心拍周期、横轴为时间轴的图36以及图37,进一步说明呼吸与心拍数的关系。图36示出通常的呼吸时的心拍周期,不论在哪个时间带,心拍周期都变化,而没有心拍周期大致恒定的时间带。图37示出抑制了呼吸时的心拍周期,有心拍数成为大致恒定的时间带(附加了下划线的部分)、和心拍周期没有大致恒定的时间带。
已知心拍数根据呼吸而变化。不论是什么样的手术者,在进行精密的操作时都不得不屏住或者停止呼吸(抑制呼吸)。即,如果抑制了呼吸的状态(在图37中用下划线示出的状态)是长时间持续的时间带,则其是进行着精密的作业的征兆。如果抑制呼吸,则心拍数大致恒定。
因此,检测部33检测此前的预定的时间(例如,过去10秒钟)的手术者的心拍数的差别(标准偏差)。重要度决定部27根据心拍数的标准偏差,推定X射线图像的重要度。其原因为,手术者进行越细致的导丝操作,推定为X射线图像的重要度越高。
(变形例)
在第8实施方式中,示出了作为手术者的生物体信息,使用了对手术者是否抑制呼吸进行检测而得到的结果的例子。但是,在X射线透视下导管术中,在手术者操作导丝时,对手术者要求精密的精度操作,所以手术者成为紧张状态,而其影响体现到手术者的生物体信息。手术者的紧张状态与在该状态下取得的X射线图像的重要度相关。因此,能够将对呈现紧张状态的影响的手术者的生物体信息进行检测而得到的结果作为通过检测部33检测的手术者的生物体信息。作为呈现紧张状态的影响的手术者的生物体信息的一个例子,有检测手术者的脑波、瞳孔径、眨眼的频度、手掌或者脚底部的皮肤的出汗程度、或者皮肤温度,来检测手术者是否处于紧张状态而得到的例子。另外,检测手掌或者脚底部的皮肤的出汗程度的依据在于,如果成为紧张状态,则在手掌以及脚底部中,出汗的汗腺多。
说明上述第8实施方式的变形例。在该变形例中,示出作为手术者的生物体信息,使用了手术者的脑波的例子。在主要的脑波的种类中,有α波、β波以及θ波,脑波在紧张时成为频率是13Hz以上的β波,随着放松而成为频率从13Hz降低了的α波。因此,能够通过检测部33检测手术者的脑波,并将检测到的结果作为判断手术者是否处于紧张状态时的判断材料。
手术者佩带检测部33,检测手术者的脑波,重要度决定部27根据检测手术者的脑波而得到的结果,推定X射线图像的重要度。其原因为,手术者例如操作导丝而越处于紧张状态,推定为此时取得的X射线图像的重要度越高。
接下来,示出使用了手术者的手掌或者脚底部的皮肤的出汗程度的其他变形例。如上所述,在手术者处于紧张状态时,从手术者的手掌或者脚底部的皮肤产生的汗的量变多。因此,手术者佩带检测该出汗的检测部33,以规定时间间隔将从手掌等产生的出汗程度检测为湿度或者电位。作为检测出汗程度的检测部33,例如使用日本专利特开平7-143968号公报公开的例子。
因此,重要度决定部27根据检测部33检测到的结果,推定X射线图像的重要度。其原因为,手术者例如操作导丝而越处于紧张状态,则推定为X射线图像的重要度越高。
在以上的变形例中,在检测手术者的生物体信息时,使用了手术者佩带的检测部33,但示出使用了不对手术者佩带的检测部33的变形例。在该变形例中,作为手术者的生物体信息,使用手术者的瞳孔径。已知相比于处于放松时,在处于紧张状态时,瞳孔径更大。因此,根据手术者的瞳孔径的大小,推定X射线图像的重要度。其原因为,手术者例如操作导丝而越处于紧张状态,推定为X射线图像的重要度越高。
作为检测手术者的瞳孔径的检测部33,例如,使用日本专利特开平10-262953号公报的例子。检测部33例如包括显示器或者在显示器的附近安装的照相机。能够通过该照相机以规定时间间隔取得手术者的脸图像,对所取得的手术者的脸图像进行图像处理而抽出瞳孔的形状。能够从所抽出的瞳孔的形状检测瞳孔径。
重要度决定部27根据瞳孔径的大小,推定X射线图像的重要度。其原因为,手术者例如操作导丝而越处于紧张状态,推定为此时取得的X射线图像的重要度越高。
接下来,示出使用了不对手术者佩带的检测部33的其他变形例。在该变形例中,作为手术者的生物体信息,使用手术者的眨眼。一般,眨眼的频度通常是每分钟15至20次(作为眨眼的周期3秒~4秒)。眨眼的周期在集中观察某个物体时降低。手术者在要求精密的作业的导丝操作中应注视显示器,所以眨眼的周期变长。
作为检测手术者的眨眼的检测部33,例如使用日本专利特开2003-338952号公报公开的例子。检测部33例如包括显示器或者在显示器的附近安装的照相机。用检测部33持续监视手术者的眼睛的区域,根据瞳孔的部分是否变小,检测眨眼。检测部33检测从检测到眨眼时至检测到接下来的眨眼时的时间(眨眼的周期)。
因此,重要度决定部27根据眨眼的周期,推定X射线图像的重要度。其原因为,手术者越增大眨眼的周期来注视显示器,则推定为此时取得的X射线图像的重要度越高。
<第9实施方式>
说明本发明的其他实施方式。示出作为手术者的作业状态,使用了检测手术者的行动的检测部33的例子。此处,作为手术者的行动,包括医疗现场中的手术者与作业人员会话的频度以及手术者的活动量。在X射线透视下导管术中,在手术者与作业人员会话的频度高的情况、或者手术者的活动量多的情况下,推定为不进行导丝的细致的操作,此时取得的X射线图像的重要度低。
首先,作为检测会话的频度的检测部33,例如,利用日本专利特开2010-5326号公报记载的接触型话筒。使用手术者佩带的该话筒,并非声音而检测音的大小(分贝(dB))。重要度决定部27如果例如过去3秒钟的音的大小的平均值超过阈值,则视为进行了会话,求出在过去20秒钟进行了会话的时间的比例,根据所求出的会话的比例,推定X射线图像的重要度。另外,也可以简单地,根据例如过去3秒钟的音的大小的平均值,推定X射线图像的重要度。另外,作为检测会话的频度的检测部33,不限于接触型话筒,而也可以是收集手术者及其周围的音的话筒。朝向手术者配置多个具有指向性的话筒,在多个话筒都收集到音的情况下,设为该收集到的音是手术者及其周围的音,推定为手术者正在进行会话。
进而,作为检测会话的频度的检测部33,也可以并非这些话筒,而是ECG遥测计。即,使用手术者佩带的ECG遥测计,检测心拍数的变动,如果心拍成为非周期,则视为进行不规则的呼吸而正在进行会话。检测部33检测此前的预定的时间(例如,过去20秒钟)的手术者的心拍周期的经时变化的频谱。重要度决定部27根据由于通常的呼吸而产生的谱分量,推定X射线图像的重要度。其原因为,会话的频度高、且手术者没有进行导丝操作,而推定为此时取得的X射线图像的重要度低。
接下来,示出作为检测手术者的活动的检测部33,使用了上述日本专利特开2010-5326号公报记载的医疗现场显示系统的例子。如果简单地说明该系统,则在医用现场内设置摄影装置,对医疗现场进行视频摄影。另外,对包括手术者的作业人员佩带RF标签,发送作业人员的识别信息。在医用现场内设置了接收装置。由此,能够将医疗现场记录为影像,并且与其存在位置一起识别作业人员是哪一位,在所记录的影像上识别显示医用现场内的作业人员。通过使用该系统,能够按照时序列,容易地检测手术者是否为了进行导丝操作而进入到显示器的画面的正面区域(画面面向的区域、且从画面起处于一定距离范围内的区域)内、以及在该正面区域内手术者如何活动。
根据对正面区域内的手术者的活动的频度进行检测而得到的结果,重要度决定部27推定X射线图像的重要度。其原因为,由于手术者的活动的频度多,所以没有进行导丝操作,而推定为此时取得的X射线图像的重要度低。
另外,在手术者没有进入到正面区域的情况、以及手术者脱离正面区域的情况下,重要度决定部27推定为X射线图像的重要度低。其原因为,由于手术者远离显示器,所以推定为此时取得的X射线图像的重要度低。
接下来,作为检测手术者的活动的检测部33,例如,也可以使用寝台或者X射线基座的位置编码器。在手术者正在操作寝台、X射线基座(C臂的角度等)的情况下,重要度决定部27将X射线图像的重要度推定为较低。其原因为,在手术者正在操作寝台等时,不进行导丝的操作,而推定为此时取得的X射线图像的重要度低。
以上,说明了检测由手术者操作的导丝的操作状态、手术者的姿势、手术者的生物体信息、或者手术者的行动中的某一个并作为手术者的作业状态的检测结果输出的检测部33、以及根据该检测结果推定X射线图像的重要度的重要度决定部27。
<第10实施方式>
接下来,说明装备了多个检测部33的系统。在该情况下,需要根据多个检测部33的输出,推定X射线图像的重要度,并综合这些重要度,来决定X射线图像的综合重要度。在决定了X射线图像的综合重要度之后,例如,应优先于根据手术者的姿势、手术者的生物体信息、以及手术者的行动推定的X射线图像的重要度,处理例如根据由手术者操作器具(导丝)的操作状态推定出的X射线图像的重要度。
这样,组合重要度不同的信息(推定的重要度)的技术公知,例如,能够使用模糊逻辑(fuzzylogic)。即,将表现“X射线图像的重要度”的尺度计算为模糊逻辑的逻辑值(membership function,隶属函数),并据此决定恰当的X射线量。
以上,示出了在装备了多个检测部33的系统中,使用模糊逻辑,综合根据多个检测部33的输出结果推定的重要度来决定X射线图像的综合重要度的例子,但也可以根据各检测部33对所推定的重要度进行加权,并根据加权之后的结果决定综合重要度。
另外,即使进行相同的作业,针对每个手术者也表现其特征。也可以为了将手术者的该特征表示为检测部33的输出结果,而设置针对每个手术者,存储针对检测部33的检测结果的权重的组合的加权用数据库。重要度决定部27在决定了X射线图像的综合重要度之后,对多个检测部33的检测结果反映与手术者对应的权重的组合。
该X医用图像摄影装置的选出单元通过根据表示种类不同的多个作业状态的数据分别推定X射线图像的重要度并对推定出的各重要度进行综合(组合、积算)来决定综合重要度即可,在上述实施方式中说明的各重要度的组合只不过是一个例子。
例如,在第1实施方式中,将X射线取得图像时期作为判断材料,重要度决定部27推定出重要度。其中,将取得了X射线图像的经过时间是布局阶段的X射线图像的重要度推定为较低,但该推定未必正确,而有时在布局阶段取得的X射线图像的重要度较高。如果手术者预先记住该情况,则在从判断材料去掉X射线取得图像时期而决定了综合重要度时,能够更正确地决定。因此,在对推定出的各重要度进行综合(组合)时,也可以接收利用操作部32作出的指示,选择部26选择组合的重要度,而不选择使综合重要度的正确性降低那样的重要度。另外,对于使综合重要度的正确性降低那样的重要度,也可以由重要度决定部27将重要度推定为恒定。
在上述实施方式中,从由医用图像摄影装置摄影的X射线运动图像中选出重要度高的图像,并一览显示为缩略图,但不限于此。也可以通过其他模态(例如,磁共振诊断装置或者超声波诊断装置等),拍摄与被检体相关的运动图像,并从运动图像中选出重要度高的图像,将所选出的图像一览显示为缩略图。这样,能够应用于一般的医用图像诊断装置。

Claims (15)

1.一种医用图像摄影装置,通过对被检体照射X射线并且检测透过所述被检体的X射线,显示X射线运动图像,其特征在于,具备:
选出单元,根据与进行所述被检体的手术的手术者的作业状态相关的作业状态信息,从所述X射线运动图像中选出重要度高的图像;以及
显示单元,将所述选出的所述图像作为缩略图一览显示,
所述选出单元包含根据多个所述作业状态信息,求出所述X射线运动图像中的图像的重要度的重要度决定单元,
所述重要度决定单元根据包含所述手术者进行的索状的插入器具的操作状态以及对所述被检体照射X射线的X射线量的大小的多个作业状态信息,求出所述重要度,
所述选出单元选出所述重要度高的图像。
2.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述显示单元将所述缩略图与各个摄影时刻或者直至该摄影时刻的从手术开始起的经过时间的信息一起进行显示。
3.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述重要度决定单元还根据所述手术者的脸的朝向或者视线方向,求出所述重要度。
4.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述重要度决定单元还根据所述手术者的体动的频度或者所述手术者的会话的频度中的至少一个,求出所述重要度。
5.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述重要度决定单元还根据所述X射线运动图像中的图像的像素值的变化量,求出所述重要度。
6.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述重要度决定单元还根据插入到所述被检体内的索状的插入器具的活动量,求出所述重要度。
7.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述重要度决定单元还根据插入到所述被检体内的索状的插入器具的活动的继续时间,求出所述重要度。
8.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述重要度决定单元降低在取得了由所述选出单元选出的图像的时刻的周边的时刻取得的图像的所述重要度。
9.根据权利要求1~8中的任意一项所述的医用图像摄影装置,其特征在于,
所述选出单元按照由所述重要度决定单元求出的重要度从高到低的顺序,选出所述图像。
10.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述选出单元将所述选出的多个图像中的所述重要度最高的图像选出为代表缩略图。
11.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述医用图像摄影装置还具有操作部,
所述重要度决定单元还根据所述手术者的心电信息,求出所述重要度,
所述选出单元接收来自操作部的指示,代替选出为代表缩略图的图像,而将其他图像选出为新的代表缩略图。
12.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述显示单元与时间刻度对应起来显示所述图像。
13.根据权利要求5所述的医用图像摄影装置,其特征在于,
所述显示单元将所述图像和表示该图像的重要度的标记关联起来显示。
14.根据权利要求13所述的医用图像摄影装置,其特征在于,
所述显示单元以与所述重要度的高低对应的样式来显示所述标记。
15.根据权利要求1所述的医用图像摄影装置,其特征在于,
所述医用图像摄影装置具备再现单元,该再现单元在选择了所述一览显示的图像时,从与该选择出的图像对应的位置再现所述X射线运动图像。
CN201180002858.6A 2010-07-05 2011-07-01 医用图像摄影装置以及医用图像诊断装置 Active CN102469971B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-152793 2010-07-05
JP2010152793A JP5725745B2 (ja) 2010-07-05 2010-07-05 X線診断装置及び医用画像診断装置
PCT/JP2011/003772 WO2012004956A1 (ja) 2010-07-05 2011-07-01 医用画像撮影装置及び医用画像診断装置

Publications (2)

Publication Number Publication Date
CN102469971A CN102469971A (zh) 2012-05-23
CN102469971B true CN102469971B (zh) 2014-12-31

Family

ID=45440950

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180002858.6A Active CN102469971B (zh) 2010-07-05 2011-07-01 医用图像摄影装置以及医用图像诊断装置

Country Status (4)

Country Link
US (1) US8989473B2 (zh)
JP (1) JP5725745B2 (zh)
CN (1) CN102469971B (zh)
WO (1) WO2012004956A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130010425A (ko) 2011-07-18 2013-01-28 삼성전자주식회사 엑스선 장치 및 이를 이용한 엑스선 조사영역 조절방법
JP6266217B2 (ja) * 2012-04-02 2018-01-24 東芝メディカルシステムズ株式会社 医用画像処理システム、方法及びプログラム
WO2014002068A2 (en) * 2012-06-28 2014-01-03 Koninklijke Philips N.V. System and method for registering an image sequence
CN105246406A (zh) 2013-05-31 2016-01-13 柯尼卡美能达株式会社 图像处理装置以及程序
WO2014203936A1 (ja) * 2013-06-18 2014-12-24 キヤノン株式会社 トモシンセシス撮影の制御装置、撮影装置、撮影システム、制御方法および当該制御方法をコンピュータに実行させるためのプログラム
EP3028034A4 (en) * 2013-06-18 2017-05-03 Arvindbhai Lavjibhai Patel Method and device for gemstone evolution
JP6170881B2 (ja) * 2014-06-19 2017-07-26 日本電信電話株式会社 コミュニケーション量測定装置、方法及びプログラム
JP6571472B2 (ja) * 2015-09-28 2019-09-04 ザイオソフト株式会社 医用画像処理装置、医用画像撮像装置、医用画像処理方法、医用画像撮像方法、及び医用画像処理プログラム
WO2017106177A1 (en) * 2015-12-15 2017-06-22 Corindus, Inc. System and method for controlling x-ray frame rate of an imaging system
US10813609B2 (en) * 2015-12-18 2020-10-27 Shimadzu Corporation X-ray imaging apparatus
DE112016006135T5 (de) * 2015-12-30 2018-09-20 Koninklijke Philips N.V. Vorrichtung für medizinische Berichte
US11515031B2 (en) * 2018-04-16 2022-11-29 Canon Medical Systems Corporation Image processing apparatus, X-ray diagnostic apparatus, and image processing method
JP7297507B2 (ja) * 2018-04-16 2023-06-26 キヤノンメディカルシステムズ株式会社 画像処理装置、x線診断装置及びプログラム
CN108634968A (zh) * 2018-04-26 2018-10-12 深圳市科思创动科技有限公司 健康监控系统及方法
CA3100495A1 (en) 2018-05-16 2019-11-21 Benevis Informatics, Llc Systems and methods for review of computer-aided detection of pathology in images
JP7207064B2 (ja) * 2019-03-25 2023-01-18 株式会社島津製作所 X線撮影装置
JP2021194140A (ja) 2020-06-11 2021-12-27 コニカミノルタ株式会社 画像処理装置及び画像処理方法
CN114052757A (zh) * 2020-07-30 2022-02-18 佳能医疗系统株式会社 医用图像处理装置、x射线诊断装置及医用图像处理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6747674B1 (en) * 1998-11-06 2004-06-08 Sony Corporation Image processing apparatus, image processing method, and information providing medium
CN1643933A (zh) * 2002-03-18 2005-07-20 西门子共同研究公司 用于压缩和显像的数据有效排序
CN1648808A (zh) * 2003-10-24 2005-08-03 西门子公司 用于在技术设备运行期间监控参数选择的装置和方法
CN1702645A (zh) * 2004-05-24 2005-11-30 株式会社东芝 医疗图像显示设备
CN101754713A (zh) * 2007-07-20 2010-06-23 奥林巴斯株式会社 图像抽取装置、图像抽取程序以及图像抽取方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07143968A (ja) 1993-11-24 1995-06-06 Matsushita Electric Works Ltd 刺激感の計測方法及びその装置
JPH08275195A (ja) 1995-03-31 1996-10-18 Toshiba Corp 画像表示装置
US6144754A (en) 1997-03-28 2000-11-07 Oki Electric Industry Co., Ltd. Method and apparatus for identifying individuals
JPH10262953A (ja) 1997-03-28 1998-10-06 Oki Electric Ind Co Ltd 画像認識装置
JP3670439B2 (ja) 1997-05-09 2005-07-13 株式会社日立メディコ X線装置
JP4585067B2 (ja) 1999-11-25 2010-11-24 株式会社東芝 X線画像診断装置
JP5044069B2 (ja) * 2000-09-26 2012-10-10 株式会社東芝 医用画像診断装置
JP4063583B2 (ja) 2002-05-20 2008-03-19 三洋電機株式会社 デジタルカメラ
JP3973605B2 (ja) 2002-07-10 2007-09-12 東京エレクトロン株式会社 成膜装置及びこれに使用する原料供給装置、成膜方法
JP2005270328A (ja) 2004-03-24 2005-10-06 Toshiba Corp 医用画像表示装置
JP4653557B2 (ja) 2004-05-24 2011-03-16 株式会社東芝 医用画像表示装置及び医用画像表示方法
JP4493423B2 (ja) * 2004-07-08 2010-06-30 オリンパス株式会社 内視鏡挿入支援装置
US7783094B2 (en) * 2005-06-02 2010-08-24 The Medipattern Corporation System and method of computer-aided detection
US8126238B2 (en) * 2006-11-22 2012-02-28 General Electric Company Method and system for automatically identifying and displaying vessel plaque views
JP5305616B2 (ja) 2007-06-07 2013-10-02 株式会社東芝 検査データ処理装置及び検査システム
JP2009183335A (ja) 2008-02-04 2009-08-20 Hitachi Medical Corp X線診断装置
US20090207316A1 (en) * 2008-02-19 2009-08-20 Sorenson Media, Inc. Methods for summarizing and auditing the content of digital video
JP5534648B2 (ja) 2008-03-31 2014-07-02 株式会社東芝 X線診断装置、画像データ処理装置及び画像データ処理方法
JP5197188B2 (ja) 2008-06-30 2013-05-15 株式会社東芝 イベント識別システム
WO2010006334A1 (en) * 2008-07-11 2010-01-14 Videosurf, Inc. Apparatus and software system for and method of performing a visual-relevance-rank subsequent search
JP5379442B2 (ja) * 2008-10-14 2013-12-25 オリンパスメディカルシステムズ株式会社 画像表示装置
EP2316327B1 (en) * 2008-10-14 2013-05-15 Olympus Medical Systems Corp. Image display device, image display method, and image display program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6747674B1 (en) * 1998-11-06 2004-06-08 Sony Corporation Image processing apparatus, image processing method, and information providing medium
CN1643933A (zh) * 2002-03-18 2005-07-20 西门子共同研究公司 用于压缩和显像的数据有效排序
CN1648808A (zh) * 2003-10-24 2005-08-03 西门子公司 用于在技术设备运行期间监控参数选择的装置和方法
CN1702645A (zh) * 2004-05-24 2005-11-30 株式会社东芝 医疗图像显示设备
CN101754713A (zh) * 2007-07-20 2010-06-23 奥林巴斯株式会社 图像抽取装置、图像抽取程序以及图像抽取方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开平10-308899A 1998.11.17 *

Also Published As

Publication number Publication date
CN102469971A (zh) 2012-05-23
JP2012011120A (ja) 2012-01-19
WO2012004956A1 (ja) 2012-01-12
US8989473B2 (en) 2015-03-24
JP5725745B2 (ja) 2015-05-27
US20120250973A1 (en) 2012-10-04

Similar Documents

Publication Publication Date Title
CN102469971B (zh) 医用图像摄影装置以及医用图像诊断装置
CN102469972B (zh) X射线摄影装置
EP1123138B1 (en) Method and system for physiological gating of radiation therapy
US8121255B2 (en) Diagnostic imaging system
KR20120111871A (ko) 3차원적 모델을 이용한 신체 장기의 영상 생성 방법 및 장치
US20210068670A1 (en) Device and method for recording and analysing images of the skin
RU2350265C2 (ru) Автоматическое обнаружение поражений кожи
KR20130026041A (ko) 의료 영상의 일부 정보를 활용한 장기 영상 생성 방법 및 장치
US20200193598A1 (en) Dynamic analysis system
KR20040090970A (ko) 기도의 음향을 분석하고 이미지화하기 위한 시스템
JP2007534447A (ja) 標的病変における変化の精密な測定評価のための医療用撮像システム
KR20130143434A (ko) 고강도 집속 초음파의 초점을 결정하는 방법 및 장치
KR20220124166A (ko) 방사선 파라미터 결정을 위한 시스템 및 방법
JP2020014562A (ja) 動態画像解析装置、動態画像解析方法及びプログラム
CN111448617A (zh) 振荡暗场成像
US11484221B2 (en) Dynamic analysis apparatus, dynamic analysis system, expected rate calculation method, and recording medium
US9433397B2 (en) Method and device for determining the elastic modulus of a biological tissue
US20190298290A1 (en) Imaging support apparatus and radiographic imaging system
JP7215053B2 (ja) 超音波画像評価装置、超音波画像評価方法および超音波画像評価プログラム
JPH11319123A (ja) 放射線治療システム
KR20140021109A (ko) 초음파를 이용하여 움직이는 장기 내부에 위치한 병변의 이동 궤적을 추적하는 방법 및 시스템
US20200286235A1 (en) Dynamic image analysis system and dynamic image processing apparatus
JP3306118B2 (ja) 眼科装置
Ménard et al. Instrumental Analysis of Speech Production
CN117157013A (zh) 用于超声成像的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160803

Address after: Japan Tochigi

Patentee after: Toshiba Medical System Co., Ltd.

Address before: Tokyo, Japan, Japan

Patentee before: Toshiba Corp

Patentee before: Toshiba Medical System Co., Ltd.