CN106061400B - 医疗用观测装置以及医疗用观测装置的工作方法 - Google Patents

医疗用观测装置以及医疗用观测装置的工作方法 Download PDF

Info

Publication number
CN106061400B
CN106061400B CN201580011408.1A CN201580011408A CN106061400B CN 106061400 B CN106061400 B CN 106061400B CN 201580011408 A CN201580011408 A CN 201580011408A CN 106061400 B CN106061400 B CN 106061400B
Authority
CN
China
Prior art keywords
image
signal input
mode
signal
contact
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580011408.1A
Other languages
English (en)
Other versions
CN106061400A (zh
Inventor
日比靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN106061400A publication Critical patent/CN106061400A/zh
Application granted granted Critical
Publication of CN106061400B publication Critical patent/CN106061400B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/12Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A61B8/4444Constructional features of the ultrasonic, sonic or infrasonic diagnostic device related to the probe
    • A61B8/4472Wireless probes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/54Control of the diagnostic device

Abstract

本发明所涉及的医疗用观测装置具备:非接触型信号输入单元,其通过与操作者非接触的操作来接收第一操作指示信号的输入;接触型信号输入单元,其通过操作者的接触操作来接收第二操作指示信号的输入;控制部,其进行以下控制:根据第一操作指示信号来设定针对观测图像的处理模式,对向接触型信号输入单元输入的第二操作指示信号分配与所设定的该处理模式相应的信号输入功能;以及图像处理部,其生成具有观测图像和引导图像的显示用图像,其中,该引导图像用于引导与分配给接触型信号输入单元的信号输入功能相应的操作。

Description

医疗用观测装置以及医疗用观测装置的工作方法
技术领域
本发明涉及一种例如使用超声波来观测观测对象的医疗用观测装置、医疗用观测装置的工作方法以及医疗用观测装置的工作程序。
背景技术
为了对作为观测对象的生物体组织或材料的特性进行观测而有时应用超声波。具体地说,向观测对象发送超声波,对被该观测对象反射回来的超声波回波施加规定的信号处理,由此获取与观测对象的特性有关的信息。
在应用超声波对体内的生物体组织等进行的诊断中使用在插入部的前端设置有超声波振子的超声波内窥镜。医生等手术操作者在将插入部插入到体内之后,对手边的操作部进行操作,由此通过超声波振子获取超声波回波,并根据基于该超声波回波的信息(超声波图像)来进行诊断。
图16是示出以往的进行超声波诊断的系统的结构的示意图。图16所示的超声波诊断系统500具备:超声波内窥镜501,其具有前端设置有超声波振子和摄像元件的插入部;图像处理装置502,其生成基于由超声波内窥镜501获取到的超声波回波和摄像信号的图像;键盘503,其与图像处理装置502连接,用于输入指示信号等信号;超声波图像监视器504,其显示基于超声波回波的图像;以及内窥镜图像监视器505,其显示基于摄像信号的图像。手术操作者S1通过将超声波内窥镜501的插入部插入到被检体S2中并经由键盘503、设置于超声波内窥镜501的操作部输入指示信号,来进行超声波图像的调整,具体地说进行图像的旋转、移动等,从而进行诊断。
另外,有时由于检查室等的布局而导致手术操作者S1远离图像处理装置502(键盘503)。当手术操作者S1远离图像处理装置502(键盘503)时,操作性降低。针对该问题,公开了一种即使手术操作者远离装置也能够通过声音识别与脚踏控制器的组合来进行操作的技术(例如参照专利文献1)。
专利文献1:日本特开2003-614号公报
发明内容
发明要解决的问题
关于超声波回波,在表示体内的某个观察位置的截面的性质方面,当观察位置偏离时所观察的截面图像不同,因此维持观察位置很重要。然而,在上述的专利文献1所记载的技术中,例如如果在手术操作者操作脚踏控制器来进行图像的调整时为了确认脚踏控制器的配置等而将目光从超声波图像监视器504移开,则有可能即使观察位置发生变化也毫无察觉而继续进行观察。
本发明是鉴于上述问题而完成的,其目的在于提供一种不将视线从监视器移开就能够进行监视器上的图像的调整操作的医疗用观测装置、医疗用观测装置的工作方法以及医疗用观测装置的工作程序。
用于解决问题的方案
为了解决上述问题而实现目的,本发明所涉及的医疗用观测装置获取用于生成观测对象的图像的信号,并生成基于获取到的该信号的观测图像,该医疗用观测装置的特征在于,具备:非接触型信号输入单元,其通过与操作者非接触的操作来接收第一操作指示信号的输入;接触型信号输入单元,其通过操作者的接触操作来接收第二操作指示信号的输入;控制部,其进行以下控制:根据所述第一操作指示信号来设定针对所述观测图像的处理模式,对向所述接触型信号输入单元输入的所述第二操作指示信号分配与所设定的该处理模式相应的信号输入功能;以及图像处理部,其生成具有所述观测图像和引导图像的显示用图像,其中,该引导图像用于引导与分配给所述接触型信号输入单元的所述信号输入功能相应的操作。
本发明所涉及的医疗用观测装置的特征在于,在上述发明中,所述控制部对与所述第一操作指示信号的输入相应的处理模式的切换、与所述处理模式相应的所述引导图像的切换或所述处理模式中的信号输入功能的切换进行控制。
本发明所涉及的医疗用观测装置的特征在于,在上述发明中,所述非接触型信号输入单元检测声音、手势、视线或脑波,所述接触型信号输入单元包括键盘、跟踪球、鼠标、触摸面板、手柄、拨盘、操纵杆以及脚踏开关中的至少一个。
本发明所涉及的医疗用观测装置的特征在于,在上述发明中,所述处理模式中的所述信号输入功能包括连续的接触操作或不连续的接触操作、或者多级的接触操作或无级的接触操作。
本发明所涉及的医疗用观测装置的特征在于,在上述发明中,所述处理模式包括以下模式中的至少一个模式:使图像旋转的旋转模式、设定观测区域中的用于图像显示的显示区域的显示区域设定模式、字符输入模式、对焦位置设定模式、放大或缩小模式、关注区域的设定模式以及测量模式。
本发明所涉及的医疗用观测装置的特征在于,在上述发明中,所述引导图像是示出利用所述接触型信号输入单元进行操作的方向与同所述处理模式中的所述信号输入功能相应地进行动作的方向之间的关系的图像。
本发明所涉及的医疗用观测装置的特征在于,在上述发明中,用于生成所述观测对象的图像的信号是基于回波信号生成的信号,该回波信号是将对该观测对象发送的超声波被所述观测对象反射回来的超声波回波转换为电信号而得到的。
在本发明所涉及的医疗用观测装置的工作方法中,该医疗用观测装置获取用于生成观测对象的图像的信号,并显示基于获取到的该信号的观测图像,该工作方法的特征在于,包括以下步骤:非接触型信号输入步骤,由非接触型信号输入单元通过与操作者非接触的操作来接收第一操作指示信号的输入;模式设定步骤,由控制部进行以下控制:根据所述第一操作指示信号来设定针对所述观测图像的处理模式;功能分配步骤,由所述控制部进行以下控制:对接触型信号输入单元分配与在所述模式设定步骤中设定的所述处理模式相应的信号输入功能,其中,该接触型信号输入单元通过操作者的接触操作来接收第二操作指示信号的输入;以及图像处理步骤,由图像处理部生成具有所述观测图像和引导图像的显示用图像,其中,该引导图像用于引导与分配给所述接触型信号输入单元的所述信号输入功能相应的操作。
在本发明所涉及的医疗用观测装置的工作程序中,该医疗用观测装置获取用于生成观测对象的图像的信号,并显示基于获取到的该信号的观测图像,该工作程序的特征在于,使所述医疗用观测装置执行以下过程:非接触型信号输入过程,由非接触型信号输入单元通过与操作者非接触的操作来接收第一操作指示信号的输入;模式设定过程,由控制部进行以下控制:根据所述第一操作指示信号来设定针对所述观测图像的处理模式;功能分配过程,由所述控制部进行以下控制:对接触型信号输入单元分配与在所述模式设定过程中设定的所述处理模式相应的信号输入功能,其中,该接触型信号输入单元通过操作者的接触操作来接收第二操作指示信号的输入;以及图像处理过程,由图像处理部生成具有所述观测图像和引导图像的显示用图像,其中,该引导图像用于引导与分配给所述接触型信号输入单元的所述信号输入功能相应的操作。
发明的效果
根据本发明,起到不将视线从监视器移开就能够进行监视器上的图像的调整操作这样的效果。
附图说明
图1是示出本发明的实施方式1所涉及的超声波内窥镜系统的结构的框图。
图2是说明由本发明的实施方式1所涉及的处理装置进行的图像调整操作的流程图。
图3是说明由本发明的实施方式1所涉及的处理装置进行的图像调整操作的图。
图4是说明由本发明的实施方式1所涉及的处理装置进行的图像调整操作的图。
图5是说明由本发明的实施方式1的变形例所涉及的处理装置进行的图像调整操作的图。
图6是说明由本发明的实施方式1的变形例所涉及的处理装置进行的图像调整操作的图。
图7是说明由本发明的实施方式2所涉及的处理装置进行的图像调整操作的流程图。
图8是说明由本发明的实施方式2所涉及的处理装置进行的图像调整操作的图。
图9是说明由本发明的实施方式2所涉及的处理装置进行的图像调整操作的图。
图10是说明由本发明的实施方式3所涉及的处理装置进行的图像调整操作的图。
图11是说明由本发明的实施方式3所涉及的处理装置进行的图像调整操作的图。
图12是说明由本发明的实施方式3所涉及的处理装置进行的图像调整操作的图。
图13是说明由本发明的实施方式4所涉及的处理装置进行的图像调整操作的流程图。
图14是说明由本发明的实施方式4所涉及的处理装置进行的图像调整操作的图。
图15是说明由本发明的实施方式4的变形例所涉及的处理装置进行的图像调整操作的图。
图16是示出以往的进行超声波诊断的系统的结构的示意图。
具体实施方式
以下,参照附图来说明用于实施本发明的方式(以下称为“实施方式”)。另外,在以下的说明中,例示包括生成基于超声波回波的超声波图像的医疗用观测装置的超声波内窥镜系统,但本发明并不限定于该实施方式。另外,对相同的结构标注相同的附图标记来进行说明。
(实施方式1)
图1是示出本发明的实施方式1所涉及的超声波内窥镜系统的结构的框图。该图所示的超声波内窥镜系统1是用于使用超声波来观测观测对象的装置。
超声波内窥镜系统1具备:超声波内窥镜2,其输出超声波脉冲并接收反射回来的超声波回波,并且拍摄包含超声波脉冲的输出区域的摄像区域来获取为摄像信号;处理装置3,其分别生成基于由超声波内窥镜2获取到的超声波回波的图像和基于由超声波内窥镜2获取到的摄像信号的图像;超声波图像显示部4,其显示包含由处理装置3生成的基于超声波回波的图像在内的各种信息;内窥镜图像显示部5,其显示包含由处理装置3生成的基于摄像信号的图像在内的各种信息;以及用于进行各种指示输入的麦克风6、跟踪球7以及键盘8。超声波图像显示部4和内窥镜图像显示部5是使用包括液晶或有机EL(ElectroLuminescence:电致发光)等的显示面板实现的。
超声波内窥镜2包括插入部和操作部,其中,在该插入部的前端具有摄像部21和超声波振子22,该摄像部21通过插入到被检体的体腔内来拍摄被检体的体内图像,该超声波振子22向观测对象输出超声波脉冲,并且接收被观测对象反射回来的超声波回波,该操作部进行摄像部21和超声波振子22的操作。
摄像部21是使用摄像元件实现的,该摄像元件是通过接收光并进行光电转换来生成信号的像素以二维状排列而成的。作为摄像元件,例如能够列举CCD(Charge CoupledDevice:电荷耦合器件)图像传感器、CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)图像传感器。
在此,在观测对象是生物体组织的情况下,超声波振子22可以是以下形式中的任一种:从生物体的体表照射超声波的体外式探头的形式;具备插入到消化道、胰胆管、血管等管腔内的长轴的插入部的微型超声波探头的形式;以及管腔内超声波探头中进一步具备光学系统的超声波内窥镜的形式。其中,在取超声波内窥镜的形式的情况下,在管腔内超声波探头的插入部的前端侧设置超声波振子22,管腔内超声波探头在基端侧以可装卸的方式与处理装置连接。
超声波振子22将从发送接收部31接收到的电脉冲信号转换为超声波脉冲(声脉冲信号),并且将被外部的检体反射回来的超声波回波转换为电回波信号。关于超声波振子22,既可以是使超声波振子以机械的方式进行扫描的超声波振子,也可以是使多个超声波振子以电子的方式进行扫描的超声波振子。
处理装置3具有发送接收部31、图像处理部32、声音识别部33、操作信息输入部34、模式设定部35、灵敏度调整部36、存储部37以及控制部38。
发送接收部31与摄像部21和超声波振子22之间进行电信号的发送和接收。发送接收部31与摄像部21电连接,向摄像部21发送摄像定时等摄像信息,并且接收由摄像部21生成的摄像信号。另外,发送接收部31与超声波振子22电连接,向超声波振子22发送电脉冲信号,并且从超声波振子22接收作为电接收信号的回波信号。具体地说,发送接收部31基于预先设定的波形和发送定时来生成电脉冲信号,并向超声波振子22发送所生成的该脉冲信号。
发送接收部31具有对回波信号进行放大的信号放大部31a。信号放大部31a进行对接收深度越大的回波信号以越高的放大率进行放大的STC(Sensitivity Time Control:灵敏度时间控制)校正。发送接收部31在对由信号放大部31a放大后的回波信号施加滤波等处理之后,进行模拟/数字(A/D)转换,由此生成时域的数字高频(RF:Radio Frequency(射频))信号后输出。
图像处理部32进行基于摄像信号的内窥镜图像数据以及与电回波信号对应的图像数据的生成。图像处理部32具有超声波图像生成部32a、内窥镜图像生成部32b、图像合成部32c以及显示图像生成部32d。
超声波图像生成部32a生成B模式图像数据,该B模式图像是将回波信号的振幅转换为亮度来进行显示的超声波图像。超声波图像生成部32a对数字信号进行带通滤波、对数转换、增益处理、对比度处理等使用了公知技术的信号处理,并且进行与根据超声波图像显示部4中的图像的显示范围而决定的数据步长相应的数据的间隔剔除等,由此生成B模式图像数据。B模式图像是在采用RGB表色系作为颜色空间的情况下使作为变量的R(红色)、G(绿色)、B(蓝色)的值一致所得到的灰度图像。在本实施方式1中,假设B模式图像是将接收到超声波回波的扫描区域中的一部分剪切出所得到的剪切区域的图像来进行说明。
内窥镜图像生成部32b基于摄像信号生成内窥镜图像显示部5所显示的体内图像数据。内窥镜图像生成部32b对摄像信号执行规定的图像处理来生成包含体内图像的体内图像数据。体内图像是在采用RGB表色系作为颜色空间的情况下分别具有作为变量的R、G、B的值的彩色图像。
图像合成部32c例如生成包含合成图像(显示用图像)的合成图像数据,该合成图像是将由超声波图像生成部32a生成的B模式图像数据和与利用麦克风6、跟踪球7等输入的信号相应的图像(操作信息图像)合成而得到的。
显示图像生成部32d在对由超声波图像生成部32a、内窥镜图像生成部32b或图像合成部32c生成的图像数据施加灰度处理等规定的处理之后,输出该处理后的信号作为显示用的显示图像数据。
声音识别部33检测被输入到麦克风6的声音的频率,对检测出的声音的频率与预先存储的特征数据之间进行比较,接收语言序列作为识别结果(第一操作指示信号)。具体地说,在由手术操作者向麦克风6输入了“旋转”的声音的情况下,声音识别部33识别为“旋转”,并将与“旋转”有关的命令作为识别结果输出到控制部38。
操作信息输入部34接收来自跟踪球7或键盘8的操作指示信号的输入,并输出到控制部38。例如在操作了跟踪球7的情况下,操作信息输入部34将包含该跟踪球7的移动量(旋转方向、旋转量等)的指示信号(第二操作指示信号)输出到控制部38。
模式设定部35基于声音识别部33的识别结果(命令)来设定图像调整模式。具体地说,当从声音识别部33输入与“旋转”有关的命令时,模式设定部35将图像调整模式设定为“旋转模式”。模式设定部35将与所设定的图像调整模式有关的信息输出到控制部38。
灵敏度调整部36根据由模式设定部35设定的图像调整模式来计算与被输入到操作信息输入部34的跟踪球7的旋转方向、旋转量相应的图像的调整量。具体地说,在由模式设定部35设定的图像调整模式是“旋转模式”的情况下,灵敏度调整部36判断与跟踪球7的旋转方向相应的图像的旋转方向,并且基于跟踪球7的旋转量来计算图像的旋转量。灵敏度调整部36将判断出的旋转方向和计算出的旋转量输出到控制部38。
存储部37存储用于使超声波内窥镜系统1进行动作的各种程序以及包含超声波内窥镜系统1进行动作所需的各种参数等在内的数据等。存储部37具有灵敏度表存储部37a和操作信息图像存储部37b。
灵敏度表存储部37a根据从声音识别部33输入的命令(图像调整模式)制成,存储各个模式的图像调整量例如旋转方向和旋转量等。
操作信息图像存储部37b存储与图像调整模式相应的操作信息图像(引导图像)。操作信息图像是示出利用接触型信号输入单元(跟踪球7)进行操作的方向与同处理模式(图像调整模式)中的信号输入功能相应地进行动作的方向之间的关系的图像,例如,在利用跟踪球7使图像进行旋转的旋转模式的情况下,操作信息图像是指对针对手术操作者的手的位置与跟踪球7之间的配置的旋转方向进行引导的图像。操作信息图像通过图像合成部32c而与B模式图像合成后显示于超声波图像显示部4。
另外,存储部37存储包括用于执行超声波内窥镜系统1的工作方法的工作程序在内的各种程序。工作程序还能够记录于硬盘、快闪存储器、CD-ROM、DVD-ROM、软盘等计算机可读记录介质中而广泛流通。此外,还能够通过经由通信网络进行下载来获取上述的各种程序。此处所说的通信网络例如是通过现有的公共电路交换网络、LAN(Local AreaNetwork:局域网)、WAN(Wide Area Network:广域网)等实现的,不问有线还是无线。
具有以上结构的存储部37是使用预先安装了各种程序等的ROM(Read OnlyMemory:只读存储器)、以及存储各处理的运算参数或数据等的RAM(Random AccessMemory:随机存取存储器)等实现的。
控制部38是使用具有控制功能的CPU(Central Processing Unit:中央处理单元)、各种运算电路等实现的。控制部38通过将存储部37所存储、保存的信息从存储部37中读出来执行与超声波内窥镜系统1的工作方法相关的各种运算处理,由此对超声波内窥镜系统1进行整体控制。
麦克风6具有作为本发明的非接触型操作单元的功能,将手术操作者等发出的声(音)转换为电信号。此外,非接触是指不经由物理接触。
跟踪球7是具有作为本发明的接触型操作单元的功能的指示设备,球体(ball)通过手术操作者的操作而进行旋转,由此输出与该旋转的方向、旋转量(或转速)等有关的信号。
键盘8设置有多个键,通过按下键来输出与该键相应的信号。此外,关于键盘8,既可以利用触摸面板实现多个键,也可以具有用于显示图像的显示部。
接着,参照附图来说明由具有以上结构的超声波内窥镜系统1的处理装置3进行的图像调整操作。图2是说明由本实施方式1所涉及的处理装置进行的图像调整操作的流程图。
首先,控制部38判断是否存在来自麦克风6的声音输入(步骤S101:非接触型信号输入步骤)。在从声音识别部33得到识别结果的情况下(步骤S101:“是”),控制部38转移到步骤S102。与此相对,在没有从声音识别部33得到识别结果的情况下(步骤S101:“否”),控制部38返回到步骤S101,反复确认来自麦克风6的声音输入。
当转移到步骤S102时,控制部38判断来自声音识别部33的识别结果是否与图像调整有关。在此,控制部38参照被作为识别结果输出的命令来判断是否为与图像调整有关的命令。控制部38在判断为被作为识别结果输出的命令是与图像调整有关的命令的情况下(步骤S102:“是”),转移到步骤S103。与此相对,控制部38在判断为被作为识别结果输出的命令不是与图像调整有关的命令的情况下(步骤S102:“否”),返回到步骤S101,反复确认来自麦克风6的声音输入。
此外,在步骤S101中判断为没有从声音识别部33得到识别结果的情况下(步骤S101:“否”),或者在步骤S102中判定为被作为识别结果输出的命令不是与图像调整有关的命令的情况下(步骤S102:“否”),也可以不返回到步骤S101,而是结束图像调整操作处理。
在步骤S103中,控制部38对模式设定部35进行控制,以使模式设定部35根据被作为识别结果输出的命令来进行图像调整模式的设定(模式设定步骤)。例如,在从声音识别部33输入了与“旋转”有关的命令的情况下,模式设定部35将图像调整模式设定为“旋转模式”。模式设定部35将与所设定的图像调整模式有关的信息输出到控制部38。
当从模式设定部35输出与图像调整模式有关的信息时,控制部38进行对通过跟踪球7输入的信号分配与所设定的模式相应的信号输入功能的处理(步骤S104:功能分配步骤)。
之后,控制部38进行生成具有B模式图像和操作信息图像的显示用图像的生成处理(步骤S105:图像处理步骤)。在显示用图像生成处理中,图像合成部32c以如下方式进行图像合成处理:参照操作信息图像存储部37b获取与所设定的模式相应的操作信息图像,将该操作信息图像与B模式图像数据一起显示于超声波图像显示部4。
图3是说明由本实施方式1所涉及的处理装置进行的图像调整操作的图。在图像调整模式下,在超声波图像显示部4所显示的显示区域101中设置有超声波图像显示区域102以及操作信息图像显示区域103,超声波图像显示区域102中显示超声波图像(B模式图像),在操作信息图像显示区域103中与图像调整模式相应地显示引导图像调整的操作信息图像(参照图3)。在操作信息图像显示区域103中显示示出手术操作者的手110和跟踪球7的图像(跟踪球图像111)的操作信息图像。在图像调整模式是“旋转模式”的情况下,除了显示手术操作者的手110和跟踪球图像111以外,还显示表示操作方向的箭头Y1。箭头Y1例如表示为了决定旋转方向和旋转量而设定的基准方向。通过操作信息图像,能够视觉确认手术操作者的手110的位置(朝向)与跟踪球7(跟踪球图像111)之间的位置关系、以及手术操作者的手110的移动方向。
控制部38在显示用图像生成处理之后判断是否存在跟踪球7的操作(输入)(步骤S106)。在存在跟踪球7的操作(输入)的情况下(步骤S106:“是”),控制部38转移到步骤S107。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S106:“否”),控制部38反复确认跟踪球7的操作(输入)。
在存在跟踪球7的操作(输入)的情况下(步骤S106:“是”),控制部38进行图像的调整量的计算处理(步骤S107)。在调整量的计算处理中,灵敏度调整部36根据跟踪球7的旋转方向、旋转量以及被分配的信号输入功能来计算图像的调整量。具体地说,在所设定的图像调整模式是“旋转模式”的情况下,灵敏度调整部36判断与跟踪球7的旋转方向相应的旋转方向,并且基于跟踪球7的旋转量来计算图像的旋转量。
图4是说明由本实施方式1所涉及的处理装置进行的图像调整操作的图。灵敏度调整部36针对手术操作者旋转跟踪球7时的旋转方向,检测箭头Y1方向上的分量的方向和量,基于所检测出的该方向和量来判断旋转方向并且计算图像的旋转量。在此,超声波图像显示区域102中显示的超声波图像例如是如图4所示那样的包含于接收到超声波回波的扫描区域200中的区域(例如关注区域(Region Of Interest:ROI)、包含ROI的显示区域等剪切区域201)。由灵敏度调整部36判断的图像的旋转方向例如被输出为沿着将扫描方向上的同一深度之间连接的弧(以超声波的振荡源为中心的弧)的方向上的顺时针或逆时针。此外,既可以以图像(剪切区域201)的中心为旋转轴进行旋转,也可以使扫描区域200旋转。
当从灵敏度调整部36输出与旋转方向和旋转量有关的信息时,控制部38转移到步骤S108,进行生成调整后的图像的图像生成处理。在图像生成处理中,超声波图像生成部32a根据与旋转方向和旋转量有关的信息来变更剪切区域201,生成与变更后的剪切区域相应的B模式图像。
之后,控制部38判断是否存在跟踪球7的操作(输入)(步骤S109)。在存在跟踪球7的操作(输入)的情况下(步骤S109:“是”),控制部38转移到步骤S107,进行上述的调整量计算处理。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S109:“否”),控制部38结束处理。此外,既可以是在规定时间以上不存在跟踪球7的操作的情况下判断为结束本图像调整操作,也可以是在经由麦克风6而存在旋转模式结束的意思的输入(例如“旋转结束”的输入)的情况下判断为结束本图像调整操作。
通过如以上所说明的那样由处理装置3进行图像调整操作而生成的B模式图像显示于超声波图像显示部4进行显示的显示区域101的超声波图像显示区域102中。在该调整操作时,手术操作者通过声音进行模式设定,一边观看显示于超声波图像显示部4中的操作信息一边动手进行图像的旋转操作,因此手术操作者不将视线从超声波图像显示部4移开就能够进行操作,能够防止在进行图像调整等操作时观察位置偏离。
此外,也可以在操作跟踪球7时显示旋转方向的轨迹,以确认手术操作者的手的移动方向。在该情况下,既可以显示轨迹的长度为固定长度的轨迹,即,只显示旋转方向,也可以使轨迹的长度与旋转量对应地变化。
根据以上所说明的本实施方式1,模式设定部35基于声音识别部33的识别结果来变更模式,与所设定的模式相应地在超声波图像显示部4中显示操作信息图像来引导跟踪球7的操作,并且,灵敏度调整部36根据该跟踪球7的操作来计算图像的调整量,因此不将视线从监视器移开就能够进行监视器上的图像的调整操作。
此外,在本实施方式1中,设为手110被配置于跟踪球图像111的下方来进行了说明,但也可以根据超声波内窥镜系统1的布局等不同而变更手110的位置。关于手110的配置,也可以存储多个图案作为操作信息图像,例如在图像调整操作前或系统启动时设定手的配置。
另外,在上述的实施方式1中,以设定用于决定调整量的基准方向并根据跟踪球7的操作方向的基准方向的分量来计算调整量的情况进行了说明,但是根据操作方向与基准方向之间所成的角度来决定调整量等调整量的计算并不限于此。
(实施方式1的变形例)
接着,参照附图来说明本发明的实施方式1的变形例。图5、图6是说明由本实施方式1的变形例所涉及的处理装置进行的图像调整操作的图。图6的(a)示出存在图像调整的输入的情况下的显示区域的图像,图6的(b)示出图像调整后的显示区域的图像。在上述的实施方式1中说明了通过声音输入指示了“旋转”的例子,但是在本变形例中是通过声音输入指示了“滚动”的例子,对显示通过径向型超声波振子获取到的超声波图像(B模式图像)的例子进行说明。在本变形例中,上述的扫描区域200呈超声波振子配置在中心的圆环状,剪切区域201为位于扫描区域上的矩形的区域。
在上述的流程图(参照图2)的步骤S103中,在从声音识别部33输入了与“滚动”有关的命令的情况下,模式设定部35将图像调整模式设定为“滚动模式”。模式设定部35将与所设定的图像调整模式有关的信息输出到控制部38。
当从模式设定部35输出与图像调整模式有关的信息时,控制部38进行分配与所设定的模式相应的信号输入功能的处理(步骤S104),并进行生成具有B模式图像和操作信息图像的显示用图像的处理(步骤S105:图像处理步骤)。在图像调整模式是“滚动模式(显示区域设定模式)”的情况下,如图5所示那样显示手术操作者的手110、跟踪球图像111以及表示操作方向的操作轴Y2。操作轴Y2例如由表示为了决定图像中心位置的移动方向和移动量而设定的基准方向的正交的两个轴构成。操作轴Y2是被设定为剪切区域201相对于扫描区域200的移动方向与超声波图像显示区域102的图像的移动方向一致的轴。
之后,在存在跟踪球7的操作(输入)的情况下(步骤S106:“是”),控制部38进行图像的调整量的计算处理(步骤S107)。灵敏度调整部36针对手术操作者旋转跟踪球7时的旋转方向,检测跟踪球7的旋转方向上的分量相对于操作轴Y2的方向和量,基于所检测出的该方向和量来判断滚动方向并且计算图像的滚动量。在此,由灵敏度调整部36判断的图像(剪切区域201)的滚动方向例如被作为从图像中心位置起的移动方向(例如图6的(a)的虚线箭头)输出。
当从灵敏度调整部36输出与滚动方向和滚动量有关的信息时,控制部38转移到步骤S108,进行生成调整后的图像的图像生成处理。在图像生成处理中,超声波图像生成部32a根据与滚动方向和滚动量有关的信息来变更剪切区域201,并生成与变更后的剪切区域相应的B模式图像(参照图6的(b))。
(实施方式2)
接着,对本发明的实施方式2进行说明。图7是说明由本实施方式2所涉及的处理装置进行的图像调整操作的流程图。此外,对与上述的结构相同的结构标注相同的附图标记来进行说明。在上述的实施方式1中说明了通过声音输入指示了“旋转”的例子,但是在本实施方式2中对通过声音输入指示了“备注”的例子进行说明。
首先,控制部38判断是否存在来自麦克风6的声音输入(步骤S201)。在从声音识别部33得到识别结果的情况下(步骤S201:“是”),控制部38转移到步骤S202。与此相对,在没有从声音识别部33得到识别结果的情况下(步骤S201:“否”),控制部38返回到步骤S201,反复确认来自麦克风6的声音输入。
当转移到步骤S202时,控制部38判断来自声音识别部33的识别结果是否与图像调整有关。在此,控制部38参照被作为识别结果输出的命令来判断是否为与图像调整有关的命令。控制部38在判断为被作为识别结果输出的命令是与图像调整有关的命令的情况下(步骤S202:“是”),转移到步骤S203。与此相对,控制部38在判断为被作为识别结果输出的命令不是与图像调整有关的命令的情况下(步骤S202:“否”),返回到步骤S201,反复确认来自麦克风6的声音输入。
在步骤S203中,在从声音识别部33输入了与“备注”有关的命令的情况下,模式设定部35将图像调整模式设定为“备注模式(字符输入模式)”。模式设定部35将与所设定的图像调整模式有关的信息输出到控制部38。
当从模式设定部35输出与图像调整模式有关的信息时,控制部38进行对通过跟踪球7输入的信号分配与所设定的模式相应的信号输入功能的处理(步骤S204)。
之后,控制部38进行生成具有B模式图像和操作信息图像的显示用图像的生成处理(步骤S205)。在显示用图像生成处理中,图像合成部32c以如下方式进行图像合成处理:参照操作信息图像存储部37b获取与所设定的模式相应的操作信息图像,将该操作信息图像与B模式图像数据一起显示于超声波图像显示部4。
图8是说明由本实施方式2所涉及的处理装置进行的图像调整操作的图。在图像调整模式是“备注模式”的情况下,如图8所示那样显示手术操作者的手110、跟踪球图像111以及表示操作方向的操作轴Y3。操作轴Y3例如由表示为了决定备注输入光标P1的移动方向和移动量而设定的基准方向的正交的两个轴构成。
控制部38在进行显示用图像的生成处理后判断是否存在跟踪球7的操作(输入)(步骤S206)。在存在跟踪球7的操作(输入)的情况下(步骤S206:“是”),控制部38转移到步骤S207。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S206:“否”),控制部38反复确认跟踪球7的操作(输入)。
在存在跟踪球7的操作(输入)的情况下(步骤S206:“是”),控制部38进行备注输入光标P1的调整量的计算处理(步骤S207)。灵敏度调整部36针对手术操作者旋转跟踪球7时的旋转方向和旋转量,检测操作轴Y3的各轴方向上的分量,并基于所检测出的该分量来计算各轴方向的移动量。灵敏度调整部36输出计算出的该各轴方向的移动量作为备注输入光标P1的移动量。此外,关于备注输入光标P1的移动量,既可以输出各轴方向的移动量,也可以输出B模式图像中的移动后的坐标作为调整量。
当从灵敏度调整部36输出与备注输入光标P1的移动量有关的信息时,控制部38转移到步骤S208,进行B模式图像中的备注输入光标P1的移动处理。在移动处理中,超声波图像生成部32a根据与备注输入光标P1的移动量有关的信息来移动B模式图像中的备注输入光标P1,并生成移动后的B模式图像。控制部38将生成的移动后的B模式图像显示于超声波图像显示部4(超声波图像显示区域102)。
之后,控制部38判断是否存在跟踪球7的操作(输入)(步骤S209)。在存在跟踪球7的操作(输入)的情况下(步骤S209:“是”),控制部38转移到步骤S207,进行上述的备注输入光标P1的移动处理。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S209:“否”),控制部38转移到步骤S210。
在步骤S210中,判断是否存在来自麦克风6的声音输入(备注输入)。当图像调整模式被设定为“备注模式”时,将设定后的与来自麦克风6的声音输入相应的字符信息(字符串)作为输入备注来进行处理。在从声音识别部33得到识别结果的情况下(步骤S210:“是”),控制部38转移到步骤S211。与此相对,在没有从声音识别部33得到识别结果的情况下(步骤S210:“否”),控制部38反复确认来自麦克风6的声音输入。
在步骤S211中,进行与来自声音识别部33的识别结果相应的备注的输入处理。图9是说明由本实施方式2所涉及的处理装置进行的图像调整操作的图。在备注输入处理中,控制部38对来自声音识别部33的识别结果与预先存储的语言之间进行比较并输出比较结果,图像合成部32c进行基于比较结果的字符串的合成处理。具体地说,在存在“Aorta”的声音输入的情况下,如图9所示,在与备注输入光标P1(参照图8)相应的位置插入“Aorta”的字符串。此外,也可以是,识别出“确定”、“转换”等声音后结束声音识别,在为“转换”的情况下,将转换候选一览显示。此外,关于转换候选的选择,既可以通过声音输入附加于各转换候选的编号来确定转换候选,也可以通过跟踪球7的操作来选择转换候选。
之后,控制部38判断备注输入处理是否已完成(步骤S212)。控制部38在通过规定的备注输入完成操作而接收到备注输入已完成的意思的信号时(步骤S212:“是”),结束处理。与此相对,在新存在备注的输入操作等、不存在备注输入已完成的意思的信号的情况下(步骤S212:“否”),返回到步骤S210,反复进行备注输入处理。
根据以上所说明的本实施方式2,模式设定部35基于声音识别部33的识别结果来变更模式,与所设定的模式相应地在超声波图像显示部4中显示操作信息图像来引导跟踪球7的操作,并且,灵敏度调整部36根据该跟踪球7的操作来计算备注输入光标P1的移动量,在移动备注输入光标P1之后,通过声音识别来进行备注输入处理,因此不将视线从监视器移开就能够进行监视器上的图像的调整操作。
(实施方式3)
接着,对本发明的实施方式3进行说明。此外,在本实施方式3所涉及的附图中,对与上述的结构相同的结构标注相同的附图标记来进行说明。在上述的实施方式1中,说明了通过声音输入指示了“旋转”的例子,但在本实施方式3中对通过声音输入指示了“对焦位置”的例子进行说明。此外,在本实施方式3所涉及的图像调整操作中,进行基于图2所示的流程图的处理。
在本实施方式3中,在步骤S103中从声音识别部33输入与“对焦位置”有关的命令。当从声音识别部33输入了与“对焦位置”有关的命令时,模式设定部35将图像调整模式设定为“对焦位置变更模式”。模式设定部35将与所设定的图像调整模式有关的信息输出到控制部38。
当从模式设定部35输出与图像调整模式有关的信息时,控制部38进行分配与所设定的模式相应的信号输入功能的处理(步骤S104),并进行生成具有B模式图像和操作信息图像的显示用图像的生成处理(步骤S105:图像处理步骤)。
图10、图11是说明由本实施方式3所涉及的处理装置进行的图像调整操作的图。在图像调整模式是“对焦位置变更模式”的情况下,除了显示手术操作者的手110、跟踪球图像111以外,还显示表示操作方向的箭头Y4。箭头Y4例如表示为了决定对焦位置而设定的基准方向。另外,在显示区域101中显示对焦位置信息Gfp,该对焦位置信息Gfp表示超声波图像显示区域102中显示的图像的对焦位置。对焦位置信息Gfp例如示出沿超声波图像显示区域102的上下方向的深度的位置。
在存在跟踪球7的操作(输入)的情况下(步骤S106:“是”),控制部38进行对焦位置的变更处理(步骤S107)。在对焦位置的变更处理中,由灵敏度调整部36计算与跟踪球7的旋转方向或旋转量相应的对焦位置的变更量。具体地说,在所设定的图像调整模式是“对焦位置变更模式”的情况下,灵敏度调整部36判断与跟踪球7的旋转方向相应的旋转方向,并且基于跟踪球7的旋转量来计算对焦位置的变更量。
图12是说明由本实施方式3所涉及的处理装置进行的图像调整操作的图。如图12所示,设置于超声波振子22的振子22b形成以对焦位置Fp为中心在超声波的行进方向(图12的上下方向)上大致对称的声场SF。灵敏度调整部36针对手术操作者旋转跟踪球7时的旋转方向,检测箭头Y4方向上的分量的方向和量,根据检测出的该方向和量来判断对焦位置Fp的移动方向并且计算移动量。
当从灵敏度调整部36输出与对焦位置Fp的移动方向和移动量有关的信息时,控制部38转移到步骤S108,进行生成调整后的图像的图像生成处理。在本实施方式3所涉及的图像生成处理中,在变更后的对焦位置Fp进行超声波的照射并接收超声波回波,超声波图像生成部32a新生成与变更后的对焦位置Fp相应的B模式图像(参照图11)。另外,在图11所示的显示区域101中显示与对图10所示的对焦位置进行变更的变更后的对焦位置相应的对焦点Gfp。
之后,控制部38判断是否存在跟踪球7的操作(输入)(步骤S109)。在存在跟踪球7的操作(输入)的情况下(步骤S109:“是”),控制部38转移到步骤S107,进行上述的对焦位置Fp的变更处理。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S109:“否”),控制部38结束处理。
根据以上所说明的本实施方式3,模式设定部35基于声音识别部33的识别结果来变更模式,与所设定的模式相应地在超声波图像显示部4中显示操作信息图像来引导跟踪球7的操作,并且,灵敏度调整部36根据该跟踪球7的操作来计算对焦位置Fp的变更量,因此不将视线从监视器移开就能够进行监视器上的图像的调整操作。
(实施方式4)
接着,对本发明的实施方式4进行说明。图13是说明由本实施方式4所涉及的处理装置进行的图像调整操作的流程图。此外,对与上述的结构相同的结构标注相同的附图标记来进行说明。在上述的实施方式1中说明了通过声音输入指示了“旋转”的例子,但在本实施方式4中对通过声音输入指示了“放大”的例子进行说明。
首先,控制部38判断是否存在来自麦克风6的声音输入(步骤S301)。在从声音识别部33得到识别结果的情况下(步骤S301:“是”),控制部38转移到步骤S302。与此相对,在没有从声音识别部33得到识别结果的情况下(步骤S301:“否”),控制部38转移到步骤S301,反复确认来自麦克风6的声音输入。
当转移到步骤S302时,控制部38判断来自声音识别部33的识别结果是否与图像调整有关。在此,控制部38参照被作为识别结果输出的命令来判断是否为与图像调整有关的命令。控制部38在判断为被作为识别结果输出的命令是与图像调整有关的命令的情况下(步骤S302:“是”),转移到步骤S303。与此相对,控制部38在判断为被作为识别结果输出的命令不是与图像调整有关的命令的情况下(步骤S302:“否”),返回到步骤S301,反复确认来自麦克风6的声音输入。
在步骤S303中,在从声音识别部33输入了与“放大”有关的命令的情况下,模式设定部35将图像调整模式设定为“放大模式”。模式设定部35将与所设定的图像调整模式有关的信息输出到控制部38。
当从模式设定部35输出与图像调整模式有关的信息时,控制部38进行对通过跟踪球7输入的信号分配与所设定的模式相应的信号输入功能的处理(步骤S304)。
之后,控制部38进行生成具有B模式图像和操作信息图像的显示用图像的生成处理(步骤S305)。在显示用图像生成处理中,图像合成部32c以如下方式进行图像合成处理:参照操作信息图像存储部37b来获取与所设定的模式相应的操作信息图像,并将该操作信息图像与B模式图像数据一起显示于超声波图像显示部4。
图14是说明由本实施方式4所涉及的处理装置进行的图像调整操作的图。在图像调整模式是“放大模式”的情况下,如图14所示那样显示手术操作者的手110、跟踪球图像111以及表示操作方向的操作轴Y5。操作轴Y5例如由表示为了决定用于指示放大中心位置的放大位置指示光标P2的移动方向和移动量而设定的基准方向的正交的两个轴构成。
当由模式设定部35进行图像调整模式的设定时,控制部38判断是否存在跟踪球7的操作(输入)(步骤S306)。在存在跟踪球7的操作(输入)的情况下(步骤S306:“是”),控制部38转移到步骤S307。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S306:“否”),控制部38反复确认跟踪球7的操作(输入)。
在存在跟踪球7的操作(输入)的情况下(步骤S306:“是”),控制部38进行计算放大位置指示光标P2的移动量作为调整量的计算处理(步骤S307)。灵敏度调整部36针对手术操作者旋转跟踪球7时的旋转方向和旋转量,检测操作轴Y5的各轴方向上的分量,并基于所检测出的该分量来计算各轴方向的移动量。灵敏度调整部36输出所计算出的该各轴方向的移动量作为放大位置指示光标P2的移动量。此外,关于放大位置指示光标P2的移动量,既可以输出各轴方向的移动量,也可以输出B模式图像中的移动后的坐标作为调整量。
当从灵敏度调整部36输出与放大位置指示光标P2的移动量有关的信息时,控制部38转移到步骤S308,进行B模式图像中的放大位置指示光标P2的移动处理,具体地说进行放大中心位置的移动处理。在移动处理中,超声波图像生成部32a根据与放大位置指示光标P2的移动量有关的信息来移动B模式图像中的放大位置指示光标P2,并生成移动后的B模式图像。控制部38将所生成的移动后的B模式图像显示在超声波图像显示部4(超声波图像显示区域102)中。
之后,控制部38判断放大位置指示光标P2的移动处理是否已完成(步骤S309)。控制部38在通过规定的移动完成操作而接收到放大位置指示光标P2的移动处理已完成的意思的信号时(步骤S309:“是”),转移到步骤S310。与此相对,在存在跟踪球7的操作(输入)等、不存在放大位置指示光标P2的移动处理已完成的意思的信号的情况下(步骤S309:“否”),返回到步骤S307,反复进行放大位置指示光标P2的移动量的计算处理。
在步骤S310中,进行以放大位置指示光标P2的指示位置为中心的放大处理。超声波图像生成部32a以放大位置指示光标P2的指示位置为中心进行与规定的放大率相应的放大区域R(参照图14)的设定,并裁剪所设定的该放大区域R。超声波图像生成部32a生成将放大区域R放大为与超声波图像显示区域102相应的大小的B模式图像。
之后,控制部38判断是否存在跟踪球7的操作(输入)(步骤S311)。在存在跟踪球7的操作(输入)的情况下(步骤S311:“是”),控制部38转移到步骤S307,进行上述的B模式图像中的放大位置指示光标P2的移动处理。与此相对,在不存在跟踪球7的操作(输入)的情况下(步骤S311:“否”),控制部38结束处理。
根据以上所说明的本实施方式4,模式设定部35基于声音识别部33的识别结果来变更模式,与所设定的模式相应地在超声波图像显示部4中显示操作信息图像来引导跟踪球7的操作,并且,灵敏度调整部36根据该跟踪球7的操作来计算放大位置指示光标P2的移动量,在移动放大位置指示光标P2之后进行B模式图像的放大处理,因此不将视线从监视器移开就能够进行监视器上的图像的调整操作。
(实施方式4的变形例)
接着,参照附图对本发明的实施方式4的变形例进行说明。图15是说明由本实施方式4的变形例所涉及的处理装置进行的图像调整操作的图。在上述的实施方式4中,设为利用跟踪球7决定放大中心并以规定的放大率放大B模式图像的情况来进行了说明,但在本变形例中,预先设定放大中心Wp并通过操作跟踪球7来变更放大率。
在本变形例中,在设定了放大模式作为图像调整模式的情况下,灵敏度调整部36基于操作方向Y6,根据跟踪球7的旋转方向和旋转量来计算放大率。另外,控制部38判断当前显示于超声波图像显示区域102中的B模式图像是被定格的定格中的图像,还是实时显示中的B模式图像。控制部38在判断为当前显示于超声波图像显示区域102中的B模式图像是被定格的定格中的图像的情况下,以所设定的放大中心为中心进行与计算出的放大率相应的大小的放大区域的裁剪处理,来生成放大后的B模式图像。
另一方面,控制部38在判断为当前显示于超声波图像显示区域102中的B模式图像是实时显示中的B模式图像的情况下,在进行与放大率相应的范围变更之后,以预先设定的放大中心为对焦位置进行超声波回波的再次接收。超声波图像生成部32a基于接收到的超声波回波来生成与规定的放大率相应的范围的B模式图像。
此外,也可以进行将本变形例与上述的实施方式4组合的图像调整。具体地说,在当前显示于超声波图像显示区域102中的B模式图像是被定格的定格中的图像的情况下,进行步骤S304~S306的处理来决定裁剪的中心位置,以与预先设定的放大中心不同的位置为中心进行裁剪。
另外,在上述的实施方式1~实施方式4中,将检测声音的麦克风6(声音输入)作为非接触型操作单元来进行了说明,但是也可以是检测手势并输出识别结果的非接触型操作单元,还可以是检测视线并输出识别结果的非接触型操作单元,还可以是检测脑波并输出识别结果的非接触型操作单元。在使用识别手势的非接触型操作单元(例如IR)的情况下,设置手势识别部来代替声音识别部33,输出与手势相应的命令作为识别结果。另外,在使用识别视线的非接触型操作单元(例如拍摄目光(视线)的单元)的情况下,设置视线识别部来代替声音识别部33,输出与视线(视线的移动)相应的命令作为识别结果。
另外,在上述的实施方式1~实施方式4中,列举旋转模式、滚动模式、对焦位置变更模式以及放大模式作为例子来进行了说明,但除此之外,也可以通过麦克风6设定B模式图像的缩小模式、进行关注区域的设定的关注区域设定模式、指定测量侧线或测量区域来进行B模式图像中的规定部位的测量的测量模式等与观测有关的处理模式,并通过跟踪球7来进行操作。
另外,在上述的实施方式1~实施方式4中,将跟踪球7作为接触型操作单元来进行了说明,但也可以将键盘、鼠标、触摸面板或手柄、拨盘、操纵杆、脚踏开关等用作接触型操作单元,还可以将它们组合。例如在将接触型操作单元设为触摸面板的情况下,也可以是,在操作信息图像显示区域103中显示手、触摸面板、操作方向等操作信息图像,并进行点击、拖拽、放大、缩小等操作,从而更直观地指示图像调整。关于接触型操作单元,如果是作为图像调整模式中的信号输入功能而能够指示连续的切换调整或不连续的切换调整、或者多级的切换调整或无级的切换调整的输入单元,则不存在限制。此处所说的连续的切换调整是指按时间序列连续的信号输入,不连续的切换调整指示是指按时间序列非连续的信号输入(包括由于手术操作者的图像确认等而间歇地进行的信号输入)。另外,无级的切换调整指示是指与跟踪球7的旋转等连续的输入操作相应地输出上述的信号,多级的切换调整指示是指与按下键盘的按钮、点击鼠标等间歇性的输入操作相应地输出上述信号。
另外,在上述的实施方式1~实施方式4中,设为利用超声波图像显示部4和内窥镜图像显示部5来显示各个图像的情况来进行了说明,但也可以设为一个显示部,将显示区域分割并在各区域中分别显示超声波图像(包含操作信息图像)和内窥镜图像。
另外,在本发明所涉及的超声波内窥镜系统1中,通过麦克风6的输入来适当地切换上述的实施方式1~实施方式4所涉及的图像调整模式,进一步与切换后的图像调整模式相应地切换操作信息图像来进行观测对象的观测。另外,也可以通过变更跟踪球7的配置来进行操作信息图像(手110相对于跟踪球图像111的位置)的切换。
另外,在上述的实施方式1~实施方式4中,以观测对象是生物体组织的超声波内窥镜为例进行了说明,但还能够应用于观测材料的特性的工业用的内窥镜。另外,并不限于内窥镜,还可以作为具备超声波振子22、处理装置3(除去内窥镜图像生成部32b)、超声波图像显示部4、麦克风6以及跟踪球7的观测装置来使用。本发明所涉及的观测装置不问体内还是体外都能够应用。另外,也可以是,除了超声波以外,还照射红外线等来发送和接收观测对象的信号。
这样,本发明在不脱离权利要求书所记载的技术思想的范围内能够包含各种实施方式。
产业上的可利用性
如上所述,本发明所涉及的医疗用观测装置、医疗用观测装置的工作方法以及医疗用观测装置的工作程序对于不将视线从监视器移开就能够进行监视器上的图像的调整操作是有用的。
附图标记说明
1:超声波内窥镜系统;2:超声波内窥镜;3:处理装置;4:超声波图像显示部;5:内窥镜图像显示部;6:麦克风;7:跟踪球;8:键盘;21:摄像部;22:超声波振子;31:发送接收部;32:图像处理部;32a:超声波图像生成部;32b:内窥镜图像生成部;32c:图像合成部;32d:显示图像生成部;33:声音识别部;34:操作信息输入部;35:模式设定部;36:灵敏度调整部;37:存储部;37a:灵敏度表存储部;37b:操作信息图像存储部;38:控制部。

Claims (8)

1.一种医疗用观测装置,获取用于生成观测对象的图像的信号,并生成基于获取到的该信号的观测图像,该医疗用观测装置的特征在于,具备:
非接触型信号输入单元,其通过与操作者非接触的操作来接收第一操作指示信号的输入;
接触型信号输入单元,其通过操作者的接触操作来接收第二操作指示信号的输入;
控制部,其进行以下控制:根据所述第一操作指示信号来设定针对所述观测图像的处理模式,对向所述接触型信号输入单元输入的所述第二操作指示信号分配与所设定的该处理模式相应的信号输入功能;以及
图像处理部,其生成具有所述观测图像和引导图像的显示用图像,其中,该引导图像用于引导与分配给所述接触型信号输入单元的所述信号输入功能相应的操作,
其中,所述引导图像是示出利用所述接触型信号输入单元进行操作的所述操作者的手的朝向与同所设定的所述处理模式中的所述信号输入功能相应地进行动作的所述观测图像的动作方向之间的关系的图像。
2.根据权利要求1所述的医疗用观测装置,其特征在于,
所述控制部对与所述第一操作指示信号的输入相应的处理模式的切换、与所述处理模式相应的所述引导图像的切换或所述处理模式中的信号输入功能的切换进行控制。
3.根据权利要求1所述的医疗用观测装置,其特征在于,
所述非接触型信号输入单元检测声音、手势、视线或脑波,
所述接触型信号输入单元包括键盘、跟踪球、鼠标、触摸面板、手柄、拨盘、操纵杆以及脚踏开关中的至少一个。
4.根据权利要求1所述的医疗用观测装置,其特征在于,
所述处理模式中的所述信号输入功能包括连续的接触操作或不连续的接触操作、或者多级的接触操作或无级的接触操作。
5.根据权利要求1所述的医疗用观测装置,其特征在于,
所述处理模式包括以下模式中的至少一个:使图像旋转的旋转模式、设定观测区域中的用于图像显示的显示区域的显示区域设定模式、字符输入模式、对焦位置设定模式、放大或缩小模式、关注区域的设定模式以及测量模式。
6.根据权利要求1所述的医疗用观测装置,其特征在于,
用于生成所述观测对象的图像的信号是基于回波信号生成的信号,该回波信号是将对该观测对象发送的超声波被所述观测对象反射回来的超声波回波转换为电信号而得到的。
7.一种医疗用观测装置的工作方法,其中,该医疗用观测装置获取用于生成观测对象的图像的信号,并显示基于获取到的该信号的观测图像,该工作方法的特征在于,包括以下步骤:
非接触型信号输入步骤,由非接触型信号输入单元通过与操作者非接触的操作来接收第一操作指示信号的输入;
模式设定步骤,由控制部进行以下控制:根据所述第一操作指示信号来设定针对所述观测图像的处理模式;
功能分配步骤,由所述控制部进行以下控制:对接触型信号输入单元分配与在所述模式设定步骤中设定的所述处理模式相应的信号输入功能,其中,该接触型信号输入单元通过操作者的接触操作来接收第二操作指示信号的输入;以及
图像处理步骤,由图像处理部生成具有所述观测图像和引导图像的显示用图像,其中,该引导图像示出利用所述接触型信号输入单元进行操作的所述操作者的手的朝向与同所设定的所述处理模式中的所述信号输入功能相应地进行动作的所述观测图像的动作方向之间的关系。
8.一种计算机可读存储介质,其上存储有医疗用观测装置的工作程序,其中,该医疗用观测装置获取用于生成观测对象的图像的信号,并显示基于获取到的该信号的观测图像,其特征在于,该工作程序被处理器执行时使所述医疗用观测装置执行以下过程:
非接触型信号输入过程,由非接触型信号输入单元通过与操作者非接触的操作来接收第一操作指示信号的输入;
模式设定过程,由控制部进行以下控制:根据所述第一操作指示信号来设定针对所述观测图像的处理模式;
功能分配过程,由所述控制部进行以下控制:对接触型信号输入单元分配与在所述模式设定过程中设定的所述处理模式相应的信号输入功能,其中,该接触型信号输入单元通过操作者的接触操作来接收第二操作指示信号的输入;以及
图像处理过程,由图像处理部生成具有所述观测图像和引导图像的显示用图像,其中,该引导图像示出利用所述接触型信号输入单元进行操作的所述操作者的手的朝向与同所设定的所述处理模式中的所述信号输入功能相应地进行动作的所述观测图像的动作方向之间的关系。
CN201580011408.1A 2014-12-02 2015-10-09 医疗用观测装置以及医疗用观测装置的工作方法 Active CN106061400B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014-244108 2014-12-02
JP2014244108 2014-12-02
PCT/JP2015/078839 WO2016088452A1 (ja) 2014-12-02 2015-10-09 医療用観測装置、医療用観測装置の作動方法および医療用観測装置の作動プログラム

Publications (2)

Publication Number Publication Date
CN106061400A CN106061400A (zh) 2016-10-26
CN106061400B true CN106061400B (zh) 2019-10-01

Family

ID=56091408

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580011408.1A Active CN106061400B (zh) 2014-12-02 2015-10-09 医疗用观测装置以及医疗用观测装置的工作方法

Country Status (5)

Country Link
US (1) US20160361044A1 (zh)
EP (1) EP3228253B1 (zh)
JP (1) JP5945652B1 (zh)
CN (1) CN106061400B (zh)
WO (1) WO2016088452A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6637609B2 (ja) * 2016-09-15 2020-01-29 オリンパス株式会社 超音波内視鏡および超音波内視鏡システム
WO2018116891A1 (ja) * 2016-12-19 2018-06-28 オリンパス株式会社 画像処理装置、超音波診断システム、画像処理装置の作動方法、及び画像処理装置の作動プログラム
CN110248607B (zh) * 2017-01-23 2021-09-24 奥林巴斯株式会社 超声波观测装置、超声波观测装置的工作方法、存储介质
KR102019174B1 (ko) * 2017-09-04 2019-09-09 유메디칼 주식회사 관심영역의 이동 및 영상 확대가 가능한 영상 처리 시스템 및 방법
JP7014044B2 (ja) * 2018-05-15 2022-02-01 コニカミノルタ株式会社 超音波診断装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3668822B2 (ja) * 1996-11-11 2005-07-06 株式会社島津製作所 医用画像処理装置
CN201253222Y (zh) * 2007-03-29 2009-06-10 奥林巴斯医疗株式会社 系统控制器
CN101991434A (zh) * 2009-08-19 2011-03-30 株式会社东芝 超声波图像诊断装置以及超声波图像生成方法
CN102149330A (zh) * 2008-09-09 2011-08-10 奥林巴斯医疗株式会社 标识图像控制装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001029360A (ja) * 1999-07-23 2001-02-06 Olympus Optical Co Ltd 医療制御システム
US7127401B2 (en) * 2001-03-12 2006-10-24 Ge Medical Systems Global Technology Company, Llc Remote control of a medical device using speech recognition and foot controls
JP4219624B2 (ja) * 2002-06-28 2009-02-04 アルパイン株式会社 車載機器操作装置およびその操作案内方法
JP4575216B2 (ja) * 2005-04-08 2010-11-04 オリンパス株式会社 医用画像表示装置
JP5345724B2 (ja) * 2011-11-21 2013-11-20 日立アロカメディカル株式会社 超音波診断装置
US20130225999A1 (en) * 2012-02-29 2013-08-29 Toshiba Medical Systems Corporation Gesture commands user interface for ultrasound imaging systems
US9877699B2 (en) * 2012-03-26 2018-01-30 Teratech Corporation Tablet ultrasound system
JP2013233275A (ja) * 2012-05-09 2013-11-21 Shimadzu Corp X線透視撮影装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3668822B2 (ja) * 1996-11-11 2005-07-06 株式会社島津製作所 医用画像処理装置
CN201253222Y (zh) * 2007-03-29 2009-06-10 奥林巴斯医疗株式会社 系统控制器
CN102149330A (zh) * 2008-09-09 2011-08-10 奥林巴斯医疗株式会社 标识图像控制装置
CN101991434A (zh) * 2009-08-19 2011-03-30 株式会社东芝 超声波图像诊断装置以及超声波图像生成方法

Also Published As

Publication number Publication date
US20160361044A1 (en) 2016-12-15
EP3228253A1 (en) 2017-10-11
JPWO2016088452A1 (ja) 2017-04-27
WO2016088452A1 (ja) 2016-06-09
EP3228253A4 (en) 2018-09-12
CN106061400A (zh) 2016-10-26
EP3228253B1 (en) 2021-12-22
JP5945652B1 (ja) 2016-07-05

Similar Documents

Publication Publication Date Title
CN106061400B (zh) 医疗用观测装置以及医疗用观测装置的工作方法
US9962143B2 (en) Medical diagnosis apparatus, ultrasound observation system, method for operating medical diagnosis apparatus, and computer-readable recording medium
JP6043028B1 (ja) 超音波観測システム
US20160151039A1 (en) Ultrasound diagnosis apparatus
WO2014002870A1 (ja) 超音波診断装置及びセンサ選定装置
JP2007313202A (ja) 超音波診断システム
JP2006192030A (ja) 超音波画像診断装置
JP2013158348A (ja) 超音波診断装置及び画像処理プログラム
JP2013118998A (ja) 医用画像診断装置、超音波診断装置及びプログラム
JP2009261520A (ja) 超音波撮像装置
CN108366785B (zh) 超声波观测装置及其工作方法、处理装置及存储介质
JP6095875B2 (ja) 医療診断装置、医療診断装置の作動方法および医療診断装置の作動プログラム
JP7199556B2 (ja) 超音波診断装置および超音波診断装置の制御方法
JP2010057562A (ja) 超音波診断装置
JP6744443B2 (ja) 超音波画像診断装置及びプログラム
JP2006175006A (ja) 超音波観測装置、超音波内視鏡装置、及び、画像処理方法
CN115867203A (zh) 超声波诊断装置、超声波诊断装置的控制方法及超声波诊断装置用处理器
JP4504114B2 (ja) 超音波画像診断装置
JPWO2017073331A1 (ja) 処理装置、超音波観測装置、処理装置の作動方法および処理装置の作動プログラム
US20240130706A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
JP2013094619A (ja) 超音波プローブ及び超音波診断装置
WO2022044404A1 (ja) 超音波診断システムおよび超音波診断システムの制御方法
WO2022044391A1 (ja) 超音波診断システムおよび超音波診断システムの制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant