CN108778093A - 内窥镜系统 - Google Patents

内窥镜系统 Download PDF

Info

Publication number
CN108778093A
CN108778093A CN201780016433.8A CN201780016433A CN108778093A CN 108778093 A CN108778093 A CN 108778093A CN 201780016433 A CN201780016433 A CN 201780016433A CN 108778093 A CN108778093 A CN 108778093A
Authority
CN
China
Prior art keywords
status information
display
status
viewing area
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780016433.8A
Other languages
English (en)
Other versions
CN108778093B (zh
Inventor
工藤正宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN108778093A publication Critical patent/CN108778093A/zh
Application granted granted Critical
Publication of CN108778093B publication Critical patent/CN108778093B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • A61B5/748—Selection of a region of interest, e.g. using a graphics tablet
    • A61B5/7485—Automatic selection of region of interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661—Endoscope light sources
    • A61B1/0676—Endoscope light sources at distal tip of an endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06—Measuring instruments not otherwise provided for
    • A61B2090/061—Measuring instruments not otherwise provided for for measuring dimensions, e.g. length
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3937—Visible markers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M13/00—Insufflators for therapeutic or disinfectant purposes, i.e. devices for blowing a gas, powder or vapour into the body
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Plasma & Fusion (AREA)
  • Otolaryngology (AREA)
  • Astronomy & Astrophysics (AREA)
  • Endoscopes (AREA)

Abstract

内窥镜系统具有：影像信号处理部(61)，其将内窥镜图像信号变换为能够显示于显示部(68)的信号；状态信息通知必要性判定部(65)，其判定是否需要通知周边设备的状态信息；视线检测部(62)，其检测内窥镜图像中的手术操作者的视线位置；观察区域设定部(63)，其设定手术操作者的观察对象区域；钳子探测部(64)，其探测观察区域中的存在钳子的区域；状态显示控制部(66)，其在观察区域内的区域设定用于显示状态信息的状态显示区域；以及状态显示叠加部(67)，其在内窥镜图像中的状态显示区域内叠加状态信息。

Description

内窥镜系统
技术领域
本发明的实施方式涉及一种内窥镜系统，特别是涉及一种能够将周边设备的信息叠加地显示于内窥镜监视器的内窥镜系统。
背景技术
以往，在医疗领域中，在体腔内的脏器的观察、使用处置器具的治疗处置、内窥镜观察下的外科手术等中广泛地使用着内窥镜装置。一般地，内窥镜装置将通过在插入部的前端搭载有电荷耦合元件(CCD)等摄像元件的电子内窥镜获得的被摄体的摄像信号传输到处理器来实施图像处理。通过图像处理所得到的内窥镜图像从处理器被输出到内窥镜监视器进行显示。
在内窥镜观察下的治疗处置或外科手术中，构建除了使用这种内窥镜装置以及内窥镜装置所附带的光源装置、处理器、内窥镜监视器以外还使用了气腹装置、电手术刀装置等多个周边设备的内窥镜系统，并被实用化。
这些周边设备在各设备中具有显示部件。在以往的内窥镜系统中，各设备中的设定值、报错、警告等状态信息被显示于各设备中所设置的显示部件。然而，由于周边设备分散地存在于手术室中，因此手术操作者要单独地确认这些设备的显示部件，很麻烦，妨碍了手术的顺利进行。
对于此，提出了一种将周边设备的状态信息也汇总显示于内窥镜监视器上的内窥镜系统。另外，还提出了一种在对内窥镜图像进行解析并检测出处置器具正在接近患部的情况下在内窥镜图像中叠加显示警告消息的内窥镜系统(例如，参照日本特开2011-212245号公报)。
在这样的提案中，由于将周边设备的信息、警告消息汇总在内窥镜监视器上，因此手术操作者能够从内窥镜监视器获取需要的信息。
然而，在这些提案中，周边设备的信息、警告消息等状态信息的显示位置设为在内窥镜监视器上设置的特定的位置(固定位置)、或患部附近。因而，在内窥镜监视器上显示着的处置区域的位置变化从而手术操作者注视着的观察区域的位置发生了变化的情况下，由于该观察区域与状态信息的显示位置交错或离散，因此存在可视性降低的问题。
因此，本发明的目的在于提供一种能够不使可视性降低地将周边设备的状态信息叠加显示于内窥镜图像中的内窥镜系统。
发明内容
用于解决问题的方案
本发明的一个方式的内窥镜系统具有：影像信号处理部，其将所输入的内窥镜图像信号变换为能够显示于显示部的信号；状态信息通知必要性判定部，其接收周边设备的状态信息，并判定是否需要向手术操作者通知所述状态信息；视线检测部，其通过对所述手术操作者的视线探测，来检测内窥镜图像中的所述手术操作者的观察位置；观察区域设定部，其基于所述视线检测部的检测结果，设定所述手术操作者的观察对象区域；以及钳子探测部，其通过图像处理来探测所述观察区域中的存在钳子的区域。另外，内窥镜系统还具有：状态显示控制部，其在由所述状态信息通知必要性判定部判定为需要向所述手术操作者通知的情况下，在所述观察区域内除了设定于所述观察位置的周边的显示禁止区域和由所述钳子探测部探测到的区域之外的区域设定用于显示所述状态信息的状态显示区域；以及状态显示叠加部，其在从所述影像信号处理部输出的所述信号中，将所述状态信息叠加于所述状态显示区域。
附图说明
图1是对本发明的实施方式所涉及的内窥镜系统的整体结构的一例进行说明的图。
图2是对内窥镜显示图像生成部的结构的一例进行说明的框图。
图3是对视线检测部的结构的一例进行说明的框图。
图4是对设定观察区域的过程进行说明的流程图。
图5是对检测钳子区域的过程进行说明的流程图。
图6是对显示对象状态信息和显示内容的一例进行说明的表。
图7是对判定是否需要进行状态显示的过程进行说明的流程图。
图8是对设定状态显示位置的过程进行说明的流程图。
图9是对生成内窥镜显示图像的过程进行说明的流程图。
图10是对内窥镜显示图像中的状态显示位置的一例进行说明的图。
图11是对叠加有状态显示的内窥镜显示图像的一例进行说明的图。
图12是对叠加有状态显示的内窥镜显示图像的一例进行说明的图。
图13是对叠加有状态显示的内窥镜显示图像的一例进行说明的图。
具体实施方式
以下，参照附图对实施方式进行说明。
图1是对本发明的实施方式所涉及的内窥镜系统的整体结构的一例进行说明的图。本实施方式的内窥镜系统例如被使用于在内窥镜观察下使用电手术刀等处置器具等来对通过输送二氧化碳等被扩张的患者的腹腔内的患部进行处置的手术中。
如图1所示，内窥镜系统构成为具有：内窥镜1，其插入到体腔内，对患部进行观察或处置；内窥镜处理器2，其对由内窥镜1拍摄得到的影像信号实施规定的信号处理；以及光源装置3。在内窥镜处理器2上连接有显示装置6，该显示装置6用于显示被实施了信号处理的影像。另外，作为进行患部的处置所需要的周边设备，内窥镜系统还具有电手术刀装置4和气腹装置5。电手术刀装置4和气腹装置5连接于显示装置6，使得能够发送表示设备的设定、状态、警告、报错的各种状态信息。此外，周边设备并不限定于电手术刀装置4和气腹装置5，还可以包括例如超声波凝固切开装置等进行手术所需要的其它设备。
内窥镜1具有能够插入到患者的体腔内等的细长的插入部，在插入部的前端配设有例如CCD等摄像元件。此外，插入部可以是软性的，也可以是硬性(在外科手术中使用的硬性内窥镜)的。另外，在内窥镜1中还设置有用于向插入部的前端引导照明光的光导件。
内窥镜处理器2对从摄像元件输出的影像信号实施各种处理，来生成使显示装置6显示的内窥镜图像。具体地说，在针对从摄像元件输出的模拟的影像信号实施AGC处理(自动增益控制处理)、CDS处理(相关双采样处理)等规定的处理之后，变换为数字的影像信号。然后，对数字的影像信号实施白平衡处理、颜色校正处理、畸变校正处理、增强处理等后输出到显示装置6。
光源装置3具有生成照明光的例如灯等光源。从光源照射的照明光被聚光至内窥镜1的光导件的入射端面。此外，作为光源，除了灯以外，还可以使用例如以LED、激光二极管为代表的半导体光源。另外，在使用半导体光源的情况下，可以使用射出白色光的半导体光源，也可以是按R(红)、G(绿)、B(蓝)的颜色成分设置半导体光源，将从这些半导体光源射出的各颜色成分的光进行合成来获得白色光。
显示装置6具有：内窥镜显示图像生成部60，其在从内窥镜处理器2输入的内窥镜图像的规定位置，根据需要叠加从电手术刀装置4、气腹装置5输入的状态信息，来生成内窥镜显示图像；以及显示部68，其显示内窥镜显示图像。
图2是对内窥镜显示图像生成部的结构的一例进行说明的框图。如图2所示，内窥镜显示图像生成部60具有影像信号处理部61、视线检测部62、观察区域设定部63以及钳子探测部64。另外，内窥镜显示图像生成部60还具有状态信息通知必要性判定部65、状态显示控制部66以及状态显示叠加部67。
影像信号处理部61针对从内窥镜处理器2输入的影像信号实施变换为能够显示于显示部68的信号形式等规定的处理。
视线检测部62检测内窥镜图像中的手术操作者的视线位置。视线位置的检测能够使用以往一直进行的方法(检测眼睛的基准点和运动点并通过求出运动点相对于基准点的位置来检测视线的方法)。例如，关于使用将角膜反射的位置作为基准点、将瞳孔的位置作为运动点进行检测来确定视线方向的方法的情况下的视线检测部62的结构进行说明。
图3是对视线检测部的结构的一例进行说明的框图。如图3所示，视线检测部62由红外线发光部621、眼球图像摄像部622以及视线计算部623构成。红外线发光部621例如由红外线LED构成，朝向手术操作者的脸部照射红外线。眼球图像摄像部622例如由红外线摄像机等构成，接收通过红外线的照射而从手术操作者的眼球反射的光，来获取眼球图像。视线计算部623对眼球图像进行分析，计算反射光在角膜上的位置(角膜反射的位置)和瞳孔的位置，来确定视线方向。然后，利用视线方向计算内窥镜图像中的手术操作者的视线位置。视线位置通常被计算为将内窥镜图像的水平方向设为x轴、将垂直方向设为y轴的二维空间内的坐标位置(xe、ye)。
观察区域设定部63在内窥镜图像中设定手术操作者能够瞬间识别信息的区域(观察区域)。图4是对设定观察区域的过程进行说明的流程图。首先，对从视线检测部62输入的在内窥镜图像中的视线位置(xe、ye)进行识别(步骤S1)。接着，使用显示部68的水平方向和垂直方向上的大小、从手术操作者到显示部68的距离、手术操作者能够瞬间识别信息的视野范围(例如，人能够没有眼球运动而识别到详细内容的视野范围、即辨别视野：从视线方向在水平方向上5°、在垂直方向上5°的范围的视野范围)的各信息，在从影像信号处理部61输入的内窥镜图像中设定以视线位置为中心的观察区域(步骤S2)。通过由未图示的设定部件选择实际使用状况的距离、将视线检测部62中所具备的眼球图像摄像部622设置为两个来测量距离，由此求出从手术操作者到显示部68的距离。最后，将所设定的观察区域输出到钳子探测部64和状态显示控制部66(步骤S3)。通过这样，观察区域设定部63在内窥镜图像中设定以视线位置(xe、ye)为中心的观察区域。
钳子探测部64识别在观察区域内是否存在钳子，在存在钳子的情况下，确定其场所(钳子区域)。图5是对检测钳子区域的过程进行说明的流程图。首先，在从影像信号处理部61输入的内窥镜图像中，确定从观察区域设定部63输入的观察区域。然后，将观察区域内作为对象来提取非彩色的区域(步骤S11)。接着，识别所提取出的非彩色区域的形状。在非彩色区域的形状为大致长方形的情况下(步骤S12，是(Yes))，确定为该非彩色区域是钳子区域(步骤S13)。在非彩色区域的形状为大致长方形以外的形状的情况下(步骤S12，否(No))，确定为该非彩色区域不是钳子区域(步骤S14)。最后，将在观察区域内确定出的钳子区域输出到状态显示控制部66(步骤S15)。
此外，在观察区域内存在多个非彩色区域的情况下，针对所有的非彩色区域进行形状的识别。另外，在上述的一例中，着眼于钳子为灰色(银色)～黑色并具有直线外观而体腔内表面(人体组织)大多为暗红色～橙色并具有曲线外观的点，从而着眼于颜色(彩度)和形状来提取钳子区域，但是也可以使用其它方法提取钳子区域。
状态信息通知必要性判定部65判定是否需要将从周边设备输入的状态信息与内窥镜图像叠加显示。在内窥镜系统上通常连接有各种周边设备，从这些设备输出涉及多方面的信息。但是，如果将这些信息全部显示于显示装置6，则有可能导致真正需要的信息被埋没于其它信息中而看漏、或者由于显示内容频繁地切换而手术操作者无法集中于手法操作。因此，预先设定从周边设备输出的信息中的手术操作者进行手法操作所需要的优先级高的信息，仅提取所设定的状态信息，来与内窥镜图像一起显示于显示装置6。
图6是对显示对象状态信息和显示内容的一例进行说明的表。状态信息被大致区分为与周边设备的设定、状态相关的信息以及与警告、报错相关的信息。关于各个信息的信息类型，在手术前针对各周边设备事先设定使显示装置6显示的状态信息(显示对象状态信息)以及输入该状态信息时的显示内容。
如图6所示，例如在气腹装置的情况下，关于设定和状态，将关于设定压力、送气流量、流量模式、排烟模式、送气开始/停止的各项目的状态信息设定为显示对象状态信息。另外，关于警告和报错，将关于不能送气、管堵塞、过压注意的各警报的状态信息设定为显示对象状态信息。关于电手术刀、超声波凝固切开装置及其它需要的周边设备，也与气腹装置同样地设定显示对象状态信息。
状态信息通知必要性判定部65参照事前设定的显示对象状态信息来判定是否使显示装置6显示从周边设备输入的状态信息。
图7是对判定是否需要进行状态显示的过程进行说明的流程图。首先，将从周边设备输入的状态信息与所保存的状态信息进行比较(步骤S21)。状态信息被实时(或者固定间隔)地从周边设备输入到显示装置6。所输入的状态信息用于将最新(最近)的内容保存到未图示的存储器等中。在步骤S21中，关于从周边设备输入的状态信息，将存储器等中保存的状态信息与所输入的状态信息进行比较。例如在从气腹装置5输入了关于设定压力的状态信息的情况下，将存储器等中保存的气腹装置5的设定压力的最近的值与所输入的设定压力的值进行比较。
在所输入的状态信息与所保存的状态信息不同的情况下(步骤S22，是)，判定所输入的状态信息是否符合关于设定和状态的显示对象状态信息(步骤S23)。例如在步骤S22中，在从气腹装置5输入设定压力为8mmHg的意思的状态信息、所保存的最近的气腹装置5的设定压力为6mmHg的情况下，判定为所输入的状态信息与所保存的状态信息不同。
在所输入的状态信息符合关于设定和状态的显示对象状态信息的情况下(步骤S23，是)，判定为需要显示该状态信息，并输出状态显示指令(步骤S25)。
另一方面，在所输入的状态信息不符合关于设定和状态的显示对象状态信息的情况下(步骤S23，否)，判定所输入的状态信息是否符合关于警告和报错的显示对象状态信息(步骤S24)。此外，在判定为所输入的状态信息与所保存的状态信息相等的情况下(步骤S22，否)，也进入步骤S24，判定所输入的状态信息是否符合关于警告和报错的显示对象状态信息。
在所输入的状态信息符合关于警告和报错的显示对象状态信息的情况下(步骤S24，是)，判定为需要显示该状态信息，并输出状态显示指令(步骤S25)。与状态显示指令一起，还同时输出状态信息的显示内容。另一方面，在所输入的状态信息不符合关于警告和报错的显示对象状态信息的情况下(步骤S24，否)，判定为不需要显示该状态信息，状态显示指令设为不输出(步骤S26)。
此外，在从周边设备同时输出了多个状态信息的情况下，关于各个状态信息，独立地实施图7所示的步骤S21到步骤S26的一系列处理，判定是否输出状态显示指示。
例如在从气腹装置5输入设定压力为8mmHg的意思的状态信息并且同时地从电手术刀装置4输入了断线异常的警告的情况下，判定是否需要显示与气腹装置5的设定压力相关的状态信息，并且判定是否需要显示与电手术刀装置4的断线异常的警告相关的状态信息。例如，在气腹装置5的设定压力相对于所保存的最近的值没有变化并继续输入了电手术刀装置4的断线异常的警告的情况下，关于气腹装置5的设定压力判定为不需要显示，关于电手术刀装置4的断线异常的警告判定为需要显示。因而，在该情况下，仅关于电手术刀装置4的断线异常的警告输出状态显示指令。
状态显示控制部66在内窥镜图像中设定要叠加的状态信息的显示位置。然后，当从状态信息通知必要性判定部65输入状态显示指令时，将显示位置和显示内容输出到状态显示叠加部67。图8是对设定状态显示位置的过程进行说明的流程图。首先，在从观察区域设定部63输入的观察区域内，设定由于可能妨碍手法操作而不可显示状态信息的区域(以下表示为显示禁止区域)(步骤S31)。例如，将观察区域在水平方向上以三等分的方式进行分割，并且在垂直方向上以三等分的方式进行分割，从而分割成九个区域。将该九个区域中的包含视线位置的中央的区域设定为显示禁止区域。
接着，将观察区域在垂直方向上以二等分的方式进行分割，判定在下半部分区域中是否存在能够显示状态信息的空间(步骤S32)。一般地，在人上下移动视线的情况下，相比于向上方向移动，向下方向移动施加于眼睛的负荷较少。因而，先从观察区域的下半部分区域开始搜索有无能够显示状态信息的空间。在观察区域的下半部分区域中，除去在步骤S31中设定的显示禁止区域和从钳子探测部64输入的钳子区域，来确定能够显示状态信息的区域。然后，判定在该区域内是否存在用于配置预先设定的大小的状态显示区域的空间。
在判定为在观察区域的下半部分区域内存在能够显示状态信息的空间的情况下(步骤S32，是)，在该区域内设定状态信息显示位置(步骤S33)。期望状态信息显示位置是无需极力地左右移动视线且不易成为正在注视的视线位置的阻碍的位置。因而，例如，将与视线位置最近的水平位置且接近观察区域的边缘的垂直位置设为状态信息显示位置。
另一方面，在判定为在观察区域的下半部分区域内不存在能够显示状态信息的空间的情况下(步骤S32，否)，在观察区域的上半部分区域内设定状态信息显示位置(步骤S34)。与在观察区域的下半部分区域内进行设定的情况同样地，期望状态信息显示位置是无需极力地左右移动视线且不易成为正在注视的视线位置的阻碍的位置。因而，例如，将与视线位置最近的水平位置且接近观察区域的边缘的垂直位置设为状态信息显示位置。
最后，输出在步骤S33或步骤S34中设定的状态信息显示位置(步骤S35)。
当从状态显示控制部66向状态显示叠加部67输入状态信息的显示内容和显示位置时，状态显示叠加部67在从影像信号处理部61输入的内窥镜图像中叠加状态显示，生成内窥镜显示图像并输出。此外，在没有来自状态显示控制部67的输入的情况下，将从影像信号处理部61输入的内窥镜图像直接作为内窥镜显示图像输出。
显示部68显示从状态显示叠加部67输入的内窥镜显示图像。
使用图9和图10说明在内窥镜显示图像生成部60中基于从内窥镜处理器2输入的内窥镜图像生成使显示部68显示的内窥镜显示图像的一系列的过程。图9是对生成内窥镜显示图像的过程进行说明的流程图，图10是对内窥镜显示图像中的状态显示位置的一例进行说明的图。
首先，在视线检测部62中，检测输入到影像信号处理部61的内窥镜图像中的手术操作者的视线位置(步骤S41)。接着，在观察区域设定部63中，设定该内窥镜图像中的观察区域(步骤S42)。具体地说，通过执行图4所示的一系列的过程来设定观察区域。例如，在图10中，在视线位置603位于×记号所示的位置的情况下，观察区域604被设定为由粗线包围的大致矩形状的区域。
接着，在钳子探测部64中，探测观察区域内的钳子区域(步骤S43)。具体地说，通过执行图5所示的一系列的过程来设定钳子区域。例如，在图10中，钳子区域605被设定为添加有斜线的区域(观察区域的左侧中央部的区域和右上角部的区域两处区域)。
接着，在状态显示控制部66中，设定状态显示位置(步骤S44)。具体地说，通过执行图8所示的一系列的过程来设定状态显示位置。例如，在图10中，在观察区域的下半部分区域中除了显示禁止区域606(由虚线包围的大致矩形状的区域)和钳子区域605之外的区域内，由于存在能够进行状态显示的区域，因此状态显示位置607被设定于由一点划线包围的大致矩形状区域的位置。
接着，状态显示控制部66判定是否从状态信息通知必要性判定部65输入了状态显示指令(步骤S44)。在输入了状态显示指令的情况下(步骤S44，是)，状态显示叠加部67针对从影像信号处理部61输入的内窥镜图像，将从状态显示控制部66输入的状态显示内容叠加于状态显示位置(在步骤S44中设定的状态显示位置)，来生成内窥镜显示图像并输出到显示部68。然后，返回到步骤S41，来生成下一个内窥镜显示图像。
图11、图12、图13是对叠加有状态显示的内窥镜显示图像的一例进行说明的图。图11表示从作为周边设备的电手术刀装置4对状态信息通知必要性判定部65输入了对电极板接触不良的报错作为状态信息的情况下的内窥镜显示图像的一例。
图12表示从作为周边设备的超声波凝固切开装置对状态信息通知必要性判定部65输入了超声波的输出水平为3的意思的状态信息的情况下的内窥镜显示图像的一例。此外，在超声波的输出水平从3以外的数值被变更为3的情况下，如图12所示那样显示状态信息，在输出水平保持着3的情况下，不显示状态信息。
图13表示从作为周边设备的气腹装置5对状态信息通知必要性判定部65输入了设定压力为8mmHg的意思的状态信息的情况下的内窥镜显示图像的一例。在图13中，示出了如下的情况：由于钳子区域而无法在观察区域的下半部分区域内确保状态显示区域，因此在观察区域的上半部分区域内设定状态显示位置。此外，在气腹装置5的设定压力从8mmHg以外的数值被变更为8mmHg的情况下，如图13所示那样显示状态信息，但是在设定压力保持着8mmHg的情况下，不显示状态信息。
另一方面，在没有输入状态显示指令的情况下(步骤S44，否)，状态显示叠加部67将从影像信号处理部61输入的内窥镜图像直接作为内窥镜显示图像输出到显示部68，并返回到步骤S41来生成下一个内窥镜显示图像。
这样，根据本实施方式，当从周边设备输入设定和状态、警告消息等状态信息时，判定是否为预先设定的显示对象状态信息。在是显示对象状态信息的情况下，在内窥镜图像中确定手术操作者能够瞬间识别信息的视野范围(观察区域)，在观察区域内除了钳子区域之外的区域内设定状态显示位置，并显示状态信息。因而，能够不使可视性降低地将周边设备的状态信息叠加显示于内窥镜图像。
此外，在从周边设备输入的状态信息为关于设定和状态的信息的情况下，设为仅在设定值、状态发生了变化的情况下显示状态信息，但是也可以由计时器等设定状态信息的显示时间，在手术操作者所期望的时间内连续地进行显示。
另外，在上述的说明中，在状态信息通知必要性判定部65中判定是否将状态信息叠加显示于内窥镜图像，仅被判定为需要显示的状态信息被自动地显示，但是也可以设为如下结构：设置状态信息显示按钮等，除了自动显示以外，还能够在手术操作者所期望的定时显示状态信息。
并且，在上述的说明中，在显示装置6内设置了内窥镜显示图像生成部60，但是也可以构成为设置在内窥镜处理器2内。
本说明书中的各“部”是与实施方式的各功能对应的概念，并不必须一一对应确定的硬件、软件程序。因而，在本说明书中，假定具有实施方式的各功能的虚拟的电路模块(部)来对实施方式进行了说明。另外，本实施方式中的各过程的各步骤只要不违反其性质，则也可以变更执行顺序，可以多个同时执行、或者每次执行时都以不同的顺序执行。并且，也可以通过硬件来实现本实施方式中的各过程的各步骤的全部或一部分。
对本发明的几个实施方式进行了说明，但是这些实施方式是作为例子所例示的实施方式，并非意图限定发明的范围。这些新的实施方式能够以其它各种方式实施，能够在不脱离发明的要旨的范围内进行各种省略、置换、变更。这些实施方式、实施方式的变形包含于发明的范围、主旨，并且包含于权利要求书所记载的发明及其均等的范围。
本申请是将2016年4月19日在日本申请的特愿2016-83796号作为主张优先权的基础进行申请的，上述的公开内容设为被引用于本申请说明书、权利要求书中。

Claims (5)

1.一种内窥镜系统，其特征在于，具有：
影像信号处理部，其将所输入的内窥镜图像信号变换为能够显示于显示部的信号；
状态信息通知必要性判定部，其接收周边设备的状态信息，并判定是否需要向手术操作者通知所述状态信息；
视线检测部，其通过对所述手术操作者的视线探测，来检测内窥镜图像中的所述手术操作者的观察位置；
观察区域设定部，其基于所述视线检测部的检测结果，设定所述手术操作者的观察对象区域；
钳子探测部，其通过图像处理来探测所述观察区域中的存在钳子的区域；
状态显示控制部，其在由所述状态信息通知必要性判定部判定为需要向所述手术操作者通知的情况下，在所述观察区域内除了设定于所述观察位置的周边的显示禁止区域和由所述钳子探测部探测到的区域之外的区域设定用于显示所述状态信息的状态显示区域；以及
状态显示叠加部，其在从所述影像信号处理部输出的所述信号中，将所述状态信息叠加于所述状态显示区域。
2.根据权利要求1所述的内窥镜系统，其特征在于，
所述状态显示区域配置于所述显示禁止区域的附近。
3.根据权利要求1所述的内窥镜系统，其特征在于，
在所述观察区域的下半部分区域内能够设定所述状态显示区域的情况下，所述状态显示控制部将所述状态显示区域设定于所述观察区域的下半部分区域的边缘且水平方向上的位置与所述观察位置最近的位置。
4.根据权利要求1所述的内窥镜系统，其特征在于，
在所述观察区域的下半部分区域内无法设定所述状态显示区域的情况下，所述状态显示控制部将所述状态显示区域设定于所述观察区域的上半部分区域的边缘且水平方向上的位置与所述观察位置最近的位置。
5.根据权利要求1至4中的任一项所述的内窥镜系统，其特征在于，
在从所述周边设备输入的所述状态信息为警告或警报的情况下，在输入所述状态信息的期间内，在所述状态显示区域持续地显示所述状态信息。
CN201780016433.8A 2016-04-19 2017-03-09 内窥镜系统 Active CN108778093B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016083796 2016-04-19
JP2016-083796 2016-04-19
PCT/JP2017/009563 WO2017183353A1 (ja) 2016-04-19 2017-03-09 内視鏡システム

Publications (2)

Publication Number Publication Date
CN108778093A true CN108778093A (zh) 2018-11-09
CN108778093B CN108778093B (zh) 2021-01-05

Family

ID=60116656

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780016433.8A Active CN108778093B (zh) 2016-04-19 2017-03-09 内窥镜系统

Country Status (5)

Country Link
US (1) US20180344138A1 (zh)
JP (1) JP6355875B2 (zh)
CN (1) CN108778093B (zh)
DE (1) DE112017002074T5 (zh)
WO (1) WO2017183353A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113491516A (zh) * 2020-04-02 2021-10-12 麦格(韩国)医疗器械有限公司 显示与导管位置变化对应地确定的信息的导航
CN114025674A (zh) * 2019-08-09 2022-02-08 富士胶片株式会社 内窥镜装置、控制方法、控制程序及内窥镜系统
US11481179B2 (en) 2018-09-07 2022-10-25 Sony Corporation Information processing apparatus and information processing method

Families Citing this family (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11871901B2 (en) 2012-05-20 2024-01-16 Cilag Gmbh International Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage
US11801098B2 (en) 2017-10-30 2023-10-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11510741B2 (en) 2017-10-30 2022-11-29 Cilag Gmbh International Method for producing a surgical instrument comprising a smart electrical system
US11793537B2 (en) 2017-10-30 2023-10-24 Cilag Gmbh International Surgical instrument comprising an adaptive electrical system
US11564756B2 (en) 2017-10-30 2023-01-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11911045B2 (en) 2017-10-30 2024-02-27 Cllag GmbH International Method for operating a powered articulating multi-clip applier
EP3705024A4 (en) * 2017-10-31 2020-11-11 Fujifilm Corporation INSPECTION ASSISTANCE DEVICE, ENDOSCOPE DEVICE, INSPECTION ASSISTANCE PROCESS AND INSPECTION ASSISTANCE PROGRAM
US11166772B2 (en) 2017-12-28 2021-11-09 Cilag Gmbh International Surgical hub coordination of control and communication of operating room devices
US11678881B2 (en) 2017-12-28 2023-06-20 Cilag Gmbh International Spatial awareness of surgical hubs in operating rooms
US11903601B2 (en) 2017-12-28 2024-02-20 Cilag Gmbh International Surgical instrument comprising a plurality of drive systems
US11633237B2 (en) 2017-12-28 2023-04-25 Cilag Gmbh International Usage and technique analysis of surgeon / staff performance against a baseline to optimize device utilization and performance for both current and future procedures
US11857152B2 (en) * 2017-12-28 2024-01-02 Cilag Gmbh International Surgical hub spatial awareness to determine devices in operating theater
US11202570B2 (en) 2017-12-28 2021-12-21 Cilag Gmbh International Communication hub and storage device for storing parameters and status of a surgical device to be shared with cloud based analytics systems
US11076921B2 (en) 2017-12-28 2021-08-03 Cilag Gmbh International Adaptive control program updates for surgical hubs
US11659023B2 (en) 2017-12-28 2023-05-23 Cilag Gmbh International Method of hub communication
US11896322B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Sensing the patient position and contact utilizing the mono-polar return pad electrode to provide situational awareness to the hub
US20190206569A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Method of cloud based data analytics for use with the hub
US11744604B2 (en) 2017-12-28 2023-09-05 Cilag Gmbh International Surgical instrument with a hardware-only control circuit
US11818052B2 (en) 2017-12-28 2023-11-14 Cilag Gmbh International Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11832899B2 (en) 2017-12-28 2023-12-05 Cilag Gmbh International Surgical systems with autonomously adjustable control programs
US11771487B2 (en) 2017-12-28 2023-10-03 Cilag Gmbh International Mechanisms for controlling different electromechanical systems of an electrosurgical instrument
US11179175B2 (en) 2017-12-28 2021-11-23 Cilag Gmbh International Controlling an ultrasonic surgical instrument according to tissue location
US11109866B2 (en) 2017-12-28 2021-09-07 Cilag Gmbh International Method for circular stapler control algorithm adjustment based on situational awareness
US11612444B2 (en) 2017-12-28 2023-03-28 Cilag Gmbh International Adjustment of a surgical device function based on situational awareness
US11013563B2 (en) 2017-12-28 2021-05-25 Ethicon Llc Drive arrangements for robot-assisted surgical platforms
US12096916B2 (en) 2017-12-28 2024-09-24 Cilag Gmbh International Method of sensing particulate from smoke evacuated from a patient, adjusting the pump speed based on the sensed information, and communicating the functional parameters of the system to the hub
US10758310B2 (en) 2017-12-28 2020-09-01 Ethicon Llc Wireless pairing of a surgical device with another device within a sterile surgical field based on the usage and situational awareness of devices
US11464559B2 (en) 2017-12-28 2022-10-11 Cilag Gmbh International Estimating state of ultrasonic end effector and control system therefor
US11389164B2 (en) 2017-12-28 2022-07-19 Cilag Gmbh International Method of using reinforced flexible circuits with multiple sensors to optimize performance of radio frequency devices
US11937769B2 (en) 2017-12-28 2024-03-26 Cilag Gmbh International Method of hub communication, processing, storage and display
US11969216B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution
US12062442B2 (en) 2017-12-28 2024-08-13 Cilag Gmbh International Method for operating surgical instrument systems
US11969142B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws
US20190201146A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Safety systems for smart powered surgical stapling
US11998193B2 (en) 2017-12-28 2024-06-04 Cilag Gmbh International Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation
US11786245B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Surgical systems with prioritized data transmission capabilities
US11666331B2 (en) 2017-12-28 2023-06-06 Cilag Gmbh International Systems for detecting proximity of surgical end effector to cancerous tissue
US11864728B2 (en) 2017-12-28 2024-01-09 Cilag Gmbh International Characterization of tissue irregularities through the use of mono-chromatic light refractivity
US11026751B2 (en) 2017-12-28 2021-06-08 Cilag Gmbh International Display of alignment of staple cartridge to prior linear staple line
US11376002B2 (en) 2017-12-28 2022-07-05 Cilag Gmbh International Surgical instrument cartridge sensor assemblies
US11132462B2 (en) 2017-12-28 2021-09-28 Cilag Gmbh International Data stripping method to interrogate patient records and create anonymized record
US11257589B2 (en) 2017-12-28 2022-02-22 Cilag Gmbh International Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes
US10892995B2 (en) 2017-12-28 2021-01-12 Ethicon Llc Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11896443B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Control of a surgical system through a surgical barrier
US11786251B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Method for adaptive control schemes for surgical network control and interaction
US11259830B2 (en) 2018-03-08 2022-03-01 Cilag Gmbh International Methods for controlling temperature in ultrasonic device
US11678927B2 (en) 2018-03-08 2023-06-20 Cilag Gmbh International Detection of large vessels during parenchymal dissection using a smart blade
US11399858B2 (en) 2018-03-08 2022-08-02 Cilag Gmbh International Application of smart blade technology
US11259806B2 (en) 2018-03-28 2022-03-01 Cilag Gmbh International Surgical stapling devices with features for blocking advancement of a camming assembly of an incompatible cartridge installed therein
US11090047B2 (en) 2018-03-28 2021-08-17 Cilag Gmbh International Surgical instrument comprising an adaptive control system
US11751872B2 (en) 2019-02-19 2023-09-12 Cilag Gmbh International Insertable deactivator element for surgical stapler lockouts
US11331100B2 (en) 2019-02-19 2022-05-17 Cilag Gmbh International Staple cartridge retainer system with authentication keys
JPWO2023017651A1 (zh) * 2021-08-13 2023-02-16

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004033461A (ja) * 2002-07-03 2004-02-05 Pentax Corp 付加情報表示装置、付加情報表示方法および内視鏡システム
JP2004041778A (ja) * 2003-10-20 2004-02-12 Olympus Corp 体腔内観察システム
CN102821670A (zh) * 2010-03-31 2012-12-12 富士胶片株式会社 内窥镜观察辅助系统、方法、装置和程序
CN104055478A (zh) * 2014-07-08 2014-09-24 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104335580A (zh) * 2012-06-14 2015-02-04 奥林巴斯株式会社 图像处理装置和立体图像观察系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5788688A (en) * 1992-11-05 1998-08-04 Bauer Laboratories, Inc. Surgeon's command and control
US6733441B2 (en) * 2000-05-11 2004-05-11 Olympus Corporation Endoscope device
US20040030367A1 (en) * 2002-08-09 2004-02-12 Olympus Optical Co., Ltd. Medical control device, control method for medical control device, medical system device and control system
JP5385163B2 (ja) * 2010-01-06 2014-01-08 オリンパスメディカルシステムズ株式会社 内視鏡システム
JP5771598B2 (ja) * 2010-03-24 2015-09-02 オリンパス株式会社 内視鏡装置
JP5826727B2 (ja) * 2012-08-27 2015-12-02 オリンパス株式会社 医用システム
WO2015020093A1 (ja) * 2013-08-08 2015-02-12 オリンパスメディカルシステムズ株式会社 手術画像観察装置
JP6402366B2 (ja) * 2013-08-26 2018-10-10 パナソニックＩｐマネジメント株式会社 ３次元表示装置および３次元表示方法
JP6249769B2 (ja) * 2013-12-27 2017-12-20 オリンパス株式会社 内視鏡装置、内視鏡装置の作動方法及びプログラム
JP2016000065A (ja) * 2014-06-11 2016-01-07 ソニー株式会社 画像処理装置、画像処理方法、プログラム、および内視鏡システム
JP6391422B2 (ja) 2014-10-23 2018-09-19 キヤノン株式会社 記録方法および記録装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004033461A (ja) * 2002-07-03 2004-02-05 Pentax Corp 付加情報表示装置、付加情報表示方法および内視鏡システム
JP2004041778A (ja) * 2003-10-20 2004-02-12 Olympus Corp 体腔内観察システム
CN102821670A (zh) * 2010-03-31 2012-12-12 富士胶片株式会社 内窥镜观察辅助系统、方法、装置和程序
CN104335580A (zh) * 2012-06-14 2015-02-04 奥林巴斯株式会社 图像处理装置和立体图像观察系统
CN104055478A (zh) * 2014-07-08 2014-09-24 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104055478B (zh) * 2014-07-08 2016-02-03 金纯� 基于视线追踪控制的医用内窥镜操控系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11481179B2 (en) 2018-09-07 2022-10-25 Sony Corporation Information processing apparatus and information processing method
CN114025674A (zh) * 2019-08-09 2022-02-08 富士胶片株式会社 内窥镜装置、控制方法、控制程序及内窥镜系统
CN113491516A (zh) * 2020-04-02 2021-10-12 麦格(韩国)医疗器械有限公司 显示与导管位置变化对应地确定的信息的导航

Also Published As

Publication number Publication date
JPWO2017183353A1 (ja) 2018-07-05
JP6355875B2 (ja) 2018-07-11
WO2017183353A1 (ja) 2017-10-26
DE112017002074T5 (de) 2019-01-24
CN108778093B (zh) 2021-01-05
US20180344138A1 (en) 2018-12-06

Similar Documents

Publication Publication Date Title
CN108778093A (zh) 内窥镜系统
US20220331050A1 (en) Systems and methods for changing display overlay of surgical field view based on triggering events
US9967475B2 (en) Head-mounted displaying of magnified images locked on an object of interest
US10073515B2 (en) Surgical navigation system and method
JP6103827B2 (ja) 画像処理装置および立体画像観察システム
US10854168B2 (en) Information processing apparatus, information processing method, and information processing system
US20210325649A1 (en) System and method to automatically adjust illumination during a microsurgical procedure
CN105873539B (zh) 医疗系统
KR102661653B1 (ko) 안구 이미징 디바이스들의 정렬을 위한 방법들 및 시스템들
US11931292B2 (en) System and method for improved electronic assisted medical procedures
US11871991B2 (en) Image processing method, program, and image processing device
US20230071841A1 (en) System and method for improved electronic assisted medical procedures
US11514553B2 (en) Image processing device, image processing method, and intraocular image processing system
CN112384123A (zh) 医学观察系统、医学观察设备和医学观察设备的驱动方法
WO2022163383A1 (ja) 画像処理装置、画像処理方法及び手術顕微鏡システム
EP4136656A1 (en) Systems and methods for changing display overlay of surgical field view based on triggering events
CN117441212A (zh) 用渲染元素将混合直接可视化以显示混合元素以及在屏幕上和在屏幕外正在发生的动作
WO2022219498A1 (en) Mixing directly visualized with rendered elements to display blended elements and actions happening on-screen and off-screen
CN117461093A (zh) 基于触发事件来改变外科视野的显示叠加项的系统和方法
JP2022116440A (ja) 医療用画像処理装置及び医療用観察システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant