CN115135224A - 内窥镜检查辅助装置、内窥镜检查辅助方法及内窥镜检查辅助程序 - Google Patents
内窥镜检查辅助装置、内窥镜检查辅助方法及内窥镜检查辅助程序 Download PDFInfo
- Publication number
- CN115135224A CN115135224A CN202180015801.3A CN202180015801A CN115135224A CN 115135224 A CN115135224 A CN 115135224A CN 202180015801 A CN202180015801 A CN 202180015801A CN 115135224 A CN115135224 A CN 115135224A
- Authority
- CN
- China
- Prior art keywords
- endoscope
- image
- treatment
- subject
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Radiology & Medical Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Endoscopes (AREA)
Abstract
本发明提供一种能够容易地掌握在内窥镜检查中实施了处置的部位的图像选择辅助装置。在内窥镜检查辅助装置中将在将内窥镜插入到受检体内的状态下通过内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在该状态下使用内窥镜进行的处置的处置信息存储于存储器中。然后,在内窥镜检查辅助装置中根据所存储的多个拍摄图像数据及处置信息来生成将多个拍摄图像数据进行合成而获得的受检体内的大肠展开图像(91),其中,该大肠展开图像(91)附加了表示进行了处置的受检体内的位置的活检部位标记(91a),并使所生成的大肠展开图像(91)显示在显示装置上。
Description
技术领域
本发明涉及一种辅助基于内窥镜的检查的内窥镜检查辅助装置、内窥镜检查辅助方法及内窥镜检查辅助程序。
背景技术
以往,已知有在通过内窥镜进行检查时,将通过内窥镜获得的图像与拍摄时刻建立关联而显示的结构。例如,在专利文献1中,记载有生成按照时间序列配置根据检查数据的状态值的变化而提取的事件的检查推移画面的结构。
并且,在专利文献2中,记载有根据拍摄管腔器官的内表面而获得的多个内窥镜图像来生成虚拟地表示将管腔器官沿延伸方向切开并展开的状态的展开图像的结构。
并且,在专利文献3中,记载有在作为处置器具的活检钳上设置源线圈,通过触发活检操作信号的开启状态来记录活检位置,从而自动记录在体腔内的所希望的检查区域中实施了活检的位置的结构。
以往技术文献
专利文献
专利文献1:日本特开2017-86685号公报
专利文献2:日本特开2016-43033号公报
专利文献3:日本特开2006-280592号公报
发明内容
发明要解决的技术课题
然而,在上述以往技术中,无法容易地掌握在内窥镜检查中实施了活检等处置的部位。尤其,大肠的内表面难以仅通过图像来判断观察部位,因此难以掌握在大肠内的哪个部位实施了活检等处置。
例如,如专利文献1,在显示按照时间序列配置所提取的事件的检查推移画面的结构中,能够掌握实施了活检等处置的时刻,但是不容易掌握实施了活检等处置的部位。
并且,如专利文献2,在生成管腔器官的展开图像的结构中,能够掌握管腔器官的内表面的状态,但是无法掌握实施了活检等处置的部位。
并且,在专利文件3中也没有公开解决如上所述的课题的手段。
本发明是鉴于上述情况而完成的,其目的在于提供一种能够容易地掌握在内窥镜检查中实施了处置的部位的内窥镜检查辅助装置、内窥镜检查辅助方法及内窥镜检查辅助程序。
用于解决技术课题的手段
本发明的内窥镜检查辅助装置具有处理器和存储器,上述存储器存储在将内窥镜插入到受检体内的状态下通过上述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在上述状态下使用上述内窥镜进行的处置的处置信息,上述处理器根据上述多个拍摄图像数据及上述处置信息来生成将上述多个拍摄图像数据进行合成而获得的上述受检体内的展开图像,其中,上述展开图像附加了表示进行了上述处置的上述受检体内的位置的信息,并使所生成的上述展开图像显示在显示装置上。
本发明的内窥镜检查辅助方法包括如下处理:存储在将内窥镜插入到受检体内的状态下通过上述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在上述状态下使用上述内窥镜进行的处置的处置信息,根据上述多个拍摄图像数据及上述处置信息来生成将上述多个拍摄图像数据进行合成而获得的上述受检体内的展开图像,其中,上述展开图像附加了表示进行了上述处置的上述受检体内的位置的信息,并使所生成的上述展开图像显示在显示装置上。
本发明的内窥镜检查辅助程序用于使计算机执行如下处理:存储在将内窥镜插入到受检体内的状态下通过上述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在上述状态下使用上述内窥镜进行的处置的处置信息,根据上述多个拍摄图像数据及上述处置信息来生成将上述多个拍摄图像数据进行合成而获得的上述受检体内的展开图像,其中,上述展开图像附加了表示进行了上述处置的上述受检体内的位置的信息,并使所生成的上述展开图像显示在显示装置上。
发明效果
根据本发明,能够提供一种能够容易地掌握在内窥镜检查中实施了处置的部位的内窥镜检查辅助装置、内窥镜检查辅助方法及内窥镜检查辅助程序。
附图说明
图1是表示医院内部系统整体结构的一例的图。
图2是表示图1所示的系统中的内窥镜部门系统的概略结构的图。
图3是表示图2所示的内窥镜部门系统20中的客户端PC22的内部结构的框图。
图4是表示客户端PC22的应用的基本画面的一例的图。
图5是表示内窥镜装置24的一例的图。
图6是表示图5所示的内窥镜装置24的内部结构的示意图。
图7是表示由图6所示的光源装置5产生的光的光谱的一例的图。
图8是表示基于图像处理装置23的静止图像的生成处理的一例的流程图。
图9是表示内窥镜检查及大肠展开图像的一例的图。
具体实施方式
以下,参考附图并对本发明的实施方式进行说明。
(实施方式的一例)
图1是表示医院内部系统整体结构的一例的图。图1所示的系统具备医院信息系统(HIS:Hospital Information System)10、内窥镜部门系统20、病理部门系统30、医用图像保管系统40及其他部门系统50,它们能够与医院内部LAN(Local Area Network:局域网)60连接而彼此协作。
HIS10为包含医疗事务会计系统、诊疗预约系统、诊疗信息系统等的综合系统,并且具有电子病历数据库等。在电子病历数据库中保管有记录了患者的诊疗信息的电子病历。
若发出与从其他诊疗科向内窥镜部门进行检查委托时的检查的委托(指令)相关的信息(以下,称为检查委托信息),则该信息经由HIS10发送到内窥镜部门系统20。
在检查委托信息中,例如包含患者信息、指令键信息(“指令编号”“发生日期和时间”等)、委托源信息(“委托科名”“委托医生名”“委托日期”等)、指令信息(“委托病名”“检查目的”“检查种类”“检查项目”“检查部位”“评论”等)、检查预约信息(“检查日期”“实施时刻”等)等。患者信息为与患者相关的信息,并且包含作为患者固有的信息的“患者ID”、“患者姓名”、“出生年月日”、“年龄”、“性别”、“住院/门诊区分”等。
内窥镜部门系统20为用于进行内窥镜部门的管理的系统。
病理部门系统30为用于进行病理部门的管理的系统。
医用图像保管系统40为电子保存、搜索、分析来自内窥镜装置、CT(ComputedTomography:计算机断层扫描)、MRI(Magnetic Resonance Imaging:磁共振成像)等医疗图像诊断装置的检查图像的系统。医用图像保管系统40例如可以为PACS(Picture Archivingand Communication Systems:医学影像存档与传输系统),也可以为能够保存医疗用图像的其他系统。
其他部门系统50为用于进行其他部门的管理的系统。
图2是表示图1所示的系统中的内窥镜部门系统的概略结构的图。在内窥镜部门中包括受理处20A、前处置室20B、多个内窥镜检查室(以下为检查室)20C、清洗室20D及洽谈室(conference room)20E。
受理处20A为进行检查的受理的地点。前处置室20B为用于进行在内窥镜检查之前进行的问诊及前处置的房间。检查室20C为用于进行内窥镜检查的房间。清洗室20D为用于进行在内窥镜检查中所使用的观测器等的清洗的房间。
图2所示的内窥镜部门系统20具备内窥镜部门服务器21、多个客户端PC(PersonalComputer:个人电脑)22、图像处理装置23、内窥镜装置24、清洗管理装置25及清洗机26。内窥镜部门服务器21、多个客户端PC22、图像处理装置23及清洗管理装置25与部门内部LAN27连接。部门内部LAN27与医院内部LAN60连接。作为一例,本发明的内窥镜检查辅助装置能够适用于图像处理装置23中。
内窥镜装置24具备在前端具有摄像元件的插入部(观测器),并将通过摄像元件的连续拍摄而获得的连续的拍摄图像数据输入到图像处理装置23中。在图5中,对内窥镜装置24的结构例在后面叙述。
图像处理装置23与设置有图像处理装置23的检查室20C的内窥镜装置24连接。通过内窥镜装置24的连续拍摄而获得的拍摄图像数据连续输入到图像处理装置23中。图像处理装置23生成基于从内窥镜装置24连续输入的拍摄图像数据中满足特定条件的拍摄图像数据的静止图像。
具体而言,图像处理装置23根据从内窥镜装置24输入的拍摄图像数据,并由AI(Artificial Intelligence:人工智能)进行分析。然后,图像处理装置23生成基于从内窥镜装置24连续输入的拍摄图像数据中基于分析的结果时的拍摄图像数据的静止图像。
例如,在通过基于从内窥镜装置24输入的拍摄图像数据的图像识别来检测内窥镜装置24的观测器的前端到达奇点(肛门或回盲部等)时,图像处理装置23提取从该时刻起的多个拍摄图像数据。然后,图像处理装置23针对所提取的多个拍摄图像数据中的每一个生成静止图像。
并且,在通过基于从内窥镜装置24输入的拍摄图像数据的图像识别来检测使用了内窥镜装置24的内窥镜的处置的实施时,图像处理装置23提取该时刻的拍摄图像数据。该处置例如为使用了设置于内窥镜装置24的内窥镜上的活检钳的活检等处置。若使用活检钳进行活检,则在拍摄图像数据的图像中映入活检钳。因此,图像处理装置23通过基于拍摄图像数据的图像识别来检测映入图像中的活检钳,从而能够检测使用了活检钳的活检。
并且,图像处理装置23在所生成的静止图像中附加表示在获得该静止图像时的图像处理装置23的内部时刻的拍摄时刻信息。
在将本发明的内窥镜检查辅助装置适用于图像处理装置23中的情况下,图像处理装置23存储通过内窥镜装置24的多次拍摄而获得的多个拍摄图像数据和表示使用内窥镜装置24进行的处置的处置信息。并且,图像处理装置23根据所存储的多个拍摄图像数据及处置信息来生成将多个拍摄图像数据进行合成而获得的受检体内的展开图像,其中,该展开图像附加了表示进行了上述处置的受检体内的位置的信息。然后,图像处理装置23使所生成的展开图像显示在其他显示装置(例如客户端PC22的显示部22b)上。对这些图像处理装置23的处理在后面叙述。
图像处理装置23将所生成的静止图像、拍摄时刻及展开图像经由部门内部LAN27发送到内窥镜部门服务器21中。由图像处理装置23发送的静止图像及拍摄时刻信息例如在内窥镜部门服务器21的控制下,由图1所示的医用图像保管系统40保管。
清洗机26和清洗管理装置25设置于清洗室20D中。清洗机26为进行在内窥镜检查中所使用的观测器等的清洗的设备。
清洗管理装置25与清洗机26连接,并且为用于将基于清洗机26的清洗履历等信息存储于内窥镜部门服务器21中的计算机。
内窥镜部门服务器21为集中控制客户端PC22、图像处理装置23及清洗管理装置25的计算机。在内窥镜部门服务器21中内置有数据库DB,在该数据库DB中存储有各种信息(检查委托信息、检查结果信息等)。
在客户端PC22中安装有规定的应用程序,通过该程序,能够进行记录于数据库DB中的数据的参考及编辑、数据库中的数据的存储等。
图3是表示图2所示的内窥镜部门系统20中的客户端PC22的内部结构的框图。如图3所示,客户端PC22由输入部22a、显示部22b、记录部22c、收发部22d及控制部22e构成。
输入部22a为用于进行各种输入的输入机构,并由键盘、触摸面板等输入设备或鼠标、轨迹球等指示设备构成。
显示部22b为用于进行图像、报告等各种显示的显示器,并由LCD(Liquid CrystalDisplay:液晶显示器)或CRT(Cathode Ray Tube:阴极射线管)等构成。
记录部22c由用于记录各种数据的硬盘等构成。
收发部22d由收发接口电路等构成,并执行经由部门内部LAN27收发各种指示、各种要求及各种数据的处理。
控制部22e包括执行程序而进行处理的各种处理器、RAM(Random Access Memory:随机存取存储器)及ROM(Read Only Memory:只读存储器)。
作为各种处理器,包括执行程序而进行各种处理的通用的处理器即CPU(CentralProcessing Unit:中央处理器)、FPGA(Field Programmable Gate Array:现场可编程阵列)等在制造后能够变更电路结构的处理器即可编程逻辑器件(Programmable LogicDevice:PLD)或ASIC(Application Specific Integrated Circuit:专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器即专用电路等。
更具体而言,这些各种处理器的结构为将半导体元件等电路元件组合而成的电路。
控制部22e可以由各种处理器中的1个构成,也可以由相同种类或不同种类的2个以上的处理器的组合(例如,多个FPGA的组合或CPU与FPGA的组合)构成。
控制部22e按照经由上述程序、部门内部LAN27从外部发送的各种要求及从输入部22a输入的指示信息等进行客户端PC22的各部的控制。
对客户端PC22的内部结构进行了说明,但是图像处理装置23例如由图3所示的收发部22d及控制部22e构成。此时,图像处理装置23通过收发部22d与内窥镜装置24或内窥镜部门服务器21进行通信。并且,图像处理装置23通过控制部22e进行拍摄图像数据的分析。
图4是表示客户端PC22的应用的基本画面的一例的图。在用户在客户端PC22中启动应用并登录时,控制部22e从数据库DB中获取基本画面数据,并使图4所示的基本画面显示在显示部22b上。另外,客户端PC22例如为检查室20C的客户端PC22,但是并不限于此,也可以为图2所示的其他客户端PC22。
该基本画面由显示检查委托信息(摘录了一部分的信息)的一览列表的区域A、显示各种操作按钮的区域B及显示对在区域A的列表中选择的检查委托信息有效的启动器(launcher)的区域C构成。
在区域A的列表中,对各检查委托信息设置“就诊”“受理”“检查”“会计”等处理项目,在对各检查委托信息在各处理项目中所示的处理结束的情况下,在各处理项目中显示“○”标记。
关于用于显示该标记的数据,在各处理结束时,通过内窥镜部门服务器21存储于数据库DB中。例如,在基于检查委托信息的检查结束时,内窥镜部门服务器21将表示检查结束的信息与该检查委托信息建立对应而存储于数据库D B中。由此,在“检查”的处理项目中显示“○”标记。各处理是否结束的信息可以手动输入,也可以设成能够从客户端PC22或内窥镜装置24自动通知。
该应用具有“图像显示”按钮C1作为操作按钮,“图像显示”按钮C1显示在图4所示的基本画面的区域C中。该“图像显示”按钮C1为用于显示通过基于从区域A的列表中选择的检查委托信息的检查而获得的拍摄图像的按钮。
客户端PC22的控制部22e从数据库DB中定期获取用于显示该基本画面的数据,并使其显示在显示部22b上。
图5是表示内窥镜装置24的一例的图。如图5所示,内窥镜装置24具备内窥镜1和与该内窥镜1连接的控制装置4及光源装置5。
控制装置4与显示装置7和输入部6连接,所述显示装置7显示通过内窥镜1拍摄受检体内而获得的摄像图像等,所述输入部6为用于对控制装置4输入各种信息的接口。控制装置4控制内窥镜1、光源装置5及显示装置7。
显示装置7具有显示像素以二维状排列的显示面,通过在该显示面的各显示像素上描绘构成图像数据的像素数据来进行基于该图像数据的图像的显示。显示装置7构成根据来自控制装置4的指令来切换显示图像的显示部。
内窥镜1包括:插入部110,为沿一个方向延伸的管状部件,并且插入到受检体内;操作部11,设置于插入部110的基端部,并且设置有用于进行观察模式切换操作、摄像记录操作、钳子操作、送气送水操作及抽吸操作等的操作部件;弯角钮12,与操作部11相邻而设置;及通用塞绳13,包括将内窥镜1分别装卸自如地连接于控制装置4和光源装置5上的连接器部13A、13B。
另外,虽在图5中省略,但是在操作部11及插入部110的内部设置有插入用于采集细胞或息肉等生物组织的活检钳的钳子孔、送气及送水用通道、抽吸用通道等各种通道。
插入部110由具有挠性的柔性部10A、设置于柔性部10A的前端的弯曲部10B及设置于弯曲部10B的前端的硬质的前端部10C构成。
弯曲部10B构成为通过弯角钮12的转动操作而弯曲自如。该弯曲部10B根据使用内窥镜1的受检体的部位等,能够向任意方向及任意角度弯曲,从而能够使前端部10C朝向所希望的方向。
图6是表示图5所示的内窥镜装置24的内部结构的示意图。图7是表示由图6所示的光源装置5产生的光的光谱的一例的图。
光源装置5能够切换并照射通常光和特殊光作为照明光。通常光为具有白色光等适合由医生等人类识别的发光光谱的光。特殊光为发光光谱与通常光不同的、具有适合由IEE(Image-Enhanced Endoscopy:图像增强内镜)等计算机分析的发光光谱的光。
具体而言,光源装置5具备光源用处理器151、光源部152及光路耦合部154。光源用处理器151与控制装置4的系统控制部44连接,并根据来自系统控制部44的指令来控制光源部152。
光源部152例如具有多个半导体光源,将它们分别点亮或熄灭,在点亮的情况下,通过控制各半导体光源的发光量来发出照亮观察对象的照明光。在本实施方式中,光源部152具有V-LED(Violet Light Emitting Diode:紫光发光二极管)152a、B-LED(Blue LightEmitting Diode:蓝光发光二极管)152b、G-LED(Green Light Emitting Diode:绿光发光二极管)152c及R-LED(Red Light Emitting Diode:红光发光二极管)152d这4种颜色的LED。
光源用处理器151通过分别独立地控制V-LED152a、B-LED152b、G-LED152c及R-LED152d,能够将紫色光V、蓝色光B、绿色光G或红色光R分别独立地改变光量来发光。如图7所示,V-LED152a产生中心波长405±10nm、波长范围380~420nm的紫色光V。B-LED152b产生中心波长450±10nm、波长范围420~500nm的蓝色光B。G-LED152c产生波长范围达到480~600nm的绿色光G。R-LED152d产生中心波长为620~630nm且波长范围达到600~650nm的红色光R。
并且,在照射通常光时,光源用处理器151控制各LED152a~52d,以使紫色光V、蓝色光B、绿色光G及红色光R之间的光量比成为Vc∶Bc∶Gc∶Rc的白色光发光。另外,Vc、Bc、Gc、Rc>0。
并且,在照射特殊光时,光源用处理器151控制各LED152a~52d,以使作为短波长的窄频带光的紫色光V、蓝色光B、绿色光G及红色光R之间的光量比成为Vs∶Bs∶Gs∶Rs的特殊光发光。
光量比Vs∶Bs∶Gs∶Rs与照射通常光时所使用的光量比Vc∶Bc∶Gc∶Rc不同,根据观察目的适当确定。例如,在强调表层血管的情况下,优选使Vs大于其他Bs、Gs、Rs,在强调中深层血管的情况下,优选使Gs大于其他Vs、Gs、RS。
光路耦合部154将从V-LED152a、B-LED152b、G-LED152c及R-LED152d射出的各光进行耦合,并将耦合的光作为照明光射出。从光源部152的光路耦合部154射出的照明光入射到内置在通用塞绳13中的后述光导件153上,并穿过设置于插入部110的前端部10C的照明用透镜150而照射到被摄体上。
在内窥镜1的前端部10C设置有包括物镜121及透镜组122的摄像光学系统、穿过该摄像光学系统而拍摄被摄体的摄像元件123、RAM等存储器125、通信接口(I/F)126、摄像驱动部127、用于将从光源部152射出的照明光引导到照明用透镜150的光导件153。摄像元件123构成本发明的摄像部。
光导件153从前端部10C延伸至通用塞绳13的连接器部13A。在通用塞绳13的连接器部13A与光源装置5连接的状态下,从光源装置5的光源部152射出的照明光成为能够入射到光导件153的状态。
摄像元件123可以使用CCD(Charge Coupled Device:电荷耦合元件)图像传感器或CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)图像传感器等。在本实施方式中,摄像元件123为使用卷帘快门的CMOS。
摄像元件123具有多个像素以二维状配置的受光面,将通过上述摄像光学系统在该受光面上成像的光学像在各像素中转换成电信号(摄像信号)。然后,摄像元件123将转换后的摄像信号从模拟信号转换成规定位数的数字信号,并将转换成数字信号的摄像信号输出至存储器125。摄像元件123例如可以使用搭载原色或补色等滤色器的摄像元件。
摄像元件123可以在受光面与物镜121的光轴Ax垂直的状态下配置于前端部10C,也可以在受光面与物镜121的光轴Ax平行的状态下配置于前端部10C。
设置于内窥镜1上的摄像光学系统由摄像元件123与物镜121之间的位于来自被摄体的光的光路上的透镜、棱镜等光学部件(包括上述透镜组122)和物镜121构成。摄像光学系统也有时仅由物镜121构成。
存储器125临时记录从摄像元件123输出的数字摄像信号。
通信I/F126与控制装置4的通信接口(I/F)41连接。通信I/F126通过通用塞绳13内的信号线将记录于存储器125中的摄像信号传输至控制装置4中。
摄像驱动部127经由通信I/F126与控制装置4的系统控制部44连接。摄像驱动部127根据由通信I/F126接收的来自系统控制部44的指令来驱动摄像元件123及存储器125。
控制装置4具备通过通用塞绳13与内窥镜1的通信I/F126连接的通信I/F41、信号处理部42、显示控制器43、系统控制部44及记录介质45。
通信I/F41接收从内窥镜1的通信I/F126传输过来的摄像信号并传递至信号处理部42中。
信号处理部42内置有临时记录从通信I/F41接收到的摄像信号的存储器,对作为记录于存储器中的摄像信号的集合的摄像图像信号进行处理(去马赛克处理或伽马补正处理等图像处理)以生成能够进行识别处理等的形式的摄像图像信息。由信号处理部42生成的摄像图像信息记录于硬盘或闪存等记录介质45中。
显示控制器43将基于由信号处理部42生成的摄像图像信息的摄像图像显示在显示装置7上。构成由信号处理部42生成的摄像图像信息的各像素数据的坐标与构成显示装置7的显示面的任一个显示像素的坐标建立对应而进行管理。
系统控制部44控制控制装置4的各部,并向内窥镜1的摄像驱动部127和光源装置5的光源用处理器151发送指令,从而集中控制内窥镜装置24的整体。例如,系统控制部44经由摄像驱动部127进行摄像元件123的控制。并且,系统控制部44经由光源用处理器151进行光源部152的控制。
系统控制部44或信号处理部42包括执行程序而进行处理的各种处理器、RAM及ROM。
作为各种处理器,包括执行程序而进行各种处理的通用的处理器即CPU、FPGA等在制造后能够变更电路结构的处理器即可编程逻辑器件或ASIC等具有为了执行特定的处理而专门设计的电路结构的处理器即专用电路等。
更具体而言,这些各种处理器的结构为将半导体元件等电路元件组合而成的电路。
系统控制部44或信号处理部42可以由各种处理器中的1个构成,也可以由相同种类或不同种类的2个以上的处理器的组合(例如,多个FPGA的组合或CPU与FPGA的组合)构成。
图8是表示基于图像处理装置23的静止图像的生成处理的一例的流程图。适用了本发明的内窥镜检查辅助装置的图像处理装置23例如执行图8所示的处理。其中,对进行大肠检查的情况进行说明,所述大肠检查如下进行:将内窥镜1(观测器)从受检体内的肛门插入并到达回盲部之后,一边缓慢拔出内窥镜1一边进行观察。
首先,图像处理装置23开始由AI分析从内窥镜装置24连续输入的拍摄图像数据(步骤S81)。具体而言,该分析为基于拍摄图像数据的图像识别。例如,图像处理装置23根据该图像识别来检测内窥镜1的前端到达奇点,或者检测映入图像中的活检钳来检测活检的实施。该奇点例如为升结肠、横结肠、降结肠、乙状结肠及直肠等大肠内的特定部位。
接着,图像处理装置23根据在步骤S81中开始的分析的结果来判断是否检测到内窥镜1的前端到达回盲部(步骤S82),等待直至检测到到达回盲部(步骤S82:“否”的循环)。
在步骤S82中,在检测到到达回盲部的情况下(步骤S82:“是”),图像处理装置23根据在步骤S81中开始的分析的结果来判断是否检测到内窥镜1的前端到达奇点(步骤S83)。
在步骤S83中,在检测到到达奇点的情况下(步骤S83:“是”),图像处理装置23生成基于此时从内窥镜装置24输入的拍摄图像数据的静止图像和表示该拍摄图像数据的拍摄时刻的拍摄时刻信息(步骤S84),并返回至步骤S83。在步骤S84中的静止图像及拍摄时刻信息的生成可以在检测到到达奇点之后的多个时刻进行。
在步骤S83中,在没有检测到到达奇点的情况下(步骤S83:“否”),图像处理装置23根据在步骤S81中开始的分析的结果来判断是否检测到活检的实施(步骤S85)。
在步骤S85中,在检测到活检的实施的情况下(步骤S85:“是”),图像处理装置23生成基于此时从内窥镜装置24输入的拍摄图像数据的静止图像和表示该拍摄图像数据的拍摄时刻的拍摄时刻信息(步骤S86),并返回至步骤S83。在步骤S86中的静止图像及拍摄时刻信息的生成可以在检测到活检的实施之后的多个时刻进行。
在步骤S85中,在没有检测到活检的实施的情况下(步骤S85:“否”),图像处理装置23根据在步骤S81中开始的分析的结果来判断是否检测到内窥镜1的前端到达肛门(步骤S87)。在没有检测到到达肛门的情况下(步骤S87:“否”),图像处理装置23返回至步骤S83。
在步骤S87中,在检测到到达肛门的情况下(步骤S87:“是”),图像处理装置23根据从内窥镜装置24输入的多个拍摄图像数据来生成大肠展开图像(步骤S88)。该大肠展开图像虚拟地表示将受检体的大肠沿延伸方向切开并展开的状态,并且能够通过将基于大肠内的拍摄的多个静止图像进行合成来生成。在图9中,对大肠展开图像的具体例进行说明。
例如,图像处理装置23根据在步骤S84、S86中生成的静止图像来生成大肠展开图像。或者,图像处理装置23可以根据在从检测到内窥镜1的前端到达回盲部至检测到内窥镜1的前端到达肛门的期间从内窥镜装置24输入的拍摄图像数据中的至少一部分来生成大肠展开图像。即,除了在步骤S84、S86中生成的静止图像以外,图像处理装置23也可以根据从内窥镜装置24中获取的拍摄图像数据来生成用于生成大肠展开图像的静止图像。
接着,图像处理装置23将表示实施了活检的位置的活检位置信息附加到在步骤S88中生成的大肠展开图像中(步骤S89)。活检位置信息例如为在大肠展开图像中指实施了活检的位置的图像等。在图9中,对活检位置信息的具体例进行说明。
接着,图像处理装置23将在步骤S89中附加了活检位置信息的大肠展开图像和在步骤S84、S86中生成的静止图像及拍摄时刻信息发送到内窥镜部门服务器21中(步骤S90),并结束一系列的处理。由此,能够使由图像处理装置23生成的大肠展开图像等显示在其他装置的显示装置(例如,客户端PC22的显示部22b)上。
即,在步骤S90中发送到内窥镜部门服务器21中的这些信息由图1所示的医用图像保管系统40保管,并由例如客户端PC22显示。在图9中,对基于客户端PC22的显示的具体例进行说明。
图9是表示内窥镜检查及大肠展开图像的一例的图。在图9中,横轴T1表示从内窥镜检查开始至结束为止的时间序列。
如横轴T1所示,在图9所示的例中,在时刻t1开始向受检体内插入内窥镜1的前端(检查开始)。并且,在时刻t1之后的时刻t2,内窥镜1的前端已到达受检体的回盲部(到达回盲部)。
在时刻t2以后,一边从受检体内拔出内窥镜1的前端一边进行观察。然后,分别在时刻t2之后的时刻t3和时刻t3之后的时刻t4,使用内窥镜1的活检钳实施了活检。
在时刻t3,图像处理装置23根据来自内窥镜装置24的拍摄图像数据来识别活检钳的映入,从而检测活检的实施。然后,图像处理装置23根据该检测结果自动获取时刻t3的静止图像。
同样地,在时刻t4,图像处理装置23根据来自内窥镜装置24的拍摄图像数据来识别活检钳的映入,从而检测活检的实施。然后,图像处理装置23根据该检测结果自动获取时刻t4的静止图像。
并且,在时刻t4之后的时刻t5,内窥镜1的前端到达受检体的肛门,并从受检体内拔出内窥镜1(检查结束)。
并且,除了检测到活检的实施的情况以外,图像处理装置23根据来自内窥镜装置24的拍摄图像数据也生成检测到内窥镜1的前端到达大肠内的奇点时的静止图像。
并且,图像处理装置23在所生成的静止图像中附加表示在获得该静止图像时的图像处理装置23的内部时刻的拍摄时刻信息。
并且,图像处理装置23根据从内窥镜装置24获得的拍摄图像数据来生成大肠展开图像,并在所生成的大肠展开图像中附加活检位置信息。
如上所述,这些由图像处理装置23生成的静止图像、拍摄时刻信息及大肠展开图像由医用图像保管系统40保管。
之后,例如在客户端PC22中针对图9所示的内窥镜检查接受图像的显示的指示(例如,按下图4所示的“图像显示”按钮C1)时,该客户端PC22根据由医用图像保管系统40保管的静止图像、拍摄时刻信息及大肠展开图像,例如由显示部22b显示图9所示的图像90。
图像90包括大肠展开图像91、缩略图92、缩略图93、活检标记93a、活检部位标记91a及活检次数通知部94。
大肠展开图像91例如为在图8的步骤S88中由图像处理装置23生成的大肠展开图像。例如,图像处理装置23通过针对彼此重复的部分重叠而合成所生成的各静止图像来生成大肠展开图像91。
例如,大肠展开图像91为将基于拍摄时刻为从时刻t2至时刻t5的拍摄图像数据的各静止图像进行合成而获得的展开图像。在图9中,大肠展开图像91的左端为在时刻t2拍摄的部分,大肠展开图像91的右端为在时刻t5拍摄的部分。具体而言,大肠展开图像91从左端依次具有升结肠、横结肠、降结肠、乙状结肠及直肠的各区域。
活检部位标记91a例如为在图8所示的步骤S89中通过图像处理装置23附加到大肠展开图像中的活检位置信息的一例。例如,图像处理装置23根据在大肠展开图像91的生成中所使用的各静止图像的拍摄时刻信息,在大肠展开图像91中在检测到活检的实施的时刻拍摄的部分重叠活检部位标记91a。由此,在大肠展开图像91中实施了活检的位置上附加有活检部位标记91a。
缩略图92例如为在图8的步骤S84中由图像处理装置23与拍摄时刻信息一起生成的静止图像的缩略图(缩小图像)。缩略图93例如为在图8的步骤S86中由图像处理装置23与拍摄时刻信息一起生成的静止图像的缩略图。
以缩略图92、93的各自为对象,例如图像处理装置23根据在大肠展开图像91的生成中所使用的各静止图像的拍摄时刻信息来确定在大肠展开图像91中在与对象的缩略图对应的静止图像被拍摄的时刻拍摄的部分,并在所确定的部分的上侧配置对象的静止图像。由此,根据拍摄时刻来生成包含与大肠展开图像91建立对应的缩略图92、93的图像90。
在客户端PC22接受选择所显示的缩略图92、93中的任一个的选择操作(例如,点击缩略图92、93等)时,将与缩略图92、93中接受了选择操作的缩略图对应的静止图像显示在显示部22b中。与该缩略图对应的静止图像可以重叠显示在图像90中,也可以代替图像90而显示,也可以与图像90并列显示。
并且,可以在缩略图92、93中根据检测活检的实施而获得的静止图像的缩略图93中附加表示实施活检时的静止图像的活检标记93a。由此,能够容易地掌握缩略图92、93中的缩略图93与实施活检时的静止图像对应。
并且,客户端PC22可以将所实施的活检的次数(例如,缩略图93的数量)显示在活检次数通知部94上。在图9所示的例中,在时刻t3、时刻t4检测到活检的实施,因此客户端PC22将2次(活检:2次)作为所实施的活检的次数显示在活检次数通知部94上。
如此,根据适用了本发明的内窥镜检查辅助装置的图像处理装置23,能够根据在将内窥镜1插入到受检体内的状态下通过内窥镜1的多次拍摄而获得的多个拍摄图像数据和表示在该状态下使用内窥镜1进行的处置的处置信息,使将上述多个拍摄图像数据进行合成而获得的、附加了表示进行了上述处置的受检体内的位置的信息的受检体内的展开图像显示在客户端PC22上。
由此,观察到该展开图像的用户能够容易地掌握插入了内窥镜1的受检体的内表面的状态,进一步在该展开图像中附加有表示进行了上述处置的受检体内的位置的信息,因此能够容易地掌握在内窥镜检查中实施了活检等处置的部位。
(变形例)
对将由图像处理装置23生成的各信息保管于医用图像保管系统40中,并根据由医用图像保管系统40保管的各信息,客户端PC22进行图像90等的显示的结构进行了说明,但是并不限于这种结构。例如,也可以设为将由图像处理装置23生成的各信息保管于内窥镜部门服务器21中,并根据由内窥镜部门服务器21保管的各信息,客户端PC22进行图像90等的显示的结构。
并且,对使展开图像显示在客户端PC22的显示部22b上的结构进行了说明,但是并不限于这种结构。例如,也可以设为使展开图像显示在内窥镜装置24的显示装置7或未图示的其他显示装置上的结构。
并且,作为使用了内窥镜1的处置的具体例,对使用了内窥镜1的活检钳的活检进行了说明,但是使用了内窥镜1的处置并不限于此。例如,使用了内窥镜1的处置也可以为息肉等的切除等。
并且,作为展开图像的例,对大肠展开图像进行了说明,但是展开图像并不限于此。例如,在通过内窥镜装置24进行受检体的胃的检查的情况下,显示虚拟地表示将受检体的胃沿延伸方向切开并展开的状态的胃展开图像。
对将本发明的内窥镜检查辅助装置适用于图像处理装置23中的结构进行了说明,但是本发明的内窥镜检查辅助装置也能够适用于除了图像处理装置23以外的装置中。例如,本发明的内窥镜检查辅助装置也能够适用于内窥镜装置24、内窥镜部门服务器21、医用图像保管系统40等中。
如以上所说明,在本说明书中公开有如下事项。
(1)
一种内窥镜检查辅助装置,其具有处理器和存储器,
上述存储器存储在将内窥镜插入到受检体内的状态下通过上述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在上述状态下使用上述内窥镜进行的处置的处置信息,
上述处理器根据上述多个拍摄图像数据及上述处置信息来生成将上述多个拍摄图像数据进行合成而获得的上述受检体内的展开图像,其中,上述展开图像附加了表示进行了上述处置的上述受检体内的位置的信息,
使所生成的上述展开图像显示在显示装置上。
(2)
根据(1)所述的内窥镜检查辅助装置,其中,
上述存储器存储通过上述内窥镜的拍摄而获得的静止图像,
上述处理器生成与上述静止图像建立有对应的上述展开图像。
(3)
根据(2)所述的内窥镜检查辅助装置,其中,
上述静止图像包含根据基于使用了上述内窥镜的处置的上述拍摄图像数据的检测结果而获得的静止图像。
(4)
根据(2)或(3)所述的内窥镜检查辅助装置,其中,
上述静止图像包含根据基于上述内窥镜的前端部到达上述受检体内的特定部位的上述拍摄图像数据的检测结果而获得的静止图像。
(5)
根据(1)至(4)中任一项所述的内窥镜检查辅助装置,其中,
上述多个拍摄图像数据为在检测到上述内窥镜的前端部到达上述受检体内的检查区域的端部之后获得的多个拍摄图像数据。
(6)
根据(1)至(5)中任一项所述的内窥镜检查辅助装置,其中,
上述存储器将上述多个拍摄图像数据及上述处置信息与时刻信息建立对应而存储,
上述处理器根据上述时刻信息来生成附加了表示进行了上述处置的上述受检体内的位置的信息的上述展开图像。
(7)
根据(1)至(5)中任一项所述的内窥镜检查辅助装置,其中,
上述处理器根据基于上述拍摄图像数据对使用了上述内窥镜的上述处置的实施进行检测而得的结果来生成附加了表示进行了上述处置的上述受检体内的位置的信息的上述展开图像。
(8)
一种内窥镜检查辅助方法,其包括如下处理:
存储在将内窥镜插入到受检体内的状态下通过上述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在上述状态下使用上述内窥镜进行的处置的处置信息,
根据上述多个拍摄图像数据及上述处置信息来生成将上述多个拍摄图像数据进行合成而获得的上述受检体内的展开图像,其中,上述展开图像附加了表示进行了上述处置的上述受检体内的位置的信息,
使所生成的上述展开图像显示在显示装置上。
(9)
一种内窥镜检查辅助程序,其用于使计算机执行如下处理:
存储在将内窥镜插入到受检体内的状态下通过上述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在上述状态下使用上述内窥镜进行的处置的处置信息,
根据上述多个拍摄图像数据及上述处置信息来生成将上述多个拍摄图像数据进行合成而获得的上述受检体内的展开图像,其中,上述展开图像附加了表示进行了上述处置的上述受检体内的位置的信息,
使所生成的上述展开图像显示在显示装置上。
以上,参考附图并对各种实施方式进行了说明,但是本发明并不限定于该例,这是理所当然的。显然,若为本领域技术人员,则明确可知在权利要求书中所记载的范围内能够想到各种变更例或修正例,并且关于这些变更例或修正例,也应理解为当然属于本发明的技术范围内。并且,在不脱离发明的宗旨的范围内可以任意组合上述实施方式中的各构成要件。
另外,本申请基于2020年2月27日申请的日本专利申请(日本专利申请2020-032313),其内容作为参考援用于本申请中。
符号说明
1-内窥镜,4-控制装置,5-光源装置,6、22a-输入部,7-显示装置,10-HIS,10A-柔性部,10B-弯曲部,10C-前端部,11-操作部,12-弯角钮,13-通用塞绳,13A-连接器部,13B-连接器部13A,20-内窥镜部门系统,20A-受理处,20B-前处置室,20C-检查室,20D-清洗室,20E-洽谈室,21-内窥镜部门服务器,22-客户端PC,22b-显示部,22c-记录部,22d-收发部,22e-控制部,23-图像处理装置,24-内窥镜装置,25-清洗管理装置,26-清洗机,27-部门内部LAN,30-病理部门系统,40-医用图像保管系统,41、126-通信I/F,42-信号处理部,43-显示控制器,44-系统控制部,45-记录介质,50-其他部门系统,60-医院内部LAN,90-图像,91-大肠展开图像,91a-活检部位标记,92、93-缩略图,93a-活检标记,94-活检次数通知部,110-插入部,121-物镜,122-透镜组,123-摄像元件,125-存储器,127-摄像驱动部,150-照明用透镜,151-光源用处理器,152-光源部,152a-V-LED,152b-B-LED,152c-G-LED,152d-R-LED,153-光导件,154-光路耦合部,t1~t5-时刻,C1-按钮。
Claims (9)
1.一种内窥镜检查辅助装置,其具有处理器和存储器,
所述存储器存储在将内窥镜插入到受检体内的状态下通过所述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在所述状态下使用所述内窥镜进行的处置的处置信息,
所述处理器根据所述多个拍摄图像数据及所述处置信息来生成将所述多个拍摄图像数据进行合成而获得的所述受检体内的展开图像,其中,所述展开图像附加了表示进行了所述处置的所述受检体内的位置的信息,
使所生成的所述展开图像显示在显示装置上。
2.根据权利要求1所述的内窥镜检查辅助装置,其中,
所述存储器存储通过所述内窥镜的拍摄而获得的静止图像,
所述处理器生成与所述静止图像建立有对应的所述展开图像。
3.根据权利要求2所述的内窥镜检查辅助装置,其中,
所述静止图像包含根据基于使用了所述内窥镜的处置的所述拍摄图像数据的检测结果而获得的静止图像。
4.根据权利要求2或3所述的内窥镜检查辅助装置,其中,
所述静止图像包含根据基于所述内窥镜的前端部到达所述受检体内的特定部位的所述拍摄图像数据的检测结果而获得的静止图像。
5.根据权利要求1至4中任一项所述的内窥镜检查辅助装置,其中,
所述多个拍摄图像数据为在检测到所述内窥镜的前端部到达所述受检体内的检查区域的端部之后获得的多个拍摄图像数据。
6.根据权利要求1至5中任一项所述的内窥镜检查辅助装置,其中,
所述存储器将所述多个拍摄图像数据及所述处置信息与时刻信息建立对应而存储,
所述处理器根据所述时刻信息来生成附加了表示进行了所述处置的所述受检体内的位置的信息的所述展开图像。
7.根据权利要求1至5中任一项所述的内窥镜检查辅助装置,其中,
所述处理器根据基于所述拍摄图像数据对使用了所述内窥镜的所述处置的实施进行检测而得的结果来生成附加了表示进行了所述处置的所述受检体内的位置的信息的所述展开图像。
8.一种内窥镜检查辅助方法,其包括如下处理:
存储在将内窥镜插入到受检体内的状态下通过所述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在所述状态下使用所述内窥镜进行的处置的处置信息,
根据所述多个拍摄图像数据及所述处置信息来生成将所述多个拍摄图像数据进行合成而获得的所述受检体内的展开图像,其中,所述展开图像附加了表示进行了所述处置的所述受检体内的位置的信息,
使所生成的所述展开图像显示在显示装置上。
9.一种内窥镜检查辅助程序,其用于使计算机执行如下处理:
存储在将内窥镜插入到受检体内的状态下通过所述内窥镜的多次拍摄而获得的多个拍摄图像数据和表示在所述状态下使用所述内窥镜进行的处置的处置信息,
根据所述多个拍摄图像数据及所述处置信息来生成将所述多个拍摄图像数据进行合成而获得的所述受检体内的展开图像,其中,所述展开图像附加了表示进行了所述处置的所述受检体内的位置的信息,
使所生成的所述展开图像显示在显示装置上。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020032313 | 2020-02-27 | ||
JP2020-032313 | 2020-02-27 | ||
PCT/JP2021/000927 WO2021171817A1 (ja) | 2020-02-27 | 2021-01-13 | 内視鏡検査支援装置、内視鏡検査支援方法、及び内視鏡検査支援プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115135224A true CN115135224A (zh) | 2022-09-30 |
Family
ID=77489953
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180015801.3A Pending CN115135224A (zh) | 2020-02-27 | 2021-01-13 | 内窥镜检查辅助装置、内窥镜检查辅助方法及内窥镜检查辅助程序 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220338717A1 (zh) |
JP (1) | JP7314394B2 (zh) |
CN (1) | CN115135224A (zh) |
WO (1) | WO2021171817A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6883662B2 (ja) * | 2019-03-27 | 2021-06-09 | Hoya株式会社 | 内視鏡用プロセッサ、情報処理装置、内視鏡システム、プログラム及び情報処理方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006280592A (ja) * | 2005-03-31 | 2006-10-19 | Olympus Medical Systems Corp | 処置支援装置 |
WO2016004177A1 (en) * | 2014-07-02 | 2016-01-07 | Covidien Lp | System and method of providing distance and orientation feedback while navigating in 3d |
US10631933B2 (en) * | 2016-08-31 | 2020-04-28 | Covidien Lp | Pathway planning for use with a navigation planning and procedure system |
WO2018096680A1 (ja) * | 2016-11-28 | 2018-05-31 | オリンパス株式会社 | 情報呈示システム |
-
2021
- 2021-01-13 JP JP2022503143A patent/JP7314394B2/ja active Active
- 2021-01-13 WO PCT/JP2021/000927 patent/WO2021171817A1/ja active Application Filing
- 2021-01-13 CN CN202180015801.3A patent/CN115135224A/zh active Pending
-
2022
- 2022-07-12 US US17/812,042 patent/US20220338717A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20220338717A1 (en) | 2022-10-27 |
JP7314394B2 (ja) | 2023-07-25 |
WO2021171817A1 (ja) | 2021-09-02 |
JPWO2021171817A1 (zh) | 2021-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9788708B2 (en) | Displaying image data from a scanner capsule | |
JP5459423B2 (ja) | 診断システム | |
JP7420876B2 (ja) | 内視鏡関連業務システム | |
US20220313067A1 (en) | Medical image processing apparatus, endoscope system, diagnosis assistance method, and program | |
JP7270658B2 (ja) | 画像記録装置、画像記録装置の作動方法および画像記録プログラム | |
JP2009022446A (ja) | 医療における統合表示のためのシステム及び方法 | |
WO2020054543A1 (ja) | 医療画像処理装置及び方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム | |
EP3936027A1 (en) | Apparatus and method for processing medical image | |
CN112512398B (zh) | 医疗图像处理装置 | |
US20220338717A1 (en) | Endoscopic examination support device, endoscopic examination support method, and endoscopic examination support program | |
JP5593008B1 (ja) | 画像処理装置及び画像処理方法 | |
JP7335976B2 (ja) | 内視鏡システム、制御プログラム、及び表示方法 | |
CN116724334A (zh) | 计算机程序、学习模型的生成方法、以及手术辅助装置 | |
WO2021176852A1 (ja) | 画像選択支援装置、画像選択支援方法、及び画像選択支援プログラム | |
US20240136034A1 (en) | Information processing apparatus, information processing method, endoscope system, and report creation support device | |
US20240148235A1 (en) | Information processing apparatus, information processing method, endoscope system, and report creation support device | |
WO2023282143A1 (ja) | 情報処理装置、情報処理方法、内視鏡システム及びレポート作成支援装置 | |
JP7470779B2 (ja) | 内視鏡システム、制御方法、及び制御プログラム | |
WO2023195103A1 (ja) | 検査支援システムおよび検査支援方法 | |
WO2023166647A1 (ja) | 医療支援システムおよび画像表示方法 | |
WO2023145078A1 (ja) | 医療支援システムおよび医療支援方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |