CN103327900B - 医用图像显示装置以及医用图像诊断装置 - Google Patents
医用图像显示装置以及医用图像诊断装置 Download PDFInfo
- Publication number
- CN103327900B CN103327900B CN201280006251.XA CN201280006251A CN103327900B CN 103327900 B CN103327900 B CN 103327900B CN 201280006251 A CN201280006251 A CN 201280006251A CN 103327900 B CN103327900 B CN 103327900B
- Authority
- CN
- China
- Prior art keywords
- capsule endoscope
- heart yearn
- endoscope image
- image
- corresponding relation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000002059 diagnostic imaging Methods 0.000 title claims description 17
- 239000002775 capsule Substances 0.000 claims abstract description 221
- 238000000605 extraction Methods 0.000 claims description 25
- 239000000284 extract Substances 0.000 claims description 6
- 238000007689 inspection Methods 0.000 abstract description 16
- 238000003745 diagnosis Methods 0.000 abstract description 13
- 231100000915 pathological change Toxicity 0.000 description 31
- 230000036285 pathological change Effects 0.000 description 31
- 238000010586 diagram Methods 0.000 description 17
- 230000001079 digestive effect Effects 0.000 description 14
- 238000000034 method Methods 0.000 description 11
- 208000037062 Polyps Diseases 0.000 description 9
- 210000002429 large intestine Anatomy 0.000 description 9
- 230000003902 lesion Effects 0.000 description 5
- 238000009434 installation Methods 0.000 description 4
- 230000000968 intestinal effect Effects 0.000 description 4
- 238000002372 labelling Methods 0.000 description 4
- 208000022131 polyp of large intestine Diseases 0.000 description 3
- 210000002784 stomach Anatomy 0.000 description 3
- 230000000472 traumatic effect Effects 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 210000003437 trachea Anatomy 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000005481 NMR spectroscopy Methods 0.000 description 1
- 230000003187 abdominal effect Effects 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 210000001835 viscera Anatomy 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/0002—Operational features of endoscopes provided with data storages
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00039—Operational features of endoscopes provided with input arrangements for the user
- A61B1/0004—Operational features of endoscopes provided with input arrangements for the user for electronic operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/31—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the rectum, e.g. proctoscopes, sigmoidoscopes, colonoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00011—Operational features of endoscopes characterised by signal transmission
- A61B1/00016—Operational features of endoscopes characterised by signal transmission using wireless means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5217—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
- G06T2207/30032—Colon polyp
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30172—Centreline of tubular or elongated structure
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Molecular Biology (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- High Energy & Nuclear Physics (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Pulmonology (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Endoscopes (AREA)
- Computer Networks & Wireless Communication (AREA)
Abstract
提供一种能够提高胶囊内窥镜检查中的确定诊断的操作性的医用图像显示装置。实施方式的医用图像显示装置能够使用管状体的三维图像来显示基于被设置于所述管状体的管内的视点的所述管内的虚拟内窥镜图像,该医用图像显示装置具有胶囊内窥镜图像存储部和显示控制部,胶囊内窥镜图像存储部存储由胶囊内窥镜通过管内而收集到的胶囊内窥镜图像。显示控制部根据视点的位置显示胶囊内窥镜图像。
Description
技术领域
本发明的实施方式涉及医用图像显示装置以及医用图像诊断装置。
背景技术
使用X射线计算机断层摄影装置(以下记作CT(ComputedTomography))、磁共振诊断装置(以下记作MRI(MagneticResonanceImaging:磁共振成像))、X射线诊断装置、超声波诊断装置的各医用图像摄影装置(modality)收集三维图像。例如,以通过CT收集到的三维图像为基础,实施使用了透视投影法的三维图像处理,从而能够制作出将视点置于消化管、气管或血管等管状体的管内的虚拟内窥镜图像(VE:VirtualEndoscopy:虚拟内窥镜检查)(例如,专利文献1)。另外,有时将医用图像摄影装置称作医用图像诊断装置。另外,有时将虚拟内窥镜图像称作CT内窥镜图像。
另外,使用通过消化管、气管或血管等管状体的管内的胶囊内窥镜来收集将视点置于管内的胶囊内窥镜图像。
使用如下的三维医用图像处理·显示装置(多医用图像摄影装置·工作站):作为虚拟内窥镜图像以及胶囊内窥镜图像,特别地显示如大肠那样的消化管脏器内的息肉等的病变部,从而用于进行图像诊断。另外,有时将三维医用图像处理·显示装置仅称作医用图像显示装置。
在消化管的检查方法中存在基于CT的大肠解析(CTcolonography)或小肠解析(CTEnterography)、内窥镜检查、胶囊内窥镜检查等。
在基于CT的大肠解析或小肠解析中,通过虚拟内窥镜图像进行息肉病变候选的排查。因为不是实际拍摄了消化管内部的图像,所以无法观察内壁表面的实际的颜色等,从这些理由看,不适合确定诊断。
内窥镜检查将内窥镜直接插入患者的消化管,通过利用内窥镜前端的照相机拍摄消化管内部而得到的图像进行息肉病变的诊断。虽然能够进行确定诊断,但缺点在于创伤性大。
在胶囊内窥镜检查中,根据患者吃进的小型(外径约11mm、长度约26mm)的胶囊状的内窥镜通过消化管内时连续地拍摄的消化管内部的图像(胶囊内窥镜图像)进行息肉病变的诊断。由于创伤性小,所以作为替代以往的内窥镜的用于确定诊断的检查而颇受关注。
胶囊内窥镜检查要求创伤性小的检查,所以可以认为,今后对于通过基于CT的消化管解析进行的诊察排查出病变候选的患者,进行基于胶囊内窥镜检查的确定诊断的诊断工作流(workflow)将成为主流。
发明内容
(发明要解决的问题)
但是,在基于CT的大肠解析或小肠解析中所排查出的息肉病变候选,而在胶囊内窥镜检查中进行确定诊断时,存在操作性差的问题。能够列举以下的两个主要原因。
第1,因为相互独立地进行虚拟内窥镜检查和胶囊内窥镜检查,所以虚拟内窥镜图像和胶囊内窥镜图像并未建立对应,难以选择显示有该病变候选的胶囊内窥镜图像。
第2,在胶囊内窥镜检查中,依赖于消化管的蠕动运动而在消化管内行进的胶囊内窥镜一边朝着分散的方向一边进行拍摄,所以得到向着分散的方向的大量(例如,约60000幅)的胶囊内窥镜图像。因此,从大量的图像之中选择显示有病变候选的胶囊内窥镜图像需要花费相当多的劳力。
该实施方式用于解决上述问题,目的在于提供能够提高胶囊内窥镜检查中的确定诊断的操作性的医用图像显示装置以及医用图像诊断装置。
(用于解决问题的方案)
为了解决上述问题,实施方式的医用图像显示装置能够使用管状体的三维图像,来显示基于被设置于所述管状体的管内的视点的所述管内的虚拟内窥镜图像,该医用图像显示装置具有胶囊内窥镜图像存储部和显示控制部,胶囊内窥镜图像存储部存储由胶囊内窥镜通过管内而收集到的胶囊内窥镜图像。显示控制部基于视点的位置而显示胶囊内窥镜图像。
附图说明
图1是示出第1实施方式所涉及的医用图像显示装置的结构的一例的框图。
图2A是提取第1芯线以及病变候选时的说明图。
图2B是提取第1芯线以及病变候选时的说明图。
图3是基于胶囊内窥镜的拍摄的说明图。
图4A是提取第2芯线时的说明图。
图4B是提取第2芯线时的说明图。
图5是求芯线的对应关系时的说明图。
图6是选择胶囊内窥镜图像时的说明图。
图7是示出排列显示虚拟内窥镜图像以及胶囊内窥镜图像时的一例的图。
图8是示出求第1芯线和第2芯线的对应关系的一系列的动作的流程图。
图9是示出选择显示病变候选的胶囊内窥镜图像的一系列的动作的流程图。
图10是第2实施方式所涉及的医用图像显示装置的结构框图。
图11是示出求第1芯线和胶囊内窥镜的通过时间的对应关系的一系列的动作的流程图。
图12是示出选择显示病变候选的胶囊内窥镜图像的一系列的动作的流程图。
图13是示出以胃的检查为对象的显示例的图。
(符号说明)
1:CT;2:胶囊内窥镜装置;11:三维图像存储部;12:胶囊内窥镜图像存储部;13:第1芯线提取部;14:第2芯线提取部;15:对应关系计算部;16:对应关系存储部;17:胶囊内窥镜图像选择部;18:虚拟内窥镜图像生成部;20:GUI;21:输入部;22:显示控制部;23:监视器
具体实施方式
接下来,参照各图来说明医用图像显示装置的实施方式。
[第1实施方式]
参照图1~图7以及图9说明第1实施方式所涉及的医用图像显示装置。图1是示出医用图像显示装置的结构的一例的框图。
(CT)
如图1所示,作为医用图像摄影装置的一例而使用CT1。利用CT1来收集管状体的三维图像。
包含CT1的医用图像摄影装置连接于PACS(医用图像管理系统),该PACS是能够根据需要而经由通过DICOM(DigitalImagingandCommunicationsinMedicine:医学数字成像和通信)规定的网络来转送、显示数字图像的系统。利用医用图像摄影装置收集到的管状体的三维图像经由网络而转送到PACS。另外,也可以将管状体的三维图像存储到医用图像摄影装置的存储部(图示省略)。
(胶囊内窥镜装置)
胶囊内窥镜装置2具有胶囊内窥镜、天线以及存储部。胶囊内窥镜搭载有用于拍摄管状体的管内的图像传感器。天线接收来自胶囊内窥镜的电波。存储部存储天线所接收到的图像数据。
通过在管状体的管内移动的胶囊内窥镜来拍摄管内的胶囊内窥镜图像。在拍摄中,通过位置传感器(图示省略)检测胶囊内窥镜的位置(三维位置)以及朝向。胶囊内窥镜以大致每秒2幅的间隔连续地拍摄所期望的管状体的管内。通过拍摄得到的胶囊内窥镜图像(图像群)与胶囊内窥镜的位置、朝向以及拍摄时间一起存储于胶囊内窥镜装置2的存储部。图像群存储于胶囊内窥镜图像存储部12。
〔医用图像显示装置〕
接下来,参照图1说明医用图像显示装置。
医用图像显示装置例如能够使用通用的计算机装置作为基本硬件。
如图1所示,作为医用图像显示装置的一例,包括三维图像存储部11、胶囊内窥镜图像存储部12、第1芯线提取部13、第2芯线提取部14、对应关系计算部15、对应关系存储部16、胶囊内窥镜图像选择部17、虚拟内窥镜图像生成部18、以及GUI(graphicaluserinterface:图形用户接口)20。
这些机构能够通过使搭载于上述计算机装置的微处理器执行图像处理程序来实现。另外,图像显示处理程序也可以预先安装于计算机装置。进而,也可以将图像显示处理程序记录到存储媒体(磁盘、光磁盘、光盘、半导体存储器等),并适当地安装到计算机装置。进而,也可以设为经由网络来分发图像显示处理程序,并适当地安装到计算机装置。
另外,这些结构的一部分或全部也可以通过逻辑电路等硬件来实现,另外,还可以通过组合硬件和软件控制来实现。
(三维图像存储部)
三维图像存储部11存储利用CT1收集到的管状体的三维图像。另外,三维图像存储部11既可以构成为PACS,也可以构成为CT1的存储部,进而,还能够独立于这些地构成。
(胶囊内窥镜图像存储部)
胶囊内窥镜图像存储部12存储由胶囊内窥镜装置2收集到的管状体的胶囊内窥镜图像。另外,胶囊内窥镜图像存储部12既可以构成为PACS,也可以构成为胶囊内窥镜装置2的存储部,进而,还能够独立于这些地构成。
(第1芯线提取部)
接下来,参照图2A以及图2B说明第1芯线提取部13。图2A以及图2B是提取第1芯线以及病变候选时的说明图。在图2A中,示出作为管状体的一例的大肠的第1芯线L1以及病变候选T。在图2B中,通过直线示意地示出大肠的第1芯线L1,并且以L1S示出第1芯线L1的开始点、以L1E示出结束点。
第1芯线提取部13根据存储于三维图像存储部11的三维图像,自动地进行管状体的第1芯线(三维芯线)以及单一或者多个病变候选位置的提取。另外,第1芯线的提取也可以由操作者使用GUI20来决定。
作为自动提取三维芯线的具体的例子,使用以下技术。
即,以L行M列N段的像素来表示对象图像的大小,通过对各图像进行距离变换,从而提取线性图形(例如,利用了距离变换的图形的构造解析手法MedImagTechVol.1、13-22、January2002)。
作为自动提取病变候选位置的具体例,关注大肠息肉具有块状的浓淡结构这一事实,使用利用了海色(Hesse)矩阵的固有值的块状构造强调滤波器进行大肠息肉的检测(例如,基于局部浓淡构造解析的来自三维腹部CT像的大肠息肉检测手法电子信息通信学会技术研究报告MI、医用图像106(226)、47-52、2006-08-26)。
所提取的第1芯线与三维图像相同地作为三维坐标空间的点列数据而存储到三维图像存储部11。所提取的病变候选位置同样与上述三维图像数据相同地作为三维坐标空间的点坐标而存储于三维图像存储部11。
(第2芯线提取部)
接下来,参照图3、图4A以及图4B说明第2芯线提取部14。图3是基于胶囊内窥镜的拍摄的说明图。在图3中示出在作为管状体的一例的大肠腔内移动的胶囊内窥镜CE。
如图3所示,胶囊内窥镜一边在管状体的管内移动一边拍摄管内的图像(胶囊内窥镜图像)。胶囊内窥镜图像附带进行拍摄时的胶囊内窥镜的位置(三维位置)以及朝向地被存储到胶囊内窥镜图像存储部12。
图4A以及图4B是提取第2芯线时的说明图。在图4A中,示出胶囊内窥镜的位置CP以及第2芯线L2。在图4B中通过笔直的虚线示意地示出胶囊内窥镜的移动路径(第2芯线L2),进而,以L2S示出胶囊内窥镜的移动开始位置(开始点)、以L2E示出移动结束位置(结束点),进而,以箭头示出胶囊内窥镜的各位置处的朝向。
如图4A以及图4B所示,第2芯线提取部14根据胶囊内窥镜图像的位置提取第2芯线(三维芯线)。
作为具体的第2芯线提取方法,求按照拍摄胶囊内窥镜图像附带的三维位置的坐标的顺序相连的点列数据,对该点列数据的位置信息三维地进行平滑化处理而设为第2芯线的点列数据。
(对应关系计算部)
接下来,参照图5说明对应关系计算部15。图5是求芯线的对应关系时的说明图。在图5中通过实线示出第1芯线L1,通过虚线示出第2芯线L2。之所以将第2芯线L2表示成比第1芯线L1长,是因为胶囊内窥镜蛇行而不一定总是沿着管状体的芯线移动的缘故。另外,在图5中,沿着第1芯线L1配置的箭头与制作虚拟内窥镜图像时的视线的朝向相当。
对应关系计算部15求出由第1芯线提取部13提取的第1芯线和由第2芯线提取部14提取的第2芯线的对应关系(参照图5)。
具体而言,通过第1芯线和第2芯线的非线性对位处理,求出第1芯线上的位置和第2芯线上的位置的对应关系。另外,第1芯线上的位置与虚拟内窥镜图像中的视点的位置相当,并且第2芯线上的位置与胶囊内窥镜的位置相当。
作为具体的非线性对位的方法,以使得第1芯线以及第2芯线上的各点处的切向量的类似度最大的方式,决定第1芯线以及第2芯线上的点彼此的对应关系。即,如图2B中示意地表示的那样,求从第1芯线的开始点L1S到结束点L1E的各点处的芯线的切向量,同样地如图4B中示意地表示的那样,求从第2芯线的开始点L2S到结束点L2E的各点处的芯线的切向量。接着,对第1芯线的各点,寻找求出与第2芯线的任意点的内积的总和最大的第1芯线以及第2芯线的各点间的组合。
(对应关系存储部)
对应关系存储部16存储所求出的第1芯线和第2芯线的对应关系。作为对应关系存储部16的一例,是将第1芯线上的各点和第2芯线上的各点对应起来存储的表格。另外,不限于此,对应关系存储部16也可以是用于根据第1芯线的各点而求第2芯线的各点的对应关系式。
(胶囊内窥镜图像选择部)
接下来,参照图6说明胶囊内窥镜图像选择部17。图6是选择胶囊内窥镜图像时的说明图。
胶囊内窥镜图像选择部17根据存储于对应关系存储部16的对应关系,从胶囊内窥镜图像存储部12所保存的胶囊内窥镜图像中选择显示和虚拟内窥镜图像的位置以及朝向最接近的位置以及朝向的胶囊内窥镜图像。另外,第1芯线上的朝向与虚拟内窥镜图像中的视线的朝向相当。另外,第2芯线上的朝向与胶囊内窥镜的视线的朝向相当。
具体而言,胶囊内窥镜图像选择部17接收基于GUI20的第1芯线上的位置的输入,根据对应关系存储部16所存储的对应关系求出与该位置对应的第2芯线上的位置。进而,胶囊内窥镜图像选择部17从胶囊内窥镜图像存储部12所存储的胶囊内窥镜图像中提取在第2芯线上的位置的周边拍摄到的图像群。进而,胶囊内窥镜图像选择部17求出该图像群中的、相对地最接近第1芯线上的朝向的第2芯线上的朝向,进而,求出与第2芯线上的朝向对应的第2芯线上的位置。进而,胶囊内窥镜图像选择部17从胶囊内窥镜图像存储部12所存储的胶囊内窥镜图像中选择与所求出的第2芯线上的位置以及朝向建立有关联的胶囊内窥镜图像。将所选择的胶囊内窥镜图像设为最接近根据第1芯线上的位置以及朝向制作的虚拟内窥镜图像的胶囊内窥镜图像。
(虚拟内窥镜图像生成部)
虚拟内窥镜图像生成部18通过GUI20接收第1芯线上的位置以及朝向,使用从三维图像存储部11读出的三维图像,根据第1芯线上的位置以及朝向,通过进行利用了透视投影法的三维图像处理来制作虚拟内窥镜图像。
(GUI)
GUI20具有输入部21、显示控制部22、以及监视器23。
作为输入部21的一例,包括键盘、鼠标、操纵杆等定位设备(pointingdevice)。
显示控制部22使监视器23显示三维图像、虚拟内窥镜图像(包含第1芯线)、胶囊内窥镜图像等,并且将与通过输入部21指示的显示区域对应的第1芯线上的位置输出到胶囊内窥镜图像选择部17。另外,在GUI20的内部存储器(图示省略)中预先存储有第1芯线上的初始位置以及初始朝向。
(医用图像显示装置的动作)
接下来,参照图8以及图9说明医用图像显示装置的一系列的动作。图8是示出求第1芯线和第2芯线的对应关系的一系列的动作的流程图。
(S101)
如图8所示,在S101中,第1芯线提取部13根据从三维图像存储部11读出的三维图像提取第1芯线以及病变候选位置(参照图2)。
将所提取的第1芯线(点列数据)以及病变候选位置存储到三维图像存储部11中。
(S102)
在S102中,第2芯线提取部14根据胶囊内窥镜图像存储部12所存储的胶囊内窥镜的位置(三维位置)提取胶囊内窥镜所通过的第2芯线(点列数据)。
(S103)
在S103中,对应关系计算部15求出在S101中得到的第1芯线的位置与在S102中得到的第2芯线的位置的对应关系。将所求出的对应关系存储到对应关系存储部16。
预先求出以上那样的第1芯线和第2芯线的对应关系。使用对应关系,例如,基于在CT1的大肠解析或小肠解析中所排查出的病变候选,在胶囊内窥镜检查中进行确定诊断。另外,也可以在进行胶囊内窥镜检查中的确定诊断时求对应关系。
接下来,参照图9说明使用对应关系进行胶囊内窥镜检查中的确定诊断时的一系列的动作。图9是示出选择显示病变候选的胶囊内窥镜图像的一系列的动作的流程图。
(S201:读出第1芯线上的初始位置等)
GUI20的内部存储器中存储有第1芯线上的初始位置以及初始朝向。如图9所示,在S201中,接受开始在监视器23中显示虚拟内窥镜图像以及胶囊内窥镜图像的指示,胶囊内窥镜图像选择部17从GUI20的内部存储器读出第1芯线上的初始位置以及初始朝向。
(S202:胶囊内窥镜图像的选择)
在S202中,胶囊内窥镜图像选择部17根据所读出的第1芯线上的初始位置,基于对应关系存储部16中存储的表格,求出与第1芯线上的位置对应的第2芯线上的位置。
接下来,胶囊内窥镜图像选择部17从胶囊内窥镜图像存储部12所存储的胶囊内窥镜图像中提取在第2芯线上的位置的周边拍摄到的图像群。
接着,胶囊内窥镜图像选择部17选择该图像群中的、以最接近GUI20预先存储的第1芯线上的初始朝向的第2芯线上的朝向拍摄到的图像。将所选择的图像设为最接近第1芯线上的初始位置以及初始朝向的胶囊内窥镜图像。
(S203:图像显示)
在S203中,虚拟内窥镜图像生成部18根据GUI20中预先设定的第1芯线上的初始位置以及初始朝向,使用三维图像存储部11所存储的三维图像生成虚拟内窥镜图像。
显示控制部22根据第1芯线上的初始位置以及初始朝向,使监视器23联动显示在S202中求出的胶囊内窥镜图像和在S203中生成的虚拟内窥镜图像。
在此,所谓联动显示是指,在基于芯线上的位置以及朝向而相互具有对应关系的两个图像中,根据芯线的位置以及/或者朝向,使两个图像建立关联地进行显示。
参照图6以及图7说明联动显示。图6是并列显示管状体的VR图像、虚拟内窥镜图像以及胶囊内窥镜图像的图,图7是进一步排列显示有切片评价图像(filletview)的图。
另外,在图6中示出虚拟内窥镜图像中的视点的位置L1P、视线的朝向L1D、胶囊内窥镜的位置L2P、视线的朝向L2D。另外,示出并列显示的管状体的VR图像G1、虚拟内窥镜图像G2、以及胶囊内窥镜图像G3。图7中示出排列显示的筛选评价图像G4以及其它图像G1~G3。
作为具体的联动显示方法,或者上下、左右排列显示,或者以基于GUI20的操作者的操作等为契机而切换显示。
如图6以及图7所示,使用三维图像存储部11中存储的三维图像排列显示CT的VR(volumeRendering:体绘制)图像,在VR图像上以图形显示第1芯线、第2芯线、虚拟内窥镜图像以及胶囊内窥镜图像的当前的视线以及视点、病变候选位置等(参照图6)。由此,容易根据所显示的虚拟内窥镜图像和胶囊内窥镜图像的位置关系来掌握病变候选位置等。
出于同样的目的,显示沿着第1芯线切开管状体得到的VR图像即切片评价(FilletView)图像(参照图7)。
(S204)
在S204中,判定图像的显示是否结束。在图像的显示结束时(S204:是),结束图像的显示。在图像的显示未结束时(S204:否),转移到判定是否变更第1芯线上的位置的S205。
(S205)
在S205中,在操作者通过GUI20的操作变更了虚拟内窥镜图像以及/或者胶囊内窥镜图像的视点以及视线时(S205:是),胶囊内窥镜图像选择部17接受视点以及/或者视线的变更,再次选择胶囊内窥镜图像(S202)。
显示控制部22根据变更后的第1芯线上的位置以及/或者朝向,使监视器23联动显示在S202中求出的胶囊内窥镜图像和在S203中生成的虚拟内窥镜图像。
作为基于GUI20的操作的例子,利用输入部21在CT的VR图像上指定想要观察的位置以及朝向,从而变更视点的位置以及视线的朝向。操作者通过该操作指定显示于VR图像上的病变候选位置,从而根据VR
图像G1上的当前的视点的位置以及视线的朝向,更新虚拟内窥镜图像以及胶囊内窥镜图像的显示。由此,能够根据视点的位置以及视线的朝向瞬时地观察胶囊内窥镜图像。
作为基于GUI20的操作的其它例子,操作者在虚拟内窥镜图像上或者胶囊内窥镜图像上在想要观察的方向上挪动输入部21例如鼠标,从而联动地变更两图像的视线。通过该操作,即使是胶囊内窥镜图像也能从各个角度立体地观察病变候选。
另外,在不变更视点以及视线时(S205:否),返回判断图像的显示是否结束的S204。
[第2实施方式]
接下来,参照图10~图12说明第2实施方式涉及的医用图像显示装置。
图10是医用图像显示装置的结构框图。
如图1以及图10所示,与第1实施方式的不同在于,第1实施方式的对应关系计算部15根据第1芯线和第2芯线的对应关系求出第1芯线和第2芯线的对应关系,与此相对,第2实施方式的对应关系计算部15求出第1芯线和胶囊内窥镜通过管状体的管内时的通过时间的对应关系。
以下,关于不同的点进行说明,对与第1实施方式相同的结构省略其说明。
对应关系计算部15根据胶囊内窥镜在管状体的管内移动的统计性的平均速度,求出第1芯线上的位置和胶囊内窥镜的通过时间的对应关系。
接下来,说明求对应关系的一例。
设基于胶囊内窥镜的拍摄的拍摄开始时间为ts、拍摄结束时间为te、通过时间为ta、胶囊内窥镜的移动时的平均速度为v。另外,通过时间ta与在该拍摄时的胶囊内窥镜图像一起存储于胶囊内窥镜图像存储部12。
拍摄所要时间To通过从拍摄结束时间减去拍摄开始时间而求得(te-ts)。另外,通过从通过时间ta减去拍摄开始时间而求得直到通过时间ta为止的需要时间Ta,即(ta-ts)。
通过比较拍摄所要时间To、Ta,求出在通过时间ta胶囊内窥镜位于整个移动路径中的何处,即(Ta/To)。
第1芯线的全长Lo能够通过对开始点L1S到结束点L1E的各点间的微小距离进行积分而求得。另外,开始点L1S到第1芯线上的位置L1P的长度La能够通过对开始点L1S到第1芯线上的位置L1P的各点间的微小距离进行积分而求得。
通过对第1芯线的全长Lo和从开始点到第1芯线上的位置L1P的长度La进行比较,求出第1芯线上的位置L1P位于第1芯线的全长中中的何处,即(La/Lo)。
所求出的两者处于对应关系〔(Ta/To)≈(La/Lo)〕。由此,根据通过时间ta(或者Ta)、拍摄所要时间To、以及第1芯线的全长Lo求出从开始点L1S起的沿第1芯线上的长度La,进而,求出第1芯线上的位置L1P。
通过如以上所述地构成对应关系计算部15,对应关系存储部16以及胶囊内窥镜图像选择部17构成如下。
对应关系存储部16存储第1芯线上的位置与通过时间的对应关系。进而,胶囊内窥镜图像选择部17从对应关系存储部16读出与第1芯线上的位置对应的通过时间,从胶囊内窥镜图像存储部12所存储的胶囊内窥镜图像中选择在接近通过时间的时间拍摄到的图像。
接下来,参照图11说明求出第1芯线和胶囊内窥镜的通过时间的对应关系的一系列的动作。图11是示出求出第1芯线和胶囊内窥镜的通过时间的对应关系的一系列的动作的流程图。
(S301)
在S301中,与第1实施方式中的S101同样地,根据三维图像提取第1芯线以及病变候选。
(S302)
在S302中,对应关系计算部15从胶囊内窥镜图像存储部12读出拍摄时的胶囊内窥镜的通过时间。
(S303)
接下来,在S303中,对应关系计算部15求出第1芯线的位置和通过时间的对应关系。对应关系存储到对应关系存储部16。
接下来,说明使用对应关系而进行胶囊内窥镜检查中的确定诊断时的一系列的动作。图12是示出选择显示病变候选的胶囊内窥镜图像的一系列的动作的流程图。
(S401)
如图12所示,在S401中,接受开始在监视器23中显示虚拟内窥镜图像以及胶囊内窥镜图像的指示,胶囊内窥镜图像选择部17从GUI20的内部存储器读出第1芯线上的初始位置以及初始朝向。
(S402)
在S402中,胶囊内窥镜图像选择部17根据所读出的第1芯线上的初始位置,基于对应关系存储部16中存储的表格,求出与第1芯线上的位置对应的胶囊内窥镜的通过时间。
接下来,胶囊内窥镜图像选择部17从胶囊内窥镜图像存储部12中存储的胶囊内窥镜图像中提取在通过时间的周边拍摄到的图像群。
接下来,胶囊内窥镜图像选择部17从该图像群中选择以最接近于GUI20中预先存储的第一芯线上的初始朝向拍摄的图像。将所选择的图像设为最接近第1芯线上的初始位置以及初始朝向的胶囊内窥镜图像。
(S403)
在S403中,虚拟内窥镜图像生成部18根据预先在GUI20中设定的第1芯线上的初始位置以及初始朝向,使用三维图像存储部11所存储的三维图像生成虚拟内窥镜图像。
显示控制部22根据第1芯线上的初始位置以及初始朝向,使监视器23联动显示在S402中求出的胶囊内窥镜图像和在S403中生成的虚拟内窥镜图像。
(S404)
在S404中,判断图像的显示是否结束。在图像的显示结束时(S404:是),结束图像的显示。在图像的显示未结束时(S404:否),转移到判断是否变更第1芯线上的位置的S405。
(S405)
在S405中,在操作者通过基于GUI20的操作而变更了虚拟内窥镜图像以及/或者胶囊内窥镜图像的视点以及视线时(S405:是),胶囊内窥镜图像选择部17接受视点以及/或者视线的变更,再次选择胶囊内窥镜图像(S402)。
显示控制部22根据变更后的第1芯线上的位置以及/或者朝向,使监视器23联动显示在S402中求出的胶囊内窥镜图像和在S403中生成的虚拟内窥镜图像。
[变形例1]
以上,以CT大肠解析作为例子说明了实施例。
接下来,参照图13说明实施方式的变形例1。图13是示出以胃的检查为对象的显示例的图。图13中示出排列显示的管状体的VR图像G1、虚拟内窥镜图像G2、以及胶囊内窥镜图像G3,进而还在VR图像G1中示出病变候选T以及胶囊内窥镜CE。
如图13所示,通过同样的手法,能够在胃的解析等所有消化管中应用本发明。
在该实施方式中,能够仅关注与通过基于CT1等三维的医用诊断装置的消化管解析排查出的息肉病变候选位置对应的胶囊内窥镜图像而进行观察,所以能够节省对于大量的拍摄图像进行全部确认的劳力和时间,从而提高息肉病变的确定诊断的检查效率。
另外,通过与微调在CT1等虚拟内窥镜图像上观察息肉病变候选的朝向联动地,每次更新显示到所对应的朝向的胶囊内窥镜图像,从而作为模拟的三维图像而能够观察胶囊内窥镜图像,能够利用立体的内窥镜图像诊断病变候选,从而提高息肉病变的确定诊断的诊断精度。
[变形例2]
接下来,参照图7说明实施方式的变形例2。
在上述实施方式中,如果选择了虚拟内窥镜图像,则根据该虚拟内窥镜图像的视点的位置,显示胶囊内窥镜图像。与此相对,在变形例2中,如果选择了胶囊内窥镜图像,则求出与收集到所选择的胶囊内窥镜图像时的胶囊内窥镜的通过时间或通过位置对应的视点的位置,根据所求出的视点的位置显示虚拟内窥镜图像。
图7是示出排列显示虚拟内窥镜图像G2以及胶囊内窥镜图像G3时的一例的图。图7中以“SG”表示沿着胶囊内窥镜图像G3的边缘配置的比例尺图像。
如图7所示,比例尺图像SG的左端位置为通过开始时间或通过开始位置,与图6所示的虚拟内窥镜的开始点L2S相当。比例尺图像SG的右端位置是通过结束时间或通过结束位置,与图6所示的虚拟内窥镜的结束点L2E相当。
另外,图7中,作为胶囊内窥镜通过管内而收集到的多个胶囊内窥镜图像上的颜色,在比例尺图像SG上显示有与胶囊内窥镜的通过时间或通过位置对应的组织的代表颜色。例如,以“红”(图7中示出的阴影)显示病变部的代表颜色。
图7中以“MK”示出通过三角形的形状表现的标记。胶囊内窥镜图像选择部17具有输入部21以及显示控制部22。通过输入部(例如鼠标)21的操作,标记MK的位置显示为能够沿着比例尺图像SG移动。标记MK的位置与胶囊内窥镜的通过时间或通过位置相当。
显示控制部22接受基于输入部21的操作的标记MK的位置的指定,选择在与该位置对应的通过时间或通过位置收集到的胶囊内窥镜图像,并显示所选择的胶囊内窥镜图像。
对应关系计算部15接受胶囊内窥镜图像的选择,求出与收集到所选择的胶囊内窥镜图像时的胶囊内窥镜的通过时间或通过位置对应的视点的位置(第1芯线上的位置)。显示控制部22显示基于所求出的视点的位置的虚拟内窥镜图像。
在所述实施方式中,虚拟内窥镜图像和胶囊内窥镜图像建立对应,例如,如果在虚拟内窥镜图像上指定了病变候选,则容易选择与其相当的显示有病变候选的胶囊内窥镜图像,能够提高胶囊内窥镜检查中的确定诊断的操作性。
另外,在实施方式中,如图6以及图7所示,示出显示控制部22排列显示VR图像G1、虚拟内窥镜图像G2、以及胶囊内窥镜图像G3等,但也可以切换显示VR图像G1、虚拟内窥镜图像G2、以及胶囊内窥镜图像G3等。
进而,显示控制部22也可以在虚拟内窥镜图像上重叠显示胶囊内窥镜的位置。胶囊内窥镜图像选择部17根据虚拟内窥镜图像中的视点的位置(第1芯线上的位置)以及视线的朝向(第1芯线上的方向),求出最接近第1芯线上的位置以及朝向的胶囊内窥镜图像。显示控制部22将所求出的胶囊内窥镜图像中的第2芯线上的位置(胶囊内窥镜的位置)重叠地显示到虚拟内窥镜图像。由此,容易将虚拟内窥镜图像和胶囊内窥镜图像建立起对应。
说明了本发明的几个实施方式,但这些实施方式是作为例子而提示的,并不意图限定发明的范围。这些新的实施方式能够通过其它各种方式来实施,能够在不脱离发明的要旨的范围内进行各种省略、改写、变更。这些实施方式及其变形包含于发明的范围及其要旨中,并且包含于权利要求书记载的发明及其均等范围内。
Claims (11)
1.一种医用图像显示装置,能够使用管状体的三维图像来显示基于被设置于所述管状体的管内的视点的所述管内的虚拟内窥镜图像,其特征在于,具有:
胶囊内窥镜图像存储部,存储由胶囊内窥镜通过所述管内而收集到的胶囊内窥镜图像;
显示控制部,根据所述视点的位置显示所述胶囊内窥镜图像;
第1芯线提取部,根据所述三维图像预先提取所述管状体的第1芯线;
第2芯线提取部,根据所述胶囊内窥镜的位置预先提取所述管状体的第2芯线;以及
对应关系计算部,求出所述第1芯线和所述第2芯线的对应关系,
其中,所述显示控制部根据所述对应关系显示所述胶囊内窥镜图像。
2.根据权利要求1所述的医用图像显示装置,其特征在于,
所述显示控制部根据在所述虚拟内窥镜图像上指定的所述视点来显示所述胶囊内窥镜图像。
3.根据权利要求1或2所述的医用图像显示装置,其特征在于,
所述显示控制部将所述胶囊内窥镜的位置与所述虚拟内窥镜图像重叠地显示。
4.根据权利要求3所述的医用图像显示装置,其特征在于,
所述对应关系计算部根据表示所述第1芯线和所述第2芯线中的芯线的方向的三维切向量的类似度,求出所述对应关系。
5.根据权利要求3所述的医用图像显示装置,其特征在于,
所述胶囊内窥镜图像存储部将所述胶囊内窥镜图像与作为所述胶囊内窥镜的位置的第2芯线的位置以及作为胶囊内窥镜的朝向的第2芯线的朝向建立关联地存储,
所述医用图像显示装置还具有胶囊内窥镜图像选择部,参照所述对应关系求出与所述第1芯线上的位置对应的第2芯线上的位置,从存储于所述胶囊内窥镜图像存储部的胶囊内窥镜图像中提取在该求出的所述第2芯线上的位置的周边拍摄到的图像群,求出该提取到的所述图像群中的、相对地最接近所述第1芯线上的朝向的所述第2芯线上的朝向,求出与该所求出的所述第2芯线上的朝向对应的所述第2芯线上的位置,从存储于所述胶囊内窥镜图像存储部的胶囊内窥镜图像中选择与该所求出的所述第2芯线上的所述位置以及所述朝向建立有关联的所述胶囊内窥镜图像。
6.根据权利要求1所述的医用图像显示装置,其特征在于,
所述显示控制部排列显示所述虚拟内窥镜图像和所述胶囊内窥镜图像。
7.根据权利要求1所述的医用图像显示装置,其特征在于,
所述显示控制部切换显示所述虚拟内窥镜图像和所述胶囊内窥镜图像。
8.根据权利要求1所述的医用图像显示装置,其特征在于,
所述虚拟内窥镜图像包括沿着所述管状体的芯线切开所述管内得到的展开图像。
9.一种医用图像显示装置,能够使用管状体的三维图像来显示基于被设置于所述管状体的管内的视点的所述管内的虚拟内窥镜图像,其特征在于,具有:
胶囊内窥镜图像存储部,存储由胶囊内窥镜通过所述管内而收集到的胶囊内窥镜图像;
显示控制部,根据所述视点的位置显示所述胶囊内窥镜图像;
第1芯线提取部,使用所述三维图像预先提取所述管状体的第1芯线;以及
对应关系计算部,求出所述第1芯线与所述胶囊内窥镜通过所述管内时的通过时间的对应关系,
其中,所述显示控制部根据所述对应关系显示所述胶囊内窥镜图像。
10.一种医用图像显示装置,能够使用管状体的三维图像,来显示基于被设置于所述管状体的管内的视点的所述管内的虚拟内窥镜图像,其特征在于,具有:
胶囊内窥镜图像存储部,存储由胶囊内窥镜通过所述管内而收集到的多个胶囊内窥镜图像;
接受所述胶囊内窥镜图像的选择,而求出与收集到所述选择的胶囊内窥镜图像时的所述胶囊内窥镜的通过时间或者通过位置对应的所述视点的位置的单元;以及
显示控制部,显示基于所述求出的所述视点的位置的虚拟内窥镜图像。
11.一种医用图像诊断装置,其特征在于,
具有所述权利要求1至权利要求10中的任意一项所述的医用图像显示装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011123337 | 2011-06-01 | ||
JP2011-123337 | 2011-06-01 | ||
PCT/JP2012/064142 WO2012165572A1 (ja) | 2011-06-01 | 2012-05-31 | 医用画像表示装置及び医用画像診断装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103327900A CN103327900A (zh) | 2013-09-25 |
CN103327900B true CN103327900B (zh) | 2016-01-20 |
Family
ID=47259424
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280006251.XA Expired - Fee Related CN103327900B (zh) | 2011-06-01 | 2012-05-31 | 医用图像显示装置以及医用图像诊断装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9655498B2 (zh) |
JP (1) | JP2013009956A (zh) |
CN (1) | CN103327900B (zh) |
WO (1) | WO2012165572A1 (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5690447B2 (ja) * | 2012-10-15 | 2015-03-25 | オリンパスメディカルシステムズ株式会社 | 情報管理装置及びカプセル型内視鏡検査システム |
JP6563942B2 (ja) * | 2014-02-12 | 2019-08-21 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 病変サイズ傾向をモニタリングするシステムおよびその動作方法 |
US9849836B2 (en) | 2014-04-24 | 2017-12-26 | Gentex Corporation | Roof mounted imager module |
JP6633383B2 (ja) * | 2015-12-17 | 2020-01-22 | 株式会社Aze | 画像診断支援装置及びその制御方法、並びにプログラム及び記憶媒体 |
CN105942959B (zh) * | 2016-06-01 | 2018-08-24 | 安翰光电技术(武汉)有限公司 | 胶囊内窥镜系统及其三维成像方法 |
KR101921268B1 (ko) * | 2016-12-21 | 2018-11-22 | 주식회사 인트로메딕 | 3d 영상을 재생을 위한 캡슐 내시경 장치, 상기 캡슐 내시경의 동작 방법, 캡슐 내시경과 연동하여 3d 영상을 재생하는 수신기, 캡슐 내시경과 연동하여 수신기의 3d 영상을 재생하는 방법, 및 캡슐 내시경 시스템 |
WO2019087969A1 (ja) * | 2017-10-31 | 2019-05-09 | 富士フイルム株式会社 | 内視鏡システム、報知方法、及びプログラム |
JP6968209B2 (ja) * | 2018-02-09 | 2021-11-17 | 富士フイルム株式会社 | 位置合わせ装置、方法およびプログラム |
CN112584738B (zh) * | 2018-08-30 | 2024-04-23 | 奥林巴斯株式会社 | 记录装置、图像观察装置、观察系统、观察系统的控制方法及存储介质 |
CN109602383B (zh) * | 2018-12-10 | 2020-04-14 | 吴修均 | 一种多功能智能支气管镜检查系统 |
US20220198742A1 (en) * | 2019-09-20 | 2022-06-23 | Hoya Corporation | Processor for endoscope, program, information processing method, and information processing device |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6590999B1 (en) * | 2000-02-14 | 2003-07-08 | Siemens Corporate Research, Inc. | Real-time tracking of non-rigid objects using mean shift |
JP4022114B2 (ja) * | 2002-08-30 | 2007-12-12 | オリンパス株式会社 | 内視鏡装置 |
US9373166B2 (en) * | 2004-04-23 | 2016-06-21 | Siemens Medical Solutions Usa, Inc. | Registered video endoscopy and virtual endoscopy |
JP2006061274A (ja) | 2004-08-25 | 2006-03-09 | Konica Minolta Medical & Graphic Inc | プログラム、及び内視鏡システム |
JP2006230906A (ja) * | 2005-02-28 | 2006-09-07 | Toshiba Corp | 医用診断システム、医用診断装置及び内視鏡 |
JP4813190B2 (ja) * | 2005-05-26 | 2011-11-09 | オリンパスメディカルシステムズ株式会社 | カプセル型医療装置 |
JP5372406B2 (ja) * | 2008-05-23 | 2013-12-18 | オリンパスメディカルシステムズ株式会社 | 医療機器 |
JP5188879B2 (ja) * | 2008-05-23 | 2013-04-24 | オリンパスメディカルシステムズ株式会社 | 医療機器 |
US8241206B2 (en) * | 2008-07-08 | 2012-08-14 | Olympus Medical Systems Corp. | System for guiding capsule medical device |
JP4676021B2 (ja) * | 2009-04-16 | 2011-04-27 | 富士フイルム株式会社 | 診断支援装置、診断支援プログラムおよび診断支援方法 |
JP5322794B2 (ja) * | 2009-06-16 | 2013-10-23 | 株式会社東芝 | 内視鏡検査支援システム |
JP5377153B2 (ja) | 2009-08-18 | 2013-12-25 | 株式会社東芝 | 画像処理装置、画像処理プログラムおよび医用診断システム |
JP5457764B2 (ja) * | 2009-09-02 | 2014-04-02 | 株式会社東芝 | 医用画像処理装置 |
JP2011092681A (ja) * | 2009-09-30 | 2011-05-12 | Fujifilm Corp | 医用画像処理装置および方法並びにプログラム |
JP4923096B2 (ja) * | 2009-11-30 | 2012-04-25 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
JP5551957B2 (ja) * | 2010-03-31 | 2014-07-16 | 富士フイルム株式会社 | 投影画像生成装置およびその作動方法、並びに投影画像生成プログラム |
-
2012
- 2012-05-31 JP JP2012124553A patent/JP2013009956A/ja active Pending
- 2012-05-31 WO PCT/JP2012/064142 patent/WO2012165572A1/ja active Application Filing
- 2012-05-31 CN CN201280006251.XA patent/CN103327900B/zh not_active Expired - Fee Related
- 2012-05-31 US US13/993,994 patent/US9655498B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20140081079A1 (en) | 2014-03-20 |
CN103327900A (zh) | 2013-09-25 |
WO2012165572A1 (ja) | 2012-12-06 |
US9655498B2 (en) | 2017-05-23 |
JP2013009956A (ja) | 2013-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103327900B (zh) | 医用图像显示装置以及医用图像诊断装置 | |
EP2290613B1 (en) | System and method for presentation of data streams | |
CN102395318B (zh) | 诊断支援装置及诊断支援方法 | |
JP6134315B2 (ja) | 画像データにおける所見の解剖学的タグ付けの方法 | |
CN101677756B (zh) | 图像信息的显示处理装置以及显示处理方法 | |
JP2009039449A (ja) | 画像処理装置 | |
EP1847940A2 (en) | System for assessing a patient condition and method for processing related data | |
US9375132B2 (en) | Medical image processing apparatus and medical image diagnosis apparatus | |
US20140313222A1 (en) | Anatomical tagging of findings in image data of serial studies | |
JP2008295490A (ja) | カプセル内視鏡画像表示装置 | |
EP3040016A1 (en) | Image management device | |
EP2879094A2 (en) | Medical image processing system and program | |
EP2724275A2 (en) | Exam review facilitated by clinical findings management with anatomical tagging | |
CN105433969A (zh) | 医用图像系统以及推定临床位置信息显示方法 | |
JP4686279B2 (ja) | 医用診断装置及び診断支援装置 | |
JP4755863B2 (ja) | 読影支援装置、読影支援方法、およびそのプログラム | |
CN101075347A (zh) | 用于改善地自动检测医学图像数据中的异常的方法和装置 | |
JP2005218584A (ja) | 画像情報の表示処理装置、その表示処理方法及び表示処理プログラム | |
JP4464894B2 (ja) | 画像表示装置 | |
JP2010282355A (ja) | 医療検査情報管理システム | |
US11056149B2 (en) | Medical image storage and reproduction apparatus, method, and program | |
JP5242731B2 (ja) | 画像表示システムおよび画像表示端末装置 | |
EP2400465A2 (en) | Virtual endoscopy apparatus, method for driving thereof and medical examination apparatus | |
US20170323059A1 (en) | Examination work support system | |
KR20150047935A (ko) | 다중 의료 영상을 표시하는 방법 및 이를 수행하기 위한 의료 영상 기기 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20160715 Address after: Japan Tochigi Patentee after: TOSHIBA MEDICAL SYSTEMS Corp. Address before: Tokyo, Japan Patentee before: Toshiba Corp. Patentee before: TOSHIBA MEDICAL SYSTEMS Corp. |
|
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160120 |
|
CF01 | Termination of patent right due to non-payment of annual fee |