CN101530313B - 内窥镜检查系统和用于该内窥镜检查系统的方法 - Google Patents
内窥镜检查系统和用于该内窥镜检查系统的方法 Download PDFInfo
- Publication number
- CN101530313B CN101530313B CN2009101265174A CN200910126517A CN101530313B CN 101530313 B CN101530313 B CN 101530313B CN 2009101265174 A CN2009101265174 A CN 2009101265174A CN 200910126517 A CN200910126517 A CN 200910126517A CN 101530313 B CN101530313 B CN 101530313B
- Authority
- CN
- China
- Prior art keywords
- image
- point
- type endoscope
- impact point
- feature value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00071—Insertion part of the endoscope body
- A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
- A61B1/00082—Balloons
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00071—Insertion part of the endoscope body
- A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
- A61B1/00096—Optical elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0676—Endoscope light sources at distal tip of an endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0684—Endoscope light sources using light emitting diodes [LED]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/273—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
- A61B1/2736—Gastroscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
- A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/06—Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
- A61B5/065—Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/07—Endoradiosondes
- A61B5/073—Intestinal transmitters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00011—Operational features of endoscopes characterised by signal transmission
- A61B1/00016—Operational features of endoscopes characterised by signal transmission using wireless means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Gastroenterology & Hepatology (AREA)
- Human Computer Interaction (AREA)
- Endoscopes (AREA)
Abstract
本发明涉及内窥镜检查系统和用于该内窥镜检查系统的方法。胶囊型内窥镜由病人吞入,以捕获来自病人消化道的内壁表面的图像,同时检测所述胶囊型内窥镜的成像位置。医生观察由所述胶囊型内窥镜捕获的图像,以选择包括怀疑为病灶的部分的目标点图像,以及一些表示在气囊型内窥镜的插入路线上的通过点的图像。在将所述气囊型内窥镜的探测头插入病人中以详细检查可疑部分的同时,检测在由所述气囊型内窥镜捕获的图像与作为通过点和目标点之一的目的地点的图像之间的相似程度,以通过所述相似性判断所述探测头是否已经到达所述目的地点。因此,医生可以容易地使探测头到达目标点。
Description
技术领域
本发明涉及一种内窥镜检查系统和用于内窥镜检查系统的方法,其中将胶囊型内窥镜(capsule endoscope)用于初步检查,并且将挠性内窥镜用于捕获来自根据初步检查结果确定需要详细检查的那些身体部位的图像。
背景技术
采用胶囊型内窥镜的内窥镜检查最近被投入实际应用。胶囊型内窥镜具有集成到微胶囊中的组件,包括成像装置和光源。病人首先吞入胶囊型内窥镜,使得在光源照射内部身体部位,即病人管道的内表面的同时,成像装置捕获来自这些部位的图像。将通过成像装置捕获的图像数据以无线电信号的形式传输至连接到病人上的接收器。将图像数据按序记录在被安置在接收器中的存储介质例如闪速存储器上。
与采用胶囊型内窥镜将身体部位成像并行的是,检测病人体内的胶囊型内窥镜的位置。例如,JPA 2005-192880和JPA 2007-236700提出从胶囊型内窥镜发出无线电波,并且检测天线接收的无线电波的强度,所述天线可以被安装在病人穿戴的防护服等上。然后,由所接收的电波的强度得到关于胶囊型内窥镜的位置的数据,并且将该数据与被检查的部位的图像数据相关地记录在存储介质上。
为了采用胶囊型内窥镜完成内窥镜检查,通过USB线等将接收器连接至信息处理设备例如工作站,以将存储在接收器中的全部图像数据输入信息处理设备。在输入信息处理设备中的图像数据的基础上,医生将捕获的图像显示在监视器上,以对它们进行解释。当医生在某些图像中发现任何可疑部分,即看起来像病灶的部分时,医生采用挠性内窥镜例如气囊型内窥镜(balloon endoscope)从可疑部分拍摄图像,以进行完全的检查。
如果在小肠内部拍摄的那些图像中发现可疑部分,则将气囊型内窥镜的探测头插入小肠内,以通过置于探测头中的成像装置拍摄目标点的图像。目标点是可能存在可疑部分之处,并且其位置是在与可疑部分的图像数据相关地记录的胶囊型内窥镜的位置数据的基础上预先定位的。将来自成像装置的图像信号输送至连接到气囊型内窥镜上的处理器。然后,处理器处理图像信号以将内窥镜图像显示在监视器上,以便医生解释所显示的图像以进行诊断。
为了将气囊型内窥镜的探测头插入小肠以到达目标点,采用被安置在探测头上的气囊将小肠进行内拉(draw in)。结果,医生往往失去目标点的踪迹,原因是在被拉的小肠中的目标点与在正常状态的小肠中由胶囊型内窥镜检测的位置数据表示的目标点不符。因此,寻找目标点需要相当长的时间,这延长了内窥镜检查所需要的总时间,因此增加了病人的负担。
发明内容
考虑到上述情况,本发明的主要目的是提供一种内窥镜检查系统和内窥镜检查方法,所述系统和方法可以在将探测头插入到被检体内的同时,检测被检体内的挠性内窥镜例如气囊型内窥镜的探测头的相对位置,前提是所述内窥镜检查系统和内窥镜检查方法使用胶囊型内窥镜和具有带成像装置的挠性插入器的挠性内窥镜,所述胶囊型内窥镜被被检体吞入以捕获来自被检体内部的第一种图像,所述挠性内窥镜在医生根据第一种图像的解释结果发现必须进行被检体内的目标点的详细检查时,被插入被检体中以通过成像装置捕获第二种图像。
本发明的内窥镜检查系统包括:目标点选择装置,所述目标点选择装置响应医生的操作从第一种图像中选择含有目标点的目标点图像;相似性检测装置,所述相似性检测装置用于在挠性插入器向目标点移动的同时,检测目标点图像与由成像装置捕获的第二种图像之间的相似性;位置信息获取装置,所述位置信息获取装置用于在由相似性检测装置检测的相似性的基础上,获得关于被检体内的挠性内窥镜的成像装置的相对位置的信息;和显示装置,所述显示装置用于显示关于被检体内的成像装置的相对位置的信息。
根据一个优选实施方案,内窥镜检查系统还包括:通过点选择装置,所述通过点选择装置用于从第一种图像中选择至少一个通过点图像,所述通过点图像是在从挠性插入器的入口至目标点的路线上的通过点的代表,其中相似性检测装置还在将挠性插入器插入到被检体内的同时,检测通过点图像和第二种图像之间的相似性,并且位置信息获取装置在通过点图像和第二种图像之间的相似性的基础上、或在目标点图像和第二种图像之间的相似性的基础上,分别获取关于成像装置相对于通过点或目标点的相对位置的信息。
优选地,所述显示装置显示成像装置是否已经到达通过点和目标点的信息作为关于成像装置的相对位置的信息。
优选地,相似性检测装置通过采用通过点图像和第二种图像的图像特征值进行计算,检测通过点图像和第二种图像之间的相似性,并且通过采用目标点图像和第二种图像的图像特征值进行计算,检测目标点图像和第二种图像之间的相似性。
根据一个优选实施方案,内窥镜检查系统还包括:第一光谱图像产生装置,其用于分别由目标点图像和通过点图像产生适当选择的光谱频带的光谱图像;和第二光谱图像产生装置,其用于由第二种图像的每一个产生光谱图像,使得在插入器的成像装置向通过点移动的同时,光谱图像具有与通过点的光谱图像相同的光谱频带,以及在插入器的成像装置从通过点向目标点移动的同时,光谱图像具有与目标点的光谱图像相同的光谱频带,其中第一图像特征值取得装置从目标点和通过点的光谱图像中取得图像特征值,而第二图像特征值取得装置相应地从第二种图像的光谱图像中取得图像特征值。
优选地,由第一和第二图像特征值取得装置取得的图像特征值表示被检体内部的血管图。
根据另一个优选实施方案,检测被检体内部的表面凹凸不平度作为图像特征值。在此情况下,胶囊型内窥镜优选包括多个光源,所述多个光源被设置在不同位置,并且按序发光以照射被检体内的相同部分。胶囊型内窥镜与光源向相同部分的按序发射同步地,从相同部分捕获数量与光源数量对应的图像。然后,第一图像特征值取得装置分别在从通过点捕获的图像和从目标点捕获的图像的基础上估算通过点和目标点的表面凹凸不平度。另一方面,挠性内窥镜的插入器配置有在成像装置的不同侧的多个照明窗口,以从照明窗口一个接一个地向被检体内的相同部分按序地投射照明光,并且挠性内窥镜的成像装置与照明光从照明窗口向相同部分的按序投射同步地,从相同部分捕获数量与照明窗口对应的图像。然后,第二图像特征值取得装置在由挠性内窥镜的成像装置从相同部分捕获的图像的基础上,估算相同部分的表面凹凸不平度。
本发明的内窥镜检查方法包括以下步骤:在将挠性插入器插入被检体之前,从第一种图像中选择含有目标点的目标点图像;在将挠性插入器向目标点移动的同时,检测目标点图像和由成像装置捕获的第二种图像之间的相似性;在目标点图像和第二种图像之间的相似性的基础上,获得关于被检体内的挠性内窥镜的成像装置的相对位置的信息;和显示所得到的关于成像装置的相对位置的信息。
根据本发明,在从由胶囊型内窥镜捕获的第一种图像中选择的目标点图像与由挠性内窥镜捕获的第二种图像之间的相似性的基础上,获得关于被检体内的挠性内窥镜的成像装置的相对位置的信息。因此,即使在采用挠性内窥镜的内窥镜检查过程中,被检体内的目标点的相对位置从采用胶囊型内窥镜的内窥镜检查过程中目标点的相对位置变化时,本发明也确保检测挠性内窥镜的成像装置是否已经到达目标点。结果,医生可以在比常规更短的时间内让挠性内窥镜的成像装置到达目标点,这有助于缩短检查的总时间,从而降低病人的负担。
附图说明
当结合附图阅读时,从下列优选实施方案的详细描述中,本发明的上述和其它目的和优点将变得更加明显,其中在所有的数幅图中相同的标记表示相同或相应的部件,并且其中:
图1是示出作为根据本发明的一个实施方案的内窥镜检查系统的组件的胶囊型内窥镜检查系统的示意图;
图2是示出作为所述内窥镜检查系统的另一个组件的电子内窥镜检查系统的示意图;
图3是示出胶囊型内窥镜检查系统的电结构的框图;
图4是示出接收器的电结构的框图;
图5是示出作为胶囊型内窥镜检查系统的组件的第一处理器的电结构的框图;
图6是示出存储在第一处理器的数据存储器中的数据的说明图;
图7是示出内窥镜插入路线上的目标点和通过点的说明图,所述目标点和通过点是由医生参考由胶囊型内窥镜捕获的图像选择的;
图8是示出医生选择与目标点和通过点对应的图像文件的点图像选择屏的说明图;
图9是示出作为电子内窥镜检查系统的组件的第二处理器的电结构的框图;
图10是示出在显示气囊型内窥镜的末端还未到达目的地点的阶段中,该末端是否已经到达目的地点的点检测屏的说明图;
图11是示出处于末端已经到达第一通过点,并且将第二通过点设定为下一个目的地点的阶段的点检测屏的说明图;
图12是从被医生选择的目标点和通过点的相应图像数据中抽取图像特征值的方法的流程图;
图13是示出检测气囊型内窥镜末端已经到达内窥镜插入路线上的哪个点的方法的流程图;
图14是示出从病人肛门起的内窥镜插入路线上的目标点和通过点的说明图;
图15是示出根据本发明的第二实施方案的内窥镜检查系统中使用的点图像特征值的说明图;
图16是示出根据第二实施方案的点检测屏的说明图;
图17是根据本发明的第三实施方案的内窥镜检查系统中使用的胶囊型内窥镜的截面图;
图18是示出在第一光源和第二光源之间切换照明光的同时,第三实施方案的胶囊型内窥镜如何从一个部分捕获一对图像的说明图;
图19是示出在通过第三实施方案的胶囊型内窥镜从相同的被观察部位捕获的一对图像的基础上,估算关于该被观察部位的表面凹凸不平度的信息的方法的说明图;
图20是用于第三实施方案的气囊型内窥镜的插入器的末端的表面端部的正视图;
图21是用于第三实施方案的另一种胶囊型内窥镜的截面图;
图22是用于第三实施方案的又一个胶囊型内窥镜的截面图;和
图23是用于第三实施方案的另一种气囊型内窥镜的末端的透视图。
具体实施方案
如图1和2中所示,内窥镜检查系统2由胶囊型内窥镜检查系统3和电子内窥镜检查系统4组成。在内窥镜检查系统2中,病人或被检体10的内窥镜检查首先是使用胶囊型内窥镜检查系统3进行的,并且如果发现了可能是病灶等的任何可疑部分,则使用电子内窥镜检查系统4进行可疑部分的详细检查。
胶囊型内窥镜检查系统3由病人10吞入的胶囊型内窥镜11、病人10携带的便携式接收器12和工作站13组成,所述工作站13接收由胶囊型内窥镜11捕获的图像,并且显示医生对其进行解释的图像。
胶囊型内窥镜11捕获来自病人10的管道例如小肠的内壁的图像,以将捕获的图像数据按序以无线电波14的形式输送至接收器12。接收器12配置有用于显示各个设置屏的液晶显示器(LCD)16,以及用于在设置屏上设置接收器12的操作部17。接收器12接收并且存储以无线电波14的形式从胶囊型内窥镜11传输的图像数据,该图像数据在下面被称为CE图像数据。
无线电波14在胶囊型内窥镜11和接收器12之间的传输通过天线18和20进行,其中天线18被安装在胶囊型内窥镜11中,如图3中所示,而天线20被安装在病人10穿戴的防护服19上。每一根天线20具有用于测量来自胶囊型内窥镜11的无线电波14的场强的内置电场强度传感器21。
工作站13配置有第一处理器24、包括键盘和鼠标的操作部件25,以及LCD26。例如通过USB线27,将第一处理器24连接至接收器12以交换数据。第一处理器24可以通过无线通信例如红外线通信连接至接收器12。在采用胶囊型内窥镜11的胶囊型内窥镜检查过程中,或者在胶囊型内窥镜检查结束时,第一处理器24开始处理来自接收器12的CE图像数据以单独地积累并且处理每一个病人的CE图像数据。同时,第一处理器24基于CE图像数据产生内窥镜图像,该CE图像数据对应上述发明内容中规定的第一种内窥镜图像,并且在下面被称为CE图像。第一处理器24在LCD 26上显示CE图像,以便医生解释LCD 26上的CE图像。
第一处理器24还通过LAN 29连接至电子内窥镜检查系统4的第二处理器32。当医生通过操作第一处理器24的操作部件25选择一些CE图像时,第一处理器24从所选择的CE图像的图像数据中抽取图像特征值,并且通过LAN 29将抽取的特征值传输至第二处理器32。
在图2所示的实施方案中,电子内窥镜检查系统4是用于小肠检查的挠性内窥镜,所述挠性内窥镜由以下组成:通过嘴或另一个入口插入到病人10中的气囊型内窥镜31,第二处理器32,照明装置33,包括键盘和鼠标的操作部件34,以及LCD 35。气囊型内窥镜31配置有插入到病人体内的挠性插入器37、连接至插入器37的基座的柄38,以及连接至第二处理器32和照明装置33的通用线39。
探测头37a连接至插入器37的远端。如图9中所示,将物镜41和成像装置42安装在探测头37a中,以捕获来自病人管道,即该实施方案中的小肠的内壁的图像。将从成像装置42输出的模拟图像信号转换为数字图像数据(以下称为BE图像数据)并且通过通用线39输送至第二处理器32。同时,来自照明装置33的照明光通过被安装在插入器37中的光纤电缆等被传导至探测头37a,并且从探测头37a向小肠内壁投射。
将可弯曲部分37b安置在探测头37a后面。可弯曲部分37b由多个部分组成,所述多个部分以这样的方式相互连接使得可弯曲部分37b随着柄38的角度旋钮(angle knob)的操作而在任何方向上弯曲,以推拉被安装在插入器37中的线。从而,医生可以通过操作角度旋钮将探测头37a在被检体内定位到任何适宜的方向上。在可弯曲部分37b后面安置的是挠性柔软部分37c。
气囊48被安装在探测头37a和可弯曲部分37b之间。气囊48由弹性可膨胀材料例如胶乳橡胶制成。通风机(未显示)通过沿着插入器37和通用线39内部安置的通风管(未显示)输送空气进出气囊48,从而使气囊48鼓起和缩小。如在本领域中所知,探测头37a通过利用气囊48的收缩和膨胀拉曳小肠而前进到小肠中,以采用气囊型内窥镜31进行小肠内窥镜检查。
第二处理器32在来自气囊型内窥镜31的BE图像数据的基础上产生内窥镜图像,并且在LCD 35上显示内窥镜图像。下面,将基于BE图像数据产生的内窥镜图像称为BE图像,该对应如上述发明内容中规定的第二种内窥镜图像。由于BE图像比CE图像更清楚,因此采用气囊型内窥镜31的内窥镜检查适用于通过采用胶囊型内窥镜11的内窥镜检查发现的怀疑为病灶的身体部分的详细检查。第二处理器32还在经由LAN 29从第一处理器24输送的CE图像数据的图像特征值的基础上,检测病人10体内的气囊型内窥镜31的探测头37a的相对位置,这将参考图10和11进行详细描述。
现在,将参考图3更详细地描述组成胶囊型内窥镜检查系统3的胶囊型内窥镜11、接收器12和第一处理器24。通过CPU 50监督胶囊型内窥镜11的总体操作。CPU 50连接至ROM 51、RAM 52、成像驱动器53、调制器电路54、供电电路56和照明装置驱动器57。由图3中的标记140表示的是检测病人10体内的胶囊型内窥镜11的物理姿态的姿态传感器,这将与第二实施方案相关地进行描述。
CPU 50从ROM 51读取所必需的程序和数据,并且将它们在RAM 52上展开(expand)以按序处理读取的程序。成像驱动器53连接至成像装置60和信号处理电路61。成像装置60是例如CCD或CMOS,其当通过物镜59形成图像时,捕获被观察部位(身体部位或身体部分)的图像。物镜59在正面视角下具有140至180的成像区域,并且形成存在于成像区域中的被观察部位的全方位图像。成像驱动器53控制成像装置60和信号处理电路61的操作,从而以给定的帧频和快门速度捕获图像。由标记O表示的是物镜59的光轴。
信号处理电路61通过相关的二次抽样、放大和模拟至数字的转换处理从成像装置60输出的图像信号,以将其转换为数字CE图像数据。信号处理电路61还对CE图像数据进行γ校正和其它图像处理操作。
调制器电路54连接至信号处理电路61的输出端和发送器电路63的输入端,所述发送器电路63连接至天线18。调制器电路54根据来自信号处理电路61的CE图像数据调制无线电波,并且将所调制的无线电波14输出到发送器电路63中。在将无线电波14进行放大并且带通滤波之后,发送器电路63将无线电波14输出至气囊型内窥镜18。因此,将CE图像数据从胶囊型内窥镜11无线传输至接收器12。
供电电路56将来自电池64的功率供给至胶囊型内窥镜11的各个组件。照明装置驱动器57在CPU 50的控制下驱动照明装置65,从而在成像过程中以给定的光量照射被观察部位或目标身体部位。
如图4中所示,通过CPU 67控制接收器12的总体操作。数据总线68将CPU 67连接至接收器12的各个组件,包括ROM 69、RAM 70、解调器电路71、图像处理电路72、数据存储器73、输入接口(I/F)74和位置检测器电路75。数据总线68还连接至:LCD驱动器76,其用于驱动LCD 16;通信接口(I/F)78,其通过USB连接器77用于调停接收器12和第一处理器24之间的数据交换;以及供电电路80,其用于将来自电池79的功率供给至接收器12的各个组件。
CPU 67从ROM 69读取所必需的程序和数据,并且在RAM 70上将它们展开,以按序处理读取的程序。CPU 67还控制接收器12的各个组件,以根据经由操作部17输入的操作信号工作。解调器电路71连接至接收器电路81的输出端,而接收器电路81的输入端连接至天线20。解调器电路71将从胶囊型内窥镜11接收的无线电波14解调,以变成原始的CE图像数据,并且将CE图像数据输出至图像处理电路72。在将在天线20接收的无线电波14进行放大和带通滤波之后,接收器电路81输出无线电波14。
图像处理电路72处理由解调器电路71解码的CE图像数据,并且将处理的CE图像数据输出至数据存储器73,同时将ID信息例如文件名附于CE图像数据的各个单独的图像文件。数据存储器73是例如具有存储容量约为1GB的闪速存储器。数据存储器73存储从图像处理电路72输出的CE图像数据。输入接口74从电场强度传感器21获得测量结果,并且将结果输出至位置检测器电路75。
位置检测器电路75在通过电场强度传感器21测量的无线电波14的场强的基础上,检测被检体内的胶囊型内窥镜11的当前位置,并且位置检测器电路75将关于胶囊型内窥镜11的检测位置的信息(以下称为成像位置数据)输出至数据存储器73。数据存储器73在由成像位置数据表示的成像位置,记录与通过胶囊型内窥镜11获得的CE图像数据相关的成像位置数据。因为在来自胶囊型内窥镜11的无线电波14的场强的基础上检测被检体内的胶囊型内窥镜11的位置的方法在本领域中是熟知的,因此从本说明书中省略这种方法的详情。
如图5中所示,工作站13的第一处理器24包括监控工作站13的总体操作的CPU 83。数据总线84将CPU 83连接至RAM 86、通信接口(I/F)87和数据存储器88。数据总线84连接至驱动LCD 26的LCD驱动器89,并且连接至LAN接口(I/F)90,所述LAN接口(I/F)90连接至LAN 29。
CPU 83从数据存储器88读出所必需的程序和数据,并且将它们在RAM 86上展开,以按序处理读取的程序。CPU 83还控制工作站13的各个组件以根据通过操作部件25输入的操作信号工作。通信接口87通过USB连接器91调停工作站13和接收器12之间的数据交换,并且从接收器12接受CE图像数据和成像位置数据。将所接受的CE图像数据和成像位置数据存储在数据存储器88中。
如图6中所示,数据存储器88具有图像数据存储部93、成像位置数据存储部94、程序存储部95和图像特征值存储部96。图像数据存储部和成像位置数据存储部94分别存储CE图像数据和成像位置数据,同时将病人的数据逐个分类。
除用于控制第一处理器24的操作的各种程序和数据以外,程序存储部95还存储点图像选择程序97。当激活点图像选择程序97时,将点图像选择屏98(参见图8)显示在LCD 26上,从而允许从与通过接收器12输送的CE图像数据对应的这些图像之中选择图像。
如例如图7中所示,如果医生根据在LCD 26上的图像解释发现含有可能是病灶的这种可疑部分的CE图像,则医生选择含有可疑部分的CE图像作为目标点的CE图像。之后,医生至少选择在从胶囊型内窥镜11进入病人10的插入位置至目标点的路径上拍摄的第二CE图像。在图7所示的实例中,将胶囊型内窥镜11和气囊型内窥镜31通过嘴10a插入病人10的消化道,并且按序选择沿着气囊型内窥镜31的插入路线R(在该实施方案中对应于胶囊型内窥镜11的移动过程)的中间点作为第一至第Z通过点(Z是大于1的整数)。
尽管本实施方案是在目标点和通过点位于小肠的假设下进行描述的,但是这些点可以位于被检体内的任何位置。
气囊型内窥镜31的探测头37a经由嘴10a进入,并且经由第一至第Z通过点到达目标点。在下列描述中,目标点的CE图像称为目标点图像,并且第一至第Z通过点的CE图像分别称为第一至第Z通过点图像。
目标点图像和第一至第Z通过点图像用于在采用气囊型内窥镜31的内窥镜检查过程中检测探测头37a在去目标点的路上已经到达哪个点。如上所述,气囊型内窥镜31的气囊48将小肠向里拉,以将气囊型内窥镜31的插入器37推入小肠中。将通过气囊型内窥镜31得到的BE图像数据与在相应通过点和目标点得到的CE图像数据进行比较,以检查它们之间的相似性。基于它们之间的相似性,可以检测探测头37a已经到达哪个点。应指出,采用从相应图像数据抽取的图像特征值来判断BE图像数据和CE图像数据之间的相似性。
再次参考图5,当激活点图像选择程序97时,将失真校正处理器(展开图像产生装置)100,光谱图像发生器(第一光谱图像发生器)101和图像特征值抽取器(第一图像特征值取得装置)102装配到CPU 83中。
失真校正处理器100处理医生通过对操作部件25进行操作而选择的这些CE图像的图像数据以校正梯形失真,称为梯形失真校正。如上所述,胶囊型内窥镜11的物镜59(参见图3)形成所观察的身体部位的全方位图像,因此CE图像数据是全方位图像数据。因为BE图像是平面图像,因此必须将CE图像展开为平面图像,以检测BE图像和CE图像之间的相似性或重合性。
为此目的,失真校正处理器100将由医生选择的这些CE图像的图像数据进行梯形失真校正处理,以产生展开图像数据。从而,将相应点的图像数据转变为展开图像数据。可以通过与梯形失真校正不同的其它已知失真校正方法或图像展开方法产生展开图像数据。
Te 101从展开图像数据产生任意的光谱频带(波带)的光谱图像数据,所述展开图像数据是由失真校正处理器100产生的。为了在采用气囊型内窥镜31的内窥镜检查过程中精确地检测探测头37a是否已经到达选择点,适宜的是点图像数据与选择点周围的周围区域的CE图像数据确实不同。如果一个点的点图像数据类似于该点周围的周围区域的CE图像数据,可能发生在探测头37a到达目的地点之前探测头37a被认为到达该点的错误。
为了防止这种错误,光谱图像发生器101从通过失真校正处理器100产生的展开图像数据产生光谱图像数据(第一光谱图像)。因此,将由医生选择的相应图像的每一个点图像数据转变为展开图像数据,然后转变为光谱图像数据。在采用内窥镜检查的医疗诊断领域中,通常产生目标物的光谱图像以便发现病灶,原因是光谱图像可以增强目标物例如血管或一些器官例如胃内壁和肠表面组织的适合特征,而无需将目标物着色。产生相应点的光谱图像数据以增强这些点例如血管的一些特征是增大点图像数据和选择点周围的CE图像数据之间的差别。因为对增大点图像数据和周围CE图像数据之间的差别有效的光谱频带根据目标器官而变化,因此设计光谱图像发生器101以产生可变光谱频带的光谱图像数据,该可变光谱频带可通过操作部件25调节。
当对操作部件25进行用于显示光谱图像的操作时,光谱图像发生器101从数据存储器88或另一个存储器位置读取系数矩阵(未显示),以进行用于将展开图像数据与矩阵系数相乘的矩阵计算,从而产生光谱图像数据。因为采用系数矩阵产生光谱图像数据的方法在本领域中是熟知的,并且在例如JPA 2007-319442中被公开,因此在此省略这种方法的描述。可以采用另一种用于产生光谱图像数据的方法。
图像特征值抽取器102从第一至第Z通过点的光谱图像数据和目标点的光谱图像数据抽取特征值。下面,将通过点的光谱图像数据和目标点的光谱图像数据称为通过点光谱图像数据和目标点光谱图像数据。目标点光谱图像数据以及通过点光谱图像数据的特征值,其与第一次提及的第一图像特征值对应,表示关于单独的图像的特征值的数值信息,包括每一个图像的总色调、颜色分布、轮廓分布和形状。这些特征值用于计算BE图像数据与图像的相似性。在本实施方案中,抽取在单独的点图像中表示血管图的图像特征值。
表示血管图的图像特征值可以是“血管的边缘方向的分布”、“血管曲率的分布”、“脉管分支点的数量及其相对位置”和“血管边缘方向的变化图”。血管边缘方向的分布是指血管边缘(轮廓的横向或径向末端)方向的分布。具体地,将基于点光谱图像数据的目标点和各个通过点的光谱图像中所含的所有血管再分为恒定长度的段,并且以相对于可以适当预定的参考方向的角度(0°至180°)的形式检测每一段血管的方向。因此,边缘方向的分布表示各个血管段的方向的分布。
曲率分布表示在各个点的光谱图像中所包含的所有血管的各段的曲率分布。脉管分支点的数量及其相对位置表示在选择点的每一光谱图像中的血管的分支点的数量,以及这些分支点之间的位置关系。例如,分支点之间的位置关系可以在XY坐标系中表示,该XY坐标系的参考点(0,0)是在图像中的分支点中的适当分支点确定的。脉管边缘的方向上的变化图表示在相应点的光谱图像中所含的血管的变化图。作为变化图的一个实例,血管分开成两个分支,而两个分支分别进一步分开为两个和三个方向。
抽取血管图的图像特征值的方法可以是常规方法,因此在此省略血管图抽取方法的描述。通过图像特征值抽取器102抽取的点图像特征值的数据伴随有关于点光谱图像数据的光谱频带以及关于作为相应点光谱图像的原图的相应点图像的图像文件的文件名的附加信息。光谱频带数据是由光谱图像发生器101得到的,而文件名数据是由图像数据存储部93得到的。
图像特征值抽取器102将从点光谱图像数据抽取的相应点图像的特征值输出到数据存储器88。然后,数据存储器88的图像特征值存储部96临时存储相应点图像特征值,同时根据病人将它们分类(参见图6)。
图8显示了点图像选择屏98,其用于从通过接收器12获取的CE图像中选择点图像。点图像选择屏98配置有病人选择框105、图像显示窗口107、光谱频带输入框108和选择结果显示窗口109。
病人选择框105用于选择病人10作为图像解释的对象,并且从数据存储器88读取通过胶囊型内窥镜11从所选择的病人获得的CE图像。当指示光标110放在病人选择框105的右端指示倒三角的标记上,并且点击鼠标,病人名字和身份证号码的名单以下拉菜单的形式显示。通过点击病人名字中的一个,选择一个病人作为所述对象。
图像显示窗口107显示在病人选择框105中选择的病人10的CE图像。例如,CE图像以与通过胶囊型内窥镜11成像的时间顺序相同的顺序逐一地显示在图像显示窗口107上。医生可以通过点击控制栏107a上的相应标记,控制播放、暂停和停止图像显示窗口107上的显示。因此,医生在按序显示CE图像的同时,对它们逐一地进行解释或研究。
当医生在所显示的CE图像中没有发现任何可能是病灶的部分时,医生继续到下一个CE图像,而不进行任何特别的操作。如果医生在显示的CE图像中发现了可能是病灶的可疑部分,因此医生暂停显示以更详细地研究CE图像。下面,将含有可疑部分的CE图像称为目标点候选图像。在CE图像的情况下,其文件名和成像位置数据显示在图像显示窗口107的上区。如果医生判断必需进行被捕获作为目标点候选图像的部位的详细检查,则医生进行用于产生目标点候选图像的光谱图像的操作。
具体地,医生在光谱频带输入框108输入光谱频带,以产生光谱图像,同时目标点候选图像在图像显示窗口107上暂停。接着,医生在光谱图像显示按钮111上点击指示光标110。从而,通过展开目标点候选图像数据产生展开图像数据,然后由这种展开图像数据产生具有由医生输入的光谱频带的光谱图像数据。基于产生的光谱图像数据,将光谱图像显示在图像显示窗口107上。
当医生在光谱频带输入框108中改变光谱频带,之后点击光谱图像显示按钮111时,在图像显示窗口107上显示具有改变的光谱频带的光谱图像。因此,医生可以重复相同的操作直至在图像显示窗口107上显示最适宜的光谱图像,例如具有增强的血管图的光谱图像。当显示适宜的光谱图像时,医生在点选择按钮112上点击指示光标110。然后,选择所显示的光谱图像的光谱图像数据作为目标点图像数据。同时,从目标点图像数据中抽取图像特征值,并且将抽取的目标点特征值存储在数据存储器88的图像特征值存储部96中(参见图6)。
选择结果显示窗口109显示被医生选择作为点图像的那些光谱图像的文件名和相应的光谱频带。例如,当选择目标点图像数据时,在选择结果显示窗口109上的“目标点”行中显示所选择的图像数据的文件名和光谱频带。
在选择目标点图像数据之后,医生在点图像选择屏98上选择相应通过点的图像数据。首先,在图像显示窗口107上逐一显示这些CE图像,其是从所选择的病人10在从嘴10a或用于气囊型内窥镜31的插入器37的入口至目标点的路径上以与成像的时间顺序相同的顺序捕获的。医生观察连续的CE图像,并且在显示可以是第一通过点图像的这种CE图像(以下称为第一通过点候选图像)时,通过操作控制栏107a暂停显示。此时,在图像显示窗口107的上区上显示第一通过点候选图像的文件名和成像位置数据。
医生在图像显示窗口107上检查第一通过点候选图像及其文件名和成像位置数据,以确定候选图像是否为第一通过点图像。如果医生没有确定候选图像为第一通过点图像,则医生操作控制栏107a以重新按序显示CE图像。当医生选定第一通过点图像时,医生在光谱频带输入框108中输入第一通过点图像的光谱频带,并且点击光谱图像显示按钮111。从而,展开第一通过点图像的CE图像数据,并且由展开图像数据产生具有指定的光谱频带的光谱图像数据。基于光谱图像数据,在图像显示窗口107上显示光谱图像。
医生重复输入光谱频带,并且在图像显示窗口107上检查具有输入的光谱频带的光谱图像,直至所显示的光谱图像包含有助于区别第一通过点图像和其它点图像的增强的血管图。当在图像显示窗口107上显示适宜的光谱图像时,医生点击点选择按钮112,通过点击,在选择结果显示窗口109上的“第一通过点”行中显示所选择的光谱图像的文件名和光谱频带。这表示选择在图像显示窗口107上显示的第一通过点光谱图像的图像数据作为第一通过点图像数据。
在选择第一通过点图像数据的同时,从第一通过点图像数据中抽取图像特征值,并且将所抽取的第一通过点的特征值存储在数据存储器88的图像特征值存储部96中,从而完成第一通过点图像数据的选择。
以与第一通过点相同的方式选择第二和后面的通过点光谱图像的图像文件,并且将第二和后面的通过点的图像特征值存储在图像特征值存储部96中。当完成选择所有必需的点及其光谱图像时,医生在选择完成按钮113上点击指示光标110。然后,通过LAN接口90和LAN 29将相应点图像的图像特征值从图像特征值存储部96传输至第二处理器32。
现在将详细描述构成电子内窥镜检查系统4的气囊型内窥镜31和第二处理器32。如图9中所示,通过物镜41在气囊型内窥镜31的成像装置42的成像表面上形成被观察部位或目标部位的光学图像,并且成像装置42将来自其相应像素的模拟图像信号输出到模拟前端(AFE)电路115。AFE电路115采用相关的二次抽样、放大和模拟至数字的转换处理图像信号,将它们转化为数字BE图像数据。AFE电路115通过通用线39将BE图像数据输出到第二处理器32。作为选择,可以将AEF电路115装配在第二处理器32中,并且在第二处理器32中将从成像装置42输出的图像信号转换为BE图像数据。
第二处理器32的CPU 116控制电子内窥镜检查系统4的总体操作。数据总线117将CPU 116连接至RAM 119、数字信号处理器(DSP)120、图像存储器121和数据存储器122。还将数据总线117连接至LCD驱动器123和LAN接口(I/F)124,LCD驱动器123用于驱动LCD 35,LAN接口(I/F)124连接至LAN 29。对LAN接口124提供从第一处理器24经由LAN29输送的相应点图像的图像特征值。将图像特征值储存在数据存储器122中。
CPU 116从数据存储器122读取必需的程序和数据,并且在RAM 119上将它们展开,以按序处理所读取的程序。CPU 116还控制第二处理器32的相应组件根据通过操作部件34输入的操作信号工作。数字信号处理器120处理从气囊型内窥镜31输送的BE图像数据。将经处理的BE图像数据临时存储在图像存储器121中。图像存储器121用从数字信号处理器120照原样输送的新BE图像数据重写以前存储的BE图像数据。
LCD驱动器123连接至VRAM(未显示),该VRAM存储从图像存储器121读取的BE图像数据。将BE图像数据写入VRAM和从VRAM中读出是相互并行地进行的。LCD驱动器123将从VRAM读出的BE图像数据转换为模拟复合信号以将BE图像显示在LCD 35上。
数据存储器122具有图像特征值存储部126和程序存储部127。将从第一处理器24输送的相应点图像的图像特征值存储在图像特征值存储部126中,同时将它们对于病人逐个分类。在为了详细检查目标点而将气囊型内窥镜31的插入器37插入病人10体内的同时,基于相应点图像的图像特征值,CPU 116检测探测头37a已经到达相应通过点和目标点之中的哪个点。具体地,CPU 116计算BE图像数据的图像特征值和存储的相应点图像的图像特征值之间的相似程度。
除用于控制第二处理器32的操作的各种程序和数据以外,程序存储部127还存储点检测程序128。当激活点检测程序128时,在LCD 35上显示点检测屏129(参见图10和11),从而显示气囊型内窥镜31的探测头37a已经到达哪个点。当激活点检测程序128时,将光谱图像发生器(第二光谱图像发生器)131、图像特征值抽取器(第二图像特征值取得装置)132和点检测器(位置信息获取装置)133装配在CPU 116中。
光谱图像发生器131从图像存储器121读出BE图像数据,并且用读取的BE图像数据产生BE光谱图像数据(第二光谱图像),使得在气囊型内窥镜31的探测头37a正在接近的目的地点的图像特征值(光谱频带数据)的基础上,BE光谱图像数据具有与目的地点的第一光谱图像数据相同的光谱频带。
例如,当目的地点为第一通过点时,光谱图像发生器131从数据存储器122的图像特征值存储部126检索第一通过点图像特征值的光谱频带数据。在读取的光谱频带数据的基础上,光谱图像发生器131产生光谱频带与第一通过点的第一光谱图像数据的光谱频带相同的BE光谱图像数据。对于第二和下面的通过点以及目标点,在探测头37a到达这些点之前,光谱图像发生器131产生光谱频带与相应点的第一光谱图像数据的光谱频带相同的BE光谱图像数据。
将由光谱图像发生器131产生的BE光谱图像数据临时储存在RAM119的光谱图像数据存储器位置(未显示)。每当在RAM 119中写入新的一组BE光谱图像数据时,就修改在RAM 119的光谱图像数据存储器位置的BE光谱图像数据。
图像特征值抽取器132从写入RAM 119的光谱图像数据存储器位置的BE光谱图像数据中抽取BE光谱图像的图像特征值,该图像特征值在下面被称为与第一次提及的第二图像特征值对应的BE图像特征值。与上述点图像特征值类似,该BE图像特征值表示在所观察部位的血管图的图像特征值。将由图像特征值抽取器132抽取的BE图像特征值临时存储在RAM 119的图像特征值存储器位置(未显示)中。每当将新的一组BE光谱图像数据写入RAM 119时,图像特征值抽取器132抽取BE图像特征值。每当在RAM 119中写入新的一组BE图像特征值数据时,就修改在RAM119的图像特征值存储器位置的BE图像特征值数据。
点检测器133计算存储在RAM 119中的BE图像特征值与存储在图像特征值存储部126中的目的地点的点图像特征值之间的相似程度,所述点图像特征值是在目的地点通过胶囊型内窥镜11得到的CE光谱图像数据。基于相似程度,点检测器133判断通过气囊型内窥镜31得到的BE光谱图像数据是否与目的地点的点图像数据类似。即,点检测器133判断气囊型内窥镜31的探测头37a是否到达目的地点。
作为用于计算相似程度的公式,点检测器133采用随着两个比较物之间的相似程度变得越高,具有越大的值的这种函数。例如,点检测器133采用下式:
D=C-∑{ai×(vxi-vsi)2}
其中vx是目的地点的图像特征值,vs是BE图像特征值,ai是各个参数的加权系数,并且i是参数号。
点检测器133将所计算的相似程度与预定的阈值进行比较。当计算的相似程度小于预定的阈值时,点检测器133判断BE图像数据与目的地点的点图像数据不类似,并且气囊型内窥镜31的探测头37a未到达目的地点。如果计算的相似程度等于或大于预定的阈值,则点检测器133判断气囊型内窥镜31的探测头37a已经到达目的地点。
然而,即使在气囊型内窥镜31和胶囊型内窥镜11捕获来自相同点的图像时,如果此时图像具有彼此不同的姿态,则BE图像的姿态也不同于CE图像的姿态。在此情况下,当BE图像旋转适当的角度例如180度时,BE图像可能与CE图像重合。在不校正BE图像的姿态的情况下,即使气囊型内窥镜31的探测头37a实际上到达了目的地点,计算的相似程度也可能小于预定的阈值。为了避免这个问题,可以降低阈值,这增加在探测头37a实际上未到达目的地点时,错误地判断气囊型内窥镜31的探测头37a到达了目的地点的可能性。
为了解决这个问题,根据本实施方案,在将图像的姿态改变到不同方向上的同时,由BE光谱图像数据产生多组旋转光谱图像数据。从这些不同组的旋转光谱图像数据中,抽取相应的旋转图像特征值。然后,点检测器133计算相应的旋转图像特征值和目的地点的点图像特征值之间的相似程度,以及BE图像特征值与目的地点的点图像特征值之间的相似程度。如果这些计算的相似程度中的至少一个等于或大于阈值,则点检测器133判断气囊型内窥镜31的探测头37a到达了目的地点。
当判断探测头37a到达目的地点时,将下一个点设定为目的地点。即,当判断探测头37a到达第一通过点时,将第二通过点设定为目的地点。当判断探测头37a到达最后一个通过点时,将目标点设定为目的地点。CPU116的相应组件131至133产生BE光谱图像数据,抽取BE图像特征值,并且在新设定的下一个点的点图像特征值的基础上计算相似程度。当判断探测头37a到达目标点时,CPU 116的相应组件131至133终止处理。
如图10和11中所示,点检测屏129显示关于在第一至第Z通过点和目标点之中气囊型内窥镜31的探测头37已经到达的点的信息。点检测屏129具有图像显示窗口135、目的地点显示窗口136、光谱频带显示窗口137和消息显示窗口138。
图像显示窗口135显示目前由气囊型内窥镜31得到的BE图像。可以在BE光谱图像数据的基础上与BE图像同时显示BE光谱图像。目的地点显示窗口136显示目的地点例如第一通过点的名称。光谱频带显示窗口137显示附于目的地点的点图像特征值数据上的光谱频带的信息。
消息显示窗口138显示通知气囊型内窥镜31的探测头37a是否已经到达目的地点的消息。例如,在目的地点为第一通过点并且探测头37a未到达第一通过点时,如图10中所示,在消息显示窗口138中显示“未到达第一通过点”的消息。
当探测头37a已经到达第一通过点时,如图11中所示,在消息显示窗口138中显示“到达第一通过点”的消息。此时,将第二通过点设定为新的目的地点,因此目的地点显示窗口136显示“第二通过点”,并且光谱频带显示窗口137显示与第二通过点的点图像特征值对应的光谱频带数据。当探测头37a已经通过第一通过点时,将消息显示窗口138中的消息修改为适合的消息,例如“还未到达第二通过点”。
以与上述相同的方式,在气囊型内窥镜31的探测头37a朝第二和下面的通过点和目标点移动的同时,在相应的窗口136至138中显示目的地点的名称、关于目的地点的光谱图像的光谱频带数据,以及相应的消息。因此,医生可以检查气囊型内窥镜31的探测头37a是否到达目的地点。如果探测头37a未到达目的地点,则医生可以向前或向后移动探测头37a以使其到达目的地点。以这种方式,气囊型内窥镜31的探测头37a最终到达目标点。
现在,将描述如上配置的内窥镜检查系统2的操作。在内窥镜检查系统2中,对病人10首先进行采用胶囊型内窥镜11(胶囊型内窥镜检查系统3)的内窥镜检查,并且如果胶囊型内窥镜的结果显示任何可疑部分,则对病人10进行采用气囊型内窥镜31(电子内窥镜检查系统4)的内窥镜检查以详细研究可疑部分。
首先,将参考图12描述胶囊型内窥镜检查系统3中的程序。作为内窥镜检查的准备,病人10穿上防护服19并且戴上接收器12。然后,在打开胶囊型内窥镜11的电源开关之后,病人10吞入胶囊型内窥镜11。当胶囊型内窥镜11通过病人的管道时,它捕获来自管道的内表面的图像,并且以无线电波14的形式按序传输捕获的图像的CE图像数据。在天线20上接收无线电波14。同时,通过被装配在每根天线20上的电场强度传感器21检测所接收的无线电波14的场强。将来自各个传感器21的检测结果输入到接收器12的位置检测器电路75中。
将在天线20上接收的无线电波14经由接收器电路81输送至解调器71,以将其解调为原始的CE图像数据。将CE图像数据在图像处理电路72中处理并且输出到数据存储器73。位置检测器电路75在来自电场强度传感器21的检测结果的基础上检测病人10中的胶囊型内窥镜11的目前位置,并且将胶囊型内窥镜11的目前位置的数据,即成像位置数据,输出到数据存储器73中。数据存储器73存储与从图像处理电路72输送的图像数据相关的成像位置数据。
当完成采用胶囊型内窥镜11的成像或内窥镜检查时,接收器12经由USB线27连接至第一处理器24。接着,医生对操作部件25进行操作以将来自数据存储器73的CE图像数据和成像位置数据传输至第一处理器24。然后,将CE图像数据存储在数据存储器88的图像数据存储部93中,并且将成像位置数据存储在数据存储器88的成像位置数据存储部94中。在将所有数据从数据存储器73传输至数据存储器88之后,医生对操作部件25进行操作以激活点图像选择程序97,从而在LCD 26上显示点图像选择屏98。
医生操作指示光标110以在点图像选择屏98上的病人选择框105中选择病人10。CPU 83从图像数据存储部93读出所选择的病人的CE图像数据,以在图像显示窗口107上按序显示该病人的CE图像。如果显示的CE图像不含任何看起来像病灶的可疑部分,则医生显示下一个CE图像,以对其进行研究。如果医生在从接收器12传输的任何CE图像中未发现任何可疑部分,则医生关闭点图像选择屏98以终止点图像选择处理。
相反,如果医生在图像显示窗口107中显示的CE图像中发现被怀疑为病灶的这种部分,则医生操作控制栏107a,以暂停显示的CE图像,并且研究所显示的作为目标点候选图像的CE图像。如果医生判断不必进行在目标点候选图像中包含的可疑部分的详细检查,则医生操作控制栏107a,以重新开始CE图像的按序显示。如果医生判断必需进行在目标点候选图像中包含的可疑部分的详细检查,则医生对操作部件25进行操作,以在光谱频带输入框108中输入适合的光谱频带,并且点击光谱图像显示按钮111。
通过点击光谱图像显示按钮111,CPU 83的失真校正处理器100从目标点候选图像的图像数据产生展开图像数据,并且从展开图像数据,光谱图像发生器101产生在光谱频带输入框108中输入的输入光谱频带的光谱图像数据。然后,CPU 83在由光谱图像发生器101产生的光谱图像数据的基础上,在图像显示窗口107中显示出光谱图像。
医生重复上述操作直至显示适宜的光谱图像,例如具有增强的血管图的光谱图像。当显示适宜的光谱图像时,医生点击点选择按钮112。从而,在选择结果显示窗口109的“目标点”行中显示所选择的图像的文件名和光谱频带。因此,选择了目标点的光谱图像数据。同时,图像特征值抽取器102从目标点的光谱图像数据中抽取目标点的图像特征值,并且将这些值输出到数据存储器88。然后,将目标点的图像特征值临时存储在图像特征值存储部96中。
当完成目标点的光谱图像数据的选择时,医生开始选择通过点和通过点的光谱图像。当医生通过操作部件25等进行用于开始选择通过点图像数据的操作时,CPU 83访问存储在成像位置数据存储部94中的成像位置数据,并且让在胶囊型内窥镜11从嘴10a向目标点移动时从病人10拍摄的那些CE图像按序在图像显示窗口107中显示。在检查按序显示的CE图像时,医生通过操作控制栏107a暂停可能是第一通过点图像的CE图像的显示。
然后,医生检查在图像显示窗口107中静止显示的CE图像及其成像位置数据,以决定该候选图像是否应当被选择为第一通过点图像。当医生决定不选择该候选图像作为第一通过点图像时,医生重新开始CE图像的按序显示。
当医生决定选择该候选图像作为第一通过点图像时,医生输入光谱频带,并且点击光谱图像显示按钮111。然后,失真校正处理器100由第一通过点候选图像的图像数据产生展开图像数据,并且由展开图像数据,光谱图像发生器101产生输入的光谱频带的光谱图像数据。然后,在由光谱图像发生器101产生的光谱图像数据的基础上,在图像显示窗口107中显示光谱图像。医生重复上述操作直至显示适宜的光谱图像,例如具有增强的血管图的光谱图像。
当显示适宜的光谱图像时,医生点击点选择按钮112。从而,在选择结果显示窗口109的“第一通过点”行中显示所选择的图像的文件名和光谱频带。因此,选择了第一通过点的光谱图像数据。同时,图像特征值抽取器102从第一通过点的光谱图像数据中抽取图像特征值,并且将这些值输出到数据存储器88。然后,将第一通过点的图像特征值临时存储在图像特征值存储部96中。
以与第一通过点相同的方式选择第二和后面的通过点光谱图像,并且将第二和下面的通过点的图像特征值存储在图像特征值存储部96中。当完成选择所有必需的点及其光谱图像时,医生点击选择完成按钮113。然后,将相应点图像的图像特征值从图像特征值存储部96经由LAN 29传输至第二处理器32,并且存储在数据存储器122的图像特征值存储部126中。在采用胶囊型内窥镜11的每一次内窥镜检查中,进行上述操作和处理。
接着,医生对通过采用胶囊型内窥镜11的内窥镜检查所发现的目标点进行详细检查。将参考图13描述采用电子内窥镜检查系统4的详细检查的程序。首先,医生输入关于作为电子内窥镜检查对象的病人10的信息,将气囊型内窥镜31的通用线39连接至第二处理器32和照明装置33,并且通过对操作部件34进行操作来激活点检测程序128。
当激活点检测程序128时,在LCD 35上显示点检测屏129。CPU 116首先建立第一通过点作为目的地点,并且从数据存储器122的图像特征值存储部126中读出受检病人10的第一通过点图像的图像特征值。然后,在点检测屏129的相应窗口136至138中显示下一个目的地点的名称、相应的光谱频带数据和消息。
当在LCD 35上显示点检测屏129时,医生打开照明装置33,并且将气囊型内窥镜31的插入器37通过嘴10a插入到病人10的管道中,使得置于探测头37a中的成像装置42捕获来自管道的内表面的图像。通过AFE电路115将从成像装置42输出的模拟图像信号转换为数字图像数据。经由通用线39将通过气囊型内窥镜31以这种方式得到的BE图像数据输送到第二处理器32中。
将BE图像数据在第二处理器32的数字信号处理器120中处理,然后存储在图像存储器121中。基于存储在图像存储器121中的BE图像数据,在点检测屏129的图像显示窗口135中显示BE图像。在图像显示窗口135中观察BE图像的同时,医生通过采用气囊型内窥镜31的气囊48拉曳病人的小肠,使探测头37a向第一通过点前进。
同时,CPU 116的光谱图像发生器131在第一通过点图像特征值中包括的光谱频带数据的基础上,产生光谱频带与第一通过点的光谱图像数据的光谱频带相同的BE光谱图像数据,该第一通过点图像特征值是预先从图像特征值存储部126中读出的。然后,图像特征值抽取器132从由光谱图像发生器131产生的BE光谱图像数据中抽取BE图像特征值。
接着,点检测器133计算由图像特征值抽取器132抽取的BE图像特征值与第一通过点图像特征值之间的相似程度。如果计算的相似程度小于预定的阈值,则点检测器133判断BE 31的探测头37a未到达第一通过点。然后,在消息显示窗口138中显示消息“未到达第一通过点”,因此医生使气囊型内窥镜31的探测头37a进一步前进,以到达第一通过点。
当计算的相似程度达到预定的阈值时,CPU 116判断探测头37a已经到达第一通过点,并且在消息显示窗口138中显示“到达第一通过点”的消息。因此,医生可以证实探测头37a已经到达第一通过点。因为通过气囊48内拉小肠以将探测头37a移动至第一通过点,因此在采用胶囊型内窥镜11的内窥镜检查与采用气囊型内窥镜31的内窥镜检查之间,病人10中的第一通过点的相对位置通常可能变化。然而,根据本实施方案,判断探测头37a是否已经到达第一通过点是在BE图像特征值和第一通过点图像的图像特征值之间的相似性的计算结果的基础上进行的。因此,与第一通过点的相对位置的变化无关,可以精确地判断探测头37a已经到达第一通过点。
当CPU 116判断探测头37a已经到达第一通过点时,它将第二通过点设定为下一个目的地点,并且从图像特征值存储部126中读出第二通过点图像的图像特征值。然后,在窗口136中显示“第二通过点”作为下一个目的地点的名称,并且在相应的窗口137和138中显示相应的光谱频带数据和消息。在第二通过点图像的图像特征值的基础上,CPU 116的相应组件131至133从由气囊型内窥镜31得到的BE图像数据产生BE光谱图像数据,抽取BE图像特征值,并且计算BE图像特征值和第二通过点图像特征值之间的相似程度。
当气囊型内窥镜31的探测头37a向第二和下面的通过点并且进一步向目标点移动时,在由气囊型内窥镜31得到的BE图像数据和下一个目的地点的点图像特征值的基础上进行与上述相同的程序:产生BE光谱图像数据,抽取BE图像特征值,并且计算相似程度。根据相似程度是否大于或小于阈值,进行关于探测头37a是否到达目的地点的判断。在点检测屏129上显示判断结果。因此,医生可以使探测头37a按序地前进至各个通过点,并且最终前进至目标点。当探测头37a到达目标点时,医生用气囊型内窥镜31准确地检查目标点。
如上所述,在本发明的内窥镜检查系统2中,首先进行采用胶囊型内窥镜11的内窥镜检查以找到用气囊型内窥镜31详细检查的目标点。在通过胶囊型内窥镜11得到的CE图像之中,选择表示目标点和通过点的那些CE图像作为点图像。气囊型内窥镜31向目标点前进,同时检查每一个选择点图像与通过气囊型内窥镜31得到的BE图像之间的相似性。因此,即使通过用气囊48内拉小肠使气囊型内窥镜31的探测头37a通过小肠,也可以精确地检测探测头37a已经到达病人身体的哪个点。即,可以检测探测头37a在病人10的管道或小肠中的相对位置。
由相应点的点图像产生CE光谱图像数据,并且在CE光谱图像数据和BE光谱图像数据的基础上判断每一个点图像与BE图像之间的相似性,确保了气囊型内窥镜31的探测头37a是否已经到达目的地点的精确检测。在一个点捕获的图像数据与在该点周围捕获的图像数据之间的差别在光谱图像数据中得到增强的事实,防止了当探测头37a在目的地点周围时判断探测头37a已经到达目的地点的错误。
尽管已经就其中通过病人10的嘴10a插入气囊型内窥镜31的插入器37的上述实施方案对本发明进行了描述,但是如图14中所示,本发明适用于其中气囊型内窥镜31的插入器37经由病人10的肛门10b插入的情况。在此情况下,气囊型内窥镜31的插入路线Ra从肛门10b延伸至目标点。因此,与第一实施方案相反的是,第一至第Z通过点是以倒转胶囊型内窥镜11的路径的顺序选择的。
在上述实施方案中,“血管边缘方向的分布”、“血管曲率的分布”、“脉管分支点的数量及其相对位置”和“在血管边缘方向上的变化图”被称为表示血管图的图像特征值。但是图像特征值不限于这些因素。例如,因为血管的分支结构是分形结构的类型,因此可以计算每个点图像中的血管边缘的分形维数值,并且利用分形维数值作为图像特征值。分形维数值量化图形或结构的复杂性水平,该图形或结构在本实例中为脉管边缘。分形维数值越大,表示图形的复杂性水平越高。因为许多用于计算分形维数值的方法是已知的,例如在JPA 2007-151608中,因此将省略其描述。
作为计算点图像和BE图像之间的相似程度的另一种方法,可以将点图像和BE图像的展开图像二进制化,然后细化(thin),从而产生点图像和BE图像的细化图像,以计算细化图像之间的相似程度,在本实例中细化图像表示血管的芯线(core line)。注意二进制化是其中将“白”的密度值,例如“1”,赋予具有高于预定阈值的密度值的那些像素,而将“黑”的密度值,例如“0”,赋予具有等于或低于阈值的密度值的那些像素的处理。细化是其中将图像数据的连通分量(connected component)转变为线性结构的处理。二进制化和细化是熟知的,参见例如JP A 2007-117108和JP A2005-157902,将省略这些处理的描述。
在上述实施方案中,基于来自胶囊型内窥镜11的无线电波14的电场强度的测量结果,检测表示被检体内的胶囊型内窥镜11位置的成像位置数据。但是成像位置数据可以用其它方式进行检测。例如,胶囊型内窥镜11可以配置有加速传感器,该加速传感器用于检测胶囊型内窥镜11在三个轴向上的加速程度。这些加速程度的二重积分(Dural integration)将提供胶囊型内窥镜11的移动距离,并且可以基于移动距离检测成像位置数据。
尽管上述实施方案由每一个点图像的展开图像数据产生单个光谱频带的光谱图像,但是本发明不限于此,而可以由每一个点图像的展开图像数据产生具有不同的光谱频带的两种以上的光谱图像。在此情况下,应当由每一个BE图像产生多组光谱图像数据,以分别具有与点光谱图像相应的光谱频带。然后,独立地判断在相同光谱频带的点光谱图像数据和BE光谱图像数据之间的相似性。将可变频带的点光谱图像与相应频带的BE光谱图像进行比较,有助于提高关于气囊型内窥镜31的探测头37a是否已经到达目的地点的检测精度。
通过由一个CE图像产生具有可变频带的多个光谱图像,可以对每一个病人单独地或者对全部病人共同地确定一组不同的光谱频带或波带。可以由医生人工或者根据病人的信息例如病史和可疑病症自动地确定该组不同的光谱频带。可以在处理器等中自动产生不同光谱频带的光谱图像数据,代替由医生人工产生。
尽管医生对于每一点适当地选择光谱频带,以由通过胶囊型内窥镜11得到的CE点图像的展开图像数据产生点光谱图像数据,但是本发明不限于此。例如,可以根据得到点图像数据的部位或器官,例如胃、小肠或大肠,确定光谱图像数据的光谱频带。这是因为每一个器官或部位通常具有最佳地增强在该器官或部位的脉管图的光谱频带。
接着,将描述根据本发明的另一个实施方案的内窥镜检查系统。因为第一实施方案没有检测在管道(即该实例中的小肠)的内表面上的哪个部分是胶囊型内窥镜11捕获图像的部分,哪一个被选择作为表示的目的地点(即通过点或目标点)的点图像,因此有时难以在由气囊型内窥镜31捕获的BE图像的基础上发现通过点或目标点。例如,当点图像为小肠内壁的前侧部分的图像时,如果气囊型内窥镜31从相反侧(即背侧)捕获BE图像,则即使在探测头37a到达由点图像表示的目的地点(即该点图像的胶囊型内窥镜11的成像位置)时,在点图像和BE图像之间的相似性也不高。
为了解决这个问题,根据第二实施方案,不仅检测在管道内部的胶囊型内窥镜11的相对位置,而且检测胶囊型内窥镜11的姿态,例如物镜59面向内壁的哪一侧,并且将它们存储作为成像位置数据。在医生使气囊型内窥镜31的探测头37a向目的地点前进的同时,在LCD 35上显示关于胶囊型内窥镜11在目的地点的成像位置的姿态的信息。
为了这种目的,如图3中所示,将姿态传感器140安置在胶囊型内窥镜11中,以检测在被检体管道内部的胶囊型内窥镜11的姿态或方位。姿态传感器140可以是任何传感器,只要它可以检测胶囊型内窥镜11的姿态即可。例如,姿态传感器140可以是三轴加速度计或重力传感器或姿态回转仪。因为从例如JP 3631265、JP A 2006-239053和JP A 2006-068109中,在本领域中已知许多采用姿态传感器检测胶囊型内窥镜11的姿态的方法,因此将省略其描述。
通过调制器电路54,用CE图像数据将姿态传感器140的检测结果,即姿态数据,调制为无线电波14,并且将无线电波14从发送器电路63送至天线18。因此,将姿态数据从胶囊型内窥镜11无线传输至接收器12。接收器12将姿态数据存储在数据存储器73中,同时使其与图像数据相关联。
如同第一实施方案,将姿态数据以及图像数据输送至第一处理器24中,并且医生选择通过点和目标点的图像。然后,将目标点和相应通过点的图像特征值抽取并且存储在数据存储器88的图像特征值存储部96中。此时,将在每一点表示胶囊型内窥镜11姿态的姿态数据加到每一点的点图像特征值上。
将包括姿态数据的各个点的点图像特征值经由LAN 29输送至第二处理器32,并且存储在数据存储器122的图像特征值存储部126中。当在采用气囊型内窥镜31的内窥镜检查开始处激活点检测程序128时,如图16中所示,在LCD 35上显示点检测屏141。
点检测屏141可以与第一实施方案的点检测屏129(参见图10)基本上相同,只是点检测屏141具有与第一实施方案不同的目的地点显示窗口142。在CPU 116的控制下,目的地点显示窗口142不仅显示目的地点的名称,而且在加到该点的点图像特征值上的姿态数据的基础上,显示关于胶囊型内窥镜11在该目的地点的姿态的信息。例如,显示“前侧”或“背侧”等作为关于姿态的信息。
当在点检测屏141上显示关于姿态的信息时,医生可以看到目的地点存在于小肠内壁上的哪一侧。因此,在医生使探测头37a向目的地点前进的同时,医生可以将探测头37a聚焦于存在目的地点的那侧。这对于医生变得更容易使探测头37a到达目的地点。
现在,将描述根据本发明的第三实施方案的内窥镜检查系统。尽管第一和第二实施方案从CE点图像和BE图像中抽取表示脉管图的图像特征值,但是第三实施方案使用与上述实施方案的内窥镜11和31不同的胶囊型内窥镜145和气囊型内窥镜146,并且由通过这些内窥镜145和146得到的点图像数据和BE图像数据估算或者检测关于管道(例如小肠)的内壁表面的凹凸不平度的信息。使用关于表面凹凸不平度的信息作为图像特征值。
如图17中所示,胶囊型内窥镜145是基本上以与胶囊型内窥镜11相同的方式配置的,但是在胶囊型内窥镜145中,一对照明装置光源147R和147L是相对于成像装置60对称设置的。第一和第二照明装置光源147R和147L由例如LED制成。这些光源147R和147L交替打开以照射同一被观察部位,即相同的身体部分,并且在来自各个光源147R和147L的光下,从同一被观察部位捕获一对图像。将在光源147R和147L之间切换的速度设定为与胶囊型内窥镜145穿过小肠的移动速度相比是如此高,以致于可以从同一被观察部位捕获图像两次。
当光源147R和147L交替照射肠内壁时,肠内壁的凹凸不平度投射阴影。因为第一光源147R和第二光源147L彼此分开,因此由第一光源147R在小肠内壁上投射的阴影在位置和尺寸上不同于由第二光源147L投射的阴影。因此,在来自光源147R的光下捕获的一种CE图像CER的像素具有与另一CE图像CEL的相同像素不同的亮度值,所述另一CE图像CEL是在来自第二光源147L的光下从同一被观察部位捕获的。
假设光源147R和147L在离小肠内壁基本上相同的距离处,像素的各个亮度值在CE图像CER和CE图像CEL之间不同,这取决于小肠内壁的凹凸不平度,并且更具体地,取决于小肠内壁的倾斜度。该事实将参考图18和19所示的实例进行说明,其中成像装置60面向凸出肠内壁部分S的峰P2,因此与第一光源147R相对的点P1在峰P2的一侧,并且与第二光源147L相对的点P3在峰P2的另一侧。应指出,假定成像装置60和光源147R以及147L被设置在同一平面上,以避免附图的复杂化。
如果vR表示CE图像CER的像素的亮度值,而vL表示CE图像CEL的相应像素的亮度值,并且D表示CE图像CER和CEL的对应像素之间的亮度差值,则差值D(=vR-vL)根据相应的光源147R和147L相对于被观察部位上与图像CER和CEL中的对应像素相对应的点的相对位置而变化。具体地,因为与第二光源147L相比,第一光源147R在点P1具有更接近垂直于被观察部位表面的入射角,因此在来自第一光源147R的光下,从点P1反射(散射)的光更强烈。因此,如图19中所示,在第一CE图像CER中,与在第二CE图像CEL中相比,对应于点P1的像素的亮度值更大,因此点P1的差值D为正值。因为两个光源147R和147L在点P2具有大致相同的入射角,因此差值D基本上为0。在点P3,与第一光源147R相比,第二光源147L具有更接近于垂直在点P3的被观察部位表面的入射角,因此点P3的差值D为负值。差值D的绝对值越大,在点P1或P3的被观察部位表面的倾角变得越大。相反,在肠内壁的被观察部位表面凹入的情况下,在凹面底部的点P2的差值D基本上为0,并且点P1的差值D为负值,而点P3的差值D为正值。
以这种方式,考虑第一光源147R和第二光源147L相对于成像装置60的相对位置,由每对CE图像CER和CEL的对应像素的亮度值之间的比较,可以计算关于肠内壁的凹凸不平度的信息。
在第三实施方案中,如图20中所示,气囊型内窥镜146在其探测头37a中具有观察窗口149、第一和第二照明窗口150R和150L、设备出口151和气体/水喷嘴152。例如,与图9中所示类似,在观察窗口149后面设置物镜41和成像装置42。将照明窗口150R和150L相对于观察窗口149对称地放置,以从照明装置33向肠内壁投射照明光。设备出口151和气体/水喷嘴152是熟知的,因此将省略这些构件的描述。
照明装置33被来自第二处理器32的CPU 116的控制信号控制,以从第一照明窗口150R,然后从第二照明窗口150L交替地投射照明光,并且在来自相应的照明窗口150R和150L的光下从同一被观察部位捕获一对图像BER和BEL。因此,以与胶囊型内窥镜145相同的方式,考虑第一和第二照明窗口150R和150L相对于观察窗口149的相对位置,由每一对BE图像BER和BEL的对应像素的亮度值之间的比较,可以计算关于肠内壁的凹凸不平度的信息。
在第三实施方案中,第一处理器24的CPU 83和第二处理器32的CPU116各自具有代替第一实施方案的图像特征值抽取器的脊信息估算器(未显示)。在CPU 83中的脊信息估算器通过由医生选择作为点图像的那些CE图像CER和CEL计算脊信息获得点图像特征值。在CPU 116中的脊信息估算器通过由气囊型内窥镜146捕获的BE图像BER和BEL计算脊信息获得BE图像特征值。
通过检查点图像特征值和BE图像特征值之间的相似性,可以以对第一实施方案所述的相同方式,检测在采用气囊型内窥镜146的内窥镜检查中气囊型内窥镜146的探测头37a已经到达哪个点。除脊信息以外,还可以获得表示脉管图的图像特征值。
尽管在第三实施方案中,物镜59的光轴O平行于胶囊型内窥镜145的纵轴定向,使得从被观察部位反射的光进入胶囊型内窥镜145的表面端部,但是本发明不限于此种胶囊型内窥镜。例如,如图21中所示,可使用这种胶囊型内窥镜154:物镜59的光轴O垂直于胶囊型内窥镜154的纵轴定向,并且从被观察部位反射的光通过在胶囊型内窥镜154的一侧形成的观察窗口进入。在胶囊型内窥镜154中将第一光源147R和第二光源147L相对于光轴O对称地设置在成像装置60的相反侧,使得能够以与胶囊型内窥镜145相同的方式估算关于肠内壁的凹凸不平度的信息。
尽管在胶囊型内窥镜145和154中将第一光源147R和第二光源147L设置在成像装置60的附近,但是如图22中所示,可以将一对光源147R和147L设置在胶囊型内窥镜155的相反端部。
尽管在第三实施方案的气囊型内窥镜146中,将观察窗口149以及照明窗口150R和150L安置在探测头37a的表面端部,但是本发明不限于此。例如,如图23中所示,可以将观察窗口149安置在气囊型内窥镜156的探测头37a的一个侧面上,并且相对于观察窗口149对称地形成第一照明窗口150R和第二照明窗口150L,其中为了清楚起见,从该附图中省略了设备出口和气体/水喷嘴。这种构造实现了与气囊型内窥镜146相同的目的。
尽管上述胶囊型内窥镜145、154和155具有相对于成像装置60对称地设置的一对照明光源,但是照明光源的数量和安置不限于示出的实施方案,而可以适当地进行改变。同样,气囊型内窥镜的照明窗口的数量和安置可以从气囊型内窥镜146和156的那些实施方案适当地变化。此外,对于胶囊型内窥镜154和155,可以将成像装置60和光源147R和147L-起打开。这同样适用于气囊型内窥镜156的观察窗口149以及照明窗口150R和150L。
在第三实施方案中,被观察部位(肠内壁)的表面凹凸不平度是通过比较CE图像CER和CEL的对应像素的亮度值而估算的,所述CE图像CER和CEL是由胶囊型内窥镜145从相同部分捕获的,并且使用表面凹凸不平度的信息作为点图像特征值。作为检测点图像的图像特征值的另一种方法,例如在JP A 2005-151099中公开,可以进行微分演算,以产生表示特定点的CE图像CER和CEL之间的差别的微分图像数据,并且二进制化或者细化微分图像数据以从二进制化或细化的微分图像数据抽取关于阴影的信息。可以使用关于阴影的信息作为特定点的点图像特征值。在此情况下,以与CE图像相同的方式,从每对BE图像BER和BEL抽取关于阴影的信息,以将其用作BE图像特征值。
此外,可以从第二光源147L的照明光波长改变第一光源147R的照明光波长,以在CE图像CER和CEL之间的颜色差别的基础上,检测关于所观察的部位的表面凹凸不平度的信息。在该实施方案中,来自第一照明窗口150R的照明光也具有与从第二照明窗口150L投射的照明光不同的波长,以在BE图像BER和BEL之间的颜色差别的基础上,检测关于所观察的部位的表面凹凸不平度的信息。
还可以在点检测屏129(参见图10)的图像显示窗口135中的BE图像上,以增强的方式显示关于表面凹凸不平度的信息或者目的地点的CE图像的阴影。因而,医生可以在视觉上观察气囊型内窥镜146的探测头37a是否已经到达目的地点。
尽管在上述实施方案中胶囊型内窥镜检查系统3和电子内窥镜检查系统4具有各自的处理器24和32,但本发明不是限于此构造,而是系统3和4可具有共用的处理器。在此情况下,可以将CE图像数据从接收器12传输至第二处理器32,使得第二处理器32进行处理,以接受医生对相应点图像数据的选择,并且抽取点图像特征值。另一方面,第一处理器24仅仅必须起着将CE图像数据从接收器12传输至第二处理器32的作用。
在上述实施方案中,通过计算BE图像的图像特征值和点图像的图像特征值之间的相似程度,判断通过气囊型内窥镜31获得的BE图像与被医生选择的点图像的相似性。然而,本发明不限于此方法,而可以直接计算每个点图像的光谱图像数据与BE图像的光谱图像之间的相似程度。在此情况下,应当将相应点图像的光谱图像数据文件存储在第二处理器32中。计算图像数据文件之间的相似性的方法可以是常规方法,因此将省略描述。
尽管上述实施方案通过LAN 29将点图像特征值的数据从第一处理器24传输至第二处理器32,但本发明不限于此,而可以使用各种可移动介质传输数据。
尽管在上述实施方案中由医生选择通过点图像,但本发明不限于此。例如,在选择目标点及其光谱图像数据之后,在存储于成像位置数据存储部94中的成像位置数据的基础上,CPU 83可以从在自气囊型内窥镜31的插入器37的入口(例如病人的嘴)至目标点的路径上捕获的那些CE图像数据之中自动选择几个通过点的图像数据。通过点图像的自动选择可以以适当的方式进行,例如,从预定数量的CE图像帧(以恒定的时间间隔)中选择一个,或者在用于捕获CE图像的预定时长中选择1次。由自动选择的通过点图像,医生可以各自独立地产生光谱图像,或者可以以如上所述的方式自动确定每一个通过点的光谱图像的波长参数或光谱频带。
尽管上述实施方案被设计为从由胶囊型内窥镜11捕获的CE图像之中选择目标点图像和至少一个通过点图像,但是本发明不限于此。例如,在目标点位于气囊型内窥镜31的插入器37的入口附近的情况下,医生可能必须单独选择目标点图像。
在第一实施方案中,点图像选择屏98(参见图8)配置有点选择按钮112,该点选择按钮112用于选择目标点图像数据以及通过点图像数据,但是可以将目标点选择按钮和通过点选择按钮分开设置。此外,点图像选择屏98可以具有显示例如图7所示的人体的示意性图解的窗口,该窗口在所选择的点图像数据的成像位置数据的基础上显示选择点,所述成像位置数据是作为CE图像的成像位置数据存储在成像位置数据存储部94中的。
尽管上述实施方案涉及作为插入被检体的挠性内窥镜的小肠用气囊型内窥镜,但是本发明不限于此,而适用于使用其它类型的挠性内窥镜的任何情况。
因此,本发明不限于上述实施方案,相反,在不偏离后附权利要求的范围的情况下,各种修改是可以的。
Claims (13)
1.一种内窥镜检查系统,其包括:
胶囊型内窥镜,所述胶囊型内窥镜被被检体吞入以捕获来自所述被检体内部的第一种图像;
图像处理器,所述图像处理器用于处理第一种图像的图像数据,从而在监视器上显示第一种图像,以便医生对它们进行解释;
挠性内窥镜,所述挠性内窥镜具有带成像装置的挠性插入器,所述挠性插入器在医生根据第一种图像的解释结果发现必须进行所述被检体内的目标点的详细检查时,被插入所述被检体内以通过所述成像装置捕获第二种图像;
目标点选择装置,所述目标点选择装置响应医生的操作从第一种图像中选择含有所述目标点的目标点图像;
相似性检测装置,所述相似性检测装置用于在所述挠性插入器向所述目标点移动的同时,检测所述目标点图像与由所述成像装置捕获的第二种图像之间的相似性;
位置信息获取装置,所述位置信息获取装置用于在由所述相似性检测装置检测的相似性的基础上,获得关于被检体内的所述挠性内窥镜的所述成像装置的相对位置的信息;和
显示装置,所述显示装置用于显示关于所述成像装置的相对位置的信息。
2.如权利要求1所述的内窥镜检查系统,还包括:通过点选择装置,所述通过点选择装置用于从第一种图像中选择至少一个通过点图像,所述通过点图像是在从所述挠性插入器的入口至所述目标点的路线上的通过点的代表,其中所述相似性检测装置还在将所述挠性插入器插入到被检体内的同时,检测所述通过点图像和第二种图像之间的相似性,并且所述位置信息获取装置在所述通过点图像和第二种图像之间的相似性的基础上、或在所述目标点图像和第二种图像之间的相似性的基础上,分别获取关于所述成像装置相对于所述通过点或所述目标点的相对位置的信息。
3.如权利要求2所述的内窥镜检查系统,其中所述显示装置显示关于所述成像装置是否已经到达所述通过点或所述目标点的信息,作为关于所述成像装置的相对位置的信息。
4.如权利要求2所述的内窥镜检查系统,还包括:
第一图像特征值取得装置,所述的第一图像特征值取得装置用于分别从所述目标点图像和所述通过点图像取得图像特征值;和
第二图像特征值取得装置,所述的第二图像特征值取得装置用于从第二种图像取得图像特征值,其中所述相似性检测装置通过利用所述通过点图像和第二种图像的图像特征值计算,检测所述通过点图像和第二种图像之间的相似性,并且通过利用所述目标点图像和第二种图像的图像特征值计算,检测所述目标点图像和第二种图像之间的相似性。
5.如权利要求4所述的内窥镜检查系统,还包括:
第一光谱图像产生装置,所述的第一光谱图像产生装置用于分别由所述目标点图像和所述通过点图像产生适当选择的光谱频带的光谱图像;和
第二光谱图像产生装置,所述的第二光谱图像产生装置用于由每一个第二种图像产生光谱图像,使得在所述插入器的所述成像装置向所述通过点移动的同时,所述第二图像的光谱图像具有与所述通过点的所述光谱图像相同的光谱频带,并且在所述插入器的所述成像装置从所述通过点向所述目标点移动的同时,所述第二图像的光谱图像具有与所述目标点的所述光谱图像相同的光谱频带,其中所述第一图像特征值取得装置从所述目标点和所述通过点的所述光谱图像中取得图像特征值,而所述第二图像特征值取得装置相应地从第二种图像的所述光谱图像中取得图像特征值。
6.如权利要求4所述的内窥镜检查系统,其中由所述第一和第二图像特征值取得装置取得的图像特征值表示所述被检体内部的血管图。
7.如权利要求4所述的内窥镜检查系统,其中由所述第一和第二图像特征值取得装置取得的图像特征值表示所述被检体内部的表面凹凸不平度。
8.如权利要求7所述的内窥镜检查系统,其中所述胶囊型内窥镜包括多个光源,所述多个光源被设置在不同位置,并且按序发光以照射被检体内的相同部分,并且所述胶囊型内窥镜与所述光源向所述相同部分的按序发射同步地,从所述相同部分捕获数量与所述光源的数量对应的图像,并且其中所述第一图像特征值取得装置分别在从所述通过点捕获的图像和从所述目标点捕获的图像的基础上估算所述通过点和所述目标点的表面凹凸不平度。
9.如权利要求7所述的内窥镜检查系统,其中所述挠性内窥镜的所述插入器配置有在所述成像装置的不同侧的多个照明窗口,以从照明窗口一个接一个地向被检体内的相同部分按序地投射照明光,并且所述挠性内窥镜的所述成像装置与照明光从所述照明窗口向所述相同部分的按序投射同步地,从所述相同部分捕获数量与所述照明窗口对应的图像,并且其中所述第二图像特征值取得装置在由所述挠性内窥镜的所述成像装置从所述相同部分捕获的图像的基础上,估算所述相同部分的表面凹凸不平度。
10.如权利要求1所述的内窥镜检查系统,其中由所述胶囊型内窥镜捕获的第一种图像是全方位图像,并且由所述挠性内窥镜捕获的第二种图像是平面图像,并且其中所述相似性检测装置将所述目标点的第一种图像展开为平面图像,并且将第二种图像与所述目标点的所述展开平面图像比较。
11.如权利要求2所述的内窥镜检查系统,其中由所述胶囊型内窥镜捕获的第一种图像是全方位图像,并且由所述挠性内窥镜捕获的第二种图像是平面图像,并且其中所述相似性检测装置将所述通过点的第一种图像展开为平面图像,并且将第二种图像与所述通过点的所述展开平面图像比较。
12.如权利要求1所述的内窥镜检查系统,其中所述胶囊型内窥镜配置有姿态检测器,所述姿态检测器用于检测所述胶囊型内窥镜的姿态,并且其中所述内窥镜检查系统还包括存储装置,所述存储装置用于将关于所述胶囊型内窥镜在所述目标点的姿态的信息与所述目标点图像相关联地存储,并且除关于所述挠性内窥镜的所述成像装置相对于所述目标点的相对位置的信息以外,所述显示装置还显示关于所述胶囊型内窥镜在所述目标点的姿态的信息。
13.如权利要求2所述的内窥镜检查系统,其中所述胶囊型内窥镜配置有姿态检测器,所述姿态检测器用于检测所述胶囊型内窥镜的姿态,并且其中所述内窥镜检查系统还包括存储装置,所述存储装置用于将所述胶囊型内窥镜在所述通过点的姿态的数据与所述通过点图像相关联地存储,并且除所述挠性内窥镜的所述成像装置相对于所述通过点的相对位置的信息以外,所述显示装置还显示关于所述胶囊型内窥镜在所述通过点的姿态的信息。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008059543A JP5291955B2 (ja) | 2008-03-10 | 2008-03-10 | 内視鏡検査システム |
JP2008059543 | 2008-03-10 | ||
JP2008-059543 | 2008-03-10 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101530313A CN101530313A (zh) | 2009-09-16 |
CN101530313B true CN101530313B (zh) | 2012-11-21 |
Family
ID=41054360
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009101265174A Expired - Fee Related CN101530313B (zh) | 2008-03-10 | 2009-03-10 | 内窥镜检查系统和用于该内窥镜检查系统的方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8353816B2 (zh) |
JP (1) | JP5291955B2 (zh) |
CN (1) | CN101530313B (zh) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5314913B2 (ja) * | 2008-04-03 | 2013-10-16 | オリンパスメディカルシステムズ株式会社 | カプセル医療システム |
US20100165088A1 (en) * | 2008-12-29 | 2010-07-01 | Intromedic | Apparatus and Method for Displaying Capsule Endoscope Image, and Record Media Storing Program for Carrying out that Method |
EP2347699B1 (en) * | 2010-01-22 | 2018-11-07 | Novineon Healthcare Technology Partners Gmbh | Capsule type endoscope including magnetic drive |
JP5460488B2 (ja) * | 2010-06-29 | 2014-04-02 | 富士フイルム株式会社 | 電子内視鏡システム、電子内視鏡用のプロセッサ装置、画像検索システム、及び電子内視鏡システムの作動方法 |
US8870751B2 (en) * | 2010-09-28 | 2014-10-28 | Fujifilm Corporation | Endoscope system, endoscope image recording apparatus, endoscope image acquisition assisting method and computer readable medium |
JP5269921B2 (ja) * | 2011-01-24 | 2013-08-21 | 富士フイルム株式会社 | 電子内視鏡システム及び電子内視鏡システムの作動方法 |
JP5568489B2 (ja) * | 2011-01-25 | 2014-08-06 | 富士フイルム株式会社 | 内視鏡システム及びその光源制御方法 |
CN102302357A (zh) * | 2011-06-22 | 2012-01-04 | 清华大学 | 用于球囊内窥镜的姿态感知系统及球囊内窥镜 |
JP2013063179A (ja) * | 2011-09-16 | 2013-04-11 | Olympus Medical Systems Corp | 観察システム |
TW201347720A (zh) * | 2012-05-22 | 2013-12-01 | Chung-Che Wu | 膠囊式內視鏡裝置 |
CA2884317A1 (en) * | 2012-09-07 | 2014-03-13 | Check-Cap Ltd. | Capsule with strain gauge sensors to sense events in the gastrointestinal tract |
WO2014061553A1 (ja) * | 2012-10-18 | 2014-04-24 | オリンパスメディカルシステムズ株式会社 | 画像処理装置及び画像処理方法 |
EP2910172A4 (en) * | 2012-10-18 | 2016-06-22 | Olympus Corp | IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD |
JP6112859B2 (ja) * | 2012-12-26 | 2017-04-12 | オリンパス株式会社 | 医用画像処理装置 |
US20160249793A1 (en) * | 2013-12-27 | 2016-09-01 | Kang-Huai Wang | Capsule Camera Device with Multi-Spectral Light Sources |
JP6454489B2 (ja) * | 2014-07-10 | 2019-01-16 | オリンパス株式会社 | 観察システム |
CN110167417B (zh) * | 2017-01-26 | 2022-01-07 | 奥林巴斯株式会社 | 图像处理装置、动作方法和存储介质 |
CN110769731B (zh) | 2017-06-15 | 2022-02-25 | 奥林巴斯株式会社 | 内窥镜系统、内窥镜用处理系统、图像处理方法 |
WO2019244345A1 (ja) * | 2018-06-22 | 2019-12-26 | オリンパス株式会社 | ランドマーク推定方法、及び、内視鏡装置 |
CN109171616A (zh) * | 2018-08-07 | 2019-01-11 | 重庆金山医疗器械有限公司 | 获得被测物内部3d形状的系统及方法 |
EP3854294A4 (en) * | 2018-09-20 | 2021-10-20 | NEC Corporation | DEVICE AND METHOD FOR POSITION ESTIMATION, AND COMPUTER READABLE RECORDING MEDIA |
CN109493949B (zh) * | 2018-10-26 | 2021-08-10 | 浙江大学 | 一种左心耳复杂度的确定方法、装置及计算机存储介质 |
CN115251806B (zh) * | 2022-07-29 | 2024-01-23 | 武汉诺兴康医疗科技有限公司 | 一种基于磁场原理技术的医疗设备监测分析调控系统 |
WO2024188065A1 (zh) * | 2023-03-16 | 2024-09-19 | 杭安医学科技(杭州)有限公司 | 内窥镜的控制方法和内窥镜系统 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN200970227Y (zh) * | 2006-10-17 | 2007-11-07 | 刘思德 | 引导式单囊小肠镜 |
Family Cites Families (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63242233A (ja) * | 1987-03-31 | 1988-10-07 | 株式会社東芝 | 電子内視鏡装置 |
US5436655A (en) * | 1991-08-09 | 1995-07-25 | Olympus Optical Co., Ltd. | Endoscope apparatus for three dimensional measurement for scanning spot light to execute three dimensional measurement |
US6167296A (en) * | 1996-06-28 | 2000-12-26 | The Board Of Trustees Of The Leland Stanford Junior University | Method for volumetric image navigation |
US7260248B2 (en) * | 1999-12-15 | 2007-08-21 | Medispectra, Inc. | Image processing using measures of similarity |
IL153510A0 (en) * | 2001-12-18 | 2003-07-06 | Given Imaging Ltd | Device, system and method for capturing in-vivo images with three-dimensional aspects |
JP2003204920A (ja) * | 2002-01-11 | 2003-07-22 | Olympus Optical Co Ltd | 挿入補助具 |
DE60310877T8 (de) * | 2002-07-31 | 2007-09-13 | Olympus Corporation | Endoskop |
WO2004028375A1 (ja) * | 2002-09-27 | 2004-04-08 | Olympus Corporation | 超音波診断装置 |
JP4526245B2 (ja) * | 2003-07-04 | 2010-08-18 | オリンパス株式会社 | 映像信号処理装置 |
JP4868720B2 (ja) * | 2004-05-27 | 2012-02-01 | オリンパス株式会社 | カプセル投薬システム |
JP4520126B2 (ja) * | 2003-09-29 | 2010-08-04 | オリンパス株式会社 | カプセル型医療装置システム |
US7604589B2 (en) * | 2003-10-01 | 2009-10-20 | Given Imaging, Ltd. | Device, system and method for determining orientation of in-vivo devices |
WO2005053517A1 (ja) * | 2003-12-01 | 2005-06-16 | Olympus Corporation | 内視鏡システム |
JP2005169009A (ja) * | 2003-12-15 | 2005-06-30 | Olympus Corp | 内視鏡システム、及び内視鏡 |
JP4652694B2 (ja) | 2004-01-08 | 2011-03-16 | オリンパス株式会社 | 画像処理方法 |
JP4500096B2 (ja) * | 2004-04-27 | 2010-07-14 | オリンパス株式会社 | 内視鏡及び内視鏡システム |
JP4649606B2 (ja) * | 2004-08-31 | 2011-03-16 | 国立大学法人 名古屋工業大学 | 球状カプセル型全方位内視鏡 |
JP4575124B2 (ja) * | 2004-11-29 | 2010-11-04 | オリンパス株式会社 | 画像表示装置 |
JP2006239053A (ja) * | 2005-03-02 | 2006-09-14 | Pentax Corp | ラジオカプセル及びラジオカプセルシステム |
US7646903B2 (en) * | 2005-06-22 | 2010-01-12 | Siemens Medical Solutions Usa, Inc. | System and method for path based tree matching |
WO2007025081A2 (en) * | 2005-08-24 | 2007-03-01 | Traxtal Inc. | System, method and devices for navigated flexible endoscopy |
JP2007068763A (ja) * | 2005-09-07 | 2007-03-22 | Fujinon Corp | カプセル内視鏡システム |
EP1980194B1 (en) * | 2006-01-06 | 2013-05-08 | Olympus Medical Systems Corp. | Trans-natural opening based or transcutaneous medical system |
US20070161855A1 (en) * | 2006-01-06 | 2007-07-12 | Olympus Medical Systems Corp. | Medical procedure through natural body orifice |
JP2007236700A (ja) * | 2006-03-09 | 2007-09-20 | Fujifilm Corp | カプセル内視鏡システム |
JP2007319442A (ja) * | 2006-06-01 | 2007-12-13 | Fujifilm Corp | カプセル内視鏡システム、および画像処理装置 |
JP4868959B2 (ja) * | 2006-06-29 | 2012-02-01 | オリンパスメディカルシステムズ株式会社 | 体腔内プローブ装置 |
US7824328B2 (en) * | 2006-09-18 | 2010-11-02 | Stryker Corporation | Method and apparatus for tracking a surgical instrument during surgery |
US7945310B2 (en) * | 2006-09-18 | 2011-05-17 | Stryker Corporation | Surgical instrument path computation and display for endoluminal surgery |
JP4979334B2 (ja) * | 2006-10-18 | 2012-07-18 | 富士フイルム株式会社 | 医用画像読影支援システム及びプログラム |
US8131031B2 (en) * | 2006-11-15 | 2012-03-06 | General Electric Company | Systems and methods for inferred patient annotation |
JP5019589B2 (ja) * | 2007-03-28 | 2012-09-05 | 富士フイルム株式会社 | カプセル内視鏡、およびカプセル内視鏡システム、並びにカプセル内視鏡の作動方法 |
JP5394622B2 (ja) * | 2007-07-31 | 2014-01-22 | オリンパスメディカルシステムズ株式会社 | 医用ガイドシステム |
JP2009050321A (ja) * | 2007-08-23 | 2009-03-12 | Olympus Corp | 画像処理装置 |
US20090060300A1 (en) * | 2007-08-30 | 2009-03-05 | Fujifilm Corporation | Method and apparatus for image alignment |
JP4616872B2 (ja) * | 2007-09-21 | 2011-01-19 | 富士フイルム株式会社 | 画像表示装置および画像表示プログラム |
US8041005B2 (en) * | 2007-09-28 | 2011-10-18 | The Invention Science Fund I, Llc | X-ray fluorescence visualizer, imager, or information provider |
JP5314913B2 (ja) * | 2008-04-03 | 2013-10-16 | オリンパスメディカルシステムズ株式会社 | カプセル医療システム |
JP5188879B2 (ja) * | 2008-05-23 | 2013-04-24 | オリンパスメディカルシステムズ株式会社 | 医療機器 |
JP5374078B2 (ja) * | 2008-06-16 | 2013-12-25 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP5190944B2 (ja) * | 2008-06-26 | 2013-04-24 | 富士フイルム株式会社 | 内視鏡装置および内視鏡装置の作動方法 |
JP5599572B2 (ja) * | 2009-03-12 | 2014-10-01 | 富士フイルム株式会社 | 症例画像検索装置、方法およびプログラム |
JP2011092681A (ja) * | 2009-09-30 | 2011-05-12 | Fujifilm Corp | 医用画像処理装置および方法並びにプログラム |
US20120130171A1 (en) * | 2010-11-18 | 2012-05-24 | C2Cure Inc. | Endoscope guidance based on image matching |
-
2008
- 2008-03-10 JP JP2008059543A patent/JP5291955B2/ja not_active Expired - Fee Related
-
2009
- 2009-03-04 US US12/397,409 patent/US8353816B2/en not_active Expired - Fee Related
- 2009-03-10 CN CN2009101265174A patent/CN101530313B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN200970227Y (zh) * | 2006-10-17 | 2007-11-07 | 刘思德 | 引导式单囊小肠镜 |
Non-Patent Citations (1)
Title |
---|
JP特开2005-21516A 2005.01.27 |
Also Published As
Publication number | Publication date |
---|---|
US8353816B2 (en) | 2013-01-15 |
US20090227837A1 (en) | 2009-09-10 |
JP2009213627A (ja) | 2009-09-24 |
CN101530313A (zh) | 2009-09-16 |
JP5291955B2 (ja) | 2013-09-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101530313B (zh) | 内窥镜检查系统和用于该内窥镜检查系统的方法 | |
US8055033B2 (en) | Medical image processing apparatus, luminal image processing apparatus, luminal image processing method, and programs for the same | |
Seibel et al. | Tethered capsule endoscopy, a low-cost and high-performance alternative technology for the screening of esophageal cancer and Barrett's esophagus | |
US7813538B2 (en) | Shadowing pipe mosaicing algorithms with application to esophageal endoscopy | |
JP5771757B2 (ja) | 内視鏡システム及び内視鏡システムの作動方法 | |
US8396327B2 (en) | Device, system and method for automatic detection of contractile activity in an image frame | |
US9357945B2 (en) | Endoscope system having a position and posture calculating portion | |
US20110032347A1 (en) | Endoscopy system with motion sensors | |
US20060069317A1 (en) | System and method to detect a transition in an image stream | |
EP2918218A1 (en) | Endoscope system | |
JP2007236700A (ja) | カプセル内視鏡システム | |
CN104114077A (zh) | 图像处理装置和图像处理方法 | |
JP5993515B2 (ja) | 内視鏡システム | |
JP2012509715A (ja) | 大腸内視鏡検査追跡および評価システム | |
CN103732115B (zh) | 位置检测装置、胶囊型内窥镜系统以及胶囊型内窥镜的位置检测程序 | |
CN105491936A (zh) | 胶囊型内窥镜系统 | |
JPWO2014148184A1 (ja) | 内視鏡システム | |
JP2017522072A (ja) | 信頼度マッチング付き生体内マルチカメラカプセルからの画像の再構築 | |
JP7189355B2 (ja) | コンピュータプログラム、内視鏡用プロセッサ、及び情報処理方法 | |
JP2012228346A (ja) | 画像表示装置 | |
JP2021141973A (ja) | 内視鏡用プロセッサ、内視鏡、内視鏡システム、情報処理方法、プログラム及び学習モデルの生成方法 | |
US20240016366A1 (en) | Image diagnosis system for lesion | |
JP6199267B2 (ja) | 内視鏡画像表示装置、その作動方法およびプログラム | |
JP7440629B2 (ja) | 内視鏡プロセッサ装置 | |
KR102713332B1 (ko) | 내시경 영상 병변 진단 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20121121 Termination date: 20160310 |