CN100450423C - 胶囊型内窥镜和胶囊型内窥镜系统 - Google Patents
胶囊型内窥镜和胶囊型内窥镜系统 Download PDFInfo
- Publication number
- CN100450423C CN100450423C CNB200580014701XA CN200580014701A CN100450423C CN 100450423 C CN100450423 C CN 100450423C CN B200580014701X A CNB200580014701X A CN B200580014701XA CN 200580014701 A CN200580014701 A CN 200580014701A CN 100450423 C CN100450423 C CN 100450423C
- Authority
- CN
- China
- Prior art keywords
- unit
- image
- type endoscope
- driving
- capsule type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
- A61B5/0031—Implanted circuitry
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Computer Networks & Wireless Communication (AREA)
- Endoscopes (AREA)
Abstract
本发明提供胶囊型内窥镜和胶囊型内窥镜系统。为了实现可以取得高品质图像的胶囊型内窥镜,胶囊型内窥镜(2)具有:输出照明光的照明部(11)、对被检体内图像进行拍摄的摄像部(12)、导出摄像图像的亮度的图像亮度导出部(16)、存储基准亮度的基准亮度信息保持部(17)、将图像亮度和基准亮度进行比较的比较部(18)、根据比较结果调整照明部(11)的发光量的发光量调整部(19)、控制各结构要素的驱动定时的定时控制部(20)、和作为噪声去除单元等发挥作用的定时发生器(21)。有关作为噪声去除单元进行动作的定时是,定时控制部(20)与照明部(11)的发光量的变化无关地控制从摄像部(12)完成输出电信号后到从照明部(11)开始输出照明光之前的期间,从而去除由于暗电流所引起的噪声成分,而不给其它动作带来不良影响。
Description
技术领域
本发明涉及导入被检体的内部并拍摄所述被检体的内部图像的胶囊型内窥镜和胶囊型内窥镜系统。
背景技术
近年来,在内窥镜领域中,提出有吞入型的胶囊型内窥镜。在该胶囊型内窥镜中设有摄像功能和无线通信功能。胶囊型内窥镜具有如下功能:为了观察(检查),从被检体的口吞入后到被自然排出之前的期间内,在体腔内例如胃、小肠等内脏器官的内部,随着内脏器官的蠕动运动而移动,从而对各内脏器官依次进行拍摄。
在体腔内移动的期间内,由胶囊型内窥镜在体内拍摄的图像数据依次通过无线通信发送至外部,存储于设置在外部的存储器中。通过携带具有无线通信功能和存储功能的接收器,被检体在从吞入胶囊型内窥镜之后到排出之前的期间,能够自由行动。排出胶囊型内窥镜之后,医生或者护士通过在显示器上显示基于存储在存储器中的图像数据的内脏器官的图像来进行诊断。
胶囊型内窥镜所具备的摄像功能是通过例如预定的光学系统和CCD等的摄像元件来实现的。具体地讲,胶囊型内窥镜通过将由光学系统成像的入射光转换为电信号,得到被检体内部的图像。
专利文献1:日本特开2003-70728号公报(第3页、图1)
发明内容
但是,在现有的胶囊型内窥镜系统中,具有不容易取得高品质的被检体内图像的课题。具体地讲,在现有的胶囊型内窥镜系统中,在胶囊型内窥镜的照明亮度的调整和取得到的图像数据中存在噪声成分,从而很难取得到高品质的被检体内图像。下面,对相关课题详细地进行说明。
首先,在现有的胶囊型内窥镜中,具有不容易调整LED的照射光量的问题。即,胶囊型内窥镜由于要缩小到能够导入被检体内的程度,所以优选内置于胶囊中的电路也是简单的结构,并且,从导入被检体内到排出为止,例如需要经过8个小时左右来进行驱动,所以胶囊型内窥镜所具备的控制电路等要使用低耗电的控制电路。
因此,在胶囊型内窥镜中安装例如数码相机所具备的那种调光机构的做法,至少目前还不现实,需要在胶囊型内窥镜中具备专用的调光机构。但是,现状是目前提出的调光机构中不一定存在适合于胶囊型内窥镜的使用条件的调光机构。
其次,对在图像数据中包含由暗电流所引起的噪声成分的问题进行说明。所谓暗电流是指在CCD等的摄像元件的机构上产生与入射光无关的电流成分,与该暗电流的量相应地在取得图像数据中就会混入噪声成分。
图7是表示暗电流的温度依赖性的一个示例的示意性的曲线图。如图7所示,示出了暗电流的强度随温度的上升而单调增加的趋势,环境温度越高,由暗电流所引起的噪声成分越多。
这里,胶囊型内窥镜由于在导入被检体内的状态下进行拍摄动作,所以环境温度为38℃左右。在该温度条件下,使用CCD等摄像元件时的暗电流的值与室温(例如20℃)时相比增加3~4倍左右。因此,与使用通常的摄像装置时相比,采用胶囊型内窥镜所具备的摄像元件进行拍摄动作时暗电流的量增大,对图像的品质的影响也变大。
而且,为了排除暗电流的影响,已经提出了一边冷却CCD一边进行拍摄的结构的方案,部分已经得到了实用。但现状是,由于该冷却机构消耗高电力,所以安装在胶囊型内窥镜上的做法并不妥当,而还没有其它的替代手段。
本发明就是鉴于上述问题提出的,其目的在于实现可取得高品质图像的胶囊型内窥镜和胶囊型内窥镜系统。
为了解决上述课题并实现本发明目的,第一方面的胶囊型内窥镜导入被检体的内部并拍摄所述被检体的内部的图像,其特征在于,该胶囊型内窥镜具有:照明单元,其对所述被检体的内部表面照射照明光;摄像单元,其生成与入射光相应的电信号并将生成的电信号输出;噪声去除单元,其去除由于暗电流所引起并积蓄在所述摄像单元上的噪声电荷;以及定时控制单元,其将所述噪声去除单元的驱动定时控制为由所述摄像单元完成输出电信号的动作后、由所述照明单元开始照射照明光之前的期间。
根据该第一方面的发明,具有定时控制单元,因此能够去除由暗电流所引起的噪声成分,而不会给电信号的输出动作和由入射光引起的电信号的生成带来不良影响,该定时控制单元将噪声去除单元的驱动定时控制为摄像单元的输出动作完成之后、开始照射照明光之前的期间。
并且,第二方面的胶囊型内窥镜,其特征在于,在上述发明的基础上,所述定时控制单元进行控制动作,以使所述照明单元的驱动开始定时和所述噪声去除单元的驱动停止定时同步。
并且,第三方面的胶囊型内窥镜,其特征在于,在上述发明的基础上,所述胶囊型内窥镜具有:比较单元,其将由所述摄像单元拍摄的图像的亮度和预定的基准亮度进行比较;以及发光量调整单元,其根据由所述比较单元所得的比较结果来调整从所述照明单元输出的照明光的发光量。
并且,第四方面的胶囊型内窥镜,其特征在于,在上述发明的基础上,所述比较单元推导出所述图像亮度和所述基准亮度之间的大小关系,所述发光量调整单元,在所述图像亮度的值超过所述基准亮度的值的情况下,将所述照明单元的驱动期间减少预定量,在所述图像亮度的值低于所述基准亮度的值的情况下,将所述照明单元的驱动期间增加预定量。
并且,第五方面的胶囊型内窥镜,其特征在于,在上述发明的基础上,所述定时控制单元在通过所述发光量调整单元调整所述照明单元的驱动期间时,将所述照明单元的驱动停止定时维持一定,并使所述照明单元的驱动开始定时变化。
并且,第六方面的胶囊型内窥镜系统具有:导入被检体内、拍摄该被检体内的图像并将含有图像数据的无线信号向外部进行无线发送的胶囊型内窥镜;和接收从该胶囊型内窥镜发送的无线信号的接收装置,其特征在于,所述接收装置具有:接收用天线单元,其接收从所述胶囊型内窥镜发送的无线信号;和外部装置,其对通过所述接收用天线单元接收的无线信号进行预定处理,所述胶囊型内窥镜具有:照明单元,其对所述被检体的内部表面照射照明光;摄像单元,其安装有输出与入射光相应的电信号的光电转换元件;噪声去除单元,其去除由暗电流所引起并积蓄在所述摄像单元上的噪声电荷;定时控制单元,其将所述噪声去除单元的驱动定时控制为由所述摄像单元输出电信号的动作完成后、由所述照明单元开始照射照明光之前的期间;以及无线单元,其将含有由所述摄像单元拍摄的图像数据的无线信号发送至外部。
并且,第七方面的胶囊型内窥镜系统,其特征在于,在上述发明的基础上,所述胶囊型内窥镜系统还具有:比较单元,其将由所述摄像单元拍摄的图像的亮度和预定的基准亮度进行比较;以及发光量调整单元,其根据由所述比较单元所得到的比较结果来调整从所述照明单元输出的照明光的发光量,并且,所述定时控制单元进行控制,以使所述照明单元的驱动开始定时和所述噪声去除单元的驱动停止定时同步,并且,在通过所述发光量调整单元来调整所述照明单元的驱动期间时,将所述照明单元的驱动停止定时维持一定,并使所述照明单元的驱动开始定时变化。
本发明的胶囊型内窥镜和胶囊型内窥镜系统,由于具有定时控制单元,所以,具有能够去除由暗电流所引起的噪声成分,而不会给电信号的输出动作和由入射光引起的电信号的生成带来不良影响的效果,该定时控制单元将噪声去除单元的驱动定时控制为摄像单元完成输出动作之后、开始照射照明光之前的期间。
附图说明
图1是表示实施方式的胶囊型内窥镜系统的整体结构的示意图。
图2是表示胶囊型内窥镜系统所具备的胶囊型内窥镜的结构的方框图。
图3是表示胶囊型内窥镜所具备的构成摄像部的固体摄像元件的一个示例的结构的示意图。
图4是表示通过胶囊型内窥镜所具备的定时控制部进行控制的脉冲供给定时的时序图。
图5是用于说明胶囊型内窥镜所具备的发光量调整部和定时控制部的动作的流程图。
图6是用于说明定时控制部的动作的示意图。
图7是示意表示有关暗电流的温度依赖性的曲线图。
标号说明
1被检体
2胶囊型内窥镜
3接收装置
4显示装置
5便携式记录介质
7接收用天线
8外部装置
11照明部
12摄像部
13A/D转换部
15无线发送部
16图像亮度导出部
17基准亮度信息保持部
18比较部
19发光量调整部
20定时控制部
21定时发生器
22蓄电池
24固体摄像元件
25光电转换元件
26转移门(Transfer Gate)
27垂直移位寄存器
28水平移位寄存器
29电压转换部
30放大部
31、32井式电势
具体实施方式
下面,对作为用于实施本发明的最佳方式(下面,简称为“实施方式”)的胶囊型内窥镜系统进行说明。而且,附图是示意图,应注意各部分厚度和宽度的关系、各部分厚度的比率等与实际情况不同,当然在附图相互之间也包含彼此的尺寸关系和比率不同的部分。
图1是表示实施方式的胶囊型内窥镜系统的整体结构的示意图。本实施方式的胶囊型内窥镜系统具有:胶囊型内窥镜2,其导入被检体1的内部、拍摄被检体内图像并将拍摄的数据向外部进行无线发送;接收装置3,其进行胶囊型内窥镜2在被检体1内部的位置的检测;显示装置4,其显示通过接收装置3接收到的图像数据的内容;以及便携式记录介质5,其用于进行接收装置3和显示装置4之间的信息交接。
显示装置4是用于显示通过胶囊型内窥镜2所拍摄的被检体内图像的装置,并具有根据经便携式记录介质5而得到的数据进行图像显示的工作站等之类的结构。具体地讲,显示装置4可以是通过CRT显示器、液晶显示器等直接显示图像的结构,还可以是像打印机等那样将图像输出至其它的介质的结构。
便携式记录介质5相对于后述的外部装置8和显示装置4可拆卸,并具有在安装于两者上时可进行信息的输出和记录的结构。具体地讲,便携式记录介质5在胶囊型内窥镜2在被检体1的内部移动的期间插入到外部装置8而记录与胶囊型内窥镜2的位置相关的信息。而且,具有如下结构:在胶囊型内窥镜2从被检体1排出之后,从外部装置8取出并安装于显示装置4,通过显示装置4读出所记录的数据。由于外部装置8和显示装置4之间的数据交接是通过闪存(Compact Flash:注册商标)等便携式记录介质5进行的,从而与外部装置8和显示装置4之间有线连接的情况不同,即使胶囊型内窥镜2在被检体1内部移动中,被检体1也能够自由行动。
接收装置3是用于接收从胶囊型内窥镜2无线发送来的图像数据、并在根据需要施行预定处理的基础上将图像数据存储于便携式记录介质5中的装置。具体地讲,接收装置3由接收用天线7a~7h和外部装置8构成,并具有如下功能:接收经由接收用天线7a~7h的任何一个而从胶囊型内窥镜2发送来的无线信号,并且在进行从无线信号中提取图像数据等处理的基础上将图像数据输出至便携式记录介质5。
接下来,对胶囊型内窥镜2进行说明。如图1所示,胶囊型内窥镜2具有胶囊状的外形,通过在该外形的胶囊内具有预定的结构要素而形成。而且,作为构成胶囊型内窥镜2的胶囊的形状,可以是例如旋转椭圆体状,但在本实施方式中,不需要特别限定胶囊的形状,只要是被检体1容易吞入的形状,可以采用任意的形状。
图2是表示胶囊型内窥镜2的内部结构的方框图。胶囊型内窥镜2具有:用于进行被检体内图像的拍摄等的第一机构;用于调整拍摄时的照明光的强度的第二机构;用于规定胶囊型内窥镜2所具备的各结构要素的驱动定时的第三机构。下面,分别对各机构的结构等进行说明。
如图2所示,本实施方式的胶囊型内窥镜2具有作为第一机构的用于拍摄被检体内图像并将其向外部发送的机构。即,胶囊型内窥镜2具有:照明部11,其用于对被检体1的内部照射预定的照明光;摄像部12,其中入射有从照明部11输出的照明光的反射光,输出与入射光的强度对应的模拟电信号;A/D转换部13,其将从摄像部12输出的模拟电信号转换成数字电信号;以及无线发送部15,其用于对从A/D转换部13输出的数字电信号施行必要的处理并向外部进行无线发送。
照明部11用于将照射被检体1内部的照明光输出,通过输出该照明光,使通过摄像部12拍摄被检体内图像成为可能。具体的讲,照明部儿由例如LED等发光机构和发光机构的驱动控制电路形成,并具有按照通过后述的定时控制部20给予的定时来进行发光动作的功能。
摄像部12用于拍摄被检体1内部的图像。具体地讲,摄像部12具有用于使入射光成像的光学系统,并具有通过输出与由光学系统成像的入射光的强度相应的电信号,来拍摄被检体1内部的图像的功能。
图3是作为构成摄像部12的摄像元件的一个示例,表示由所谓的行间(interline)方式的CCD元件构成的固体摄像元件24的结构的示意图。图3所示的固体摄像元件24具有:呈行列状配置的多个光电转换元件25;转移门26和垂直移位寄存器27,其沿由光电转换元件25形成的行列的列方向延伸并与行数相对应地配置了多个;水平移位寄存器28,其配置在垂直移位寄存器27的电荷输出方向下游、并具有沿行方向延伸的结构;电压转换部29,其将从水平移位寄存器28输出的电荷转换为电压信号;以及放大部30,其放大从电压转换部29输出的电压信号。而且,在固体摄像元件24中,通过光电转换元件25构成的行列的行数和列数不需要限定于图3所示的情况,实际上是根据摄像图像的像素数而决定的。
光电转换元件25用于生成与入射光的强度相应的电信号。光电转换元件25例如由光电二极管构成,并具有积蓄与入射光相应的电荷的功能。
转移门26用于控制从光电转换元件25向垂直移位寄存器27移动电荷。具体地讲,转移门26构成为具有与通过电极(未图示)施加的电位相应的电势,通过改变该电势的值,使由光电转换元件25得到的电荷向垂直移位寄存器27侧移动。
垂直移位寄存器27用于使从光电转换元件25输出的电荷向列方向移动。具体地讲,垂直移位寄存器27由如下部分构成:与行数相应地配置的井式电势31;和用于控制井式电势31的电势的电极(未图示),并且,该垂直移位寄存器27具有如下功能:通过依次改变井式电势31的电势,使从光电转换元件25移动来的电荷沿列方向移动并输出至水平移位寄存器28。
水平移位寄存器28用于使电荷沿行方向移动。具体地讲,水平移位寄存器28具有如下结构,即包括与由光电转换元件25形成的行列的列数相对应的井式电势32,并且具有如下功能,即通过依次控制井式电势32的电势,使电荷依次输出给电压转换部29。
无线发送部15用于对由摄像部12拍摄、由A/D转换部13转换成数字信号的图像数据进行无线发送。具体地讲,无线发送部15由如下部分构成:发送电路,其例如根据需要对图像数据施行调制处理等而生成无线信号;发送用天线,其用于将生成的无线信号发送至外部。
并且,胶囊型内窥镜2具有作为第二机构的由照相部11调整发光量的机构。具体地讲,胶囊型内窥镜2具有:图像亮度导出部16,其根据从A/D转换部13输出的数字信号,导出由摄像部12拍摄的图像的图像亮度;基准亮度信息保持部17,其取得与预定的基准亮度相关的信息;比较部18,其将图像亮度和基准亮度进行比较;以及发光量调整部19,其根据由比较部18得出的比较结果,来调整照明部11的发光量。
图像亮度导出部16用于导出由摄像部12拍摄的图像的图像亮度。即,图像亮度导出部16具有如下功能:累加构成所拍摄的图像数据的各像素的亮度值,并且将累加结果除以像素数,从而导出单一像素的平均亮度。为了实现该功能,图像亮度导出部16的结构具有例如检波电路。
基准亮度信息保持部17用于保持与预先决定的基准亮度有关的信息。具体地讲,基准亮度信息保持部17具有如下功能:将与例如显示装置4上的显示能力相对应且作为操作者可容易目视识别图像内容的亮度定为基准亮度,并且保持与该基准亮度相对应的信息。在本实施方式中,基准亮度信息保持部17保持与基准亮度对应的电压值来作为基准亮度信息,具体地讲,构成为具有可输出与基准亮度相对应的电压值的恒压源。
比较部18用于比较由图像亮度导出部16导出的图像亮度和由基准亮度信息保持部17保存的基准亮度,将比较结果输出至发光量调整部19。而且,作为由比较部18输出的比较结果,只要是与图像亮度和基准亮度之间的相关关系相对应就可以是任意方式,在本实施方式中,由比较部18导出的比较结果是单纯地输出图像亮度和基准亮度之间的大小关系。
发光量调整部19用于根据由比较部18所得到的比较结果来调整从照明部11输出的照明光的光量。具体地讲,发光量调整部19具有如下功能:根据由比较部18所导出的比较结果来改变从照明部11输出的照明光的输出时间,并将与变化后的输出时间相关的信息输出至定时控制部20。
而且,作为发光量的调整方式,不仅是调整照明光的输出时间,还可以举出例如调整对构成照明部11的LED的输入电流值等,可以通过这些方法来调整发光量。但是,在本实施方式中,从抑制耗电量增加和控制算法的简易化观点出发,不改变照明部11所具备的LED等发光元件的发光量度,而通过改变发光时间来调整发光量。并且,经发光量调整部19进行的照明光的输出时间的导出,只要调整输出时间使得基准亮度和图像亮度之间的差缩小就可采用任意的算法。但是,在本实施方式中,由于要实现简易的结构等理由,与比较部18只输出大小关系的结构相对应,在图像亮度超过基准亮度时一律将照明光的输出时间减少预定时间量,在图像亮度低于基准亮度时一律将照明光的输出时间增加预定时间量。
进一步,胶囊型内窥镜2具有作为第三机构的规定各结构要素的驱动定时的机构。具体地讲胶囊型内窥镜2具有:控制各结构要素的动作定时的定时控制部20;和定时发生器21,其根据定时控制部20的控制,对摄像部12和A/D转换部13供给驱动定时等。并且,胶囊型内窥镜2具有蓄电池22,其用于对上述各结构要素供给驱动电力。
定时发生器21用于对摄像部12和A/D转换部13供给驱动定时,并且输出快门脉冲(复位脉冲),该快门脉冲用于去除积蓄在摄像部12上、由暗电流所引起的噪声成分。具体地讲,定时发生器21具有如下功能:根据来自定时控制部20的指示,对摄像部12和A/D转换部13供给驱动定时,并且对摄像部12供给快门脉冲。
对去除噪声成分简单地进行说明。如在现有技术中描述过的那样,在用光电转换元件25构成摄像部12的情况下,即使在从照明部11不照射照明光的、即不对固体摄像元件24入射光的期间内,由暗电流所引起的电荷也被积蓄起来。由于残留有该电荷,在经摄像动作从配置成行列状的光电转换元件25向外部输出的电荷中,含有与入射光无关的暗电流所引起的成分,成为图像品质降低的原因。
因此,在本实施方式中,在进行如后面详细说明的由照明部11输出照明光的动作之前,去除由暗电流所引起的、作为噪声成分发挥作用的电荷。具体地讲,通过定时发生器21对摄像部12供给快门脉冲(复位脉冲)。通过供给该快门脉冲,对例如光电转换元件25整体供给预定的电位,将由暗电流所引起并积蓄起来的电荷释放出去。该意思是,在本实施方式中,定时发生器21作为噪声去除单元发挥作用,定时发生器21根据来自定时控制部20的指示在预定的定时将快门脉冲供给至摄像部12,从而去除噪声成分。
接下来,对定时控制部20进行说明。定时控制部20用于根据来自发光量调整部19的输出,来规定照明部11、摄像部12、A/D转换部13和图像亮度导出部16等的动作定时。具体地讲,这些机构要素具有如下结构:按照从定时控制部20输出的脉冲或根据定时控制部20的控制而从定时发生器21输出的脉冲进行驱动。在本实施方式中,定时控制部20通过控制该脉冲的上升沿和下降沿,来控制上述结构要素的动作定时。
图4是表示通过定时控制部20所控制的脉冲供给定时的时序图。首先,根据定时控制部20的控制,生成开始脉冲,该开始脉冲规定摄像动作的开始、具体地讲是规定积蓄在光电转换元件25中的电荷由垂直移位寄存器27、水平移位寄存器28输出的动作的开始定时。如图4所示,通过该开始脉冲的供给间隔来规定取得1个图像所需的摄像期间T。通过供给开始脉冲,固体摄像元件24使积蓄在光电转换元件25中的电荷沿垂直移位寄存器27移动,并通过垂直移位寄存器27和水平移位寄存器28等的作用来输出与摄像图像相对应的模拟电信号,与该输出定时同步地进行A/D转换部13的处理,从而生成由数字电信号构成的图像数据。
并且,在摄像期间的后半部分,例如在就要供给规定接下来的摄像期间开始的开始脉冲之前,供给规定照明部11的驱动定时的照明部驱动脉冲。这里,本实施方式的照明部驱动脉冲在上升沿规定照明部11的驱动开始定时,在下降沿规定照明部11的驱动停止定时。照明部11随着该照明部驱动脉冲进行动作,在图4所示的例子中,在就要供给开始脉冲之前、即就要开始固体摄像元件24中的电荷输送之前,照明部11输出照明光。
进而,在摄像期间的后半部分,供给快门脉冲。快门脉冲至少在同一摄像期间中的摄像部完成输出数据动作之后、照明部11开始驱动之前进行供给,如图4所示的例子中,控制快门脉冲的供给定时,使得与照明部驱动脉冲上升同时地下降。
接下来,说明根据由发光量调整部19进行的发光调整动作和来自发光量调整部19的输出,定时控制部20所进行的脉冲供给定时的变动控制。定时控制部20基本上进行用于供给如图4所示方式的脉冲的控制,另一方面,还具有根据来自发光量调整部19的输出值来改变各脉冲的供给定时的功能。即,发光量调整部19如已经说明的那样,具有通过改变从照明部11输出的照明光的输出时间来调整发光量的功能。因此,为了输出由发光量调整部19所调整的发光量的照明光,而需要增加照明部驱动脉冲的时间幅度,并且,还需要改变如图4所示的其它脉冲的供给定时。因此,定时控制部20还根据来自发光量调整部19的输出,来控制这些脉冲的供给定时变化。
图5是表示由发光量调整部19所进行的发光量调整动作和继发光量调整动作之后由定时控制部20所进行的脉冲供给定时的变化控制的流程图。如图5所示,首先,发光量调整部19输入由比较部18导出的比较结果(步骤S101),根据比较结果判定图像亮度和基准亮度的大小关系(步骤S102)。在图像亮度超过基准亮度时(步骤S102,Ir>Is),使照明部驱动脉冲的时间幅度t变化成t-Δt(步骤S103)。并且,图像亮度低于基准亮度时(步骤S102,Ir<Is),使照明部驱动脉冲的时间幅度t变化成t+Δt(步骤S104)。进而,在图像亮度等于基准亮度时(步骤S102,Ir=Is),维持照明部驱动脉冲的时间幅度t的值(步骤S105)。而且,将在步骤S103、S104、S105各步骤中决定的照明部驱动脉冲的时间幅度的值输出至定时控制部20(步骤S106)。
接下来,对定时控制部20的动作进行说明。首先,定时控制部20输入从发光量调整部19输出的照明部驱动脉冲的时间幅度的具体值(步骤S107)。而且,固定照明部驱动脉冲的下降沿且改变上升沿,以便成为所把握的时间幅度(步骤S108)。这之后,配合照明部驱动脉冲的上升沿的变化,改变快门脉冲的上升沿和下降沿,以便使照明部驱动脉冲上升沿和快门脉冲的下降沿一致(步骤S109)。通过以上的动作,伴随照明部11的照明光输出期间的变化的各动作脉冲的定时被调整,并传递至各结构要素,从而定时控制部20的动作结束。
对步骤S108、S109的动作简单地进行说明。图6是表示在步骤S108、S109中所进行的定时变化的内容的示意图。如已经描述过的那样,在本实施方式中,通过调整照明部11的驱动时间,来改变由照明部11输出的照明光的光量。因此,改变了照明部驱动脉冲的时间幅度,而作为具体的变化方式考虑到如下3种方式:仅改变脉冲上升沿、仅改变脉冲下降沿、改变上升沿和下降沿双方。
在所述多个方式中,在本实施方式,在步骤S108中,如图6所示,不改变照明部驱动脉冲的下降沿,而仅改变上升沿,从而调整脉冲的时间幅度。定时控制部20通过进行该控制动作,供给开始脉冲、摄像部输出定时的定时维持一定定时,而与照明部驱动脉冲的时间幅度的变化无关。
并且,通过步骤S109的控制动作,快门脉冲的上升沿和下降沿如图6所示那样变化。即,配合在步骤S108中变化后的照明部驱动脉冲的上升沿,使快门脉冲的下降沿变化,维持照明部驱动脉冲的上升沿和快门脉冲的下降沿一致的状态,并且,与下降沿的变化相对应,上升沿也发生变化。而且,在本实施方式中,快门脉冲的时间幅度维持一定值,而与照明部驱动脉冲的时间幅度的变化无关,因此,快门脉冲的下降沿和上升沿的时间变化的量为与照明部驱动脉冲的上升沿的变化量相等的量。
接下来,对本实施方式的胶囊型内窥镜系统的优点进行说明。首先,在本实施方式的胶囊型内窥镜系统中,在胶囊型内窥镜2中,采用可去除由暗电流所引起并积蓄起来的电荷的结构。通过该结构,能够防止由暗电流所引起的噪声成分混入摄像图像数据中。
而且,作为进行去除该暗电流的定时(即、供给快门脉冲的定时),在本实施方式中是至少在单一的摄像期间内完成摄像部的输出后、供给照明部驱动脉冲之前。如此设定该定时的理由如下所述。即,在供给照明部驱动脉冲之后供给快门脉冲的情况下,通过光电转换元件25将与入射光对应而生成的电荷也一同删除,这从获得高品质图像数据的观点出发是不妥当的。因此,在本实施方式中,在供给照明部驱动脉冲之前供给快门脉冲,通过在该定时供给脉冲,能够去除噪声成分,而不给与入射光对应的电荷带来不良影响。
并且,快门脉冲通常由高强度脉冲信号构成。因此,通过固体摄像元件24所具备的垂直移位寄存器27和水平移位寄存器28移送电荷的、即当从摄像部12输出模拟电信号时供给快门脉冲的情况下,有可能给电荷的移送带来恶劣的影像。因此,在本实施方式中,在从摄像部12输出模拟电信号完成之后供给快门脉冲,通过在该定时供给快门脉冲,能够去除噪声成分,而不给电荷的移送带来不良影响。
并且,在本实施方式中,将快门脉冲的供给定时控制在供给照明部驱动脉冲之前,更加优选的是如图4、图6的例子所示那样,控制成照明部驱动脉冲的上升沿和快门脉冲下降沿一致。通过该结构,本实施方式的胶囊型内窥镜系统具有能够更加可靠地去除由暗电流所引起的噪声成分的优点。即,由暗电流所引起的电荷是在摄像期间的整个过程中渐渐积蓄起来的,所以即使供给一次快门脉冲去除了噪声成分,这之后还会进行由暗电流所引起噪声成分的积蓄。因此,在本实施方式中,形成如下结构:就在被检体内图像相对应的光入射到光电转换元件25中的定时(即、供给照明部驱动脉冲的定时)之前,更加优选的是在照明部驱动脉冲上升时刻使快门脉冲下降,通过该结构,可得到能够更加可靠地去除噪声成分的优点。
进而,在本实施方式中,具有如下结构:根据作为实际拍摄的图像的亮度的图像亮度和通过显示装置4的显示特性等所决定的预定基准亮度的比较结果,来改变从照明部11输出的照明光的输出时间。因此,本实施方式中的胶囊型内窥镜2具有如下优点:能够得到具有近似于基准亮度的亮度的高品质图像数据。
特别是,在本实施方式中,比较部18只导出图像亮度和基准亮度之间的大小关系。作为发光量调整部19所采用的比较结果,由于只导出图像亮度和基准亮度之间的大小关系,所以比较部18可通过采用所谓的运算放大器和电阻元件等的比较器来构成。由于该比较器结构简单且耗电量也被抑制为较低的值,所以即使作为内置于胶囊型内窥镜2中的结构,也可避免胶囊型内窥镜2的大型化和耗电增加的问题。
并且,发光量调整部19采用如下结构:根据由比较部18所得到的大小关系,将照明光的输出时间改变预先设定的时间那么多(图5的流程图中的Δt)。即,如图5的流程图所示,发光量调整部19具有如下功能:在图像亮度超过基准亮度的情况下,将照明光的输出时间减少Δt,在图像亮度低于基准亮度的情况下,将照明光的输出时间增加Δt。通过采用该结构,能够降低发光量调整部19的运算量,并且能够使用于实现发光量调整部19的电子电路等的结构变得简单。因此,发光量调整部19也可采用小型且低耗电的结构。
而且,在导入被检体1内部并拍摄被检体内图像的胶囊型内窥镜2的情况下,即使通过上述机构来进行发光量的调整时,上述胶囊型内窥镜2也充分耐用。即,被检体1内部的入射光量的变化通常不是例如从室内向室外移动时那样的激烈变化,而是连续且缓慢地变化。因此,即使是上述那样的简易的结构,关于与入射光量的变化相对应的发光量的导出,可以在实用方面没有问题地进行。
进而,在本实施方式中,定时控制部20也可以以简易的结构来形成。即,如图4和图6所示,开始脉冲的供给定时维持成一定的周期,并且,照明部驱动脉冲下降沿被规定为与开始脉冲上升沿一致。进而,即使在照明部驱动脉冲的时间幅度变化的情况下,定时控制部20也维持照明部驱动脉冲的上升沿和快门脉冲的下降沿一致的状态,并使照明部驱动脉冲的上升沿变化。
因此,在本实施方式中,作为基于来自发光量调整部19输出值的定时控制部20的动态控制,仅进行照明部驱动脉冲的上升沿的变更就足够。即,使开始脉冲的供给定时始终一定,并控制成与来自发光量调整部19的输出值无关。并且,例如有关快门脉冲的供给控制,预先将脉冲的时间幅度设定为一定的值,且预先设定为使快门脉冲的下降沿与照明部驱动脉冲的上升沿一致。在该设定条件下进行动态控制时,定时控制部20通过仅改变照明部驱动脉冲的上升沿,能够控制其它所有的驱动脉冲的上升沿和下降沿。因此,本实施方式中的胶囊型内窥镜2通过简单的算法就能进行用于揭示所述的优点的定时控制部20的控制动作,其结果是,具有可采用结构简易且低耗电的定时控制部20的优点。
以上,利用本实施方式说明了本发明,但本发明不限于上述内容,本领域技术人员可想到各种实施例、变形例和应用例。例如,可以通过由定时发生器21供给快门脉冲利用去除噪声成分之外的结构来去除噪声成分。并且,在图5所示的流程图中,关于照明部驱动脉冲的时间幅度,只是在图像亮度和基准亮度一致的情况下,不对其进行改变,但例如通过改变比较部18的结构,即使在任一方的亮度较大的情况下,如果在亮度差为预定的阈值以下时,也可以不改变照明部驱动脉冲的时间幅度。
进而,在实施方式中,作为构成摄像部12的固体摄像元件,利用了如图3所示的CCD,不需要限定于该结构,还可以利用例如CMOS。即,只要由暗电流所引起的噪声成分是显性的摄像元件,可以利用任意的摄像元件来构成胶囊型内窥镜。而且,在摄像部利用CMOS的情况下,优选为利用采样维持电路来代替A/D转换器13。
产业上的可利用性
如上所述,本发明的胶囊型内窥镜和胶囊型内窥镜系统对导入被检体的内部并拍摄所述被检体的内部图像的胶囊型内窥镜和胶囊型内窥镜系统是有用的,特别适用于可取得高品质图像的胶囊型内窥镜和胶囊型内窥镜系统。
Claims (6)
1.一种胶囊型内窥镜,该胶囊型内窥镜导入被检体的内部并拍摄所述被检体的内部的图像,其特征在于,
该胶囊型内窥镜具有:
照明单元,其对所述被检体的内部表面照射照明光;
摄像单元,其生成与入射光相应的电信号并将生成的电信号输出;
噪声去除单元,其去除由暗电流所引起并积蓄在所述摄像单元上的噪声电荷;以及
定时控制单元,其将所述噪声去除单元的驱动开始定时控制为在所述摄像单元完成输出电信号的动作后,且将所述噪声去除单元的驱动停止定时控制为与所述照明单元的驱动开始定时同步。
2.根据权利要求1所述的胶囊型内窥镜,其特征在于,
所述胶囊型内窥镜还具有:
比较单元,其将由所述摄像单元拍摄的图像的亮度和预定的基准亮度进行比较;以及
发光量调整单元,其根据由所述比较单元所得的比较结果来调整从所述照明单元输出的照明光的发光量。
3.根据权利要求2所述的胶囊型内窥镜,其特征在于,
所述比较单元推导出所述图像亮度和所述基准亮度之间的大小关系,
所述发光量调整单元,在所述图像亮度为超过所述基准亮度的值的情况下,将所述照明单元的驱动期间调整为减少预定量,在所述图像亮度为低于所述基准亮度的值的情况下,将所述照明单元的驱动期间调整为增加预定量。
4.根据权利要求2所述的胶囊型内窥镜,其特征在于,
所述定时控制单元在通过所述发光量调整单元调整了所述照明单元的驱动期间时,将所述照明单元的驱动停止定时维持一定,并使所述照明单元的驱动开始定时变化。
5.一种胶囊型内窥镜系统,该胶囊型内窥镜系统具有:导入被检体内、拍摄该被检体内的图像并将含有图像数据的无线信号向外部进行无线发送的胶囊型内窥镜;和接收从该胶囊型内窥镜发送的无线信号的接收装置,其特征在于,
所述接收装置具有:
接收用天线单元,其接收从所述胶囊型内窥镜发送的无线信号;以及
外部装置,其对通过所述接收用天线单元接收的无线信号进行预定处理,
所述胶囊型内窥镜具有:
照明单元,其对所述被检体的内部表面照射照明光;
摄像单元,其安装有输出与入射光相应的电信号的光电转换元件;
噪声去除单元,其去除由暗电流所引起并积蓄在所述摄像单元上的噪声电荷;
定时控制单元,其将所述噪声去除单元的驱动开始定时控制为在所述摄像单元输出电信号的动作完成后,且将所述噪声去除单元的驱动停止定时控制为与所述照明单元的驱动开始定时同步;以及
无线单元,其将含有由所述摄像单元拍摄的图像数据的无线信号发送至外部。
6.根据权利要求5所述的胶囊型内窥镜系统,其特征在于,
所述胶囊型内窥镜系统还具有:
比较单元,其将由所述摄像单元拍摄的图像的亮度和预定的基准亮度进行比较;以及
发光量调整单元,其根据由所述比较单元所得到的比较结果来调整从所述照明单元输出的照明光的发光量,
所述定时控制单元进行控制动作,以使所述照明单元的驱动开始定时和所述噪声去除单元的驱动停止定时同步,并且,通过所述发光量调整单元来调整所述照明单元的驱动期间时,将所述照明单元的驱动停止定时维持一定,并使所述照明单元的驱动开始定时变化。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004139890A JP4555604B2 (ja) | 2004-05-10 | 2004-05-10 | カプセル型内視鏡およびカプセル型内視鏡システム |
JP139890/2004 | 2004-05-10 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1950018A CN1950018A (zh) | 2007-04-18 |
CN100450423C true CN100450423C (zh) | 2009-01-14 |
Family
ID=35319992
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB200580014701XA Expired - Fee Related CN100450423C (zh) | 2004-05-10 | 2005-05-09 | 胶囊型内窥镜和胶囊型内窥镜系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7762947B2 (zh) |
EP (1) | EP1757214B1 (zh) |
JP (1) | JP4555604B2 (zh) |
CN (1) | CN100450423C (zh) |
WO (1) | WO2005107573A1 (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100869499B1 (ko) * | 2006-04-28 | 2008-11-21 | 주식회사 인트로메딕 | 인체의 체강 내에서 획득한 이미지의 처리 방법, 이를 이용하는 캡슐형 내시경 및 캡슐형 내시경 시스템 |
JP5096090B2 (ja) * | 2007-09-19 | 2012-12-12 | オリンパスメディカルシステムズ株式会社 | 生体内画像受信装置および生体内画像取得システム |
JP2009136459A (ja) * | 2007-12-05 | 2009-06-25 | Hoya Corp | ノイズ除去システム、内視鏡プロセッサ、および内視鏡システム |
JP5284846B2 (ja) * | 2009-03-30 | 2013-09-11 | オリンパス株式会社 | 生体内観察システム、該生体内観察システムの作動方法 |
JP2010240104A (ja) * | 2009-04-03 | 2010-10-28 | Olympus Corp | 体内観察システム、該体内観察システムの駆動方法 |
JP5534997B2 (ja) * | 2010-08-03 | 2014-07-02 | 富士フイルム株式会社 | 電子内視鏡システム |
JP5243660B2 (ja) * | 2011-01-28 | 2013-07-24 | オリンパスメディカルシステムズ株式会社 | カプセル内視鏡システム |
DE102011077123A1 (de) * | 2011-06-07 | 2012-12-13 | Siemens Ag | Untersuchungsvorrichtung zur Untersuchung eines Hohlraumes |
CN103488026A (zh) * | 2013-09-05 | 2014-01-01 | 广东欧珀移动通信有限公司 | 调节摄像头补光灯亮度的方法和系统 |
JP6028131B1 (ja) * | 2015-03-30 | 2016-11-16 | オリンパス株式会社 | カプセル型内視鏡システムおよび磁界発生装置 |
KR101851724B1 (ko) * | 2017-09-05 | 2018-04-24 | 심한보 | 경구형 내시경 장치 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01207032A (ja) * | 1988-02-16 | 1989-08-21 | Toshiba Corp | 内視鏡装置 |
JPH01250918A (ja) * | 1988-03-31 | 1989-10-05 | Toshiba Corp | 内視鏡装置 |
WO2002080376A2 (en) * | 2001-03-29 | 2002-10-10 | Given Imaging Ltd. | A method for timing control |
CN1473545A (zh) * | 2002-08-05 | 2004-02-11 | 王卫东 | 医用无线电胶囊 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0865578A (ja) * | 1994-08-24 | 1996-03-08 | Olympus Optical Co Ltd | 固体撮像装置 |
JP3413084B2 (ja) * | 1997-11-20 | 2003-06-03 | キヤノン株式会社 | 放射線撮像装置及び撮像方法 |
JPH11253397A (ja) * | 1998-03-09 | 1999-09-21 | Olympus Optical Co Ltd | 内視鏡装置 |
JP2000193896A (ja) * | 1998-12-28 | 2000-07-14 | Asahi Optical Co Ltd | 内視鏡の光量制御装置 |
US6654054B1 (en) * | 1999-11-02 | 2003-11-25 | Agilent Technologies, Inc. | Method and apparatus for canceling the effects of noise in an electronic signal |
US7023479B2 (en) * | 2000-05-16 | 2006-04-04 | Canon Kabushiki Kaisha | Image input apparatus having addition and subtraction processing |
JP2001340324A (ja) * | 2001-03-16 | 2001-12-11 | Toshiba Medical System Co Ltd | X線検出器及びそれを使ったx線診断装置 |
JP4166509B2 (ja) | 2001-06-20 | 2008-10-15 | オリンパス株式会社 | カプセル式内視鏡 |
US20030117491A1 (en) * | 2001-07-26 | 2003-06-26 | Dov Avni | Apparatus and method for controlling illumination in an in-vivo imaging device |
IL155046A (en) * | 2003-03-23 | 2013-12-31 | Given Imaging Ltd | Install in-body imaging capable of defining its location |
JP3934506B2 (ja) * | 2002-08-06 | 2007-06-20 | オリンパス株式会社 | 撮像システムおよび画像処理プログラム |
JP4390440B2 (ja) * | 2002-10-31 | 2009-12-24 | Hoya株式会社 | 内視鏡用自動調光装置および電子内視鏡装置 |
JP4328125B2 (ja) * | 2003-04-25 | 2009-09-09 | オリンパス株式会社 | カプセル型内視鏡装置およびカプセル型内視鏡システム |
JP4349856B2 (ja) * | 2003-07-07 | 2009-10-21 | Hoya株式会社 | 自動調光可能な電子内視鏡装置 |
-
2004
- 2004-05-10 JP JP2004139890A patent/JP4555604B2/ja not_active Expired - Fee Related
-
2005
- 2005-05-09 EP EP05737179A patent/EP1757214B1/en not_active Expired - Fee Related
- 2005-05-09 CN CNB200580014701XA patent/CN100450423C/zh not_active Expired - Fee Related
- 2005-05-09 WO PCT/JP2005/008421 patent/WO2005107573A1/ja not_active Application Discontinuation
-
2006
- 2006-11-08 US US11/594,438 patent/US7762947B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01207032A (ja) * | 1988-02-16 | 1989-08-21 | Toshiba Corp | 内視鏡装置 |
JPH01250918A (ja) * | 1988-03-31 | 1989-10-05 | Toshiba Corp | 内視鏡装置 |
WO2002080376A2 (en) * | 2001-03-29 | 2002-10-10 | Given Imaging Ltd. | A method for timing control |
CN1473545A (zh) * | 2002-08-05 | 2004-02-11 | 王卫东 | 医用无线电胶囊 |
Also Published As
Publication number | Publication date |
---|---|
EP1757214A4 (en) | 2009-08-12 |
EP1757214A1 (en) | 2007-02-28 |
JP2005319096A (ja) | 2005-11-17 |
JP4555604B2 (ja) | 2010-10-06 |
WO2005107573A1 (ja) | 2005-11-17 |
US7762947B2 (en) | 2010-07-27 |
EP1757214B1 (en) | 2012-07-18 |
US20070073105A1 (en) | 2007-03-29 |
CN1950018A (zh) | 2007-04-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100450423C (zh) | 胶囊型内窥镜和胶囊型内窥镜系统 | |
CN101596095B (zh) | 摄像装置以及被检体内图像获取装置 | |
JP4393866B2 (ja) | インビボ画像化カプセル | |
EP3177004B1 (en) | Imaging device and imaging system | |
EP1576805B1 (en) | Illumination apparatus and illumination method for an imaging apparatus | |
JP2018533870A (ja) | 構造化照明画像およびレギュラー画像をキャプチャするための単一イメージセンサ | |
US20090231476A1 (en) | Solid-state imaging apparatus and apparatus using the same | |
US20130050455A1 (en) | Endoscope apparatus | |
CN101325661A (zh) | 摄像装置 | |
EP1952635A2 (en) | Fcc-compliant, movement artifact-free image sensor array with reduced lighting requirement | |
WO2017065057A1 (ja) | 内視鏡装置 | |
CN108778090A (zh) | 内窥镜装置和视频处理器 | |
US20060050145A1 (en) | Imaging device for an endoscope | |
EP2353491B1 (en) | Subject intra-corporeal introduction device and in-vivo information acquiring system | |
CN101755450A (zh) | 固体摄像元件和照相机系统 | |
JP2008183049A (ja) | 撮像装置、カプセル型内視カメラ | |
JP2000032345A (ja) | 撮像装置 | |
JP2009044592A (ja) | 固体撮像素子駆動装置及び撮像装置 | |
JP2006279690A (ja) | 撮像装置 | |
CN107534745B (zh) | 具有集成功率节约控制的图像传感器 | |
JP4439245B2 (ja) | 電子内視鏡装置 | |
JP2011061672A (ja) | 撮像装置及び撮像装置のプログラム | |
JP2004064558A (ja) | 撮像装置 | |
JP2006174337A (ja) | 撮像装置 | |
JP2000224489A (ja) | 固体撮像素子の駆動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20090114 Termination date: 20170509 |