JP2761238B2 - Endoscope device - Google Patents

Endoscope device

Info

Publication number
JP2761238B2
JP2761238B2 JP1101078A JP10107889A JP2761238B2 JP 2761238 B2 JP2761238 B2 JP 2761238B2 JP 1101078 A JP1101078 A JP 1101078A JP 10107889 A JP10107889 A JP 10107889A JP 2761238 B2 JP2761238 B2 JP 2761238B2
Authority
JP
Japan
Prior art keywords
hemoglobin
function information
signal
information
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP1101078A
Other languages
Japanese (ja)
Other versions
JPH02279131A (en
Inventor
一成 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP1101078A priority Critical patent/JP2761238B2/en
Publication of JPH02279131A publication Critical patent/JPH02279131A/en
Application granted granted Critical
Publication of JP2761238B2 publication Critical patent/JP2761238B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Endoscopes (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

【発明の詳細な説明】 [産業上の利用分野] 本発明は、生体における色素濃度や色素の分光特性の
変化を観察するのに適した内視鏡装置に関する。
Description: BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an endoscope apparatus suitable for observing changes in dye concentration and spectral characteristics of a dye in a living body.

[従来の技術] 近年、体腔内に細長の挿入部を挿入することにより、
体腔内臓器等を観察したり、必要に応じ処置具チャンネ
ル内に挿通した処置具を用いて各種治療処置のできる内
視鏡が広く利用されている。
[Prior art] In recent years, by inserting an elongated insertion portion into a body cavity,
2. Description of the Related Art Endoscopes capable of observing organs in a body cavity and the like and performing various treatments using a treatment tool inserted into a treatment tool channel as necessary are widely used.

また、電荷結像素子(CCD)等の固体撮像素子を撮像
手段に用いた電子内視鏡も種々提案されている。
Also, various electronic endoscopes using a solid-state imaging device such as a charge imaging device (CCD) as an imaging unit have been proposed.

ところで、生体情報の有効なものに、特開昭61−2576
92号公報や特開昭63−311937号公報に開示されているよ
うに、血液中のヘモグロビン量(Hb)やヘモグロビンの
酸素飽和度(SO2)がある。
By the way, Japanese Patent Application Laid-Open No. 61-2576
As disclosed in JP-A-92-92 and JP-A-63-311937, there are hemoglobin amount (Hb) in blood and oxygen saturation (SO 2 ) of hemoglobin.

[発明が解決しようとする課題] 前記従来例においては、前記ヘモグロビン量に対応す
る血流量の分布を示す像やヘモグロビンの酸素飽和度の
分布を示す像を、各々別途に表示していたため、これら
の画像は、医師が病変部の形態及び色調から診断を下し
ていた画像と全く異なる画像であるため、原画像との対
応が困難となり、診断に際し、多くの時間を必要とする
という問題点がある。また、前記ヘモグロビン量やヘモ
グロビン酸素飽和度等の複数の情報を対応づけることも
困難であった。
[Problems to be Solved by the Invention] In the conventional example, an image indicating the distribution of the blood flow rate corresponding to the hemoglobin amount and an image indicating the distribution of the oxygen saturation of hemoglobin are separately displayed. Is an image that is completely different from the image that the physician has diagnosed based on the form and color tone of the diseased part, making it difficult to deal with the original image and requiring a lot of time for diagnosis. There is. Also, it has been difficult to associate a plurality of pieces of information such as the hemoglobin amount and the hemoglobin oxygen saturation.

本発明は、上記事情に鑑みてなされたものであり、被
検体における分光特性に関連する複数の情報を同時に観
察可能にして、総合的な診断能をより向上させることが
できる内視鏡装置を提供することを目的としている。
The present invention has been made in view of the above circumstances, and provides an endoscope apparatus capable of simultaneously observing a plurality of pieces of information related to spectral characteristics in a subject, thereby further improving overall diagnostic performance. It is intended to provide.

[課題を解決するための手段] 本発明による内視鏡装置は、被写体の複数の機能情報
を取得可能な複数の特定波長帯域で被写体を撮像する撮
像手段と、前記撮像手段から出力される複数の波長帯域
の撮像信号に基づき、前記被写体における第1の機能情
報に対応する第1の機能情報信号および第2の機能情報
に対応する第2の機能情報信号を演算すると共に、該演
算結果として得られた前記第1の機能情報信号を色差平
面上における第1の変数を表す信号として出力し、前記
第2の機能情報信号を色差平面上における第2の変数を
表す信号として出力する演算手段と、前記第1の変数を
表す信号として出力された前記第1の機能情報信号およ
び前記第2の変数を表す信号として出力された第2の機
能情報信号に基づき、前記撮像手段で撮像した前記被写
体の疑似カラー画像を表示する表示手段とを備えたこと
を特徴とする。
[Means for Solving the Problems] An endoscope apparatus according to the present invention includes: an imaging unit configured to capture an image of a subject in a plurality of specific wavelength bands capable of acquiring a plurality of pieces of functional information of the subject; A first function information signal corresponding to the first function information and a second function information signal corresponding to the second function information of the subject based on the imaging signal of the wavelength band of Arithmetic means for outputting the obtained first function information signal as a signal representing a first variable on a color difference plane and outputting the second function information signal as a signal representing a second variable on a color difference plane. And imaging by the imaging means based on the first function information signal output as a signal representing the first variable and the second function information signal output as a signal representing the second variable Display means for displaying a pseudo-color image of the subject.

[作用] 本発明では、被検体の画像情報から、被検体における
分光特性に関連する複数の情報が得られ、この複数の情
報は、互いに目視的に分離可能で且つ同時に表示可能な
複数の画像信号に割り当てられ、この複数の画像信号が
表示される。
[Operation] In the present invention, a plurality of pieces of information relating to the spectral characteristics of the subject are obtained from the image information of the subject, and the plurality of pieces of information are a plurality of images which can be visually separated from each other and simultaneously displayed. And a plurality of image signals are displayed.

[実施例] 以下、図面を参照して本発明の実施例を説明する。Embodiment An embodiment of the present invention will be described below with reference to the drawings.

第1図ないし第10図は本発明の第1実施例に係り、第
1図は本実施例の主要部である信号処理回路を示すブロ
ック図、第2図は生体情報の画像信号への割当てを示す
説明図、第3図は内視鏡装置の概略の構成を示すブロッ
ク図、第4図はバンドパスフィルタターレットを示す説
明図、第5図は内視鏡装置の全体を示す側面図、第6図
及び第7図はヘモグロビンの酸素飽和度の変化による血
液の吸光度の変化を示す説明図、第8図は回転フィルタ
の各フィルタ透過波長領域を示す説明図、第9図及び第
10図はバンドパスフィルタターレットの各フィルタの透
過波長領域を示す説明図である。
1 to 10 relate to a first embodiment of the present invention, FIG. 1 is a block diagram showing a signal processing circuit which is a main part of the embodiment, and FIG. 2 is an assignment of biological information to image signals. FIG. 3 is a block diagram showing a schematic configuration of the endoscope apparatus, FIG. 4 is an explanatory view showing a band-pass filter turret, FIG. 5 is a side view showing the entire endoscope apparatus, 6 and 7 are explanatory diagrams showing changes in the absorbance of blood due to changes in oxygen saturation of hemoglobin, FIG. 8 is an explanatory diagram showing each filter transmission wavelength region of the rotary filter, FIGS. 9 and
FIG. 10 is an explanatory diagram showing a transmission wavelength region of each filter of the bandpass filter turret.

本実施例の内視鏡装置は、第5図に示すように、電子
内視鏡1を備えている。この電子内視鏡1は、細長で例
えば可撓性の挿入部2を有し、この挿入部2の後端に太
径の操作部3が連設されている。前記操作部3の後端部
からは側方に可撓性のケーブル4が延設され、このケー
ブル4の先端部にコネクタ5が設けられている。前記電
子内視鏡1は、前記コネクタ5を介して、光源装置及び
信号処理回路が内蔵されたビデオプロセッサ6に接続さ
れるようになっている。さらに、前記ビデオプロセッサ
6には、モニタ7が接続されるようになっている。
The endoscope apparatus according to the present embodiment includes an electronic endoscope 1 as shown in FIG. The electronic endoscope 1 has a slender, for example, flexible insertion section 2, and a large-diameter operation section 3 is connected to the rear end of the insertion section 2. A flexible cable 4 extends laterally from a rear end of the operation unit 3, and a connector 5 is provided at a distal end of the cable 4. The electronic endoscope 1 is connected via the connector 5 to a video processor 6 having a light source device and a signal processing circuit built therein. Further, a monitor 7 is connected to the video processor 6.

前記挿入部2の先端側には、硬性の先端部9及びこの
先端部9に隣接する後方側に湾曲可能な湾曲部10が順次
設けられている。また、前記操作部3に設けられた湾曲
操作ノブ11を回動操作することによって、前記湾曲部10
を左右方向あるいは上下方向に湾曲できるようになって
いる。また、前記操作部3には、前記挿入部2内に設け
られた処置具チャンネルに連通する挿入口12が設けられ
ている。
On the distal end side of the insertion portion 2, a rigid distal end portion 9 and a bending portion 10 which can be bent rearward adjacent to the distal end portion 9 are sequentially provided. By rotating a bending operation knob 11 provided on the operation section 3, the bending section 10 is rotated.
Can be bent in the horizontal direction or the vertical direction. The operation section 3 is provided with an insertion port 12 communicating with a treatment instrument channel provided in the insertion section 2.

第3図に示すように、電子内視鏡1の挿入部2内に
は、照明光を伝達するライトガイド14が挿通されてい
る。このライトガイド14の先端面は、挿入部2の先端部
9に配置され、この先端部9から照明光を出射できるよ
うになっている。また、前記ライトガイド14の入射端側
は、ユニバーサルコード4内に挿通されてコネクタ5に
接続されている。また、前記先端部9には、対物レンズ
系15が設けられ、この対物レンズ系15の結像位置に、固
体撮像素子16が配設されている。この固体撮像素子16
は、可視領域を含め紫外領域から赤外領域に至る広い波
長域で感度を有している。前記固体撮像素子16には、信
号線26,27が接続され、これら信号線26,27は、前記挿入
部2及びユニバーサルコード4内に挿通されて前記コネ
クタ5に接続されている。
As shown in FIG. 3, a light guide 14 for transmitting illumination light is inserted into the insertion section 2 of the electronic endoscope 1. The distal end surface of the light guide 14 is arranged at the distal end 9 of the insertion section 2 so that illumination light can be emitted from the distal end 9. The light guide 14 has an incident end inserted into the universal cord 4 and connected to the connector 5. Further, an objective lens system 15 is provided at the distal end portion 9, and a solid-state imaging device 16 is provided at an image forming position of the objective lens system 15. This solid-state imaging device 16
Has sensitivity in a wide wavelength range from the ultraviolet region to the infrared region including the visible region. Signal lines 26 and 27 are connected to the solid-state imaging device 16. These signal lines 26 and 27 are inserted into the insertion section 2 and the universal cord 4 and connected to the connector 5.

一方、ビデオプロセッサ6内には、紫外光から赤外光
に至る広帯域の光を発光するランプ21が設けられてい
る。このランプ21としては、一般的なキセノンランプや
ストロボランプ等を用いることができる。前記キセノン
ランプやストロボランプは、可視光のみならず紫外光及
び赤外光を大量に発光する。このランプ21は、電源部22
によって電力が供給されるようになっている。前記ラン
プ21の前方には、モータ23によって回転駆動される回転
フィルタ50が配設されている。この回転フィルタ50に
は、通常観察用の赤(R),緑(G),青(B)の各波
長領域の光を透過するフィルタが、周方向に沿って配列
されている、この回転フィルタ50の各フィルタの透過特
性を第8図に示す。この図に示すように、本実施例で
は、Bを透過するフィルタは、赤外帯域における800nm
近傍の波長領域B′も透過する特性を有するものになっ
ている。
On the other hand, the video processor 6 is provided with a lamp 21 that emits light in a wide band from ultraviolet light to infrared light. As the lamp 21, a general xenon lamp, a strobe lamp, or the like can be used. The xenon lamp and the strobe lamp emit a large amount of ultraviolet light and infrared light as well as visible light. This lamp 21 is connected to a power supply 22
Is supplied with power. A rotary filter 50 driven by a motor 23 is provided in front of the lamp 21. In this rotary filter 50, filters for transmitting light in each wavelength region of red (R), green (G), and blue (B) for normal observation are arranged along the circumferential direction. FIG. 8 shows the transmission characteristics of each of the 50 filters. As shown in this figure, in this embodiment, the filter transmitting B is 800 nm in the infrared band.
The wavelength region B 'in the vicinity also has a characteristic of transmitting light.

また、前記モータ23は、モータドライバ25によって回
転が制御されて駆動されるようになっている。
The rotation of the motor 23 is controlled by a motor driver 25 to be driven.

また、前記回転フィルタ50とライトガイド14入射端と
の間の照明光路上には、バンドパスフィルタターレット
51が配設されている。このバンドパスフィルタターレッ
ト51には、第4図に示すように、それぞれ異なるバンド
パス特性を有する2種類のフィルタ51a,51bが、周方向
に沿って配列されている。各フィルタ51a,51bの透過特
性を、第9図及び第10図に示す。
Further, a band-pass filter turret is provided on the illumination optical path between the rotary filter 50 and the light guide 14 entrance end.
51 are arranged. In the band-pass filter turret 51, as shown in FIG. 4, two types of filters 51a and 51b having different band-pass characteristics are arranged in the circumferential direction. 9 and 10 show the transmission characteristics of the filters 51a and 51b.

すなわち、フィルタ51aは、第9図に示すように、569
nmを中心とする狭帯域と、650nmを中心とする狭帯域
と、800nmを中心とする狭帯域とを透過する。フィルタ5
1bは、第10図に示すように、約400〜750nmの可視帯域を
透過する。
That is, as shown in FIG.
The light passes through a narrow band centered at nm, a narrow band centered at 650 nm, and a narrow band centered at 800 nm. Filter 5
1b transmits the visible band from about 400 to 750 nm, as shown in FIG.

前記バンドパスフィルタターレット51は、フィルタ切
換装置55によって回転が制御されるモータ52によって回
転されるようになっている。また、前記フィルタ切換装
置55は、切換え回路43からの制御信号によって制御され
るようになっている。そして、前記切換え回路43によっ
て、観察波長を選択することにより、前記バンドパスフ
ィルタターレット51の各フィルタ51a,51bのうち、前記
切換え回路43で選択した観察波長に対応するフィルタが
照明光路上に介装されるようにモータ52が回転され、前
記バンドパスフィルタターレット51の回転方向の位置が
変更されるようになっている。
The band-pass filter turret 51 is rotated by a motor 52 whose rotation is controlled by a filter switching device 55. The filter switching device 55 is controlled by a control signal from the switching circuit 43. Then, by selecting the observation wavelength by the switching circuit 43, a filter corresponding to the observation wavelength selected by the switching circuit 43 among the filters 51a and 51b of the bandpass filter turret 51 is disposed on the illumination optical path. The motor 52 is rotated so as to be mounted, and the position of the band-pass filter turret 51 in the rotation direction is changed.

前記回転フィルタ50を透過し、R,G,Bの各波長領域の
光に時系列的に分離された光は、更に、前記バンドパス
フィルタターレット51の選択されたフィルタを透過し、
前記ライドガイド14の入射端に入射され、このライトガ
イド14を介して先端部9に導かれ、この先端部9から出
射されて、観察部位を照明するようになっている。
The light that has passed through the rotation filter 50 and has been separated in time series into light of each wavelength region of R, G, and B is further transmitted through a selected filter of the bandpass filter turret 51.
The light enters the incident end of the ride guide 14, is guided to the tip 9 via the light guide 14, is emitted from the tip 9, and illuminates the observation site.

この照明光による観察部位からの戻り光は、対物レン
ズ系15によって、固体撮像素子16上に結像され、光電変
換されるようになっている。この固体撮像素子16には、
前記信号線126を介して、前記ビデオプロセッサ6内の
ドライバ回路31からの駆動パルスが印加され、この駆動
パルスによって読み出,、転送が行われるようになって
いる。この固体撮像素子16から読み出された映像信号
は、前記信号線27を介して、前記ビデオプロセッサ6内
または電子内視鏡1内に設けられたプリアンプ32に入力
されるようになっている。このプリアンプ32で増幅され
た映像信号は、プロセス回路33に入力され、γ補正及び
ホワイトバランス等の信号処理を施され、A/Dコンバー
タ34によって、デジタル信号に変換されるようになって
いる。このデジタルの映像信号は、セレクト回路35によ
って、例えば赤(R),緑(G),青(B)の各色に対
応する3つのメモリ(1)36a,メモリ(2)36b,メモリ
(3)36cに選択的に記憶されるようになっている。前
記メモリ(1)36a,メモリ(2)36b,メモリ(3)36c
は、同時に読み出され、D/Aコンバータ37によって、ア
ナログ信号に変換され、R,G,B色信号として出力される
と共に、エンコーダ38に入力され、このエンコーダ38か
らNTSCコンポジット信号として出力されるようになって
いる。
The return light from the observation site due to the illumination light is imaged on the solid-state imaging device 16 by the objective lens system 15, and is photoelectrically converted. This solid-state imaging device 16 includes:
A drive pulse from a driver circuit 31 in the video processor 6 is applied via the signal line 126, and reading and transfer are performed by the drive pulse. The video signal read from the solid-state imaging device 16 is input to a preamplifier 32 provided in the video processor 6 or the electronic endoscope 1 via the signal line 27. The video signal amplified by the preamplifier 32 is input to a process circuit 33, subjected to signal processing such as γ correction and white balance, and converted into a digital signal by an A / D converter. The digital video signal is supplied by a select circuit 35 to three memories (1) 36a, memories (2) 36b, and memories (3) corresponding to, for example, each color of red (R), green (G), and blue (B). 36c is selectively stored. The memory (1) 36a, the memory (2) 36b, and the memory (3) 36c
Are simultaneously read out, converted to analog signals by a D / A converter 37, output as R, G, B color signals, input to an encoder 38, and output from the encoder 38 as an NTSC composite signal. It has become.

そして、前記R,G,B色信号はまた、NTSCコンポジット
信号が、カラーモニタ7に入力され、このカラーモニタ
7によって、観察部位がカラー表示されるようになって
いる。
The R, G, B color signals and the NTSC composite signal are also input to the color monitor 7, and the color monitor 7 displays the observed part in color.

また、前記ビデオプロセッサ6内には、システム全体
のタイミングを作るタイミングジェネレータ42が設けら
れ、このタイミングジェネレータ42によって、モータド
ライバ25,ドライバ回路31,セレクト回路35等の各回路間
の同期が取られている。
In the video processor 6, a timing generator 42 for generating the timing of the entire system is provided, and the timing generator 42 synchronizes the circuits such as the motor driver 25, the driver circuit 31, and the select circuit 35. ing.

本実施例では、切換え回路43にて、フィルタ切換装置
55を制御し、バンドパスフィルタターレット51の各フィ
ルタ51a,51bのうちの一方を選択的に照明光路中に介装
すると、この選択されたフィルタによって、前記回転フ
ィルタ50を透過した光の波長領域が更に制限される。
In this embodiment, the switching circuit 43 includes a filter switching device.
By controlling one of the filters 51a and 51b of the band-pass filter turret 51 selectively in the illumination light path, the wavelength of light transmitted through the rotary filter 50 is controlled by the selected filter. Is further restricted.

フィルタ51aを選択すると、回転フィルタ50のR透過
フィルタが照明光路に介装されるタイミングで650nmを
中心とする狭帯域が透過し、G透過フィルタが照明光路
に介装されるタイミングで569nmを中心とする狭帯域が
透過し、B透過フィルタが照明光路に介装されるタイミ
ングで800nmを中心とする狭帯域が透過する。この3つ
の狭帯域の光は、それぞれ、R,Gのタイミングで被写体
に照射され、この照明光による被写体像が、固体撮像素
子16によって撮像される。そして、前記2つの波長域の
画像が、それぞれR,Gの画像として出力される。
When the filter 51a is selected, a narrow band centered at 650 nm is transmitted at the timing when the R transmission filter of the rotary filter 50 is interposed in the illumination optical path, and the center is 569 nm at the timing when the G transmission filter is interposed in the illumination optical path. And a narrow band centered at 800 nm is transmitted at the timing when the B transmission filter is interposed in the illumination light path. The three narrow-band lights are applied to the subject at the timings of R and G, respectively, and the subject image by the illumination light is captured by the solid-state imaging device 16. Then, the images in the two wavelength ranges are output as R and G images, respectively.

ところで、第6図に、ヘモグロビンの酸素飽和度(SO
2とも記す。)の変化による血液の吸光度(散乱反射ス
ペクトル)の変化を示しているが、この図に示すよう
に、569nmは、SO2の変化によって血液の吸光度がほとん
ど変化しない波長である。また、第7図に、SO2の変化
による血液の吸光度の変化を示すために、オキシ(酸
化)ヘモグロビンとデオキシ(還元)ヘモグロビンの分
光特性を示しているが、この図に示すように、800nm近
傍は、SO2の変化によって血液の吸光度がほとんど変化
しない領域であり、また、前記569nmに比べて吸光度の
小さい領域である。また、650nm近傍は、SO2の変化によ
って血液の吸光度が変化する領域である。従って、569n
mと800nmの2つの波長領域の画像によってヘモグロビン
量の分布を観察することができ、650nmと800nmの2つの
波長領域による画像によって、SO2の変化を観察するこ
とができる。
FIG. 6 shows the oxygen saturation of hemoglobin (SO
Also described as 2 . ) Shows the change in blood absorbance (scattered reflection spectrum) due to the change in). As shown in this figure, 569 nm is a wavelength at which the change in SO 2 hardly changes the blood absorbance. FIG. 7 shows the spectral characteristics of oxy (oxidized) hemoglobin and deoxy (reduced) hemoglobin in order to show the change in the absorbance of blood due to the change in SO 2. As shown in FIG. The vicinity is a region where the absorbance of blood hardly changes due to the change of SO 2 , and a region where the absorbance is smaller than that of 569 nm. The vicinity of 650 nm is a region where the absorbance of blood changes due to the change of SO 2 . Therefore, 569n
The distribution of the amount of hemoglobin can be observed by the images in the two wavelength regions of m and 800 nm, and the change in SO 2 can be observed by the images in the two wavelength regions of 650 nm and 800 nm.

また、フィルタ51bを選択すると、回転フィルタ50の
B透過フィルタの透過波長領域が、可視光のみに制限さ
れ、通常のR,G,Bの面順次光が被写体に照射され、この
照明光による被写体像が、固体撮像素子16によって撮像
される。従って、可視帯域における通常のカラー画像が
観察可能となる。
When the filter 51b is selected, the transmission wavelength region of the B transmission filter of the rotary filter 50 is limited to only visible light, and the subject is irradiated with normal R, G, B plane-sequential light. An image is captured by the solid-state imaging device 16. Therefore, a normal color image in the visible band can be observed.

本実施例では、第3図に示すような内視鏡装置から出
力される生体粘膜面における色素であるヘモグロビンの
量及び酸素飽和度の情報を得るのに必要な3種の異なっ
た波長領域の画像信号が、更に、第1図に示す信号処理
回路に入力されるようになっている。この信号処理回路
は、入力される3種の画像信号をクランプするクランプ
回路101,102,103を備え、このクランプ回路101〜103に
より一定値にクランプされた信号は、それぞれ、γ′補
正回路104,105,106に入力されるようになっている。こ
のγ′補正回路104〜106は、内視鏡装置においてテレビ
画面等に表示するためにγ補正された画像データを、映
像信号レベルと映像の明るさとが直線関係となるような
γ補正(このようなγ補正を本実施例ではγ′補正と呼
ぶ。)するものである。前記γ′補正回路104〜106の出
力は、それぞれ、A/Dコンバータ107,108,109にて、アナ
ログ画像データからデジタル画像データに変換され、演
算処理部110に入力されるようになっている。この演算
処理部110は、3種の異なった波長領域の画像データか
ら、遠近または影による明暗を示す画像データ(V)
と、ヘモグロビンの分布を示す画像データ(Hb)と、ヘ
モグロビン酸素飽和度を示す画像データ(SO2)とを演
算処理するようになっている。この演算処理部110の3
つの出力画像データは、それぞれ、D/Aコンバータ111,1
12,113にてアナログ画像データに変換され、マトリクス
回路114に入力されるようになっている。このマトリク
ス回路114は、明暗情報Vとヘモグロビン分布情報Hbと
ヘモグロビン酸素飽和度情報SO2の各信号レベルを、テ
レビ画面に出力時に、輝度情報及び2つの直交する色を
示すベクトル、一般的にはR−Y,B−Yの平面になるよ
うに分配するようになっている。前記マトリクス回路11
4の3つの出力は、それぞれ、γ補正回路115,116,117に
て、テレビ画面に表示するためにγ補正され、バッファ
回路118,119,120を介して、R,G,B信号として出力される
ようになっている。
In this embodiment, three different wavelength ranges necessary for obtaining information on the amount of hemoglobin and oxygen saturation on the mucosal surface of the living body output from the endoscope apparatus as shown in FIG. The image signal is further input to the signal processing circuit shown in FIG. The signal processing circuit includes clamp circuits 101, 102, and 103 for clamping three types of input image signals. The signals clamped to a constant value by the clamp circuits 101 to 103 are input to γ 'correction circuits 104, 105, and 106, respectively. It has become. The γ ′ correction circuits 104 to 106 convert γ-corrected image data to be displayed on a television screen or the like in the endoscope apparatus so that the video signal level and the brightness of the video have a linear relationship. In the present embodiment, such γ correction is referred to as γ ′ correction.) The outputs of the γ 'correction circuits 104 to 106 are converted from analog image data into digital image data by A / D converters 107, 108, and 109, respectively, and input to the arithmetic processing unit 110. The arithmetic processing unit 110 converts the image data (V) indicating the lightness and darkness due to distance or shadow from the image data of three different wavelength regions.
And image data (Hb) indicating the distribution of hemoglobin and image data (SO 2 ) indicating the oxygen saturation of hemoglobin. This operation processing unit 110-3
The two output image data are D / A converters 111 and 1 respectively.
The image data is converted into analog image data at 12,113 and input to the matrix circuit 114. The matrix circuit 114, the signal levels of the brightness information V and the hemoglobin distribution information Hb and hemoglobin oxygen saturation information SO 2, when the output on the TV screen, the vector representing the color to luminance information and two orthogonal, in general The distribution is performed so as to be in the plane of RY and BY. The matrix circuit 11
The three outputs 4 are γ-corrected by γ correction circuits 115, 116, and 117 for display on a television screen, and output as R, G, and B signals via buffer circuits 118, 119, and 120, respectively.

次に、本実施例の作用について説明する。 Next, the operation of the present embodiment will be described.

3種の異なった波長領域の画像信号は、クランプ回路
101〜103によりクランプされ、γ′補正回路104〜106に
てγ′補正され、A/Dコンバータ107〜109にてデジタル
画像データに変換され、演算処理部110に入力される。
そして、この演算処理部110にて、3種の異なった波長
領域の画像データから、明暗情報V,ヘモグロビン分布情
報Hb及びヘモグロビン酸素飽和度情報SO2が、演算処理
によって得られる。すなわち、569nmと800nmの2つの波
長領域の画像の差によってヘモグロビン量分布情報Hbが
得られ、650nmと800nmの2つの波長領域による画像の差
によってヘモグロビン酸素飽和度情報SO2が得られ、例
えば569nmと800nmの2つの波長領域の画像の和によって
明暗情報Vが得られる。この演算処理部110の3つの出
力画像データV,Hb,SO2は、D/Aコンバータ111〜113にて
アナログ画像データに変換され、マトリクス回路114に
入力され、前記明暗情報Vとヘモグロビン分布情報Hbと
ヘモグロビン酸素飽和度情報SO2の各信号レベルを、輝
度情報及び2つの直交する色を示すベクトルR−Y,B−
Yに分配する。そして、このマトリクス回路114の出力
が、γ補正回路115〜117にてγ補正され、バッファ回路
118〜120を介して、R,G,B信号として出力される。
Image signals in three different wavelength ranges are clamped
The signals are clamped by 101 to 103, corrected by γ 'correction circuits 104 to 106, converted to digital image data by A / D converters 107 to 109, and input to the arithmetic processing unit 110.
Then, in the arithmetic processing unit 110, from the image data of the three different wavelength regions, brightness information V, hemoglobin distribution information Hb and hemoglobin oxygen saturation information SO 2, obtained by the processing. That is, hemoglobin distribution information Hb is obtained by the difference between the two images in the wavelength range of 569nm and 800 nm, the hemoglobin oxygen saturation level information SO 2 obtained by the difference image by the two-wavelength region of 650nm and 800 nm, for example, 569nm And the image in the two wavelength regions of 800 nm, the brightness information V is obtained. The three output image data V, Hb, and SO 2 of the arithmetic processing unit 110 are converted into analog image data by D / A converters 111 to 113, input to a matrix circuit 114, and output the brightness information V and the hemoglobin distribution information. Hb and each signal level of hemoglobin oxygen saturation information SO 2, vector R-Y indicating the color to luminance information and two orthogonal, B-
Distribute to Y. The output of the matrix circuit 114 is γ-corrected by γ correction circuits 115 to 117 and
The signals are output as R, G, B signals via 118 to 120.

ここで、前記マトリクス回路114において、第2図に
示すように、R−Y軸にヘモグロビン分布情報Hbを、B
−Y軸にヘモグロビン酸素飽和度情報SO2を割り当てる
と、遠近または影は、輝度信号Yとして映像化されるた
め、目視上違和感を与えない映像となり、また、この映
像では、ヘモグロビン量及びヘモグロビン酸素飽和度の
変化の組み合わせにより、色相が次のように変化する。
Here, in the matrix circuit 114, as shown in FIG.
Assigning a hemoglobin oxygen saturation level information SO 2 in the -Y-axis, perspective or shadows, to be visualized as a luminance signal Y, becomes an image which does not give visually uncomfortable feeling, and in this image, the hemoglobin content and the hemoglobin oxygen The hue changes as follows according to the combination of changes in the saturation.

正常または一般的なヘモグロビン量及びヘモグロビン
酸素飽和度のレベルをR−Y,B−Y各々が原点、すなわ
ち無彩色に設定すると、酸素飽和度が変化せずヘモグロ
ビンが多い粘膜の部位は、RまたはMg(マゼンタ)方向
に色調が変化するので、赤く表現され、ヘモグロビンが
少ない部位は、G,Cy(シアン)方向に色調が変化するの
で、青緑に表現される。
If the level of normal or general hemoglobin amount and hemoglobin oxygen saturation is set to the origin of each of R-Y and B-Y, that is, an achromatic color, the portion of the mucous membrane where the oxygen saturation does not change and the hemoglobin is large is R or Since the color tone changes in the Mg (magenta) direction, it is expressed in red, and a portion with little hemoglobin changes in the G, Cy (cyan) direction, and thus expressed in blue-green.

また、ヘモグロビン量が多く且つヘモグロビン酸素飽
和度も大きい部位は彩度の高いオレンジとなり、ヘモグ
ロビン量が設定値で且つヘモグロビン酸素飽和度が大き
い部位はYe(黄)となる。
Further, a portion having a large hemoglobin amount and a large hemoglobin oxygen saturation is orange with high saturation, and a portion having a set hemoglobin amount and a large hemoglobin oxygen saturation is Ye (yellow).

このように本実施例によれば、生体の情報として非常
に重要であるヘモグロビン量の分布及びヘモグロビン酸
素飽和度の変化が、色の変化として同時に且つ互いに識
別可能に把握可能となると共に、同時に明暗の情報も付
加されているため、病変部の形態診断も併せて行うこと
ができる。従って、医師の今までの医学知識を応用可能
となると共に、従来、微少なヘモグロビン量及びヘモグ
ロビン酸素飽和度の変化により生じていた微少な色差の
目視上の確認が容易になり、総合的な診断能が向上する
という効果がある。
As described above, according to the present embodiment, the distribution of the hemoglobin amount and the change in the oxygen saturation of hemoglobin, which are very important as the information of the living body, can be grasped simultaneously as the change in color and can be distinguished from each other, and at the same time, the brightness can be changed. Is added, so that the morphological diagnosis of the lesion can be performed at the same time. Accordingly, the medical knowledge of the doctor can be applied, and the visual confirmation of the minute color difference caused by the change of the minute amount of hemoglobin and the change of the oxygen saturation of hemoglobin becomes easy. The effect is that the performance is improved.

尚、本実施例において、マトリクス回路による変換を
行わず、3種の映像信号をそのままR,G,Bに割り当てて
も良い。
In this embodiment, three types of video signals may be directly assigned to R, G, and B without performing conversion by the matrix circuit.

第11図及び第12図は本発明の第2実施例に係り、第11
図は本実施例の主要部である信号処理回路を示すブロッ
ク図、第12図は生体情報の画像信号への割当てを示す説
明図である。
11 and 12 relate to a second embodiment of the present invention.
FIG. 12 is a block diagram showing a signal processing circuit as a main part of the present embodiment, and FIG. 12 is an explanatory diagram showing assignment of biological information to image signals.

本実施例では、第1実施例における演算処理部110の
代りに、3種の異なった波長領域の画像データから明暗
情報V,ヘモグロビン分布情報及びヘモグロビン酸素飽和
度情報を演算処理する演算処理回路121と、この演算処
理回路121の出力を座標変換する座標変換回路122とを設
けている。その他の構成は、第1実施例と同様である。
In the present embodiment, instead of the arithmetic processing unit 110 in the first embodiment, an arithmetic processing circuit 121 for arithmetically processing brightness information V, hemoglobin distribution information and hemoglobin oxygen saturation information from image data of three different wavelength regions. And a coordinate conversion circuit 122 for converting the output of the arithmetic processing circuit 121 into coordinates. Other configurations are the same as those of the first embodiment.

本実施例では、演算処理回路121において算出される
ヘモグロビン量は、第12図に示すR−Y,B−Y平面にお
けるベクトルの大きさであるEとして算出され、ヘモグ
ロビン酸素飽和度は、そのベクトルの角度であるθで表
される値として算出される。
In the present embodiment, the hemoglobin amount calculated in the arithmetic processing circuit 121 is calculated as E, which is the magnitude of a vector on the RY, BY plane shown in FIG. 12, and the hemoglobin oxygen saturation is calculated by Is calculated as a value represented by the angle θ.

この算出されたθ及びEは、座標変換回路122にて極
座標系から直交座標系のR−Y,B−Y座標系に座標変換
される。尚、前記座標変換回路122では、演算処理回路1
21で算出される明暗情報Vは、第1実施例と同様に、輝
度信号Yに割り当てられる。前記座標変換回路122の3
つの出力画像データは、第1実施例と同様に、それぞ
れ、D/Aコンバータ111〜113にアナログ画像データに変
換され、マトリクス回路114にてR,G,B信号に適する配分
比に分配された後、γ補正回路115〜117にてγ補正さ
れ、バッファ回路118〜120を介して、R,G,B信号として
出力される。
The calculated θ and E are coordinate-converted by the coordinate conversion circuit 122 from the polar coordinate system to the RY, BY coordinate system of the rectangular coordinate system. In the coordinate conversion circuit 122, the arithmetic processing circuit 1
The brightness information V calculated in 21 is assigned to the luminance signal Y as in the first embodiment. The coordinate conversion circuit 122-3
As in the first embodiment, the three output image data are converted into analog image data by the D / A converters 111 to 113, respectively, and distributed by the matrix circuit 114 at a distribution ratio suitable for the R, G, and B signals. Thereafter, the γ correction is performed by the γ correction circuits 115 to 117 and output as R, G, B signals via the buffer circuits 118 to 120.

本実施例では、テレビモニタ上に表現されるヘモグロ
ビン量及びヘモグロビン酸素飽和度の変化は、第12図に
示すように、ヘモグロビン量は彩度の変化として、ヘモ
グロビン酸素飽和度は色相の変化として表現される。
In the present embodiment, the changes in hemoglobin amount and hemoglobin oxygen saturation expressed on the television monitor are expressed as a change in hemoglobin amount and a change in hue as shown in FIG. Is done.

このように本実施例によれば、ヘモグロビン量とヘモ
グロビン酸素飽和度の変化を同時に観察できると共に、
2種の映像信号データを目視上分離可能となる。すなわ
ち、色の三属性の色相,彩度,明度のうち、色相と彩度
にそれぞれヘモグロビン酸素飽和度とヘモグロビン量と
を割り当てることにより、ヘモグロビン量の多いすなわ
ち血液の多い部位は赤の彩度が高くなり、ヘモグロビン
量の少ない部位は赤の彩度が低くなる。一方、ヘモグロ
ビン酸素飽和度の変化は、従来の内視鏡では観察困難で
あったが、本実施例によれば、算出したSO2の変化を広
範囲な色相領域にて表現することで、診断能の向上とい
う効果がある。
As described above, according to the present embodiment, it is possible to simultaneously observe changes in hemoglobin amount and hemoglobin oxygen saturation,
The two types of video signal data can be visually separated. That is, by assigning the hemoglobin oxygen saturation and the hemoglobin amount to the hue and the saturation, respectively, of the hue, saturation, and lightness of the three attributes of the color, a portion having a large hemoglobin amount, that is, a portion having a large amount of blood, has a red saturation. The higher the hemoglobin content, the lower the red saturation. On the other hand, the change in the hemoglobin oxygen saturation, by the conventional endoscope has been difficult observation, to express According to this embodiment, the change in the calculated SO 2 in a wide range of hue regions, diagnostic performance There is an effect of improving.

尚、色相の変化領域は、360゜とはせずに、ある一定
の範囲に限定することで、ヘモグロビン酸素飽和度の最
大と最小の分離が容易となる。また、色相,彩度,明度
の各々への生体情報の割当は、本実施例の例に限らず、
例えば、明度にヘモグロビン量に割り当てても良い。
The hue change region is not limited to 360 °, but is limited to a certain range, so that the maximum and minimum hemoglobin oxygen saturations can be easily separated. In addition, the assignment of biological information to each of hue, saturation, and brightness is not limited to the example of the present embodiment.
For example, the brightness may be assigned to the hemoglobin amount.

尚、本発明は、上記各実施例に限定されず、例えば、
生体情報としてヘモグロビン量とヘモグロビン酸素飽和
度のみてはなく、メチレンブルー,インドシアニングリ
ーン等の色素との組み合わせにおける生体の分光特性の
変化を表示しても良い。
It should be noted that the present invention is not limited to the above embodiments, and for example,
As biological information, not only the amount of hemoglobin and the oxygen saturation of hemoglobin but also a change in spectral characteristics of a biological body in combination with a dye such as methylene blue or indocyanine green may be displayed.

また、ヘモグロビン量やヘモグロビン酸素飽和度の情
報を得るための波長領域は、実施例に示したものに限ら
ず、種々選択可能である。
Further, the wavelength region for obtaining information on hemoglobin amount and hemoglobin oxygen saturation is not limited to that shown in the embodiment, but can be variously selected.

また、内視鏡観察部位を透過照明により観察しても良
い。この場合は、生体の外から照明しても良いし、生体
内に光を導き、組織のみを透過照明しても良い。
Further, the endoscope observation site may be observed by transmitted illumination. In this case, illumination may be performed from outside the living body, or light may be guided into the living body and only the tissue may be transmitted and illuminated.

また、本発明は、挿入部の先端部に固体撮像素子を有
する電子内視鏡に限らず、ファイバスコープ等の肉眼観
察が可能な内視鏡の接眼部に、あるいは接眼部と交換し
て、CCD等の固体撮像素子を有する外付けテレビカメラ
を接続して使用する内視鏡装置にも適用することができ
る。
Further, the present invention is not limited to an electronic endoscope having a solid-state imaging device at the distal end portion of the insertion section, but may be replaced with an eyepiece of an endoscope capable of observing the naked eye such as a fiberscope or with an eyepiece. In addition, the present invention can be applied to an endoscope apparatus connected to an external television camera having a solid-state imaging device such as a CCD.

[発明の効果] 以上説明したように本発明によれば、被検体における
分光特性に関連する複数の情報を、互いに目視的に分離
可能で且つ同時に表示可能な複数の画像信号に割り当て
たので、被検体の複数の情報を同時に観察可能になり、
総合的な診断能がより向上されるという効果がある。
[Effects of the Invention] As described above, according to the present invention, a plurality of pieces of information related to spectral characteristics of a subject are assigned to a plurality of image signals that can be visually separated from each other and that can be displayed simultaneously. It is possible to simultaneously observe multiple pieces of information on the subject,
This has the effect of improving the overall diagnostic ability.

【図面の簡単な説明】[Brief description of the drawings]

第1図ないし第10図は本発明の第1実施例に係り、第1
図は本実施例の主要部である信号処理回路を示すブロッ
ク図、第2図は生体情報の画像信号への割当てを示す説
明図、第3図は内視鏡装置の概略の構成を示すブロック
図、第4図はバンドパスフィルタターレットを示す説明
図、第5図は内視鏡装置の全体を示す側面図、第6図及
び第7図はヘモグロビンの酸素飽和度の変化による血液
の吸光度の変化を示す説明図、第8図は回転フィルタの
各フィルタの透過波長領域を示す説明図、第9図及び第
10図はバンドパスフィルタターレットの各フィルタの透
過波長領域を示す説明図、第11図及び第12図は本発明の
第2実施例に係り、第11図は本実施例の主要部である信
号処理回路を示すブロック図、第12図は生体情報の画像
信号への割当てを示す説明図である。 1……電子内視鏡、50……回転フィルタ 51……バンドパスフィルタターレット 110……演算処理部 114……マトリクス回路
1 to 10 relate to a first embodiment of the present invention.
FIG. 2 is a block diagram showing a signal processing circuit which is a main part of this embodiment. FIG. 2 is an explanatory diagram showing assignment of biological information to image signals. FIG. 3 is a block diagram showing a schematic configuration of an endoscope apparatus. FIG. 4, FIG. 4 is an explanatory view showing a band-pass filter turret, FIG. 5 is a side view showing the entire endoscope device, and FIGS. FIG. 8 is an explanatory view showing the change, FIG. 8 is an explanatory view showing the transmission wavelength region of each filter of the rotary filter, FIG.
FIG. 10 is an explanatory diagram showing the transmission wavelength region of each filter of the band-pass filter turret. FIGS. 11 and 12 relate to the second embodiment of the present invention, and FIG. FIG. 12 is a block diagram showing a processing circuit, and FIG. 12 is an explanatory diagram showing assignment of biological information to image signals. 1 ... Electronic endoscope, 50 ... Rotating filter 51 ... Bandpass filter turret 110 ... Calculation processing unit 114 ... Matrix circuit

Claims (1)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】被写体の複数の機能情報を取得可能な複数
の特定波長帯域で被写体を撮像する撮像手段と、 前記撮像手段から出力される複数の波長帯域の撮像信号
に基づき、前記被写体における第1の機能情報に対応す
る第1の機能情報信号および第2の機能情報に対応する
第2の機能情報信号を演算すると共に、該演算結果とし
て得られた前記第1の機能情報信号を色差平面上におけ
る第1の変数を表す信号として出力し、前記第2の機能
情報信号を色差平面上における第2の変数を表す信号と
して出力する演算手段と、 前記第1の変数を表す信号として出力された前記第1の
機能情報信号および前記第2の変数を表す信号として出
力された第2の機能情報信号に基づき、前記撮像手段で
撮像した前記被写体の疑似カラー画像を表示する表示手
段と、 を備えたことを特徴とする内視鏡装置。
An imaging unit configured to image a subject in a plurality of specific wavelength bands capable of acquiring a plurality of function information of the subject; and an imaging unit for the subject based on imaging signals in a plurality of wavelength bands output from the imaging unit. A first function information signal corresponding to the first function information and a second function information signal corresponding to the second function information are calculated, and the first function information signal obtained as a result of the calculation is converted to a color difference plane. Calculating means for outputting a signal representing the first variable above and outputting the second function information signal as a signal representing the second variable on the color difference plane; and outputting the signal representing the first variable A table for displaying a pseudo color image of the subject imaged by the imaging means based on the first function information signal and the second function information signal output as a signal representing the second variable. The endoscope apparatus comprising: the means.
JP1101078A 1989-04-20 1989-04-20 Endoscope device Expired - Fee Related JP2761238B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP1101078A JP2761238B2 (en) 1989-04-20 1989-04-20 Endoscope device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP1101078A JP2761238B2 (en) 1989-04-20 1989-04-20 Endoscope device

Publications (2)

Publication Number Publication Date
JPH02279131A JPH02279131A (en) 1990-11-15
JP2761238B2 true JP2761238B2 (en) 1998-06-04

Family

ID=14291065

Family Applications (1)

Application Number Title Priority Date Filing Date
JP1101078A Expired - Fee Related JP2761238B2 (en) 1989-04-20 1989-04-20 Endoscope device

Country Status (1)

Country Link
JP (1) JP2761238B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2305094A1 (en) 2009-09-30 2011-04-06 Fujifilm Corporation Electronic endoscope system, processor for electronic endoscope, and method of displaying vascular information

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4637620B2 (en) * 2005-03-18 2011-02-23 富士フイルム株式会社 Endoscope system device
JP5190944B2 (en) * 2008-06-26 2013-04-24 富士フイルム株式会社 Endoscope apparatus and method for operating endoscope apparatus
CN103732116B (en) * 2011-09-05 2016-04-13 富士胶片株式会社 The method of endoscopic system, processor device and operation endoscopic system
JP5923099B2 (en) * 2011-09-29 2016-05-24 Hoya株式会社 Diagnostic system
EP3357402B1 (en) 2015-09-28 2020-06-17 FUJIFILM Corporation Endoscope system and operation method for endoscope system
WO2017085793A1 (en) * 2015-11-17 2017-05-26 オリンパス株式会社 Endoscope system, image processing device, image processing method, and program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63234941A (en) * 1986-11-29 1988-09-30 オリンパス光学工業株式会社 Image pickup apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2305094A1 (en) 2009-09-30 2011-04-06 Fujifilm Corporation Electronic endoscope system, processor for electronic endoscope, and method of displaying vascular information
US8668636B2 (en) 2009-09-30 2014-03-11 Fujifilm Corporation Electronic endoscope system, processor for electronic endoscope, and method of displaying vascular information

Also Published As

Publication number Publication date
JPH02279131A (en) 1990-11-15

Similar Documents

Publication Publication Date Title
JP2807487B2 (en) Endoscope device
JP3228627B2 (en) Endoscope image processing device
JP2648494B2 (en) Endoscope device
JP3164609B2 (en) Endoscope device
US8657737B2 (en) Electronic endoscope system, an electronic endoscope processor, and a method of acquiring blood vessel information
US5515449A (en) Endoscope image processing apparatus
JP3501388B2 (en) Video processor of electronic endoscope for fluorescence diagnosis
JP5997817B2 (en) Endoscope system
EP1484001B1 (en) Endoscope image processing apparatus
JP3467130B2 (en) Electronic endoscope device for fluorescence diagnosis
JP3490807B2 (en) Electronic endoscope device for fluorescence diagnosis
JP5774531B2 (en) ENDOSCOPE SYSTEM, ENDOSCOPE SYSTEM PROCESSOR DEVICE, ENDOSCOPE SYSTEM OPERATING METHOD, AND IMAGE PROCESSING PROGRAM
JP2978053B2 (en) Biological imaging device and blood information calculation processing circuit
JP2655571B2 (en) Imaging device
JP2660009B2 (en) Endoscope device
JP3478504B2 (en) Image processing device
JP2954596B2 (en) Endoscope device
JP2761238B2 (en) Endoscope device
JP3315188B2 (en) Endoscope device
JP2641654B2 (en) Endoscope device
JP2006341075A (en) Signal processor for biological observation system
JP2710386B2 (en) Endoscope device
JPH0679594B2 (en) Electronic endoscopic device
JP3179166B2 (en) Electronic endoscope device
JP2882604B2 (en) Imaging device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090320

Year of fee payment: 11

LAPS Cancellation because of no payment of annual fees