JP5438634B2 - Electronic endoscope system - Google Patents

Electronic endoscope system Download PDF

Info

Publication number
JP5438634B2
JP5438634B2 JP2010194887A JP2010194887A JP5438634B2 JP 5438634 B2 JP5438634 B2 JP 5438634B2 JP 2010194887 A JP2010194887 A JP 2010194887A JP 2010194887 A JP2010194887 A JP 2010194887A JP 5438634 B2 JP5438634 B2 JP 5438634B2
Authority
JP
Japan
Prior art keywords
image
light
treatment
halation
pdt
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010194887A
Other languages
Japanese (ja)
Other versions
JP2012050601A (en
Inventor
斎藤  牧
孝之 飯田
裕昭 安田
昌司 原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2010194887A priority Critical patent/JP5438634B2/en
Publication of JP2012050601A publication Critical patent/JP2012050601A/en
Application granted granted Critical
Publication of JP5438634B2 publication Critical patent/JP5438634B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Laser Surgery Devices (AREA)
  • Radiation-Therapy Devices (AREA)
  • Endoscopes (AREA)

Description

本発明は、電子内視鏡によって被検体内を撮影する電子内視鏡システムに関するものであり、さらに詳しくは、患部に治療用のレーザー光を照射する電子内視鏡システムに関する。   The present invention relates to an electronic endoscope system that images an inside of a subject with an electronic endoscope, and more particularly to an electronic endoscope system that irradiates an affected area with a therapeutic laser beam.

医療分野では、電子内視鏡を用いた診断や治療が数多く行われている。近年では、被検体内に白色光(以下、通常光という)を照射して撮影した画像は、被検体内を自然に観察することができるが、腫瘍組織等を把握し難い場合があるため、特定の狭い波長帯の光(以下、特殊光という)を被検体内に照射しながら被検体内を撮影することにより、腫瘍組織等を把握し易くした電子内視鏡システムが知られている。例えば、こうした電子内視鏡システムとして、PDD(Photodynamic Diagnosis: 光線力学的診断)を行うものが知られている。さらに、PDDによって診断を行った腫瘍組織等の病変に対してPDT(Photodynamic Therapy: 光線力学的治療)を行うシステムも知られている。   In the medical field, many diagnoses and treatments using an electronic endoscope are performed. In recent years, images taken by irradiating a subject with white light (hereinafter referred to as normal light) can be observed naturally within the subject, but it may be difficult to grasp tumor tissue, etc. 2. Description of the Related Art There is known an electronic endoscope system that makes it easy to grasp a tumor tissue and the like by photographing the inside of a subject while irradiating the subject with light of a specific narrow wavelength band (hereinafter referred to as special light). For example, such an electronic endoscope system that performs PDD (Photodynamic Diagnosis) is known. Furthermore, a system that performs PDT (Photodynamic Therapy) on a lesion such as a tumor tissue diagnosed by PDD is also known.

PDDは、所定波長の励起光を照射することによって蛍光光を発する光感受性物質を腫瘍組織に予め蓄積させておくことにより、光感受性物質が発する蛍光光によって、腫瘍組織の位置や大きさを把握することができるようにした診断方法である。腫瘍親和性の光感受性物質としては、405nm近傍の青色光を励起光として照射することによって赤色の蛍光光(例えば、波長635nm)を発生するヘマトポルフィリン誘導体等が知られている。   PDD accumulates a photosensitizer that emits fluorescent light by irradiating excitation light of a predetermined wavelength in the tumor tissue in advance, so that the position and size of the tumor tissue can be grasped by the fluorescent light emitted by the photosensitizer. This is a diagnostic method that can be performed. As a photoaffinity substance having affinity for tumor, a hematoporphyrin derivative that generates red fluorescent light (for example, wavelength 635 nm) by irradiating blue light around 405 nm as excitation light is known.

PDDで用いる光感受性物質は、励起光とは異なる所定波長の光(例えば、630nm〜680nmの赤色光。以下、治療光という)を照射することによって、腫瘍組織内に活性酸素が発生することが知られている。PDTは、こうして発生する活性酸素の殺細胞作用を利用した治療法であり、光感受性物質が蓄積された腫瘍組織に治療光を照射することによって腫瘍組織を消滅させる。PDTは、腫瘍組織の大きさや治療光のパワーにもよるが、概ね10分程度と、電子内視鏡を用いた治療としては比較的長い治療時間を要する。   A photosensitive substance used in PDD may generate active oxygen in tumor tissue by irradiating light with a predetermined wavelength different from excitation light (for example, red light of 630 nm to 680 nm, hereinafter referred to as therapeutic light). Are known. PDT is a treatment method that utilizes the cytocidal action of active oxygen generated in this way, and extinguishes tumor tissue by irradiating treatment light on the tumor tissue in which a photosensitive substance is accumulated. Although PDT depends on the size of the tumor tissue and the power of the treatment light, the treatment using an electronic endoscope requires a relatively long treatment time of about 10 minutes.

PDTで照射される治療光は、通常光と比較して極めて高出力のものが用いられるので、治療光を照射しながら通常光を照射して被検体内を撮影すると、治療光の照射位置やその周辺が白くぼけやる現象(いわゆるハレーション)が生じる。このため、PDTによる治療中に、被検体内を観察することは難しい。また、PDDで観察する蛍光光は、治療光と同程度の波長帯であることから、PDDとPDTを同時に行うことは難しい。しかし、治療光の照射位置や治療効果を確認しながら行うために、PDTによる治療中にも被検体内を観察できるようにすることが望まれている。   The treatment light emitted by the PDT is extremely high in output compared to the normal light. Therefore, when the inside of the subject is imaged by irradiating the normal light while irradiating the treatment light, A phenomenon (so-called halation) in which the periphery is blurred is generated. For this reason, it is difficult to observe the inside of the subject during treatment with PDT. Moreover, since the fluorescent light observed with PDD is in the same wavelength band as the treatment light, it is difficult to perform PDD and PDT simultaneously. However, it is desired to be able to observe the inside of a subject during treatment with PDT in order to confirm the irradiation position of the treatment light and the treatment effect.

こうしたことから、治療光及び通常光の照射タイミングと撮像素子の駆動タイミングを上手く同期させ、PDTと、通常光撮影やPDDを交互に行うことで、PDTによる治療中に通常光観察やPDDを行うことを可能にした電子内視鏡システムが知られている(特許文献1,2)。特許文献1には、第1フィールドでPDTを行ない、第2フィールドでPDDを行うことで、1フレームでPDTとPDDを両立させる技術が開示されている。特許文献2には、通常光撮影、PDD、PDTをフレーム毎に順に行ない、PDTを行うフレームでは1フレームの途中で蓄積電荷をリセットすることによりハレーションを抑えた撮影を行う技術が開示されている。   For this reason, normal light observation and PDD are performed during treatment by PDT by synchronizing the irradiation timing of treatment light and normal light and the drive timing of the image sensor well, and alternately performing PDT and normal light imaging and PDD. Electronic endoscope systems that make this possible are known (Patent Documents 1 and 2). Japanese Patent Application Laid-Open No. 2004-228561 discloses a technique for performing both PDT and PDD in one frame by performing PDT in the first field and performing PDD in the second field. Patent Document 2 discloses a technique for performing photographing with reduced halation by performing normal light photographing, PDD, and PDT in order for each frame, and resetting accumulated charges in the middle of one frame in a frame in which PDT is performed. .

特開2006−130183号公報JP 2006-130183 A 特開2006−094907号公報JP 2006-094907 A

PDTによって腫瘍組織を消滅させる場合、腫瘍組織の大きさ等に応じて、治療に必要な治療光の総照射光量が定まる。また、光源の特性として、単位時間あたりの治療光の光量は一定である。このため、PDTに要する時間は、治療光の光量と、治療完了までに必要な総照射光量によって定まる。   When the tumor tissue is extinguished by PDT, the total amount of treatment light necessary for treatment is determined according to the size of the tumor tissue and the like. Further, as the characteristics of the light source, the amount of treatment light per unit time is constant. For this reason, the time required for PDT is determined by the light amount of the treatment light and the total irradiation light amount required until the treatment is completed.

しかしながら、腫瘍組織に対する治療光の照射位置や向き等によっては、腫瘍組織に治療光が効率良く照射されているとは限らない。治療光が効率良く照射されない場合には、規定の時間だけ治療光を照射してPDTによる治療を終了すると、治療光の照射不足で腫瘍組織が完全に消滅させられないことがある。腫瘍組織を確実に消滅させるためには、規定の時間よりも長く治療光を照射しておく以外に対処法がないので、被検者への負担が大きいという問題がある。   However, the treatment light is not always efficiently irradiated to the tumor tissue depending on the irradiation position and direction of the treatment light to the tumor tissue. When the treatment light is not efficiently irradiated, when the treatment with PDT is terminated by irradiating the treatment light for a specified time, the tumor tissue may not be completely extinguished due to insufficient treatment light irradiation. There is a problem that the burden on the subject is large because there is no coping method other than irradiating treatment light longer than the prescribed time in order to surely eliminate the tumor tissue.

ハレーションが生じている画像をそのままモニタに表示する場合、ハレーションによって治療効果を確認することはできない。また、フレーム単位で治療光の照射を中断して通常光撮影を行う等してハレーションを防止する場合、モニタ上には通常光によって撮影した画像が表示されるので、腫瘍組織の変化から治療効果を把握することになるが、目視判断なので術者の技量によっては治療光の照射が不足する箇所があっても見逃されてしまうこともある。特に、PDTによる治療の過程で、その進捗状況や治療効果を正確に把握することは難しい。   When an image in which halation has occurred is displayed on the monitor as it is, the therapeutic effect cannot be confirmed by halation. In addition, when halation is prevented by interrupting treatment light irradiation in units of frames and performing normal light photography, the image taken with normal light is displayed on the monitor. However, since it is a visual judgment, depending on the skill of the operator, even if there is a portion where the treatment light irradiation is insufficient, it may be overlooked. In particular, it is difficult to accurately grasp the progress status and therapeutic effect in the course of treatment by PDT.

本発明は上述の問題点に鑑みてなされたものであり、PDTによる治療中に、治療の進捗状況(治療効果)を表示して術者をサポートすることを目的とする。   The present invention has been made in view of the above-described problems, and an object of the present invention is to support an operator by displaying the progress of treatment (treatment effect) during treatment by PDT.

本発明の電子内視鏡システムは、白色光を被検体内に照射する白色光照射手段と、前記被検体内の治療対象部位に蓄積された光感受性物質に作用して、前記治療対象部位を治療する治療光を照射する治療光照射手段と、前記被検体内から入射する光を光電変換することにより前記被検体内を撮像する撮像素子と、前記白色光とともに前記治療光を照射しながら順次撮影される治療中画像の各画素の画素値を加算することにより、画素毎に前記治療光の総照射光量を算出する総照射光量算出手段と、前記画素毎に算出される前記総照射光量に基づいて、前記治療効果画像を生成する治療効果画像生成手段と、前記治療中画像を表示する表示手段と、前記治療中画像とともに前記治療効果画像を前記表示手段に表示させる表示制御手段と、を備えることを特徴とする。   The electronic endoscope system of the present invention acts on white light irradiation means for irradiating white light into a subject, and a photosensitive substance accumulated in the treatment target region in the subject, Treatment light irradiation means for irradiating treatment light to be treated, an image sensor for imaging the inside of the subject by photoelectrically converting light incident from within the subject, and sequentially irradiating the treatment light together with the white light By adding the pixel value of each pixel of the image being treated, the total irradiation light amount calculating means for calculating the total irradiation light amount of the treatment light for each pixel, and the total irradiation light amount calculated for each pixel A treatment effect image generating means for generating the treatment effect image, a display means for displaying the in-treatment image, and a display control means for displaying the treatment effect image together with the in-treatment image on the display means. Preparation It is characterized in.

前記治療中画像について、関心領域を指定する関心領域指定手段を備え、前記総照射光量算出手段は、前記関心領域内の画素について前記総照射光量を算出し、前記治療効果画像生成手段は、前記関心領域について前記治療効果画像を生成することが好ましい。   A region-of-interest designating unit that designates a region of interest for the image during treatment, the total irradiation light amount calculating unit calculates the total irradiation light amount for pixels in the region of interest, and the treatment effect image generating unit includes the treatment effect image generating unit, Preferably, the therapeutic effect image is generated for the region of interest.

前記治療効果画像は、前記総照射光量を所定のカラーマップにしたがってマッピングした画像であることが好ましい。   The therapeutic effect image is preferably an image obtained by mapping the total irradiation light amount according to a predetermined color map.

前記表示制御手段は、前記治療効果画像を前記治療中画像に重畳して表示することが好ましい。   The display control means preferably displays the treatment effect image superimposed on the treatment-in-progress image.

前記表示制御手段は、前記治療効果画像を重畳した前記関心領域を前記表示手段に拡大表示することが好ましい。   Preferably, the display control means enlarges and displays the region of interest on which the therapeutic effect image is superimposed on the display means.

前記治療効果画像は、前記総照射光量を立体的なヒストグラムで表示する画像であることが好ましい。   The therapeutic effect image is preferably an image that displays the total irradiation light amount as a three-dimensional histogram.

前記治療中画像がハレーションの生じているハレーション有り画像か、ハレーションの生じていないハレーション無し画像かを判別する判別手段と、複数フレーム分の前記治療中画像を記憶する記憶手段と、を備え、前記表示制御手段は、撮影された前記治療中画像が前記ハレーション有り画像である場合に、前記記憶手段に記憶された過去の前記治療中画像の中から、前記ハレーション無し画像を選択して前記表示手段に表示することが好ましい。 A discriminating means for discriminating whether the image under treatment is an image with halation in which halation has occurred or an image without halation in which no halation has occurred, and storage means for storing the image under treatment for a plurality of frames, When the captured image being treated is the image with halation, the display control means selects the image without halation from the past images being treated stored in the storage means, and displays the display means. Is preferably displayed.

前記判別手段は、前記治療中画像の各画素の画素値を所定の閾値と比較して前記閾値よりも画素値が大きい画素を計数し、前記閾値よりも画素値が大きい画素が所定数よりも多い場合に前記治療中画像を前記ハレーション有り画像と判別し、前記閾値よりも画素値が大きい画素が所定数以下の場合に前記治療中画像を前記ハレーション無し画像と判別することが好ましい。   The discriminating means compares the pixel value of each pixel of the image under treatment with a predetermined threshold value, counts pixels having a pixel value larger than the threshold value, and more than a predetermined number of pixels having a pixel value larger than the threshold value. Preferably, the image being treated is determined to be the image with halation when there are many images, and the image being treated is determined to be the image without halation when the number of pixels having a pixel value larger than the threshold is equal to or less than a predetermined number.

記治療光の光量を低減させることにより、強制的に前記ハレーション無し画像を撮影させる制御手段を備えることが好ましい。 By reducing the amount of pre-Symbol therapeutic light, it is preferable to provide a control means for forcibly taking the halation without image.

前記制御手段は、次の撮影で前記ハレーション有り画像が撮影されると前記記憶手段に記憶された前記治療中画像が全て前記ハレーション有り画像となる前に、前記次の撮影において、前記治療光の光量を低減させることが好ましい。
Wherein, prior to the treatment in the image said halation there images next photographing stored in the storage means to be taken are all the halation there image, in the subsequent shooting, prior Symbol therapeutic light It is preferable to reduce the amount of light.

本発明によれば、PDTによる治療中に、治療の進捗状況(治療の効果)を表示して術者をサポートすることができる。   ADVANTAGE OF THE INVENTION According to this invention, the treatment progress (effect of treatment) can be displayed and the operator can be supported during the treatment by PDT.

電子内視鏡システムの構成を示す外観図である。It is an external view which shows the structure of an electronic endoscope system. 電子内視鏡システムの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of an electronic endoscope system. 絞り機構の構成を示す説明図である。It is explanatory drawing which shows the structure of an aperture mechanism. ダブルノッチフィルタの特性を示すグラフである。It is a graph which shows the characteristic of a double notch filter. 電子内視鏡システムの作用を示すフローチャートである。It is a flowchart which shows the effect | action of an electronic endoscope system. 電子内視鏡システムで撮影される各種画像の様態を示す説明図である。It is explanatory drawing which shows the aspect of the various images image | photographed with an electronic endoscope system. ハレーション有り画像が撮影されたときにハレーション無し画像に置き換えて表示する様態を示す説明図である。It is explanatory drawing which shows the aspect which replaces with an image without a halation and displays, when an image with a halation is image | photographed. ハレーション無し画像を強制的に取得する様態を示す説明図である。It is explanatory drawing which shows the aspect which forcibly acquires an image without a halation. 通常光及び治療光の点灯と撮影の関係を示すタイミングチャートである。It is a timing chart which shows the relationship between lighting of normal light and treatment light, and imaging. PDTとPDDを両立させる様態を示すタイミングチャートである。It is a timing chart which shows the mode which makes PDT and PDD compatible. 第2実施形態の電子内視鏡システムの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the electronic endoscope system of 2nd Embodiment. ハレーションの輪郭等を表示する様態を示す説明図である。It is explanatory drawing which shows the aspect which displays the outline etc. of halation. ハレーションの輪郭等を表示する別の様態を示す説明図である。It is explanatory drawing which shows another aspect which displays the outline etc. of halation. 第3実施形態の電子内視鏡システムの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the electronic endoscope system of 3rd Embodiment. 治療光の照射効率をモニタに表示する様態の例を示す説明図である。It is explanatory drawing which shows the example of the aspect which displays the irradiation efficiency of treatment light on a monitor. 先端部の向き等を調節する様態を示す説明図である。It is explanatory drawing which shows the aspect which adjusts direction etc. of a front-end | tip part. 第4実施形態の電子内視鏡システムの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the electronic endoscope system of 4th Embodiment. PDT中に治療効果を表示する様態を示す説明図である。It is explanatory drawing which shows the aspect which displays a therapeutic effect during PDT. PDT中に治療効果を表示する他の様態を示す説明図である。It is explanatory drawing which shows the other aspect which displays a therapeutic effect during PDT. 通常光、励起光、及び治療光を全てLDで発生させる例を示すブロック図である。It is a block diagram which shows the example which produces | generates all the normal light, excitation light, and treatment light by LD. 投光ユニットの構成を示す断面図である。It is sectional drawing which shows the structure of a light projection unit. 先端面における投光ユニットの配置を示す図である。It is a figure which shows arrangement | positioning of the light projection unit in a front end surface. 光感受性物質として用いる薬剤と、励起光,蛍光光,治療光の波長の対応関係を示す表である。It is a table | surface which shows the corresponding | compatible relationship between the chemical | medical agent used as a photosensitive substance, and the wavelength of excitation light, fluorescence light, and treatment light.

[第1実施形態]
まず、第1実施形態として、ハレーションを防止し、かつ、治療時間を短縮可能な電子内視鏡システム11について説明する。図1に示すように、電子内視鏡システム11は、電子内視鏡12、プロセッサ装置13、及び光源装置14からなる。電子内視鏡12は、被検者の体内に挿入される可撓性の挿入部16と、挿入部16の基端部分に連接された操作部17と、プロセッサ装置13及び光源装置14に接続されるコネクタ18と、操作部17‐コネクタ18間を繋ぐユニバーサルコード19とを有する。挿入部16の先端(以下、先端部という)20には被検体内撮影用のCCD型イメージセンサ(図2参照。以下、CCDという)21が設けられている。
[First Embodiment]
First, as a first embodiment, an electronic endoscope system 11 capable of preventing halation and shortening treatment time will be described. As shown in FIG. 1, the electronic endoscope system 11 includes an electronic endoscope 12, a processor device 13, and a light source device 14. The electronic endoscope 12 is connected to a flexible insertion portion 16 that is inserted into the body of a subject, an operation portion 17 that is connected to a proximal end portion of the insertion portion 16, a processor device 13, and a light source device 14. Connector 18 and a universal cord 19 that connects between the operation unit 17 and the connector 18. A distal end (hereinafter referred to as the distal end portion) 20 of the insertion portion 16 is provided with a CCD image sensor (refer to FIG. 2; hereinafter referred to as a CCD) 21 for imaging within the subject.

操作部17には、先端部20を上下左右に湾曲させるためのアングルノブや挿入部16の先端からエアーや水を噴出させるための送気/送水ボタン、観察画像を静止画像記録するためのレリーズボタン、モニタ22に表示された観察画像の拡大/縮小を指示するズームボタン、通常光による観察とPDDの切り替えを行う切り替えボタンといった操作部材が設けられている。また、操作部17の先端側には、電気メスやPDTの治療光を導光する治療プローブ等の処置具が挿通される鉗子口74が設けられている。鉗子口74は、挿入部16内の鉗子チャネル75(図2参照)を介して、先端部20に設けられた鉗子出口76に連通している。   The operation unit 17 includes an angle knob for bending the tip 20 up and down, left and right, an air / water feed button for ejecting air and water from the tip of the insertion unit 16, and a release for recording a still image. Operation members such as a button, a zoom button for instructing enlargement / reduction of the observation image displayed on the monitor 22, and a switching button for switching between observation with normal light and PDD are provided. In addition, a forceps port 74 through which a treatment tool such as a treatment probe for guiding treatment light from an electric knife or PDT is inserted is provided on the distal end side of the operation unit 17. The forceps port 74 communicates with a forceps outlet 76 provided at the distal end portion 20 via a forceps channel 75 (see FIG. 2) in the insertion portion 16.

プロセッサ装置13は、光源装置14と電気的に接続され、電子内視鏡システム11の動作を統括的に制御する。プロセッサ装置13は、ユニバーサルコード19や挿入部16内に挿通された伝送ケーブルを介して電子内視鏡12に給電を行い、CCD21の駆動を制御する。また、プロセッサ装置13は、伝送ケーブルを介してCCD21から出力された撮像信号を取得し、各種画像処理を施して画像データを生成する。プロセッサ装置13で生成された画像データは、プロセッサ装置13にケーブル接続されたモニタ22に観察画像として表示される。   The processor device 13 is electrically connected to the light source device 14 and comprehensively controls the operation of the electronic endoscope system 11. The processor device 13 supplies power to the electronic endoscope 12 via the universal cord 19 and a transmission cable inserted into the insertion portion 16 and controls the driving of the CCD 21. In addition, the processor device 13 acquires an imaging signal output from the CCD 21 via a transmission cable, and performs various image processing to generate image data. The image data generated by the processor device 13 is displayed as an observation image on a monitor 22 connected to the processor device 13 by a cable.

図2に示すように、先端部20には、観察窓23、照明窓24が設けられている。タイミングジェネレータ(以下、TGという)26、アナログ信号処理回路(以下、AFEという)27、VRAM28、CPU29は、操作部17やユニバーサルコード19のコネクタ18等に設けられている。観察窓23の奥には、レンズ群及びプリズムからなる対物光学系31によって被検体内の像が撮像面に結像されるようにCCD21が配置されている。照明窓24からは照明光が被検体内に照射される。照明光は、光源装置14から電子内視鏡12に供給され、ユニバーサルコード19及び挿入部16に挿通されたライトガイド32によって導光され、出射端に配置された照明レンズ33によって照明窓24を介して被検体内に照明される。   As shown in FIG. 2, the distal end portion 20 is provided with an observation window 23 and an illumination window 24. A timing generator (hereinafter referred to as TG) 26, an analog signal processing circuit (hereinafter referred to as AFE) 27, a VRAM 28, and a CPU 29 are provided on the operation unit 17, the connector 18 of the universal cord 19, and the like. In the back of the observation window 23, the CCD 21 is arranged so that an image in the subject is formed on the imaging surface by an objective optical system 31 including a lens group and a prism. Illumination light is emitted from the illumination window 24 into the subject. Illumination light is supplied from the light source device 14 to the electronic endoscope 12, guided by the light guide 32 inserted through the universal cord 19 and the insertion portion 16, and passed through the illumination window 24 by the illumination lens 33 disposed at the exit end. Through the subject.

CCD21は、対物光学系31によって撮像面に結像された被検体内の像を光電変換する。CCD21は複数の画素を有し、各画素は入射光量に応じた画素値である撮像信号を出力する。撮像面は、中央の受光部と、受光部を囲むように設けられたオプティカルブラックとからなる。受光部は開口された画素が配列された領域であり、各画素に複数の色セグメントからなるカラーフィルタが形成されている。カラーフィルタは、例えばベイヤー配列の原色(RGB)あるいは補色(CMYまたはCMYG)カラーフィルタである。オプティカルブラックは、遮光膜によって遮光された画素からなる領域であり、暗電流ノイズに応じた撮像信号を出力する。したがって、CCD21が出力する撮像信号には、受光部の画素から出力される撮像信号とともに、オプティカルブラックの画素から出力される撮像信号が含まれる。受光部の画素から出力される撮像信号は、観察画像の生成に用いられ、オプティカルブラックの画素から出力される撮像信号は、受光部の画素から出力される撮像信号の暗電流補正に用いられる。   The CCD 21 photoelectrically converts an image in the subject formed on the imaging surface by the objective optical system 31. The CCD 21 has a plurality of pixels, and each pixel outputs an imaging signal having a pixel value corresponding to the amount of incident light. The imaging surface includes a central light receiving portion and optical black provided so as to surround the light receiving portion. The light receiving portion is an area where the opened pixels are arranged, and a color filter including a plurality of color segments is formed in each pixel. The color filter is, for example, a Bayer array primary color (RGB) or complementary color (CMY or CMYG) color filter. The optical black is an area composed of pixels shielded by a light shielding film, and outputs an imaging signal corresponding to dark current noise. Therefore, the imaging signal output from the CCD 21 includes the imaging signal output from the optical black pixel as well as the imaging signal output from the pixel of the light receiving unit. The imaging signal output from the pixel of the light receiving unit is used for generating an observation image, and the imaging signal output from the optical black pixel is used for dark current correction of the imaging signal output from the pixel of the light receiving unit.

CCD21から出力される撮像信号はアナログ信号であり、AFE27によってノイズ除去処理やゲイン補正処理が施され、A/D変換された後に、ユニバーサルコード19及びコネクタ18を介してプロセッサ装置13のDSP42(後述)に入力される。   The image pickup signal output from the CCD 21 is an analog signal, subjected to noise removal processing and gain correction processing by the AFE 27, and after A / D conversion, the DSP 42 (described later) of the processor device 13 through the universal code 19 and the connector 18. ).

TG26は、CCD21にクロック信号を与える。CCD21は、TG26から入力されるクロック信号に応じて撮像動作を行ない、撮像信号を出力する。CPU29は、電子内視鏡12とプロセッサ装置13とが接続された後、プロセッサ装置13のCPU41からの動作信号に基づいてTG26を駆動させる。   The TG 26 gives a clock signal to the CCD 21. The CCD 21 performs an imaging operation according to the clock signal input from the TG 26 and outputs an imaging signal. After the electronic endoscope 12 and the processor device 13 are connected, the CPU 29 drives the TG 26 based on an operation signal from the CPU 41 of the processor device 13.

AFE27は、相関二重サンプリング(CDS)回路、自動ゲイン調節(AGC)回路、A/D変換器からなる。CDSは、CCD21が出力する撮像信号に対して相関二重サンプリング処理を施し、CCD21を駆動することによって生じるノイズを除去する。AGCは、CDSによってノイズが除去された撮像信号を増幅する。A/D変換器は、AGCで撮像信号を、所定のビット数のデジタルな撮像信号に変換する。AFE27の駆動は、CPU29によって制御される。例えば、CPU29は、プロセッサ装置13のCPU41から入力される動作信号に基づいて、AGC回路による撮像信号の増幅率(ゲイン)を調節する。   The AFE 27 includes a correlated double sampling (CDS) circuit, an automatic gain adjustment (AGC) circuit, and an A / D converter. The CDS performs a correlated double sampling process on the imaging signal output from the CCD 21 to remove noise generated by driving the CCD 21. The AGC amplifies the imaging signal from which noise has been removed by CDS. The A / D converter converts the imaging signal into a digital imaging signal having a predetermined number of bits by AGC. The driving of the AFE 27 is controlled by the CPU 29. For example, the CPU 29 adjusts the gain (gain) of the imaging signal by the AGC circuit based on the operation signal input from the CPU 41 of the processor device 13.

プロセッサ装置13は、CPU41、デジタル信号処理回路(DSP)42、デジタル画像処理回路(DIP)43、表示制御回路44、操作部51等を有する。   The processor device 13 includes a CPU 41, a digital signal processing circuit (DSP) 42, a digital image processing circuit (DIP) 43, a display control circuit 44, an operation unit 51, and the like.

CPU41は、図示しないデータバスやアドレスバス、制御線を介して各部と接続されており、プロセッサ装置13全体の動作を統括的に制御する。ROM52には、プロセッサ装置13の動作を制御するための各種プログラム(OS,アプリケーションプログラム等)や各種データ(グラフィックデータ等)が記憶されている。CPU41は、ROM52から必要なプログラムやデータを読み出して、作業メモリであるRAM53に展開し、読み出したプログラムを逐次処理する。また、CPU41は、検査日時、被検体や術者の情報等の文字情報といった検査毎に変わる情報を、操作部51やLAN等のネットワークより取得し、RAM53に記憶する。   The CPU 41 is connected to each unit via a data bus, an address bus, and a control line (not shown), and comprehensively controls the operation of the entire processor device 13. The ROM 52 stores various programs (OS, application programs, etc.) and various data (graphic data, etc.) for controlling the operation of the processor device 13. The CPU 41 reads out necessary programs and data from the ROM 52, develops them in the RAM 53, which is a working memory, and sequentially processes the read programs. Further, the CPU 41 obtains information that changes for each examination, such as examination date and time, character information such as subject and operator information, from the operation unit 51 and a network such as a LAN, and stores the information in the RAM 53.

DSP42は、CCD21から入力される撮像信号に対して、色分離、色補間、ゲイン補正、ホワイトバランス調整、ガンマ補正等の各種信号処理を施し、画像データを生成する。DSP42で生成された画像データは、DIP43の作業メモリに入力される。また、DSP42は、例えば生成した画像データの各画素の輝度を平均した平均輝度値等、照明光量の自動制御(ALC制御)に必要なALC制御用データを生成し、CPU41に入力する。   The DSP 42 performs various signal processing such as color separation, color interpolation, gain correction, white balance adjustment, and gamma correction on the image pickup signal input from the CCD 21 to generate image data. The image data generated by the DSP 42 is input to the working memory of the DIP 43. Further, the DSP 42 generates ALC control data necessary for automatic control (ALC control) of the amount of illumination light, such as an average luminance value obtained by averaging the luminance of each pixel of the generated image data, and inputs the generated data to the CPU 41.

DIP43は、DSP42で生成された画像データに対して、電子変倍、色強調処理、エッジ強調処理等の各種画像処理を施す。DIP43で各種画像処理が施された画像データは、観察画像としてVRAM28に一時的に記憶された後、表示制御回路44に入力される。   The DIP 43 performs various types of image processing such as electronic scaling, color enhancement processing, and edge enhancement processing on the image data generated by the DSP 42. Image data that has been subjected to various types of image processing by the DIP 43 is temporarily stored as an observation image in the VRAM 28 and then input to the display control circuit 44.

また、DIP43は、観察画像のハレーションの有無を検出するハレーション検出部55を有する。ハレーション検出部55は、観察画像の各々の画素値を所定の閾値と比較し、閾値よりも画素値が大きい画素を計数する。画素値が閾値よりも大きい画素の個数が所定個数よりも大きい場合、ハレーション検出部55は、観察画像にハレーションが生じていると判別する。一方、画素値が閾値よりも大きい画素の個数が所定個数以下の場合、ハレーション検出部55は、観察画像にハレーションが生じていないと判別する。これにより、ハレーション検出部55は、観察画像が撮影される毎にハレーションの有無を検出する。   In addition, the DIP 43 includes a halation detection unit 55 that detects the presence or absence of halation in the observation image. The halation detection unit 55 compares each pixel value of the observation image with a predetermined threshold value, and counts pixels having a pixel value larger than the threshold value. If the number of pixels having a pixel value greater than the threshold value is greater than the predetermined number, the halation detection unit 55 determines that halation has occurred in the observed image. On the other hand, when the number of pixels having a pixel value greater than the threshold value is equal to or less than the predetermined number, the halation detection unit 55 determines that no halation has occurred in the observation image. Thereby, the halation detection part 55 detects the presence or absence of halation every time an observation image is taken.

以下では、ハレーション検出部55によってハレーションが検出された観察画像をハレーション有り画像といい、ハレーションが検出されなかった観察画像をハレーション無し画像という。   Hereinafter, an observation image in which halation is detected by the halation detection unit 55 is referred to as an image with halation, and an observation image in which no halation is detected is referred to as an image without halation.

ハレーション検出部55によるハレーションの有無についての判別結果は、CPU41に入力される。CPU41は、ハレーション検出部55から入力された判別結果に基づいて、VRAM28に複数記憶された観察画像の中からモニタ22上に表示させる観察画像を決定し、モニタ22上に表示することが決定された観察画像を選択的に取得するように画像選択信号を表示制御回路44に入力する。   The determination result of the presence or absence of halation by the halation detector 55 is input to the CPU 41. Based on the determination result input from the halation detection unit 55, the CPU 41 determines an observation image to be displayed on the monitor 22 from among a plurality of observation images stored in the VRAM 28 and is determined to be displayed on the monitor 22. An image selection signal is input to the display control circuit 44 so as to selectively acquire the observed image.

VRAM28は、DIP43から入力される観察画像を一時的に記憶するメモリであり、複数フレーム分(例えば5フレーム分)の観察画像を同時に記憶する。また、DIP43は、VRAM28に記憶容量の上限分(5フレーム分)の観察画像が既に記憶されている状態で新たな観察画像を入力する際に、上書き更新等により、最も古い観察画像を破棄して新たな観察画像をVRAM28に記憶させる。したがって、VRAM28には、最新の観察画像から記憶容量の上限分の観察画像が記憶される。VRAM28に記憶された複数フレーム分の観察画像のうち1フレーム分の観察画像が表示制御回路44によって選択して取得され、モニタ22に表示される。   The VRAM 28 is a memory that temporarily stores an observation image input from the DIP 43, and simultaneously stores observation images for a plurality of frames (for example, five frames). In addition, when the DIP 43 inputs a new observation image in a state where the upper limit (5 frames) of the observation image is already stored in the VRAM 28, the DIP 43 discards the oldest observation image by overwriting update or the like. The new observation image is stored in the VRAM 28. Therefore, the observation image for the upper limit of the storage capacity is stored in the VRAM 28 from the latest observation image. An observation image for one frame among the observation images for a plurality of frames stored in the VRAM 28 is selected and acquired by the display control circuit 44 and displayed on the monitor 22.

表示制御回路44は、VRAM28から観察画像を選択して取得し、モニタ22上に表示する。このとき、表示制御回路44は、CPU41から入力される画像選択信号に基づいて、VRAM28に記憶された複数の観察画像のなかから、1フレーム分の観察画像を取得し、これをモニタ22上に表示する。特に、PDTによる治療を行っている場合、VRAM28に記憶された観察画像の中から、最新のハレーション無し画像を取得し、これをモニタ22に表示する。また、表示制御回路44は、CPU41からROM52及びRAM53に記憶されたグラフィックデータ等を受け取る。グラフィックデータ等には、観察画像のうち被写体が写された有効画素領域のみを表示させる表示マスク、検査日時,被検体や術者の情報等の文字情報、GUIといったものがある。表示制御回路44は、VRAM28から取得した観察画像に対してグラフィックデータ等の重畳処理を行うとともに、モニタ22の表示形式に応じたビデオ信号(コンポーネント信号、コンポジット信号等)に変換してモニタ22に出力する。これにより、モニタ22に観察画像が表示される。   The display control circuit 44 selects and acquires an observation image from the VRAM 28 and displays it on the monitor 22. At this time, the display control circuit 44 acquires an observation image for one frame from the plurality of observation images stored in the VRAM 28 based on the image selection signal input from the CPU 41, and this is obtained on the monitor 22. indicate. In particular, when treatment by PDT is performed, the latest image without halation is acquired from the observation images stored in the VRAM 28 and displayed on the monitor 22. In addition, the display control circuit 44 receives graphic data and the like stored in the ROM 52 and the RAM 53 from the CPU 41. Examples of the graphic data include a display mask for displaying only an effective pixel region in which an object is photographed in an observation image, character information such as examination date and time, information on a subject and an operator, and GUI. The display control circuit 44 performs superimposing processing of graphic data or the like on the observation image acquired from the VRAM 28 and converts it into a video signal (component signal, composite signal, etc.) according to the display format of the monitor 22 to the monitor 22. Output. Thereby, an observation image is displayed on the monitor 22.

操作部51は、プロセッサ装置13の筐体に設けられる操作パネル、マウスやキーボード等の周知の入力デバイスであり、PDTにおける治療光の照射及び停止を指示するペダルスイッチを含む。CPU41は、操作部51や電子内視鏡12の操作部17からの操作信号に応じて、電子内視鏡システム11の各部を動作させる。   The operation unit 51 is a known input device such as an operation panel, a mouse, or a keyboard provided in the housing of the processor device 13 and includes a pedal switch that instructs irradiation and stop of treatment light in the PDT. CPU41 operates each part of the electronic endoscope system 11 according to the operation signal from the operation part 51 or the operation part 17 of the electronic endoscope 12. FIG.

プロセッサ装置13には、上記の他にも、画像データに所定の圧縮形式(例えばJPEG形式)で画像圧縮処理を施す圧縮処理回路や、レリーズボタンの操作に連動して、圧縮された画像をリムーバブルメディアに記録するメディアI/F、LAN等のネットワークとの間で各種データの伝送制御を行うネットワークI/F等が設けられている。これらは、データバス等を介してCPU41と接続されている。   In addition to the above, the processor device 13 also includes a compression processing circuit that performs image compression processing on image data in a predetermined compression format (for example, JPEG format), and a removable image in conjunction with the operation of the release button. A network I / F for performing transmission control of various data with a network such as a media I / F to be recorded on the medium and a LAN is provided. These are connected to the CPU 41 via a data bus or the like.

光源装置14は、照明光ユニット61と治療光ユニット62を備える。照明光ユニット61は、被検体内に照射する撮影用の照明光を発生するユニットであり、光源63、絞り機構64、波長選択フィルタ65等から構成される。   The light source device 14 includes an illumination light unit 61 and a treatment light unit 62. The illumination light unit 61 is a unit that generates illumination light for imaging that is irradiated into the subject, and includes a light source 63, a diaphragm mechanism 64, a wavelength selection filter 65, and the like.

光源63は、赤色から青色までのブロードな波長の光(例えば、主に400nm以上800nm以下の波長帯の光、以下、通常光という)を発生する。光源63は、例えばキセノンランプからなり、一定の光量の通常光を発光する。光源63で発生した通常光の光量は、絞り機構64によって調節される。また、光源63で発生した通常光は、波長選択フィルタ65によって、PDD及びPDTのために予め被検体に投与される光感受性物質から蛍光光を発生させる波長帯の光(以下、励起光という)に制限されて被検体内に照射される場合がある。こうして光源63から発せられた照明光(通常光または励起光)は、集光レンズ67で集光されてライトガイド32の入射端に導光される。   The light source 63 generates light having a broad wavelength from red to blue (for example, light mainly in a wavelength band of 400 nm to 800 nm, hereinafter referred to as normal light). The light source 63 is composed of, for example, a xenon lamp, and emits normal light having a constant light amount. The amount of normal light generated by the light source 63 is adjusted by the diaphragm mechanism 64. Further, the normal light generated by the light source 63 is light in a wavelength band (hereinafter referred to as excitation light) that generates fluorescent light from a photosensitive substance that is previously administered to the subject for PDD and PDT by the wavelength selection filter 65. In some cases, the irradiation is performed within the subject. Thus, the illumination light (normal light or excitation light) emitted from the light source 63 is condensed by the condenser lens 67 and guided to the incident end of the light guide 32.

ライトガイド32は、例えば、複数の石英製光ファイバーを巻回テープ等でバンドル化したものである。ライトガイド32の出射端に導かれた照明光は、照明レンズ33によって拡散されて被検体内に照射される。   For example, the light guide 32 is formed by bundling a plurality of quartz optical fibers with a wound tape or the like. The illumination light guided to the exit end of the light guide 32 is diffused by the illumination lens 33 and irradiated into the subject.

絞り機構64は、後述するように絞り開口91(図3参照)や絞り開口91を開閉する絞り羽根92(図3参照)等からなり、照明光の光量を調節する。絞り機構64は、CPU66によって自動的に制御される。   As will be described later, the diaphragm mechanism 64 includes a diaphragm opening 91 (see FIG. 3), a diaphragm blade 92 (see FIG. 3) that opens and closes the diaphragm opening 91, and adjusts the amount of illumination light. The diaphragm mechanism 64 is automatically controlled by the CPU 66.

波長選択フィルタ65は、光源63から発せられた通常光を励起光に制限するフィルタである。波長選択フィルタ65は、例えば円板の半分が切り欠かれた半円状の形状を有し、光源63と集光レンズ67の間を横切るようにモータの駆動によって回転される。また、波長選択フィルタ65には、その回転位置を検出するセンサが設けられている。波長選択フィルタ65が光源63と集光レンズ67の間を横切っている間は励起光が照明光として被検体内に照射され、波長選択フィルタ65の切り欠き部分が光源63と集光レンズ67の間を横切っている間は通常光が照明光として被検体内に照射される。CPU31は、操作部17によって観察方法の切り替えを指示された場合等に、波長選択フィルタ65を制御することにより、照明光を通常光と励起光とで切り替える。   The wavelength selection filter 65 is a filter that limits normal light emitted from the light source 63 to excitation light. The wavelength selection filter 65 has, for example, a semicircular shape in which half of a disk is cut out, and is rotated by driving a motor so as to cross between the light source 63 and the condenser lens 67. Further, the wavelength selection filter 65 is provided with a sensor for detecting the rotational position. While the wavelength selection filter 65 crosses between the light source 63 and the condensing lens 67, excitation light is irradiated into the subject as illumination light, and a notch portion of the wavelength selection filter 65 is formed between the light source 63 and the condensing lens 67. While crossing, normal light is irradiated into the subject as illumination light. The CPU 31 switches the illumination light between the normal light and the excitation light by controlling the wavelength selection filter 65 when the operation unit 17 is instructed to switch the observation method.

治療光ユニット62は、PDTのために光感受性物質が蓄積された腫瘍組織に照射される治療光を発生するユニットであり、光源71と絞り機構72とを有する。   The treatment light unit 62 is a unit that generates treatment light irradiated to a tumor tissue in which a photosensitive substance is accumulated for PDT, and includes a light source 71 and a diaphragm mechanism 72.

光源71は、630nm〜680nmの赤色光を発生する。光源71が発生する赤色光は、光感受性物質が蓄積された腫瘍組織に照射されることで治療光として機能する。以下では、光源71で発生する赤色光を治療光という。光源71は例えばLDからなり、通常光やPDD用の励起光と比較して高光量のレーザー光をパルス発振する。光源71で発生する治療光の光量は、絞り機構72によって調節され、集光レンズ77で集光されて、治療プローブ73に導光される。   The light source 71 generates red light of 630 nm to 680 nm. The red light generated by the light source 71 functions as therapeutic light by being irradiated to the tumor tissue in which the photosensitive substance is accumulated. Hereinafter, red light generated by the light source 71 is referred to as treatment light. The light source 71 is composed of an LD, for example, and pulse-oscillates a laser beam having a higher light quantity than normal light or PDD excitation light. The amount of treatment light generated by the light source 71 is adjusted by the diaphragm mechanism 72, collected by the condenser lens 77, and guided to the treatment probe 73.

絞り機構72は、照明光ユニット61の絞り機構64と同様に構成され、絞り開口91を絞り羽根92で開閉する。これにより、光源71から治療プローブ73に入射される治療光の光量が調節される。絞り機構72の動作は、CPU66によって自動的に制御される。   The diaphragm mechanism 72 is configured similarly to the diaphragm mechanism 64 of the illumination light unit 61, and opens and closes the diaphragm opening 91 with the diaphragm blades 92. As a result, the amount of treatment light incident on the treatment probe 73 from the light source 71 is adjusted. The operation of the diaphragm mechanism 72 is automatically controlled by the CPU 66.

治療プローブ73は、PDTに用いられる処置具であり、光源装置14から治療光を導光し、先端から光感受性物質が予め蓄積された腫瘍組織に向けて治療光を照射する。治療プローブ73の基端部分は、光源装置14に接続され、治療光ユニット62から治療光が入射される。治療プローブ73の他端(先端)は、鉗子口74から電子内視鏡12内に挿入され、挿入部16に沿って設けられた鉗子チャネル75内を挿通され、先端部20に設けられた鉗子出口76から突出される。鉗子出口76は、鉗子チャネル75の終端である。鉗子出口76からの治療プローブ73の突出量は、鉗子口74で治療プローブ73を進退させる向きに移動させることによって自在に調節できる。   The treatment probe 73 is a treatment tool used for PDT, guides the treatment light from the light source device 14, and irradiates the treatment light from the tip toward the tumor tissue in which the photosensitive substance is accumulated in advance. The proximal end portion of the treatment probe 73 is connected to the light source device 14, and treatment light is incident from the treatment light unit 62. The other end (tip) of the treatment probe 73 is inserted into the electronic endoscope 12 from the forceps port 74, is inserted through a forceps channel 75 provided along the insertion portion 16, and the forceps provided at the tip portion 20. Projected from the outlet 76. The forceps outlet 76 is the end of the forceps channel 75. The protruding amount of the treatment probe 73 from the forceps outlet 76 can be freely adjusted by moving the treatment probe 73 in the direction in which the treatment probe 73 is advanced and retracted at the forceps port 74.

CPU66は、プロセッサ装置13のCPU41と通信し、絞り機構64,72及び波長選択フィルタ65の動作制御を行う。CPU66による絞り機構64,72の制御は、撮影の様態に応じて自動的に照明光の光量を調節するALC(Auto Light Control)制御である。CPU66の行うALC制御は、DSP42で生成されたALC制御用データに基づいて行われる。   The CPU 66 communicates with the CPU 41 of the processor device 13 and controls the operation of the aperture mechanisms 64 and 72 and the wavelength selection filter 65. The control of the diaphragm mechanisms 64 and 72 by the CPU 66 is ALC (Auto Light Control) control that automatically adjusts the amount of illumination light in accordance with the mode of photographing. The ALC control performed by the CPU 66 is performed based on the ALC control data generated by the DSP 42.

フード81は、PDD及びPDTを行う場合に先端部20に取り付けられるアタッチメントである。フード81には、先端部20の観察窓23,照明窓24,鉗子出口76の位置にそれぞれ対応して、観察窓82,照明窓83,鉗子出口84が設けられている。   The hood 81 is an attachment that is attached to the distal end portion 20 when performing PDD and PDT. The hood 81 is provided with an observation window 82, an illumination window 83, and a forceps outlet 84 corresponding to the positions of the observation window 23, the illumination window 24, and the forceps outlet 76 of the distal end portion 20.

観察窓82には減光フィルタ85が設けられている。減光フィルタ85は、PDD用の励起光とPDT用の治療光を減光するフィルタ(いわゆるノッチフィルタ)であり、励起光及び治療光以外の波長帯の光はほぼ100%透過する。このため、PDD時には、光感受性物質から発生する蛍光光と励起光の反射光が観察窓82に入射するが、励起光だけが減光される。これにより、光量が小さい蛍光光による被検体内の像を撮影することができる。   The observation window 82 is provided with a neutral density filter 85. The neutral density filter 85 is a filter (so-called notch filter) that attenuates the excitation light for PDD and the treatment light for PDT (so-called notch filter), and transmits light of a wavelength band other than the excitation light and the treatment light almost 100%. For this reason, at the time of PDD, fluorescent light generated from the photosensitive substance and reflected light of the excitation light enter the observation window 82, but only the excitation light is attenuated. As a result, an image in the subject can be taken with fluorescent light having a small amount of light.

また、PDT時には、治療時間を短縮するために高光量の治療光が用いられるが、その反射光は減光フィルタ85によって減光されるので、CCD21に到達する治療光の光量が低減される。   Further, during PDT, a high amount of treatment light is used to shorten the treatment time. However, since the reflected light is attenuated by the neutral density filter 85, the amount of treatment light reaching the CCD 21 is reduced.

なお、通常光は広帯域光であり、PDD用の励起光やPDT用の治療光を含むので、フード81を取り付けた状態で通常光によって照明しながら被検体内を撮影(以下、通常光撮影という)すると、減光フィルタ85によって励起光及び治療光と同一の波長帯の情報が低減されてしまうが、その他の大部分の波長帯の光は減光フィルタ85を透過する。このため、通常光の照明によって撮影される観察画像(以下、通常光画像という)は、フード81の有無によらず、ほぼ同様の通常光画像となる。   Since normal light is broadband light and includes excitation light for PDD and treatment light for PDT, the inside of the subject is imaged while being illuminated with normal light with the hood 81 attached (hereinafter referred to as normal light imaging). ), The information in the same wavelength band as the excitation light and the treatment light is reduced by the neutral density filter 85, but most of the other wavelength bands are transmitted through the neutral density filter 85. For this reason, an observation image (hereinafter referred to as a normal light image) captured by normal light illumination is a substantially normal light image regardless of the presence or absence of the hood 81.

照明窓83には、少なくとも通常光と励起光を透過する透明な部材(例えばガラス板)が嵌め込まれている。このため、先端部20にフード81を取り付けた場合も、フード81を取り付けない場合と同様に通常光や励起光が被検体内に照射される。   The illumination window 83 is fitted with a transparent member (for example, a glass plate) that transmits at least normal light and excitation light. For this reason, even when the hood 81 is attached to the distal end portion 20, normal light or excitation light is irradiated into the subject as in the case where the hood 81 is not attached.

鉗子出口84は開口であり、先端部20にフード81を取り付けた場合には、鉗子出口84は、先端部20の鉗子出口76の全体を露呈する。このため、先端部20にフード81を取り付けた状態であっても、治療プローブ73等の処置具を先端部20から突出させることができる。   The forceps outlet 84 is an opening, and when the hood 81 is attached to the distal end portion 20, the forceps outlet 84 exposes the entire forceps outlet 76 of the distal end portion 20. Therefore, even when the hood 81 is attached to the distal end portion 20, the treatment instrument such as the treatment probe 73 can be protruded from the distal end portion 20.

図3に示すように、照明光ユニット61の絞り機構64は、絞り開口91を開閉する絞り羽根92と、絞り開口91を閉じる位置に絞り羽根92を付勢するスプリング93とを備えている。絞り羽根92は、モータ94から与えられるトルクによって、スプリング93の付勢力に抗して絞り開口91の開口量が大きくなる方向(時計方向)に回転し、トルクの大きさとスプリング93の付勢力が釣り合う位置で停止する。トルクが大きいとスプリング93の付勢力抗する力も大きくなるので、絞り開口91の開口量も大きくなる。トルクが小さいと、スプリング93の付勢力に抗する力が小さくなるので絞り開口91の開口量が小さくなる。モータ94のトルクはPWM値(後述)の増加とともに大きくなり、PWM値が下がると減少する。   As shown in FIG. 3, the stop mechanism 64 of the illumination light unit 61 includes a stop blade 92 that opens and closes the stop opening 91 and a spring 93 that biases the stop blade 92 to a position where the stop opening 91 is closed. The diaphragm blade 92 rotates in a direction (clockwise) in which the aperture amount of the diaphragm opening 91 increases against the urging force of the spring 93 by the torque applied from the motor 94, and the magnitude of the torque and the urging force of the spring 93 are reduced. Stop at a balanced position. If the torque is large, the force against the urging force of the spring 93 also increases, so that the opening amount of the aperture opening 91 also increases. When the torque is small, the force against the urging force of the spring 93 is small, so the opening amount of the aperture 91 is small. The torque of the motor 94 increases as the PWM value (described later) increases, and decreases as the PWM value decreases.

光源装置14のCPU66は、DSP42によって算出されたALC制御用データに基づいて、絞り羽根92とスプリング93からなる絞り調節機構95を制御する。CPU66は、ALC制御用データに応じて、モータ94のトルクを決定するPWM(パルス幅変調)値を算出し、モータドライバ(図示しない)によってPWM値に応じた駆動パルスを発生させてモータ94を駆動する。PWM値は、モータ94の駆動パルスのデューティ比(パルス幅をパルス周期で割った値)を決定する。CPU66は、ALC制御用データが増加を要求する信号である場合には、増加分に応じてPWM値を挙げ、減少を要求する信号である場合には、減少分に応じてPWM値を下げることにより、ALC制御を行う。   The CPU 66 of the light source device 14 controls the aperture adjustment mechanism 95 including the aperture blades 92 and the springs 93 based on the ALC control data calculated by the DSP 42. The CPU 66 calculates a PWM (pulse width modulation) value that determines the torque of the motor 94 in accordance with the ALC control data, and generates a drive pulse corresponding to the PWM value by a motor driver (not shown). To drive. The PWM value determines the duty ratio of the drive pulse of the motor 94 (value obtained by dividing the pulse width by the pulse period). When the ALC control data is a signal requesting an increase, the CPU 66 increases the PWM value according to the increase, and when the ALC control data is a signal requesting a decrease, the CPU 66 decreases the PWM value according to the decrease. To perform ALC control.

治療光ユニット62の絞り機構72は、照明光ユニット61の絞り機構64と同様に構成され、CPU66によって制御される。但し、CPU66は、プロセッサ装置13のCPU41から、治療光の照射中断を指示する中断信号が入力された場合に、1フレームの期間、絞り開口91を閉じて治療光の照射を中断し、これ以外の期間は絞り開口91を全開させる。   The diaphragm mechanism 72 of the treatment light unit 62 is configured in the same manner as the diaphragm mechanism 64 of the illumination light unit 61 and is controlled by the CPU 66. However, when an interruption signal instructing the interruption of treatment light irradiation is input from the CPU 41 of the processor device 13, the CPU 66 closes the aperture 91 for one frame and interrupts the treatment light irradiation. During this period, the aperture opening 91 is fully opened.

中断信号は、VRAM28に記憶された5枚の観察画像のうち、新しい方から4枚の観察画像が連続してハレーション有り画像となったときに、CPU41からCPU66に出力される。CPU41は、ハレーションを検出したことを示す判別信号がハレーション検出部55から連続して入力された回数を計数することにより、これに応じて中断信号をCPU66に入力するか否かを決定する。   The interruption signal is output from the CPU 41 to the CPU 66 when four observation images from the newest one among the five observation images stored in the VRAM 28 continuously become images with halation. The CPU 41 counts the number of times that the determination signal indicating that the halation is detected is continuously input from the halation detection unit 55, and determines whether or not to input the interruption signal to the CPU 66 accordingly.

したがって、VRAM28に記憶された観察画像のうち、新しい方から4枚の観察画像がハレーション有り画像であった場合、次のフレームでは治療光の照射が一時中断され、ハレーション無し画像が撮影される。これにより、PDTによる治療中であっても、VRAM28には少なくとも1枚のハレーション無し画像が必ず記憶される。   Accordingly, when four observation images from the newest one stored in the VRAM 28 are images with halation, treatment light irradiation is temporarily interrupted in the next frame, and an image without halation is captured. Thereby, even during treatment with PDT, at least one image without halation is always stored in the VRAM 28.

図4に示すように、減光フィルタ85は、励起光の波長λの近傍と治療光の波長λの近傍で透過率が低く、その他の波長の光はほぼ100%透過する。減光フィルタ85は、励起光の波長λの近傍で透過率が低い第1のノッチフィルタと、治療光の波長λの近傍で透過率が低い第2のノッチフィルタを重ねて作製される。このため、励起光の波長λの透過率は、PDD時に用いる励起光の光量と発生する蛍光光とに応じて、治療光λの透過率はPDT時に用いる治療光の光量に応じて、各々定められる。なお、ここでは2種のノッチフィルタを組み合わせる例を説明したが、減光フィルタ85は、励起光と治療光を減光させることができれば良いので、光学薄膜等の具体的な構成は任意に定めることができる。 As shown in FIG. 4, the neutral density filter 85 has low transmittance near the wavelength λ 1 of the excitation light and near the wavelength λ 2 of the treatment light, and transmits light of other wavelengths almost 100%. The neutral density filter 85 is formed by overlapping a first notch filter having a low transmittance near the wavelength λ 1 of the excitation light and a second notch filter having a low transmittance near the wavelength λ 2 of the treatment light. . For this reason, the transmittance of the wavelength λ 1 of the excitation light depends on the amount of excitation light used during PDD and the generated fluorescent light, and the transmittance of the treatment light λ 2 depends on the amount of treatment light used during PDT, Each is determined. Here, an example in which two types of notch filters are combined has been described. However, the neutral filter 85 only needs to be able to attenuate excitation light and treatment light, so a specific configuration of an optical thin film or the like is arbitrarily determined. be able to.

上述のように構成される電子内視鏡システム11の作用を説明する。電子内視鏡システム11によってPDD及びPDTを行う場合、術者は、前もって被検者に光感受性物質を投与する。光感受性物質の投与後、一定の時間が経過し、光感受性物質が腫瘍組織に十分に蓄積し、検査及び治療を開始する際には、術者は電子内視鏡12とプロセッサ装置13及び光源装置14を接続し、プロセッサ装置13及び光源装置14の電源をオンにする。また、治療プローブ73の基端部分を光源装置14に接続するとともに、治療プローブ73の先端を鉗子口74から電子内視鏡12に挿通する。そして、操作部51を操作して、被検体に関する情報等を入力するとともに、先端部20にフード81を取り付け、挿入部16を被検体内に挿入し、検査及び治療を開始する。挿入部16の挿入は、通常光を照明して被検体内を観察(以下、通常光観察という)しながら行われる。   The operation of the electronic endoscope system 11 configured as described above will be described. When performing PDD and PDT by the electronic endoscope system 11, the operator administers a photosensitive substance to the subject in advance. When a certain period of time has elapsed after administration of the photosensitive substance, the photosensitive substance is sufficiently accumulated in the tumor tissue, and when the examination and treatment are started, the operator uses the electronic endoscope 12, the processor device 13, and the light source. The device 14 is connected, and the processor device 13 and the light source device 14 are turned on. In addition, the proximal end portion of the treatment probe 73 is connected to the light source device 14, and the distal end of the treatment probe 73 is inserted from the forceps port 74 into the electronic endoscope 12. Then, the operation unit 51 is operated to input information on the subject, the hood 81 is attached to the distal end portion 20, the insertion unit 16 is inserted into the subject, and examination and treatment are started. The insertion unit 16 is inserted while illuminating normal light and observing the inside of the subject (hereinafter referred to as normal light observation).

図5に示すように、先端部20が腫瘍組織近傍に到達したら、操作部17を操作して、観察方法を通常光観察からPDDに切り替える。操作部17によって通常光観察からPDDへの切り替え指示が入力されると、CPU41は、波長選択フィルタ65を回転させ、PDD用の励起光を被検体内に入射させる。これにより、モニタ22にはPDDによる観察画像(以下、PDD画像という)が表示される。励起光の照射によって光感受性物質から蛍光光が発生するため、PDD画像には光感受性物質が蓄積した腫瘍組織が写し出される。術者は、PDD画像を観察しながら、腫瘍組織の位置や大きさ、形状等を把握する(ステップS11)。   As shown in FIG. 5, when the distal end portion 20 reaches the vicinity of the tumor tissue, the operation unit 17 is operated to switch the observation method from normal light observation to PDD. When an instruction to switch from normal light observation to PDD is input by the operation unit 17, the CPU 41 rotates the wavelength selection filter 65 and causes the excitation light for PDD to enter the subject. Thereby, an observation image by PDD (hereinafter referred to as a PDD image) is displayed on the monitor 22. Since fluorescent light is generated from the photosensitive substance by irradiation with the excitation light, the tumor tissue in which the photosensitive substance is accumulated is displayed on the PDD image. The surgeon grasps the position, size, shape, etc. of the tumor tissue while observing the PDD image (step S11).

その後、腫瘍組織の位置や大きさ,形状等に応じて、挿入部16を進退させ、また挿入部16を回転させすることにより、腫瘍組織に対する先端部20の位置や、鉗子出口76,84の位置を調節する。そして、治療プローブ73を鉗子出口76,84から突出させ、治療光の照射範囲内に腫瘍組織が収まるように、腫瘍組織に対する治療プローブ73の距離や向きを調節する(ステップS12)。   Thereafter, the insertion portion 16 is moved forward and backward according to the position, size, shape, and the like of the tumor tissue, and the insertion portion 16 is rotated, so that the position of the distal end portion 20 relative to the tumor tissue and the forceps outlets 76 and 84 are changed. Adjust the position. Then, the treatment probe 73 is protruded from the forceps outlets 76 and 84, and the distance and orientation of the treatment probe 73 with respect to the tumor tissue are adjusted so that the tumor tissue is within the irradiation range of the treatment light (step S12).

治療光プローブ73の位置等の調節が完了すると、術者は操作部51のペダルスイッチを踏むことにより、治療プローブ73の先端から治療光を照射させ、PDTによる腫瘍組織の治療を開始する。このとき、プロセッサ装置13のCPU41は、操作部51のペダルスイッチから治療光の照射開始信号を受けると、光源装置14のCPU66にこれを入力する。光源装置14のCPU66は、治療光ユニット62の光源71から治療光を発生させるとともに、絞り開口91が全開するように絞り機構72を制御し、最大光量の治療光を照射させる。同時に、光源装置14のCPU66は、波長選択フィルタ65を回転させ、照明光ユニット61から通常光をライトガイド32に入射させ、被検体内に通常光を照射させる。したがって、術者が操作部51のペダルスイッチを踏み、PDTを開始すると、腫瘍組織に向けて治療光が照射されるとともに、撮影用の照明光としては通常光が被検体内に照射され、通常光撮影が行われる(ステップS13)。   When the adjustment of the position and the like of the therapeutic light probe 73 is completed, the operator presses the pedal switch of the operation unit 51 to irradiate the therapeutic light from the distal end of the therapeutic probe 73 and starts treatment of the tumor tissue by PDT. At this time, when receiving the treatment light irradiation start signal from the pedal switch of the operation unit 51, the CPU 41 of the processor device 13 inputs this to the CPU 66 of the light source device 14. The CPU 66 of the light source device 14 generates the treatment light from the light source 71 of the treatment light unit 62 and controls the diaphragm mechanism 72 so that the diaphragm opening 91 is fully opened to irradiate the treatment light with the maximum light amount. At the same time, the CPU 66 of the light source device 14 rotates the wavelength selection filter 65 so that the normal light enters the light guide 32 from the illumination light unit 61 and irradiates the subject with the normal light. Therefore, when the surgeon depresses the pedal switch of the operation unit 51 and starts PDT, treatment light is irradiated toward the tumor tissue, and normal light is irradiated into the subject as imaging illumination light. Optical photographing is performed (step S13).

治療光の反射光は減光フィルタ85によって減光されるが、治療光は高光量であるため、減光フィルタ85を透過する僅かな光量によってもハレーションが生じてしまうことがある。このため、PDT時に通常光の照明下で撮影された通常光画像(以下、PDT画像という)に、腫瘍組織の周りにハレーションが生じることがある。このため、ハレーション検出部55は、DSP42から入力されるPDT画像について、各画素の画素値を所定の閾値と比較し、所定の閾値よりも画素値が大きい画素数を計数する。そして、計数した画素数が所定数以下であるか否かによって、入力されたPDT画像にハレーションが生じているかな否かを判別し、判別結果をCPU41に入力する(ステップS14)。   The reflected light of the treatment light is attenuated by the neutral density filter 85. However, since the therapeutic light is a high amount of light, halation may occur even with a small amount of light transmitted through the neutral density filter 85. For this reason, halation may occur around the tumor tissue in a normal light image (hereinafter referred to as a PDT image) taken under normal light illumination during PDT. Therefore, the halation detection unit 55 compares the pixel value of each pixel with a predetermined threshold for the PDT image input from the DSP 42, and counts the number of pixels having a pixel value larger than the predetermined threshold. Then, it is determined whether or not halation has occurred in the input PDT image depending on whether or not the counted number of pixels is equal to or less than a predetermined number, and the determination result is input to the CPU 41 (step S14).

PDT画像がハレーション無し画像であった場合、このPDT画像を含め全5フレーム分のPDT画像がVRAM28に保持されるなか、CPU41は、表示制御回路44に今撮影した最も新しいPDT画像を選択取得してモニタ22に表示するように、画像選択信号を入力する。表示制御回路44は、CPU41から入力される画像選択信号にしたがって、今撮影された最も新しいPDT画像をモニタ22に表示する(ステップS15)。   When the PDT image is a non-halation image, the CPU 41 selects and acquires the latest PDT image that has been photographed in the display control circuit 44 while the PDT image for all five frames including the PDT image is held in the VRAM 28. Then, an image selection signal is inputted so as to be displayed on the monitor 22. The display control circuit 44 displays the newest PDT image that has been taken on the monitor 22 in accordance with the image selection signal input from the CPU 41 (step S15).

一方、PDT画像がハレーション有り画像であった場合、このPDT画像はVRAM28に一時的に記憶されるものの、CPU41は、VRAM28に記憶される全5フレーム分の画像の中から、以前のフレームで撮影されたハレーション無し画像のうち最も新しいハレーション無し画像を選択取得するように、表示制御回路44に画像選択信号を入力する。表示制御回路44は、CPU41から入力される画像選択信号にしたがって、ハレーション無し画像のうち最も新しいものをモニタ22に表示する(ステップS16)。   On the other hand, when the PDT image is an image with halation, the PDT image is temporarily stored in the VRAM 28, but the CPU 41 captures the previous frame from the images of all five frames stored in the VRAM 28. An image selection signal is input to the display control circuit 44 so as to select and acquire the newest non-halation image from among the non-halation images. The display control circuit 44 displays the newest image among the images without halation on the monitor 22 in accordance with the image selection signal input from the CPU 41 (step S16).

このように、電子内視鏡システム11は、PDTによる治療を行っている間、治療光の照射を中断すること無くPDT画像を撮影し続けるとともに、モニタ22上には常にハレーション無し画像を表示させる(ステップS17)。   As described above, the electronic endoscope system 11 continuously captures the PDT image without interrupting the irradiation of the treatment light during the treatment with the PDT, and always displays the non-halation image on the monitor 22. (Step S17).

図6(A)に示すように、挿入部16の挿入時等、通常光だけを照射して撮影される通常光画像101は、被検体内の様子が鮮明に観察できる。但し、励起光以外の波長帯の光の光量と比較して腫瘍組織から発生する蛍光光の光量は小さいので、通常光画像101では腫瘍組織の位置や大きさ,形状等を明確に把握することは難しい。   As shown in FIG. 6A, in the normal light image 101 that is captured by irradiating only normal light, such as when the insertion portion 16 is inserted, the state in the subject can be clearly observed. However, since the amount of fluorescent light generated from the tumor tissue is smaller than the amount of light in a wavelength band other than the excitation light, the normal light image 101 clearly grasps the position, size, shape, etc. of the tumor tissue. Is difficult.

一方、図6(B)に示すように、ステップS12でモニタ22に表示されるPDD画像102は、腫瘍組織103から発生した蛍光光と、これと同程度かそれ以下の光量に減光された励起光の反射光によって撮影されるので、腫瘍組織103が鮮明に観察される。PDD画像102を観察しながら治療プローブ73を先端部20から突出させると、PDD画像102に治療プローブ73の先端が写り込むので、治療光の照射範囲104に腫瘍組織103が収まるように、治療プローブ73の先端と腫瘍組織103の位置や距離を調節することができる。   On the other hand, as shown in FIG. 6 (B), the PDD image 102 displayed on the monitor 22 in step S12 was attenuated to a fluorescent light generated from the tumor tissue 103 and to a light quantity equivalent to or less than this. Since the image is taken by the reflected light of the excitation light, the tumor tissue 103 is clearly observed. When the treatment probe 73 is projected from the distal end portion 20 while observing the PDD image 102, the distal end of the treatment probe 73 is reflected in the PDD image 102, so that the tumor tissue 103 is placed in the treatment light irradiation range 104. The position and distance between the tip 73 and the tumor tissue 103 can be adjusted.

ステップS13〜S16で治療光ととともに通常光で被検体内を照明して撮影されるPDT画像は、図6(C)に示すPDT画像105のように、被検体内壁と治療プローブ73の位置や向きによっては、通常光画像101とほぼ同様のハレーション無し画像が撮影される。しかし、図6(D)に示すPDT画像106のように、ほとんどのPDT画像は、治療光の照射範囲104とその周りにハレーション107が生じて、腫瘍組織周辺の主要部分が白飛びし、性状観察やPDTによる治療効果の確認等には不向きなハレーション有り画像となる。   The PDT image captured by illuminating the inside of the subject with normal light together with the treatment light in Steps S13 to S16 is the position of the subject inner wall and the treatment probe 73, such as the PDT image 105 shown in FIG. Depending on the orientation, a halation-free image similar to the normal light image 101 is captured. However, like the PDT image 106 shown in FIG. 6D, in most PDT images, the treatment light irradiation range 104 and the surrounding halation 107 are generated, and the main part around the tumor tissue is blown out. It becomes an image with halation unsuitable for observation or confirmation of the therapeutic effect by PDT.

ステップS13〜S16で撮影されたPDT画像(撮影画像)とモニタ22に表示される画像(表示画像)との関係を模式的に図7に示す。   The relationship between the PDT image (captured image) captured in steps S13 to S16 and the image (display image) displayed on the monitor 22 is schematically shown in FIG.

時刻T01のフレームでPDT画像P06が撮影されたとする。PDT画像P06は、ハレーション有り画像である。このとき、VRAM28には、時刻T01以前の5フレームで撮影されたPDT画像P01〜P05が撮影順に記憶されている。PDT画像P01〜03とPDT画像P05はハレーション有り画像であり、PDT画像P04はハレーション無し画像である。   Assume that a PDT image P06 is captured in the frame at time T01. The PDT image P06 is an image with halation. At this time, in the VRAM 28, PDT images P01 to P05 photographed in five frames before time T01 are stored in the photographing order. PDT images P01 to P03 and PDT image P05 are images with halation, and PDT image P04 is an image without halation.

時刻T01のフレームでPDT画像P06が撮影されると、DIP43は、ハレーション検出部55によってPDT画像P06にハレーションが生じているか否かを判別すると同時に、VRAM28に記憶されたPDT画像P01〜P05のうち最も古いPDT画像P01を破棄させ、時刻T01のフレームで撮影されたPDT画像P06を新たにVRAM28に記憶させる。したがって、PDT画像P06が撮影されると、VRAM28にはPDT画像P02〜P06が記憶される。   When the PDT image P06 is captured at the frame at time T01, the DIP 43 determines whether or not halation has occurred in the PDT image P06 by the halation detection unit 55, and at the same time, among the PDT images P01 to P05 stored in the VRAM 28. The oldest PDT image P01 is discarded, and the PDT image P06 photographed in the frame at time T01 is newly stored in the VRAM 28. Therefore, when the PDT image P06 is captured, the PRAM images P02 to P06 are stored in the VRAM 28.

このとき、CPU41は、VRAM28に記憶された各PDT画像P02〜P06が各々撮影された時点でハレーション検出部55から入力された判別結果に基づいて、VRAM28に記憶されたPDT画像P02〜P06のうち、ハレーション無し画像であるPDT画像P04を選択するように、表示制御回路44に画像選択信号を入力する。このため、時刻T01において撮影されたPDT画像P06はハレーション有り画像であるが、モニタ22には以前に撮影されたハレーション無し画像であるPDT画像P04が表示される。   At this time, the CPU 41 selects one of the PDT images P02 to P06 stored in the VRAM 28 based on the determination result input from the halation detection unit 55 when each of the PDT images P02 to P06 stored in the VRAM 28 is captured. Then, an image selection signal is input to the display control circuit 44 so as to select the PDT image P04 which is an image without halation. For this reason, the PDT image P06 photographed at time T01 is an image with halation, but the PDT image P04, which is an image without halation previously photographed, is displayed on the monitor 22.

また、続く時刻T02のフレームでPDT画像P07が撮影されると、VRAM28から最も古いPDT画像P02が破棄され、PDT画像P07が新たにVRAM28に記憶される。時刻T02で撮影されたPDT画像P07がハレーション有り画像であるとすると、CPU41は、VRAM28に記憶されたPDT画像P03〜P07のなかから、ハレーション無し画像であるPDT画像P04が再び選択されるように表示制御回路44に画像選択信号を入力する。これにより、時刻T01に続いて、時刻T02のフレームにおいてもハレーション無し画像であるPDT画像P04が表示画像として使用される。   When the PDT image P07 is captured in the subsequent frame at time T02, the oldest PDT image P02 is discarded from the VRAM 28, and the PDT image P07 is newly stored in the VRAM 28. Assuming that the PDT image P07 taken at time T02 is an image with halation, the CPU 41 selects again the PDT image P04 that is an image without halation from the PDT images P03 to P07 stored in the VRAM 28. An image selection signal is input to the display control circuit 44. Thus, following the time T01, the PDT image P04, which is an image without halation, is used as the display image even in the frame at the time T02.

さらに、時刻T03のフレームでPDT画像P08が撮影されると、VRAM28から最も古いPDT画像P03が破棄され、PDT画像P08が新たにVRAM28に記憶される。時刻T03のフレームで撮影されたPDT画像P08がハレーション無し画像であったとすると、VRAM28には、PDT画像P04とPDT画像P08の2枚のハレーション無し画像が同時に記憶される。このとき、CPU41は、VRAM28に記憶されたPDT画像のうち、ハレーション無し画像の中で最も新しいものを選択するように、表示制御回路44に画像選択信号を入力する。このため、表示制御回路44は、PDT画像P04とPDT画像P08の2枚のハレーション無し画像のうち、最新のハレーション無し画像であるPDT画像P08をモニタ22に表示させる。したがって、時刻T01,時刻T02と続いてハレーション無し画像であるPDT画像P04が表示されていたが、時刻T03のフレームでは表示画像がPDT画像P08に更新される。   Further, when the PDT image P08 is captured in the frame at time T03, the oldest PDT image P03 is discarded from the VRAM 28, and the PDT image P08 is newly stored in the VRAM 28. Assuming that the PDT image P08 taken in the frame at time T03 is an image without halation, the VRAM 28 stores two images without halation, the PDT image P04 and the PDT image P08 at the same time. At this time, the CPU 41 inputs an image selection signal to the display control circuit 44 so as to select the newest image among the non-halation images among the PDT images stored in the VRAM 28. Therefore, the display control circuit 44 causes the monitor 22 to display the PDT image P08 that is the latest non-halation image among the two non-halation images of the PDT image P04 and the PDT image P08. Therefore, although the PDT image P04 that is a non-halation image is displayed following the times T01 and T02, the display image is updated to the PDT image P08 in the frame at the time T03.

続く時刻T04のフレームでPDT画像P09が撮影されると、VRAM28から最も古いPDT画像P04が破棄され、PDT画像P09が新たにVRAM28に記憶される。したがって、PDT画像P09がハレーション有り画像であるとすると、時刻T04では、前フレームで撮影されたPDT画像P08がモニタ22に表示される。   When the PDT image P09 is captured in the subsequent frame at time T04, the oldest PDT image P04 is discarded from the VRAM 28, and the PDT image P09 is newly stored in the VRAM 28. Therefore, if the PDT image P09 is an image with halation, the PDT image P08 captured in the previous frame is displayed on the monitor 22 at time T04.

図8に示すように、時刻T21のフレームでPDT画像P25が撮影されると、時刻T21前の4フレーム分のPDT画像P21〜P24とともに、PDT画像P25がVRAM28に記憶される。PDT画像P21はハレーション無し画像であるとし、PDT画像P22〜P25はハレーション有り画像であるとする。この場合、時刻T21のフレームでは、ハレーション無し画像であるPDT画像P21がモニタ22に表示されるので、少なくとも時刻T21においては術者はハレーション無し画像を観察可能である。   As shown in FIG. 8, when the PDT image P25 is captured in the frame at time T21, the PDT image P25 is stored in the VRAM 28 together with the PDT images P21 to P24 for four frames before time T21. Assume that the PDT image P21 is an image without halation, and the PDT images P22 to P25 are images with halation. In this case, in the frame at time T21, the PDT image P21 that is an image without halation is displayed on the monitor 22, so that the surgeon can observe the image without halation at least at time T21.

しかし、時刻T21の次のフレームでハレーション有り画像が撮影されると、時刻T21の時点でVRAM28に記憶された唯一のハレーション無し画像であるPDT画像P21はVRAM28から破棄され、新たに撮影したハレーション有り画像がVRAM28に記憶されることになる。この場合、VRAM28にはハレーション無し画像が1枚も記憶されていないので、ハレーション有り画像を表示画像として用いなければならなくなる。   However, when an image with halation is captured in the next frame after time T21, the PDT image P21, which is the only non-halation image stored in the VRAM 28 at time T21, is discarded from the VRAM 28, and there is a newly captured halation. The image is stored in the VRAM 28. In this case, since no image with no halation is stored in the VRAM 28, an image with halation must be used as a display image.

このため、CPU41は、ハレーションを検出したことを示す判別信号がハレーション検出部55から連続して入力された回数を計数する。そして、時刻T21のように、4連続でハレーション無し画像が撮影された場合、CPU41は光源装置14のCPU66に中断信号を入力し、次のフレームは治療光の照射を中断させる(ステップS21)。   For this reason, the CPU 41 counts the number of times that a determination signal indicating that halation has been detected is continuously input from the halation detection unit 55. And when the image without a halation is image | photographed 4 times continuously like time T21, CPU41 inputs an interruption signal into CPU66 of the light source device 14, and the irradiation of treatment light is interrupted at the next frame (step S21).

これにより、時刻T21の次の時刻T22のフレームでは、治療光の照射しない状態で通常光の照明のもとPDT画像P26が撮影される。PDT画像P2は、治療光が照射されないのでハレーションは生じず、通常光画像と同様のハレーション無し画像となる。PDT画像P26がVRAM28に記憶されると、VRAM28に記憶されたPDT画像P22〜P26のなかで、ハレーション無し画像であるPDT画像P26がモニタ22に表示される。   Thereby, in the frame of time T22 following time T21, PDT image P26 is image | photographed on the illumination of normal light in the state which is not irradiated with treatment light. Since the PDT image P2 is not irradiated with treatment light, no halation occurs, and the PDT image P2 is an image without halation similar to the normal light image. When the PDT image P26 is stored in the VRAM 28, among the PDT images P22 to P26 stored in the VRAM 28, the PDT image P26 that is an image without halation is displayed on the monitor 22.

電子内視鏡システム11は、上述のように4連続でハレーション有り画像が撮影された段階で、次のフレームにおいて治療光の照射を中断し、強制的にハレーション無し画像を撮影するので、VRAM28に記憶されるPDT画像が全てハレーション有り画像となってしまうことはなく、常にハレーション無し画像をモニタ22に表示させる。   Since the electronic endoscope system 11 interrupts the irradiation of the treatment light in the next frame and forcibly shoots the image without the halation at the stage where the images with the halation are continuously captured as described above, the image without the halation is captured in the VRAM 28. The stored PDT image does not become an image with halation, and an image without halation is always displayed on the monitor 22.

図9(A)に示すように、電子内視鏡システム11は、PDTによる治療を行うときに、全てのフレームで腫瘍組織に治療光を照射しながら被検体内に通常光を照射してPDT画像を撮影する。そして、これらのPDT画像を5フレーム分、VRAM28に記憶しておき、VRAM28に記憶されたPDT画像の中から、最も新しいハレーション無し画像をモニタ22に表示する。したがって、電子内視鏡システム11によれば、PDTによる治療を行っている間、見かけ上、ハレーションの発生を防止して、PDT中の被検体内の通常光観察を可能とする。   As shown in FIG. 9A, the electronic endoscope system 11 irradiates the subject with normal light while irradiating the treatment light to the tumor tissue in all frames when performing the treatment by PDT. Take a picture. These PDT images are stored in the VRAM 28 for five frames, and the newest halation-free image among the PDT images stored in the VRAM 28 is displayed on the monitor 22. Therefore, according to the electronic endoscope system 11, during the treatment with PDT, the occurrence of halation is apparently prevented, and normal light observation within the subject in the PDT becomes possible.

一方、撮影画像の全てを撮影された順に全てモニタ22に表示する比較例の場合、図9(B)に示すように、ハレーションを防止するためには、治療光を照射して腫瘍組織の治療を行うフレームと、治療光を照射せずに通常光撮影を行うフレームとに分けて、治療とハレーションが生じない撮影を交互に繰り返すことになる。   On the other hand, in the comparative example in which all of the captured images are displayed on the monitor 22 in the order in which they were captured, as shown in FIG. And a frame for performing normal light imaging without irradiating treatment light, and imaging without treatment and halation are alternately repeated.

図9(A)と図9(B)を比較すると、電子内視鏡システム11では、PDTによる治療中の全フレームで治療光を照射するのに対し、比較例では、1フレームおきにしか治療光を照射することができない。したがって、電子内視鏡システム11と比較例はともにハレーション有り画像がモニタ22に表示されることを防止するが、電子内視鏡システム11は、単位時間あたり比較例の2倍の治療光を照射することができるので、治療時間は半分に抑えられる。   Comparing FIG. 9A and FIG. 9B, the electronic endoscope system 11 irradiates treatment light in all frames during treatment by PDT, whereas in the comparative example, treatment is performed every other frame. Cannot irradiate light. Therefore, both the electronic endoscope system 11 and the comparative example prevent the image with halation from being displayed on the monitor 22, but the electronic endoscope system 11 irradiates twice as much therapeutic light as the comparative example per unit time. Treatment time is reduced by half.

また、電子内視鏡システム11は、4連続でハレーション有り画像が撮影された場合に、次の1フレームで治療光の照射を中断させ、ハレーション無し画像を強制的に撮影することによって、常にモニタ22上にハレーション無し画像が表示されることを保障する。このため、ハレーション有り画像ばかりが撮影されてしまう場合、電子内視鏡システム11では、ハレーション有り画像が最も撮影されにくいケースで、5フレームに1回、治療光が照射されないフレームがある。この場合であっても、電子内視鏡システム11は、単位時間あたりに比較例の8/5倍の治療光を照射することができ、治療時間は5/8に抑えることができる。PDTによる治療は概ね10分程度と長時間に及ぶため、治療時間を半分程度に抑えることによって、被検者への負荷は大きく低減される。   In addition, the electronic endoscope system 11 always monitors the image by suspending treatment light irradiation in the next one frame and forcibly taking the image without halation when images with halation are taken for 4 consecutive times. It is ensured that an image without halation is displayed on 22. For this reason, in the case where only images with halation are captured, in the electronic endoscope system 11, there is a frame in which treatment light is not irradiated once every 5 frames in a case where an image with halation is most difficult to be captured. Even in this case, the electronic endoscope system 11 can irradiate treatment light 8/5 times that of the comparative example per unit time, and the treatment time can be suppressed to 5/8. Since the treatment with PDT takes about 10 minutes and takes a long time, the burden on the subject is greatly reduced by reducing the treatment time to about half.

なお、上述の第1実施形態では、PDTによる治療を行う際に、PDT画像を撮影する例を説明したが、ハレーションが生じていないPDT画像は通常光画像とほぼ同様であり、腫瘍組織を蛍光観察することはできない。このため、PDTによる治療中には、PDD観察が行えることが好ましい。但し、励起光を照射することによって光感受性物質(腫瘍組織)から発生する蛍光光の波長と、治療光の波長は近く、治療光は蛍光光よりも極めて大きいので、PDTとPDDを同時に行うことができない。したがって、PDT画像の撮影とPDD画像の撮影を両立するためには、例えば、図10に示すように、PDT画像を撮影するフレームと、通常光及び治療光をオフにし、励起光を照射してPDD画像を撮影するフレームとを交互に行えば良い。こうしてPDT画像の撮影とPDD画像の撮影を交互に行う場合であっても、通常光撮影、PDT画像の撮影、PDD画像の撮影をそれぞれ別個のフレームに分けて順に行う場合よりも、治療時間を抑えることができる。PDT画像の撮影とPDD画像の撮影を両立させるときには、PDT画像とPDD画像をモニタ22上に並べて表示することが好ましい。   In the first embodiment described above, an example in which a PDT image is taken when performing treatment with PDT has been described. However, a PDT image without halation is substantially the same as a normal light image, and a tumor tissue is fluorescent. Cannot be observed. For this reason, it is preferable that PDD observation can be performed during treatment with PDT. However, the wavelength of the fluorescent light generated from the photosensitive substance (tumor tissue) by irradiating the excitation light is close to the wavelength of the therapeutic light, and the therapeutic light is much larger than the fluorescent light, so PDT and PDD should be performed simultaneously. I can't. Therefore, in order to achieve both PDT image capturing and PDD image capturing, for example, as shown in FIG. 10, the frame for capturing the PDT image, the normal light and the treatment light are turned off, and the excitation light is irradiated. What is necessary is just to perform alternately with the frame which image | photographs a PDD image. Thus, even when PDT image shooting and PDD image shooting are performed alternately, treatment time is longer than when normal light shooting, PDT image shooting, and PDD image shooting are performed separately in separate frames. Can be suppressed. In order to achieve both PDT image shooting and PDD image shooting, the PDT image and the PDD image are preferably displayed side by side on the monitor 22.

また、第1実施形態で説明したとおり、VRAM28はハレーション有り画像がモニタ22に表示されることを防止するために複数フレーム分のPDT画像を保持しなければならないが、これとPDD画像の撮影を両立させるためには、例えば、VRAM28を6フレーム分の記憶容量とする等、VRAM28に1フレーム分の予備領域を確保し、この予備領域を介してPDD画像をモニタ22に表示させれば良い。PDD画像を保持するフレームメモリを設け、これを予備領域としても良い。   Further, as described in the first embodiment, the VRAM 28 has to hold a plurality of frames of PDT images in order to prevent the images with halation from being displayed on the monitor 22. In order to achieve compatibility, for example, a spare area for one frame is secured in the VRAM 28 such that the VRAM 28 has a storage capacity for six frames, and a PDD image is displayed on the monitor 22 through this spare area. A frame memory for holding a PDD image may be provided and used as a spare area.

なお、上述の第1実施形態では、治療光の照射を中断して強制的にハレーション無し画像を撮影する例を説明したが、治療光の照射を中断して強制的にハレーション無し画像を撮影したフレーム後の4フレームは、強制的に取得したハレーション無し画像が必ずVRAM28に記憶されているので、これらの4フレームのうちいずれかで、光源71の出力を増大させる等して治療光の光量を通常の治療光の光量よりも増大させることが好ましい。このように、強制的にハレーション無し画像を撮影したフレームにおいて、治療光の光量を増大させると、治療光の照射が中断されても短い治療時間を維持することができる。   In the first embodiment described above, an example in which the treatment light irradiation is interrupted to forcibly shoot a no-halation image has been described. However, the treatment light irradiation is interrupted to forcibly shoot a no-halation image. For the four frames after the frame, the forcibly acquired non-halation image is always stored in the VRAM 28. Therefore, in one of these four frames, the amount of the treatment light is increased by increasing the output of the light source 71 or the like. It is preferable to increase the amount of normal treatment light. As described above, when the amount of the treatment light is increased in the frame in which the image without the halation is forcibly taken, a short treatment time can be maintained even if the irradiation of the treatment light is interrupted.

なお、上述の第1実施形態では、常にハレーション無し画像がモニタ22に表示されるので、治療光が出射されているか否か、治療光が腫瘍組織に正しく照射されているか否か等、治療光自体を観察することが難しく、PDT画像に写し出される腫瘍組織の変化から推測する必要がある。このため、以下、第2実施形態として説明する電子内視鏡システム121のように、治療光の照射位置等、治療光の情報を表示することが好ましい。   In the first embodiment described above, since an image without halation is always displayed on the monitor 22, whether or not the treatment light is emitted, whether or not the treatment light is correctly applied to the tumor tissue, etc. It is difficult to observe itself, and it is necessary to infer from the change in the tumor tissue displayed on the PDT image. For this reason, it is preferable to display information on treatment light such as the irradiation position of treatment light, as in the electronic endoscope system 121 described below as the second embodiment.

[第2実施形態]
図11に示すように、電子内視鏡システム121は、DIP43にハレーション検出部122を有する。ハレーション検出部122は、観察画像のハレーションを検出する点は第1実施形態のハレーション検出部55と同様である。但し、ハレーション検出部122は、観察画像のハレーションを検出するときに、画素値が所定の閾値よりも大きい画素群の輪郭等の特徴データを抽出する。ハレーション検出部122が抽出した輪郭等の特徴データは、表示制御回路123に入力される。また、ハレーション検出部122は、観察画像にハレーションが検出されなかった場合には、以前の観察画像から抽出した特徴データのなかで最新のものを表示制御回路123に入力する。表示制御回路123は、CPU41から入力される画像選択信号に基づいて、VRAM28に記憶されたPDT画像の中から最新のハレーション無し画像を取得し、モニタ22に表示する。このとき、表示制御回路123は、ハレーション検出部122から入力される特徴データをハレーション無し画像に重畳してモニタ22に表示する。
[Second Embodiment]
As shown in FIG. 11, the electronic endoscope system 121 includes a halation detection unit 122 in the DIP 43. The halation detection unit 122 is similar to the halation detection unit 55 of the first embodiment in that it detects the halation of the observation image. However, when detecting the halation of the observation image, the halation detection unit 122 extracts feature data such as a contour of a pixel group having a pixel value larger than a predetermined threshold. The feature data such as the contour extracted by the halation detection unit 122 is input to the display control circuit 123. In addition, the halation detection unit 122 inputs the latest feature data extracted from the previous observation image to the display control circuit 123 when no halation is detected in the observation image. The display control circuit 123 acquires the latest non-halation image from the PDT images stored in the VRAM 28 based on the image selection signal input from the CPU 41 and displays it on the monitor 22. At this time, the display control circuit 123 superimposes the feature data input from the halation detection unit 122 on the image without halation and displays it on the monitor 22.

例えば、図12(A)に示すように、ハレーションがあるPDT画像131が撮影された場合、ハレーション検出部122は、図12(B)に示すように、ハレーションの有無を検出するために用いる所定の閾値よりも画素値が大きい画素群をハレーション132として検出するとともに、その輪郭133を抽出する。表示制御回路123は、CPU41からの画像選択信号に基づいてハレーションが生じていない最新のPDT画像をVRAM28から取得すると、ハレーション検出部122から特徴データとして入力される輪郭133を重畳した輪郭合成画像134をモニタ22に表示する。輪郭合成画像134は、治療プローブ73の先端や腫瘍組織を観察可能であるとともに、ハレーション132の輪郭133が表示されていることによって、治療光の照射位置や範囲を推察しやすくなっている。   For example, as illustrated in FIG. 12A, when a PDT image 131 with halation is captured, the halation detection unit 122 is used for detecting the presence or absence of halation as illustrated in FIG. A pixel group having a pixel value larger than the threshold value is detected as halation 132, and its contour 133 is extracted. When the display control circuit 123 acquires from the VRAM 28 the latest PDT image in which halation has not occurred based on the image selection signal from the CPU 41, the contour composite image 134 in which the contour 133 input as feature data from the halation detection unit 122 is superimposed. Is displayed on the monitor 22. The contour composite image 134 can observe the tip of the treatment probe 73 and the tumor tissue, and the contour 133 of the halation 132 is displayed, so that it is easy to guess the irradiation position and range of the treatment light.

また、PDT画像131から抽出する特徴データは、図12(C)に示すように、治療光の照射スポット135の輪郭を抽出しても良い。照射スポット135の輪郭の抽出は、例えば、ハレーションの検出に用いる所定の閾値よりも大きい照射スポット抽出用の第2の閾値を用意しておき、ハレーション検出部122がハレーション132を検出する際に、第2の閾値を超える画素値を持つ画素群を同時に検出し、その輪郭を抽出することによって行う。   Further, the feature data extracted from the PDT image 131 may extract the contour of the treatment light irradiation spot 135 as shown in FIG. For the extraction of the outline of the irradiation spot 135, for example, a second threshold for extraction of an irradiation spot that is larger than a predetermined threshold used for detecting halation is prepared, and when the halation detecting unit 122 detects the halation 132, This is performed by simultaneously detecting a pixel group having a pixel value exceeding the second threshold and extracting the contour.

そして、図12(D)に示すように、表示制御回路123は、VRAM28から取得したハレーション無し画像に、抽出した照射スポット135の輪郭を重畳した照射スポット合成画像136をモニタ22に表示する。照射スポット合成画像136によれば、ハレーション132の輪郭133を重畳する場合よりも、治療光の照射位置や照射範囲をより明確に把握することができる。   Then, as shown in FIG. 12D, the display control circuit 123 displays on the monitor 22 an irradiation spot composite image 136 in which the contour of the extracted irradiation spot 135 is superimposed on the non-halation image acquired from the VRAM 28. According to the irradiation spot composite image 136, the irradiation position and irradiation range of the treatment light can be grasped more clearly than when the contour 133 of the halation 132 is superimposed.

上述の電子内視鏡システム121のように、PDT時にモニタ22に表示するハレーション無し画像にハレーション132の輪郭133や治療光の照射スポット135を重畳表示することで、治療プローブ73から治療光が出射されているか否か、腫瘍組織に治療光が正確に当たっているか否か、治療光の照射範囲に腫瘍組織の全体が収まっているか否か等、ハレーション無し画像からは直接的には把握することが難しい、治療光そのものに付随した情報を容易に確認することができるようになる。   Treatment light is emitted from the treatment probe 73 by superimposing and displaying the outline 133 of the halation 132 and the irradiation spot 135 of the treatment light on the non-halation image displayed on the monitor 22 during PDT, as in the above-described electronic endoscope system 121. It is difficult to know directly from images without halation, such as whether or not it is applied, whether or not the treatment light is accurately applied to the tumor tissue, and whether or not the entire tumor tissue is within the irradiation range of the treatment light The information accompanying the treatment light itself can be easily confirmed.

なお、ここでは、撮影したPDT画像131からハレーション132の輪郭133や照射スポット135の輪郭を特徴データとして抽出し、これをモニタ22に表示する画像に重畳する例を説明したがこれに限らない。例えば、図13に示すように、VRAM28から表示制御回路123が取得したPDT画像141に、最新のPDT画像142の全体を一定の比率で混合した混合画像143を生成し、これをモニタ22に表示させても良い。この場合にも、モニタ22に表示される混合画像143から、被検体内や腫瘍組織と、治療光そのものに付随した情報を同時に把握することができる。   Although an example in which the contour 133 of the halation 132 and the contour of the irradiation spot 135 are extracted as feature data from the captured PDT image 131 and superimposed on the image displayed on the monitor 22 has been described here, the present invention is not limited thereto. For example, as shown in FIG. 13, a mixed image 143 is generated by mixing the latest PDT image 142 at a certain ratio with the PDT image 141 acquired by the display control circuit 123 from the VRAM 28 and displayed on the monitor 22. You may let them. Also in this case, from the mixed image 143 displayed on the monitor 22, it is possible to simultaneously grasp the information in the subject, the tumor tissue, and the treatment light itself.

混合画像143は、例えば、PDT画像141の全画素値を90%にし、PDT画像142の全画素値を10%にして、各々対応する画素の画素値を加算した値を各画素の画素値とした画像である。混合画像42の生成は、ハレーション検出部122から表示制御回路123に最新のPDT画像142を入力させ、表示制御回路123で行うようにしても良いし、混合画像142を生成する回路をDIP43等に別途設けても良い。また、混合画像142は、最新のPDT画像142の全体ではなく、画像中央の一部分等、治療光の照射スポットの全体を含むPDT画像142の一部分を、VRAM28から表示制御回路123が取得したPDT画像141に混合させて生成しても良い。   In the mixed image 143, for example, the total pixel value of the PDT image 141 is set to 90%, the total pixel value of the PDT image 142 is set to 10%, and the pixel value of each corresponding pixel is added as the pixel value of each pixel. It is an image. The generation of the mixed image 42 may be performed by causing the display control circuit 123 to input the latest PDT image 142 from the halation detection unit 122 and the display control circuit 123 to generate the mixed image 142. It may be provided separately. In addition, the mixed image 142 is not the entire latest PDT image 142 but a PDT image obtained by the display control circuit 123 acquiring a part of the PDT image 142 including the entire treatment light irradiation spot such as a part of the center of the image from the VRAM 28. 141 may be mixed and generated.

なお、上述の第2実施形態では、PDT画像にハレーションの輪郭や治療光の照射スポットを重畳する例を説明したが、比較例(図9(B))のように、いわゆる通常光画像を撮影する場合には、通常光画像にハレーションの輪郭や治療光の照射スポットを重畳して表示しても良い。また、PDTによる治療中にPDD画像を撮影する場合(図10参照)には、PDD画像にハレーションの輪郭や治療光の照射スポットを重畳させても良い。   In the second embodiment described above, an example of superimposing a halation outline and a treatment light irradiation spot on a PDT image has been described. However, as in a comparative example (FIG. 9B), a so-called normal light image is captured. In this case, the outline of halation and the irradiation spot of treatment light may be superimposed on the normal light image. Further, when a PDD image is taken during treatment by PDT (see FIG. 10), the outline of halation or the irradiation spot of treatment light may be superimposed on the PDD image.

なお、上述の第1実施形態では、PDD画像を確認して腫瘍組織の位置や大きさ,形状等を把握する。また、第2実施形態では、ハレーションや照射スポットの輪郭をPDT画像に重畳することで治療光の照射位置や照射範囲を報知する例を説明した。しかし、腫瘍組織に治療光が効率良く照射されるか否かは術者の手技によって決まるので、術者の技量によっては、治療光の照射不足が生じたり、治療光の照射不足を防ぐために過剰に治療光を照射しておく必要がある。このため、PDTを行う電子内視鏡システムでは、腫瘍組織に効率良く治療光が照射されているか否かを客観的に判断できるように表示し、術者をサポートできることが好ましい。この例を以下に第3実施形態として説明する。   In the above-described first embodiment, the PDD image is confirmed to grasp the position, size, shape, etc. of the tumor tissue. Moreover, in 2nd Embodiment, the example which alert | reports the irradiation position and irradiation range of treatment light was demonstrated by superimposing the outline of a halation and an irradiation spot on a PDT image. However, since whether or not the treatment light is efficiently irradiated to the tumor tissue is determined by the operator's technique, depending on the operator's skill, the treatment light may be insufficiently irradiated or excessive to prevent the treatment light from being insufficiently irradiated. It is necessary to irradiate treatment light. For this reason, in an electronic endoscope system that performs PDT, it is preferable to display so that it can be objectively determined whether or not the treatment light is efficiently applied to the tumor tissue, thereby supporting the operator. This example will be described below as a third embodiment.

[第3実施形態]
図14に示すように、電子内視鏡システム301は、第1実施形態の電子内視鏡システム11と同様に、PDT中にハレーション有り画像が撮影された場合に、モニタ22への表示画像をハレーション無し画像に差し替えて表示する電子内視鏡システムであるが、照射光量推定部303と表示制御回路304を備え、動作モードとしてPDT準備モードを備える点が電子内視鏡システム11と異なる。
[Third Embodiment]
As shown in FIG. 14, the electronic endoscope system 301 displays a display image on the monitor 22 when an image with halation is captured during PDT, as with the electronic endoscope system 11 of the first embodiment. The electronic endoscope system displays an image that is replaced with a halation-free image, but is different from the electronic endoscope system 11 in that it includes an irradiation light amount estimation unit 303 and a display control circuit 304 and includes a PDT preparation mode as an operation mode.

PDT準備モードは、PDTによる治療の開始に先立って、腫瘍組織に対する先端部20及び治療プローブ73の位置や向きを調節するための動作モードであり、操作部51からの入力により開始される。PDT準備モードが開始されると、CPU41は、CPU66にPDT準備モード開始信号を入力する。CPU66は、PDT準備モード開始信号が入力されると、絞り機構72を制御して、ハレーションが生じない程度に低光量の治療光を被検体内に照射させる。この低光量治療光の反射光によって、PDT準備モード下で撮影される通常光画像に、現在の先端部20及び治療プローブ73の位置や向きに応じた治療光の照射スポットが表示される。また、PDT準備モードでは、関心領域(以下、ROIという)を指定する。ROIは、PDD画像によって把握された腫瘍組織を含むように、例えば長方形の範囲で指定される。   The PDT preparation mode is an operation mode for adjusting the positions and orientations of the distal end portion 20 and the treatment probe 73 with respect to the tumor tissue prior to the start of treatment by PDT, and is started by input from the operation unit 51. When the PDT preparation mode is started, the CPU 41 inputs a PDT preparation mode start signal to the CPU 66. When the PDT preparation mode start signal is input, the CPU 66 controls the diaphragm mechanism 72 to irradiate the subject with a low amount of treatment light to the extent that halation does not occur. The reflected light of the low-light treatment light causes the treatment light irradiation spot corresponding to the current position and orientation of the distal end portion 20 and the treatment probe 73 to be displayed on the normal light image taken in the PDT preparation mode. In the PDT preparation mode, a region of interest (hereinafter referred to as ROI) is designated. The ROI is specified in a rectangular range, for example, so as to include the tumor tissue grasped by the PDD image.

照射光量推定部303は、PDT準備モード下で動作する。照射光量推定部30は、指定されたROIの中央の画素座標を算出し、これを通る横方向(x方向)及び縦方向(y方向)の2方向に沿って、撮影された通常光画像の赤色画素の画素値を抽出する。照射光量推定部30は、抽出した赤色画素の画素値のデータ列を、治療光の推定照射光量として、表示制御回路304に入力する。表示制御回路304は、照射光量推定部303から入力された治療光の推定照射光量をヒストグラム化して、通常光画像とともに並べてモニタ22に表示させる。また、表示制御回路304は、指定されたROI内の画素についての柱を着色して表示する。   The irradiation light amount estimation unit 303 operates under the PDT preparation mode. The irradiation light amount estimation unit 30 calculates the pixel coordinates at the center of the designated ROI, and the normal light image captured along the two directions of the horizontal direction (x direction) and the vertical direction (y direction) passing therethrough is calculated. The pixel value of the red pixel is extracted. The irradiation light amount estimation unit 30 inputs the extracted pixel value data string of the red pixels to the display control circuit 304 as the estimated irradiation light amount of the treatment light. The display control circuit 304 converts the estimated irradiation light amount of the treatment light input from the irradiation light amount estimation unit 303 into a histogram, displays the histogram together with the normal light image, and displays it on the monitor 22. Further, the display control circuit 304 colors and displays the columns for the pixels in the designated ROI.

図15に示すように、電子内視鏡システム301をPDT準備モードで動作させ、操作部51を用いてROI313を指定すると、モニタ22には、通常光画像310とともに、ヒストグラム311、ヒストグラム312が表示される。ヒストグラム311は、ROI313の中心を通る通常光画像310の横方向についての治療光の推定照射光量であり、ヒストグラム312は、ROI313の中心を通る通徐行画像310の縦方向についての治療光の推定照射光量である。また、通常光画像310には低光量の治療光が当たっている位置が照射スポット314として識別できる。術者は、ヒストグラム311,312のピーク位置やピークの値、照射スポット314の位置を観察しながら、腫瘍組織に対する治療光の照射位置や向き、治療光の照射範囲等を調節する。   As shown in FIG. 15, when the electronic endoscope system 301 is operated in the PDT preparation mode and the ROI 313 is specified using the operation unit 51, the histogram 311 and the histogram 312 are displayed on the monitor 22 together with the normal light image 310. Is done. A histogram 311 is an estimated irradiation amount of the treatment light in the lateral direction of the normal light image 310 passing through the center of the ROI 313, and a histogram 312 is an estimated irradiation of the treatment light in the longitudinal direction of the slow-moving image 310 passing through the center of the ROI 313. The amount of light. In addition, the position where the low-intensity treatment light hits the normal light image 310 can be identified as the irradiation spot 314. The surgeon adjusts the irradiation position and direction of the treatment light on the tumor tissue, the irradiation range of the treatment light, and the like while observing the peak positions and peak values of the histograms 311 and 312 and the position of the irradiation spot 314.

例えば、図16(A)に示すように、先端部20が寝ている状態(被検体内壁321に対して平行に近い状態)の場合、照射スポット314内に腫瘍組織322が収まっていても、低光量治療光323の反射光はCCD21に入射しにくいので、ヒストグラム311,312は全体的に低い値を示す。これは、治療光の照射効率が悪いことを示す。また、先端部20に対して垂直に近い手前の腫瘍組織322の隆起の手前側(先端部20に近い側)からの反射光が多く、腫瘍組織322の隆起の奥側(先端部20から遠い側)からの反射光は少ないので、ヒストグラム311,312のピーク位置はROI313の中心位置からずれる。こうしたことを観察しながら、図16(B)に示すように、術者が操作部17のアングルノブを操作して先端部20の向きを、被検体内壁312に垂直に近い向きに変更すると、腫瘍組織322からの低光量治療光323の反射光量が大きくなり、ヒストグラム311,312は全体的に高い値を示すようになる。ヒストグラム311,312が全体として高い値を示すようになることは、腫瘍組織322に効率良く治療光が照射されることを示す。また、治療光の照射範囲は、照射スポット314の位置を観察しながら、挿入部16や治療プローブ73を進退する方向に移動することによって調節される。なお、実際には、被検体内壁321は動くので、被検体内壁312の動きがあっても、できるだけヒストグラム311,312が高い値を示し、ピーク位置がROI313の中央に位置するように先端部20及び治療プローブ73の位置や向きが調節される。   For example, as shown in FIG. 16A, when the distal end portion 20 is in a sleeping state (a state parallel to the subject inner wall 321), even if the tumor tissue 322 is within the irradiation spot 314, Since the reflected light of the low-light treatment light 323 is difficult to enter the CCD 21, the histograms 311 and 312 show a low value as a whole. This indicates that the irradiation efficiency of the treatment light is poor. In addition, there is a lot of reflected light from the front side of the protuberance of the tumor tissue 322 in the near side perpendicular to the distal end portion 20 (side closer to the distal end portion 20), and the far side of the protuberance of the tumor tissue 322 (far from the distal end portion 20) The peak positions of the histograms 311 and 312 are shifted from the center position of the ROI 313. While observing this, as shown in FIG. 16B, when the operator operates the angle knob of the operation unit 17 to change the direction of the distal end 20 to a direction close to the subject inner wall 312, The amount of reflected light of the low-light treatment light 323 from the tumor tissue 322 becomes large, and the histograms 311 and 312 show a high value as a whole. The fact that the histograms 311 and 312 show a high value as a whole indicates that the treatment light is efficiently applied to the tumor tissue 322. Further, the irradiation range of the treatment light is adjusted by moving the insertion portion 16 and the treatment probe 73 in the advancing / retreating direction while observing the position of the irradiation spot 314. Actually, since the subject inner wall 321 moves, even if the subject inner wall 312 moves, the histograms 311 and 312 show as high values as possible, and the distal end portion 20 so that the peak position is located at the center of the ROI 313. And the position and direction of the treatment probe 73 are adjusted.

電子内視鏡システム301は、PDT準備モードにおいて、腫瘍組織への治療光照射効率をヒストグラム311,312として客観的に判断できるように表示する。このため、治療光が効率良く腫瘍組織に照射されるように先端部20や治療プローブ73の位置や向きを容易に調節することができる。これにより、PDTによる治療をより効率良く行うことができる。また、治療光の照射不足も起こりにくい。   In the PDT preparation mode, the electronic endoscope system 301 displays the treatment light irradiation efficiency on the tumor tissue as histograms 311 and 312 so that it can be objectively determined. For this reason, the position and orientation of the distal end portion 20 and the treatment probe 73 can be easily adjusted so that the treatment light is efficiently irradiated onto the tumor tissue. Thereby, the treatment by PDT can be performed more efficiently. Also, insufficient treatment light irradiation is unlikely to occur.

なお、上述の第3実施形態では、PDT準備モードにおいて術者がPDD画像で確認した腫瘍組織の位置や大きさ等に基づいてROI313を指定する例を説明したが、これに限らない。例えば、PDD画像を撮影したときに、PDD画像から腫瘍組織322の位置や大きさ、形状等を表す特徴点を抽出し、抽出した特徴点に基づいて、腫瘍組織322を囲むように通常光画像310にROI313を自動的に設定するようにしても良い。この場合、PDD画像からの腫瘍組織の特徴量の抽出は、専用の回路等を設けても良いし、DIP43やDSP42を特徴点抽出手段として機能させても良い。また、このようにROI313を自動設定する場合、被検体内壁321の動きや、先端部20の移動等に応じて、ROI313の位置を追従させることが好ましい。   In the third embodiment described above, the example in which the ROI 313 is specified based on the position and size of the tumor tissue confirmed by the surgeon with the PDD image in the PDT preparation mode has been described. However, the present invention is not limited to this. For example, when a PDD image is captured, feature points representing the position, size, shape, and the like of the tumor tissue 322 are extracted from the PDD image, and the normal light image is surrounded so as to surround the tumor tissue 322 based on the extracted feature points. The ROI 313 may be automatically set in 310. In this case, the extraction of the feature amount of the tumor tissue from the PDD image may be provided with a dedicated circuit or the like, or the DIP 43 or the DSP 42 may function as a feature point extraction unit. When the ROI 313 is automatically set as described above, it is preferable to follow the position of the ROI 313 according to the movement of the subject inner wall 321, the movement of the distal end portion 20, and the like.

なお、上述の第3実施形態では、治療光が赤色であることに応じて赤色画素の画素値を抽出することによりヒストグラム311,312を表示するが、他の色の治療光が必要な光感受性物質を用いる場合には、対応する色の画素値を抽出したり、複数の色の画素値の和を算出して、照射光量を示すヒストグラムを生成すれば良い。   In the above-described third embodiment, the histograms 311 and 312 are displayed by extracting the pixel value of the red pixel in response to the treatment light being red. However, light sensitivity that requires treatment light of other colors is displayed. In the case of using a substance, a pixel value of a corresponding color may be extracted or a sum of pixel values of a plurality of colors may be calculated to generate a histogram indicating the amount of irradiation light.

なお、上述の第3実施形態では、PDT時にハレーション有り画像が撮影されたときに過去に撮影されたハレーション無し画像を表示すること(第1実施形態)を前提に説明したが、比較例(図9(B))のように、PDTと通常光撮影を交互に行う場合にもPDT準備モードを設けることによってPDTによる治療効率を向上させることができる。   In the above-described third embodiment, the description has been made on the assumption that an image without halation captured in the past when an image with halation was captured during PDT (first embodiment), but a comparative example (FIG. 9 (B)), when PDT and normal light imaging are alternately performed, the treatment efficiency by PDT can be improved by providing the PDT preparation mode.

なお、上述の第3実施形態では、PDTによる治療の前にPDT準備モードを行うことでPDTによる治療効率を向上させる例を説明したが、PDTによる治療中に、その治療効果を確認したいという要望もある。このため、PDTを行うことができる電子内視鏡システムでは、PDTによる治療の最中に、その治療効果を客観的に示すことができると好ましい。以下、PDT時に、その治療効果を示す例を実施形態4として説明する。   In the above-described third embodiment, an example of improving the treatment efficiency by PDT by performing the PDT preparation mode before the treatment by PDT has been described. However, a request to confirm the treatment effect during the treatment by PDT. There is also. For this reason, in an electronic endoscope system capable of performing PDT, it is preferable that the therapeutic effect can be objectively shown during treatment with PDT. Hereinafter, an example showing the therapeutic effect during PDT will be described as a fourth embodiment.

[第4実施形態]
図17に示すように、電子内視鏡システム401は、PDT中にハレーション有り画像が撮影された場合に、モニタ22への表示画像をハレーション無し画像に差し替えて表示する電子内視鏡システムであるとともに、上述の第3実施形態の電子内視鏡システム301と同様に、PDT準備モードにおいてROIの治療光の推定照射光量を推定する機能する照射光量推定部403と、表示制御回路404を備える。但し、電子内視鏡システム401の照射光量推定部403は、PDT準備モード中だけでなく、PDTによる治療を行っている間においても動作し、順次撮影されるPDT画像を用いて治療光の総照射光量を算出する。照射光量推定部403は、順次撮影されるPDT画像について、同位置の画素の画素値を順次加算することにより、画素毎に累積画素値を算出する。通常、通常光と比較して治療光の光量は極めて大きいので、各画素の累積画素値は、概ね治療光の総照射光量を表す。このため、以下、照射光量推定部403が算出する累積画素値を、治療光の総照射光量という。
[Fourth Embodiment]
As shown in FIG. 17, the electronic endoscope system 401 is an electronic endoscope system that replaces the display image on the monitor 22 with an image without halation when an image with halation is captured during PDT. In addition, similarly to the electronic endoscope system 301 of the third embodiment described above, an irradiation light amount estimation unit 403 that functions to estimate the estimated irradiation light amount of the ROI treatment light in the PDT preparation mode and a display control circuit 404 are provided. However, the irradiation light amount estimation unit 403 of the electronic endoscope system 401 operates not only in the PDT preparation mode but also during the treatment by PDT, and uses the PDT images that are sequentially photographed, The amount of irradiation light is calculated. The irradiation light amount estimation unit 403 calculates the cumulative pixel value for each pixel by sequentially adding the pixel values of the pixels at the same position in the sequentially captured PDT images. Usually, since the amount of treatment light is extremely large compared to normal light, the cumulative pixel value of each pixel generally represents the total amount of treatment light irradiated. Therefore, hereinafter, the cumulative pixel value calculated by the irradiation light amount estimation unit 403 is referred to as the total irradiation light amount of the treatment light.

照射光量推定部403による治療光の総照射光量の算出は、動作準備モードにおいて指定されたROIに含まれる各画素について行われるとともに、撮影されたPDT画像がハレーション有り画像か、ハレーション無し画像かによらず、全てのPDT画像の画素値を加算することによって算出される。また、照射光量推定部403による治療光の総照射光量は、PDTによる治療を開始すると、治療光が照射される限り継続される。したがって、術者がPDTによる治療中にペダルスイッチを放して治療光の照射を一時中断した場合には、照射光量推定部403は各画素値の加算を中断するが、術者が再びペダルスイッチを踏み、治療光の照射が再開されたときには、治療光の照射を中断する前に算出された値にさらに各画素値を加算する。さらに、照射光量推定部403は、ROIについて、治療光の総照射光量を所定のカラーマップにしたがってマッピングした治療効果画像を順次生成する。なお、カラーマップはグレースケールでも良い。治療効果画像は、表示制御回路404に入力される。   The calculation of the total irradiation light amount of the treatment light by the irradiation light amount estimation unit 403 is performed for each pixel included in the ROI designated in the operation preparation mode, and whether the captured PDT image is an image with halation or an image without halation. Regardless, it is calculated by adding the pixel values of all PDT images. Further, the total irradiation light amount of the treatment light by the irradiation light amount estimation unit 403 is continued as long as the treatment light is irradiated when the treatment by the PDT is started. Therefore, when the surgeon releases the pedal switch during the PDT treatment and temporarily stops the irradiation of the treatment light, the irradiation light amount estimation unit 403 interrupts the addition of each pixel value, but the surgeon again presses the pedal switch. When the treatment light irradiation is resumed, each pixel value is further added to the value calculated before the treatment light irradiation is interrupted. Further, the irradiation light amount estimation unit 403 sequentially generates treatment effect images obtained by mapping the total irradiation light amount of the treatment light according to a predetermined color map for the ROI. The color map may be gray scale. The therapeutic effect image is input to the display control circuit 404.

表示制御回路404は、PDT準備モードにおいてヒストグラム311,312を表示する。また、PDTによる治療中においては、表示制御回路404は、VRAM28から選択取得したハレーション無し画像に、照射光量推定部403から順次入力される治療効果画像を重畳して表示する。このとき、治療効果画像は、ROIに重畳される。   The display control circuit 404 displays the histograms 311 and 312 in the PDT preparation mode. Further, during the treatment by PDT, the display control circuit 404 superimposes and displays the treatment effect images sequentially input from the irradiation light amount estimation unit 403 on the non-halation image selected and acquired from the VRAM 28. At this time, the therapeutic effect image is superimposed on the ROI.

図18に示すように、電子内視鏡システム401は、動作準備モードにおいて指定したROI313に治療効果画像を重畳したPDT画像410をモニタ22に表示する。PDT画像410は、治療効果画像が重畳されたことによって、治療光の総照射光量、すなわち治療の進捗状況を把握することができる。例えば、ROI313内が全て所定色(図18では最も色が濃い部分)になることが、腫瘍組織411に十分な治療光が照射されたことを示す判断基準となる。また、PDT画像410に治療の進捗状況が示されているので、PDT画像410を観察しながら、腫瘍組織411が早期に所定色で埋まるように、先端部20及び治療プローブ73の位置や向きを微調節することもできる。なお、図18は、治療効果画像が重畳されたPDT画像410の例(上段)と、このPDT画像410のROI313の拡大図(下段)を例示したが、ROI313の拡大図を実際に生成し、ROI313の拡大図PDT画像410に並べてモニタ22に表示させたり、あるいはROI313の拡大図だけをモニタ22の全面に表示させる拡大表示モードを設けても良い。   As shown in FIG. 18, the electronic endoscope system 401 displays a PDT image 410 in which a therapeutic effect image is superimposed on the ROI 313 specified in the operation preparation mode on the monitor 22. The PDT image 410 can grasp the total irradiation light amount of the treatment light, that is, the progress of treatment, by superimposing the treatment effect image. For example, a predetermined color (the darkest part in FIG. 18) in the ROI 313 is a criterion for indicating that the tumor tissue 411 has been irradiated with sufficient therapeutic light. Since the progress of treatment is shown in the PDT image 410, the positions and orientations of the distal end portion 20 and the treatment probe 73 are adjusted so that the tumor tissue 411 is filled with a predetermined color early while observing the PDT image 410. You can also fine-tune. FIG. 18 illustrates an example of the PDT image 410 on which the treatment effect image is superimposed (upper stage) and an enlarged view of the ROI 313 (lower stage) of the PDT image 410, but actually generates an enlarged view of the ROI 313, An enlarged display mode may be provided in which the enlarged view PDT image 410 of the ROI 313 is displayed on the monitor 22 side by side or only the enlarged view of the ROI 313 is displayed on the entire surface of the monitor 22.

上述のように、電子内視鏡システム401は、順次撮影されるPDT画像の画素値を加算した累積画素値に基づいた値を画素値とする治療効果画像を作成し、これを表示画像に重畳して表示する。このため、電子内視鏡システム401は、PDTによる治療中に、その進捗状況を把握することができる。   As described above, the electronic endoscope system 401 creates a therapeutic effect image having a pixel value as a value based on an accumulated pixel value obtained by adding the pixel values of sequentially captured PDT images, and superimposes this on the display image. And display. For this reason, the electronic endoscope system 401 can grasp the progress status during the treatment by PDT.

また、上述の第4実施形態では、治療効果画像を治療光の総照射光量を所定のカラーマップにしたがってマッピングして作成するが、治療光の総照射光量に基づいた治療の進捗状況の表示方法はこの例に限らない。例えば、図19に示すように、平面状の治療効果画像のかわりに、治療光の総照射光量に基づいて立体的なヒストグラム画像420を作成しても良い。この場合、モニタ22に表示するときには、PDT画像410と立体的なヒストグラム画像420を並べて表示することが好ましい。また、PDT画像410への治療効果画像の重畳表示と立体的なヒストグラム画像420を併用しても良い。   In the fourth embodiment described above, the therapeutic effect image is created by mapping the total irradiation light amount of the treatment light according to a predetermined color map, but the method of displaying the progress of treatment based on the total irradiation light amount of the treatment light Is not limited to this example. For example, as shown in FIG. 19, a three-dimensional histogram image 420 may be created based on the total irradiation light amount of treatment light instead of a planar treatment effect image. In this case, when displaying on the monitor 22, it is preferable to display the PDT image 410 and the three-dimensional histogram image 420 side by side. Further, the superimposed display of the treatment effect image on the PDT image 410 and the three-dimensional histogram image 420 may be used in combination.

なお、上述の第4実施形態では、ROIについて治療効果画像を作成して、ROI内の治療の進捗状況をモニタ22に表示する例を説明したが、PDT画像の全面について治療効果画像を作成し、モニタ22に表示するハレーション無し画像の全面について治療の進捗状況を示しても良い。   In the fourth embodiment described above, an example in which a treatment effect image is created for the ROI and the progress of treatment in the ROI is displayed on the monitor 22 is described. However, a treatment effect image is created for the entire PDT image. The progress of treatment may be indicated for the entire surface of the non-halation image displayed on the monitor 22.

なお、上述の第4実施形態では、PDT時にハレーション有り画像が撮影されたときに過去に撮影されたハレーション無し画像を表示することを前提に説明したが、典型例(図9(B))のように、PDTと通常光撮影を交互に行う場合にも、PDT画像を撮影するようにすれば、上述の第4実施形態を好適に適用できる。また、PDT準備モードは、省略しても良い。   In the above-described fourth embodiment, description has been made on the assumption that an image without halation captured in the past when an image with halation was captured during PDT, but a typical example (FIG. 9B). As described above, when the PDT and the normal light photographing are alternately performed, if the PDT image is photographed, the above-described fourth embodiment can be suitably applied. Further, the PDT preparation mode may be omitted.

なお、上述の第4実施形態では、PDTによる治療効果をモニタ22に表示する様態を説明したが、モニタ22に表示させるPDT画像410には、さらに、第2実施形態で説明した電子内視鏡システム121と同様にして、ハレーションや治療光の照射スポットの輪郭を表示させることが好ましい。   In the above-described fourth embodiment, the manner in which the therapeutic effect of PDT is displayed on the monitor 22 has been described. However, the PDT image 410 displayed on the monitor 22 further includes the electronic endoscope described in the second embodiment. Similar to the system 121, it is preferable to display the outline of the irradiation spot of halation or treatment light.

なお、上述の第1〜第4実施形態では、DIP43をハレーション検出部として機能させる例を説明したが、これに限らない。例えば、DSP42をハレーション検出部として機能させても良い。また、DIP43やDSP42とは別にハレーション検出部55として機能する専用の回路等を設けても良い。こうした場合には、各々のケースに応じて、画素値と比較する閾値の具体的な値や、ハレーションの有無を判別する基準(閾値より画素値が大きい画素の個数)等は各々のケースに応じて定める。   In the first to fourth embodiments described above, the example in which the DIP 43 functions as the halation detection unit has been described, but the present invention is not limited to this. For example, the DSP 42 may function as a halation detection unit. A dedicated circuit or the like that functions as the halation detection unit 55 may be provided separately from the DIP 43 and the DSP 42. In such a case, depending on each case, the specific value of the threshold value to be compared with the pixel value, the criterion for determining the presence or absence of halation (the number of pixels having a pixel value larger than the threshold value), etc. Determine.

なお、上述の第1〜第4実施形態では、4連続でハレーション有り画像が撮影された場合に、次のフレームでは絞り開口91を閉じ、治療光の照射を一時中断することによって強制的にハレーション無し画像を撮影する例を説明したが、ハレーション無し画像を強制的に撮影する様態はこの例に限らない。例えば、PDTによる治療中に強制的にハレーション無し画像を撮影する場合、絞り開口91の開口量を減らして治療光を減光させても良い。   In the first to fourth embodiments described above, when images with halation are captured for four consecutive times, the aperture opening 91 is closed in the next frame, and the treatment light is temporarily suspended to forcibly halate. Although an example of capturing a no-image has been described, the manner of forcibly capturing an image without halation is not limited to this example. For example, when an image without halation is forcibly taken during treatment with PDT, the amount of the aperture 91 may be reduced to reduce the treatment light.

なお、上述の第1〜第4実施形態では、VRAM28を5フレーム分の記憶容量とする例を説明したが、VRAM28は複数フレーム分のPDT画像を記憶することができれば、その記憶容量は任意である。但し、VRAM28を2フレーム分の記憶容量とする等、VRAM28の記憶容量が小さい場合には、治療光の照射を中断するケースが多くなり、治療時間の短縮効果は小さくなる。また、VRAM28の記憶容量を大きくし、これを全てPDT画像の保持のために利用する場合、強制的にハレーション無し画像を撮影するケースが過度に抑制され、古いハレーション無し画像がモニタ22に表示され続け、腫瘍組織や被検体内の実際の変化を観察しにくくなる場合がある。このため、PDTによる治療中の被検体内及び腫瘍組織を自然に観察するためには、VRAM28の記憶容量を5〜15フレーム程度の記憶容量とすることが好ましい。   In the first to fourth embodiments described above, an example in which the VRAM 28 has a storage capacity for five frames has been described. However, if the VRAM 28 can store PDT images for a plurality of frames, the storage capacity is arbitrary. is there. However, when the storage capacity of the VRAM 28 is small, such as when the VRAM 28 has a storage capacity for two frames, the treatment light irradiation is often interrupted, and the effect of shortening the treatment time is reduced. In addition, when the storage capacity of the VRAM 28 is increased and all of this is used to hold a PDT image, the case of forcibly capturing an image without halation is excessively suppressed, and an old image without halation is displayed on the monitor 22. Continuing, it may be difficult to observe actual changes in the tumor tissue or subject. For this reason, in order to naturally observe the inside of the subject and the tumor tissue being treated by PDT, it is preferable to set the storage capacity of the VRAM 28 to a storage capacity of about 5 to 15 frames.

なお、上述の第1〜第4実施形態では撮像素子としてCCD21を用いる例を説明したが、CMOS型のイメージセンサを用いても良い。また、電子内視鏡システム11,121に用いる撮像素子としては、照明光の色をRGBに順に切り替えてフレーム毎に各色の撮像信号を得る方式(いわゆる面順次式)のものを採用してもよいが、治療時間をより短縮するためには、各画素にRGB等のカラーフィルタ設けられ、カラーの撮像信号を得る方式(いわゆる同時式)のものを用いることが好ましい。   In the first to fourth embodiments described above, the example in which the CCD 21 is used as the imaging device has been described. However, a CMOS image sensor may be used. Further, as an image pickup element used in the electronic endoscope systems 11 and 121, a system (so-called frame sequential type) that obtains an image pickup signal of each color for each frame by sequentially switching the color of illumination light to RGB. However, in order to further shorten the treatment time, it is preferable to use a method in which each pixel is provided with a color filter such as RGB and obtains a color imaging signal (so-called simultaneous method).

なお、上述の第1〜第4実施形態では、治療光が照射されるパルス周期と、CCD21の駆動周期(撮影の周期)が合致し、各フレームの中央で治療光が照射される例(図9参照)を説明したが、CCD21の駆動周期と治療光のパルス周期は合致していなくても良い。CCD21の駆動周期と治療光のパルス周期が合致していない場合には、治療光が照射されないフレームが一定の間隔で生じるので、自然にハレーション無し画像を取得することができる。   In the first to fourth embodiments described above, an example in which therapeutic light is irradiated at the center of each frame when the pulse period of irradiation of therapeutic light coincides with the driving period (imaging period) of the CCD 21 (FIG. 9), the drive cycle of the CCD 21 and the pulse cycle of the treatment light may not match. If the drive period of the CCD 21 does not match the pulse period of the treatment light, frames that are not irradiated with the treatment light occur at regular intervals, so that an image without halation can be acquired naturally.

なお、上述の第1〜第4実施形態では、治療光がパルス照射される例を説明したが、PDTによる治療を行っている間、継続的に治療光を照射するようにしても良い。   In the first to fourth embodiments described above, the example in which the treatment light is pulsed has been described. However, the treatment light may be continuously emitted during the treatment by the PDT.

なお、PDD及びPDTに用いる光感受性物質は、治療対象となる部位(腫瘍組織等)に蓄積し、励起光の照射により蛍光光を発し、治療光を照射することによって治療対象となる部位を治療可能であれば、任意のものを用いることができる。PDD用の励起光の波長やPDT用の治療光の波長は、使用する光感受性物質に応じて定めれば良い。また、励起光や治療光の波長が異なる複数種類の光感受性物質を用いることがある場合には、各々に応じて光源等を設けておけば良い。   In addition, the photosensitive substance used for PDD and PDT accumulates in the site | part (tumor tissue etc.) used as a treatment object, emits fluorescence light by irradiation of excitation light, and treats the site | part used as treatment object by irradiating treatment light. If possible, any can be used. The wavelength of the excitation light for PDD and the wavelength of the treatment light for PDT may be determined according to the photosensitive substance to be used. In addition, when a plurality of types of photosensitive substances having different wavelengths of excitation light and treatment light may be used, a light source or the like may be provided according to each.

なお、上述の第1〜第4実施形態では、波長選択フィルタ65によって照明光ユニット61から、通常光またはPDD用の励起光が照射される例を説明したがこれに限らない。例えば、波長選択フィルタ65は、通常光と、PDD用の励起光と、光源63から発せられた通常光を特定の短い波長帯の光(以下、特殊光という)に制限する機能を持ったフィルタとしても良い。この場合、例えば、扇形の複数エリアに区切り、各エリアが通常光,PDD用の励起光,特殊光を透過するようにした円板を上述の実施形態のように回転制御すれば良い。特殊光としては、例えば、450nm、500nm、550nm、600nm、780nm近傍の波長の光が挙げられる。   In the first to fourth embodiments described above, the example in which the normal light or the excitation light for PDD is emitted from the illumination light unit 61 by the wavelength selection filter 65 has been described, but the present invention is not limited thereto. For example, the wavelength selection filter 65 is a filter having a function of limiting normal light, PDD excitation light, and normal light emitted from the light source 63 to light of a specific short wavelength band (hereinafter referred to as special light). It is also good. In this case, for example, a disk that is divided into a plurality of fan-shaped areas and each area transmits normal light, PDD excitation light, and special light may be rotationally controlled as in the above-described embodiment. Examples of the special light include light having wavelengths in the vicinity of 450 nm, 500 nm, 550 nm, 600 nm, and 780 nm.

450nm近傍の特殊光による撮影は、表層の血管やピットパターン等の被観察部位表面の異微細構造の観察に適している。500nm近傍の照明光では、被観察部位の陥凹や隆起等のマクロな凹凸構造を観察することができる。550nm近傍の照明光は、ヘモグロビンによる吸収率が高く、微細血管や発赤の観察に適し、650nm近傍の照明光は、肥厚の観察に適している。深層血管の観察には、インドシアニングリーン(ICG)等の蛍光物質を静脈注射し、780nm近傍の照明光を用いることで明瞭に観察することができる。   Imaging with special light in the vicinity of 450 nm is suitable for observing different fine structures on the surface of the observed site such as blood vessels and pit patterns on the surface layer. With illumination light in the vicinity of 500 nm, it is possible to observe a macro uneven structure such as a depression or a bulge in the observation site. Illumination light in the vicinity of 550 nm has a high absorption rate by hemoglobin, and is suitable for observation of fine blood vessels and redness. Illumination light in the vicinity of 650 nm is suitable for observation of thickening. For observation of deep blood vessels, a fluorescent substance such as indocyanine green (ICG) is injected intravenously and can be clearly observed by using illumination light in the vicinity of 780 nm.

なお、上述の第1及び第2実施形態では、波長選択フィルタ65を用いて通常光をPDD用の励起光とする例を説明したが、通常光を発光する光源63とは別個にPDD用の励起光を発光する光源を設け、ミラー等の光学系によってライトガイド32に入射させる照明光を、通常光と励起光とで切り替えるようにしても良い。   In the first and second embodiments described above, the example in which the normal light is used as the excitation light for PDD using the wavelength selection filter 65 has been described. However, the PDD is separate from the light source 63 that emits normal light. A light source that emits excitation light may be provided, and illumination light incident on the light guide 32 by an optical system such as a mirror may be switched between normal light and excitation light.

なお、上述の第1〜第4実施形態では、光源63としてハロゲンランプを用いる例を説明したが、LEDやLDを光源63として用いても良い。この場合、波長帯の異なる光を発するLEDやLD等を複数備えておき、これらの点灯と消灯を制御することによって通常光と励起光を切り替えても良い。また、青色レーザ光源と、青色レーザ光を照射されることにより緑色〜赤色の蛍光光を発する蛍光体を用いて通常光を発生させても良い。さらに、他の用途に用いる光源を併用しても良い。以下、全ての光源にLDを用いる場合の例を説明する。   In the first to fourth embodiments described above, an example in which a halogen lamp is used as the light source 63 has been described. However, an LED or an LD may be used as the light source 63. In this case, a plurality of LEDs, LDs, and the like that emit light having different wavelength bands may be provided, and normal light and excitation light may be switched by controlling lighting and extinguishing of these. Ordinary light may be generated using a blue laser light source and a phosphor that emits green to red fluorescent light when irradiated with blue laser light. Furthermore, you may use together the light source used for another use. Hereinafter, an example in which LDs are used for all light sources will be described.

例えば、図20に示すように、電子内視鏡システム500の光源装置501は互いに中心波長が異なるレーザ光源LD1〜LD12を備える。各レーザ光源LD1〜LD12は、CPU66によりそれぞれ個別に調光制御されており、各レーザ光を個別に又は同時に発生することができる。また、各レーザ光源の発光のタイミングや光量比は任意に変更可能となっており、各レーザ光が出射される照明窓からの光のスペクトルを、それぞれ個別に変更できる。   For example, as shown in FIG. 20, the light source device 501 of the electronic endoscope system 500 includes laser light sources LD1 to LD12 having different center wavelengths. The laser light sources LD1 to LD12 are individually dimmed and controlled by the CPU 66, and each laser beam can be generated individually or simultaneously. Further, the light emission timing and the light quantity ratio of each laser light source can be arbitrarily changed, and the spectrum of light from the illumination window from which each laser light is emitted can be individually changed.

LD1は、中心波長405nmのレーザ光を出射する狭帯域光観察用の光源である。LD2は中心波長445nmのレーザ光を出射して後述する波長変換部材である蛍光体を用いて白色光(通常光)を生成するための光源である。LD3及びLD4は、波長405nmのレーザ光を出射する光源であり、PDD等の蛍光観察時に用いられる。LD5及びLD6は、中心波長472nmのレーザ光を出射する光源であり、血中の酸素飽和度と血管深さの情報を抽出するために用いられる。LD7及びLD8は、中心波長665nmのレーザ光を出射する光源であり、PDTに用いられる。LD9及びLD10は、中心波長785nmのレーザ光を出射する光源であり、血管に注入したIGCの赤外光観察に用いられる。LD11及びLD12は、中心波長375nmのレーザ光を出射する光源であり、ルシフェラーゼを用いた蛍光観察を行うための光源である。なお、各レーザ光源は、上記中心発光波長の±10nmの範囲に入っていれば良い。   The LD 1 is a light source for narrowband light observation that emits laser light having a center wavelength of 405 nm. The LD 2 is a light source that emits laser light having a central wavelength of 445 nm and generates white light (normal light) using a phosphor that is a wavelength conversion member described later. LD3 and LD4 are light sources that emit laser light having a wavelength of 405 nm, and are used for fluorescence observation of PDD or the like. LD5 and LD6 are light sources that emit laser light having a central wavelength of 472 nm, and are used to extract information on oxygen saturation and blood vessel depth in blood. LD7 and LD8 are light sources that emit laser light having a center wavelength of 665 nm, and are used for PDT. LD9 and LD10 are light sources that emit laser light having a central wavelength of 785 nm, and are used for observing infrared light of IGC injected into blood vessels. LD11 and LD12 are light sources that emit laser light having a center wavelength of 375 nm, and are light sources for performing fluorescence observation using luciferase. Each laser light source only needs to be within a range of ± 10 nm of the central emission wavelength.

各レーザ光源LD1〜LD12から出射されるレーザ光は、それぞれ集光レンズ(図示しない)により光ファイバ502A〜502Dに導入される。LD1,LD2からのレーザ光は、光ファイバ502B,502Cを通じて先端部20に配置された蛍光体503に伝送され、LD3〜LD12からのレーザ光は、光ファイバ502A,502Dを通じて光拡散部材504に伝送され、照明光や励起光、治療光として被検体内に向けて出射される。   Laser light emitted from each of the laser light sources LD1 to LD12 is introduced into the optical fibers 502A to 502D by condenser lenses (not shown). Laser light from LD1 and LD2 is transmitted to the phosphor 503 disposed at the tip 20 through optical fibers 502B and 502C, and laser light from LD3 to LD12 is transmitted to the light diffusion member 504 through optical fibers 502A and 502D. Then, it is emitted toward the subject as illumination light, excitation light, or treatment light.

なお、LD1とLD2からのレーザ光は、コンバイナ506により合波して1系統の光路とされた後、カプラ507により分波して2系統の光路とし、それぞれコネクタ18に伝送される。これにより、LD1とLD2からのレーザ光が、各レーザ光源の個体差による発光波長のばらつきやスペックルが軽減されて光ファイバ502B,502Cに均等に伝送される。ここでは、コンバイナ506及びカプラ503を用いるが、これらを用いずに各レーザ光源LD1,LD2からのレーザ光をコネクタ18に送出する簡略化した構成としても良い。   The laser beams from LD1 and LD2 are combined by a combiner 506 to form a single optical path, and then demultiplexed by a coupler 507 to form two optical paths, which are transmitted to the connector 18, respectively. As a result, the laser light from LD1 and LD2 is uniformly transmitted to the optical fibers 502B and 502C with reduced variations in emission wavelength and speckle due to individual differences between the laser light sources. Here, the combiner 506 and the coupler 503 are used. However, a simplified configuration in which the laser beams from the laser light sources LD1 and LD2 are sent to the connector 18 without using them may be used.

光ファイバ502Bと蛍光体503は投光ユニット511Bを構成し、光ファイバ502Cと光拡散部材504は投光ユニット511Cを構成する。また、光ファイバ502Aと蛍光体503は投光ユニット511Aを構成し、光ファイバ502Dと蛍光体503は投光ユニット511Dを構成する。   The optical fiber 502B and the phosphor 503 constitute a light projecting unit 511B, and the optical fiber 502C and the light diffusion member 504 constitute a light projecting unit 511C. The optical fiber 502A and the phosphor 503 constitute a light projecting unit 511A, and the optical fiber 502D and the phosphor 503 constitute a light projecting unit 511D.

図21(A)に示すように、投光ユニット511B,511Cは、それぞれ同一の構成であって、蛍光体503と、蛍光体503の外周を覆う筒状のスリーブ部材513と、スリーブ部材513の一端側を封止する保護ガラス(照明窓)514と、スリーブ部材513に挿入された光ファイバ502B(,502C)を中心軸に保持するフェルール515とを備えている。また、フェルール515の後端側から外皮に覆われて演出される光ファイバ502B(,502C)には、その外皮の外側を覆うフレキシブルスリーブ516との間に挿入されている。   As shown in FIG. 21A, each of the light projecting units 511B and 511C has the same configuration, and includes a phosphor 503, a cylindrical sleeve member 513 that covers the outer periphery of the phosphor 503, and a sleeve member 513. A protective glass (illumination window) 514 that seals one end side, and a ferrule 515 that holds the optical fiber 502B (502C) inserted into the sleeve member 513 on the central axis are provided. Further, the optical fiber 502B (, 502C) produced by being covered with the outer skin from the rear end side of the ferrule 515 is inserted between the flexible sleeve 516 covering the outer side of the outer skin.

投光ユニット511B,511Cの蛍光体503は、レーザ光源LD2からの青色レーザ光の一部を吸収して緑色〜黄色に励起発光する蛍光物質(例えばYAG蛍光体、あるいはBAM(BaMgAl1017)等の蛍光体)を含んで構成される。これにより、青色レーザ光を励起光とする緑色〜黄色の励起発光光と、蛍光体503により吸収されず透過した青色レーザ光とが合わされて白色(擬似白色)の通常光が生成される。 The phosphors 503 of the light projecting units 511B and 511C absorb a part of the blue laser light from the laser light source LD2 and excite and emit green to yellow light (for example, YAG phosphor or BAM (BaMgAl 10 O 17 )). Etc.). As a result, the green to yellow excitation light emitted from the blue laser light as the excitation light and the blue laser light transmitted without being absorbed by the phosphor 503 are combined to generate white (pseudo white) normal light.

また、図21(B)に示すように、投光ユニット511A,511Dも同一構成であり、投光ユニット511B,511Cの蛍光体503に代えて光拡散部材504が配設され、光ファイバ502B,502Dから導光される点以外は、投光ユニット511B,511Cと同様の構成となっている。   Further, as shown in FIG. 21B, the light projecting units 511A and 511D have the same configuration, and a light diffusing member 504 is provided in place of the phosphor 503 of the light projecting units 511B and 511C, and the optical fibers 502B and The configuration is the same as that of the light projecting units 511B and 511C except that the light is guided from 502D.

図22に示すように、投光ユニット511A,511Dの対と、投光ユニット511B,511Cの対は、先端部20の先端面のける対物光学系31を挟んだ両脇側に対として配置される。そして、例えば、投光ユニット511B,511Cに対してLD2から青色レーザ光を導入することにより、白色光(通常光)が生成され、投光ユニット511B,511Cから被検体内に照射される。また、投光ユニット511A,511Dに対してLD3,LD4から中心波長が405nmのレーザ光(PDD用の励起光)と、LD7,LD8から中心波長が665nmのレーザ光(治療光)とを選択的に導入することにより、投光ユニット511A,511Dから励起光と治療光のいずれかが被検体内に照射される。   As shown in FIG. 22, the pair of light projecting units 511A and 511D and the pair of light projecting units 511B and 511C are arranged as a pair on both sides of the distal end surface of the distal end portion 20 with the objective optical system 31 in between. The For example, by introducing blue laser light from the LD 2 to the light projecting units 511B and 511C, white light (normal light) is generated and irradiated into the subject from the light projecting units 511B and 511C. In addition, laser light (excitation light for PDD) having a central wavelength of 405 nm from LD3 and LD4 and laser light (treatment light) having a central wavelength of 665 nm from LD7 and LD8 are selectively used for the light projecting units 511A and 511D. In this case, either the excitation light or the treatment light is irradiated into the subject from the light projecting units 511A and 511D.

なお、PDD用の励起光、励起光の照射によって生じる蛍光光(PDD蛍光)、PDT用の治療光の波長を薬剤毎に図23に示す。PDDの励起光としては、フォトフリン、レザフィリン、ビスダイン、5−ALA(アミノレブリン酸)のいずれの蛍光薬剤を使用した場合でも中心波長350〜450nmのレーザ光が利用可能であり、中心波長が405nmのレーザ光が好適に用いられる。5−ALAはプロトポルフィリンIXの蓄積によるもので、病巣の進行によって蛍光の波長比が変化する。   FIG. 23 shows the wavelengths of excitation light for PDD, fluorescence light (PDD fluorescence) generated by irradiation of excitation light, and treatment light for PDT for each drug. As the excitation light of PDD, laser light having a central wavelength of 350 to 450 nm can be used even when any of fluorescent agents such as photofrin, resaphyrin, bisdyne, and 5-ALA (aminolevulinic acid) is used, and the central wavelength is 405 nm. Laser light is preferably used. 5-ALA is due to accumulation of protoporphyrin IX, and the wavelength ratio of fluorescence changes with the progression of the lesion.

11,121,301,401,500 電子内視鏡システム
12 電子内視鏡
13 プロセッサ装置
14,501 光源装置
16 挿入部
17,51 操作部
18 コネクタ
19 ユニバーサルコード
20 先端部
21 CCD
22 モニタ
23,82 観察窓
24,83 照明窓
26 TG
27 AFE
28 VRAM
29,41,66 CPU
31 対物光学系
32 ライトガイド
33 照明レンズ
42 DSP
43 DIP
44,123,304,404 表示制御回路
52 ROM
53 RAM
55,122 ハレーション検出部
61 照明光ユニット
62 治療光ユニット
63,71 光源
64 絞り機構
65 波長選択フィルタ
67,77 集光レンズ
72 絞り機構
73 治療プローブ
74 鉗子口
75 鉗子チャネル
76,84 鉗子出口
81 フード
85 減光フィルタ
91 絞り開口
92 絞り羽根
93 スプリング
94 モータ
95 絞り調節機構
101,310 通常光画像
102 PDD画像
103,322,411 腫瘍組織
104 照射範囲
105,106,131 PDT画像
107,132 ハレーション
133 輪郭
134 輪郭合成画像
135,314 照射スポット
136 照射スポット合成画像
141,142,410 PDT画像
143 混合画像
303,403 照射光量推定部
311,312 ヒストグラム
313 ROI
321 被検体内壁
323 低光量治療光
420 ヒストグラム画像
502A〜502D 光ファイバ
503 蛍光体
504 光拡散部材
506 コンバイナ
507 カプラ
511A〜511D 投光ユニット
513 スリーブ部材
514 保護ガラス
515 フェルール
516 フレキシブルスリーブ
11, 121, 301, 401, 500 Electronic endoscope system 12 Electronic endoscope 13 Processor device 14,501 Light source device 16 Insertion unit 17,51 Operation unit 18 Connector 19 Universal code 20 Tip unit 21 CCD
22 Monitor 23, 82 Observation window 24, 83 Illumination window 26 TG
27 AFE
28 VRAM
29, 41, 66 CPU
31 Objective Optical System 32 Light Guide 33 Illumination Lens 42 DSP
43 DIP
44, 123, 304, 404 Display control circuit 52 ROM
53 RAM
55, 122 Halation detector 61 Illumination light unit 62 Treatment light unit 63, 71 Light source 64 Aperture mechanism 65 Wavelength selection filter 67, 77 Condensing lens 72 Aperture mechanism 73 Treatment probe 74 Forceps port 75 Forceps channel 76, 84 Forceps outlet 81 Hood 85 Attenuating filter 91 Aperture opening 92 Aperture blade 93 Spring 94 Motor 95 Aperture adjustment mechanism 101, 310 Normal light image 102 PDD image 103, 322, 411 Tumor tissue 104 Irradiation range 105, 106, 131 PDT image 107, 132 Halation 133 Contour 134 Outline composite image 135, 314 Irradiation spot 136 Irradiation spot composite image 141, 142, 410 PDT image 143 Mixed image 303, 403 Irradiation light quantity estimation unit 311, 312 Histogram 313 ROI
321 Subject inner wall 323 Low light treatment light 420 Histogram image 502A to 502D Optical fiber 503 Phosphor 504 Light diffusion member 506 Combiner 507 Coupler 511A to 511D Projection unit 513 Sleeve member 514 Protective glass 515 Ferrule 516 Flexible sleeve

Claims (10)

白色光を被検体内に照射する白色光照射手段と、
前記被検体内の治療対象部位に蓄積された光感受性物質に作用して、前記治療対象部位を治療する治療光を照射する治療光照射手段と、
前記被検体内から入射する光を光電変換することにより前記被検体内を撮像する撮像素子と、
前記白色光とともに前記治療光を照射しながら順次撮影される治療中画像の各画素の画素値を加算することにより、画素毎に前記治療光の総照射光量を算出する総照射光量算出手段と、
前記画素毎に算出される前記総照射光量に基づいて、前記治療効果画像を生成する治療効果画像生成手段と、
前記治療中画像を表示する表示手段と、
前記治療中画像とともに前記治療効果画像を前記表示手段に表示させる表示制御手段と、
を備えることを特徴とする電子内視鏡システム。
White light irradiation means for irradiating the subject with white light;
Therapeutic light irradiation means for irradiating therapeutic light for treating the treatment target site by acting on a photosensitive substance accumulated in the treatment target site in the subject;
An image sensor that images the inside of the subject by photoelectrically converting light incident from within the subject; and
A total irradiation light amount calculating means for calculating the total irradiation light amount of the treatment light for each pixel by adding the pixel values of the pixels of the image being treated that are sequentially photographed while irradiating the treatment light together with the white light;
A therapeutic effect image generating means for generating the therapeutic effect image based on the total irradiation light amount calculated for each pixel;
Display means for displaying the in-treatment image;
Display control means for causing the display means to display the treatment effect image together with the treatment-in-progress image;
An electronic endoscope system comprising:
前記治療中画像について、関心領域を指定する関心領域指定手段を備え、
前記総照射光量算出手段は、前記関心領域内の画素について前記総照射光量を算出し、前記治療効果画像生成手段は、前記関心領域について前記治療効果画像を生成することを特徴とする請求項1記載の電子内視鏡システム。
A region of interest designating unit that designates a region of interest for the image under treatment is provided,
The total irradiation light amount calculation unit calculates the total irradiation light amount for pixels in the region of interest, and the treatment effect image generation unit generates the treatment effect image for the region of interest. The electronic endoscope system described.
前記治療効果画像は、前記総照射光量を所定のカラーマップにしたがってマッピングした画像であることを特徴とする請求項1または2に記載の電子内視鏡システム。   The electronic endoscope system according to claim 1, wherein the therapeutic effect image is an image obtained by mapping the total irradiation light amount according to a predetermined color map. 前記表示制御手段は、前記治療効果画像を前記治療中画像に重畳して表示することを特徴とする請求項1〜3のいずれか1項に記載の電子内視鏡システム。   The electronic endoscope system according to any one of claims 1 to 3, wherein the display control means displays the therapeutic effect image superimposed on the in-treatment image. 前記表示制御手段は、前記治療効果画像を重畳した前記関心領域を前記表示手段に拡大表示することを特徴とする請求項2〜4のいずれか1項に記載の電子内視鏡システム。   The electronic endoscope system according to any one of claims 2 to 4, wherein the display control unit enlarges and displays the region of interest on which the therapeutic effect image is superimposed on the display unit. 前記治療効果画像は、前記総照射光量を立体的なヒストグラムで表示する画像であることを特徴とする請求項1または2に記載の電子内視鏡システム。   The electronic endoscope system according to claim 1, wherein the therapeutic effect image is an image that displays the total irradiation light amount as a three-dimensional histogram. 前記治療中画像がハレーションの生じているハレーション有り画像か、ハレーションの生じていないハレーション無し画像かを判別する判別手段と、
複数フレーム分の前記治療中画像を記憶する記憶手段と、を備え、
前記表示制御手段は、撮影された前記治療中画像が前記ハレーション有り画像である場合に、前記記憶手段に記憶された過去の前記治療中画像の中から、前記ハレーション無し画像を選択して前記表示手段に表示することを特徴とする請求項1〜6のいずれか1項に記載の電子内視鏡システム。
Discriminating means for discriminating whether the image under treatment is an image with halation with halation or an image without halation without halation,
Storage means for storing the image during treatment for a plurality of frames,
The display control means selects and displays the non-halation image from the past treatment images stored in the storage means when the photographed image being treated is the image with halation. The electronic endoscope system according to claim 1, wherein the electronic endoscope system is displayed on a means.
前記判別手段は、前記治療中画像の各画素の画素値を所定の閾値と比較して前記閾値よりも画素値が大きい画素を計数し、前記閾値よりも画素値が大きい画素が所定数よりも多い場合に前記治療中画像を前記ハレーション有り画像と判別し、前記閾値よりも画素値が大きい画素が所定数以下の場合に前記治療中画像を前記ハレーション無し画像と判別することを特徴とする請求項7に記載の電子内視鏡システム。   The discriminating means compares the pixel value of each pixel of the image under treatment with a predetermined threshold value, counts pixels having a pixel value larger than the threshold value, and has a pixel value larger than the threshold value than a predetermined number. The image being treated is determined to be the image with halation when there are many, and the image being treated is determined to be the image without halation when the number of pixels having a pixel value larger than the threshold is equal to or less than a predetermined number Item 8. The electronic endoscope system according to Item 7. 記治療光の光量を低減させることにより、強制的に前記ハレーション無し画像を撮影させる制御手段を備えることを特徴とする請求項7または8に記載の電子内視鏡システム。 By reducing the amount of pre-Symbol therapeutic light, an electronic endoscope system according to claim 7 or 8, characterized in that it comprises a control means for forcibly taking the halation without image. 前記制御手段は、次の撮影で前記ハレーション有り画像が撮影されると前記記憶手段に記憶された前記治療中画像が全て前記ハレーション有り画像となる前に、前記次の撮影において、前記治療光の光量を低減させることを特徴とする請求項7〜9のいずれか1項に記載の電子内視鏡システム。 Wherein, prior to the treatment in the image said halation there images next photographing stored in the storage means to be taken are all the halation there image, in the subsequent shooting, prior Symbol therapeutic light The electronic endoscope system according to any one of claims 7 to 9, wherein the amount of light is reduced.
JP2010194887A 2010-08-31 2010-08-31 Electronic endoscope system Expired - Fee Related JP5438634B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010194887A JP5438634B2 (en) 2010-08-31 2010-08-31 Electronic endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010194887A JP5438634B2 (en) 2010-08-31 2010-08-31 Electronic endoscope system

Publications (2)

Publication Number Publication Date
JP2012050601A JP2012050601A (en) 2012-03-15
JP5438634B2 true JP5438634B2 (en) 2014-03-12

Family

ID=45904695

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010194887A Expired - Fee Related JP5438634B2 (en) 2010-08-31 2010-08-31 Electronic endoscope system

Country Status (1)

Country Link
JP (1) JP5438634B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6184086B2 (en) * 2012-12-07 2017-08-23 アンリツ株式会社 Phototherapy device
EP3248528A4 (en) 2015-01-21 2018-09-12 HOYA Corporation Endoscope system
JP6574105B2 (en) * 2015-04-28 2019-09-11 Hoya株式会社 Endoscope apparatus and endoscope system
JP6058235B1 (en) * 2015-05-20 2017-01-11 オリンパス株式会社 Endoscope system
WO2018105062A1 (en) 2016-12-07 2018-06-14 オリンパス株式会社 Image processing device and image processing method
WO2019123986A1 (en) * 2017-12-22 2019-06-27 富士フイルム株式会社 Medical image processing device and method, endoscope system, processor device, and diagnosis support device and program
CN108014424B (en) * 2017-12-29 2020-12-18 深圳开立生物医疗科技股份有限公司 Endoscope device
WO2021038729A1 (en) * 2019-08-27 2021-03-04 株式会社島津製作所 Treatment assistance device and treatment assistance method
CN115701340A (en) * 2021-08-02 2023-02-10 捷锐士阿希迈公司(以奥林巴斯美国外科技术名义) System for imaging and laser treatment of a target region

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL8700329A (en) * 1987-02-11 1988-09-01 Hoed Daniel Stichting DEVICE AND METHOD FOR EXAMINING AND / OR EXPOSING A CAVE IN A BODY.
JPH06312027A (en) * 1993-05-06 1994-11-08 Akinori Nagasawa Near-infrared laser irradiation beam monitor
JPH09103434A (en) * 1995-03-31 1997-04-22 Toshiba Corp Ultrasonic treatment device
JP3016554B2 (en) * 1998-02-16 2000-03-06 株式会社東芝 Electronic endoscope device
JP2001004542A (en) * 1999-06-24 2001-01-12 Hamamatsu Photonics Kk Singlet oxygen detector and photodynamical treatment apparatus using the same
JP2001190587A (en) * 2000-01-06 2001-07-17 Toshiba Corp Ultrasonic medical treatment device
JP2003250760A (en) * 2002-03-01 2003-09-09 Pentax Corp Automatic light regulator for endoscope and electronic endoscope unit
JP2003339758A (en) * 2002-05-31 2003-12-02 Nidek Co Ltd Ophthalmological laser treatment instrument
JP4648683B2 (en) * 2004-11-09 2011-03-09 Hoya株式会社 Endoscope system
JP2009022654A (en) * 2007-07-23 2009-02-05 Hoya Corp Electronic endoscope system

Also Published As

Publication number Publication date
JP2012050601A (en) 2012-03-15

Similar Documents

Publication Publication Date Title
JP5438635B2 (en) Electronic endoscope system
JP5438634B2 (en) Electronic endoscope system
JP5460536B2 (en) Electronic endoscope system
US9943230B2 (en) Endoscope system, processor device of endoscope system, and image processing method
JP6005303B2 (en) Fluorescence observation endoscope system
JP5331904B2 (en) Endoscope system and method for operating endoscope system
JP5274591B2 (en) Endoscope system, processor device for endoscope system, and method for operating endoscope system
JP5269921B2 (en) Electronic endoscope system and method for operating electronic endoscope system
JP5492030B2 (en) Image pickup display device and method of operating the same
JP5757891B2 (en) Electronic endoscope system, image processing apparatus, operation method of image processing apparatus, and image processing program
JP5539840B2 (en) Electronic endoscope system, processor device for electronic endoscope system, and method for operating electronic endoscope system
JP5762344B2 (en) Image processing apparatus and endoscope system
JP5584601B2 (en) Endoscope device
CN109561812B (en) Image processing apparatus
JP5539841B2 (en) Electronic endoscope system, processor device for electronic endoscope system, and method for operating electronic endoscope system
JP5544261B2 (en) Electronic endoscope system
JP5623266B2 (en) Endoscope light source device and endoscope system
JP2010082041A (en) Electronic endoscope system
WO2019176253A1 (en) Medical observation system
JP5438633B2 (en) Electronic endoscope system
JP2016174976A (en) Endoscope system
JP5544260B2 (en) Electronic endoscope system
JP5780653B2 (en) Light source device and endoscope system
JP2011167344A (en) Medical device system for pdt, electronic endoscope system, surgical microscope system, and treatment light irradiation distribution control method
JP5611746B2 (en) Electronic endoscope system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131101

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131204

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131213

R150 Certificate of patent or registration of utility model

Ref document number: 5438634

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees