JP5766773B2 - Endoscope system and method for operating endoscope system - Google Patents

Endoscope system and method for operating endoscope system Download PDF

Info

Publication number
JP5766773B2
JP5766773B2 JP2013244819A JP2013244819A JP5766773B2 JP 5766773 B2 JP5766773 B2 JP 5766773B2 JP 2013244819 A JP2013244819 A JP 2013244819A JP 2013244819 A JP2013244819 A JP 2013244819A JP 5766773 B2 JP5766773 B2 JP 5766773B2
Authority
JP
Japan
Prior art keywords
oxygen saturation
value
light
site
endoscope system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013244819A
Other languages
Japanese (ja)
Other versions
JP2014076375A (en
Inventor
孝明 齋藤
孝明 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2013244819A priority Critical patent/JP5766773B2/en
Publication of JP2014076375A publication Critical patent/JP2014076375A/en
Application granted granted Critical
Publication of JP5766773B2 publication Critical patent/JP5766773B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、生体組織に存在する血管中のヘモグロビンの酸素飽和度の情報を取得する内視鏡システムおよび内視鏡システムの作動方法に関する   The present invention relates to an endoscope system for acquiring information on oxygen saturation of hemoglobin in blood vessels existing in a living tissue, and an operating method of the endoscope system.

医療分野において様々な生体情報の取得が行われている。その代表例として内視鏡を利用した検査が挙げられる。周知の如く、内視鏡は被検体内に挿入する挿入部の先端から被検体の被観察部位に照明光を照射し、被観察部位の像を取り込む。   Various biometric information is acquired in the medical field. A typical example is an examination using an endoscope. As is well known, the endoscope irradiates the observation site of the subject with illumination light from the tip of the insertion portion to be inserted into the subject, and captures an image of the observation site.

従来、照明光の光源にはキセノンランプやメタルハライドランプ等の白色光源が用いられていたが、病変の発見を容易にするために狭い波長帯域の光(狭帯域光)を被観察部位に照射し、その反射光を画像化して観察する手法が脚光を浴びている(特許文献1参照)。   Conventionally, a white light source such as a xenon lamp or a metal halide lamp has been used as the light source of the illumination light. However, in order to easily find a lesion, light of a narrow wavelength band (narrow band light) is irradiated to the observation site. The technique of imaging and observing the reflected light is in the spotlight (see Patent Document 1).

狭帯域光を照射して得られた撮像信号に基づき、血管中のヘモグロビンの酸素飽和度の情報を取得する方法も鋭意研究されている(特許文献2参照)。特許文献2では、300〜400nm、400nm付近、400〜500nm、500〜600nm、450〜850nm等の各波長帯域で複数の波長セットの狭帯域光を照射している。波長セットはヘモグロビンの酸素飽和度により吸光度が変化する波長と変化が少ない波長の組み合わせである。   A method for acquiring information on the oxygen saturation of hemoglobin in a blood vessel based on an imaging signal obtained by irradiating narrow-band light has also been intensively studied (see Patent Document 2). In Patent Document 2, narrowband light of a plurality of wavelength sets is irradiated in each wavelength band such as 300 to 400 nm, near 400 nm, 400 to 500 nm, 500 to 600 nm, and 450 to 850 nm. The wavelength set is a combination of a wavelength at which the absorbance changes due to the oxygen saturation of hemoglobin and a wavelength with little change.

特許第3583731号Japanese Patent No. 3583731 特開平06−315477号公報Japanese Patent Laid-Open No. 06-315477

特許文献2のように酸素飽和度の情報を得る際には、得られた画像の画素値の比等をパラメータとする関数あるいはデータテーブルを予め用意し、求めたパラメータを関数に代入したりデータテーブルを検索したりしている。   When obtaining oxygen saturation information as in Patent Document 2, a function or a data table using the ratio of pixel values of the obtained image as a parameter is prepared in advance, and the obtained parameter is substituted into the function or data Search the table.

こうした関数やデータテーブル等の参照情報は典型的な生体組織に基づいて作られるが、実際には参照情報は被観察部位の性状、例えば粘膜層の構造、厚さ、血管密度等に依存して変化する。被観察部位の性状には患者の個体差や消化管の部位毎の差異があるため常に典型的な生体組織が観察対象となる保障はなく、典型例から外れた生体組織を観察した場合は酸素飽和度の算出結果が信頼性のないものとなってしまう。   Reference information such as these functions and data tables are created based on typical living tissue, but in actuality the reference information depends on the properties of the site to be observed, such as the structure, thickness, and blood vessel density of the mucosal layer. Change. There is no guarantee that a typical biological tissue will be the subject of observation because there are individual differences among patients and differences in each part of the digestive tract in the properties of the observed site. The calculation result of the saturation level becomes unreliable.

特許文献2には、典型例から外れた生体組織を観察した場合に酸素飽和度の算出結果の信頼性が低下する問題について言及されておらず、当然ながらその解決策も提示されていない。   Patent Document 2 does not mention the problem that the reliability of the calculation result of the oxygen saturation is lowered when observing a biological tissue that deviates from a typical example, and naturally no solution is presented.

本発明は上述の問題点に鑑みてなされたものであり、診断に資する信頼性の高い酸素飽和度の情報を取得することができる内視鏡システムおよび内視鏡システムの作動方法を提供することを目的とする。   The present invention has been made in view of the above-described problems, and provides an endoscope system and an operation method of the endoscope system that can acquire highly reliable oxygen saturation information that contributes to diagnosis. With the goal.

上記目的を達成するために、本発明の内視鏡システムは、生体組織に存在する血管中のヘモグロビンの酸素飽和度を測定するための第一測定光を被検体の被観察部位に照射する照射手段と、第一測定光の被観察部位からの反射光を撮像して第一画素値を出力する撮像素子と、第一画素値と酸素飽和度の相関関係を規定する参照情報を記憶する記憶手段と、参照情報に基づき第一画素値に応じた酸素飽和度を算出する算出手段と、被観察部位の性状に応じて参照情報を変更する設定変更手段とを備えることを特徴とする。   In order to achieve the above object, the endoscope system of the present invention irradiates an observation site of a subject with first measurement light for measuring oxygen saturation of hemoglobin in a blood vessel existing in a living tissue. Means for imaging reflected light from the site to be observed of the first measurement light and outputting a first pixel value, and a memory for storing reference information defining a correlation between the first pixel value and the oxygen saturation Means, calculating means for calculating the oxygen saturation according to the first pixel value based on the reference information, and setting changing means for changing the reference information according to the property of the site to be observed.

病変が存在しない正常な被観察部位に照射された第一測定光に対応する第一画素値とデフォルトの参照情報とに基づき、正常な被観察部位の酸素飽和度の実測値を得るプレ撮影を実行するモードを有する。前記設定変更手段は、プレ撮影により得られた酸素飽和度の実測値と予め設定された酸素飽和度の基準値との差に応じて、デフォルトの参照情報を変更する。プレ撮影終了後、前記設定変更手段で変更された参照情報に基づき前記算出手段で酸素飽和度を算出する本撮影に移行する。   Based on the first pixel value corresponding to the first measurement light irradiated to the normal observation site where there is no lesion and the default reference information, pre-imaging to obtain the actual measured value of oxygen saturation of the normal observation site It has a mode to execute. The setting change unit changes the default reference information in accordance with a difference between an actual value of oxygen saturation obtained by pre-imaging and a preset reference value of oxygen saturation. After the pre-photographing is completed, the process shifts to the main photographing where the calculating means calculates the oxygen saturation based on the reference information changed by the setting changing means.

プレ撮影では画像を複数フレーム撮影し、複数フレーム分の画像の酸素飽和度の平均値を実測値とする。   In the pre-photographing, a plurality of frames of images are photographed, and the average value of the oxygen saturation of the images for a plurality of frames is used as an actual measurement value.

酸素飽和度の基準値は、解剖学的部位に関わらず一つの値を設定してもよいし、解剖学的部位に応じて複数の値を設定してもよい。   As the reference value for the oxygen saturation, one value may be set regardless of the anatomical site, or a plurality of values may be set according to the anatomical site.

後者の場合、被観察部位の解剖学的部位を入力する操作入力手段、または前記撮像素子から出力された画素値に基づき、被観察部位の解剖学的部位を検出する部位検出手段を備え、前記設定変更手段は、前記操作入力手段からの操作入力信号、または前記部位検出手段の検出結果に応じて基準値の設定を変更する。前記部位検出手段は、血液量の多寡に基づき、被観察部位の解剖学的部位を特定する。周知の画像認識により部位検出を行ってもよい。なお、解剖学的部位とは、具体的には食道、胃、大腸等である。   In the latter case, the operation input means for inputting the anatomical part of the observed part, or the part detecting means for detecting the anatomical part of the observed part based on the pixel value output from the imaging device, The setting change unit changes the setting of the reference value according to the operation input signal from the operation input unit or the detection result of the part detection unit. The site detection means identifies an anatomical site of the site to be observed based on the blood volume. Site detection may be performed by well-known image recognition. The anatomical site specifically includes the esophagus, stomach, large intestine, and the like.

前記算出手段は、プレ撮影で得た画像の全領域について酸素飽和度を算出する。あるいは、プレ撮影で得た画像の限定された領域について酸素飽和度を算出してもよい。   The calculation means calculates oxygen saturation for the entire region of the image obtained by pre-imaging. Alternatively, the oxygen saturation may be calculated for a limited region of an image obtained by pre-imaging.

後者の場合、前記撮像素子から出力された画素値に基づき、プレ撮影で前記算出手段が酸素飽和度を算出する画像の領域を選定する領域選定手段を備えることが好ましい。前記領域選定手段は、画像内で極端に明るい領域または極端に暗い領域以外を、酸素飽和度を算出する領域として選定する。血液量が閾値よりも多い領域、血管の密集度が閾値よりも低い領域を、酸素飽和度を算出する領域として選定してもよい。前記領域選定手段で選定した領域を前記表示手段に表示することが好ましい。   In the latter case, it is preferable that the calculation unit includes a region selection unit that selects a region of an image in which oxygen saturation is calculated by pre-photographing based on the pixel value output from the image sensor. The region selecting means selects a region other than an extremely bright region or an extremely dark region in the image as a region for calculating the oxygen saturation. An area where the blood volume is larger than the threshold and an area where the blood vessel density is lower than the threshold may be selected as the area for calculating the oxygen saturation. The area selected by the area selecting means is preferably displayed on the display means.

前記撮像素子の視野全体に正常な被観察部位を位置させてプレ撮影を実施することを促すメッセージを表示手段に表示した後、プレ撮影の開始を指示する操作入力に応じてプレ撮影を開始してもよいし、メッセージを表示せずにプレ撮影を開始してもよい。   After displaying on the display means a message that prompts the normal observation site to be positioned in the entire field of view of the image sensor and performing pre-imaging, pre-imaging is started in response to an operation input instructing the start of pre-imaging. Alternatively, pre-photographing may be started without displaying a message.

後者の場合、プレ撮影で得られた酸素飽和度の実測値が許容範囲内に収まっているか否かを判定する判定手段を備えることが好ましい。酸素飽和度の実測値が許容範囲内に収まっていた場合は以降の参照情報を変更する処理を続行し、収まっていない場合は前記撮像素子の視野全体に正常な被観察部位を位置させてプレ撮影を実施することを促すメッセージを表示手段に表示する。   In the latter case, it is preferable to include determination means for determining whether or not the actual measured value of oxygen saturation obtained by pre-imaging is within an allowable range. If the measured value of the oxygen saturation is within the allowable range, the process of changing the reference information is continued. If not, the normal observation site is positioned in the entire field of view of the image sensor. A message prompting the user to perform shooting is displayed on the display means.

被観察部位にブロードな波長帯域の白色光を連続的に照射して肉眼で観察したときと略同等の画像を表示手段に表示する通常観察モードと、第一測定光を照射して酸素飽和度の情報を算出してその結果を表示手段に表示する機能情報観察モードとを備え、各モードを切替可能に構成することが好ましい。機能情報観察モードを選択したときにプレ撮影を開始することが好ましい。   Normal observation mode in which a white light in a broad wavelength band is continuously irradiated to the site to be observed and the image is displayed on the display means almost the same as when observed with the naked eye; And a function information observation mode for displaying the result on the display means, and each mode is preferably switchable. It is preferable to start pre-shooting when the function information observation mode is selected.

第一測定光は、ヘモグロビンの吸光スペクトルにおいて酸化ヘモグロビンと還元ヘモグロビンの吸光係数に差が生じる波長帯域を含む光である。より好ましくは470nm±10nmの波長帯域の狭帯域光である。   The first measurement light is light including a wavelength band in which a difference occurs in the extinction coefficient between oxyhemoglobin and reduced hemoglobin in the absorption spectrum of hemoglobin. More preferably, it is narrowband light having a wavelength band of 470 nm ± 10 nm.

前記照射手段は、第一測定光に加えて血管中の血液量を測定するための第二測定光を被観察部位に照射し、前記撮像素子は、第二測定光の被観察部位からの反射光を撮像して第二画素値を出力する。参照情報は、第一画素値と酸素飽和度の相関関係に加えて第二画素値と血液量の相関関係を規定している。前記算出手段は、参照情報に基づき第一画素値と第二画素値に応じた酸素飽和度と血液量の両方を算出する。この場合、第二測定光は、赤色波長帯域を含む光である。   The irradiation means irradiates the site to be observed with second measurement light for measuring the blood volume in the blood vessel in addition to the first measurement light, and the imaging element reflects the second measurement light from the site to be observed. The light is imaged and a second pixel value is output. The reference information defines the correlation between the second pixel value and the blood volume in addition to the correlation between the first pixel value and the oxygen saturation. The calculation means calculates both oxygen saturation and blood volume according to the first pixel value and the second pixel value based on the reference information. In this case, the second measurement light is light including a red wavelength band.

また、前記照射手段は、第一、第二測定光に加えて参照光を被観察部位に照射し、前記撮像素子は、参照光の被観察部位からの反射光を撮像して第三画素値を出力する。前記算出手段は、第一、第二、および第三画素値に基づき酸素飽和度と血液量を算出する。   In addition to the first and second measurement light, the irradiating means irradiates the observation site with the reference light, and the imaging device images the reflected light from the observation site of the reference light to obtain a third pixel value. Is output. The calculation means calculates oxygen saturation and blood volume based on the first, second, and third pixel values.

より詳しくは、前記算出手段は、酸素飽和度と血液量の両方に依存性を有する第一画素値および第三画素値の比である第一信号比と、血液量に依存性を有する第二画素値および第三画素値の比である第二信号比とを求める。参照情報は、酸素飽和度と第一、第二信号比との相関関係と、血液量と第二信号比との相関関係を規定している。前記算出手段は、該参照情報から第二信号比に対応する血液量を求めるとともに、第一、第二信号比に対応する酸素飽和度を求める。   More specifically, the calculation means includes a first signal ratio that is a ratio between a first pixel value and a third pixel value that are dependent on both oxygen saturation and blood volume, and a second signal that is dependent on blood volume. A second signal ratio that is a ratio of the pixel value and the third pixel value is obtained. The reference information defines the correlation between the oxygen saturation and the first and second signal ratios, and the correlation between the blood volume and the second signal ratio. The calculation means obtains the blood volume corresponding to the second signal ratio from the reference information and obtains the oxygen saturation corresponding to the first and second signal ratios.

また、本発明の内視鏡システムの作動方法は、照射手段と、撮像素子と、記憶手段と、算出手段と、設定変更手段とを備える内視鏡システムの作動方法であって、照射手段により、生体組織に存在する血管中のヘモグロビンの酸素飽和度を測定するための第一測定光を発生する測定光発生ステップと、撮像素子により、第一測定光の被観察部位からの反射光を撮像して第一画素値を出力する撮像ステップと、記憶手段に記憶された、第一画素値と酸素飽和度の相関関係を規定する参照情報に基づき、算出手段により、第一画素値に応じた酸素飽和度を算出する算出ステップと、設定変更手段により、被観察部位の性状に応じて参照情報を変更する設定変更ステップとを備えることを特徴とする。   An operation method of the endoscope system according to the present invention is an operation method of an endoscope system including an irradiation unit, an imaging device, a storage unit, a calculation unit, and a setting change unit, Imaging the reflected light from the observation site of the first measurement light by the measurement light generation step for generating the first measurement light for measuring the oxygen saturation of hemoglobin in the blood vessel existing in the living tissue and the imaging device In accordance with the first pixel value by the calculating means based on the imaging step of outputting the first pixel value and the reference information that defines the correlation between the first pixel value and the oxygen saturation stored in the storage means A calculation step for calculating the oxygen saturation, and a setting change step for changing the reference information in accordance with the property of the site to be observed by the setting changing means.

本発明によれば、被観察部位の性状に応じて、生体組織に存在する血管中のヘモグロビンの酸素飽和度を算出する際の参照情報を変更するので、診断に資する信頼性の高い酸素飽和度の情報を取得することができる。   According to the present invention, since the reference information for calculating the oxygen saturation level of hemoglobin in the blood vessel existing in the living tissue is changed according to the property of the site to be observed, the oxygen saturation level that contributes to diagnosis is highly reliable. Information can be acquired.

電子内視鏡システムの構成を示す外観図である。It is an external view which shows the structure of an electronic endoscope system. 電子内視鏡システムの構成を示すブロック図である。It is a block diagram which shows the structure of an electronic endoscope system. 電子内視鏡の先端の構成を示す平面図である。It is a top view which shows the structure of the front-end | tip of an electronic endoscope. ベイヤー配列のカラーフィルタを示す図である。It is a figure which shows the color filter of a Bayer arrangement. CCDのRGB各画素の分光感度特性を示すグラフである。It is a graph which shows the spectral sensitivity characteristic of each RGB pixel of CCD. 励起光、狭帯域光、および蛍光の発光スペクトルを表すグラフである。It is a graph showing the emission spectrum of excitation light, narrowband light, and fluorescence. CCDおよび第一、第二半導体光源の動作を示すタイミングチャートである。It is a timing chart which shows operation | movement of CCD and a 1st, 2nd semiconductor light source. 画像処理部の構成を示す図である。It is a figure which shows the structure of an image process part. 参照情報の例を示すグラフである。It is a graph which shows the example of reference information. 酸化ヘモグロビンと還元ヘモグロビンの吸光特性を示すグラフである。It is a graph which shows the light absorption characteristic of oxygenated hemoglobin and reduced hemoglobin. 血液量画像および酸素飽和度画像の生成手順を示すブロック図である。It is a block diagram which shows the production | generation procedure of a blood volume image and an oxygen saturation image. 血液量画像および酸素飽和度画像を生成するためのカラーマップを示す図である。It is a figure which shows the color map for producing | generating a blood volume image and an oxygen saturation image. プレ撮影の実施を促すメッセージウィンドウを示す図である。It is a figure which shows the message window which urges implementation of pre imaging | photography. 設定変更部による参照情報の変更の様子を説明するための図である。It is a figure for demonstrating the mode of the change of the reference information by a setting change part. 機能情報観察モードの処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of function information observation mode. 機能情報観察モードへの切替と同時にプレ撮影を実施する例を示すフローチャートである。It is a flowchart which shows the example which implements pre imaging | photography simultaneously with the switch to function information observation mode. 酸素飽和度の実測値を算出する領域の表示例を示す図である。It is a figure which shows the example of a display of the area | region which calculates the actual value of oxygen saturation. ロータリーフィルタを示す図である。It is a figure which shows a rotary filter.

図1において、電子内視鏡システム2は、電子内視鏡10、プロセッサ装置11、および光源装置12からなる。電子内視鏡10は、周知の如く、被検体(患者)内に挿入される可撓性の挿入部13と、挿入部13の基端部分に連設された操作部14と、プロセッサ装置11および光源装置12に接続されるコネクタ15と、操作部14、コネクタ15間を繋ぐユニバーサルコード16とを有する。   In FIG. 1, the electronic endoscope system 2 includes an electronic endoscope 10, a processor device 11, and a light source device 12. As is well known, the electronic endoscope 10 includes a flexible insertion portion 13 to be inserted into a subject (patient), an operation portion 14 connected to a proximal end portion of the insertion portion 13, and a processor device 11. And a connector 15 connected to the light source device 12, an operation unit 14, and a universal cord 16 that connects the connectors 15.

操作部14には、挿入部13の先端17を上下左右方向に湾曲させるためのアングルノブや、送気・送水ノズルからエアー、水を噴出させるための送気・送水ボタンの他、観察画像を静止画記録するためのレリーズボタンといった操作部材が設けられている。   The operation unit 14 includes an angle knob for bending the distal end 17 of the insertion unit 13 in the vertical and horizontal directions, an air supply / water supply button for ejecting air and water from the air supply / water supply nozzle, and an observation image. An operation member such as a release button for recording a still image is provided.

また、操作部14の先端側には、電気メス等の処置具が挿通される鉗子口が設けられている。鉗子口は、挿入部13内の鉗子チャンネルを通して、先端17に設けられた鉗子出口40(図3参照)に連通している。   Further, a forceps port through which a treatment tool such as an electric knife is inserted is provided on the distal end side of the operation unit 14. The forceps port communicates with a forceps outlet 40 (see FIG. 3) provided at the distal end 17 through a forceps channel in the insertion portion 13.

プロセッサ装置11は、光源装置12と電気的に接続され、電子内視鏡システム2の動作を統括的に制御する。プロセッサ装置11は、ユニバーサルコード16や挿入部13内に挿通された伝送ケーブルを介して電子内視鏡10に給電を行い、先端17に搭載されたCCD33(図2参照)の駆動を制御する。また、プロセッサ装置11は、伝送ケーブルを介してCCD33から出力された撮像信号を受信し、受信した撮像信号に各種処理を施して画像データを生成する。プロセッサ装置11で生成された画像データは、プロセッサ装置11にケーブル接続されたモニタ18に観察画像として表示される。   The processor device 11 is electrically connected to the light source device 12 and comprehensively controls the operation of the electronic endoscope system 2. The processor device 11 supplies power to the electronic endoscope 10 via the universal cord 16 and a transmission cable inserted into the insertion portion 13, and controls the drive of the CCD 33 (see FIG. 2) mounted on the distal end 17. In addition, the processor device 11 receives the imaging signal output from the CCD 33 via the transmission cable, and performs various processes on the received imaging signal to generate image data. Image data generated by the processor device 11 is displayed as an observation image on a monitor 18 connected to the processor device 11 by a cable.

電子内視鏡システム2には、被検体の被観察部位に白色光を照射して観察する通常観察モードと、被観察部位に白色光および狭帯域光を照射して、生体組織の血管中のヘモグロビンの酸素飽和度と血液量を算出する機能情報観察モードとが用意されている。各モードの切替は操作部14のモード切替スイッチ19を操作することにより行われる。電子内視鏡システム2の電源投入直後は通常観察モードが自動的に選択される。   The electronic endoscope system 2 has a normal observation mode in which the observation site of the subject is irradiated with white light and is observed, and the observation site is irradiated with white light and narrowband light in the blood vessel of the living tissue. A function information observation mode for calculating the oxygen saturation of hemoglobin and the blood volume is prepared. Each mode is switched by operating the mode switch 19 of the operation unit 14. The normal observation mode is automatically selected immediately after the electronic endoscope system 2 is turned on.

図2および図3において、先端17には、略中央に配置された一つの観察窓30とその両脇に配置された四つの照明窓31a、31b、31c、31dが設けられている。観察窓30の奥には、レンズ群およびプリズムからなる対物光学系32を介して、被検体内撮影用のCCD33が配されている。   2 and 3, the distal end 17 is provided with one observation window 30 disposed substantially at the center and four illumination windows 31a, 31b, 31c, and 31d disposed on both sides thereof. In the back of the observation window 30, a CCD 33 for in-subject imaging is arranged via an objective optical system 32 including a lens group and a prism.

照明窓31a〜31dは、ユニバーサルコード16や挿入部13に配設されたライトガイド34a、34b、34c、34d、および照明レンズ35a、35b、35c、35dで導光される光源装置12からの照明光を被観察部位に照射する。照明窓31a、31dは白色光照射用、照明窓31b、31cは狭帯域光照射用である。照明窓31a〜31dは、照明窓31a、31dの中心を結ぶ直線a1と照明窓31b、31cの中心を通る直線a2とが観察窓30の中心で交差するように、白色光照射用と狭帯域光照射用が互い違いに配置されている。このような配置にすることで、照明ムラの発生を防止することができる。なお、図2では白色光照射用と狭帯域光照射用の照明系をまとめて描いているが、実際には白色光照射用、狭帯域光照射用で二系統、計四系統の照明系が配設されている。白色光照射用と狭帯域光照射用でそれぞれ一つの照明系とし、照明窓も二つにした二灯式であってもよい。   The illumination windows 31a to 31d are illuminations from the light source device 12 guided by the light guides 34a, 34b, 34c, and 34d disposed in the universal cord 16 and the insertion portion 13 and the illumination lenses 35a, 35b, 35c, and 35d. Light is irradiated to the site to be observed. The illumination windows 31a and 31d are for white light irradiation, and the illumination windows 31b and 31c are for narrow-band light irradiation. The illumination windows 31a to 31d are narrow band for white light irradiation so that a straight line a1 connecting the centers of the illumination windows 31a and 31d and a straight line a2 passing through the centers of the illumination windows 31b and 31c intersect at the center of the observation window 30. Light irradiation is arranged alternately. With such an arrangement, it is possible to prevent uneven illumination. In FIG. 2, the illumination systems for white light irradiation and narrow band light irradiation are drawn together, but in reality, there are two systems for white light irradiation and narrow band light irradiation, for a total of four systems. It is arranged. A two-lamp type may be used in which one illumination system is used for each of white light irradiation and narrow-band light irradiation, and two illumination windows are provided.

CCD33は、観察窓30、対物光学系32を経由した被検体内の被観察部位の像が撮像面に入射するように配置されている。撮像面には複数の色セグメントからなるカラーフィルタ、例えば、図4に示すベイヤー配列(R−赤、G−緑、B−青)の原色カラーフィルタ36が形成されている。原色カラーフィルタ36の分光透過率、および画素自体の分光感度によって、CCD33のRGB各画素の分光感度特性は図5に示すようになる。R画素は650nm近傍、G画素は550nm近傍、B画素は450nm近傍の波長の光にそれぞれ感度を有する。RGB各画素の感度は幾つかの波長帯域でオーバーラップしており、例えばB画素とG画素はともに、450nm〜530nmの波長帯域に感度を有する。   The CCD 33 is arranged so that an image of the observation site in the subject via the observation window 30 and the objective optical system 32 is incident on the imaging surface. On the imaging surface, a color filter composed of a plurality of color segments, for example, a primary color filter 36 having a Bayer arrangement (R-red, G-green, B-blue) shown in FIG. 4 is formed. Depending on the spectral transmittance of the primary color filter 36 and the spectral sensitivity of the pixel itself, the spectral sensitivity characteristics of the RGB pixels of the CCD 33 are as shown in FIG. The R pixel is sensitive to light having a wavelength near 650 nm, the G pixel is sensitive to light having a wavelength near 550 nm, and the B pixel is sensitive to light having a wavelength near 450 nm. The sensitivity of each RGB pixel overlaps in several wavelength bands. For example, both the B pixel and the G pixel have sensitivity in a wavelength band of 450 nm to 530 nm.

図2において、アナログ信号処理回路(以下、AFEと略す)37は、相関二重サンプリング回路(以下、CDSと略す)、自動ゲイン制御回路(以下、AGCと略す)、およびアナログ/デジタル変換器(以下、A/Dと略す)から構成されている。CDSは、CCD33から出力される撮像信号に対して相関二重サンプリング処理を施し、CCD33で生じるリセット雑音およびアンプ雑音の除去を行う。AGCは、CDSによりノイズ除去が行われた撮像信号を、プロセッサ装置11から指定されるゲイン(増幅率)で増幅する。A/Dは、AGCにより増幅された撮像信号を所定のビット数のデジタル信号に変換する。A/Dでデジタル化された撮像信号は、伝送ケーブルを介してプロセッサ装置11の画像処理回路49に入力される。   In FIG. 2, an analog signal processing circuit (hereinafter abbreviated as AFE) 37 includes a correlated double sampling circuit (hereinafter abbreviated as CDS), an automatic gain control circuit (hereinafter abbreviated as AGC), and an analog / digital converter ( Hereinafter, this is abbreviated as A / D). The CDS performs correlated double sampling processing on the imaging signal output from the CCD 33, and removes reset noise and amplifier noise generated in the CCD 33. The AGC amplifies the image signal from which noise has been removed by CDS with a gain (amplification factor) specified by the processor device 11. The A / D converts the imaging signal amplified by the AGC into a digital signal having a predetermined number of bits. The imaging signal digitized by A / D is input to the image processing circuit 49 of the processor device 11 through a transmission cable.

CCD駆動回路38は、CCD33の駆動パルス(垂直/水平走査パルス、電子シャッタパルス、読み出しパルス、リセットパルス等)とAFE37用の同期パルスとを発生する。CCD33は、CCD駆動回路38からの駆動パルスに応じて撮像動作を行い、撮像信号を出力する。AFE37の各部は、CCD駆動回路38からの同期パルスに基づいて動作する。   The CCD driving circuit 38 generates a driving pulse (vertical / horizontal scanning pulse, electronic shutter pulse, readout pulse, reset pulse, etc.) for the CCD 33 and a synchronization pulse for the AFE 37. The CCD 33 performs an imaging operation in accordance with the driving pulse from the CCD driving circuit 38 and outputs an imaging signal. Each part of the AFE 37 operates based on a synchronization pulse from the CCD drive circuit 38.

CPU39は、電子内視鏡10とプロセッサ装置11とが接続された後、プロセッサ装置11のCPU45からの動作開始指示に基づいて、CCD駆動回路38を駆動させるとともに、CCD駆動回路38を介してAFE37のAGCのゲインを調整する。   After the electronic endoscope 10 and the processor device 11 are connected, the CPU 39 drives the CCD drive circuit 38 based on an operation start instruction from the CPU 45 of the processor device 11, and the AFE 37 via the CCD drive circuit 38. Adjust the gain of AGC.

CPU45は、プロセッサ装置11全体の動作を統括的に制御する。CPU45は、図示しないデータバスやアドレスバス、制御線を介して各部と接続している。ROM46には、プロセッサ装置11の動作を制御するための各種プログラム(OS、アプリケーションプログラム等)やデータ(グラフィックデータ等)が記憶されている。CPU45は、ROM46から必要なプログラムやデータを読み出して、作業用メモリであるRAM47に展開し、読み出したプログラムを逐次処理する。また、CPU45は、検査日時、患者や術者の情報等の文字情報といった検査毎に変わる情報を、プロセッサ装置11の操作パネルやLAN(Local Area Network)等のネットワークより得て、RAM47に記憶する。   The CPU 45 controls the overall operation of the processor device 11. The CPU 45 is connected to each unit via a data bus, an address bus, and a control line (not shown). The ROM 46 stores various programs (OS, application programs, etc.) and data (graphic data, etc.) for controlling the operation of the processor device 11. The CPU 45 reads necessary programs and data from the ROM 46, develops them in the RAM 47, which is a working memory, and sequentially processes the read programs. Further, the CPU 45 obtains information that changes for each examination, such as examination date and time, character information such as patient and surgeon information, from the operation panel of the processor device 11 or a network such as a LAN (Local Area Network) and stores the information in the RAM 47. .

操作部48は、プロセッサ装置11の筐体に設けられる操作パネル、あるいは、マウスやキーボード等の周知の入力デバイスである。CPU45は、操作部48、および電子内視鏡10の操作部14にあるレリーズボタンやモード切替スイッチ19等からの操作入力信号に応じて、各部を動作させる。   The operation unit 48 is an operation panel provided on the housing of the processor device 11 or a known input device such as a mouse or a keyboard. The CPU 45 operates each unit in response to operation input signals from the operation unit 48 and the release button, the mode change switch 19, and the like in the operation unit 14 of the electronic endoscope 10.

画像処理回路49は、電子内視鏡10から入力された撮像信号に対して、色補間、ホワイトバランス調整、ガンマ補正、画像強調、画像用ノイズリダクション、色変換等の各種画像処理を施す他、後述する血液量および酸素飽和度の算出を行う。   The image processing circuit 49 performs various kinds of image processing such as color interpolation, white balance adjustment, gamma correction, image enhancement, image noise reduction, color conversion, and the like on the imaging signal input from the electronic endoscope 10. The blood volume and oxygen saturation described later are calculated.

表示制御回路50は、CPU45からROM46およびRAM47のグラフィックデータを受け取る。グラフィックデータには、観察画像の無効画素領域を隠して有効画素領域のみを表示させる表示用マスク、検査日時、あるいは患者や術者、現在選択されている観察モード等の文字情報、グラフィカルユーザインターフェース(GUI;Graphical User Interface)等がある。表示制御回路50は、画像処理回路49からの画像に対して、表示用マスク、文字情報、GUIの重畳処理、モニタ18の表示画面への描画処理等の各種表示制御処理を施す。   The display control circuit 50 receives graphic data in the ROM 46 and RAM 47 from the CPU 45. The graphic data includes a display mask that hides the invalid pixel area of the observation image and displays only the effective pixel area, examination date and time, character information such as the patient, the operator, and the currently selected observation mode, a graphical user interface ( GUI; Graphical User Interface). The display control circuit 50 performs various display control processes such as a display mask, character information, GUI superimposition processing, and drawing processing on the display screen of the monitor 18 on the image from the image processing circuit 49.

表示制御回路50は、画像処理回路49からの画像を一時的に格納するフレームメモリを有する。表示制御回路50は、フレームメモリから画像を読み出し、読み出した画像をモニタ18の表示形式に応じたビデオ信号(コンポーネント信号、コンポジット信号等)に変換する。これにより、モニタ18に観察画像が表示される。   The display control circuit 50 has a frame memory that temporarily stores the image from the image processing circuit 49. The display control circuit 50 reads an image from the frame memory and converts the read image into a video signal (component signal, composite signal, etc.) corresponding to the display format of the monitor 18. Thereby, an observation image is displayed on the monitor 18.

プロセッサ装置11には、上記の他にも、画像に所定の圧縮形式(例えばJPEG形式)で画像圧縮を施す圧縮処理回路や、圧縮された画像をCFカード、光磁気ディスク(MO)、CD−R等のリムーバブルメディアに記録するメディアI/F、LAN等のネットワークとの間で各種データの伝送制御を行うネットワークI/F等が設けられている。これらはデータバス等を介してCPU45と接続されている。   In addition to the above, the processor device 11 includes a compression processing circuit for compressing an image in a predetermined compression format (for example, JPEG format), and the compressed image is stored in a CF card, a magneto-optical disk (MO), a CD- A media I / F for recording on removable media such as R, and a network I / F for controlling transmission of various data with a network such as a LAN are provided. These are connected to the CPU 45 via a data bus or the like.

光源装置12は、第一半導体レーザ光源55および第二半導体レーザ光源56を有する。各光源55、56は、ブロードエリア型のInGaN系、InGaNAs系、あるいはGaNAs系の半導体レーザダイオードである。図6に示すように、第一半導体レーザ光源55は、ライトガイド34a、34dの出射端に配された波長変換部材41を励起発光させるための励起光、例えば中心波長445nmの青色の励起光L1を発する。一方第二半導体レーザ光源56は、血管中のヘモグロビンの酸素飽和度を算出するための狭帯域光、例えば波長帯域が470±10nmに、好ましくは473nmに制限された狭帯域光L2(第一測定光)を発する。   The light source device 12 includes a first semiconductor laser light source 55 and a second semiconductor laser light source 56. Each of the light sources 55 and 56 is a broad area type InGaN-based, InGaNAs-based, or GaNAs-based semiconductor laser diode. As shown in FIG. 6, the first semiconductor laser light source 55 is excitation light for exciting the wavelength conversion member 41 disposed at the emission ends of the light guides 34a and 34d, for example, blue excitation light L1 having a center wavelength of 445 nm. To emit. On the other hand, the second semiconductor laser light source 56 is a narrowband light for calculating the oxygen saturation of hemoglobin in the blood vessel, for example, a narrowband light L2 (first measurement) whose wavelength band is limited to 470 ± 10 nm, preferably 473 nm. Light).

各光源55、56は、光源ドライバ57、58によってそれぞれ駆動される。集光レンズ59、60は、各光源55、56から発せられた各光を集光して、各光源55、56の出射端側に配された二本のライトガイド61、62に導光する。ライトガイド61、62は合波器であるコンバイナ63に接続し、コンバイナ63は分波器であるカプラー64に接続している。ライトガイド61、62からの光は、コンバイナ63およびカプラー64を介して四本のライトガイド34a〜34dに分波される。集光レンズ59、60とライトガイド61、62の間には、ライトガイド61、62の入射端に入射させる光の光量を調節するための可動絞り65、66が設けられている。なお、コンバイナ63やカプラー64を設けるのではなく、各光源55、56からの光を直接ライトガイド34a〜34dに入射させる構成としてもよい。   The light sources 55 and 56 are driven by light source drivers 57 and 58, respectively. The condensing lenses 59 and 60 collect the light emitted from the light sources 55 and 56 and guide the light to the two light guides 61 and 62 arranged on the emission end side of the light sources 55 and 56. . The light guides 61 and 62 are connected to a combiner 63 that is a multiplexer, and the combiner 63 is connected to a coupler 64 that is a duplexer. Light from the light guides 61 and 62 is demultiplexed into four light guides 34 a to 34 d via a combiner 63 and a coupler 64. Between the condensing lenses 59 and 60 and the light guides 61 and 62, there are provided movable diaphragms 65 and 66 for adjusting the amount of light incident on the incident ends of the light guides 61 and 62. Instead of providing the combiner 63 and the coupler 64, the light from each of the light sources 55 and 56 may be directly incident on the light guides 34a to 34d.

ライトガイド34a、34dと照明レンズ35a、35dの間に配された波長変換部材41は、第一半導体レーザ光源55からの青色の励起光L1の一部を吸収して緑色〜黄色に励起発光する複数種の蛍光体が分散配置、または表面に塗布されたガラスである。この波長変換部材41で励起発光する緑色〜黄色の蛍光(図6にL3で示す)と蛍光体の励起発光に寄与しない青色の励起光L1とが合波されて白色光が生成され、照明窓31a、31dを通して被観察部位に照射される。この白色光の赤色波長帯域の光が血液量を求めるための第二測定光として用いられ、緑色波長帯域の光が参照光として用いられる。なお、蛍光体としては、例えばYAG系蛍光物質、或いはBAM(BaMgAl1017)等の蛍光物質が用いられ、商品名としてマイクロホワイト(登録商標)(Micro White(MW))とも呼ばれている。 The wavelength conversion member 41 disposed between the light guides 34a and 34d and the illumination lenses 35a and 35d absorbs part of the blue excitation light L1 from the first semiconductor laser light source 55 and emits light in the green to yellow excitation. It is a glass in which a plurality of types of phosphors are dispersedly arranged or coated on the surface. The green to yellow fluorescence (indicated by L3 in FIG. 6) excited by the wavelength conversion member 41 and the blue excitation light L1 that does not contribute to the excitation light emission of the phosphor are combined to generate white light, and the illumination window The region to be observed is irradiated through 31a and 31d. The white light in the red wavelength band is used as the second measurement light for determining the blood volume, and the green wavelength band light is used as the reference light. As the phosphor, for example, YAG fluorescent substance, or a fluorescent substance such as BAM (BaMgAl 10 O 17) is used, also called a micro-white (trademark) (Micro White (MW)) under the trade name .

図5の分光感度特性より、中心波長445nmの励起光L1の反射光にはB画素のみが感応する。中心波長473nmの狭帯域光L2の反射光には、B画素およびG画素が感応する。蛍光L3は概ね450nm〜700nmのブロードな光であるため、RGB全ての画素が感応する。   From the spectral sensitivity characteristics of FIG. 5, only the B pixel is sensitive to the reflected light of the excitation light L1 having the center wavelength of 445 nm. The B pixel and the G pixel are sensitive to the reflected light of the narrowband light L2 having the center wavelength of 473 nm. Since the fluorescence L3 is broad light of approximately 450 nm to 700 nm, all pixels of RGB are sensitive.

光源装置12のCPU67は、プロセッサ装置11のCPU45と通信し、光源ドライバ57、58を介して各光源55、56の各レーザ光の点消灯制御および可動絞り65、66による光量制御を各光源55、56および各可動絞り65、66別に行う。   The CPU 67 of the light source device 12 communicates with the CPU 45 of the processor device 11, and turns on / off the laser light of each light source 55, 56 and controls the light amount by the movable diaphragms 65, 66 via the light source drivers 57, 58. , 56 and each movable diaphragm 65, 66.

通常観察モードが選択された場合、CPU45は、CPU67を介して光源ドライバ57の駆動を制御して、第一半導体レーザ光源55のみを点灯させる。被観察部位に照射される照明光は第一半導体レーザ光源55からの中心波長445nmの励起光L1と波長変換部材41からの蛍光L3が混合された白色光のみとなる。   When the normal observation mode is selected, the CPU 45 controls the driving of the light source driver 57 via the CPU 67 and turns on only the first semiconductor laser light source 55. The illumination light applied to the site to be observed is only white light in which excitation light L1 having a central wavelength of 445 nm from the first semiconductor laser light source 55 and fluorescence L3 from the wavelength conversion member 41 are mixed.

機能情報観察モードが選択された場合は、CPU45は、CPU67を介して光源ドライバ57、58の駆動を制御して、図7に示すように各光源55、56を点灯させる。すなわち、各光源55、56のうちの一方を点灯させているときは他方を消灯させる。そしてこの点消灯動作をCCD33の蓄積・読出期間単位で繰り返す。被観察部位に照射される照明光は、白色光L1+L3、または狭帯域光L2となる。なお、CCD33の蓄積期間だけ各光源55、56のいずれかを点灯し、続く読出期間から次の蓄積期間まで該光源を消灯させてもよい。   When the function information observation mode is selected, the CPU 45 controls the driving of the light source drivers 57 and 58 via the CPU 67 to turn on the light sources 55 and 56 as shown in FIG. That is, when one of the light sources 55 and 56 is turned on, the other is turned off. The lighting / light-out operation is repeated for each accumulation / reading period of the CCD 33. The illumination light applied to the site to be observed is white light L1 + L3 or narrowband light L2. Note that one of the light sources 55 and 56 may be turned on only during the accumulation period of the CCD 33, and the light source may be turned off from the subsequent readout period to the next accumulation period.

図8において、画像処理回路49には、血液情報算出部70が設けられている。血液情報算出部70は、機能情報観察モードで被観察部位に白色光および狭帯域光を交互に照射してその反射光を撮像した連続する二組の画像P1、P2(図7参照、P1=第一画像、P2=第二画像)に基づき、血管中のヘモグロビンの酸素飽和度と血液量を算出する。   In FIG. 8, the image processing circuit 49 is provided with a blood information calculation unit 70. The blood information calculation unit 70 irradiates the observation site with white light and narrowband light alternately in the function information observation mode, and images two reflected images P1 and P2 (see FIG. 7, P1 = Based on the first image, P2 = second image), the oxygen saturation and blood volume of hemoglobin in the blood vessel are calculated.

血液情報算出部70は、機能情報観察モードで被観察部位に白色光および狭帯域光を照射して得た連続する二組の画像P1、P2をそれぞれ一時的に記憶するフレームメモリ(図示せず)を有する。血液情報算出部70は、フレームメモリから各画像P1、P2を読み出し、各画像P1、P2の画素値を用いた種々の演算、例えば各画像P1、P2間の画素値の比をとる。なお、各画像P1、P2の全体ではなく、各画像P1、P2中の血管領域に対してのみ比を算出してもよい。この場合は血液情報算出部70の前段でAFE37から入力される画像を解析し、例えば血管部分とそれ以外の部分の輝度値の差を参照することで血管が映し出された領域を特定し、特定した血管領域の情報を画像とともに血液情報算出部70に出力する。   The blood information calculation unit 70 is a frame memory (not shown) that temporarily stores two successive images P1 and P2 obtained by irradiating the observation site with white light and narrowband light in the function information observation mode. ). The blood information calculation unit 70 reads the images P1 and P2 from the frame memory and takes various calculations using the pixel values of the images P1 and P2, for example, the ratio of the pixel values between the images P1 and P2. Note that the ratio may be calculated only for the blood vessel region in each of the images P1 and P2 instead of the entire images P1 and P2. In this case, the image input from the AFE 37 is analyzed in the preceding stage of the blood information calculation unit 70, and the region where the blood vessel is projected is identified by referring to, for example, the difference in luminance value between the blood vessel portion and the other portion. The blood vessel region information is output to the blood information calculation unit 70 together with the image.

白色光を照射して得られた第一画像P1と、続いて狭帯域光を照射して得られた第二画像P2の画素値の比を用いて酸素飽和度と血液量を算出する場合、血液情報算出部70は、同じ位置にある第二画像P2のB画素値b2(第一画素値)と第一画像P1のG画素値g1(第三画素値)の比b2/g1(第一信号比)、および同じ位置にある第一画像P1のR画素値r1(第二画素値)とG画素値g1(第三画素値)の比r1/g1(第二信号比)を算出し、参照情報71に基づいて酸素飽和度および血液量を算出する。   When calculating the oxygen saturation and the blood volume using the ratio of the pixel values of the first image P1 obtained by irradiating the white light and the second image P2 obtained by subsequently irradiating the narrow band light, The blood information calculation unit 70 has a ratio b2 / g1 (first pixel value) of the B pixel value b2 (first pixel value) of the second image P2 and the G pixel value g1 (third pixel value) of the first image P1 at the same position. Signal ratio), and the ratio r1 / g1 (second signal ratio) of the R pixel value r1 (second pixel value) and the G pixel value g1 (third pixel value) of the first image P1 at the same position, Based on the reference information 71, the oxygen saturation and the blood volume are calculated.

参照情報71は、例えばROM46や画像処理回路49のメモリ内に予め記憶されており、図9に示すような各信号比と酸素飽和度および血液量の相関関係を関数あるいはデータテーブルの形式でもつ。各信号比と酸素飽和度および血液量の関係は実験等で予め求められる。血液量は第二信号比であるr1/g1(logスケール)と相関関係があり、比r1/g1が大きい程血液量も多くなる。一方、酸素飽和度は、第一信号比b2/g1と第二信号比r1/g1を縦横軸とする二次元空間上に張り巡らされた複数本の等高線で表される。等高線は、比r1/g1すなわち血液量が多くなるに連れてその幅が広くなっている。   The reference information 71 is stored in advance in the memory of the ROM 46 or the image processing circuit 49, for example, and has a correlation between each signal ratio, oxygen saturation and blood volume as shown in FIG. 9 in the form of a function or a data table. . The relationship between each signal ratio, oxygen saturation, and blood volume is obtained in advance by experiments or the like. The blood volume is correlated with the second signal ratio r1 / g1 (log scale), and the larger the ratio r1 / g1, the greater the blood volume. On the other hand, the oxygen saturation is represented by a plurality of contour lines stretched over a two-dimensional space having the first signal ratio b2 / g1 and the second signal ratio r1 / g1 as vertical and horizontal axes. The contour line becomes wider as the ratio r1 / g1, that is, the blood volume increases.

各信号比と酸素飽和度および血液量の相関関係は、図10に示す酸化ヘモグロビンHbOと還元ヘモグロビンHbの吸光特性や光散乱特性と密接に関連性し合っている。狭帯域光L2の波長帯域である473nmのように、酸化ヘモグロビンHbOと還元ヘモグロビンHbの吸光係数の差が大きい波長の光を照射して得た信号からは酸素飽和度の情報を取り易い。しかしながら該信号は酸素飽和度だけでなく血液量にも依存度が高い。 The correlation between each signal ratio, oxygen saturation, and blood volume is closely related to the light absorption characteristics and light scattering characteristics of oxygenated hemoglobin HbO 2 and reduced hemoglobin Hb shown in FIG. Information on oxygen saturation is easily obtained from a signal obtained by irradiating light having a wavelength with a large difference in extinction coefficient between oxygenated hemoglobin HbO 2 and reduced hemoglobin Hb, such as 473 nm which is the wavelength band of the narrowband light L2. However, the signal is highly dependent not only on oxygen saturation but also on blood volume.

図10から以下の二つのことが言える。
・波長470nm近辺(例えば、中心波長470nm±10nmの青色の波長帯域)では酸素飽和度の変化に応じて吸光係数が大きく変化する。
・590〜700nmの赤色の波長帯域では、酸素飽和度によって一見吸光係数が大きく変化するように見えるが、吸光係数の値自体が非常に小さいので、結果的に酸素飽和度の影響を受けにくい。
The following two things can be said from FIG.
In the vicinity of the wavelength of 470 nm (for example, the blue wavelength band of the central wavelength of 470 nm ± 10 nm), the extinction coefficient changes greatly according to the change in the oxygen saturation.
-In the red wavelength band of 590 to 700 nm, it seems that the extinction coefficient changes greatly depending on the oxygen saturation, but the extinction coefficient itself is very small, so that it is hardly affected by the oxygen saturation.

こうした知見を踏まえて、機能情報観察モードにおいては、第一測定光として青色波長帯域の狭帯域光L2を用い、狭帯域光L2に対応する第二画像P2のB画素値b2を取得し、白色光のうち主として血液量に依存して変化する赤色波長帯域の光を第二測定光として用い、赤色波長帯域の光に対応する第一画像P1のR画素値r1を取得する。そして、酸素飽和度と血液量の両方に依存性を示す第一信号比b2/g1と、血液量のみ依存性を示す第二信号比r1/g1の二つの信号比を用いて、血液量の影響を除去した酸素飽和度を正確に求めている。   Based on such knowledge, in the functional information observation mode, the narrow band light L2 in the blue wavelength band is used as the first measurement light, the B pixel value b2 of the second image P2 corresponding to the narrow band light L2 is acquired, and white Of the light, the light in the red wavelength band that changes mainly depending on the blood volume is used as the second measurement light, and the R pixel value r1 of the first image P1 corresponding to the light in the red wavelength band is acquired. Then, using the two signal ratios of the first signal ratio b2 / g1 showing dependence on both oxygen saturation and blood volume and the second signal ratio r1 / g1 showing dependence only on blood volume, The oxygen saturation without the influence is accurately obtained.

血液情報算出部70は、算出した各信号比を関数に代入して演算したりデータテーブルを検索したりして、当該信号比に対応する酸素飽和度および血液量を参照情報71から求める。血液量については、算出した比r1*/g1*がそのまま血液量となる。酸素飽和度は、算出した比b2*/g1*および比r1*/g1*に対応する点Pと交わる等高線の値(本例では60%)が採用される。比b2*/g1*および比r1*/g1*に対応する点が酸素飽和度=0%限界の下限ラインlminよりも上方に位置するとき(点P’)には酸素飽和度を0%とし、酸素飽和度=100%限界の上限ラインlmaxよりも下方に位置するとき(点P’’)には酸素飽和度を100%とする。あるいは、いずれの場合もその画素の酸素飽和度の算出を行わない。血液情報算出部70は、これら血液量および酸素飽和度の算出結果を画像生成部72に出力する。   The blood information calculation unit 70 calculates the oxygen saturation and blood volume corresponding to the signal ratio from the reference information 71 by substituting the calculated signal ratios into functions and performing calculations or searching a data table. Regarding the blood volume, the calculated ratio r1 * / g1 * is directly used as the blood volume. As the oxygen saturation, a value of a contour line (60% in this example) intersecting with the point P corresponding to the calculated ratio b2 * / g1 * and ratio r1 * / g1 * is adopted. When the point corresponding to the ratio b2 * / g1 * and the ratio r1 * / g1 * is located above the lower limit line lmin of the oxygen saturation = 0% limit (point P ′), the oxygen saturation is set to 0%. When the oxygen saturation is located below the upper limit line lmax of the 100% limit (point P ″), the oxygen saturation is set to 100%. Alternatively, in any case, the oxygen saturation of the pixel is not calculated. The blood information calculation unit 70 outputs the blood volume and oxygen saturation calculation results to the image generation unit 72.

画像生成部72は、血液情報算出部70の算出結果を擬似カラー表示するためのカラーマップ73に基づき、算出結果を反映させた血液量画像および酸素飽和度画像を生成する。   The image generation unit 72 generates a blood volume image and an oxygen saturation image reflecting the calculation result based on a color map 73 for displaying the calculation result of the blood information calculation unit 70 in a pseudo color display.

図11に示すように、モニタ18に出力されるビデオ信号は、輝度信号Yと色差信号Cb、Crから構成される。血液量画像は、第一画像P1のG画素値g1を輝度信号Yに、算出した血液量を色差信号Cb、Crにそれぞれ割り当てることによって生成される。第一画像P1のG画素値g1は、ヘモグロビンによる吸収がやや強い波長帯域の反射光に対応しているので、該画素値に基づく画像からは粘膜の凹凸や血管等を視認することができる。従って、G画素値g1を輝度信号Yに割り当てることで、血液量画像の全体的な明るさを定義することができる。   As shown in FIG. 11, the video signal output to the monitor 18 includes a luminance signal Y and color difference signals Cb and Cr. The blood volume image is generated by assigning the G pixel value g1 of the first image P1 to the luminance signal Y and the calculated blood volume to the color difference signals Cb and Cr. The G pixel value g1 of the first image P1 corresponds to reflected light in a wavelength band that is somewhat strongly absorbed by hemoglobin, so that mucous membrane irregularities and blood vessels can be visually recognized from the image based on the pixel value. Therefore, by assigning the G pixel value g1 to the luminance signal Y, the overall brightness of the blood volume image can be defined.

色差信号Cb、Crは、図12の(A)に示すカラーマップ73aに従って、血液量に応じた信号値が割り当てられる。カラーマップ73aは、色差信号Cbについては血液量が大きくなるほど信号値が低下するように定義され、色差信号Crについては血液量が大きくなるほど信号値が増加するように定義されている。従って、血液量画像は、血液量が多いところでは赤味が増加し、血液量が低くなるにつれて赤味の彩度が下がりモノクロに近づいていく。   The color difference signals Cb and Cr are assigned signal values according to the blood volume according to the color map 73a shown in FIG. The color map 73a is defined such that the signal value decreases as the blood volume increases with respect to the color difference signal Cb, and the signal value increases as the blood volume increases with respect to the color difference signal Cr. Accordingly, in the blood volume image, the redness increases when the blood volume is large, and the saturation of the redness decreases as the blood volume decreases, and approaches to monochrome.

図11において、酸素飽和度画像は、血液量画像と同様に、G画素値g1を輝度信号Yに、算出した酸素飽和度を色差信号Cb、Crにそれぞれ割り当てることによって生成される。   In FIG. 11, the oxygen saturation image is generated by assigning the G pixel value g1 to the luminance signal Y and the calculated oxygen saturation to the color difference signals Cb and Cr, similarly to the blood volume image.

色差信号Cb、Crは、図12の(B)に示すカラーマップ73bに従い、酸素飽和度に応じた信号値が割り当てられる。カラーマップ73bは、高酸素飽和度下では色差信号Crの信号値が正、色差信号Cbの信号値が負となるように定義され、低酸素飽和度下では、反対に色差信号Crの信号値が負、色差信号Cbの信号値が正となるように定義されている。そして、中酸素飽和度下において、色差信号Crの信号値と色差信号Cbの信号値の大小関係が逆転するように定義されている。従って、酸素飽和度が低い方から高くなるに連れて色味が青→水色→緑→黄→橙→赤と変化する。これに加えて、血液量や酸素飽和度の具体的な数値を文字情報として画像に重畳表示してもよい。   The color difference signals Cb and Cr are assigned signal values according to the oxygen saturation according to the color map 73b shown in FIG. The color map 73b is defined such that the signal value of the color difference signal Cr is positive and the signal value of the color difference signal Cb is negative under high oxygen saturation, and conversely the signal value of the color difference signal Cr under low oxygen saturation. Is negative, and the signal value of the color difference signal Cb is defined to be positive. Then, it is defined so that the magnitude relationship between the signal value of the color difference signal Cr and the signal value of the color difference signal Cb is reversed under the middle oxygen saturation. Accordingly, the color changes from blue to light blue to green to yellow to orange to red as the oxygen saturation level increases from the lower level. In addition to this, specific numerical values such as blood volume and oxygen saturation may be superimposed on the image as character information.

表示制御回路50は、画像生成部72で生成された血液量画像および酸素飽和度画像をモニタ18に単独、または並べて表示させる。これら単独表示、並列表示を、術者の操作または一定時間毎に自動的に切り替えてもよい。各画像の比較が容易になり、酸素飽和度と血液量の両方に特徴を有する未分化型早期胃癌等の病変部に対する診断能を向上させることができ、診断をスムーズに進めることができる。   The display control circuit 50 displays the blood volume image and the oxygen saturation image generated by the image generation unit 72 on the monitor 18 alone or side by side. These single display and parallel display may be automatically switched by the operator's operation or at regular intervals. The comparison of each image becomes easy, the diagnostic ability for a lesioned part such as undifferentiated early gastric cancer having characteristics in both oxygen saturation and blood volume can be improved, and the diagnosis can proceed smoothly.

通常観察モードから機能情報観察モードに切り替えられたとき、CPU45は、図13に示すメッセージウィンドウ80をモニタ18に表示させる。メッセージウィンドウ80には、例えば「正常な被観察部位でプレ撮影を実行して下さい。」といった、電子内視鏡10の視野全体に病変部のない正常な被観察部位を位置させた状態で酸素飽和度を算出するプレ撮影の実行を促すメッセージが表示される。   When the normal observation mode is switched to the function information observation mode, the CPU 45 displays a message window 80 shown in FIG. In the message window 80, for example, “please perform pre-imaging at a normal observation site”, oxygen in a state where the normal observation site without a lesion is located in the entire visual field of the electronic endoscope 10. A message prompting execution of pre-shooting for calculating the saturation is displayed.

メッセージウィンドウ80が表示されたことを受けて、術者はモニタ18に映る画像を観察して正常な被観察部位と思われる箇所に電子内視鏡10の視野を移動させる。その後操作部48を操作してプレ撮影の開始を指示する。プレ撮影の開始を指示するまでは照明光は白色光のままである。なお、正常な被観察部位は、これから血液量や酸素飽和度を算出しようとする病変部がある臓器内で探索する。   In response to the message window 80 being displayed, the surgeon observes the image displayed on the monitor 18 and moves the field of view of the electronic endoscope 10 to a location that is considered to be a normal observed site. Thereafter, the operation unit 48 is operated to instruct the start of pre-shooting. The illumination light remains white until the start of pre-shooting is instructed. It should be noted that a normal site to be observed is searched for in an organ having a lesion for which blood volume and oxygen saturation are to be calculated.

プレ撮影の開始が指示されてはじめて照明光が白色光から狭帯域光に切り替わり、図7で示したようにCCD33で白色光と狭帯域光の反射光を連続的に撮像する。血液情報算出部70は、図9に示すデフォルトの参照情報71を用いてプレ撮影開始後の複数フレーム分の画像の酸素飽和度を算出し、その情報を設定変更部74に出力する。   The illumination light is switched from white light to narrow band light only after the start of pre-shooting is instructed, and the white light and the reflected light of the narrow band light are continuously imaged by the CCD 33 as shown in FIG. The blood information calculation unit 70 uses the default reference information 71 shown in FIG. 9 to calculate the oxygen saturation of images for a plurality of frames after the start of pre-imaging, and outputs the information to the setting change unit 74.

設定変更部74は、血液情報算出部70から送られた情報を元に、各フレームの酸素飽和度の平均値を求め、さらに求めた平均値を足してフレーム数で割って複数フレーム全体の酸素飽和度の平均値STOaveを求める。そして、平均値STOaveと予め設定された基準値STOstとの差分Δを求める。基準値STOstは、口から肛門までの消化管の正常な粘膜が示す酸素飽和度の典型的な値(70%)である。 Based on the information sent from the blood information calculation unit 70, the setting change unit 74 obtains an average value of oxygen saturation of each frame, adds the obtained average value, and divides the result by the number of frames to obtain oxygen for all the frames. An average value STO ave of saturation is obtained. Then, a difference Δ between the average value STO ave and a preset reference value STO st is obtained. The reference value STO st is a typical value (70%) of oxygen saturation exhibited by the normal mucosa of the digestive tract from the mouth to the anus.

平均値STOaveと基準値STOstの差分Δが0(STOave=STOst)の場合、設定変更部74は何もしない。 When the difference Δ between the average value STO ave and the reference value STO st is 0 (STO ave = STO st ), the setting changing unit 74 does nothing.

平均値STOaveと基準値STOstの差分Δが負(STOave−STOst<0、すなわちSTOave<STOst)の場合は、図14に一点鎖線で示すように、平均値STOaveと基準値STOstのずれが解消してSTOave=STOstとなるよう、細線で示すデフォルトの参照情報71を縦軸に沿って上方に平行移動させる。また、平均値STOaveと基準値STOstの差分Δが正(STOave−STOst>0、すなわちSTOave>STOst)の場合は、二点鎖線で示すように、同様に平均値STOaveと基準値STOstのずれが解消するよう、デフォルトの参照情報71を縦軸に沿って下方に平行移動させる。平行移動の量は、血液量をある値(例えば中間値)に固定した場合の参照情報71上における平均値STOaveと基準値STOstの差分Δの大きさに応じて調整する(図9参照)。当然ながら差が大きい程平行移動の量も多くなる。設定変更部74は、変更した参照情報71をデフォルトの参照情報71とは別に記憶させる。 When the difference Δ between the average value STO ave and the reference value STO st is negative (STO ave −STO st <0, that is, STO ave <STO st ), as shown by a one-dot chain line in FIG. 14, the average value STO ave and the reference value The default reference information 71 indicated by a thin line is translated upward along the vertical axis so that the deviation of the value STO st is eliminated and STO ave = STO st . When the difference Δ between the average value STO ave and the reference value STO st is positive (STO ave −STO st > 0, that is, STO ave > STO st ), the average value STO ave is similarly shown as indicated by a two-dot chain line. The default reference information 71 is translated downward along the vertical axis so that the deviation of the reference value STO st is eliminated. The amount of translation is adjusted according to the difference Δ between the average value STO ave and the reference value STO st on the reference information 71 when the blood volume is fixed to a certain value (for example, an intermediate value) (see FIG. 9). ). Of course, the greater the difference, the greater the amount of translation. The setting changing unit 74 stores the changed reference information 71 separately from the default reference information 71.

なお、酸素飽和度とともに血液量とその平均値も算出し、血液量を平均値とした場合の参照情報71上における平均値STOaveと基準値STOstの差分を求めてもよい。参照情報71の酸素飽和度の等高線は血液量によって幅が広くなったり狭くなったりするため、血液量も加味して差分を求めればより正確となり好ましい。 In addition, the blood volume and its average value may be calculated together with the oxygen saturation, and the difference between the average value STO ave and the reference value STO st on the reference information 71 when the blood volume is the average value may be obtained. Since the contour line of the oxygen saturation of the reference information 71 becomes wider or narrower depending on the blood volume, it is preferable that the difference is obtained with the blood volume taken into account.

機能情報観察モードでは、プレ撮影で設定変更部74にて上述の処理を実行した後、本撮影に移行する。平均値STOaveと基準値STOstの差分Δが0(STOave=STOst)の場合、血液情報算出部70は、本撮影でも引き続き図9に示すデフォルトの参照情報71を用いて酸素飽和度と血液量を算出する。それ以外の場合は、デフォルトの参照情報71に代えて、設定変更部74で変更した参照情報71を用いて酸素飽和度と血液量を算出する。 In the function information observation mode, after the above-described processing is executed by the setting changing unit 74 in the pre-photographing, the process shifts to the main photographing. When the difference Δ between the average value STO ave and the reference value STO st is 0 (STO ave = STO st ), the blood information calculation unit 70 continues to use the default reference information 71 shown in FIG. And calculate blood volume. In other cases, the oxygen saturation and the blood volume are calculated using the reference information 71 changed by the setting changing unit 74 instead of the default reference information 71.

次に、上記のように構成された電子内視鏡システム2の作用について説明する。電子内視鏡10で被検体内を観察する際、術者は、操作部48を操作して、被検体に関する情報等を入力し、検査開始を指示する。検査開始を指示した後、術者は、電子内視鏡10の挿入部13を被検体内に挿入し、光源装置12からの照明光で被検体内を照明しながら、CCD33による被検体内の観察画像をモニタ18で観察する。   Next, the operation of the electronic endoscope system 2 configured as described above will be described. When observing the inside of the subject with the electronic endoscope 10, the surgeon operates the operation unit 48 to input information on the subject and instruct to start the examination. After instructing the start of the examination, the surgeon inserts the insertion portion 13 of the electronic endoscope 10 into the subject, and illuminates the subject with illumination light from the light source device 12, while the inside of the subject by the CCD 33 is used. The observation image is observed on the monitor 18.

CCD33から出力された撮像信号は、AFE37の各部で各種処理を施された後、画像処理回路49に入力される。画像処理回路49では、入力された撮像信号に対して各種画像処理が施され、画像が生成される。画像処理回路49で処理された画像は、表示制御回路50に入力される。表示制御回路50では、グラフィックデータに応じて各種表示制御処理が実行される。これにより、観察画像がモニタ18に表示される。   The imaging signal output from the CCD 33 is subjected to various processing in each part of the AFE 37 and then input to the image processing circuit 49. The image processing circuit 49 performs various types of image processing on the input image pickup signal to generate an image. The image processed by the image processing circuit 49 is input to the display control circuit 50. In the display control circuit 50, various display control processes are executed according to the graphic data. As a result, the observation image is displayed on the monitor 18.

電子内視鏡システム2で検査を行うときには、観察対象に応じて観察モードが切り替えられる。電子内視鏡10の挿入部13を被検体内に挿入する際には通常観察モードを選択して、白色光を照射して得られた画像を観察して広い視野を確保しつつ挿入作業を行う。詳細な観察が必要な病変が発見され、その病変の酸素飽和度や血液量を取得する際には、機能情報観察モードを実行に移し、病変に白色光および狭帯域光を交互に照明して得られた血液量画像および酸素飽和度画像を観察する。そして、必要に応じて電子内視鏡10に装備されたレリーズボタンを操作して静止画像を取得したり、病変に処置が必要な場合は電子内視鏡10の鉗子チャンネルに各種処置具を挿通させて、病変の切除や投薬等の処置を施す。   When an inspection is performed by the electronic endoscope system 2, the observation mode is switched according to the observation target. When inserting the insertion portion 13 of the electronic endoscope 10 into the subject, the normal observation mode is selected, and the insertion operation is performed while observing the image obtained by irradiating the white light to ensure a wide field of view. Do. When a lesion that requires detailed observation is discovered and the oxygen saturation or blood volume of the lesion is acquired, the function information observation mode is activated, and the lesion is alternately illuminated with white light and narrowband light. The obtained blood volume image and oxygen saturation image are observed. Then, if necessary, a release button provided on the electronic endoscope 10 is operated to acquire a still image, or when treatment is required for a lesion, various treatment tools are inserted into the forceps channel of the electronic endoscope 10. Then, treatment such as excision of lesions and medication is performed.

通常観察モードの場合は、CPU45の指令の下にCPU67により第一半導体レーザ光源55が点灯されて、照明窓31a、31dから被観察部位に白色光が照射される。   In the normal observation mode, under the instruction of the CPU 45, the first semiconductor laser light source 55 is turned on by the CPU 67, and white light is irradiated from the illumination windows 31a and 31d to the observation site.

一方、図15のステップ10(S10)に示すように、モード切替スイッチ19が操作されて機能情報観察モードが選択されると、表示制御回路50によってプレ撮影の実行を促すメッセージウィンドウ80がモニタ18に表示される(S11)。術者は正常な被観察部位に電子内視鏡10の視野を移動させてプレ撮影の開始を指示する(S12でYES)。プレ撮影の開始指示がなされると、各光源55、56のうちの一方が点灯されているときは他方が点灯され、これがCCD33の蓄積・読出期間単位で繰り返されるようCPU67により各光源55、56が駆動制御される。CCD33では白色光L1+L3、または狭帯域光L2による反射光が撮像されて、第一画像P1、または第二画像P2が交互に出力される(S13)。   On the other hand, as shown in step 10 (S10) of FIG. 15, when the mode changeover switch 19 is operated and the function information observation mode is selected, a message window 80 prompting the display control circuit 50 to execute pre-shooting is displayed on the monitor 18. (S11). The surgeon moves the visual field of the electronic endoscope 10 to a normal site to be observed and instructs the start of pre-imaging (YES in S12). When an instruction to start pre-photographing is given, when one of the light sources 55 and 56 is lit, the other is turned on, and the CPU 67 causes the light sources 55 and 56 to be repeated for each accumulation / reading period of the CCD 33. Is driven and controlled. The CCD 33 images the reflected light of the white light L1 + L3 or the narrow band light L2, and the first image P1 or the second image P2 is alternately output (S13).

画像処理回路49では、血液情報算出部70で第一、第二画像P1、P2の画素値の比が算出され、デフォルトの参照情報71を元に酸素飽和度が算出される(S14)。これらS13の撮像とS14の酸素飽和度の算出が複数フレーム分繰り返される(S15でNO)。   In the image processing circuit 49, the blood information calculation unit 70 calculates the ratio of the pixel values of the first and second images P1 and P2, and calculates the oxygen saturation based on the default reference information 71 (S14). The imaging in S13 and the calculation of oxygen saturation in S14 are repeated for a plurality of frames (NO in S15).

酸素飽和度の算出結果は、血液情報算出部70から設定変更部74に出力される。そして、設定変更部74で複数フレーム全体の酸素飽和度の平均値STOaveが算出され(S16)、さらに平均値STOaveと基準値STOstとの差分Δが求められる(S17)。平均値STOaveと基準値STOstの差分Δが0の場合(STOave=STOst、S18でYES)は、続く本撮影で血液情報算出部70にてデフォルトの参照情報71で酸素飽和度と血液量が算出される(S19)。一方、平均値STOaveと基準値STOstの差分Δが0でない場合(STOave<STOstまたはSTOave>STOst、S18でNO)、設定変更部74により平均値STOaveと基準値STOstとのずれが解消されるよう設定変更部74により参照情報71が変更される(S20)。本撮影では、変更された参照情報71で酸素飽和度と血液量が算出される(S21)。 The calculation result of the oxygen saturation is output from the blood information calculation unit 70 to the setting change unit 74. Then, the setting change unit 74 calculates the average value STO ave of the oxygen saturation of the entire plurality of frames (S16), and further obtains the difference Δ between the average value STO ave and the reference value STO st (S17). When the difference Δ between the average value STO ave and the reference value STO st is 0 (STO ave = STO st , YES in S18), the blood information calculation unit 70 in the subsequent main imaging uses the default reference information 71 to determine the oxygen saturation level. A blood volume is calculated (S19). On the other hand, when the difference Δ between the average value STO ave and the reference value STO st is not 0 (STO ave <STO st or STO ave > STO st , NO in S18), the setting change unit 74 causes the average value STO ave and the reference value STO st to be different. The reference information 71 is changed by the setting changing unit 74 so that the deviation is eliminated (S20). In the actual photographing, the oxygen saturation and the blood volume are calculated using the changed reference information 71 (S21).

酸素飽和度と血液量の算出結果は、画像生成部72で酸素飽和度画像と血液量画像に画像化されてモニタ18に表示される(S22)。上記一連のS19またはS21、S22の処理は、モード切替スイッチ19が操作されて通常観察モードが選択される等して機能情報観察モードが終了される(S23でYES)まで続行される。   The calculation result of the oxygen saturation and the blood volume is converted into an oxygen saturation image and a blood volume image by the image generator 72 and displayed on the monitor 18 (S22). The series of processing of S19 or S21, S22 is continued until the function information observation mode is terminated (YES in S23), for example, by operating the mode switch 19 to select the normal observation mode.

以上説明したように、本発明は、正常な被観察部位の酸素飽和度平均値STOaveを得て、この値と基準値STOstが一致しない場合はそのずれが解消するよう参照情報71を変更し、変更した参照情報71で酸素飽和度を算出するので、患者の個体差等の影響を受けることなく常に正確で再現性ある酸素飽和度の情報を得ることができる。このため酸素飽和度画像による診断の信頼性が増し、癌組織の早期発見といった医療の進歩に貢献することができる。 As described above, according to the present invention, the oxygen saturation average value STO ave of the normal site to be observed is obtained, and the reference information 71 is changed so that the deviation is eliminated when this value does not match the reference value STO st. In addition, since the oxygen saturation is calculated using the changed reference information 71, it is possible to always obtain accurate and reproducible information on the oxygen saturation without being affected by individual differences among patients. For this reason, the reliability of the diagnosis based on the oxygen saturation image increases, and it can contribute to medical progress such as early detection of cancer tissue.

上記実施形態では、基準値STOstを一つの値としているが、食道、胃等の消化管の部位毎に基準値STOstを設定、記憶しておいてもよい。基準値STOstを一つの値とするよりも、部位毎に細かく基準値STOstを設定することで、酸素飽和度の算出結果の信頼性をより高めることができる。なお、この場合はプレ撮影の開始を指示する際に操作部48等を介して術者に現在観察している部位を入力させ、その操作入力信号に応じて基準値STOstを切り替える。あるいは以下に説明するように、部位を入力する手間を省くため、被観察部位の解剖学的部位を自動的に検出して、その結果に応じて基準値STOstを切り替えてもよい。 In the above embodiment, the reference value STO st is a single value, but the reference value STO st may be set and stored for each part of the digestive tract such as the esophagus and stomach. Rather than setting the reference value STO st as one value, the reliability of the oxygen saturation calculation result can be further improved by setting the reference value STO st finely for each part. In this case, when instructing the start of pre-imaging, the operator is made to input the part currently being observed via the operation unit 48 or the like, and the reference value STO st is switched according to the operation input signal. Alternatively, as described below, in order to save the trouble of inputting a part, the anatomical part of the observed part may be automatically detected, and the reference value STO st may be switched according to the result.

被観察部位の解剖学的部位を自動的に検出する方法としては、血液量の指標である第一画像P1のR画素値r1とG画素値g1の比r1/g1と閾値の比較による方法がある。消化管の各部位の血液量は、例えば食道は比較的少なく、胃は比較的多く、大腸はそれらの中間の値を示す。設定変更部74は、血液情報算出部70から送られた比r1/g1と各部位を区別するために予め設定された閾値の大小の比較結果に基づき、現在観察している部位を特定する。そして、特定した部位に応じた基準値STOstに切り替えたうえで平均値STOaveとの差分を算出する。つまりこの場合設定変更部74は部位検出手段の機能を担う。 As a method for automatically detecting the anatomical part of the observed part, there is a method by comparing the ratio r1 / g1 between the R pixel value r1 and the G pixel value g1 of the first image P1, which is an index of blood volume, and a threshold value. is there. The blood volume in each part of the gastrointestinal tract is, for example, relatively small in the esophagus, relatively large in the stomach, and the large intestine has an intermediate value between them. The setting changing unit 74 specifies the currently observed region based on the ratio r1 / g1 sent from the blood information calculating unit 70 and the comparison result of the threshold value set in advance to distinguish each region. Then, after switching to the reference value STO st corresponding to the identified part, the difference from the average value STO ave is calculated. That is, in this case, the setting change unit 74 functions as a part detection unit.

他の方法としては、周知の画像認識技術を利用することも考えられる。画像認識には、例えば食道と胃のつなぎ目で、特異な形状を有する噴門をパターン認識する、あるいは画像に映し出される暗部の面積が食道から噴門は小、胃に入ったときに大となることを利用して、暗部の面積と閾値とを比較するといった方法が挙げられる。検査中の被検体をCT撮影して電子内視鏡10の先端17の体内位置を検出したり、先端17にpHセンサを設けてpHの違いによって部位を認識する等、被観察部位が分かる方法であれば上記に挙げた方法以外のものを採用してよい。   As another method, a known image recognition technique may be used. For image recognition, for example, it is possible to recognize the cardia with a unique shape at the joint between the esophagus and the stomach, or the area of the dark part displayed in the image is small from the esophagus and large when entering the stomach A method of comparing the area of the dark part with the threshold value is used. A method for identifying the site to be observed, such as detecting the position of the tip 17 of the electronic endoscope 10 in the body by CT imaging of the subject under examination or recognizing the site by a pH difference by providing a pH sensor at the tip 17 If so, methods other than those listed above may be adopted.

上記実施形態では、機能情報観察モードを選択したときに術者にプレ撮影を実施させているが、通常観察モード、機能情報観察モードに関わらず操作部48等を介した術者の指示により任意のタイミングでプレ撮影を開始してもよい。   In the above-described embodiment, the operator performs pre-imaging when the function information observation mode is selected. However, it is optional according to the operator's instruction via the operation unit 48 regardless of the normal observation mode and the function information observation mode. The pre-photographing may be started at the timing.

また、プレ撮影の開始を術者に指示させるのではなく、自動化してもよい。この場合、例えば図16に示すように、上記実施形態と同様に機能情報観察モードを選択したとき(S30)に術者の指示を待たずに自動的にプレ撮影を開始し、複数フレーム分の酸素飽和度の平均値STOaveを得る(S31、S32、S33でYES、S34)。 Further, it may be automated instead of instructing the operator to start pre-imaging. In this case, for example, as shown in FIG. 16, when the function information observation mode is selected as in the above embodiment (S30), pre-imaging is automatically started without waiting for the operator's instruction, An average value STO ave of oxygen saturation is obtained (YES in S31, S32, S33, S34).

そして、平均値STOaveが予め設定された閾値の範囲内に収まっているか否かを設定変更部74にて判定する(S35)。つまりこの場合設定変更部74は判定手段として機能する。閾値の範囲は例えば酸素飽和度50%以上90%以下とする。平均値STOaveが閾値の範囲内であった場合(S35でYES)は、電子内視鏡10の視野全体に病変部のない正常な被観察部位が位置していたと判断し、上記実施形態のS17以降の処理を続行する。 Then, the setting change unit 74 determines whether or not the average value STO ave is within a preset threshold range (S35). That is, in this case, the setting change unit 74 functions as a determination unit. The threshold range is, for example, 50% to 90% oxygen saturation. If the average value STO ave is within the threshold range (YES in S35), it is determined that a normal site to be observed without a lesion is located in the entire visual field of the electronic endoscope 10, and The processing after S17 is continued.

一方、平均値STOaveが閾値の範囲外であった場合(S35でNO)は病変部が映っていたと判断する。この場合は上記実施形態と同様にメッセージウィンドウ80をモニタ18に表示させ(S36)、電子内視鏡10の視野全体に正常な被観察部位を位置させるよう術者に促し、術者からプレ撮影の開始指示があったら(S37でYES)、S31に戻って再びプレ撮影を実施する。平均値STOaveが閾値の範囲内であった場合は術者がプレ撮影の開始を指示する手間を省くことができる。 On the other hand, when the average value STO ave is outside the range of the threshold value (NO in S35), it is determined that the lesioned part is reflected. In this case, as in the above embodiment, the message window 80 is displayed on the monitor 18 (S36), prompting the operator to position a normal site to be observed in the entire visual field of the electronic endoscope 10, and pre-imaging from the operator. If a start instruction is issued (YES in S37), the process returns to S31 and pre-photographing is performed again. When the average value STO ave is within the threshold range, it is possible to save the operator from instructing the start of pre-imaging.

なお、正常な被観察部位か否かを判断する方法としては、上記の酸素飽和度の他にも種々考えられる。例えば青色波長帯域の狭帯域光(上記実施形態の中心波長473nmの狭帯域光L2等)を照射して得られた粘膜表層の血管強調画像(血管走行の可視像)を解析することで判断してもよい。具体的には粘膜表層の血管の枝分かれ本数から血管の密集度を求め、密集度が比較的高い場合は癌組織周辺の新生血管を映していると判断し、密集度が比較的低い場合は正常な被観察部位を映していると判断する。   Various methods other than the above-described oxygen saturation can be considered as a method for determining whether or not the site is a normal observation site. For example, determination is made by analyzing a blood vessel emphasized image (visible image of blood vessel running) of the mucosal surface layer obtained by irradiating narrow band light in the blue wavelength band (such as narrow band light L2 having a center wavelength of 473 nm in the above embodiment). May be. Specifically, the density of the blood vessels is determined from the number of branches of the blood vessels on the surface of the mucosa, and if the density is relatively high, it is judged that the new blood vessels around the cancer tissue are reflected, and if the density is relatively low, it is normal. It is judged that the site to be observed is reflected.

上記実施形態では、プレ撮影で得た画像フレームの全領域の酸素飽和度の平均値STOaveを算出しているが、平均値STOaveを算出する領域を限定してもよい。例えば、血液情報算出部70にて、画像内で極端に明るい領域または極端に暗い領域を、平均値STOaveを算出する領域としては不適と判断して排除し、排除した領域以外の酸素飽和度の情報を設定変更部74に出力する。画素値の階調が10bitで表現されている場合は、画素値が30〜700の範囲以外を排除する。 In the above embodiment, the average value STO ave of the oxygen saturation of the entire region of the image frame obtained by the pre-shooting is calculated, but the region where the average value STO ave is calculated may be limited. For example, in the blood information calculation unit 70, an extremely bright region or an extremely dark region in the image is determined to be inappropriate as a region for calculating the average value STO ave , and oxygen saturation other than the excluded region is excluded. Is output to the setting change unit 74. When the gradation of the pixel value is expressed by 10 bits, the pixel value other than the range of 30 to 700 is excluded.

または、血液量の指標である第一画像P1のR画素値r1とG画素値g1の比r1/g1がある閾値よりも大きく、血液量が比較的多い領域のみを平均値STOaveを算出する領域としてもよい。よく知られているように癌組織は血流が不足するため、血液量が比較的多い領域を選べば正常な被観察部位である可能性が高くなる。このため比r1/g1が閾値以下の領域は正常な被観察部位ではない確率が高いと判断して、平均値STOaveを算出する領域から排除する。 Alternatively, the average value STO ave is calculated only for a region where the ratio r1 / g1 between the R pixel value r1 and the G pixel value g1 of the first image P1, which is an index of blood volume, is larger than a certain threshold value and the blood volume is relatively large. It may be an area. As is well known, cancer tissue lacks blood flow, so if a region with a relatively large blood volume is selected, the possibility of being a normal site to be observed increases. For this reason, it is determined that the area where the ratio r1 / g1 is equal to or less than the threshold is not a normal observed site, and is excluded from the area where the average value STO ave is calculated.

あるいは、第二画像P2のB画素値b2と第一画像P1のG画素値g1の比b2/g1がある閾値よりも大きい領域のみを平均値STOaveを算出する領域としても可である。癌組織周辺の新生血管を映していた場合は血管の密集度が比較的高くなり、比b2/g1は比較的小さくなる。このため比b2/g1が閾値以下の領域は癌組織周辺の新生血管が映っている確率が高いと判断して、平均値STOaveを算出する領域から排除する。いずれの方法にしても、全領域の酸素飽和度の平均値STOaveを算出する場合と比べて処理を高速化することができ、プレ撮影から本撮影に移行するまでの時間を短縮することができる。 Alternatively, only the area where the ratio b2 / g1 of the B pixel value b2 of the second image P2 and the G pixel value g1 of the first image P1 is larger than a certain threshold may be used as the area for calculating the average value STO ave . When the new blood vessels around the cancer tissue are reflected, the density of the blood vessels is relatively high, and the ratio b2 / g1 is relatively small. For this reason, it is determined that the region where the ratio b2 / g1 is equal to or less than the threshold is high in the probability that a new blood vessel around the cancer tissue is reflected, and is excluded from the region where the average value STO ave is calculated. In any method, the processing can be speeded up compared with the case of calculating the average value STO ave of the oxygen saturation of the entire region, and the time from the pre-photographing to the main photographing can be shortened. it can.

図17に示すように、上記の如く選別した平均値STOaveを算出する領域を酸素飽和度画像上で色付きの網掛けで囲む等して識別可能に表示してもよい。選別した領域が妥当なものかどうかを目視により確認することができる。また、平均値STOaveを算出する領域を術者が指定してもよく、例えば画像中央部分等に平均値STOaveを算出する領域を固定してもよい。 As shown in FIG. 17, the area for calculating the average value STO ave selected as described above may be displayed in an identifiable manner by surrounding it with a shaded area on the oxygen saturation image. It is possible to visually confirm whether the selected area is appropriate. Further, the operator may specify a region for calculating the average value STO ave , and for example, a region for calculating the average value STO ave may be fixed in the center portion of the image.

検査後の検証のためにプレ撮影で得た画像および算出した酸素飽和度や選別した平均値STOaveを算出する領域の情報を記憶しておいてもよい。 For verification after inspection, information obtained by pre-photographing and information on the calculated oxygen saturation and the area for calculating the selected average value STO ave may be stored.

上記実施形態ではデフォルトの参照情報をその都度設定変更しているが、デフォルトの参照情報に加えて、これを変更した参照情報を複数予め用意しておき、平均値STOaveと基準値STOstの差分Δの算出結果に応じて複数用意した中から選択するよう構成してもよい。 In the above embodiment, the default reference information is changed each time. In addition to the default reference information, a plurality of reference information obtained by changing the default reference information is prepared in advance, and the average value STO ave and the reference value STO st are changed. Depending on the calculation result of the difference Δ, a plurality of prepared ones may be selected.

平均値STOaveを患者毎または患者の臓器毎に記憶・管理してもよい。こうすればプレ撮影を実施しなくとも過去の直近の検査で得た平均値STOaveを記憶先から読み出して用いれば上記実施形態と同様の処理を行うことができ、プレ撮影を実施する手間とプレ撮影に掛かる時間を省くことができる。 The average value STO ave may be stored and managed for each patient or for each patient organ. In this way, even if pre-photographing is not performed, the average value STO ave obtained in the past most recent examination can be read from the storage destination and used, and the same processing as in the above embodiment can be performed. The time taken for pre-photographing can be saved.

なお、本発明に係る内視鏡システムは、上記実施形態に限らず、本発明の要旨を逸脱しない限り種々の構成を採り得ることはもちろんである。例えば、撮像素子としてCCD33の代わりにCMOSイメージセンサを用いてもよい。   It should be noted that the endoscope system according to the present invention is not limited to the above-described embodiment, and various configurations can be adopted without departing from the gist of the present invention. For example, a CMOS image sensor may be used as the image sensor instead of the CCD 33.

上記実施形態では酸素飽和度に加えて血液量も算出しているが、本発明はこれに限定されない。特許文献2(特開平06−315477号公報)のように酸素飽和度のみを算出するシステムに適用することももちろん可能である。また、特開2011−092690号公報のように、酸素飽和度の情報とともに血管深さの情報も同時に得るシステムについても本発明は適用可能である。要するに、何らかの参照情報に基づいて酸素飽和度を算出するシステムであれば、上記実施形態と同様の効果を得ることができる。   In the above embodiment, the blood volume is calculated in addition to the oxygen saturation, but the present invention is not limited to this. Of course, the present invention can be applied to a system that calculates only the oxygen saturation as disclosed in Patent Document 2 (Japanese Patent Laid-Open No. 06-315477). The present invention can also be applied to a system that simultaneously obtains information on blood vessel depth as well as information on oxygen saturation, as disclosed in Japanese Patent Application Laid-Open No. 2011-092690. In short, if the system calculates oxygen saturation based on some reference information, the same effect as the above embodiment can be obtained.

酸素飽和度の算出に加えて、中心波長405nm、450nm、550nm、780nm等の狭帯域光を照射して、粘膜表層、中層、深層の各血管強調画像を得たり、あるいは生体組織に蛍光物質を注入して励起光を照射し、被観察部位からの蛍光を観察したり、さらには生体組織の自家蛍光を観察する特殊光観察機能を実行可能な構成としてもよい。   In addition to calculating oxygen saturation, irradiate narrow-band light with central wavelengths of 405 nm, 450 nm, 550 nm, 780 nm, etc. to obtain blood vessel-enhanced images of the mucosal surface layer, middle layer, and deep layer, or add fluorescent substances to living tissue It is good also as a structure which can perform the special light observation function which inject | pours and irradiates excitation light and observes the fluorescence from a to-be-observed site | part, and also observes the self-fluorescence of a biological tissue.

血液量×酸素飽和度(%)から求まる酸化ヘモグロビンインデックス、血液量×(100−酸素飽和度)(%)から求まる還元ヘモグロビンインデックス等を算出してもよい。   An oxygenated hemoglobin index obtained from blood volume × oxygen saturation (%), a reduced hemoglobin index obtained from blood volume × (100−oxygen saturation) (%), and the like may be calculated.

上記実施形態では、白色光用と狭帯域光用の第一、第二半導体レーザ光源55、56を用いているが、本発明はこれに限定されない。例えば400nm以上800nm以下の波長帯の青色〜赤色までのブロードな波長の白色光を発生するキセノンランプやハロゲンランプ、白色LED(発光ダイオード)等の白色光源と、入射光のうちの特定の波長帯域の光を選択的に透過させ、且つ透過させる光の波長帯域を変更可能な波長可変素子を組み合わせてもよい。   In the above embodiment, the first and second semiconductor laser light sources 55 and 56 for white light and narrow band light are used, but the present invention is not limited to this. For example, a white light source such as a xenon lamp, a halogen lamp, or a white LED (light emitting diode) that generates white light having a broad wavelength from 400 to 800 nm in a blue to red wavelength, and a specific wavelength band of incident light. May be combined with a wavelength tunable element that can selectively transmit the light and change the wavelength band of the transmitted light.

波長可変素子には、圧電素子等のアクチュエータを駆動することにより、二枚の高反射光フィルタからなる基板の面間隔を変更し、以て透過光の波長帯域を制御するエタロン、あるいは偏光フィルタ間に複屈折フィルタとネマティック液晶セルを挟んで構成され、液晶セルへの印加電圧を変更することで透過光の波長帯域を制御する液晶チューナブルフィルタを用いる。この場合、白色光源と白色光を電子内視鏡の先端に導光するライトガイドの入射端の間、またはライトガイドの出射端側に波長可変素子を設ける。あるいは照明光学系ではなく、被観察部位の像を取り込む対物光学系、例えば観察窓の背後やCCDの撮像面上に波長可変素子を配置する。   The wavelength variable element is an etalon that controls the wavelength band of transmitted light by driving an actuator such as a piezoelectric element to change the surface distance of the substrate composed of two highly reflective optical filters, or between polarizing filters. A liquid crystal tunable filter is used that sandwiches a birefringent filter and a nematic liquid crystal cell and controls the wavelength band of transmitted light by changing the voltage applied to the liquid crystal cell. In this case, a wavelength variable element is provided between the incident end of the light guide that guides the white light source and the white light to the tip of the electronic endoscope, or on the emission end side of the light guide. Alternatively, instead of the illumination optical system, an objective optical system that captures an image of a site to be observed, for example, a wavelength variable element is disposed behind the observation window or on the imaging surface of the CCD.

また、モノクロ撮像素子と、白色光源と、白色光の光路に配置され、複数の干渉フィルタ(バンドパスフィルタ)を組み合わせたロータリーフィルタとを用いてもよい。例えば図18に示すロータリーフィルタ90を用いる。ロータリーフィルタ90は、外周部90aと内周部90bとに分れた二重円構造であり、外周部90aは白色光のうちの赤色、緑色、青色波長帯域が透過するR、G、Bフィルタ部からなり、内周部90bは、R、Gフィルタ部は外周部90aと共通で、外周部90aのBフィルタ部と同じ扇形領域が白色光のうちの470nm±10nmの光(上記実施形態の狭帯域光L2)を透過するフィルタ部となっている。   Alternatively, a monochrome imaging element, a white light source, and a rotary filter that is arranged in the optical path of white light and that combines a plurality of interference filters (bandpass filters) may be used. For example, a rotary filter 90 shown in FIG. 18 is used. The rotary filter 90 has a double circular structure divided into an outer peripheral portion 90a and an inner peripheral portion 90b. The outer peripheral portion 90a is an R, G, B filter that transmits red, green, and blue wavelength bands of white light. The inner peripheral portion 90b is the same as the outer peripheral portion 90a, the R and G filter portions are the same as the outer peripheral portion 90a, and the same fan-shaped region as the B filter portion of the outer peripheral portion 90a is light of 470 nm ± 10 nm of white light (in the above embodiment) The filter portion transmits the narrow-band light L2).

ロータリーフィルタ90は、図示しないシフト機構によって外周部90aと内周部90bを選択的に白色光の光路上に配置することが可能である。通常観察モードでは外周部90aが白色光の光路上に配置され、RGBの各フィルタ部によりRGBの各光が被観察部位に順次照射される。そして、モノクロ撮像素子でそれらの反射光が撮像され、RGB各光を照射して得た三つの画像から一つの通常観察用の画像が生成される。機能情報観察モードでは内周部90bが白色光の光路上に配置され、RGの各フィルタ部と狭帯域光L2のフィルタ部によりRG光と狭帯域光L2が順次照射される。この場合はR光が第二測定光、G光が参照光となり、モノクロ撮像素子から出力された狭帯域光L2、R光、G光を照射して得たそれぞれの画像の画素値が第一〜第三画素値となる。なお、ロータリーフィルタは二重円構造でなく、複数の扇形状のフィルタ部を並べた構造であってもよいし、ロータリーフィルタを二枚以上用意してシフト機構で切り替えてもよい。   The rotary filter 90 can selectively arrange the outer peripheral portion 90a and the inner peripheral portion 90b on the optical path of white light by a shift mechanism (not shown). In the normal observation mode, the outer peripheral portion 90a is arranged on the optical path of white light, and each RGB light is sequentially irradiated to the observation site by each RGB filter unit. Then, the reflected light is imaged by the monochrome image sensor, and one normal observation image is generated from the three images obtained by irradiating the RGB lights. In the function information observation mode, the inner peripheral portion 90b is disposed on the optical path of white light, and the RG light and the narrowband light L2 are sequentially irradiated by the filter portions of the RG and the filter portion of the narrowband light L2. In this case, the R light is the second measurement light, the G light is the reference light, and the pixel values of the respective images obtained by irradiating the narrowband light L2, R light, and G light output from the monochrome image sensor are the first values. ~ Third pixel value. The rotary filter may have a structure in which a plurality of fan-shaped filter portions are arranged instead of a double circular structure, or two or more rotary filters may be prepared and switched by a shift mechanism.

上記実施形態では、CCDのカラーフィルタやロータリーフィルタのフィルタ部をRGBの原色系としているが、Y(イエロー)、M(マゼンダ)、C(シアン)の補色系のフィルタを使用してもよい。   In the above embodiment, the filter part of the CCD color filter or the rotary filter is an RGB primary color system, but a filter of a complementary color system of Y (yellow), M (magenta), or C (cyan) may be used.

上記実施形態では電子内視鏡を例示したが、本発明はこれに限らず、イメージガイドを用いたファイバスコープや、撮像素子と超音波トランスデューサが先端に内蔵された超音波内視鏡等、他の形態の内視鏡にも適用することができる。   In the above embodiment, an electronic endoscope is exemplified. However, the present invention is not limited to this, and other devices such as a fiberscope using an image guide, an ultrasonic endoscope in which an imaging element and an ultrasonic transducer are built in the tip, and the like. The present invention can also be applied to an endoscope of this form.

2 電子内視鏡システム
10 電子内視鏡
11 プロセッサ装置
12 光源装置
18 モニタ
19 モード切替スイッチ
33 CCD
34a〜34d ライトガイド
39、45、67 CPU
41 波長変換部材
49 画像処理回路
50 表示制御回路
55、56 第一、第二半導体レーザ光源
70 血液情報算出部
71 参照情報
74 設定変更部
80 メッセージウィンドウ
2 Electronic Endoscope System 10 Electronic Endoscope 11 Processor Unit 12 Light Source Unit 18 Monitor 19 Mode Change Switch 33 CCD
34a-34d Light guide 39, 45, 67 CPU
41 Wavelength conversion member 49 Image processing circuit 50 Display control circuit 55, 56 First and second semiconductor laser light sources 70 Blood information calculation unit 71 Reference information 74 Setting change unit 80 Message window

Claims (25)

生体組織に存在する血管中のヘモグロビンの酸素飽和度を測定するための第一測定光を患者の被観察部位に照射する照射手段と、
第一測定光の被観察部位からの反射光を撮像して第一画素値を出力する撮像素子と、
第一画素値と酸素飽和度の相関関係を規定する参照情報を記憶する記憶手段と、
参照情報に基づき第一画素値に応じた酸素飽和度を算出する算出手段と、
患者に応じて参照情報を変更する設定変更手段と
病変が存在しない正常な被観察部位に照射された第一測定光に対応する第一画素値とデフォルトの参照情報とに基づき得られた、正常な被観察部位の酸素飽和度の実測値を、患者毎または患者の解剖学的部位毎に記憶・管理する記憶・管理手段とを備え、
前記設定変更手段は、観察対象の患者または観察対象の患者の解剖学的部位に対応する酸素飽和度の実測値を前記記憶・管理手段から読み出し、読み出した酸素飽和度の実測値と予め設定された酸素飽和度の基準値との差に応じて、デフォルトの参照情報を変更することを特徴とする内視鏡システム。
An irradiation means for irradiating a site to be observed of a patient with a first measurement light for measuring oxygen saturation of hemoglobin in a blood vessel existing in a biological tissue;
An imaging device for imaging the reflected light from the site to be observed of the first measurement light and outputting a first pixel value;
Storage means for storing reference information defining a correlation between the first pixel value and oxygen saturation;
Calculating means for calculating oxygen saturation according to the first pixel value based on the reference information;
A setting changing means for changing the reference information according to the patient ;
Based on the first pixel value corresponding to the first measurement light irradiated to the normal observation site where no lesion exists and the default reference information, the actual value of oxygen saturation of the normal observation site is obtained. Storage / management means for storing / managing for each patient or each anatomical part of the patient,
The setting changing unit reads an actual value of oxygen saturation corresponding to the patient to be observed or an anatomical part of the patient to be observed from the storage / management unit, and is preset with the read actual value of oxygen saturation. An endoscope system , wherein default reference information is changed according to a difference from a reference value of oxygen saturation .
正常な被観察部位の酸素飽和度の実測値を得る際には画像を複数フレーム撮影し、複数フレーム分の画像の酸素飽和度の平均値を実測値とすることを特徴とする請求項に記載の内視鏡システム。 2. The method according to claim 1 , wherein when obtaining an actual measurement value of oxygen saturation of a normal site to be observed, a plurality of frames of images are taken, and an average value of oxygen saturation of images for a plurality of frames is used as the actual measurement value. The endoscope system described. 酸素飽和度の基準値は、一つの値が設定されることを特徴とする請求項またはに記載の内視鏡システム。 The endoscope system according to claim 1 or 2 , wherein the reference value of oxygen saturation is set to one value. 酸素飽和度の基準値は、解剖学的部位に応じた複数の値が設定されることを特徴とする請求項またはに記載の内視鏡システム。 The endoscope system according to claim 1 or 2 , wherein a plurality of values corresponding to anatomical sites are set as the reference value of oxygen saturation. 被観察部位の解剖学的部位を入力する操作入力手段を備え、
前記設定変更手段は、前記操作入力手段からの操作入力信号に応じて基準値の設定を変更することを特徴とする請求項に記載の内視鏡システム。
Provided with operation input means for inputting the anatomical part of the observed part,
The endoscope system according to claim 4 , wherein the setting change unit changes a setting of a reference value in accordance with an operation input signal from the operation input unit.
前記撮像素子から出力された画素値に基づき、被観察部位の解剖学的部位を検出する部位検出手段を備え、
前記設定変更手段は、前記部位検出手段の検出結果に応じて基準値の設定を変更することを特徴とする請求項に記載の内視鏡システム。
Based on the pixel value output from the image sensor, comprising site detection means for detecting the anatomical site of the site to be observed,
The endoscope system according to claim 4 , wherein the setting changing unit changes a setting of a reference value according to a detection result of the part detection unit.
前記部位検出手段は、血液量の多寡に基づき、被観察部位の解剖学的部位を特定することを特徴とする請求項に記載の内視鏡システム。 The endoscope system according to claim 6 , wherein the part detection unit specifies an anatomical part of the observed part based on a blood volume. 前記算出手段は、正常な被観察部位の酸素飽和度の実測値を得る際には画像の全領域について酸素飽和度を算出することを特徴とする請求項ないしのいずれか一項に記載の内視鏡システム。 Said calculation means according to any one of claims 1 to 7, characterized in that to calculate the oxygen saturation for the entire region of an image when obtaining the measured value of the oxygen saturation of the normal target site Endoscope system. 前記算出手段は、正常な被観察部位の酸素飽和度の実測値を得る際には画像の限定された領域について酸素飽和度を算出することを特徴とする請求項ないしのいずれか一項に記載の内視鏡システム。 The calculating means, claims 1 to 7 any one of and calculates the oxygen saturation for a limited area of an image when obtaining the measured value of the oxygen saturation of the normal target site The endoscope system described in 1. 前記撮像素子から出力された画素値に基づき、正常な被観察部位の酸素飽和度の実測値を得る際に前記算出手段が酸素飽和度を算出する画像の領域を選定する領域選定手段を備えることを特徴とする請求項に記載の内視鏡システム。 Based on the pixel value output from the image sensor, the calculation means includes an area selection means for selecting an image area for calculating the oxygen saturation when obtaining an actual measurement value of the oxygen saturation of a normal site to be observed. The endoscope system according to claim 9 . 前記領域選定手段は、画像内で極端に明るい領域または極端に暗い領域以外を、酸素飽和度を算出する領域として選定することを特徴とする請求項10に記載の内視鏡システム。 The endoscope system according to claim 10 , wherein the region selection unit selects a region other than an extremely bright region or an extremely dark region in the image as a region for calculating oxygen saturation. 前記領域選定手段は、血液量が閾値よりも多い領域を、酸素飽和度を算出する領域として選定することを特徴とする請求項10に記載の内視鏡システム。 The endoscope system according to claim 10 , wherein the region selecting unit selects a region having a blood volume greater than a threshold value as a region for calculating oxygen saturation. 前記領域選定手段は、血管の密集度が閾値よりも低い領域を、酸素飽和度を算出する領域として選定することを特徴とする請求項10に記載の内視鏡システム。 The endoscope system according to claim 10 , wherein the region selecting unit selects a region where the density of blood vessels is lower than a threshold value as a region for calculating oxygen saturation. 前記領域選定手段で選定した領域を表示手段に表示することを特徴とする請求項10ないし13のいずれか一項に記載の内視鏡システム。 The endoscope system according to any one of claims 10 to 13 , wherein the region selected by the region selecting unit is displayed on a display unit. 正常な被観察部位の酸素飽和度の実測値を得る際には前記撮像素子の視野全体に正常な被観察部位を位置させて撮影を実施することを促すメッセージを表示手段に表示した後、撮影の開始を指示する操作入力に応じて撮影を開始することを特徴とする請求項ないし14のいずれか一項に記載の内視鏡システム。 When obtaining an actual measurement value of the oxygen saturation of a normal site to be observed, a message is displayed on the display means for prompting to carry out imaging by positioning the normal site to be observed over the entire field of view of the image sensor, and then imaging. The endoscope system according to any one of claims 1 to 14 , wherein imaging is started in response to an operation input instructing to start the operation. 酸素飽和度の実測値が許容範囲内に収まっているか否かを判定する判定手段を備え、
酸素飽和度の実測値が許容範囲内に収まっていた場合は以降の参照情報を変更する処理を続行し、
収まっていない場合は前記撮像素子の視野全体に正常な被観察部位を位置させて撮影を実施することを促すメッセージを表示手段に表示することを特徴とする請求項ないし14のいずれか一項に記載の内視鏡システム。
A determination means for determining whether or not the actual measurement value of the oxygen saturation is within an allowable range;
If the measured value of oxygen saturation is within the allowable range, continue the process of changing the reference information,
Any one of claims 1 to 14 if not fall and displaying on the display unit a message prompting the user to implement the shooting positions the normal object of interest to the entire field of view of the imaging device The endoscope system described in 1.
被観察部位にブロードな波長帯域の白色光を連続的に照射して肉眼で観察したときと略同等の画像を表示手段に表示する通常観察モードと、
第一測定光を照射して酸素飽和度の情報を算出してその結果を表示手段に表示する機能情報観察モードとを備え、
各モードを切替可能に構成することを特徴とする請求項1ないし16のいずれか一項に記載の内視鏡システム。
A normal observation mode in which an image substantially equivalent to that observed with the naked eye by continuously irradiating white light in a broad wavelength band to the site to be observed is displayed on the display means;
A function information observation mode for irradiating the first measurement light to calculate information on oxygen saturation and displaying the result on the display means;
The endoscope system according to any one of claims 1 to 16 , wherein each mode is configured to be switchable.
機能情報観察モードを選択したときに正常な被観察部位の酸素飽和度の実測値を得る撮影のための動作自動的に開始することを特徴とする請求項17に記載の内視鏡システム。 18. The endoscope system according to claim 17 , wherein when the function information observation mode is selected, an operation for imaging to obtain an actual measurement value of oxygen saturation at a normal site to be observed is automatically started. 第一測定光は、ヘモグロビンの吸光スペクトルにおいて酸化ヘモグロビンと還元ヘモグロビンの吸光係数に差が生じる波長帯域を含む光であることを特徴とする請求項1ないし18のいずれか一項に記載の内視鏡システム。 19. The endoscope according to any one of claims 1 to 18 , wherein the first measurement light is light including a wavelength band in which a difference occurs in an extinction coefficient between oxyhemoglobin and reduced hemoglobin in an absorption spectrum of hemoglobin. Mirror system. 第一測定光は、470nm±10nmの波長帯域の狭帯域光であることを特徴とする請求項19に記載の内視鏡システム。 The endoscope system according to claim 19 , wherein the first measurement light is narrowband light having a wavelength band of 470 nm ± 10 nm. 前記照射手段は、第一測定光に加えて血管中の血液量を測定するための第二測定光を被観察部位に照射し、
前記撮像素子は、第二測定光の被観察部位からの反射光を撮像して第二画素値を出力し、
参照情報は、第一画素値と酸素飽和度の相関関係に加えて第二画素値と血液量の相関関係を規定し、
前記算出手段は、参照情報に基づき第一画素値と第二画素値に応じた酸素飽和度と血液量の両方を算出することを特徴とする請求項1ないし20のいずれか一項に記載の内視鏡システム。
The irradiation means irradiates the site to be observed with the second measurement light for measuring the blood volume in the blood vessel in addition to the first measurement light,
The imaging element captures reflected light from the observed site of the second measurement light and outputs a second pixel value;
The reference information defines the correlation between the second pixel value and the blood volume in addition to the correlation between the first pixel value and oxygen saturation,
It said calculation means according to any one of claims 1 to 20, characterized in that calculating the first pixel value based on the reference information and both the second oxygen saturation according to the pixel values and the blood volume Endoscope system.
第二測定光は、赤色波長帯域を含む光であることを特徴とする請求項21に記載の内視鏡システム。 The endoscope system according to claim 21 , wherein the second measurement light is light including a red wavelength band. 前記照射手段は、第一、第二測定光に加えて参照光を被観察部位に照射し、
前記撮像素子は、参照光の被観察部位からの反射光を撮像して第三画素値を出力し、
前記算出手段は、第一、第二、および第三画素値に基づき酸素飽和度と血液量を算出することを特徴とする請求項21または22に記載の内視鏡システム。
The irradiation means irradiates the site to be observed with reference light in addition to the first and second measurement lights,
The imaging device captures reflected light from the observation site of reference light and outputs a third pixel value;
The endoscope system according to claim 21 or 22 , wherein the calculating means calculates oxygen saturation and blood volume based on the first, second, and third pixel values.
前記算出手段は、酸素飽和度と血液量の両方に依存性を有する第一画素値および第三画素値の比である第一信号比と、血液量に依存性を有する第二画素値および第三画素値の比である第二信号比とを求め、
参照情報は、酸素飽和度と第一、第二信号比との相関関係と、血液量と第二信号比との相関関係を規定し、
前記算出手段は、該参照情報から第二信号比に対応する血液量を求めるとともに、第一、第二信号比に対応する酸素飽和度を求めることを特徴とする請求項23に記載の内視鏡システム。
The calculating means includes a first signal ratio that is a ratio between a first pixel value and a third pixel value that depend on both oxygen saturation and a blood volume, a second pixel value that depends on a blood volume, and a first pixel value. Obtain the second signal ratio, which is the ratio of the three pixel values,
The reference information defines the correlation between the oxygen saturation and the first and second signal ratios, and the correlation between the blood volume and the second signal ratios,
The endoscopy according to claim 23 , wherein the calculating means obtains a blood volume corresponding to the second signal ratio from the reference information and obtains an oxygen saturation corresponding to the first and second signal ratios. Mirror system.
照射手段と、撮像素子と、記憶手段と、算出手段と、設定変更手段と、記憶・管理手段とを備える内視鏡システムの作動方法であって、
前記照射手段により、生体組織に存在する血管中のヘモグロビンの酸素飽和度を測定するための第一測定光を発生する測定光発生ステップと、
前記撮像素子により、第一測定光の被観察部位からの反射光を撮像して第一画素値を出力する撮像ステップと、
前記記憶手段に記憶された、第一画素値と酸素飽和度の相関関係を規定する参照情報に基づき、前記算出手段により、第一画素値に応じた酸素飽和度を算出する算出ステップと、
前記設定変更手段により、患者に応じて参照情報を変更する設定変更ステップと
病変が存在しない正常な被観察部位に照射された第一測定光に対応する第一画素値とデフォルトの参照情報とに基づき得られた、正常な被観察部位の酸素飽和度の実測値を、患者毎または患者の解剖学的部位毎に前記記憶・管理手段に記憶・管理する記憶・管理ステップとを備え、
前記設定変更ステップでは、観察対象の患者または観察対象の患者の解剖学的部位に対応する酸素飽和度の実測値を前記記憶・管理手段から読み出し、読み出した酸素飽和度の実測値と予め設定された酸素飽和度の基準値との差に応じて、デフォルトの参照情報を変更することを特徴とする内視鏡システムの作動方法。
An operation method of an endoscope system including an irradiation unit, an imaging device, a storage unit, a calculation unit, a setting change unit, and a storage / management unit ,
A measurement light generation step for generating a first measurement light for measuring the oxygen saturation of hemoglobin in blood vessels existing in the living tissue by the irradiation means;
An imaging step of imaging the reflected light from the site to be observed of the first measurement light and outputting a first pixel value by the imaging element;
A calculation step of calculating an oxygen saturation corresponding to the first pixel value by the calculation means based on reference information defining a correlation between the first pixel value and the oxygen saturation stored in the storage means;
A setting change step for changing reference information according to the patient by the setting change means ;
Based on the first pixel value corresponding to the first measurement light irradiated to the normal observation site where no lesion exists and the default reference information, the actual value of oxygen saturation of the normal observation site is obtained. A storage / management step for storing / managing in the storage / management means for each patient or each patient's anatomical part,
In the setting change step, the actual measurement value of the oxygen saturation corresponding to the observation target patient or the anatomical part of the observation target patient is read from the storage / management means, and the read actual measurement value of the oxygen saturation is preset. A method for operating an endoscope system, wherein default reference information is changed according to a difference from a reference value of oxygen saturation .
JP2013244819A 2013-11-27 2013-11-27 Endoscope system and method for operating endoscope system Active JP5766773B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013244819A JP5766773B2 (en) 2013-11-27 2013-11-27 Endoscope system and method for operating endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013244819A JP5766773B2 (en) 2013-11-27 2013-11-27 Endoscope system and method for operating endoscope system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2011161647A Division JP5426620B2 (en) 2011-07-25 2011-07-25 Endoscope system and method for operating endoscope system

Publications (2)

Publication Number Publication Date
JP2014076375A JP2014076375A (en) 2014-05-01
JP5766773B2 true JP5766773B2 (en) 2015-08-19

Family

ID=50782187

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013244819A Active JP5766773B2 (en) 2013-11-27 2013-11-27 Endoscope system and method for operating endoscope system

Country Status (1)

Country Link
JP (1) JP5766773B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5881916B1 (en) 2014-05-09 2016-03-09 オリンパス株式会社 Solid-state imaging device, endoscope and endoscope system
CN111343899B (en) 2017-11-13 2022-12-27 富士胶片株式会社 Endoscope system and working method thereof
JP7301595B2 (en) 2019-05-09 2023-07-03 富士フイルム株式会社 Endoscopic system, processor device, and method of operating the endoscope system
EP3973845A4 (en) 2019-05-21 2022-07-06 FUJIFILM Corporation Endoscope system, method for operating endoscope system, image processing device, and program for image processing device
JP7352411B2 (en) 2019-08-22 2023-09-28 キヤノン株式会社 Imaging device

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63311937A (en) * 1987-06-16 1988-12-20 Toshiba Corp Endoscopic apparatus
JP4554736B2 (en) * 1999-03-23 2010-09-29 シスメックス株式会社 Non-invasive blood analyzer
JP5431252B2 (en) * 2009-09-30 2014-03-05 富士フイルム株式会社 Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system

Also Published As

Publication number Publication date
JP2014076375A (en) 2014-05-01

Similar Documents

Publication Publication Date Title
JP5426620B2 (en) Endoscope system and method for operating endoscope system
JP5502812B2 (en) Biological information acquisition system and method of operating biological information acquisition system
JP5351924B2 (en) Biological information acquisition system and method of operating biological information acquisition system
JP5331904B2 (en) Endoscope system and method for operating endoscope system
JP5329593B2 (en) Biological information acquisition system and method of operating biological information acquisition system
JP4855728B2 (en) Illumination device and observation device
JP4554944B2 (en) Endoscope device
JP5303012B2 (en) Endoscope system, processor device for endoscope system, and method for operating endoscope system
JP5229723B2 (en) Fluorescence image acquisition device
EP2465432A1 (en) Endoscope apparatus
CN108366717B (en) Endoscope device
JP2019081044A (en) Image processing apparatus, method for operating image processing apparatus, and image processing program
WO2013164962A1 (en) Endoscope device
JP2010172673A (en) Endoscope system, processor for endoscope, and endoscopy aiding method
JP2009039510A (en) Imaging apparatus
JP2005131130A (en) Image processing device
JP2012135431A (en) Endoscopic diagnostic device
JP5766773B2 (en) Endoscope system and method for operating endoscope system
US11497390B2 (en) Endoscope system, method of generating endoscope image, and processor
JP5334952B2 (en) Image processing device
JPWO2019239854A1 (en) Endoscopic image processing device, endoscopic image processing method and endoscopic image processing program
JPWO2019171615A1 (en) Endoscope system, image processing equipment, image processing methods and programs
JP2012100733A (en) Endoscopic diagnostic apparatus
WO2019171703A1 (en) Endoscope system
JP6669539B2 (en) Image processing apparatus, operation method of image processing apparatus, and image processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140404

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150603

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150617

R150 Certificate of patent or registration of utility model

Ref document number: 5766773

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250