JP2015042274A - Electronic endoscope system, processor for electronic endoscope, and operation method of electronic endoscope system - Google Patents

Electronic endoscope system, processor for electronic endoscope, and operation method of electronic endoscope system Download PDF

Info

Publication number
JP2015042274A
JP2015042274A JP2014206429A JP2014206429A JP2015042274A JP 2015042274 A JP2015042274 A JP 2015042274A JP 2014206429 A JP2014206429 A JP 2014206429A JP 2014206429 A JP2014206429 A JP 2014206429A JP 2015042274 A JP2015042274 A JP 2015042274A
Authority
JP
Japan
Prior art keywords
blood vessel
narrowband
light
broadband
tracking target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014206429A
Other languages
Japanese (ja)
Other versions
JP5844447B2 (en
Inventor
山口 博司
Hiroshi Yamaguchi
博司 山口
飯田 孝之
Takayuki Iida
孝之 飯田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2014206429A priority Critical patent/JP5844447B2/en
Publication of JP2015042274A publication Critical patent/JP2015042274A/en
Application granted granted Critical
Publication of JP5844447B2 publication Critical patent/JP5844447B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Endoscopes (AREA)

Abstract

PROBLEM TO BE SOLVED: To accurately and surely track a target such as a lesion.SOLUTION: A wide-band light image 63, when the body cavity is irradiated by wide-band light BB, is obtained at intervals of a fixed time. In a tracking mode, a specific regional frame Ra is displayed in the wide-band light image 63. When a part such as a lesion enters in this specific regional frame Ra, a lock-on switch installed in an operation unit is pressed. In accordance with the pressing of the lock-on switch, a part in the specific regional frame is specified as a tracking target S, with blood vessel information of this tracking target S calculated. After the tracking target is specified, by moving an insertion part 16 or a tip end part 16a, a wide-band light image 64 is newly obtained which is different from the wide-band light image 63 at the time of the lock-on. In this newly obtained wide-band light image 64, an area Ra' is detected which includes the blood vessel information of the tracking target S. By repeating this detection, the tracking target S is tracked in a series of flow for obtaining the wide-band light image 64.

Description

本発明は、体腔内における病変部などの追跡対象を追跡する電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法に関する。   The present invention relates to an electronic endoscope system for tracking a tracking target such as a lesion in a body cavity, a processor device for the electronic endoscope, and a method for operating the electronic endoscope system.

近年の医療分野では、電子内視鏡を用いた診断や治療が数多く行なわれている。電子内視鏡は、被検者の体腔内に挿入される細長の挿入部を備えており、この挿入部の先端にはCCDなどの撮像装置が内蔵されている。また、電子内視鏡は光源装置に接続されており、光源装置で発せられた光は、挿入部の先端から体腔内部に対して照射される。このように体腔内部に光が照射された状態で、体腔内の被写体組織が、挿入部の先端の撮像装置によって撮像される。撮像により得られた画像は、電子内視鏡に接続されたプロセッサ装置で各種処理が施された後、モニタに表示される。   In the medical field in recent years, many diagnoses and treatments using an electronic endoscope have been performed. The electronic endoscope includes an elongated insertion portion that is inserted into the body cavity of a subject, and an imaging device such as a CCD is built in the distal end of the insertion portion. Further, the electronic endoscope is connected to the light source device, and the light emitted from the light source device is irradiated to the inside of the body cavity from the distal end of the insertion portion. In this manner, the subject tissue in the body cavity is imaged by the imaging device at the distal end of the insertion portion in a state where light is irradiated inside the body cavity. An image obtained by imaging is displayed on a monitor after various processing is performed by a processor device connected to the electronic endoscope.

このように電子内視鏡を用いることによって、被検者の体腔内の画像をリアルタイムに取得することができる。リアルタイムに得られる体腔内の撮像画像からは、被写体組織全体だけでなく、微細血管、深層血管、ピットパターン(腺口構造)、陥凹や隆起といった凹凸構造などの被写体組織の各部位をも観察することができる。診断時には、被写体組織全体や被写体組織の各部位などの状況から、腫瘍部位などの病変部が存在するか否かを判断する。   By using the electronic endoscope in this way, an image in the body cavity of the subject can be acquired in real time. From the captured image of the body cavity obtained in real time, not only the entire subject tissue but also each part of the subject tissue such as microvessel, deep blood vessel, pit pattern (gland opening structure), uneven structure such as depression or bulge is observed can do. At the time of diagnosis, it is determined whether or not there is a lesion such as a tumor site from the situation of the entire subject tissue or each site of the subject tissue.

体腔内の画像から病変部を発見した場合には、術者は、その発見した病変部が他の場所に転移しているかどうかなどを調べるため、内視鏡先端部を上下左右に動かしたり、体腔内の奥側に更に挿入したり又は引き出したりすることによって、発見した病変部の周囲を撮像する。このとき、内視鏡先端部を上下左右に動かしたりすることで、最初に発見した病変部を見失ってしまうことがある。これを防ぐためには、特許文献1のように、体腔内の画像から病変部を特徴点として検出し、その検出した特徴点を追跡することで、病変部を見失なわないようにすることができる。   When a lesion is found from an image in the body cavity, the operator moves the endoscope tip up / down / left / right to check whether the found lesion has spread to other locations, By further inserting or pulling out from the inner side of the body cavity, an image of the periphery of the found lesion is taken. At this time, by moving the distal end portion of the endoscope up and down, left and right, the lesion site that was first discovered may be lost. In order to prevent this, as in Patent Document 1, a lesioned part is detected as a feature point from an image in the body cavity, and the detected feature point is tracked so that the lesioned part is not lost. it can.

特開2002−95625号公報JP 2002-95625 A

特許文献1では、特徴点を追跡する際、病変部などのパターンを認識した上で、追跡を行っているものと思われる。しかしながら、パターン認識に基づいて追跡した場合には、新たに取得する画像から、その認識したパターンに類似する部分を正確に且つ確実に検出することは困難な場合がある。したがって、パターン認識に基づく追跡対象の追跡は、精度の面で劣ることがある。   In Patent Literature 1, when tracking feature points, it is considered that tracking is performed after a pattern such as a lesion is recognized. However, when tracking is performed based on pattern recognition, it may be difficult to accurately and reliably detect a portion similar to the recognized pattern from a newly acquired image. Accordingly, tracking of the tracking target based on pattern recognition may be inferior in terms of accuracy.

本発明は、診断の状況に応じて、医師が内視鏡画像を拡大したり又は遠景したり、内視鏡先端部を上下左右に動かしたりしても、病変部などの追跡対象を精度良く且つ確実に追跡することができる電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法を提供することを目的とする。   According to the present invention, a tracking target such as a lesioned part can be accurately detected even if a doctor enlarges or distantly views an endoscopic image or moves an endoscope tip part up, down, left, or right depending on the diagnosis situation. It is another object of the present invention to provide an electronic endoscope system, a processor device for the electronic endoscope, and an operation method of the electronic endoscope system that can be reliably tracked.

本発明の電子内視鏡システムは、広帯域光を発する広帯域光源と、広帯域光の波長帯域とは異なる特定の波長帯域を有する特殊光を発する特殊光源と、広帯域光で照明中の体腔内を撮像して広帯域撮像信号を取得し、特殊光で照明中の体腔内を撮像して特殊撮像信号を取得する撮像信号取得手段と、広帯域撮像信号から広帯域光画像を生成する画像生成手段と、広帯域光画像の中から追跡対象を指定する追跡対象指定手段と、特殊撮像信号から追跡対象の生体情報を取得する生体情報取得手段と、追跡対象の指定後に生成した広帯域光画像において、生体情報取得手段で取得した追跡対象の生体情報を使って追跡対象を追跡する追跡手段とを備える。   The electronic endoscope system of the present invention images a body light source that emits broadband light, a special light source that emits special light having a specific wavelength band that is different from the wavelength band of the broadband light, and the body cavity being illuminated with the broadband light An imaging signal acquisition means for acquiring a special imaging signal by imaging a body cavity being illuminated with special light, an image generation means for generating a broadband optical image from the broadband imaging signal, and broadband light. In a tracking target designating unit for designating a tracking target from an image, a biological information acquiring unit for acquiring biological information of the tracking target from a special imaging signal, and a broadband optical image generated after designating the tracking target, the biological information acquiring unit Tracking means for tracking the tracking target using the acquired biological information of the tracking target.

本発明の電子内視鏡システムに組み込まれる電子内視鏡用のプロセッサ装置は、広帯域光を発する広帯域光源と、広帯域光の波長帯域とは異なる特定の波長帯域を有する特殊光を発する特殊光源と、広帯域光で照明中の体腔内を撮像して広帯域撮像信号を取得し、特殊光で照明中の体腔内を撮像して特殊撮像信号を取得する撮像信号取得手段と、追跡対象指定手段とを備えるプロセッサ装置において、撮像信号取得手段から、広帯域撮像信号、及び特殊撮像信号を受信する受信手段と、広帯域撮像信号から広帯域光画像を生成する画像生成手段と、特殊撮像信号から、追跡対象指定手段によって広帯域光画像の中から指定された追跡対象の生体情報を取得する生体情報取得手段と、追跡対象の指定後に生成した広帯域光画像において、生体情報取得手段で取得した追跡対象の生体情報を使って追跡対象を追跡する追跡手段とを備える。   A processor device for an electronic endoscope incorporated in the electronic endoscope system of the present invention includes a broadband light source that emits broadband light, and a special light source that emits special light having a specific wavelength band different from the wavelength band of the broadband light. An imaging signal acquisition means for imaging a body cavity under illumination with broadband light to acquire a broadband imaging signal, an imaging of a body cavity under illumination with special light to acquire a special imaging signal, and a tracking target designating means. In the processor apparatus, the receiving means for receiving the broadband imaging signal and the special imaging signal from the imaging signal acquisition means, the image generating means for generating a broadband optical image from the broadband imaging signal, and the tracking target specifying means from the special imaging signal Biometric information acquisition means for acquiring biological information of a tracking target designated from a broadband optical image by a broadband optical image generated after designation of the tracking target, Using the acquired biological information tracked in acquisition means and a tracking means for tracking the target object.

本発明の電子内視鏡システムの作動方法は、広帯域光源が、広帯域光を発するステップと、撮像信号取得手段が、前記広帯域光で照明中の体腔内を撮像して広帯域撮像信号を取得するステップと、画像生成手段が、前記広帯域撮像信号から広帯域光画像を生成するステップと、追跡対象指定手段が、広帯域光画像の中から追跡対象を指定するステップと、特殊光源が、広帯域光の波長帯域とは異なる特定の波長帯域を有する特殊光を発するステップと、撮像信号取得手段が、特殊光で照明中の体腔内を撮像して特殊撮像信号を取得するステップと、生体情報取得手段が、特殊撮像信号から追跡対象の生体情報を取得するステップと、追跡手段が、追跡対象の指定後に生成した広帯域光画像において、生体情報取得手段で取得した追跡対象の生体情報を使って追跡対象を追跡するステップとを備える。   The operation method of the electronic endoscope system according to the present invention includes a step in which a broadband light source emits broadband light, and an imaging signal acquisition means acquires a broadband imaging signal by imaging the inside of a body cavity illuminated with the broadband light. And a step of generating a broadband optical image from the broadband imaging signal, a step of specifying a tracking target from the broadband optical image, and a special light source having a wavelength band of the broadband light. Emitting special light having a specific wavelength band different from the step, the imaging signal acquisition means acquiring a special imaging signal by imaging the inside of a body cavity illuminated with special light, and the biological information acquisition means The step of acquiring biological information of the tracking target from the imaging signal and the tracking target raw information acquired by the biological information acquisition unit in the broadband optical image generated after the tracking unit specifies the tracking target. And a step of tracking a tracking object by using the information.

追跡対象指定手段は、広帯域光画像内に指定領域枠を表示する表示手段と、指定領域枠内の部位を追跡対象として指定するロックオン手段とを備えることが好ましい。生体情報取得手段は、ロックオン手段で指定された時点での追跡対象の生体情報を記憶する記憶手段を備えることが好ましい。生体情報取得手段は、生体情報として、被写体組織内の血管がある位置までの距離を示す血管深さ、ヘモグロビンインデックスを示す血液濃度、酸素飽和度のうちの少なくともいずれか一つを取得することが好ましい。   The tracking target designating unit preferably includes a display unit that displays a designated area frame in the broadband light image, and a lock-on unit that designates a part in the designated area frame as a tracking target. The biometric information acquisition unit preferably includes a storage unit that stores biometric information to be tracked at the time designated by the lock-on unit. The biometric information acquisition means may acquire at least one of a blood vessel depth indicating a distance to a position where a blood vessel exists in the subject tissue, a blood concentration indicating a hemoglobin index, and an oxygen saturation as the biometric information. preferable.

特殊光源が、波長400nmから600nmまでの間で互いに異なる波長帯域を少なくとも3つ含む照明光であって波長帯域には青色帯域と緑色帯域が含まれる照明光を発光する電子内視鏡システムにおいて、撮像信号取得手段は、特殊撮像信号として、照明光で照明中の体腔内の血管を含む被写体組織を撮像して得られる撮像信号に含まれる狭帯域信号であって、互いに異なる波長帯域を持つ狭帯域光にそれぞれ対応する複数の狭帯域信号を取得し、生体情報取得手段は、複数の狭帯域信号に基づいて、血管深さに関する血管深さ情報及び血液濃度に関する血液濃度情報を含む血管情報を求める第1血管情報算出手段を備えることが好ましい。   In an electronic endoscope system in which a special light source emits illumination light including at least three wavelength bands different from each other in a wavelength range of 400 nm to 600 nm and the wavelength band includes a blue band and a green band. The imaging signal acquisition means is a narrow band signal included in an imaging signal obtained by imaging a subject tissue including a blood vessel in a body cavity illuminated with illumination light as a special imaging signal, and has narrow wavelength bands different from each other. A plurality of narrowband signals respectively corresponding to the band light are obtained, and the biological information acquisition means obtains blood vessel information including blood vessel depth information relating to the blood vessel depth and blood concentration information relating to the blood concentration based on the plurality of narrowband signals. It is preferable to provide a first blood vessel information calculating means for obtaining.

撮像信号取得手段は、互いに異なる波長帯域を有する青色帯域の第1及び第2狭帯域光に対応する第1及び第2狭帯域信号と、緑色帯域の第3狭帯域光に対応する第3狭帯域信号とを取得し、第1血管情報算出手段は、第1〜第3狭帯域信号に基づいて、血管深さ情報及び血液濃度情報を求めることが好ましい。第1血管情報算出手段は、第1及び第2狭帯域信号間の第1輝度比と、第2及び第3狭帯域信号間の第2輝度比とを算出する輝度比算出部と、第1及び第2輝度比と血管深さ及び血液濃度との相関関係を予め記憶する血管深さ−血液濃度相関関係記憶部と、血管深さ−血液濃度相関関係記憶部の相関関係を参照して、輝度比算出部で算出された第1及び第2輝度比に対応する血管深さ情報及び血液濃度情報を求める血管深さ−血液濃度算出部とを備えることが好ましい。第1狭帯域光の波長帯域は405±10nmであり、第2狭帯域光の波長帯域は470±10nmであり、第3狭帯域光の波長帯域は560±10nmであることが好ましい。   The imaging signal acquisition means includes first and second narrowband signals corresponding to the first and second narrowband lights in the blue band having different wavelength bands and a third narrowband corresponding to the third narrowband light in the green band. Preferably, the first blood vessel information calculating means obtains the blood vessel depth information and the blood concentration information based on the first to third narrow band signals. The first blood vessel information calculating means includes a luminance ratio calculating unit that calculates a first luminance ratio between the first and second narrowband signals and a second luminance ratio between the second and third narrowband signals; And referring to the correlation between the blood vessel depth-blood concentration correlation storage unit that stores in advance the correlation between the second luminance ratio and the blood vessel depth and blood concentration, and the correlation between the blood vessel depth-blood concentration correlation storage unit, It is preferable to include a blood vessel depth-blood concentration calculation unit for obtaining blood vessel depth information and blood concentration information corresponding to the first and second luminance ratios calculated by the luminance ratio calculation unit. The wavelength band of the first narrowband light is preferably 405 ± 10 nm, the wavelength band of the second narrowband light is 470 ± 10 nm, and the wavelength band of the third narrowband light is preferably 560 ± 10 nm.

特殊光源が、中心波長が450nm以下の波長領域を含む照明光を発光する電子内視鏡システムにおいて、撮像信号取得手段は、特殊撮像信号として、照明光で照明中の体腔内の血管を含む被写体組織を撮像して得られる撮像信号に含まれる狭帯域信号であって、互いに異なる波長帯域を持ち、少なくとも一方の中心波長が450nm以下である複数の狭帯域光にそれぞれ対応する複数の狭帯域信号を取得し、生体情報取得手段は、複数の狭帯域信号に基づいて、血管深さに関する血管深さ情報及び酸素飽和度に関する酸素飽和度情報を含む血管情報を求める第2血管情報算出手段を備えることが好ましい。複数の狭帯域信号は、酸素と結合した酸化ヘモグロビンと結合していない還元ヘモグロビンに対して異なる吸光度を示し、且つ、酸素飽和度によって各ヘモグロビンのそれぞれに対する吸光度に差が生じるような波長を含んでいることが好ましい。   In an electronic endoscope system in which a special light source emits illumination light including a wavelength region having a central wavelength of 450 nm or less, the imaging signal acquisition means includes a subject including a blood vessel in a body cavity illuminated with illumination light as the special imaging signal A plurality of narrowband signals corresponding to a plurality of narrowband lights having different wavelength bands and at least one central wavelength of 450 nm or less, which are narrowband signals included in an imaging signal obtained by imaging a tissue The biological information acquisition means includes second blood vessel information calculation means for obtaining blood vessel information including blood vessel depth information related to blood vessel depth and oxygen saturation information related to oxygen saturation based on a plurality of narrowband signals. It is preferable. The multiple narrowband signals include wavelengths that exhibit different absorbances for reduced hemoglobin that is not bound to oxygenated oxygen bound to oxygen and that differ in absorbance for each hemoglobin due to oxygen saturation. Preferably it is.

撮像信号取得手段は、互いに異なる波長帯域を有する青色帯域の第1及び第2狭帯域光に対応する第1及び第2狭帯域信号と、第1及び第2狭帯域光と異なる波長帯域を有する第4狭帯域光に対応する第4狭帯域信号とを取得し、第2血管情報算出手段は、第1及び第4狭帯域信号間の第3輝度比と、第1及び第2狭帯域信号間の第4輝度比とを算出する輝度比算出部と、第3及び第4輝度比と血管深さ及び酸素飽和度との相関関係を予め記憶する血管深さ−酸素飽和度相関関係記憶部と、血管深さ−酸素飽和度相関関係記憶部の相関関係を参照して、輝度比算出部で算出された第3及び第4輝度比に対応する血管深さ情報及び酸素飽和度情報を求める血管深さ−酸素飽和度算出部とを備えることが好ましい。第1狭帯域光の波長帯域は405±10nmであり、第2狭帯域光の波長帯域は470±10nmであり、第4狭帯域光の波長帯域は440±10nmであることが好ましい。   The imaging signal acquisition means has first and second narrowband signals corresponding to the first and second narrowband lights in the blue band having different wavelength bands, and a different wavelength band from the first and second narrowband lights. The fourth narrowband signal corresponding to the fourth narrowband light is acquired, and the second blood vessel information calculating means obtains the third luminance ratio between the first and fourth narrowband signals and the first and second narrowband signals. A luminance ratio calculation unit that calculates a fourth luminance ratio between them, and a blood vessel depth-oxygen saturation correlation storage unit that prestores correlations between the third and fourth luminance ratios, blood vessel depth, and oxygen saturation The blood vessel depth information and the oxygen saturation information corresponding to the third and fourth luminance ratios calculated by the luminance ratio calculation unit are obtained with reference to the correlation of the blood vessel depth-oxygen saturation correlation storage unit. It is preferable to include a blood vessel depth-oxygen saturation calculation unit. The wavelength band of the first narrowband light is preferably 405 ± 10 nm, the wavelength band of the second narrowband light is 470 ± 10 nm, and the wavelength band of the fourth narrowband light is preferably 440 ± 10 nm.

本発明によれば、追跡対象の生体情報を用いて追跡を行なっているため、内視鏡画像を拡大したり又は遠景したり、内視鏡先端部を上下左右に動かしたりしても、追跡対象の追跡を精度良く且つ確実にすることができる。   According to the present invention, since tracking is performed using the biological information of the tracking target, the tracking can be performed even if the endoscope image is enlarged or distant, or the endoscope tip is moved up, down, left, or right. It is possible to accurately and reliably track the object.

本発明の電子内視鏡システムの外観図である。It is an external view of the electronic endoscope system of the present invention. 本発明の電子内視鏡システムの電気的構成を示すブロック図である。It is a block diagram which shows the electrical constitution of the electronic endoscope system of this invention. (A)は通常観察モード時または追跡対象指定処理におけるCCDの撮像動作を、(B)は血管情報取得処理時におけるCCDの撮像動作を、(C)は追跡対象検出処理時におけるCCDの撮像動作を説明する説明図である。(A) is a CCD imaging operation in the normal observation mode or tracking target designation processing, (B) is a CCD imaging operation in the blood vessel information acquisition processing, and (C) is a CCD imaging operation in the tracking target detection processing. It is explanatory drawing explaining these. モニタに表示される体腔内の画像図である。It is an image figure in the body cavity displayed on a monitor. 体腔内での内視鏡の挿入状態とその挿入状態で撮像された体腔内壁面の状態を説明する説明図であり、(B)は(A)の挿入位置よりも更に奥側で撮像されたことを表している。It is explanatory drawing explaining the state of the insertion surface of the endoscope in a body cavity, and the state of the body cavity inner wall surface imaged in the insertion state, (B) was imaged further back | inner side from the insertion position of (A) Represents that. 体腔内での内視鏡の挿入状態とその挿入状態で撮像された体腔内の状態を説明する説明図であり、(B)は(A)の挿入位置よりも更に奥側で撮像されたことを表している。It is explanatory drawing explaining the state in the body cavity image | photographed in the insertion state of the endoscope in a body cavity, and the insertion state, (B) was imaged further back | inner side from the insertion position of (A) Represents. 体腔内での内視鏡の挿入状態とその挿入状態で撮像された体腔内壁面の状態を説明する説明図であり、(B)は(A)の挿入位置よりも手前側で撮像されたことを表しており、(C)は(B)の挿入位置よりも奥側で撮像されたことを表している。It is explanatory drawing explaining the state of the insertion surface of the endoscope in a body cavity, and the state of the body cavity inner wall surface imaged in the insertion state, (B) was imaged on the near side from the insertion position of (A) (C) shows that the image was taken on the back side from the insertion position of (B). 第1及び2輝度比S1,S2と血管深さ及び血液濃度との相関関係を示すグラフである。It is a graph which shows correlation with 1st and 2 brightness | luminance ratio S1, S2, and blood vessel depth and blood concentration. ヘモグロビンの吸収係数を示すグラフである。It is a graph which shows the absorption coefficient of hemoglobin. 第3及び4輝度比S3,S4と血管深さ及び酸素飽和度との相関関係を示すグラフである。It is a graph which shows correlation with 3rd and 4 brightness | luminance ratio S3, S4, blood vessel depth, and oxygen saturation. (A)は輝度座標系における第1及び第2輝度比の座標(S1,S2)を、(B)は座標(S1,S2)に対応する血管情報座標系の座標(K,L)を求める方法を説明する説明図である。(A) shows the coordinates (S1 * , S2 * ) of the first and second luminance ratios in the luminance coordinate system, and (B) shows the coordinates (K * ) of the blood vessel information coordinate system corresponding to the coordinates (S1 * , S2 * ) . , L * ). (A)は輝度座標系における第3及び第4輝度比の座標(S3,S4)を、(B)は座標(S3,S4)に対応する血管情報座標系の座標(U,V)を求める方法を説明する説明図である。(A) shows the coordinates (S3 * , S4 * ) of the third and fourth luminance ratios in the luminance coordinate system, and (B) shows the coordinates (U * ) of the blood vessel information coordinate system corresponding to the coordinates (S3 * , S4 * ) . , V * ). 本発明の作用を示すフローチャートである。It is a flowchart which shows the effect | action of this invention. 本発明の本実施形態とは別の実施形態の電子内視鏡システムの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the electronic endoscope system of embodiment different from this embodiment of this invention. 別の実施形態の電子内視鏡システムで用いられる回転フィルタの概略図である。It is the schematic of the rotation filter used with the electronic endoscope system of another embodiment.

図1に示すように、本発明の電子内視鏡システム10は、被検者の体腔内を撮像する電子内視鏡11と、撮像により得られた信号に基づいて体腔内の被写体組織の画像を生成するプロセッサ装置12と、体腔内を照射する光を供給する光源装置13と、体腔内の画像を表示するモニタ14とを備えている。電子内視鏡11は、体腔内に挿入される可撓性の挿入部16と、挿入部16の基端部分に設けられた操作部17と、操作部17とプロセッサ装置12及び光源装置13との間を連結するユニバーサルコード18とを備えている。   As shown in FIG. 1, an electronic endoscope system 10 according to the present invention includes an electronic endoscope 11 that images a body cavity of a subject, and an image of a subject tissue in the body cavity based on a signal obtained by the imaging. A processor device 12 for generating the light, a light source device 13 for supplying light for irradiating the inside of the body cavity, and a monitor 14 for displaying an image in the body cavity. The electronic endoscope 11 includes a flexible insertion portion 16 to be inserted into a body cavity, an operation portion 17 provided at a proximal end portion of the insertion portion 16, an operation portion 17, a processor device 12, and a light source device 13. And a universal cord 18 for connecting the two.

挿入部16の先端には、複数の湾曲駒を連結した湾曲部19が形成されている。湾曲部19は、操作部のアングルノブ21を操作することにより、上下左右方向に湾曲動作する。湾曲部19の先端には、体腔内撮影用の光学系等を内蔵した先端部16aが設けられており、この先端部16aは、湾曲部19の湾曲動作によって体腔内の所望の方向に向けられる。   A bending portion 19 in which a plurality of bending pieces are connected is formed at the distal end of the insertion portion 16. The bending portion 19 is bent in the vertical and horizontal directions by operating the angle knob 21 of the operation portion. The distal end of the bending portion 19 is provided with a distal end portion 16a incorporating an optical system for in-vivo imaging, and the distal end portion 16a is directed in a desired direction in the body cavity by the bending operation of the bending portion 19. .

ユニバーサルコード18には、プロセッサ装置12および光源装置13側にコネクタ24が取り付けられている。コネクタ24は、通信用コネクタと光源用コネクタからなる複合タイプのコネクタであり、電子内視鏡11は、このコネクタ24を介して、プロセッサ装置12および光源装置13に着脱自在に接続される。   A connector 24 is attached to the universal cord 18 on the processor device 12 and the light source device 13 side. The connector 24 is a composite type connector including a communication connector and a light source connector, and the electronic endoscope 11 is detachably connected to the processor device 12 and the light source device 13 via the connector 24.

図2に示すように、光源装置13は、広帯域光源30と、シャッター31と、シャッター駆動部32と、第1〜第4狭帯域光源33〜35、38と、カプラー36と、光源切替部37とを備えている。広帯域光源30はキセノンランプ、白色LED、マイクロホワイト光源などであり、波長が赤色領域から青色領域(約470〜700nm)にわたる広帯域光BBを発生する。広帯域光源30は、電子内視鏡11の使用中、常時点灯している。広帯域光源30から発せられた広帯域光BBは、集光レンズ39により集光されて、広帯域用光ファイバ40に入射する。   As shown in FIG. 2, the light source device 13 includes a broadband light source 30, a shutter 31, a shutter driving unit 32, first to fourth narrowband light sources 33 to 35, 38, a coupler 36, and a light source switching unit 37. And. The broadband light source 30 is a xenon lamp, a white LED, a micro white light source, or the like, and generates broadband light BB having a wavelength ranging from a red region to a blue region (about 470 to 700 nm). The broadband light source 30 is always lit while the electronic endoscope 11 is in use. The broadband light BB emitted from the broadband light source 30 is collected by the condenser lens 39 and enters the broadband optical fiber 40.

シャッター31は、広帯域光源30と集光レンズ39との間に設けられており、広帯域光BBの光路に挿入されて広帯域光BBを遮光する挿入位置と、挿入位置から退避して広帯域光BBが集光レンズ39に向かうことを許容する退避位置との間で移動自在となっている。シャッター駆動部32はプロセッサ装置内のコントローラー62に接続されており、コントローラー62からの指示に基づいてシャッター31の駆動を制御する。   The shutter 31 is provided between the broadband light source 30 and the condenser lens 39. The shutter 31 is inserted in the optical path of the broadband light BB to block the broadband light BB, and the broadband light BB is retracted from the insertion position. It is movable between a retracted position that allows it to go to the condenser lens 39. The shutter drive unit 32 is connected to a controller 62 in the processor device, and controls the drive of the shutter 31 based on an instruction from the controller 62.

第1〜第4狭帯域光源33〜35,38はレーザーダイオードやLEDなどであり、第1狭帯域光源33は波長が400±10nmに、好ましくは405nmに制限された青色帯域の狭帯域の光(以下「第1狭帯域光N1」とする)を、第2狭帯域光源34は波長が470±10nmに、好ましくは473nmに制限された青色帯域の狭帯域の光(以下「第2狭帯域光N2」とする)を、第3狭帯域光源35は波長が560±10nmに、好ましくは560nmに制限された緑色帯域の狭帯域の光(以下「第3狭帯域光N3」とする)を、第4狭帯域光源38は、波長が440±10nmに、好ましくは445nmに制限された狭帯域の光(以下「第4狭帯域光N4」とする)を発生する。第1〜第4狭帯域光源33〜35,38はそれぞれ第1〜第4狭帯域用光ファイバ33a〜35a,38aに接続されており、各光源で発せられた第1〜第4狭帯域光N1〜N4は第1〜第4狭帯域用光ファイバ33a〜35a,38に入射する。   The first to fourth narrowband light sources 33 to 35, 38 are laser diodes, LEDs, and the like, and the first narrowband light source 33 has a narrowband light in a blue band whose wavelength is limited to 400 ± 10 nm, preferably 405 nm. (Hereinafter referred to as “first narrowband light N1”), the second narrowband light source 34 has a narrowband light in a blue band whose wavelength is limited to 470 ± 10 nm, preferably 473 nm (hereinafter “second narrowband light”). The third narrow-band light source 35 is a narrow-band light in the green band whose wavelength is limited to 560 ± 10 nm, preferably 560 nm (hereinafter referred to as “third narrow-band light N3”). The fourth narrowband light source 38 generates narrowband light whose wavelength is limited to 440 ± 10 nm, preferably 445 nm (hereinafter referred to as “fourth narrowband light N4”). The first to fourth narrowband light sources 33 to 35 and 38 are connected to the first to fourth narrowband optical fibers 33a to 35a and 38a, respectively, and the first to fourth narrowband lights emitted from the respective light sources. N1 to N4 enter the first to fourth narrowband optical fibers 33a to 35a, 38.

カプラー36は、電子内視鏡内のライトガイド43と、広帯域用光ファイバ40及び第1〜第4狭帯域用光ファイバ33a〜35a,38aとを連結する。これにより、広帯域光BBは、広帯域用光ファイバ40を介して、ライトガイド43に入射することが可能となる。また、第1〜第4狭帯域光N1〜N4は、第1〜第4狭帯域用光ファイバ33a〜35a,38aを介して、ライトガイド43に入射することが可能となる。   The coupler 36 connects the light guide 43 in the electronic endoscope to the broadband optical fiber 40 and the first to fourth narrowband optical fibers 33a to 35a, 38a. Thereby, the broadband light BB can be incident on the light guide 43 via the broadband optical fiber 40. Further, the first to fourth narrowband lights N1 to N4 can enter the light guide 43 via the first to fourth narrowband optical fibers 33a to 35a, 38a.

光源切替部37はプロセッサ装置内のコントローラー62に接続されており、コントローラー62からの指示に基づいて、第1〜第4狭帯域光源33〜35,38をON(点灯)またはOFF(消灯)に切り替える。通常観察モードでは、広帯域光BBが体腔内に照射されて広帯域光画像の撮像が行なわれる一方、第1〜第4狭帯域光源33〜35,38はOFFにされる。これに対して、病変部などの追跡対象を追跡する追跡モードでは、追跡対象指定処理、血管情報取得処理、追跡対象検出処理の3つの処理が存在し、各処理によって、それぞれ光の照射方法が異なる。   The light source switching unit 37 is connected to a controller 62 in the processor device, and on the basis of an instruction from the controller 62, the first to fourth narrowband light sources 33 to 35, 38 are turned on (turned on) or turned off (off). Switch. In the normal observation mode, the broadband light BB is irradiated into the body cavity to capture a broadband optical image, while the first to fourth narrowband light sources 33 to 35, 38 are turned off. On the other hand, in the tracking mode for tracking a tracking target such as a lesion, there are three processes: a tracking target designating process, a blood vessel information acquisition process, and a tracking target detection process. Different.

追跡対象指定処理は、追跡対象をロックオンによって指定するまでの処理であり、通常観察モードと同様、広帯域光BBを体腔内に照射して広帯域光画像の撮像を行なう一方、第1〜第4狭帯域光源33〜35,38はOFFにされる。追跡対象がロックオンされた後に切り替えられる血管情報取得処理は、追跡対象の血管情報を取得する処理であり、この血管情報取得処理に切り替えられると、シャッター31を挿入位置にセットして、体腔内への広帯域光BBの照射を停止する。広帯域光BBの照射が停止されると、第1狭帯域光源33が光源切替部37によりONに切り替えられる。そして、第1狭帯域光N1が体腔内に照射された状態で、被写体組織の撮像が行なわれる。撮像が完了すると、コントローラー62から光源切替の指示がなされ、第1狭帯域光源33がOFFに、第2狭帯域光源34がONに切り替えられる。そして、第2狭帯域光N2を体腔内に照射した状態での撮像が完了すると、同様にして、第2狭帯域光源34がOFFに、第3狭帯域光源35がONに切り替えられる。そして、第3狭帯域光N3を体腔内に照射した状態での撮像が完了すると、第3狭帯域光源35がOFFに、第4狭帯域光源38がONに切り替えられる。そして、第4狭帯域光N4を体腔内に照射した状態での撮像が完了すると、第4狭帯域光源38がOFFに切り替えられる。   The tracking target designation process is a process until the tracking target is designated by lock-on, and in the same way as in the normal observation mode, the broadband light BB is irradiated into the body cavity and the broadband optical image is captured. The narrow band light sources 33 to 35, 38 are turned off. The blood vessel information acquisition process that is switched after the tracking target is locked on is a process of acquiring the blood vessel information of the tracking target. When switched to this blood vessel information acquisition process, the shutter 31 is set at the insertion position, The irradiation of the broadband light BB is stopped. When the irradiation of the broadband light BB is stopped, the first narrowband light source 33 is switched on by the light source switching unit 37. The subject tissue is imaged in a state where the first narrowband light N1 is irradiated into the body cavity. When the imaging is completed, a light source switching instruction is issued from the controller 62, and the first narrow band light source 33 is switched OFF and the second narrow band light source 34 is switched ON. When the imaging with the second narrowband light N2 applied to the body cavity is completed, the second narrowband light source 34 is switched off and the third narrowband light source 35 is switched on similarly. When the imaging with the third narrowband light N3 applied to the body cavity is completed, the third narrowband light source 35 is switched off and the fourth narrowband light source 38 is switched on. And when the imaging in the state which irradiated the 4th narrow-band light N4 in the body cavity is completed, the 4th narrow-band light source 38 will be switched OFF.

血管情報取得処理後に切り替えられる追跡対象検出処理は、ロックオン後に取得した広帯域光画像の中から追跡対象を検出する処理であり、この追跡対象検出処理に切り替えられると、シャッター31が退避位置にセットされる。そして、体腔内に広帯域光BBを一定時間照射した後に、シャッター31を挿入位置にセットして、体腔内への広帯域光BBの照射を停止する。広帯域光BBの照射が停止されると、血管情報取得処理と同様に、第1〜第4狭帯域光源33〜35、38を順次ONに切り替えて、第1〜第4狭帯域光N1〜N4を一定時間体腔内に照射する。その第1〜第4狭帯域光N1〜N4の照射毎には、血管情報取得処理と同様に、CCD44によって撮像を行なう。   The tracking target detection process switched after the blood vessel information acquisition process is a process for detecting a tracking target from the broadband optical image acquired after lock-on. When switched to the tracking target detection process, the shutter 31 is set at the retracted position. Is done. Then, after irradiating the body cavity with the broadband light BB for a certain period of time, the shutter 31 is set at the insertion position, and the irradiation of the broadband light BB into the body cavity is stopped. When the irradiation of the broadband light BB is stopped, similarly to the blood vessel information acquisition process, the first to fourth narrowband light sources 33 to 35 and 38 are sequentially switched on, and the first to fourth narrowband lights N1 to N4 are turned on. Is irradiated into the body cavity for a certain time. For each irradiation of the first to fourth narrowband lights N1 to N4, imaging is performed by the CCD 44 as in the blood vessel information acquisition process.

電子内視鏡11は、ライトガイド43、CCD44、アナログ処理回路45(AFE:Analog Front End)、撮像制御部46を備えている。ライトガイド43は大口径光ファイバ、バンドルファイバなどであり、入射端が光源装置内のカプラー36に挿入されており、出射端が先端部16aに設けられた照射レンズ48に向けられている。光源装置13で発せられた光は、ライトガイド43により導光された後、照射レンズ48に向けて出射する。照射レンズ48に入射した光は、先端部16aの端面に取り付けられた照明窓49を通して、体腔内に照射される。体腔内で反射した広帯域光BB及び第1〜第4狭帯域光N1〜N4は、先端部16aの端面に取り付けられた観察窓50を通して、集光レンズ51に入射する。   The electronic endoscope 11 includes a light guide 43, a CCD 44, an analog processing circuit 45 (AFE: Analog Front End), and an imaging control unit 46. The light guide 43 is a large-diameter optical fiber, a bundle fiber, or the like. The incident end is inserted into the coupler 36 in the light source device, and the emission end is directed to the irradiation lens 48 provided at the distal end portion 16a. The light emitted from the light source device 13 is guided by the light guide 43 and then emitted toward the irradiation lens 48. The light incident on the irradiation lens 48 is irradiated into the body cavity through the illumination window 49 attached to the end surface of the distal end portion 16a. The broadband light BB and the first to fourth narrowband lights N1 to N4 reflected in the body cavity enter the condenser lens 51 through the observation window 50 attached to the end surface of the distal end portion 16a.

CCD44はモノクロのCCDであり、集光レンズ51からの光を撮像面44aで受光し、受光した光を光電変換して信号電荷を蓄積する。そして、蓄積した信号電荷を撮像信号として読み出し、読み出した撮像信号をAFE45に送る。ここで、CCD44に広帯域光BBが入射したときの撮像信号を広帯域撮像信号とし、CCD44に第1〜4狭帯域光N1〜N4が入射したときの撮像信号を第1〜第4狭帯域撮像信号とする。   The CCD 44 is a monochrome CCD, and receives light from the condenser lens 51 by the imaging surface 44a, photoelectrically converts the received light, and accumulates signal charges. Then, the accumulated signal charge is read as an imaging signal, and the read imaging signal is sent to the AFE 45. Here, the imaging signal when the broadband light BB is incident on the CCD 44 is referred to as a broadband imaging signal, and the imaging signals when the first to fourth narrowband lights N1 to N4 are incident on the CCD 44 are the first to fourth narrowband imaging signals. And

AFE45は、相関二重サンプリング回路(CDS)、自動ゲイン制御回路(AGC)、及びアナログ/デジタル変換器(A/D)(いずれも図示省略)から構成されている。CDSは、CCD44からの撮像信号に対して相関二重サンプリング処理を施し、CCD44の駆動により生じたノイズを除去する。AGCは、CDSによりノイズが除去された撮像信号を増幅する。A/Dは、AGCで増幅された撮像信号を、所定のビット数のデジタルな撮像信号に変換してプロセッサ装置12に入力する。   The AFE 45 includes a correlated double sampling circuit (CDS), an automatic gain control circuit (AGC), and an analog / digital converter (A / D) (all not shown). The CDS performs correlated double sampling processing on the image pickup signal from the CCD 44 to remove noise generated by driving the CCD 44. The AGC amplifies the imaging signal from which noise has been removed by CDS. The A / D converts the imaging signal amplified by the AGC into a digital imaging signal having a predetermined number of bits and inputs the digital imaging signal to the processor device 12.

撮像制御部46は、プロセッサ装置12内のコントローラー62に接続されており、コントローラー62から指示がなされたときにCCD44に対して駆動信号を送る。CCD44は、撮像制御部46からの駆動信号に基づいて、所定のフレームレートで撮像信号をAFE45に出力する。通常観察モードに設定されている場合、図3(A)に示すように、1フレームの取得期間内で、広帯域光BBを光電変換して信号電荷を蓄積するステップと、蓄積した信号電荷を広帯域撮像信号として読み出すステップとの合計2つの動作が行なわれる。この動作は、通常観察モードに設定されている間、繰り返し行なわれる。   The imaging control unit 46 is connected to the controller 62 in the processor device 12, and sends a drive signal to the CCD 44 when an instruction is given from the controller 62. The CCD 44 outputs an imaging signal to the AFE 45 at a predetermined frame rate based on the drive signal from the imaging control unit 46. When the normal observation mode is set, as shown in FIG. 3A, within the acquisition period of one frame, the step of photoelectrically converting the broadband light BB to accumulate the signal charge and the accumulated signal charge to the broadband A total of two operations are performed including a step of reading out as an imaging signal. This operation is repeated while the normal observation mode is set.

これに対して、通常観察モードから追跡モードに切り替えられた場合には、まず追跡対象指定処理に設定される。この追跡対象指定処理では、図3(A)の通常観察モードと同様の動作によって、広帯域撮像信号が読み出される。この動作は、追跡対象指定処理に設定されている間、繰り返し行われる。   In contrast, when the normal observation mode is switched to the tracking mode, the tracking target designation process is first set. In this tracking target designation process, a broadband imaging signal is read out by the same operation as in the normal observation mode in FIG. This operation is repeatedly performed while the tracking target specifying process is set.

次に、追跡対象指定処理から血管情報取得処理に切り替えられると、図3(B)に示すように、1フレームの取得期間内で、第1狭帯域光N1を光電変換して信号電荷を蓄積するステップと、蓄積した信号電荷を第1狭帯域撮像信号として読み出すステップとの合計2つの動作が行なわれる。第1狭帯域撮像信号の読み出しが完了すると、1フレームの取得期間内で、第2狭帯域光N2を光電変換して信号電荷を蓄積するステップと、蓄積した信号電荷を第2狭帯域撮像信号として読み出すステップとが行なわれる。   Next, when the tracking target designation process is switched to the blood vessel information acquisition process, as shown in FIG. 3B, the signal charge is accumulated by photoelectrically converting the first narrowband light N1 within the acquisition period of one frame. And a step of reading the accumulated signal charge as the first narrow-band imaging signal are performed in total. When the reading of the first narrowband imaging signal is completed, the step of photoelectrically converting the second narrowband light N2 to accumulate the signal charge within the acquisition period of one frame, and the accumulated signal charge to the second narrowband imaging signal Are read out.

第2狭帯域撮像信号の読み出しが完了すると、1フレームの取得期間内で、第3狭帯域光N3を光電変換して信号電荷を蓄積するステップと、蓄積した信号電荷を第3狭帯域撮像信号として読み出すステップとが行なわれる。第3狭帯域撮像信号の読み出しが完了すると、1フレームの取得期間内で、第4狭帯域光N4を光電変換して信号電荷を蓄積するステップと、蓄積した信号電荷を第4狭帯域撮像信号として読み出すステップとが行なわれる。   When the reading of the second narrowband imaging signal is completed, the step of photoelectrically converting the third narrowband light N3 and accumulating the signal charge within the acquisition period of one frame, and the accumulated signal charge as the third narrowband imaging signal Are read out. When the reading of the third narrowband imaging signal is completed, a step of photoelectrically converting the fourth narrowband light N4 and accumulating signal charges within the acquisition period of one frame, and the accumulated signal charges are converted into the fourth narrowband imaging signal. Are read out.

次に、血管情報取得処理から追跡対象検出処理に切り替えられると、図3(C)に示すように、まず最初に、1フレームの取得期間内で、図3(A)の通常観察モードと同様の動作によって、広帯域撮像信号が読み出される。広帯域撮像信号の読み出しが完了すると、図3(B)の血管情報取得処理と同様の動作によって、第1〜第4狭帯域撮像信号が読み出される。広帯域撮像信号の読出→第1〜第4狭帯域撮像信号の読出の一連の動作は、追跡対象検出処理に設定されている間、繰り返し行われる。   Next, when the blood vessel information acquisition process is switched to the tracking target detection process, as shown in FIG. 3C, first, within the acquisition period of one frame, the same as the normal observation mode of FIG. By this operation, the broadband imaging signal is read out. When the readout of the wideband imaging signal is completed, the first to fourth narrowband imaging signals are read out by the same operation as the blood vessel information acquisition process in FIG. A series of operations of reading the broadband imaging signal → reading the first to fourth narrowband imaging signals is repeatedly performed while the tracking target detection process is set.

図2に示すように、プロセッサ装置12は、デジタル信号処理部55(DSP(Digital Signal Processor))と、フレームメモリ56と、内視鏡画像生成部57と、表示制御回路58と、追跡部60と、を備えており、コントローラー62が各部を制御している。DSP55は、電子内視鏡のAFE45から出力された広帯域撮像信号及び第1〜第4狭帯域撮像信号に対し、色分離、色補間、ホワイトバランス調整、ガンマ補正などを行うことによって、広帯域画像データ及び第1〜第4狭帯域画像データを作成する。フレームメモリ56は、DSP55で作成された広帯域画像データ及び第1〜第4狭帯域画像データを記憶する。   As shown in FIG. 2, the processor device 12 includes a digital signal processor 55 (DSP (Digital Signal Processor)), a frame memory 56, an endoscope image generator 57, a display control circuit 58, and a tracking unit 60. The controller 62 controls each part. The DSP 55 performs wideband image data by performing color separation, color interpolation, white balance adjustment, gamma correction, and the like on the wideband imaging signal and the first to fourth narrowband imaging signals output from the AFE 45 of the electronic endoscope. And 1st-4th narrow-band image data are produced. The frame memory 56 stores the broadband image data and the first to fourth narrowband image data created by the DSP 55.

内視鏡画像生成部は、フレームメモリ56に記憶された広帯域画像データに基づき広帯域光画像63を生成する。表示制御回路58は、フレームメモリ56から広帯域光画像63を読み出し、図4に示すように、読み出した広帯域光画像63をモニタ14に表示する。   The endoscopic image generation unit generates a broadband optical image 63 based on the broadband image data stored in the frame memory 56. The display control circuit 58 reads the broadband optical image 63 from the frame memory 56 and displays the read broadband optical image 63 on the monitor 14 as shown in FIG.

追跡部60は、追跡対象Sを指定するために用いられる指定領域枠Raを設定する指定領域枠設定部65と、第1〜第4狭帯域画像データに基づき追跡対象Sの血管情報を算出する血管情報算出部66と、血管情報算出部66で算出した血管情報を記憶するロックオン情報記憶部67と、算出した血管情報に基づき、追跡対象Sの指定後に取得した広帯域光画像63から追跡対象Sを検出する追跡対象検出部68とを備えている。   The tracking unit 60 calculates the blood vessel information of the tracking target S based on the specified region frame setting unit 65 that sets the specified region frame Ra used for specifying the tracking target S and the first to fourth narrowband image data. The blood vessel information calculation unit 66, the lock-on information storage unit 67 for storing the blood vessel information calculated by the blood vessel information calculation unit 66, and the tracking target from the broadband light image 63 acquired after the tracking target S is specified based on the calculated blood vessel information And a tracking target detection unit 68 for detecting S.

指定領域枠設定部65では、指定領域枠Raの大きさなどを設定し、指定領域枠Raをモニタ14上に表示させる。これにより、追跡対象Sの指定が可能となる。ここで、追跡対象Sを指定する際には、まず、図4に示すような指定領域枠Ra内に追跡対象予定の病変部などが入るように、術者が操作部のアングルノブ21(図1参照)などを操作する。そして、指定領域枠Ra内に病変部などが入ったときに、操作部17に設けられたロックオンスイッチ25(図1参照)を押す。これにより、指定領域枠Ra内の病変部などが追跡対象Sとして指定される(ロックオン)。   The designated area frame setting unit 65 sets the size of the designated area frame Ra and displays the designated area frame Ra on the monitor 14. Thereby, the tracking target S can be specified. Here, when designating the tracking target S, the surgeon first sets the angle knob 21 (see FIG. 4) so that the lesion to be tracked enters the designated area frame Ra as shown in FIG. 1). When a lesioned part or the like enters the designated area frame Ra, a lock-on switch 25 (see FIG. 1) provided on the operation unit 17 is pressed. As a result, a lesioned part or the like in the designated area frame Ra is designated as the tracking target S (lock-on).

血管情報算出部66は、第1〜第4狭帯域画像データに基づいて、血管深さ、血液濃度、酸素飽和度の3つの血管情報を求める。この血管情報算出部の具体的構成については後で詳細に述べる。ロックオン情報記憶部67は、血管情報算出部66で算出した追跡対象Sの血管情報を記憶する。   The blood vessel information calculation unit 66 obtains three blood vessel information of blood vessel depth, blood concentration, and oxygen saturation based on the first to fourth narrowband image data. The specific configuration of the blood vessel information calculation unit will be described later in detail. The lock-on information storage unit 67 stores the blood vessel information of the tracking target S calculated by the blood vessel information calculation unit 66.

追跡対象検出部68は、ロックオン後に取得した広帯域光画像64の中から、血管情報算出部66で求めた血管情報またはロックオン情報記憶部67に記憶した血管情報を有するエリアを検出する。このようにロックオン時に求めた追跡対象Sの血管情報を用いることで、ロックオン後に得られる広帯域光画像64の中から、追跡対象Sを追跡することができる。   The tracking target detection unit 68 detects an area having the blood vessel information obtained by the blood vessel information calculation unit 66 or the blood vessel information stored in the lock-on information storage unit 67 from the broadband light image 64 acquired after the lock-on. Thus, by using the blood vessel information of the tracking target S obtained at the time of lock-on, the tracking target S can be tracked from the broadband optical image 64 obtained after the lock-on.

例えば、図5(A)に示すように、体腔の壁面にある病変部を追跡対象Sとしてロックオンした場合であって、このロックオンした追跡対象Sの血管情報が「血管深さ:中、血液濃度:高、酸素飽和度:低」である場合には、ロックオン後に得られる広帯域光画像64の中から、血管情報が「血管深さ:中、血液濃度:高、酸素飽和度:低」であるエリアを検出する。そして、ロックオン後に、術者が挿入部16を奥側に更に押し込んで、図5(B)に示すような広帯域光画像64が得られた場合には、その広帯域光画像64の中から、血管情報が「血管深さ:中、血液濃度:高、酸素飽和度:低」であるエリアRa´を検出する。これにより、追跡対象Sを追跡することができる。   For example, as shown in FIG. 5A, when a lesion on the wall of the body cavity is locked on as the tracking target S, the blood vessel information of the tracking target S that is locked on is “blood vessel depth: medium, When the blood concentration is high and the oxygen saturation is low, the blood vessel information is “blood vessel depth: medium, blood concentration: high, oxygen saturation: low” from the broadband optical image 64 obtained after lock-on. ”Is detected. Then, after the lock-on, when the surgeon further pushes the insertion portion 16 to the back side and a broadband optical image 64 as shown in FIG. 5B is obtained, from among the broadband optical image 64, An area Ra ′ in which the blood vessel information is “blood vessel depth: medium, blood concentration: high, oxygen saturation: low” is detected. Thereby, the tracking target S can be tracked.

また、図6(A)に示すように、体腔内の奥側に小さな病変部を発見した場合には、この病変部を追跡対象Sとしてロックオンし、追跡対象Sの血管情報を求めておく。そして、図6(B)に示すように、求めた追跡対象の血管情報から、追跡対象Sを追跡する。したがって、術者は、追跡対象Sの追跡状況を把握した状態で、挿入部16を押し込んだり、先端部16aを上下左右方向に移動させることができるため、容易且つ迅速に先端部16aを追跡対象Sである病変部に接近させることができる。   Further, as shown in FIG. 6A, when a small lesion is found on the back side in the body cavity, this lesion is locked on as the tracking target S, and blood vessel information of the tracking target S is obtained. . Then, as shown in FIG. 6B, the tracking target S is tracked from the obtained blood vessel information of the tracking target. Accordingly, the surgeon can push the insertion portion 16 or move the distal end portion 16a in the vertical and horizontal directions while grasping the tracking state of the tracking target S, so that the distal end portion 16a can be tracked easily and quickly. It can be made to approach the lesion part which is S.

また、図7(A)に示すように、体腔内の壁面に発見した病変部の近くに、転移などによって別の病変部が無いか調べるような場合には、その発見した病変部を追跡対象Sとしてロックオンしておく。ロックオン時には、追跡対象Sの血管情報を求めるとともに、求めた血管情報をロックオン情報記憶部67に記憶しておく。そして、図7(B)に示すように、挿入部16を押し込んだり又は引き出したりすることによって、別の病変部が存在するかどうかを調べる。そして、再度、最初に発見した病変部を確認したりする場合には、先端部16aがその病変部の近くに戻るように、挿入部16を動かす。そして、図7(C)に示すように、広帯域光画像69の中から、ロックオン情報記憶部67に記憶した血管情報を有するエリアRa´を検出する。これにより、一度モニタ14上から最初に発見した病変部が消えたとしても、本発明の追跡対象Sの追跡機能によって、その病変部を再度確認することができる。   In addition, as shown in FIG. 7A, in the case where it is examined whether there is another lesion by metastasis or the like near the lesion found on the wall in the body cavity, the found lesion is tracked. Lock on as S. At the time of lock-on, the blood vessel information of the tracking target S is obtained and the obtained blood vessel information is stored in the lock-on information storage unit 67. Then, as shown in FIG. 7B, whether or not another lesion exists is checked by pushing or pulling out the insertion portion 16. And when confirming the lesion part discovered first, again, the insertion part 16 is moved so that the front-end | tip part 16a may return to the vicinity of the lesion part. Then, as shown in FIG. 7C, an area Ra ′ having blood vessel information stored in the lock-on information storage unit 67 is detected from the broadband light image 69. Thereby, even if the lesion part first discovered on the monitor 14 disappears, the lesion part can be confirmed again by the tracking function of the tracking target S of the present invention.

図2に示すように、血管情報算出部66は、輝度比算出部70と、血管深さ−血液濃度相関関係記憶部71と、血管深さ−酸素飽和度相関関係記憶部72と、血管深さ−血液濃度算出部73と、血管深さ−酸素飽和度算出部74とを備えている。輝度比算出部70は、フレームメモリ56に記憶した第1〜第4狭帯域光画像データから、血管が含まれる血管領域を特定する。なお、血管領域の特定方法としては、例えば、血管部分の輝度値とそれ以外の輝度値の差から血管領域を求める方法がある。   As shown in FIG. 2, the blood vessel information calculation unit 66 includes a luminance ratio calculation unit 70, a blood vessel depth-blood concentration correlation storage unit 71, a blood vessel depth-oxygen saturation correlation storage unit 72, and a blood vessel depth. And a blood concentration calculator 73 and a blood vessel depth-oxygen saturation calculator 74. The luminance ratio calculation unit 70 specifies a blood vessel region including a blood vessel from the first to fourth narrowband light image data stored in the frame memory 56. As a method for specifying the blood vessel region, for example, there is a method for obtaining the blood vessel region from the difference between the luminance value of the blood vessel portion and the other luminance values.

そして、輝度比算出部70は、血管領域内の同じ位置の画素について、血管領域内の同じ画素の位置について、第1及び第2狭帯域画像データ間の第1輝度比S1(Log(B1/B2))を求めるとともに、第3及び第2狭帯域画像データ間の第2輝度比S2(Log(G/B2))を求める。ここで、B1は第1狭帯域光画像データの画素の輝度値を、B2は第2狭帯域光画像データの画素の輝度値を、Gは第3狭帯域光画像データの画素の輝度値を表している。さらに、第4及び第1狭帯域画像データ間の第3輝度比S3(B4/B1)を求めるとともに、第2及び第1狭帯域画像データ間の第4輝度比S4(B2/B1)を求める。ここで、B4は第4狭帯域光画像データの画素の輝度値を表している。   Then, the luminance ratio calculation unit 70 calculates the first luminance ratio S1 (Log (B1 / B1 / B1) between the first and second narrowband image data for the pixel at the same position in the blood vessel region and the same pixel position in the blood vessel region. B2)) and a second luminance ratio S2 (Log (G / B2)) between the third and second narrowband image data. Here, B1 is the brightness value of the pixel of the first narrowband light image data, B2 is the brightness value of the pixel of the second narrowband light image data, and G is the brightness value of the pixel of the third narrowband light image data. Represents. Further, a third luminance ratio S3 (B4 / B1) between the fourth and first narrowband image data is obtained, and a fourth luminance ratio S4 (B2 / B1) between the second and first narrowband image data is obtained. . Here, B4 represents the luminance value of the pixel of the fourth narrowband light image data.

血管深さ−血液濃度相関関係記憶部71は、第1及び第2輝度比S1,S2と、血管中の血液濃度(ヘモグロビンインデックス)及び血管深さとの相関関係を記憶している。この相関関係は、これまでの診断等で蓄積された多数の第1〜第3狭帯域光画像データを分析することにより得られたものである。   The blood vessel depth-blood concentration correlation storage unit 71 stores the correlation between the first and second luminance ratios S1 and S2, the blood concentration (hemoglobin index) in the blood vessel, and the blood vessel depth. This correlation is obtained by analyzing a large number of first to third narrowband optical image data accumulated in the diagnosis so far.

血管深さ−血液濃度相関関係記憶部71は、図8に示すように、第1及び第2輝度比S1,S2を表す輝度座標系79の座標と、血液濃度及び血管深さを表す血管情報座標系80の座標との対応付けによって、相関関係を記憶している。血管情報座標系80は輝度座標系79上に設けられたKL座標系であり、K軸は血管深さを、L軸は血液濃度を表している。K軸は、血管深さが輝度座標系79に対して正の相関関係があることから、正の傾きを有している。このK軸に関して、左斜め下に行くほど血管は浅いことを、右斜め上に行くほど血管が深いことを示している。また、L軸は、血液濃度が輝度座標系79に対して正の相関関係を有することから、正の傾きを有している。このL軸に関して、左斜め下に行くほど血液濃度が高いことを、右斜め上に行くほど血液濃度が低いことを示している。   As shown in FIG. 8, the blood vessel depth-blood concentration correlation storage unit 71 has coordinates of the luminance coordinate system 79 representing the first and second luminance ratios S1 and S2, and blood vessel information representing the blood concentration and the blood vessel depth. The correlation is stored by associating with the coordinates of the coordinate system 80. The blood vessel information coordinate system 80 is a KL coordinate system provided on the luminance coordinate system 79. The K axis represents the blood vessel depth and the L axis represents the blood concentration. The K axis has a positive slope because the blood vessel depth has a positive correlation with the luminance coordinate system 79. Regarding the K axis, the blood vessel is shallower as it goes diagonally to the left, and the blood vessel becomes deeper as it goes diagonally upward to the right. The L axis has a positive slope because the blood concentration has a positive correlation with the luminance coordinate system 79. With respect to the L axis, the blood concentration increases toward the lower left and the blood concentration decreases toward the upper right.

血管深さ−酸素飽和度相関関係記憶部72は、第3及び第4輝度比S3,S4と、血管中の酸素飽和度及び血管深さとの相関関係を記憶している。この相関関係は、血管が図9に示すヘモグロビンの吸光係数を有する場合の相関関係であり、これまでの診断等で蓄積された多数の第1、第2、第4狭帯域光画像データを分析することにより得られたものである。図9に示すように、血管中のヘモグロビンは、照射する光の波長によって吸光係数μaが変化する吸光特性を持っている。吸光係数μaは、ヘモグロビンの光の吸収の大きさである吸光度を表すもので、ヘモグロビンに照射された光の減衰状況を表すIexp(−μa×x)の式の係数である。ここで、Iは光源装置から被写体組織に照射される光の強度であり、x(cm)は被写体組織内の血管までの深さである。 The blood vessel depth-oxygen saturation correlation storage unit 72 stores the correlation between the third and fourth luminance ratios S3 and S4 and the oxygen saturation in the blood vessel and the blood vessel depth. This correlation is a correlation when the blood vessel has the hemoglobin extinction coefficient shown in FIG. 9, and analyzes a large number of first, second, and fourth narrowband optical image data accumulated in the diagnosis so far. It is obtained by doing. As shown in FIG. 9, hemoglobin in a blood vessel has a light absorption characteristic in which the light absorption coefficient μa changes depending on the wavelength of light to be irradiated. The extinction coefficient μa represents an absorbance that is the magnitude of light absorption of hemoglobin, and is a coefficient of an expression of I 0 exp (−μa × x) representing the attenuation state of light irradiated to hemoglobin. Here, I 0 is the intensity of light emitted from the light source device to the subject tissue, and x (cm) is the depth to the blood vessel in the subject tissue.

また、酸素と結合していない還元ヘモグロビン82と、酸素と結合した酸化ヘモグロビン83は、異なる吸光特性を持っており、同じ吸光度(吸光係数μa)を示す等吸収点(図9における各ヘモグロビン82,83の交点)を除いて、吸光度に差が生じる。吸光度に差があると、同じ血管に対して、同じ強度かつ同じ波長の光を照射しても、輝度値が変化する。また、同じ強度の光を照射しても、波長が異なれば吸光係数μaが変わるので、輝度値が変化する。   Further, the reduced hemoglobin 82 that is not bonded to oxygen and the oxidized hemoglobin 83 that is bonded to oxygen have different light absorption characteristics, and the isosbestic points (the respective hemoglobins 82, Except for the 83 intersection points), there is a difference in absorbance. If there is a difference in absorbance, the luminance value changes even if the same blood vessel is irradiated with light of the same intensity and the same wavelength. Further, even when light of the same intensity is irradiated, if the wavelength is different, the extinction coefficient μa changes, so that the luminance value changes.

以上のようなヘモグロビンの吸光特性を鑑みると、酸素飽和度によって吸光度に違いが出る波長が445nmと473nmにあること、及び血管深さ情報抽出のためには深達度の短い短波長領域が必要となることから、第1、第2、第4狭帯域光N1,N2,N4には、中心波長が450nm以下の波長領域を持つ狭帯域光を少なくとも1つ含めることが好ましい。また、酸素飽和度が同じでも、波長が異なれば吸収係数の値も異なり、粘膜中の深達度も異なっている。したがって、波長によって深達度が異なる光の特性を利用することで、輝度比と血管深さの相関関係を得ることができる。   Considering the light absorption characteristics of hemoglobin as described above, there are 445 nm and 473 nm wavelengths that differ in absorbance depending on oxygen saturation, and a short wavelength region with a short depth of penetration is necessary for blood vessel depth information extraction. Therefore, it is preferable that the first, second, and fourth narrowband lights N1, N2, and N4 include at least one narrowband light having a wavelength region with a center wavelength of 450 nm or less. Moreover, even if the oxygen saturation is the same, the absorption coefficient value is different for different wavelengths, and the depth of penetration in the mucosa is also different. Therefore, the correlation between the brightness ratio and the blood vessel depth can be obtained by using the characteristics of light having a different depth of penetration depending on the wavelength.

血管深さ−酸素飽和度相関関係記憶部72は、図10に示すように、第3及び第4輝度比S3,S4を表す輝度座標系85の座標と、酸素飽和度及び血管深さを表す血管情報座標系86の座標との対応付けによって、相関関係を記憶している。血管情報座標系86は輝度座標系85上に設けられたUV座標系であり、U軸は血管深さを、V軸は酸素飽和度を表している。U軸は、血管深さが輝度座標系85に対して正の相関関係があることから、正の傾きを有している。このU軸に関して、右斜め上に行くほど血管は浅いことを、左斜め下に行くほど血管が深いことを示している。一方、V軸は、酸素飽和度が輝度座標系85に対して負の相関関係を有することから、負の傾きを有している。このV軸に関して、左斜め上に行くほど酸素飽和度が低いことを、右斜め下に行くほど酸素飽和度が高いことを示している。   As shown in FIG. 10, the blood vessel depth-oxygen saturation correlation storage unit 72 represents the coordinates of the luminance coordinate system 85 representing the third and fourth luminance ratios S3 and S4, the oxygen saturation, and the blood vessel depth. Correlation is stored in association with the coordinates of the blood vessel information coordinate system 86. The blood vessel information coordinate system 86 is a UV coordinate system provided on the luminance coordinate system 85, the U axis represents the blood vessel depth, and the V axis represents the oxygen saturation. The U axis has a positive slope because the blood vessel depth has a positive correlation with the luminance coordinate system 85. Regarding the U-axis, the blood vessel is shallower as it goes diagonally upward to the right, and the blood vessel is deeper as it goes diagonally downward to the left. On the other hand, since the oxygen saturation has a negative correlation with the luminance coordinate system 85, the V-axis has a negative slope. With respect to this V-axis, the oxygen saturation is lower as it goes to the upper left, and the oxygen saturation is higher as it goes to the lower right.

また、血管情報座標系86においては、U軸とV軸とは交点Pで直交している。これは、第1狭帯域光N1の照射時と第2狭帯域光N2の照射時とで吸光の大小関係が逆転しているためである。即ち、図9に示すように、波長が440±10nmである第4狭帯域光N4を照射した場合には、還元ヘモグロビン82の吸光係数は、酸素飽和度が高い酸化ヘモグロビン83の吸光係数よりも大きくなるのに対して、波長が470±10nmである第2狭帯域光N2を照射した場合には、酸化ヘモグロビン83の吸光係数のほうが還元ヘモグロビン82の吸光係数よりも大きくなっているため、吸光の大小関係が逆転している。なお、第1、第2、第4狭帯域光N1,N2,N4に代えて、吸光の大小関係が逆転しない狭帯域光を照射したときには、U軸とV軸とは直交しなくなる。また、波長が400±10nmである第1狭帯域光N1を照射したときには、酸化ヘモグロビンと還元ヘモグロビンの吸光係数はほぼ等しくなっている。   In the blood vessel information coordinate system 86, the U axis and the V axis are orthogonal to each other at an intersection point P. This is because the magnitude relationship of light absorption is reversed between when the first narrowband light N1 is irradiated and when the second narrowband light N2 is irradiated. That is, as shown in FIG. 9, when the fourth narrowband light N4 having a wavelength of 440 ± 10 nm is irradiated, the extinction coefficient of reduced hemoglobin 82 is higher than the extinction coefficient of oxyhemoglobin 83 having high oxygen saturation. In contrast, when the second narrowband light N2 having a wavelength of 470 ± 10 nm is irradiated, the extinction coefficient of oxyhemoglobin 83 is larger than the extinction coefficient of reduced hemoglobin 82. The magnitude relationship is reversed. Note that when the narrow band light whose light intensity magnitude relationship is not reversed is irradiated instead of the first, second, and fourth narrow band lights N1, N2, and N4, the U axis and the V axis are not orthogonal to each other. When the first narrowband light N1 having a wavelength of 400 ± 10 nm is irradiated, the extinction coefficients of oxyhemoglobin and reduced hemoglobin are substantially equal.

血管深さ−血液濃度算出部73は、図11(A)に示すように、輝度座標系79において、観測値である第1及び第2輝度比S1,S2に対応する座標(S1,S2)を特定する。座標(S1,S2)が特定されたら、図11(B)に示すように、血管情報座標系80において、座標(S1,S2)に対応する座標(K,L)を特定する。これにより、血管領域内の所定位置の画素について、血管深さ情報K及び血液濃度情報Lが求まる。 As shown in FIG. 11A, the blood vessel depth-blood concentration calculating unit 73 uses coordinates (S1 *) corresponding to the first and second luminance ratios S1 * and S2 * as observed values in the luminance coordinate system 79 . , S2 * ). When the coordinates (S1 * , S2 * ) are specified, the coordinates (K * , L * ) corresponding to the coordinates (S1 * , S2 * ) in the blood vessel information coordinate system 80 as shown in FIG. Identify. Thereby, the blood vessel depth information K * and the blood concentration information L * are obtained for the pixel at a predetermined position in the blood vessel region.

血管深さ−酸素飽和度算出部74は、図12(A)に示すように、輝度座標系85において、観測値である第3及び第4輝度比S3,S4に対応する座標(S3,S4)を特定する。座標(S3,S4)が特定されたら、図12(B)に示すように、血管情報座標系86において、座標(S3,S4)に対応する座標(U,V)を特定する。これにより、血管領域内の所定位置の画素について、血管深さ情報U及び酸素飽和度情報Vが求まる。 As shown in FIG. 12A, the blood vessel depth-oxygen saturation calculation unit 74 has coordinates (S3) corresponding to the third and fourth luminance ratios S3 * and S4 * as observed values in the luminance coordinate system 85. * , S4 * ). When the coordinates (S3 * , S4 * ) are specified, coordinates (U * , V * ) corresponding to the coordinates (S3 * , S4 * ) in the blood vessel information coordinate system 86 as shown in FIG. Identify. Thereby, blood vessel depth information U * and oxygen saturation information V * are obtained for a pixel at a predetermined position in the blood vessel region.

次に、本発明の作用について、図13に示すフローチャートに沿って説明する。まず、コンソール23の操作により、通常観察モードから追跡モードに切り替える。追跡モードに切り替えられると、モニタ14上には指定領域枠Raが表示される。そして、追跡対象Sのロックオン(追跡対象Sの指定)がなされるまで、体腔内に広帯域光BBを照射する追跡対象指定処理に移る。この追跡対象指定処理では、術者は、病変部などの追跡対象Sが指定領域枠Ra内に入るように、挿入部16を更に押し込んだり、操作部のアングルノブ21などを操作して先端部16aを上下左右方向に移動させる。追跡対象Sが指定領域枠Ra内に入ったら、術者はロックオンスイッチ25を押圧する。   Next, the effect | action of this invention is demonstrated along the flowchart shown in FIG. First, the normal observation mode is switched to the tracking mode by operating the console 23. When the tracking mode is switched, the designated area frame Ra is displayed on the monitor 14. Then, until the tracking target S is locked on (designation of the tracking target S), the process proceeds to a tracking target designation process in which the broadband light BB is irradiated into the body cavity. In this tracking target designation process, the surgeon further pushes the insertion portion 16 so that the tracking target S such as a lesioned portion falls within the designated area frame Ra, or operates the angle knob 21 or the like of the operation portion to move the distal end portion. 16a is moved vertically and horizontally. When the tracking target S enters the designated area frame Ra, the operator presses the lock-on switch 25.

ロックオンスイッチ25が押圧されると、追跡対象Sの血管情報を求める血管情報取得処理に移る。血管情報取得処理では、まず、シャッター駆動部32はシャッター31を挿入位置にセットすることにより、体腔内への広帯域光BBの照射を停止する。そして、第1〜第4狭帯域光源33〜35、38を一定時間毎に順次ONに切り替え、一定時間毎に第1〜第4狭帯域光N1〜N4を体腔内に照射する。そして、第1〜第4狭帯域光N1〜N4の照射毎に撮像を行なうことによって、第1〜第4狭帯域撮像信号を取得する。撮像により得られた第1〜第4狭帯域撮像信号は、AFE45を介して、DSP55に送られる。DSP55では第1〜第4狭帯域撮像信号に基づいて第1〜第4狭帯域画像データが生成される。生成された第1〜第4狭帯域画像データは、フレームメモリ56に記憶される。   When the lock-on switch 25 is pressed, the process proceeds to blood vessel information acquisition processing for obtaining blood vessel information of the tracking target S. In the blood vessel information acquisition process, first, the shutter drive unit 32 stops the irradiation of the broadband light BB into the body cavity by setting the shutter 31 at the insertion position. Then, the first to fourth narrowband light sources 33 to 35 and 38 are sequentially turned on at regular intervals, and the first to fourth narrowband lights N1 to N4 are irradiated into the body cavity at regular intervals. The first to fourth narrowband imaging signals are acquired by performing imaging for each irradiation of the first to fourth narrowband lights N1 to N4. The first to fourth narrowband imaging signals obtained by imaging are sent to the DSP 55 via the AFE 45. The DSP 55 generates first to fourth narrowband image data based on the first to fourth narrowband imaging signals. The generated first to fourth narrowband image data is stored in the frame memory 56.

そして、血管情報算出部66は、フレームメモリ56に記憶された第1〜第4狭帯域画像データに基づいて、追跡対象Sの血管情報を算出する。血管情報としては、血管深さ、血液濃度、酸素飽和度の3つが求められる。算出された追跡対象Sの血管情報は、ロックオン情報記憶部67に記憶される。血管情報がロックオン情報記憶部67に記憶されると、血管情報取得処理が終了し、自動的に追跡対象検出処理に移る。   The blood vessel information calculation unit 66 calculates the blood vessel information of the tracking target S based on the first to fourth narrowband image data stored in the frame memory 56. Three pieces of blood vessel information are required: blood vessel depth, blood concentration, and oxygen saturation. The calculated blood vessel information of the tracking target S is stored in the lock-on information storage unit 67. When the blood vessel information is stored in the lock-on information storage unit 67, the blood vessel information acquisition process ends, and the process automatically proceeds to the tracking target detection process.

追跡対象検出処理では、広帯域光BBの照射→第1狭帯域光N1の照射→第2狭帯域光N2の照射→第3狭帯域光N3の照射→第4狭帯域光N4の照射の一連の動作が繰り返し行われるように、シャッター31及び第1〜第4狭帯域光源33〜35、38が駆動制御される。これにより、ロックオン後には、一定時間毎に、広帯域画像データおよび第1〜第4狭帯域画像データが得られる。そして、モニタ14には、得られた広帯域画像データに基づいて、広帯域光画像63が表示される。   In the tracking target detection process, a series of irradiation of broadband light BB → irradiation of first narrowband light N1 → irradiation of second narrowband light N2 → irradiation of third narrowband light N3 → irradiation of fourth narrowband light N4 The shutter 31 and the first to fourth narrowband light sources 33 to 35 and 38 are driven and controlled so that the operation is repeated. Thereby, after the lock-on, the broadband image data and the first to fourth narrowband image data are obtained at regular time intervals. The monitor 14 displays a broadband optical image 63 based on the obtained broadband image data.

また、血管情報算出部66は、得られた第1〜第4狭帯域画像データに基づき、ロックオン後に得られる広帯域光画像64について、画像全体で体腔内の血管情報を算出する。追跡対象検出部68は、広帯域光画像64の中から、ロックオン情報記憶部67に記憶された血管情報を有するエリアRa´が存在するか否かを検出する。存在した場合には、そのエリアRa´に合わせて指定領域枠Raを表示させることによって、そのエリアRa´内にある部位がロックオンによって指定された追跡対象Sであることを術者に知らせる。これにより、追跡対象Sを追跡することができる。そして、追跡モードが通常観察モードに切り替ええられるまでの間、これまでと同様の処理が繰り返されることによって、追跡対象Sの追跡が継続される。そして、追跡モードが通常観察モードに切り替えられると、追跡対象Sの追跡が終了する。   In addition, the blood vessel information calculation unit 66 calculates blood vessel information in the body cavity for the broadband optical image 64 obtained after lock-on based on the obtained first to fourth narrowband image data. The tracking target detection unit 68 detects whether or not there is an area Ra ′ having blood vessel information stored in the lock-on information storage unit 67 from the broadband light image 64. If it exists, the designated area frame Ra is displayed in accordance with the area Ra ′ to notify the surgeon that the part in the area Ra ′ is the tracking target S designated by lock-on. Thereby, the tracking target S can be tracked. Then, until the tracking mode is switched to the normal observation mode, the tracking target S is continuously tracked by repeating the same processing as before. Then, when the tracking mode is switched to the normal observation mode, the tracking of the tracking target S ends.

一方、広帯域光画像64の中に、ロックオン情報記憶部67に記憶された血管情報を有するエリアRa´が存在しない場合には、追跡対象Sが検出されるまで、これまでと同様の処理が繰り返される。   On the other hand, if the area Ra ′ having blood vessel information stored in the lock-on information storage unit 67 does not exist in the broadband light image 64, the same processing as before is performed until the tracking target S is detected. Repeated.

なお、本実施形態では、広帯域光源に加え、第1〜第4狭帯域光源を用いて、広帯域光BBおよび第1〜第4狭帯域光の照射を行なったが、これに代えて、図14に示すように、広帯域光源30と、広帯域光源からの広帯域光BBのうち通常観察モードおよび追跡モードで使用する光を透過させるフィルタを備えた回転フィルタ100を用いて、広帯域光BBおよび第1〜第4狭帯域光の照射を行なってもよい。回転フィルタ100は、広帯域光源30と集光レンズ39との間に設けられており、回転軸100aを中心として一定速度で回転する。また、回転フィルタ100は、回転軸100aに取り付けられたフィルタ切替部101によって、その径方向に移動自在となっている。   In this embodiment, in addition to the broadband light source, the first to fourth narrowband light sources are used to irradiate the broadband light BB and the first to fourth narrowband light, but instead of this, FIG. As shown in FIG. 4, the broadband light BB and the first to the first light beams using the broadband light source 30 and the rotary filter 100 including a filter that transmits light used in the normal observation mode and the tracking mode among the broadband light BB from the broadband light source. You may perform irradiation of 4th narrow-band light. The rotary filter 100 is provided between the broadband light source 30 and the condenser lens 39, and rotates at a constant speed around the rotation axis 100a. The rotary filter 100 is movable in the radial direction by a filter switching unit 101 attached to the rotary shaft 100a.

図15に示すように、回転フィルタ100は、広帯域光源30からの広帯域光BBのうち通常観察モードおよび追跡モードの追跡対象指定処理時に使用する光を透過させる第1エリア102と、広帯域光BBのうち血管情報取得処理時に使用する光を透過させる第2エリア103と、広帯域光BBのうち追跡対象検出処理時に使用する光を透過させる第3エリア104とが設けられている。したがって、モードや処理を切り替える際には、フィルタ切替部101で回転フィルタ100を径方向に移動させ、切り替えようとするモードや処理に対応するエリアが広帯域光BBの光路上に位置するようにする。   As shown in FIG. 15, the rotary filter 100 includes a first area 102 that transmits light used during tracking target designation processing in the normal observation mode and the tracking mode among the broadband light BB from the broadband light source 30, and the broadband light BB. Among them, a second area 103 that transmits light used during blood vessel information acquisition processing and a third area 104 that transmits light used during tracking target detection processing among the broadband light BB are provided. Therefore, when switching modes and processes, the filter switching unit 101 moves the rotary filter 100 in the radial direction so that the area corresponding to the mode or process to be switched is positioned on the optical path of the broadband light BB. .

第1エリア102には、広帯域光BBをそのまま透過させる広帯域光透過フィルタ105が設けられている。第2エリア103には、広帯域光BBのうち、第1狭帯域光N1のみを透過させる第1狭帯域光透過フィルタ106と、第2狭帯域光のみを透過させる第2狭帯域光透過フィルタ107と、第3狭帯域光のみを透過させる第3狭帯域光透過フィルタ108と、第4狭帯域光のみを透過させる第4狭帯域光透過フィルタ109とが、この順序で周方向に沿って設けられている。第3エリアには、広帯域光透過フィルタ105と、第1〜第4狭帯域光透過フィルタ106〜109とが、この順で周方向に沿って設けられている。   The first area 102 is provided with a broadband light transmission filter 105 that transmits the broadband light BB as it is. In the second area 103, the first narrowband light transmission filter 106 that transmits only the first narrowband light N1 out of the broadband light BB, and the second narrowband light transmission filter 107 that transmits only the second narrowband light. And a third narrowband light transmission filter 108 that transmits only the third narrowband light, and a fourth narrowband light transmission filter 109 that transmits only the fourth narrowband light in this order along the circumferential direction. It has been. In the third area, a broadband light transmission filter 105 and first to fourth narrowband light transmission filters 106 to 109 are provided in this order along the circumferential direction.

なお、本実施形態では、追跡対象が1つの場合について説明したが、追跡対象は複数存在してもよい。追跡対象を複数にした場合には、追跡対象が1の場合と同様に、各追跡対象毎に血管情報を求め、それぞれの血管情報を記憶しておく必要がある。また、本実施形態では、血管深さ、血液濃度、酸素飽和度の3つを使って追跡対象の追跡を行なったが、それらのうち少なくともいずれか1つだけで追跡を行なってもよい。   In the present embodiment, the case where there is one tracking target has been described, but a plurality of tracking targets may exist. When there are a plurality of tracking targets, it is necessary to obtain blood vessel information for each tracking target and store each blood vessel information as in the case where the tracking target is 1. In the present embodiment, the tracking target is tracked using three of the blood vessel depth, the blood concentration, and the oxygen saturation, but the tracking may be performed only with at least one of them.

また、本実施形態では、追跡対象の血管情報を使って追跡を行なったが、追跡対象の血管情報の他に、ピットパターンや血管形状や血管太さなどの生体情報を使って追跡を行なってもよい。また、体腔内の被写体組織のうち、コラーゲン、NADH、FADなどの自家蛍光成分を有する部位を追跡対象としてもよい。この場合には、自家蛍光成分となる追跡対象に対して励起光(例えば405nmの狭帯域光)を照射して自家蛍光を発生させ、その発生した自家蛍光の光強度などの蛍光情報を使って追跡を行なう。さらには、ポルフィリン誘導体などの腫瘍親和性光感受性物質(蛍光薬剤)を患者に投与した場合には、その蛍光薬剤が蓄積した腫瘍患部などを追跡対象としてもよい。この場合には、蛍光薬剤が蓄積した腫瘍患部に対して励起光(例えば405nmの狭帯域光)を照射して蛍光を発生させ、その発生した蛍光の光強度などの蛍光情報を使って追跡を行なう。   In this embodiment, tracking is performed using the blood vessel information to be tracked. In addition to the blood vessel information to be tracked, tracking is performed using biological information such as a pit pattern, a blood vessel shape, and a blood vessel thickness. Also good. Moreover, it is good also considering the site | part which has autofluorescence components, such as collagen, NADH, and FAD among the object tissues | organisms in a body cavity as a tracking object. In this case, excitation light (for example, 405 nm narrow-band light) is irradiated to the tracking target serving as an autofluorescence component to generate autofluorescence, and fluorescence information such as the light intensity of the generated autofluorescence is used. Follow up. Furthermore, when a tumor-affinity photosensitive substance (fluorescent drug) such as a porphyrin derivative is administered to a patient, a tumor affected part in which the fluorescent drug has accumulated may be set as a tracking target. In this case, excitation light (for example, 405 nm narrow-band light) is irradiated to the tumor affected part where the fluorescent drug is accumulated to generate fluorescence, and tracking is performed using fluorescence information such as the light intensity of the generated fluorescence. Do.

また、本実施形態では、追跡対象検出処理時においては、ロックオン後に取得した広帯域光画像全体で体腔内の血管情報を求めたが、追跡対象の動きがある程度予測できる場合には、その予想される追跡対象の動きの範囲内だけで血管情報を求めてもよい。また、本実施形態では、追跡モードに切り替えたときに、モニタに指定領域枠を表示し、この指定領域内に入った部位を追跡対象として指定したが、これに代えて、追跡モードに切り替えた時点では、モニタには指定領域枠を表示せず、マウスやコンソールなどを使って、モニタに表示されるポインタで病変部などを指定した時点で、その指定した病変部の周りに指定領域枠を表示するようにしてもよい。   In the present embodiment, during tracking target detection processing, blood vessel information in the body cavity is obtained from the entire broadband optical image acquired after lock-on. If the movement of the tracking target can be predicted to some extent, the prediction is expected. Blood vessel information may be obtained only within the range of movement of the tracking target. Further, in this embodiment, when the tracking mode is switched, the designated area frame is displayed on the monitor, and the part within the designated area is designated as the tracking target. Instead, the tracking area is switched to the tracking mode. At the time, the designated area frame is not displayed on the monitor, but when a lesion or the like is designated with a pointer displayed on the monitor using a mouse or a console, the designated area frame is placed around the designated lesion area. You may make it display.

なお、本発明は、挿入部等を有する挿入型の電子内視鏡の他、CCDなどの撮像素子等をカプセルに内蔵させたカプセル型の電子内視鏡に対しても適用することができる。   The present invention can be applied not only to an insertion type electronic endoscope having an insertion portion or the like, but also to a capsule type electronic endoscope in which an imaging element such as a CCD is incorporated in a capsule.

10 電子内視鏡システム
30 広帯域光源
33〜35,38 第1〜第4狭帯域光源
44 CCD
57 内視鏡画像生成部
60 追跡部
63 広帯域光画像
65 指定領域枠設定部
66 血管情報算出部
67 ロックオン情報記憶部
68 追跡対象検出部
70 輝度比算出部
71 血管深さ−血液濃度相関関係記憶部
72 血管深さ−血液濃度算出部
73 血管深さ画像生成部
74 血液濃度画像生成部
Ra 指定領域枠
S 追跡対象
DESCRIPTION OF SYMBOLS 10 Electronic endoscope system 30 Broadband light source 33-35,38 1st-4th narrowband light source 44 CCD
57 Endoscopic image generation unit 60 Tracking unit 63 Broadband light image 65 Designated region frame setting unit 66 Blood vessel information calculation unit 67 Lock-on information storage unit 68 Tracking target detection unit 70 Luminance ratio calculation unit 71 Blood vessel depth-blood concentration correlation Storage unit 72 Blood vessel depth-blood concentration calculation unit 73 Blood vessel depth image generation unit 74 Blood concentration image generation unit Ra Specified area frame S Tracking target

Claims (14)

広帯域光を発する広帯域光源と、
前記広帯域光の波長帯域とは異なる特定の波長帯域を有する特殊光を発する特殊光源と、
前記広帯域光で照明中の体腔内を撮像して広帯域撮像信号を取得し、前記特殊光で照明中の前記体腔内を撮像して特殊撮像信号を取得する撮像信号取得手段と、
前記広帯域撮像信号から広帯域光画像を生成する画像生成手段と、
前記広帯域光画像の中から追跡対象を指定する追跡対象指定手段と、
前記特殊撮像信号から前記追跡対象の生体情報を取得する生体情報取得手段と、
前記追跡対象の指定後に生成した前記広帯域光画像において、前記生体情報取得手段で取得した前記追跡対象の前記生体情報を使って前記追跡対象を追跡する追跡手段とを備えることを特徴とする電子内視鏡システム。
A broadband light source that emits broadband light;
A special light source that emits special light having a specific wavelength band different from the wavelength band of the broadband light;
Imaging signal acquisition means for acquiring a broadband imaging signal by imaging the inside of a body cavity illuminated with the broadband light, and acquiring a special imaging signal by imaging the interior of the body cavity illuminated with the special light;
Image generating means for generating a broadband optical image from the broadband imaging signal;
Tracking target designating means for designating a tracking target from the broadband optical image;
Biological information acquisition means for acquiring biological information of the tracking target from the special imaging signal;
A tracking unit that tracks the tracking target using the biological information of the tracking target acquired by the biological information acquisition unit in the broadband optical image generated after the tracking target is specified. Endoscopic system.
前記追跡対象指定手段は、
前記広帯域光画像内に指定領域枠を表示する表示手段と、
前記指定領域枠内の部位を前記追跡対象として指定するロックオン手段とを備えることを特徴とする請求項1記載の電子内視鏡システム。
The tracking target specifying means includes
Display means for displaying a designated area frame in the broadband optical image;
The electronic endoscope system according to claim 1, further comprising lock-on means for designating a part in the designated area frame as the tracking target.
前記生体情報取得手段は、前記ロックオン手段で指定された時点での前記追跡対象の生体情報を記憶する記憶手段を備えることを特徴とする請求項2記載の電子内視鏡システム。   The electronic endoscope system according to claim 2, wherein the biological information acquisition unit includes a storage unit that stores the biological information of the tracking target at a time specified by the lock-on unit. 前記生体情報取得手段は、前記生体情報として、被写体組織内の血管がある位置までの距離を示す血管深さ、ヘモグロビンインデックスを示す血液濃度、酸素飽和度のうちの少なくともいずれか一つを取得することを特徴とする請求項1ないし3いずれか1項記載の電子内視鏡システム。   The biological information acquisition means acquires at least one of a blood vessel depth indicating a distance to a position where a blood vessel exists in a subject tissue, a blood concentration indicating a hemoglobin index, and an oxygen saturation as the biological information. The electronic endoscope system according to any one of claims 1 to 3, wherein the electronic endoscope system is provided. 前記特殊光源が、波長400nmから600nmまでの間で互いに異なる波長帯域を少なくとも3つ含む照明光であって前記波長帯域には青色帯域と緑色帯域が含まれる照明光を発光する請求項4記載の電子内視鏡システムにおいて、
前記撮像信号取得手段は、前記特殊撮像信号として、前記照明光で照明中の前記体腔内の血管を含む被写体組織を撮像して得られる撮像信号に含まれる狭帯域信号であって、互いに異なる波長帯域を持つ狭帯域光にそれぞれ対応する複数の狭帯域信号を取得し、
前記生体情報取得手段は、前記複数の狭帯域信号に基づいて、前記血管深さに関する血管深さ情報及び前記血液濃度に関する血液濃度情報を含む血管情報を求める第1血管情報算出手段を備えることを特徴とする電子内視鏡システム。
5. The special light source emits illumination light including at least three wavelength bands different from each other in a wavelength range of 400 nm to 600 nm, wherein the wavelength band includes a blue band and a green band. In electronic endoscope system,
The imaging signal acquisition means is a narrowband signal included in an imaging signal obtained by imaging a subject tissue including a blood vessel in the body cavity illuminated with the illumination light as the special imaging signal, and has different wavelengths. Obtain multiple narrowband signals, each corresponding to narrowband light with bandwidth,
The biological information acquisition means includes first blood vessel information calculation means for obtaining blood vessel information including blood vessel depth information relating to the blood vessel depth and blood concentration information relating to the blood concentration based on the plurality of narrowband signals. A featured electronic endoscope system.
前記撮像信号取得手段は、互いに異なる波長帯域を有する青色帯域の第1及び第2狭帯域光に対応する第1及び第2狭帯域信号と、緑色帯域の第3狭帯域光に対応する第3狭帯域信号とを取得し、
前記第1血管情報算出手段は、前記第1〜第3狭帯域信号に基づいて、前記血管深さ情報及び前記血液濃度情報を求めることを特徴とする請求項5記載の電子内視鏡システム。
The imaging signal acquisition means includes first and second narrowband signals corresponding to the first and second narrowband lights in the blue band having different wavelength bands, and a third corresponding to the third narrowband light in the green band. Get narrowband signal and
6. The electronic endoscope system according to claim 5, wherein the first blood vessel information calculating means obtains the blood vessel depth information and the blood concentration information based on the first to third narrowband signals.
前記第1血管情報算出手段は、
前記第1及び第2狭帯域信号間の第1輝度比と、前記第2及び第3狭帯域信号間の第2輝度比とを算出する輝度比算出部と、
第1及び第2輝度比と血管深さ及び血液濃度との相関関係を予め記憶する血管深さ−血液濃度相関関係記憶部と、
前記血管深さ−血液濃度相関関係記憶部の相関関係を参照して、前記輝度比算出部で算出された第1及び第2輝度比に対応する前記血管深さ情報及び前記血液濃度情報を求める血管深さ−血液濃度算出部とを備えることを特徴とする請求項6記載の電子内視鏡システム。
The first blood vessel information calculating means includes
A luminance ratio calculator that calculates a first luminance ratio between the first and second narrowband signals and a second luminance ratio between the second and third narrowband signals;
A blood vessel depth-blood concentration correlation storage unit that stores in advance the correlation between the first and second luminance ratios, the blood vessel depth, and the blood concentration;
The blood vessel depth information and the blood concentration information corresponding to the first and second luminance ratios calculated by the luminance ratio calculation unit are obtained with reference to the correlation in the blood vessel depth-blood concentration correlation storage unit. The electronic endoscope system according to claim 6, further comprising a blood vessel depth-blood concentration calculation unit.
前記第1狭帯域光の波長帯域は405±10nmであり、前記第2狭帯域光の波長帯域は470±10nmであり、前記第3狭帯域光の波長帯域は560±10nmであることを特徴とする請求項6または7記載の電子内視鏡システム。   The wavelength band of the first narrowband light is 405 ± 10 nm, the wavelength band of the second narrowband light is 470 ± 10 nm, and the wavelength band of the third narrowband light is 560 ± 10 nm. The electronic endoscope system according to claim 6 or 7. 前記特殊光源が、中心波長が450nm以下の波長領域を含む照明光を発光する請求項4記載の電子内視鏡システムにおいて、
前記撮像信号取得手段は、前記特殊撮像信号として、前記照明光で照明中の前記体腔内の血管を含む被写体組織を撮像して得られる撮像信号に含まれる狭帯域信号であって、互いに異なる波長帯域を持ち、少なくとも一方の中心波長が450nm以下である複数の狭帯域光にそれぞれ対応する複数の狭帯域信号を取得し、
前記生体情報取得手段は、前記複数の狭帯域信号に基づいて、前記血管深さに関する血管深さ情報及び前記酸素飽和度に関する酸素飽和度情報を含む血管情報を求める第2血管情報算出手段を備えることを特徴とする電子内視鏡システム。
The electronic endoscope system according to claim 4, wherein the special light source emits illumination light including a wavelength region having a center wavelength of 450 nm or less.
The imaging signal acquisition means is a narrowband signal included in an imaging signal obtained by imaging a subject tissue including a blood vessel in the body cavity illuminated with the illumination light as the special imaging signal, and has different wavelengths. Obtaining a plurality of narrowband signals respectively corresponding to a plurality of narrowband lights having a band and at least one central wavelength of 450 nm or less;
The biological information acquisition means includes second blood vessel information calculation means for obtaining blood vessel information including blood vessel depth information related to the blood vessel depth and oxygen saturation information related to the oxygen saturation based on the plurality of narrowband signals. An electronic endoscope system characterized by that.
前記複数の狭帯域信号は、酸素と結合した酸化ヘモグロビンと結合していない還元ヘモグロビンに対して異なる吸光度を示し、且つ、酸素飽和度によって各ヘモグロビンのそれぞれに対する吸光度に差が生じるような波長を含んでいることを特徴とする請求項9記載の電子内視鏡システム。   The plurality of narrowband signals include wavelengths that exhibit different absorbances for reduced hemoglobin that is not bound to oxygenated hemoglobin that is bound to oxygen and that cause a difference in absorbance for each hemoglobin depending on oxygen saturation. The electronic endoscope system according to claim 9, wherein 前記撮像信号取得手段は、互いに異なる波長帯域を有する青色帯域の第1及び第2狭帯域光に対応する第1及び第2狭帯域信号と、前記第1及び第2狭帯域光と異なる波長帯域を有する第4狭帯域光に対応する第4狭帯域信号とを取得し、
前記第2血管情報算出手段は、
前記第1及び第4狭帯域信号間の第3輝度比と、前記第1及び第2狭帯域信号間の第4輝度比とを算出する輝度比算出部と、
第3及び第4輝度比と血管深さ及び酸素飽和度との相関関係を予め記憶する血管深さ−酸素飽和度相関関係記憶部と、
前記血管深さ−酸素飽和度相関関係記憶部の相関関係を参照して、前記輝度比算出部で算出された第3及び第4輝度比に対応する前記血管深さ情報及び前記酸素飽和度情報を求める血管深さ−酸素飽和度算出部とを備えることを特徴とする請求項9または10記載の電子内視鏡システム。
The imaging signal acquisition means includes first and second narrowband signals corresponding to first and second narrowband lights in blue bands having different wavelength bands, and different wavelength bands from the first and second narrowband lights. A fourth narrowband signal corresponding to the fourth narrowband light having
The second blood vessel information calculating means includes
A luminance ratio calculator that calculates a third luminance ratio between the first and fourth narrowband signals and a fourth luminance ratio between the first and second narrowband signals;
A blood vessel depth-oxygen saturation correlation storage unit that stores in advance the correlation between the third and fourth luminance ratios, the blood vessel depth, and the oxygen saturation;
The blood vessel depth information and the oxygen saturation information corresponding to the third and fourth luminance ratios calculated by the luminance ratio calculation unit with reference to the correlation of the blood vessel depth-oxygen saturation degree correlation storage unit The electronic endoscope system according to claim 9, further comprising: a blood vessel depth-oxygen saturation calculating unit that calculates
前記第1狭帯域光の波長帯域は405±10nmであり、前記第2狭帯域光の波長帯域は470±10nmであり、前記第4狭帯域光の波長帯域は440±10nmであることを特徴とする請求項11記載の電子内視鏡システム。   The wavelength band of the first narrowband light is 405 ± 10 nm, the wavelength band of the second narrowband light is 470 ± 10 nm, and the wavelength band of the fourth narrowband light is 440 ± 10 nm. The electronic endoscope system according to claim 11. 広帯域光を発する広帯域光源と、前記広帯域光の波長帯域とは異なる特定の波長帯域を有する特殊光を発する特殊光源と、前記広帯域光で照明中の体腔内を撮像して広帯域撮像信号を取得し、前記特殊光で照明中の前記体腔内を撮像して特殊撮像信号を取得する撮像信号取得手段と、追跡対象指定手段とを備える電子内視鏡システムに組み込まれる電子内視鏡用のプロセッサ装置において、
前記撮像信号取得手段から、広帯域撮像信号、及び前記特殊撮像信号を受信する受信手段と、
前記広帯域撮像信号から前記広帯域光画像を生成する画像生成手段と、
前記特殊撮像信号から、前記追跡対象指定手段によって前記広帯域光画像の中から指定された追跡対象の生体情報を取得する生体情報取得手段と、
前記追跡対象の指定後に生成した前記広帯域光画像において、前記生体情報取得手段で取得した前記追跡対象の前記生体情報を使って前記追跡対象を追跡する追跡手段とを備えることを特徴とする電子内視鏡用のプロセッサ装置。
A broadband light source that emits broadband light, a special light source that emits special light having a specific wavelength band different from the wavelength band of the broadband light, and a broadband imaging signal obtained by imaging the interior of a body cavity illuminated with the broadband light A processor device for an electronic endoscope incorporated in an electronic endoscope system, comprising: an imaging signal acquisition unit that acquires an image of the body cavity being illuminated with the special light to acquire a special imaging signal; and a tracking target designation unit In
Receiving means for receiving a broadband imaging signal and the special imaging signal from the imaging signal acquisition means;
Image generating means for generating the broadband optical image from the broadband imaging signal;
Biological information acquisition means for acquiring biological information of the tracking target specified from the broadband optical image by the tracking target specifying means from the special imaging signal;
A tracking unit that tracks the tracking target using the biological information of the tracking target acquired by the biological information acquisition unit in the broadband optical image generated after the tracking target is specified. A processor unit for an endoscope.
広帯域光源が、広帯域光を発するステップと、
撮像信号取得手段が、前記広帯域光で照明中の体腔内を撮像して広帯域撮像信号を取得するステップと、
画像生成手段が、前記広帯域撮像信号から広帯域光画像を生成するステップと、
追跡対象指定手段が、前記広帯域光画像の中から追跡対象を指定するステップと、
特殊光源が、前記広帯域光の波長帯域とは異なる特定の波長帯域を有する特殊光を発するステップと、
前記撮像信号取得手段が、前記特殊光で照明中の前記体腔内を撮像して特殊撮像信号を取得するステップと、
生体情報取得手段が、前記特殊撮像信号から前記追跡対象の生体情報を取得するステップと、
追跡手段が、前記追跡対象の指定後に生成した前記広帯域光画像において、前記生体情報取得手段で取得した前記追跡対象の前記生体情報を使って前記追跡対象を追跡するステップとを備えることを特徴とする電子内視鏡システムの作動方法。
A broadband light source emitting broadband light;
An imaging signal acquisition means for acquiring a broadband imaging signal by imaging the inside of a body cavity illuminated with the broadband light; and
An image generating means generating a broadband optical image from the broadband imaging signal;
A tracking target designating unit designating a tracking target from the broadband optical image;
A special light source emitting special light having a specific wavelength band different from the wavelength band of the broadband light; and
The imaging signal acquisition means acquires the special imaging signal by imaging the inside of the body cavity illuminated with the special light;
A biological information acquisition means acquires the biological information of the tracking target from the special imaging signal;
The tracking means comprises the step of tracking the tracking object using the biological information of the tracking object acquired by the biological information acquisition means in the broadband optical image generated after designating the tracking object. Method of operating an electronic endoscope system.
JP2014206429A 2014-10-07 2014-10-07 Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system Active JP5844447B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014206429A JP5844447B2 (en) 2014-10-07 2014-10-07 Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014206429A JP5844447B2 (en) 2014-10-07 2014-10-07 Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2010130846A Division JP5634755B2 (en) 2010-06-08 2010-06-08 Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system

Publications (2)

Publication Number Publication Date
JP2015042274A true JP2015042274A (en) 2015-03-05
JP5844447B2 JP5844447B2 (en) 2016-01-20

Family

ID=52696107

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014206429A Active JP5844447B2 (en) 2014-10-07 2014-10-07 Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system

Country Status (1)

Country Link
JP (1) JP5844447B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3437541A4 (en) * 2016-04-01 2019-04-03 Fujifilm Corporation Image processing device and method for operating same, and endoscope processor device and method for operating same
CN111148475A (en) * 2017-09-28 2020-05-12 巴德股份有限公司 Catheter with movable indicator
CN113160149A (en) * 2021-03-31 2021-07-23 杭州海康威视数字技术股份有限公司 Target display method and device, electronic equipment and endoscope system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10216080A (en) * 1997-02-04 1998-08-18 Olympus Optical Co Ltd Image processing device for endoscope
JP2003535659A (en) * 2000-06-19 2003-12-02 ユニヴァーシティ オブ ワシントン Medical Imaging, Diagnosis and Treatment Using Scanning Single Fiber Optic System

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10216080A (en) * 1997-02-04 1998-08-18 Olympus Optical Co Ltd Image processing device for endoscope
JP2003535659A (en) * 2000-06-19 2003-12-02 ユニヴァーシティ オブ ワシントン Medical Imaging, Diagnosis and Treatment Using Scanning Single Fiber Optic System

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3437541A4 (en) * 2016-04-01 2019-04-03 Fujifilm Corporation Image processing device and method for operating same, and endoscope processor device and method for operating same
US10986980B2 (en) 2016-04-01 2021-04-27 Fujifilm Corporation Image processing device, method for operating same, endoscope processor device, and method for operating same
CN111148475A (en) * 2017-09-28 2020-05-12 巴德股份有限公司 Catheter with movable indicator
US11369772B2 (en) 2017-09-28 2022-06-28 C.R. Bard, Inc. Catheter with movable indicator
CN111148475B (en) * 2017-09-28 2023-09-05 巴德股份有限公司 Catheter with movable indicator
CN113160149A (en) * 2021-03-31 2021-07-23 杭州海康威视数字技术股份有限公司 Target display method and device, electronic equipment and endoscope system
CN113160149B (en) * 2021-03-31 2024-03-01 杭州海康威视数字技术股份有限公司 Target display method and device, electronic equipment and endoscope system

Also Published As

Publication number Publication date
JP5844447B2 (en) 2016-01-20

Similar Documents

Publication Publication Date Title
JP5634755B2 (en) Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system
JP5460488B2 (en) Electronic endoscope system, processor device for electronic endoscope, image retrieval system, and method of operating electronic endoscope system
JP5452300B2 (en) Electronic endoscope system, processor device for electronic endoscope, operation method of electronic endoscope system, pathological observation device, and pathological microscope device
JP5438571B2 (en) Electronic endoscope system
JP5395725B2 (en) Electronic endoscope system
JP5393554B2 (en) Electronic endoscope system
JP5457247B2 (en) Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system
JP5074044B2 (en) Fluorescence observation apparatus and method of operating fluorescence observation apparatus
JP5502812B2 (en) Biological information acquisition system and method of operating biological information acquisition system
JP5303012B2 (en) Endoscope system, processor device for endoscope system, and method for operating endoscope system
JP5274591B2 (en) Endoscope system, processor device for endoscope system, and method for operating endoscope system
WO2013005533A1 (en) Endoscope system, endoscope system processor and image display method
US9629527B2 (en) Endoscope system, processor device of endoscope system, and image processing method
JP5667917B2 (en) Endoscope system, processor device for endoscope system, and method for operating endoscope system
JP5757891B2 (en) Electronic endoscope system, image processing apparatus, operation method of image processing apparatus, and image processing program
JP2018122155A (en) Endoscope system
JP5762344B2 (en) Image processing apparatus and endoscope system
US9596982B2 (en) Endoscope system and composite image generation method
JP2012152460A (en) Medical system, processing unit therefor, and method of generating image
US9788709B2 (en) Endoscope system and image generation method to generate images associated with irregularities of a subject
JP2016174976A (en) Endoscope system
JP5844447B2 (en) Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system
JP2013215471A (en) Endoscope system, image processing apparatus, image processing method, and image processing program
JP6454755B2 (en) Endoscope system
JP5965028B2 (en) Endoscope system

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150717

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151022

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151111

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151118

R150 Certificate of patent or registration of utility model

Ref document number: 5844447

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250