JP6073113B2 - Electronic endoscope system - Google Patents

Electronic endoscope system Download PDF

Info

Publication number
JP6073113B2
JP6073113B2 JP2012251619A JP2012251619A JP6073113B2 JP 6073113 B2 JP6073113 B2 JP 6073113B2 JP 2012251619 A JP2012251619 A JP 2012251619A JP 2012251619 A JP2012251619 A JP 2012251619A JP 6073113 B2 JP6073113 B2 JP 6073113B2
Authority
JP
Japan
Prior art keywords
image
imaging system
confocal
histogram
electronic endoscope
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012251619A
Other languages
Japanese (ja)
Other versions
JP2014097254A (en
Inventor
榎本 貴之
貴之 榎本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hoya Corp
Original Assignee
Hoya Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hoya Corp filed Critical Hoya Corp
Priority to JP2012251619A priority Critical patent/JP6073113B2/en
Publication of JP2014097254A publication Critical patent/JP2014097254A/en
Application granted granted Critical
Publication of JP6073113B2 publication Critical patent/JP6073113B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、異なる方式による撮影が可能な電子内視鏡システムにおいて、一方の方式から他方の方式へ画像の切替えを行う画像切替えシステムに関し、特に通常のカラー画像の他に共焦点画像など患部を接写する撮像方式が採用される電子内視鏡システムの画像切替えシステムに関する。   The present invention relates to an image switching system for switching an image from one method to another method in an electronic endoscope system capable of photographing by different methods, and more particularly to an affected part such as a confocal image in addition to a normal color image. The present invention relates to an image switching system of an electronic endoscope system that employs an imaging method for close-up photography.

近年、共焦点光学系を利用した内視鏡システムが開発されている。共焦点内視鏡では、例えば青色レーザを生体細胞に照射し、様々な深さで発せられる蛍光を特定深さに合わせた共焦点光学系を通して光電子倍増管(PMT)で検出する。そしてこれを面状にスキャンすることで特定深さについての微細かつ鮮明な蛍光画像を撮影する。また、深さ方向へもスキャンすることで観察部位の3次元情報を得ている。   In recent years, endoscope systems using confocal optical systems have been developed. In the confocal endoscope, for example, a biological cell is irradiated with a blue laser, and fluorescence emitted at various depths is detected by a photomultiplier tube (PMT) through a confocal optical system adjusted to a specific depth. Then, a fine and clear fluorescent image of a specific depth is taken by scanning this surface. In addition, the three-dimensional information of the observation site is obtained by scanning in the depth direction.

一方、共焦点画像の検出では共焦点光学系と被写体との距離を一定に(通常は近接した一定距離に)維持する必要があるため、共焦点画像の検出は内視鏡挿入部先端を観察部位に押し当てて行われる。また共焦点画像は、特定距離にある被写体の高倍率画像であるため、共焦点内視鏡にはCCDなどの撮像素子を用いた通常のカラー画像を撮影する光学系も併設され、通常のカラー画像も撮影される(特許文献1参照)。   On the other hand, since it is necessary to maintain the distance between the confocal optical system and the subject to be constant (usually a close distance), the confocal image is detected by observing the tip of the endoscope insertion part. It is done by pressing against the site. In addition, since the confocal image is a high-magnification image of a subject at a specific distance, the confocal endoscope is also provided with an optical system that captures a normal color image using an imaging element such as a CCD, and a normal color image is provided. An image is also taken (see Patent Document 1).

特開2005−000640号公報JP 2005-000640 A

上記構成の共焦点内視鏡では、共焦点画像および通常のカラー画像が常時撮影されモニタに表示される。しかし、挿入部先端が観察部位に適切に押し当てられるまでに取得される共焦点画像は、殆どがノイズ成分から構成され不定画像となる。一方、挿入部先端が観察部位に押し当てられた状態では、撮像素子で撮影される画像は焦点の合わない略真っ赤な画像となる。これらの画像のモニタへの表示は、一般に観察者に不快感を与える。したがって、何れの撮像系での撮影が現在適切かを自動判定し、これに合せて表示画像を切替えることが望まれる。   In the confocal endoscope configured as described above, a confocal image and a normal color image are always captured and displayed on a monitor. However, the confocal image acquired until the distal end of the insertion portion is appropriately pressed against the observation site is mostly composed of noise components and becomes an indefinite image. On the other hand, in a state where the distal end of the insertion portion is pressed against the observation site, the image captured by the image sensor is a substantially red image that is not focused. Display of these images on a monitor generally gives an observer unpleasant feeling. Therefore, it is desired to automatically determine which imaging system is currently appropriate for imaging and switch the display image accordingly.

本発明は、観察部位との距離により適切な撮像系が異なる内視鏡において、現在何れの撮像系が適切であるかを自動判定するシステムを提供することを課題としている。   An object of the present invention is to provide a system for automatically determining which imaging system is currently appropriate in an endoscope having an appropriate imaging system that differs depending on the distance to the observation site.

本発明の電子内視鏡用画像判定システムは、被写体を相対的に遠距離から撮影するための第1撮像系と、被写体を相対的に近距離から撮影するための第2撮像系と、第1撮像系で得られる画像信号と第2撮像系で得られる画像信号とに基づき何れの撮像系による撮影が適切かを判断する判定手段とを備えることを特徴としている。   An image determination system for an electronic endoscope according to the present invention includes a first imaging system for photographing a subject from a relatively long distance, a second imaging system for photographing a subject from a relatively short distance, The image processing apparatus includes a determination unit that determines which imaging system is appropriate for imaging based on an image signal obtained by one imaging system and an image signal obtained by the second imaging system.

判定手段は各撮像系からの画像信号に対するヒストグラムに基づき上記判断を行うことが好ましい。第1撮像系は例えばカラー画像の撮影を行い、第2撮像系は例えば共焦点画像の撮影を行う。このときカラー画像に関しては、輝度信号に関するヒストグラムとR信号に関するヒストグラムを利用することが好ましい。   The determination means preferably performs the above determination based on a histogram for the image signal from each imaging system. For example, the first imaging system captures a color image, and the second imaging system captures a confocal image, for example. At this time, regarding the color image, it is preferable to use a histogram relating to the luminance signal and a histogram relating to the R signal.

第2撮像系による撮影が適切であるか否かを判断する場合には、第1および第2撮像系からの画像信号に対するヒストグラムを利用することが好ましく、第1撮像系による撮影が適切であるか否かを判断する場合には、例えば第2撮像系からの画像信号に対するヒストグラムのみを用いる。判定手段は、各ヒストグラムにおける一方の側からの度数の累積が1画面中の所定割合の画素数になる値に基づき上記判断を行うことが好ましい。   When determining whether or not shooting by the second imaging system is appropriate, it is preferable to use histograms for image signals from the first and second imaging systems, and shooting by the first imaging system is appropriate. For example, only the histogram for the image signal from the second imaging system is used. It is preferable that the determination means make the above determination based on a value in which the cumulative frequency from one side in each histogram becomes a predetermined number of pixels in one screen.

画像判定システムは、上記判断に基づき第1または第2撮像系からの撮影から他方の撮影に切替えるとともに、画像表示装置への出力も他方の表示に切替える切替手段を更に備えることが好ましい。また切替手段により使用されない撮像系の不要な機能を停止することが好ましい。   It is preferable that the image determination system further includes switching means for switching from shooting from the first or second imaging system to the other shooting based on the above determination, and switching the output to the image display device to the other display. It is also preferable to stop unnecessary functions of the imaging system that are not used by the switching means.

第1および第2撮像系の画像を常時画像表示装置に出力する場合、使用されていない撮像系の画像に対してマスク処理を施すことが好ましい。第2撮像系の先端に感圧センサを設け、感圧センサにより検知される第2撮像系の先端の被写体への接触の有無を上記判断に用いてもよい。   When the images of the first and second imaging systems are always output to the image display device, it is preferable to perform mask processing on the images of the imaging systems that are not used. A pressure sensor may be provided at the tip of the second imaging system, and the presence or absence of contact with the subject at the tip of the second imaging system detected by the pressure sensor may be used for the above determination.

本発明の電子内視鏡システムは、上記画像判定システムを備えることを特徴としている。   An electronic endoscope system according to the present invention includes the image determination system.

本発明によれば、観察部位との距離により適切な撮像系が異なる内視鏡において、現在何れの撮像系が適切であるかを自動判定することができる。   According to the present invention, it is possible to automatically determine which imaging system is currently appropriate in an endoscope in which an appropriate imaging system differs depending on the distance to the observation site.

本発明の一実施形態である画像判定システムが適用された電子内視鏡システムの構成を示す外観図である。1 is an external view showing a configuration of an electronic endoscope system to which an image determination system according to an embodiment of the present invention is applied. 内視鏡挿入部の先端の拡大斜視図である。It is an expansion perspective view of the front-end | tip of an endoscope insertion part. 電子内視鏡システムにおけるカラー電子内視鏡システムに関するブロック図である。It is a block diagram about the color electronic endoscope system in an electronic endoscope system. 電子内視鏡システムにおける共焦点電子内視鏡システムに関するブロック図である。It is a block diagram about the confocal electronic endoscope system in an electronic endoscope system. システムのメインフローの概略を示すフローチャートである。It is a flowchart which shows the outline of the main flow of a system. 画像切替処理のフローチャートである。It is a flowchart of an image switching process. 本実施形態におけるモニタ表示の一例である。It is an example of the monitor display in this embodiment. 閾値と信号の度数分布の関係を例示するヒストグラムである。It is a histogram which illustrates the relationship between a threshold value and the frequency distribution of a signal.

以下、本発明の実施の形態を、図面を参照して説明する。図1は、本発明の一実施形態である画像判定システムを搭載した電子内視鏡システムの外観図である。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is an external view of an electronic endoscope system equipped with an image determination system according to an embodiment of the present invention.

電子内視鏡システム10は、可撓管状の挿入部を備えるスコープ11と、カラー画像用プロセッサ装置12と、共焦点画像用プロセッサ装置13と、モニタ14とから主に構成される。スコープ11には、後述するようにカラー画像撮像系と共焦点画像撮像系の2種類の撮像系が設けられ、それぞれユニバーサルコード15、16を介してカラー画像用プロセッサ装置12、共焦点画像用プロセッサ装置13に着脱自在に接続される。また、本実施形態では、モニタ14は共焦点画像用プロセッサ装置13にのみ接続され、カラー画像用プロセッサ装置12の映像出力は、共焦点画像用プロセッサ装置13を介してモニタ14に出力される。   The electronic endoscope system 10 mainly includes a scope 11 having a flexible tubular insertion portion, a color image processor device 12, a confocal image processor device 13, and a monitor 14. As described later, the scope 11 is provided with two types of imaging systems, a color image imaging system and a confocal image imaging system, and a color image processor device 12 and a confocal image processor via universal codes 15 and 16, respectively. The device 13 is detachably connected. In this embodiment, the monitor 14 is connected only to the confocal image processor device 13, and the video output of the color image processor device 12 is output to the monitor 14 via the confocal image processor device 13.

スコープ11の挿入部17は、例えば人体Pに挿入され、カラー画像撮像系では挿入部17の先端に設けられた撮像素子により通常のカラー画像撮影が行われる。一方、共焦点画像撮像系では挿入部17の先端からレーザ光を照射するとともに、生体組織内で励起される蛍光を共焦点光学系を通して光検出器で検出し、これを観察部位において2次元走査することでモノクロの共焦点画像が取得される。また焦点面を奥行き方向に移動することで、生体組織の奥行き方向への情報(3次元情報)も取得される。なお図1には、共焦点画像撮像系を通して共焦点画像をモニタ14に表示している様子が描かれ、このとき挿入部17の先端は観察部位に押し当てられている。   The insertion unit 17 of the scope 11 is inserted into, for example, the human body P, and in a color image imaging system, normal color image shooting is performed by an imaging device provided at the distal end of the insertion unit 17. On the other hand, in the confocal imaging system, laser light is emitted from the distal end of the insertion portion 17, and fluorescence excited in the living tissue is detected by a photodetector through the confocal optical system, and this is two-dimensionally scanned at the observation site. By doing so, a monochrome confocal image is acquired. Further, by moving the focal plane in the depth direction, information in the depth direction of the living tissue (three-dimensional information) is also acquired. FIG. 1 shows a state in which the confocal image is displayed on the monitor 14 through the confocal image capturing system, and at this time, the distal end of the insertion portion 17 is pressed against the observation site.

図2は、内視鏡挿入部17の先端の拡大斜視図である。カラー画像は、カラー画像用プロセッサ装置13から供給される白色照明光をライトガイド23(図3参照)を通して挿入部17の先端から照明レンズ24を通して照射し、対物レンズ19を通してその反射光を挿入部17内に設けられた撮像素子で検出することにより撮影される。   FIG. 2 is an enlarged perspective view of the distal end of the endoscope insertion portion 17. The color image is irradiated with white illumination light supplied from the color image processor device 13 through the light guide 23 (see FIG. 3) from the tip of the insertion portion 17 through the illumination lens 24, and the reflected light is transmitted through the objective lens 19. The image is picked up by being detected by an image sensor provided in the image sensor 17.

また、挿入部17の先端面17Aには、例えば突起部20が設けられ、突起部20には共焦点画像撮像系の対物レンズ21が配置される。対物レンズ21からは例えばレーザなどの光ビーム(例えば青色レーザ)が照射され、生体組織の一点からの光(例えば蛍光)が対物レンズ21を通して共焦点撮像系に入射され光検出器において検出される。このように被写体から各撮像系の対物レンズまでの距離は、相対的に対物レンズ19の方が対物レンズ21よりも長くなっている。そしてこれを2次元操作することにより2次元の共焦点画像が生成される。なお共焦点画像撮影中は、突起部20が観察部位に押し当てられ、観察部位との距離が一定に維持される。   Further, for example, a protrusion 20 is provided on the distal end surface 17A of the insertion portion 17, and an objective lens 21 of a confocal image capturing system is disposed on the protrusion 20. The objective lens 21 is irradiated with a light beam (for example, a blue laser) such as a laser, and light (for example, fluorescence) from one point of the living tissue is incident on the confocal imaging system through the objective lens 21 and detected by the photodetector. . Thus, the distance from the subject to the objective lens of each imaging system is relatively longer in the objective lens 19 than in the objective lens 21. A two-dimensional confocal image is generated by two-dimensionally operating this. During confocal image capturing, the protrusion 20 is pressed against the observation region, and the distance from the observation region is maintained constant.

図3は、電子内視鏡システム10におけるカラー電子内視鏡システムに関するブロック図であり、スコープ11におけるカラー画像撮像系、およびカラー画像用プロセッサ装置12の光学的、電気的な構成が示される。   FIG. 3 is a block diagram relating to a color electronic endoscope system in the electronic endoscope system 10, and shows an optical and electrical configuration of the color image imaging system and the color image processor device 12 in the scope 11.

スコープ11内に設けられるカラー画像撮像系は、ライトガイド23とその先端に設けられる照明レンズ24を備える。ライトガイド23の基端部はコネクタ25Aを介してカラー画像用プロセッサ装置12内に設けられた光源部26に光学的に接続される。光源部26からは白色光がライトガイド23へ供給され、照明レンズ24を介して白色照明光が挿入部先端から照射される。この照明光の下、被写体像は、対物レンズ19を通してCCDやCMOSなどの撮像素子27において検出される。   The color image pickup system provided in the scope 11 includes a light guide 23 and an illumination lens 24 provided at the tip thereof. The base end portion of the light guide 23 is optically connected to a light source unit 26 provided in the color image processor device 12 via a connector 25A. White light is supplied from the light source unit 26 to the light guide 23, and white illumination light is emitted from the distal end of the insertion unit via the illumination lens 24. Under this illumination light, the subject image is detected by an image sensor 27 such as a CCD or CMOS through the objective lens 19.

撮像素子27は、コネクタ25Bを介してカラー画像用プロセッサ装置12のビデオコントローラ28およびプリプロセス回路29に接続される。撮像素子27の駆動は、ビデオコントローラ28からの駆動信号により制御され、撮像素子27で検出された画像信号は、プリプロセッサ回路29を通してデジタル信号に変換される。   The image sensor 27 is connected to the video controller 28 and the preprocess circuit 29 of the color image processor device 12 through the connector 25B. The driving of the image sensor 27 is controlled by a drive signal from the video controller 28, and the image signal detected by the image sensor 27 is converted into a digital signal through the preprocessor circuit 29.

プリプロセッサ回路29から出力されるカラー画像のデジタル信号は、ビデオコントローラ28へ送られるとともに、輝度ヒストグラム回路30、R信号ヒストグラム回路31へと入力される。輝度ヒストグラム回路30およびR信号ヒストグラム回路31では、入力された1画面分の画像信号に対して、それぞれ輝度信号およびR信号に関するヒストグラムが作成され、ビデオコントローラ28へ出力される。またビデオコントローラ28に入力された画像信号には、必要に応じて所定の画像処理が施され、共焦点画像用プロセッサ装置13のビデオコントローラ52(図4参照)へ出力される。   A color image digital signal output from the preprocessor circuit 29 is sent to the video controller 28 and also input to the luminance histogram circuit 30 and the R signal histogram circuit 31. In the luminance histogram circuit 30 and the R signal histogram circuit 31, histograms relating to the luminance signal and the R signal are created for the input image signal for one screen, and are output to the video controller 28. The image signal input to the video controller 28 is subjected to predetermined image processing as necessary, and is output to the video controller 52 (see FIG. 4) of the confocal image processor device 13.

一方、ヒストグラム回路30、31からの出力は、ビデオコントローラ28を介してシステムコントローラ32へ送られた後、共焦点画像用プロセッサ装置13へ送られる。なおシステムコントローラ32は、共焦点画像用プロセッサ装置13との通信を含めカラー画像用プロセッサ装置12全体の制御を行い、フロントパネル33、フットスイッチ34、キーボード35や、コネクタ25Cを介してスコープ11の操作部(不図示)に設けられた操作ボタン36等も接続されている。またカラー画像用プロセッサ装置12内の各デバイスの駆動タイミングはタイミングジェネレータ37によって制御される。   On the other hand, the outputs from the histogram circuits 30 and 31 are sent to the system controller 32 via the video controller 28 and then sent to the confocal image processor 13. The system controller 32 controls the entire color image processor device 12 including communication with the confocal image processor device 13 and controls the scope 11 via the front panel 33, the foot switch 34, the keyboard 35, and the connector 25C. An operation button 36 and the like provided on an operation unit (not shown) are also connected. The drive timing of each device in the color image processor unit 12 is controlled by a timing generator 37.

次に電子内視鏡システム10における共焦点システムの構成について図4のブロック図を参照して説明する。なお図4はスコープ11の共焦点画像撮像系および共焦点画像用プロセッサ装置13の光学的、電気的な構成を示す。   Next, the configuration of the confocal system in the electronic endoscope system 10 will be described with reference to the block diagram of FIG. FIG. 4 shows the optical and electrical configurations of the confocal image capturing system of the scope 11 and the confocal image processor 13.

スコープ11内に設けられる共焦点画像撮像系は、対物レンズ(群)21、光ファイバ38、および共焦点画像用プロセッサ装置13内に設けられた光結合部42、光源部43、受光部44から構成される。光ファイバ38は、光源部43から光結合部42を介して供給されるレーザ光を伝送し、挿入部17の先端から射出する。このとき、光ファイバ38にはレーザ光により励起された生体組織からの蛍光が入射され、蛍光は光結合部42を介して受光部44へと伝送される。   The confocal imaging system provided in the scope 11 includes an objective lens (group) 21, an optical fiber 38, and an optical coupling unit 42, a light source unit 43, and a light receiving unit 44 provided in the confocal image processor device 13. Composed. The optical fiber 38 transmits laser light supplied from the light source unit 43 through the optical coupling unit 42 and emits the laser beam from the distal end of the insertion unit 17. At this time, the fluorescence from the living tissue excited by the laser light is incident on the optical fiber 38, and the fluorescence is transmitted to the light receiving unit 44 through the optical coupling unit 42.

一方、レーザ光による被写体の2次元走査は、光ファイバ38の先端をファイバ駆動ユニット39により駆動することにより行われる。例えばファイバ駆動ユニット39は圧電素子40を備え、共焦点画像用プロセッサ装置13に設けられたスキャンドライバ53からコネクタ41Bを介して送出される駆動信号により片持ち保持された光ファイバ38の先端部を例えば軸方向に垂直な独立した2方向に移動し、光ファイバ38の先端部を撓ませることで2次元走査を実現する。また対物レンズ21の位置は、スキャンドライバ53からの駆動信号により軸方向に調整可能であり、対物レンズ21の位置を制御することで焦点面の位置を調整し、奥行き方向の異なる距離に対する共焦点画像が取得される。   On the other hand, the two-dimensional scanning of the subject by laser light is performed by driving the tip of the optical fiber 38 by the fiber drive unit 39. For example, the fiber drive unit 39 includes a piezoelectric element 40, and the tip of the optical fiber 38 that is cantilevered by a drive signal sent from the scan driver 53 provided in the confocal image processor device 13 through the connector 41B. For example, two-dimensional scanning is realized by moving in two independent directions perpendicular to the axial direction and bending the tip of the optical fiber 38. The position of the objective lens 21 can be adjusted in the axial direction by a drive signal from the scan driver 53. The position of the focal plane is adjusted by controlling the position of the objective lens 21, and confocal for different distances in the depth direction. An image is acquired.

光ファイバ38は、コネクタ41Aを介して共焦点画像用プロセッサ装置13に光学的に接続され、共焦点画像用プロセッサ装置13内に設けられた光結合部42を介して光源部43、受光部44に接続される。光結合部42は例えば2入力、2出力の光方向性結合器(光カプラ)42Aであり、ポートP1に光源部43のレーザ光源43Aが接続され、ポートP1のストレートポートに当たるポートP3に光ファイバ38が接続される。すなわち、レーザ光源43Aからの光は、ポートP1からポートP3へと導かれ光ファイバ38を通して挿入部17の先端から射出される。なお本実施形態においてレーザ光源43Aから照射されるレーザ光は、例えば488nmである。   The optical fiber 38 is optically connected to the confocal image processor device 13 through the connector 41A, and the light source unit 43 and the light receiving unit 44 through an optical coupling unit 42 provided in the confocal image processor device 13. Connected to. The optical coupling unit 42 is, for example, a two-input, two-output optical directional coupler (optical coupler) 42A. The laser light source 43A of the light source unit 43 is connected to the port P1, and the optical fiber is connected to the port P3 corresponding to the straight port of the port P1. 38 is connected. That is, the light from the laser light source 43A is guided from the port P1 to the port P3 and is emitted from the distal end of the insertion portion 17 through the optical fiber 38. In the present embodiment, the laser beam emitted from the laser light source 43A is, for example, 488 nm.

またポートP1のクロスポートに当たるポートP4には、例えばフォトダイオード(PD)45が接続される。すなわちレーザ光源43Aの出力は、フォトダイオード(PD)45によりモニタされ、レーザ光源43Aを駆動するレーザドライバ46は、PDアンプ45Aを介したフォトダイオード(PD)45からの信号に基づいてレーザ光源43Aの駆動を制御する。   For example, a photodiode (PD) 45 is connected to the port P4 corresponding to the cross port of the port P1. That is, the output of the laser light source 43A is monitored by the photodiode (PD) 45, and the laser driver 46 that drives the laser light source 43A is based on the signal from the photodiode (PD) 45 via the PD amplifier 45A. Control the drive.

一方、ポートP3のクロスポートに当たるポートP2には受光部44が接続され、ポートP2から出力される光は、受光部44の共焦点光学系44Aを通して光電子倍増管(PMT)44Bで受光される。すなわち光ファイバ38から照射されるレーザ光による生体組織の蛍光は、光ファイバ38に入射されポートP3、ポートP2を通して光電子倍増管(PMT)44Bで受光される。   On the other hand, the light receiving unit 44 is connected to the port P2 corresponding to the cross port of the port P3, and the light output from the port P2 is received by the photomultiplier tube (PMT) 44B through the confocal optical system 44A of the light receiving unit 44. That is, the fluorescence of the living tissue by the laser light emitted from the optical fiber 38 enters the optical fiber 38 and is received by the photomultiplier tube (PMT) 44B through the ports P3 and P2.

なお光電子倍増管(PMT)44Bのゲインは、PMTアンプ44Cを通してPMTコントローラ47により制御され、光電子倍増管(PMT)44Bからの出力は、A/D変換器48、ローパスフィルタ(LPF)49と通してPMTコントローラ47に入力されるとともに、ヒストグラム回路50へ入力される。ヒストグラム回路50では、入力された1画面分の画像信号に対するヒストグラムが作成され、PMTコントローラ47へ出力される。   The gain of the photomultiplier tube (PMT) 44B is controlled by the PMT controller 47 through the PMT amplifier 44C. To the PMT controller 47 and to the histogram circuit 50. The histogram circuit 50 creates a histogram for the input image signal for one screen and outputs it to the PMT controller 47.

PMTコントローラ47に入力された共焦点画像は、共焦点画像用プロセッサ装置13のイメージコントローラ51へ入力され、共焦点画像は更にビデオコントローラ52へ出力される。一方、PMTコントローラ47に入力されたヒストグラムの値は、共焦点画像用プロセッサ装置13のシステムコントローラ54に送られる。   The confocal image input to the PMT controller 47 is input to the image controller 51 of the confocal image processor 13, and the confocal image is further output to the video controller 52. On the other hand, the histogram value input to the PMT controller 47 is sent to the system controller 54 of the confocal image processor 13.

ビデオコントローラ52に入力された画像信号には、所定の画像処理が施され、必要に応じてモニタ14へ出力される。なお、本実施形態では、前述したようにカラー画像用プロセッサ装置12のビデオコントローラ28(図3参照)から送出されたカラー画像もビデオコントローラ52へ入力されており、例えばモニタ14へ出力可能とされる。なお、本実施形態の画像判定処理に基づくカラー画像、共焦点画像間の画像切替処理については後述する。   The image signal input to the video controller 52 is subjected to predetermined image processing and is output to the monitor 14 as necessary. In the present embodiment, as described above, the color image transmitted from the video controller 28 (see FIG. 3) of the color image processor device 12 is also input to the video controller 52, and can be output to the monitor 14, for example. The The image switching process between the color image and the confocal image based on the image determination process of the present embodiment will be described later.

なおシステムコントローラ54は、カラー画像用プロセッサ装置12との通信を含め共焦点画像用プロセッサ装置13全体の制御を行い、フロントパネル55、フットスイッチ56、キーボード57や、コネクタ41Cを介してスコープ11の操作部(不図示)に設けられた操作ボタン58等も接続されている。また共焦点画像用プロセッサ装置13内の各デバイスの駆動タイミングはタイミングジェネレータ59によって制御される。   The system controller 54 controls the entire confocal image processor 13 including communication with the color image processor 12 and controls the scope 11 via the front panel 55, the foot switch 56, the keyboard 57, and the connector 41C. An operation button 58 and the like provided on an operation unit (not shown) are also connected. The drive timing of each device in the confocal image processor 13 is controlled by a timing generator 59.

次に図5、図6を参照して本実施形態の画像切替処理(画像判定処理を含む)について説明する。なお、本実施形態の画像切替処理は、カラー画像撮像系と共焦点画像撮像系の何れの撮像系による画像が現在適切であるかを自動判定し、適切であるとされる画像への切替を行うものである。   Next, image switching processing (including image determination processing) of the present embodiment will be described with reference to FIGS. Note that the image switching process of the present embodiment automatically determines whether an image by a color image capturing system or a confocal image capturing system is currently appropriate, and switches to an appropriate image. Is what you do.

図5はシステムのメインフローの概略を示すフローチャートであり、例えば共焦点画像用プロセッサ装置13のシステムコントローラ54において実行される、図6は本実施形態の画像切替処理のフローチャートである。なお、本説明では画像切替処理に関わる説明のみを行う。   FIG. 5 is a flowchart showing an outline of the main flow of the system. For example, FIG. 6 executed in the system controller 54 of the confocal image processor 13 is a flowchart of the image switching process of the present embodiment. In this description, only the description related to the image switching process will be given.

本実施形態の画像切替処理は、例えば割り込みタスク処理として実行される。共焦点画像用プロセッサ装置13の電源が投入され、図5のフローが開始されると、ステップS100においてシステムの初期化が行われる。初期化処理では、画像切替処理用のパラメータを含む各種パラメータの初期化が行われる。なお画像切替処理用のパラメータとしては、画像切替フラグImage_flagが0に初期設定される。   The image switching process of this embodiment is executed as an interrupt task process, for example. When the confocal image processor 13 is powered on and the flow of FIG. 5 is started, the system is initialized in step S100. In the initialization process, various parameters including parameters for the image switching process are initialized. Note that the image switching flag Image_flag is initially set to 0 as a parameter for image switching processing.

なお本実施形態において、Image_flag=0は、現在の観察モードがカラー画像モードであり、画像切替処理が共焦点画像への切替えのタイミングをモニタすることを示している。一方、Image_flag=1は、現在の観察モードが共焦点画像モードであり、画像切替処理がカラー画像への切替のタイミングをモニタすることを示している。   In the present embodiment, Image_flag = 0 indicates that the current observation mode is the color image mode and the image switching process monitors the timing of switching to the confocal image. On the other hand, Image_flag = 1 indicates that the current observation mode is the confocal image mode, and the image switching process monitors the timing of switching to a color image.

ステップS100のシステム初期化処理が終了すると、その後はステップS102で示される割り込みタスク処理が、例えば電源が切られるまで繰り返し実行される。すなわち、何らかのイベントが発生すると、そのイベントに対するフラグが立てられ、ステップS102の割り込みタスク処理において、フラグが立てられた処理が定常周期で実行される。本実施形態では、例えば画像の自動切替モードが設定されたときや、カラー画像用プロセッサ装置12から画像信号を受信したときなどに画像切替処理のフラグが立てられる。   When the system initialization process in step S100 ends, the interrupt task process shown in step S102 is repeatedly executed until the power is turned off, for example. In other words, when an event occurs, a flag is set for the event, and in the interrupt task process in step S102, the flagged process is executed in a steady cycle. In the present embodiment, for example, an image switching process flag is set when an image automatic switching mode is set or when an image signal is received from the color image processor device 12.

ステップS102の割り込みタスク処理において、図6に示される画像切替処理が開始されると、ステップS200において画像切替フラグImage_flagが0であるか1であるかが判定される。前述したようにフラグImage_flag=0は、現観察モードが通常のカラー画像モードであることを示し、初期化処理直後において画像切替フラグImage_flagは0に設定されている。これは内視鏡観察は通常のカラー画像の観察から開始され、挿入部先端が観察部位に押し当てられて初めて共焦点画像の撮影が開始されるためである。   When the image switching process shown in FIG. 6 is started in the interrupt task process in step S102, it is determined in step S200 whether the image switching flag Image_flag is 0 or 1. As described above, the flag Image_flag = 0 indicates that the current observation mode is the normal color image mode, and the image switching flag Image_flag is set to 0 immediately after the initialization process. This is because endoscopic observation is started from observation of a normal color image, and confocal imaging is started only after the distal end of the insertion portion is pressed against the observation site.

なお、本実施形態では、例えば図7に示されるように、1つの画面A0に通常のカラー画像を表示するカラー画像表示領域A1と、共焦点画像を表示する共焦点画像表示領域A2が設けられる。カラー画像観察時には、図7(a)のように、カラー画像表示領域A1に通常のカラー画像が表示され、共焦点画像表示領域A2は例えばブルーバック画像が表示される。一方、共焦点画像観察時には、図7(b)のように、共焦点画像表示領域A2に共焦点画像が表示され、カラー画像表示領域A1はブルーバック画像が表示される。   In the present embodiment, for example, as shown in FIG. 7, a color image display area A1 for displaying a normal color image and a confocal image display area A2 for displaying a confocal image are provided on one screen A0. . At the time of color image observation, as shown in FIG. 7A, a normal color image is displayed in the color image display area A1, and a blue background image, for example, is displayed in the confocal image display area A2. On the other hand, at the time of confocal image observation, as shown in FIG. 7B, the confocal image is displayed in the confocal image display region A2, and the blue image is displayed in the color image display region A1.

ステップS200において画像切替フラグImage_flag=0であると判定されると、カラー画像モードにおけるステップS202〜S220の画像切替処理が開始され、ステップS202においてカウンタCNT1が0に初期化される。カウンタCNT1は、共焦点画像への切替条件を満たした回数をカウントするもので、本実施形態では、以下に説明するようにカウンタCNT1の値が所定の閾値に達すると共焦点画像への切替を実行する。なお、このときにはカラー画像観察が行われており、モニタ14には図7(a)のようにカラー画像が表示されている。   If it is determined in step S200 that the image switching flag Image_flag = 0, the image switching processing in steps S202 to S220 in the color image mode is started, and the counter CNT1 is initialized to 0 in step S202. The counter CNT1 counts the number of times that the condition for switching to the confocal image is satisfied. In this embodiment, the counter CNT1 switches to the confocal image when the value of the counter CNT1 reaches a predetermined threshold as described below. Run. At this time, color image observation is performed, and a color image is displayed on the monitor 14 as shown in FIG.

ステップS204では、カラー画像(白色光画像)の画像情報、すなわち輝度信号およびR信号に関するヒストグラムの値が取得され、ステップS206では輝度ヒストグラムにおいて、輝度値(信号レベル)が高い側からの度数の累積が全体の所定割合(例えば1画面中の画素の80%)になる輝度値(信号レベル)が求められ、所定の閾値以上であるか否かが判定される。なお図8(a)に、信号レベルが高い側からの度数の累積が1画面中の画素の80%となる輝度値(信号レベル)Sが所定の閾値Tよりも大きい場合のヒストグラムの例をし、図8(b)に求められる輝度値(信号レベル)Sが所定の閾値Tよりも小さい場合のヒストグラムの例を示す。   In step S204, image information of a color image (white light image), that is, a value of a histogram related to the luminance signal and the R signal is acquired. In step S206, the frequency from the higher luminance value (signal level) is accumulated in the luminance histogram. Is obtained as a luminance value (signal level) that becomes a predetermined ratio of the whole (for example, 80% of pixels in one screen), and it is determined whether or not it is equal to or greater than a predetermined threshold value. FIG. 8A shows an example of a histogram when the luminance value (signal level) S at which the frequency accumulation from the higher signal level is 80% of the pixels in one screen is larger than the predetermined threshold T. FIG. 8B shows an example of a histogram when the luminance value (signal level) S obtained is smaller than a predetermined threshold T.

閾値以上と判定された場合にはステップS208において、R信号(R成分)のヒストグラムにおいて、R信号値が高い側からの度数の累積が、全体の所定割合(例えば1画面中の80%)となるR信号値が求められ、その値が所定の閾値以上であるか否かが判定される。ステップS206、ステップS208の何れかにおいて、求められた値が閾値未満と判定された場合には現画像切替処理を終了し、処理は割り込みタスク処理のループへ戻る。   If it is determined that the threshold value is equal to or greater than the threshold, in step S208, in the histogram of the R signal (R component), the cumulative frequency from the higher R signal value side is a predetermined ratio (for example, 80% in one screen). R signal value is obtained, and it is determined whether or not the value is equal to or greater than a predetermined threshold value. If it is determined in either step S206 or step S208 that the obtained value is less than the threshold value, the current image switching process is terminated, and the process returns to the interrupt task process loop.

一方、ステップS206およびステップS208において、求められた値が閾値以上であると判定されるとステップS210において共焦点画像の画像情報、すなわち共焦点画像のヒストグラムの値が取得される。そしてステップS212において共焦点画像のヒストグラムにおいて、ゲイン値が高い側からの度数の累積が、全体の所定割合(例えば50%)となるゲイン値が求められ、その値が所定の閾値以上であるか否かが判定される。求められた値が閾値未満と判定された場合には現画像切替処理を終了し、処理は割り込みタスク処理のループへ戻る。   On the other hand, if it is determined in step S206 and step S208 that the obtained value is equal to or larger than the threshold value, the image information of the confocal image, that is, the histogram value of the confocal image is acquired in step S210. In step S212, in the histogram of the confocal image, a gain value is obtained in which the cumulative frequency from the higher gain value side is a predetermined ratio (for example, 50%) of the whole, and whether the value is equal to or greater than a predetermined threshold value. It is determined whether or not. If it is determined that the obtained value is less than the threshold value, the current image switching process is terminated, and the process returns to the interrupt task process loop.

一方、ステップS212において、求められた値が閾値以上であると判定されるとステップS214においてカウンタCNT1の値がインクリメント(+1)される。すなわち、カラー画像の輝度および赤色成分が高く(内視鏡先端がカラー画像を撮影するには不適切なほど生体組織に近接していると思われる状況に対応)、かつ共焦点撮像系で得られるPMT44Bからの出力が十分に高いとき(内視鏡先端が共焦点画像を撮影するのに十分な程度に生体組織に近接していると思われる状況)、共焦点画像への切替を促すカウンタCNT1の値がインクリメントされる。   On the other hand, if it is determined in step S212 that the obtained value is equal to or greater than the threshold value, the value of the counter CNT1 is incremented (+1) in step S214. In other words, the brightness and red component of the color image are high (corresponding to the situation where the endoscope tip seems to be too close to the living tissue to capture a color image) and obtained with a confocal imaging system. When the output from the PMT 44B is sufficiently high (a situation where the endoscope tip is considered to be close enough to the living tissue to capture a confocal image), a counter that prompts switching to the confocal image The value of CNT1 is incremented.

なお、カラー画像モードにおいて、ファイバ駆動ユニット39は停止されているので、共焦点画像に関わるヒストグラムは、例えば1画面分の時間に亘りPMT44Bから得られる出力に関して作成される。   In the color image mode, since the fiber drive unit 39 is stopped, a histogram related to the confocal image is created with respect to the output obtained from the PMT 44B over a time corresponding to one screen, for example.

次にステップS216において、カウンタCNT1の値が所定の閾値に達したか否かが判定される。カウンタCNT1の値が所定の閾値に達していない場合には、処理はステップS204に戻り、上述した処理が繰り返される。一方、ステップS216においてカウンタCNT1が所定の閾値に達している場合には、ステップS218において画像切替フラグImage_flag=1とされ、ステップS220において共焦点画像観察時に必要とされる各種機能が起動され、不要とされる各種機能が停止される。すなわち観察モードがカラー画像モードから共焦点画像モードへと切り替えられる。   Next, in step S216, it is determined whether or not the value of the counter CNT1 has reached a predetermined threshold value. If the value of the counter CNT1 has not reached the predetermined threshold value, the process returns to step S204, and the above-described process is repeated. On the other hand, if the counter CNT1 has reached the predetermined threshold value in step S216, the image switching flag Image_flag = 1 is set in step S218, and various functions required for confocal image observation are activated in step S220, which are unnecessary. The various functions are stopped. That is, the observation mode is switched from the color image mode to the confocal image mode.

例えば、カラー画像表示領域A1がブルーバック画像(図7(b)参照)とされるとともに、スキャンドライバ53の駆動が開始され、ファイバ駆動ユニット39による光ファイバ38の駆動が開始される(図4参照)。また、カラー画像の撮影に用いられる光源部26のランプは消灯されるとともに、共焦点撮像系により走査された画像データがレコーダ59へ記録され、共焦点画像表示領域A2への共焦点画像の表示が開始される。これにより現画像切替処理は終了し、処理は割り込みタスク処理のループに戻る。   For example, the color image display area A1 is a blue-back image (see FIG. 7B), the drive of the scan driver 53 is started, and the drive of the optical fiber 38 by the fiber drive unit 39 is started (FIG. 4). reference). Further, the lamp of the light source unit 26 used for photographing the color image is turned off, and the image data scanned by the confocal imaging system is recorded in the recorder 59, and the confocal image is displayed in the confocal image display area A2. Is started. As a result, the current image switching process ends, and the process returns to the interrupt task process loop.

一方、ステップS200において画像切替フラグImage_flag=1と判定されると、共焦点画像モードにおけるステップS222〜S234の画像切替処理が開始され、ステップS222においてカウンタCNT2が0に初期化される。カウンタCNT2は、通常のカラー画像への切替条件を満たした回数をカウントするもので、本実施形態では、以下に説明するようにカウンタCNT2の値が所定の閾値に達するとカラー画像への切替を実行する。なお、このときには共焦点画像観察が行われており、モニタ14には図7(b)のように共焦点画像が表示されている。   On the other hand, if it is determined in step S200 that the image switching flag Image_flag = 1, the image switching processing in steps S222 to S234 in the confocal image mode is started, and the counter CNT2 is initialized to 0 in step S222. The counter CNT2 counts the number of times that the condition for switching to a normal color image is satisfied. In this embodiment, when the value of the counter CNT2 reaches a predetermined threshold, switching to a color image is performed as described below. Run. At this time, confocal image observation is performed, and the confocal image is displayed on the monitor 14 as shown in FIG.

ステップS224では、共焦点画像の画像情報、すなわち1枚の共焦点画像に関するヒストグラムの値が取得され、ステップS226では、共焦点画像のヒストグラムにおいて、ゲイン値が高い側からの度数の累積が、全体の所定割合となるゲイン値が求められ、その値が所定の閾値以上であるか否かが判定される。求められた値が閾値以上であると判定される場合には、現画像切替処理を終了し、処理は割り込みタスク処理のループへ戻る。   In step S224, the image information of the confocal image, that is, the value of the histogram relating to one confocal image is acquired. In step S226, the cumulative frequency from the higher gain value side in the histogram of the confocal image is Is determined, and it is determined whether the value is equal to or greater than a predetermined threshold. If it is determined that the obtained value is greater than or equal to the threshold value, the current image switching process is terminated, and the process returns to the interrupt task process loop.

一方、ステップS226において、求められた値が閾値未満であると判定されるとステップS228においてカウンタCNT2の値がインクリメント(+1)される。すなわち、共焦点画像のゲイン値が全体として低い場合(内視鏡先端が共焦点画像を撮影するのに十分な程度に生体組織に近接していないと思われる状況)、カラー画像への切替を促すカウンタCNT2の値がインクリメントされる。   On the other hand, if it is determined in step S226 that the obtained value is less than the threshold value, the value of the counter CNT2 is incremented (+1) in step S228. That is, when the gain value of the confocal image is low as a whole (the situation where the endoscope tip is not close enough to the living tissue to capture the confocal image), switching to the color image is performed. The value of the counter CNT2 to be urged is incremented.

次にステップS230においてカウンタCNT2の値が所定の閾値に達したか否かが判定される。カウンタCNT2の値が所定の閾値に達していない場合には、処理はステップS222に戻り、上述した処理が繰り返される。一方、ステップS230においてカウンタCNT2が所定の閾値に達している場合には、ステップS232において画像切替フラグImage_flag=0とされ、ステップS234においてカラー画像観察時に必要とされる各種機能が起動され、不要とされる各種機能が停止される。すなわち観察モードが共焦点画像モードからカラー画像モードへと切り替えられる。   Next, in step S230, it is determined whether or not the value of the counter CNT2 has reached a predetermined threshold value. If the value of the counter CNT2 has not reached the predetermined threshold value, the process returns to step S222, and the above-described process is repeated. On the other hand, if the counter CNT2 has reached the predetermined threshold value in step S230, the image switching flag Image_flag = 0 is set in step S232, and various functions required for color image observation are activated in step S234. Various functions to be performed are stopped. That is, the observation mode is switched from the confocal image mode to the color image mode.

すなわち、共焦点画像表示領域A2がブルーバック画像(図7(a)参照)とされるとともに、スキャンドライバ53の駆動が停止され、ファイバ駆動ユニット39による光ファイバ38の駆動が停止される(図4参照)。また、カラー画像の撮影に用いられる光源部26のランプが点灯されるとともに、カラー画像表示領域A1へのカラー画像の表示が開始される。これにより現画像切替処理は終了し、処理は割り込みタスク処理のループへ戻る。なお、ファイバ駆動ユニット39の駆動が停止されることにより、カラー画像モードにおいて、光ファイバ38から照射されるレーザはレーザポインタ機能を果たす。   That is, the confocal image display area A2 is a blue back image (see FIG. 7A), the drive of the scan driver 53 is stopped, and the drive of the optical fiber 38 by the fiber drive unit 39 is stopped (FIG. 7). 4). In addition, the lamp of the light source unit 26 used for photographing a color image is turned on, and the display of the color image in the color image display area A1 is started. As a result, the current image switching process ends, and the process returns to the interrupt task process loop. Note that when the drive of the fiber drive unit 39 is stopped, the laser emitted from the optical fiber 38 performs a laser pointer function in the color image mode.

以上のように、本実施形態によれば、カラー画像と共焦点画像を撮影する内視鏡のように、観察部位との距離により適切な撮像系が異なる内視鏡において、現在何れの撮像系を利用することが適切であるかを自動判定することができ、それにより適切なタイミングで画面を切替えることができる。また、観察に不適切な画像をマスクすることで、ユーザにより見やすい画像を提供することができる。   As described above, according to the present embodiment, in an endoscope that has different appropriate imaging systems depending on the distance from an observation site, such as an endoscope that captures a color image and a confocal image, any imaging system is currently used. It is possible to automatically determine whether it is appropriate to use the screen, thereby switching the screen at an appropriate timing. Further, by masking an image inappropriate for observation, it is possible to provide a user-friendly image.

なお、本実施形態において画像切替処理は共焦点画像用プロセッサ装置において実行されたが、カラー画像用プロセッサ装置で行ってもよく、その場合、1台のモニタがカラー画像用プロセッサ装置に接続されてもよい。また、本実施形態では1画面にカラー画像と共焦点画像を表示したが、カラー画像と共焦点画像の間で画面を切替える構成であってもよい。また、それぞれの画像を独立したモニタにそれぞれ表示する場合であっても、本処理は適用できる。また、本実施形態においては輝度信号およびR信号のヒストグラムを作成する輝度ヒストグラム回路30およびR信号ヒストグラム回路31はカラー画像用プロセッサ装置12に設けられているが、これらの回路を共焦点画像用プロセッサ装置13に設けてもよい。このようにすれば、カラー画像用プロセッサ装置12のシステムコントローラ32と共焦点画像用プロセッサ装置13のシステムコントローラ54との通信を省略することができる。   In this embodiment, the image switching process is executed in the confocal image processor device, but may be performed in the color image processor device. In this case, one monitor is connected to the color image processor device. Also good. In this embodiment, the color image and the confocal image are displayed on one screen. However, the screen may be switched between the color image and the confocal image. Further, this processing can be applied even when each image is displayed on an independent monitor. In the present embodiment, the luminance histogram circuit 30 and the R signal histogram circuit 31 for creating the histogram of the luminance signal and the R signal are provided in the color image processor device 12, but these circuits are used as the confocal image processor. You may provide in the apparatus 13. FIG. In this way, communication between the system controller 32 of the color image processor device 12 and the system controller 54 of the confocal image processor device 13 can be omitted.

本実施形態では観察に使用しない画像をブルーバックでマスクしたが、マスク処理はブルーバック以外であってもよい。更に本実施形態では、カラー画像と共焦点画像を例に説明を行ったが、それ以外の画像にも適用できる。また、本実施形態ではカラー画像から共焦点画像への切替の判断に共焦点撮像系から得られるヒストグラムも利用したが(ステップS212)、これを省くことも可能である。また、共焦点画像モードでは、撮像素子の駆動を停止してもよい。   In the present embodiment, an image that is not used for observation is masked with a blue background, but the mask processing may be other than the blue background. Furthermore, in the present embodiment, a color image and a confocal image have been described as examples, but the present invention can also be applied to other images. In the present embodiment, the histogram obtained from the confocal imaging system is also used to determine the switching from the color image to the confocal image (step S212), but this can be omitted. Further, in the confocal image mode, the driving of the image sensor may be stopped.

本実施形態では各撮像系で得られる画像信号に基づき、何れの撮像系が適切かを判断したが、例えば共焦点撮像系の対物レンズが設けられる突起部の周辺に複数の感圧センサを設け、その全ての感圧センサによる接触の有無を上記判断に取り入れてもよい(例えばカウンタをインクリメントさせるための条件の一つとして他の条件と直列的に採用)。また本実施形態では、ヒストグラムにおける値の高い側からの度数の累積が所定の割合となる値を求め、これに基づき判定を行ったが、低い側からの度数の累積を用いることもできる。また、平均値、中央値、最頻値など他の統計量を代わりに用いることも可能であり、更にこれらを組み合わせて利用することも可能である。   In this embodiment, it is determined which imaging system is appropriate based on the image signal obtained by each imaging system. For example, a plurality of pressure-sensitive sensors are provided around the protrusions where the objective lens of the confocal imaging system is provided. The presence / absence of contact by all of the pressure-sensitive sensors may be taken into the above determination (for example, adopted in series with other conditions as one of the conditions for incrementing the counter). Further, in this embodiment, the value at which the frequency accumulation from the higher value side in the histogram is determined to be a predetermined ratio, and the determination is made based on this value. However, the frequency accumulation from the lower value side can also be used. In addition, other statistics such as an average value, median value, and mode value can be used instead, and these can be used in combination.

10 電子内視鏡システム
11 スコープ
12 カラー画像用プロセッサ装置
13 共焦点画像用プロセッサ装置
14 モニタ
17 内視鏡挿入部
19 対物レンズ(カラー画像撮像系)
20 突起部
21 対物レンズ(共焦点画像撮像系)
23 ライトガイド
24 照明レンズ
26 光源部
28、52 ビデオコントローラ
30 輝度ヒストグラム回路
31 R信号ヒストグラム回路
32、54 システムコントローラ
38 光ファイバ
39 ファイバ駆動ユニット
40 圧電素子
42 光結合部
42A 光カプラ
43 光源部
43A レーザ光源
44 受光部
44B 光電子倍増管(PMT)
47 PMTコントローラ
50 ヒストグラム回路
51 イメージコントローラ
53 スキャンドライバ
DESCRIPTION OF SYMBOLS 10 Electronic endoscope system 11 Scope 12 Processor apparatus for color images 13 Processor apparatus for confocal images 14 Monitor 17 Endoscope insertion part 19 Objective lens (color image imaging system)
20 Protrusion 21 Objective lens (confocal imaging system)
DESCRIPTION OF SYMBOLS 23 Light guide 24 Illumination lens 26 Light source part 28, 52 Video controller 30 Luminance histogram circuit 31 R signal histogram circuit 32, 54 System controller 38 Optical fiber 39 Fiber drive unit 40 Piezoelectric element 42 Optical coupling part 42A Optical coupler 43 Light source part 43A Laser Light source 44 Light receiver 44B Photomultiplier tube (PMT)
47 PMT controller 50 Histogram circuit 51 Image controller 53 Scan driver

Claims (8)

被写体を相対的に遠距離から撮影するための第1撮像系と、
前記被写体を相対的に近距離から撮影するための第2撮像系と、
前記第1撮像系で得られる画像信号と前記第2撮像系で得られる画像信号とに基づき何れの撮像系による撮影が適切かを判断する判定手段とを備え
前記第1および第2撮像系の画像を常時画像表示装置に出力し、使用されていない撮像系の画像に対してはマスク処理を施す
ることを特徴とする電子内視鏡システム。
A first imaging system for photographing a subject from a relatively long distance;
A second imaging system for photographing the subject from a relatively short distance;
A determination unit that determines which imaging system is appropriate for imaging based on an image signal obtained by the first imaging system and an image signal obtained by the second imaging system ;
Wherein the first and the image of the second imaging system continuously output to the image display device, an electronic endoscope Kagamishi stem, characterized in Rukoto performs masking processing for the image of the imaging system that are not being used.
前記判定手段が各撮像系からの画像信号に対するヒストグラムに基づき前記判断を行うことを特徴とする請求項1に記載の電子内視鏡システム。 Electronic endoscope Kagamishi stem according to claim 1, characterized in that said determination means wherein the determination on the basis of the histogram for the image signal from the imaging systems. 前記第1撮像系がカラー画像の撮影を行い、前記第2撮像系が共焦点画像の撮影を行うことを特徴とする請求項2に記載の電子内視鏡システム。 Wherein the first imaging system performs imaging of a color image, the electronic endoscope Kagamishi stem according to claim 2, wherein the second imaging system and performing the imaging confocal image. 前記カラー画像に関しては、輝度信号に関するヒストグラムとR信号に関するヒストグラムを利用することを特徴とする請求項3に記載の電子内視鏡システム。 The regard to color image, the electronic endoscope Kagamishi stem according to claim 3, characterized in that utilizing the histogram of the histogram and R signals relating to the luminance signal. 前記第2撮像系による撮影が適切であるか否かを判断する場合には、第1および第2撮像系からの画像信号に対するヒストグラムを利用し、前記第1撮像系による撮影が適切であるか否かを判断する場合には、第2撮像系からの画像信号に対するヒストグラムのみを用いることを特徴とする請求項2〜4の何れか一項に記載の電子内視鏡システム。 When it is determined whether or not shooting by the second imaging system is appropriate, whether or not shooting by the first imaging system is appropriate using a histogram for the image signals from the first and second imaging systems. when determining the whether the electronic endoscope Kagamishi stem according to any one of claims 2-4, characterized by using only the histogram for the image signal from the second imaging system. 前記判定手段が、前記各ヒストグラムにおける一方の側からの度数の累積が1画面中の所定割合の画素数になる値に基づき前記判断を行うことを特徴とする請求項2〜5の何れか一項に記載の電子内視鏡システム。 6. The determination unit according to claim 2, wherein the determination unit performs the determination based on a value in which a cumulative frequency from one side in each histogram becomes a predetermined number of pixels in one screen. electronic endoscope Kagamishi stem according to claim. 前記判断に基づき、前記第1または第2撮像系からの撮影から他方の撮影に切替えるとともに、画像表示装置への出力も前記他方の表示に切替える切替手段を更に備えることを特徴とする請求項1〜6の何れか一項に記載の電子内視鏡システム。 2. The apparatus according to claim 1, further comprising switching means for switching from shooting from the first or second imaging system to the other shooting based on the determination, and switching the output to the image display device to the other display. electronic endoscope Kagamishi stem according to any one of 6. 前記切替手段により使用されない撮像系の不要な機能を停止することを特徴とする請求項7に記載の電子内視鏡システム。 Electronic endoscope Kagamishi stem according to claim 7, characterized in that stop unnecessary functions of the imaging system which is not used by the switching means.
JP2012251619A 2012-11-15 2012-11-15 Electronic endoscope system Active JP6073113B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012251619A JP6073113B2 (en) 2012-11-15 2012-11-15 Electronic endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012251619A JP6073113B2 (en) 2012-11-15 2012-11-15 Electronic endoscope system

Publications (2)

Publication Number Publication Date
JP2014097254A JP2014097254A (en) 2014-05-29
JP6073113B2 true JP6073113B2 (en) 2017-02-01

Family

ID=50939825

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012251619A Active JP6073113B2 (en) 2012-11-15 2012-11-15 Electronic endoscope system

Country Status (1)

Country Link
JP (1) JP6073113B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002078670A (en) * 2000-06-26 2002-03-19 Fuji Photo Film Co Ltd Fluorescent imaging system
JP4895630B2 (en) * 2006-02-06 2012-03-14 Hoya株式会社 Endoscope device for magnification observation
JP5030507B2 (en) * 2006-08-30 2012-09-19 オリンパスメディカルシステムズ株式会社 Endoscope tip hood and endoscope with hood

Also Published As

Publication number Publication date
JP2014097254A (en) 2014-05-29

Similar Documents

Publication Publication Date Title
JP4856286B2 (en) Endoscope system
JP5389612B2 (en) Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system
EP2742849B1 (en) Endoscope apparatus and image pickup control method thereof
CN110418596B (en) Measurement support device, endoscope system, and processor
EP3100667B1 (en) Endoscope apparatus and image pickup control method thereof
US9414739B2 (en) Imaging apparatus for controlling fluorescence imaging in divided imaging surface
JP2006192009A (en) Image processing apparatus
CN105579880A (en) Imaging system and imaging system operation method
JPWO2020170791A1 (en) Medical image processing equipment and methods
JP2013005830A (en) Endoscope system, processor device, and object distance measuring method
CN110461204B (en) Measurement support device, endoscope system, and processor
US20070203394A1 (en) Methods and apparatuses for selecting and displaying an image with the best focus
JP2005080819A (en) Endoscope
JP2005040400A (en) Optical observation probe
JP6073113B2 (en) Electronic endoscope system
WO2020054255A1 (en) Endoscope device, endoscope processor, and endoscope device operation method
US20210297575A1 (en) Medical control device and medical observation system
US20210290035A1 (en) Medical control device and medical observation system
JP2007306974A (en) Endoscope processor, endoscope program, image processing program, and endoscopic image recording and reproducing apparatus
JP6663692B2 (en) Image processing apparatus, endoscope system, and control method for image processing apparatus
JP4409227B2 (en) Probe-type observation apparatus and endoscope apparatus
EP2743887A2 (en) Endoscope apparatus and image processing method thereof
JP2002045328A (en) Device displaying fluorescent diagnostic image
JP2006110055A (en) Endoscope apparatus and endoscope system
US20230380660A1 (en) Endoscope system and operation method for endoscope system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150915

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160726

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160906

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161101

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170104

R150 Certificate of patent or registration of utility model

Ref document number: 6073113

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250