JP2016015995A - Electronic endoscope system, and processor for electronic endoscope - Google Patents

Electronic endoscope system, and processor for electronic endoscope Download PDF

Info

Publication number
JP2016015995A
JP2016015995A JP2014138630A JP2014138630A JP2016015995A JP 2016015995 A JP2016015995 A JP 2016015995A JP 2014138630 A JP2014138630 A JP 2014138630A JP 2014138630 A JP2014138630 A JP 2014138630A JP 2016015995 A JP2016015995 A JP 2016015995A
Authority
JP
Japan
Prior art keywords
correction
electronic endoscope
endoscope system
unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014138630A
Other languages
Japanese (ja)
Inventor
雅明 福田
Masaaki Fukuda
雅明 福田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hoya Corp
Original Assignee
Hoya Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hoya Corp filed Critical Hoya Corp
Priority to JP2014138630A priority Critical patent/JP2016015995A/en
Publication of JP2016015995A publication Critical patent/JP2016015995A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Endoscopes (AREA)

Abstract

PROBLEM TO BE SOLVED: To improve the precision of the color correction of an electronic endoscope image.SOLUTION: An electronic endoscope system comprises: a storage part adapted to store a correction value for correcting the hue of the picture signal of an endoscope image; and a correction part for correcting the hue of the image signal on the basis of the correction value stored in the storage part.SELECTED DRAWING: Figure 3

Description

本発明は、内視鏡画像を撮像する電子内視鏡システム及び電子内視鏡用プロセッサに関連し、特に電子内視鏡システム等における画像信号の色補正処理に関する。   The present invention relates to an electronic endoscope system and an electronic endoscope processor for capturing an endoscope image, and more particularly to color correction processing of an image signal in an electronic endoscope system or the like.

人体内部の観察や治療に電子内視鏡が使用されている。電子内視鏡観察では、病変部と正常な部位とを正確に識別する必要がある。病変部は、例えば血管新生などにより、正常な部位とは色調が異なる場合が多い。特許文献1には、内視鏡画像の色情報に基づいて病変部である可能性が高い部位を特定して、当該部位を強調表示することによって内視鏡画像診断を支援する機能を備えた電子内視鏡システムが記載されている。   Electronic endoscopes are used for observation and treatment inside the human body. In electronic endoscopic observation, it is necessary to accurately distinguish a lesion from a normal site. The lesion often has a color tone different from that of a normal part due to, for example, angiogenesis. Patent Document 1 has a function of supporting endoscopic image diagnosis by identifying a site that is highly likely to be a lesion based on color information of an endoscopic image and highlighting the site. An electronic endoscope system is described.

上記のように内視鏡画像の色情報に基づいて病変部等を正確に特定するためには、少なくとも病変部等の特定に用いる色領域において正確な色情報を有する内視鏡画像を取得する必要がある。従来の電子内視鏡システムには、内視鏡画像の色情報を補正する機能として、ホワイトバランス補正機能が設けられている。   As described above, in order to accurately specify a lesioned part or the like based on the color information of the endoscope image, an endoscope image having accurate color information is acquired at least in a color region used for specifying the lesioned part or the like. There is a need. A conventional electronic endoscope system is provided with a white balance correction function as a function of correcting color information of an endoscope image.

特開2010−115243号公報JP 2010-115243 A

ホワイトバランス補正は、無彩色軸上の一点(例えば白色)のみで色補正を行うものであるため、有彩色の色相の誤差を補正することができない。そのため、色情報を補正する機能としてホワイトバランス補正機能のみを備えた従来の電子内視鏡システムでは、色情報の誤差が大きく、このことが病変部等を識別する精度を低いものにしていた。   Since the white balance correction is to perform color correction at only one point (for example, white) on the achromatic color axis, it is not possible to correct the hue error of the chromatic color. For this reason, in a conventional electronic endoscope system having only a white balance correction function as a function for correcting color information, there is a large error in color information, which makes the accuracy of identifying a lesion or the like low.

本発明は上記の事情に鑑みてなされたものであり、その目的とするところは、電子内視鏡画像の色補正の精度を向上させることによって、電子内視鏡画像の色情報に基づく病変部等を識別する精度を向上させることを目的とする。   The present invention has been made in view of the above circumstances, and an object of the present invention is to improve a color correction accuracy of an electronic endoscopic image, thereby causing a lesion portion based on color information of the electronic endoscopic image. The purpose is to improve the accuracy of identifying the like.

本発明の実施形態によれば、内視鏡画像の画像信号の色相を補正するための補正値が記憶される記憶部と、記憶部に記憶された補正値に基づいて画像信号の色相を補正する補正部と、を備えた電子内視鏡システムが提供される。   According to an embodiment of the present invention, a storage unit that stores a correction value for correcting a hue of an image signal of an endoscopic image, and a hue of the image signal is corrected based on the correction value stored in the storage unit. And an electronic endoscope system including a correction unit.

上記の電子内視鏡システムにおいて、補正値が、電子内視鏡システムに個別に設定された、画像信号の色相の個体差を補正するものであってもよい。   In the above electronic endoscope system, the correction value may be one that corrects individual differences in hues of image signals set individually in the electronic endoscope system.

上記の電子内視鏡システムにおいて、所定色のカラーチャートを撮像してキャリブレーション用画像信号を取得し、キャリブレーション用画像信号に基づいて補正値を算出するキャリブレーション部を更に備えた構成としてもよい。   The electronic endoscope system may further include a calibration unit that captures a color chart of a predetermined color to acquire a calibration image signal and calculates a correction value based on the calibration image signal. Good.

上記の電子内視鏡システムにおいて、所定色が血液に特有の赤色である構成としてもよい。   In the above electronic endoscope system, the predetermined color may be a red color peculiar to blood.

上記の電子内視鏡システムにおいて、キャリブレーション部が、色相の異なる複数の所定色についてキャリブレーション用画像信号を取得し、複数の所定色における補正後の誤差が所定値以下となるように前記補正値を算出する構成としてもよい。   In the electronic endoscope system described above, the calibration unit acquires calibration image signals for a plurality of predetermined colors having different hues, and the correction is performed so that errors after correction in the plurality of predetermined colors are equal to or less than a predetermined value. It is good also as a structure which calculates a value.

上記の電子内視鏡システムにおいて、補正値が、色相を補正するための補正角と彩度を補正するための補正係数を含み、補正部が、補正係数に基づいて画像信号の彩度を補正する構成としてもよい。   In the above electronic endoscope system, the correction value includes a correction angle for correcting the hue and a correction coefficient for correcting the saturation, and the correction unit corrects the saturation of the image signal based on the correction coefficient. It is good also as composition to do.

上記の電子内視鏡システムにおいて、画像信号に対して色の変化を伴う画像処理を行う画像処理部を備え、記憶部は、画像処理が行われる場合に適した補正値である第1補正値と、画像処理が行われない場合に適した補正値である第2補正値とを記憶し、補正部は、画像処理が行われる場合には、第1補正値に基づいて補正をし、画像処理が行われない場合には、第2補正値に基づいて補正をする構成としてもよい。   The above electronic endoscope system includes an image processing unit that performs image processing with color change on an image signal, and the storage unit is a first correction value that is a correction value suitable for image processing. And a second correction value that is a correction value suitable for a case where image processing is not performed, and a correction unit performs correction based on the first correction value when image processing is performed, When the process is not performed, the correction may be performed based on the second correction value.

記憶部には被写体の照明に使用する光源の種類に応じた複数の補正値が記憶され、補正部は、複数の補正値から使用する光源の種類に対応した一つを選択して、選択した補正値に基づいて画像信号の色相を補正する構成としてもよい。   The storage unit stores a plurality of correction values according to the type of light source used for illumination of the subject, and the correction unit selects and selects one corresponding to the type of light source to be used from the plurality of correction values. The hue of the image signal may be corrected based on the correction value.

上記の電子内視鏡システムにおいて、補正後の画像信号に基づいて各画素について指標を算出する指標算出部を備えた構成としてもよい。   The above electronic endoscope system may include an index calculation unit that calculates an index for each pixel based on the corrected image signal.

上記の電子内視鏡システムにおいて、指標は、内視鏡画像に写された生体組織中のヘモグロビン濃度と相関する指標である構成としてもよい。   In the electronic endoscope system described above, the index may be configured to be an index correlating with the hemoglobin concentration in the living tissue imaged in the endoscopic image.

上記の電子内視鏡システムにおいて、画像信号を生成する電子スコープと、画像信号を処理してビデオ信号を生成するプロセッサと、を備え、記憶部が電子スコープに設けられ、補正部が前記プロセッサに設けられた構成としてもよい。   The electronic endoscope system includes an electronic scope that generates an image signal, and a processor that processes the image signal to generate a video signal, a storage unit is provided in the electronic scope, and a correction unit is provided in the processor. It is good also as a structure provided.

また、本発明の実施形態によれば、上記の電子内視鏡システムにおいて、内視鏡画像の画像信号の色相を補正するための補正値が記憶される記憶部と、記憶部に記憶された補正値に基づいて画像信号の色相を補正する補正部と、を備えた電子内視鏡用プロセッサが提供される。   Further, according to the embodiment of the present invention, in the above electronic endoscope system, the correction value for correcting the hue of the image signal of the endoscopic image is stored, and the correction value is stored in the storage unit. There is provided a processor for an electronic endoscope comprising a correction unit that corrects the hue of an image signal based on a correction value.

本発明の実施形態によれば、電子内視鏡画像の色補正を高い精度で行うことが可能となる。これにより、電子内視鏡画像の色情報に基づいて病変部等を識別する精度を向上させることができる。   According to the embodiment of the present invention, color correction of an electronic endoscope image can be performed with high accuracy. Thereby, the precision which identifies a lesioned part etc. based on the color information of an electronic endoscope image can be improved.

本発明の実施形態に係る電子内視鏡システムの外観図である。1 is an external view of an electronic endoscope system according to an embodiment of the present invention. 本発明の実施形態に係る電子内視鏡システムの概略構成を示すブロック図である。1 is a block diagram illustrating a schematic configuration of an electronic endoscope system according to an embodiment of the present invention. 本発明の実施形態に係るプロセッサの信号処理部の詳細構成を示すブロック図である。It is a block diagram which shows the detailed structure of the signal processing part of the processor which concerns on embodiment of this invention. 本発明の実施形態に係る高度色補正処理を説明するCb−Cr色平面図である。It is a Cb-Cr color plan view for explaining advanced color correction processing according to the embodiment of the present invention. 本発明の実施形態に係る高度色補正処理の変形例を説明するa*b*色平面図である。It is a * b * color top view explaining the modification of the advanced color correction process which concerns on embodiment of this invention.

以下、本発明の実施形態について図面を参照しながら説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図1は、本発明の実施形態に係る電子内視鏡システム1の外観図である。また、図2は、電子内視鏡システム1の概略構成を示すブロック図である。電子内視鏡システム1は、電子スコープ100、プロセッサ200及びモニタ300(図2)を備えている。電子スコープ100及びモニタ300は、それぞれプロセッサ200に接続される。   FIG. 1 is an external view of an electronic endoscope system 1 according to an embodiment of the present invention. FIG. 2 is a block diagram showing a schematic configuration of the electronic endoscope system 1. The electronic endoscope system 1 includes an electronic scope 100, a processor 200, and a monitor 300 (FIG. 2). The electronic scope 100 and the monitor 300 are each connected to the processor 200.

プロセッサ200は、体内を照明するための照明光を電子スコープ100に供給する光源装置と、電子スコープ100からの画像信号を処理してモニタ300に供給されるビデオ信号を生成する画像信号処理装置とを一体に備えた装置である。なお、光源装置と画像信号処理装置とを別体に構成してもよい。   The processor 200 supplies an illumination light for illuminating the inside of the body to the electronic scope 100, an image signal processing apparatus that processes an image signal from the electronic scope 100 and generates a video signal supplied to the monitor 300, and Is an apparatus that is integrally provided. The light source device and the image signal processing device may be configured separately.

図1に示されるように、プロセッサ200には、電子スコープ100と接続するためのコネクタ部20が設けられている。また、電子スコープ100の一端(基端)にはプロセッサ200のコネクタ部20と接続するためのコネクタ部10が設けられている。コネクタ部10とコネクタ部20が機械的に接続されることにより、電子スコープ100とプロセッサ200とが電気的にかつ光学的に接続される。   As shown in FIG. 1, the processor 200 is provided with a connector portion 20 for connecting to the electronic scope 100. A connector unit 10 for connecting to the connector unit 20 of the processor 200 is provided at one end (base end) of the electronic scope 100. By mechanically connecting the connector unit 10 and the connector unit 20, the electronic scope 100 and the processor 200 are electrically and optically connected.

電子スコープ100の他端(先端)には可撓性を有する挿入部11が設けられている。挿入部11の先端近傍には、挿入部11の基端に連結された手元操作部13からの遠隔操作に応じて屈曲する屈曲部14が設けられている。屈曲部14の屈曲機構は、一般的な内視鏡に組み込まれている周知の機構であり、手元操作部13に設けられた湾曲操作ノブの回転操作に連動した操作ワイヤの牽引によって屈曲部14を屈曲させるものである。屈曲部14の先端には、固体撮像素子108を備えた先端部12が連結している。湾曲操作ノブの回転操作による屈曲部14の屈曲動作に応じて先端部12の向きが変わることにより、電子スコープ100による撮影領域が移動する。   A flexible insertion section 11 is provided at the other end (tip) of the electronic scope 100. In the vicinity of the distal end of the insertion portion 11, a bending portion 14 is provided that bends in response to a remote operation from the hand operation portion 13 connected to the proximal end of the insertion portion 11. The bending mechanism of the bending portion 14 is a well-known mechanism incorporated in a general endoscope, and the bending portion 14 is pulled by pulling the operation wire in conjunction with the rotation operation of the bending operation knob provided in the hand operation portion 13. Is bent. A distal end portion 12 including a solid-state image sensor 108 is connected to the distal end of the bent portion 14. When the direction of the distal end portion 12 changes according to the bending operation of the bending portion 14 by the rotation operation of the bending operation knob, the imaging region by the electronic scope 100 moves.

図2に示されるように、電子スコープ100は、コネクタ部10から先端部12にかけての略全長に渡って配置されたLCB(Light Carrying Bundle)102を備えている。LCB102は、光ファイバ束であり、プロセッサ200から供給された照明光を電子スコープ100の先端部12まで導光する。   As shown in FIG. 2, the electronic scope 100 includes an LCB (Light Carrying Bundle) 102 disposed over a substantially entire length from the connector portion 10 to the distal end portion 12. The LCB 102 is an optical fiber bundle, and guides the illumination light supplied from the processor 200 to the distal end portion 12 of the electronic scope 100.

電子スコープ100の先端部12は、配光レンズ104、対物レンズ106、固体撮像素子108及びプリアンプ110を備えている。配光レンズ104は、LCB102の先端面と対向して配置され、LCB102の先端面から射出される照明光を発散させて、被写体を照明する。対物レンズ106は、被写体からの戻り光を集光して、固体撮像素子108の受光面上で光学像を結像させる。   The distal end portion 12 of the electronic scope 100 includes a light distribution lens 104, an objective lens 106, a solid-state imaging device 108, and a preamplifier 110. The light distribution lens 104 is disposed to face the front end surface of the LCB 102, and illuminates the subject by diverging illumination light emitted from the front end surface of the LCB 102. The objective lens 106 collects the return light from the subject and forms an optical image on the light receiving surface of the solid-state image sensor 108.

固体撮像素子108は、補色市松型画素配置を有するインターレース方式の単板式カラーCCD(Charge Coupled Device)イメージセンサである。固体撮像素子108は、受光面上の各画素で結像した光学像の光量に応じた電荷を発生して蓄積し、イエローYe、シアンCy、グリーンG、マゼンタMgの各色信号から構成されるアナログ撮像信号を出力する。なお、アナログ撮像信号は、いわゆるRAWデータ(RAW画像)を転送する信号であり、アナログ撮像信号の各画素は、イエローYe、シアンCy、グリーンG、マゼンタMgのうちのいずれか一色の色情報のみを有している。アナログ撮像信号はプリアンプ110によって増幅された後、コネクタ部10へ伝送される。   The solid-state image sensor 108 is an interlaced single-plate color CCD (Charge Coupled Device) image sensor having a complementary color checkered pixel arrangement. The solid-state image sensor 108 generates and accumulates electric charges according to the amount of light of the optical image formed on each pixel on the light receiving surface, and is an analog composed of color signals of yellow Ye, cyan Cy, green G, and magenta Mg. Output the imaging signal. The analog image pickup signal is a signal for transferring so-called RAW data (RAW image), and each pixel of the analog image pickup signal has only color information of any one of yellow Ye, cyan Cy, green G, and magenta Mg. have. The analog imaging signal is amplified by the preamplifier 110 and then transmitted to the connector unit 10.

なお、固体撮像素子108のカラー配列は、例えばベイヤ型であってもよい。また、固体撮像素子108は、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等の他方式のものに置き換えてもよい。   Note that the color array of the solid-state image sensor 108 may be, for example, a Bayer type. Further, the solid-state image sensor 108 may be replaced with another type such as a CMOS (Complementary Metal Oxide Semiconductor) image sensor.

コネクタ部10は、CCD信号処理部112及びメモリ114を備えている。CCD信号処理部112は、固体撮像素子108に駆動信号を供給し、固体撮像素子108から出力されたアナログ撮像信号をデジタル撮像信号に変換して、プロセッサ200に送信する。また、CCD信号処理部112は、メモリ114にアクセスして電子スコープ100の固有情報を読み出し、プロセッサ200に出力する。メモリ114に記録される電子スコープ100の固有情報には、例えば、固体撮像素子108の画素数や感度、動作可能なフレームレート、型番及び後述する補正値(補正角Δθ)等が含まれる。   The connector unit 10 includes a CCD signal processing unit 112 and a memory 114. The CCD signal processing unit 112 supplies a drive signal to the solid-state image sensor 108, converts an analog image signal output from the solid-state image sensor 108 into a digital image signal, and transmits the digital image signal to the processor 200. In addition, the CCD signal processing unit 112 accesses the memory 114 to read out the unique information of the electronic scope 100 and outputs it to the processor 200. The unique information of the electronic scope 100 recorded in the memory 114 includes, for example, the number of pixels and sensitivity of the solid-state image sensor 108, an operable frame rate, a model number, a correction value (correction angle Δθ) described later, and the like.

図2に示されるように、プロセッサ200は、システムコントローラ202、タイミングコントローラ204、信号処理部220、メモリ201及び操作パネル218を備えている。システムコントローラ202は、メモリ201に記憶された各種プログラムを読み出して実行することにより、電子内視鏡システム1全体の動作を制御する。また、システムコントローラ202は、操作パネル218に入力されるユーザ(術者又は補助者)による指示に応じて電子内視鏡システム1の各種設定を変更する。タイミングコントローラ204は、システムコントローラ202によるタイミング制御に従って、CCD信号処理部112及び信号処理部220にクロックパルスを供給する。信号処理部220は、電子スコープ100から供給される内視鏡画像の画像信号を処理して、モニタ300に供給されるビデオ信号を生成する。   As illustrated in FIG. 2, the processor 200 includes a system controller 202, a timing controller 204, a signal processing unit 220, a memory 201, and an operation panel 218. The system controller 202 controls the overall operation of the electronic endoscope system 1 by reading and executing various programs stored in the memory 201. Further, the system controller 202 changes various settings of the electronic endoscope system 1 in accordance with instructions from the user (surgeon or assistant) input to the operation panel 218. The timing controller 204 supplies clock pulses to the CCD signal processing unit 112 and the signal processing unit 220 according to the timing control by the system controller 202. The signal processing unit 220 processes the image signal of the endoscopic image supplied from the electronic scope 100 and generates a video signal supplied to the monitor 300.

プロセッサ200は、更に、ランプ電源イグナイタ206、ランプ208、集光レンズ210及び絞り212を備えている。ランプ208は、ランプ電源イグナイタ206から供給される電力によって駆動され、照明光を放射する。ランプ208には、キセノンランプ、ハロゲンランプ、メタルハライドランプ等の高輝度ランプが適している。また、ランプ208として、LED(Light Emitting Diode)ランプや狭帯域光源(帯域制限用フィルタ付き光源)を使用することもできる。ランプ208から放射された照明光は、集光レンズ210によって集光されつつ絞り212を通過して適正な光量に調整された後、LCB102の入射端に入射する。   The processor 200 further includes a lamp power igniter 206, a lamp 208, a condenser lens 210, and a diaphragm 212. The lamp 208 is driven by electric power supplied from the lamp power igniter 206, and emits illumination light. A high-intensity lamp such as a xenon lamp, a halogen lamp, or a metal halide lamp is suitable for the lamp 208. Further, as the lamp 208, an LED (Light Emitting Diode) lamp or a narrow band light source (light source with a band limiting filter) can be used. The illumination light radiated from the lamp 208 passes through the stop 212 while being condensed by the condenser lens 210 and is adjusted to an appropriate amount of light, and then enters the incident end of the LCB 102.

絞り212には、図示省略されたアームやギヤ等の伝達機構を介してモータ214が機械的に連結している。モータ214は例えばDCモータであり、ドライバ216のドライブ制御下で駆動する。絞り212は、モニタ300の表示画面に表示される映像を適正な明るさにするため、モータ214により動作され開度が変えられる。LCB102に供給される照明光の光量は、絞り212の開度に応じて制限される。適正とされる映像の明るさの基準は、術者による操作パネル218の輝度調節操作に応じて設定される。信号処理部220に設けられた周知の調光回路(不図示)が、輝度調節操作による設定に基づいてドライバ216を制御して、輝度調整を行う。   A motor 214 is mechanically connected to the diaphragm 212 via a transmission mechanism such as an arm or a gear (not shown). The motor 214 is a DC motor, for example, and is driven under the drive control of the driver 216. The aperture 212 is operated by the motor 214 to change the opening degree so that the image displayed on the display screen of the monitor 300 has an appropriate brightness. The amount of illumination light supplied to the LCB 102 is limited according to the opening of the diaphragm 212. The appropriate video brightness reference is set according to the brightness adjustment operation of the operation panel 218 by the operator. A known dimming circuit (not shown) provided in the signal processing unit 220 controls the driver 216 based on the setting by the luminance adjustment operation, and performs luminance adjustment.

操作パネル218の構成には種々の形態がある。操作パネル218の具体的構成としては、例えば、プロセッサ200のフロント面に実装された機能毎のハードウェアキーやタッチパネル式GUI(Graphical User Interface)、ハードウェアキーとGUIとの組合せ等が挙げられる。   There are various configurations for the operation panel 218. Specific configurations of the operation panel 218 include, for example, a hardware key for each function mounted on the front surface of the processor 200, a touch panel GUI (Graphical User Interface), a combination of a hardware key and a GUI, and the like.

システムコントローラ202は、電子スコープ100の固有情報に基づいて各種演算を行い、制御信号を生成する。システムコントローラ202は、生成された制御信号を用いて、プロセッサ200に接続中の電子スコープに適した処理がされるようにプロセッサ200内の各種回路の動作やタイミングを制御する。   The system controller 202 performs various calculations based on the unique information of the electronic scope 100 and generates a control signal. The system controller 202 uses the generated control signal to control the operation and timing of various circuits in the processor 200 so that processing suitable for the electronic scope connected to the processor 200 is performed.

CCD信号処理部112は、タイミングコントローラ204から供給されるクロックパルスに従って、プロセッサ200側で処理される映像のフレームレートに同期したタイミングで固体撮像素子108を駆動制御する。   The CCD signal processor 112 drives and controls the solid-state image sensor 108 at a timing synchronized with the frame rate of the video processed on the processor 200 side in accordance with the clock pulse supplied from the timing controller 204.

図3は、信号処理部220の詳細な構成を示すブロック図である。信号処理部220は、プリプロセス部222、ポストプロセス部224及び画像合成部226を備えている。プリプロセス部222は、電子スコープ100からのデジタル撮像信号(RAWデータ)を画像信号に変換すると共に、各種の色調整処理を行う。ポストプロセス部224は、プリプロセス部222から出力される画像信号に基づいて、各画素に対して、病変部などの異常部位である可能性(あるいは異常の程度)を示す指標を算出すると共に、画像信号に対して異常部位を強調する等の画像処理を行う。また、画像合成部226は、画像信号に基づいて描画される内視鏡画像と、各画素の指標を画像化した指標画像とを1画面に表示されるように画面合成処理を行う。   FIG. 3 is a block diagram illustrating a detailed configuration of the signal processing unit 220. The signal processing unit 220 includes a preprocessing unit 222, a post processing unit 224, and an image composition unit 226. The pre-processing unit 222 converts a digital image pickup signal (RAW data) from the electronic scope 100 into an image signal and performs various color adjustment processes. Based on the image signal output from the preprocessing unit 222, the post processing unit 224 calculates an index indicating the possibility of an abnormal site such as a lesion (or the degree of abnormality) for each pixel, Image processing such as emphasizing an abnormal part is performed on the image signal. In addition, the image composition unit 226 performs screen composition processing so that an endoscopic image drawn based on an image signal and an index image obtained by imaging an index of each pixel are displayed on one screen.

プリプロセス部222は、色補間部222a、マトリクス変換部222b、基本色補正部222c及び色空間変換部222d、並びに、本発明の実施形態に係る高度色補正部222eを備えている。   The preprocessing unit 222 includes a color interpolation unit 222a, a matrix conversion unit 222b, a basic color correction unit 222c, a color space conversion unit 222d, and an advanced color correction unit 222e according to the embodiment of the present invention.

色補間部222aは、電子スコープ100からのデジタル撮像信号(RAWデータ)に対して色補間処理を行い、色信号CyMgYeG及び輝度信号Yに変換する。具体的には、色補間部222aは、単一の色情報しか持たないデジタル撮像信号の各画素に対して、その周辺画素から色情報を補間して、色信号CyMgYeG及び輝度信号Yを生成する。   The color interpolation unit 222a performs color interpolation processing on the digital imaging signal (RAW data) from the electronic scope 100, and converts it into a color signal CyMgYeG and a luminance signal Y. Specifically, the color interpolation unit 222a generates color signal CyMgYeG and luminance signal Y by interpolating color information from surrounding pixels for each pixel of the digital imaging signal having only single color information. .

マトリクス変換部222bは、カラーマトリクスを用いて色信号CyMgYeGを原色信号RGBに変換する。   The matrix conversion unit 222b converts the color signal CyMgYeG into the primary color signal RGB using the color matrix.

基本色補正部222cは、原色信号RGBに対して、ホワイトバランス補正を行う。また、基本色補正部222cは、ホワイトバランス補正に加えて(又は、ホワイトバランス補正に替えて)、ガンマ補正等のトーンカーブによる色調整を行うこともできるようになっている。   The basic color correction unit 222c performs white balance correction on the primary color signal RGB. In addition to the white balance correction (or in place of the white balance correction), the basic color correction unit 222c can also perform color adjustment using a tone curve such as gamma correction.

色空間変換部222dは、基本色補正部222cから出力される補正後の原色信号RGBと色補間部222aから出力される輝度信号Yに基づいて、輝度信号Yと2つの色差信号Cb及びCrによって表現されるYCbCr色空間の画像信号YCbCr1を生成して出力する。   Based on the corrected primary color signal RGB output from the basic color correction unit 222c and the luminance signal Y output from the color interpolation unit 222a, the color space conversion unit 222d uses the luminance signal Y and the two color difference signals Cb and Cr. An image signal YCbCr1 in the YCbCr color space to be expressed is generated and output.

色空間変換部222dからの出力は2分岐され、一方は高度色補正部222eに、他方はポストプロセス部224に入力される。   The output from the color space conversion unit 222d is branched into two, one being input to the advanced color correction unit 222e and the other being input to the post-processing unit 224.

高度色補正部222eは、電子スコープ100のメモリ114が保持する補正値(補正角Δθ、補正係数α)を用いて、画像信号YCbCr1に対して後述する本発明の実施形態に係る高度色補正処理を行う。電子スコープ100のメモリ114には、工場出荷検査時やメンテナンス時に行われるキャリブレーション処理によって取得された高度色補正処理用の補正値が記録されている。高度色補正部222eから出力される高度色補正処理後の画像信号YCbCr2は、ポストプロセス部224に入力される。   The advanced color correction unit 222e uses the correction values (correction angle Δθ and correction coefficient α) held in the memory 114 of the electronic scope 100 to perform the advanced color correction processing according to the embodiment of the present invention to be described later on the image signal YCbCr1. I do. In the memory 114 of the electronic scope 100, correction values for advanced color correction processing acquired by calibration processing performed at the time of factory shipment inspection or maintenance are recorded. The image signal YCbCr2 after the advanced color correction process output from the advanced color correction unit 222e is input to the post-processing unit 224.

ポストプロセス部224は、セレクタ224a、画像処理部224b及び指標算出部224cを備えている。プリプロセス部222の色空間変換部222dから出力された画像信号YCbCr1及び高度色補正部222eから出力された画像信号YCbCr2は、それぞれセレクタ224aに入力される。セレクタ224aは、システムコントローラ202の制御により、高度色補正部222eからの高度色補正処理後の画像信号YCbCr2と、色空間変換部222dからの高度色補正処理前の画像信号YCbCr1の何れか一方を選択して、画像処理部224b及び指標算出部224cに供給する。   The post-processing unit 224 includes a selector 224a, an image processing unit 224b, and an index calculation unit 224c. The image signal YCbCr1 output from the color space conversion unit 222d of the preprocessing unit 222 and the image signal YCbCr2 output from the advanced color correction unit 222e are respectively input to the selector 224a. Under the control of the system controller 202, the selector 224a selects either the image signal YCbCr2 after the advanced color correction process from the advanced color correction unit 222e or the image signal YCbCr1 before the advanced color correction process from the color space conversion unit 222d. This is selected and supplied to the image processing unit 224b and the index calculation unit 224c.

高度色補正処理を施した画像信号YCbCr2は、後述する血液指標の精度向上には有利であるが、血液指標の算出に使用される特定の色相に対して補正が行われるため、モニタ300に表示される画像の色合いが不自然なものになる可能性がある。そのため、セレクタ224aを設けることにより、血液指標の分析を行わずに通常の内視鏡観察のみを行う場合には、色空間変換部222dからの高度色補正処理前の画像信号YCbCr1に切り替えられるようになっている。   The image signal YCbCr2 subjected to the advanced color correction processing is advantageous for improving the accuracy of the blood index, which will be described later, but is displayed on the monitor 300 because the specific hue used for calculating the blood index is corrected. There is a possibility that the color of the generated image will be unnatural. Therefore, by providing the selector 224a, when only normal endoscopic observation is performed without analyzing the blood index, the image signal YCbCr1 before the advanced color correction processing from the color space conversion unit 222d can be switched. It has become.

なお、セレクタ224aを設けずに、例えば色空間変換部222dからの高度色補正処理前の画像信号YCbCr1を画像処理部224bに入力し、高度色補正部222eからの高度色補正処理後の画像信号YCbCr2を指標算出部224cに入力する(すなわち、モニタ表示には常に高度色補正処理前の画像信号YCbCr1を使用する)構成としてもよい。また、色空間変換部222dからの出力を分岐せずに、高度色補正部222eからの高度色補正処理後の画像信号YCbCr2のみを画像処理部224b及び指標算出部224cに供給する構成としてもよい。   In addition, without providing the selector 224a, for example, the image signal YCbCr1 before the advanced color correction processing from the color space conversion unit 222d is input to the image processing unit 224b, and the image signal after the advanced color correction processing from the advanced color correction unit 222e. YCbCr2 may be input to the index calculation unit 224c (that is, the image signal YCbCr1 before the advanced color correction process is always used for monitor display). Further, the output from the color space conversion unit 222d may not be branched, and only the image signal YCbCr2 after the advanced color correction processing from the advanced color correction unit 222e may be supplied to the image processing unit 224b and the index calculation unit 224c. .

画像処理部224bは、例えば特開2013−005884号公報に記載されるトーン強調処理(TE処理)等の内視鏡観察に適した各種画像処理を行う。画像処理部224bによる各種画像処理の実行の要否は、ユーザが任意に設定することができる。   The image processing unit 224b performs various types of image processing suitable for endoscopic observation, such as tone enhancement processing (TE processing) described in JP2013-005884A, for example. The user can arbitrarily set whether or not to execute various image processing by the image processing unit 224b.

指標算出部224cは、画像信号YCbCr2の各画素値から、特定の病変との関連性を示す指標(病変指標)を算出する。例えば、炎症やがんの病変部は、血管新生のため、正常な部位と比べて血液量が多い。詳しくは、単位面積あたりの生体組織中に含まれるヘモグロビンの濃度が高くなっている。そのため、炎症部等の病変部の画像は、正常な部位の画像に比べて、血液(ヘモグロビン)に特有の赤味が強いものとなる。従って、内視鏡画像における血液特有の色味(色相)の強さ(彩度)が、炎症部等の病変部と正常な部位とを判別するための有効なパラメータとなる。指標算出部224cは、画像信号YCbCr2の各画素について、血液特有の色相θvesselとの色相差を計算し、この色相差に基づいて病変部である可能性を示す指標(血液指標)を算出する。色相差と指標との関係は、予め臨床統計学的に決定される。   The index calculation unit 224c calculates an index (lesion index) indicating a relationship with a specific lesion from each pixel value of the image signal YCbCr2. For example, inflamed or cancerous lesions have a greater blood volume than normal sites due to angiogenesis. Specifically, the concentration of hemoglobin contained in the living tissue per unit area is high. Therefore, an image of a lesioned part such as an inflamed part has a strong reddish color specific to blood (hemoglobin) compared to an image of a normal part. Therefore, the strength (saturation) of the color (hue) peculiar to blood in the endoscopic image is an effective parameter for discriminating between a lesioned part such as an inflamed part and a normal part. The index calculation unit 224c calculates a hue difference from the hue θvessel peculiar to blood for each pixel of the image signal YCbCr2, and calculates an index (blood index) indicating the possibility of being a lesion based on the hue difference. The relationship between the hue difference and the index is determined clinically in advance.

指標算出部224cは、各画素について指標を算出するため、指標を画素値とする指標画像(グレースケール画像)が得られる。   Since the index calculation unit 224c calculates an index for each pixel, an index image (grayscale image) having the index as a pixel value is obtained.

画像合成部226は、画像処理部224bから出力される内視鏡画像と、指標算出部224cから出力される指標画像とを画像合成してモニタ表示画面を生成する。画像合成部226は、内視鏡画像に指標画像を重畳したオーバーレイ表示画像を生成するオーバーレイ表示画像合成部226aと、内視鏡画像と指標画像とを並べた2画面表示画像を生成する2画面表示画像合成部226bと、セレクタ226cとを備えている。ポストプロセス部224の画像処理部224bと指標算出部224cの出力は、オーバーレイ表示画像合成部226aと2画面表示画像合成部226bにそれぞれ入力される。オーバーレイ表示画像合成部226aと2画面表示画像合成部226bの出力は、それぞれセレクタ226cに入力される。セレクタ226cは、システムコントローラ202の制御により、オーバーレイ表示画像合成部226aの出力と2画面表示画像合成部226bの出力の何れか一方を選択して、モニタ300に供給する。これにより、オーバーレイ表示画像と2画面表示画像とを切り替えてモニタ300に表示させることができる。   The image synthesizing unit 226 generates a monitor display screen by synthesizing the endoscopic image output from the image processing unit 224b and the index image output from the index calculating unit 224c. The image composition unit 226 generates an overlay display image composition unit 226a that generates an overlay display image in which an index image is superimposed on an endoscope image, and two screens that generate a two-screen display image in which the endoscope image and the index image are arranged. A display image composition unit 226b and a selector 226c are provided. Outputs from the image processing unit 224b and the index calculation unit 224c of the post-processing unit 224 are input to the overlay display image synthesis unit 226a and the two-screen display image synthesis unit 226b, respectively. The outputs of the overlay display image composition unit 226a and the two-screen display image composition unit 226b are input to the selector 226c, respectively. The selector 226 c selects either the output of the overlay display image composition unit 226 a or the output of the two-screen display image composition unit 226 b under the control of the system controller 202, and supplies it to the monitor 300. Thereby, the overlay display image and the two-screen display image can be switched and displayed on the monitor 300.

なお、オーバーレイ表示画像合成部226aは、オーバーレイ表示画像を生成せずに、画像処理部224bからの画像信号(通常の内視鏡画像)や指標算出部224cからの画像信号(指標画像)をそのまま出力することもできるように構成されている。そのため、通常の内視鏡画像や指標画像のみをモニタ300に表示させることもできる。   Note that the overlay display image composition unit 226a does not generate an overlay display image, and directly uses the image signal (normal endoscope image) from the image processing unit 224b and the image signal (index image) from the index calculation unit 224c. It is also configured to be able to output. Therefore, only a normal endoscopic image or index image can be displayed on the monitor 300.

次に、高度色補正部222eにおいて行われる本発明の実施形態に係るキャリブレーション処理及び高度色補正処理について説明する。本実施形態の高度色補正処理は、ホワイトバランス補正処理では補正することのできない内視鏡画像の色相(特に固体撮像素子108の特性の個体差による色相のずれ)を補正する処理である。高度色補正処理は、電子スコープ100のメモリ114に記憶された補正値(補正角Δθ、補正係数α)を用いて行われる。   Next, calibration processing and advanced color correction processing according to the embodiment of the present invention performed in the advanced color correction unit 222e will be described. The advanced color correction process according to the present embodiment is a process for correcting a hue of an endoscopic image that cannot be corrected by a white balance correction process (particularly, a hue shift due to individual differences in characteristics of the solid-state image sensor 108). The advanced color correction process is performed using correction values (correction angle Δθ, correction coefficient α) stored in the memory 114 of the electronic scope 100.

まず、補正値(補正角Δθ、補正係数α)を取得する方法について説明する。補正値の取得は、電子内視鏡システム1の工場出荷検査時やメンテナンス時に行われるキャリブレーション処理によって取得される。キャリブレーション処理は、電子内視鏡システム1によって所定の基準色(有彩色)のカラーチャートを撮像することで行われる。本実施形態では、指標算出部224cによる血液指標の算出に使用される血液特有の色相θvesselのカラーチャートを用いてキャリブレーション処理が行われる。色相θvesselにおいてキャリブレーション処理を行うことにより、補正後の画像信号YCbCr2の色情報の精度をθvessel及びその近傍の色相において特に高くすることができ、その結果、指標算出部224cによる血液指標の算出を高い精度で行うことが可能になる。   First, a method for obtaining a correction value (correction angle Δθ, correction coefficient α) will be described. The correction value is acquired by a calibration process performed at the time of factory shipment inspection or maintenance of the electronic endoscope system 1. The calibration process is performed by imaging a color chart of a predetermined reference color (chromatic color) by the electronic endoscope system 1. In the present embodiment, calibration processing is performed using a color chart of a hue θvessel peculiar to blood used for calculation of a blood index by the index calculation unit 224c. By performing the calibration process in the hue θvessel, the accuracy of the color information of the corrected image signal YCbCr2 can be made particularly high in θvessel and the hue in the vicinity thereof, and as a result, the blood index is calculated by the index calculation unit 224c. It becomes possible to carry out with high accuracy.

図4は、本実施形態の高度色補正処理及びキャリブレーション処理を説明するCb−Cr色平面図である。図中に白丸で示された基準値は、Cb−Cr色空間におけるカラーチャートの色情報(彩度rvessel,色相θvessel)である。また、図中に黒丸で示された実測値は、電子内視鏡システム1によってカラーチャートを撮像して得た画像信号YCbCr1の色情報(彩度rmeas,色相θmeas)である。なお、色相θ及び彩度rは、色差Cb及びCrから、それぞれ以下の数式(1)及び数式(2)により計算される。   FIG. 4 is a Cb—Cr color plan view for explaining the advanced color correction processing and calibration processing of the present embodiment. The reference values indicated by white circles in the figure are color information (saturation rvessel, hue θvessel) of the color chart in the Cb-Cr color space. The actual measurement values indicated by black circles in the figure are color information (saturation rmeas, hue θmeas) of the image signal YCbCr1 obtained by imaging the color chart by the electronic endoscope system 1. The hue θ and the saturation r are calculated from the color differences Cb and Cr by the following formulas (1) and (2), respectively.

Figure 2016015995
Figure 2016015995
Figure 2016015995
Figure 2016015995

補正角Δθ及び補正係数αは、それぞれ以下の数式(3)及び数式(4)により計算されて、電子スコープ100のメモリ114に記憶される。   The correction angle Δθ and the correction coefficient α are calculated by the following formulas (3) and (4), respectively, and stored in the memory 114 of the electronic scope 100.

Figure 2016015995
Figure 2016015995
Figure 2016015995
Figure 2016015995

次に、高度色補正処理の方法を説明する。高度色補正処理においては、先ず、色空間変換部222dからの画像信号YCbCr1の各画素について、上記の数式(1)及び数式(2)により、それぞれ色相θ及び彩度rを計算する。   Next, a method of advanced color correction processing will be described. In the advanced color correction process, first, for each pixel of the image signal YCbCr1 from the color space conversion unit 222d, the hue θ and the saturation r are calculated by the above formulas (1) and (2), respectively.

次に、数式(1)により算出された色相θに、電子スコープ100のメモリ114に記憶された補正角Δθを加えて補正後の色相θ’とする。また、数式(2)により算出された彩度rに、メモリ114に記憶された補正係数αを乗じて補正後の彩度r’とする。高度色補正処理後の色相θ’及び彩度r’は、それぞれ以下の数式(5)及び(6)によって記述される。   Next, the correction angle Δθ stored in the memory 114 of the electronic scope 100 is added to the hue θ calculated by Equation (1) to obtain a corrected hue θ ′. Further, the saturation r calculated by Equation (2) is multiplied by the correction coefficient α stored in the memory 114 to obtain a corrected saturation r ′. The hue θ ′ and saturation r ′ after the advanced color correction process are described by the following equations (5) and (6), respectively.

Figure 2016015995
Figure 2016015995
Figure 2016015995
Figure 2016015995

このような高度色補正処理を行うことにより、画像信号の色情報の精度が向上するため、その結果として、画像信号の色情報を使用する指標算出処理等の各種処理の精度を向上させることができる。   By performing such advanced color correction processing, the accuracy of the color information of the image signal is improved. As a result, the accuracy of various processing such as index calculation processing using the color information of the image signal can be improved. it can.

なお、本実施形態では高度色補正処理がYCbCr色空間において行われるが、本発明はこの構成に限定されず、高度色補正処理は、例えば、CIE 1976 L*a*b*色空間、CIE LCh色空間、CIE 1976 L*u*v*色空間、HSV(hue, saturation, value)色空間、sRGB色空間等の様々な色空間で行うことができる。   In this embodiment, the advanced color correction process is performed in the YCbCr color space. However, the present invention is not limited to this configuration, and the advanced color correction process can be performed using, for example, the CIE 1976 L * a * b * color space, CIE LCh. The color space, CIE 1976 L * u * v * color space, HSV (hue, saturation, value) color space, and sRGB color space can be used.

また、本実施形態では、ユーザの設定に応じて、色の変化を伴う画像処理(例えばTE処理)が画像処理部224bによって行われる。色の変化を伴う画像処理を行う場合と、行わない場合とでは、高度色補正処理の適正な補正値は異なった値となる。本実施形態では、TE処理を行わない場合に適した補正値(Δθ、α)と、TE処理を行う場合に適した補正値(Δθ、α)の両方が電子スコープ100のメモリ114に記憶されている。TE処理が行われない場合には、メモリ114から補正値(Δθ、α)が読み出されて使用され、TE処理が行われる場合には、補正値(Δθ、α)が読み出されて使用される。補正値(Δθ、α)は、TE処理を行わない条件下で実行されるキャリブレーション処理によって取得され、補正値(Δθ、α)は、TE処理を行う条件下で実行されるキャリブレーション処理によって取得される。 In the present embodiment, image processing (for example, TE processing) accompanied by a color change is performed by the image processing unit 224b in accordance with a user setting. The appropriate correction value for the advanced color correction process is different depending on whether or not image processing involving color change is performed. In the present embodiment, both the correction value (Δθ 0 , α 0 ) suitable for the case where the TE process is not performed and the correction value (Δθ 1 , α 1 ) suitable for the case where the TE process is performed are stored in the memory of the electronic scope 100. 114. When the TE process is not performed, the correction values (Δθ 0 , α 0 ) are read from the memory 114 and used. When the TE process is performed, the correction values (Δθ 1 , α 1 ) are read. It is issued and used. The correction values (Δθ 0 , α 0 ) are acquired by a calibration process that is executed under conditions where TE processing is not performed, and the correction values (Δθ 1 , α 1 ) are executed under conditions where TE processing is performed. Obtained by calibration processing.

また、使用する光源の種類によっても、高度色補正処理に適した補正値は異なった値となる。プロセッサ200が複数種類の光源を備える場合(あるいは、複数種類の外部光源を切り替えて使用する場合)には、光源の種類ごとに補正値をメモリ114に保持させ、使用する光源の種類に応じて使用する補正値を選択する構成が採用される。   Also, the correction value suitable for the advanced color correction process varies depending on the type of light source used. When the processor 200 includes a plurality of types of light sources (or when a plurality of types of external light sources are switched and used), a correction value is stored in the memory 114 for each type of light source, and the correction value is determined according to the type of light source used A configuration for selecting a correction value to be used is adopted.

上述した本実施形態では、色空間上の一つの基準点との色相差により指標が算出されるため、高度色補正処理もこの一つの基準点のみで行われる。しかし、例えば、指標算出処理等を色空間上の一定の広がりをもつ領域を基準に行う場合には、基準となる色空間上の領域全体にわたって色情報の誤差を小さくすることが望まれる。そのような場合には、使用する色空間上の領域内の1点だけでなく、当該領域内の複数の点(例えば、使用する色相領域の中心と両端の3点)について誤差が所定値以下となるようなキャリブレーションを行うことが望ましい。   In the above-described embodiment, since the index is calculated based on the hue difference from one reference point on the color space, the advanced color correction process is performed only on this one reference point. However, for example, when the index calculation process or the like is performed on the basis of a region having a certain spread in the color space, it is desired to reduce the error of the color information over the entire region on the reference color space. In such a case, the error is not more than a predetermined value not only for one point in the area on the color space to be used but also for a plurality of points in the area (for example, three points at the center and both ends of the hue area to be used). It is desirable to perform calibration such that

図5は、このように複数点で行うキャリブレーション処理の変形例を説明するa*b*色平面図である。図5の変形例では、CIE 1976 L*a*b*色空間においてキャリブレーション処理及び高度色補正処理が行われる。   FIG. 5 is an a * b * color plan view for explaining a modification of the calibration process performed at a plurality of points in this way. In the modification of FIG. 5, calibration processing and advanced color correction processing are performed in the CIE 1976 L * a * b * color space.

この変形例では、指標算出部224cによる指標算出処理において、画像信号YCbCr2の各画素について、画素値が図5に示される基準領域Rの内部にプロットされる場合に、「異常部位の疑いあり」を意味する「1」が付与され、基準領域Rの外部にプロットされる場合に、「正常部位」を意味する「0」が付与される。そのため、基準領域Rの色相の中央値θc、上限値θc+40°、下限値θc−40°の3色のカラーチャートを使用してキャリブレーション処理を行う。具体的には、高度色補正処理後の色相の誤差が、上記3色とも±10°以内となるように補正角Δθを決定する。この構成によれば、基準領域Rから大きく外れた異常部位である可能性が殆ど無い点が「異常部位の疑いあり」と判定されることがなくなる。   In this modified example, in the index calculation processing by the index calculation unit 224c, when the pixel value is plotted inside the reference region R shown in FIG. 5 for each pixel of the image signal YCbCr2, “suspected abnormal part” When “1” meaning “I” is given and plotted outside the reference region R, “0” meaning “normal part” is given. Therefore, the calibration process is performed using a color chart of three colors of the median value θc, the upper limit value θc + 40 °, and the lower limit value θc−40 ° of the hue of the reference region R. Specifically, the correction angle Δθ is determined so that the hue error after the advanced color correction process is within ± 10 ° for all three colors. According to this configuration, a point that has almost no possibility of being an abnormal part greatly deviating from the reference region R is not determined as “suspected abnormal part”.

以上が本発明の実施形態の説明である。本発明の実施形態は、上記に説明したものに限定されず、本発明の技術的思想の範囲において様々な変形が可能である。例えば明細書中に例示的に明示される実施形態等又は自明な実施形態等を適宜組み合わせた内容も本願の実施形態に含まれる。   The above is the description of the embodiment of the present invention. Embodiments of the present invention are not limited to those described above, and various modifications are possible within the scope of the technical idea of the present invention. For example, the embodiment of the present application also includes an embodiment that is exemplarily specified in the specification or a combination of obvious embodiments and the like as appropriate.

上記の実施形態では、補正値が電子スコープ100のメモリ114に記憶されるが、プロセッサ200が備える記憶装置(例えばメモリ201)に補正値を記憶させる構成としてもよい。   In the above embodiment, the correction value is stored in the memory 114 of the electronic scope 100. However, the correction value may be stored in a storage device (for example, the memory 201) included in the processor 200.

また、上記の実施形態におけるCCD信号処理部112をプリプロセス部222に一体に組み込んだ構成としてもよい。また、CCD信号処理部112及びプリプロセス部222は、共に電子スコープ100内に設けてもよいし、共にプロセッサ200の信号処理部220内に設けてもよい。   In addition, the CCD signal processing unit 112 in the above embodiment may be integrated into the preprocessing unit 222. Further, both the CCD signal processing unit 112 and the preprocessing unit 222 may be provided in the electronic scope 100, or both may be provided in the signal processing unit 220 of the processor 200.

また、上記の実施形態は、血管新生によって増大するヘモグロビンに特有な赤色の色相に基づいて病変部等を特定するものであるが、別の色相(例えば、病変部と結合する蛍光剤に特有な色相)に基づいて病変部等を特定する構成としてもよい。   In the above-described embodiment, a lesioned part or the like is specified based on a red hue specific to hemoglobin that increases due to angiogenesis, but another hue (for example, a fluorescent agent that binds to a lesioned part is specific to the fluorescent agent. A configuration may be used in which a lesion or the like is specified based on (hue).

また、上記の実施形態では、色相θの補正は補正値Δθを加算することにより、また、彩度rの補正は補正係数αを乗ずることによって行われるが、本発明はこの構成に限定されるものではなく、色相θの補正を例えば補正係数β(β=θvessel/θmeas)を乗ずることによって行う構成としてもよいし、彩度rの補正を例えば補正値Δr(Δr=rvessel−rmeas)を加算することによって行う構成としてもよい。 In the above embodiment, the correction of the hue θ is performed by adding the correction value Δθ, and the correction of the saturation r is performed by multiplying by the correction coefficient α, but the present invention is limited to this configuration. Instead, the hue θ may be corrected by, for example, multiplying by a correction coefficient β (β = θ vessel / θ meas ), and the saturation r may be corrected by, for example, a correction value Δr (Δr = r vessel −r A configuration may be made by adding meas ).

また、上記の実施形態では、高度色補正処理において、色相θ及び彩度rの両方が補正されるが、色相θのみを補正する構成としてもよい。   In the above-described embodiment, both the hue θ and the saturation r are corrected in the advanced color correction process. However, only the hue θ may be corrected.

また、上記の変形例では、キャリブレーションを行う色空間上の複数点における補正後の色相の誤差が所定値以下となるように補正角Δθを決定する構成が採用されているが、本発明はこの構成に限定されない。例えば、キャリブレーションを行う色空間上の複数点における補正後の色相の誤差の最大値を最小化するように補正角Δθを決定する構成や、補正後の色相の誤差の和を最小化するように補正角Δθを決定する構成を採用してもよい。   In the above modification, a configuration is adopted in which the correction angle Δθ is determined so that the corrected hue error at a plurality of points on the color space to be calibrated is equal to or less than a predetermined value. It is not limited to this configuration. For example, a configuration in which the correction angle Δθ is determined so as to minimize the maximum value of the corrected hue error at a plurality of points on the color space to be calibrated, or the sum of corrected hue errors is minimized. Alternatively, a configuration for determining the correction angle Δθ may be employed.

1 電子内視鏡システム
100 電子スコープ
200 プロセッサ
1 Electronic Endoscope System 100 Electronic Scope 200 Processor

Claims (12)

内視鏡画像の画像信号の色相を補正するための補正値が記憶される記憶部と、
前記記憶部に記憶された補正値に基づいて画像信号の色相を補正する補正部と、
を備えた電子内視鏡システム。
A storage unit that stores a correction value for correcting the hue of the image signal of the endoscopic image;
A correction unit that corrects the hue of the image signal based on the correction value stored in the storage unit;
Electronic endoscope system equipped with.
前記補正値が、前記電子内視鏡システムに個別に設定された、画像信号の色相の個体差を補正するものである、
ことを特徴とする請求項1に記載の電子内視鏡システム。
The correction value is set individually for the electronic endoscope system, and corrects individual differences in hues of image signals.
The electronic endoscope system according to claim 1.
所定色のカラーチャートを撮像してキャリブレーション用画像信号を取得し、前記キャリブレーション用画像信号に基づいて前記補正値を算出するキャリブレーション部を更に備えた請求項1又は請求項2に記載の電子内視鏡システム。   The calibration unit according to claim 1, further comprising: a calibration unit that captures a color chart of a predetermined color to acquire a calibration image signal, and calculates the correction value based on the calibration image signal. Electronic endoscope system. 前記所定色が血液に特有の赤色である、
ことを特徴とする請求項3に記載の電子内視鏡システム。
The predetermined color is blood-specific red,
The electronic endoscope system according to claim 3.
前記キャリブレーション部が、色相の異なる複数の前記所定色についてキャリブレーション用画像信号を取得し、前記複数の所定色における補正後の誤差が所定値以下となるように前記補正値を算出する、
ことを特徴とする請求項3又は請求項4に記載の電子内視鏡システム。
The calibration unit acquires calibration image signals for a plurality of the predetermined colors having different hues, and calculates the correction value so that an error after correction in the plurality of predetermined colors is equal to or less than a predetermined value;
The electronic endoscope system according to claim 3 or 4, characterized by the above.
前記補正値が、色相を補正するための補正角と彩度を補正するための補正係数を含み、
前記補正部が、前記補正係数に基づいて画像信号の彩度を補正する、
ことを特徴とする請求項1から請求項5のいずれか一項に記載の電子内視鏡システム。
The correction value includes a correction angle for correcting the hue and a correction coefficient for correcting the saturation,
The correction unit corrects the saturation of the image signal based on the correction coefficient;
The electronic endoscope system according to any one of claims 1 to 5, wherein the electronic endoscope system is configured as described above.
画像信号に対して色の変化を伴う画像処理を行う画像処理部を備え、
前記記憶部は、前記画像処理が行われる場合に適した前記補正値である第1補正値と、前記画像処理が行われない場合に適した前記補正値である第2補正値とを記憶し、
前記補正部は、前記画像処理が行われる場合には、前記第1補正値に基づいて補正をし、前記画像処理が行われない場合には、前記第2補正値に基づいて補正をする、
ことを特徴とする請求項1から請求項6のいずれか一項に記載の電子内視鏡システム。
An image processing unit that performs image processing with color change on the image signal,
The storage unit stores a first correction value that is the correction value suitable when the image processing is performed and a second correction value that is the correction value suitable when the image processing is not performed. ,
The correction unit corrects based on the first correction value when the image processing is performed, and corrects based on the second correction value when the image processing is not performed.
The electronic endoscope system according to any one of claims 1 to 6, wherein the electronic endoscope system is configured as described above.
前記記憶部には被写体の照明に使用する光源の種類に応じた複数の補正値が記憶され、
前記補正部は、前記複数の補正値から使用する光源の種類に対応した一つを選択して、該選択した補正値に基づいて画像信号の色相を補正する、
ことを特徴とする請求項1から請求項7のいずれか一項に記載の電子内視鏡システム。
The storage unit stores a plurality of correction values according to the type of light source used to illuminate the subject,
The correction unit selects one corresponding to the type of light source to be used from the plurality of correction values, and corrects the hue of the image signal based on the selected correction value.
The electronic endoscope system according to any one of claims 1 to 7, wherein the electronic endoscope system is characterized in that:
前記補正後の画像信号に基づいて各画素について指標を算出する指標算出部を備えた、
ことを特徴とする請求項1から請求項8のいずれか一項に記載の電子内視鏡システム。
An index calculation unit that calculates an index for each pixel based on the corrected image signal;
The electronic endoscope system according to any one of claims 1 to 8, wherein the electronic endoscope system is configured as described above.
前記指標は、前記内視鏡画像に写された生体組織中のヘモグロビン濃度と相関する指標である、
ことを特徴とする請求項9に記載の電子内視鏡システム。
The index is an index that correlates with the hemoglobin concentration in the living tissue imaged in the endoscopic image.
The electronic endoscope system according to claim 9.
前記画像信号を生成する電子スコープと、
前記画像信号を処理してビデオ信号を生成するプロセッサと、
を備え、
前記記憶部が前記電子スコープに設けられ、
前記補正部が前記プロセッサに設けられた、
ことを特徴とする請求項1から請求項10のいずれか一項に記載の電子内視鏡システム。
An electronic scope for generating the image signal;
A processor that processes the image signal to generate a video signal;
With
The storage unit is provided in the electronic scope,
The correction unit is provided in the processor;
The electronic endoscope system according to any one of claims 1 to 10, wherein the electronic endoscope system is characterized in that
内視鏡画像の画像信号の色相を補正するための補正値を取得する補正値取得部と、
前記補正値取得部が取得した補正値に基づいて画像信号の色相を補正する補正部と、
を備えた電子内視鏡用プロセッサ。
A correction value acquisition unit that acquires a correction value for correcting the hue of the image signal of the endoscopic image;
A correction unit that corrects the hue of the image signal based on the correction value acquired by the correction value acquisition unit;
An electronic endoscope processor.
JP2014138630A 2014-07-04 2014-07-04 Electronic endoscope system, and processor for electronic endoscope Pending JP2016015995A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014138630A JP2016015995A (en) 2014-07-04 2014-07-04 Electronic endoscope system, and processor for electronic endoscope

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014138630A JP2016015995A (en) 2014-07-04 2014-07-04 Electronic endoscope system, and processor for electronic endoscope

Publications (1)

Publication Number Publication Date
JP2016015995A true JP2016015995A (en) 2016-02-01

Family

ID=55231754

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014138630A Pending JP2016015995A (en) 2014-07-04 2014-07-04 Electronic endoscope system, and processor for electronic endoscope

Country Status (1)

Country Link
JP (1) JP2016015995A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017158840A (en) * 2016-03-10 2017-09-14 富士フイルム株式会社 Endoscopic image signal processing apparatus and method, and program
JP2017225648A (en) * 2016-06-23 2017-12-28 Hoya株式会社 Electronic endoscope system
CN107529957A (en) * 2016-03-03 2018-01-02 Hoya株式会社 Correction data generating method and amendment data generating device
WO2018079205A1 (en) * 2016-10-27 2018-05-03 富士フイルム株式会社 Processor device and endoscopic system
WO2018123874A1 (en) * 2016-12-28 2018-07-05 オリンパス株式会社 Endoscope apparatus, endoscope system, correction information generator, server, and correction method for endoscope apparatus
WO2018142658A1 (en) * 2017-02-01 2018-08-09 オリンパス株式会社 Image processing device, operating method for image processing device, and operating program for image processing device
JPWO2019175991A1 (en) * 2018-03-13 2021-02-25 オリンパス株式会社 Image processing equipment, endoscopic systems, image processing methods and programs
US11058290B2 (en) 2016-04-04 2021-07-13 Olympus Corporation Endoscope apparatus having a plurality of heat generators and corresponding air flow paths

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019063537A (en) * 2016-03-03 2019-04-25 Hoya株式会社 Correction data generation method and correction data generation apparatus
CN107529957A (en) * 2016-03-03 2018-01-02 Hoya株式会社 Correction data generating method and amendment data generating device
JPWO2017150071A1 (en) * 2016-03-03 2018-03-15 Hoya株式会社 Correction data generation method and correction data generation apparatus
US10512433B2 (en) 2016-03-03 2019-12-24 Hoya Corporation Correction data generation method and correction data generation apparatus
JP2017158840A (en) * 2016-03-10 2017-09-14 富士フイルム株式会社 Endoscopic image signal processing apparatus and method, and program
US11058290B2 (en) 2016-04-04 2021-07-13 Olympus Corporation Endoscope apparatus having a plurality of heat generators and corresponding air flow paths
JP2017225648A (en) * 2016-06-23 2017-12-28 Hoya株式会社 Electronic endoscope system
JPWO2018079205A1 (en) * 2016-10-27 2019-07-18 富士フイルム株式会社 Processor device and endoscope system
US10986987B2 (en) 2016-10-27 2021-04-27 Fujifilm Corporation Processor device and endoscope system
WO2018079205A1 (en) * 2016-10-27 2018-05-03 富士フイルム株式会社 Processor device and endoscopic system
WO2018123874A1 (en) * 2016-12-28 2018-07-05 オリンパス株式会社 Endoscope apparatus, endoscope system, correction information generator, server, and correction method for endoscope apparatus
JP6392486B1 (en) * 2017-02-01 2018-09-19 オリンパス株式会社 Endoscope system
WO2018142658A1 (en) * 2017-02-01 2018-08-09 オリンパス株式会社 Image processing device, operating method for image processing device, and operating program for image processing device
US11882995B2 (en) 2017-02-01 2024-01-30 Olympus Corporation Endoscope system
JPWO2019175991A1 (en) * 2018-03-13 2021-02-25 オリンパス株式会社 Image processing equipment, endoscopic systems, image processing methods and programs

Similar Documents

Publication Publication Date Title
US11701032B2 (en) Electronic endoscope processor and electronic endoscopic system
US9675238B2 (en) Endoscopic device
JP2016015995A (en) Electronic endoscope system, and processor for electronic endoscope
US10918270B2 (en) Endoscope system and evaluation value calculation device
JP5968944B2 (en) Endoscope system, processor device, light source device, operation method of endoscope system, operation method of processor device, operation method of light source device
EP3085301A1 (en) Endoscopic device
JP4394356B2 (en) Electronic endoscope device
US10194849B2 (en) Endoscope system and method for operating the same
CN107113405B (en) Image processing apparatus, the working method of image processing apparatus, recording medium and endoscope apparatus
JP6427280B2 (en) Correction data generation method and correction data generation apparatus
US20170251915A1 (en) Endoscope apparatus
US20190082936A1 (en) Image processing apparatus
JP6392486B1 (en) Endoscope system
JP6743167B2 (en) Endoscope, Endoscope Processor and Endoscope Adapter
US20170231469A1 (en) Processor device for endoscope,operation method thereof, and non-transitory computer readable medium
US10659658B2 (en) Processor for electronic endoscope, and electronic endoscope system
US10646102B2 (en) Processor for electronic endoscope, and electronic endoscope system
JP2017158840A (en) Endoscopic image signal processing apparatus and method, and program
US10702127B2 (en) Endoscope system and evaluation value calculation device
JP6535435B2 (en) Processor and endoscope system
JP6681971B2 (en) Processor and endoscope system
WO2020026323A1 (en) Endoscope device, and endoscope device operating method and program

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170717