JP5094066B2 - Method and apparatus for operating image processing apparatus, and electronic endoscope system - Google Patents

Method and apparatus for operating image processing apparatus, and electronic endoscope system Download PDF

Info

Publication number
JP5094066B2
JP5094066B2 JP2006198363A JP2006198363A JP5094066B2 JP 5094066 B2 JP5094066 B2 JP 5094066B2 JP 2006198363 A JP2006198363 A JP 2006198363A JP 2006198363 A JP2006198363 A JP 2006198363A JP 5094066 B2 JP5094066 B2 JP 5094066B2
Authority
JP
Japan
Prior art keywords
image
spectral
spectral estimation
enhancement
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006198363A
Other languages
Japanese (ja)
Other versions
JP2008023041A (en
Inventor
一英 長谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2006198363A priority Critical patent/JP5094066B2/en
Publication of JP2008023041A publication Critical patent/JP2008023041A/en
Application granted granted Critical
Publication of JP5094066B2 publication Critical patent/JP5094066B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Endoscopes (AREA)

Description

本発明は、電子内視鏡で取得した画像から任意の波長帯域を有する分光画像を生成する画像処理装置の作動方法、および装置、並びに電子内視鏡システムに関する。 The present invention relates to an operation method of an image processing apparatus that generates a spectral image having an arbitrary wavelength band from an image acquired by an electronic endoscope, an apparatus, and an electronic endoscope system.

従来から、医療分野において、電子内視鏡を利用した医療診断が盛んに行われている。電子内視鏡の被検体内に挿入される挿入部先端には、CCDなどの固体撮像素子が内蔵されている。固体撮像素子により取得した撮像信号に対して、プロセッサ装置で信号処理を施すことで、モニタで被検体内の被観察部位の画像を観察することができる。   Conventionally, medical diagnosis using an electronic endoscope has been actively performed in the medical field. A solid-state imaging device such as a CCD is built in the distal end of the insertion portion that is inserted into the subject of the electronic endoscope. By performing signal processing on the imaging signal acquired by the solid-state imaging device by the processor device, it is possible to observe the image of the observation site in the subject on the monitor.

電子内視鏡を用いた医療診断の分野では、病変の発見を容易にするために、狭い波長帯域の光を被観察部位に照射し、これによる反射光を画像化(以下、このようにして得られた画像を、通常の画像と区別して分光画像と呼ぶ。)して観察するNarrow Band Imaging(以下、NBIと略す。)と呼ばれる手法が脚光を浴びている。NBIによれば、被観察部位に色素を散布したり、インドシアニングリーン(ICG;Indocyanine green)などの造影剤を注入したりすることなく、粘膜下層部の血管を強調した画像や、胃壁、腸の表層組織などの臓器の構造物を強調した画像を容易に得ることができる。   In the field of medical diagnosis using an electronic endoscope, in order to facilitate the discovery of lesions, light of a narrow wavelength band is irradiated to the site to be observed, and the reflected light is imaged (hereinafter referred to as this). A technique called Narrow Band Imaging (hereinafter abbreviated as NBI) that observes the obtained image by distinguishing it from a normal image and calling it a spectral image has attracted attention. According to NBI, an image in which blood vessels in the submucosa are emphasized, a stomach wall, an intestine without spraying a pigment on an observation site or injecting a contrast agent such as indocyanine green (ICG). It is possible to easily obtain an image in which an organ structure such as a surface layer tissue is emphasized.

分光画像を用いた医療診断の例としては、病変の分光データのデータベースを有し、眼底の分光画像内で病変の分光データと類似した部分を特定する分光画像解析方法が提案されている(特許文献1参照)。   As an example of medical diagnosis using spectral images, a spectral image analysis method has been proposed that has a database of spectral data of lesions and identifies portions similar to the spectral data of lesions in spectral images of the fundus (patent) Reference 1).

また、最近、狭い波長帯域の光ではなく、通常の白色光を被観察部位に照射して得られた通常の画像に対して、主成分分析を用いた次元圧縮による線形近似や、ウィナー推定などに代表される分光推定処理を施すことで、分光画像を得る技術が実用化されている。この技術では、分光推定処理の結果得られた画像に対して、一定の強調量で強調処理を施している。
特開2005−296434号公報
Recently, linear approximation by dimensional compression using principal component analysis, Wiener estimation, etc. for normal images obtained by irradiating the observation site with normal white light instead of light in a narrow wavelength band A technique for obtaining a spectral image by performing spectral estimation processing represented by the above has been put into practical use. In this technique, enhancement processing is performed with a certain amount of enhancement on an image obtained as a result of spectral estimation processing.
JP 2005-296434 A

しかしながら、臓器の色には個人差があり、電子内視鏡の性能も機種や個体毎に異なるため、強調処理の強調量を一律にすると、患者や電子内視鏡の種類によっては、強調の結果得られる画像が、診断に不適切となる場合があった。この問題は、特許文献1に記載の発明を応用して、患者や電子内視鏡の種類に応じた強調量をデータベース化すれば一応は解決されるが、データベースを作成するためには、事前に臓器の色の測定や電子内視鏡の性能試験を行わなければならならず、そのうえ、データベースのデータ量が膨大になるおそれがある。   However, there are individual differences in organ colors, and the performance of electronic endoscopes varies depending on the model and individual.Therefore, if the amount of emphasis is uniform, depending on the type of patient and electronic endoscope, The resulting image may be inappropriate for diagnosis. This problem can be solved temporarily by applying the invention described in Patent Document 1 and creating a database of enhancement amounts according to the type of patient and electronic endoscope. In addition, organ color measurement and electronic endoscope performance testing must be performed, and the amount of data in the database may become enormous.

本発明は、上記課題を鑑みてなされたものであり、患者や電子内視鏡の種類によらず、常に適切な分光画像を得ることが可能な画像処理装置の作動方法、および装置、並びに電子内視鏡システムを提供することを目的とする。 The present invention has been made in view of the above problems, and an operation method and apparatus for an image processing apparatus capable of always obtaining an appropriate spectral image regardless of the type of patient or electronic endoscope, as well as an electronic device. An object is to provide an endoscope system.

上記目的を達成するために、請求項1に記載の発明は、電子内視鏡で取得した画像に対して分光推定処理を施し、これにより得られた分光推定画像に基づいて任意の波長帯域を有する分光画像を生成する画像処理方法であって、前記分光推定画像の全体の色合いを代表する代表分光特性を算出し、算出した代表分光特性を用いて、前記分光推定画像の各画素に対して強調処理を施すことを特徴とする。なお、「分光推定画像の全体の色合いを代表する」とは、病変部以外の画像の大部分を占める正常な部位の色合いを代表することと同義である。   In order to achieve the above object, the invention described in claim 1 performs spectral estimation processing on an image acquired by an electronic endoscope, and sets an arbitrary wavelength band based on the spectral estimation image obtained thereby. An image processing method for generating a spectral image having a representative spectral characteristic representative of an overall hue of the spectral estimated image, and using the calculated representative spectral characteristic for each pixel of the spectral estimated image It is characterized by performing an emphasis process. Note that “representing the overall hue of the spectrally estimated image” is synonymous with representing the hue of a normal part occupying most of the image other than the lesioned part.

前記分光推定画像の全画素の分光特性の平均を求め、これを前記代表分光特性とすることが好ましい。この場合、前記強調処理は、前記分光推定画像の各画素の分光特性と、前記代表分光特性との差分に応じて行うことが好ましい。   It is preferable that an average of spectral characteristics of all pixels of the spectral estimation image is obtained and used as the representative spectral characteristics. In this case, the enhancement process is preferably performed according to a difference between the spectral characteristic of each pixel of the spectral estimation image and the representative spectral characteristic.

あるいは、前記分光推定画像に対して主成分分析を施し、これにより得られた第一主成分を前記代表分光特性とすることが好ましい。この場合、前記強調処理は、前記主成分分析により得られた第n主成分(nは2以上の自然数)に応じて行うことが好ましく、n=2であることが好ましい。   Alternatively, it is preferable that a principal component analysis is performed on the spectral estimation image, and the first principal component obtained thereby is used as the representative spectral characteristic. In this case, the enhancement processing is preferably performed according to the n-th principal component (n is a natural number of 2 or more) obtained by the principal component analysis, and it is preferable that n = 2.

さらには、前記分光推定画像の全画素の分光特性をベクトルとしてクラスター分析を行い、最大クラスターを前記代表分光特性とすることが好ましい。この場合、前記強調処理は、前記分光推定画像の各画素の分光特性と、前記最大クラスターの重心との距離に応じて行うことが好ましい。   Furthermore, it is preferable that cluster analysis is performed using spectral characteristics of all pixels of the spectral estimation image as vectors, and the maximum cluster is set as the representative spectral characteristics. In this case, the enhancement processing is preferably performed according to the distance between the spectral characteristics of each pixel of the spectral estimation image and the center of gravity of the maximum cluster.

前記分光推定画像の各画素の分光特性の強度が、予め規定された範囲内に収まるように、前記強調処理の強調量を調整することが好ましい。   It is preferable that the enhancement amount of the enhancement processing is adjusted so that the intensity of the spectral characteristics of each pixel of the spectral estimation image falls within a predetermined range.

前記強調処理後の分光推定画像の任意の三波長におけるスペクトル画像を、予め設定されたRGBの三チャネルに割り当てることが好ましい。   It is preferable that spectrum images at arbitrary three wavelengths of the spectral estimation image after the enhancement process are assigned to preset three channels of RGB.

請求項11に記載の発明は、電子内視鏡で取得した画像に対して分光推定処理を施し、これにより得られた分光推定画像に基づいて任意の波長帯域を有する分光画像を生成する画像処理装置であって、前記分光推定画像の全体の色合いを代表する代表分光特性を算出する算出手段と、算出した代表分光特性を用いて、前記分光推定画像の各画素に対して強調処理を施す強調処理手段とを備えることを特徴とする。なお、この場合も請求項1と同様に、「分光推定画像の全体の色合いを代表する」とは、病変部以外の画像の大部分を占める正常な部位の色合いを代表することと同義である。   According to an eleventh aspect of the present invention, image processing for performing spectral estimation processing on an image acquired by an electronic endoscope and generating a spectral image having an arbitrary wavelength band based on the spectral estimation image obtained thereby. A device that calculates a representative spectral characteristic representative of the overall hue of the spectral estimation image, and performs enhancement processing on each pixel of the spectral estimation image using the calculated representative spectral characteristic And a processing means. In this case as well, as in claim 1, “representing the overall hue of the spectrally estimated image” is synonymous with representing the hue of a normal part occupying most of the image other than the lesioned part. .

前記算出手段は、前記代表分光特性として、前記分光推定画像の全画素の分光特性の平均を求めることが好ましい。この場合、前記強調処理手段は、前記分光推定画像の各画素の分光特性と、前記代表分光特性との差分に応じて前記強調処理を行うことが好ましい。   It is preferable that the calculation unit obtains an average of spectral characteristics of all pixels of the spectral estimation image as the representative spectral characteristics. In this case, it is preferable that the enhancement processing unit performs the enhancement process according to a difference between the spectral characteristic of each pixel of the spectral estimation image and the representative spectral characteristic.

あるいは、前記算出手段は、前記分光推定画像に対して主成分分析を施し、これにより得られた第一主成分を前記代表分光特性とすることが好ましい。この場合、前記強調処理手段は、前記主成分分析により得られた第n主成分(nは2以上の自然数)に応じて前記強調処理を行うことが好ましく、n=2であることが好ましい。   Alternatively, the calculation unit preferably performs principal component analysis on the spectral estimation image, and the first principal component obtained thereby is used as the representative spectral characteristic. In this case, the enhancement processing means preferably performs the enhancement processing according to the n-th principal component (n is a natural number of 2 or more) obtained by the principal component analysis, and it is preferable that n = 2.

さらには、前記算出手段は、前記分光推定画像の全画素の分光特性をベクトルとしてクラスター分析を行い、最大クラスターを前記代表分光特性とすることが好ましい。この場合、前記強調処理手段は、前記分光推定画像の各画素の分光特性と、前記最大クラスターの重心との距離に応じて前記強調処理を行うことが好ましい。   Furthermore, it is preferable that the calculation unit performs cluster analysis using the spectral characteristics of all pixels of the spectral estimation image as a vector, and sets the maximum cluster as the representative spectral characteristic. In this case, it is preferable that the enhancement processing unit performs the enhancement processing according to the distance between the spectral characteristic of each pixel of the spectral estimation image and the center of gravity of the maximum cluster.

前記分光推定画像の各画素の分光特性の強度が、予め規定された範囲内に収まるように、前記強調処理の強調量を調整する強調量調整手段を備えることが好ましい。   It is preferable to include an enhancement amount adjusting unit that adjusts the enhancement amount of the enhancement processing so that the intensity of the spectral characteristics of each pixel of the spectral estimation image falls within a predetermined range.

前記強調処理後の分光推定画像の任意の三波長におけるスペクトル画像を、予め設定されたRGBの三チャネルに割り当てるチャネル割り当て手段を備えることが好ましい。   It is preferable that the apparatus further comprises channel allocating means for allocating spectral images at arbitrary three wavelengths of the spectral estimation image after the enhancement processing to preset three channels of RGB.

請求項21に記載の発明は、電子内視鏡システムであって、請求項11ないし20のいずれかに記載の画像処理装置を備えることを特徴とする。   A twenty-first aspect of the present invention is an electronic endoscope system including the image processing apparatus according to any of the eleventh to twentieth aspects.

本発明の画像処理装置の作動方法、および装置、並びに電子内視鏡システムによれば、分光推定画像の全体の色合いを代表する代表分光特性を算出手段で算出し、算出した代表分光特性を用いて、強調処理手段で分光推定画像の各画素に対して強調処理を施すので、患者や電子内視鏡の種類によらず、常に適切な分光画像を得ることが可能となる。 According to the operation method, apparatus, and electronic endoscope system of the image processing apparatus of the present invention, the representative spectral characteristic representing the overall hue of the spectrally estimated image is calculated by the calculating means, and the calculated representative spectral characteristic is used. Thus, since the enhancement processing means performs enhancement processing on each pixel of the spectral estimation image, it is possible to always obtain an appropriate spectral image regardless of the type of patient or electronic endoscope.

図1において、電子内視鏡システム2は、電子内視鏡10、およびプロセッサ装置11から構成される。電子内視鏡10は、被検体内に挿入される挿入部12と、挿入部12の基端部分に連設された操作部13とを備えている。   In FIG. 1, the electronic endoscope system 2 includes an electronic endoscope 10 and a processor device 11. The electronic endoscope 10 includes an insertion portion 12 that is inserted into a subject and an operation portion 13 that is connected to a proximal end portion of the insertion portion 12.

挿入部12の先端に連設された先端部12aには、被検体内の被観察部位の像光を取り込むための対物光学系20と像光を撮像するCCD21(ともに図2参照)、被観察部位に照明装置24(図2参照)からの照明光を照射するための照明窓22(図2参照)が内蔵されている。また、先端部12aには、鉗子口14と連通した鉗子出口、送気・送水ボタン13aを操作することによって、対物光学系20を保護する観察窓の汚れを落とすための洗浄水やエアーが噴射されるノズルなどが設けられている。CCD21により取得された被検体内の画像は、コード15で接続されたプロセッサ装置11のモニタ16に表示される。   The distal end portion 12a connected to the distal end of the insertion portion 12 is provided with an objective optical system 20 for capturing image light of an observation site in the subject, a CCD 21 for imaging the image light (both see FIG. 2), and an observation target. An illumination window 22 (see FIG. 2) for irradiating illumination light from the illumination device 24 (see FIG. 2) is built in the part. Also, cleaning water and air are sprayed onto the distal end portion 12a to clean the observation window protecting the objective optical system 20 by operating the forceps outlet communicating with the forceps port 14 and the air / water supply button 13a. A nozzle to be used is provided. The image in the subject acquired by the CCD 21 is displayed on the monitor 16 of the processor device 11 connected by the code 15.

先端部12aの後方には、複数の湾曲駒を連結した湾曲部12bが設けられている。湾曲部12bは、操作部13に設けられたアングルノブ13bが操作されて、挿入部12内に挿設されたワイヤが押し引きされることにより、上下左右方向に湾曲動作する。これにより、先端部12aが被検体内の所望の方向に向けられる。   A bending portion 12b connecting a plurality of bending pieces is provided behind the tip portion 12a. The bending portion 12b is bent in the vertical and horizontal directions when the angle knob 13b provided in the operation portion 13 is operated and the wire inserted in the insertion portion 12 is pushed and pulled. Thereby, the front-end | tip part 12a is orient | assigned to the desired direction in a subject.

湾曲部12bの後方には、可撓性を有する軟性部12cが設けられている。軟性部12cは、先端部12aが被観察部位に到達可能なように、且つ術者が操作部13を把持して操作する際に支障を来さない程度に患者との距離を保つために、数mの長さを有する。   A flexible portion 12c having flexibility is provided behind the curved portion 12b. In order to keep the distal end portion 12a reach the site to be observed and to keep the distance from the patient to the extent that the operator does not hinder the operation portion 13 when operating the flexible portion 12c, It has a length of several meters.

図2において、照明窓22には、ライトガイド23の一端が取り付けられている。ライトガイド23は、挿入部12に亘って設けられており、その他端は、操作部13内に設けられた照明装置24に接続されている。照明装置24は、ハロゲンランプや白色LEDなどの光源を有し、この光源で発せられた光が、ライトガイド23を伝って照明窓22から被観察部位に照射される。   In FIG. 2, one end of a light guide 23 is attached to the illumination window 22. The light guide 23 is provided over the insertion portion 12, and the other end is connected to a lighting device 24 provided in the operation portion 13. The illuminating device 24 has a light source such as a halogen lamp or a white LED, and light emitted from the light source irradiates the site to be observed from the illumination window 22 through the light guide 23.

CCD21には、CPU25によって制御されるドライバ26が接続されている。ドライバ26は、CCD21の電荷蓄積時間と電荷掃き出しタイミングを制御するためのタイミング信号(クロックパルス)をCCD21に出力する。   A driver 26 controlled by the CPU 25 is connected to the CCD 21. The driver 26 outputs to the CCD 21 a timing signal (clock pulse) for controlling the charge accumulation time and charge discharge timing of the CCD 21.

CCD21から出力された撮像信号は、プロセッサ装置11の画像メモリ27に入力され、記憶される。画像メモリ27には、通常画像生成部28、および分光推定処理部29が接続されている。   The imaging signal output from the CCD 21 is input and stored in the image memory 27 of the processor device 11. A normal image generation unit 28 and a spectral estimation processing unit 29 are connected to the image memory 27.

通常画像生成部28は、画像メモリ27から読み出した撮像信号に対して、相関二重サンプリング、増幅、A/D変換などのアナログ信号処理を施した後、階調補正、輪郭強調、γ補正などのデジタル信号処理を施し、通常画像を生成する。通常画像生成部28は、生成した通常画像を表示制御部30に出力する。   The normal image generation unit 28 performs analog signal processing such as correlated double sampling, amplification, and A / D conversion on the imaging signal read from the image memory 27, and then performs gradation correction, contour enhancement, γ correction, and the like. The normal signal is generated by performing digital signal processing. The normal image generation unit 28 outputs the generated normal image to the display control unit 30.

分光推定処理部29は、画像メモリ27から撮像信号を読み出し、読み出した撮像信号を用いて、主成分分析を用いた次元圧縮による線形近似や、ウィナー推定などによる分光推定処理を施す。分光推定処理は、具体的には、撮像信号から、CCD21の画素毎に可視光の波長帯域(波長400nm〜700nm)における被観察部位の分光反射率を推定する。分光推定処理部29は、分光推定処理の結果生成される分光推定画像を分光画像生成部31に出力する。   The spectral estimation processing unit 29 reads an imaging signal from the image memory 27, and performs spectral estimation processing by linear approximation by dimensional compression using principal component analysis, Wiener estimation, or the like, using the read imaging signal. Specifically, the spectral estimation process estimates the spectral reflectance of the site to be observed in the visible light wavelength band (wavelength 400 nm to 700 nm) for each pixel of the CCD 21 from the imaging signal. The spectral estimation processing unit 29 outputs a spectral estimation image generated as a result of the spectral estimation processing to the spectral image generation unit 31.

分光画像生成部31は、分光推定処理部29からの分光推定画像に基づいて、任意の波長帯域を有する分光画像を生成する。図3に示すように、分光画像生成部31は、算出回路40、強調処理回路41、強調量調整回路42、およびチャネル割り当て回路43を有する。   The spectral image generation unit 31 generates a spectral image having an arbitrary wavelength band based on the spectral estimation image from the spectral estimation processing unit 29. As illustrated in FIG. 3, the spectral image generation unit 31 includes a calculation circuit 40, an enhancement processing circuit 41, an enhancement amount adjustment circuit 42, and a channel assignment circuit 43.

図4の上段および中段に示すように、算出回路40は、分光推定画像の全画素の分光特性の平均を求める。算出回路40で求めた分光特性の平均は、分光推定画像の全体の色合いを代表する分光特性(以下、代表分光特性という。)Srである。換言すれば、代表分光特性Srは、病変部以外の画像の大部分を占める正常な部位の色合いを代表するものである。   As shown in the upper and middle stages of FIG. 4, the calculation circuit 40 obtains the average of the spectral characteristics of all the pixels of the spectral estimation image. The average of the spectral characteristics obtained by the calculation circuit 40 is a spectral characteristic (hereinafter referred to as a representative spectral characteristic) Sr that represents the overall hue of the spectrally estimated image. In other words, the representative spectral characteristic Sr represents the hue of a normal part that occupies most of the image other than the lesioned part.

図4の下段に示すように、強調処理回路41は、分光推定画像の各画素の分光特性と、算出回路40で求めた代表分光特性Srとの差分に応じて、分光推定画像の各画素に対して強調処理を施す。   As shown in the lower part of FIG. 4, the enhancement processing circuit 41 applies each pixel of the spectral estimation image according to the difference between the spectral characteristic of each pixel of the spectral estimation image and the representative spectral characteristic Sr obtained by the calculation circuit 40. Emphasis processing is performed on the image.

具体的には、例えば、上段に点線で示す分光特性Sa、および二点鎖線で示す分光特性Scのように、代表分光特性Srとの差分が大きい場合は強調量を大きくし、下段に示す分光特性Sa’、Sc’とする。対して、上段に一点鎖線で示す分光特性Sbのように、代表分光特性Srとの差分が小さい場合は強調量を小さくし、下段に示す分光特性Sb’とする。   Specifically, for example, when the difference from the representative spectral characteristic Sr is large, such as the spectral characteristic Sa indicated by the dotted line in the upper part and the spectral characteristic Sc indicated by the two-dot chain line, the enhancement amount is increased, and the spectral characteristic indicated in the lower part is increased. The characteristics are Sa ′ and Sc ′. On the other hand, when the difference from the representative spectral characteristic Sr is small like the spectral characteristic Sb indicated by the one-dot chain line in the upper stage, the enhancement amount is reduced to the spectral characteristic Sb ′ shown in the lower stage.

そして、分光特性Sbのように差分が正の場合は正の強調量とし、分光特性Scのように差分が負の場合は負の強調量とする。これにより、強調処理された分光推定画像は、全体の色合いと略同じ色合いの部分よりも、全体の色合いと違う色合いの部分がより強調されたものとなる。なお、ここでは、便宜上、分光推定画像の分光特性をSa〜Sc、Sa’〜 Sc’の三本ずつ描いているが、実際には、分光推定画像の全画素の分光特性を対象として、代表分光特性の算出、および強調処理を行う。   When the difference is positive as in the spectral characteristic Sb, the positive enhancement amount is used. When the difference is negative as in the spectral characteristic Sc, the negative enhancement amount is used. As a result, the enhanced spectral estimated image has a portion with a hue different from the overall hue more emphasized than a portion with a hue substantially the same as the overall hue. Here, for the sake of convenience, the spectral characteristics of the spectral estimation image are drawn three by three, Sa to Sc and Sa ′ to Sc ′, but in reality, the spectral characteristics of all the pixels of the spectral estimation image are representative. Spectral characteristics are calculated and enhanced.

ここで、分光特性の強度は、言う迄もなく光の強さを表しており、画像処理においては、この光の強さを適当な階調値(例えば、0〜255)に割り当てて画像データを生成する。このため、強調処理後の分光推定画像の各画素の分光特性の強度が、予め設定された階調値で表せない場合、つまり、図5の上段に示す分光特性Sd、Seのように、予め規定された範囲0〜Itに収まらない場合は、強調処理時の強調量を調整する必要がある。そこで、図5の下段に示すように、強調量調整回路42により、強調処理後の分光推定画像の各画素の分光特性の強度が、分光特性Sd’、Se’のように、予め規定された範囲0〜Itに収まるように、強調処理の強調量を調整する。   Here, it is needless to say that the intensity of the spectral characteristic represents the intensity of light. In the image processing, the intensity of the light is assigned to an appropriate gradation value (for example, 0 to 255) to obtain image data. Is generated. Therefore, when the intensity of the spectral characteristic of each pixel of the spectral estimation image after the enhancement process cannot be expressed by a preset gradation value, that is, like the spectral characteristics Sd and Se shown in the upper part of FIG. If it does not fall within the specified range of 0 to It, it is necessary to adjust the amount of enhancement during the enhancement process. Therefore, as shown in the lower part of FIG. 5, the intensity adjustment circuit 42 predefines the intensity of the spectral characteristic of each pixel of the spectral estimation image after the enhancement process, like the spectral characteristics Sd ′ and Se ′. The enhancement amount of the enhancement process is adjusted so that it falls within the range of 0 to It.

図6に示すように、チャネル割り当て回路43は、強調処理後の分光推定画像の任意の三波長(例えば、波長500nm、450nm、400nm)におけるスペクトル画像を、予め設定されたRGBの三チャネルに割り当てる。これにより、ある波長における分光推定画像の各画素の分光特性の強度が、RGBいずれかの階調値で表され、これが分光画像として表示制御部30に出力される。RGBのチャネルに割り当てる三波長は、予め設定されているか、あるいは、操作卓32(図2参照)を操作することにより、個別に設定変更される。   As shown in FIG. 6, the channel allocation circuit 43 allocates spectral images at arbitrary three wavelengths (for example, wavelengths of 500 nm, 450 nm, and 400 nm) of the spectral estimation image after the enhancement processing to preset three channels of RGB. . As a result, the intensity of the spectral characteristic of each pixel of the spectral estimation image at a certain wavelength is represented by one of RGB gradation values, and this is output to the display control unit 30 as a spectral image. The three wavelengths to be assigned to the RGB channels are set in advance or are individually changed by operating the console 32 (see FIG. 2).

図7に示すように、表示制御部30は、検査日や患者の情報50とともに、通常画像生成部28から出力された通常画像51、および分光画像生成部31から出力された分光画像52を、モニタ16に並べて表示させる。また、操作卓32で選択することにより、通常画像51、または分光画像52をそれぞれ個別にモニタ16に表示させることも可能となっている。   As shown in FIG. 7, the display control unit 30 displays the normal image 51 output from the normal image generation unit 28 and the spectral image 52 output from the spectral image generation unit 31 together with the examination date and patient information 50. Displayed side by side on the monitor 16. Further, by selecting on the console 32, the normal image 51 or the spectral image 52 can be individually displayed on the monitor 16.

図2に戻って、CPU25は、プロセッサ装置11の全体の動作を統括的に制御する。CPU25には、各種設定や操作を行うための操作卓32が接続されている。CPU25は、操作卓32から入力される操作入力信号に応じて、各部を動作させる。   Returning to FIG. 2, the CPU 25 comprehensively controls the overall operation of the processor device 11. An operation console 32 for performing various settings and operations is connected to the CPU 25. The CPU 25 operates each unit according to an operation input signal input from the console 32.

上記のように構成された電子内視鏡システム2で被検体内を観察する際には、電子内視鏡10、プロセッサ装置11の電源を投入して、挿入部12を被検体内に挿入する。そして、照射装置24をオンして、照明窓22から照射される光で被検体内を照明しながら、CCD21により得られる画像をモニタ16で観察する。   When observing the inside of the subject with the electronic endoscope system 2 configured as described above, the electronic endoscope 10 and the processor device 11 are turned on, and the insertion unit 12 is inserted into the subject. . Then, the irradiation device 24 is turned on, and the image obtained by the CCD 21 is observed on the monitor 16 while illuminating the inside of the subject with the light irradiated from the illumination window 22.

対物光学系20から取り込まれた被観察部位の像光は、CCD21の撮像面に結像され、これによりCCD21から撮像信号が出力される。CCD21から出力された撮像信号は、画像メモリ27に取り込まれる。画像メモリ27に取り込まれた撮像信号は、通常画像生成部28、および分光推定処理部29に順次読み出される。   The image light of the observed region taken in from the objective optical system 20 is imaged on the imaging surface of the CCD 21, whereby an imaging signal is output from the CCD 21. The imaging signal output from the CCD 21 is taken into the image memory 27. The imaging signals captured in the image memory 27 are sequentially read out to the normal image generation unit 28 and the spectral estimation processing unit 29.

通常画像生成部28では、画像メモリ27から読み出した撮像信号に対して各種信号処理が施され、これにより通常画像が生成される。通常画像生成部28で生成された通常画像は、表示制御部30に出力される。   In the normal image generation unit 28, various signal processes are performed on the imaging signal read from the image memory 27, thereby generating a normal image. The normal image generated by the normal image generation unit 28 is output to the display control unit 30.

一方、分光推定処理部29では、画像メモリ27から読み出した撮像信号を用いて、分光推定処理が実行される。分光推定処理部29による分光推定処理の結果生成される分光推定画像は、分光画像生成部31に出力される。   On the other hand, in the spectral estimation processing unit 29, spectral estimation processing is executed using the imaging signal read from the image memory 27. A spectral estimation image generated as a result of the spectral estimation processing by the spectral estimation processing unit 29 is output to the spectral image generation unit 31.

図8のフローチャートに示すように、分光画像生成部31では、算出回路40により、分光推定画像の全画素の分光特性の平均、すなわち代表分光特性Srが算出される。そして、強調処理回路41で、分光推定画像の各画素の分光特性と代表分光特性Srとの差分に応じて、分光推定画像の各画素に対して強調処理が施される。   As shown in the flowchart of FIG. 8, in the spectral image generation unit 31, the calculation circuit 40 calculates the average of the spectral characteristics of all the pixels of the spectral estimation image, that is, the representative spectral characteristics Sr. Then, the enhancement processing circuit 41 performs enhancement processing on each pixel of the spectral estimation image according to the difference between the spectral characteristic of each pixel of the spectral estimation image and the representative spectral characteristic Sr.

強調処理後、分光推定画像の各画素の分光特性の強度が、予め規定された範囲0〜Itに収まらない場合は、分光推定画像の各画素の分光特性の強度が、予め規定された範囲0〜Itに収まるように、強調量調整回路42で強調量が調整される。そして、強調処理回路41で、調整された強調量で再び強調処理が施される。分光推定画像の各画素の分光特性の強度が、予め規定された範囲0〜Itに収まっている場合は、当然ながら強調量の調整は行われない。   After the enhancement processing, when the spectral characteristic intensity of each pixel of the spectral estimation image does not fall within the predetermined range 0 to It, the spectral characteristic intensity of each pixel of the spectral estimation image is within the predetermined range 0. The emphasis amount is adjusted by the emphasis amount adjustment circuit 42 so as to be within the range of ~ It. Then, the enhancement processing circuit 41 performs the enhancement processing again with the adjusted enhancement amount. If the intensity of the spectral characteristic of each pixel of the spectral estimation image is within the predetermined range 0 to It, naturally, the enhancement amount is not adjusted.

次いで、チャネル割り当て回路43によって、強調処理後の分光推定画像の任意の三波長におけるスペクトル画像が、RGBの三チャネルに割り当てられる。これにより、割り当てられた波長における分光推定画像の各画素の分光特性の強度が、RGBいずれかの階調値で表された分光画像が生成される。生成された分光画像は、表示制御部30に出力される。表示制御部30に出力された通常画像、および分光画像は、モニタ16に並べて、あるいはそれぞれ個別に表示される。   Next, the channel assignment circuit 43 assigns spectral images at arbitrary three wavelengths of the spectral estimation image after enhancement processing to the three RGB channels. As a result, a spectral image in which the intensity of the spectral characteristics of each pixel of the spectral estimation image at the assigned wavelength is represented by one of RGB gradation values is generated. The generated spectral image is output to the display control unit 30. The normal image and the spectral image output to the display control unit 30 are displayed side by side on the monitor 16 or individually.

以上説明したように、電子内視鏡システム2は、分光推定画像の全体の色合いを代表する代表分光特性Srを算出回路40で算出し、算出した代表分光特性Srを用いて、強調処理回路41で分光推定画像の各画素に対して強調処理を施すので、臓器の色の個人差や、電子内視鏡の性能のばらつきによる分光画像への影響を吸収することができ、常に安定した診断を行うことができる。   As described above, the electronic endoscope system 2 uses the calculation circuit 40 to calculate the representative spectral characteristic Sr that represents the overall hue of the spectral estimation image, and uses the calculated representative spectral characteristic Sr to perform the enhancement processing circuit 41. Because each pixel in the spectroscopic estimated image is subjected to emphasis processing, it is possible to absorb the effects on the spectroscopic image due to individual differences in organ colors and variations in the performance of electronic endoscopes. It can be carried out.

また、分光推定画像の各画素の分光特性の強度が、予め規定された範囲内に収まるように、強調量調整回路42で強調量を調整するので、いわゆる白飛びや黒潰れといった画質劣化を防止することができる。   In addition, since the enhancement amount is adjusted by the enhancement amount adjustment circuit 42 so that the intensity of the spectral characteristics of each pixel of the spectral estimation image falls within a predetermined range, image quality deterioration such as so-called whiteout or blackout is prevented. can do.

さらに、強調処理後の分光推定画像の任意の三波長におけるスペクトル画像を、チャネル割り当て回路43で予め設定されたRGBの三チャネルに割り当てるので、病変や血管などの観察したい部分が強調表示された分光画像を得ることができる。   Furthermore, since spectral images at arbitrary three wavelengths of the spectral estimation image after enhancement processing are assigned to the three channels of RGB set in advance by the channel assignment circuit 43, the spectral region in which a portion to be observed such as a lesion or blood vessel is highlighted. An image can be obtained.

上記実施形態では、代表分光特性Srとして、分光推定画像の全画素の分光特性の平均を採用した例を挙げて説明したが、図9および図10に示す、主成分分析を用いる方法を採用してもよい。すなわち、図9の上段および中段に示すように、算出回路40で分光推定画像に対して主成分分析を施し、これにより得られた第一主成分Sを代表分光特性Srとする。なお、第一主成分Sを代表分光特性Srとするのは、全体の情報の中に占める割合(寄与率)が、第一主成分Sが最も高いからである。 In the above embodiment, an example in which the average of the spectral characteristics of all the pixels of the spectral estimation image is adopted as the representative spectral characteristic Sr has been described. However, the method using principal component analysis shown in FIGS. 9 and 10 is adopted. May be. That is, as shown in the upper and middle of FIG. 9 performs principal component analysis on the spectral estimation image by calculating circuit 40, the first principal component S 1 thereby obtained as the representative spectral characteristics Sr. Incidentally, the first principal component S 1 to the representative spectral characteristics Sr, the proportion occupied in the entire information (contribution rate), the first principal component S 1 is because the highest.

次いで、下段に示すように、強調処理回路41で、第二主成分Sに対して強調処理を施し、S’とする。なお、第二主成分Sに対して強調処理を施すのは、第二主成分Sが、代表分光特性Srである第一主成分Sとは相関がなく、分光推定画像の全体の色合いと違う色合いの部分の情報を表すからである。 Then, as shown in the lower part, at enhancement processing circuit 41, the enhancement processing on the second principal component S 2, and S 2 '. The second principal component S 2 is subjected to enhancement processing because the second principal component S 2 has no correlation with the first principal component S 1 , which is the representative spectral characteristic Sr, and the entire spectral estimated image This is because it represents information on a portion of a hue different from the hue.

第二主成分Sに対して強調処理を施した後、図10に示すように、強調処理後の第二主成分S’と、第一主成分Sとを用い、適当な主成分係数で分光推定画像を再構成し、図4の下段に示すものと同様に、分光推定画像の全体の色合いと違う色合いの部分が強調された分光推定画像を得る。なお、強調処理を施す主成分としては、第二主成分に限らず、第一主成分の寄与率が高くない場合などには、例えば、第三主成分や第四主成分に対して強調処理を施してもよい。 It was subjected to emphasis processing on the second principal component S 2, as shown in FIG. 10, using the second principal component S 2 'after enhancement and a first principal component S 1, suitable principal component A spectral estimation image is reconstructed with coefficients, and a spectral estimation image in which a portion of a hue different from the overall hue of the spectral estimation image is emphasized is obtained in the same manner as shown in the lower part of FIG. The main component to be emphasized is not limited to the second main component. For example, when the contribution ratio of the first main component is not high, for example, the third main component or the fourth main component is emphasized. May be applied.

あるいは、図11に示す、クラスター分析を用いる方法を採用してもよい。この場合、まず、上段に示すように、分光推定画像の全画素の分光特性を表す指標pをXYの二次元空間(実際には、指標pの要素数n次元空間、説明のために二次元空間としている。)にプロットする。   Alternatively, a method using cluster analysis shown in FIG. 11 may be adopted. In this case, first, as shown in the upper part, the index p representing the spectral characteristics of all the pixels of the spectral estimation image is expressed as an XY two-dimensional space (actually, the number of elements of the index p is an n-dimensional space, Plot in space.)

そして、中段に示すように、プロットした指標pに対して、算出回路40でクラスター分析を行う。具体的には、指標p間のn次元空間におけるユークリッド距離を算出して、相互の距離の最も近い指標pを順次クラスターとして纏めていく。この方法では、クラスター分析により得られた最大クラスターCm(全ての指標pが一つのクラスターに包含される以前のクラスターのうち、サイズが最も大きいクラスター)が分光推定画像の全体の色合いの最も典型的な情報を示すものであるため、最大クラスターCmを代表分光特性Srとする。   Then, as shown in the middle stage, the calculation circuit 40 performs cluster analysis on the plotted index p. Specifically, the Euclidean distance in the n-dimensional space between the indices p is calculated, and the indices p that are closest to each other are sequentially collected as a cluster. In this method, the maximum cluster Cm obtained by cluster analysis (the cluster having the largest size among the previous clusters in which all indices p are included in one cluster) is the most typical color of the entire spectral estimation image. Therefore, the maximum cluster Cm is set as the representative spectral characteristic Sr.

次に、下段に示すように、強調処理回路41で、最大クラスターCmの重心Gとの距離に応じて、最大クラスターCmに含まれていない指標p、つまり、分光推定画像の全体の色合いと違う色合いの部分の情報を表す指標pに対して強調処理を施し、p’とする。このときの強調量は、例えば、重心Gとの距離が大きい場合は強調量も大きくし、小さい場合は強調量も小さくする。そして、重心Gと強調前の元々の指標pとを結ぶ直線の延長線上に、強調後の指標p’がくるようにする。これにより、上記実施形態の二つの方法と同様に、分光推定画像の全体の色合いと違う色合いの部分が強調された分光推定画像を得る。   Next, as shown in the lower stage, the emphasis processing circuit 41 differs from the index p not included in the maximum cluster Cm, that is, the overall color of the spectral estimation image, according to the distance from the center of gravity G of the maximum cluster Cm. Emphasis processing is performed on the index p representing the information on the shaded portion, and is set as p ′. For example, when the distance from the center of gravity G is large, the enhancement amount is also increased, and when the distance is small, the enhancement amount is also decreased. Then, the enhanced index p ′ is placed on the extension of the straight line connecting the center of gravity G and the original index p before enhancement. As a result, similarly to the two methods of the above-described embodiment, a spectral estimation image in which a portion of a hue different from the overall hue of the spectral estimation image is emphasized is obtained.

上記実施形態では、分光推定画像の各画素の分光特性の強度が、予め規定された範囲内に収まらない場合に、強調量調整回路42で強調量を調整した後、再び強調処理回路41で強調処理を施すようにしているが、強調処理を施す前に強調量を調整し、一度の強調処理で分光推定画像の各画素の分光特性の強度を予め規定された範囲内に収めるようにしてもよい。   In the above embodiment, when the intensity of the spectral characteristic of each pixel of the spectral estimation image does not fall within a predetermined range, the enhancement amount adjustment circuit 42 adjusts the enhancement amount, and then the enhancement processing circuit 41 emphasizes again. Although the processing is performed, the emphasis amount is adjusted before the emphasis processing is performed so that the intensity of the spectral characteristics of each pixel of the spectral estimation image is within a predetermined range by one emphasis processing. Good.

なお、照明装置24は、電子内視鏡と一体にする必要はなく、外部に設けてコードで接続する構成としてもよい。また、上記実施形態では、電子内視鏡10を例示して説明したが、被観察部位に超音波を照射して、被観察部位からのエコー信号を受信する超音波トランスデューサが、CCDとともに先端部に一体的に配された超音波内視鏡についても、本発明は適用することが可能である。   The illumination device 24 does not need to be integrated with the electronic endoscope, and may be provided outside and connected by a cord. In the above-described embodiment, the electronic endoscope 10 has been described as an example. However, the ultrasonic transducer that irradiates the observation site with ultrasonic waves and receives an echo signal from the observation site has the tip portion together with the CCD. The present invention can also be applied to an ultrasonic endoscope that is integrally disposed on the endoscope.

電子内視鏡システムの構成を示す概略図である。It is the schematic which shows the structure of an electronic endoscope system. 電子内視鏡システムの構成を示すブロック図である。It is a block diagram which shows the structure of an electronic endoscope system. 分光画像生成部の構成を示すブロック図である。It is a block diagram which shows the structure of a spectral image generation part. 算出回路および強調処理回路における処理の流れを示す説明図である。It is explanatory drawing which shows the flow of a process in a calculation circuit and an emphasis processing circuit. 強調量調整回路における処理の流れを示す説明図である。It is explanatory drawing which shows the flow of the process in an emphasis amount adjustment circuit. チャネル割り当て回路における処理を説明するための図である。It is a figure for demonstrating the process in a channel allocation circuit. モニタの表示状態を示す図である。It is a figure which shows the display state of a monitor. 分光画像生成部における処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process in a spectral image generation part. 主成分分析を採用した場合の処理の流れを示す説明図である。It is explanatory drawing which shows the flow of a process at the time of employ | adopting a principal component analysis. 主成分分析を採用した場合の処理の流れを示す説明図である。It is explanatory drawing which shows the flow of a process at the time of employ | adopting a principal component analysis. クラスター分析を採用した場合の処理の流れを示す説明図である。It is explanatory drawing which shows the flow of a process at the time of employ | adopting cluster analysis.

符号の説明Explanation of symbols

2 電子内視鏡システム
10 電子内視鏡
11 プロセッサ装置
16 モニタ
21 CCD
25 CPU
28 通常画像生成部
29 分光推定処理部
31 分光画像生成部
40 算出回路
41 強調処理回路
42 強調量調整回路
43 チャネル割り当て回路
51 通常画像
52 分光画像
2 Electronic Endoscope System 10 Electronic Endoscope 11 Processor Unit 16 Monitor 21 CCD
25 CPU
28 normal image generation unit 29 spectral estimation processing unit 31 spectral image generation unit 40 calculation circuit 41 enhancement processing circuit 42 enhancement amount adjustment circuit 43 channel allocation circuit 51 normal image 52 spectral image

Claims (15)

電子内視鏡で取得した画像に対して分光推定処理を施し、これにより得られた分光推定画像に基づいて任意の波長帯域を有する分光画像を生成する画像処理装置の作動方法であって、
前記分光推定画像に対して主成分分析を施し、これにより得られた第一主成分を、前記分光推定画像の全体の色合いを代表する代表分光特性として算出手段で算出し、
算出した代表分光特性を用いて、前記分光推定画像の各画素に対して強調処理手段で強調処理を施すことを特徴とする画像処理装置の作動方法。
An operation method of an image processing apparatus that performs spectral estimation processing on an image acquired by an electronic endoscope and generates a spectral image having an arbitrary wavelength band based on the spectral estimation image obtained thereby,
The principal component analysis is performed on the spectral estimation image, and the first principal component obtained thereby is calculated as a representative spectral characteristic representative of the overall hue of the spectral estimation image by the calculation means,
An operation method of an image processing apparatus , wherein enhancement processing means is used to perform enhancement processing on each pixel of the spectral estimation image using the calculated representative spectral characteristics.
前記強調処理は、前記主成分分析により得られた第n主成分(nは2以上の自然数)に応じて行うことを特徴とする請求項1に記載の画像処理装置の作動方法。 The method of operating an image processing apparatus according to claim 1, wherein the enhancement processing is performed according to an n-th principal component (n is a natural number of 2 or more) obtained by the principal component analysis. n=2であることを特徴とする請求項2に記載の画像処理装置の作動方法。 The method of operating an image processing apparatus according to claim 2, wherein n = 2. 前記分光推定画像の各画素の分光特性の強度が、予め規定された範囲内に収まるように、強調量調整手段で前記強調処理の強調量を調整することを特徴とする請求項1ないし3のいずれかに記載の画像処理装置の作動方法。 4. The enhancement amount of the enhancement processing is adjusted by an enhancement amount adjustment unit so that the intensity of spectral characteristics of each pixel of the spectral estimation image falls within a predetermined range. An operation method of the image processing apparatus according to any one of the above. 前記強調処理後の分光推定画像の任意の三波長におけるスペクトル画像を、予め設定されたRGBの三チャネルにチャネル割り当て手段で割り当てることを特徴とする請求項1ないし4のいずれかに記載の画像処理装置の作動方法。 5. The image processing according to claim 1, wherein spectrum images at arbitrary three wavelengths of the spectral estimation image after the enhancement processing are allocated to three preset RGB channels by channel allocation means. How the device works . 電子内視鏡で取得した画像に対して分光推定処理を施し、これにより得られた分光推定画像に基づいて任意の波長帯域を有する分光画像を生成する画像処理装置であって、
前記分光推定画像に対して主成分分析を施し、これにより得られた第一主成分を、前記分光推定画像の全体の色合いを代表する代表分光特性として算出する算出手段と、
算出した代表分光特性を用いて、前記分光推定画像の各画素に対して強調処理を施す強調処理手段とを備えることを特徴とする画像処理装置。
An image processing apparatus that performs spectral estimation processing on an image acquired by an electronic endoscope and generates a spectral image having an arbitrary wavelength band based on the spectral estimation image obtained thereby,
A calculation unit that performs principal component analysis on the spectral estimation image, and calculates the first principal component obtained as a representative spectral characteristic representative of the overall hue of the spectral estimation image;
An image processing apparatus comprising: enhancement processing means for performing enhancement processing on each pixel of the spectral estimation image using the calculated representative spectral characteristics.
前記強調処理手段は、前記主成分分析により得られた第n主成分(nは2以上の自然数)に応じて前記強調処理を行うことを特徴とする請求項6に記載の画像処理装置。   The image processing apparatus according to claim 6, wherein the enhancement processing unit performs the enhancement processing according to an n-th principal component (n is a natural number of 2 or more) obtained by the principal component analysis. n=2であることを特徴とする請求項7に記載の画像処理装置。   The image processing apparatus according to claim 7, wherein n = 2. 前記分光推定画像の各画素の分光特性の強度が、予め規定された範囲内に収まるように、前記強調処理の強調量を調整する強調量調整手段を備えることを特徴とする請求項6ないし8のいずれかに記載の画像処理装置。   9. The enhancement amount adjusting means for adjusting the enhancement amount of the enhancement processing so that the intensity of the spectral characteristic of each pixel of the spectral estimation image falls within a predetermined range. An image processing apparatus according to any one of the above. 前記強調処理後の分光推定画像の任意の三波長におけるスペクトル画像を、予め設定されたRGBの三チャネルに割り当てるチャネル割り当て手段を備えることを特徴とする請求項6ないし9のいずれかに記載の画像処理装置。   The image according to any one of claims 6 to 9, further comprising channel allocating means for allocating spectrum images at arbitrary three wavelengths of the spectral estimation image after the enhancement processing to preset three channels of RGB. Processing equipment. 請求項6ないし10のいずれかに記載の画像処理装置を備えることを特徴とする電子内視鏡システム。   An electronic endoscope system comprising the image processing apparatus according to claim 6. 電子内視鏡で取得した画像に対して分光推定処理を施し、これにより得られた分光推定画像に基づいて任意の波長帯域を有する分光画像を生成する画像処理装置の作動方法であって、
前記分光推定画像の全画素の分光特性をベクトルとしてクラスター分析を行い、最大クラスターを、前記分光推定画像の全体の色合いを代表する代表分光特性として算出手段で算出し、
算出した代表分光特性を用いて、前記分光推定画像の各画素に対して強調処理手段で強調処理を施すことを特徴とする画像処理装置の作動方法。
An operation method of an image processing apparatus that performs spectral estimation processing on an image acquired by an electronic endoscope and generates a spectral image having an arbitrary wavelength band based on the spectral estimation image obtained thereby,
The cluster analysis is performed using the spectral characteristics of all the pixels of the spectral estimation image as a vector, and the maximum cluster is calculated as a representative spectral characteristic representative of the overall hue of the spectral estimation image by the calculation means,
An operation method of an image processing apparatus , wherein enhancement processing means is used to perform enhancement processing on each pixel of the spectral estimation image using the calculated representative spectral characteristics.
前記強調処理は、前記分光推定画像の各画素の分光特性と、前記最大クラスターの重心との距離に応じて行うことを特徴とする請求項12に記載の画像処理装置の作動方法。 The method of operating an image processing apparatus according to claim 12, wherein the enhancement processing is performed according to a distance between a spectral characteristic of each pixel of the spectral estimation image and a center of gravity of the maximum cluster. 電子内視鏡で取得した画像に対して分光推定処理を施し、これにより得られた分光推定画像に基づいて任意の波長帯域を有する分光画像を生成する画像処理装置であって、
前記分光推定画像の全画素の分光特性をベクトルとしてクラスター分析を行い、最大クラスターを、前記分光推定画像の全体の色合いを代表する代表分光特性として算出する算出手段と、
算出した代表分光特性を用いて、前記分光推定画像の各画素に対して強調処理を施す強調処理手段とを備えることを特徴とする画像処理装置。
An image processing apparatus that performs spectral estimation processing on an image acquired by an electronic endoscope and generates a spectral image having an arbitrary wavelength band based on the spectral estimation image obtained thereby,
Performing a cluster analysis using the spectral characteristics of all the pixels of the spectral estimation image as a vector, and calculating a maximum cluster as a representative spectral characteristic representative of the overall hue of the spectral estimation image;
An image processing apparatus comprising: enhancement processing means for performing enhancement processing on each pixel of the spectral estimation image using the calculated representative spectral characteristics.
前記強調処理手段は、前記分光推定画像の各画素の分光特性と、前記最大クラスターの重心との距離に応じて前記強調処理を行うことを特徴とする請求項14に記載の画像処理装置。   The image processing apparatus according to claim 14, wherein the enhancement processing unit performs the enhancement processing according to a distance between a spectral characteristic of each pixel of the spectral estimation image and a center of gravity of the maximum cluster.
JP2006198363A 2006-07-20 2006-07-20 Method and apparatus for operating image processing apparatus, and electronic endoscope system Expired - Fee Related JP5094066B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006198363A JP5094066B2 (en) 2006-07-20 2006-07-20 Method and apparatus for operating image processing apparatus, and electronic endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006198363A JP5094066B2 (en) 2006-07-20 2006-07-20 Method and apparatus for operating image processing apparatus, and electronic endoscope system

Publications (2)

Publication Number Publication Date
JP2008023041A JP2008023041A (en) 2008-02-07
JP5094066B2 true JP5094066B2 (en) 2012-12-12

Family

ID=39114301

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006198363A Expired - Fee Related JP5094066B2 (en) 2006-07-20 2006-07-20 Method and apparatus for operating image processing apparatus, and electronic endoscope system

Country Status (1)

Country Link
JP (1) JP5094066B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2687145B1 (en) * 2011-09-20 2016-06-01 Olympus Corporation Image processing equipment and endoscopic system
EP2687148B1 (en) 2012-03-30 2018-05-16 Olympus Corporation Endoscopic device
EP2979617B1 (en) * 2013-03-27 2020-02-19 FUJIFILM Corporation Image processing device, and method for operating endoscope system
WO2017047117A1 (en) * 2015-09-18 2017-03-23 オリンパス株式会社 Signal processing apparatus and endoscope system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777580B2 (en) * 1988-05-02 1995-08-23 オリンパス光学工業株式会社 Transendoscopic spectroscopic diagnostic device
JP3228627B2 (en) * 1993-03-19 2001-11-12 オリンパス光学工業株式会社 Endoscope image processing device
EP1182960A1 (en) * 1999-05-07 2002-03-06 Applied Spectral Imaging Ltd. Spectral bio-imaging of the eye

Also Published As

Publication number Publication date
JP2008023041A (en) 2008-02-07

Similar Documents

Publication Publication Date Title
CN108366717B (en) Endoscope device
JP5637834B2 (en) Endoscope device
US9526408B2 (en) Electronic endoscope system and method for controlling the same
JP5362149B1 (en) Endoscope device
CN108024689B (en) Endoscope device
JP5757891B2 (en) Electronic endoscope system, image processing apparatus, operation method of image processing apparatus, and image processing program
JP5670264B2 (en) Endoscope system and method for operating endoscope system
JP5485215B2 (en) Endoscope device
JP7176041B2 (en) Medical image processing device and method, endoscope system, processor device, diagnosis support device and program
JP5222934B2 (en) Endoscope system, processor device for endoscope system, and method for operating endoscope system
JP2012071012A (en) Endoscope device
JP5762344B2 (en) Image processing apparatus and endoscope system
JP6839773B2 (en) Endoscope system, how the endoscope system works and the processor
JP7387859B2 (en) Medical image processing device, processor device, endoscope system, operating method and program for medical image processing device
JP7350954B2 (en) Endoscopic image processing device, endoscope system, operating method of endoscopic image processing device, endoscopic image processing program, and storage medium
JP2012071007A (en) Endoscope device
JP2016174976A (en) Endoscope system
JP5094066B2 (en) Method and apparatus for operating image processing apparatus, and electronic endoscope system
JP5422180B2 (en) Endoscope apparatus and method of operating the same
JP2011194082A (en) Endoscope image-correcting device and endoscope apparatus
JP6454755B2 (en) Endoscope system
JP5965028B2 (en) Endoscope system
JP7235832B2 (en) endoscope system
JP5897663B2 (en) Endoscope device
JP6694046B2 (en) Endoscope system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110928

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111109

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120201

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120718

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120905

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120918

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150928

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees