JP6247784B2 - Medical image processing apparatus and endoscope system - Google Patents

Medical image processing apparatus and endoscope system Download PDF

Info

Publication number
JP6247784B2
JP6247784B2 JP2017029600A JP2017029600A JP6247784B2 JP 6247784 B2 JP6247784 B2 JP 6247784B2 JP 2017029600 A JP2017029600 A JP 2017029600A JP 2017029600 A JP2017029600 A JP 2017029600A JP 6247784 B2 JP6247784 B2 JP 6247784B2
Authority
JP
Japan
Prior art keywords
range
difference
color
space
image signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017029600A
Other languages
Japanese (ja)
Other versions
JP2017104609A (en
Inventor
昌之 蔵本
昌之 蔵本
誠 杉▲崎▼
誠 杉▲崎▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2017029600A priority Critical patent/JP6247784B2/en
Publication of JP2017104609A publication Critical patent/JP2017104609A/en
Application granted granted Critical
Publication of JP6247784B2 publication Critical patent/JP6247784B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、正常部と病変部の色の違いを強調した画像を生成する医用画像処理装置及び内視鏡システムに関する。   The present invention relates to a medical image processing apparatus and an endoscope system that generate an image in which a color difference between a normal part and a lesion part is emphasized.

医療分野においては、光源装置、内視鏡、及びプロセッサ装置を備える内視鏡システムを用いた診断が広く行われている。この内視鏡システムでは、内視鏡から観察対象に照明光を照射し、その照明光で照明中の観察対象を内視鏡の撮像素子で撮像して得られる画像信号に基づいて、観察対象の画像をモニタ上に表示する。ドクターは、モニタに表示された画像を見ながら、病変部の有無を検出する。   In the medical field, diagnosis using an endoscope system including a light source device, an endoscope, and a processor device is widely performed. In this endoscope system, an observation target is irradiated based on an image signal obtained by irradiating an observation target with illumination light from the endoscope and imaging the observation target under illumination with the imaging element of the endoscope. Is displayed on the monitor. The doctor detects the presence or absence of a lesioned part while viewing the image displayed on the monitor.

ここで、粘膜表面から大きく突起している病変部など、形状や大きさが正常部と大きく異なる病変部については、容易に検出することが可能である。しかしながら、形状や大きさが正常部とほとんど変わらない病変部については、正常部との色の違いを手かがりに、検出することになる。この場合、病変部がそれほど進行しておらず、正常部との色の違いがほとんどない場合には、検出することは極めて困難になる。   Here, it is possible to easily detect a lesioned part having a shape and size greatly different from a normal part, such as a lesioned part protruding greatly from the mucosal surface. However, a lesion that has almost the same shape and size as the normal part is detected by using the color difference from the normal part as a clue. In this case, it is extremely difficult to detect when the lesioned part is not so advanced and there is almost no difference in color from the normal part.

そこで、特許文献1では、血液量(ヘモグロビンインデックス)が基準値から離れる部分については更に基準値から離れるようにする処理を行うことによって、正常部と病変部の色の差が明確になるようにしている。   Therefore, in Patent Document 1, a process in which the blood volume (hemoglobin index) is separated from the reference value is further separated from the reference value so that the color difference between the normal part and the lesioned part becomes clear. ing.

特許3228627号公報Japanese Patent No. 3228627

病変部の中でも胃癌については、胃の粘膜に萎縮が生じて、胃の粘膜が退色調に変化することが知られている。そのため、粘膜に萎縮が生じた萎縮部は、萎縮が生じていない正常部に対して、色の違いが生ずるようになる。この正常部との色の違いを内視鏡で観察することによって、胃癌が存在するかどうかを診断している(認定NPO法人 日本胃がん予知・診断・治療研究機構が推奨するABC検診がある)。   Among gastric cancers among lesions, it is known that atrophy occurs in the gastric mucosa and the gastric mucosa changes to a fading tone. For this reason, the atrophic part where atrophy occurs in the mucous membrane is different in color from the normal part where no atrophy occurs. By observing the difference in color from the normal part with an endoscope, it is diagnosed whether or not stomach cancer exists (there is ABC screening recommended by the Japan NPO Japan Gastric Cancer Prediction, Diagnosis and Treatment Research Organization) .

ここで、萎縮が高度に進んだ場合(例えば、ABC検診でC群やD群に含まれる場合)には、正常部と萎縮部の色の違いは明確であるため、萎縮部を容易に検出することが可能である。しかしながら、萎縮進行中の場合(例えば、ABC検診でB群やC群に含まれる場合)には、萎縮部と正常部との色の差は僅かであるため、色の違いだけで、萎縮部を検出することは困難である。したがって、萎縮進行中のように、萎縮部と正常部との色の差が僅かな場合であっても、正常部と萎縮部との色の差を強調して、萎縮部の検出を容易にすることが求められている。   Here, when the atrophy has advanced to a high degree (for example, when it is included in the C group or the D group by ABC screening), the color difference between the normal part and the atrophic part is clear, so that the atrophic part is easily detected. Is possible. However, when atrophy is in progress (for example, when it is included in group B or group C by ABC screening), the color difference between the atrophic part and the normal part is slight. Is difficult to detect. Therefore, even if the color difference between the atrophic part and the normal part is slight, such as during the process of atrophy, the color difference between the normal part and the atrophic part is emphasized to easily detect the atrophic part. It is requested to do.

なお、特許文献1の方法により、萎縮部と正常部との色の差を強調することが考えられる。しかしながら、萎縮部の色は、血液量だけでなく、血液量以外の要素によっても影響を受けるため、特許文献1の方法では、萎縮部と正常部との色の差を強調することは難しい。   Note that it is conceivable to emphasize the color difference between the atrophic part and the normal part by the method of Patent Document 1. However, since the color of the atrophic part is affected not only by the blood volume but also by factors other than the blood volume, it is difficult to emphasize the color difference between the atrophic part and the normal part by the method of Patent Document 1.

本発明は、胃粘膜が萎縮した萎縮部などの異常部と、正常部との色の差を強調した画像を生成する医用画像処理装置及び内視鏡システムを提供することを目的とする。   An object of the present invention is to provide a medical image processing apparatus and an endoscope system that generate an image in which a color difference between an abnormal portion such as an atrophy portion where the gastric mucosa is atrophy and a normal portion is emphasized.

本発明の医用画像処理装置は、第1カラー画像信号を入力処理する画像信号入力処理部と、第1カラー画像信号から色相を取得する色情報取得部と、色相に基づく色情報変換処理を経て得られる第2カラー画像信号の画素値を、第1カラー画像信号から得られる第1明るさ情報に基づいて、調整する明るさ調整部とを備え、色情報変換処理は、色相によって区別される複数の変換前の範囲のそれぞれについて、各変換前の範囲と対応付けられた変換先の範囲に移す処理である。   The medical image processing apparatus according to the present invention undergoes an image signal input processing unit that inputs a first color image signal, a color information acquisition unit that acquires a hue from the first color image signal, and a color information conversion process based on the hue. A brightness adjustment unit that adjusts the pixel value of the obtained second color image signal based on the first brightness information obtained from the first color image signal, and the color information conversion processing is distinguished by hue. This is a process of moving each of a plurality of pre-conversion ranges to a conversion destination range associated with each pre-conversion range.

本発明の医用画像処理装置は、第1カラー画像信号を入力処理する画像信号入力処理部と、第1カラー画像信号から彩度を取得する色情報取得部と、彩度に基づく色情報変換処理を経て得られる第2カラー画像信号の画素値を、第1カラー画像信号から得られる第1明るさ情報に基づいて、調整する明るさ調整部とを備え、色情報変換処理は、彩度によって区別される複数の変換前の範囲のそれぞれについて、各変換前の範囲と対応付けられた変換先の範囲に移す処理である。   The medical image processing apparatus of the present invention includes an image signal input processing unit that performs input processing of a first color image signal, a color information acquisition unit that acquires saturation from the first color image signal, and color information conversion processing based on saturation. A brightness adjustment unit that adjusts the pixel value of the second color image signal obtained through the first color information based on the first brightness information obtained from the first color image signal. Each of a plurality of pre-conversion ranges to be distinguished is a process of moving to a conversion destination range associated with each pre-conversion range.

本発明の医用画像処理装置は、第1カラー画像信号を入力処理する画像信号入力処理部と、第1カラー画像信号から第1色相及び第1彩度を取得する色情報取得部と、第1色相及び第1彩度に基づく色情報変換処理を経て得られる第2カラー画像信号の画素値を、第1カラー画像信号から得られる第1明るさ情報に基づいて、調整する明るさ調整部とを備え、色情報変換処理は、第1色相及び第1彩度によって区別される複数の変換前の範囲のそれぞれについて、各変換前の範囲と対応付けられた変換先の範囲に移す第1色情報変換処理であり、複数の変換前の範囲は、第1色相及び第1彩度で形成される第1特徴空間に分布する第1範囲、第2範囲、第3範囲であり、変換先の範囲は、第2色相及び第2彩度で形成される第2特徴空間に分布する第1範囲、第2範囲、第3範囲であり、第1色情報変換処理は、第2特徴空間における第1範囲を、第1特徴空間における第1範囲に対して彩度及び色相の少なくともいずれかと異ならせる第1色情報変換処理であって、第1色情報変換処理は、第2特徴空間における第1範囲と第2範囲との差D12yを、第1特徴空間における第1範囲と第2範囲との差D12xよりも大きくし、且つ、第2特徴空間における第1範囲と第3範囲との差D13yを、第1特徴空間における第1範囲と第3範囲との差D13xよりも大きくし、第1色情報変換処理前の差D12xは彩度の差であり、第1色情報変換処理前の差D13xは色相の差であり、第1色情報変換処理後の差D12yは彩度及び色相の差であり、第1色情報変換処理後の差D13yは色相の差である。   The medical image processing apparatus of the present invention includes an image signal input processing unit that performs input processing of a first color image signal, a color information acquisition unit that acquires a first hue and first saturation from the first color image signal, A brightness adjustment unit that adjusts the pixel value of the second color image signal obtained through the color information conversion process based on the hue and the first saturation based on the first brightness information obtained from the first color image signal; The color information conversion process includes a first color that is transferred to a conversion destination range associated with each pre-conversion range for each of a plurality of pre-conversion ranges distinguished by the first hue and the first saturation. In the information conversion process, the plurality of ranges before conversion are the first range, the second range, and the third range distributed in the first feature space formed by the first hue and the first saturation, The range is divided into a second feature space formed by the second hue and the second saturation. The first range, the second range, and the third range, and the first color information conversion process is configured to change the first range in the second feature space to at least saturation and hue with respect to the first range in the first feature space. A first color information conversion process that is different from any one of the first color information conversion processes, wherein the difference D12y between the first range and the second range in the second feature space is changed from the first range in the first feature space to the first range. And the difference D13y between the first range and the third range in the second feature space is larger than the difference D13x between the first range and the third range in the first feature space. The difference D12x before the first color information conversion process is a saturation difference, the difference D13x before the first color information conversion process is a hue difference, and the difference D12y after the first color information conversion process is a saturation. And a difference in hue D1 after the first color information conversion process y is the difference in hue.

第2カラー画像信号に基づいて特殊画像を生成する特殊画像処理部を備えることが好ましい。本発明の内視鏡システムは、上記記載の本発明の医用画像処理装置と、被検体を撮像して第1カラー画像信号を得るカラーの撮像センサとを備える。   It is preferable to include a special image processing unit that generates a special image based on the second color image signal. An endoscope system according to the present invention includes the medical image processing apparatus according to the present invention described above, and a color image sensor that captures a subject and obtains a first color image signal.

本発明によれば、胃粘膜が萎縮した萎縮部などの異常部と、正常部との色の差を強調した画像を生成することができる。   ADVANTAGE OF THE INVENTION According to this invention, the image which emphasized the color difference of abnormal parts, such as an atrophic part where the gastric mucosa contracted, and a normal part is generable.

第1実施形態の内視鏡システムの外観図である。1 is an external view of an endoscope system according to a first embodiment. 第1実施形態の内視鏡システムの機能を示すブロック図である。It is a block diagram which shows the function of the endoscope system of 1st Embodiment. 紫色光V、青色光B、緑色光G、及び赤色光Rの発光スペクトルを示すグラフである。It is a graph which shows the emission spectrum of purple light V, blue light B, green light G, and red light R. 第1特殊画像処理部の機能を示すブロック図である。It is a block diagram which shows the function of a 1st special image process part. 信号比空間用の第1色情報変換処理を示す説明図である。It is explanatory drawing which shows the 1st color information conversion process for signal ratio spaces. ab空間用の第1色情報変換処理を示す説明図である。It is explanatory drawing which shows the 1st color information conversion process for ab space. 第1処理を示す説明図である。It is explanatory drawing which shows a 1st process. 動径rと動径Erとの関係を示すグラフである。It is a graph which shows the relationship between the moving radius r and the moving radius Er. 信号比空間用の第1処理により得られる作用・効果を示す説明図である。It is explanatory drawing which shows the effect | action and effect obtained by the 1st process for signal ratio spaces. ab空間用の第1処理により得られる作用・効果を示す説明図である。It is explanatory drawing which shows the effect | action and effect obtained by the 1st process for ab space. 信号比空間用の第2処理を示す説明図である。It is explanatory drawing which shows the 2nd process for signal ratio spaces. 角度変更範囲R2内の角度θの移動範囲を示すグラフである。It is a graph which shows the movement range of angle (theta) in angle change range R2. 角度θと信号比空間用の第2処理後の角度Eθとの関係を示すグラフである。It is a graph which shows the relationship between angle (theta) and angle E (theta) after the 2nd process for signal ratio spaces. 信号比空間用の第2処理により得られる作用・効果を示す説明図である。It is explanatory drawing which shows the effect | action and effect obtained by the 2nd process for signal ratio spaces. ab空間用の第2処理により得られる作用・効果を示す説明図である。It is explanatory drawing which shows the effect | action and effect obtained by the 2nd process for ab space. 信号比空間用の第2色情報変換処理を示す説明図である。It is explanatory drawing which shows the 2nd color information conversion process for signal ratio spaces. ab空間用の第2色情報変換処理を示す説明図である。It is explanatory drawing which shows the 2nd color information conversion process for ab spaces. 信号比空間用の第3処理を示す説明図である。It is explanatory drawing which shows the 3rd process for signal ratio spaces. 角度変更範囲R3内の角度θの移動範囲を示すグラフである。It is a graph which shows the movement range of angle (theta) in angle change range R3. 角度θと信号比空間用の第3処理後の角度Eθとの関係を示すグラフである。It is a graph which shows the relationship between angle (theta) and angle E (theta) after the 3rd process for signal ratio spaces. 信号比空間用の第3処理により得られる作用・効果を示す説明図である。It is explanatory drawing which shows the effect | action and effect obtained by the 3rd process for signal ratio spaces. ab空間用の第3処理により得られる作用・効果を示す説明図である。It is explanatory drawing which shows the effect | action and effect obtained by the 3rd process for ab space. 第1特殊画像と第2特殊画像とを同時表示するモニタの画像図である。It is an image figure of the monitor which displays a 1st special image and a 2nd special image simultaneously. 本発明の一連の流れを示すフローチャートである。It is a flowchart which shows a series of flows of this invention. CrCb空間用の第1色情報変換部を有する第1特殊画像処理部の機能を示すブロック図である。It is a block diagram which shows the function of the 1st special image process part which has the 1st color information conversion part for CrCb space. CrCb空間用の第1色情報変換処理を示す説明図である。It is explanatory drawing which shows the 1st color information conversion process for CrCb space. CrCb空間用の第2色情報変換処理を示す説明図である。It is explanatory drawing which shows the 2nd color information conversion process for CrCb space. CrCb空間用の第1処理を示す説明図である。It is explanatory drawing which shows the 1st process for CrCb space. CrCb空間用の第2処理を示す説明図である。It is explanatory drawing which shows the 2nd process for CrCb space. CrCb空間用の第3処理を示す説明図である。It is explanatory drawing which shows the 3rd process for CrCb space. HS空間用の第1色情報変換部を有する第1特殊画像処理部の機能を示すブロック図である。It is a block diagram which shows the function of the 1st special image process part which has the 1st color information conversion part for HS space. HS空間用の第1色情報変換処理を示す説明図である。It is explanatory drawing which shows the 1st color information conversion process for HS space. HS空間用の第2色情報変換処理を示す説明図である。It is explanatory drawing which shows the 2nd color information conversion process for HS space. HS空間用の第1処理を示す説明図である。It is explanatory drawing which shows the 1st process for HS space. HS空間用の第2処理を示す説明図である。It is explanatory drawing which shows the 2nd process for HS space. HS空間用の第3処理を示す説明図である。It is explanatory drawing which shows the 3rd process for HS space. 第2実施形態の内視鏡システムの機能を示すブロック図である。It is a block diagram which shows the function of the endoscope system of 2nd Embodiment. 白色光の発光スペクトルを示すグラフである。It is a graph which shows the emission spectrum of white light. 特殊光の発光スペクトルを示すグラフである。It is a graph which shows the emission spectrum of special light. 第3実施形態の内視鏡システムの機能を示すブロック図である。It is a block diagram which shows the function of the endoscope system of 3rd Embodiment. 回転フィルタを示す平面図である。It is a top view which shows a rotation filter. 第4実施形態のカプセル内視鏡システムの機能を示す図である。It is a figure which shows the function of the capsule endoscope system of 4th Embodiment. 図3とは異なる紫色光V、青色光B、緑色光G、及び赤色光Rの発光スペクトルを示すグラフである。4 is a graph showing emission spectra of purple light V, blue light B, green light G, and red light R different from those in FIG. 3. 第1B画像信号が狭帯域信号である場合における第1信号比空間上での第2範囲及び第3範囲の位置と第1B画像信号が広帯域信号である場合における第1信号比空間上での第2範囲及び第3範囲の位置を示す説明図である。The position of the second range and the third range on the first signal ratio space when the 1B image signal is a narrowband signal and the first position on the first signal ratio space when the 1B image signal is a wideband signal. It is explanatory drawing which shows the position of 2 range and 3rd range.

[第1実施形態]
図1に示すように、第1実施形態の内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16と、モニタ18(表示部)と、コンソール19とを有する。内視鏡12は光源装置14と光学的に接続されるとともに、プロセッサ装置16と電気的に接続される。内視鏡12は、被検体内に挿入される挿入部12aと、挿入部12aの基端部分に設けられた操作部12bと、挿入部12aの先端側に設けられる湾曲部12c及び先端部12dを有している。操作部12bのアングルノブ12eを操作することにより、湾曲部12cは湾曲動作する。この湾曲動作に伴って、先端部12dが所望の方向に向けられる。
[First Embodiment]
As shown in FIG. 1, the endoscope system 10 according to the first embodiment includes an endoscope 12, a light source device 14, a processor device 16, a monitor 18 (display unit), and a console 19. The endoscope 12 is optically connected to the light source device 14 and electrically connected to the processor device 16. The endoscope 12 includes an insertion portion 12a to be inserted into a subject, an operation portion 12b provided at a proximal end portion of the insertion portion 12a, a bending portion 12c and a distal end portion 12d provided at the distal end side of the insertion portion 12a. have. By operating the angle knob 12e of the operation unit 12b, the bending unit 12c performs a bending operation. With this bending operation, the tip 12d is directed in a desired direction.

また、操作部12bには、アングルノブ12eの他、モード切替SW13aが設けられている。モード切替SW13aは、通常観察モードと、第1特殊観察モードと、第2特殊観察モードと、同時観察モードとの4種類のモード間の切り替え操作に用いられる。通常観察モードは、通常画像をモニタ18上に表示するモードである。第1特殊観察モードは、胃癌などの病変によって胃粘膜に萎縮が生じた萎縮部と正常部との境界を観察するために用いられ、第1特殊画像をモニタ18上に表示するモードである。第2特殊観察モードは、萎縮部と正常部の色の違いを観察するために用いられ、第2特殊画像をモニタ18上に表示するモードである。同時観察モードは、萎縮部と正常部の境界の観察と、萎縮部と正常部との色の違いの観察を同時に行うために用いられ、第1特殊画像と第2特殊画像をモニタ18上に同時表示するモードである。   The operation unit 12b is provided with a mode switching SW 13a in addition to the angle knob 12e. The mode switching SW 13a is used for a switching operation among four types of modes: a normal observation mode, a first special observation mode, a second special observation mode, and a simultaneous observation mode. The normal observation mode is a mode for displaying a normal image on the monitor 18. The first special observation mode is a mode in which a first special image is displayed on the monitor 18 and is used for observing a boundary between an atrophic part and a normal part in which gastric mucosa has atrophy due to a lesion such as gastric cancer. The second special observation mode is a mode for displaying the second special image on the monitor 18 and is used for observing the color difference between the atrophy part and the normal part. The simultaneous observation mode is used for simultaneously observing the boundary between the atrophy part and the normal part and observing the color difference between the atrophy part and the normal part. The first special image and the second special image are displayed on the monitor 18. This is a mode for simultaneous display.

プロセッサ装置16は、モニタ18及びコンソール19と電気的に接続される。モニタ18は、画像情報等を出力表示する。コンソール19は、機能設定等の入力操作を受け付けるUI(User Interface:ユーザーインターフェース)として機能する。なお、プロセッサ装置16には、画像情報等を記録する外付けの記録部(図示省略)を接続してもよい。   The processor device 16 is electrically connected to the monitor 18 and the console 19. The monitor 18 outputs and displays image information and the like. The console 19 functions as a UI (User Interface) that receives input operations such as function settings. The processor device 16 may be connected to an external recording unit (not shown) for recording image information and the like.

図2に示すように、光源装置14は、V-LED(Violet Light Emitting Diode)20a、B-LED(Blue Light Emitting Diode)20b、G-LED(Green Light Emitting Diode)20c、R-LED(Red Light Emitting Diode)20d、これら4色のLED20a〜20dの駆動を制御する光源制御部21、及び4色のLED20a〜20dから発せられる4色の光の光路を結合する光路結合部23を備えている。光路結合部23で結合された光は、挿入部12a内に挿通されたライトガイド41及び照明レンズ45を介して、被検体内に照射される。なお、LEDの代わりに、LD(Laser Diode)を用いてもよい。   As shown in FIG. 2, the light source device 14 includes a V-LED (Violet Light Emitting Diode) 20a, a B-LED (Blue Light Emitting Diode) 20b, a G-LED (Green Light Emitting Diode) 20c, and an R-LED (Red). Light Emitting Diode) 20d, a light source control unit 21 that controls driving of the four color LEDs 20a to 20d, and an optical path coupling unit 23 that couples the optical paths of the four color lights emitted from the four color LEDs 20a to 20d. . The light coupled by the optical path coupling unit 23 is irradiated into the subject through the light guide 41 and the illumination lens 45 inserted into the insertion unit 12a. An LD (Laser Diode) may be used instead of the LED.

図3に示すように、V-LED20aは、中心波長405±10nm、波長範囲380〜420nmの紫色光Vを発生する。B-LED20bは、中心波長460±10nm、波長範囲420〜500nmの青色光Bを発生する。G-LED20cは、波長範囲が480〜600nmに及ぶ緑色光Gを発生する。R-LED20dは、中心波長620〜630nmで、波長範囲が600〜650nmに及ぶ赤色光Rを発生する。   As shown in FIG. 3, the V-LED 20a generates purple light V having a center wavelength of 405 ± 10 nm and a wavelength range of 380 to 420 nm. The B-LED 20b generates blue light B having a center wavelength of 460 ± 10 nm and a wavelength range of 420 to 500 nm. The G-LED 20c generates green light G having a wavelength range of 480 to 600 nm. The R-LED 20d generates red light R having a center wavelength of 620 to 630 nm and a wavelength range of 600 to 650 nm.

光源制御部21は、通常観察モード、第1特殊観察モード、第2特殊観察モード、及び同時観察モードのいずれの観察モードにおいても、V-LED20a、B-LED20b、G-LED20c、及びR-LED20dを点灯する。したがって、紫色光V、青色光B、緑色光G、及び赤色光Rの4色の光が混色した光が、観察対象に照射される。また、光源制御部21は、通常観察モード時には、紫色光V、青色光B、緑色光G、赤色光R間の光量比がVc:Bc:Gc:Rcとなるように、各LED20a〜20dを制御する。一方、光源制御部21は、第1特殊観察モード、第2特殊観察モード、及び同時観察モード時には、紫色光V、青色光B、緑色光G、赤色光R間の光量比がVs:Bs:Gs:Rsとなるように、各LED20a〜20dを制御する。   The light source control unit 21 performs the V-LED 20a, the B-LED 20b, the G-LED 20c, and the R-LED 20d in any of the normal observation mode, the first special observation mode, the second special observation mode, and the simultaneous observation mode. Lights up. Accordingly, the observation target is irradiated with light in which four colors of light of purple light V, blue light B, green light G, and red light R are mixed. In the normal observation mode, the light source controller 21 controls the LEDs 20a to 20d so that the light quantity ratio among the violet light V, blue light B, green light G, and red light R is Vc: Bc: Gc: Rc. Control. On the other hand, in the first special observation mode, the second special observation mode, and the simultaneous observation mode, the light source control unit 21 has a light quantity ratio among violet light V, blue light B, green light G, and red light R that is Vs: Bs: Each LED 20a-20d is controlled so that it may become Gs: Rs.

図2に示すように、ライトガイド41は、内視鏡12及びユニバーサルコード(内視鏡12と光源装置14及びプロセッサ装置16とを接続するコード)内に内蔵されており、光路結合部23で結合された光を内視鏡12の先端部12dまで伝搬する。なお、ライトガイド41としては、マルチモードファイバを使用することができる。一例として、コア径105μm、クラッド径125μm、外皮となる保護層を含めた径がφ0.3〜0.5mmの細径なファイバケーブルを使用することができる。   As shown in FIG. 2, the light guide 41 is built in the endoscope 12 and the universal cord (the cord connecting the endoscope 12, the light source device 14, and the processor device 16). The combined light propagates to the distal end portion 12d of the endoscope 12. A multimode fiber can be used as the light guide 41. As an example, a thin fiber cable having a core diameter of 105 μm, a cladding diameter of 125 μm, and a diameter of φ0.3 to 0.5 mm including a protective layer serving as an outer shell can be used.

内視鏡12の先端部12dには、照明光学系30aと撮像光学系30bが設けられている。照明光学系30aは照明レンズ45を有しており、この照明レンズ45を介して、ライトガイド41からの光が観察対象に照射される。撮像光学系30bは、対物レンズ46、撮像センサ48を有している。観察対象からの反射光は、対物レンズ46を介して、撮像センサ48に入射する。これにより、撮像センサ48に観察対象の反射像が結像される。   The distal end portion 12d of the endoscope 12 is provided with an illumination optical system 30a and an imaging optical system 30b. The illumination optical system 30 a has an illumination lens 45, and light from the light guide 41 is irradiated to the observation target via the illumination lens 45. The imaging optical system 30 b includes an objective lens 46 and an imaging sensor 48. Reflected light from the observation object enters the image sensor 48 through the objective lens 46. As a result, a reflected image of the observation object is formed on the image sensor 48.

撮像センサ48はカラーの撮像センサであり、被検体の反射像を撮像して画像信号を出力する。この撮像センサ48は、CCD(Charge Coupled Device)撮像センサやCMOS(Complementary Metal-Oxide Semiconductor)撮像センサ等であることが好ましい。本発明で用いられる撮像センサ48は、R(赤)、G(緑)及びB(青)の3色のRGB画像信号を得るためのカラーの撮像センサ、即ち、Rフィルタが設けられたR画素、Gフィルタが設けられたG画素、Bフィルタが設けられたB画素を備えた、いわゆるRGB撮像センサである。   The imaging sensor 48 is a color imaging sensor that captures a reflection image of a subject and outputs an image signal. The image sensor 48 is preferably a CCD (Charge Coupled Device) image sensor, a CMOS (Complementary Metal-Oxide Semiconductor) image sensor, or the like. The image sensor 48 used in the present invention is a color image sensor for obtaining RGB image signals of three colors of R (red), G (green), and B (blue), that is, an R pixel provided with an R filter. , A so-called RGB imaging sensor including a G pixel provided with a G filter and a B pixel provided with a B filter.

なお、撮像センサ48としては、RGBのカラーの撮像センサの代わりに、C(シアン)、M(マゼンタ)、Y(イエロー)及びG(緑)の補色フィルタを備えた、いわゆる補色撮像センサであっても良い。補色撮像センサを用いる場合には、CMYGの4色の画像信号が出力されるため、補色−原色色変換によって、CMYGの4色の画像信号をRGBの3色の画像信号に変換する必要がある。また、撮像センサ48はカラーフィルタを設けていないモノクロ撮像センサであっても良い。この場合、光源制御部21は青色光B、緑色光G、赤色光Rを時分割で点灯させて、撮像信号の処理では同時化処理を加える必要がある。   The image sensor 48 is a so-called complementary color image sensor that includes complementary filters for C (cyan), M (magenta), Y (yellow), and G (green) instead of an RGB color image sensor. May be. When the complementary color imaging sensor is used, CMYG four-color image signals are output. Therefore, it is necessary to convert CMYG four-color image signals into RGB three-color image signals by complementary color-primary color conversion. . Further, the image sensor 48 may be a monochrome image sensor not provided with a color filter. In this case, the light source control unit 21 needs to turn on the blue light B, the green light G, and the red light R in a time-sharing manner, and add a synchronization process in the processing of the imaging signal.

撮像センサ48から出力される画像信号は、CDS・AGC回路50に送信される。CDS・AGC回路50は、アナログ信号である画像信号に相関二重サンプリング(CDS(Correlated Double Sampling))や自動利得制御(AGC(Auto Gain Control))を行う。CDS・AGC回路50を経た画像信号は、A/D変換器(A/D(Analog /Digital)コンバータ)52により、デジタル画像信号に変換される。A/D変換されたデジタル画像信号は、プロセッサ装置16に入力される。   The image signal output from the image sensor 48 is transmitted to the CDS / AGC circuit 50. The CDS / AGC circuit 50 performs correlated double sampling (CDS (Correlated Double Sampling)) and automatic gain control (AGC (Auto Gain Control)) on an image signal which is an analog signal. The image signal that has passed through the CDS / AGC circuit 50 is converted into a digital image signal by an A / D converter (A / D (Analog / Digital) converter) 52. The A / D converted digital image signal is input to the processor device 16.

プロセッサ装置16は、受信部53と、DSP(Digital Signal Processor)56と、ノイズ除去部58と、画像処理切替部60と、通常画像処理部62と、特殊画像処理部64と、映像信号生成部66とを備えている。受信部53は内視鏡12からのデジタルのRGB画像信号を受信する。R画像信号は撮像センサ48のR画素から出力される信号に対応し、G画像信号は撮像センサ48のG画素から出力される信号に対応し、B画像信号は撮像センサ48のB画素から出力される信号に対応している。   The processor device 16 includes a receiving unit 53, a DSP (Digital Signal Processor) 56, a noise removing unit 58, an image processing switching unit 60, a normal image processing unit 62, a special image processing unit 64, and a video signal generating unit. 66. The receiving unit 53 receives a digital RGB image signal from the endoscope 12. The R image signal corresponds to a signal output from the R pixel of the imaging sensor 48, the G image signal corresponds to a signal output from the G pixel of the imaging sensor 48, and the B image signal is output from the B pixel of the imaging sensor 48. Corresponds to the signal to be transmitted.

DSP56は、受信した画像信号に対して、欠陥補正処理、オフセット処理、ゲイン補正処理、リニアマトリクス処理、ガンマ変換処理、デモザイク処理等の各種信号処理を施す。欠陥補正処理では、撮像センサ48の欠陥画素の信号が補正される。オフセット処理では、欠陥補正処理が施されたRGB画像信号から暗電流成分が除かれ、正確な零レベルが設定される。ゲイン補正処理では、オフセット処理後のRGB画像信号に特定のゲインを乗じることにより信号レベルが整えられる。ゲイン補正処理後のRGB画像信号には、色再現性を高めるためのリニアマトリクス処理が施される。その後、ガンマ変換処理によって明るさや彩度が整えられる。リニアマトリクス処理後のRGB画像信号には、デモザイク処理(等方化処理、同時化処理とも言う)が施され、各画素で不足した色の信号が補間によって生成される。このデモザイク処理によって、全画素がRGB各色の信号を有するようになる。   The DSP 56 performs various signal processing such as defect correction processing, offset processing, gain correction processing, linear matrix processing, gamma conversion processing, and demosaicing processing on the received image signal. In the defect correction process, the signal of the defective pixel of the image sensor 48 is corrected. In the offset process, the dark current component is removed from the RGB image signal subjected to the defect correction process, and an accurate zero level is set. In the gain correction process, the signal level is adjusted by multiplying the RGB image signal after the offset process by a specific gain. The RGB image signal after the gain correction process is subjected to a linear matrix process for improving color reproducibility. After that, brightness and saturation are adjusted by gamma conversion processing. The RGB image signal after the linear matrix processing is subjected to demosaic processing (also referred to as isotropic processing or synchronization processing), and a signal of a color lacking in each pixel is generated by interpolation. By this demosaic processing, all the pixels have RGB signals.

ノイズ除去部58は、DSP56でガンマ補正等が施されたRGB画像信号に対してノイズ除去処理(例えば移動平均法やメディアンフィルタ法等)を施すことによって、RGB画像信号からノイズを除去する。ノイズが除去されたRGB画像信号は、画像処理切替部60に送信される。なお、本発明の「画像信号入力処理部」は、受信部53と、DSP56と、ノイズ除去部58を含む構成に対応する。   The noise removing unit 58 removes noise from the RGB image signal by performing noise removal processing (for example, a moving average method, a median filter method, etc.) on the RGB image signal subjected to gamma correction or the like by the DSP 56. The RGB image signal from which noise has been removed is transmitted to the image processing switching unit 60. The “image signal input processing unit” of the present invention corresponds to a configuration including the receiving unit 53, the DSP 56, and the noise removing unit 58.

画像処理切替部60は、モード切替SW13aにより、通常観察モードにセットされている場合には、RGB画像信号を通常画像処理部62に送信し、第1特殊観察モード、第2特殊観察モード、同時観察モードにセットされている場合には、RGB画像信号を特殊画像処理部64に送信する。   When the normal observation mode is set by the mode switching SW 13a, the image processing switching unit 60 transmits the RGB image signal to the normal image processing unit 62, and the first special observation mode, the second special observation mode, and the simultaneous When the observation mode is set, the RGB image signal is transmitted to the special image processing unit 64.

通常画像処理部62は、RGB画像信号に対して、色変換処理、色彩強調処理、構造強調処理を行う。色変換処理では、デジタルのRGB画像信号に対しては、3×3のマトリックス処理、階調変換処理、3次元LUT処理などを行い、色変換処理済みのRGB画像信号に変換する。次に、色変換処理済みのRGB画像信号に対して、各種色彩強調処理を施す。この色彩強調処理済みのRGB画像信号に対して、空間周波数強調等の構造強調処理を行う。構造強調処理が施されたRGB画像信号は、通常画像のRGB画像信号として、通常画像処理部62から映像信号生成部66に入力される。   The normal image processing unit 62 performs color conversion processing, color enhancement processing, and structure enhancement processing on the RGB image signal. In the color conversion process, a 3 × 3 matrix process, a gradation conversion process, a three-dimensional LUT process, and the like are performed on the digital RGB image signal to convert the digital RGB image signal into a color converted RGB image signal. Next, various color enhancement processes are performed on the RGB image signal that has been subjected to the color conversion process. A structure enhancement process such as spatial frequency enhancement is performed on the RGB image signal that has been subjected to the color enhancement process. The RGB image signal subjected to the structure enhancement processing is input from the normal image processing unit 62 to the video signal generation unit 66 as an RGB image signal of a normal image.

特殊画像処理部64は、第1特殊観察モード、または第2特殊観察モード、または同時観察モードに設定されている場合に作動する。この特殊画像処理部64は、第1特殊画像を生成する第1特殊画像処理部64aと、第2特殊画像を生成する第2特殊画像処理部64bと、第1特殊画像と第2特殊画像を同時表示するための同時表示用特殊画像を生成する同時表示用画像処理部64cとを備えている。ただし、第1特殊画像処理部64aは第2特殊画像を生成しない。また、第2特殊画像処理部64bは第1特殊画像を生成しない。これら第1特殊画像処理部64a、第2特殊画像処理部64b、同時表示用画像処理部64cの詳細については、後述する。特殊画像処理部64で生成された第1特殊画像、第2特殊画像、同時表示用特殊画像のRGB画像信号は、映像信号生成部66に入力される。   The special image processing unit 64 operates when the first special observation mode, the second special observation mode, or the simultaneous observation mode is set. The special image processing unit 64 includes a first special image processing unit 64a that generates a first special image, a second special image processing unit 64b that generates a second special image, a first special image, and a second special image. A simultaneous display image processing unit 64c for generating a simultaneous display special image for simultaneous display. However, the first special image processing unit 64a does not generate the second special image. Further, the second special image processing unit 64b does not generate the first special image. Details of the first special image processing unit 64a, the second special image processing unit 64b, and the simultaneous display image processing unit 64c will be described later. The RGB image signals of the first special image, the second special image, and the special image for simultaneous display generated by the special image processing unit 64 are input to the video signal generation unit 66.

映像信号生成部66は、通常画像処理部62又は特殊画像処理部64から入力されたRGB画像信号を、モニタ18で表示可能な画像として表示するための映像信号に変換する。この映像信号に基づいて、モニタ18は、通常画像、第1特殊画像、又は第2特殊画像をそれぞれ表示し、または第1特殊画像と第2特殊画像とを同時表示する。   The video signal generation unit 66 converts the RGB image signal input from the normal image processing unit 62 or the special image processing unit 64 into a video signal to be displayed as an image that can be displayed on the monitor 18. Based on the video signal, the monitor 18 displays a normal image, a first special image, or a second special image, or simultaneously displays the first special image and the second special image.

第1特殊画像処理部64aは、図4に示すように、逆ガンマ変換部70と、Log変換部71と、信号比算出部72と、信号比空間用の第1色情報変換部73と、RGB変換部77と、構造強調部78と、逆Log変換部79と、ガンマ変換部80とを備えている。また、第1特殊画像処理部64aは、RGB変換部77と構造強調部78との間に、明るさ調整部81を備えている。   As shown in FIG. 4, the first special image processing unit 64a includes an inverse gamma conversion unit 70, a Log conversion unit 71, a signal ratio calculation unit 72, a first color information conversion unit 73 for signal ratio space, An RGB conversion unit 77, a structure enhancement unit 78, an inverse log conversion unit 79, and a gamma conversion unit 80 are provided. Further, the first special image processing unit 64 a includes a brightness adjustment unit 81 between the RGB conversion unit 77 and the structure enhancement unit 78.

逆ガンマ変換部70は、入力されたRGB画像信号に対して逆ガンマ変換を施す。この逆ガンマ変換後のRGB画像信号は、検体からの反射率に対してリニアな反射率リニアRGB信号であるため、RGB画像信号のうち、検体の各種生体情報に関連する信号が占める割合が多くなる。なお、反射率リニアR画像信号を第1R画像信号とし、反射率リニアG画像信号を第1G画像信号とし、反射率Bリニア画像信号を第1B画像信号とする。   The inverse gamma conversion unit 70 performs inverse gamma conversion on the input RGB image signal. Since the RGB image signal after the inverse gamma conversion is a linear reflectance RGB signal that is linear with respect to the reflectance from the specimen, a large proportion of the RGB image signal is occupied by signals related to various biological information of the specimen. Become. The reflectance linear R image signal is a first R image signal, the reflectance linear G image signal is a first G image signal, and the reflectance B linear image signal is a first B image signal.

Log変換部71は、第1RGB画像信号(本発明の「第1カラー画像信号」に対応する)をそれぞれLog変換する。これにより、Log変換済みのR画像信号(logR)、Log変換済みのG画像信号(logG)、Log変換済みのB画像信号(logB)が得られる。信号比算出部72(本発明の「色情報取得部」に対応する)は、Log変換済みのG画像信号とB画像信号に基づいて差分処理(logG-logB =logG/B=-log(B/G))することにより、第1B/G比(本発明の「第1信号比Mx」に対応する)を算出する。ここで、「第1B/G比」は、-log(B/G)のうち「-log」を省略したものを表している。また、Log変換済みのR画像信号とG画像信号に基づいて差分処理(logR-logG=logR/G=-log(G/R))することにより、第1G/R比(本発明の「第1信号比Nx」に対応する)を算出する。第1G/R比については、第1B/G比と同様、-log(G/R)のうち「-log」を省略したものを表している。以下、第1B/G比、第1G/R比で形成される二次元色空間を「第1信号比空間(本発明の「第1特徴空間」に対応する)」と呼ぶ。   The Log conversion unit 71 performs Log conversion on each of the first RGB image signals (corresponding to the “first color image signal” of the present invention). As a result, an R image signal (logR) after Log conversion, a G image signal (logG) after Log conversion, and a B image signal (logB) after Log conversion are obtained. The signal ratio calculation unit 72 (corresponding to the “color information acquisition unit” of the present invention) performs difference processing (logG-logB = logG / B = -log (B / G)), the first B / G ratio (corresponding to the “first signal ratio Mx” of the present invention) is calculated. Here, the “first B / G ratio” represents a value obtained by omitting “-log” from −log (B / G). Further, the first G / R ratio (the “first” of the present invention) is obtained by performing differential processing (logR−logG = logR / G = −log (G / R)) based on the R-converted R image signal and the G image signal. 1 signal ratio Nx "). The first G / R ratio is the same as the first B / G ratio, except that “-log” is omitted from −log (G / R). Hereinafter, the two-dimensional color space formed with the first B / G ratio and the first G / R ratio is referred to as a “first signal ratio space (corresponding to the“ first feature space ”of the present invention)”.

なお、第1B/G比、第1G/R比は、B画像信号、G画像信号、R画像信号において同じ位置にある画素の画素値から求める。また、第1B/G比、第1G/R比は画素毎に求める。また、第1B/G比は、血管深さ(粘膜表面から特定の血管がある位置までの距離)に相関があることから、血管深さが異なると、それに伴って第1B/G比も変動する。また、第1G/R比は、血液量(ヘモグロビンインデックス)と相関があることから、血液量に変動が有ると、それに伴って第1G/R比も変動する。   Note that the first B / G ratio and the first G / R ratio are obtained from pixel values of pixels at the same position in the B image signal, the G image signal, and the R image signal. The first B / G ratio and the first G / R ratio are obtained for each pixel. In addition, the first B / G ratio has a correlation with the blood vessel depth (distance from the mucosal surface to the position where the specific blood vessel is located). Therefore, if the blood vessel depth is different, the first B / G ratio also varies accordingly. To do. Further, since the first G / R ratio is correlated with the blood volume (hemoglobin index), if the blood volume varies, the first G / R ratio also varies accordingly.

信号比空間用の第1色情報変換部73は、信号比算出部72で求めた第1B/G比、第1G/R比に対して、信号比空間用の第1色情報変換処理を施して、第2B/G比、第2G/R比に変換する。第2B/G比は本発明の「第2信号比My」に対応し、第2G/R比は本発明の「第2信号比Ny」に対応する。信号比空間用の第1色情報変換部73は、二次元LUT(Look Up Table)から構成され、第1B/G比、第1G/R比と、この第1B/G比、第1G/R比に基づく信号比空間用の第1色情報変換処理を行って得られる第2B/G比、第2G/R比とが対応付けて記憶されている。信号比空間用の第1色情報変換処理の詳細については、後述する。   The first color information conversion unit 73 for signal ratio space performs a first color information conversion process for signal ratio space on the first B / G ratio and the first G / R ratio obtained by the signal ratio calculation unit 72. The second B / G ratio and the second G / R ratio are converted. The second B / G ratio corresponds to the “second signal ratio My” of the present invention, and the second G / R ratio corresponds to the “second signal ratio Ny” of the present invention. The first color information conversion unit 73 for signal ratio space is composed of a two-dimensional LUT (Look Up Table), and the first B / G ratio, the first G / R ratio, the first B / G ratio, and the first G / R. The second B / G ratio and the second G / R ratio obtained by performing the first color information conversion process for the signal ratio space based on the ratio are stored in association with each other. Details of the first color information conversion process for the signal ratio space will be described later.

図5(A)に示すように、縦軸が第1B/G比で、横軸が第1G/R比で形成される第1信号比空間においては、正常粘膜が分布する第1範囲と、萎縮性胃炎により萎縮した萎縮粘膜が分布する第2範囲と、萎縮性胃炎により萎縮した萎縮粘膜下に存在し、萎縮とともに透見する深層血管が分布する第3範囲とが第1象限に分布している。この第1信号比空間では、第1範囲と第2範囲との間には差D12x(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13x(例えば、第1範囲の平均値と第3範囲の平均値)がある。差D12xは、画像上で第1範囲と第2範囲の色に関して彩度の差として表れ、差D13xは、画像上で第1範囲と第3範囲の色に関して色相の差として表れる。   As shown in FIG. 5A, in the first signal ratio space in which the vertical axis is the first B / G ratio and the horizontal axis is the first G / R ratio, a first range in which normal mucous membranes are distributed; A second range in which the atrophic mucosa atrophied due to atrophic gastritis is distributed and a third range in which a deep blood vessel present under the atrophic mucosa atrophy due to atrophic gastritis and seen through with atrophy are distributed in the first quadrant. ing. In the first signal ratio space, there is a difference D12x (for example, an average value of the first range and an average value of the second range) between the first range and the second range, and the first range and the third range Is a difference D13x (for example, the average value of the first range and the average value of the third range). The difference D12x appears as a saturation difference with respect to the colors in the first range and the second range on the image, and the difference D13x appears as a difference in hue with respect to the colors in the first range and the third range on the image.

なお、図5(A)において、「第1」は「第1範囲」を、「第2」は「第2範囲」を、「第3」は「第3範囲」を示している。これら「第1」〜「第3」の表記については、以下の図においても、同様である。また、図5(A)では、縦軸の「第1B/G比」のうち「第1」を省略しており、横軸の「第1G/R比」のうち「第1」を省略している。以下の図においても、同様の省略を行っている。   In FIG. 5A, “first” indicates “first range”, “second” indicates “second range”, and “third” indicates “third range”. These notations “first” to “third” are the same in the following drawings. In FIG. 5A, “first” of “first B / G ratio” on the vertical axis is omitted, and “first” of “first G / R ratio” on the horizontal axis is omitted. ing. Similar omissions are made in the following figures.

一方、信号比空間用の第1色情報変換処理で得られる第2B/G比、第2G/R比で形成される第2信号比空間(縦軸は第2B/G比を、横軸は第2G/R比を示す)においては、図5(B)に示すように、第1信号比空間と同様、第1範囲、第2範囲、第3範囲がそれぞれ分布している。第2信号比空間(本発明の「第2特徴空間」に対応する)では、第1範囲と第2範囲との間には差D12y(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13y(例えば、第1範囲の平均値と第3範囲の平均値)とがある。   On the other hand, the second signal ratio space formed by the second B / G ratio and the second G / R ratio obtained by the first color information conversion processing for the signal ratio space (the vertical axis indicates the second B / G ratio, and the horizontal axis indicates In the second G / R ratio), as shown in FIG. 5B, the first range, the second range, and the third range are distributed as in the first signal ratio space. In the second signal ratio space (corresponding to the “second feature space” of the present invention), there is a difference D12y between the first range and the second range (for example, the average value of the first range and the average of the second range). Value), and there is a difference D13y (for example, an average value of the first range and an average value of the third range) between the first range and the third range.

差D12yは、画像上で第1範囲と第2範囲の色に関して彩度及び色相の差として表れるとともに、差D12yは差D12xよりも大きくなっている。また、差D13yは、差D13xと同様、画像上で第1範囲と第3範囲の色に関して色相の差として表れるとともに、差D13yは差D13xよりも大きくなっている。更には、第2信号比空間上での第1範囲の座標は、第1信号比空間上での第1範囲の座標と異なっている。即ち、信号比空間用の第1色情報変換処理の変換前後で、第1範囲の彩度と色相の少なくともいずれかが異なっている。   The difference D12y appears as a difference in saturation and hue with respect to the colors in the first range and the second range on the image, and the difference D12y is larger than the difference D12x. Similarly to the difference D13x, the difference D13y appears as a hue difference with respect to the colors of the first range and the third range on the image, and the difference D13y is larger than the difference D13x. Furthermore, the coordinates of the first range on the second signal ratio space are different from the coordinates of the first range on the first signal ratio space. That is, at least one of the saturation and the hue in the first range is different before and after the conversion of the first color information conversion process for the signal ratio space.

以上のように、第1範囲と第2範囲の差及び第1範囲と第3範囲との差は、信号比空間用の第1色情報変換処理によって大きくなるとともに、信号比空間用の第1色情報変換処理の変換前後で、第1範囲の彩度と色相の少なくともいずれかが異なっている。これにより、信号比空間用の第1色情報変換処理済みの第2B/G比、第2G/R比に基づいて得られる第1特殊画像上では、萎縮粘膜や、萎縮粘膜下で萎縮により透見しつつある深層血管などがある萎縮部と、正常粘膜がある正常部との境界が明瞭化して表示される。   As described above, the difference between the first range and the second range and the difference between the first range and the third range are increased by the first color information conversion processing for the signal ratio space, and the first for the signal ratio space. At least one of the saturation and the hue in the first range is different before and after the color information conversion process. As a result, on the first special image obtained based on the second B / G ratio and the second G / R ratio that have been subjected to the first color information conversion processing for the signal ratio space, it is transparent by atrophy under the atrophic mucosa or under the atrophic mucosa. The boundary between the atrophic part having a deep blood vessel or the like being viewed and the normal part having a normal mucosa is clarified and displayed.

なお、第1RGB画像信号をLab変換部(図示しない(本発明の「色情報取得部」に対応する))でLab変換して得られる第1要素a*_x、b*_x(CIE Lab空間の色味の要素a*、b*を表す。以下同様。)に対して、上記の信号比空間用の第1色情報変換処理と同様のab空間用の第1色情報変換処理を施すことで、上記と同様の作用効果を得ることができる。 Note that the first elements a * _x and b * _x (in the CIE Lab space) obtained by performing the Lab conversion on the first RGB image signal by a Lab conversion unit (not shown (corresponding to the “color information acquisition unit” of the present invention)). By applying the first color information conversion process for ab space similar to the first color information conversion process for signal ratio space described above to color elements a * and b * (the same applies hereinafter)) The same effects as above can be obtained.

ここで、図6(A)は、第1要素a*_x、b*_xで形成される第1ab空間上での第1〜第3範囲の分布、第1範囲と第2範囲との差D12x、及び第1範囲と第3範囲との差D13xを表している。一方、図6(B)は、ab空間用の第1色情報変換処理により得られる第2要素a*_y、b*_yで形成される第2ab空間における第1〜第3範囲の分布、第1範囲と第2範囲との差D12y、及び第1範囲と第3範囲との差D13yを表している。これら図6に示すように、ab空間用の第1色情報変換処理により、第1範囲と第2範囲との差及び第1範囲と第3範囲との差を大きくすることができる。なお、第1ab空間は本発明の「第1特徴空間」に対応しており、第2ab空間は本発明の「第2特徴空間」に対応している。 Here, FIG. 6A shows the distribution of the first to third ranges on the first ab space formed by the first elements a * _x and b * _x, and the difference D12x between the first range and the second range. , And a difference D13x between the first range and the third range. On the other hand, FIG. 6B shows the distributions of the first to third ranges in the second ab space formed by the second elements a * _y and b * _y obtained by the first color information conversion process for the ab space. A difference D12y between the first range and the second range and a difference D13y between the first range and the third range are shown. As shown in FIG. 6, the first color information conversion process for the ab space can increase the difference between the first range and the second range and the difference between the first range and the third range. The first ab space corresponds to the “first feature space” of the present invention, and the second ab space corresponds to the “second feature space” of the present invention.

RGB変換部77(本発明の「カラー画像信号変換部」に対応する)では、第1RGB画像信号のうち少なくともいずれか1つの画像信号を用いて、信号比空間用の第1色情報変換部73を経た第2B/G比、第2G/R比を、第2RGB画像信号(本発明の「第2カラー画像信号」に対応する)に変換する。例えば、RGB変換部77は、第1RGB画像信号のうちG画像信号と第2B/G比とに基づく演算を行うことにより、第2B/G比を第2B画像信号に変換する。また、RGB変換部77は、第1RGB画像信号のうちG画像信号と第2G/R比に基づく演算を行うことにより、第2G/R比を第2R画像信号に変換する。また、RGB変換部77は、第1G画像信号については、特別な変換を施すことなく、第2G画像信号として出力する。   The RGB conversion unit 77 (corresponding to the “color image signal conversion unit” of the present invention) uses at least one image signal of the first RGB image signals to use the first color information conversion unit 73 for signal ratio space. The second B / G ratio and the second G / R ratio that have undergone the above are converted into a second RGB image signal (corresponding to the “second color image signal” of the present invention). For example, the RGB conversion unit 77 converts the second B / G ratio into the second B image signal by performing a calculation based on the G image signal and the second B / G ratio in the first RGB image signal. Further, the RGB converter 77 converts the second G / R ratio into the second R image signal by performing an operation based on the G image signal and the second G / R ratio in the first RGB image signal. In addition, the RGB conversion unit 77 outputs the first G image signal as the second G image signal without performing any special conversion.

明るさ調整部81は、第1RGB画像信号と第2RGB画像信号とを用いて、第2RGB画像信号の画素値を調整する。明るさ調整部81で、第2RGB画像信号の画素値を調整するのは、以下の理由による。第2RGB画像信号は、信号比空間用の第1色情報変換部73で信号比空間用の第1色情報変換処理を行っているため、第1RGB画像信号と明るさが大きく変わってしまう可能性がある。そこで、明るさ調整部81で第2RGB画像信号の画素値を調整することによって、明るさ調整後の第2RGB画像信号が第1RGB画像信号と同じ明るさになるようにする。   The brightness adjustment unit 81 adjusts the pixel value of the second RGB image signal using the first RGB image signal and the second RGB image signal. The brightness adjustment unit 81 adjusts the pixel value of the second RGB image signal for the following reason. Since the second RGB image signal is subjected to the first color information conversion processing for the signal ratio space by the first color information conversion unit 73 for the signal ratio space, there is a possibility that the brightness of the second RGB image signal is greatly changed from that of the first RGB image signal. There is. Therefore, the brightness adjustment unit 81 adjusts the pixel value of the second RGB image signal so that the brightness-adjusted second RGB image signal has the same brightness as the first RGB image signal.

明るさ調整部81は、第1RGB画像信号に基づいて第1明るさ情報Yinを求める第1明るさ情報算出部81aと、第2RGB画像信号に基づいて第2明るさ情報Youtを求める第2明るさ情報算出部81bとを備えている。第1明るさ情報算出部81aは、「kr×第1R画像信号の画素値+kg×第1G画像信号の画素値+kb×第1B画像信号の画素値」の演算式に従って、第1明るさ情報Yinを算出する。第2明るさ情報算出部81bにおいても、第1明るさ情報算出部81aと同様に、上記と同様の演算式に従って、第2明るさ情報Youtを算出する。第1明るさ情報Yinと第2明るさ情報Youtが求まると、明るさ調整部81は、以下の式(E1)〜(E3)に基づく演算を行うことにより、第2RGB画像信号の画素値を調整する。
(E1):R*=第2R画像信号の画素値×Yin/Yout
(E2):G*=第2G画像信号の画素値×Yin/Yout
(E3):B*=第2B画像信号の画素値×Yin/Yout
なお、「R*」は明るさ調整後の第2R画像信号を、「G*」は明るさ調整後の第2G画像信号を、「B*」は明るさ調整後の第2B画像信号を表している。また、「kr」、「kg」、「kb」は「0」〜「1」の範囲にある任意の定数である。
The brightness adjustment unit 81 has a first brightness information calculation unit 81a that calculates first brightness information Yin based on the first RGB image signal, and a second brightness that calculates second brightness information Yout based on the second RGB image signal. And an information calculation unit 81b. The first brightness information calculation unit 81a performs the first brightness information Yin according to an arithmetic expression of “kr × pixel value of the first R image signal + kg × pixel value of the first G image signal + kb × pixel value of the first B image signal”. Is calculated. Similarly to the first brightness information calculation unit 81a, the second brightness information calculation unit 81b calculates the second brightness information Yout according to the same arithmetic expression as described above. When the first brightness information Yin and the second brightness information Yout are obtained, the brightness adjustment unit 81 performs the calculation based on the following equations (E1) to (E3), thereby calculating the pixel values of the second RGB image signal. adjust.
(E1): R * = pixel value of second R image signal × Yin / Yout
(E2): G * = pixel value of the second G image signal × Yin / Yout
(E3): B * = pixel value of second B image signal × Yin / Yout
“R * ” represents the second R image signal after brightness adjustment, “G * ” represents the second G image signal after brightness adjustment, and “B * ” represents the second B image signal after brightness adjustment. ing. “Kr”, “kg”, and “kb” are arbitrary constants in the range of “0” to “1”.

構造強調部78では、明るさ調整部81で明るさ調整後の第2RGB画像信号に対して構造強調処理を施す。構造強調処理としては、周波数フィルタリングなどが用いられる。逆Log変換部79は、構造強調部78を経た第2RGB画像信号に対して、逆Log変換を施す。これにより、真数の画素値を有する第2RGB画像信号が得られる。ガンマ変換部80は、逆Log変換部79を経た第2RGB画像信号に対してガンマ変換を施す。これにより、モニタ18などの出力デバイスに適した階調を有する第2RGB画像信号が得られる。ガンマ変換部80を経たRGB画像信号は、第1特殊画像のRGB画像信号として、同時表示用画像処理部64c又は映像信号生成部66に送られる。   The structure enhancement unit 78 performs structure enhancement processing on the second RGB image signal after the brightness adjustment by the brightness adjustment unit 81. As the structure enhancement processing, frequency filtering or the like is used. The inverse log conversion unit 79 performs inverse log conversion on the second RGB image signal that has passed through the structure enhancement unit 78. As a result, a second RGB image signal having a true pixel value is obtained. The gamma conversion unit 80 performs gamma conversion on the second RGB image signal that has passed through the inverse log conversion unit 79. As a result, a second RGB image signal having a gradation suitable for an output device such as the monitor 18 is obtained. The RGB image signal that has passed through the gamma conversion unit 80 is sent to the simultaneous display image processing unit 64c or the video signal generation unit 66 as an RGB image signal of the first special image.

信号比空間用の第1色情報変換処理は、極座標変換処理と、信号比空間用の第1処理と第2処理と、直交座標変換処理とから構成される。まず、信号比算出部72で得られた第1B/G比、第1G/R比に対して極座標変換処理を施すことによって、動径rと角度θに変換する。次に、信号比空間用の第1処理を行う。図7に示すように、第1信号比空間上で、動径変更範囲R1内にある座標P1の動径rを変更し、動径変更範囲R1外の座標の動径は変更しない。動径変更範囲R1は、動径rが「rA」から「rB」の範囲内であり、且つ、角度θが「θA」から「θB」の範囲内である(rA<rB、θA<θB)。この動径変更範囲R1は、萎縮性胃炎により萎縮した萎縮粘膜が分布する第2範囲を含む領域であり、正常粘膜が分布する第1範囲と、萎縮性胃炎により萎縮した萎縮粘膜下に存在し、萎縮とともに透見する深層血管が分布する第3範囲とを含まないように設定されている。   The first color information conversion process for the signal ratio space includes a polar coordinate conversion process, a first process and a second process for the signal ratio space, and an orthogonal coordinate conversion process. First, a polar coordinate conversion process is performed on the first B / G ratio and the first G / R ratio obtained by the signal ratio calculation unit 72 to convert to a moving radius r and an angle θ. Next, a first process for signal ratio space is performed. As shown in FIG. 7, on the first signal ratio space, the radius r of the coordinate P1 within the radius change range R1 is changed, and the radius of the coordinates outside the radius change range R1 is not changed. In the radius vector changing range R1, the radius vector r is in the range from “rA” to “rB”, and the angle θ is in the range from “θA” to “θB” (rA <rB, θA <θB). . This radius change range R1 is a region including a second range in which atrophic mucosa atrophy due to atrophic gastritis is distributed, and exists under the first range in which a normal mucosa is distributed and the atrophic mucosa atrophy due to atrophic gastritis. The third range in which the deep blood vessels seen through with atrophy are distributed is not included.

なお、信号比空間用の第1処理では、動径変更範囲R1の座標の角度θについて変更は行わない。また、信号比空間用の第1処理では、動径rが「rp」から「rB」の範囲内においては、動径変化率が「1」よりも大きい動径変化率Vxで動径rを変更する拡張処理を行い、動径rが「rA」から「rp」の範囲内においては、動径変化率が「1」よりも小さい動径変化率Vyで動径rを変更する圧縮処理を行うことが好ましい。なお、動径変化率が「1」の場合は、動径rを変更する処理を行っても、動径rの大きさは変わらない。   In the first processing for the signal ratio space, the angle θ of the coordinate of the radius vector change range R1 is not changed. Further, in the first processing for the signal ratio space, when the radius r is in the range of “rp” to “rB”, the radius r is set at the radius change rate Vx where the radius change rate is larger than “1”. An expansion process to be changed is performed, and a compression process for changing the radius r at a radius change rate Vy with a radius change rate smaller than “1” is performed when the radius r is within the range of “rA” to “rp”. Preferably it is done. If the radius change rate is “1”, the radius r does not change even if the radius r is changed.

以上の信号比空間用の第1処理を行うことによって、図8に示すように、動径変更範囲R1内の動径rは、動径rよりも小さくなる動径Erに変更される。また、動径変化率は、動径rと動径Erとを関係づける線CV1の接線を示す「直線L1」の傾きで表わされ、「rp」から「rB」の範囲内では直線L1の傾きは「1」よりも大きいのに対して、「rA」から「rp」内では直線L1の傾きは「1」よりも小さくなっている。これに対して、動径変更範囲R1外の動径rは、動径rと大きさが変わらない動径Erに変換される(恒等変換)。また、動径変更範囲R1外においては、直線L1の傾きは「1」になっている。   By performing the above first processing for the signal ratio space, as shown in FIG. 8, the moving radius r in the moving radius change range R1 is changed to the moving radius Er smaller than the moving radius r. The radial change rate is represented by the slope of “straight line L1” indicating the tangent of line CV1 relating radial radius r and radial radius Er, and within the range from “rp” to “rB” While the inclination is larger than “1”, the inclination of the straight line L1 is smaller than “1” within “rA” to “rp”. On the other hand, the moving radius r outside the moving radius change range R1 is converted to a moving radius Er that is not different from the moving radius r (identity conversion). Further, outside the moving radius change range R1, the slope of the straight line L1 is “1”.

図9(A)に示すように、信号比空間用の第1処理前には、第1範囲、第2範囲、及び第3範囲は、それぞれ近づいているが、信号比空間用の第1処理後には、図9(B)に示すように、第1範囲と第3範囲の座標はそのまま維持した状態で、第2範囲の座標だけ、原点を含む基準範囲に移動する。基準範囲は、信号比空間用の第1処理後の第1範囲及び第3範囲を含まない低彩度の範囲である。   As shown in FIG. 9A, the first range, the second range, and the third range are close to each other before the first processing for the signal ratio space, but the first processing for the signal ratio space. Thereafter, as shown in FIG. 9B, the coordinates of the first range and the third range are maintained as they are, and only the coordinates of the second range are moved to the reference range including the origin. The reference range is a low saturation range that does not include the first and third ranges after the first processing for the signal ratio space.

なお、複数の第1色情報が第1要素a*_x、b*_x場合にも、図10に示すように、ab空間用の第1処理により、第1範囲と第3範囲の座標はそのまま維持した状態で、第2範囲の座標だけ、原点を含む基準範囲に移動する。ここで、図10(A)はab空間用の第1処理前の第1〜第3範囲の分布を、図10(B)はab空間用の第1処理後の第1〜第3範囲の分布を表している。 Even when the plurality of first color information is the first element a * _x, b * _x, as shown in FIG. 10, the coordinates of the first range and the third range remain unchanged by the first processing for the ab space. In the maintained state, only the coordinates of the second range are moved to the reference range including the origin. 10A shows the distribution of the first to third ranges before the first processing for the ab space, and FIG. 10B shows the distribution of the first to third ranges after the first processing for the ab space. Represents the distribution.

信号比空間用の第2処理では、図11Aに示すように、角度変更範囲R2内にある座標P2の角度θを変更する一方で、角度変更範囲R2外の座標については角度θの変更は行わない。角度変更範囲R2は、第1範囲と第3範囲とを含むように設定されている。なお、信号比空間用の第2処理では、角度変更範囲R2の座標の動径rについて変更は行わない。   In the second processing for the signal ratio space, as shown in FIG. 11A, the angle θ of the coordinate P2 within the angle change range R2 is changed, while the angle θ is changed for coordinates outside the angle change range R2. Absent. The angle change range R2 is set so as to include the first range and the third range. In the second process for the signal ratio space, the radius r of the coordinates in the angle change range R2 is not changed.

角度変更範囲R2においては、第1範囲と第3範囲との間に、第1中心線CL1が設定されている。第1中心線CL1は角度θcであり、角度変更範囲R2のうち、信号比空間用の第2処理では、角度θc以下の角度θを、時計回り方向に回転させるのに対して、角度θc以上の角度θを、反時計回り方向に回転させる。なお、第1中心線CL1から一定の範囲R2xの角度θについては、角度変化率が「1」よりも大きい角度変化率Wxで変更する拡張処理を行い、範囲R2xを超える範囲R2yの角度θについては、角度変化率が「1」よりも小さい角度変化率Wyで変更する圧縮処理を行うことが好ましい。また、信号比空間用の第2処理によって、角度変更範囲R2の座標を、第1中心線CL1から±90度の範囲(信号比空間において、「正」の横軸を0°とし、角度を0°から360°で表現した場合には、「270°+θc」から「θc+90°」までの範囲P(図11B参照))内で移動させることが好ましい。なお、角度変化率が「1」の場合は、角度θを変更する処理を行っても、角度θの大きさは変わらない。   In the angle change range R2, a first center line CL1 is set between the first range and the third range. The first center line CL1 is an angle θc, and in the second processing for the signal ratio space in the angle change range R2, the angle θ that is equal to or smaller than the angle θc is rotated in the clockwise direction, but is equal to or larger than the angle θc. Is rotated counterclockwise. For the angle θ of the certain range R2x from the first center line CL1, an expansion process is performed in which the angle change rate is changed at an angle change rate Wx greater than “1”, and the angle θ of the range R2y exceeding the range R2x. It is preferable to perform a compression process in which the angle change rate is changed at an angle change rate Wy smaller than “1”. Further, by the second processing for the signal ratio space, the coordinates of the angle change range R2 are set within a range of ± 90 degrees from the first center line CL1 (in the signal ratio space, the “positive” horizontal axis is set to 0 °, and the angle is When expressed from 0 ° to 360 °, it is preferably moved within a range P (see FIG. 11B) from “270 ° + θc” to “θc + 90 °”. When the angle change rate is “1”, the magnitude of the angle θ does not change even if the process of changing the angle θ is performed.

以上の信号比空間用の第2処理を行うことによって、図12に示すように、角度変更範囲R2内のうち、角度θc以下の角度θは、角度θよりも小さくなる角度Eθに変更される一方で、角度θc以上の角度θは、角度θよりも大きくなる角度Eθに変更される。また、角度変化率は、角度θと角度Eθとを関係づける線CV2の接線を示す「直線L2」の傾きで表わされ、範囲R2x内では直線L2の傾きは「1」よりも大きいのに対して、範囲R2y内では直線L2の傾きは「1」よりも小さくなっている。これに対して、角度変更範囲R2外の角度θは、角度θと大きさが変わらない角度Eθに変換される(恒等変換)。また、角度変更範囲R2外においては、直線L2の傾きは「1」になっている。   By performing the above-described second processing for the signal ratio space, as shown in FIG. 12, the angle θ that is equal to or smaller than the angle θc in the angle change range R2 is changed to an angle Eθ that is smaller than the angle θ. On the other hand, the angle θ greater than the angle θc is changed to an angle Eθ that is larger than the angle θ. The angle change rate is represented by the slope of the “straight line L2” indicating the tangent of the line CV2 relating the angle θ and the angle Eθ, and the slope of the straight line L2 is larger than “1” within the range R2x. On the other hand, in the range R2y, the slope of the straight line L2 is smaller than “1”. On the other hand, the angle θ outside the angle change range R2 is converted into an angle Eθ that does not change in magnitude from the angle θ (identity conversion). Further, outside the angle change range R2, the slope of the straight line L2 is “1”.

図13A(A)に示すように、信号比空間用の第2処理前には、第1範囲と第3範囲は、第2範囲とは離れているものの、第1範囲と第3範囲とは互いに近づいている。信号比空間用の第2処理後には、図13A(B)に示すように、第2範囲の座標は基準範囲に維持した状態で、第1範囲の座標の大部分が信号比空間の第2象限に移動する一方で、第3範囲の座標の大部分が信号比空間の第4象限に移動する。信号比空間用の第2処理が完了すると、信号比空間用の第2処理済みの動径rと角度θに対して直交座標変換処理が施される。これにより、第2B/G比、第2G/R比が得られる。   As shown in FIG. 13A (A), before the second processing for the signal ratio space, the first range and the third range are separated from the second range, but the first range and the third range are different from each other. Approaching each other. After the second processing for the signal ratio space, as shown in FIG. 13A (B), the coordinates of the second range are maintained in the reference range, and most of the coordinates of the first range are the second in the signal ratio space. While moving to the quadrant, most of the coordinates of the third range move to the fourth quadrant of the signal ratio space. When the second processing for the signal ratio space is completed, orthogonal coordinate conversion processing is performed on the radius r and the angle θ that have been subjected to the second processing for the signal ratio space. Thereby, the 2nd B / G ratio and the 2nd G / R ratio are obtained.

なお、複数の第1色情報が第1要素a*_x、b*_xの場合にも、図13Bに示すように、ab空間用の第2処理により、第2範囲の座標は基準範囲に維持した状態で、第1範囲の座標の大部分が第2ab空間の第2象限に移動する一方で、第3範囲の座標の大部分が第2ab空間の第4象限に移動する。ここで、図13B(A)はab空間用の第2処理前の第1〜第3範囲の分布を、図13B(B)はab空間用の第2処理後の第1〜第3範囲の分布を表している。また、ab空間用の第1処理及び第2処理後に得られる第2RGB画像信号に対しては、明るさ調整部81で、画素値の調整を行うことが好ましい。第2RGB画像信号の画素値調整方法は、上記と同様である。 Even when the plurality of first color information are the first elements a * _x and b * _x, the coordinates of the second range are maintained in the reference range by the second processing for ab space as shown in FIG. 13B. In this state, most of the coordinates of the first range move to the second quadrant of the second ab space, while most of the coordinates of the third range move to the fourth quadrant of the second ab space. Here, FIG. 13B (A) shows the distribution of the first to third ranges before the second processing for the ab space, and FIG. 13B (B) shows the distribution of the first to third ranges after the second processing for the ab space. Represents the distribution. Further, it is preferable that the brightness adjustment unit 81 adjusts the pixel value for the second RGB image signal obtained after the first process and the second process for the ab space. The pixel value adjustment method for the second RGB image signal is the same as described above.

第2特殊画像処理部64bは、第1特殊画像処理部64aとほぼ構成同じを備えているが、信号比空間用の第1色情報変換部73に代えて、信号比空間用の第2色情報変換部(図示しない)を有している。信号比空間用の第2色情報変換部は、信号比算出部72で求めた第1B/G比、第1G/R比に対して、信号比空間用の第2色情報変換処理を施して、第2B/G比、第2G/R比(本発明の「複数の第2色情報」に対応する)に変換する。信号比空間用の第2色情報変換部は、二次元LUT(Look Up Table)から構成され、第1B/G比、第1G/R比と、この第1B/G比、第1G/R比に基づく信号比空間用の第2色情報変換処理を行って得られる第2B/G比、第2G/R比とが対応付けて記憶されている。信号比空間用の第2色情報変換処理の詳細については、後述する。   The second special image processing unit 64b has substantially the same configuration as the first special image processing unit 64a, but instead of the first color information conversion unit 73 for signal ratio space, a second color for signal ratio space. An information conversion unit (not shown) is included. The second color information conversion unit for the signal ratio space performs a second color information conversion process for the signal ratio space on the first B / G ratio and the first G / R ratio obtained by the signal ratio calculation unit 72. , The second B / G ratio, and the second G / R ratio (corresponding to “a plurality of second color information” of the present invention). The second color information conversion unit for the signal ratio space includes a two-dimensional LUT (Look Up Table). The first B / G ratio, the first G / R ratio, and the first B / G ratio and the first G / R ratio. The second B / G ratio and the second G / R ratio obtained by performing the second color information conversion process for the signal ratio space based on the above are stored in association with each other. Details of the second color information conversion processing for the signal ratio space will be described later.

図14(A)に示すように、縦軸が第1B/G比で、横軸が第1G/R比で形成される第1信号比空間において、第1範囲と、第2範囲と、第3範囲とが分布しているとともに、第1範囲と第2範囲との間には差D12x(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13x(例えば、第1範囲の平均値と第3範囲の平均値)がある(図5(A)と同様である)。   As shown in FIG. 14A, in the first signal ratio space in which the vertical axis is the first B / G ratio and the horizontal axis is the first G / R ratio, the first range, the second range, 3 ranges are distributed, and there is a difference D12x (for example, an average value of the first range and an average value of the second range) between the first range and the second range. There is a difference D13x (for example, the average value of the first range and the average value of the third range) between the ranges (similar to FIG. 5A).

一方、信号比空間用の第2色情報変換処理で得られる第2B/G比、第2G/R比で形成される第2信号比空間(縦軸が第2B/G比、横軸が第2G/R比)においては、図14(B)に示すように、第1信号比空間と同様、第1範囲、第2範囲、第3範囲がそれぞれ分布している。第2信号比空間では、第1範囲と第2範囲との間には差D12y(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13y(例えば、第1範囲の平均値と第3範囲の平均値)がある。   On the other hand, the second signal ratio space formed by the second B / G ratio and the second G / R ratio obtained by the second color information conversion processing for the signal ratio space (the vertical axis is the second B / G ratio, and the horizontal axis is the second 2G / R ratio), the first range, the second range, and the third range are distributed as in the first signal ratio space, as shown in FIG. 14B. In the second signal ratio space, there is a difference D12y (for example, the average value of the first range and the average value of the second range) between the first range and the second range, and the difference between the first range and the third range. There is a difference D13y (for example, the average value of the first range and the average value of the third range) between them.

差D12yは、差D12xと同様、画像上で第1範囲と第2範囲の色に関して彩度の差として表れるとともに、差D12yは差D12xよりも大きくなっている。また、差D13yは、差D13xと同様、画像上で第1範囲と第3範囲の色に関して色相の差として表れるとともに、差D13yは差D13xよりも大きくなっている。更には、第2信号比空間上での第1範囲の座標は、第1信号比空間上での第1範囲の座標と同じである。即ち、信号比空間用の第2色情報変換処理の変換前後で、第1範囲の彩度と色相は同じである。   Similar to the difference D12x, the difference D12y appears as a saturation difference with respect to the colors of the first range and the second range on the image, and the difference D12y is larger than the difference D12x. Similarly to the difference D13x, the difference D13y appears as a hue difference with respect to the colors of the first range and the third range on the image, and the difference D13y is larger than the difference D13x. Furthermore, the coordinates of the first range on the second signal ratio space are the same as the coordinates of the first range on the first signal ratio space. That is, the saturation and hue of the first range are the same before and after the conversion of the second color information conversion process for the signal ratio space.

以上のように、第1範囲と第2範囲の差及び第1範囲と第3範囲との差は、信号比空間用の第1色情報変換処理によって大きくなるとともに、信号比空間用の第2色情報変換処理の変換前後で、第1範囲の彩度と色相は同じである。これにより、信号比空間用の第2色情報変換処理済みの第2B/G比、第2G/R比から得られる第2特殊画像では、正常部の色は維持して表示される一方で、萎縮性胃炎が生じた萎縮部のうち、萎縮粘膜は退色調で表示される。また、第2特殊画像上では、萎縮粘膜下で萎縮により透見しつつある深層血管の色が赤からマゼンタなどの色に変化することで明瞭に表示することができる。したがって、第2特殊画像は萎縮性胃炎が生じたときの本来の色で表示されるため、正常部と萎縮部との色の違いが明確となっている。   As described above, the difference between the first range and the second range and the difference between the first range and the third range are increased by the first color information conversion processing for the signal ratio space, and the second for the signal ratio space. The saturation and hue in the first range are the same before and after conversion in the color information conversion process. Accordingly, in the second special image obtained from the second B / G ratio and the second G / R ratio that have been subjected to the second color information conversion processing for the signal ratio space, the color of the normal portion is maintained and displayed, Of the atrophic part where atrophic gastritis has occurred, the atrophic mucosa is displayed in fading. On the second special image, the color of the deep blood vessel that is seen through due to atrophy under the atrophic mucosa changes from red to a color such as magenta, so that it can be clearly displayed. Therefore, since the second special image is displayed in the original color when atrophic gastritis occurs, the difference in color between the normal part and the atrophic part is clear.

なお、複数の第1色情報が第1要素a*_x、b*_xである場合には、第1要素a*_x、b*_xに対して、上記の信号比空間用の第2色情報変換処理と同様のab空間用の第2色情報変換処理を施すことで、上記と同様の作用効果を得ることができる。 In addition, when several 1st color information is 1st element a * _x, b * _x, 2nd color information for said signal ratio space with respect to 1st element a * _x, b * _x By performing the second color information conversion process for the ab space similar to the conversion process, the same effects as described above can be obtained.

ここで、図15(A)は、第1要素a*_x、b*_xで形成される第1ab空間上での第1〜第3範囲の分布、第1範囲と第2範囲との差D12x、及び第1範囲と第3範囲との差D13xを表している。一方、図15(B)は、ab空間用の第2色情報変換処理により得られる第2要素a*_y、b*_yで形成される第2ab空間における第1〜第3範囲の分布、第1範囲と第2範囲との差D12y、及び第1範囲と第3範囲との差D13yを表している。この図15に示すように、ab空間用の第2色情報変換処理により、第1範囲の座標を維持した状態で、第1範囲と第2範囲との差及び第1範囲と第3範囲との差を大きくすることができる。 Here, FIG. 15A illustrates the distribution of the first to third ranges on the first ab space formed by the first elements a * _x and b * _x, and the difference D12x between the first range and the second range. , And a difference D13x between the first range and the third range. On the other hand, FIG. 15B shows the distribution of the first to third ranges in the second ab space formed by the second elements a * _y and b * _y obtained by the second color information conversion process for the ab space. A difference D12y between the first range and the second range and a difference D13y between the first range and the third range are shown. As shown in FIG. 15, the difference between the first range and the second range and the first range and the third range in the state where the coordinates of the first range are maintained by the second color information conversion process for the ab space. The difference can be increased.

信号比空間用の第2色情報変換処理は、極座標変換処理と、信号比空間用の第1処理と第3処理と、直交座標変換処理とから構成される。極座標変換処理、信号比空間用の第1処理、直交座標変換処理については、上記と同様であるので、説明を省略する。   The second color information conversion process for the signal ratio space includes a polar coordinate conversion process, a first process and a third process for the signal ratio space, and an orthogonal coordinate conversion process. Since the polar coordinate conversion process, the first process for signal ratio space, and the orthogonal coordinate conversion process are the same as described above, the description thereof is omitted.

信号比空間用の第3処理では、信号比空間用の第1処理後の動径rと角度θに基づいて、角度θの変更により、第1範囲の座標を維持した状態で、第3範囲の座標を移動させる信号比空間用の第3処理を行う。信号比空間用の第3処理では、図16Aに示すように、角度変更範囲R3内にある座標P3の角度θを変更する一方で、角度変更範囲R3外の座標については角度θの変更は行わない。角度変更範囲R3は、第3範囲を含むようにするとともに、第1範囲を含まないように設定されている。なお、信号比空間用の第3処理では、角度変更範囲R3の座標の動径rについて変更は行わない。   In the third process for the signal ratio space, the third range is maintained in a state where the coordinates of the first range are maintained by changing the angle θ based on the radius r and the angle θ after the first process for the signal ratio space. The third processing for the signal ratio space for moving the coordinates is performed. In the third processing for the signal ratio space, as shown in FIG. 16A, the angle θ of the coordinate P3 within the angle change range R3 is changed, while the angle θ is changed for coordinates outside the angle change range R3. Absent. The angle change range R3 is set so as to include the third range and not include the first range. In the third process for the signal ratio space, the radius r of the coordinates in the angle change range R3 is not changed.

角度変更範囲R3においては、第1範囲と第3範囲との間に、第2中心線CL2が設定されている。第2中心線CL2は角度θdであり、角度変更範囲R3のうち、角度θd以下の角度θを、時計回り方向に回転させる。なお、第2中心線CL2から一定の範囲R3xの角度θについては、角度変化率が「1」よりも大きい角度変化率Wxで変更する拡張処理を行い、範囲R3xを超える範囲R3yの角度θについては、角度変化率が「1」よりも小さい角度変化率Wyで変更する圧縮処理を行うことが好ましい。また、信号比空間用の第3処理によって、角度変更範囲R3の座標を、第2中心線CL2から−90度の範囲(信号比空間において、「正」の横軸を0°とし、角度を0°から360°で表現した場合には、「270°+θd」から「θd」までの範囲Q(図16B参照))内で移動させることが好ましい。なお、角度変化率が「1」の場合は、角度θを変更する処理を行っても、角度θの大きさは変わらない。   In the angle change range R3, a second center line CL2 is set between the first range and the third range. The second center line CL2 is an angle θd, and the angle θ that is equal to or smaller than the angle θd in the angle change range R3 is rotated in the clockwise direction. In addition, with respect to the angle θ of the certain range R3x from the second center line CL2, an expansion process is performed in which the angle change rate is changed at an angle change rate Wx larger than “1”, and the angle θ of the range R3y exceeding the range R3x. It is preferable to perform a compression process in which the angle change rate is changed at an angle change rate Wy smaller than “1”. Further, by the third processing for the signal ratio space, the coordinates of the angle change range R3 are changed to a range of −90 degrees from the second center line CL2 (in the signal ratio space, the “positive” horizontal axis is set to 0 °, and the angle is When expressed from 0 ° to 360 °, it is preferable to move within a range Q from “270 ° + θd” to “θd” (see FIG. 16B). When the angle change rate is “1”, the magnitude of the angle θ does not change even if the process of changing the angle θ is performed.

以上の信号比空間用の第3処理を行うことによって、図17に示すように、角度変更範囲R3内では、角度θは、角度θよりも小さくなる角度Eθに変更される。また、角度変化率は、角度θと角度Eθとを関係づける線CV3の接線を示す「直線L3」の傾きで表わされ、範囲R3x内では直線L3の傾きは「1」よりも大きいのに対して、範囲R3y内では直線L3の傾きは「1」よりも小さくなっている。これに対して、角度変更範囲R3外の角度θは、角度θと大きさが変わらない角度Eθに変換される(恒等変換)。また、角度変更範囲R3外においては、直線L3の傾きは「1」になっている。   By performing the above third processing for the signal ratio space, the angle θ is changed to an angle Eθ smaller than the angle θ within the angle change range R3 as shown in FIG. The angle change rate is represented by the slope of “straight line L3” indicating the tangent of line CV3 relating angle θ and angle Eθ, and the slope of straight line L3 is larger than “1” within range R3x. On the other hand, in the range R3y, the slope of the straight line L3 is smaller than “1”. On the other hand, the angle θ outside the angle change range R3 is converted into an angle Eθ that does not change in magnitude from the angle θ (identity conversion). Further, outside the angle change range R3, the slope of the straight line L3 is “1”.

図18A(A)に示すように、信号比空間用の第3処理前では、第1範囲及び第3範囲と、第2範囲とは離れているものの、第1範囲と第3範囲とは互いに近づいている。信号比空間用の第3処理後では、図18A(B)に示すように、第2範囲の座標を基準範囲に維持しつつ、第1範囲の座標を変更することなく維持した状態で、第3範囲の座標の大部分が信号比空間の第4象限に移動する。この第3範囲の座標の第1象限から第4象限への移動は、第2特殊画像上で、彩度を維持したまま色相を変化させることに相当する。これにより、第1範囲、第2範囲、及び第3範囲の座標は、完全に離れることになる。   As shown in FIG. 18A (A), before the third processing for the signal ratio space, the first range and the third range are separated from the second range, but the first range and the third range are mutually different. It is approaching. After the third processing for the signal ratio space, as shown in FIG. 18A (B), while maintaining the coordinates of the second range in the reference range, the coordinates of the first range are maintained without being changed. Most of the coordinates of the three ranges move to the fourth quadrant of the signal ratio space. The movement of the coordinates of the third range from the first quadrant to the fourth quadrant corresponds to changing the hue while maintaining the saturation on the second special image. As a result, the coordinates of the first range, the second range, and the third range are completely separated.

なお、複数の第1色情報が第1要素a*_x、b*_xである場合にも、図18Bに示すように、ab空間用の第3処理により、第2範囲の座標を基準範囲に維持しつつ、第1範囲の座標を変更することなく維持した状態で、第3範囲の座標の大部分が第2ab空間の第4象限に移動する。ここで、図18B(A)はab空間用の第3処理前の第1〜第3範囲の分布を、図18B(B)はab空間用の第3処理後の第1〜第3範囲の分布を表している。また、ab空間用の第1処理及び第3処理後に得られる第2RGB画像信号に対しては、明るさ調整部81で、画素値の調整を行うことが好ましい。第2RGB画像信号の画素値調整方法は、上記と同様である。 Even when the plurality of first color information are the first elements a * _x and b * _x, as shown in FIG. 18B, the coordinates of the second range are set to the reference range by the third processing for ab space. While maintaining the coordinates of the first range without changing, most of the coordinates of the third range move to the fourth quadrant of the second ab space. Here, FIG. 18B (A) shows the distribution of the first to third ranges before the third processing for the ab space, and FIG. 18B (B) shows the distribution of the first to third ranges after the third processing for the ab space. Represents the distribution. Further, it is preferable that the brightness adjustment unit 81 adjusts the pixel value for the second RGB image signal obtained after the first process and the third process for the ab space. The pixel value adjustment method for the second RGB image signal is the same as described above.

同時表示用画像処理部64cは、第1特殊画像処理部64aと第2特殊画像処理部64bで生成された第1特殊画像と第2特殊画像に基づいて、同時表示用特殊画像を生成する。モニタ18は、図19に示すように、同時表示用特殊画像に基づいて、一方側に第1特殊画像を表示し、他方側に第2特殊画像を表示する。第1特殊画像は、正常部と萎縮部との境界が極めて明瞭であるため、萎縮部の位置などを把握することを容易にする画像であるものの、正常部が本来の胃の粘膜の色でない疑似カラーで表示されるため、ドクターにとって違和感のある画像となっている。一方、第2特殊画像は、第1特殊画像と比較すると、正常部と萎縮部との境界はある程度明瞭であって、かつ正常部の色が本来の胃の色で表示されるため、ドクターにとって違和感がない画像となっている。これら2つの第1特殊画像と第2特殊画像を同時に表示することで、正常部の色を把握しつつ、正常部と萎縮部の境界を検出することができるようになる。   The simultaneous display image processing unit 64c generates a simultaneous display special image based on the first special image and the second special image generated by the first special image processing unit 64a and the second special image processing unit 64b. As shown in FIG. 19, the monitor 18 displays the first special image on one side and the second special image on the other side based on the special image for simultaneous display. The first special image is an image that makes it easy to grasp the position of the atrophic part because the boundary between the normal part and the atrophic part is very clear, but the normal part is not the color of the original stomach mucous membrane Since it is displayed in a pseudo color, the image is uncomfortable for the doctor. On the other hand, compared with the first special image, the boundary between the normal part and the atrophic part is somewhat clear and the color of the normal part is displayed in the original stomach color. The image has no sense of incongruity. By displaying these two first special images and second special images at the same time, the boundary between the normal part and the atrophy part can be detected while grasping the color of the normal part.

次に、本発明の一連の流れについて、図20のフローチャートに沿って説明する。まず、通常観察モードにセットし、内視鏡12の挿入部12aを検体内に挿入する。挿入部12aの先端部12dが胃に到達したら、モード切替SW13aを操作して、通常観察モードから第1、第2特殊観察モードに切り替える。なお、第1特殊画像と第2特殊画像の両方を観察しながら萎縮性胃炎の診断を行う場合には、同時観察モードに切り替える。   Next, a series of flows of the present invention will be described along the flowchart of FIG. First, the normal observation mode is set, and the insertion portion 12a of the endoscope 12 is inserted into the sample. When the distal end portion 12d of the insertion portion 12a reaches the stomach, the mode switching SW 13a is operated to switch from the normal observation mode to the first and second special observation modes. When diagnosing atrophic gastritis while observing both the first special image and the second special image, the mode is switched to the simultaneous observation mode.

第1、第2特殊観察モードに切り替えた後に得られるRGB画像信号に基づいて、信号比算出部72により、第1B/G比、第1G/R比を算出する。次に、第1特殊観察モードに設定されている場合には、信号比空間用の第1色情報変換部73で、第1B/G比、第1G/R比を、信号比空間用の第1色情報変換処理によって、第2B/G比、第2G/R比に変換する。信号比空間用の第1色情報変換処理済みの第2B/G比、第2G/R比に基づいて、第1特殊画像を生成する。第1特殊画像はモニタ18に表示される。   Based on the RGB image signals obtained after switching to the first and second special observation modes, the signal ratio calculation unit 72 calculates the first B / G ratio and the first G / R ratio. Next, when the first special observation mode is set, the first color information conversion unit 73 for the signal ratio space converts the first B / G ratio and the first G / R ratio into the first signal ratio space. It is converted into the second B / G ratio and the second G / R ratio by the one-color information conversion process. A first special image is generated based on the second B / G ratio and the second G / R ratio that have been subjected to the first color information conversion processing for the signal ratio space. The first special image is displayed on the monitor 18.

一方、第2特殊観察モードに設定されている場合には、信号比空間用の第2色情報変換部で、第1B/G比、第1G/R比を、信号比空間用の第2色情報変換処理によって、第2B/G比、第2G/R比に変換する。信号比空間用の第2情報変換処理済みの第2B/G比、第2G/R比に基づいて、第2特殊画像を生成する。第2特殊画像はモニタ18に表示される。   On the other hand, when the second special observation mode is set, the second color information conversion unit for the signal ratio space uses the first B / G ratio and the first G / R ratio as the second color for the signal ratio space. The information is converted into the second B / G ratio and the second G / R ratio by the information conversion process. A second special image is generated based on the second B / G ratio and the second G / R ratio that have been subjected to the second information conversion processing for the signal ratio space. The second special image is displayed on the monitor 18.

なお、同時観察モードは第1特殊画像と第2特殊画像との同時表示に限らず、例えば第1特殊画像と通常画像の同時表示でもよい。また第2特殊画像と通常画像の同時表示でもよい。その場合には通常画像処理部62と特殊画像処理部64の各々で表示画像を生成し、映像信号生成部66を経てモニタ18で表示される。   Note that the simultaneous observation mode is not limited to the simultaneous display of the first special image and the second special image, and may be the simultaneous display of the first special image and the normal image, for example. The second special image and the normal image may be displayed simultaneously. In that case, a display image is generated by each of the normal image processing unit 62 and the special image processing unit 64, and is displayed on the monitor 18 through the video signal generation unit 66.

また、同時観察モードでは、第1特殊画像と、信号比空間用の第1色情報変換処理及び第2色情報変換処理のいずれの処理も行わない第3特殊画像とを同時表示するようにしてもよい。この第3特殊画像は、特殊画像処理部64に設けられた第3特殊画像処理部(図示しない)で生成される。この場合の第3特殊画像処理部は、第1、第2特殊画像処理部64a、64bと異なり、信号比空間用の第1色情報変換処理及び第2色情報変換処理に必要な信号比空間用の第1色情報変換部及び第2色情報変換部を備えていない。それ以外は、第1、第2特殊画像処理部64a、64bと同様である。なお、第3特殊画像を生成する際は、紫色光Vの光強度を、青色光B、緑色光G、赤色光Rの光強度よりも大きくして各色の光を発光することが好ましい。このような発光条件の元で得られた第3特殊画像は、画像全体が明るい状態を維持した状態で、表層血管が強調されて表示される画像となっている。   In the simultaneous observation mode, the first special image and the third special image for which neither the first color information conversion process nor the second color information conversion process for the signal ratio space is performed are displayed simultaneously. Also good. This third special image is generated by a third special image processing unit (not shown) provided in the special image processing unit 64. In this case, the third special image processing unit is different from the first and second special image processing units 64a and 64b, and the signal ratio space necessary for the first color information conversion process and the second color information conversion process for the signal ratio space. The first color information conversion unit and the second color information conversion unit are not provided. The rest is the same as the first and second special image processing units 64a and 64b. When generating the third special image, it is preferable to emit light of each color by setting the light intensity of the purple light V higher than the light intensity of the blue light B, the green light G, and the red light R. The third special image obtained under such light emission conditions is an image that is displayed with the superficial blood vessels being emphasized in a state where the entire image is kept bright.

なお、上記実施形態では、信号比算出部72で第1RGB画像信号から第1B/G比、第1G/R比を求め、これら第1B/G比、第1G/R比を信号比空間用の第1及び第2色情報変換処理で第2B/G比、第2G/R比に変換しているが、第1RGB画像信号から第1B/G比、第1G/R比と異なる複数の第1色情報を求め、これら複数の第1色情報を特定の特徴空間用の第1及び第2色情報変換処理で複数の第2色情報に変換してもよい。   In the above embodiment, the signal ratio calculation unit 72 obtains the first B / G ratio and the first G / R ratio from the first RGB image signal, and uses the first B / G ratio and the first G / R ratio for the signal ratio space. The first and second color information conversion processes convert the second B / G ratio and the second G / R ratio, but the first RGB image signal has a plurality of first different from the first B / G ratio and the first G / R ratio. Color information may be obtained, and the plurality of first color information may be converted into the plurality of second color information by the first and second color information conversion processing for a specific feature space.

例えば、複数の色情報として色差信号Cr、Cbを求め、色差信号Cr、Cbに対してCrCb空間用の第1及び第2色情報変換処理を施してもよい。CrCb空間用の第1色情報変換処理は、図21に示す第1特殊画像処理部94aで行われる。第1特殊画像処理部94aは、第1特殊画像処理部64aと異なり、逆ガンマ変換部70、Log変換部71、信号比算出部72、信号比空間用の第1色情報変換部73、逆Log変換部79、ガンマ変換部80を備えていない。その代わりに、第1特殊画像処理部94aは、輝度・色差信号変換部85、CrCb空間用の第1色情報変換部86を備えている。それ以外の構成については、第1特殊画像処理部94aは第1特殊画像処理部64aと同様である。   For example, the color difference signals Cr and Cb may be obtained as a plurality of color information, and the first and second color information conversion processing for the CrCb space may be performed on the color difference signals Cr and Cb. The first color information conversion process for the CrCb space is performed by the first special image processing unit 94a shown in FIG. Unlike the first special image processing unit 64a, the first special image processing unit 94a is an inverse gamma conversion unit 70, a log conversion unit 71, a signal ratio calculation unit 72, a first color information conversion unit 73 for signal ratio space, and an inverse. The Log converter 79 and the gamma converter 80 are not provided. Instead, the first special image processing unit 94a includes a luminance / color difference signal conversion unit 85 and a first color information conversion unit 86 for CrCb space. Regarding other configurations, the first special image processing unit 94a is the same as the first special image processing unit 64a.

輝度・色差信号変換部85(本発明の「色情報取得部」に対応する)は、第1RGB画像信号を輝度信号Yと第1色差信号Cr_x、Cb_xに変換する。第1色差信号Cr、Cbへの変換には周知の変換式が用いられる。第1色差信号Cr_x、Cb_xについてはCrCb空間用の第1色情報変換部86に送られる。輝度信号YについてはRGB変換部77と明るさ調整部81に送られる。RGB変換部77では、CrCb空間用の第1色情報変換処理済みの第2色差信号Cr_y、Cb_yと輝度信号Yを、第2RGB画像信号に変換する。明るさ調整部81では、第1明るさ情報Yinとして輝度信号Yを用いるとともに、第2明るさ情報Youtとして第2明るさ情報算出部81bで求めた第2明るさ情報を用いて、第2RGB画像信号の画素値の調整を行う。なお、第2明るさ情報Youtの算出方法と第2RGB画像信号の画素値の調整方法については、上記第1特殊画像処理部64aの場合と同じである。   The luminance / color difference signal conversion unit 85 (corresponding to the “color information acquisition unit” of the present invention) converts the first RGB image signal into the luminance signal Y and the first color difference signals Cr_x and Cb_x. A well-known conversion formula is used for the conversion to the first color difference signals Cr and Cb. The first color difference signals Cr_x and Cb_x are sent to the first color information conversion unit 86 for the CrCb space. The luminance signal Y is sent to the RGB converter 77 and the brightness adjuster 81. The RGB conversion unit 77 converts the second color difference signals Cr_y and Cb_y and the luminance signal Y that have been subjected to the first color information conversion processing for the CrCb space into a second RGB image signal. The brightness adjustment unit 81 uses the luminance signal Y as the first brightness information Yin, and uses the second brightness information obtained by the second brightness information calculation unit 81b as the second brightness information Yout to generate the second RGB. The pixel value of the image signal is adjusted. Note that the calculation method of the second brightness information Yout and the adjustment method of the pixel values of the second RGB image signal are the same as those of the first special image processing unit 64a.

CrCb空間用の第1色情報変換部86は、第1色差信号Cr_x、Cb_xに対して、CrCb空間用の第1色情報変換処理を施して、第2色差信号Cr_y、Cb_yに変換する。CrCb空間用の第1色情報変換部86は、二次元LUT(Look Up Table)から構成され、第1色差信号Cr_x、Cb_xと、この第1色差信号Cr_x、Cb_xに基づくCrCb空間用の第1色情報変換処理を行って得られる第2色差信号Cr_y、Cb_yとが対応付けて記憶されている。CrCb空間用の第1色情報変換処理の詳細については、後述する。   The first color information conversion unit 86 for the CrCb space performs a first color information conversion process for the CrCb space on the first color difference signals Cr_x and Cb_x to convert them to the second color difference signals Cr_y and Cb_y. The first color information conversion unit 86 for the CrCb space includes a two-dimensional LUT (Look Up Table), and the first color difference signals Cr_x and Cb_x and the first color difference signals Cr_x and Cb_x based on the first color difference signals Cr_x and Cb_x. Second color difference signals Cr_y and Cb_y obtained by performing the color information conversion process are stored in association with each other. Details of the first color information conversion processing for the CrCb space will be described later.

図22(A)に示すように、第1色差信号Cr_x、Cb_xで形成される第1CrCb空間(本発明の「第1特徴空間」に対応する)においては、第1範囲と、第2範囲と、第3範囲とが第2象限に分布している。この第1CrCb空間では、第1範囲と第2範囲との間には差D12x(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13x(例えば、第1範囲の平均値と第3範囲の平均値)がある。差D12xは、画像上で第1範囲と第2範囲の色に関して画像上で彩度の差として表れ、差D13xは、画像上で第1範囲と第3範囲の色に関して画像上で色相の差として表れる。   As shown in FIG. 22A, in the first CrCb space (corresponding to the “first feature space” of the present invention) formed by the first color difference signals Cr_x and Cb_x, the first range, the second range, The third range is distributed in the second quadrant. In the first CrCb space, there is a difference D12x (for example, the average value of the first range and the average value of the second range) between the first range and the second range, and between the first range and the third range. Has a difference D13x (for example, an average value of the first range and an average value of the third range). The difference D12x appears as a saturation difference on the image with respect to the colors of the first range and the second range on the image, and the difference D13x is a difference in hue on the image with respect to the colors of the first range and the third range on the image. Appears as

一方、CrCb空間用の第1色情報変換処理で得られる第2色差信号Cr_y、Cb_yで形成される第2CrCb空間においては、図22(B)に示すように、第1範囲、第2範囲、第3範囲がそれぞれ別々の象限に分布している。この第2CrCb空間(本発明の「第2特徴空間」に対応する)では、第1範囲と第2範囲との間には差D12y(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13y(例えば、第1範囲の平均値と第3範囲の平均値)とがある。   On the other hand, in the second CrCb space formed by the second color difference signals Cr_y and Cb_y obtained by the first color information conversion process for the CrCb space, as shown in FIG. 22 (B), the first range, the second range, The third ranges are distributed in different quadrants. In the second CrCb space (corresponding to the “second feature space” of the present invention), there is a difference D12y (for example, the average value of the first range and the average value of the second range) between the first range and the second range. ), And there is a difference D13y (for example, an average value of the first range and an average value of the third range) between the first range and the third range.

差D12yについては、画像上で第1範囲と第2範囲の色に関して彩度及び色相の差として表れる。また、差D12yは差D12xよりも大きくなっている。一方、差D13yについては、画像上で第1範囲と第3範囲の色に関して色相の差として表れる。また、差D13yは差D13xよりも大きくなっている。さらに、第2CrCb空間上での第1範囲の座標は、第1CrCb空間上での第1範囲の座標と異なっている。即ち、CrCb空間用の第1色情報変換処理の変換前後で、第1範囲の彩度と色相の少なくともいずれかが異なっている。   The difference D12y appears as a difference in saturation and hue with respect to the colors in the first range and the second range on the image. Further, the difference D12y is larger than the difference D12x. On the other hand, the difference D13y appears as a hue difference with respect to the colors of the first range and the third range on the image. Further, the difference D13y is larger than the difference D13x. Further, the coordinates of the first range on the second CrCb space are different from the coordinates of the first range on the first CrCb space. That is, at least one of the saturation and the hue in the first range is different before and after the conversion of the first color information conversion process for the CrCb space.

以上のように、CrCb空間用の第1色情報変換処理によって、第1範囲と第2範囲の差及び第1範囲と第3範囲との差を大きくするとともに、変換処理の前後で、第1範囲の彩度と色相の少なくともいずれかを異ならせることができる。したがって、CrCb空間用の第1色情報変換処理済みの第2色差信号Cr_y、Cb_yから、上記と同様の第1特殊画像を得ることができる。   As described above, the first color information conversion process for the CrCb space increases the difference between the first range and the second range and the difference between the first range and the third range, and before and after the conversion process, At least one of the saturation and the hue of the range can be made different. Therefore, a first special image similar to the above can be obtained from the second color difference signals Cr_y and Cb_y that have been subjected to the first color information conversion process for the CrCb space.

CrCb空間用の第2色情報変換処理は、第1特殊画像処理部94aとほぼ同じ構成を有する第2特殊画像処理部(図示しない)で行われる。この第2特殊画像処理部は、CrCb空間用の第1色情報変換部86に代えて、CrCb空間用の第2色情報変換部を有している以外は、第1特殊画像処理部94aと同様である。   The second color information conversion process for the CrCb space is performed by a second special image processing unit (not shown) having substantially the same configuration as the first special image processing unit 94a. The second special image processing unit has a second color information conversion unit for CrCb space instead of the first color information conversion unit 86 for CrCb space. It is the same.

CrCb空間用の第2色情報変換部は、第1色差信号Cr_x、Cb_xに対して、CrCb空間用の第2色情報変換処理を施して、第2色差信号Cr_y、Cb_yに変換する。CrCb空間用の第2色情報変換部は、二次元LUT(Look Up Table)から構成され、第1色差信号Cr_x、Cb_xと、この第1色差信号Cr_x、Cb_xに基づくCrCb空間用の第2色情報変換処理を行って得られる第2色差信号Cr_y、Cb_yとが対応付けて記憶されている。CrCb空間用の第2色情報変換処理の詳細については、後述する。   The second color information conversion unit for the CrCb space performs a second color information conversion process for the CrCb space on the first color difference signals Cr_x and Cb_x to convert them into the second color difference signals Cr_y and Cb_y. The second color information conversion unit for the CrCb space includes a two-dimensional LUT (Look Up Table), and the second color for the CrCb space based on the first color difference signals Cr_x and Cb_x and the first color difference signals Cr_x and Cb_x. Second color difference signals Cr_y and Cb_y obtained by performing the information conversion process are stored in association with each other. Details of the second color information conversion process for the CrCb space will be described later.

図23(A)に示すように、第1色差信号Cr_x、Cb_xで形成される第1CrCb空間においては、図22(A)と同様に、第1範囲と、第2範囲と、第3範囲とが第2象限に分布し、且つ、第1範囲と第2範囲及び第3範囲との間で、差D12x(彩度の差)及び差D13x(色相の差)を有している。一方、CrCb空間用の第2色情報変換処理で得られる第2色差信号Cr_y、Cb_yで形成される第2CrCb空間においては、図23(B)に示すように、第1範囲、第2範囲は同じ第2象限に分布するが、第3範囲だけが第1象限に分布する。この第2CrCb空間では、第1範囲と第2範囲との間には差D12yがあり、第1範囲と第3範囲との間には差D13yがある。   As shown in FIG. 23A, in the first CrCb space formed by the first color difference signals Cr_x and Cb_x, as in FIG. 22A, the first range, the second range, and the third range Are distributed in the second quadrant, and have a difference D12x (saturation difference) and a difference D13x (hue difference) between the first range, the second range, and the third range. On the other hand, in the second CrCb space formed by the second color difference signals Cr_y and Cb_y obtained by the second color information conversion process for the CrCb space, the first range and the second range are as shown in FIG. Although distributed in the same second quadrant, only the third range is distributed in the first quadrant. In the second CrCb space, there is a difference D12y between the first range and the second range, and there is a difference D13y between the first range and the third range.

差D12yについては、画像上で第1範囲と第2範囲の色に関して彩度の差として表れる。また、差D12yは差D12xよりも大きくなっている。一方、差D13yについては、画像上で第1範囲と第3範囲の色に関して色相の差として表れる。また、差D13yは差D13xよりも大きくなっている。さらに、第2CrCb空間上での第1範囲の座標は、第1CrCb空間上での第1範囲の座標と同じである。即ち、CrCb空間用の第2色情報変換処理の変換前後で、第1範囲の彩度と色相が同じである。   The difference D12y appears as a difference in saturation regarding the colors of the first range and the second range on the image. Further, the difference D12y is larger than the difference D12x. On the other hand, the difference D13y appears as a hue difference with respect to the colors of the first range and the third range on the image. Further, the difference D13y is larger than the difference D13x. Further, the coordinates of the first range on the second CrCb space are the same as the coordinates of the first range on the first CrCb space. That is, the saturation and hue of the first range are the same before and after the conversion of the second color information conversion process for the CrCb space.

以上のように、CrCb空間用の第2色情報変換処理によって、第1範囲と第2範囲の差及び第1範囲と第3範囲との差を大きくするとともに、変換処理の前後で、第1範囲の彩度と色相を同じにすることができる。したがって、CrCb空間用の第2色情報変換処理済みの第2色差信号Cr_y、Cb_yから、上記と同様の第2特殊画像を得ることができる。   As described above, the second color information conversion process for the CrCb space increases the difference between the first range and the second range and the difference between the first range and the third range, and before and after the conversion process, The saturation and hue of the range can be the same. Therefore, a second special image similar to the above can be obtained from the second color difference signals Cr_y and Cb_y that have been subjected to the second color information conversion process for the CrCb space.

CrCb空間用の第1色情報変換処理は、極座標変換処理、CrCb空間用の第1処理及び第2処理、直交座標変換処理からなる。まず、第1色差信号Cr_x、Cb_xに対して極座標変換処理を行って、動径rと角度θに変換する。次に、CrCb空間用の第1処理においては、図24に示すように、第2範囲の座標の動径を変更して、第1CrCb空間上の原点を含む基準範囲に第2範囲の座標を移動させる。基準範囲は、CrCb空間用の第1処理後の第1範囲及び第3範囲を含まない低彩度の範囲である。一方、CrCb空間用の第1処理において、CrCb空間上での第1範囲と第3範囲の座標は維持する。ここで、各範囲の移動方法は、信号比空間用の第1処理の場合と同様である。   The first color information conversion process for the CrCb space includes a polar coordinate conversion process, a first process and a second process for the CrCb space, and an orthogonal coordinate conversion process. First, polar coordinate conversion processing is performed on the first color difference signals Cr_x and Cb_x to convert them into a moving radius r and an angle θ. Next, in the first processing for the CrCb space, as shown in FIG. 24, the radius of the coordinates of the second range is changed, and the coordinates of the second range are set to the reference range including the origin on the first CrCb space. Move. The reference range is a low saturation range that does not include the first and third ranges after the first processing for the CrCb space. On the other hand, in the first processing for the CrCb space, the coordinates of the first range and the third range on the CrCb space are maintained. Here, the moving method of each range is the same as in the case of the first processing for the signal ratio space.

CrCb空間用の第2処理においては、図25に示すように、第2範囲を基準範囲に維持した状態で、第1範囲と第3範囲の座標を互いに離れさせるために、第1範囲及び第3範囲を移動するように処理する。この第1範囲及び第3範囲を移動させる方法は、信号比空間用の第2処理の場合と同様であり、角度を拡張・圧縮することにより行われる。CrCb空間用の第2処理後の動径rと角度θは、直交座標変換処理により、第2色差信号Cr_y、Cb_yに変換される。   In the second process for the CrCb space, as shown in FIG. 25, in order to make the coordinates of the first range and the third range apart from each other while maintaining the second range as the reference range, Process to move 3 ranges. The method of moving the first range and the third range is the same as in the case of the second processing for the signal ratio space, and is performed by expanding and compressing the angle. The radius r and the angle θ after the second processing for the CrCb space are converted into second color difference signals Cr_y and Cb_y by the orthogonal coordinate conversion processing.

CrCb空間用の第2色情報変換処理は、極座標変換処理、CrCb空間用の第1処理及び第3処理、直交座標変換処理からなる。極座標変換処理、CrCb空間用の第1処理、及び直交座標変換処理については、CrCb空間用の第1色情報変換処理の場合と同様である。   The second color information conversion process for the CrCb space includes a polar coordinate conversion process, a first process and a third process for the CrCb space, and an orthogonal coordinate conversion process. The polar coordinate conversion process, the first process for the CrCb space, and the orthogonal coordinate conversion process are the same as in the case of the first color information conversion process for the CrCb space.

CrCb空間用の第3処理においては、図26に示すように、第2範囲を基準範囲に維持するとともに、第1範囲の座標を維持した状態で、第1範囲と第3範囲を離れさせるために、第3範囲のみを移動するように処理する。この第3範囲を移動させる方法は、信号比空間用の第3処理の場合と同様であり、角度を拡張・圧縮することにより行われる。   In the third process for the CrCb space, as shown in FIG. 26, the second range is maintained as the reference range, and the first range and the third range are separated while maintaining the coordinates of the first range. In addition, processing is performed so that only the third range is moved. The method of moving the third range is the same as in the third process for signal ratio space, and is performed by expanding and compressing the angle.

また、色情報として色相H(Hue)と彩度S(Saturation)を求め、色相H(Hue)と彩度S(Saturation)に対してHS空間用の第1及び第2色情報変換処理を施してもよい。HS空間用の第1色情報変換処理は、図27に示す第1特殊画像処理部96aで行われる。第1特殊画像処理部96aは、第1特殊画像処理部64aと異なり、逆ガンマ変換部70、Log変換部71、信号比算出部72、信号比空間用の第1色情報変換部73、逆Log変換部79、ガンマ変換部80を備えていない。その代わりに、第1特殊画像処理部96aは、HSV変換部87、HS空間用の第1色情報変換部88を備えている。それ以外の構成については、第1特殊画像処理部96aは第1特殊画像処理部64aと同様である。   Also, hue H (Hue) and saturation S (Saturation) are obtained as color information, and first and second color information conversion processing for HS space is performed on hue H (Hue) and saturation S (Saturation). May be. The first color information conversion process for the HS space is performed by the first special image processing unit 96a shown in FIG. Unlike the first special image processing unit 64a, the first special image processing unit 96a is an inverse gamma conversion unit 70, a log conversion unit 71, a signal ratio calculation unit 72, a first color information conversion unit 73 for signal ratio space, and an inverse. The Log converter 79 and the gamma converter 80 are not provided. Instead, the first special image processing unit 96a includes an HSV conversion unit 87 and an HS space first color information conversion unit 88. Regarding other configurations, the first special image processing unit 96a is the same as the first special image processing unit 64a.

HSV変換部87(本発明の「色情報取得部」に対応する)は、第1RGB画像信号を第1色相H_x、第1彩度S_xと明度Vに変換する。第1色相H_x、第1彩度S_x、明度Vへの変換には周知の変換式が用いられる。第1色相H_x、第1彩度S_xについてはHS空間用の第1色情報変換部88に送られる。明度VについてはRGB変換部77に送られる。RGB変換部77では、HS空間用の第1色情報変換処理済みの第2色相H_y、第2彩度S_yと明度Vを、第2RGB画像信号に変換する。明るさ調整部81では、第1明るさ情報Yinとして第1明るさ情報算出部81aで求めた第1明るさ情報と、第2明るさ情報Youtとして第2明るさ情報算出部81bで求めた第2明るさ情報を用いて、第2RGB画像信号の画素値の調整を行う。なお、第1明るさ情報Yin及び第2明るさ情報Youtの算出方法と、第2RGB画像信号の画素値の調整方法については、上記第1特殊画像処理部64aの場合と同じである。   The HSV conversion unit 87 (corresponding to the “color information acquisition unit” of the present invention) converts the first RGB image signal into the first hue H_x, the first saturation S_x, and the lightness V. A well-known conversion formula is used for conversion to the first hue H_x, the first saturation S_x, and the lightness V. The first hue H_x and the first saturation S_x are sent to the first color information conversion unit 88 for HS space. The brightness V is sent to the RGB converter 77. The RGB conversion unit 77 converts the second hue H_y, the second saturation S_y, and the lightness V that have been subjected to the first color information conversion processing for the HS space into a second RGB image signal. In the brightness adjustment unit 81, the first brightness information obtained by the first brightness information calculation unit 81a as the first brightness information Yin and the second brightness information calculation unit 81b obtained as the second brightness information Yout. The pixel value of the second RGB image signal is adjusted using the second brightness information. Note that the calculation method of the first brightness information Yin and the second brightness information Yout and the adjustment method of the pixel values of the second RGB image signal are the same as those of the first special image processing unit 64a.

HS空間用の第1色情報変換部88は、第1色相H_x、第1彩度S_xに対して、HS空間用の第1色情報変換処理を施して、第2色相H_y、第2彩度S_yに変換する。HS空間用の第1色情報変換部88は、二次元LUT(Look Up Table)から構成され、第1色相H_x、第1彩度S_xと、この第1色相H_x、第1彩度S_xに基づくHS空間用の第1色情報変換処理を行って得られる第2色相H_y、第2彩度S_yとが対応付けて記憶されている。HS空間用の第1色情報変換処理の詳細については、後述する。   The first color information conversion unit 88 for the HS space performs the first color information conversion process for the HS space on the first hue H_x and the first saturation S_x to obtain the second hue H_y and the second saturation. Convert to S_y. The first color information conversion unit 88 for HS space is composed of a two-dimensional LUT (Look Up Table), and is based on the first hue H_x and the first saturation S_x, and the first hue H_x and the first saturation S_x. The second hue H_y and the second saturation S_y obtained by performing the first color information conversion process for the HS space are stored in association with each other. Details of the first color information conversion process for the HS space will be described later.

図28(A)に示すように、縦軸が第1彩度S_xで、横軸が第1色相H_xで形成される第1HS空間(本発明の「第1特徴空間」に対応する)においては、第1範囲と、第2範囲と、第3範囲とが第1象限に分布している。この第1HS空間では、第1範囲と第2範囲との間には差D12x(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13x(例えば、第1範囲の平均値と第3範囲の平均値)がある。差D12xは、画像上で第1範囲と第2範囲の色に関して彩度の差として表れ、差D13xは、画像上で第1範囲と第3範囲の色に関して色相の差として表れる。   As shown in FIG. 28A, in the first HS space (corresponding to the “first feature space” of the present invention) in which the vertical axis is the first saturation S_x and the horizontal axis is the first hue H_x. The first range, the second range, and the third range are distributed in the first quadrant. In the first HS space, there is a difference D12x (for example, the average value of the first range and the average value of the second range) between the first range and the second range, and between the first range and the third range. Has a difference D13x (for example, an average value of the first range and an average value of the third range). The difference D12x appears as a saturation difference with respect to the colors in the first range and the second range on the image, and the difference D13x appears as a difference in hue with respect to the colors in the first range and the third range on the image.

一方、HS空間用の第1色情報変換処理で得られる第2色相H_y、第2彩度S_yで形成される第2HS空間(縦軸が第2彩度S_y、横軸が第2色相H_y)においては、図28(B)に示すように、第1範囲、第2範囲、第3範囲が第1HS空間と異なる位置に分布する。この第2HS空間(本発明の「第2特徴空間」に対応する)では、第1範囲と第2範囲との間には差D12y(例えば、第1範囲の平均値と第2範囲の平均値)があり、第1範囲と第3範囲との間には差D13y(例えば、第1範囲の平均値と第3範囲の平均値)とがある。   On the other hand, the second hue H_y obtained by the first color information conversion process for the HS space and the second HS space formed by the second saturation S_y (the second saturation S_y is on the vertical axis and the second hue H_y is on the horizontal axis). In FIG. 28B, the first range, the second range, and the third range are distributed at different positions from the first HS space, as shown in FIG. In the second HS space (corresponding to the “second feature space” of the present invention), there is a difference D12y (for example, the average value of the first range and the average value of the second range) between the first range and the second range. ), And there is a difference D13y (for example, an average value of the first range and an average value of the third range) between the first range and the third range.

差D12yについては、画像上で第1範囲と第2範囲の色に関して彩度及び色相の差として表れる。また、差D12yは差D12xよりも大きくなっている。一方、差D13yについては、画像上で第1範囲と第3範囲の色に関して色相の差として表れる。また、差D13yは差D13xよりも大きくなっている。さらに、第2HS空間上での第1範囲の座標は、第1HS空間上での第1範囲の座標と異なっている。即ち、HS空間用の第1色情報変換処理の変換前後で、第1範囲の彩度と色相の少なくともいずれかが異なっている。   The difference D12y appears as a difference in saturation and hue with respect to the colors in the first range and the second range on the image. Further, the difference D12y is larger than the difference D12x. On the other hand, the difference D13y appears as a hue difference with respect to the colors of the first range and the third range on the image. Further, the difference D13y is larger than the difference D13x. Further, the coordinates of the first range on the second HS space are different from the coordinates of the first range on the first HS space. That is, at least one of the saturation and the hue in the first range is different before and after the conversion of the first color information conversion process for the HS space.

以上のように、HS空間用の第1色情報変換処理によって、第1範囲と第2範囲の差及び第1範囲と第3範囲との差を大きくするとともに、変換処理の前後で、第1範囲の彩度と色相の少なくともいずれかを異ならせることができる。したがって、HS空間用の第1色情報変換処理済みの第2色相H_y、第2彩度S_yから、上記と同様の第1特殊画像を得ることができる。   As described above, the first color information conversion process for the HS space increases the difference between the first range and the second range and the difference between the first range and the third range, and before and after the conversion process, At least one of the saturation and the hue of the range can be made different. Therefore, a first special image similar to the above can be obtained from the second hue H_y and the second saturation S_y that have been subjected to the first color information conversion processing for the HS space.

HS空間用の第2色情報変換処理は、第1特殊画像処理部96aとほぼ同じ構成を有する第2特殊画像処理部(図示しない)で行われる。この第2特殊画像処理部は、HS空間用の第1色情報変換部88に代えて、HS空間用の第2色情報変換部を有している以外は、第1特殊画像処理部96aと同様である。   The second color information conversion process for the HS space is performed by a second special image processing unit (not shown) having substantially the same configuration as the first special image processing unit 96a. The second special image processing unit includes a first special image processing unit 96a, except that it has a second color information conversion unit for HS space instead of the first color information conversion unit 88 for HS space. It is the same.

HS空間用の第2色情報変換部は、第1色相H_x、第1彩度S_xに対して、HS空間用の第2色情報変換処理を施して、第2色相H_y、第2彩度S_yに変換する。HS空間用の第2色情報変換部は、二次元LUT(Look Up Table)から構成され、第1色相H_x、第1彩度S_xと、この第1色相H_x、第1彩度S_xに基づくHS空間用の第2色情報変換処理を行って得られる第2色相H_y、第2彩度S_yとが対応付けて記憶されている。HS空間用の第2色情報変換処理の詳細については、後述する。   The second color information conversion unit for the HS space performs a second color information conversion process for the HS space on the first hue H_x and the first saturation S_x, thereby obtaining the second hue H_y and the second saturation S_y. Convert to The second color information conversion unit for the HS space includes a two-dimensional LUT (Look Up Table). The first hue H_x and the first saturation S_x, and the HS based on the first hue H_x and the first saturation S_x. A second hue H_y and a second saturation S_y obtained by performing the second color information conversion process for space are stored in association with each other. Details of the second color information conversion process for the HS space will be described later.

図29(A)に示すように、縦軸が第1彩度S_xで、横軸が第1色相H_xで形成される第1HS空間においては、図28(A)と同様に、第1範囲と、第2範囲と、第3範囲とが第1象限に分布し、且つ、第1範囲と第2範囲及び第3範囲との間で、差D12x(彩度の差)及び差D13x(色相の差)を有している。一方、HS空間用の第2色情報変換処理で得られる第2色相H_y、第2彩度S_yで形成される第2HS空間においては、図29(B)に示すように、第1範囲、第2範囲、第3範囲のうち、第2範囲、第3範囲は第1HS空間と異なる位置に分布する。この第2HS空間では、第1範囲と第2範囲との間には差D12yがあり、第1範囲と第3範囲との間には差D13yがある。   As shown in FIG. 29A, in the first HS space formed with the first saturation S_x on the vertical axis and the first hue H_x on the horizontal axis, the first range and The second range and the third range are distributed in the first quadrant, and the difference D12x (saturation difference) and the difference D13x (hue difference) between the first range, the second range, and the third range. Difference). On the other hand, in the second HS space formed by the second hue H_y and the second saturation S_y obtained by the second color information conversion process for the HS space, as shown in FIG. Of the two ranges and the third range, the second range and the third range are distributed at positions different from the first HS space. In the second HS space, there is a difference D12y between the first range and the second range, and there is a difference D13y between the first range and the third range.

差D12yについては、画像上で第1範囲と第2範囲の色に関して彩度の差として表れる。また、差D12yは差D12xよりも大きくなっている。一方、差D13yについては、画像上で第1範囲と第3範囲の色に関して色相の差として表れる。また、差D13yは差D13xよりも大きくなっている。さらに、第2HS空間上での第1範囲の座標は、第1HS空間上での第1範囲の座標と同じである。即ち、HS空間用の第2色情報変換処理の変換前後で、第1範囲の彩度と色相が同じである。以上のように、HS空間用の第2色情報変換処理によって、第1範囲と第2範囲の差及び第1範囲と第3範囲との差を大きくするとともに、変換処理の前後で、第1範囲の彩度と色相を同じにすることができる。したがって、HS空間用の第2色情報変換処理済みの第2色相H_y、第2彩度S_yから、上記と同様の第2特殊画像を得ることができる。   The difference D12y appears as a difference in saturation regarding the colors of the first range and the second range on the image. Further, the difference D12y is larger than the difference D12x. On the other hand, the difference D13y appears as a hue difference with respect to the colors of the first range and the third range on the image. Further, the difference D13y is larger than the difference D13x. Further, the coordinates of the first range on the second HS space are the same as the coordinates of the first range on the first HS space. That is, the saturation and hue of the first range are the same before and after the conversion of the second color information conversion process for the HS space. As described above, the second color information conversion process for the HS space increases the difference between the first range and the second range and the difference between the first range and the third range, and before and after the conversion process, The saturation and hue of the range can be the same. Therefore, a second special image similar to the above can be obtained from the second hue H_y and the second saturation S_y that have been subjected to the second color information conversion processing for the HS space.

HS空間用の第1色情報変換処理は、HS空間用の第1処理及び第2処理からなる。まず、HS空間用の第1処理においては、図30に示すように、第1及び第3範囲の座標を維持した状態で、第2範囲を彩度方向に対して下方側に平行移動させる。この平行移動により第2範囲を基準範囲まで移動させる。基準範囲は、第1HS空間上の原点を含み、且つ、HS空間用の第1処理後の第1範囲及び第3範囲を含まない低彩度の範囲である。   The first color information conversion process for the HS space includes a first process and a second process for the HS space. First, in the first process for the HS space, as shown in FIG. 30, the second range is translated downward with respect to the saturation direction while maintaining the coordinates of the first and third ranges. By this parallel movement, the second range is moved to the reference range. The reference range is a low chroma range that includes the origin on the first HS space and does not include the first range and the third range after the first processing for the HS space.

HS空間用の第2処理においては、図31に示すように、HS空間用の第1処理後の第1範囲、第2範囲、及び第3範囲のうち、第2範囲の座標を基準範囲に維持した状態で、第1範囲と第3範囲を互いに離すために、第1範囲と第3範囲の座標を平行移動させる。その際、第1範囲の座標を色相方向に対して左側に平行移動させ、且つ、第3範囲の座標を色相方向に対して右側に平行移動させる。   In the second process for the HS space, as shown in FIG. 31, the coordinates of the second range among the first range, the second range, and the third range after the first process for the HS space are used as the reference range. In order to keep the first range and the third range apart from each other in the maintained state, the coordinates of the first range and the third range are translated. At this time, the coordinates of the first range are translated to the left with respect to the hue direction, and the coordinates of the third range are translated to the right with respect to the hue direction.

HS空間用の第2色情報変換処理は、HS空間用の第1処理及び第3処理からなる。HS空間用の第1処理は上記と同様である。一方、HS空間用の第3処理においては、図32に示すように、HS空間用の第1処理後の第1範囲、第2範囲、及び第3範囲のうち、第2範囲の座標を基準範囲に維持し、且つ第1範囲の座標を維持した状態で、第3範囲の座標を色相方向に対して右側に平行移動させる。   The second color information conversion process for the HS space includes a first process and a third process for the HS space. The first process for the HS space is the same as described above. On the other hand, in the third process for the HS space, as shown in FIG. 32, the coordinates of the second range among the first range, the second range, and the third range after the first process for the HS space are used as a reference. While maintaining the range and maintaining the coordinates of the first range, the coordinates of the third range are translated to the right with respect to the hue direction.

[第2実施形態]
第2実施形態では、第1実施形態で示した4色のLED20a〜20dの代わりに、レーザ光源と蛍光体を用いて観察対象の照明を行う。それ以外については、第1実施形態と同様である。
[Second Embodiment]
In the second embodiment, the observation target is illuminated using a laser light source and a phosphor instead of the four-color LEDs 20a to 20d shown in the first embodiment. The rest is the same as in the first embodiment.

図33に示すように、第2実施形態の内視鏡システム100では、光源装置14において、4色のLED20a〜20dの代わりに、中心波長445±10nmの青色レーザ光を発する青色レーザ光源(図33では「445LD」と表記)104と、中心波長405±10nmの青紫色レーザ光を発する青紫色レーザ光源(図33では「405LD」と表記)106とが設けられている。これら各光源104、106の半導体発光素子からの発光は、光源制御部108により個別に制御されており、青色レーザ光源104の出射光と、青紫色レーザ光源106の出射光の光量比は変更自在になっている。   As shown in FIG. 33, in the endoscope system 100 according to the second embodiment, in the light source device 14, a blue laser light source that emits blue laser light having a central wavelength of 445 ± 10 nm instead of the four color LEDs 20a to 20d (see FIG. 33). 33, a blue-violet laser light source (indicated as “405LD” in FIG. 33) 106 that emits blue-violet laser light having a central wavelength of 405 ± 10 nm is provided. Light emission from the semiconductor light emitting elements of these light sources 104 and 106 is individually controlled by the light source control unit 108, and the light quantity ratio between the emitted light of the blue laser light source 104 and the emitted light of the blue-violet laser light source 106 is freely changeable. It has become.

光源制御部108は、通常観察モードの場合には、青色レーザ光源104を駆動させる。これに対して、第1又は第2特殊観察モード、又は同時観察モードの場合には、青色レーザ光源104と青紫色レーザ光源106の両方を駆動させるとともに、青色レーザ光の発光強度を青紫色レーザ光の発光強度よりも大きくなるように制御している。以上の各光源104、106から出射されるレーザ光は、集光レンズ、光ファイバ、合波器などの光学部材(いずれも図示せず)を介して、ライトガイド(LG)41に入射する。   The light source control unit 108 drives the blue laser light source 104 in the normal observation mode. On the other hand, in the first or second special observation mode or the simultaneous observation mode, both the blue laser light source 104 and the blue-violet laser light source 106 are driven, and the emission intensity of the blue laser light is changed to the blue-violet laser. It is controlled so as to be larger than the light emission intensity. The laser light emitted from each of the light sources 104 and 106 enters the light guide (LG) 41 through optical members (all not shown) such as a condenser lens, an optical fiber, and a multiplexer.

なお、青色レーザ光又は青紫色レーザ光の半値幅は±10nm程度にすることが好ましい。また、青色レーザ光源104及び青紫色レーザ光源106は、ブロードエリア型のInGaN系レーザダイオードが利用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオードを用いることもできる。また、上記光源として、発光ダイオード等の発光体を用いた構成としてもよい。   Note that the full width at half maximum of the blue laser beam or the blue-violet laser beam is preferably about ± 10 nm. As the blue laser light source 104 and the blue-violet laser light source 106, a broad area type InGaN laser diode can be used, and an InGaNAs laser diode or a GaNAs laser diode can also be used. In addition, a light-emitting body such as a light-emitting diode may be used as the light source.

照明光学系30aには、照明レンズ45の他に、ライトガイド41からの青色レーザ光又は青紫色レーザ光が入射する蛍光体110が設けられている。蛍光体110に、青色レーザ光が照射されることで、蛍光体110から蛍光が発せられる。また、一部の青色レーザ光は、そのまま蛍光体110を透過する。青紫色レーザ光は、蛍光体110を励起させることなく透過する。蛍光体110を出射した光は、照明レンズ45を介して、検体内に照射される。   In addition to the illumination lens 45, the illumination optical system 30a is provided with a phosphor 110 on which blue laser light or blue-violet laser light from the light guide 41 is incident. When the phosphor 110 is irradiated with the blue laser light, the phosphor 110 emits fluorescence. Some of the blue laser light passes through the phosphor 110 as it is. The blue-violet laser light is transmitted without exciting the phosphor 110. The light emitted from the phosphor 110 is irradiated into the specimen through the illumination lens 45.

ここで、通常観察モードにおいては、主として青色レーザ光が蛍光体110に入射するため、図34に示すような、青色レーザ光、及び青色レーザ光により蛍光体110から励起発光する蛍光を合波した白色光が、観察対象に照射される。一方、第1又は第2特殊観察モード、又は同時観察モードにおいては、青紫色レーザ光と青色レーザ光の両方が蛍光体110に入射するため、図35に示すような、青紫色レーザ光、青色レーザ光、及び青色レーザ光により蛍光体110から励起発光する蛍光を合波した特殊光が、検体内に照射される。   Here, in the normal observation mode, mainly the blue laser light is incident on the phosphor 110. Therefore, as shown in FIG. 34, the blue laser light and the fluorescence excited and emitted from the phosphor 110 are combined by the blue laser light. White light is irradiated to the observation target. On the other hand, in the first or second special observation mode or the simultaneous observation mode, since both the blue-violet laser beam and the blue laser beam are incident on the phosphor 110, blue-violet laser beam, blue color as shown in FIG. The specimen is irradiated with special light obtained by combining fluorescence excited and emitted from the phosphor 110 by the laser light and the blue laser light.

なお、蛍光体110は、青色レーザ光の一部を吸収して、緑色〜黄色に励起発光する複数種の蛍光体(例えばYAG系蛍光体、或いはBAM(BaMgAl1017)等の蛍光体)を含んで構成されるものを使用することが好ましい。本構成例のように、半導体発光素子を蛍光体110の励起光源として用いれば、高い発光効率で高強度の白色光が得られ、白色光の強度を容易に調整できる上に、白色光の色温度、色度の変化を小さく抑えることができる。 The phosphor 110 absorbs a part of blue laser light and emits green to yellow excitation light (for example, a YAG phosphor or a phosphor such as BAM (BaMgAl 10 O 17 )). It is preferable to use what is comprised including. If a semiconductor light emitting element is used as an excitation light source for the phosphor 110 as in this configuration example, high intensity white light can be obtained with high luminous efficiency, and the intensity of white light can be easily adjusted, and the color of white light can be easily adjusted. Changes in temperature and chromaticity can be kept small.

[第3実施形態]
第3実施形態では、第1実施形態で示した4色のLED20a〜20dの代わりに、キセノンランプなどの広帯域光源と回転フィルタを用いて観察対象の照明を行う。また、カラーの撮像センサ48に代えて、モノクロの撮像センサで観察対象の撮像を行う。それ以外については、第1実施形態と同様である。
[Third Embodiment]
In the third embodiment, the observation target is illuminated using a broadband light source such as a xenon lamp and a rotary filter instead of the four-color LEDs 20a to 20d shown in the first embodiment. Further, instead of the color image sensor 48, the observation target is imaged by a monochrome image sensor. The rest is the same as in the first embodiment.

図36に示すように、第3実施形態の内視鏡システム200では、光源装置14において、4色のLED20a〜20dに代えて、広帯域光源202、回転フィルタ204、フィルタ切替部205が設けられている。また、撮像光学系30bには、カラーの撮像センサ48の代わりに、カラーフィルタが設けられていないモノクロの撮像センサ206が設けられている。   As shown in FIG. 36, in the endoscope system 200 of the third embodiment, the light source device 14 is provided with a broadband light source 202, a rotary filter 204, and a filter switching unit 205 instead of the four-color LEDs 20a to 20d. Yes. The imaging optical system 30b is provided with a monochrome imaging sensor 206 that is not provided with a color filter, instead of the color imaging sensor 48.

広帯域光源202はキセノンランプ、白色LEDなどであり、波長域が青色から赤色に及ぶ白色光を発する。回転フィルタ204は、内側に設けられた通常観察モード用フィルタ208と、外側に設けられた特殊観察モード用フィルタ209とを備えている(図37参照)。フィルタ切替部205は、回転フィルタ204を径方向に移動させるものであり、モード切替SW13aにより通常観察モードにセットされたときに、回転フィルタ204の通常観察モード用フィルタ208を白色光の光路に挿入し、第1又は第2特殊観察モードにセットされたときに、回転フィルタ204の特殊観察モード用フィルタ209を白色光の光路に挿入する。   The broadband light source 202 is a xenon lamp, a white LED, or the like, and emits white light having a wavelength range from blue to red. The rotation filter 204 includes a normal observation mode filter 208 provided on the inner side and a special observation mode filter 209 provided on the outer side (see FIG. 37). The filter switching unit 205 moves the rotary filter 204 in the radial direction, and when the normal switching mode is set by the mode switching SW 13a, the normal observation mode filter 208 of the rotary filter 204 is inserted into the white light path. When the first or second special observation mode is set, the special observation mode filter 209 of the rotation filter 204 is inserted into the optical path of white light.

図37に示すように、通常観察モード用フィルタ208には、周方向に沿って、白色光のうち青色光を透過させるBフィルタ208a、白色光のうち緑色光を透過させるGフィルタ208b、白色光のうち赤色光を透過させるRフィルタ208cが設けられている。したがって、通常観察モード時には、回転フィルタ204が回転することで、青色光、緑色光、赤色光が交互に観察対象に照射される。   As shown in FIG. 37, the normal observation mode filter 208 includes, in the circumferential direction, a B filter 208a that transmits blue light of white light, a G filter 208b that transmits green light of white light, and white light. Among them, an R filter 208c that transmits red light is provided. Therefore, in the normal observation mode, the rotation filter 204 is rotated, so that blue light, green light, and red light are alternately irradiated on the observation target.

特殊観察モード用フィルタ209には、周方向に沿って、白色光のうち特定波長の青色狭帯域光を透過させるBnフィルタ209aと、白色光のうち緑色光を透過させるGフィルタ209b、白色光のうち赤色光を透過させるRフィルタ209cが設けられている。したがって、特殊観察モード時には、回転フィルタ204が回転することで、青色狭帯域光、緑色光、赤色光が交互に観察対象に照射される。   The special observation mode filter 209 includes, along the circumferential direction, a Bn filter 209a that transmits blue narrow-band light having a specific wavelength among white light, a G filter 209b that transmits green light among white light, and white light. Among them, an R filter 209c that transmits red light is provided. Accordingly, in the special observation mode, the rotation filter 204 is rotated, so that the observation target is alternately irradiated with the blue narrow band light, the green light, and the red light.

内視鏡システム200では、通常観察モード時には、青色光、緑色光、赤色光が観察対象に照射される毎にモノクロの撮像センサ206で検体内を撮像する。これにより、RGBの3色の画像信号が得られる。そして、それらRGBの画像信号に基づいて、上記第1実施形態と同様の方法で、通常画像が生成される。   In the endoscope system 200, in the normal observation mode, the inside of the sample is imaged by the monochrome imaging sensor 206 every time the observation target is irradiated with blue light, green light, and red light. Thereby, RGB image signals of three colors are obtained. Based on the RGB image signals, a normal image is generated by the same method as in the first embodiment.

一方、第1又は第2特殊観察モード、又は同時観察モード時には、青色狭帯域光、緑色光、赤色光が観察対象に照射される毎にモノクロの撮像センサ206で検体内を撮像する。これにより、Bn画像信号と、G画像信号、R画像信号が得られる。これらBn画像信号と、G画像信号、R画像信号に基づいて、第1又は第2特殊画像の生成が行われる。第1又は第2特殊画像の生成には、B画像信号の代わりに、Bn画像信号が用いられる。それ以外については、第1実施形態と同様の方法で第1又は第2特殊画像の生成が行われる。   On the other hand, in the first or second special observation mode or the simultaneous observation mode, the inside of the specimen is imaged by the monochrome imaging sensor 206 every time the blue narrow band light, green light, and red light are irradiated on the observation target. Thereby, a Bn image signal, a G image signal, and an R image signal are obtained. The first or second special image is generated based on the Bn image signal, the G image signal, and the R image signal. In order to generate the first or second special image, a Bn image signal is used instead of the B image signal. Other than that, the first or second special image is generated by the same method as in the first embodiment.

[第4実施形態]
第4実施形態では、挿入型の内視鏡12及び光源装置14に代えて、飲み込み式のカプセル内視鏡を用いて、通常画像、第1又は第2特殊画像の生成に必要なRGB画像信号を取得する。
[Fourth Embodiment]
In the fourth embodiment, instead of the insertion-type endoscope 12 and the light source device 14, a swallowable capsule endoscope is used to generate an RGB image signal necessary for generating a normal image, a first or second special image. To get.

図38に示すように、第4実施形態のカプセル内視鏡システム300は、カプセル内視鏡302と、送受信アンテナ304と、カプセル用受信装置306と、プロセッサ装置16と、モニタ18を備えている。カプセル内視鏡302は、LED302aと、撮像センサ302bと、画像処理部302cと、送信アンテナ302dとを備えている。なお、プロセッサ装置16は第1実施形態と同様であるが、第4実施形態では、通常観察モード、第1特殊観察モード、第2特殊観察モードに切り替えるためのモード切替SW308が新たに設けられている。   As shown in FIG. 38, a capsule endoscope system 300 according to the fourth embodiment includes a capsule endoscope 302, a transmission / reception antenna 304, a capsule receiving device 306, a processor device 16, and a monitor 18. . The capsule endoscope 302 includes an LED 302a, an image sensor 302b, an image processing unit 302c, and a transmission antenna 302d. The processor device 16 is the same as that in the first embodiment. However, in the fourth embodiment, a mode switching SW 308 for switching to the normal observation mode, the first special observation mode, and the second special observation mode is newly provided. Yes.

LED302aは、白色光を発するものであり、カプセル内視鏡302内に複数設けられている。ここで、LED302aとしては、青色光源と、この青色光源からの光を波長変換して蛍光を発する蛍光体とを備える白色LEDなどを用いることが好ましい。LEDに代えて、LD(Laser Diode)を用いてもよい。LED302aから発せられた白色光は、観察対象に対して照明される。   The LEDs 302 a emit white light, and a plurality of LEDs 302 a are provided in the capsule endoscope 302. Here, as the LED 302a, it is preferable to use a white LED or the like that includes a blue light source and a phosphor that emits fluorescence by converting the wavelength of light from the blue light source. An LD (Laser Diode) may be used instead of the LED. White light emitted from the LED 302a is illuminated on the observation target.

撮像センサ302bはカラーの撮像センサであり、白色光で照明された観察対象を撮像して、RGBの画像信号を出力する。ここで、撮像センサ302bとしては、CCD(Charge Coupled Device)撮像センサやCMOS(Complementary Metal-Oxide Semiconductor)撮像センサを用いることが好ましい。撮像センサ302bから出力されたRGB画像信号は、画像処理部302cで、送信アンテナ302dで送信可能な信号にするための処理が施される。画像処理部302cを経たRGB画像信号は、送信アンテナ302dから、無線で送受信アンテナ304に送信される。   The imaging sensor 302b is a color imaging sensor, images an observation target illuminated with white light, and outputs RGB image signals. Here, as the imaging sensor 302b, a CCD (Charge Coupled Device) imaging sensor or a CMOS (Complementary Metal-Oxide Semiconductor) imaging sensor is preferably used. The RGB image signal output from the imaging sensor 302b is processed by the image processing unit 302c so as to be a signal that can be transmitted by the transmission antenna 302d. The RGB image signal that has passed through the image processing unit 302c is wirelessly transmitted from the transmission antenna 302d to the transmission / reception antenna 304.

送受信アンテナ304は被検者の体に貼り付けられており、送信アンテナ302dからのRGB画像信号を受信する。送受信アンテナ304は、受信したRGB画像信号を、無線でカプセル用受信装置306に送信する。カプセル用受信装置306はプロセッサ装置16の受信部53と接続されており、送受信アンテナ304からのRGB画像信号を受信部53に送信する。   The transmission / reception antenna 304 is attached to the body of the subject and receives the RGB image signal from the transmission antenna 302d. The transmission / reception antenna 304 transmits the received RGB image signal to the capsule receiver 306 wirelessly. The capsule receiving device 306 is connected to the receiving unit 53 of the processor device 16 and transmits the RGB image signal from the transmitting / receiving antenna 304 to the receiving unit 53.

なお、上記実施形態では、図3に示すような発光スペクトルを有する4色の光を用いたが、発光スペクトルはこれに限られない。例えば、図39に示すように、緑色光G及び赤色光Rについては、図3と同様のスペクトルを有する一方で、紫色光Vsについては、中心波長410〜420nmで、図3の紫色光Vよりもやや長波長側に波長範囲を有する光にしてもよい。また、青色光Bsについては、中心波長445〜460nmで、図3の青色光Bよりもやや短波長側に波長範囲を有する光にしてもよい。   In the above embodiment, four colors of light having an emission spectrum as shown in FIG. 3 are used, but the emission spectrum is not limited to this. For example, as shown in FIG. 39, the green light G and the red light R have the same spectrum as in FIG. 3, while the violet light Vs has a center wavelength of 410 to 420 nm. The light may have a wavelength range slightly longer. The blue light Bs may be light having a central wavelength of 445 to 460 nm and a wavelength range slightly shorter than the blue light B in FIG.

なお、上記実施形態では、第2処理で角度θを変更して、第1範囲と第3範囲とが互いに離れるようにしているが、その他の方法で、第1範囲と第3範囲とが互いに離れるようにしてもよい。例えば、動径rを変更して第1範囲と第3範囲とが互いに離れるようにしてもよく、また、動径rと角度θの両方を変更して、第1範囲と第3範囲とが互いに離れるようにしてもよい。また、第2処理では、第3範囲の座標を維持して、第1範囲の座標が移動するように処理してもよい。   In the above-described embodiment, the angle θ is changed in the second process so that the first range and the third range are separated from each other. However, in other methods, the first range and the third range are mutually separated. You may make it leave. For example, the radius r may be changed so that the first range and the third range are separated from each other, and both the radius r and the angle θ are changed so that the first range and the third range are changed. They may be separated from each other. In the second process, the coordinates of the first range may be moved while maintaining the coordinates of the third range.

なお、上記実施形態では、第1RGB画像信号から第1B/G比、第1G/R比を求め、この求めた第1B/G比、第1G/R比で形成された第1信号比空間について説明しているが、第1B画像信号が、波長帯域が狭い狭帯域光(例えば、半値幅が20nmの範囲内の光)から得られる狭帯域信号である場合には、波長帯域が広帯域光(例えば、半値幅が20nmの範囲を超える光)から得られる広帯域信号の場合と比較して、第1信号比空間上での第1範囲と第2範囲との差、及び第1範囲と第3範囲との差が大きくなっている。ここで、狭帯域光としては、第1実施形態の「紫色光V」、「青色光B」が含まれ、第2実施形態の「青色レーザ光」又は「青紫色レーザ光」が含まれ、第3実施形態の「青色狭帯域光」が含まれ、第4実施形態の「青色光源の光」が含まれる。   In the above embodiment, the first B / G ratio and the first G / R ratio are obtained from the first RGB image signal, and the first signal ratio space formed with the obtained first B / G ratio and the first G / R ratio is obtained. As described above, when the 1B image signal is a narrowband signal obtained from narrowband light having a narrow wavelength band (for example, light having a half-value width of 20 nm), the wavelength band has a wideband light ( For example, the difference between the first range and the second range on the first signal ratio space, and the first range and the third range are compared with the case of a broadband signal obtained from a light whose half width exceeds a range of 20 nm. The difference with the range is large. Here, the narrow band light includes the “purple light V” and “blue light B” of the first embodiment, and includes the “blue laser light” or “blue violet laser light” of the second embodiment, The “blue narrowband light” of the third embodiment is included, and the “blue light source light” of the fourth embodiment is included.

図40では、「Xn」は第1B画像信号が狭帯域信号である場合の第2範囲を示しており、「Xb」は第1B画像信号が広帯域信号である場合の第2範囲を示している。「Xn」と「Xb」とを比較すると、「Xn」は第1信号比空間上で「Xb」の下方に位置する。また、「Yn」は第1B画像信号が狭帯域信号である場合の第3範囲を示しており、「Yb」は第1B画像信号が広帯域信号である場合の第3範囲を示している。「Yn」と「Yb」とを比較すると、「Yn」は第1信号比空間上で「Yb」の下方に位置する。   In FIG. 40, “Xn” indicates the second range when the first B image signal is a narrowband signal, and “Xb” indicates the second range when the first B image signal is a wideband signal. . Comparing “Xn” and “Xb”, “Xn” is located below “Xb” in the first signal ratio space. “Yn” indicates a third range when the first B image signal is a narrowband signal, and “Yb” indicates a third range when the first B image signal is a wideband signal. Comparing “Yn” and “Yb”, “Yn” is located below “Yb” in the first signal ratio space.

図40に示すように、「Xn」の平均値AXnと第1範囲の平均値AR1との差D12nは、「Xb」の平均値AXbと第1範囲の平均値AR1との差D12bよりも大きくなっており、「Yn」の平均値AYnと第1範囲の平均値AR1との差D13nは、「Yb」の平均値AXbと第1範囲AR1との差D13bよりも大きくなっている。以上のように、第1B画像信号が狭帯域信号の場合であれば、第1範囲と第2及び第3範囲との差が、動径や角度を拡張・圧縮する処理を行う前に既に大きく付いている。このような状態の第1〜第3範囲に対して特定の特徴空間用の第1及び第2色情報変換処理を行うことで、正常部と萎縮部との違いを更に明確に表示できるようになる。   As shown in FIG. 40, the difference D12n between the average value AXn of “Xn” and the average value AR1 of the first range is larger than the difference D12b between the average value AXb of “Xb” and the average value AR1 of the first range. The difference D13n between the average value AYn of “Yn” and the average value AR1 of the first range is larger than the difference D13b between the average value AXb of “Yb” and the first range AR1. As described above, if the 1B image signal is a narrow-band signal, the difference between the first range and the second and third ranges is already large before performing the process of expanding and compressing the moving radius and angle. attached. By performing the first and second color information conversion processing for a specific feature space for the first to third ranges in such a state, the difference between the normal part and the atrophy part can be displayed more clearly. Become.

なお、第1G画像信号を狭帯域信号にすることで、上記と同様に、第1範囲と第2範囲との差及び第1範囲と第3範囲との差を、第1G画像信号が広帯域信号の場合よりも、大きくすることができる。更には、上記のように、第1B画像信号又は第1G画像信号を狭帯域信号にすることに限らず、第1RGB画像信号のうち少なくとも1色の画像信号を狭帯域信号にすることで、第1範囲と第2範囲との差及び第1範囲と第3範囲との差を、第1RGB画像信号が全て広帯域信号の場合よりも、大きくすることができる。また、狭帯域信号については、上記のように、狭帯域光から得られる信号の他、特開2003−93336号公報に記載の分光推定処理によって得られる信号も含まれる。   By making the first G image signal a narrow band signal, the difference between the first range and the second range and the difference between the first range and the third range can be obtained as described above. It can be made larger than in the case of. Furthermore, as described above, the first B image signal or the first G image signal is not limited to the narrowband signal, but the image signal of at least one color of the first RGB image signals is changed to the narrowband signal, The difference between the first range and the second range and the difference between the first range and the third range can be made larger than when the first RGB image signals are all wideband signals. As described above, the narrowband signal includes a signal obtained from the spectral estimation process described in Japanese Patent Laid-Open No. 2003-93336 in addition to the signal obtained from the narrowband light.

なお、本発明は、第1〜第3実施形態のような内視鏡システムや第4実施形態のようなカプセル内視鏡システムに組み込まれるプロセッサ装置の他、各種の医用画像処理装置に対して適用することが可能である。   The present invention is applicable to various medical image processing apparatuses in addition to the processor apparatus incorporated in the endoscope system as in the first to third embodiments and the capsule endoscope system as in the fourth embodiment. It is possible to apply.

10,100,200 内視鏡システム
16 プロセッサ装置(医用画像処理装置)
72 信号比算出部
64a 第1特殊画像処理部
64b 第2特殊画像処理部
73 信号比空間用の第1色情報変換部
86 CrCb空間用の第1色情報変換部
88 HS空間用の第1色情報変換部
77 RGB変換部(カラー画像信号変換部)
81 明るさ調整部
85 輝度・色差信号変換部
87 HSV変換部
10, 100, 200 Endoscope system 16 Processor device (medical image processing device)
72 Signal ratio calculation unit 64a First special image processing unit 64b Second special image processing unit 73 First color information conversion unit 86 for signal ratio space First color information conversion unit 88 for CrCb space First color for HS space Information converter 77 RGB converter (color image signal converter)
81 brightness adjustment unit 85 luminance / color difference signal conversion unit 87 HSV conversion unit

Claims (5)

第1カラー画像信号を入力処理する画像信号入力処理部と、
前記第1カラー画像信号から色相を取得する色情報取得部と、
前記色相に基づく色情報変換処理を経て得られる第2カラー画像信号の画素値を、前記第1カラー画像信号から得られる第1明るさ情報に基づいて、調整する明るさ調整部とを備え、
前記色情報変換処理は、前記色相によって区別される複数の変換前の範囲のそれぞれについて、各変換前の範囲と対応付けられた変換先の範囲に移す処理である医用画像処理装置。
An image signal input processing unit for performing input processing on the first color image signal;
A color information acquisition unit for acquiring a hue from the first color image signal;
A brightness adjustment unit that adjusts the pixel value of the second color image signal obtained through the color information conversion process based on the hue based on the first brightness information obtained from the first color image signal;
The color information conversion process is a medical image processing apparatus which is a process of shifting each of a plurality of pre-conversion ranges distinguished by hue to a conversion destination range associated with each pre-conversion range.
第1カラー画像信号を入力処理する画像信号入力処理部と、
前記第1カラー画像信号から彩度を取得する色情報取得部と、
前記彩度に基づく色情報変換処理を経て得られる第2カラー画像信号の画素値を、前記第1カラー画像信号から得られる第1明るさ情報に基づいて、調整する明るさ調整部とを備え、
前記色情報変換処理は、前記彩度によって区別される複数の変換前の範囲のそれぞれについて、各変換前の範囲と対応付けられた変換先の範囲に移す処理である医用画像処理装置。
An image signal input processing unit for performing input processing on the first color image signal;
A color information acquisition unit for acquiring saturation from the first color image signal;
A brightness adjustment unit that adjusts the pixel value of the second color image signal obtained through the color information conversion processing based on the saturation based on the first brightness information obtained from the first color image signal. ,
The color information conversion process is a medical image processing apparatus which is a process of moving each of a plurality of pre-conversion ranges distinguished by the saturation to a conversion destination range associated with each pre-conversion range.
第1カラー画像信号を入力処理する画像信号入力処理部と、
前記第1カラー画像信号から第1色相及び第1彩度を取得する色情報取得部と、
前記第1色相及び第1彩度に基づく色情報変換処理を経て得られる第2カラー画像信号の画素値を、前記第1カラー画像信号から得られる第1明るさ情報に基づいて、調整する明るさ調整部とを備え、
前記色情報変換処理は、前記第1色相及び第1彩度によって区別される複数の変換前の範囲のそれぞれについて、各変換前の範囲と対応付けられた変換先の範囲に移す第1色情報変換処理であり、
前記複数の変換前の範囲は、前記第1色相及び第1彩度で形成される第1特徴空間に分布する第1範囲、第2範囲、第3範囲であり、
前記変換先の範囲は、前記第2色相及び第2彩度で形成される第2特徴空間に分布する第1範囲、第2範囲、第3範囲であり、
前記第1色情報変換処理は、前記第2特徴空間における前記第1範囲を、前記第1特徴空間における前記第1範囲に対して彩度及び色相の少なくともいずれかと異ならせる第1色情報変換処理であって、前記第1色情報変換処理は、前記第2特徴空間における前記第1範囲と前記第2範囲との差D12yを、前記第1特徴空間における前記第1範囲と前記第2範囲との差D12xよりも大きくし、且つ、前記第2特徴空間における前記第1範囲と前記第3範囲との差D13yを、前記第1特徴空間における前記第1範囲と前記第3範囲との差D13xよりも大きくし、
前記第1色情報変換処理前の前記差D12xは彩度の差であり、前記第1色情報変換処理前の前記差D13xは色相の差であり、前記第1色情報変換処理後の前記差D12yは彩度及び色相の差であり、前記第1色情報変換処理後の差D13yは色相の差である医用画像処理装置。
An image signal input processing unit for performing input processing on the first color image signal;
A color information acquisition unit for acquiring a first hue and a first saturation from the first color image signal;
Brightness for adjusting the pixel value of the second color image signal obtained through the color information conversion process based on the first hue and the first saturation based on the first brightness information obtained from the first color image signal. An adjustment section,
In the color information conversion process, for each of a plurality of pre-conversion ranges distinguished by the first hue and first saturation, first color information is transferred to a conversion destination range associated with each pre-conversion range. Conversion process,
The plurality of ranges before conversion are a first range, a second range, and a third range distributed in a first feature space formed by the first hue and the first saturation.
The range of the conversion destination is a first range, a second range, and a third range distributed in a second feature space formed by the second hue and the second saturation,
The first color information conversion process is a first color information conversion process in which the first range in the second feature space is different from at least one of saturation and hue with respect to the first range in the first feature space. In the first color information conversion process, the difference D12y between the first range and the second range in the second feature space is expressed as the first range and the second range in the first feature space. And a difference D13y between the first range and the third range in the second feature space is set to a difference D13x between the first range and the third range in the first feature space. Bigger than
The difference D12x before the first color information conversion processing is a saturation difference, the difference D13x before the first color information conversion processing is a hue difference, and the difference after the first color information conversion processing. D12y is a difference in saturation and hue, and the difference D13y after the first color information conversion process is a difference in hue.
前記第2カラー画像信号に基づいて特殊画像を生成する特殊画像処理部を備える請求項1ないし3いずれか1項記載の医用画像処理装置。   The medical image processing apparatus according to claim 1, further comprising a special image processing unit that generates a special image based on the second color image signal. 請求項1ないし4いずれか1項記載の医用画像処理装置と、
被検体を撮像して第1カラー画像信号を得るカラーの撮像センサとを備える内視鏡システム。
A medical image processing apparatus according to any one of claims 1 to 4,
An endoscope system comprising: a color imaging sensor that images a subject to obtain a first color image signal.
JP2017029600A 2017-02-21 2017-02-21 Medical image processing apparatus and endoscope system Active JP6247784B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017029600A JP6247784B2 (en) 2017-02-21 2017-02-21 Medical image processing apparatus and endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017029600A JP6247784B2 (en) 2017-02-21 2017-02-21 Medical image processing apparatus and endoscope system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014158561A Division JP6099603B2 (en) 2014-08-04 2014-08-04 MEDICAL IMAGE PROCESSING DEVICE, ITS OPERATION METHOD, AND ENDOSCOPE SYSTEM

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017220603A Division JP6456459B2 (en) 2017-11-16 2017-11-16 Medical image processing device

Publications (2)

Publication Number Publication Date
JP2017104609A JP2017104609A (en) 2017-06-15
JP6247784B2 true JP6247784B2 (en) 2017-12-13

Family

ID=59058304

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017029600A Active JP6247784B2 (en) 2017-02-21 2017-02-21 Medical image processing apparatus and endoscope system

Country Status (1)

Country Link
JP (1) JP6247784B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021184924A (en) * 2020-02-06 2021-12-09 富士フイルム株式会社 Medical image processing device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH034832A (en) * 1989-06-01 1991-01-10 Toshiba Corp Electronic endoscope device
JP2006142003A (en) * 2004-10-20 2006-06-08 Fuji Photo Film Co Ltd Brightness adjustment method, image processing apparatus and image processing program
JP5173130B2 (en) * 2004-10-20 2013-03-27 富士フイルム株式会社 Electronic endoscope device
DE102007022888B3 (en) * 2007-05-14 2008-11-27 Olympus Winter & Ibe Gmbh Method and device for image processing of endoscope images
JP5380973B2 (en) * 2008-09-25 2014-01-08 株式会社ニコン Image processing apparatus and image processing program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021184924A (en) * 2020-02-06 2021-12-09 富士フイルム株式会社 Medical image processing device
JP7177897B2 (en) 2020-02-06 2022-11-24 富士フイルム株式会社 medical image processor

Also Published As

Publication number Publication date
JP2017104609A (en) 2017-06-15

Similar Documents

Publication Publication Date Title
JP6461739B2 (en) Image processing apparatus, endoscope system, and method of operating image processing apparatus
JP6121368B2 (en) MEDICAL IMAGE PROCESSING DEVICE, ITS OPERATION METHOD, AND ENDOSCOPE SYSTEM
JP6099603B2 (en) MEDICAL IMAGE PROCESSING DEVICE, ITS OPERATION METHOD, AND ENDOSCOPE SYSTEM
JP6313884B2 (en) Endoscope system and operating method thereof
JP6050286B2 (en) MEDICAL IMAGE PROCESSING DEVICE, ITS OPERATION METHOD, AND ENDOSCOPE SYSTEM
JP5932894B2 (en) Medical image processing apparatus and operating method thereof
WO2018230396A1 (en) Medical image processing device, endoscope system, and method for operating medical image processing device
JP5972312B2 (en) Medical image processing apparatus and operating method thereof
JP2016107003A (en) Medical image processor and operation method thereof
JP6047536B2 (en) Medical image processing apparatus and operating method thereof
JP6247784B2 (en) Medical image processing apparatus and endoscope system
JP6113116B2 (en) MEDICAL IMAGE PROCESSING DEVICE, ITS OPERATION METHOD, AND ENDOSCOPE SYSTEM
JP6456459B2 (en) Medical image processing device
JP6659817B2 (en) Medical image processing equipment
JP6383829B2 (en) MEDICAL IMAGE PROCESSING DEVICE, ITS OPERATION METHOD, AND ENDOSCOPE SYSTEM
JP7177897B2 (en) medical image processor

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171117

R150 Certificate of patent or registration of utility model

Ref document number: 6247784

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250