JP7374600B2 - 医療用画像処理装置及び医療用観察システム - Google Patents

Description

本発明は、医療用画像処理装置及び医療用観察システムに関する。

従来、被写体となる生体内（観察対象）を撮像（観察）する医療用観察システムにおいて、以下に示す第１，第２の波長帯域の光を撮像素子にてそれぞれ撮像するシステムが知られている（例えば、特許文献１参照）。
第１の波長帯域の光は、白色光である。すなわち、撮像素子は、白色光が観察対象に照射され、当該観察対象で反射された白色光を撮像して第１のＲＡＷ画像信号を出力する。
第２の波長帯域の光は、インドシアニングリーン等の蛍光物質を励起させる励起光が観察対象に照射された際に、当該観察対象から発せられた蛍光である。そして、撮像素子は、当該蛍光を撮像して第２のＲＡＷ画像信号を出力する。
なお、当該撮像素子の受光面には、互いに異なる分光特性を有するＲ（赤），Ｇ（緑），Ｂ（青）のフィルタ群が特定の形式で配列されたカラーフィルタが設けられている。すなわち、第１，第２のＲＡＷ画像信号は、画素毎に、Ｒ，Ｇ，Ｂの各フィルタ群に対応するＲ，Ｇ，Ｂのいずれかの成分情報（画素データ）を含む。以下、Ｒの成分情報をｒ値と記載し、Ｇの成分情報をｇ値と記載し、Ｂの成分情報をｂ値と記載する。

特開２０１３－１０２８９９号公報

特許文献１に記載の医療用観察システムでは、第１，第２のＲＡＷ画像信号にそれぞれ画像処理を実行している。
ここで、第１のＲＡＷ画像信号に対しては、１画素毎に補間によりｒ値、ｇ値、及びｂ値の全てをそれぞれ持たせるデモザイク処理を実行するとともに、当該デモザイク処理後の画像信号を用いて輝度色差信号を生成するＹＣ処理を実行することが考えられる。一方、第２のＲＡＷ画像信号についても、第１のＲＡＷ画像信号と同様に、デモザイク処理及びＹＣ処理を実行することが考えられる。しかしながら、第２のＲＡＷ画像信号についてデモザイク処理を実行した場合には、輝度色差信号を生成する際、補間により生成された画素データ（実際に撮像素子にて検出されたｒ値、ｇ値、ｂ値ではない画素データ）を用いることになるため、当該第２のＲＡＷ画像信号に基づく画像であって、観察に用いられる蛍光画像の鮮鋭度が低下してしまう。そこで、観察に適した画像を生成することができる技術が要望されている。

本発明は、上記に鑑みてなされたものであって、観察に適した画像を生成することができる医療用画像処理装置及び医療用観察システムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明に係る医療用画像処理装置は、互いに異なる分光特性を有する複数のフィルタ群が特定の形式で配列されたカラーフィルタが受光面に設けられた撮像素子によって可視の波長帯域である第１の波長帯域の光が撮像されることで生成されるデモザイク処理されていない第１の画像信号、及び前記撮像素子によって前記第１の波長帯域とは異なる可視域以外の波長帯域である第２の波長帯域の光が撮像されることで生成されるデモザイク処理されていない第２の画像信号をそれぞれ取得する画像信号取得部と、前記画像信号取得部が取得した前記第１の画像信号が入力され、前記第１の画像信号に対してデモザイク処理を実行するデモザイク処理部を有する第１の信号経路と、前記画像信号取得部が取得した前記第２の画像信号が入力され、前記デモザイク処理部の経路前段で前記第１の信号経路から分岐し、前記第２の画像信号に対して前記デモザイク処理を実行しない経路である第２の信号経路とを備え、前記第１の信号経路は、前記デモザイク処理部によりデモザイク画像信号を生成し、前記第２の信号経路は、前記第２の画像信号を出力する出力部を有し、前記デモザイク処理部よりも経路後段で前記第１の信号経路に合流し、前記第１の信号経路と前記第２の信号経路とが合流した経路には、前記デモザイク画像信号と前記第２の画像信号とが入力され、前記デモザイク画像信号と前記第２の画像信号とのうちいずれか一方の画像信号を出力する選択部と、前記選択部によって出力された画像信号に基づき輝度色差信号を生成する信号生成部とが配置され、前記デモザイク処理部は、前記複数のフィルタ群の各々のフィルタ群に対応する複数の前記デモザイク画像信号を生成し、前記出力部は、互いに同一であり、前記デモザイク処理部が生成する前記複数のデモザイク画像信号と同数である前記第２の画像信号を出力し、前記選択部は、前記複数のデモザイク画像信号と前記複数のデモザイク画像信号と同数である前記第２の画像信号とのうちいずれか一方の画像信号を出力し、前記信号生成部は、前記選択部によって出力された前記複数のデモザイク画像信号と前記複数のデモザイク画像信号と同数である前記第２の画像信号とのうちいずれか一方に基づき前記輝度色差信号を生成し、前記画像信号取得部は、前記第１の波長帯域のうち第１の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第１のフィルタ群と、前記第１の波長帯域のうち前記第１の可視波長帯域とは異なる第２の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第２のフィルタ群とが前記特定の形式で配列された前記カラーフィルタを有する前記撮像素子によって前記第１の波長帯域の光が撮像されることで生成される前記第１の画像信号、及び前記撮像素子によって前記第２の波長帯域の光が撮像されることで生成される前記第２の画像信号をそれぞれ取得する。

また、本発明に係る医療用画像処理装置では、上記発明において、前記第１の信号経路と前記第２の信号経路とが分岐する前の経路には、ホワイトバランス調整処理を実行するホワイトバランス調整処理部が設けられている。

本発明に係る医療用観察システムは、第１の波長帯域の光を撮像することで第１の画像信号を生成するとともに前記第１の波長帯域とは異なる第２の波長帯域の光を撮像することで第２の画像信号を生成する撮像素子、及び前記撮像素子の受光面に設けられ、互いに異なる分光特性を有する複数のフィルタ群が特定の形式で配列されたカラーフィルタを有する撮像装置と、前記第１の画像信号及び前記第２の画像信号を処理する。

また、本発明に係る医療用観察システムでは、上記発明において、前記撮像装置は、前記第１の波長帯域のうち第１の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第１のフィルタ群と、前記第１の波長帯域のうち前記第１の可視波長帯域とは異なる第２の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第２のフィルタ群とが前記特定の形式で配列された前記カラーフィルタを有し、前記画像信号取得部は、前記撮像素子によって被検体からの前記第１の可視波長帯域の光と前記第２の可視波長帯域の光とを受光して生成されるデモザイク処理されていない前記第１の画像信号と、前記撮像素子によって前記被検体からの前記可視域以外の波長帯域の光を受光して生成されるデモザイク処理されていない前記第２の画像信号とをそれぞれ取得する。

本発明に係る医療用画像処理装置及び医療用観察システムによれば、観察に適した画像を生成することができる。

図１は、実施の形態に係る医療用観察システムの構成を示す図である。 図２は、カメラヘッド及び制御装置の構成を示すブロック図である。 図３は、カラーフィルタを示す図である。 図４は、カラーフィルタの分光特性を示す図である。 図５は、画像処理部の構成を示すブロック図である。 図６は、ＲＡＷ撮像画像を示す図である。 図７は、デモザイク処理により生成されたＲ撮像画像を示す図である。 図８は、デモザイク処理により生成されたＧ撮像画像を示す図である。 図９は、デモザイク処理により生成されたＢ撮像画像を示す図である。 図１０は、制御装置の動作を示すフローチャートである。 図１１は、制御装置の動作を説明する図である。 図１２は、制御装置の動作を説明する図である。 図１３は、制御装置の動作を説明する図である。 図１４は、実施の形態の変形例を示す図である。

以下に、図面を参照して、本発明を実施するための形態（以下、実施の形態）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。さらに、図面の記載において、同一の部分には同一の符号を付している。

〔医療用観察システムの概略構成〕
図１は、本実施の形態に係る医療用観察システム１の構成を示す図である。
医療用観察システム１は、医療分野において用いられ、被写体となる生体内（観察対象）を撮像（観察）するシステムである。この医療用観察システム１は、図１に示すように、挿入部２と、光源装置３と、ライトガイド４と、カメラヘッド５と、第１伝送ケーブル６と、表示装置７と、第２伝送ケーブル８と、制御装置９と、第３伝送ケーブル１０とを備える。

本実施の形態では、挿入部２は、硬性内視鏡で構成されている。すなわち、挿入部２は、全体が硬質、または一部が軟質で他の部分が硬質である細長形状を有し、生体内に挿入される。この挿入部２内には、１または複数のレンズを用いて構成され、被写体からの光を集光する光学系が設けられている。

光源装置３は、ライトガイド４の一端が接続され、制御装置９による制御の下、当該ライトガイド４の一端に生体内に照射する光を供給する。この光源装置３は、図１に示すように、第１の光源３１と、第２の光源３２とを備える。
第１の光源３１は、可視の波長帯域である第１の波長帯域の通常光を出射（発光）する。本実施の形態では、第１の光源３１は、白色光を発光するＬＥＤ（Light Emitting Diode）で構成されている。

第２の光源３２は、第１の波長帯域とは異なる第３の波長帯域の励起光を出射（発光）する。本実施の形態では、近赤外の波長帯域の近赤外励起光を発光する半導体レーザで構成されている。当該近赤外励起光は、インドシアニングリーン等の蛍光物質を励起する励起光である。また、当該インドシアニングリーン等の蛍光物質は、当該近赤外励起光で励起すると、当該近赤外励起光の波長帯域の中心波長よりも長波長側に中心波長を有する可視域以外の波長帯域である第２の波長帯域の蛍光を発光する。なお、近赤外励起光の波長帯域と蛍光の波長帯域とは、一部が重なり合うように設定してもよく、あるいは、全く重なり合わないように設定しても構わない。

そして、本実施の形態に係る光源装置３では、制御装置９による制御の下、交互に繰り返される第１，第２の期間のうち、第１の期間において、第１の光源３１が駆動する。すなわち、第１の期間では、光源装置３は、通常光（白色光）を発光する。また、光源装置３では、制御装置９による制御の下、第２の期間において、第２の光源３２が駆動する。すなわち、第２の期間では、光源装置３は、近赤外励起光を発光する。
なお、本実施の形態では、光源装置３は、制御装置９とは別体で構成されているが、これに限らず、当該制御装置９内部に設けられた構成を採用しても構わない。

ライトガイド４は、一端が光源装置３に着脱自在に接続されるとともに、他端が挿入部２に着脱自在に接続される。そして、ライトガイド４は、光源装置３から供給された光（通常光や近赤外励起光）を一端から他端に伝達し、挿入部２に供給する。生体内に通常光（白色光）が照射された場合には、当該生体内を介した通常光（当該生体内で反射された通常光）が挿入部２内の光学系により集光される。また、生体内に近赤外励起光が照射された場合には、当該生体内を介した近赤外励起光（当該生体内で反射された近赤外励起光）と、当該生体内における病変部に集積するインドシアニングリーン等の蛍光物質が当該近赤外励起光によって励起され、当該蛍光物質から発せられた蛍光とが挿入部２内の光学系により集光される。

カメラヘッド５は、本発明に係る撮像装置に相当する。このカメラヘッド５は、挿入部２の基端（接眼部２１（図１））に着脱自在に接続される。そして、カメラヘッド５は、制御装置９による制御の下、挿入部２にて集光された光を撮像し、当該撮像による画像信号（ＲＡＷ信号）を出力する。当該画像信号は、例えば、４Ｋ以上の画像信号である。
なお、カメラヘッド５の詳細な構成については、後述する。

第１伝送ケーブル６は、一端がコネクタＣＮ１（図１）を介して制御装置９に着脱自在に接続され、他端がコネクタＣＮ２（図１）を介してカメラヘッド５に着脱自在に接続される。そして、第１伝送ケーブル６は、カメラヘッド５から出力される画像信号等を制御装置９に伝送するとともに、制御装置９から出力される制御信号、同期信号、クロック、及び電力等をカメラヘッド５にそれぞれ伝送する。
なお、第１伝送ケーブル６を介したカメラヘッド５から制御装置９への画像信号等の伝送は、当該画像信号等を光信号で伝送してもよく、あるいは、電気信号で伝送しても構わない。第１伝送ケーブル６を介した制御装置９からカメラヘッド５への制御信号、同期信号、クロックの伝送も同様である。

表示装置７は、液晶または有機ＥＬ（Electro Luminescence）等を用いた表示ディスプレイで構成され、制御装置９による制御の下、当該制御装置９からの映像信号に基づく画像を表示する。
第２伝送ケーブル８は、一端が表示装置７に着脱自在に接続され、他端が制御装置９に着脱自在に接続される。そして、第２伝送ケーブル８は、制御装置９にて処理された映像信号を表示装置７に伝送する。

制御装置９は、本発明に係る医療用画像処理装置に相当する。この制御装置９は、ＣＰＵ（Central Processing Unit）やＦＰＧＡ（Field-Programmable Gate Array）等で構成され、光源装置３、カメラヘッド５、及び表示装置７の動作を統括的に制御する。
なお、制御装置９の詳細な構成については、後述する。
第３伝送ケーブル１０は、一端が光源装置３に着脱自在に接続され、他端が制御装置９に着脱自在に接続される。そして、第３伝送ケーブル１０は、制御装置９からの制御信号を光源装置３に伝送する。

〔カメラヘッドの構成〕
次に、カメラヘッド５の構成について説明する。
図２は、カメラヘッド５及び制御装置９の構成を示すブロック図である。
なお、図２では、説明の便宜上、制御装置９及びカメラヘッド５と第１伝送ケーブル６との間のコネクタＣＮ１，ＣＮ２、制御装置９及び表示装置７と第２伝送ケーブル８との間のコネクタ、制御装置９及び光源装置３と第３伝送ケーブル１０との間のコネクタの図示を省略している。
カメラヘッド５は、図２に示すように、レンズユニット５１と、撮像部５２と、通信部５３とを備える。

レンズユニット５１は、１または複数のレンズを用いて構成され、挿入部２にて集光された光（通常光や近赤外励起光及び蛍光）を撮像部５２（撮像素子５２２）の撮像面に結像する。
撮像部５２は、制御装置９による制御の下、生体内を撮像する。この撮像部５２は、図２に示すように、励起光カットフィルタ５２１と、撮像素子５２２と、信号処理部５２３とを備える。

励起光カットフィルタ５２１は、レンズユニット５１と撮像素子５２２との間に設けられ、特定の波長帯域を除去するバンドストップフィルタで構成されている。なお、以下では、説明の便宜上、励起光カットフィルタ５２１にてカット（除去）する波長帯域をカット帯域と記載し、当該カット帯域よりも短波長側であって当該励起光カットフィルタ５２１を透過する波長帯域を短波側透過領域と記載し、当該カット帯域よりも長波長側であって当該励起光カットフィルタ５２１を透過する波長帯域を長波側透過領域と記載する。
ここで、カット帯域は、近赤外励起光の波長帯域の少なくとも一部を含む。本実施の形態では、カット帯域は、近赤外励起光の波長帯域の全てを含む。また、長波側透過帯域は、蛍光の波長帯域を含む。さらに、短波側透過領域は、通常光（白色光）の波長帯域を含む。

すなわち、励起光カットフィルタ５２１は、レンズユニット５１から撮像素子５２２に向かう通常光（白色光）を透過させる。なお、以下では、説明の便宜上、励起光カットフィルタ５２１を透過し、撮像素子５２２に向かう通常光（白色光）を被写体像と記載する。一方、励起光カットフィルタ５２１は、レンズユニット５１から撮像素子５２２に向かう近赤外励起光及び蛍光については、近赤外励起光を除去するとともに、蛍光を透過させる。なお、以下では、説明の便宜上、励起光カットフィルタ５２１を透過し、撮像素子５２２に向かう蛍光を蛍光像と記載する。

撮像素子５２２は、励起光カットフィルタ５２１を透過した被写体像や蛍光像を受光して電気信号（アナログ信号）に変換するＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等で構成されている。この撮像素子５２２の撮像面（受光面）には、カラーフィルタ５２２ａ（図２）が設けられている。

図３は、カラーフィルタ５２２ａを示す図である。図４は、カラーフィルタ５２２ａの分光特性を示す図である。具体的に、図４では、Ｒフィルタ群５２２ｒの分光特性を曲線ＣＲにて示し、Ｇフィルタ群５２２ｇの分光特性を曲線ＣＧにて示し、Ｂフィルタ群５２２ｂの分光特性を曲線ＣＢにて示している。
カラーフィルタ５２２ａは、透過させる光（Ｒ（赤），Ｇ（緑），Ｂ（青））の波長帯域に応じてグループ分けされた３つのフィルタ群が特定の形式（例えば、ベイヤ配列）で配列されたカラーフィルタである。

具体的に、カラーフィルタ５２２ａは、図３及び図４に示すように、Ｒの波長帯域（本発明に係る第１，第２の可視波長帯域に相当）の光を主に透過させるＲフィルタ群５２２ｒ（図３）と、Ｂの波長帯域（本発明に係る第１，第２の可視波長帯域に相当）の光を主に透過させるＢフィルタ群５２２ｂ（図３）と、Ｇの波長帯域（本発明に係る第１，第２の可視波長帯域に相当）の光を主に透過させる第１Ｇフィルタ群（Ｒフィルタ群５２２ｒと同一の列に配列）と、Ｇの波長帯域（本発明に係る第１，第２の可視波長帯域に相当）の光を主に透過させる第２Ｇフィルタ群（Ｂフィルタ群５２２ｂと同一の列に配列）とを有する。なお、図３では、第１，第２Ｇフィルタ群を纏めてＧフィルタ群５２２ｇとしている。また、図３では、Ｒフィルタ群５２２ｒには「Ｒ」の文字を付し、Ｇフィルタ群５２２ｇには「Ｇ」の文字を付し、Ｂフィルタ群５２２ｂには「Ｂ」の文字を付している。
なお、Ｒ，Ｇ，Ｂの各フィルタ群５２２ｒ，５２２ｇ，５２２ｂは、図４に示すように、蛍光の波長帯域（第２の波長帯域、例えば850nm～900nm程度の波長帯域）において、略同一の分光特性を有する。そして、撮像素子５２２は、Ｒ，Ｇ，Ｂの波長帯域の光のみならず、蛍光の波長帯域（第２の波長帯域）に対しても感度を有する。
なお、Ｒ，Ｇ，Ｂの各フィルタ群５２２ｒ，５２２ｇ，５２２ｂは、本発明に係る第１，第２のフィルタ群に相当する。

そして、撮像素子５２２は、制御装置９による制御の下、光源装置３の発光タイミングに同期して、交互に繰り返される第１，第２の期間毎に撮像を行う。以下では、説明の便宜上、撮像素子５２２により第１の期間において被写体像（通常光）を撮像することで生成された画像を被写体画像（本発明に係る第１の画像信号に相当）と記載し、撮像素子５２２により第２の期間において蛍光像（蛍光）を撮像することで生成された画像を蛍光画像（本発明に係る第２の画像信号に相当）と記載する。また、被写体画像及び蛍光画像を纏めてＲＡＷ撮像画像と記載する。
信号処理部５２３は、撮像素子５２２にて生成されたＲＡＷ撮像画像（アナログ信号）に対して信号処理を行ってＲＡＷ撮像画像（デジタル信号）を出力する。

通信部５３は、第１伝送ケーブル６を介して、撮像部５２から出力されるＲＡＷ撮像画像を制御装置９に送信するトランスミッタとして機能する。この通信部５３は、例えば、第１伝送ケーブル６を介して、制御装置９との間で、１Ｇｂｐｓ以上の伝送レートでＲＡＷ撮像画像の通信を行う高速シリアルインターフェースで構成されている。

〔制御装置の構成〕
次に、制御装置９の構成について図２を参照しながら説明する。
制御装置９は、図２に示すように、通信部９１と、メモリ９２と、観察画像生成部９３と、制御部９４と、入力部９５と、出力部９６と、記憶部９７とを備える。
通信部９１は、第１伝送ケーブル６を介して、カメラヘッド５（通信部５３）から出力されるＲＡＷ撮像画像を受信するレシーバとして機能する。この通信部９１は、例えば、通信部５３との間で、１Ｇｂｐｓ以上の伝送レートでＲＡＷ撮像画像の通信を行う高速シリアルインターフェースで構成されている。すなわち、通信部９１は、本発明に係る画像信号取得部に相当する。
メモリ９２は、例えば、ＤＲＡＭ（Dynamic Random Access Memory）等で構成されている。このメモリ９２は、カメラヘッド５（通信部５３）から順次、出力されるＲＡＷ撮像画像を複数フレーム分、一時的に記憶可能とする。

観察画像生成部９３は、制御部９４による制御の下、カメラヘッド５（通信部５３）から順次、出力され、通信部９１にて受信したＲＡＷ撮像画像を処理する。この観察画像生成部９３は、図２に示すように、メモリコントローラ９３１と、画像処理部９３２と、重畳画像生成部９３４と、表示制御部９３５とを備える。

メモリコントローラ９３１は、メモリ９２へのＲＡＷ撮像画像の書込み及び読出しを制御する。より具体的に、メモリコントローラ９３１は、カメラヘッド５（通信部５３）から順次、出力され、通信部９１にて受信したＲＡＷ撮像画像（被写体画像及び蛍光画像）をメモリ９２に順次、書き込む。また、メモリコントローラ９３１は、メモリ９２から被写体画像及び蛍光画像を特定のタイミングで交互に読み出すとともに、当該読み出した被写体画像及び蛍光画像を画像処理部９３２に順次、入力させる。
なお、本実施の形態では、撮像部５２にて生成されたＲＡＷ撮像画像がそのまま画像処理部９３２に入力される構成としているが、画像処理部９３２に入力される画像としてはＲＡＷ撮像画像に限らず、デモザイク処理前の画像であれば、その他の画像でもよい。

図５は、画像処理部９３２の構成を示すブロック図である。図６は、ＲＡＷ撮像画像Ｄ０を示す図である。
画像処理部９３２は、入力したＲＡＷ撮像画像Ｄ０（被写体画像及び蛍光画像）にそれぞれ画像処理を実行する。この画像処理部９３２は、図５に示すように、ＷＢ処理部９３２１と、デモザイク処理部９３２２と、セレクタ９３２３と、３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４Ｂと、ＹＣ処理部９３２５とを備える。
ここで、ＲＡＷ撮像画像Ｄ０は、図６に示すように、画素毎に、Ｒ，Ｇ，Ｂの各フィルタ群５２２ｒ，５２２ｇ，５２２ｂに対応するＲ，Ｇ，Ｂのいずれかの成分情報（画素データ）を含む。なお、図６では、Ｒの成分情報（以下、ｒ値と記載）を含む画素には「Ｒ」の文字を付し、Ｇの成分情報（以下、ｇ値と記載）を含む画素には「Ｇ」の文字を付し、Ｂの成分情報（以下、ｂ値と記載）を含む画素には「Ｂ」の文字を付している。

ＷＢ処理部９３２１は、本発明に係るホワイトバランス調整処理部及び出力部に相当する。このＷＢ処理部９３２１は、ＲＡＷ撮像画像Ｄ０（被写体画像及び蛍光画像）におけるｒ値、ｇ値、及びｂ値に制御部９４にて設定された特定のゲインをそれぞれ乗算するＷＢ処理（ホワイトバランス調整処理）を行う。なお、被写体画像におけるｒ値、ｇ値、及びｂ値にそれぞれ乗算される３つのゲイン（以下、第１のゲインと記載）と、蛍光画像におけるｒ値、ｇ値、及びｂ値にそれぞれ乗算される３つのゲイン（以下、第２のゲインと記載）とは異なるものである。具体的に、３つの第１のゲインは、通常光（白色光）の波長帯域（第１の波長帯域）において、ｒ値、ｇ値、及びｂ値のホワイトバランスを取るためのゲインである。一方、３つの第２のゲインは、蛍光の波長帯域（第２の波長帯域）において、ｒ値、ｇ値、及びｂ値のホワイトバランスを取るためのゲインである。

図７は、デモザイク処理により生成されたＲ撮像画像ＤＲを示す図である。図８は、デモザイク処理により生成されたＧ撮像画像ＤＧを示す図である。図９は、デモザイク処理により生成されたＢ撮像画像ＤＢを示す図である。なお、図７ないし図９では、図６と同様に、ｒ値を含む画素には「Ｒ」の文字を付し、ｇ値を含む画素には「Ｇ」の文字を付し、ｂ値を含む画素には「Ｂ」の文字を付している。
デモザイク処理部９３２２は、ＷＢ処理後の被写体画像から、補間により全ての画素についてｒ値をそれぞれ持たせたＲ撮像画像ＤＲ（図７）と、補間により全ての画素についてｇ値をそれぞれ持たせたＧ撮像画像ＤＧ（図８）と、補間により全ての画素についてｂ値をそれぞれ持たせたＢ撮像画像ＤＢ（図９）とを生成する。
以上説明したＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢは、本発明に係るデモザイク画像信号に相当する。

セレクタ９３２３は、本発明に係る選択部に相当する。このセレクタ９３２３は、制御部９４による制御の下、デモザイク処理部９３２２から入力した３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢの組と、ＷＢ処理部９３２１から入力した３つのＷＢ処理後の蛍光画像Ｄ０´（図５）の組とのうち、一方の組の３つの画像を出力する。
なお、３つのＷＢ処理後の蛍光画像Ｄ０´は、デモザイク処理が実行されておらず、１画素にｒ値、ｇ値、及びｂ値のいずれか一つのみを持つ画像であって、３つ全てが同一の画像である。また、当該３つのＷＢ処理後の蛍光画像Ｄ０´は、本発明に係る第２の画像信号に相当する。

３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４Ｂは、セレクタ９３２３から出力された３つの画像（３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢ、または、３つの蛍光画像Ｄ０´）に対して、それぞれガンマ処理（γ補正）を行う。本実施の形態では、３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４Ｂは、同一のガンマ処理を実行する。

ＹＣ変換部９３２５は、セレクタ９３２３から出力され、ガンマ処理が実行された３つの画像（３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢ、または、３つの蛍光画像Ｄ０´）を用いて特定の演算式にて演算を行うことにより、輝度信号Ｙ（図５）及び色差信号Ｃｂ，Ｃｒ（図５）を生成する。より具体的に、ＹＣ変換部９３２５は、セレクタ９３２３から出力され、ガンマ処理が実行された３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢを用いて当該特定の演算式にて演算を行うことにより第１の輝度色差信号Ｙ，Ｃｂ，Ｃｒを生成する。一方、ＹＣ変換部９３２５は、セレクタ９３２３から出力され、ガンマ処理が実行された３つの蛍光画像Ｄ０´を用いて当該特定の演算式にて演算を行うことにより第２の輝度色差信号Ｙ，Ｃｂ，Ｃｒを生成する。なお、セレクタ９３２３から出力され、ガンマ処理が実行された３つの蛍光画像Ｄ０´から当該特定の演算式にて演算を行った場合には、色差信号Ｃｂ，Ｃｒはそれぞれ略０を示す信号となる。
以上説明した３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４ＢとＹＣ変換部９３２５とは、本発明に係る信号生成部９３２６（図５）に相当する。そして、セレクタ９３２３は、デモザイク処理部９３２２と信号生成部９３２６との間に設けられている。

以上説明したように、画像処理部９３２には、入力したＲＡＷ撮像画像Ｄ０（被写体画像）を処理する第１の信号経路と、入力したＲＡＷ撮像画像Ｄ０（蛍光画像）を処理する第２の信号経路とが設けられている。当該第１の信号経路は、ＷＢ処理部９３２１～デモザイク処理部９３２２～セレクタ９３２３～３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４Ｂ～ＹＣ処理部９３２５を辿る経路である。一方、当該第２の信号経路は、ＷＢ処理部９３２１～セレクタ９３２３～３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４Ｂ～ＹＣ処理部９３２５を辿る経路である。すなわち、当該第２の信号経路は、デモザイク処理部９３２２の経路前段で当該第１の信号経路から分岐するとともにデモザイク処理部９３２２の経路後段で当該第１の信号経路に合流し、デモザイク処理を実行しない経路である。そして、当該第１，第２の信号経路が合流した経路には、信号生成部９３２６が設けられている。
以下では、説明の便宜上、上述した第１の信号経路を辿る画像処理を第１の画像処理と記載し、上述した第２の信号経路を辿る画像処理を第２の画像処理と記載する。

重畳画像生成部９３３は、画像処理部９３２にて第１の画像処理が実行された後の被写体画像と、当該画像処理部９３２にて第２の画像処理が実行された後の蛍光画像とを全ての領域について対応する画素同士で重畳して重畳画像を生成する。
表示制御部９３４は、重畳画像生成部９３３にて生成された重畳画像に基づいて、表示用の映像信号を生成する。そして、表示制御部９３４は、第２伝送ケーブル８を介して、当該映像信号を表示装置７に出力する。

制御部９４は、例えば、ＣＰＵやＦＰＧＡ等を用いて構成され、第１～第３伝送ケーブル６，８，１０を介して制御信号を出力することで、光源装置３、カメラヘッド５、及び表示装置７の動作を制御するとともに、制御装置９全体の動作を制御する。この制御部９４は、図２に示すように、光源制御部９４１と、撮像制御部９４２とを備える。なお、光源制御部９４１及び撮像制御部９４２の機能については、後述する「制御装置の動作」において説明する。

入力部９５は、マウス、キーボード、及びタッチパネル等の操作デバイスを用いて構成され、医師等のユーザによるユーザ操作を受け付ける。そして、入力部９５は、当該ユーザ操作に応じた操作信号を制御部９４に出力する。
出力部９６は、スピーカやプリンタ等を用いて構成され、各種情報を出力する。
記憶部９７は、制御部９４が実行するプログラムや、制御部９４の処理に必要な情報等を記憶する。

〔制御装置の動作〕
次に、上述した制御装置９の動作について説明する。
図１０は、制御装置９の動作を示すフローチャートである。図１１ないし図１３は、制御装置９の動作を説明する図である。具体的に、図１１は、第１の画像処理が実行された後の１フレームの被写体画像ＷＬＩを示す図である。図１２は、第２の画像処理が実行された後の１フレームの蛍光画像ＩＲを示す図である。なお、図１２に示した蛍光画像ＩＲは、グレースケールで表現されており、黒に近付くにしたがって撮像された蛍光成分の強度が高い（輝度値が高い）ものである。図１３は、重畳画像生成部９３３にて生成された１フレームの重畳画像Ｄ１を示す図である。

先ず、光源制御部９４１は、第１，第２の光源３１，３２の時分割駆動を実行する（ステップＳ１）。具体的に、光源制御部９４１は、ステップＳ１において、同期信号に基づいて、交互に繰り返される第１，第２の期間のうち、第１の期間において第１の光源３１を発光させ、第２の期間において第２の光源３２を発光させる。

ステップＳ１の後、撮像制御部９４２は、同期信号に基づいて、第１，第２の光源３１，３２の発光タイミングに同期させ、撮像素子５２２に第１，第２の期間において被写体像及び蛍光像をそれぞれ撮像させる（ステップＳ２～Ｓ４）。すなわち、撮像素子５２２は、第１の期間である場合（ステップＳ２：Ｙｅｓ）、言い換えれば、生体内に通常光（白色光）が照射された場合には、被写体像（通常光）を撮像して被写体画像を生成する（ステップＳ３）。一方、撮像素子５２２は、第２の期間である場合（ステップＳ２：Ｎｏ）、言い換えれば、生体内に近赤外励起光が照射された場合には、蛍光像（蛍光）を撮像して蛍光画像を生成する（ステップＳ４）。

ステップＳ３，Ｓ４の後、メモリコントローラ９３１は、同期信号に基づいて、メモリ９２へのＲＡＷ撮像画像の書込み及び読出しを制御する（ステップＳ５）。
ステップＳ５の後、画像処理部９３２は、以下の処理を実行する（ステップＳ６）。
すなわち、画像処理部９３２は、メモリコントローラ９３１によってメモリ９２から順次、読み出された各ＲＡＷ撮像画像Ｄ０（被写体画像）に対して順次、第１の画像処理を実行する。また、画像処理部９３２は、メモリコントローラ９３１によってメモリ９２から順次、読み出された各ＲＡＷ撮像画像Ｄ０（蛍光画像）に対して順次、第２の画像処理を実行する。

ステップＳ６の後、重畳画像生成部９３３は、画像処理部９３２から順次、出力される各被写体画像（例えば、図１１に示した被写体画像ＷＬＩ）と、当該画像処理部９３２から順次、出力される各蛍光画像（例えば、図１２に示した蛍光画像ＩＲ）との対応する画像同士を全ての領域について対応する画素同士で重畳して順次、重畳画像（例えば、図１３に示した重畳画像ＳＩ）を生成する（ステップＳ７）。
ステップＳ７の後、表示制御部９３４は、重畳画像生成部９３３にて順次、生成された各重畳画像（例えば、図１３に示した重畳画像ＳＩ）を表示するための映像信号を順次、生成し、当該映像信号を表示装置７に順次、出力する（ステップＳ８）。これにより、表示装置７には、重畳画像（例えば、図８に示した重畳画像ＳＩ）が順次、表示される。

以上説明した本実施の形態によれば、以下の効果を奏する。
本実施の形態に係る制御装置９では、画像処理部９３２には、入力したＲＡＷ撮像画像Ｄ０（被写体画像）に第１の画像処理を実行する第１の信号経路と、入力したＲＡＷ撮像画像Ｄ０（蛍光画像）に第２の画像処理を実行する第２の信号経路とが設けられている。そして、当該第２の信号経路は、デモザイク処理部９３２２の経路前段で当該第１の信号経路から分岐し、デモザイク処理を実行しない経路である。
したがって、蛍光画像に基づく輝度色差信号を生成する際、補間により生成された画素データを用いることなく、実際に撮像素子５２２にて検出されたｒ値、ｇ値、ｂ値を用いることができるため、蛍光画像ＩＲの鮮鋭度が低下してしまうことがない。すなわち、観察に適した画像（蛍光画像ＩＲ）を生成することができる。

特に、Ｒ，Ｇ，Ｂの各フィルタ群５２２ｒ，５２２ｇ、５２２ｂは、蛍光の波長帯域（第２の波長帯域）において、略同一の分光特性を有する。また、ＲＡＷ撮像画像Ｄ０（蛍光画像）は、ＷＢ処理により、蛍光の波長帯域において、ｒ値、ｇ値、及びｂ値のホワイトバランスが取られる。このため、ＲＡＷ撮像画像Ｄ０（蛍光画像）にデモザイク処理を実施せずに、３つのＷＢ処理後の同一の蛍光画像Ｄ０´を信号生成部９３２６に入力し、当該信号生成部９３２６にて輝度色差信号Ｙ，Ｃｂ，Ｃｒを生成することができる。

また、第２の信号経路は、デモザイク処理部９３２２の経路後段で第１の信号経路に合流する。そして、第１，第２の信号経路が合流した経路には、信号生成部９３２６が設けられている。また、デモザイク処理部９３２２と信号生成部９３２６との間には、セレクタ９３２３が設けられている。
このため、セレクタ９３２３の数を最小限の数とし、画像処理部９３２の回路規模を増加させることなく、当該画像処理部９３２にて２種類のＲＡＷ撮像画像Ｄ０（被写体画像及び蛍光画像）を処理することができる。

（その他の実施の形態）
ここまで、本発明を実施するための形態を説明してきたが、本発明は上述した実施の形態によってのみ限定されるべきものではない。
図１４は、本実施の形態の変形例を示す図である。具体的に、図１４は、本変形例に係る画像処理部９３２Ａの構成を示すブロック図である。
上述した実施の形態において、画像処理部９３２の代わりに図１４に示した画像処理部９３２Ａを採用しても構わない。
画像処理部９３２Ａでは、セレクタ９３２３の代わりに、第１～第４のセレクタ９３２３Ａ～９３２３Ｄが採用されている。

第１のセレクタ９３２３Ａは、デモザイク処理部９３２２とガンマ処理部９３２４Ｂとの間に設けられている。そして、第１のセレクタ９３２３Ａは、制御部９４による制御の下、デモザイク処理部９３２２から入力したＢ撮像画像ＤＢと、ＷＢ処理部９３２１から入力したＷＢ処理後の蛍光画像Ｄ０´とのうち、一方の画像をガンマ処理部９３２４Ｂに出力する。
第２のセレクタ９３２３Ｂは、ＹＣ処理部９３２５の経路後段に設けられている。そして、第２のセレクタ９３２３Ｂは、制御部９４による制御の下、ガンマ処理が実行された３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢを用いてＹＣ処理部９３２５にて特定の演算式にて演算を行うことにより生成された輝度信号Ｙ１（図１４）と、蛍光画像Ｄ０´に対してガンマ処理部９３２４Ｂにてガンマ処理が実行された後の蛍光画像Ｙ２（図１４）とのうち、一方を輝度信号Ｙとして出力する。なお、蛍光画像Ｙ２を輝度信号Ｙとして出力する場合には、１画素毎に持っているｒ値、ｇ値、及びｂ値のいずれかを輝度値としてそのまま出力することとなる。

第３のセレクタ９３２３Ｃは、ＹＣ処理部９３２５の経路後段に設けられている。そして、第３のセレクタ９３２３Ｃは、制御部９４による制御の下、ガンマ処理が実行された３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢを用いてＹＣ処理部９３２５にて特定の演算式にて演算を行うことにより生成された色差信号Ｃｂ１（図１４）と、０を示す信号Ｃｂ２とのうち、一方を色差信号Ｃｂとして出力する。なお、第３のセレクタ９３２３Ｃは、制御部９４による制御の下、第２のセレクタ９３２３Ｂが輝度信号Ｙ１を輝度信号Ｙとして出力する場合には色差信号Ｃｂ１を色差信号Ｃｂとして出力し、第２のセレクタ９３２３Ｂが蛍光画像Ｙ２を輝度信号Ｙとして出力する場合には色差信号Ｃｂ２を色差信号Ｃｂとして出力する。

第４のセレクタ９３２３Ｃは、ＹＣ処理部９３２５の経路後段に設けられている。そして、第４のセレクタ９３２３Ｃは、制御部９４による制御の下、ガンマ処理が実行された３つのＲ，Ｇ，Ｂ撮像画像ＤＲ，ＤＧ，ＤＢを用いてＹＣ処理部９３２５にて特定の演算式にて演算を行うことにより生成された色差信号Ｃｒ１（図１４）と、０を示す信号Ｃｒ２とのうち、一方を色差信号Ｃｒとして出力する。なお、第４のセレクタ９３２３Ｄは、制御部９４による制御の下、第２のセレクタ９３２３Ｂが輝度信号Ｙ１を輝度信号Ｙとして出力する場合には色差信号Ｃｒ１を色差信号Ｃｒとして出力し、第２のセレクタ９３２３Ｂが蛍光画像Ｙ２を輝度信号Ｙとして出力する場合には色差信号Ｃｒ２を色差信号Ｃｒとして出力する。

以上説明したように、本変形例においても、画像処理部９３２Ａには、入力したＲＡＷ撮像画像Ｄ０（被写体画像）に第１の画像処理を実行する第１の信号経路と、入力したＲＡＷ撮像画像Ｄ０（蛍光画像）に第２の画像処理を実行する第２の信号経路とが設けられている。当該第１の信号経路は、ＷＢ処理部９３２１～デモザイク処理部９３２２～第１のセレクタ９３２３Ａ～３つのガンマ処理部９３２４Ｒ，９３２４Ｇ，９３２４Ｂ～ＹＣ処理部９３２５～第２，第３，第４のセレクタ９３２３Ｂ，９３２３Ｃ，９３２３Ｄを辿る経路である。一方、当該第２の信号経路は、ＷＢ処理部９３２１～第１のセレクタ９３２３Ａ～ガンマ処理部９３２４Ｂ～第２のセレクタ９３２３Ｂを辿る経路である。すなわち、当該第２の信号経路は、デモザイク処理部９３２２の経路前段で当該第１の信号経路から分岐し、デモザイク処理を実行しない経路である。

以上説明した本変形例に係る画像処理部９３２Ａを採用した場合であっても、上述した実施の形態と同様の効果を奏する。
なお、上述した変形例では、第１のセレクタ９３２３Ａは、Ｂ撮像画像ＤＢ及び蛍光画像Ｄ０´を入力し、一方の画像をガンマ処理部９３２４Ｂに出力していたが、これに限らない。例えば、第１のセレクタ９３２３Ａは、Ｒ撮像画像ＤＲ及び蛍光画像Ｄ０´を入力し、一方の画像をガンマ処理部９３２４Ｒに出力するように構成しても構わない。この際、第２のセレクタ９３２３Ｂは、輝度信号Ｙ１と、蛍光画像Ｄ０´に対してガンマ処理部９３２４Ｒにてガンマ処理が実行された後の蛍光画像とを入力し、一方を輝度信号Ｙとして出力する。また、例えば、第１のセレクタ９３２３Ａは、Ｇ撮像画像ＤＧ及び蛍光画像Ｄ０´を入力し、一方の画像をガンマ処理部９３２４Ｇに出力するように構成しても構わない。この際、第２のセレクタ９３２３Ｂは、輝度信号Ｙ１と、蛍光画像Ｄ０´に対してガンマ処理部９３２４Ｇにてガンマ処理が実行された後の蛍光画像とを入力し、一方を輝度信号Ｙとして出力する。

上述した実施の形態では、第１の光源３１が白色光を発光し、第２の光源３２が近赤外励起光を発光していたが、これに限らない。第１，第２の光源３１，３２としては、第１の光源３１が第１の波長帯域の光を発光し、第２の光源３２が第１の波長帯域とは異なる第３の波長帯域の光を発光していれば、その他の構成を採用しても構わない。この際、第１，第３の波長帯域は、一部が重複する帯域であってもよく、あるいは、全く重複しない帯域であっても構わない。また、第１の光源３１は、狭帯域光を発光しても構わない。

上述した実施の形態では、第１，第２の期間が交互に繰り返すように設定されていたが、これに限らず、第１，第２の期間の少なくともいずれかが連続し、第１，第２の期間の頻度の比率が１：１以外の比率となるように構成しても構わない。
上述した実施の形態において、カラーフィルタ５２２ａを構成する各フィルタ群の分光特性は、図４に示した分光特性に限らず、その他の分光特性を有するカラーフィルタを採用しても構わない。

上述した実施の形態では、挿入部２を硬性内視鏡で構成した医療用観察システム１に本発明に係る医療用画像処理装置を搭載していたが、これに限らない。例えば、挿入部２を軟性内視鏡で構成した医療用観察システムに本発明に係る医療用画像処理装置を搭載しても構わない。また、被写体内（生体内）や被写体表面（生体表面）の所定の視野領域を拡大して観察する手術用顕微鏡（例えば、特開２０１６－４２９８１号公報参照）等の医療用観察システムに本発明に係る医療用画像処理装置を搭載しても構わない。
上述した実施の形態において、カメラヘッド５の一部の構成や制御装置９の一部の構成を例えばコネクタＣＮ１やコネクタＣＮ２に設けても構わない。

上述した実施の形態では、第１の画像処理を実行した後の被写体画像（例えば、図１１に示した被写体画像ＷＬＩ）と第２の画像処理を実行した後の蛍光画像（例えば、図１２に示した蛍光画像ＩＲ）とを対応する画素同士で重畳して重畳画像（例えば、図１３に示した重畳画像ＳＩ）を生成し、当該重畳画像を表示装置７に表示していたが、これに限らない。例えば、ピクチャインピクチャ処理等を実行し、当該被写体画像と当該蛍光画像とを表示装置７に同時に表示する構成を採用しても構わない。

１ 医療用観察システム
２ 挿入部
３ 光源装置
４ ライトガイド
５ カメラヘッド
６ 第１伝送ケーブル
７ 表示装置
８ 第２伝送ケーブル
９ 制御装置
１０ 第３伝送ケーブル
２１ 接眼部
３１ 第１の光源
３２ 第２の光源
５１ レンズユニット
５２ 撮像部
５３ 通信部
９１ 通信部
９２ メモリ
９３ 観察画像生成部
９４ 制御部
９５ 入力部
９６ 出力部
９７ 記憶部
５２１ 励起光カットフィルタ
５２２ 撮像素子
５２２ａ カラーフィルタ
５２２ｂ Ｂフィルタ群
５２２ｇ Ｇフィルタ群
５２２ｒ Ｒフィルタ群
５２３ 信号処理部
９３１ メモリコントローラ
９３２ 画像処理部
９３４ 重畳画像生成部
９３５ 表示制御部
９４１ 光源制御部
９４２ 撮像制御部
９３２１ ＷＢ処理部
９３２２ デモザイク処理部
９３２３ セレクタ
９３２３Ａ 第１のセレクタ
９３２３Ｂ 第２のセレクタ
９３２３Ｃ 第３のセレクタ
９３２３Ｄ 第４のセレクタ
９３２４Ｂ，９３２４Ｇ，９３２４Ｒ ガンマ処理部
９３２５ ＹＣ処理部
９３２６ 信号生成部
Ｃｂ，Ｃｂ１，Ｃｂ２，Ｃｒ，Ｃｒ１，Ｃｒ２ 色差信号
ＣＢ，ＣＧ，ＣＲ 曲線
ＣＮ１，ＣＮ２ コネクタ
Ｄ０ ＲＡＷ撮像画像
Ｄ０´ ＷＢ処理後の蛍光画像
ＤＢ Ｂ撮像画像
ＤＧ Ｇ撮像画像
ＤＲ Ｒ撮像画像
ＩＲ 蛍光画像
ＳＩ 重畳画像
ＷＬＩ 被写体画像
Ｙ，Ｙ１ 輝度信号
Ｙ２ ガンマ処理が実行された後の蛍光画像

Claims (4)

1. 互いに異なる分光特性を有する複数のフィルタ群が特定の形式で配列されたカラーフィルタが受光面に設けられた撮像素子によって可視の波長帯域である第１の波長帯域の光が撮像されることで生成されるデモザイク処理されていない第１の画像信号、及び前記撮像素子によって前記第１の波長帯域とは異なる可視域以外の波長帯域である第２の波長帯域の光が撮像されることで生成されるデモザイク処理されていない第２の画像信号をそれぞれ取得する画像信号取得部と、
   前記画像信号取得部が取得した前記第１の画像信号が入力され、前記第１の画像信号に対してデモザイク処理を実行するデモザイク処理部を有する第１の信号経路と、
   前記画像信号取得部が取得した前記第２の画像信号が入力され、前記デモザイク処理部の経路前段で前記第１の信号経路から分岐し、前記第２の画像信号に対して前記デモザイク処理を実行しない経路である第２の信号経路とを備え、
   前記第１の信号経路は、
   前記デモザイク処理部によりデモザイク画像信号を生成し、
   前記第２の信号経路は、
   前記第２の画像信号を出力する出力部を有し、前記デモザイク処理部よりも経路後段で前記第１の信号経路に合流し、
   前記第１の信号経路と前記第２の信号経路とが合流した経路には、
   前記デモザイク画像信号と前記第２の画像信号とが入力され、前記デモザイク画像信号と前記第２の画像信号とのうちいずれか一方の画像信号を出力する選択部と、
   前記選択部によって出力された画像信号に基づき輝度色差信号を生成する信号生成部とが配置され、
   前記デモザイク処理部は、
   前記複数のフィルタ群の各々のフィルタ群に対応する複数の前記デモザイク画像信号を生成し、
   前記出力部は、
   互いに同一であり、前記デモザイク処理部が生成する前記複数のデモザイク画像信号と同数である前記第２の画像信号を出力し、
   前記選択部は、
   前記複数のデモザイク画像信号と前記複数のデモザイク画像信号と同数である前記第２の画像信号とのうちいずれか一方の画像信号を出力し、
   前記信号生成部は、
   前記選択部によって出力された前記複数のデモザイク画像信号と前記複数のデモザイク画像信号と同数である前記第２の画像信号とのうちいずれか一方に基づき前記輝度色差信号を生成し、
   前記画像信号取得部は、
   前記第１の波長帯域のうち第１の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第１のフィルタ群と、前記第１の波長帯域のうち前記第１の可視波長帯域とは異なる第２の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第２のフィルタ群とが前記特定の形式で配列された前記カラーフィルタを有する前記撮像素子によって前記第１の波長帯域の光が撮像されることで生成される前記第１の画像信号、及び前記撮像素子によって前記第２の波長帯域の光が撮像されることで生成される前記第２の画像信号をそれぞれ取得する医療用画像処理装置。
2. 前記第１の信号経路と前記第２の信号経路とが分岐する前の経路には、
   ホワイトバランス調整処理を実行するホワイトバランス調整処理部が設けられている請求項１に記載の医療用画像処理装置。
3. 第１の波長帯域の光を撮像することで第１の画像信号を生成するとともに前記第１の波長帯域とは異なる第２の波長帯域の光を撮像することで第２の画像信号を生成する撮像素子、及び前記撮像素子の受光面に設けられ、互いに異なる分光特性を有する複数のフィルタ群が特定の形式で配列されたカラーフィルタを有する撮像装置と、
   前記第１の画像信号及び前記第２の画像信号を処理する請求項１または２に記載の医療用画像処理装置とを備える医療用観察システム。
4. 前記撮像装置は、
   前記第１の波長帯域のうち第１の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第１のフィルタ群と、前記第１の波長帯域のうち前記第１の可視波長帯域とは異なる第２の可視波長帯域の光を最も透過し、かつ前記第２の波長帯域の光を透過する第２のフィルタ群とが前記特定の形式で配列された前記カラーフィルタを有し、
   前記画像信号取得部は、
   前記撮像素子によって被検体からの前記第１の可視波長帯域の光と前記第２の可視波長帯域の光とを受光して生成されるデモザイク処理されていない前記第１の画像信号と、前記撮像素子によって前記被検体からの前記可視域以外の波長帯域の光を受光して生成されるデモザイク処理されていない前記第２の画像信号とをそれぞれ取得する請求項３に記載の医療用観察システム。

Images