JP7253129B2 - 画像処理装置及び観察システム - Google Patents

Description

本開示は、画像処理装置及び観察システムに関する。

一般に、デジタルカメラ等の撮像装置では、画像処理の１つとして、ホワイトバランスを調整することで色の補正を行う処理が行われ得る。ホワイトバランスの調整により、撮像画像に写る撮像対象の色の色相がずれる色回りという現象が生じることがある。色回りが生じると、撮像画像に写る撮像対象の色が、本来の撮像対象の色とは異なる色で表示され得る。そこで、色回りが生じた箇所の色の補正を行う技術が開発されている。

例えば、下記特許文献１には、画像データの中から色成分を示す階調値が飽和レベルとなっている画素を検出し、検出した画素の色成分の階調値を補正する技術が開示されている。

特開２０１３－１７９４００号公報

上記特許文献１の技術では、検出した画素の色成分の階調値を補正することで色回りを抑制することができる。しかしながら、階調値が飽和レベルとなり、色の飽和（以下では、サチュレーションとも称される）が生じたことにより失われた撮像画像のディテールを復元することまでは考慮されていない。

そこで、本開示では、サチュレーションが生じた領域のディテールを復元することが可能な、新規かつ改良された画像処理装置及び観察システムを提案する。

本開示によれば、複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、前記サチュレーションが生じた領域を検出する検出部と、を備え、前記補正部は、前記検出部が検出した前記サチュレーションが生じた領域と対応する前記ディテール成分のみを前記輝度信号に反映し、前記補正輝度信号を生成する、画像処理装置が提供される。
また、本開示によれば、複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、を備え、前記第２の信号処理部は、前記第１の信号に対して、前記第１の信号処理部よりも小さいゲインによる前記ホワイトバランスの調整を行い、前記ホワイトバランスの調整により前記サチュレーションが生じていない領域のみを含む第３の信号に基づき、前記ディテール成分を抽出する、画像処理装置が提供される。
また、本開示によれば、複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、色差信号と前記補正輝度信号に基づき画像を生成する画像生成部と、を備え、前記第１の信号処理部は、前記第２の信号から前記色差信号をさらに生成する、画像処理装置が提供される。

また、本開示によれば、撮像対象を撮像する撮像デバイスと、複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、前記サチュレーションが生じた領域を検出する検出部と、を備える画像処理装置と、を備え、前記補正部は、前記検出部が検出した前記サチュレーションが生じた領域と対応する前記ディテール成分のみを前記輝度信号に反映し、前記補正輝度信号を生成する、観察システムが提供される。
また、本開示によれば、撮像対象を撮像する撮像デバイスと、複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、を備える画像処理装置と、を備え、前記第２の信号処理部は、前記第１の信号に対して、前記第１の信号処理部よりも小さいゲインによる前記ホワイトバランスの調整を行い、前記ホワイトバランスの調整により前記サチュレーションが生じていない領域のみを含む第３の信号に基づき、前記ディテール成分を抽出する、観察システムが提供される。
また、本開示によれば、撮像対象を撮像する撮像デバイスと、複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、色差信号と前記補正輝度信号に基づき画像を生成する画像生成部と、を備える画像処理装置と、を備え、前記第１の信号処理部は、前記第２の信号から前記色差信号をさらに生成する、観察システムが提供される。

本開示の一実施形態に係る医療用観察システムの外部構成の第１の例を示す図である。 同実施形態に係る医療用観察装置が備える撮像デバイスの外部構成例を示す図である。 同実施形態に係る医療用観察システムの外部構成の第２の例を示す図である。 同実施形態に係る医療用観察装置の機能構成例を示すブロック図である。 画像処理の一例を示す図である。 本開示の第１の実施形態に係る画像処理部の機能構成例を示すブロック図である。 同実施形態に係る画像処理の流れを示すフローチャートである。 本開示の第２の実施形態に係る画像処理部の機能構成例を示すブロック図である。 同実施形態に係る画像処理の流れを示すフローチャートである。 本開示の第３の実施形態に係る画像処理部の機能構成例を示すブロック図である。 同実施形態に係る画像処理の流れを示すフローチャートである。 本開示の第４の実施形態に係る画像処理部の機能構成例を示すブロック図である。 同実施形態に係る画像処理の流れを示すフローチャートである。 本開示の第５の実施形態に係る画像処理部の機能構成例を示すブロック図である。 同実施形態に係る画像処理の流れを示すフローチャートである。 本開示の一実施形態に係る画像処理装置のハードウェア構成例を示すブロック図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。例えば、実質的に同一の機能構成を有する複数の構成要素は、必要に応じて画像処理部１８０ａ及び画像処理部１８０ｂのように区別される。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。例えば、画像処理部１８０ａ及び画像処理部１８０ｂを特に区別する必要が無い場合には、単に画像処理部１８０と称する。

なお、説明は以下の順序で行うものとする。
１．一実施形態に係る観察システムの外部構成
１－１．第１の例に係る観察システム
１－２．第２の例に係る観察システム
１－３．他の例に係る観察システム
２．一実施形態に係る観察装置の機能構成
３．第１の実施形態に係る画像処理部
３－１．画像処理部の機能構成
３－２．画像処理の流れ
４．第２の実施形態に係る画像処理部
４－１．画像処理部の機能構成
４－２．画像処理の流れ
５．第３の実施形態に係る画像処理部
５－１．画像処理部の機能構成
５－２．画像処理の流れ
６．第４の実施形態に係る画像処理部
６－１．画像処理部の機能構成
６－２．画像処理の流れ
６－３．変形例
７．第５の実施形態に係る画像処理部
７－１．画像処理部の機能構成
７－２．画像処理の流れ
７－３．変形例
８．変形例
９．ハードウェア構成例
１０．まとめ

＜＜１．一実施形態に係る観察システムの外部構成＞＞
まず、本開示の一実施形態に係る観察システムの外部構成について説明する。以下では、本実施形態に係る観察装置が本実施形態に係る画像処理装置を備え、観察装置にて画像処理を行う場合について、主に説明する。なお、本実施形態に係る観察システムにおいて、画像処理装置を備える装置は、本実施形態に係る観察装置に限られない。例えば、本実施形態に係る観察システムでは、後述する表示装置が、本実施形態に係る画像処理装置を備えてもよい。また、本実施形態に係る観察システムでは、メディカルコントローラなどの画像処理を行うことが可能な任意の装置が、画像処理装置を備えてもよい。

＜１－１．第１の例に係る観察システム＞
まず、観察システムの第１の例として、観察システムが医療に用いられる医療用観察システムである例を説明する。図１は、本開示の一実施形態に係る医療用観察システム１０００の外部構成の第１の例を示す図である。図１に示すように、医療用観察システム１０００は、例えば、医療用観察装置１００と表示装置２００を有する。なお、第１の例に係る医療用観察システム１０００は、図１に示す例に限られない。

例えば、第１の例に係る医療用観察システム１０００は、医療用観察装置１００における各種動作を制御する制御装置（図示せず）を、さらに有していてもよい。図１に示す医療用観察システム１０００では、後述するように、医療用観察装置１００が制御部（後述する）を備えることにより、医療用観察装置１００が制御装置（図示せず）の機能を有している例を示している。制御装置（図示せず）としては、例えば、“メディカルコントローラ”や、“サーバなどのコンピュータ”などが、挙げられる。また、制御装置（図示せず）は、例えば、上記のような機器に組み込むことが可能な、ＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）であってもよい。

また、第１の例に係る医療用観察システム１０００は、医療用観察装置１００と表示装置２００との一方または双方を複数有する構成であってもよい。医療用観察装置１００を複数有する場合、医療用観察装置１００それぞれにおいて、後述する画像処理が行われる。また、第１の例に係る医療用観察システム１０００が医療用観察装置１００と表示装置２００とを複数有する構成である場合、医療用観察装置１００と表示装置２００とが一対一に対応付けられていてもよいし、複数の医療用観察装置１００が１つの表示装置２００に対応付けられていてもよい。複数の医療用観察装置１００が１つの表示装置２００に対応付けられている場合、表示装置２００では、例えば切り替え操作などが行われることによって、どの医療用観察装置１００において撮像された撮像画像を表示画面に表示させるのかが、切り替えられる。

（１）表示装置２００
表示装置２００は、第１の例に係る医療用観察システム１０００における表示手段であり、医療用観察装置１００からみて外部の表示デバイスに該当する。表示装置２００は、例えば、医療用観察装置１００において撮像された医療用撮像画像や、ＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）に係る画像などの、様々な画像を表示画面に表示する。また、表示装置２００は、任意の方式により３Ｄ表示が可能な構成を有していてもよい。表示装置２００における表示は、例えば、医療用観察装置１００、または、制御装置（図示せず）によって制御される。

医療用観察システム１０００において表示装置２００は、手術室の壁面や天井、床面などの、手術室内において術者などの手術に関わる者により視認されうる任意の場所に設置される。

表示装置２００としては、例えば、液晶ディスプレイや有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイなどが挙げられる。なお、表示装置２００は、上記に示す例に限られない。例えば、表示装置２００は、ヘッドマウントディスプレイやアイウェア型の装置などのような、術者などが身体に装着して用いる任意のウェアラブル装置であってもよい。

表示装置２００は、例えば、表示装置２００が備えているバッテリなどの内部電源から供給される電力、または、接続されている外部電源から供給される電力などによって、駆動する。

（２）医療用観察装置１００
図１に示す医療用観察装置１００は、電子撮像式の医療用観察装置である。例えば手術時に図１に示す医療用観察装置１００が用いられる場合、術者（医療用観察装置１００の使用者の一例）は、医療用観察装置１００により撮像されて、表示装置２００の表示画面に表示された医療用撮像画像を参照しながら術部（患部）を観察し、当該術部に対して、術式に応じた手技などの各種処置を行う。図１に示すように、医療用観察装置１００は、例えば、ベース１０２と、アーム１０４と、撮像デバイス１０６とを備える。

また、図１では示していないが、医療用観察装置１００は、例えば、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などの演算回路で構成される、１または２以上のプロセッサ（図示せず）と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ。図示せず）と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ。図示せず）と、記録媒体（図示せず）と、通信デバイス（図示せず）とを、備えていてもよい。医療用観察装置１００は、例えば、医療用観察装置１００が備えているバッテリなどの内部電源から供給される電力、または、接続されている外部電源から供給される電力などによって、駆動する。

プロセッサ（図示せず）は、医療用観察装置１００における制御部（後述する）として機能する。ＲＯＭ（図示せず）は、プロセッサ（図示せず）が使用するプログラムや演算パラメータなどの制御用データを記憶する。ＲＡＭ（図示せず）は、プロセッサ（図示せず）により実行されるプログラムなどを一時的に記憶する。

記録媒体（図示せず）は、医療用観察装置１００における記憶部（図示せず）として機能する。記録媒体（図示せず）には、例えば、本実施形態に係る画像処理に係るデータや、各種アプリケーションなどの、様々なデータが記憶される。ここで、記録媒体（図示せず）としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリなどが挙げられる。また、記録媒体（図示せず）は、医療用観察装置１００から着脱可能であってもよい。

通信デバイス（図示せず）は、医療用観察装置１００が備える通信手段であり、表示装置２００などの外部装置と、無線または有線で通信を行う役目を果たす。ここで、通信デバイス（図示せず）としては、例えば、ＩＥＥＥ８０２．１５．１ポートおよび送受信回路（無線通信）や、ＩＥＥＥ８０２．１１ポートおよび送受信回路（無線通信）、通信アンテナおよびＲＦ回路（無線通信）、あるいはＬＡＮ端子および送受信回路（有線通信）などが挙げられる。

（２－１）ベース１０２
ベース１０２は、医療用観察装置１００の基台であり、アーム１０４の一端が接続されて、アーム１０４と撮像デバイス１０６とを支持する。また、ベース１０２には例えばキャスタが設けられ、医療用観察装置１００は、キャスタを介して床面と接地する。キャスタが設けられることにより、医療用観察装置１００は、キャスタによって床面上を容易に移動することが可能である。

（２－２）アーム１０４
アーム１０４の構成は、複数のリンクが関節部によって互いに連結された構成である。また、アーム１０４は、撮像デバイス１０６を支持する。アーム１０４により支持された撮像デバイス１０６は３次元的に移動可能であり、移動後の撮像デバイス１０６は、アーム１０４によって、位置および姿勢が保持される。

より具体的には、アーム１０４は、例えば、複数の関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆと、関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆによって互いに回動可能に連結される複数のリンク１１２ａ、１１２ｂ、１１２ｃ、１１２ｄ、１１２ｅ、１１２ｆとから構成される。関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれの回転可能範囲は、アーム１０４の所望の動きが実現されるように、設計段階や製造段階などにおいて任意に設定される。

つまり、図１に示す医療用観察装置１００では、アーム１０４を構成する６つの関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆに対応する６つの回転軸（第１軸Ｏ１、第２軸Ｏ２、第３軸Ｏ３、第４軸Ｏ４、第５軸Ｏ５、および第６軸Ｏ６）によって、撮像デバイス１０６の移動に関して６自由度が実現されている。より具体的には、図１に示す医療用観察装置１００では、並進３自由度、および回転３自由度の６自由度の動きが実現される。

関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれには、アクチュエータ（図示せず）が設けられ、関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれは、アクチュエータ（図示せず）の駆動によって、対応する回転軸で回転する。アクチュエータ（図示せず）の駆動は、例えば、後述する制御部として機能するプロセッサ、または、外部の制御装置（図示せず）によって制御される。

関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれには、６つの回転軸における回転角度をそれぞれ検出することが可能な角度センサ（図示せず）が、設けられうる。角度センサとしては、例えば、ロータリエンコーダや角速度センサなどの、６つの回転軸それぞれにおける回転角度を得ることが可能な任意のセンサが、挙げられる。

関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれが、アクチュエータ（図示せず）の駆動により対応する回転軸で回転することによって、例えばアーム１０４を伸ばす、縮める（折り畳む）などの、様々なアーム１０４の動作が、実現される。

関節部１１０ａは、略円柱形状を有し、関節部１１０ａの先端部分（図１における下端部分）で、撮像デバイス１０６（図１における撮像デバイス１０６の上端部分）を、撮像デバイス１０６の中心軸と平行な回転軸（第１軸Ｏ１）まわりに回動可能なように支持する。ここで、医療用観察装置１００の構成は、第１軸Ｏ１が撮像デバイス１０６における光軸と一致する構成である。つまり、図１に示す第１軸Ｏ１まわりに撮像デバイス１０６を回動させることによって、撮像デバイス１０６により撮像された医療用撮像画像は、視野が回転するように変更される画像となる。

リンク１１２ａは、略棒状の部材であり、関節部１１０ａを固定的に支持する。リンク１１２ａは、例えば、第１軸Ｏ１と直交する方向に延伸され、関節部１１０ｂに接続される。

関節部１１０ｂは、略円柱形状を有し、リンク１１２ａを、第１軸Ｏ１と直交する回転軸（第２軸Ｏ２）まわりに回動可能なように支持する。また、関節部１１０ｂには、リンク１１２ｂが固定的に接続される。

リンク１１２ｂは、略棒状の部材であり、第２軸Ｏ２と直交する方向に延伸される。また、リンク１１２ｂには、関節部１１０ｂと関節部１１０ｃとがそれぞれ接続される。

関節部１１０ｃは、略円柱形状を有し、リンク１１２ｂを、第１軸Ｏ１および第２軸Ｏ２それぞれと互いに直交する回転軸（第３軸Ｏ３）まわりに回動可能なように支持する。また、関節部１１０ｃには、リンク１１２ｃの一端が固定的に接続される。

ここで、第２軸Ｏ２および第３軸Ｏ３まわりにアーム１０４の先端側（撮像デバイス１０６が設けられる側）が回動することによって、水平面内での撮像デバイス１０６の位置が変更されるように、撮像デバイス１０６を移動させることができる。つまり、医療用観察装置１００では、第２軸Ｏ２および第３軸Ｏ３まわりの回転が制御されることにより、医療用撮像画像の視野を平面内で移動させることが可能になる。

リンク１１２ｃは、一端が略円柱形状を有し、他端が略棒状を有する部材である。リンク１１２ｃの一端側には、関節部１１０ｃの中心軸と略円柱形状の中心軸とが同一となるように、関節部１１０ｃが固定的に接続される。また、リンク１１２ｃの他端側には、関節部１１０ｄが接続される。

関節部１１０ｄは、略円柱形状を有し、リンク１１２ｃを、第３軸Ｏ３と直交する回転軸（第４軸Ｏ４）まわりに回動可能なように支持する。関節部１１０ｄには、リンク１１２ｄが固定的に接続される。

リンク１１２ｄは、略棒状の部材であり、第４軸Ｏ４と直交するように延伸される。リンク１１２ｄの一端は、関節部１１０ｄの略円柱形状の側面に当接するように、関節部１１０ｄに固定的に接続される。また、リンク１１２ｄの他端（関節部１１０ｄが接続される側とは反対側の端）には、関節部１１０ｅが接続される。

関節部１１０ｅは、略円柱形状を有し、リンク１１２ｄの一端を、第４軸Ｏ４と平行な回転軸（第５軸Ｏ５）まわりに回動可能なように支持する。また、関節部１１０ｅには、リンク１１２ｅの一端が固定的に接続される。

ここで、第４軸Ｏ４および第５軸Ｏ５は、撮像デバイス１０６を垂直方向に移動させうる回転軸である。第４軸Ｏ４および第５軸Ｏ５まわりにアーム１０４の先端側（撮像デバイス１０６が設けられる側）が回動することによって、撮像デバイス１０６の垂直方向の位置が変わる。よって、第４軸Ｏ４および第５軸Ｏ５まわりにアーム１０４の先端側（撮像デバイス１０６が設けられる側）が回動することによって、撮像デバイス１０６と、撮像対象との距離を変えることが、可能となる。撮像対象は、例えば、患者の術部などの観察対象である。以下では、撮像対象は、観察対象とも称される。

リンク１１２ｅは、一辺が鉛直方向に延伸するとともに他辺が水平方向に延伸する略Ｌ字形状を有する第１の部材と、当該第１の部材の水平方向に延伸する部位から鉛直下向きに延伸する棒状の第２の部材とが、組み合わされた部材である。リンク１１２ｅの第１の部材の鉛直方向に延伸する部位には、関節部１１０ｅが固定的に接続される。また、リンク１１２ｅの第２の部材には、関節部１１０ｆが接続される。

関節部１１０ｆは、略円柱形状を有し、リンク１１２ｅを、鉛直方向と平行な回転軸（第６軸Ｏ６）まわりに回動可能なように支持する。また、関節部１１０ｆには、リンク１１２ｆが固定的に接続される。

リンク１１２ｆは、略棒状の部材であり、鉛直方向に延伸される。リンク１１２ｆの一端は、関節部１１０ｆが接続される。また、リンク１１２ｆの他端（関節部１１０ｆが接続される側とは反対側の端）は、ベース１０２に固定的に接続される。アーム１０４が上記に示す構成を有することによって、医療用観察装置１００では、撮像デバイス１０６の移動に関して６自由度が実現される。

なお、アーム１０４の構成は、上記に示す例に限られない。例えば、アーム１０４の関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれには、関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれにおける回転を規制するブレーキが設けられていてもよい。本実施形態に係るブレーキとしては、例えば、機械的に駆動するブレーキや、電気的に駆動する電磁ブレーキなど、任意の方式のブレーキが挙げられる。

上記ブレーキの駆動は、例えば、後述する制御部として機能するプロセッサ、または、外部の制御装置（図示せず）によって制御される。上記ブレーキの駆動が制御されることにより、医療用観察装置１００では、アーム１０４の動作モードが設定される。アーム１０４の動作モードとしては、例えば、固定モードとフリーモードとが挙げられる。

ここで、本実施形態に係る固定モードとは、例えば、アーム１０４に設けられる各回転軸における回転がブレーキにより規制されることにより、撮像デバイス１０６の位置および姿勢が固定される動作モードである。アーム１０４が固定モードとなることによって、医療用観察装置１００の動作状態は、撮像デバイス１０６の位置および姿勢が固定される固定状態となる。

また、本実施形態に係るフリーモードとは、上記ブレーキが解除されることにより、アーム１０４に設けられる各回転軸が自由に回転可能となる動作モードである。例えば、フリーモードでは、術者による直接的な操作によって撮像デバイス１０６の位置および姿勢を調整することが可能となる。ここで、本実施形態に係る直接的な操作とは、例えば、術者が手で撮像デバイス１０６を把持し、当該撮像デバイス１０６を直接移動させる操作のことを意味する。

（２－３）撮像デバイス１０６
撮像デバイス１０６は、アーム１０４により支持され、撮像対象を撮像するデバイスである。例えば、撮像デバイス１０６は、患者の術部などの観察対象を撮像する。撮像デバイス１０６における撮像は、例えば、後述する制御部として機能するプロセッサ、または、外部の制御装置（図示せず）によって制御される。撮像デバイス１０６は、例えば電子撮像式の顕微鏡に対応する構成を有する。

図２は、本開示の一実施形態に係る医療用観察装置１００が備える撮像デバイス１０６の外部構成例を示す図である。図２に示すように、撮像デバイス１０６は、例えば、撮像部材１２０と、略円筒形状を有する筒状部材１２２とを有し、撮像部材１２０は、筒状部材１２２内に設けられる。筒状部材１２２の下端（図２における下側の端）の開口面には、例えば、撮像部材１２０を保護するためのカバーガラス（図示せず）が設けられる。

また、例えば筒状部材１２２の内部には光源（図示せず）が設けられ、撮像時には、当該光源からカバーガラス越しに被写体に対して照明光が照射される。照明光が照射された被写体からの反射光（観察光）が、カバーガラス（図示せず）を介して撮像部材１２０に入射することにより、撮像部材１２０によって被写体を示す画像信号（医療用撮像画像を示す画像信号）が得られる。撮像部材１２０としては、各種の公知の電子撮像式の顕微鏡部に用いられている構成を適用することが可能である。

一例を挙げると、撮像部材１２０は、例えば、光学系１２０ａと、光学系１２０ａを通過した光により観察対象の像を撮像する撮像素子を含むイメージセンサ１２０ｂとで構成される。光学系１２０ａは、例えば、対物レンズ、ズームレンズおよびフォーカスレンズなどの１または２以上のレンズとミラーなどの光学素子で構成される。イメージセンサ１２０ｂとしては、例えば、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）やＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）などの撮像素子を複数用いたイメージセンサが、挙げられる。

撮像部材１２０は、例えば、光学系１２０ａおよびイメージセンサ１２０ｂで構成される撮像デバイスを、２つ以上有することなどにより、いわゆるステレオカメラとして機能する。ステレオカメラとして機能する撮像デバイス１０６の構成において、光学系は、ガリレオ式光学系であってもよいし、グリノー式光学系であってもよい。撮像部材１２０を構成する撮像デバイスには、ズーム機能（光学ズーム機能と電子ズーム機能との一方または双方）、ＡＦ（Ａｕｔｏ Ｆｏｃｕｓ）機能などの、一般的に電子撮像式の顕微鏡部に備えられる１または２以上の機能が搭載される。

また、撮像部材１２０は、例えば４Ｋ、８Ｋなどの、いわゆる高解像度での撮像が可能な構成であってもよい。撮像部材１２０が高解像度での撮像が可能に構成されることにより、所定の解像度（例えば、Ｆｕｌｌ ＨＤ画質など）を確保しつつ、例えば５０インチ以上などの大画面の表示画面を有する表示装置２００に画像を表示させることが可能となるので、当該表示画面を見る術者の視認性が向上する。また、撮像部材１２０が高解像度での撮像が可能に構成されることにより、撮像画像が電子ズーム機能によって拡大されて表示装置２００の表示画面に表示されたとしても、所定の解像度を確保することが可能となる。さらに、電子ズーム機能を用いて所定の解像度が確保される場合には、撮像デバイス１０６における光学ズーム機能の性能を抑えることが可能となるので、撮像デバイス１０６の光学系をより簡易にすることができ、撮像デバイス１０６をより小型に構成することができる。

撮像デバイス１０６には、例えば、撮像デバイス１０６の動作を制御するための各種の操作デバイスが設けられる。例えば図２では、ズームスイッチ１２４と、フォーカススイッチ１２６と、動作モード変更スイッチ１２８とが、撮像デバイス１０６に設けられている。なお、ズームスイッチ１２４、フォーカススイッチ１２６、および動作モード変更スイッチ１２８が設けられる位置と形状とが、図２に示す例に限られないことは、言うまでもない。

ズームスイッチ１２４とフォーカススイッチ１２６とは、撮像デバイス１０６における撮像条件を調整するための操作デバイスの一例である。ズームスイッチ１２４は、例えば、ズーム倍率（拡大率）を大きくするズームインスイッチ１２４ａと、ズーム倍率を小さくするズームアウトスイッチ１２４ｂとで構成される。ズームスイッチ１２４に対する操作が行われることによりズーム倍率が調整されて、ズームが調整される。

フォーカススイッチ１２６は、例えば、観察対象（被写体）までの焦点距離を遠くする遠景フォーカススイッチ１２６ａと、観察対象までの焦点距離を近くする近景フォーカススイッチ１２６ｂとで構成される。フォーカススイッチ１２６に対する操作が行われることにより焦点距離が調整されて、フォーカスが調整される。

動作モード変更スイッチ１２８は、撮像デバイス１０６におけるアーム１０４の動作モードを変更するための操作デバイスの一例である。動作モード変更スイッチ１２８に対する操作が行われることにより、アーム１０４の動作モードが変更される。アーム１０４の動作モードとしては、例えば上述したように、固定モードとフリーモードとが挙げられる。

動作モード変更スイッチ１２８に対する操作の一例としては、動作モード変更スイッチ１２８を押下する操作が、挙げられる。例えば、術者が動作モード変更スイッチ１２８を押下している間、アーム１０４の動作モードがフリーモードとなり、術者が動作モード変更スイッチ１２８を押下していないときには、アーム１０４の動作モードが固定モードとなる。

また、撮像デバイス１０６には、各種操作デバイスに対する操作を行う操作者が操作を行う際の操作性や利便性などをより高めるために、例えば、滑り止め部材１３０と、突起部材１３２とが設けられる。

滑り止め部材１３０は、例えば操作者が筒状部材１２２を手などの操作体で操作を行う際に、操作体の滑りを防止するために設けられる部材である。滑り止め部材１３０は、例えば、摩擦係数が大きい材料で形成され、凹凸などのより滑りにくい構造を有する。

突起部材１３２は、操作者が筒状部材１２２を手などの操作体で操作を行う際に、当該操作体が光学系１２０ａの視野を遮ってしまうことや、当該操作体で操作を行う際に、カバーガラス（図示せず）に当該操作体が触れることにより当該カバーガラスが汚れることなどを、防止するために設けられる部材である。

なお、滑り止め部材１３０および突起部材１３２それぞれが設けられる位置と形状とが、図２に示す例に限られないことは、言うまでもない。また、撮像デバイス１０６には、滑り止め部材１３０と突起部材１３２との一方または双方が設けれられていなくてもよい。

撮像デバイス１０６における撮像により生成された画像信号（画像データ）は、例えば後述する制御部として機能するプロセッサにおいて、画像処理が行われる。本実施形態に係る画像処理としては、例えば、ガンマ補正、ホワイトバランスの調整、電子ズーム機能に係る画像の拡大または縮小、または、画素間補正などの各種処理のうちの、１または２以上の処理が、挙げられる。また、本実施形態に係る画像処理には、例えば後述する画像処理が含まれうる。

なお、本実施形態に係る医療用観察システムが、医療用観察装置１００における各種動作を制御する制御装置（図示せず）を有する場合には、本実施形態に係る画像処理は、当該制御装置（図示せず）において行われてもよい。この場合、制御装置（図示せず）は、本実施形態に係る画像処理を行うことが可能な画像処理装置として機能する

医療用観察装置１００は、例えば、表示制御信号と、上記のような画像処理が行われた画像信号とを、表示装置２００に送信する。表示制御信号と画像信号とが表示装置２００に送信されることによって、表示装置２００の表示画面には、観察対象が撮像された医療用撮像画像（例えば、術部が撮像された撮像画像）が、光学ズーム機能と電子ズーム機能との一方または双方によって所望の倍率に拡大または縮小されて表示される。

図１に示す医療用観察装置１００は、例えば図１、図２を参照して示したハードウェア構成を有する。なお、本実施形態に係る医療用観察装置のハードウェア構成は、図１、図２を参照して示した構成に限られない。例えば、本実施形態に係る医療用観察装置は、ベース１０２を備えず、手術室などの天井や壁面などにアーム１０４が直接取り付けられる構成であってもよい。例えば、天井にアーム１０４が取り付けられる場合には、本実施形態に係る医療用観察装置は、アーム１０４が天井から吊り下げられる構成となる。

また、図１では、アーム１０４の構成が、撮像デバイス１０６の駆動に関して６自由度が実現される構成である例を示しているが、アーム１０４の構成は、撮像デバイス１０６の駆動に関する自由度が６自由度となる構成に限られない。例えば、アーム１０４の構成は、用途に応じて撮像デバイス１０６を適宜移動しうる構成であればよく、関節部およびリンクの数や配置、関節部の駆動軸の方向などは、アーム１０４が所望の自由度を有するように適宜設定することが可能である。

また、図１、図２では、撮像デバイス１０６の動作を制御するための各種の操作デバイスが、撮像デバイス１０６に設けられる例を示しているが、図１、図２に示す操作デバイスのうちの一部または全部は、撮像デバイス１０６に設けられなくてもよい。一例を挙げると、撮像デバイス１０６の動作を制御するための各種の操作デバイスは、本実施形態に係る医療用観察装置を構成する撮像デバイス１０６以外の他の部位に設けられていてもよい。また、他の例を挙げると、撮像デバイス１０６の動作を制御するための各種の操作デバイスは、フットスイッチやリモートコントローラなどの、外部の操作デバイスであってもよい。

また、撮像デバイス１０６は、複数の観察モードを切り替えることが可能な構成であってもよい。本実施形態に係る観察モードとしては、例えば、自然光で撮像を行う観察モード、特殊光で撮像を行う観察モード、ＮＢＩ（Ｎａｒｒｏｗ Ｂａｎｄ Ｉｍａｇｉｎｇ）などの画像強調観察技術を利用して撮像を行う観察モードなどが、挙げられる。本実施形態に係る特殊光とは、例えば、近赤外線の波長帯域の光や、５－ＡＬＡ（５－Ａｍｉｎｏｌｅｖｕｌｉｎｉｃ Ａｃｉｄ）を用いた蛍光観察の蛍光波長帯域の光など、特定の波長帯域の光である。

複数の観察モードを切り替えることが可能な撮像デバイス１０６の構成の一例としては、例えば、“特定の波長帯域の光を透過させ、他の波長帯域の光を透過させないフィルタと、当該フィルタを光路上に選択的に配置する移動機構と、を備える構成”が、挙げられる。本実施形態に係るフィルタが透過させる特定の波長帯域としては、例えば、近赤外線の波長帯域（例えば、約０．７マイクロメートル～２．５マイクロメートルの波長帯域）や、５－ＡＬＡを用いた蛍光観察による蛍光波長帯域（例えば、約０．６マイクロメートル～０．６５マイクロメートルの波長帯域）、ＩＣＧ（Ｉｎｄｏｃｙａｎｉｎｅ Ｇｒｅｅｎ）の蛍光波長帯域（例えば、約０．８２マイクロメートル～０．８５マイクロメートルの波長帯域）などが、挙げられる。

なお、撮像デバイス１０６には、透過させる波長帯域が異なる複数のフィルタが設けられていてもよい。また、上記では、フィルタが光路上に配置されることにより、特定の波長帯域の光で撮像が行われる例を示したが、特定の波長帯域の光で撮像を行うための撮像デバイス１０６の構成が、上記に示す例に限られないことは、言うまでもない。

＜１－２．第２の例に係る観察システム＞
以上、第１の例に係る観察システムについて説明した。本開示の一実施形態に係る医療用観察システム１０００は、図１に示す第１の例の構成に限られない。次いで、観察システムの第２の例として、観察システムが内視鏡装置として機能する医療用観察装置１００を有する医療用観察システム１０００である例を説明する。

図３は、本開示の一実施形態に係る医療用観察システム１０００の外部構成の第２の例を示す図である。図３に示す医療用観察システム１０００は、例えば、医療用観察装置１００と、表示装置２００とを有する。例えば、図３に示す医療用観察装置１００が手術時に用いられる場合、術者は、医療用観察装置１００により撮像されて、表示装置２００の表示画面に表示された医療用撮像画像を参照しながら術部を観察し、当該術部に対して、術式に応じた手技などの各種処置を行う。

なお、第２の例に係る医療用観察システム１０００は、図３に示す例に限られない。例えば、第２の例に係る医療用観察システム１０００は、第１の例に係る医療用観察システム１０００と同様に、医療用観察装置１００における各種動作を制御する制御装置（図示せず）を、さらに有していてもよい。また、第２の例に係る医療用観察システム１０００は、第１の例に係る医療用観察システム１０００と同様に、医療用観察装置１００と表示装置２００との一方または双方を複数有する構成であってもよい。

（１）表示装置２００
表示装置２００は、第２の例に係る医療用観察システム１０００における表示手段であり、医療用観察装置１００からみて外部の表示デバイスに該当する。第２の例に係る医療用観察システム１０００を構成する表示装置２００は、第１の例に係る医療用観察システム１０００を構成する表示装置２００と同様である。

（２）医療用観察装置１００
図３に示す医療用観察装置１００は、例えば、挿入部材１３４と、光源ユニット１３６と、ライトガイド１３８と、カメラヘッド１４０と、ケーブル１４２と、制御ユニット１４４とを備える。医療用観察装置１００は、例えば、医療用観察装置１００が備えているバッテリなどの内部電源から供給される電力、または、接続されている外部電源から供給される電力などによって、駆動する。

挿入部材１３４は、細長形状を有し、入射光を集光する光学系を内部に備える。挿入部材１３４の先端は、例えば、患者の体腔内に挿入される。挿入部材１３４の後端はカメラヘッド１４０の先端と着脱可能に接続される。また、挿入部材１３４は、ライトガイド１３８を介して光源ユニット１３６と接続され、光源ユニット１３６から光が供給される。挿入部材１３４は、例えば、可撓性を有さない素材で形成されてもよいし、可撓性を有する素材で形成されてもよい。挿入部材１３４を形成する素材によって、医療用観察装置１００は、硬性鏡または軟性鏡と呼ばれうる。

光源ユニット１３６は、ライトガイド１３８を介して挿入部材１３４と接続される。光源ユニット１３６は、ライトガイド１３８を介して挿入部材１３４に光を供給する。

光源ユニット１３６は、例えば、波長が異なる光を発光する複数の光源を有する。光源ユニット１３６が有する複数の光源としては、例えば、赤色の光を発光する光源、緑色の光を発光する光源、および青色の光を発光する光源が挙げられる。赤色の光を発光する光源としては、例えば、１または２以上の赤色発光ダイオードが挙げられる。緑色の光を発光する光源としては、例えば、１または２以上の緑色発光ダイオードが挙げられる。青色の光を発光する光源としては、例えば、１または２以上の青色発光ダイオードが挙げられる。なお、光源ユニット１３６が有する複数の光源が、上記に示す例に限られないことは、言うまでもない。光源ユニット１３６は、例えば、複数の光源を単一チップで有し、または、複数の光源を複数のチップで有する。光源ユニット１３６は、制御ユニット１４４と有線または無線で接続され、光源ユニット１３６における発光は、制御ユニット１４４により制御される。

挿入部材１３４に供給された光は、挿入部材１３４の先端から出射され、患者の体腔内組織などの観察対象に照射される。そして、観察対象からの反射光は、挿入部材１３４内の光学系によって集光される。

カメラヘッド１４０は、撮像対象を撮像するデバイスである。例えば、カメラヘッド１４０は、観察対象を撮像する。カメラヘッド１４０は、信号伝送部材であるケーブル１４２を介して制御ユニット１４４と接続される。

カメラヘッド１４０は、イメージセンサを有し、挿入部材１３４によって集光された観察対象からの反射光を光電変換することにより観察対象を撮像し、撮像によって得られた画像信号（医療用撮像画像を示す信号）を制御ユニット１４４へケーブル１４２を介して出力する。カメラヘッド１４０が有するイメージセンサとしては、例えば、ＣＭＯＳやＣＣＤなどの撮像素子を複数用いたイメージセンサが、挙げられる。

内視鏡装置として機能する医療用観察装置１００では、例えば、挿入部材１３４、光源ユニット１３６、およびカメラヘッド１４０が、“患者の体内に挿入されて、体内を撮像する撮像デバイス”の役目を果たす。

なお、内視鏡装置として機能する医療用観察装置１００は、例えば、いわゆるステレオカメラとして機能する複数の撮像デバイスを備える構成であってもよい。ステレオカメラとして機能する撮像デバイスの構成において、光学系は、第１の例に係る医療用観察システム１０００を構成する医療用観察装置１００と同様に、ガリレオ式光学系であってもよいし、グリノー式光学系であってもよい。

制御ユニット１４４は、撮像デバイスを制御する。より具体的には、制御ユニット１４４は、光源ユニット１３６およびカメラヘッド１４０それぞれを制御する。また、制御ユニット１４４は、通信デバイス（図示せず）を含み、カメラヘッド１４０から出力された画像信号を任意の無線通信または任意の有線通信で、表示装置２００へ送信する。制御ユニット１４４は、画像信号と表示制御信号とを表示装置２００へ送信してもよい。

制御ユニット１４４が含む通信デバイス（図示せず）としては、例えば、ＩＥＥＥ８０２．１５．１ポートおよび送受信回路（無線通信）や、ＩＥＥＥ８０２．１１ポートおよび送受信回路（無線通信）、通信アンテナおよびＲＦ回路（無線通信）、光通信用デバイス（有線通信または無線通信）、あるいはＬＡＮ端子および送受信回路（有線通信）などが挙げられる。通信デバイス（図示せず）は、複数の通信方式によって、１または２以上の外部装置と通信を行うことが可能な構成であってもよい。

また、制御ユニット１４４は、カメラヘッド１４０から出力された画像信号に対して所定の処理を行い、所定の処理が行われた画像信号を表示装置２００へ送信してもよい。画像信号に対する所定の処理としては、例えば、ホワイトバランスの調整や、電子ズーム機能に係る画像の拡大または縮小、画素間補正などが、挙げられる。画像信号に対する所定の処理には、例えば後述する画像処理が含まれうる。

なお、制御ユニット１４４は、画像信号に基づく医療用撮像画像を記憶してもよい。また、制御ユニット１４４としては、例えばＣＣＵ（Ｃａｍｅｒａ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）が挙げられる。

内視鏡装置として機能する医療用観察装置１００は、例えば図３を参照して示したハードウェア構成を有する。内視鏡装置として機能する医療用観察装置１００では、例えば、挿入部材１３４、光源ユニット１３６、およびカメラヘッド１４０が、撮像デバイスの役目を果たし、制御ユニット１４４により撮像デバイスにおける撮像が制御される。

＜１－３．他の例に係る観察システム＞
本開示の一実施形態に係る観察システムは、図１に示す第１の例に示す構成、図３に示す第２の例に示す構成に限られない。例えば、本開示の一実施形態に係る医療用観察システム１０００を構成する医療用観察装置１００は、光学式の医療用観察装置１００に対して複数の撮像デバイスが設けられる構成であってもよい。複数の撮像デバイスが設けられる光学式の医療用観察装置１００においても、後述する画像処理を適用することが可能である。以下では、本開示の一実施形態に係る医療用観察システム１０００を構成する医療用観察装置１００が、図１、図３に示す医療用観察装置１００である場合を例に挙げる。なお、本開示の一実施形態に係る観察システム及び観察装置は、医療用である例に限られない。

＜＜２．一実施形態に係る観察装置の機能構成＞＞
以上、本開示の一実施形態に係る観察システムの外部構成について説明した。次に、本開示の一実施形態に係る医療用観察装置１００の機能構成について説明する。図４は、本開示の一実施形態に係る医療用観察装置１００の機能構成例を示すブロック図である。図４に示すように、医療用観察装置１００は、例えば、撮像部１５０と、制御部１６０と、通信部１９５とを備える。

（１）撮像部１５０
撮像部１５０は、撮像対象を撮像する機能を有する。撮像部１５０は、例えば、観察対象を撮像対象として撮像する。撮像部１５０は、例えば、“撮像デバイス１０６”（図１に示す医療用観察装置１００の場合）や、“挿入部材１３４、光源ユニット１３６、およびカメラヘッド１４０”（図３に示す医療用観察装置１００の場合）で構成される。撮像部１５０における撮像は、例えば、制御部１６０によって制御される。撮像部１５０が観察対象を撮像することにより生成される信号は、以下では、撮像信号（第１の信号）とも称される。撮像部１５０により生成された撮像信号は、制御部１６０に入力される。

撮像信号には、複数の波長帯域に対応している信号としてＲＧＢ信号が含まれる。複数の波長帯域には、例えば、赤色の波長帯域、緑色の波長帯域、及び青色の波長帯域が少なくとも含まれる。赤色の波長帯域は、ＲＧＢ信号のＲ成分と対応する。緑色の波長帯域は、ＲＧＢ信号のＧ成分と対応する。青色の波長帯域は、ＲＧＢ信号のＢ成分と対応する。

（２）制御部１６０
制御部１６０は、観察装置の動作全般を制御する画像処理装置である。本開示の一実施形態では、制御部１６０は、医療用観察装置１００に備えられるため、医療用画像処理装置として機能してもよい。なお、制御部１６０は、例えば上述したプロセッサ（図示せず）で構成され、医療用観察装置１００全体を制御する役目を果たす。また、制御部１６０は、後述する画像処理に係る処理を主導的に行う役目を果たす。なお、制御部１６０における画像処理に係る処理は、複数の処理回路（例えば、複数のプロセッサなど）で分散して行われてもよい。図４に示すように、制御部１６０は、例えば、撮像制御部１７０と、画像処理部１８０と、表示制御部１９０とを有する。

（２－１）撮像制御部１７０
撮像制御部１７０は、撮像部１５０を構成する撮像デバイスを制御する。撮像デバイスの制御としては、例えば、少なくともズーム機能（光学ズーム機能および電子ズーム機能）を含む、ＡＦ機能の制御などの一般的に電子撮像式の顕微鏡部に備えられる１または２以上の機能の制御が、挙げられる。

（２－２）画像処理部１８０
画像処理部１８０は、複数の撮像デバイスそれぞれにより観察対象が撮像された複数の医療用撮像画像に対して、本実施形態に係る画像処理を行う。例えば、画像処理部１８０は、撮像部１５０から入力される、複数の波長帯域に対応する撮像信号に対してホワイトバランスの調整を行う。なお、本開示の一実施形態では、撮像信号に対するホワイトバランスの調整により出力される信号には、サチュレーション（飽和）が生じた領域が含まれるものとする。当該ホワイトバランスの調整によりサチュレーションが生じた領域を含む信号は、以下では、飽和信号（第２の信号）とも称される。

画像処理部１８０は、飽和信号から、輝度信号を生成する処理を行う。例えば、画像処理部１８０は、飽和信号に含まれるＲＧＢ信号を輝度信号に変換する変換処理を行うことで、輝度信号を生成する。輝度信号は、以下では、Ｙ信号とも称される。なお、輝度信号には、飽和信号と同様にサチュレーションが生じた領域が含まれている。

画像処理部１８０は、撮像信号に基づきディテール成分を抽出する処理を行う。ディテール成分は、例えば、撮像対象の表面の詳細を示す情報である。例えば、画像処理部１８０は、撮像信号から直接ディテール成分を抽出する処理を行う。なお、ディテール成分の抽出元は、サチュレーションが生じた領域を含まない信号であれば、撮像信号に限定されない。

そして、画像処理部１８０は、抽出したディテール成分を輝度信号に反映し、補正輝度信号を生成する。上述のように、画像処理部１８０は、サチュレーションが生じた領域を含む輝度信号に対して、サチュレーションが生じる前の撮像対象の情報を含むディテール成分を反映する。これにより、画像処理部１８０は、サチュレーションが生じた領域のディテールを復元することができる。

また、画像処理部１８０は、飽和信号から、色差信号をさらに生成する処理も行う。例えば、画像処理部１８０は、飽和信号に含まれるＲＧＢ信号を色差信号に変換する変換処理を行うことで、色差信号を生成する。画像処理部１８０は、生成した補正輝度信号と色差信号に基づき、画像を生成する。

（２－３）表示制御部１９０
表示制御部１９０は、例えば、表示制御信号と画像信号とを通信部１９５を構成する通信デバイス（図示せず）に伝達し、表示制御信号と画像信号とを表示装置２００に対して送信させることによって、表示装置２００における表示を制御する。表示制御部１９０が送信させる画像信号には、画像処理部１８０において画像処理が行われた後の画像信号が含まれうる。なお、通信部１９５における通信の制御は、制御部１６０を構成する通信制御部（図示せず）により行われてもよい。

制御部１６０は、例えば、画像処理部１８０を有することにより、本実施形態に係る画像処理を主導的に行う役目を果たす。また、制御部１６０は、例えば、撮像制御部１７０、および表示制御部１９０を有することによって、医療用観察装置１００全体を制御する役目を果たす。

なお、制御部１６０の機能構成は、図４に示す例に限られない。例えば、制御部１６０は、本実施形態に係る画像処理の切り分け方に応じた構成など、医療用観察装置１００が有する機能の切り分け方に応じた、任意の構成を有することが可能である。

一例を挙げると、医療用観察装置１００が図１に示す構成である場合、制御部１６０は、アーム１０４の駆動を制御するアーム制御部（図示せず）をさらに有していてもよい。アーム１０４の駆動の制御の一例としては、例えば、“関節部１１０ａ、１１０ｂ、１１０ｃ、１１０ｄ、１１０ｅ、１１０ｆそれぞれに対応するアクチュエータ（図示せず）に対して、駆動を制御する制御信号を印加すること”などが挙げられる。

医療用観察装置１００は、例えば図４に示す機能構成によって、後述する本実施形態に係る画像処理を行う。なお、本開示の一実施形態に係る医療用観察装置１００の機能構成は、図４に示す構成に限られない。例えば、本開示の一実施形態に係る医療用観察装置１００は、図４に示す撮像制御部１７０、画像処理部１８０、および表示制御部１９０のうちの一部または全部を、制御部１６０とは個別に備える（例えば、別の処理回路で実現する）ことができる。

また、本開示の一実施形態に係る医療用観察装置１００において、本開示の一実施形態に係る画像処理を実行することが可能な機能構成は、図４に示す構成に限られない。例えば、本開示の一実施形態に係る医療用観察装置１００は、本開示の一実施形態に係る画像処理の切り分け方に応じた機能構成をとることが可能である。

また、本開示の一実施形態に係る医療用観察装置１００が図１に示す構成である場合、本開示の一実施形態に係る医療用観察装置１００は、アーム１０４で構成されるアーム部（図示せず）を有する。アーム部（図示せず）を構成するアーム１０４は、撮像部１５０を構成する撮像デバイス１０６を支持する。

また、例えば、本開示の一実施形態に係る医療用観察システム１０００が、制御装置（図示せず）を有する構成であり、本開示の一実施形態に係る医療用観察装置１００が当該制御装置（図示せず）により制御されるとする。この場合、本開示の一実施形態に係る医療用観察装置１００は、制御部１６０を備えていなくてもよい。

ここで、制御装置（図示せず）は、例えば、制御部１６０と同様の機能、構成を有する制御部を備えることによって、後述する本開示の一実施形態に係る画像処理を行う。また、制御装置（図示せず）は、本開示の一実施形態に係る医療用観察装置１００が備える撮像部１５０などの各構成要素における動作を制御する。制御装置（図示せず）は、備えている通信デバイス、または、接続されている外部の通信デバイスを介して、本開示の一実施形態に係る医療用観察装置１００と通信を行うことによって、本開示の一実施形態に係る医療用観察装置１００が備える各構成要素における動作を制御する。

さらに、例えば、本開示の一実施形態に係る医療用観察システム１０００が、制御装置（図示せず）を有する構成であり、本開示の一実施形態に係る医療用観察装置１００が当該制御装置（図示せず）により制御されるものであるとする。この場合、本開示の一実施形態に係る医療用観察装置１００は、制御部１６０の一部の機能を有さない構成をとることも可能である。

（３）通信部１９５
通信部１９５は、医療用観察装置１００が備える通信手段であり、表示装置２００などの外部装置と無線または有線で通信を行う役目を果たす。通信部１９５は、例えば、上述した通信デバイス（図示せず）で構成される。通信部１９５における通信は、例えば制御部１６０によって制御される。

また、例えば、通信部１９５と同様の機能、構成を有する外部の通信デバイスを介して外部装置と通信を行う場合には、本開示の一実施形態に係る医療用観察装置１００は、通信部１９５を備えていなくてもよい。

（課題の整理）
ここで、図５を参照しながら、課題の整理を行う。図５は、画像処理の一例を示す図である。図５の上図は、撮像信号に対してホワイトバランスの調整を行った際に、調整後のＲＧＢ信号の各成分の信号レベルが同じ値となる例を示す図である。図５の下図は、撮像信号に対してホワイトバランスの調整を行った際に、調整後のＲＧＢ信号のＲ成分のみにサチュレーションが生じた例を示す図である。なお、図５は、信号レベルが１００％より大きい場合にサチュレーションが生じ、信号レベルが１００％以下の場合にサチュレーションが生じない例を示している。また、図５の上図では、ＲＧＢ信号の各成分の信号レベルは、ホワイトバランスの調整により８０％となるように調整されている。なお、信号レベルは、ＲＧＢ信号の各成分の信号レベルが調整後に同一の値（同一の比率）であれば、ホワイトバランスの調整により１００％、５０％、または３０％等の任意の値に調整されてもよい。

ＲＧＢ信号に対してホワイトバランスの調整を行う場合、一般的には、各成分の信号レベルが同じ値となるように、各成分に対してゲインがかけられる。例えば、図５の上図に示す例の場合、Ｇ成分６２ａの信号レベルは８０％であるため、Ｒ成分６１ａとＢ成分６３ａの信号レベルも８０％になるように、Ｒ成分６１ａとＢ成分６３ａに対してゲインがかけられる。そして、信号レベルが８０％のＲ成分６１ｂ、Ｇ成分６２ｂ、及びＢ成分６３ｂを含むＲＧＢ信号をＹ信号に変換すると、信号レベルが８０％のＹ信号６４ａが得られる。当該Ｙ信号６４ａに基づき画像を生成すると、サチュレーションが生じておらず、ディテールも失われていない画像が生成される。

これに対し、図５の下図に示すように、Ｒ成分６１ｃの信号レベルが一番大きく、Ｇ成分６２ｃとＢ成分６３ｃの信号レベルがＲ成分６１ｃの信号レベルよりも極めて低いＲＧＢ信号が入力されたとする。当該ＲＧＢ信号の各成分に対してホワイトバランスの調整を行う際に、図５の上図の場合と同一のゲインをかけた場合、Ｒ成分６１ｄの信号レベルは１００％を超えてしまう。１００％を超えた部分であるＲ成分６５はカットされるため、サチュレーションが生じる。Ｇ成分６２ｃとＢ成分６３ｃの信号レベルは、Ｒ成分６１ｃの信号レベルよりも極めて低い値である。そのため、図５の上図の場合と同一のゲインをかけた後のＢ成分６３ｄの信号レベルは、ゲインをかける前よりも増幅するが、Ｒ成分６１ｄの信号レベルよりも増幅率が低く、１００％を超えていない。なお、図５の上図の場合と同一のゲインをかけた後のＧ成分６２ｄの信号レベルは変化しない。そして、信号レベルが１００％のＲ成分６１ｄ、及び信号レベルが１００％未満であるＧ成分６２ｄとＢ成分６３ｄを含むＲＧＢ信号をＹ信号に変換すると、信号レベルが１００％に達していないＹ信号６４ｂが得られる。当該Ｙ信号６４ｂに基づき画像を生成すると、サチュレーションが生じたことによりディテールが失われた画像が生成される。

本開示の実施形態では、上記の点に着目して発想されたものであり、サチュレーションが生じた領域のディテールを復元することが可能な技術を提案する。以下、各実施形態について順次詳細に説明する。以下の各実施形態では、信号レベルが１００％より大きい場合にサチュレーションが生じ、信号レベルが１００％以下の場合にサチュレーションが生じないものとする。なお、サチュレーションが生じるか否かの判定基準となる値は、１００％に限定されず、任意の値であってよい。

＜＜３．第１の実施形態に係る画像処理部＞＞
まず、本開示の第１の実施形態に係る画像処理部について説明する。図６は、本開示の第１の実施形態に係る画像処理部１８０ａの機能構成例を示すブロック図である。第１の実施形態では、補正部１８４ａが第１の信号処理部１８２ａから出力される輝度信号の全体にディテール成分を反映する例について説明する。

＜３－１．画像処理部の機能構成＞
図６に示すように、画像処理部１８０ａは、クランプ処理部１８１ａ、第１の信号処理部１８２ａ、第２の信号処理部１８３ａ、補正部１８４ａ、及び画像生成部１８５ａを備える。

（１）クランプ処理部１８１ａ
クランプ処理部１８１ａは、入力される信号に対してクランプ処理を行う機能を有する。例えば、クランプ処理部１８１ａは、撮像部１５０から入力される撮像信号に対して、クランプ処理を行う。そして、クランプ処理部１８１ａは、クランプ処理後の撮像信号を第１の信号処理部１８２ａ及び第２の信号処理部１８３ａへ出力する。

（２）第１の信号処理部１８２ａ
第１の信号処理部１８２ａは、入力される信号に対して、ホワイトバランスの調整を行い、ホワイトバランスの調整後の信号から輝度信号を生成する機能を有する。例えば、第１の信号処理部１８２ａは、クランプ処理部１８１ａから入力される撮像信号から輝度信号を生成する。具体的に、まず、第１の信号処理部１８２ａは、クランプ処理部１８１ａから入力される撮像信号に対して、ホワイトバランスの調整を行う。そして、第１の信号処理部１８２ａは、ホワイトバランスの調整により生成される飽和信号から、輝度信号を生成する。

また、第１の信号処理部１８２ａは、ホワイトバランスの調整後の信号から色差信号を生成する機能を有する。例えば、第１の信号処理部１８２ａは、飽和信号から色差信号をさらに生成する。

上述の機能を実現するために、第１の信号処理部１８２ａは、図６に示すように、ホワイトバランス調整部１８２１ａ、デモザイク処理部１８２２ａ、リニアマトリクス演算部１８２３ａ、ガンマ補正部１８２４ａ、及びＲＧＢ－ＹＣＣ変換部１８２５ａを備える。

（２－１）ホワイトバランス調整部１８２１ａ
ホワイトバランス調整部１８２１ａは、入力される信号に対してホワイトバランスの調整を行う機能を有する。例えば、例えば、ホワイトバランス調整部１８２１ａは、クランプ処理部１８１ａから入力される撮像信号に対して、ホワイトバランスの調整を行う。そして、ホワイトバランス調整部１８２１ａは、ホワイトバランスの調整により出力される飽和信号をデモザイク処理部１８２２ａへ出力する。

（２－２）デモザイク処理部１８２２ａ
デモザイク処理部１８２２ａは、入力される信号に対して、デモザイク処理を行う機能を有する。例えば、デモザイク処理部１８２２ａは、ホワイトバランス調整部１８２１ａから入力される飽和信号に対して、デモザイク処理を行う。そして、デモザイク処理部１８２２ａは、デモザイク処理後の飽和信号をリニアマトリクス演算部１８２３ａへ出力する。

（２－３）リニアマトリクス演算部１８２３ａ
リニアマトリクス演算部１８２３ａは、入力される信号に対して、リニアマトリクス演算を行う機能を有する。例えば、リニアマトリクス演算部１８２３ａは、デモザイク処理部１８２２ａから入力される第２の撮像撮像信号に対して、リニアマトリクス演算を行う。そして、リニアマトリクス演算部１８２３ａは、リニアマトリクス演算後の飽和信号をガンマ補正部１８２４ａへ出力する。

（２－４）ガンマ補正部１８２４ａ
ガンマ補正部１８２４ａは、入力される信号に対して、ガンマ補正を行う機能を有する。例えば、ガンマ補正部１８２４ａは、リニアマトリクス演算部１８２３ａから入力される飽和信号に対して、ガンマ補正を行う。そして、ガンマ補正部１８２４ａは、ガンマ補正後の飽和信号をＲＧＢ－ＹＣＣ変換部１８２５ａへ出力する。

（２－５）ＲＧＢ－ＹＣＣ変換部１８２５ａ
ＲＧＢ－ＹＣＣ変換部１８２５ａは、入力される信号から輝度信号を生成する機能を有する。例えば、ＲＧＢ－ＹＣＣ変換部１８２５ａは、ガンマ補正部１８２４ａから入力される飽和信号に含まれるＲＧＢ信号を輝度信号に変換する変換処理を行う。そして、ＲＧＢ－ＹＣＣ変換部１８２５ａは、変換処理により生成した輝度信号を補正部１８４ａへ出力する。

また、ＲＧＢ－ＹＣＣ変換部１８２５ａは、入力される信号から色差信号を生成する機能を有する。例えば、ＲＧＢ－ＹＣＣ変換部１８２５ａは、ガンマ補正部１８２４ａから入力される飽和信号に含まれるＲＧＢ信号を色差信号に変換する変換処理を行う。そして、ＲＧＢ－ＹＣＣ変換部１８２５ａは、変換処理により生成した色差信号を補正部１８４ａへ出力する。

（３）第２の信号処理部１８３ａ
第２の信号処理部１８３ａは、入力される信号から、ディテール成分を抽出する機能を有する。例えば、第２の信号処理部１８３ａは、クランプ処理部１８１ａから入力される撮像信号に基づきディテール成分を抽出する。当該機能を実現するために、第２の信号処理部１８３ａは、図６に示すように抽出部１８３１ａを備える。

（３－１）抽出部１８３１ａ
抽出部１８３１ａは、入力される信号からディテール成分を抽出する機能を有する。例えば、抽出部１８３１ａは、クランプ処理部１８１ａから入力される撮像信号から、ディテール成分を抽出する。そして、抽出部１８３１ａは、抽出したディテール成分を補正部１８４ａへ出力する。

なお、抽出部１８３１ａが撮像信号からディテール成分を抽出する方法は特に限定されない。抽出部１８３１ａは、例えば、低域の信号を遮断して高域の信号のみを通すハイパスフィルタ（ＨＰＦ：Ｈｉｇｈ－Ｐａｓｓ Ｆｉｌｔｅｒ）を用いてよい。抽出部１８３１ａは、ハイパスフィルタにより所定の周波数以下の成分（例えばＤＣ成分）を遮断することで、撮像信号からディテール成分を抽出する。ここでの所定の周波数とは、例えば、ＤＣ成分の周波数の上限値である。これにより、抽出部１８３１ａは、撮像信号からＤＣ成分が含まれないディテール成分を抽出することができる。

（４）補正部１８４ａ
補正部１８４ａは、入力される信号に対して、補正処理を行う機能を有する。例えば、補正部１８４ａは、輝度信号に対して、抽出部１８３１ａから入力されるディテール成分を、ＲＧＢ－ＹＣＣ変換部１８２５ａから入力される輝度信号に反映し、補正輝度信号を生成する。補正輝度信号は、サチュレーションが生じた領域のディテール成分が復元された輝度信号である。補正部１８４ａは、ディテール成分を輝度信号に反映することで、サチュレーションが生じた領域のディテールを復元することができる。そして、補正部１８４ａは、補正処理により生成された補正輝度信号を画像生成部１８５ａへ出力する。

補正部１８４ａは、ディテール成分を輝度信号に対して所定の割合で加算することで、補正輝度信号を生成する。なお、補正部１８４ａがディテール成分を輝度信号に反映する方法は、加算に限定されない。例えば、補正部１８４ａは、ディテール成分を輝度信号に対して、所定の割合で減算してもよい。

なお、補正部１８４ａは、補正輝度信号の信号レベルが小さくなるように調整してもよい。例えば、補正部１８４ａは、ディテール成分を輝度信号に加算する際に、加算する割合を小さくすることで、補正輝度信号の信号レベルを小さくしてもよい。また、例えば、補正部１８４ａは、ディテール成分を輝度信号に減算する際に、減算する割合を大きくすることで、補正輝度信号の信号レベルを小さくしてもよい。また、例えば、補正部１８４ａは、ディテール成分を加算または減算して生成された補正輝度信号に対して、所定の係数を乗算することで、補正輝度信号の信号レベルを生成時よりも小さくしてもよい。なお、補正輝度信号の信号レベルが小さくなるように調整する場合、補正部１８４ａは、表示装置２００側で信号レベルが増幅されることを考慮した上で、補正輝度信号の信号レベルを調整することが望ましい。例えば、補正部１８４ａは、表示装置２００にて信号レベルが増幅されても、表示される画像にサチュレーションが生じないように、補正輝度信号の信号レベルの大きさを調整する。これにより、表示装置２００は、画像信号の信号レベルを増幅しても、サチュレーションが生じず、ディテールが復元された画像を表示することができる。

（５）画像生成部１８５ａ
画像生成部１８５ａは、入力される信号に基づき、画像を生成する機能を有する。例えば、画像生成部１８５ａは、補正部１８４ａから入力される色差信号と補正輝度信号に基づき画像を生成する。そして、画像生成部１８５ａは、生成した画像を画像信号として通信部１９５へ出力する。画像生成部１８５ａが生成した画像は、画像信号として通信部１９５を介して表示装置２００へ送信され、表示装置２００にて画像として表示される。

＜３－２．画像処理の流れ＞
図７は、本開示の第１の実施形態に係る画像処理の流れを示すフローチャートである。まず、画像処理部１８０ａは、撮像信号を取得する（Ｓ１００）。次いで、画像処理部１８０ａは、撮像信号のホワイトバランスを調整し、飽和信号を取得する（Ｓ１０２）。次いで、画像処理部１８０ａは、取得した飽和信号から、輝度信号及び色差信号を生成する（Ｓ１０４）。Ｓ１０２及びＳ１０４の処理と並行して、画像処理部１８０ａは、撮像信号からディテール成分を抽出する（Ｓ１０６）。

画像処理部１８０ａは、生成した輝度信号に抽出したディテール成分を反映し、補正輝度信号を生成する（Ｓ１０８）。そして、画像処理部１８０ａは、生成した補正輝度信号と色差信号に基づき、画像を生成する（Ｓ１１０）。

＜＜４．第２の実施形態に係る画像処理部＞＞
以上、本開示の第１の実施形態に係る画像処理部について説明した。次に、本開示の第２の実施形態に係る画像処理部について説明する。図８は、本開示の第２の実施形態に係る画像処理部１８０ｂの機能構成例を示すブロック図である。第１の実施形態では、補正部１８４ａが第１の信号処理部１８２ａから出力される輝度信号の全体にディテール成分を反映する例について説明した。第２の実施形態では、補正部１８４ｂがサチュレーションの生じた領域のみにディテール成分を反映する例について説明する。なお、以下では、第１の実施形態と異なる点についてのみを詳細に説明する。

＜４－１．画像処理部の機能構成＞
図８に示すように、画像処理部１８０ｂは、クランプ処理部１８１ｂ、第１の信号処理部１８２ｂ、第２の信号処理部１８３ｂ、補正部１８４ｂ、画像生成部１８５ｂ、及び検出部１８６ｂを備える。

（１）クランプ処理部１８１ｂ
クランプ処理部１８１ｂは、第１の実施形態にて説明したクランプ処理部１８１ａと同様の機能を有するため、詳細な説明を省略する。

（２）第１の信号処理部１８２ｂ
第１の信号処理部１８２ｂは、第１の実施形態にて説明した第１の信号処理部１８２ａと同様の機能を有する。第１の信号処理部１８２ｂは、図８に示すように、ホワイトバランス調整部１８２１ｂ、デモザイク処理部１８２２ｂ、リニアマトリクス演算部１８２３ｂ、ガンマ補正部１８２４ｂ、及びＲＧＢ－ＹＣＣ変換部１８２５ｂを備える。

（２－１）ホワイトバランス調整部１８２１ｂ
ホワイトバランス調整部１８２１ｂは、第１の実施形態にて説明したホワイトバランス調整部１８２１ａと同様の機能を有するため、詳細な説明を省略する。なお、ホワイトバランス調整部１８２１ｂが飽和信号を、デモザイク処理部１８２２ｂだけでなく検出部１８６ｂへも出力する点は、第１の実施形態のホワイトバランス調整部１８２１ａと異なる。

（２－２）デモザイク処理部１８２２ｂ
デモザイク処理部１８２２ｂは、第１の実施形態にて説明したデモザイク処理部１８２２ａと同様の機能を有するため、詳細な説明を省略する。

（２－３）リニアマトリクス演算部１８２３ｂ
リニアマトリクス演算部１８２３ｂは、第１の実施形態にて説明したリニアマトリクス演算部１８２３ａと同様の機能を有するため、詳細な説明を省略する。

（２－４）ガンマ補正部１８２４ｂ
ガンマ補正部１８２４ｂは、第１の実施形態にて説明したガンマ補正部１８２４ａと同様の機能を有するため、詳細な説明を省略する。

（２－５）ＲＧＢ－ＹＣＣ変換部１８２５ｂ
ＲＧＢ－ＹＣＣ変換部１８２５ｂは、第１の実施形態にて説明したＲＧＢ－ＹＣＣ変換部１８２５ａと同様の機能を有するため、詳細な説明を省略する。

（３）第２の信号処理部１８３ｂ
第２の信号処理部１８３ｂは、第１の実施形態にて説明した第２の信号処理部１８３ａと同様の機能を有するため、詳細な説明を省略する。第２の信号処理部１８３ｂは、図８に示すように、抽出部１８３１ｂを備える。

（３－１）抽出部１８３１ｂ
抽出部１８３１ｂは、第１の実施形態にて説明した抽出部１８３１ａと同様の機能を有するため、詳細な説明を省略する。

（４）補正部１８４ｂ
補正部１８４ｂは、第１の実施形態の補正部１８４ａと異なり、検出部１８６ｂが検出したサチュレーションが生じた領域のみに対して補正処理を行う機能を有する。例えば、補正部１８４ｂは、検出部１８６ｂが検出したサチュレーションが生じた領域と対応するディテール成分のみを輝度信号に反映し、補正輝度信号を生成する。これにより、補正部１８４ｂは、サチュレーションが生じていない領域にはディテール成分を反映しないため、サチュレーションが生じていない領域における過強調を防ぐことができる。

（５）画像生成部１８５ｂ
画像生成部１８５ｂは、第１の実施形態にて説明した画像生成部１８５ａと同様の機能を有するため、詳細な説明を省略する。

（６）検出部１８６ｂ
検出部１８６ｂは、入力される信号からサチュレーションが生じた領域を検出する機能を有する。例えば、検出部１８６ｂは、ホワイトバランス調整部１８２１ｂから入力される飽和信号からサチュレーションが生じた領域を検出する。そして、検出部１８６ｂは、検出結果を補正部１８４ｂへ出力する。これにより、補正部１８４ｂは、検出部１８６ｂによる検出結果に基づき、ディテール成分を反映する領域を特定することができる。

例えば、検出部１８６ｂは、飽和信号と対応する複数の波長帯域に対する閾値処理に基づき、サチュレーションが生じた領域を検出する。具体的に、検出部１８６ｂは、複数の波長帯域の各々と対応する画素値の内、最も高い画素値と次に高い画素値との差が所定の閾値以上である場合、当該複数の波長帯域と対応する領域をサチュレーションが生じた領域として検出する。例えば、検出部１８６ｂに入力された飽和信号に含まれるＲＧＢ信号のＲ成分の画素値が最も高く、Ｂ成分の画素値が次に高いとする。この時、Ｒ成分の画素値とＢ成分の画素値の差が所定の閾値以上である場合、検出部１８６ｂは、当該Ｒ成分及びＢ成分と対応する領域をサチュレーションが生じている領域として検出する。なお、検出部１８６ｂが飽和信号からサチュレーションが生じた領域を検出する方法は、上述の例に限定されない。

検出部１８６ｂは、赤色の波長帯域、緑色の波長帯域、または青色の波長帯域の内の少なくとも１つを、サチュレーションが生じた波長帯域として検出する。なお、検出部１８６ｂは、サチュレーションが生じた波長帯域として特定の波長帯域を検出するように予め設定されてもよい。例えば、検出部１８６ｂは、赤色の波長帯域をサチュレーションが生じた波長帯域として検出するように設定される。これにより、検出部１８６ｂは、サチュレーションが生じた赤色の波長帯域と対応する領域をサチュレーションが生じた領域として検出することができる。即ち、検出部１８６ｂは、表示装置２００にて表示される画像にて、赤系の色で表示されている領域の中からサチュレーションが生じた領域を検出することができる。

なお、検出部１８６ｂが検出するサチュレーションが生じた波長帯域は、赤色の波長帯域のみに限られない。例えば、検出部１８６ｂは、青色の波長帯域のみをサチュレーションが生じた波長帯域として検出してもよい。また、検出部１８６ｂは、緑色の波長帯域のみをサチュレーションが生じた波長帯域として検出してもよい。また、検出部１８６ｂは、赤色の波長帯域、緑色の波長帯域、または青色の波長帯域の任意の組み合わせをサチュレーションが生じた波長帯域として検出してもよい。

また、検出部１８６ｂが検出した結果を補正部１８４ｂへ出力することで、補正部１８４ｂは、赤系の色で表示されている領域の中でサチュレーションが生じている領域のディテールを復元することができる。このように、赤系の色で表示されている領域の中でサチュレーションが生じている領域のディテールを復元することは、赤系の色が多い患者の体内を撮像対象とする医療用観察装置１００においては特に有効である。

なお、予め設定される特定の波長帯域は、赤色の波長帯域に限定されない。例えば、予め設定される特定の波長帯域は、緑色の波長帯域のみ、または青色の波長帯域のみであってもよい。また、特定の波長帯域は、赤色の波長帯域、緑色の波長帯域、または青色の波長帯域の任意の組み合わせであってもよい。

＜４－２．画像処理の流れ＞
図９は、本開示の第２の実施形態に係る画像処理の流れを示すフローチャートである。まず、画像処理部１８０ｂは、撮像信号を取得する（Ｓ２００）。次いで、画像処理部１８０ｂは、撮像信号のホワイトバランスを調整し、飽和信号を取得する（Ｓ２０２）。次いで、画像処理部１８０ｂは、取得した飽和信号から、輝度信号及び色差信号を生成する（Ｓ２０４）。Ｓ２０２及びＳ２０４の処理と並行して、画像処理部１８０ｂは、撮像信号からディテール成分を抽出する（Ｓ２０６）。

画像処理部１８０ｂは、飽和信号からサチュレーションが生じた領域の検出を行う（Ｓ２０８）。次いで、画像処理部１８０ｂは、輝度信号のサチュレーションが生じた領域のみに抽出したディテール成分を反映し、補正輝度信号を生成する（Ｓ２１０）。そして、画像処理部１８０ｂは、生成した補正輝度信号と色差信号に基づき、画像を生成する（Ｓ２１２）。

＜＜５．第３の実施形態に係る画像処理部＞＞
以上、本開示の第２の実施形態に係る画像処理部について説明した。次に、本開示の第３の実施形態に係る画像処理部について説明する。図１０は、本開示の第３の実施形態に係る画像処理部１８０ｃの機能構成例を示すブロック図である。第２の実施形態では、補正部１８４ｂがサチュレーションの生じた領域のみにディテール成分を反映する例について説明した。第３の実施形態では、第２の信号処理部１８３ｃが、第１の信号処理部１８２ｃよりも小さいゲインで撮像信号に対してホワイトバランスの調整を行う。そして、第２の信号処理部１８３ｃが、ホワイトバランスの調整により出力される飽和信号が変換された輝度信号からディテール成分を抽出する例について説明する。なお、以下では、第１及び第２の実施形態と異なる点についてのみを詳細に説明する。

＜５－１．画像処理部の機能構成＞
図１０に示すように、画像処理部１８０ｃは、クランプ処理部１８１ｃ、第１の信号処理部１８２ｃ、第２の信号処理部１８３ｃ、補正部１８４ｃ、画像生成部１８５ｃ、及び検出部１８６ｃを備える。

（１）クランプ処理部１８１ｃ
クランプ処理部１８１ｃは、第２の実施形態にて説明したクランプ処理部１８１ｂと同様の機能を有するため、詳細な説明を省略する。

（２）第１の信号処理部１８２ｃ
第１の信号処理部１８２ｃは、第２の実施形態にて説明した第１の信号処理部１８２ｂと同様の機能を有する。第１の信号処理部１８２ｃは、図１０に示すように、ホワイトバランス調整部１８２１ｃ、デモザイク処理部１８２２ｃ、リニアマトリクス演算部１８２３ｃ、ガンマ補正部１８２４ｃ、及びＲＧＢ－ＹＣＣ変換部１８２５ｃを備える。

（２－１）ホワイトバランス調整部１８２１ｃ
ホワイトバランス調整部１８２１ｃは、第２の実施形態にて説明したホワイトバランス調整部１８２１ｂと同様の機能を有するため、詳細な説明を省略する。

（２－２）デモザイク処理部１８２２ｃ
デモザイク処理部１８２２ｃは、第１及び第２の実施形態にて説明したデモザイク処理部１８２２と同様の機能を有するため、詳細な説明を省略する。

（２－３）リニアマトリクス演算部１８２３ｃ
リニアマトリクス演算部１８２３ｃは、第１及び第２の実施形態にて説明したリニアマトリクス演算部１８２３と同様の機能を有するため、詳細な説明を省略する。

（２－４）ガンマ補正部１８２４ｃ
ガンマ補正部１８２４ｃは、第１及び第２の実施形態にて説明したガンマ補正部１８２４と同様の機能を有するため、詳細な説明を省略する。

（２－５）ＲＧＢ－ＹＣＣ変換部１８２５ｃ
ＲＧＢ－ＹＣＣ変換部１８２５ｃは、第１及び第２の実施形態にて説明したＲＧＢ－ＹＣＣ変換部１８２５と同様の機能を有するため、詳細な説明を省略する。

（３）第２の信号処理部１８３ｃ
第２の信号処理部１８３ｃは、第１及び第２の実施形態にて説明した第２の信号処理部１８３と異なり、ホワイトバランスの調整を行い出力される飽和信号を、ＲＧＢ信号から輝度信号に変換する機能を有する。そして、第２の信号処理部１８３ｃは、変換した輝度信号からディテール成分を抽出する。第２の信号処理部１８３ｃは、図１０に示すように、ホワイトバランス調整部１８３２ｃ、ＲＧＢ－ＹＣＣ変換部１８３３ｃ、及び抽出部１８３１ｃを備える。

（３－１）ホワイトバランス調整部１８３２ｃ
ホワイトバランス調整部１８３２ｃは、基本的には、第１の信号処理部１８２ｃのホワイトバランス調整部１８２１ｃと同様の機能を有する。しかしながら、ホワイトバランス調整部１８３２ｃが、撮像信号に対して、第１の信号処理部１８２ｃのホワイトバランス調整部１８２１ｃよりも小さいゲインによるホワイトバランスの調整を行う点は、ホワイトバランス調整部１８２１ｃと異なる。例えば、ホワイトバランス調整部１８３２ｃは、ホワイトバランスの調整後の信号レベルが１００％を超えないようにゲインを設定して、ホワイトバランスの調整を行う。これにより、ホワイトバランス調整部１８３２ｃは、ホワイトバランスの調整によるサチュレーションが生じていない領域のみを含む信号を出力することができる。ホワイトバランスの調整によるサチュレーションが生じていない領域のみを含む信号は、以下では、未飽和信号（第３の信号）とも称される。

（３－２）ＲＧＢ－ＹＣＣ変換部１８３３ｃ
ＲＧＢ－ＹＣＣ変換部１８３３ｃは、第１の信号処理部１８２ｃのＲＧＢ－ＹＣＣ変換部１８２５ｃと同様の機能を有するため、詳細な説明を省略する。

（３－３）抽出部１８３１ｃ
抽出部１８３１ｃは、基本的には、第１及び第２の実施形態にて説明した抽出部１８３１と同様の機能を有する。しかしながら、抽出部１８３１ｃが、飽和信号ではなく、未飽和信号に基づきディテール成分を抽出する点は、第１及び第２の実施形態の抽出部１８３１と異なる。具体的に、抽出部１８３１ｃは、ＲＧＢ－ＹＣＣ変換部１８３３ｃにより未飽和信号が変換された輝度信号からディテール成分を抽出する。

（４）補正部１８４ｃ
補正部１８４ｃは、第２の実施形態にて説明した補正部１８４ｂと同様の機能を有するため、詳細な説明を省略する。

（５）画像生成部１８５ｃ
画像生成部１８５ｃは、第１及び第２の実施形態にて説明した画像生成部１８５と同様の機能を有するため、詳細な説明を省略する。

（６）検出部１８６ｃ
検出部１８６ｃは、第２の実施形態にて説明した検出部１８６ｂと同様の機能を有するため、詳細な説明を省略する。

＜５－２．画像処理の流れ＞
図１１は、本開示の第３の実施形態に係る画像処理の流れを示すフローチャートである。まず、画像処理部１８０ｃは、撮像信号を取得する（Ｓ３００）。次いで、画像処理部１８０ｃは、撮像信号のホワイトバランスを調整し、飽和信号を取得する（Ｓ３０２）。次いで、画像処理部１８０ｃは、取得した飽和信号から、輝度信号及び色差信号を生成する（Ｓ３０４）。Ｓ３０２及びＳ３０４の処理と並行して、画像処理部１８０ｃは、撮像信号のホワイトバランスを調整し、未飽和信号を取得する（Ｓ３０６）。次いで、画像処理部１８０ｃは、未飽和信号が変換された輝度信号からディテール成分を抽出する（Ｓ３０８）。

画像処理部１８０ｃは、サチュレーションが生じた領域の検出を行う（Ｓ３１０）。次いで、画像処理部１８０ｃは、輝度信号のサチュレーションが生じた領域のみに抽出したディテール成分を反映し、補正輝度信号を生成する（Ｓ３１２）。そして、画像処理部１８０ｃは、生成した補正輝度信号と色差信号に基づき、画像を生成する（Ｓ３１４）。

＜＜６．第４の実施形態に係る画像処理部＞＞
以上、本開示の第３の実施形態に係る画像処理部について説明した。次に、本開示の第４の実施形態に係る画像処理部について説明する。図１２は、本開示の第４の実施形態に係る画像処理部１８０ｄの機能構成例を示すブロック図である。第１～第３の実施形態では、並列に接続された第１の信号処理部１８２と第２の信号処理部１８３が、１つの撮像信号に基づき信号処理を行う例について説明した。第４の実施形態では、直列に接続された第１の信号処理部１８２と第２の信号処理部１８３が、異なる時系列の２つの撮像信号に基づき信号処理を行う例について説明する。

第４の実施形態に係る画像処理部１８０ｄは、取得した時間が異なる２つの撮像信号に基づき、補正輝度信号を生成する。例えば、画像処理部１８０ｄは、１つ目の撮像信号に基づき、補正対象となる１つ目の輝度信号を生成し、２つ目の撮像信号に基づき、ディテール成分の抽出対象となる２つ目の輝度信号を生成する。そして、画像処理部１８０ｄは、補正対象となる１つ目の輝度信号に対して、２つ目の輝度信号から抽出したディテール成分を反映することで、補正輝度信号を生成する。このように、画像処理部１８０ｄは、直列で時分割処理を行う構成を有することにより、第３の実施形態の画像処理部１８０ｃよりも簡易な構成の装置により補正輝度信号を生成することができる。

＜６－１．画像処理部の機能構成＞
図１２に示すように、画像処理部１８０ｄは、クランプ処理部１８１ｄ、第１の信号処理部１８２ｄ、第２の信号処理部１８３ｄ、補正部１８４ｄ、画像生成部１８５ｄ、検出部１８６ｄ、及び記憶部１８７ｄを備える。

（１）クランプ処理部１８１ｄ
クランプ処理部１８１ｄは、基本的には、第１～第３の実施形態にて説明したクランプ処理部１８１と同様の機能を有する。しかしながら、クランプ処理部１８１ｄによる撮像信号の出力先が、第１の信号処理部１８２ｄのみである点は、第１～第３の実施形態のクランプ処理部１８１と異なる。

（２）第１の信号処理部１８２ｄ
第１の信号処理部１８２ｄは、基本的には、第１～第３の実施形態の第１の信号処理部１８２と同様の機能を有する。しかしながら、第１の信号処理部１８２ｄが、時系列の異なる２つの撮像信号に基づき、２つの輝度信号を生成する点は、第１～第３の実施形態の第１の信号処理部１８２と異なる。第１の信号処理部１８２ｄは、図１２に示すように、ホワイトバランス調整部１８２１ｄ、デモザイク処理部１８２２ｄ、リニアマトリクス演算部１８２３ｄ、ガンマ補正部１８２４ｄ、及びＲＧＢ－ＹＣＣ変換部１８２５ｄを備える。

（２－１）ホワイトバランス調整部１８２１ｄ
ホワイトバランス調整部１８２１ｄは、第２及び第３の実施形態にて説明したホワイトバランス調整部１８２１と同様の機能を有するため、詳細な説明を省略する。

（２－２）デモザイク処理部１８２２ｄ
デモザイク処理部１８２２ｄは、第１～第３の実施形態にて説明したデモザイク処理部１８２２と同様の機能を有するため、詳細な説明を省略する。

（２－３）リニアマトリクス演算部１８２３ｄ
リニアマトリクス演算部１８２３ｄは、第１～第３の実施形態にて説明したリニアマトリクス演算部１８２３と同様の機能を有するため、詳細な説明を省略する。

（２－４）ガンマ補正部１８２４ｄ
ガンマ補正部１８２４ｄは、第１～第３の実施形態にて説明したガンマ補正部１８２４と同様の機能を有するため、詳細な説明を省略する。

（２－５）ＲＧＢ－ＹＣＣ変換部１８２５ｄ
ＲＧＢ－ＹＣＣ変換部１８２５ｄは、基本的には、第１～第３の実施形態にて説明したＲＧＢ－ＹＣＣ変換部１８２５と同様の機能を有する。しかしながら、ＲＧＢ－ＹＣＣ変換部１８２５ｄが、１つ目の輝度信号を記憶部１８７ｄへ出力し、２つ目の輝度信号を第２の信号処理部１８３ｄの抽出部１８３１ｄへ出力する点は、第１～第３の実施形態のＲＧＢ－ＹＣＣ変換部１８２５と異なる。

（３）第２の信号処理部１８３ｄ
第２の信号処理部１８３ｄは、基本的には、第１及び第２の実施形態にて説明した第２の信号処理部１８３と同様の機能を有する。しかしながら、第２の信号処理部１８３ｄが、第１の信号処理部１８２ｄから入力された輝度信号からディテール成分を抽出する点は、第１及び第２の実施形態の第２の信号処理部１８３と異なる。第２の信号処理部１８３ｄは、図１２に示すように、抽出部１８３１ｄを備える。

（３－１）抽出部１８３１ｄ
抽出部１８３１ｄは、基本的には、第１及び第２の実施形態にて説明した抽出部１８３１と同様の機能を有する。しかしながら、抽出部１８３１ｄが、クランプ処理部１８１ではなく、ＲＧＢ－ＹＣＣ変換部１８２５ｄから入力される輝度信号からディテール成分を抽出する点は、第１及び第２の実施形態の抽出部１８３１と異なる。

（４）補正部１８４ｄ
補正部１８４ｄは、基本的には、第２及び第３の実施形態にて説明した補正部１８４と同様の機能を有する。しかしながら、補正部１８４ｄが、記憶部１８７ｄから入力される１つ目の輝度信号に対して、記憶部１８７ｄから入力される検出結果に基づき、抽出部１８３１ｄから入力されるディテール成分を反映する点は、第２及び第３の実施形態の補正部１８４と異なる。

（５）画像生成部１８５ｄ
画像生成部１８５ｄは、第１～第３の実施形態にて説明した画像生成部１８５と同様の機能を有するため、詳細な説明を省略する。

（６）検出部１８６ｄ
検出部１８６ｄは、基本的には、第２及び第３の実施形態にて説明した検出部１８６と同様の機能を有する。しかしながら、検出部１８６ｄは、サチュレーションが生じた領域の検出結果を記憶部１８７ｄへ出力する点は、第２及び第３の実施形態の検出部１８６と異なる。

（７）記憶部１８７ｄ
記憶部１８７ｄは、画像処理部１８０ｄで生成されるデータを記憶する機能を有する。例えば、記憶部１８７ｄは、第１の信号処理部１８２ｄのＲＧＢ－ＹＣＣ変換部１８２５ｄが生成する１つ目の輝度信号を記憶する。そして、記憶部１８７ｄは、記憶した１つ目の輝度信号を必要に応じて補正部１８４ｄへ出力する。また、記憶部１８７ｄは、検出部１８６ｄによるサチュレーションが生じた領域の検出結果を記憶する。そして、記憶部１８７ｄは、記憶した検出結果を必要に応じて補正部１８４ｄへ出力する。

＜６－２．画像処理の流れ＞
図１３は、本開示の第４の実施形態に係る画像処理の流れを示すフローチャートである。まず、画像処理部１８０ｄは、１つ目の撮像信号を取得する（Ｓ４００）。次いで、画像処理部１８０ｄは、１つ目の撮像信号のホワイトバランスを調整し、１つ目の飽和信号を取得する（Ｓ４０２）。次いで、画像処理部１８０ｄは、取得した１つ目の飽和信号から、１つ目の輝度信号及び１つ目の色差信号を生成し、記憶する（Ｓ４０４）。また、画像処理部１８０ｄは、取得した１つ目の飽和信号におけるサチュレーションが生じた領域の検出を行い、検出結果を記憶する（Ｓ４０６）。

１つ目の輝度信号及び１つ目の色差信号の記憶後、画像処理部１８０ｄは、１つ目の撮像信号とは異なる２つ目の撮像信号を取得する（Ｓ４０８）。次いで、画像処理部１８０ｄは、１つ目の飽和信号の取得時よりもゲインを小さく設定する（Ｓ４１０）。次いで、画像処理部１８０ｄは、２つ目の撮像信号のホワイトバランスを調整し、２つ目の飽和信号を取得する（Ｓ４１２）。次いで、画像処理部１８０ｄは、２つ目の飽和信号から、２つ目の輝度信号及び２つ目の色差信号を生成する（Ｓ４１４）そして、画像処理部１８０ｄは、２つ目の輝度信号からディテール成分を抽出する（Ｓ４１６）。

画像処理部１８０ｄは、記憶した検出結果に基づき、記憶した１つ目の輝度信号のサチュレーションが生じた領域のみに抽出したディテール成分を反映し、補正輝度信号を生成する（Ｓ４１８）。そして、画像処理部１８０ｄは、生成した補正輝度信号と色差信号に基づき、画像を生成する（Ｓ４２０）。

＜６－３．変形例＞
画像処理部１８０ｄは、抽出部１８３１ｄが抽出したディテール成分を記憶部１８７ｄが記憶する構成であってもよい。当該構成により、画像処理部１８０ｄは、１つ目の撮像信号に基づき生成した１つ目の輝度信号からディテール成分を抽出し、抽出したディテール成分を記憶部１８７ｄに記憶することできる。これにより、画像処理部１８０ｄは、２つ目の撮像信号から生成した輝度信号に対して、１つ目の輝度信号から抽出して記憶部１８７ｄに記憶されたディテール成分を反映し、補正輝度信号を生成することができる。

＜＜７．第５の実施形態に係る画像処理部＞＞
以上、本開示の第４の実施形態に係る画像処理部について説明した。次に、本開示の第５の実施形態に係る画像処理部について説明する。図１４は、本開示の第５の実施形態に係る画像処理部１８０ｅの機能構成例を示すブロック図である。第４の実施形態では、直列に接続された第１の信号処理部１８２と第２の信号処理部１８３が、異なる時系列の２つの撮像信号に基づき信号処理を行う例について説明した。第５の実施形態では、直列に接続された第１の信号処理部１８２と第２の信号処理部１８３が、１つの撮像信号に基づき信号処理を行う例について説明する。

第５の実施形態に係る画像処理部１８０ｅは、１つの撮像信号に基づき、補正輝度信号を生成する。例えば、画像処理部１８０ｅは、取得した撮像信号に基づき、補正対象となる１つ目の輝度信号を生成する。また、画像処理部１８０ｅは、取得時に撮像信号を記憶部１８７ｅに記憶しておき、記憶した撮像信号に基づき、ディテール成分の抽出対象となる２つ目の輝度信号を生成する。そして、画像処理部１８０ｅは、補正対象となる１つ目の輝度信号に対して、２つ目の輝度信号から抽出したディテール成分を反映することで、補正輝度信号を生成する。このように、画像処理部１８０ｅは、第１の信号処理部１８２ｄと第２の信号処理部１８３ｅが直列に接続されていても、１つの撮像信号に基づき、補正輝度信号を生成することができる。これにより、画像処理部１８０ｅは、第４の実施形態の画像処理部１８０ｄと比較して、時系列のずれにより生じるノイズを低減することができる。

＜７－１．画像処理部の機能構成＞
図１４に示すように、画像処理部１８０ｅは、クランプ処理部１８１ｅ、第１の信号処理部１８２ｅ、第２の信号処理部１８３ｅ、補正部１８４ｅ、画像生成部１８５ｅ、検出部１８６ｅ、及び記憶部１８７ｅを備える。

（１）クランプ処理部１８１ｅ
クランプ処理部１８１ｅは、基本的には、第１～第４の実施形態にて説明したクランプ処理部１８１と同様の機能を有する。しかしながら、クランプ処理部１８１ｅによる撮像信号の出力先が、第１の信号処理部１８２ｅのみでなく、記憶部１８７ｅへも出力する点は、第１～第４の実施形態のクランプ処理部１８１と異なる。

（２）第１の信号処理部１８２ｅ
第１の信号処理部１８２ｅは、基本的には、第４の実施形態の第１の信号処理部１８２ｄと同様の機能を有する。しかしながら、第１の信号処理部１８２ｅが、クランプ処理部１８１ｅから入力される撮像信号と記憶部１８７ｄから入力される撮像信号とに基づき、２つの輝度信号を生成する点は、第４の実施形態の第１の信号処理部１８２ｄと異なる。第１の信号処理部１８２ｅは、図１４に示すように、ホワイトバランス調整部１８２１ｅ、デモザイク処理部１８２２ｅ、リニアマトリクス演算部１８２３ｅ、ガンマ補正部１８２４ｅ、及びＲＧＢ－ＹＣＣ変換部１８２５ｅを備える。

（２－１）ホワイトバランス調整部１８２１ｅ
ホワイトバランス調整部１８２１ｅは、基本的には、第４の実施形態にて説明したホワイトバランス調整部１８２１ｄと同様の機能を有する。しかしながら、ホワイトバランス調整部１８２１ｅは、クランプ処理部１８１ｅからだけでなく、記憶部１８７ｅから入力される撮像信号に対してもホワイトバランスの調整を行う点は、第４の実施形態のホワイトバランス調整部１８２１ｄと異なる。

（２－２）デモザイク処理部１８２２ｅ
デモザイク処理部１８２２ｅは、第１～第４の実施形態にて説明したデモザイク処理部１８２２と同様の機能を有するため、詳細な説明を省略する。

（２－３）リニアマトリクス演算部１８２３ｅ
リニアマトリクス演算部１８２３ｅは、第１～第４の実施形態にて説明したリニアマトリクス演算部１８２３と同様の機能を有するため、詳細な説明を省略する。

（２－４）ガンマ補正部１８２４ｅ
ガンマ補正部１８２４ｅは、第１～第４の実施形態にて説明したガンマ補正部１８２４と同様の機能を有するため、詳細な説明を省略する。

（２－５）ＲＧＢ－ＹＣＣ変換部１８２５ｅ
ＲＧＢ－ＹＣＣ変換部１８２５ｅは、第４の実施形態にて説明したＲＧＢ－ＹＣＣ変換部１８２５ｄと同様の機能を有するため、詳細な説明を省略する。

（３）第２の信号処理部１８３ｅ
第２の信号処理部１８３ｅは、第４の実施形態にて説明した第２の信号処理部１８３ｄと同様の機能を有するため、詳細な説明を省略する。図１４に示すように、第２の信号処理部１８３ｅは、抽出部１８３１ｅを備える。

（３－１）抽出部１８３１ｅ
抽出部１８３１ｅは、第４の実施形態にて説明した抽出部１８３１ｄと同様の機能を有するため、詳細な説明を省略する。

（４）補正部１８４ｅ
補正部１８４ｅは、第４の実施形態にて説明した補正部１８４ｄと同様の機能を有するため、詳細な説明を省略する。

（５）画像生成部１８５ｅ
画像生成部１８５ｅは、第１～第４の実施形態にて説明した画像生成部１８５と同様の機能を有するため、詳細な説明を省略する。

（６）検出部１８６ｅ
検出部１８６ｅは、第４の実施形態にて説明した検出部１８６ｄと同様の機能を有するため、詳細な説明を省略する。

（７）記憶部１８７ｅ
記憶部１８７ｅは、基本的には、第４の実施形態にて説明した記憶部１８７ｄと同様の機能を有する。しかしながら、記憶部１８７ｅが、クランプ処理部１８１ｅから撮像信号を入力される点と、ホワイトバランス調整部１８２１ｅへ撮像信号を出力する点は、第４の実施形態の記憶部１８７ｄと異なる。

＜７－２．画像処理の流れ＞
図１５は、本開示の第５の実施形態に係る画像処理の流れを示すフローチャートである。まず、画像処理部１８０ｅは、撮像信号を取得する（Ｓ５００）。次いで、画像処理部１８０ｅは、取得した撮像信号のホワイトバランスを調整し、１つ目の飽和信号を取得する（Ｓ５０２）。次いで、画像処理部１８０ｅは、１つ目の飽和信号から、１つ目の輝度信号及び１つ目の色差信号を生成し、記憶する（Ｓ５０４）。そして、画像処理部１８０ｅは、取得した１つ目の飽和信号におけるサチュレーションが生じた領域の検出を行い、検出結果を記憶する（Ｓ５０６）。

１つ目の輝度信号及び１つ目の色差信号の記憶後、画像処理部１８０ｅは、１つ目の飽和信号の取得時よりもゲインを小さく設定する（Ｓ５０８）。次いで、画像処理部１８０ｅは、記憶した撮像信号のホワイトバランスを調整し、２つ目の飽和信号を取得する（Ｓ５１０）。次いで、画像処理部１８０ｅは、２つ目の飽和信号から、２つ目の輝度信号及び２つ目の色差信号を生成する（Ｓ５１２）そして、画像処理部１８０ｅは、２つ目の輝度信号からディテール成分を抽出する（Ｓ５１４）。

画像処理部１８０ｅは、記憶した検出結果に基づき、記憶した１つ目の輝度信号のサチュレーションが生じた領域のみに抽出したディテール成分を反映し、補正輝度信号を生成する（Ｓ５１６）。そして、画像処理部１８０ｅは、生成した補正輝度信号と色差信号に基づき、画像を生成する（Ｓ５１８）。

＜７－３．変形例＞
画像処理部１８０ｅは、抽出部１８３１ｅが抽出したディテール成分を記憶部１８７ｅが記憶する構成であってもよい。当該構成により、画像処理部１８０ｅは、撮像信号に基づき生成した１つ目の輝度信号からディテール成分を抽出し、抽出したディテール成分を記憶部１８７ｅに記憶することできる。これにより、画像処理部１８０ｅは、撮像信号から生成した輝度信号に対して、記憶部１８７ｄに記憶されたディテール成分を反映し、補正輝度信号を生成することができる。

＜＜８．変形例＞＞
以上、本開示の実施形態について説明した。続いて、本開示の一実施形態に係る変形例について説明する。なお、以下に説明する変形例は、本開示の実施形態で説明した構成に代えて適用されてもよいし、本実施形態で説明した構成に対して追加的に適用されてもよい。

上述の第２～第５の実施形態では、第１の信号処理部１８２における撮像信号に対するホワイトバランス調整により、飽和信号が生成される例について説明した。しかしながら、上述の第２～第５の実施形態では、第１の信号処理部１８２における撮像信号に対するホワイトバランス調整により、未飽和信号が生成されてもよい。第１の信号処理部１８２にて未飽和信号が生成された場合、当該未飽和信号が入力される検出部１８６は、サチュレーションが生じた領域を検出することができない。この場合、画像処理部１８０は、補正輝度信号を生成する処理を行わなくてよい。そして、画像処理部１８０は、未飽和信号が変換された輝度信号に基づき、画像を生成してよい。

これにより、画像処理部１８０は、不要な処理を省略することができ、画像処理の効率を向上することができる。また、画像処理部１８０は、不要な処理を省略することにより、消費電力を削減することもできる。

＜＜９．ハードウェア構成例＞＞
最後に、図１６を参照しながら、本開示の一実施形態に係る画像処理装置のハードウェア構成例について説明する。図１６は、本開示の一実施形態に係る画像処理装置のハードウェア構成例を示すブロック図である。なお、図１６に示す画像処理装置９００は、例えば、図１、図３、及び図４に示した医療用観察装置１００を実現し得る。本実施形態に係る画像処理装置９００による画像処理は、ソフトウェアと、以下に説明するハードウェアとの協働により実現される。

図１６に示すように、画像処理装置９００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９０１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）９０２、及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９０３を備える。また、画像処理装置９００は、ホストバス９０４ａ、ブリッジ９０４、外部バス９０４ｂ、インタフェース９０５、入力装置９０６、出力装置９０７、ストレージ装置９０８、ドライブ９０９、接続ポート９１０、及び通信装置９１１を備える。なお、ここで示すハードウェア構成は一例であり、構成要素の一部が省略されてもよい。また、ハードウェア構成は、ここで示される構成要素以外の構成要素をさらに含んでもよい。

ＣＰＵ９０１は、例えば、演算処理装置又は制御装置として機能し、ＲＯＭ９０２、ＲＡＭ９０３、又はストレージ装置９０８に記録された各種プログラムに基づいて各構成要素の動作全般又はその一部を制御する。ＲＯＭ９０２は、ＣＰＵ９０１に読み込まれるプログラムや演算に用いるデータ等を格納する手段である。ＲＡＭ９０３には、例えば、ＣＰＵ９０１に読み込まれるプログラムや、そのプログラムを実行する際に適宜変化する各種パラメータ等が一時的又は永続的に格納される。これらはＣＰＵバスなどから構成されるホストバス９０４ａにより相互に接続されている。ＣＰＵ９０１、ＲＯＭ９０２およびＲＡＭ９０３は、例えば、ソフトウェアとの協働により、図１を参照して説明した医療用観察装置１００の制御装置（図示せず）、図３を参照して説明した制御ユニット１４４、及び図４を参照して説明した制御部１６０の機能を実現し得る。

ＣＰＵ９０１、ＲＯＭ９０２、及びＲＡＭ９０３は、例えば、高速なデータ伝送が可能なホストバス９０４ａを介して相互に接続される。一方、ホストバス９０４ａは、例えば、ブリッジ９０４を介して比較的データ伝送速度が低速な外部バス９０４ｂに接続される。また、外部バス９０４ｂは、インタフェース９０５を介して種々の構成要素と接続される。

入力装置９０６は、例えば、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチ及びレバー等、ユーザによって情報が入力される装置によって実現される。また、入力装置９０６は、例えば、赤外線やその他の電波を利用したリモートコントロール装置であってもよいし、画像処理装置９００の操作に対応した携帯電話やＰＤＡ等の外部接続機器であってもよい。さらに、入力装置９０６は、例えば、上記の入力手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などを含んでいてもよい。画像処理装置９００のユーザは、この入力装置９０６を操作することにより、画像処理装置９００に対して各種のデータを入力したり処理動作を指示したりすることができる。

他にも、入力装置９０６は、ユーザに関する情報を検知する装置により形成され得る。例えば、入力装置９０６は、画像センサ（例えば、カメラ）、深度センサ（例えば、ステレオカメラ）、加速度センサ、ジャイロセンサ、地磁気センサ、光センサ、音センサ、測距センサ（例えば、ＴｏＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）センサ）、力センサ等の各種のセンサを含み得る。また、入力装置９０６は、画像処理装置９００の姿勢、移動速度等、画像処理装置９００自身の状態に関する情報や、画像処理装置９００の周辺の明るさや騒音等、画像処理装置９００の周辺環境に関する情報を取得してもよい。また、入力装置９０６は、ＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）衛星からのＧＮＳＳ信号（例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星からのＧＰＳ信号）を受信して装置の緯度、経度及び高度を含む位置情報を測定するＧＮＳＳモジュールを含んでもよい。また、位置情報に関しては、入力装置９０６は、Ｗｉ－Ｆｉ（登録商標）、携帯電話・ＰＨＳ・スマートフォン等との送受信、または近距離通信等により位置を検知するものであってもよい。入力装置９０６は、例えば、図１を参照して説明した撮像デバイス１０６、図３を参照して説明した挿入部材１３４、光源ユニット１３６、及びカメラヘッド１４０からなる撮像デバイス、並びに図４を参照して説明した撮像部１５０の機能を実現し得る。

出力装置９０７は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で形成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置、レーザープロジェクタ、ＬＥＤプロジェクタ及びランプ等の表示装置や、スピーカ及びヘッドフォン等の音声出力装置や、プリンタ装置等がある。出力装置９０７は、例えば、画像処理装置９００が行った各種処理により得られた結果を出力する。具体的には、表示装置は、画像処理装置９００が行った各種処理により得られた結果を、テキスト、イメージ、表、グラフ等、様々な形式で視覚的に表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して聴覚的に出力する。

ストレージ装置９０８は、画像処理装置９００の記憶部の一例として形成されたデータ格納用の装置である。ストレージ装置９０８は、例えば、ＨＤＤ等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等により実現される。ストレージ装置９０８は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。このストレージ装置９０８は、ＣＰＵ９０１が実行するプログラムや各種データ及び外部から取得した各種のデータ等を格納する。

ドライブ９０９は、記憶媒体用リーダライタであり、画像処理装置９００に内蔵、あるいは外付けされる。ドライブ９０９は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体に記録されている情報を読み出して、ＲＡＭ９０３に出力する。また、ドライブ９０９は、リムーバブル記憶媒体に情報を書き込むこともできる。

接続ポート９１０は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）、ＲＳ－２３２Ｃポート、又は光オーディオ端子等のような外部接続機器を接続するためのポートである。

通信装置９１１は、例えば、ネットワーク９２０に接続するための通信デバイス等で形成された通信インタフェースである。通信装置９１１は、例えば、有線若しくは無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード等である。また、通信装置９１１は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ又は各種通信用のモデム等であってもよい。この通信装置９１１は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。通信装置９１１は、例えば、図４を参照して説明した通信部１９５の機能を実現し得る。

なお、ネットワーク９２０は、ネットワーク９２０に接続されている装置から送信される情報の有線、または無線の伝送路である。例えば、ネットワーク９２０は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを含んでもよい。また、ネットワーク９２０は、ＩＰ－ＶＰＮ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ－Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。

以上、本実施形態に係る画像処理装置９００の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて実現されていてもよいし、各構成要素の機能に特化したハードウェアにより実現されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。

＜＜１０．まとめ＞＞
以上説明したように、本開示の実施形態に係る画像処理装置は、複数の波長帯域に対応する撮像信号に対してホワイトバランスの調整を行う。次いで、画像処理装置は、ホワイトバランスの調整によりサチュレーションが生じた領域を含む飽和信号から、輝度信号を生成する。また、画像処理装置は、撮像信号に基づきディテール成分を抽出する。そして、画像処理装置は、ディテール成分を輝度信号に反映し、補正輝度信号を生成する。

上述のように、画像処理装置は、サチュレーションが生じていない撮像信号から抽出したディテール成分を、サチュレーションが生じた領域を含む輝度信号に反映することで、サチュレーションが生じた領域の失われたディテールを復元することができる。

よって、サチュレーションが生じた領域のディテールを復元することが可能な、新規かつ改良された画像処理装置及び観察システムを提供することが可能である。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、本明細書において説明した各装置は、単独の装置として実現されてもよく、一部または全部が別々の装置として実現されても良い。例えば、図４に示した医療用観察装置１００が備える撮像部１５０と制御部１６０の少なくともいずれか一方が、単独の装置として実現されてもよい。例えば、撮像部１５０は、センサ装置等の独立した装置として実現され、ネットワーク等を介して医療用観察装置１００と接続されてもよい。また、制御部１６０は、サーバ装置等の独立した装置として実現され、ネットワーク等を介して医療用観察装置１００と接続されてもよい。

また、本明細書において説明した各装置による一連の処理は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。ソフトウェアを構成するプログラムは、例えば、各装置の内部又は外部に設けられる記録媒体（非一時的な媒体：ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ ｍｅｄｉａ）に予め格納される。そして、各プログラムは、例えば、コンピュータによる実行時にＲＡＭに読み込まれ、ＣＰＵなどのプロセッサにより実行される。

また、本明細書においてフローチャートを用いて説明した処理は、必ずしも図示された順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、
前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、
前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、
を備える、画像処理装置。
（２）
前記サチュレーションが生じた領域を検出する検出部をさらに備え、
前記補正部は、前記検出部が検出した前記サチュレーションが生じた領域と対応する前記ディテール成分のみを前記輝度信号に反映し、前記補正輝度信号を生成する、前記（１）に記載の画像処理装置。
（３）
前記検出部は、前記第２の信号と対応する前記複数の波長帯域に対する閾値処理に基づき、前記サチュレーションが生じた領域を検出する、前記（２）に記載の画像処理装置。
（４）
前記検出部は、前記複数の波長帯域の各々と対応する画素値の内、最も高い画素値と次に高い画素値との差が所定の閾値以上である場合、前記複数の波長帯域と対応する領域を前記サチュレーションが生じた領域として検出する、前記（３）に記載の画像処理装置。
（５）
前記検出部は、赤色の波長帯域、緑色の波長帯域、または青色の波長帯域の内の少なくとも１つを、サチュレーションが生じた波長帯域として検出する、前記（２）～（４）のいずれか一項に記載の画像処理装置。
（６）
前記検出部は、前記赤色の波長帯域を前記サチュレーションが生じた波長帯域として検出する、前記（５）に記載の画像処理装置。
（７）
前記補正部は、前記ディテール成分を前記輝度信号に対して所定の割合で加算することで、前記補正輝度信号を生成する、前記（１）～（６）のいずれか一項に記載の画像処理装置。
（８）
前記補正部は、前記補正輝度信号の信号レベルが小さくなるように調整する、前記（７）に記載の画像処理装置。
（９）
前記第２の信号処理部は、ハイパスフィルタにより前記第１の信号から前記ディテール成分を抽出する、前記（１）～（８）のいずれか一項に記載の画像処理装置。
（１０）
前記第２の信号処理部は、前記第１の信号に対して、前記第１の信号処理部よりも小さいゲインによる前記ホワイトバランスの調整を行い、前記ホワイトバランスの調整により前記サチュレーションが生じていない領域のみを含む第３の信号に基づき、前記ディテール成分を抽出する、前記（１）～（９）のいずれか一項に記載の画像処理装置。
（１１）
色差信号と前記補正輝度信号に基づき画像を生成する画像生成部をさらに備え、
前記第１の信号処理部は、前記第２の信号から前記色差信号をさらに生成する、前記（１）～（１０）のいずれか一項に記載の画像処理装置。
（１２）
撮像対象を撮像する撮像デバイスと、
複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、を備える画像処理装置と、
を備える、観察システム。
（１３）
複数のリンクが関節部によって互いに連結されたアームをさらに備え、
前記撮像デバイスは、前記アームにより支持される、前記（１２）に記載の観察システム。
（１４）
前記撮像デバイスは、患者の体内に挿入され、前記体内を前記撮像対象として撮像する、前記（１２）に記載の観察システム。

１００ 医療用観察装置
１５０ 撮像部
１６０ 制御部
１７０ 撮像制御部
１８０ 画像処理部
１８１ クランプ処理部
１８２ 第１の信号処理部
１８３ 第２の信号処理部
１８４ 補正部
１８５ 画像生成部
１８６ 検出部
１８７ 記憶部
１９０ 表示制御部
１９５ 通信部
２００ 表示装置
１０００ 医療用観察システム

Claims (15)

1. 複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、
   前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、
   前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、
   前記サチュレーションが生じた領域を検出する検出部と、
   を備え、
   前記補正部は、前記検出部が検出した前記サチュレーションが生じた領域と対応する前記ディテール成分のみを前記輝度信号に反映し、前記補正輝度信号を生成する、画像処理装置。
2. 前記検出部は、前記第２の信号と対応する前記複数の波長帯域に対する閾値処理に基づき、前記サチュレーションが生じた領域を検出する、請求項１に記載の画像処理装置。
3. 前記検出部は、前記複数の波長帯域の各々と対応する画素値の内、最も高い画素値と次に高い画素値との差が所定の閾値以上である場合、前記複数の波長帯域と対応する領域を前記サチュレーションが生じた領域として検出する、請求項２に記載の画像処理装置。
4. 前記検出部は、赤色の波長帯域、緑色の波長帯域、または青色の波長帯域の内の少なくとも１つを、サチュレーションが生じた波長帯域として検出する、請求項１～３のいずれか一項に記載の画像処理装置。
5. 前記検出部は、前記赤色の波長帯域を前記サチュレーションが生じた波長帯域として検出する、請求項４に記載の画像処理装置。
6. 前記補正部は、前記ディテール成分を前記輝度信号に対して所定の割合で加算することで、前記補正輝度信号を生成する、請求項１～５のいずれか一項に記載の画像処理装置。
7. 前記補正部は、前記補正輝度信号の信号レベルが小さくなるように調整する、請求項６に記載の画像処理装置。
8. 前記第２の信号処理部は、ハイパスフィルタにより前記第１の信号から前記ディテール成分を抽出する、請求項１～７のいずれか一項に記載の画像処理装置。
9. 複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、
   前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、
   前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、
   を備え、
   前記第２の信号処理部は、前記第１の信号に対して、前記第１の信号処理部よりも小さいゲインによる前記ホワイトバランスの調整を行い、前記ホワイトバランスの調整により前記サチュレーションが生じていない領域のみを含む第３の信号に基づき、前記ディテール成分を抽出する、画像処理装置。
10. 複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、
    前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、
    前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、
    色差信号と前記補正輝度信号に基づき画像を生成する画像生成部と、
    を備え、
    前記第１の信号処理部は、前記第２の信号から前記色差信号をさらに生成する、画像処理装置。
11. 撮像対象を撮像する撮像デバイスと、
    複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、前記サチュレーションが生じた領域を検出する検出部と、を備える画像処理装置と、
    を備え、
    前記補正部は、前記検出部が検出した前記サチュレーションが生じた領域と対応する前記ディテール成分のみを前記輝度信号に反映し、前記補正輝度信号を生成する、観察システム。
12. 複数のリンクが関節部によって互いに連結されたアームをさらに備え、
    前記撮像デバイスは、前記アームにより支持される、請求項１１に記載の観察システム。
13. 前記撮像デバイスは、患者の体内に挿入され、前記体内を前記撮像対象として撮像する、請求項１１に記載の観察システム。
14. 撮像対象を撮像する撮像デバイスと、
    複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、を備える画像処理装置と、
    を備え、
    前記第２の信号処理部は、前記第１の信号に対して、前記第１の信号処理部よりも小さいゲインによる前記ホワイトバランスの調整を行い、前記ホワイトバランスの調整により前記サチュレーションが生じていない領域のみを含む第３の信号に基づき、前記ディテール成分を抽出する、観察システム。
15. 撮像対象を撮像する撮像デバイスと、
    複数の波長帯域に対応する第１の信号に対してホワイトバランスの調整を行い、前記ホワイトバランスの調整によりサチュレーションが生じた領域を含む第２の信号から、輝度信号を生成する第１の信号処理部と、前記第１の信号に基づきディテール成分を抽出する第２の信号処理部と、前記ディテール成分を前記輝度信号に反映し、補正輝度信号を生成する補正部と、色差信号と前記補正輝度信号に基づき画像を生成する画像生成部と、を備える画像処理装置と、
    を備え、
    前記第１の信号処理部は、前記第２の信号から前記色差信号をさらに生成する、観察システム。

Images