JP2018151679A - 画像信号処理方法、画像信号処理装置および画像信号処理プログラム - Google Patents

画像信号処理方法、画像信号処理装置および画像信号処理プログラム Download PDF

Info

Publication number
JP2018151679A
JP2018151679A JP2015153490A JP2015153490A JP2018151679A JP 2018151679 A JP2018151679 A JP 2018151679A JP 2015153490 A JP2015153490 A JP 2015153490A JP 2015153490 A JP2015153490 A JP 2015153490A JP 2018151679 A JP2018151679 A JP 2018151679A
Authority
JP
Japan
Prior art keywords
signal
signal processing
component
processing
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015153490A
Other languages
English (en)
Inventor
朋也 佐藤
Tomoya Satou
朋也 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2015153490A priority Critical patent/JP2018151679A/ja
Priority to PCT/JP2016/066799 priority patent/WO2017022323A1/ja
Publication of JP2018151679A publication Critical patent/JP2018151679A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing

Abstract

【課題】複数の色成分を含む画像信号の信号処理にかかる演算量を削減することができる画像信号処理方法、画像信号処理装置および画像信号処理プログラムを提供すること。【解決手段】本発明にかかる画像処理方法は、互いに異なる複数の色情報を有する成分信号を含む画像信号から、所定の色情報を有する成分信号を抽出する抽出ステップと、抽出ステップで抽出された成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理ステップと、抽出ステップで抽出された前記成分信号と、第1信号処理ステップで信号処理が施された成分信号とをもとに、第1信号処理ステップによる処理前後の変化量を算出する算出ステップと、算出ステップで算出された変化量に基づき、抽出ステップにおける抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理ステップと、を含む。【選択図】図2

Description

本発明は、入力画像に対して明るさ調整処理などの信号処理を行なう画像信号処理方法、画像信号処理装置および画像信号処理プログラムに関する。
従来、入力画像に対してγ補正処理やエッジ強調処理などの信号処理を施すことにより、入力画像の視認性を向上する技術が知られている(例えば、特許文献1を参照)。特許文献1では、入力画像を構成する赤(R)、緑(G)および青(B)の各色成分の画像信号が入力され、色成分ごとに輪郭強調処理を施した後、この輪郭強調処理が施された各色成分の画像信号をもとにカラー表示する。
特開平5−344528号公報
しかしながら、従来の信号処理では、入力される複数の色成分の画像信号すべてに対して各々輪郭強調処理などを施しているため、演算量が多かった。
本発明は、上記に鑑みてなされたものであって、複数の色成分を含む画像信号の信号処理にかかる演算量を削減することができる画像信号処理方法、画像信号処理装置および画像信号処理プログラムを提供することを目的とする。
上述した課題を解決し、目的を達成するために、本発明にかかる画像信号処理方法は、互いに異なる複数の色情報を有する成分信号を含む画像信号から、所定の色情報を有する成分信号を抽出する抽出ステップと、前記抽出ステップで抽出された成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理ステップと、前記抽出ステップで抽出された成分信号と、前記第1信号処理ステップで信号処理が施された成分信号とをもとに、前記第1信号処理ステップによる処理前後の変化量を算出する算出ステップと、前記算出ステップで算出された変化量に基づき、前記抽出ステップにおける抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理ステップと、を含むことを特徴とする。
また、本発明にかかる画像信号処理方法は、上記発明において、前記画像信号は、複数の画素の光電変換処理によって生成された信号であって、赤、緑および青の色成分の輝度値を前記複数の色情報が画素位置ごとに付与された信号であり、前記抽出ステップは、赤、緑および青の色成分の成分信号のうち、いずれか一つの色情報を有する成分信号を前記画素位置ごとに抽出することを特徴とする。
また、本発明にかかる画像信号処理方法は、上記発明において、前記抽出ステップは、前記赤、緑および青の成分信号のうち最も大きい輝度値を有する色成分の成分信号を前記画素位置ごとに抽出することを特徴とする。
また、本発明にかかる画像信号処理方法は、上記発明において、前記画像信号は、複数の画素の光電変換処理によって生成された信号であって、各画素位置に応じて前記複数の色情報が付与された信号であり、前記算出ステップは、画素位置ごとに前記変化量を算出することを特徴とする。
また、本発明にかかる画像信号処理装置は、互いに異なる複数の色情報を有する成分信号を含む画像信号を取得する画像信号取得部と、前記画像信号取得部が取得した前記画像信号から、所定の色情報を有する成分信号を抽出する抽出部と、前記抽出部が抽出した成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理部と、前記抽出部が抽出した成分信号と、前記第1信号処理部によって信号処理が施された成分信号とをもとに、前記第1信号処理部による処理前後の変化量を算出する算出部と、前記算出部が算出した変化量に基づき、前記抽出部における抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理部と、を備えたことを特徴とする。
また、本発明にかかる画像信号処理プログラムは、互いに異なる複数の色情報を有する成分信号を含む画像信号から、所定の色情報を有する成分信号を抽出する抽出手順と、前記抽出手順で抽出された成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理手順と、前記抽出手順で抽出された成分信号と、前記第1信号処理手順で信号処理が施された成分信号とをもとに、前記第1信号処理手順による処理前後の変化量を算出する算出手順と、前記算出手順で算出された変化量に基づき、前記抽出手順における抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理手順と、をコンピュータに実行させることを特徴とする。
本発明によれば、複数の色成分を含む画像信号の信号処理にかかる演算量を削減することができるという効果を奏する。
図1は、本発明の一実施の形態にかかる内視鏡システムの概略構成を示す図である。 図2は、本発明の一実施の形態にかかる内視鏡システムの概略構成を示すブロック図である。 図3は、本発明の一実施の形態にかかる処理装置が行う画像信号処理方法を示すフローチャートである。
以下、本発明を実施するための形態(以下、「実施の形態」という)を説明する。実施の形態では、本発明にかかる画像信号処理装置を含むシステムの一例として、患者等の被検体内の画像を撮像して表示する医療用の内視鏡システムについて説明する。また、この実施の形態により、この発明が限定されるものではない。さらに、図面の記載において、同一部分には同一の符号を付して説明する。
図1は、本発明の一実施の形態にかかる内視鏡システムの概略構成を示す図である。図2は、本実施の形態にかかる内視鏡システムの概略構成を示すブロック図である。なお、図2では、実線の矢印が画像にかかる電気信号の伝送を示し、破線の矢印が制御にかかる電気信号の伝送を示している。
図1および図2に示す内視鏡システム1は、被検体内に先端部を挿入することによって被検体の体内画像を撮像する内視鏡2と、内視鏡2の先端から出射する照明光を発生する光源部3aを有し、内視鏡2が撮像した撮像信号に所定の信号処理を施すとともに、内視鏡システム1全体の動作を統括的に制御する処理装置3と、処理装置3の信号処理により生成された体内画像を表示する表示装置4と、を備える。
内視鏡2は、可撓性を有する細長形状をなす挿入部21と、挿入部21の基端側に接続され、各種の操作信号の入力を受け付ける操作部22と、操作部22から挿入部21が延びる方向と異なる方向に延び、処理装置3(光源部3aを含む)に接続する各種ケーブルを内蔵するユニバーサルコード23と、を備える。
挿入部21は、光を受光して光電変換を行うことにより信号を生成する画素が2次元状に配列された撮像素子244を内蔵した先端部24と、複数の湾曲駒によって構成された湾曲自在な湾曲部25と、湾曲部25の基端側に接続され、可撓性を有する長尺状の可撓管部26と、を有する。挿入部21は、被検体の体腔内に挿入され、外光の届かない位置にある生体組織などの被写体を撮像素子244によって撮像する。
先端部24は、グラスファイバ等を用いて構成されて光源部3aが発光した光の導光路をなすライトガイド241と、ライトガイド241の先端に設けられた照明レンズ242と、集光用の光学系243と、光学系243の結像位置に設けられ、光学系243が集光した光を受光して電気信号に光電変換して所定の信号処理を施す撮像素子244と、を有する。
光学系243は、一または複数のレンズを用いて構成され、画角を変化させる光学ズーム機能および焦点を変化させるフォーカス機能を有する。
撮像素子244は、光学系243からの光を光電変換して電気信号(撮像信号)を生成する。具体的には、撮像素子244は、光量に応じた電荷を蓄積するフォトダイオードや、フォトダイオードから転送される電荷を電圧レベルに変換するコンデンサなどをそれぞれ有する複数の画素がマトリックス状に配列され、各画素が光学系243からの光を光電変換して電気信号を生成する受光部244aと、受光部244aの複数の画素のうち読み出し対象として任意に設定された画素が生成した電気信号を順次読み出して、撮像信号として出力する読み出し部244bと、を有する。受光部244aには、カラーフィルタが設けられ、各画素が、赤色(R)、緑色(G)および青色(B)の各色成分の波長帯域のうちのいずれかの波長帯域の光を受光する。撮像素子244は、処理装置3から受信した駆動信号に従って先端部24の各種動作を制御する。撮像素子244は、例えばCCD(Charge Coupled Device)イメージセンサや、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサを用いて実現される。
操作部22は、湾曲部25を上下方向および左右方向に湾曲させる湾曲ノブ221と、被検体の体腔内に生体鉗子、電気メスおよび検査プローブ等の処置具を挿入する処置具挿入部222と、処理装置3に加えて、送気手段、送水手段、画面表示制御等の周辺機器の操作指示信号を入力する操作入力部である複数のスイッチ223と、を有する。処置具挿入部222から挿入される処置具は、先端部24の処置具チャンネル(図示せず)を経由して開口部(図示せず)から表出する。
ユニバーサルコード23は、ライトガイド241と、一または複数の信号線をまとめた集合ケーブル245と、を少なくとも内蔵している。集合ケーブル245は、撮像信号を伝送するための信号線や、撮像素子244を駆動するための駆動信号を伝送するための信号線、内視鏡2(撮像素子244)に関する固有情報などを含む情報を送受信するための信号線を含む。なお、本実施の形態では、信号線を用いて電気信号を伝送するものとして説明するが、光信号を伝送するものであってもよいし、無線通信により内視鏡2と処理装置3との間で信号を伝送するものであってもよい。
次に、処理装置3の構成について説明する。処理装置3は、撮像信号取得部31と、抽出部32と、第1信号処理部33と、算出部34と、ゲインマップ生成部35と、第2信号処理部36と、表示画像生成部37と、入力部38と、記憶部39と、制御部40と、を備える。なお、本発明にかかる画像信号処理装置は、少なくとも抽出部32と、第1信号処理部33と、算出部34と、ゲインマップ生成部35と、第2信号処理部36とを用いて構成される。
撮像信号取得部31は、内視鏡2から、撮像素子244が出力した撮像信号を受信する。撮像信号取得部31は、取得した撮像信号に対してノイズ除去やA/D変換、同時化処理(例えば、カラーフィルタ等を用いて色成分ごとの撮像信号が得られた場合に行う)などの信号処理を施す。撮像信号取得部31は、上述した信号処理によりRGBの色成分が付与された成分信号(補間処理により色成分ごとの一枚の画像が生成された成分信号)を含む入力画像信号SCを生成する。撮像信号取得部31は、生成した入力画像信号SCを抽出部32に入力する。
抽出部32は、入力画像信号SCを撮像信号取得部31から取得し、各画素位置において、RGBの色成分が付与された成分信号のうちの最も大きい輝度値を有する色成分の成分信号をそれぞれ抽出する。抽出部32は、各画素位置において色成分間で最も大きい輝度値を含む成分信号を抽出し、該抽出した成分信号SEを第1信号処理部33および算出部34に入力するとともに、抽出対象外の成分信号SE’(各画素位置のRGB成分のうち、抽出部32が抽出した色成分を除く色成分の成分信号)を第2信号処理部36に入力する。
第1信号処理部33は、抽出部32によって抽出された成分信号SEに対して明るさ調整処理やエンハンス処理を施す。具体的には、第1信号処理部33は、抽出部32により抽出された成分信号SEに対して、γ補正処理やエッジ強調処理を施す。第1信号処理部33は、信号処理後の第1処理信号ST1を算出部34および表示画像生成部37に入力する。なお、第1信号処理部33は、抽出された成分信号SEが有する輝度値に対して処理を施すものであれば、如何なる処理であってもよい。
算出部34は、抽出部32が入力した第1信号処理部33による信号処理前の成分信号SEと、第1信号処理部33による信号処理後の第1処理信号ST1との除を変化量として算出する。具体的には、算出部34は、第1信号処理部33による信号処理前の輝度値に対する信号処理後の輝度値の比(ゲイン比)を画素位置ごとに算出する。算出部34は、各画素位置の比を含む変化量信号Svをゲインマップ生成部35に入力する。
ゲインマップ生成部35は、算出部34によって算出された各画素位置の比(変化量信号Sv)と、該比の画素位置とをもとに、ゲインマップを生成する。これにより、各画素位置に応じた位置情報が付与されたゲイン比を有するゲインマップが生成される。ゲインマップ生成部35は、生成したゲインマップを含むゲインマップ信号SGを第2信号処理部36に入力する。
第2信号処理部36は、ゲインマップ生成部35が生成したゲインマップを参照して、抽出部32が入力した抽出対象外の成分信号SE’の輝度値に対してゲイン調整処理を施す。具体的には、第2信号処理部36は、位置情報に対応するゲイン比を抽出対象外の成分信号SE’に乗じてゲイン調整を行って、第2処理信号ST2を生成する。第2信号処理部36は、ゲイン調整処理後の第2処理信号ST2を表示画像生成部37に入力する。
表示画像生成部37は、第1信号処理部33による信号処理後の第1処理信号ST1と、第2信号処理部36によるゲイン調整処理後の第2処理信号ST2とを合成した後、表示装置4で表示可能な態様の信号となるような信号処理を施して、表示用のカラー画像信号STを生成する。表示画像生成部37は、生成したカラー画像信号STを表示装置4に出力する。
入力部38は、キーボード、マウス、スイッチ、タッチパネルを用いて実現され、内視鏡システム1の動作を指示する動作指示信号等の各種信号の入力を受け付ける。なお、入力部38は、操作部22に設けられたスイッチや、外部のタブレット型のコンピュータなどの可搬型端末を含んでいてもよい。
記憶部39は、内視鏡システム1を動作させるための各種プログラム、および内視鏡システム1の動作に必要な各種パラメータ等を含むデータを記憶する。また、記憶部39は、処理装置3の識別情報を記憶する。ここで、識別情報には、処理装置3の固有情報(ID)、年式およびスペック情報等が含まれる。
また、記憶部39は、処理装置3の画像信号処理方法を実行するための画像信号処理プログラムを含む各種プログラムを記憶する。各種プログラムは、ハードディスク、フラッシュメモリ、CD−ROM、DVD−ROM、フレキシブルディスク等のコンピュータ読み取り可能な記録媒体に記録して広く流通させることも可能である。なお、上述した各種プログラムは、通信ネットワークを介してダウンロードすることによって取得することも可能である。ここでいう通信ネットワークは、例えば既存の公衆回線網、LAN(Local Area Network)、WAN(Wide Area Network)などによって実現されるものであり、有線、無線を問わない。
以上の構成を有する記憶部39は、各種プログラム等が予めインストールされたROM(Read Only Memory)、および各処理の演算パラメータやデータ等を記憶するRAM(Random Access Memory)やハードディスク等を用いて実現される。
制御部40は、CPU(Central Processing Unit)等を用いて構成され、撮像素子244および光源部3aを含む各構成部の駆動制御、および各構成部に対する情報の入出力制御などを行う。制御部40は、記憶部39に記憶されている撮像制御のための制御情報(例えば、読み出しタイミングなど)を参照し、制御情報に応じた撮像素子244の駆動信号を集合ケーブル245に含まれる所定の信号線を介して撮像素子244へ送信する。
また、制御部40は、取得した撮像信号に基づく画像(例えば、カラー画像)をもとに明るさを検出して露光量を設定し、該設定した露光量に応じた発光量(強度および時間を含む)、またはシャッタ開放時間を指示する調光信号を生成する。
続いて、光源部3aの構成について説明する。光源部3aは、照明部301と、照明制御部302と、を備える。照明部301は、照明制御部302の制御のもと、被写体(被検体)に対して、異なる露光量の照明光を順次切り替えて出射する。照明部301は、光源301aと、光源ドライバ301bと、を有する。
光源301aは、白色光を出射するLED光源や、一または複数のレンズ等を用いて構成され、LED光源の駆動により光(照明光)を出射する。光源301aが発生した照明光は、ライトガイド241を経由して先端部24の先端から被写体に向けて出射される。なお、光源301aは、赤色LED光源、緑色LED光源および青色LED光源を用いて構成し、照明光を出射するものであってもよい。また、光源301aは、レーザー光源や、キセノンランプ、ハロゲンランプなどのランプを用いるものであってもよい。
光源ドライバ301bは、照明制御部302の制御のもと、光源301aに対して電流を供給することにより、光源301aに照明光を出射させる。
照明制御部302は、制御部40からの制御信号(調光信号)に基づいて、光源301aに供給する電力量を制御するとともに、光源301aの駆動タイミングを制御する。
表示装置4は、映像ケーブルを介して処理装置3(表示画像生成部37)が生成したカラー画像信号STに対応する表示画像を表示する。表示装置4は、液晶または有機EL(Electro Luminescence)等のモニタを用いて構成される。
以上説明した内視鏡システム1では、処理装置3に入力された撮像信号をもとに、抽出部32が、撮像信号に含まれる複数の色成分の成分信号のうち、画素位置ごとに最大の輝度値を有する色成分の成分信号SEを抽出し、第1信号処理部33が、抽出された成分信号SEに対して明るさ調整処理やエンハンス処理などを施し、ゲインマップ生成部35が、算出部34が算出したゲイン比に基づいてゲインマップを生成し、第2信号処理部36が、抽出対象外の成分信号SE’に対して、ゲインマップに基づいてそれぞれゲイン調整し、表示画像生成部37が、信号処理後のRGB成分の画像信号(第1処理信号ST1および第2処理信号ST2)に基づいて表示用の信号処理を施したカラー画像信号STを生成し、表示装置4が、カラー画像信号STに基づく表示画像を表示する。
図3は、本発明の一実施の形態にかかる処理装置が行う画像信号処理方法を示すフローチャートである。以下、制御部40の制御のもと、各部が動作するものとして説明する。撮像信号取得部31は、内視鏡2から撮像信号を取得すると(ステップS101:Yes)、信号処理により赤色(R)、緑色(G)および青色(B)の色成分が付与された成分信号を含む入力画像信号SCを生成し、抽出部32に入力する。一方、撮像信号取得部31は、内視鏡2から撮像信号が入力されていない場合(ステップS101:No)、撮像信号の入力確認を繰り返す。
抽出部32は、入力画像信号SCを撮像信号取得部31から取得して、RGBの色成分が付与された画像信号のうち、画素位置ごとに最大の輝度値を有する色成分の成分信号を抽出する(ステップS102:抽出ステップ)。抽出部32は、上述した抽出処理によって抽出した成分信号SEを第1信号処理部33および算出部34に入力する。
第1信号処理部33は、入力された成分信号SEに対して明るさ調整処理やエンハンス処理を施す(ステップS103:第1信号処理ステップ)。具体的には、第1信号処理部33は、成分信号SEに対してγ補正処理およびエッジ強調処理を施して、第1処理信号ST1を生成する。第1信号処理部33は、信号処理後の第1処理信号ST1を算出部34に入力する。
算出部34は、第1信号処理部33による信号処理前の成分信号SEの輝度値に対する信号処理後の成分信号(第1処理信号ST1を)の輝度値の比(ゲイン比)を変化量として画素位置ごとに算出する(ステップS104:算出ステップ)。算出部34は、各画素位置のゲイン比を含む変化量信号Svをゲインマップ生成部35に入力する。
ゲインマップ生成部35は、変化量信号Svに基づく各画素位置のゲイン比と、該ゲイン比に付与された位置情報とをもとに、ゲインマップを生成する(ステップS105)。これにより、各画素位置に応じた位置情報が付与されたゲイン比を有するゲインマップが生成される。ゲインマップ生成部35は、生成したゲインマップを含むゲインマップ信号SGを第2信号処理部36に入力する。
第2信号処理部36は、抽出部32が入力した成分信号SE’の輝度値に対し、ゲインマップ生成部35が生成したゲインマップを参照して、画素位置ごとにゲイン比を乗じてゲイン調整処理を施すことにより第2処理信号ST2を生成する(ステップS106:第2信号処理ステップ)。第2信号処理部36は、ゲイン調整処理後の第2処理信号ST2を表示画像生成部37に入力する。
表示画像生成部37は、第1信号処理部33による信号処理後の第1処理信号ST1と、第2信号処理部36によるゲイン調整処理後の第2処理信号ST2とを合成後、表示装置4で表示可能な態様の信号となるような信号処理を施して、表示用のカラー画像信号STを生成する(ステップS107)。表示画像生成部37は、生成したカラー画像信号STを表示装置4に出力する。表示装置4は、入力されたカラー画像信号STに応じた画像を表示する。
上述した本発明の一実施の形態によれば、抽出部32が、入力された入力画像信号SCに含まれる複数の色成分の成分信号のうち画素位置ごとに最大の輝度値を有する色成分の成分信号SEを抽出し、第1信号処理部33が、抽出された成分信号SEに対して明るさ調整処理やエンハンス処理を施し、ゲインマップ生成部35が、算出部34が算出したゲイン比に基づいてゲインマップを生成し、第2信号処理部36が、抽出対象外の成分信号SE’(各画素位置のRGB成分のうち、抽出部32が抽出した色成分を除く色成分の成分信号)に対して、ゲインマップに基づいてそれぞれゲイン調整することで、入力画像信号SCが複数の色成分の成分信号を含んでいる場合に、画素位置ごとに抽出された一つの色成分の成分信号をもとにゲイン比の算出を行って、他の色成分に対してもこのゲイン比でゲイン調整を行うようにした。これにより、入力画像信号SCが複数の色成分を含んでいる場合でも、入力画像信号SCの信号処理にかかる演算量を削減することができる。また、入力画像信号SCの信号処理にかかる演算量を削減することで、入力画像信号SCの信号処理にかかる回路規模を小さくすることができる。
また、上述した本実施の形態によれば、各色成分の信号処理において画素位置ごとに同一のゲイン比を用いるため、各色成分間の相対的な強度比を信号処理前後で保持することができ、演算量を削減しても、生成されるカラー画像の色味が変わることはない。
また、上述した実施の形態では、抽出部32が、各画素位置において最も大きい輝度値を有する色成分の成分信号を抽出するようにしたので、すべての画素位置において、ゲイン調整後の輝度値が上限値を超えることにより生じるクリップを抑制することができる。
なお、上述した実施の形態では、抽出部32による抽出対象が、各画素位置において最も大きい輝度値を有する色成分の成分信号をそれぞれ抽出するものとして説明したが、これに限らない。例えば、各色成分のうち最も大きい輝度値を有する色成分の成分信号を抽出対象の成分信号として選択するものであってもよい。この場合、抽出部32による抽出対象は、RGBいずれの成分であってもよい。例えば、被写体が生体である場合、画像全体として赤色の成分が多いため、抽出対象の色成分をG成分またはB成分とすることが好ましい。
また、上述した実施の形態では、撮像信号取得部31が、色情報としてRGBの各色成分が付与された成分信号を含む入力画像信号SCを生成するものとして説明したが、RGB色空間をXYZ空間に変換したXYZ成分を色情報とし、該XYZ成分の成分信号を含むものであってもよい。ここで、本発明にかかる色情報は、輝度成分および色差成分を含むYCbCr色空間や、色相(Hue)、彩度(Saturation Chroma)、明度(Value Lightness Brightness)の三つの成分からなるHSV色空間、三次元空間を用いるL***色空間などにおける輝度は含まない。
また、上述した実施の形態では、ゲインマップ生成部35が、画素位置ごとに変化量(ゲイン比)を割り当ててゲインマップを生成するものとして説明したが、例えば、2×2などの複数の画素ごとにゲイン比を割り当てるものであってもよい。また、ゲインマップ生成部35を有しない構成であって、算出部34が画素位置の情報を付与した変化量を第2信号処理部34に入力するものとしてもよい。
また、上述した実施の形態において、ゲインマップ生成部35は、生成したゲインマップを記憶部39に記憶させてもよい。制御部40は、上述したゲインマップ生成処理を、1フレームごとに生成するものであってもよいし、数フレームごとに生成するものとしてもよい。数フレームごとにゲインマップを生成する場合は、ゲインマップを生成しないフレームの信号処理について、記憶部39に記憶されている最新のゲインマップが用いられる。
また、上述した実施の形態では、光源部3aから白色光が出射され、受光部244aがRGBの各色成分の光を受光する同時式の照明/撮像方式であるものとして説明したが、光源部3aが、RGBの色成分の波長帯域の光を個別に順次出射して、受光部244aが、各色成分の光をそれぞれ受光する面順次式の照明/撮像方式であってもよい。
また、上述した実施の形態では、光源部3aが内視鏡2とは別体で構成されているものとして説明したが、例えば、内視鏡2の先端に半導体光源を設けるなど、光源装置を内視鏡2に設けた構成であってもよい。さらに、内視鏡2に処理装置3の機能を付与してもよい。
また、上述した実施の形態では、光源部3aが、処理装置3と一体であるものとして説明したが、光源部3aおよび処理装置3が別体であって、例えば処理装置3の外部に照明部301および照明制御部302が設けられているものであってもよい。
また、上述した実施の形態では、本発明にかかる画像信号処理装置が、観察対象が被検体内の生体組織などである軟性の内視鏡2を用いた内視鏡システム1の抽出部32、第1信号処理部33、算出部34、ゲインマップ生成部35および第2信号処理部36として機能するものとして説明したが、硬性の内視鏡や、材料の特性を観測する工業用の内視鏡、カプセル型の内視鏡、ファイバースコープ、光学視管などの光学内視鏡の接眼部にカメラヘッドを接続したものを用いた内視鏡システムであっても適用できる。本発明にかかる画像信号処理装置は、体内、体外を問わず適用可能であり、外部で生成された撮像信号や画像信号を含む映像信号に対して抽出処理やゲイン調整処理を施すものである。
また、上述した実施の形態では、内視鏡システムを例に挙げて説明したが、例えばデジタルスチルカメラ等に設けられるEVF(Electronic View Finder)に映像を出力する場合にも適用可能である。
以上のように、本発明にかかる画像信号処理方法、画像信号処理装置および画像信号処理プログラムは、複数の色成分を含む画像信号の信号処理にかかる演算量を削減するのに有用である。
1 内視鏡システム
2 内視鏡
3 処理装置
3a 光源部
4 表示装置
21 挿入部
22 操作部
23 ユニバーサルコード
24 先端部
25 湾曲部
26 可撓管部
31 撮像信号取得部
32 抽出部
33 第1信号処理部
34 算出部
35 ゲインマップ生成部
36 第2信号処理部
37 表示画像生成部
38 入力部
39 記憶部
40 制御部
301 照明部
302 照明制御部

Claims (6)

  1. 互いに異なる複数の色情報を有する成分信号を含む画像信号から、所定の色情報を有する成分信号を抽出する抽出ステップと、
    前記抽出ステップで抽出された成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理ステップと、
    前記抽出ステップで抽出された成分信号と、前記第1信号処理ステップで信号処理が施された成分信号とをもとに、前記第1信号処理ステップによる処理前後の変化量を算出する算出ステップと、
    前記算出ステップで算出された変化量に基づき、前記抽出ステップにおける抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理ステップと、
    を含むことを特徴とする画像信号処理方法。
  2. 前記画像信号は、複数の画素の光電変換処理によって生成された信号であって、赤、緑および青の色成分の輝度値を前記複数の色情報が画素位置ごとに付与された信号であり、
    前記抽出ステップは、赤、緑および青の色成分の成分信号のうち、いずれか一つの色情報を有する成分信号を前記画素位置ごとに抽出する
    ことを特徴とする請求項1に記載の画像信号処理方法。
  3. 前記抽出ステップは、前記赤、緑および青の成分信号のうち最も大きい輝度値を有する色成分の成分信号を前記画素位置ごとに抽出する
    ことを特徴とする請求項2に記載の画像信号処理方法。
  4. 前記画像信号は、複数の画素の光電変換処理によって生成された信号であって、各画素位置に応じて前記複数の色情報が付与された信号であり、
    前記算出ステップは、画素位置ごとに前記変化量を算出する
    ことを特徴とする請求項1に記載の画像信号処理方法。
  5. 互いに異なる複数の色情報を有する成分信号を含む画像信号を取得する画像信号取得部と、
    前記画像信号取得部が取得した前記画像信号から、所定の色情報を有する成分信号を抽出する抽出部と、
    前記抽出部が抽出した成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理部と、
    前記抽出部が抽出した成分信号と、前記第1信号処理部によって信号処理が施された成分信号とをもとに、前記第1信号処理部による処理前後の変化量を算出する算出部と、
    前記算出部が算出した変化量に基づき、前記抽出部における抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理部と、
    を備えたことを特徴とする画像信号処理装置。
  6. 互いに異なる複数の色情報を有する成分信号を含む画像信号から、所定の色情報を有する成分信号を抽出する抽出手順と、
    前記抽出手順で抽出された成分信号に対して、明るさ調整処理を含む信号処理を施す第1信号処理手順と、
    前記抽出手順で抽出された成分信号と、前記第1信号処理手順で信号処理が施された成分信号とをもとに、前記第1信号処理手順による処理前後の変化量を算出する算出手順と、
    前記算出手順で算出された変化量に基づき、前記抽出手順における抽出対象外の色情報を有する成分信号に対して信号処理を施す第2信号処理手順と、
    をコンピュータに実行させることを特徴とする画像信号処理プログラム。
JP2015153490A 2015-08-03 2015-08-03 画像信号処理方法、画像信号処理装置および画像信号処理プログラム Pending JP2018151679A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2015153490A JP2018151679A (ja) 2015-08-03 2015-08-03 画像信号処理方法、画像信号処理装置および画像信号処理プログラム
PCT/JP2016/066799 WO2017022323A1 (ja) 2015-08-03 2016-06-06 画像信号処理方法、画像信号処理装置および画像信号処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015153490A JP2018151679A (ja) 2015-08-03 2015-08-03 画像信号処理方法、画像信号処理装置および画像信号処理プログラム

Publications (1)

Publication Number Publication Date
JP2018151679A true JP2018151679A (ja) 2018-09-27

Family

ID=57944188

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015153490A Pending JP2018151679A (ja) 2015-08-03 2015-08-03 画像信号処理方法、画像信号処理装置および画像信号処理プログラム

Country Status (2)

Country Link
JP (1) JP2018151679A (ja)
WO (1) WO2017022323A1 (ja)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006006373A1 (ja) * 2004-07-07 2006-01-19 Nikon Corporation 画像処理装置およびコンピュータプログラム製品
EP1898624B1 (en) * 2005-06-20 2015-08-26 Nikon Corporation Image processing device, image processing method, image processing program product, and image-capturing device

Also Published As

Publication number Publication date
WO2017022323A1 (ja) 2017-02-09

Similar Documents

Publication Publication Date Title
JP5968944B2 (ja) 内視鏡システム、プロセッサ装置、光源装置、内視鏡システムの作動方法、プロセッサ装置の作動方法、光源装置の作動方法
JP6104493B1 (ja) 撮像システム
JP6109456B1 (ja) 画像処理装置および撮像システム
JP6378846B2 (ja) 画像処理装置
WO2017022324A1 (ja) 画像信号処理方法、画像信号処理装置および画像信号処理プログラム
WO2016104386A1 (ja) 調光装置、撮像システム、調光装置の作動方法および調光装置の作動プログラム
US10574934B2 (en) Ultrasound observation device, operation method of image signal processing apparatus, image signal processing method, and computer-readable recording medium
WO2020178962A1 (ja) 内視鏡システムおよび画像処理装置
JP6458205B1 (ja) 画像処理装置、画像処理方法および画像処理プログラム
WO2016088628A1 (ja) 画像評価装置、内視鏡システム、画像評価装置の作動方法および画像評価装置の作動プログラム
JP6242552B1 (ja) 画像処理装置
JP6137892B2 (ja) 撮像システム
WO2017203996A1 (ja) 画像信号処理装置、画像信号処理方法および画像信号処理プログラム
JP6937902B2 (ja) 内視鏡システム
JP2017123997A (ja) 撮像システムおよび処理装置
WO2017022323A1 (ja) 画像信号処理方法、画像信号処理装置および画像信号処理プログラム
US11509834B2 (en) Image processing apparatus and image processing method
JP6801990B2 (ja) 画像処理システムおよび画像処理装置
JP2017221276A (ja) 画像処理装置