JP5647752B1 - 画像処理装置及び内視鏡システムの作動方法 - Google Patents

画像処理装置及び内視鏡システムの作動方法 Download PDF

Info

Publication number
JP5647752B1
JP5647752B1 JP2014538551A JP2014538551A JP5647752B1 JP 5647752 B1 JP5647752 B1 JP 5647752B1 JP 2014538551 A JP2014538551 A JP 2014538551A JP 2014538551 A JP2014538551 A JP 2014538551A JP 5647752 B1 JP5647752 B1 JP 5647752B1
Authority
JP
Japan
Prior art keywords
signal
range
image
difference
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014538551A
Other languages
English (en)
Other versions
JPWO2014156938A1 (ja
Inventor
敏景 千
敏景 千
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2014538551A priority Critical patent/JP5647752B1/ja
Application granted granted Critical
Publication of JP5647752B1 publication Critical patent/JP5647752B1/ja
Publication of JPWO2014156938A1 publication Critical patent/JPWO2014156938A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032Determining colour for diagnostic purposes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4887Locating particular structures in or on the body
    • A61B5/489Blood vessels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/92Dynamic range modification of images or parts thereof based on global image properties
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/273Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
    • A61B1/2736Gastroscopes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30092Stomach; Gastric

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Vascular Medicine (AREA)
  • Endoscopes (AREA)
  • Gastroenterology & Hepatology (AREA)

Abstract

萎縮性胃炎による胃の萎縮時に起こり得る粘膜等の色の変化を強調することができる画像処理装置及び内視鏡システムの作動方法を提供する。B画像信号とG画像信号間の第1信号比(-log(B/G))を算出し、G画像信号とR画像信号間の第2信号比(-log(G/R))を算出する。第1範囲内の第1及び第2信号比と、第2範囲内の第1及び第2信号比との差を拡大して、正常粘膜と異常領域(萎縮粘膜領域、深層血管領域)との色差を強調する処理を行う。色差強調後の画像はモニタに表示される。

Description

本発明は、萎縮性胃炎の診断時に用いる画像を処理する画像処理装置及び内視鏡システムの作動方法に関する。
医療分野においては、光源装置、電子内視鏡、プロセッサ装置を備える内視鏡システムを用いた診断等が広く行われている。また、最近の内視鏡システムにおいては、電子内視鏡に組み込む撮像素子の高感度化や高画素化などハイビジョンシステムによる高解像度化によって、従来の画質を超える高精度な画像を表示できるようになってきている。これにより、微細な血管や粘膜の小さな病変でも極めてリアルに描写することができる。
このようなハイビジョン化によって、病変部の形状や大きさが明瞭化するため、病変部の検出を容易にすることができる。しかしながら、ドクターは、病変部の形状や大きさだけでなく、粘膜のわずかな色の違いからも病変部を見つけ出している。例えば、赤味を帯びているものの粘膜との色の違いが僅かである部分については、早期病変部として検出している。このような僅かに赤味を帯びた部分については、ハイビジョン化して単に解像度だけ上げても、見つけ出すことができない場合がある。
そこで、特許文献1では、赤味の部分はより赤く、白いところは白くする色彩強調処理を施すことによって、病変部の境界を目立たせることが行われている。この色彩強調処理を行うことで、ハイビジョン化だけでは検出できない病変部を見つけ出すことができる。
特許3228627号公報
近年では、萎縮性胃炎の状態から胃癌などの胃の病変部を検出することが行われている。これは、以下に示すような萎縮性胃炎と胃の病変部との関係性を利用するものである。図26(A)に示すような正常な胃粘膜構造の場合には、表面の粘膜層は厚みを帯びているため、この粘膜層で大部分の光が吸収・反射する。そのため、図26(B)に示すように、正常な胃粘膜下層内の血管は、内視鏡画像上ではほとんど観察することができない。
これに対して、図27(A)に示すように、萎縮性胃炎が進行した胃粘膜構造の場合には、胃腺細胞の減少により粘膜層は薄くなっている。このような萎縮性胃炎の進行に伴う胃粘膜内部構造の変化は、内視鏡画像上では、下記(A)及び(B)のような変化として現れる。
(A)白に近い色の粘膜筋板が透けて見えることになり、萎縮粘膜部の色は正常部より退色した色になる。
(B)萎縮粘膜部では、萎縮に伴って粘膜層が薄くなるにつれて、粘膜下層の血管が透見されるようになる(図27(B)参照)。
したがって、萎縮性胃炎に基づく胃病変部の診断においては、上記2つの特徴(A)、(B)を利用して、萎縮の進行度の判断や、正常部と胃炎部との境界の判別を行っている。
ここで、萎縮が高度に進んだ場合(例えば、ABC検診でC群やD群に含まれる萎縮の場合)には、内視鏡画像上で上記2つの特徴(A)、(B)について明確に観察することができる。しかしながら、萎縮があまり進行していないなど萎縮進行中の場合(例えば、ABC検診でB群やC群に含まれる萎縮の場合)には、内視鏡画像上での萎縮部と正常部との差は僅かであり、萎縮の進行度の判断や、正常部と胃炎部との境界の判別は困難な場合がある。したがって、内視鏡画像上において上記2つの特徴(A)、(B)を明確にして、正常部と胃炎部の境界を明瞭化することが求められている。
これに関して、特許文献1の方法の適用が考えられるが、この特許文献1の方法は、赤味を帯びた部分について更に赤味が増すように強調するものであるため、上記のような胃の萎縮に伴う粘膜の色の変化を強調したり、さらには、胃の萎縮に伴って透見する粘膜下層の血管を強調表示することはできない。
本発明は、萎縮性胃炎による胃の萎縮時に起こり得る粘膜等の色の変化を強調することができる画像処理装置及び内視鏡システムの作動方法を提供することを目的とする。
上記目的を達成するために、本発明の画像処理装置は、画像信号入力部と、信号比算出部と、色差強調部と、表示部とを備える。画像信号入力部は、3色の画像信号を入力する。信号比算出部は、3色の画像信号に基づいて、2色の画像信号間の第1信号比と、第1信号比と異なる2色の画像信号間の第2信号比を算出する。色差強調部は、第1範囲内の第1及び第2信号比と、第1範囲と異なる第2範囲内にある第1及び第2信号比との差を拡張する第1拡張処理を行う。表示部は、第1拡張処理が施された第1及び第2信号比に基づいて、観察対象上の正常粘膜と第1異常領域との色差を強調した画像を表示する。
第1拡張処理は、第1範囲内の第1及び第2信号比と第2範囲内の第1及び第2信号比との動径差を拡張する処理であることが好ましい。動径差を拡張する処理は、第1範囲内の第1及び第2信号比と第2範囲内の第1及び第2信号比を極座標変換した信号に基づいて行われることが好ましい。第1拡張処理により、第1異常領域の彩度が低下することが好ましい。第1異常領域は、萎縮粘膜を含む退色調粘膜であることが好ましい。第1拡張処理は、第1範囲の第1及び第2信号比を維持した状態で、第1範囲の第1及び第2信号比と第2範囲の第1及び第2信号比との差を拡張し、表示部は、正常粘膜の色を維持した画像を表示することが好ましい。
色差強調部は、第1拡張処理に加えて、第1範囲内の第1及び第2信号比と、第1及び第2の範囲と異なる第3範囲内の第1及び第2信号比との差を拡張する第2拡張処理を行い、表示部は、観察対象上の正常粘膜と第1異常領域との色差を強調することに加えて、観察対象上の正常粘膜と第2異常領域との色差を強調した画像を表示することが好ましい。第2拡張処理は、第1範囲内の第1及び第2信号比と第2範囲内の第1及び第2信号比との偏角差を拡張する処理であることが好ましい。偏角差を拡張する処理は、第1範囲内の第1及び第2信号比と第3範囲内の第1及び第2信号比を極座標変換した信号に基づいて行われることが好ましい。第2拡張処理により、第2異常領域の色相が変化して、第2異常領域の下の血管が透見することが好ましい。第2拡張処理は、第1範囲の第1及び第2信号比を維持した状態で、第1範囲の第1及び第2信号比と第3範囲の第1及び第2信号比との差を拡張し、表示部は、正常粘膜の色を維持した画像を表示することが好ましい。
第1範囲内にある第1及び第2信号比の平均値を算出する平均値算出部を有し、色差強調部は、平均値と第2範囲内にある第1及び第2信号比の差を拡張するとともに、平均値と第3範囲内にある第1及び第2信号比の差を拡張することが好ましい。第1ないし第3範囲のうち高輝度エリア又は低輝度エリアについては、色差の強調を抑制する抑制処理を行うことが好ましい。第1信号比はB画像信号とG画像信号間のB/G比であり、第2信号比はG信号とR画像信号間のG/R比であることが好ましい。
本発明の内視鏡システムの作動方法は、画像信号入力ステップと、信号比算出ステップと、色差強調ステップと、表示ステップとを有する。画像信号入力ステップでは、画像信号入力部が、3色の画像信号を入力する。信号比算出ステップでは、信号比算出部が、3色の画像信号に基づいて、2色の画像信号間の第1信号比と、第1信号比と異なる2色の画像信号間の第2信号比を算出する。色差強調ステップでは、色差強調部が、第1範囲内の第1及び第2信号比と、第1範囲と異なる第2範囲内にある第1及び第2信号比との差を拡張する第1拡張処理を行う。表示ステップでは、表示部が、第1拡張処理が施された第1及び第2信号比に基づいて、観察対象上の正常粘膜と第1異常領域との色差を強調した画像を表示するステップと、を有することを特徴とする。
本発明によれば、萎縮性胃炎による胃の萎縮時に起こり得る粘膜等の色の変化を強調することができる。
内視鏡システムの外観図である。 第1実施形態の内視鏡システムの機能を示すブロック図である。 白色光の分光強度を示すグラフである。 特殊光の分光強度を示すグラフである。 異常領域強調部の内部構成を示すブロック図である。 第1〜第5範囲の位置関係を示すグラフである。 特殊光(青色レーザ光の発光強度が青紫色レーザ光の発光強度よりも大きい)照明時に得られる第1及び第2信号比の分布を示す実測データを示すグラフである。 色差強調処理前の二次元空間(縦軸(-log(B/G))、横軸(-log(G/R)))での第2範囲及び第3範囲の位置を示す説明図である。 色差強調処理後の二次元空間上での第2範囲及び第3範囲の位置を示す説明図である。 二次元空間と色度との関係、及び萎縮性胃炎の進行に伴う第1及び第2信号比の分布の変化を示す説明図である。 萎縮性胃炎の診断における一連の流れを示すフローチャートである。 青色狭帯域光を含む特殊光を用いた場合の異常領域と青色広帯域光を含む照明光を用いた場合の二次元空間上での第1〜第5範囲の位置関係を示す説明図である。 反射濃度と吸収体の吸収係数及び分布密度との関係を示すグラフである。 ヘモグロビンの吸光係数の分布を示すグラフである。 BA領域の反射濃度分布を表すグラフである。 粘膜層内の血液密度が表層で局所的に高くなるBAを示す説明図である。 狭帯域B光を用いた場合の第4範囲と広帯域B光を用いた場合の第4範囲の二次元空間上での位置関係を示す説明図である。 発赤領域の反射濃度分布を表すグラフである。 粘膜層内の血液密度が粘膜全体で局所的に高くなる発赤を示す説明図である。 狭帯域B光を用いた場合の第5範囲と広帯域B光を用いた場合の第5範囲の二次元空間上での位置関係を示す説明図である。 第2実施形態の内視鏡システムの機能を示すブロック図である。 回転フィルタの平面図である。 第3実施形態の特殊光画像処理部の機能を示すブロック図である。 第1範囲、第2範囲、第3範囲の動径を示す説明図である。 第1範囲、第4範囲、第5範囲の動径を示す説明図である。 動径rと動径Erとの関係を示すグラフである。 第1範囲、第2範囲、第3範囲の偏角を示す説明図である。 第1範囲、第4範囲、第5範囲の偏角を示す説明図である。 偏角θと偏角Eθとの関係を示すグラフである。 (A)は正常粘膜における粘膜構造の断面図であり、(B)は正常粘膜を表層側から見た場合の平面図である。 (A)は萎縮性胃炎時における粘膜構造(胃腺細胞の減少、又は胃組織と腸、繊維組織との置換により胃粘膜層が薄くなっている)の断面図であり、(B)は萎縮性胃炎時における粘膜を表層側から見た場合の平面図である。
[第1実施形態]
図1に示すように、第1実施形態の内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16と、モニタ18と、コンソール20とを有する。内視鏡12は光源装置14と光学的に接続されるとともに、プロセッサ装置16と電気的に接続される。内視鏡12は、検体内に挿入される挿入部21と、挿入部の基端部分に設けられた操作部22と、挿入部21の先端側に設けられる湾曲部23及び先端部24を有している。操作部22のアングルノブ22aを操作することにより、湾曲部23は湾曲動作する。この湾曲動作に伴って、先端部24が所望の方向に向けられる。
また、操作部22には、アングルノブ22aの他、モード切替SW22bと、ズーム操作部22cが設けられている。モード切替SW22bは、通常観察モードと、特殊観察モードの2種類のモード間の切り替え操作に用いられる。通常観察モードは、検体内の照明に白色光を用いるモードである。特殊観察モードは、検体内の照明に青味を帯びた特殊光を用いるモードであり、萎縮性胃炎による胃の萎縮時に起こり得る粘膜の色の変化や血管の透見を強調するモードである。ズーム操作部22cは、内視鏡12内のズーミングレンズ47(図2参照)を駆動させて、検体を拡大させるズーム操作に用いられる。なお、特殊観察モードでは、特殊光に代えて、白色光を用いてもよい。
プロセッサ装置16は、モニタ18及びコンソール20と電気的に接続される。モニタ18は、画像情報等を出力表示する。コンソール20は、機能設定等の入力操作を受け付けるUI(ユーザーインターフェース)として機能する。なお、プロセッサ装置16には、画像情報等を記録する外付けの記録部(図示省略)を接続してもよい。
図2に示すように、光源装置14は、中心波長445nmの青色レーザ光を発する青色レーザ光源(445LD)34と、中心波長405nmの青紫色レーザ光を発する青紫色レーザ光源(405LD)36とを発光源として備えている。これら各光源34、36の半導体発光素子からの発光は、光源制御部40により個別に制御されており、青色レーザ光源34の出射光と、青紫色レーザ光源36の出射光の光量比は変更自在になっている。光源制御部40は、通常観察モードの場合には、主として青色レーザ光源34を駆動させ、青紫色レーザ光をわずかに発光するように制御している。なお、この通常観察モードの場合に、青紫色レーザ光源36を駆動してもよい。ただし、この場合には、青紫色レーザ光源36の発光強度を低く抑えることが好ましい。
これに対して、特殊観察モードの場合には、青色レーザ光源34と青紫色レーザ光源36の両方を駆動させるとともに、青色レーザ光の発光比率を青紫色レーザ光の発光比率よりも大きくなるように制御している。なお、青色レーザ光又は青紫色レーザ光の半値幅は±10nm程度にすることが好ましい。また、青色レーザ光源34及び青紫色レーザ光源36は、ブロードエリア型のInGaN系レーザダイオードが利用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオードを用いることもできる。また、上記光源として、発光ダイオード等の発光体を用いた構成としてもよい。
これら各光源34、36から出射されるレーザ光は、集光レンズ、光ファイバ、合波器などの光学部材(いずれも図示せず)を介して、ライトガイド(LG)41に入射する。ライトガイド41は、光源装置14、内視鏡12、及びユニバーサルコード(内視鏡12と光源装置とを接続するためのコード(図示せず))内に内蔵されている。中心波長445nmの青色レーザ光又は中心波長405nmの青紫色レーザ光は、ライトガイド41を介して、内視鏡12の先端部24まで伝搬される。なお、ライトガイド41としては、マルチモードファイバを使用することができる。一例として、コア径105μm、クラッド径125μm、外皮となる保護層を含めた径が φ0.3〜0.5mmの細径なファイバケーブルを使用することができる。
内視鏡12の先端部24は照明光学系24aと撮像光学系24bを有している。照明光学系24aには、ライトガイド41からの中心波長445nmの青色レーザ光又は中心波長405nmの青紫色レーザ光が入射する蛍光体44と、照明レンズ45が設けられている。蛍光体44に、青色レーザ光が照射されることで、蛍光体44から蛍光が発せられる。また、一部の青色レーザ光は、そのまま蛍光体44を透過する。青紫色レーザ光は、蛍光体44を励起させることなく透過する。蛍光体44を出射した光は、照明レンズ45を介して、検体内に照射される。
ここで、通常観察モードにおいては、主として青色レーザ光が蛍光体44に入射するため、図3Aに示すような、青色レーザ光、及び青色レーザ光により蛍光体44から励起発光する蛍光を合波した白色光が、検体内に照射される。一方、特殊観察モードにおいては、青紫色レーザ光と青色レーザ光の両方が蛍光体44に入射するため、図3Bに示すような、青紫色レーザ光、青色レーザ光、及び青色レーザ光により蛍光体44から励起発光する蛍光を合波した特殊光が、検体内に照射される。この特殊観察モードでは、青色成分に発光強度が高い青色レーザ光に加えて、青紫色レーザ光が含まれているため、特殊光は、青色成分を多く含み且つ波長範囲がほぼ可視光全域に及ぶ広帯域光となっている。
なお、蛍光体44は、青色レーザ光の一部を吸収して、緑色〜黄色に励起発光する複数種の蛍光体(例えばYAG系蛍光体、或いはBAM(BaMgAl1017)等の蛍光体)を含んで構成されるものを使用することが好ましい。本構成例のように、半導体発光素子を蛍光体44の励起光源として用いれば、高い発光効率で高強度の白色光が得られ、白色光の強度を容易に調整できる上に、白色光の色温度、色度の変化を小さく抑えることができる。
図2に示すように、内視鏡12の撮像光学系24bは、撮像レンズ46、ズーミングレンズ47、撮像センサ48を有している。検体からの反射光は、撮像レンズ46及びズーミングレンズ47を介して、撮像センサ48に入射する。これにより、撮像センサ48に検体の反射像が結像される。ズーミングレンズ47は、ズーム操作部22cを操作することで、テレ端とワイド端との間を移動する。ズーミングレンズ47がワイド端側に移動すると検体の反射像が縮小する一方で、テレ端側に移動することで、検体の反射像が拡大する。
撮像センサ48はカラーのイメージセンサであり、検体の反射像を撮像して画像信号を出力する。なお、撮像センサ48は、CCD(Charge Coupled Device)イメージセンサやCMOS(Complementary Metal-Oxide Semiconductor)イメージセンサ等であることが好ましい。本発明で用いられるイメージセンサは、撮像面にRGBカラーフィルタが設けられたRGBchを有するRGBイメージセンサであり、各chで光電変換をすることによって、R(赤)のカラーフィルタが設けられたR画素からR画像信号を出力し、G(緑)のカラーフィルタが設けられたG画素からG画像信号を出力し、B(青)のカラーフィルタが設けられたB画素からB画像信号を出力する。
なお、撮像センサ48としては、撮像面にC(シアン)、M(マゼンタ)、Y(イエロー)及びG(緑)のCMYGフィルタを備えたイメージセンサであっても良い。CMYGフィルタを備えたイメージセンサの場合には、CMYGの4色の画像信号から色変換によってRGBの3色の画像信号を得ることができる。この場合には、CMYGの4色の画像信号からRGBの3色の画像信号に色変換する色変換手段を、内視鏡12、光源装置14又はプロセッサ装置16のいずれかに備えている必要がある。
撮像センサ48から出力される画像信号は、CDS・AGC回路50に送信される。CDS・AGC回路50は、アナログ信号である画像信号に相関二重サンプリング(CDS)や自動利得制御(AGC)を行う。CDS・AGC回路50を経た画像信号は、ガンマ変換部51でガンマ変換が施される。これにより、モニタ18などの出力デバイスに適した階調を有する画像信号が得られる。このガンマ変換後の画像信号は、A/D変換器(A/Dコンバータ)52により、デジタル画像信号に変換される。A/D変換されたデジタル画像信号は、プロセッサ装置16に入力される。
プロセッサ装置16は、受信部54と、画像処理切替部60と、通常光画像処理部62と、特殊光画像処理部64と、画像表示信号生成部66とを備えている。受信部54は内視鏡12からのデジタル画像信号を受信する。この受信部54は、DSP(Digital Signal Processor)56とノイズ除去部58を備えている。DSP56は、デジタル画像信号に対してガンマ補正、色補正処理を行う。ノイズ除去部58は、DSP56でガンマ補正等が施されたデジタル画像信号に対してノイズ除去処理(例えば移動平均法やメディアンフィルタ法等)を施すことによって、デジタル画像信号からノイズを除去する。ノイズが除去されたデジタル画像信号は、画像処理切替部60に送信される。なお、本発明の「画像信号入力部」は、受信部54を含む構成に対応している。
画像処理切替部60は、モード切替SW22bにより通常観察モードにセットされている場合には、デジタル画像信号を通常光画像処理部62に送信し、特殊観察モードに設定されている場合には、デジタル画像信号を特殊光画像処理部64に送信する。
通常光画像処理部62は、色変換部68と、色彩強調部70と、構造強調部72とを有する。色変換部68は、入力されたRGB3チャンネルのデジタル画像信号を、それぞれR画像データ、G画像データ、B画像データに割り付ける。これらRGBの画像データに対しては、更に、3×3のマトリックス処理、階調変換処理、3次元LUT処理などの色変換処理を行い、色変換処理済RGB画像データに変換する。
色彩強調部70は、色変換済RGB画像データに対して、各種色彩強調処理を施す。構造強調部72は、色彩強調処理済RGB画像データに対して、空間周波数強調等の構造強調処理を行う。構造強調部72で構造強調処理が施されたRGB画像データは、通常光画像として通常光画像処理部62から画像表示信号生成部66に入力される。
特殊光画像処理部64は、逆ガンマ変換部76と、異常領域強調部77と、構造強調部78とを有する。逆ガンマ変換部76は、入力されたRGB3チャンネルのデジタル画像信号に対して逆ガンマ変換を施す。この逆ガンマ変換後のRGB画像信号は、検体からの反射率に対してリニアな反射率リニアRGB信号であるため、検体の各種生体情報(本実施形態で言えば、萎縮性胃炎に伴う色の変化等など胃の萎縮に関する情報)が多く含まれている。
異常領域強調部77は、反射率リニアRGB信号に基づいて、正常粘膜領域と、胃癌などの病変部を含む可能性がある異常領域の色の差を強調する色差強調処理を行う。この異常領域強調部77の詳細については後述する。構造強調部78は、色差強調処理済みのRGB画像データに対して、空間周波数強調等の構造強調処理を行う。構造強調部78で構造強調処理が施されたRGB画像データは、特殊光画像として特殊光画像処理部64から画像表示信号生成部66に入力される。
画像表示信号生成部66は、通常光画像処理部62又は特殊光画像処理部64から入力された通常光画像又は特殊光画像を、モニタ18で表示可能画像として表示するための表示画像信号に変換する。この変換後の表示画像信号に基づいて、モニタ18は、通常光画像又は特殊光画像を表示する。
図4に示すように、異常領域強調部77は、信号比算出部80と、色差強調部82と、RGB変換部83と、ガンマ変換部84とを備えている。信号比算出部80は、反射率リニアRGB信号のうち、B信号とG信号間の第1信号比(-log(B/G))を算出するとともに、G信号とR信号間の第2信号比(-log(G/R))を算出する。これら第1及び第2信号比はそれぞれG信号、R信号で規格化されているため、観察対象からの距離や観察エリアの明るさなどによって影響を受けることは、ほとんどない。その一方で、第1及び第2信号比は、粘膜内の吸収成分(ヘモグロビン)の濃度の変化や粘膜内部構造の変化などに相関があるB信号とG信号をそれぞれ含んでいるため、吸収成分濃度や粘膜内部構造に変化が生じると大きく変動する。なお、上記B信号は撮像センサ48のB画素から出力されるB画像信号に対応しており、上記G信号は撮像センサ48のG画素から出力されるG画像信号に対応しており、上記R信号は撮像センサ48のR画素から出力されるR画像信号に対応している。
例えば、第1信号比は血管深さ(粘膜の深さ方向における血管の位置)と相関があるため、深層血管のような太い血管がある部分の第1信号比は、深い位置にあるほど値が大きくなる一方、浅い位置にあるほど値が小さくなる。また、第1信号比及び第2信号比のいずれも、ヘモグロビンの吸収と相関があるため、光の吸収が強いほど値は大きくなる。
また、信号比算出部80は、反射率リニアRGB信号のうち輝度値が上限値以上の高輝度エリアと下限値以下の高輝度・低輝度エリアを判別する高輝度・低輝度エリア判別部80aを備えている。高輝度・低輝度エリアにはノイズが多く含まれるため、この高輝度・低輝度エリアの信号を用いて第1又は第2信号比を算出した場合には、第1又は第2信号比が極めて大きくなって、ノイズが強調されるおそれがある。そのため、高輝度・低輝度エリア判別部80aで高輝度・低輝度エリアと判別された領域の強調処理については、後述するように、他のエリアと比べて、強調処理のレベルを抑制している。なお、反射率リニアRGB信号のうち反射光の光量に連動して変化するのはR信号であるので、R信号に基づいて高輝度・低輝度エリアを判別することが好ましい。
色差強調部82は平均値算出部82aと、萎縮粘膜領域強調部82bと、深層血管領域強調部82cと、BA領域強調部82dと、発赤領域強調部82eとを備えている。この色差強調部82では、図5の二次元空間(縦軸:第1信号比(-log(B/G))、横軸:第2信号比(-log(G/R)))において、第1範囲の第1及び第2信号比と第2〜第5範囲の第1及び第2信号比との差を拡大することによって、観察領域上の正常粘膜と異常部位(萎縮粘膜、BA、発赤等)との色差を強調する。
第1範囲には、図6の実測データが示すように、正常粘膜がある部分の第1及び第2信号比が多く含まれており(図6では正常粘膜を「○」で表記)、この第1範囲は二次元空間上でほぼ中央に位置している。また、第2範囲には、萎縮粘膜がある部分の第1及び第2信号比が多く含まれており(図6では萎縮粘膜を「×」で表記)、この第2範囲は二次元空間上で第1範囲の斜め左下に位置している。第3範囲には、深層血管がある部分の第1及び第2信号比が多く含まれており(図6では深層血管を「□」で表記)、この第3範囲は第1範囲の右斜め下に位置している。第4範囲には、BAがある部分の第1及び第2信号比が多く含まれており(図6ではBAを「◇」で表記)、この第4範囲は第1範囲の右斜め上に位置している。第5範囲には、発赤がある部分の第1及び第2信号比が多く含まれており(図6では発赤を「△」で表記)、この第5範囲は第1範囲の右側に位置している。
平均値算出部82aは、第1範囲内の第1及び第2信号比の平均値を算出する。そして、算出された平均値を極座標変換することによって、極座標変換済みの第1範囲平均値(rm、θm)を得る。
萎縮粘膜領域強調部82bは、第2範囲内の第1及び第2信号比を極座標変換することにより、極座標変換済みの第2範囲信号(ri、θi)を得る。そして、図7に示す極座標変換済みの第1範囲平均値(rm、θm)と第2範囲信号(ri、θi)との間の動径差Δrを拡張する第1拡張処理を行う。この第1拡張処理は、下記式(1)により、行われる。これにより、強調第2範囲信号(Eri、θi)が得られる。この強調第2範囲信号(Eri、θi)と第1範囲平均値(rm、θm)との動径差は、図8Aに示すように、Δrよりも大きいEΔrとなっている。
(1):Eri=(ri−rm)・α+rm (ただし、α≧1)
萎縮粘膜領域強調部82bでの第1拡張処理は、図7、8に示すように、色相を維持した状態で、動径差Δrを彩度が低くなる方向に拡張するものである。この第1拡張処理による色の変化は、図9に示すような、萎縮性胃炎の進行とともに、退色調になる粘膜の色の変化に合わせている。この図9では、進行2は進行1よりも萎縮性胃炎の進行が進んでいることを示しており、進行1の場合は正常粘膜領域との差が小さいのに対して、進行2の場合には、色相はほぼそのままで、彩度のみが低下することにより、正常粘膜領域との差が大きくなっていることが分かる。
したがって、強調第2範囲信号(Eri、θi)に基づいてモニタ18上に表示される特殊光画像上では、萎縮粘膜領域が正常粘膜領域と異なる色で明瞭に表示されるとともに、萎縮粘膜領域の色は萎縮性胃炎時の粘膜の色とほぼ同等に表示される。これにより、正常粘膜領域と萎縮粘膜領域の境界の判別を確実に行うことができる。第1拡張処理は、正常粘膜領域と萎縮粘膜領域との色の差が僅かである場合(例えば、萎縮進行中で、ABC検診でB群やC群に含まれるような場合)に、特に有効的である。
なお、正常粘膜領域と萎縮粘膜領域の色の差を更に強調する場合には、彩度方向の拡張(動径差の拡張)だけでなく、色相方向の拡張(偏角差の拡張)を行ってもよい。また、高輝度・低輝度エリアについては、αの値を小さくして拡張を抑制する。また、萎縮が高度に進んでいる場合には、式(1)のαの値が大きすぎると、萎縮粘膜領域の色が青味を帯びてくるので、この場合には、αの値を小さくすること(コンソール20による操作で調整)で、萎縮粘膜領域の色を実際の萎縮粘膜の色(退色調の色)に合わせることができる。
深層血管領域強調部82cは、第3範囲内の第1及び第2信号比を極座標変換することにより、極座標変換済みの第3範囲信号(rv、θv)を得る。そして、図7に示す極座標変換済みの第1範囲平均値(rm、θm)と第3範囲信号(rv、θv)との間の偏角差Δθを拡張する第2拡張処理を行う。この第2拡張処理は、下記式(2)により、行われる。これにより、強調第3範囲信号(rv、Eθv)が得られる。この強調第3範囲信号(rv、Eθv)と第1範囲平均値(rm、θm)との偏角差は、図8に示すように、Δθよりも大きいEΔθとなっている。
(2):Eθv=(θv−θm)・β+θm (ただし、β≧1)
深層血管領域強調部82cでの第2拡張処理は、図7、8に示すように、彩度を維持した状態で、色相方向に偏角差Δθを拡張するものである。この第2拡張処理による色の変化は、図9に示すように、萎縮性胃炎の進行とともに、深層血管の色が顕在化してくる色の変化に合わせている。この図9では、進行2は進行1よりも萎縮性胃炎の進行が進んでいることを示しており、進行1の場合は正常粘膜領域との差が小さいのに対して、進行2の場合には、彩度はほぼそのままで、色相のみが変化することにより、正常粘膜領域との差が大きくなっていることが分かる。
したがって、強調第3範囲信号(rv、Eθv)に基づいてモニタ18上に表示される特殊光画像上では、深層血管領域が正常粘膜領域と異なる色で明瞭に表示されるとともに、深層血管の色の顕在化により、深層血管が確実に透見するようになる。これにより、正常粘膜領域と深層血管領域の境界の判別を確実に行うことができる。第2拡張処理は、深層血管がそれほど透見していない場合(例えば、萎縮進行中で、ABC検診でB群やC群に含まれるような場合)に、特に有効的である。
なお、正常粘膜領域と深層血管領域の色の差を更に強調する場合には、色相方向の拡張(偏角差の拡張)だけでなく、彩度方向の拡張(動径差の拡張)を行ってもよい。また、高輝度・低輝度エリアについては、βの値を小さくして拡張を抑制する。また、萎縮が高度に進んでいる場合には、式(2)のβの値が大きすぎると、深層血管領域の色がマゼンタ調になるので、この場合には、βの値を小さくすること(コンソール20による操作で調整)で、深層血管領域の色を深層血管の色に合わせることができる。
BA領域強調部82dは、第4範囲内の第1及び第2信号比を極座標変換することにより、極座標変換済みの第4範囲信号(rk、θk)を得る。そして、下記式(3)、(4)により、極座標変換済みの第1範囲平均値(rm、θm)と第4範囲信号(rk、θk)との間の動径差Δr、偏角差Δθを拡張する第3拡張処理を行う。これにより、動径差Δr、偏角差Δθが共に拡張された強調第4範囲信号(Erk、Eθk)が得られる。
(3):Erk=(rk−rm)・α+rm (ただし、α≧1)
(4):Eθk=(θk−θm)・β+θm (ただし、β≧1)
強調第4範囲信号(Erk、Eθk)に基づいてモニタ18上に表示される特殊光画像上では、BA領域が正常粘膜領域と異なる色で明瞭に表示される。これにより、正常粘膜領域とBA領域の境界の判別を確実に行うことができる。なお、BA領域強調部82dでは、動径差Δr、偏角差Δθの両方を拡張することに代えて、動径差Δr、偏角差Δθのいずれか一方を拡張してもよい。また、高輝度・低輝度エリアについては、α、βの値を小さくして拡張を抑制する。
発赤領域強調部82eは、第5範囲内の第1及び第2信号比を極座標変換することにより、極座標変換済みの第5範囲信号(rj、θj)を得る。そして、下記式(5)、(6)により、極座標変換済みの第1範囲平均値(rm、θm)と第5範囲信号(rj、θj)との間の動径差Δr、偏角差Δθを拡張する第4拡張処理を行う。これにより、動径差Δr、偏角差Δθが共に拡張された強調第5範囲信号(Erj、Eθj)が得られる。
(5):Erj=(rj−rm)・α+rm (ただし、α≧1)
(6):Eθj=(θj−θm)・β+θm (ただし、β≧1)
強調第5範囲信号(Erj、Eθj)に基づいてモニタ18上に表示される特殊光画像上では、発赤領域が正常粘膜領域と異なる色で明瞭に表示される。これにより、正常粘膜領域と発赤領域の境界の判別を確実に行うことができる。なお、発赤領域強調部82eでは、動径差Δr、偏角差Δθの両方を拡張することに代えて、動径差Δr、偏角差Δθのいずれか一方を拡張してもよい。また、高輝度・低輝度エリアについては、α、βの値を小さくして拡張を抑制する。
RGB変換部83は、色差強調部82で得られた色差強調信号(強調萎縮粘膜信号、強調深層血管信号、強調BA信号、強調発赤信号)を、RGB画像データに再変換する。このRGB変換部83では、極座標空間の値で表現された色差強調信号を、RGBの値に変換する処理が行われる。ガンマ変換部84は、色差強調済みのRGB画像データに対してガンマ変換を施す。これにより、モニタ18などの出力デバイスに適した階調を有する色差強調済みのRGB画像データが得られる。
次に、本実施形態における一連の流れを図10のフローチャートに沿って説明する。まず、通常観察モードにセットし、内視鏡12の挿入部21を検体内に挿入する。挿入部21の先端部24が胃に到達したら、萎縮性胃炎が起こっているかどうかを診断する。ここで、通常光画像から、粘膜が退色調になっており、または、樹枝状の深層血管が透見している部位と透見していな部位の境界(内視鏡的腺境界と呼ぶ)を読み取ることができた場合には、ドクターは、萎縮性胃炎により胃癌などの病変が発生している病的所見と判断する(木村・竹本分類による判断手法)。なお、このような胃癌は、ピロリ菌の感染による胃粘膜の萎縮により発生することも分かっている。
一方、通常光画像からは、退色調の粘膜、または、内視鏡的腺境界の存在を読み取ることができなかった場合には、更に確実に診断を行うために、モード切替SW22bを操作して、特殊観察モードに切り替える。この特殊観察モードの切り替えにより、青色レーザ光及び青紫色レーザ光の両方を含む特殊光が発光される。この特殊光発光時に得られるRGB画像信号から、第1及び第2信号比を算出する。
算出した第1及び第2信号比のうち、第1範囲内の第1及び第2信号比の平均値を求めるとともに、この第1範囲平均値を極座標変換する。また、第2〜第5範囲内の第1及び第2信号比を極座標変換して、極座標変換済みの第2〜第5範囲信号を得る。そして、極座標変換済みの第1範囲平均値と第2〜第5範囲信号との動径差又は偏角差を拡張する。これにより、正常粘膜と異常領域の色の差が強調された色差強調信号(強調第2範囲信号、強調第3範囲信号、強調第4範囲信号、強調第5範囲信号)が得られる。この色差強調信号に基づいて、モニタ18に特殊光画像が表示される。
特殊光画像上では、胃の萎縮が全く無い場合には、粘膜は通常通りの色で表示される。この場合には、ドクターは、萎縮性胃炎による胃癌などの病変部の発生は無い正常所見と判断する。これに対して、胃の萎縮が僅かでも進んでいる場合には、萎縮粘膜の色は退色調で表示され、また、深層血管が透見して表示される。これにより、内視鏡的腺境界を明瞭に表示することができる。したがって、実際の胃の中は、萎縮粘膜の色はさほど退色調で表示されておらず、また、深層血管がそれほど透見していない場合であっても、ドクターは、萎縮性胃炎により胃癌などの病変が発生している病的所見と判断することができるようになる。
なお、上記実施形態では、特殊観察モードにおいて、粘膜の吸収物質に対して光吸収性が高い青色狭帯域成分(青色レーザ光及び青紫色レーザ光)を含む特殊光を用いているため、青色広帯域成分を含む照明光を用いた場合と比較して、以下示すような理由から、観察領域上の異常領域の中の萎縮粘膜、深層血管領域、BA領域と正常粘膜領域との色差は、大きくなっている。
図11は、上記実施形態のように、青色狭帯域成分(青色レーザ光及び青紫色レーザ光)を含む特殊光を用いた場合の二次元空間上での第2〜第5範囲の位置と、青色広帯域成分(例えば、400〜520nm)を含む照明光を用いた場合の二次元空間上での第1範囲の位置を示している。この図11では、第2範囲Mnは、青色狭帯域成分を含む特殊光を用いた場合に得られ、萎縮粘膜部分の信号を多く含む範囲を示している。第2範囲Mbは、青色広帯域成分を含む照明光を用いた場合に得られ、萎縮粘膜部分の信号を多く含む範囲を示している。
また、第3範囲Vn、第4範囲Xn、第5範囲Ynについては、青色狭帯域成分を含む特殊光を用いた場合に得られ、深層血管部分の信号、BA部分の信号、発赤部分の信号を多く含む範囲をそれぞれ示している。第3範囲Vb、第4範囲Xb、第5範囲Ybについては、青色広帯域成分を含む照明光を用いた場合に得られ、深層血管部分の信号、BA部分の信号、発赤部分の信号を多く含む範囲をそれぞれ示している。
この図11に示すように、第2範囲Mn、第3範囲Vn、第4範囲Xnについては、第1範囲との差が大きいのに対して、第2範囲Mb、第3範囲Vb、第4範囲Xbについては第1範囲と差があまりない。したがって、青色狭帯域成分を含む特殊光を用いることで、第1範囲と第2〜第4範囲Mn、Vn,Xnとの差を十分に付けることができる。これに加えて、色差強調部82での動径差又は偏角差の拡張により、更に第1範囲と第2〜第4範囲Mn、Vn,Xnとの差が大きくなる。以上から、青色狭帯域成分を含む特殊光を用いた場合には、青色広帯域成分を含む照明光を用いた場合と比較して、青色狭帯域成分で付けた第1範囲と第2〜第4範囲Mn、Vn,Xnの差の分だけ、正常粘膜と萎縮粘膜領域、深層血管領域、BAとの色差は、大きくなっている。
これに対して、第5範囲Ynについては、第5範囲Ybの場合と比較しても、第1範囲との差にほとんど変わりはない。したがって、青色狭帯域成分を含む特殊光又は青色広帯域成分を含む照明光のいずれを用いた場合であっても、正常粘膜と発赤領域との色差はさほど変わらない。
以上のように、特殊光に青色狭帯域成分が含まれるか否かによって、正常領域との色差の大きさが異なるのは、主として、血液密度の大きさなど粘膜内の吸収物質の分布密度に依存する要因が大きい。これに関しては、図12Aに示すような、反射濃度と粘膜内の吸光物質(消化器では主としてヘモグロビン)の吸収係数(ヘモグロビンの吸光係数の分布は図12Bを参照)及び分布密度との関係を用いて、説明することができる。なお、反射濃度を(-log(Bch(センサのBchに入射する光の反射率))とした場合には、その反射濃度の変動により第1信号比が変動する。
この図12Aによれば、反射濃度は、吸光物質の吸光係数及び分布密度に対して非線形に増加することが分かる。したがって、反射濃度の大きさについては、粘膜内での光吸収や分布密度が強くなるほど、増加する。これに対して、反射濃度の増加量については、光吸収が弱い場合や分布密度が小さい場合には、少し吸収や密度が増えるだけでも反射濃度が大きく増加する一方で、光吸収が強い場合や分布密度が大きい場合には、吸収や密度が増えたとしてもあまり反射濃度は増加しない。
そこで、図12Aの反射濃度分布の関係を使って、撮像センサ48のBchに、青色レーザ光(445nm)及び青紫色レーザ光(405nm)の混色狭帯域光(以下「狭帯域光445nm+405nm」と表記)の反射光、青紫色レーザ光(405nm)の反射光(以下「狭帯域光405nm」と表記)、青色レーザ光(445nm)の反射光(以下「狭帯域光445nm」と表記)、青色帯域において波長範囲が広帯域(例えば、400〜500nm)に及ぶ青色光の反射光(以下「広帯域B光」と表記)が入射したときの正常粘膜と異常領域との色差について、それぞれ説明する。
BA領域における反射濃度分布においては、図13に示すように、狭帯域光405nmの反射濃度R1が一番高く、それよりも低いのが狭帯域光445nm+405nmの反射濃度R2であり、反射濃度R1、2よりも低いのが狭帯域光445nmの反射濃度R3であり、一番低いのが広帯域B光の反射濃度R4となっている。このような大小関係になるのは、光吸収の強さが「狭帯域光405nm>狭帯域光445nm+405nm>狭帯域光445nm>広帯域B光」の関係を有するからである(図12B参照)。
また、狭帯域光405nm、狭帯域光445nm+405nm、狭帯域光445nmなどの狭帯域B光の反射濃度R1〜R3と広帯域B光の反射濃度R4間の差は、比較的大きくなっている。これは、広帯域B光の反射濃度R4が特に低くなっているからである。即ち、狭帯域B光を用いた場合の正常粘膜とBA領域との反射濃度の差は、広帯域B光を用いた場合よりも大きいことが分かる。このように広帯域B光の反射濃度R4が低いのは、図14に示すように、BAは粘膜中の比較的浅い位置にだけ狭く分布して、光深達経路上における血液密度が比較的低くなっているためであり、また、広帯域B光にはヘモグロビンの吸収が弱い500nmの周辺の波長が混ざっているためである。また、狭帯域B光については、波長が異なることによる反射濃度の差(例えば、反射濃度R1と反射濃度R2との差)は、発赤領域の場合と比較すると、比較的大きくなっている。これは、BA領域内での光深達経路上の血液密度が低いため、波長の違いにより光吸収に差が生じると、その差は反射濃度の差に大きく反映されるからである。
BA領域では以上のような反射濃度を有しているため、図15に示すように、狭帯域B光を用いたときの第4範囲Xnと第1範囲との第1信号比の差は、広帯域B光を用いたときの第4範囲Xbよりも、大きくなっている。また、狭帯域B光を用いた場合においては、狭帯域光405nmを用いた場合の第4範囲Xn(405nm)と、狭帯域光445nm+405nmを用いた場合の第4範囲Xn(445nm+405nm)と、狭帯域光445nmを用いた場合の第4範囲Xn(445nm)の第1範囲との位置関係をそれぞれ比較すると、より短波長の光を用いた場合のほうが、第1範囲との差は大きくなっていることが分かる。したがって、狭帯域B光を用いることで、第1範囲との差を大きくすることができるため、正常粘膜領域とBA領域との色差をより大きくすることができる。
なお、萎縮粘膜領域、深層血管領域についても、BA領域と同様、光深達経路上の血液密度が発赤領域よりも低くなっている。また、萎縮粘膜領域及び深層血管領域については、BA領域と同様の反射濃度分布を有していることから、BA領域の場合と同様に、より短波長の光を用いることで、第1範囲と第2及び第3範囲の差を大きくすることができる。したがって、狭帯域B光を用いることで、第1範囲との差を大きくすることができるため、萎縮粘膜領域、深層血管領域と正常粘膜領域と色差をより大きくすることができる。
これに対して、発赤領域においては、図16に示すように、反射濃度R1〜R4の大小関係は、BA領域等と同様であるものの、狭帯域B光の反射濃度R1〜R3と広帯域B光の反射濃度R4間の差は、BA領域等の場合と比べると、比較的小さい。これは、広帯域B光の反射濃度R4が、BA領域等の場合と比較して、高くなっているからである。このように広帯域B光の反射濃度R4が比較的高いのは、図17に示すように、発赤が粘膜中の浅い位置から深い位置に至るまで広く分布して、光深達経路上の血液密度が比較的高くなっているためである。
また、狭帯域B光については、波長が異なることによる反射濃度の差(例えば、反射濃度R1と反射濃度R2との差)は、BA領域の場合と比較して、あまり大きくない。これは、発赤領域内での光深達経路上の血液密度がBA領域等と比較して高いため、波長の違いにより光吸収に差が生じても、その差は反射濃度の差にあまり反映されないからである。
発赤領域では以上のような反射濃度を有しているため、図18に示すように、狭帯域B光を用いた場合の第5範囲Ynと第1範囲の差は、広帯域B光を用いた場合の発赤領域Ybと比較しても、あまり変わりが無い。また、狭帯域B光を用いた場合については、狭帯域光405nmを用いた場合の第5範囲Yn(405nm)と、狭帯域光445nm+405nmを用いた場合の第5範囲Yn(445nm+405nm)と、狭帯域光445nmを用いた場合の第5範囲Yn(445nm)の第1範囲との位置関係をそれぞれ比較してみても、第1範囲と第5範囲との差はそれほど無い。したがって、狭帯域B光を用いたとしても、第1範囲との差があまり大きくならないため、正常粘膜領域と発赤領域との色差をそれほど大きくすることはできない。
ただし、発赤領域の中でも、高度の発赤や出血のような高血液密度領域ではなく、軽度の発赤領域(軽度発赤領域)であれば、狭帯域B光を用いた場合における正常粘膜領域と軽度発赤領域の反射濃度の差は、広帯域B光を用いた場合よりも、大きくなる。したがって、狭帯域B光の使用により、正常領域と軽度の発赤領域の色差を大きくすることができる。
なお、上記では、撮像センサ48のBchに入射するB光を狭帯域化したときの第1信号比の変化(波長を狭帯域化すると、二次元空間上で第2〜第5範囲の位置が縦軸方向にシフトする)について説明したが、撮像センサ48のGchに入射するG光を狭帯域化させた場合についても、上記と同様の理由で説明することができる。即ち、狭帯域のG光(血液に対する光吸収が高い波長をもつG光)を用いた場合には、広帯域のG光を用いた場合よりも、第1範囲と第2範囲の差が大きくなる(波長を狭帯域化すると、二次元空間上で第2〜第5範囲が横軸方向にシフトする)。
なお、上記では、撮像センサ48のBchに入射するB光と撮像センサ48のGchに入射するG光のいずれか一方を狭帯域化したが、両方の光を狭帯域化してもよい。この場合には、波長の狭帯域化により、二次元空間上で第2〜第5範囲が縦軸方向と横軸方向にシフトする。ただし、縦軸方向のシフト量は、撮像センサ48のBchに入射するB光のみを狭帯域化した場合に比べて、小さくなる。これは、B光とG光の狭帯域化によりBch、Gchの吸収係数が共に増加するので、Bch、Gchの反射濃度の差は、Bchのみ狭帯域化した場合に比べて小さくなるためである。
上記実施形態では、第1及び第2信号比を極座標変換するとともに、極座標変換済みの第1範囲平均値と第2〜第5範囲内の信号値との動径差又は偏角差を拡張することにより、正常粘膜領域と異常領域の色の差を強調したが、これに限らず、その他の座標変換方法と色差強調方法を用いて、正常粘膜領域と異常領域の色の差を強調してもよい。なお、上記実施形態のような、極座標上で動径差又は偏角差を拡張する色差強調方法を用いて得られる強調画像は、正常粘膜領域の色が通常光画像の色と同じであるため、違和感がない。また、強調画像上における萎縮粘膜領域及び深層血管領域の色は、萎縮性胃炎時が生じた時の粘膜の色や血管透見したときの色と同じであるため、現在行っている萎縮性胃炎診断(例えばABC検診)と同様の方法で、診断を行うことができる。
なお、上記実施形態では、正常粘膜領域と異常領域の色差強調に、第1範囲平均値を用いたが、これに代えて、画像信号全体の画素値平均値を用いてもよい。この場合には、画像毎に萎縮粘膜や深層血管の色が変動するおそれがあるものの、画像上の各領域の分布に合わせて正常粘膜領域と異常領域の色の僅かな差を拡張できるというメリットがある。
なお、上記実施形態では、第1及び第2信号比を極座標変換し、その極座標変換済みの信号に対して動径差又は偏角差を拡張する拡張処理を行ったが、これら極座標変換処理や拡張処理を事前に行っておいて、処理結果を色差強調用LUTに記憶しておいてもよい。この場合には、第2〜第5範囲に属すると考えられる第1及び第2信号比について、上記式(1)〜(6)を用いて予め計算しておく。そして、第2〜第5範囲の第1及び第2信号比と、それら信号比を用いて計算したときの計算結果とを色差強調用LUTに対応付けて記憶しておく。また、第1範囲に属すると考えられる第1及び第2信号比については、それら信号比と同じ値を色差強調用LUTに対応付けて記憶しておく。このような色差強調用LUTを用いることで、極座標変換処理や拡張処理を行うことなく、異常領域の色差強調を行うことができるため、処理負荷を軽減することができる。
なお、上記実施形態では、色差強調部82で、異常領域と正常領域との色差を強調する色差強調処理を行ったが、粘膜の吸収物質に対して光吸収性が高い青色狭帯域成分(青色レーザ光及び青紫色レーザ光)を含む特殊光を用いることで、色差強調部82で色差強調処理を行わなくとも、正常粘膜領域と異常領域(萎縮粘膜領域、深層血管領域、BA領域、発赤領域)の色差を強調表示することができる。また、同様にして、粘膜の吸収物質に対して光吸収性が高い緑色狭帯域成分(例えば、540〜560nmの波長成分)を含む光を用いることで、色差強調部82で色差強調処理を行わなくとも、正常粘膜領域と異常領域(萎縮粘膜領域、深層血管領域、BA領域、発赤領域)の色差を強調表示することができる。
なお、上記第1実施形態では、蛍光体44を内視鏡12の先端部24に設けたが、これに代えて、蛍光体44を光源装置14内に設けてもよい。この場合には、ライトガイド41と青色レーザ光源34との間に、蛍光体44を設けることが好ましい。
[第2実施形態]
上記第1実施形態では、カラーの撮像センサでRGB画像信号を同時に取得しているが、第2実施形態では、モノクロの撮像センサでRGB画像信号を順次取得する。図19に示すように、第2実施形態の内視鏡システム200の光源装置14には、青色レーザ光源34、青紫色レーザ光源36、光源制御部40の代わりに、広帯域光源202、回転フィルタ204、フィルタ切替部205が設けられている。また、内視鏡12の照明光学系24aには、蛍光体44が設けられていない。また、撮像光学系24bには、カラーの撮像センサ48の代わりに、カラーフィルタが設けられていないモノクロの撮像センサ206が設けられている。それ以外については、第1実施形態の内視鏡システム10と同様である。
広帯域光源202はキセノンランプ、白色LEDなどであり、波長域が青色から赤色に及ぶ白色光を発する。回転フィルタ204は、内側に設けられた通常観察モード用フィルタ208と、外側に設けられた特殊観察モード用フィルタ209とを備えている(図20参照)。フィルタ切替部205は、回転フィルタ204を径方向に移動させるものであり、モード切替SW22bにより通常観察モードにセットされたときに、回転フィルタ204の通常観察モード用フィルタ208を白色光の光路に挿入し、特殊観察モードにセットされたときに、回転フィルタ204の特殊観察モード用フィルタ209を白色光の光路に挿入する。
図20に示すように、通常観察モード用フィルタ208には、周方向に沿って、白色光のうち青色光を透過させるBフィルタ208a、白色光のうち緑色光を透過させるGフィルタ208b、白色光のうち赤色光を透過させるRフィルタ208cが設けられている。したがって、通常観察モード時には、回転フィルタ204が回転することで、青色光、緑色光、赤色光が交互に検体内に照射される。
特殊観察モード用フィルタ209には、周方向に沿って、白色光のうち中心波長415nmの青色狭帯域光を透過させるBnフィルタ209aと、白色光のうち緑色光を透過させるGフィルタ209b、白色光のうち赤色光を透過させるRフィルタ209cが設けられている。したがって、特殊観察モード時には、回転フィルタ204が回転することで、青色狭帯域光、緑色光、赤色光が交互に検体内に照射される。
内視鏡システム200では、通常観察モード時には、青色光、緑色光、赤色光が検体内に照射される毎にモノクロの撮像センサ206で検体内を撮像する。これにより、RGBの3色の画像信号が得られる。そして、それらRGBの画像信号に基づいて、上記第1実施形態と同様の方法で、通常光画像が生成される。
一方、特殊観察モード時には、青色狭帯域光、緑色光、赤色光が検体内に照射される毎にモノクロの撮像センサ206で検体内を撮像する。これにより、Bn画像信号と、G画像信号、R画像信号が得られる。これらBn画像信号と、G画像信号、R画像信号に基づいて、特殊光画像の生成が行われる。特殊光画像の生成には、B画像信号の代わりに、Bn画像信号が用いられる。それ以外については、第1実施形態と同様の方法で特殊光画像の生成が行われる。
[第3実施形態]
第1実施形態の内視鏡システム10では、特殊光画像の作成に、青色レーザ光及び青紫色レーザ光の狭帯域波長情報が含まれる狭帯域信号であるB画像信号を用い、第2実施形態の内視鏡システム200では、特殊光画像の作成に、青色狭帯域光の狭帯域波長情報が含まれる狭帯域信号であるBn画像信号を用いているが、第3実施形態では、白色画像などの広帯域画像に基づく分光演算により青色狭帯域画像信号を生成し、この青色狭帯域画像を用いて特殊光画像を生成する。
この第3実施形態では、同時式の内視鏡システム10の特殊観察モード時において、特殊光の代わりに、広帯域光である白色光を照明する。そして、図21に示すように、受信部54と逆ガンマ変換部76との間に設けた分光演算部300において、白色光の発光・撮像により得られるRGB画像信号に基づく分光演算処理を行う。これにより、青色狭帯域画像信号が生成される。分光演算の方法は、特開2003-093336号公報に記載の方法を用いる。この分光演算部300で生成された青色狭帯域画像信号と、G画像信号、R画像信号に基づいて、上記第1実施形態と同様の手順で、特殊光画像を生成する。なお、白色光としては、蛍光体44により得られる白色光の他、キセノンランプなどの広帯域光源から発せられる広帯域光を用いてもよい。
なお、上記実施形態では、萎縮性胃炎により、粘膜が退色調になる例と萎縮粘膜下の深層血管が透見する例とを示したが、その他の部位の病変(例えば、食道の病変や大腸の病変など)によって、粘膜が退色調になる場合も存在する。本発明は、このような萎縮粘膜以外の退色調粘膜に対しても、正常領域との色差を強調することが可能である。また、本発明は、萎縮粘膜以外の退色調粘膜下の深層血管の透見についても、強調表示することが可能である。
なお、上記実施形態で示した第1〜第4拡張処理は、萎縮粘膜、深層血管、BA、発赤などの異常領域と正常粘膜との差を大きくする一方で、正常粘膜の色は変化させない。即ち、上記実施形態によれば、第1〜第4拡張処理の前後で、正常粘膜の色を維持した画像を表示することができる。
以上のように、正常粘膜の色を維持した画像を表示するためには、第1〜第4拡張処理を以下のような処理で行う必要がある。例えば、第1拡張処理、第3拡張処理、第4拡張処理のように動径を拡張する処理においては、図22Aに示すように、第1範囲を「rm−Δr1」から「rm+Δr2」と定義した場合、図23に示すように、第1範囲内の動径rを、動径rと大きさが変わらない動径Erに変換する(恒等変換)(例えば、動径rがrmの場合には、動径Erはrmとなる)。このように、第1範囲内の動径rを恒等変換することで、第1、3、4拡張処理を行ったとしても、画像上で正常粘膜の色を維持することができる。
これに対して、図22Aに示すように、第1範囲平均値rmよりも小さい第2範囲の動径riについては、図23に示すように、動径riよりも小さい動径Eriに変換する。また、図22Bに示すように、大部分が第1範囲平均値rmよりも大きい第4、第5範囲の動径rk、rjについては、動径rk、rjを、それら動径rk、rjよりも大きい動径Erk、Erjに変換する。なお、図23は、第1〜第5範囲を含む一定範囲の偏角θにおける動径rと動径Erとの対応関係を示しているが、偏角θ毎に異なる対応関係に設定してもよい。
また、第2拡張処理、第3拡張処理、第4拡張処理のように偏角を拡張する処理においては、図24Aに示すように、第1範囲を「θm−Δθ1」から「θm+Δθ2」と定義した場合、図25に示すように、第1範囲内の偏角θを、偏角θと大きさが変わらない偏角Eθに変換する(恒等変換)(例えば、偏角θがθmの場合には、偏角Eθはθmとなる)。このように、第1範囲内の偏角θを恒等変換することで、第2、3、4拡張処理を行ったとしても、画像上で正常粘膜の色を維持することができる。
これに対して、図24Aに示すように、第1範囲平均値θmよりも小さい第3範囲の偏角θvについては、図25に示すように、偏角θvよりも小さい偏角Eθv変換する。また、図24Bに示すように、大部分が第1範囲平均値θmよりも大きい第4範囲の偏角θkについては、図25に示すように、偏角θkよりも大きい偏角Eθkに変換する。また、図24Bに示すように、大部分が第1範囲平均値θmよりも小さい第5範囲の偏角θjについては、図25に示すように、偏角θjよりも小さい偏角Eθjに変換する。なお、図25では、「θm」は0°から90°の範囲で定義される角度である。したがって、「θm−90」は負の角度であり、「θm+90」は正の角度である。そのため、横軸は右側に位置するほど角度が大きく、また、縦軸は上側に位置するほど角度が大きい。
なお、上記実施形態では、本発明の実施を内視鏡の診断中に行ったが、これに限らず、内視鏡診断後、内視鏡システムの記録部に記録しておいた内視鏡画像に基づいて、本発明の実施を行ってもよく、また、カプセル内視鏡で取得したカプセル内視鏡画像に基づいて、本発明の実施を行ってもよい。
10,200 内視鏡システム
18 モニタ(表示部)
48、206 撮像センサ
80 信号比算出部
82 色差強調部
82a 平均値算出部

Claims (15)

  1. 3色の画像信号を入力する画像信号入力部と、
    前記3色の画像信号に基づいて、2色の画像信号間の第1信号比と、前記第1信号比と異なる2色の画像信号間の第2信号比を算出する信号比算出部と、
    第1範囲内の第1及び第2信号比と、前記第1範囲と異なる第2範囲内にある第1及び第2信号比との差を拡張する第1拡張処理を行う色差強調部と、
    前記第1拡張処理が施された第1及び第2信号比に基づいて、観察対象上の正常粘膜と第1異常領域との色差を強調した画像を表示する表示部と、
    を備えることを特徴とする画像処理装置。
  2. 前記第1拡張処理は、前記第1範囲内の第1及び第2信号比と前記第2範囲内の第1及び第2信号比との動径差を拡張する処理であることを特徴とする請求項1記載の画像処理装置。
  3. 前記動径差を拡張する処理は、前記第1範囲内の第1及び第2信号比と前記第2範囲内の第1及び第2信号比を極座標変換した信号に基づいて行われることを特徴とする請求項2記載の画像処理装置。
  4. 前記第1拡張処理により、前記第1異常領域の彩度が低下することを特徴とする請求項1ないし3いずれか1項記載の画像処理装置。
  5. 前記第1異常領域は、萎縮粘膜を含む退色調粘膜であることを特徴とする請求項1記載の画像処理装置。
  6. 前記第1拡張処理は、前記第1範囲の第1及び第2信号比を維持した状態で、前記第1範囲の第1及び第2信号比と前記第2範囲の第1及び第2信号比との差を拡張し、
    前記表示部は、前記正常粘膜の色を維持した画像を表示することを特徴とする請求項1ないし3いずれか1項記載の画像処理装置。
  7. 前記色差強調部は、前記第1拡張処理に加えて、前記第1範囲内の第1及び第2信号比と、前記第1及び第2の範囲と異なる第3範囲内の第1及び第2信号比との差を拡張する第2拡張処理を行い、
    前記表示部は、前記観察対象上の正常粘膜と第1異常領域との色差を強調することに加えて、前記観察対象上の正常粘膜と第2異常領域との色差を強調した画像を表示することを特徴とする請求項1記載の画像処理装置。
  8. 前記第2拡張処理は、前記第1範囲内の第1及び第2信号比と前記第2範囲内の第1及び第2信号比との偏角差を拡張する処理であることを特徴とする請求項7記載の画像処理装置。
  9. 前記偏角差を拡張する処理は、前記第1範囲内の第1及び第2信号比と前記第3範囲内の第1及び第2信号比を極座標変換した信号に基づいて行われることを特徴とする請求項8記載の画像処理装置。
  10. 前記第2拡張処理により、前記第2異常領域の色相が変化して、前記第2異常領域の下の血管が透見することを特徴とする請求項7ないし9いずれか1項記載の画像処理装置。
  11. 前記第2拡張処理は、前記第1範囲の第1及び第2信号比を維持した状態で、前記第1範囲の第1及び第2信号比と前記第3範囲の第1及び第2信号比との差を拡張し、
    前記表示部は、前記正常粘膜の色を維持した画像を表示することを特徴とする請求項7ないし9いずれか1項記載の画像処理装置。
  12. 前記第1範囲内にある第1及び第2信号比の平均値を算出する平均値算出部を有し、
    前記色差強調部は、前記平均値と前記第2範囲内にある第1及び第2信号比の差を拡張するとともに、前記平均値と前記第3範囲内にある第1及び第2信号比の差を拡張することを特徴とする請求項7記載の画像処理装置。
  13. 前記第1ないし第3範囲のうち高輝度エリア又は低輝度エリアについては、前記色差の強調を抑制する抑制処理を行うことを特徴とする請求項7記載の画像処理装置。
  14. 前記第1信号比はB画像信号とG画像信号間のB/G比であり、前記第2信号比はG信号とR画像信号間のG/R比であることを特徴とする請求項1または7記載の画像処理装置。
  15. 画像信号入力部が、3色の画像信号を入力するステップと、
    信号比算出部が、前記3色の画像信号に基づいて、2色の画像信号間の第1信号比と、前記第1信号比と異なる2色の画像信号間の第2信号比を算出するステップと、
    色差強調部が、第1範囲内の第1及び第2信号比と、前記第1範囲と異なる第2範囲内にある第1及び第2信号比との差を拡張する第1拡張処理を行うステップと、
    表示部が、前記第1拡張処理が施された第1及び第2信号比に基づいて、観察対象上の正常粘膜と第1異常領域との色差を強調した画像を表示するステップと、
    を有することを特徴とする内視鏡システムの作動方法。
JP2014538551A 2013-03-27 2014-03-20 画像処理装置及び内視鏡システムの作動方法 Active JP5647752B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014538551A JP5647752B1 (ja) 2013-03-27 2014-03-20 画像処理装置及び内視鏡システムの作動方法

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2013066284 2013-03-27
JP2013066284 2013-03-27
JP2013201274 2013-09-27
JP2013201274 2013-09-27
JP2014538551A JP5647752B1 (ja) 2013-03-27 2014-03-20 画像処理装置及び内視鏡システムの作動方法
PCT/JP2014/057715 WO2014156938A1 (ja) 2013-03-27 2014-03-20 画像処理装置及び内視鏡システムの作動方法

Publications (2)

Publication Number Publication Date
JP5647752B1 true JP5647752B1 (ja) 2015-01-07
JPWO2014156938A1 JPWO2014156938A1 (ja) 2017-02-16

Family

ID=51623917

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014538551A Active JP5647752B1 (ja) 2013-03-27 2014-03-20 画像処理装置及び内視鏡システムの作動方法

Country Status (5)

Country Link
US (1) US9545187B2 (ja)
EP (1) EP2979618B1 (ja)
JP (1) JP5647752B1 (ja)
CN (1) CN105101862B (ja)
WO (1) WO2014156938A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015198890A (ja) * 2014-03-31 2015-11-12 富士フイルム株式会社 医用画像処理装置及びその作動方法並びに内視鏡システム
WO2016208748A1 (ja) * 2015-06-25 2016-12-29 Hoya株式会社 内視鏡システム及び評価値計算装置
US9913568B2 (en) 2015-07-28 2018-03-13 Fujifilm Corporation Image processing device, method for operating the same, and endoscope system
US11328415B2 (en) 2017-06-15 2022-05-10 Fujifilm Corporation Medical image processing device, endoscope system, and method of operating medical image processing device

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5932894B2 (ja) 2014-03-24 2016-06-08 富士フイルム株式会社 医用画像処理装置及びその作動方法
JP5972312B2 (ja) * 2014-03-24 2016-08-17 富士フイルム株式会社 医用画像処理装置及びその作動方法
JP2016107003A (ja) * 2014-12-10 2016-06-20 富士フイルム株式会社 医用画像処理装置及びその作動方法
DE112016000094B4 (de) 2015-08-13 2019-07-11 Hoya Corporation Vorrichtung zur Berechnung von Analysewerten und elektronisches Endoskopsystem
DE112016000095B4 (de) * 2015-08-13 2019-07-11 Hoya Corporation Vorrichtung zur Berechnung von Analysewerten und elektronisches Endoskopsystem
JP6461760B2 (ja) * 2015-09-25 2019-01-30 富士フイルム株式会社 画像処理装置、及び画像処理装置の作動方法、並びに内視鏡システム
CN107072509B (zh) * 2015-09-30 2019-03-19 Hoya株式会社 内窥镜系统以及评价值计算装置
JP6581923B2 (ja) * 2016-03-03 2019-09-25 富士フイルム株式会社 画像処理装置とその作動方法および作動プログラム
JP6495539B2 (ja) * 2016-03-29 2019-04-03 富士フイルム株式会社 画像処理装置、画像処理装置の作動方法、および画像処理プログラム
WO2018142658A1 (ja) * 2017-02-01 2018-08-09 オリンパス株式会社 画像処理装置、画像処理装置の作動方法、及び画像処理装置の作動プログラム
US10580157B2 (en) * 2017-08-04 2020-03-03 Capsovision Inc Method and apparatus for estimating area or volume of object of interest from gastrointestinal images
WO2019093355A1 (ja) 2017-11-13 2019-05-16 富士フイルム株式会社 内視鏡システム及びその作動方法
WO2019159435A1 (ja) * 2018-02-13 2019-08-22 Hoya株式会社 内視鏡システム
WO2021060158A1 (ja) * 2019-09-24 2021-04-01 富士フイルム株式会社 内視鏡システム及びその作動方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01138876A (ja) * 1987-11-26 1989-05-31 Toshiba Corp カラー画像処理装置
JP3228627B2 (ja) 1993-03-19 2001-11-12 オリンパス光学工業株式会社 内視鏡用画像処理装置
JP2003093336A (ja) 2001-09-26 2003-04-02 Toshiba Corp 電子内視鏡装置
US7167276B2 (en) * 2002-10-22 2007-01-23 Canon Kabushiki Kaisha Data conversion between color coordinate systems
JP4554647B2 (ja) * 2003-04-25 2010-09-29 オリンパス株式会社 画像表示装置、画像表示方法および画像表示プログラム
JP4493386B2 (ja) * 2003-04-25 2010-06-30 オリンパス株式会社 画像表示装置、画像表示方法および画像表示プログラム
JP2009000344A (ja) * 2007-06-22 2009-01-08 Olympus Corp 内視鏡装置
JP5767775B2 (ja) * 2009-07-06 2015-08-19 富士フイルム株式会社 内視鏡装置
JP2011024628A (ja) * 2009-07-21 2011-02-10 Olympus Corp 画像処理装置、画像処理プログラムおよび画像処理方法
JP5597049B2 (ja) * 2010-07-07 2014-10-01 オリンパス株式会社 画像処理装置、画像処理方法、および画像処理プログラム
JP5582948B2 (ja) * 2010-09-29 2014-09-03 富士フイルム株式会社 内視鏡装置
JP5303012B2 (ja) * 2010-12-15 2013-10-02 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法
EP2979617B1 (en) * 2013-03-27 2020-02-19 FUJIFILM Corporation Image processing device, and method for operating endoscope system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015198890A (ja) * 2014-03-31 2015-11-12 富士フイルム株式会社 医用画像処理装置及びその作動方法並びに内視鏡システム
WO2016208748A1 (ja) * 2015-06-25 2016-12-29 Hoya株式会社 内視鏡システム及び評価値計算装置
JPWO2016208748A1 (ja) * 2015-06-25 2017-06-29 Hoya株式会社 内視鏡システム及び評価値計算装置
US9913568B2 (en) 2015-07-28 2018-03-13 Fujifilm Corporation Image processing device, method for operating the same, and endoscope system
US11328415B2 (en) 2017-06-15 2022-05-10 Fujifilm Corporation Medical image processing device, endoscope system, and method of operating medical image processing device

Also Published As

Publication number Publication date
US9545187B2 (en) 2017-01-17
EP2979618B1 (en) 2018-11-28
CN105101862A (zh) 2015-11-25
JPWO2014156938A1 (ja) 2017-02-16
EP2979618A1 (en) 2016-02-03
EP2979618A4 (en) 2016-07-06
WO2014156938A1 (ja) 2014-10-02
US20160007829A1 (en) 2016-01-14
CN105101862B (zh) 2017-04-12

Similar Documents

Publication Publication Date Title
JP5647752B1 (ja) 画像処理装置及び内視鏡システムの作動方法
JP5662623B1 (ja) 画像処理装置及び内視鏡システムの作動方法
JP6151372B2 (ja) 画像処理装置及びその作動方法
JP6495539B2 (ja) 画像処理装置、画像処理装置の作動方法、および画像処理プログラム
JP6461739B2 (ja) 画像処理装置及び内視鏡システム並びに画像処理装置の作動方法
JP5501210B2 (ja) 画像処理装置
JP5789280B2 (ja) プロセッサ装置、内視鏡システム、及び内視鏡システムの作動方法
JP6259747B2 (ja) プロセッサ装置、内視鏡システム、プロセッサ装置の作動方法、及びプログラム
JP6054806B2 (ja) 画像処理装置及び内視鏡システムの作動方法
WO2014132741A1 (ja) 画像処理装置及び内視鏡システムの作動方法
JP5334952B2 (ja) 画像処理装置
US20190246874A1 (en) Processor device, endoscope system, and method of operating processor device
JP6669539B2 (ja) 画像処理装置、画像処理装置の作動方法、および画像処理プログラム
JP6855610B2 (ja) 画像処理装置、画像処理装置の作動方法、および画像処理プログラム
JP6383829B2 (ja) 医用画像処理装置及びその作動方法並びに内視鏡システム

Legal Events

Date Code Title Description
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20140922

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141008

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141107

R150 Certificate of patent or registration of utility model

Ref document number: 5647752

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250