JP2018033719A - 内視鏡システム及び内視鏡システムの作動方法 - Google Patents

内視鏡システム及び内視鏡システムの作動方法 Download PDF

Info

Publication number
JP2018033719A
JP2018033719A JP2016169957A JP2016169957A JP2018033719A JP 2018033719 A JP2018033719 A JP 2018033719A JP 2016169957 A JP2016169957 A JP 2016169957A JP 2016169957 A JP2016169957 A JP 2016169957A JP 2018033719 A JP2018033719 A JP 2018033719A
Authority
JP
Japan
Prior art keywords
imaging
image
light
period
light source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016169957A
Other languages
English (en)
Other versions
JP6654117B2 (ja
Inventor
矢野　孝
Takashi Yano
孝 矢野
小澤　聡
Satoshi Ozawa
聡 小澤
健一 大谷
Kenichi Otani
健一 大谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2016169957A priority Critical patent/JP6654117B2/ja
Priority to EP17184007.7A priority patent/EP3289957B1/en
Publication of JP2018033719A publication Critical patent/JP2018033719A/ja
Application granted granted Critical
Publication of JP6654117B2 publication Critical patent/JP6654117B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655—Control therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2407—Optical details
    • G02B23/2461—Illumination
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2476—Non-optical details, e.g. housings, mountings, supports
    • G02B23/2484—Arrangements in relation to a camera or imaging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/533—Control of the integration time by using differing integration times for different sensor regions
    • H04N25/534—Control of the integration time by using differing integration times for different sensor regions depending on the spectral component
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163—Optical arrangements
    • A61B1/00188—Optical arrangements with focusing or zooming features
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/041—Capsule endoscopes for imaging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10068—Endoscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30101—Blood vessel; Artery; Vein; Vascular

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Optics & Photonics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Signal Processing (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)

Abstract

【課題】蓄積期間等の調節が可能なイメージセンサの利点を享受しつつ、かつ、観察画像の表示レートを維持する内視鏡システム及び内視鏡システムの作動方法を提供する。【解決手段】内視鏡システム１０は、照明光を発生する光源部２０と、蓄積期間と読出期間とからなる撮像フレームの単位で照明光を用いて観察対象を撮像するイメージセンサ４８と、撮像フレームごとに照明光の波長帯域または分光スペクトルを変更する光源制御部２２と、照明光の波長帯域または分光スペクトルが異なる複数の撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する画像処理部６１と、観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームの蓄積期間及び読出期間の合計時間を一定に保ち、かつ、一定の合計時間において各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮する撮像制御部５３と、を備える。【選択図】図２

Description

本発明は、内視鏡システム及び内視鏡システムの作動方法に関する。
医療分野においては、光源装置、内視鏡、及び、プロセッサ装置を備える内視鏡システムを用いて診断することが一般的になっている。光源装置は照明光を発生する。内視鏡は、イメージセンサを用いて観察対象を撮像する。そして、プロセッサ装置は観察対象の画像を生成し、モニタに表示する。
イメージセンサには、観察対象からの光を光電変換して電荷を蓄積し得る最大期間である期間（以下、蓄積期間という）等の長さを調節可能なものがある。蓄積期間等の長さを調節可能なイメージセンサがカラーセンサである場合には、例えばＲＧＢの各色ごとに蓄積期間等の長さを調節することができる。例えば、特許文献１の内視鏡システムにおいては、赤色光を受光する赤色画素の蓄積期間を、他の色の光を受光する画素の蓄積期間よりも長くすることで、画質を向上している（特許文献１）。
特開２０１６−０８６９５５号公報
近年の内視鏡システムにおいては、蓄積期間等の調節が可能なイメージセンサを搭載する場合がある。蓄積期間等の調節が可能なイメージセンサを用いると、上記特許文献１のように、蓄積期間等の長さを調節して、モニタに表示する観察用の画像（以下、観察画像という）の画質を向上することができる等の利点がある。
一方、観察画像をモニタに表示する際のフレームレート（以下、表示レートという）は一定以上であることが求めらる。これは、モニタに表示する観察画像を見て、ストレスなく診断等をするためである。内視鏡システムが複数の観察モードを有する場合には、表示レートは観察モードごとに比較すれば異なる場合があるが、通常は、表示品質を確保する等のために、少なくとも観察モードごとに一定になっている。
イメージセンサは撮像フレームの単位で観察対象を撮像するので、蓄積期間等が調節可能なイメージセンサを用いる場合に蓄積期間等を延長または短縮すると、連続して観察対象を撮像する際に、少なくとも部分的に撮像フレームの長さが変化する場合がある。すなわち、蓄積期間等が調節可能であるからといって蓄積期間等を任意に延長または短縮すると撮像画像の取得タイミングが変化し、その結果として、表示遅延等、観察画像の表示に不具合が生じる場合がある。蓄積期間等の調節に起因して例えば観察画像の画質が向上したとしても、観察画像の表示に遅延等が生じれば観察対象を観察し難くなってしまう。
したがって、蓄積期間等が調節可能なイメージセンサを用いる場合でも、ストレスなく診断等をすることができるようにするためには、観察画像の表示レートを維持できる範囲内で蓄積期間等を調節することが望ましい。特に、複数の撮像フレームにおいてそれぞれ取得する撮像画像の組（以下、複数の撮像画像という）を用いて１枚の観察画像を生成する場合には、複数の撮像画像を用いた演算等をするので、観察画像の表示遅延等が起こりやすくなる。
本発明は、蓄積期間等の調節が可能なイメージセンサの利点を享受しつつ、かつ、観察画像の表示レートを維持する内視鏡システム及び内視鏡システムの作動方法を提供することを目的とする。
本発明の内視鏡システムは、照明光を発生する光源部と、画素に電荷を蓄積し得る最大期間である蓄積期間と画素から信号を読み出す読出期間とからなる撮像フレームの単位で照明光を用いて観察対象を撮像するイメージセンサと、撮像フレームごとに照明光の波長帯域または分光スペクトルを変更する光源制御部と、照明光の波長帯域または分光スペクトルが異なる複数の撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する画像処理部と、観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームの蓄積期間及び読出期間の合計時間を一定に保ち、かつ、一定の合計時間において各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮する撮像制御部と、を備える。
撮像制御部は、各々の撮像フレームにおける照明光の波長帯域、分光スペクトル、または光量に起因して、各々の撮像フレームの蓄積期間または読出期間を延長または短縮することが好ましい。
撮像制御部は、照明光の波長帯域が狭いほど蓄積期間を長くすることが好ましい。
撮像制御部は、照明光の光量が小さいほど蓄積期間を長くすることが好ましい。
撮像制御部は、撮像画像が暗くなる照明光または撮像画像のコントラストが小さくなる照明光を使用する撮像フレームほど、蓄積期間を長くすることが好ましい。
撮像制御部は、照明光の光量が最大光量に達する撮像フレームの蓄積期間を延長することが好ましい。
撮像制御部は、蓄積期間を延長する撮像フレームとは別の撮像フレームにおいて読出期間を短縮することが好ましい。
撮像制御部は、１つの撮像フレームの長さを一定に保ち、かつ、１つの撮像フレームにおける蓄積期間と読出期間の長さを延長または短縮することが好ましい。
光源制御部は、蓄積期間及び読出期間において照明光を点灯することが好ましい。
各々の撮像フレームにおいて共通に取得する色の撮像画像を用いて、観察対象の静止度を算出する静止度算出部を備えることが好ましい。
本発明の内視鏡システムの作動方法は、照明光を発生する光源部と、画素に電荷を蓄積し得る最大期間である蓄積期間と画素から信号を読み出す読出期間とからなる撮像フレームの単位で照明光を用いて観察対象を撮像するイメージセンサと、撮像フレームごとに照明光の波長帯域または分光スペクトルを変更する光源制御部と、照明光の波長帯域または分光スペクトルが異なる複数の撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する画像処理部と、を有する内視鏡システムの作動方法において、撮像制御部が、観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームの蓄積期間及び読出期間の合計時間を一定に保ち、かつ、一定の合計時間において各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮する。
本発明の内視鏡システム及び内視鏡システムの作動方法は、観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームの蓄積期間及び読出期間の合計時間を一定に保ち、かつ、一定の合計時間において各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮するので、蓄積期間等の調節が可能なイメージセンサの利点を享受しつつ、かつ、観察画像の表示レートを維持することができる。
内視鏡システムの外観図である。 内視鏡システムのブロック図である。 光源部の構成を示すブロック図である。 イメージセンサの画素配列を示す説明図である。 蓄積時間等を調節しない場合のイメージセンサの動作と照明光の関係を示すタイミングチャートである。 本発明のイメージセンサの動作と照明光の関係を示すタイミングチャートである。 マルチフレーム観察モードとして酸素飽和度観察モードを設ける場合の光源部の構成を示すブロック図である。 酸化ヘモグロビン及び還元ヘモグロビンの吸光係数を示すグラフである。 マルチフレーム観察モードとして酸素飽和度観察モードを設ける場合の画像処理部の構成を示すブロック図である。 信号比と酸素飽和度の相関関係を示すグラフである。 マルチフレーム観察モードとして特定深さ強調観察モードを設ける場合の光源部の構成を示すブロック図である。 マルチフレーム観察モードとして特定深さ強調観察モードを設ける場合の画像処理部の構成を示すブロック図である。 マルチフレーム観察モードとして深層血管強調観察モードを設ける場合の光源部の構成を示すブロック図である。 マルチフレーム観察モードとして深層血管強調観察モードを設ける場合の画像処理部の構成を示すブロック図である。 マルチフレーム観察モードとして狭帯域観察モードを設ける場合の光源部の構成を示すブロック図である。 読出期間を短縮する場合のイメージセンサの動作と照明光の関係を示すタイミングチャートである。 酸素飽和度観察モードにおいて読出期間にも照明光を点灯する場合のイメージセンサの動作と照明光の関係を示すタイミングチャートである。 読出期間にも照明光を点灯する場合のプロセッサ装置のブロック図である。 カプセル内視鏡の概略図である。
図１に示すように、内視鏡システム１０は、観察対象を撮像する内視鏡１２と、照明光を発生する光源装置１４と、観察対象を撮像して得た画像（以下、撮像画像という）を用いて観察用の画像（以下、観察画像という）を生成するプロセッサ装置１６と、観察画像を表示するモニタ１８と、ユーザインタフェースの１つであるコンソール１９と、を有する。内視鏡１２は、光源装置１４と光学的に接続し、かつ、プロセッサ装置１６と電気的に接続する。内視鏡１２は、被検体内に挿入する挿入部１２ａと、挿入部１２ａの基端部分にある操作部１２ｂと、挿入部１２ａの先端側に設けられた湾曲部１２ｃと、先端部１２ｄと、を有している。挿入部１２ａにあるアングルノブ１２ｅを操作すると、湾曲部１２ｃが湾曲する。湾曲部１２ｃが湾曲した結果、先端部１２ｄが所望の方向に向く。なお、先端部１２ｄには、観察対象に向けて空気または水等を噴出する噴出口（図示しない）が設けられている。
また、操作部１２ｂには、アングルノブ１２ｅの他、モード切り替えスイッチ１３ａ及びズーム操作部１３ｂが設けられている。モード切り替えスイッチ１３ａは、内視鏡システム１０が複数の観察モードを有する場合に、観察モードの切り替え操作に用いる。内視鏡システム１０は、シングルフレーム観察モードとマルチフレーム観察モードの２種類の観察モードを有する。シングルフレーム観察モードにおいては、１つの撮像フレームにおいて得られる１または複数の撮像画像を用いて観察画像を生成する。マルチフレーム観察モードにおいては、複数の撮像フレームにおいて得られる複数の撮像画像を用いて１つの観察画像を生成する。
図２に示すように、光源装置１４は、照明光を発生する光源部２０と、光源部２０を制御する光源制御部２２と、を備える。図３に示すように、光源部２０は、例えば、第１光源２４、第２光源２５、及び第３光源２６等の複数の光源を有している。これらの各光源は、各々独立に制御可能である。すなわち、第１光源２４、第２光源２５、及び第３光源２６は、各々独立に点灯または消灯することができる。また、第１光源２４、第２光源２５、及び第３光源２６は、点灯する際の発光量（以下、単に光量という）をそれぞれ任意に調節できる。光源部２０はこれら複数の光源のうちいずれかまたは全てを点灯または消灯し、かつ、点灯する光源の光量を調節することで、波長帯域または分光スペクトルが異なる複数種類の照明光を発光する。
照明光の色は、概ね照明光が含む光成分の波長帯域によって決まる。このため、照明光の波長帯域が異なるとは、照明光の色が異なることを言う。また、波長帯域が同じでも分光スペクトルが変われば、すなわち各波長における光成分の量が変われば、照明光の色は変化する。このため、照明光の分光スペクトルが異なるとは、照明光の色が異なることを言う。すなわち、波長帯域または分光スペクトルが異なる複数種類の照明光とは、色が異なる複数種類の照明光である。
第１光源２４は、例えば青色の光（以下、Ｂ光という）を発光する青色光源である。青色とは、主に約４００ｎｍから約５００ｎｍ程度の波長帯域に属する波長を有する光の色を言う。第２光源２５は、例えば緑色の光（以下、Ｇ光という）を発光する緑色光源である。緑色とは主に約５００ｎｍから約６００ｎｍ程度の波長帯域に属する波長を有する光の色を言う。第３光源２６は、例えば赤色の光（以下、Ｒ光という）を発光する赤色光源である。赤色とは、主に約６００ｎｍから約７００ｎｍ程度の波長帯域に属する波長を有する光の色を言う。本実施形態においては、シングルフレーム観察モードの場合、光源部２０は、Ｂ光、Ｇ光、及びＲ光を含む白色光を発光する。一方、本実施形態においては、マルチフレーム観察モードの場合、光源部２０は、Ｂ光、Ｇ光、またはＲ光のうち１以上を用いて、互いに波長帯域または分光スペクトルが異なる第１光及び第２光を発光する。
また、第１光源２４、第２光源２５、及び第３光源２６等の光源部２０が備える光源は、例えば、ＬＥＤ(Light Emitting Diode)等の半導体光源である。この他、光源部２０が備える光源には、ＬＥＤの代わりに、ＬＤ（Laser Diode）等の他の半導体光源を用いても良い。半導体光源と、半導体光源が発光する光を励起光として他の色の光を発光する蛍光体等を組み合わせて用いても良い。キセノンランプ等のランプ光源も光源部２０に使用しても良い。また、半導体光源、半導体光源と蛍光体、及び、ランプ光源とともに波長帯域または分光スペクトルを調節する光学フィルタを組み合わせて光源部２０の光源を構成しても良い。例えば、白色ＬＥＤに光学フィルタを組み合わせて使用することで、複数種類の照明光を発光することができる。
光源制御部２２は、第１光源２４、第２光源２５、及び第３光源２６等の光源部２０が備える複数の光源の点灯、消灯、及び光量を、イメージセンサ４８の駆動タイミングに合わせて各々に制御する。特に、複数の撮像画像を用いて１枚の観察画像を生成する場合（すなわちマルチフレーム観察モード）においては、光源制御部２２は、上記各光源の制御の結果、観察画像の生成に使用する複数の撮像画像を得る各々の撮像フレームごとに照明光の波長帯域または分光スペクトルを変更する。なお、点灯とは、イメージセンサ４８において観察対象を撮像できる程度（すなわち観察画像において観察対象の像を視認できる程度）の光量で発光することを言う。消灯とは、完全に発光を停止することの他、イメージセンサ４８において観察対象を撮像し得ない程度の光量に減光することを含む。また、光源部２０が備える各光源が半導体光源である場合、光源制御部２２は、パルス変調制御によって、各光源の点灯、消灯、及び光量を制御する。
光源部２０が発生した照明光は、ライトガイド４１に入射する。ライトガイド４１は、内視鏡１２及びユニバーサルコード内に内蔵されており、照明光を内視鏡１２の先端部１２ｄまで伝搬する。ユニバーサルコードは、内視鏡１２と光源装置１４及びプロセッサ装置１６とを接続するコードである。なお、ライトガイド４１としては、マルチモードファイバを使用できる。一例として、コア径１０５μｍ、クラッド径１２５μｍ、外皮となる保護層を含めた径がφ０．３〜０．５ｍｍの細径なファイバケーブルを使用できる。
内視鏡１２の先端部１２ｄには、照明光学系３０ａと撮影光学系３０ｂが設けられている。照明光学系３０ａは、照明レンズ４５を有しており、この照明レンズ４５を介して照明光を観察対象に照射する。撮影光学系３０ｂは、対物レンズ４６、ズームレンズ４７、及びイメージセンサ４８を有している。イメージセンサ４８は、対物レンズ４６及びズームレンズ４７を介して、観察対象から戻る照明光の反射光等（反射光の他、散乱光、観察対象が発する蛍光、または、観察対象に投与等した薬剤に起因した蛍光等を含む）を用いて観察対象を撮影する。なお、ズームレンズ４７は、ズーム操作部１３ｂの操作をすることで移動し、イメージセンサ４８を用いて撮影する観察対象を拡大または縮小する。
イメージセンサ４８は、画素Ｐｘ（図４参照）に電荷を蓄積し得る最大期間である蓄積期間と、蓄積期間において電荷を蓄積した画素Ｐｘから信号を読み出す読出期間とからなる撮像フレームの単位で照明光を用いて観察対象を撮像する。また、イメージセンサ４８は、例えばＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサであり、蓄積期間の長さ、及び、読出期間の長さを任意に調節できる。蓄積期間または読出期間の長さを調節すると、撮像フレームの長さが変化する場合がある。また、本実施形態においては蓄積期間の全てにおいて各画素Ｐｘが電荷を蓄積する。但し、蓄積期間は上記の通り電荷を蓄積し得る最大期間であって、必ずしも蓄積期間の全てにおいて電荷を蓄積しなくて良い。例えば、実際に観察対象を撮像する際には、観察対象または内視鏡１２の動き等（例えば明るさの変化）に起因して、実際に電荷を蓄積する最適な時間の長さは変化する。このため、内視鏡システム１０においては、蓄積期間に対して、電荷を蓄積する実際の時間の長さを微調節する場合がある。電荷を蓄積する実際の時間の長さを微調節は、例えば、イメージセンサ４８のいわゆる電子シャッター機能（最大を「蓄積期間」とした“実際に電荷を蓄積する時間の長さ”の調節）または各光源のパルス発光（発光時間の実質的な長さの調節）によって行う。
また、イメージセンサ４８は、いわゆる原色系のカラーセンサである。すなわち、イメージセンサ４８の各画素は、青色の光を透過する青色カラーフィルタ、緑色の光を透過する緑色カラーフィルタ、または、赤色の光を透過する赤色カラーフィルタのうちいずれかを有する。青色カラーフィルタを有する画素ＰｘがＢ画素（「Ｂ」）であり、緑色カラーフィルタを有する画素ＰｘがＧ画素（「Ｇ」）であり、赤色カラーフィルタを有する画素ＰｘがＲ画素（「Ｒ」）である。例えば、照明光が第１光源２４が発光するＢ光と第２光源２５が発光するＧ光と第３光源２６が発光するＲ光とを含む場合、イメージセンサ４８は、観察対象によるＢ光の反射光をＢ画素で受光し、観察対象によるＧ光の反射光をＧ画素で受光し、かつ、観察対象によるＲ光の反射光をＲ画素で受光する。
図４に示すように、イメージセンサ４８は、ＲＧＢ各色の画素Ｐｘを配列した撮像面を有する。具体的には、奇数番目の画素行（図４において横方向に並んだ画素の組）にはＢ画素とＧ画素を交互に配列してあり、かつ、偶数番目の画素行にはＧ画素とＲ画素を交互に配列してある。また、列方向（図４の縦方向）に見れば、Ｂ画素を含む画素列はＢ画素とＧ画素が交互に配列してあり、かつ、Ｒ画素を含む画素列はＧ画素とＲ画素が交互に配列してある。
イメージセンサ４８がＣＭＯＳセンサなので各画素ごとに信号の読み出し及びリセット等を任意に行うことができるが、本実施形態においては、イメージセンサ４８は信号の読み出し及びリセット等の動作を画素行ごとにまとめて行う。また、イメージセンサ４８は、信号の読み出し及びリセット等の動作を任意の画素行を選択して行うことができるが、本実施形態においては、行番号が小さい順に全ての画素行の信号の読み出し及びリセットを順次行う。すなわち、本実施形態においては、イメージセンサ４８の信号の読み出し方式は、いわゆるプログレッシブ方式である。
また、イメージセンサ４８の読み出し方式は、いわゆるローリングシャッタ方式である。すなわち、イメージセンサ４８の各画素Ｐｘは、各画素Ｐｘの信号の読み出しを行って各画素が蓄積した電荷を破棄（リセット）すると、光電変換により電荷を蓄積し得る状態になる。前述のとおり、イメージセンサ４８は画素行ごとに順次信号の読み出し及びリセットを行うので、１回の撮像において光電変換により電荷を蓄積し得る期間の開始及び終了のタイミングには画素行ごとにずれがある。
プロセッサ装置１６は、制御部５２と、画像取得部５４と、画像処理部６１と、表示制御部６６と、を有する。
制御部５２は、内視鏡システム１０を統括的に制御するＣＰＵ（Central Processing Unit）等であり、少なくともイメージセンサ４８の動作を制御する撮像制御部５３を含む。例えば、制御部５２は、モード切り替えスイッチ１３ａからモード切り替え信号の入力を受けて、光源制御部２２、撮像制御部５３、及び画像処理部６１等に制御信号を入力することにより、観察モードを切り替える。また、制御部５２は、光源部２０における照明光の発光タイミングとイメージセンサ４８における撮影フレームの同期制御を行う。具体的には、制御部５２の同期制御の結果、光源制御部２２は、蓄積期間において光源部２０から照明光を発光し、読出期間においては照明光を消灯する。特に、マルチフレーム観察モードの場合、制御部５２による同期制御の結果、光源制御部２２は、観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームごとに、照明光の波長帯域または分光スペクトルを変更する。
撮像制御部５３は、蓄積期間と読出期間とに分けてイメージセンサ４８を制御する。蓄積期間とは、どの画素行からも信号の読み出しをせずに、イメージセンサ４８の全ての画素Ｐｘが照明光の反射光等を各々受光して電荷を蓄積する期間である。読出期間とは、蓄積期間に続き、イメージセンサ４８の各画素Ｐｘから信号を読み出す期間である。また、本実施形態においては、撮像制御部５３は、信号の読み出し後直ちに画素Ｐｘが蓄積した電荷を破棄して、画素Ｐｘのリセットを行う。すなわち、読出期間には、信号の読み出し及びリセットを行う。
シングルフレーム観察モードの場合、撮像制御部５３は、蓄積期間と読出期間を一定の時間ごとに（例えば１／６０秒ごとに）交互に繰り返すようにイメージセンサ４８を制御する。したがって、シングルフレーム観察モードにおいては、撮像フレームの長さは一定である。
一方、マルチフレーム観察モードの場合、撮像制御部５３は、蓄積期間の長さと読出期間の長さのうちいずれか一方、または、蓄積期間の長さ及び読出期間の長さを調節する。このとき、撮像制御部５３は、観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームの蓄積期間及び読出期間の合計時間を一定に保ち、かつ、この一定の合計時間において各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮する。
例えば、マルチフレーム観察モードにおいて、観察画像の生成にＮ個（「Ｎ」は所定整数）の撮像フレーム（以下、Ｎ撮像フレームという。Ｎが具体的な数値の場合も同様。）において得る複数の撮像画像を使用する場合、１撮像フレームの標準長さを「ｆ」秒（例えば２／６０秒）とすると、蓄積期間の標準長さはｆ／２秒（例えば１／６０秒）であり、読出期間の標準長さはｆ／２秒（例えば１／６０秒）であり、かつ、Ｎ撮像フレーム分の蓄積期間及び読出期間の合計時間ＴNはＮ×ｆ秒（例えば２Ｎ／６０秒）である。撮像制御部５３は、この合計時間ＴNは一定に保つという条件内で、各撮像フレームにおける蓄積期間の長さと読出期間の長さのうちいずれか一方、または、蓄積期間の長さ及び読出期間の長さを調節する。例えば、Ｎ撮像フレームのうち、１つの撮像フレームにおいて、蓄積期間を延長し、かつ、読出期間を標準長さに調節した結果、この撮像レームの長さが標準長さ「ｆ」よりも長くなったとしても、別の撮像フレームにおいて蓄積期間または読出期間を短縮してバランスをとる。その結果、Ｎ撮像フレームの蓄積期間及び読出期間の合計時間ＴNを維持する。Ｎ撮像フレームにおいて「各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮する」とは、上記のようにＮ撮像フレーム中のＮ個の蓄積期間及びＮ個の読出期間の長さのバランスをとって合計時間ＴNを維持することをいう。
撮像制御部５３が「各々の撮像フレームの蓄積期間または読出期間の長さを延長または短縮する」と、合計時間ＴNが一定であって、Ｎ撮像フレーム中に複数ある蓄積期間を比較したときに長さが異なる蓄積期間があるか、または、Ｎ撮像フレーム中に複数ある読出期間を比較したときに長さが異なる読出期間がある。したがって、合計時間ＴNが一定であって、Ｎ撮像フレーム中に複数ある蓄積期間を比較したときに長さが異なる蓄積期間がある場合、または、合計時間ＴNが一定であって、Ｎ撮像フレーム中に複数ある読出期間を比較したときに長さが異なる読出期間がある場合には、撮像制御部５３がＮ撮像フレームに含む各々の撮像フレームの蓄積帰化または読出期間の長さを延長または短縮したといえる。
画像取得部５４は、撮像制御部５３がイメージセンサ４８から読み出す信号を受信することで、イメージセンサ４８から撮像画像を取得する。より具体的には、画像取得部５４は、撮像フレームごとに、Ｂ画素から読み出した信号によって形成するＢ画像、Ｇ画素から読み出した信号によって形成するＧ画像、及び、Ｒ画像から読み出した信号によって形成するＲ画像の３種類の撮像画像を取得する。
画像取得部５４は、ＤＳＰ（Digital Signal Processor）５６と、ノイズ低減部５８と、変換部５９と、を有し、これらを用いて、取得した撮像画像に各種処理を施す。
ＤＳＰ５６は、取得した撮像画像に対し、必要に応じて欠陥補正処理、オフセット処理、ゲイン補正処理、リニアマトリクス処理、ガンマ変換処理、デモザイク処理、及びＹＣ変換処理等の各種処理を施す。
欠陥補正処理は、イメージセンサ４８の欠陥画素に対応する画素の画素値を補正する処理である。オフセット処理は、欠陥補正処理を施した撮像画像から暗電流成分を低減し、正確な零レベルを設定する処理である。ゲイン補正処理は、オフセット処理をした撮像画像にゲインを乗じることにより各撮像画像の信号レベルを整える処理である。リニアマトリクス処理は、オフセット処理をした撮像画像の色再現性を高める処理であり、ガンマ変換処理は、リニアマトリクス処理後の撮像画像の明るさや彩度を整える処理である。デモザイク処理（等方化処理または同時化処理とも言う）は、欠落した画素の画素値を補間する処理であり、ガンマ変換処理後の撮像画像に対して施す。欠落した画素とは、カラーフィルタの配列のため、イメージセンサ４８において他の色の画素を配置しているために、画素値がない画素である。例えば、Ｂ画像はＢ画素において観察対象を撮像して得る撮像画像なので、イメージセンサ４８のＧ画素やＲ画素に対応する位置の画素には画素値がない。デモザイク処理は、Ｂ画像を補間して、イメージセンサ４８のＧ画素及びＲ画素の位置にある画素の画素値を生成する。ＹＣ変換処理は、デモザイク処理後の画像を、輝度チャンネルＹと色差チャンネルＣｂ及び色差チャンネルＣｒに変換する処理である。
ノイズ低減部５８は、輝度チャンネルＹ、色差チャンネルＣｂ及び色差チャンネルＣｒに対して、例えば、移動平均法またはメディアンフィルタ法等を用いてノイズ低減処理を施す。変換部５９は、ノイズ低減処理後の輝度チャンネルＹ、色差チャンネルＣｂ及び色差チャンネルＣｒを再びＢＧＲの各色の撮像画像に再変換する。
画像処理部６１は、上記各種処理を施した撮像画像に対して、必要に応じて例えば、色変換処理、色彩強調処理、及び構造強調処理等を施し、１つのカラーの観察画像を生成する。シングルフレーム観察モードの場合、画像処理部６１は、１つの撮像フレームにおいて取得する１または複数の撮像画像を用いて１つの観察画像を生成する。マルチフレーム観察モードの場合、画像処理部６１は、照明光の波長帯域または分光スペクトルが異なる複数の撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する。色変換処理においては、ＢＧＲ各色の画像に対して３×３のマトリクス処理、階調変換処理、３次元ＬＵＴ（ルックアップテーブル）処理等を行う。色彩強調処理は、画像の色彩を強調する処理であり、構造強調処理は、例えば、血管やピットパターン等の観察対象の組織や構造を強調する処理である。表示制御部６６は、画像処理部６１が生成した観察画像を順次取得し、適した形式に変換してモニタ１８に順次出力表示する。これにより、医師等は、観察画像を用いて観察対象を観察できる。
以下、マルチフレーム観察モードにおいて、画像処理部６１が第１撮像フレームＦ１と第２撮像フレームの２撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する場合の内視鏡システム１０の作用を説明する。
まず、図５に示すように、撮像制御部５３が第１撮像フレームＦ１と第２撮像フレームＦ２の蓄積期間等の長さを調節しない場合には、時刻Ｔ１から時刻Ｔ２の期間が第１撮像フレームＦ１の蓄積期間であり、かつ、時刻Ｔ２から時刻Ｔ３の期間が第１撮像フレームＦ１の読出期間である。そして、時刻Ｔ３から時刻Ｔ４の期間が第２撮像フレームＦ２の蓄積期間であり、かつ、時刻Ｔ４から時刻Ｔ５の期間が第２撮像フレームＦ２の読出期間である。なお、本実施形態では、簡単のため、第１撮像フレームＦ１及び第２撮像フレームＦ２の長さは「ｆ」秒であり、かつ、第１撮像フレームＦ１の蓄積期間、第１撮像フレームＦ１の読出期間、第２撮像フレームＦ２の蓄積期間、及び第２撮像フレームＦ２の読出期間の長さはいずれもｆ／２秒（各撮像フレームの長さの１／２）であるとする。このため、１つの観察画像の生成に使用する複数の撮像画像を得る第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2は「２ｆ」秒である。
また、制御部５２による同期制御の結果、光源制御部２２は、第１撮像フレームＦ１の蓄積期間に光源部２０から第１光を発光し、かつ、第２撮像フレームＦ２の蓄積期間に光源部２０から第２光を発光する。第１光及び第２光は、Ｂ光、Ｇ光、またはＲ光のうち１以上を用いて形成する互いに波長帯域または分光スペクトルが異なる照明光である。画像取得部５４は、第１撮像フレームＦ１の読出期間においてＢ画像、Ｇ画像、及びＲ画像を取得し、かつ、第２撮像フレームＦ２の読出期間においてＢ画像、Ｇ画像、及びＲ画像を取得する。そして、画像処理部６１はこれらの撮像画像を用いて１つの観察画像を生成し、表示制御部６６は画像処理部６１が生成した観察画像をモニタ１８に順次表示する。
上記のように撮像制御部５３が第１撮像フレームＦ１と第２撮像フレームＦ２の蓄積期間等の長さを調節しない場合、観察対象の撮像と観察画像の表示にはラグがあるとしても、画像処理部６１は、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2（＝２ｆ秒）に等しい一定の時間間隔で観察画像を生成することができる。その結果、表示制御部６６は一定の表示レートで観察画像をモニタ１８に表示することができる。しかし、イメージセンサ４８が蓄積期間等を調節可能であるにも関わらず、撮像制御部５３が第１撮像フレームＦ１と第２撮像フレームＦ２の蓄積期間等の長さを調節しないので、観察画像の画質向上等、蓄積期間等の長さを調節する利点を享受することができない。
そこで、内視鏡システム１０においては、撮像制御部５３が第１撮像フレームＦ１と第２撮像フレームＦ２の蓄積期間等を調節する。具体的には、図６に示すように、撮像制御部５３は、第１撮像フレームＦ１の蓄積期間の終了時刻（第１撮像フレームＦ１の読出期間の開始時刻）を時刻Ｔ２から時刻ｔ２に遅延する。これにより、第１撮像フレームＦ１の蓄積期間は、例えば、時刻Ｔ１から時刻Ｔ２のｆ／２秒から、時刻Ｔ１から時刻ｔ２の３ｆ／４秒に、ｆ／４秒間延長する。このとき、光源制御部２２は、制御部５２の同期制御により、第１撮像フレームＦ１の延長した蓄積期間に合わせて光源部２０を用いて第１光を発光する。
また、撮像制御部５３は、第１撮像フレームＦ１の読出期間の終了時刻を時刻Ｔ３から時刻ｔ３に遅延する。その結果、撮像制御部５３は、第１撮像フレームＦ１の読出期間の長さを、イメージセンサ４８の全画素を不足なく読み出すために必要なｆ／２秒に維持する。したがって、本実施形態においては、時刻ｔ２から時刻ｔ３の長さはｆ／２秒である。
上記のように第１撮像フレームＦ１の蓄積期間を延長すると、蓄積期間を延長した分、当然ながら第１撮像フレームＦ１の蓄積期間及び読出期間の合計時間が長くなる。このため、第２撮像フレームＦ２の蓄積期間及び読出期間をｆ／２秒ずつ確保すると、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2は２ｆ秒を超過する。第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2が２ｆ秒を超過すると、その後の処理等も遅延するので、結果的に表示制御部６６が観察画像をモニタ１８に表示するタイミングも遅延する。このため、観察画像の表示レートが低下し、観察画像の画質等が向上したとしても、診断に支障をきたすことがある。
このため、撮像制御部５３は、上記のように第１撮像フレームＦ１の蓄積期間を延長する場合、時刻ｔ３から開始する第２撮像フレームＦ２の蓄積期間は時刻Ｔ４に終了する。すなわち、撮像制御部５３は、第２撮像フレームＦ２の蓄積期間の開始時刻が時刻Ｔ３から時刻ｔ３に遅延したｆ／４秒分、第２撮像フレームＦ２の蓄積期間の長さを短縮する。したがって、第２撮像フレームＦ２の読出期間は時刻Ｔ４に開始し、ｆ／２秒後の時刻Ｔ５に終了する。もちろん、光源制御部２２は、開始時刻が遅延した第２撮像フレームＦ２の蓄積期間に合わせて光源部２０を用いて第２光を発光する。
上記のように、撮像制御部５３は、第１撮像フレームＦ１の蓄積期間を延長した場合には、第２撮像フレームＦ２の蓄積期間を短縮する。その結果、第２撮像フレームＦ２は、第１撮像フレームＦ１の蓄積期間を延長したｆ／４秒短縮し、第１撮像フレームＦ１と第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2を一定に保つ。このため、内視鏡システム１０のマルチフレーム観察モードにおいては、蓄積期間等の長さを調節しても、少なくとも第１撮像フレームＦ１及び第２撮像フレームＦ２の２撮像フレームの単位では、撮像画像の取得及びその後の処理等は遅延は生じない。このため、観察画像の表示レートは、診断等に支障をきたさない表示レートに維持することができる。
その上で、照明光に第１光を使用する第１撮像フレームＦ１の蓄積期間を延長するので、例えば、第１光が、第２撮像フレームＦ２で使用する第２光に対して相対的に、診断の判断基準になる組織または構造等のコントラストが良い撮像画像が得られる照明光であれば、観察画像における上記組織または構造等の視認性が向上する。すなわち、内視鏡システム１０においては、観察画像の表示レートを落とさずに、蓄積期間等を調節したことによる利益が得られる。
＜酸素飽和度観察モード＞
上記内視鏡システム１０は、マルチフレーム観察モードに相当する観察モードを有する内視鏡システムに好適である。例えば、観察対象の酸素飽和度を算出し、算出した酸素飽和度を表す観察画像（以下、酸素飽和度画像という）を生成及び表示する酸素飽和度観察モードを有する場合に特に好適である。
マルチフレーム観察モードとして酸素飽和度観察モードを設ける場合、図７に示すように、光源部２０には、Ｂ広帯域光源２０４、Ｇ広帯域光源２０５、Ｒ広帯域光源２０６、及び、狭帯域光源２０７を設ける。Ｂ広帯域光源２０４は、青色の広帯域な光（以下、Ｂ広帯域光という）を発光する光源である。広帯域とは、内視鏡システム１０において単一の波長（単波長）であるとはみなせない程度に広い波長帯域をいう。例えば、数１０ｎｍから１００ｎｍ以上の波長帯域が広帯域である。Ｇ広帯域光源２０５は、緑色の広帯域な光（以下、Ｇ広帯域光という）を発光する光源である。Ｒ広帯域光源２０６は、赤色の広帯域な光（以下、Ｒ広帯域光という）を発光する光源である。
狭帯域光源２０７は、酸素飽和度を測定するための狭帯域な光（以下、測定光という）を発光する。狭帯域とは、内視鏡システム１０において概ね単波長であるとみなせる程度に狭い波長帯域を言う。例えば、中心波長に対して±数１０ｎｍの波長帯域が狭帯域である。測定光は、酸化ヘモグロビンと還元ヘモグロビンの吸光係数の差が大きい波長を中心波長に有する狭帯域光である。図８に示すように、例えば、約４７０ｎｍの波長において、酸化ヘモグロビンの吸光係数２１３と還元ヘモグロビンの吸光係数２１４の差が大きくなる。したがって、本実施形態においては、狭帯域光源２０７は、中心波長が約４７０ｎｍの狭帯域光である。図８から分かる通り、約４７０ｎｍ以外にも、紫色、青色、または、緑色の波長帯域において、酸化ヘモグロビンの吸光係数２１３と還元ヘモグロビンの吸光係数２１４の差が大きい波長がある。したがって、これらのいずれかの波長を中心波長とする狭帯域光を発光する光源を狭帯域光源２０７にすることができる。
酸素飽和度観察モードにおいては、第１撮像フレームＦ１と第２撮像フレームＦ２の２撮像フレームにおいて取得する複数の撮像画像を用いて１つの酸素飽和度画像を生成する。具体的には、第１撮像フレームＦ１の蓄積期間においては、光源制御部２２は、光源部２０を用いて測定光を点灯する。このため、マルチフレーム観察モードが酸素飽和度観察モードである場合、測定光が第１光である。第１撮像フレームＦ１において取得する撮像画像は、測定光の反射光等を用いて観察対象を撮像したＢ画像である。以下、区別のため、第１撮像フレームＦ１において取得する撮像画像をＢ１画像という。また、第１撮像フレームＦ１において、Ｇ画像またはＲ画像を取得する場合には、これらをそれぞれＧ１画像及びＲ１画像という。
一方、第２撮像フレームＦ２の蓄積期間においては、光源制御部２２は、光源部２０を用いてＢ広帯域光、Ｇ広帯域光、及び、Ｒ広帯域光とからなる白色光を点灯する。このため、マルチフレーム観察モードが酸素飽和度観察モードである場合この白色光が第２光である。したがって、第１光と第２光は互いに波長帯域及び分光スペクトルが異なる照明光である。また、第２撮像フレームＦ２において取得する撮像画像は、Ｂ広帯域光の反射光等を用いて観察対象を撮像して得るＢ画像、Ｇ広帯域光の反射光等を用いて観察対象を撮像して得るＧ画像、及び、Ｒ広帯域光の反射光等を用いて観察対象を撮像して得るＲ画像である。以下、区別のため、第２撮像フレームＦ２において取得する撮像画像をＢ画像、Ｇ画像、及びＲ画像をそれぞれＢ２画像、Ｇ２画像、及びＲ２画像という。
酸素飽和度観察モードにおいては、上記Ｂ１画像、Ｂ２画像、Ｇ２画像、及びＲ２画像を用いて酸素飽和度画像を生成する。そのため、図９に示すように、画像処理部６１には、信号比算出部２２１、酸素飽和度算出部２２２、相関関係記憶部２２３、及び、画像生成部２２４を設ける。
信号比算出部２２１は、例えば、Ｇ２画像に対するＢ１画像の比（以下、信号比Ｂ１／Ｇ２という）と、Ｒ２画像に対するＧ２画像の比（以下、信号比Ｒ２／Ｇ２）と、をそれぞれ画素ごとに算出する。信号比Ｂ１／Ｇ２は、主に観察対象の酸素飽和度の値と血液量によって変化し、信号比Ｒ２／Ｇ２は、主に観察対象の血液量に応じて変化する。
酸素飽和度算出部２２２は、信号比算出部２２１が算出した信号比Ｂ１／Ｇ２、及び、信号比Ｒ２／Ｇ２を、相関関係記憶部２２３が記憶する相関関係に照らし合わせることにより、観察対象の酸素飽和度を画素ごとに算出する。相関関係記憶部２２３は、例えば図１０に示すように、信号比Ｂ１／Ｇ２及び信号比Ｒ２／Ｇ２と、酸素飽和度の相関関係をＬｏｇスケールで記憶している。なお、信号比Ｂ１／Ｇ２及び信号比Ｒ２／Ｇ２と、酸素飽和度の相関関係はシミュレーション等によって予め求めることができる。
画像生成部２２４は、例えば観察対象の酸素飽和度を色で表す酸素飽和度画像を生成する。具体的には、画像生成部２２４は、Ｂ２画像、Ｇ２画像、及びＲ２画像を用いてカラーの観察画像を生成する。その後、生成した観察画像の各画素を、酸素飽和度算出部２２２が算出した酸素飽和度の値に応じて着色することによって酸素飽和度画像を生成する。画像生成部２２４は、生成した酸素飽和度画像を表示制御部６６に入力することにより、モニタ１８に表示する。
上記酸素飽和度観察モードにおいては、撮像制御部５３は、例えば、第１撮像フレームＦ１の蓄積期間を延長し、その代わりに、第２撮像フレームＦ２の蓄積期間を短縮する（図６参照）。また、第１撮像フレームＦ１の読出期間及び第２撮像フレームＦ２の読出期間については、撮像制御部５３はこれらの開始または終了のタイミングを調節するが、これら各読出期間の長さは維持する。これらの結果、撮像制御部５３は、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2を一定に（例えば２ｆ秒に）保つ。このため、酸素飽和度観察モードにおいては、酸素飽和度画像の表示遅延を生じることない。そのうえで、撮像制御部５３は、照明光に測定光を用いる第１撮像フレームＦ１の蓄積期間を延長したことで、酸素飽和度の情報を担持するＢ１画像の明るさまたはコントラスト等を向上する。Ｂ１画像の明るさまたはコントラスト等が向上すると、第１撮像フレームＦ１及び第２撮像フレームＦ２の各撮像フレームの長さを調節しない場合と比較して、より正確に酸素飽和度を算出することができる。
＜特定深さ強調観察モード＞
上記酸素飽和度観察モードの他には、例えば、特定の深さにある組織または構造を選択的に強調した観察画像（以下、特定深さ強調画像という）を生成及び表示する特定深さ強調観察モードにも本発明は好適である。マルチフレーム観察モードとして特定深さ強調観察モードを設ける場合、図１１に示すように、光源部２０には、少なくとも、第１狭帯域光源３０１及び第２狭帯域光源３０２を設ける。第１狭帯域光源３０１及び第２狭帯域光源３０２は、互いに異なる中心波長を有する狭帯域光を発光する。すなわち、第１狭帯域光源３０１が発光する狭帯域光と第２狭帯域光源３０２が発光する狭帯域光は、互いに波長帯域及び分光スペクトルが異なる。本実施形態においては、第１狭帯域光源３０１は紫色の狭帯域な光（以下、Ｖ狭帯域光という）を発光し、かつ、第２狭帯域光源３０２は青色の狭帯域な光（以下、Ｂ狭帯域光という）を発光する。紫色とは、主に約３８０ｎｍから約４３０ｎｍ程度の波長を有する光の色を言う。
特定深さ強調観察モードにおいては、第１撮像フレームＦ１と第２撮像フレームＦ２の２撮像フレームにおいて取得する複数の撮像画像を用いて１つの特定深さ強調画像を生成する。具体的には、第１撮像フレームＦ１の蓄積期間においては、光源制御部２２は光源部２０を用いてＶ狭帯域光を点灯する。このため、マルチフレーム観察モードが特定深さ強調観察モードである場合、Ｖ狭帯域光が第１光である。Ｖ狭帯域光の反射光等は主にＢ画素で受光することができるので、第１撮像フレームＦ１において取得する撮像画像はＢ１画像である。また、第２撮像フレームＦ２の蓄積期間においては、光源制御部２２は光源部２０を用いてＢ狭帯域光を点灯する。このため、マルチフレーム観察モードが特定深さ強調観察モードである場合、Ｂ狭帯域光が第２光である。したがって、第２撮像フレームＦ２において取得する撮像画像は、Ｂ画素で観察対象を撮像して得るＢ２画像である。
特定深さ強調観察モードにおいては、上記Ｂ１画像及びＢ２画像を用いて特定深さ強調画像を生成する。そのため、図１２に示すように、画像処理部６１には、変化量算出部３１１と画像生成部３１２を設ける。
変化量算出部３１１は、Ｂ１画像とＢ２画像の変化量を画素ごとに算出し、この変化量を各画素の画素値とした変化量画像（図示しない）を生成する。変化量とは、例えば、Ｂ１画像とＢ２画像の各画素の比または差である。
画像生成部３１２は、Ｂ１画像とＢ２画像のうちいずれか一方を輝度チャンネルに割り当て、かつ、変化量算出部３１１が生成した変化量画像を色差チャンネルに割り当てることで、特定深さ強調画像を生成する。特定深さ強調画像は、Ｖ狭帯域光及びＢ狭帯域光の波長の組み合わせによって定まる特定の深さにある組織または構造等を強調した画像になる。画像生成部３１２は、生成した特定深さ強調画像を表示制御部６６に入力することにより、モニタ１８に表示する。なお、色差チャンネルは、ＣｒチャンネルとＣｂチャンネルの２つのチャンネルがあるので、画像生成部４１２は、ＣｒチャンネルとＣｂチャンネルに、例えば、それぞれ異なる重み付けをした変化量画像を割り当てる。
上記特定深さ強調観察モードにおいては、撮像制御部５３は、例えば、第１撮像フレームＦ１の蓄積期間を延長し、その代わりに、第２撮像フレームＦ２の蓄積期間を短縮する（図６参照）。また、第１撮像フレームＦ１の読出期間及び第２撮像フレームＦ２の読出期間については、撮像制御部５３はこれらの開始または終了のタイミングを調節するが、これら各読出期間の長さは維持する。これらの結果、撮像制御部５３は、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2を一定に（例えば２ｆ秒に）保つ。このため、特定深さ強調観察モードにおいては、特定深さ強調画像の表示遅延を生じることはない。その上で、撮像制御部５３は、照明光にＶ狭帯域光を用いる第１撮像フレームＦ１の蓄積期間を延長したことで、Ｂ１画像の明るさまたはコントラスト等を向上する。Ｂ１画像の明るさまたはコントラスト等が向上すると、第１撮像フレームＦ１及び第２撮像フレームＦ２の各撮像フレームの長さを調節しない場合と比較して、特定深さ強調画像において組織または構造等を強調する「特定の深さ」の選択精度を向上することができる。
もちろん、具体的なＶ狭帯域光及びＢ狭帯域光の各波長帯域の組み合わせによっては、Ｂ２画像の明るさまたはコントラスト等を向上したほうが良い場合がある。この場合は、上記とは逆に、撮像制御部５３は、第２撮像フレームＦ２の蓄積期間を延長し、その代わりに、第１撮像フレームＦ１の蓄積期間を短縮する。また、上記特定深さ強調観察モードにおいては、Ｖ狭帯域光とＢ狭帯域光を用いているが、これらの狭帯域光の波長帯域の組み合わせを変更すれば、特定深さ強調画像において組織または構造等を強調する特定の深さを変更することができる。
＜深層血管強調観察モード＞
上記酸素飽和度観察モード及び特定深さ強調観察モードの他には、例えば、粘膜下の特に深い位置にある太い血管（以下、深層血管という）を強調する観察画像（以下、深層血管強調画像という）を生成及び表示する深層血管強調観察モードにも本発明は好適である。
マルチフレーム観察モードとして深層血管強調観察モードを設ける場合、図１３に示すように、光源部２０には例えば第１Ｒ狭帯域光源４０１、第２Ｒ狭帯域光源４０２、Ｒ広帯域光源４０３、及び、Ｃｙ広帯域光源４０４を設ける。第１Ｒ狭帯域光源４０１は、例えば中心波長が約６００ｎｍの赤色の狭帯域光（以下、第１Ｒ狭帯域光という）を発光する。第２Ｒ狭帯域光源４０２は、例えば中心波長が約６３０ｎｍの赤色の狭帯域光（以下、第２Ｒ狭帯域光という）を発光する。Ｒ広帯域光源４０３は、広帯域な赤色の光（以下、Ｒ広帯域光という）を発光する。そして、Ｃｙ広帯域光源４０４は、波長帯域が約４００ｎｍから約５５０ｎｍに及ぶシアン色の広帯域光（以下、Ｃｙ広帯域光という）を発光する。
深層血管強調観察モードにおいては、第１撮像フレームＦ１と第２撮像フレームＦ２の２フレームにおいて取得する複数の撮像画像を用いて１つの深層血管強調画像を生成する。具体的には、第１撮像フレームＦ１の蓄積期間においては、光源制御部２２は、光源部２０を用いて第１Ｒ狭帯域光とＲ広帯域光とＣｙ広帯域光とからなる第１光を点灯する。そして、画像取得部５４は、撮像画像としてＢ１画像、Ｇ１画像、及び、Ｒ１画像を取得する。一方、第２撮像フレームＦ２の蓄積期間においては、光源制御部２２は、光源部２０を用いて第２Ｒ狭帯域光とＲ広帯域光とＣｙ広帯域光とからなる第２光を点灯する。そして、画像取得部５４は、撮像画像としてＢ２画像、Ｇ２画像、及び、Ｒ２画像を取得する。
深層血管強調観察モードにおては、上記撮像画像のうち、Ｒ１画像及びＲ２画像と、Ｇ１画像またはＧ２画像のうち少なくともいずれか一方の画像と、を用いて深層血管強調画像を生成する。そのため、図１４に示すように、画像処理部６１には、変化量算出部４１１と画像生成部４１２を設ける。
変化量算出部４１１は、Ｒ１画像とＲ２画像の変化量を画素ごとに算出する。変化量とは、例えば、Ｒ１画像とＲ２画像の各画素の比または差である。また、変化量算出部４１１は、変化量を算出すると、算出した変化量に基づく補正係数を算出し、Ｒ１画像またはＲ２画像にこの補正係数を乗算して補正画像（図示しない）を生成する。そして、変化量算出部４１１は、生成した補正画像を画像生成部４１２に入力する。
画像生成部４１２は、Ｒ１画像またはＲ２画像のうち補正画像の生成に使用していない方の画像と、変化量算出部４１１が生成した補正画像と、画像取得部５４から取得するＧ１画像またはＧ２画像を、Ｂチャンネル、Ｇチャンネル、及びＲチャンネルに割り当てることによって深層血管強調画像を生成する。画像生成部４１２は、生成した深層血管強調画像を表示制御部６６に入力することにより、モニタ１８に表示する。
上記深層血管強調観察モードにおいては、撮像制御部５３は、例えば、第１撮像フレームＦ１の蓄積期間を延長し、その代わりに、第２撮像フレームＦ２の蓄積期間を短縮する（図６参照）。また、第１撮像フレームＦ１の読出期間及び第２撮像フレームＦ２の読出期間については、撮像制御部５３はこれらの開始または終了のタイミングを調節するが、これら各読出期間の長さは維持する。これらの結果、撮像制御部５３は、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2を一定に（例えば２ｆ秒に）保つ。このため、深層血管強調観察モードにおいては、深層血管強調画像の表示遅延を生じることはない。その上で、撮像制御部５３は、照明光に第１Ｒ狭帯域光を含む第１撮像フレームＦ１の蓄積期間を延長したことで、Ｒ１画像の明るさまたはコントラスト等を向上する。Ｒ１画像の明るさまたはコントラスト等が向上すると、第１撮像フレームＦ１及び第２撮像フレームＦ２の各撮像フレームの長さを調節しない場合と比較して、深層血管強調画像において目的とする深層血管をより強調することができる。もちろん、強調する深層血管の具体的な深さによっては、Ｒ２画像の明るさまたはコントラスト等を向上したほうが良い場合もある。この場合は、上記とは逆に、撮像制御部５３は、第２撮像フレームＦ２の蓄積期間を延長し、その代わりに、第１撮像フレームＦ１の蓄積期間を短縮する。
＜狭帯域観察モード＞
上記酸素飽和度観察モード、特定深さ強調観察モード、及び深層血管強調観察モードの他には、例えば、観察画像としていわゆる狭帯域観察画像を生成及び表示する狭帯域観察モードに本発明は好適である。狭帯域観察画像とは、青色及び緑色の狭帯域光を用いて観察対象を撮像し、得られた撮像画像を用いて、血管等を強調した観察画像である。
マルチフレーム観察モードとして狭帯域観察モードを設ける場合、図１５に示すように、光源部２０にＢ狭帯域光源５０１及びＧ狭帯域光源５０２を設ける。Ｂ狭帯域光源５０１はＢ狭帯域光を発光する。Ｂ狭帯域光は、例えば、中心波長が約４５０ｎｍであり、この中心波長を中心に概ね±数１０ｎｍ程度の波長帯域を有する。Ｇ狭帯域光源５０２は、緑色の狭帯域な光（以下、Ｇ狭帯域光という）を発光する。Ｇ狭帯域光は、例えば、中心波長が約５５０ｎｍであり、この中心波長を中心に概ね±数１０ｎｍ程度の波長帯域を有する。
狭帯域観察モードにおいては、第１撮像フレームＦ１と第２撮像フレームＦ２の２撮像フレームにおいて取得する複数の撮像画像を用いて１つの狭帯域観察画像を生成する。具体的には、第１撮像フレームＦ１の蓄積期間においては、光源制御部２２は光源部２０を用いてＢ狭帯域光を点灯する。このため、マルチフレーム観察モードが狭帯域観察モードである場合、Ｂ狭帯域光が第１光である。第１撮像フレームＦ１において取得する撮像画像はＢ１画像である。また、第２撮像フレームＦ２の蓄積期間においては、光源制御部２２は、光源部２０を用いてＧ狭帯域光を点灯する。このため、マルチフレーム観察モードが狭帯域観察モードの場合、Ｇ狭帯域光が第２光である。第２撮像フレームＦ２において取得する撮像画像はＧ２画像である。狭帯域観察モードにおいては、画像処理部６１は、Ｂ１画像をＢチャンネル及びＧチャンネルに割り当て、かつ、Ｇ２画像をＲチャンネルに割り当てることにより、狭帯域観察画像を生成する。
上記狭帯域観察モードにおいては、撮像制御部５３は、例えば、第１撮像フレームＦ１の蓄積期間を延長し、その代わりに、第２撮像フレームＦ２の蓄積期間を短縮する（図６参照）。また、第１撮像フレームＦ１の読出期間及び第２撮像フレームＦ２の読出期間については、撮像制御部５３はこれらの開始または終了のタイミングを調節するが、これら各読出期間の長さは維持する。これらの結果、撮像制御部５３は、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間の合計時間Ｔ2を一定に（例えば２ｆ秒に）保つ。このため、狭帯域観察モードにおいては、狭帯域観察画像の表示遅延を生じることはない。その上で、撮像制御部５３は、照明光にＢ狭帯域光を用いる第１撮像フレームＦ１の蓄積期間を延長したことで、Ｂ１画像の明るさまたはコントラスト等を向上する。Ｂ１画像の明るさまたはコントラスト等が向上すると、第１撮像フレームＦ１及び第２撮像フレームＦ２の各撮像フレームの長さを調節しない場合と比較して、狭帯域観察画像において、より明確に粘膜の表面に近い位置にある浅く細い血管等を強調することができる。
なお、上記各観察モードの通り、マルチフレーム観察モードにおいて蓄積期間等の長さを調節する場合、撮像制御部５３は、各々の撮像フレームにおける照明光の波長帯域、分光スペクトル、または光量に起因して、蓄積期間または読出期間の長さを延長または短縮すると良い。例えば、マルチフレーム観察モードが酸素飽和度観察モードである場合、目的である酸素飽和度の情報を主として担持するのは、照明光に測定光を使用して得るＢ１画像なので、照明光に白色光を使用する第２撮像フレームＦ２の蓄積期間ではなく、照明光に測定光を使用する第１撮像フレームＦ１の蓄積期間を延長している。すなわち、撮像制御部５３は、各撮像フレームにおける照明光の波長帯域または分光スペクトルに起因して、蓄積期間または読出期間の長さを延長または短縮している。特定深さ強調観察モード等の他のマルチフレーム観察モードも同様である。
特に、各撮像フレームにおいて使用する照明光の波長帯域に起因して蓄積期間等の長さを調節する場合、照明光の波長帯域が狭い撮像フレームほど、その蓄積期間を長くすることが好ましい。すなわち、撮像制御部５３は、相対的に照明光の波長帯域が狭い撮像フレームの蓄積期間を、相対的に照明光の波長帯域が広い撮像フレームの蓄積期間よりも長くする。マルチフレーム観察モードにおいて、照明光に狭帯域光を用いる場合、第１に、狭帯域光を用いる撮像フレームにおいて取得する撮像画像が、診断に寄与する情報を担持しているからである。第２に、波長帯域が狭いほど光量が不足して、撮像画像の明るさまたはコントラストが不足しやすいからである。例えば、酸素飽和度観察モードにおいては、照明光に測定光と白色光を用いるが、相対的に波長帯域が狭い測定光を照明光に使用する第１撮像フレームＦ１に得るＢ１画像の方が、第２撮像フレームＦ２に得る撮像画像よりも、目的とする酸素飽和度の情報を多く担持し、かつ、明るさまたはコントラストが不足しやすい。このため、酸素飽和度観察モードにおいては、撮像制御部５３は照明光に測定光を用いる第１撮像フレームＦ１の蓄積期間を長くしている。特定深さ強調観察モード等の他のマルチフレーム観察モードも同様である。
また、各撮像フレームにおいて使用する照明光の光量に起因して蓄積期間等の長さを調節する場合、照明光の光量が小さい撮像フレームほど、その蓄積期間を長くすると良い。すなわち、撮像制御部５３は、相対的に照明光の光量が小さい撮像フレームの蓄積期間を、相対的に照明光の光量が大きい撮像フレームの蓄積期間よりも長くする。照明光の光量が小さい撮像フレームに得る撮像画像は、明るさまたはコントラストが低下しやすいからである。例えば、酸素飽和度観察モードにおいては、照明光に測定光と白色光を用いるが、相対的に波長帯域が狭い測定光を照明光に使用する第１撮像フレームＦ１に得るＢ１画像の方が、第２撮像フレームＦ２に得る撮像画像よりも、明るさまたはコントラストが低下しやすい。このため、酸素飽和度観察モードにおいては、撮像制御部５３は照明光に測定光を用いる第１撮像フレームＦ１の蓄積期間を長くしている。特定深さ強調観察モード等の他のマルチフレーム観察モードも同様である。
また、各撮像フレームにおいて使用する照明光の光量に起因して蓄積期間等の長さを調節する場合、撮像制御部５３は、撮像画像が暗くなる照明光または撮像画像のコントラストが小さくなる照明光を使用する撮像フレームほど、その蓄積期間を長くすると良い。すなわち、撮像制御部５３は、相対的に撮像画像が暗くなる照明光または相対的に撮像画像のコントラストが小さくなる照明光を使用する撮像フレームの蓄積期間を、相対的に撮像画像が明るくなる他の照明光または相対的に撮像画像のコントラストが大きくなる他の照明光を使用する撮像フレームの蓄積期間よりも長くする。観察対象の種類等によっては、特定の波長帯域または分光スペクトルを有する照明光を吸収しやすく、イメージセンサ４８に戻る反射光等が少なって、取得する撮像画像の明るさまたはコントラストが、他の撮像画像の水準に比べて小さい場合がある。こうした場合に、上記のような撮像画像が暗くなる照明光または撮像画像のコントラストが小さくなる照明光を使用する撮像フレームほど蓄積期間を長くすると、明るさまたはコントラストの不足を補って、明瞭な観察画像を生成及び表示することができる。
上記の他、各撮像フレームにおいて使用する照明光の光量に起因して蓄積期間等の長さを調節する場合、撮像制御部５３は、照明光の光量が最大光量に達する撮像フレームの蓄積期間を延長すると良い。通常、内視鏡システム１０では、ほぼ一定の適切な明るさで観察対象を観察することができるように光源制御部２２が照明光の光量を自動調節する。しかし、光源部２０が有する各光源の性能等に起因して、照明光の光量には上限があり、この上限を超えて照明光の光量を増大することはできない。このため、撮像制御部５３が、照明光の光量が最大光量に達する撮像フレームの蓄積期間を延長すれば、照明光の光量が最大光量に達する撮像フレームにおいて取得する撮像画像の明るさまたはコントラストの不足を補うことができる。この場合、撮像制御部５３は、光源制御部２２または制御部５２から照明光の光量を表す信号（光量指定信号）を取得し、この信号を用いて、照明光を最大光量にした場合に不足する光量分だけ蓄積期間を延長する。
なお、上記実施形態のマルチフレーム観察モードにおいては、撮像制御部５３は、各撮像フレームの蓄積期間を相対定期に延長または短縮する一方で、読出期間の長さは変更しないが、撮像制御部５３は、読出期間の長さも調節することができる。例えば、図１６に示すように、第１撮像フレームＦ１及び第２撮像フレームＦ２の２撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する場合に、上記実施形態と同様に第１撮像フレームＦ１の蓄積期間の長さを延長し、読出期間の長さを維持する。一方、撮像制御部５３は、蓄積期間の終了（読出期間の開始）の時刻Ｔ４を時刻ｔ４に遅延し、かつ、第２撮像フレームＦ２の読出期間の終了の時刻Ｔ５を維持する。これにより、第２撮像フレームＦ２の蓄積期間の長さをｆ／２秒に維持し、かつ、第２撮像フレームＦ２の読出期間の長さをｆ／４秒に短縮する。こうすると、第１撮像フレームＦ１の蓄積期間を延長したにも関わらず、第２撮像フレームＦ２の蓄積期間を維持することができるので、第２撮像フレームＦ２において取得する撮像画像の明るさまたはコントラストを維持しやすい。読出期間の短縮は、例えば、撮像面にある全ての画素Ｐｘから信号を読み出すのではなく、一部の画素Ｐｘから信号を読み出す、いわゆる部分読み出し等によって実現することができる。
なお、読出期間を短縮する上記変形例においては、第２撮像フレームＦ２の蓄積期間を維持しているが、第１撮像フレームＦ１の読出期間とともに、第２撮像フレームＦ２の蓄積期間も延長してもよい。また、上記変形例においては、第１撮像フレームＦ１の読出期間を維持しているが、第１撮像フレームＦ１の読出期間も短縮することができる。すなわち、撮像制御部５３は、イメージセンサ４８の蓄積期間等の長さを調節する際に、蓄積期間の延長または短縮と、読出期間の短縮を任意に組み合わせることで、１つの観察画像の生成に使用する複数の撮像画像を得る複数の撮像フレームの合計時間ＴNを一定に保つことができる。
上記のように、読出期間を短縮する場合、撮像制御部５３は、蓄積期間を延長する撮像フレームとは別の撮像フレームにおいて読出期間を短縮すると良い。例えば、第１撮像フレームＦ１の蓄積期間を延長する必要がある場合、第１撮像フレームＦ１において得る撮像画像が診断への寄与が大きい情報を担持している場合が多いので、第１撮像フレームＦ１の読出期間の長さは全ての画素Ｐｘを読み出せる時間（例えばｆ／２秒）を維持する方が良い。このため、合計時間ＴNを維持するために読出期間を短縮するのであれば、蓄積期間の長さを延長する撮像フレームの読出期間の長さは維持して、その代わりに、診断に支障が出にくい別の撮像フレームの読出期間を短縮すると良い。
もちろん、マルチフレーム観察モードにおいて、撮像制御部５３は、１つの撮像フレームの長さを一定に保ち、かつ、１つの撮像フレームにおける蓄積期間と読出期間の長さを延長または短縮することもできる。この場合、マルチフレーム観察モードの各撮像フレームが一定に保つことができるので、合計時間ＴNを確実に一定に保つことができる。また、この場合、画像処理部６１が撮像画像を取得できるタイミングが、蓄積期間等を調節しない場合に対して変化しないので、観察画像の表示遅延は特に生じにくい。
なお、上記実施形態においては、光源制御部２２は、光源部２０を用いて蓄積期間に照明光を点灯し、かつ、読出期間は照明光を消灯しているが、光源制御部２２は蓄積期間及び読出期間において照明光を点灯しても良い。例えば、酸素飽和度観察モードの場合、図１７に示すように、光源制御部２２は、第１撮像フレームＦ１の蓄積期間においては測定光とＲ広帯域光（図１７においては「Ｒ」で示す）を含む第１光を点灯し、かつ、第１撮像フレームＦ１の読出期間においてはＲ広帯域光からなる第３光を点灯する。そして、光源制御部２２は、第２撮像フレームＦ２の蓄積期間においてはＢ広帯域光（図１７においては「Ｂ」で示す）とＧ広帯域光（図１７においては「Ｇ」で示す）とＲ広帯域光を含む第２光を点灯し、かつ、第２撮像フレームＦ２の読出期間においてはＲ広帯域光からなる第３光を点灯する。すなわち、酸素飽和度観察モードにおいては、Ｒ広帯域光を点灯したままにすることができる。
上記のように、酸素飽和度観察モードにおいて各撮像フレームの蓄積期間及び読出期間においてもＲ広帯域光の点灯すると、第１撮像フレームＦ１においてはＢ１画像とＲ１画像の２つの撮像画像が得られ、かつ、第２撮像フレームＦ２においてはＢ２画像、Ｇ２画像、及びＲ２画像の３つの撮像画像が得られる。酸素飽和度観察モードの観察画像である酸素飽和度画像は、これらのうち、Ｂ１画像、Ｂ２画像、Ｇ２画像、及びＲ２画像を用いて生成することができる。特定深さ強調観察モード、深層血管強調観察モード、及び狭帯域観察モードにおいても、例えば、上記酸素飽和度観察モードの変形例と同様にＲ広帯域光を各撮像フレームの蓄積期間及び読出期間を通して点灯することができる。この場合、各観察モードの観察画像は、Ｒ広帯域光を読出期間に点灯しない場合と同様にして生成することができる。
蓄積期間及び読出期間において照明光を点灯する場合には、図１８に示すように、プロセッサ装置１６に、マルチフレーム観察モードの各々の撮像フレームにおいて共通に取得する色の撮像画像を用いて静止度を算出する静止度算出部６５１を設けると良い。すなわち、第１撮像フレームＦ１及び第２撮像フレームＦ２の蓄積期間及び読出期間においてＲ広帯域光を点灯し続ける場合、静止度算出部６５１は、Ｒ１画像及びＲ２画像、またはＲ１画像とＲ２画像のうちいずれか一方を用いて静止度を算出する。
静止度とは、観察対象の動きを大きさ、観察対象の動きの向き、または、観察対象の動きの大きさ及び向きを表す数値である。ここで言う観察対象の動きには、観察対象自身の動きの他、内視鏡１２の動きによる相対的な観察対象の動きを含む。静止度は、１枚のＲ１画像またはＲ２画像を用いて算出する場合、例えば周波数解析により算出する。Ｒ１画像またはＲ２画像に高周波成分が少なければ観察対象の動きが大きいと評価できるので、高周波数成分の量に基づいて静止度を算出することができる。また、Ｒ１画像またはＲ２画像を複数使用して静止度を算出する場合、例えば、これら各Ｒ画像に写る観察対象の対応する点間の位置から求まる動きベクトルの向きや大きさから静止度を算出することができる。
静止度算出部６５１が算出した静止度を、例えば、画像処理部６１に入力する。そして、画像処理部６１では、第１撮像フレームＦ１において取得する撮像画像と、第２撮像フレームＦ２において取得する撮像画像との位置合わせに利用することができる。このため、酸素飽和度観察モードであれば、より正確に酸素飽和度を算出することができる。特定深さ強調観察モード、深層血管強調観察モード、及び狭帯域観察モードにおいても同様である。
なお、上記実施形態においては、イメージセンサ４８にカラーセンサを用いているが、イメージセンサ４８は画素Ｐｘにカラーフィルタを設けていないモノクロセンサを用いることができる。この場合、上記第１実施形態のＢ１画像、Ｇ１画像、Ｒ１画像、Ｂ２画像、Ｇ２画像、及びＲ２画像は、順次に観察対象を撮像して得ることができる。例えば、これら６種類の撮像画像を全て得るには６撮像フレームを必要とする。すなわち、イメージセンサ４８にモノクロセンサを用いる場合、１つの観察画像を生成するために上記第１実施形態よりも多くの撮像フレームが必要になる場合があるが、それ以外は上記実施形態と同様にマルチフレーム観察モードを設けることができる。
また、上記実施形態においては、２撮像フレームにおいて得る複数の撮像画像を用いて１つの観察画像を生成しているが、３以上の撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成しても良い。この場合、１つの観察画像を生成するために上記第１実施形態よりも多くの撮像フレームが必要になる場合があるが、それ以外は上記実施形態と同様である。
上記実施形態においては、撮像制御部５３は、いわゆるプログレッシブ方式でイメージセンサ４８の画素から信号を読み出すが、いわゆるインタレース方式でイメージセンサ４８の画素から信号を読み出しても良い。この場合、撮像制御部５３は、１画素行おきに信号の読み出し及びリセットを行う。
上記実施形態においては、イメージセンサ４８はいわゆる原色系のカラーセンサであるが、シアン、マゼンタ、イエロー、及びグリーン等の補色系のカラーフィルタを用いた補色系カラーセンサも使用することができる。補色系のカラーセンサから取得する補色撮像画像は、ＲＧＢ各色の画像に変換可能である。
上記実施形態においては、イメージセンサ４８の画素配列はいわゆる正方配列であるが、イメージセンサ４８の画素配列はいわゆるハニカム配列等、正方配列以外の配列であっても良い。
上記実施形態においては、光源部２０が有する光源はＬＥＤであるが、内視鏡システム１０は、ＬＥＤの代わりに、ＬＤ（Laser Diode）等の他の半導体光源を用いても良い。半導体光源と、半導体光源が発光する光を励起光として他の色の光を発光する蛍光体等を組み合わせて用いても良い。キセノンランプ等のランプ光源も光源部２０に使用しても良い。また、半導体光源、半導体光源と蛍光体、及び、ランプ光源とともに波長帯域または分光スペクトルを調節する光学フィルタを組み合わせて光源部２０の光源を構成しても良い。例えば、白色ＬＥＤに光学フィルタを組み合わせて使用することで、第１実施形態から第５実施形態で使用する各色の光を発生することができる。
上記実施形態においては、イメージセンサ４８が設けられた内視鏡１２を被検体内に挿入して観察を行う内視鏡システムにおいて本発明を実施しているが、カプセル内視鏡システムにおいても本発明は好適である。図１９に示すように、例えば、カプセル内視鏡システムにおいては、カプセル内視鏡７００と、プロセッサ装置（図示しない）とを少なくとも有する。
カプセル内視鏡７００は、光源部７０２と制御部７０３と、イメージセンサ７０４と、画像処理部７０６と、送受信アンテナ７０８と、を備えている。光源部７０２は、光源部２０に対応する。制御部７０３は、光源制御部２２及び制御部５２と同様に機能する。また、制御部７０３は、送受信アンテナ７０８を用いて、カプセル内視鏡システムのプロセッサ装置と無線を使用して通信可能である。カプセル内視鏡システムのプロセッサ装置は、上記各実施形態のプロセッサ装置１６とほぼ同様であるが、画像取得部５４及び画像処理部６１に対応する画像処理部７０６はカプセル内視鏡７００に設けられ、観察画像は、送受信アンテナ７０８を介してプロセッサ装置に送信される。イメージセンサ７０４はイメージセンサ４８と同様である。
１０ 内視鏡システム
１２ 内視鏡
１２ａ 挿入部
１２ｂ 操作部
１２ｃ 湾曲部
１２ｄ 先端部
１２ｅ アングルノブ
１３ａ モード切り替えスイッチ
１３ｂ ズーム操作部
１４ 光源装置
１６ プロセッサ装置
１８ モニタ
１９ コンソール
２０、７０２ 光源部
２２ 光源制御部
３０ａ 照明光学系
３０ｂ 撮影光学系
４１ ライトガイド
４５ 照明レンズ
４６ 対物レンズ
４７ ズームレンズ
４８、７０４ イメージセンサ
５２，７０３ 制御部
５３ 撮像制御部
５４ 画像取得部
５６ ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）
５８ ノイズ低減部
５９ 変換部
６１，７０６ 画像処理部
６６ 表示制御部
２０４ Ｂ広帯域光源
２０５ Ｇ広帯域光源
２０６，４０３ Ｒ広帯域光源
２０７ 狭帯域光源
２２１ 信号比算出部
２２２ 酸素飽和度算出部
２２３ 相関関係記憶部
２２４，３１２，４１２ 画像生成部
３０１ 第１狭帯域光源
３０２ 第２狭帯域光源
３１１，４１１ 変化量算出部
４０１ 第１Ｒ狭帯域光源
４０２ 第２Ｒ狭帯域光源
４０４ Ｃｙ広帯域光源
５０１ Ｂ狭帯域光源
５０２ Ｇ狭帯域光源
６５１ 静止度算出部
７００ カプセル内視鏡
７０８ 送受信アンテナ
ｆ １撮像フレームの長さ
Ｆ１ 第１撮像フレーム
Ｆ２ 第２撮像フレーム
Ｐｘ 画素
Ｔ０〜Ｔ５，ｔ２〜ｔ４ 時刻

Claims (11)

  1. 照明光を発生する光源部と、
    画素に電荷を蓄積し得る最大期間である蓄積期間と前記画素から信号を読み出す読出期間とからなる撮像フレームの単位で前記照明光を用いて観察対象を撮像するイメージセンサと、
    前記撮像フレームごとに前記照明光の波長帯域または分光スペクトルを変更する光源制御部と、
    前記照明光の波長帯域または分光スペクトルが異なる複数の前記撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する画像処理部と、
    前記観察画像の生成に使用する複数の前記撮像画像を得る複数の前記撮像フレームの前記蓄積期間及び前記読出期間の合計時間を一定に保ち、かつ、一定の前記合計時間において各々の前記撮像フレームの前記蓄積期間または前記読出期間の長さを延長または短縮する撮像制御部と、
    を備える内視鏡システム。
  2. 前記撮像制御部は、各々の前記撮像フレームにおける前記照明光の波長帯域、分光スペクトル、または光量に起因して、各々の前記撮像フレームの前記蓄積期間または前記読出期間を延長または短縮する請求項１に記載の内視鏡システム。
  3. 前記撮像制御部は、前記照明光の波長帯域が狭いほど前記蓄積期間を長くする請求項２に記載の内視鏡システム。
  4. 前記撮像制御部は、前記照明光の光量が小さいほど前記蓄積期間を長くする請求項２または３に記載の内視鏡システム。
  5. 前記撮像制御部は、前記撮像画像が暗くなる前記照明光または前記撮像画像のコントラストが小さくなる前記照明光を使用する前記撮像フレームほど、前記蓄積期間を長くする請求項１〜４のいずれか１項に記載の内視鏡システム。
  6. 前記撮像制御部は、前記照明光の光量が最大光量に達する前記撮像フレームの前記蓄積期間を長くする請求項１〜５のいずれか１項に記載の内視鏡システム。
  7. 前記撮像制御部は、前記蓄積期間を延長する前記撮像フレームとは別の前記撮像フレームにおいて前記読出期間を短縮する請求項１〜６のいずれか１項に記載の内視鏡システム。
  8. 前記撮像制御部は、１つの前記撮像フレームの長さを一定に保ち、かつ、１つの前記撮像フレームにおける前記蓄積期間と前記読出期間の長さを延長または短縮する請求項１〜７のいずれか１項に記載の内視鏡システム。
  9. 前記光源制御部は、前記蓄積期間及び前記読出期間において前記照明光を点灯する請求項１〜８のいずれか１項に記載の内視鏡システム。
  10. 各々の前記撮像フレームにおいて共通に取得する色の前記撮像画像を用いて、前記観察対象の静止度を算出する静止度算出部を備える請求項９に記載の内視鏡システム。
  11. 照明光を発生する光源部と、画素に電荷を蓄積し得る最大期間である蓄積期間と前記画素から信号を読み出す読出期間とからなる撮像フレームの単位で前記照明光を用いて観察対象を撮像するイメージセンサと、前記撮像フレームごとに前記照明光の波長帯域または分光スペクトルを変更する光源制御部と、前記照明光の波長帯域または分光スペクトルが異なる複数の前記撮像フレームにおいて取得する複数の撮像画像を用いて１つの観察画像を生成する画像処理部と、を有する内視鏡システムの作動方法において、
    撮像制御部が、前記観察画像の生成に使用する複数の前記撮像画像を得る複数の前記撮像フレームの前記蓄積期間及び前記読出期間の合計時間を一定に保ち、かつ、一定の前記合計時間において各々の前記撮像フレームの前記蓄積期間または前記読出期間の長さを延長または短縮する内視鏡システムの作動方法。
JP2016169957A 2016-08-31 2016-08-31 内視鏡システム及び内視鏡システムの作動方法 Active JP6654117B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016169957A JP6654117B2 (ja) 2016-08-31 2016-08-31 内視鏡システム及び内視鏡システムの作動方法
EP17184007.7A EP3289957B1 (en) 2016-08-31 2017-07-31 Endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016169957A JP6654117B2 (ja) 2016-08-31 2016-08-31 内視鏡システム及び内視鏡システムの作動方法

Publications (2)

Publication Number Publication Date
JP2018033719A true JP2018033719A (ja) 2018-03-08
JP6654117B2 JP6654117B2 (ja) 2020-02-26

Family

ID=59501327

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016169957A Active JP6654117B2 (ja) 2016-08-31 2016-08-31 内視鏡システム及び内視鏡システムの作動方法

Country Status (2)

Country Link
EP (1) EP3289957B1 (ja)
JP (1) JP6654117B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3620099A1 (en) 2018-09-05 2020-03-11 Fujifilm Corporation Endoscope system
JP2020068965A (ja) * 2018-10-30 2020-05-07 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察装置、および医療用観察システム
WO2021106452A1 (ja) * 2019-11-27 2021-06-03 富士フイルム株式会社 内視鏡システム及びその作動方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11638517B2 (en) 2019-01-17 2023-05-02 Stryker Corporation Systems and methods for medical imaging using a rolling shutter imager

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011250926A (ja) * 2010-06-01 2011-12-15 Fujifilm Corp 電子内視鏡システム
JP2013188244A (ja) * 2012-03-12 2013-09-26 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡動画表示方法
JP2014014438A (ja) * 2012-07-06 2014-01-30 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
WO2014125724A1 (ja) * 2013-02-12 2014-08-21 オリンパスメディカルシステムズ株式会社 内視鏡装置
WO2015016172A1 (ja) * 2013-08-01 2015-02-05 オリンパスメディカルシステムズ株式会社 内視鏡システム、内視鏡システムの作動方法
JP2015139613A (ja) * 2014-01-29 2015-08-03 オリンパス株式会社 医療用画像形成装置
WO2015136963A1 (ja) * 2014-03-12 2015-09-17 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2332460B1 (en) * 2005-05-13 2013-06-05 Olympus Medical Systems Corp. Biological observation apparatus
JP6355527B2 (ja) 2014-10-31 2018-07-11 富士フイルム株式会社 内視鏡システム及びその作動方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011250926A (ja) * 2010-06-01 2011-12-15 Fujifilm Corp 電子内視鏡システム
JP2013188244A (ja) * 2012-03-12 2013-09-26 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡動画表示方法
JP2014014438A (ja) * 2012-07-06 2014-01-30 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
WO2014125724A1 (ja) * 2013-02-12 2014-08-21 オリンパスメディカルシステムズ株式会社 内視鏡装置
WO2015016172A1 (ja) * 2013-08-01 2015-02-05 オリンパスメディカルシステムズ株式会社 内視鏡システム、内視鏡システムの作動方法
JP2015139613A (ja) * 2014-01-29 2015-08-03 オリンパス株式会社 医療用画像形成装置
WO2015136963A1 (ja) * 2014-03-12 2015-09-17 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3620099A1 (en) 2018-09-05 2020-03-11 Fujifilm Corporation Endoscope system
US11419488B2 (en) 2018-09-05 2022-08-23 Fujifilm Corporation Endoscope system
JP2020068965A (ja) * 2018-10-30 2020-05-07 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察装置、および医療用観察システム
JP7277108B2 (ja) 2018-10-30 2023-05-18 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察システム、および医療用観察システムの作動方法
WO2021106452A1 (ja) * 2019-11-27 2021-06-03 富士フイルム株式会社 内視鏡システム及びその作動方法
JPWO2021106452A1 (ja) * 2019-11-27 2021-06-03
JP7337190B2 (ja) 2019-11-27 2023-09-01 富士フイルム株式会社 内視鏡システム及びその作動方法

Also Published As

Publication number Publication date
JP6654117B2 (ja) 2020-02-26
EP3289957B1 (en) 2023-07-19
EP3289957A1 (en) 2018-03-07

Similar Documents

Publication Publication Date Title
US9629555B2 (en) Endoscope system, endoscope system processor device, operation method for endoscope system, and operation method for endoscope system processor device
JP6367683B2 (ja) 内視鏡システム、プロセッサ装置、内視鏡システムの作動方法、及びプロセッサ装置の作動方法
US10022074B2 (en) Endoscope system, processor device for endoscope system, operation method for endoscope system, and operation method for processor device
US9895054B2 (en) Endoscope system, light source device, operation method for endoscope system, and operation method for light source device
US10201300B2 (en) Processor device, endoscope system, operation method for endoscope system
JP6522539B2 (ja) 内視鏡システム及びその作動方法
US11116384B2 (en) Endoscope system capable of image alignment, processor device, and method for operating endoscope system
US20170251932A1 (en) Processor device for endoscope, operation method thereof, and non-transitory computer readable medium
EP3289957B1 (en) Endoscope system
JP6629639B2 (ja) 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
US20160287061A1 (en) Endoscope system, processor device, and operation method of endoscope system
WO2017183339A1 (ja) 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
JP7184657B2 (ja) 内視鏡システム
WO2014156604A1 (ja) 内視鏡システム及びその作動方法並びにプロセッサ装置
WO2019093356A1 (ja) 内視鏡システム及びその作動方法
US20100177181A1 (en) Endoscope image processing method and apparatus, and endoscope system using the same
JP6570490B2 (ja) 内視鏡システム及び内視鏡システムの作動方法
US20170231469A1 (en) Processor device for endoscope,operation method thereof, and non-transitory computer readable medium
JP7069290B2 (ja) 内視鏡システム及びその作動方法
JP2018051364A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、プロセッサ装置の作動方法
JP2020036780A (ja) 内視鏡システム
JP7159261B2 (ja) 内視鏡システム
JP6615950B2 (ja) 内視鏡システム、プロセッサ装置、内視鏡システムの作動方法、及びプロセッサ装置の作動方法
JP6272956B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、プロセッサ装置の作動方法
JP2020116146A (ja) 内視鏡システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180813

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190515

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190702

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200129

R150 Certificate of patent or registration of utility model

Ref document number: 6654117

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250