JP7362778B2 - 内視鏡システム及びその作動方法 - Google Patents

内視鏡システム及びその作動方法 Download PDF

Info

Publication number
JP7362778B2
JP7362778B2 JP2021567083A JP2021567083A JP7362778B2 JP 7362778 B2 JP7362778 B2 JP 7362778B2 JP 2021567083 A JP2021567083 A JP 2021567083A JP 2021567083 A JP2021567083 A JP 2021567083A JP 7362778 B2 JP7362778 B2 JP 7362778B2
Authority
JP
Japan
Prior art keywords
light
emission mode
mono
light emission
observation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021567083A
Other languages
English (en)
Other versions
JPWO2021131468A5 (ja
JPWO2021131468A1 (ja
Inventor
雅裕 久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2021131468A1 publication Critical patent/JPWO2021131468A1/ja
Publication of JPWO2021131468A5 publication Critical patent/JPWO2021131468A5/ja
Application granted granted Critical
Publication of JP7362778B2 publication Critical patent/JP7362778B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655Control therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0684Endoscope light sources using light emitting diodes [LED]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Endoscopes (AREA)

Description

本発明は、波長帯域が異なる複数の照明光を切り替えて照明し、各照明光に対応する観察画像を切り替えて表示する内視鏡システム及びその作動方法に関する。
近年の医療分野では、光源装置、内視鏡、プロセッサ装置を備える内視鏡システムが広く用いられている。内視鏡システムでは、内視鏡から観察対象に照明光を照射し、その照明光で照明中の観察対象を内視鏡の撮像素子で撮像して得られるRGB画像信号に基づいて、観察対象の画像をディスプレイ上に表示する。
また、近年においては、波長帯域が異なる複数の照明光を用いて、観察対象の照明を行うことにより、観察対象から多くの診断情報を得ることも行われている。例えば、特許文献1では、第1照明光と第2照明光とを、特定の発光パターンに従って、切り替えながら発光し、第1観察画像と第2観察画像を、特定の表示パターンに従って、切り替えてディスプレイに表示することが行われている。
国際公開第2019/093356号
特許文献1では、内視鏡の先端部が意図せず動いたり、また、観察対象のピントがずれて照明光が観察対象に当たりにくくなる場合などには、複数の照明光を切り替えて照明するマルチ発光モードが適さないことがあるから、予め設定された指定条件を満たした場合に、マルチ発光モードから、特定の照明光のみを発光するモノ発光モードに切り替えるようにしている。
しかしながら、モノ発光モードに切り替えた場合であっても、観察対象に関する撮影条件の変化が一時的であり、直ぐに、マルチ発光モードに適した撮影条件に回復する場合には、ユーザーが再びマルチ発光モードによる観察を望むことが多い。このような場合に、ユーザーが手動でマルチ発光モードを選択し直すのは、非常に煩雑、かつストレスフルである。
本発明は、複数の照明光を自動的に切り替えて観察対象に照明するマルチ発光モードから、特定の照明光のみを発光するモノ発光モードに切り替えた場合において、ユーザーに負荷をかけることなく、マルチ発光モードに切り替えることができる内視鏡システム及びその作動方法を提供することを目的とする。
本発明の内視鏡システムは、互いに異なる波長帯域の光を発光する複数の半導体光源と、複数の半導体光源を制御する光源用プロセッサであり、特定の発光比率を有する特定の照明光のみを発光するモノ発光モードと、第1の発光比率を有する第1の照明光と第1の発光比率と異なる第2の発光比率を有する第2の照明光とを含む複数の照明光を、特定の発光パターンに従って、切り替えながら発光するマルチ発光モードとに関する制御を行う光源用プロセッサと、画像制御用プロセッサとを備え、画像制御用プロセッサは、予め定めたモノ発光切替条件を満たすことにより、マルチ発光モードからモノ発光モードに自動的に切り替えた場合において、予め設定されたマルチ発光再開条件を満たし、且つ、再開許容条件を満たす場合に、モノ発光モードからマルチ発光モードに自動的に切り替え、マルチ発光再開条件を満たし、且つ、再開許容条件を満たさない場合に、マルチ発光モードに自動的に切り替えることを禁止する。
再開許容条件は、ユーザーがモノ発光モードを選択していない場合であることが好ましい。再開許容条件は、モノ発光モードに切り替えてから再開許容時間を経過していない場合であることが好ましい。再開許容条件は、マルチ発光モードの実施が可能である場合であることが好ましい。観察対象の倍率を変化させるための倍率変更部を有し、再開許容条件は、倍率変更部の使用又は不使用の切替えが行われていない場合であることが好ましい。再開許容条件はユーザーにより設定が可能であることが好ましい。
マルチ発光再開条件は、観察対象に関する撮影条件の変化が許容範囲内であることが好ましい。マルチ発光再開条件は、観察対象が、第1の部位から第2の部位に変わってから一定時間内に、第1の部位に戻った場合、または第2の部位から第1の部位に変わってから一定時間内に、第2の部位に戻った場合であること、観察対象の明るさが、第1明るさ用閾値以上、または第1明るさ用閾値より大きい第2明るさ閾値以下となった場合であること、観察対象の倍率を変化させる場合において、観察対象の倍率変化量が倍率用閾値未満となった場合であること、観察距離の変化量が距離用閾値以下となった場合であること、及び、観察対象を画像化した観察画像のブレ量がブレ量用閾値以下となった場合であることのうち少なくとも1以上を組み合せた条件であることが好ましい。
画像制御用プロセッサは、モノ発光モードの場合には、特定の照明光により照明された観察対象を撮像して得られる特定の観察画像をディスプレイに表示する制御を行い、マルチ発光モードの場合には、第1の照明光により照明された観察対象を撮像して得られる第1の観察画像と第2の照明光により照明された観察対象を撮像して得られる第2の観察画像とを含む複数の観察画像を、特定の表示パターンに従って、切り替えてディスプレイに表示する制御を行うことが好ましい。
本発明は、互いに異なる波長帯域の光を発光する複数の半導体光源と、複数の半導体光源を制御する光源用プロセッサであり、特定の発光比率を有する特定の照明光のみを発光するモノ発光モードと、第1の発光比率を有する第1の照明光と第1の発光比率と異なる第2の発光比率を有する第2の照明光とを含む複数の照明光を、特定の発光パターンに従って、切り替えながら発光するマルチ発光モードとに関する制御を行う光源用プロセッサと、画像制御用プロセッサとを備える内視鏡システムの作動方法において、画像制御用プロセッサは、予め定めたモノ発光切替条件を満たして、マルチ発光モードからモノ発光モードに自動的に切り替えた場合において、予め設定されたマルチ発光再開条件を満たし、且つ、再開許容条件を満たす場合に、モノ発光モードからマルチ発光モードに自動的に切り替え、マルチ発光再開条件を満たし、且つ、再開許容条件を満たさない場合に、マルチ発光モードに自動的に切り替えることを禁止する。
本発明によれば、複数の照明光を自動的に切り替えて観察対象に照明するマルチ発光モードから、特定の照明光のみを発光するモノ発光モードに切り替えた場合において、ユーザーに負荷をかけることなく、マルチ発光モードに切り替えることができる。
第1実施形態の内視鏡システムの外観図である。 第1実施形態の内視鏡システムの機能を示すブロック図である。 紫色光V、青色光B、緑色光G、及び赤色光Rの発光スペクトルを示すグラフである。 通常画像を示す画像図である。 紫色光V、青色光B、緑色光G、及び赤色光Rを含む第1照明光の発光スペクトルを示すグラフである。 第1観察画像を示す画像図である。 紫色光V、青色光B、緑色光G、及び赤色光Rを含む第2照明光の発光スペクトルを示すグラフである。 第2観察画像を示す画像図である。 マルチ発光モードにおける第1照明光及び第2照明光の発光と第1観察画像及び第2観察画像の表示を示す説明図である。 マルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 マルチ発光モードの使用時間が時間用閾値以上となった場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 静止画の保存回数が回数用閾値以上となった場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 撮影条件取得部の機能を示すブロック図である。 観察部位が第1の部位から第2の部位に変化した場合、又は観察部位が第2の部位から第1の部位に変化した場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 明るさが第1明るさ用閾値以下、又は明るさが第2明るさ閾値以上となる場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 倍率変化量が倍率用閾値を超える場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 観察距離の変化量が距離用閾値を超える場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 ブレ量がブレ量用閾値を超える場合にマルチ発光モードからモノ発光モードに自動切替することを示す説明図である。 モノ発光切替条件設定メニューを示す画像図である。 モノ発光モードからマルチ発光モードに自動切替することを示す説明図である。 元の観察部位に戻って観察する場合にモノ発光モードからマルチ発光モードに自動切替することを示す説明図である。 明るさが第1明るさ用閾値以上、又は明るさが第2明るさ閾値以下となる場合にモノ発光モードからマルチ発光モードに自動切替することを示す説明図である。 倍率変化量が倍率用閾値未満となる場合にモノ発光モードからマルチ発光モードに自動切替することを示す説明図である。 観察距離の変化量が距離用閾値以下となる場合にモノ発光モードからマルチ発光モードに自動切替することを示す説明図である。 ブレ量がブレ量用閾値以下となる場合にモノ発光モードからマルチ発光モードに自動切替することを示す説明図である。 本発明を含む一連の流れを示すフローチャートである。
図1に示すように、内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16と、ディスプレイ18と、ユーザーインターフェース19とを有する。内視鏡12は光源装置14と光学的に接続され、且つ、プロセッサ装置16と電気的に接続される。内視鏡12は、被検体内に挿入される挿入部12aと、挿入部12aの基端部分に設けられた操作部12bと、挿入部12aの先端側に設けられる湾曲部12c及び先端部12dを有している。操作部12bのアングルノブ12eを操作することにより、湾曲部12cは湾曲動作する。この湾曲動作に伴って、先端部12dが所望の方向に向けられる。なお、ユーザーインターフェース19は図示したキーボードの他、マウスなどが含まれる。
また、操作部12bには、アングルノブ12eの他、モード切替SW13a、静止画取得指示部13b、ズーム操作部13cが設けられている。モード切替SW13aは、モノ発光モードと、マルチ発光モードの切り替えに用いられる。モノ発光モードは、通常光(特定の照明光)を発光して、通常画像(特定の観察画像)をディスプレイ18に表示する。マルチ発光モードは、表層血管を強調するための第1照明光と深層血管を強調するための第2照明光とを、特定の発光パターンに従って、切り替えて発光を行う。また、マルチ発光モードでは、第1照明光を観察対象に照明して得られる第1観察画像と、第2照明光を観察対象に照明して得られる第2観察画像とを、特定の表示パターンに従って、切り替えてディスプレイ18に表示する。なお、モノ発光モードでは、通常光の他に、第1照明光又は第2照明光のいずれかを発光してもよい。
静止画取得指示部13bは、観察対象の静止画を静止画保存部63(図2参照)に保存するための指示に用いられる。ズーム操作部13cは、内視鏡12に設けられたズームレンズ47及びズーム駆動部47a(図2参照)の操作に用いられる。
プロセッサ装置16は、ディスプレイ18及びユーザーインターフェース19と電気的に接続される。ディスプレイ18は、画像情報等を出力表示する。ユーザーインターフェース19は、機能設定等の入力操作を受け付けるUI(User Interface:ユーザーインターフェース)として機能する。なお、プロセッサ装置16には、画像情報等を記録する外付けの記録部(図示省略)を接続してもよい。
図2に示すように、光源装置14は、光源部20と、光源用プロセッサ21と、光路結合部23とを有している。光源部20は、複数波長帯域の光を発光し、且つ、各波長帯域の光の発光比率の変更が可能となっている。なお、本明細書において、「互いに異なる複数の波長帯域の光」とは、複数の波長帯域が全く重ならないことを意味するものではなく、複数の波長帯域が一部重なっていてもよいことを意味する。光源部20は、複数波長帯域の光を発するために、V-LED(Violet Light Emitting Diode)20a、B-LED(Blue Light Emitting Diode)20b、G-LED(Green Light Emitting Diode)20c、R-LED(Red Light Emitting Diode)20dを有している。なお、光源部20には複数の半導体光源を設けられていればよいため、LEDの代わりに、LD(Laser Diode)を用いてもよい。
光源用プロセッサ21は、LED20a~20dの駆動を制御する。光路結合部23は、4色のLED20a~20dから発せられる4色の光の光路を結合する。光路結合部23で結合された光は、挿入部12a内に挿通されたライトガイド41及び照明レンズ45を介して、被検体内に照射される。
図3に示すように、V-LED20aは、中心波長405±10nm、波長範囲380~420nmの紫色光Vを発生する。B-LED20bは、中心波長460±10nm、波長範囲420~500nmの青色光Bを発生する。G-LED20cは、波長範囲が480~600nmに及ぶ緑色光Gを発生する。R-LED20dは、中心波長620~630nmで、波長範囲が600~650nmに及ぶ赤色光Rを発生する。
光源用プロセッサ21は、いずれのードにおいても、V-LED20a、B-LED20b、G-LED20c、及びR-LED20dを点灯する制御を行う。また、光源用プロセッサ21は、モノ発光モード時には、紫色光V、青色光B、緑色光G、及び赤色光R間の光強度比がVc:Bc:Gc:Rcとなる通常光を発光するように、各LED20a~20dを制御する(図3参照)。この通常光により照明された観察対象を撮像することにより、図4に示すように、表層血管が強調された通常画像が得られる。なお、本明細書において、発光比率とは、各半導体光源の光強度比をいい、光強度比は0(ゼロ)の場合を含む。したがって、各半導体光源のいずれか1つまたは2つ以上が点灯しない場合を含む。例えば、紫色光V、青色光B、緑色光G、及び赤色光R間の光強度比が1:0:0:0の場合のように、半導体光源の1つのみを点灯し、他の3つは点灯しない場合も、発光比率を有するものとする。
また、光源用プロセッサ21は、マルチ発光モードの場合に発光される第1照明光は、紫色光V、青色光B、緑色光G、及び赤色光Rの発光比率がVs1:Bs1:Gs1:Rs1にて発光するように、各LED20a~20dを制御する。第1照明光は、400nm以上440nm以下にピークを有することが好ましい。そのため、第1照明光は、図5に示すように、紫色光Vの光強度が、その他の青色光B、緑色光G、及び赤色光Rの光強度よりも大きくなるように、Vs1:Bs1:Gs1:Rs1が設定されている(Vs1>Bs1、Gs1、Rs1)。この第1照明光により照明された観察対象を撮像することにより、図6に示すように、表層血管が強調された第1観察画像が得られる。
また、第1照明光には、赤色光Rのような第1の赤色帯域を有しているため、粘膜の色を正確に再現することができる。さらに、第1照明光には、紫色光V、青色光B、緑色光Gのように第1の青色帯域及び第1の緑色帯域を有しているため、上記のような表層血管の他、腺管構造や凹凸など各種構造も強調することができる。
また、光源用プロセッサ21は、マルチ発光モードの場合に照明される第2照明光は、紫色光V、青色光B、緑色光G、及び赤色光Rの発光比率がVs2:Bs2:Gs2:Rs2にて発光するように、各LED20a~20dを制御する。第2照明光は、第1照明光に対して、460nm、540nm、630nmの強度比を大きくすることが好ましい。
そのため、第2照明光は、図7に示すように、第1照明光における青色光B、緑色光G、及び赤色光Rの光量と比較して、青色光B、緑色光G、及び赤色光Rの光量が大きくなるように、Vs2:Bs2:Gs2:Rs2が設定されている。この第2照明光により照明された観察対象を撮像することにより、図8に示すように、中深層血管が強調された第観察画像が得られる。
また、紫色光Vの光強度は、青色光B、緑色光G、及び赤色光Rの光強度よりも小さくなるように、Vs2:Bs2:Gs2:Rs2が設定されている(Vs2<Bs2、Gs2、Rs2)。また、第2照明光には、赤色光Rのような第2の赤色帯域を有しているため、粘膜の色を正確に再現することができる。さらに、第2照明光には、紫色光V、青色光B、緑色光Gのように第2の青色帯域及び第2の緑色帯域を有しているため、上記のような深層血管の他、腺管構造や凹凸など各種構造も強調することができる。
また、光源用プロセッサ21は、マルチ発光モードに設定されている場合には、第1照明光と第2照明光とを、特定の発光パターンに従って、自動的に切り替えて発光する制御を行う。本実施形態では、図9に示すように、特定の発光パターンとして、第1照明光と第2照明光とを、2フレーム間隔で、切り替えて発光する。また、第1照明光の発光により得られる第1観察画像と第2照明光の発光により得られる第2観察画像は、特定の表示パターンとして、2フレーム間隔で切り替えてディスプレイ18に表示される。
図2に示すように、ライトガイド41は、内視鏡12及びユニバーサルコード(内視鏡12と光源装置14及びプロセッサ装置16とを接続するコード)内に内蔵されており、光路結合部23で結合された光を内視鏡12の先端部12dまで伝搬する。なお、ライトガイド41としては、マルチモードファイバを使用することができる。一例として、コア径105μm、クラッド径125μm、外皮となる保護層を含めた径がφ0.3~0.5mmの細径なファイバケーブルを使用することができる。
内視鏡12の先端部12dには、照明光学系30aと撮像光学系30bが設けられている。照明光学系30aは照明レンズ45を有しており、この照明レンズ45を介して、ライトガイド41からの光が観察対象に照射される。撮像光学系30bは、対物レンズ46、ズームレンズ47、及び撮像センサ48を有している。観察対象からの反射光は、対物レンズ46及びズームレンズ47を介して、撮像センサ48に入射する。これにより、撮像センサ48に観察対象の反射像が結像される。ズームレンズ47はズーム駆動部47aにより光軸に沿って移動が可能である。このズームレンズ47が移動することにより、観察対象が拡大又は縮小される。なお、本発明の「倍率変更部」は、ズーム操作部13c、ズームレンズ47、及びズーム駆動部47aを含む構成に対応する。
撮像センサ48はカラーの撮像センサであり、被検体の反射像を撮像して画像信号を出力する。この撮像センサ48は、CCD(Charge Coupled Device)撮像センサやCMOS(Complementary Metal-Oxide Semiconductor)撮像センサ等であることが好ましい。本発明で用いられる撮像センサ48は、R(赤)、G(緑)及びB(青)の3色のRGB画像信号を得るためのカラーの撮像センサ、即ち、Rフィルタが設けられたR画素、Gフィルタが設けられたG画素、Bフィルタが設けられたB画素を備えた、いわゆるRGB撮像センサである。
なお、撮像センサ48としては、RGBのカラーの撮像センサの代わりに、C(シアン)、M(マゼンタ)、Y(イエロー)及びG(緑)の補色フィルタを備えた、いわゆる補色撮像センサであっても良い。補色撮像センサを用いる場合には、CMYGの4色の画像信号が出力されるため、補色-原色色変換によって、CMYGの4色の画像信号をRGBの3色の画像信号に変換する必要がある。また、撮像センサ48はカラーフィルタを設けていないモノクロ撮像センサであっても良い。この場合、光源用プロセッサ21は青色光B、緑色光G、及び赤色光Rを時分割で点灯させて、撮像信号の処理では同時化処理を加える必要がある。
撮像センサ48から出力される画像信号は、CDS/AGC回路50に送信される。CDS/AGC回路50は、アナログ信号である画像信号に相関二重サンプリング(CDS(Correlated Double Sampling))や自動利得制御(AGC(Auto Gain Control))を行う。CDS/AGC回路50を経た画像信号は、A/D変換器(A/D(Analog /Digital)コンバータ)52により、デジタル画像信号に変換される。A/D変換されたデジタル画像信号は、プロセッサ装置16に入力される。
プロセッサ装置16には、モード自動切替などの処理に関するプログラムがプログラム用メモリ(図示しない)が設けられている。プロセッサ装置16においては、画像制御用プロセッサによって構成される中央制御部68によって、プログラム用メモリ内のプログラムが動作することによって、画像取得部53と、DSP(Digital Signal Processor)56と、ノイズ除去部58と、画像処理部60と、パラメータ切替部62と、表示制御部66と、モード自動切替部69の機能が実現される。
画像取得部53には、内視鏡12からのデジタルのカラー画像信号が入力される。カラー画像信号は、撮像センサ48のR画素から出力されるR画像信号と、撮像センサ48のG画素から出力されるG画像信号と、撮像センサ48のB画素から出力されるB画像信号とから構成されるRGB画像信号である。
DSP56は、受信した画像信号に対して、欠陥補正処理、オフセット処理、ゲイン処理、色調整処理、ガンマ変換処理、又はデモザイク処理等の各種信号処理を施す。欠陥補正処理では、撮像センサ48の欠陥画素の信号が補正される。オフセット処理では、欠陥補正処理が施されたRGB画像信号から暗電流成分が除かれ、正確な零レベルが設定される。
ゲイン処理では、オフセット処理後のRGB画像信号に特定のゲインパラメータを乗じることにより信号レベルが整えられる。特定のゲインパラメータは、ード毎に異なっている。例えば、モノ発光モードの場合であれば、通常光の照明及び撮像により得られた画像信号に対して、特定のゲインパラメータとして、通常光用ゲインパラメータを乗じる通常光用ゲイン処理を行う。また、マルチ発光モードの場合であれば、第1照明光の照明時には、第1照明光の照明及び撮像により得られたRGB画像信号に対して、特定のゲインパラメータとして、第1照明光用ゲインパラメータを乗じる第1照明光用ゲイン処理が行われ、且つ、第2照明光の照明時には、第2照明光の照明及び撮像により得られたRGB画像信号に対して、特定のゲインパラメータとして、第2照明光用ゲインパラメータを乗じる第2照明光用ゲイン処理が行われる。
その後、ガンマ変換処理によって明るさや彩度が整えられる。リニアマトリクス処理後のRGB画像信号には、デモザイク処理(等方化処理、同時化処理とも言う)が施され、各画素で不足した色の信号が補間によって生成される。このデモザイク処理によって、全画素がRGB各色の信号を有するようになる。
ノイズ除去部58は、DSP56でガンマ補正等が施されたRGB画像信号に対してノイズ除去処理(例えば移動平均法やメディアンフィルタ法等)を施すことによって、RGB画像信号からノイズを除去する。ノイズが除去されたRGB画像信号は、画像処理部60に送信される。
画像処理部60は、RGB画像信号に対して、各種の画像処理を施す。各種の画像処理には、モノ発光モード又はマルチ発光モードに関わらず同じ条件で行われる画像処理の他、モード毎に異なる条件で行われる画像処理がある。モード毎に異なる条件で行われる画像処理には、色再現性を高めるための色調整処理、及び、血管や凹凸などの各種構造を強調するための構造強調処理が含まれる。色調整処理及び構造強調処理は、2次元LUT(Look Up Table)、3次元LUT(Look Up Table)、又はマトリックスなどを用いる処理である。画像処理部60では、色強調処理及び構造強調処理を行う場合には、ード毎に設定された色強調処理パラメータと、構造強調処理パラメータが用いられる。これら色強調処理パラメータ又は構造強調処理パラメータの切替は、パラメータ切替部62により行われる。
画像処理部60は、モノ発光モードにセットされている場合には、パラメータ切替部62によって通常光用色強調処理パラメータと通常光用構造強調処理パラメータに切り替えられる。そして、通常光用色強調処理パラメータを用いて、RGB画像信号に対して通常光用色強調処理を施し、且つ、通常光用構造強調処理パラメータを用いて、RGB画像信号に対して通常光用構造強調処理を施す。そして、以上の処理が施されたRGB画像信号は、通常画像として、表示制御部66に入力される。
画像処理部60は、マルチ発光モードにセットされている場合には、第1照明光の照明時には、RGB画像信号に対して第1照明光用色強調処理及び第1照明光用構造強調処理を施す。そして、以上の処理が施されたRGB画像信号は、第1観察画像として、表示制御部66に入力される。また、第2照明光の照明時には、RGB画像信号に対して第2照明光用色強調処理及び第2照明光用構造強調処理を施す。また、画像処理部60は、マルチ発光モードにセットされている場合には、第1観察画像と第2観察画像との間において、観察対象に含まれる正常粘膜の色を同じにする粘膜色バランス処理が行われる。第1観察画像に対しては、第1粘膜色バランス処理が行われ、第2観察画像に対しては、第1粘膜色バランス処理の結果に基づく第2粘膜色バランス処理が行われる。そして、以上の処理が施されたRGB画像信号は、第2観察画像として、表示制御部66に入力される。
なお、第1粘膜色バランス処理については、第1観察画像に含まれるB1画像信号、G1画像信号、R1画像信号において、例えば、下記D1)~D3)に示すように、画面全体の平均色が特定のカラーバランスになるように自動的に調整される。この第1粘膜色バランス処理は、観察対象において粘膜の色が支配的と仮定して行われる。そして、第1粘膜色バランス処理を行うことにより、第1粘膜色バランス処理済みのB1画像信号、G1画像信号、R1画像信号が得られる。
D1)B1画像信号=B1/B1ave
D2)G1画像信号=G1/G1ave
D3)R1画像信号=R1/R1ave
ここで、B1aveは、B1画像信号の平均画素値(画面全体(有効画素)の画素値の総和/有効画素数)を表している。G1aveは、G1画像信号の平均画素値(画面全体(有効画素)の画素値の総和/有効画素数)を表している。R1aveは、R1画像信号の平均画素値(画面全体(有効画素)の画素値の総和/有効画素数)を表している。
また、第2粘膜色バランス処理については、第2観察画像に含まれるB2画像信号、G2画像信号、R2画像信号において、例えば、下記E1)~E3)に示すように、画面全体の平均色が特定のカラーバランスになるように自動的に調整される。この第2粘膜色バランス処理では、第1粘膜色バランス処理で算出したB1ave、G1ave、R1aveが用いられる。そして、第2粘膜色バランス処理を行うことにより、第2粘膜色バランス処理済みのB2画像信号、G2画像信号、R2画像信号が得られる。
E1)B2画像信号=B2/B1ave
E2)G2画像信号=G2/G1ave
E3)R2画像信号=R2/R1ave
表示制御部66は、画像処理部60から入力された通常画像、第1観察画像、又は第2観察画像を、ディスプレイ18で表示可能な画像として表示するための制御を行う。モノ発光モードの場合には、表示制御部66は、ディスプレイ18に通常画像を表示する。マルチ発光モードの場合には、表示制御部66は、第1観察画像又は第2観察画像を、特定の表示パターン(本実施形態では「2フレーム間隔」。図9参照。)に従って、切り替えながらディスプレイ18に表示する。
中央制御部68は、上記したように、プログラムの実行を行う他、プロセッサ装置16の各部の制御を行う。また、中央制御部68は、内視鏡12又は光源装置14からの情報を受信し、受信した情報に基づいて、プロセッサ装置16の各部の制御や、内視鏡12又は光源装置14の制御を行う。
モード自動切替部69は、マルチ発光モードに設定されている場合に、予め設定したモノ発光切替条件を満たした場合に、図10に示すように、第1観察画像と第2観察画像を切り替えてディスプレイ18に表示するマルチ発光モードから、通常画像のみを連続してディスプレイ18に表示するモノ発光モードに切り替える処理を行う。このようにモードを自動的に切り替えることができるようにするのは、観察対象に変わりがなくほとんど変化が無い場合などには、モードの切り替えを忘れたりすることが有るためである。なお、ユーザーにとって、マルチ発光モードとモノ発光モードのいずれに設定されているかが分かりにくい場合があるため、ディスプレイ18には、マルチ発光モードの場合には「マルチ発光モード」である旨の表示がされ、モノ発光モードの場合には「モノ発光モード」である旨の表示がされている。
マルチ発光モードからモノ発光モードに切り替えるためのモノ発光切替条件としては、例えば、マルチ発光モードの使用時間が、予め定めた時間用閾値以上となることとする。この場合には、プロセッサ装置16内に設けられた時間計測部(図示しない)において、モード切替SW13aにより、マルチ発光モードに設定されてからの時間が計測される。そして、計測した時間が時間用閾値以上となった場合に、図11に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。
また、モノ発光切替条件としては、例えば、観察対象の静止画の保存回数が、予め定めた回数用閾値以上となることとする。この場合には、プロセッサ装置16内に設けられた回数カウント部(図示しない)において、静止画取得指示部13bが操作された回数をカウントする。そして、カウントした回数が回数用閾値以上となった場合に、図12に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。
また、モノ発光切替条件としては、観察対象に関する撮影条件が変化した場合とする。この場合には、撮影条件を取得するために、プロセッサ装置16の画像処理部60内に撮影条件取得部70が設けられる。撮影条件取得部70は、図13に示すように、観察部位取得部72と、明るさ算出部74と、倍率取得部76と、観察距離取得部78と、ブレ量算出部80とを備えている。
モノ発光切替条件として、撮影条件の一つである観察部位が変化した場合は、例えば、現在撮影を行っている観察部位が、第1の部位(例えば、「食道」)から第2の部位(例えば、「胃」)に変化した場合、または第2の部位から第1の部位に変化した場合、図14に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。観察部位が変化する場合は、内視鏡の先端部12dが移動していると考えられ、交互に発光される第1照明光または第2照明光が観察対象に確実に照明されないことがあり、このような場合は、マルチ発光モードに適さない。
観察部位に関する情報については、観察部位取得部72において取得する。観察部位取得部72は、マルチ発光モードにおいて得られる第1観察画像又は第2観察画像の画像的特徴量から、観察部位を判定する。例えば、第1観察画像又は第2観察画像において画面中央部が他の周辺部よりも明るさが暗い場合には、観察部位は「食道」であると判定される。また、第1観察画像又は第2観察画像において画面中央部が他の周辺部よりも明るさが明るい場合には、観察部位は「胃」であると判定される。
モノ発光切替条件として、撮影条件の一つである観察対象の明るさが、第1明るさ用閾値以下、又は第1明るさ用閾値より大きい第2明るさ閾値以上となる場合は、図15に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。明るさが第1明るさ用閾値以下の場合には、観察対象全体が暗いため、マルチ発光モードに適さない状態となっている。同様にして、明るさが第2明るさ閾値以上の場合には、ハレーションが生じている場合など、観察対象全体が極めて明るいため、マルチ発光モードに適さない状態となっている。なお、明るさに関する情報は、明るさ算出部74において取得する。明るさ算出部74は、第1観察画像または第2観察画像から画素値の平均値を算出し、算出した画素値の平均値から明るさを算出する。ここで、画素値の平均値が大きければ大きいほど、明るさは大きくなる。
モノ発光切替条件として、撮影条件の一つである観察対象の倍率について、倍率変化量が倍率用閾値を超えた場合に、図16に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。観察対象の倍率が大きく変化して、倍率変化量が倍率用閾値を超えるような場合には、観察対象に対する照明光の照明分布が変化して、マルチ発光モードに適さない場合が多い。なお、観察対象の倍率については、ズーム操作部13cが操作される毎に、いずれの倍率に設定されたかのズーム情報が倍率取得部76に送信される。モード自動切替部69は、倍率取得部76にて取得したズーム情報を参照して、倍率変化量が倍率用閾値を超えたか否かを判定する。
モノ発光切替条件として、撮影条件の一つである観察距離(内視鏡の先端部12dと観察対象との距離)について、観察距離の変化量が距離用閾値を超えた場合に、図17に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。観察対象の倍率と同様に、観察距離が大きく変化して、観察距離の変化量が距離用閾値を超えるような場合には、観察対象に対する照明光の照明分布が変化して、マルチ発光モードに適さない場合が多い。なお、観察距離については、観察距離取得部78が、マルチ発光モードにて得られる第1観察画像または第2観察画像から画素値の平均値を算出し、算出した画素値の平均値から観察距離を求める。ここで、画素値の平均値が大きければ大きいほど、観察距離は小さいとされる。
モノ発光切替条件として、撮影条件の一つである画像のブレ量がブレ量用閾値を超えた場合に、図18に示すように、マルチ発光モードからモノ発光モードに自動的に切り替える。画像のブレ量が大きく、ブレ量がブレ量用閾値を超えるような場合には、照明光が確実に観察対象に当たらない場合があり、マルチ発光モードに適さない場合が多い。なお、ブレ量については、ブレ量算出部80が、マルチ発光モードにて得られる第1観察画像または第2観察画像からコントラストを求め、コントラストからブレ量を算出する。コントラストが低くなるほど、ブレ量が大きくなる。ブレ量の算出方法としては、コントラストを用いる他、第1観察画像または第2観察画像の周波数成分から算出するようにしてもよい(周波数成分が低周波の成分となるほど、ブレ量が大きくなる)。
以上のように、マルチ発光モードからモノ発光モードへの自動切替に用いるモノ発光切替条件については、ユーザーにより適宜設定可能である。この場合には、ユーザーはユーザーインターフェース19を操作して、図19に示すモノ発光切替条件設定メニュー82をディスプレイ18に表示させる。このモノ発光切替条件設定メニュー82においては、「時間用閾値」、「回数用閾値」の設定を行うことができる。「時間用閾値」の場合であれば、モノ発光切替条件設定メニュー82にて「100秒」に設定すると、マルチ発光モードの使用時間が「100秒」に達した時点で、マルチ発光モードからモノ発光モードに自動的に切り替えられる。また、「回数用閾値」の場合であれば、モノ発光切替条件設定メニュー82にて「40回」に設定すると、静止画取得指示部13bの操作回数が「40回」に達した時点で、マルチ発光モードからモノ発光モードに自動的に切り替えられる。
なお、後述するように、モノ発光モードからマルチ発光モードへの自動切替に用いるマルチ発光再開条件については、モノ発光切替条件設定メニュー82と同様のマルチ発光再開条件設定メニューをディスプレイ18に表示して、適宜設定できるようにすることが好ましい。
また、モノ発光切替条件設定メニュー82においては、「第1の部位」、「第2の部位」の設定を行うことができる。「第1の部位」を「食道」とし、「第2の部位」を「胃」として設定した場合には、観察部位が「食道」から「胃」に変わった場合、又は「胃」から「食道」に変わった場合に、マルチ発光モードからモノ発光モードに自動的に切り替えられる。また、モノ発光切替条件設定メニュー82においては、「第1明るさ閾値」、「第2明るさ閾値」の設定を行うことができる。「第1明るさ閾値」をP1とし、「第2明るさ閾値」をP2(>P1)として設定した場合には、観察対象の明るさがP1以下、又はP2位以上となった場合に、マルチ発光モードからモノ発光モードに自動的に切り替えられる。
また、モノ発光切替条件設定メニュー82においては、「倍率用閾値」の設定を行うことができる。「倍率用閾値」を「5倍」とした場合には、観察対象の倍率変化量が「5倍」を超えた時点で、マルチ発光モードからモノ発光モードに自動的に切り替えられる。また、モノ発光切替条件設定メニュー82においては、「距離用閾値」の設定を行うことができる。「距離用閾値」をLxとした場合には、観察距離の変化量がLxを超えた場合に、マルチ発光モードからモノ発光モードに自動的に切り替えられる。また、モノ発光切替条件設定メニュー82においては、「ブレ量用閾値」の設定を行うことができる。「ブレ量用閾値」をBrに設定した場合には、ブレ量がBrを超えた場合に、マルチ発光モードからモノ発光モードに自動的に切り替えられる。
モード自動切替部69は、モノ発光切替条件を満たすことにより、マルチ発光モードからモノ発光モードに自動的に切り替えた場合において、図20に示すように、予め設定されたマルチ発光再開条件を満たした場合に、モノ発光モードからマルチ発光モードに自動的に切り替える。観察対象に関する撮影条件が変化した場合などに、モノ発光モードに自動的に切り替えているが、観察対象に関する撮影条件の変化が許容範囲内である場合など、マルチ発光再開条件を満たした場合などには、モノ発光モードからマルチ発光モードに自動的に切り替えることが好ましい。なお、撮影条件の変化が許容範囲内であるとは、撮影条件の変化によっても、マルチ発光モードによって得られる第1の観察画像と第2の観察画像の切り替え表示に対する視認性に影響を与えないことをいう。
マルチ発光再開条件は、観察対象が、第1の部位(例えば、「食道」)から第2の部位(例えば、「胃」)に変わってから、一定時間内に第1の部位に戻った場合、または、第2の部位から第1の部位に変わってから、一定時間内に第2の部位に戻った場合であることが好ましい。この場合には、図21に示すように、モノ発光モードからマルチ発光モードに自動的に切り替える。観察部位が直ぐに元の部位に戻った場合には、照明条件がそれほど変化せず、マルチ発光モードによる発光状態に影響を与えないためである。なお、観察部位に関する情報については、上記と同様に、観察部位取得部72において取得する。
マルチ発光再開条件は、観察対象の明るさが、第1明るさ閾値以上、または第1明るさ用閾値より大きい第2明るさ閾値以下となった場合であることが好ましい。この場合には、図22に示すように、モノ発光モードからマルチ発光モードに自動的に切り替える。明るさが暗くなったり、又は、明るくなったりしても、一定時間後に、元の通常の明るさ(第1明るさ閾値以上、または第明るさ閾値以下)に戻った場合には、マルチ発光モードによる発光状態に影響を与えないためである。なお、明るさに関する情報については、上記と同様に、明るさ算出部74において取得する。
マルチ発光再開条件は、観察対象の倍率を変化させる場合において、観察対象の倍率変化量が倍率用閾値未満であることが好ましい。この場合には、図23に示すように、モノ発光モードからマルチ発光モードに自動的に切り替える。観察対象の倍率の変化がそれほど大きくなく、倍率変化量が倍率用閾値を超えたのが一時的であり、直ぐに、倍率用閾値未満に収まったような場合には、マルチ発光モードによる発光状態に影響を与えないためである。なお、観察対象の倍率については、上記と同様に、倍率取得部76において取得する。
マルチ発光再開条件は、観察距離の変化量が距離用閾値以下となった場合であることが好ましい。この場合には、図24に示すように、モノ発光モードからマルチ発光モードに自動的に切り替える。観察距離の変化がそれほど大きくなく、観察距離の変化量が距離用閾値を超えたのが一時的であり、直ぐに、距離用閾値未満に収まったような場合には、マルチ発光モードによる発光状態に影響を与えないためである。なお、観察距離については、上記と同様に、観察距離取得部78において取得する。
マルチ発光再開条件は、観察画像のブレ量がブレ量用閾値以下となった場合であることが好ましい。この場合には、図25に示すように、モノ発光モードからマルチ発光モードに自動的に切り替える。画像のブレ量がそれほど大きくなく、ブレ量がブレ量用閾値を超えたのが一時的であり、直ぐに、ブレ量用閾値未満に収まったような場合には、マルチ発光モードによる発光状態に影響を与えないためである。なお、ブレ量については、上記と同様に、ブレ量算出部80において算出する。
ただし、意図せずに、マルチ発光モードに自動的に切り替わるのを防ぐため、モード自動切替部69は、マルチ発光再開条件を満たし、且つ、再開許容条件を満たす場合に、モノ発光モードからマルチ発光モードに自動的に切り替える一方、マルチ発光再開条件を満たし、且つ、再開許容条件を満たさない場合に、マルチ発光モードに自動的に切り替えることを禁止することが好ましい。再開許容条件は、ユーザーにより設定可能であることが好ましい。また、再開許容条件が満たすか否かを判定するために、再開許容条件を示す再開許容有無フラグが用いられる。再開許容有無フラグが「1」であることは、再開許容条件を満たさないことを表し、再開許容有無フラグが「0」であることは、再開許容条件を満たすことを表す(図20~図25参照)。
再開許容条件は、ユーザーがモノ発光モードを選択していない場合であることが好ましい。モノ発光モードの選択は、ユーザーインターフェース19を操作して行うことが好ましい。ユーザーがモノ発光モードを選択した場合には、再開許容有無フラグが「0」となり、モノ発光モードを選択しない場合には、再開許容有無フラグが「1」となる。ユーザーが自発的にモノ発光モードを選択する場合には、マルチ発光モードに自動的に切り替えないことが好ましい。
再開許容条件は、モノ発光切替条件を満たしてマルチ発光モードからモノ発光モードに自動的に切り替えてから、再開許容時間を経過していない場合であることが好ましい。この場合には、時間計測部(図示しない)において、モノ発光モードに切り替えてからの時間が計測される。計測した時間が再開許容時間を経過してない場合には、再開許容有無フラグを「1」で維持する。そして、計測した時間が再開許容時間を経過した場合には、再開許容有無フラグを「0」に切り替える。再開許容時間を経過した後は、モノ発光モードに基づく観察に適した状態と考えられるため、マルチ発光モードに自動的に切り替えないことが好ましい。
再開許容条件は、マルチ発光モードの実施が可能である場合であることが好ましい。マルチ発光モードの実施が可能又は不可の判定については、プロセッサ装置16のマルチ発光モード実施可能判定部(図示しない)が行う。具体的には、マルチ発光モード実施可能判定部は、内視鏡12、光源装置14、及びプロセッサ装置16に関する異常などを検出し、検出結果に基づいて、マルチ発光モードの実施可能又は実施不可を判定する。この場合には、マルチ発光モード実施可能判定部が、マルチ発光モードが実施可能と判定した場合には、再開許容有無フラグを「1」とし、マルチ発光モードが実施不可と判定した場合には、再開許容有無フラグを「0」とする。内視鏡12、光源装置14、及びプロセッサ装置16に関する異常などが生じて、マルチ発光モードの実施が難しくなった場合には、マルチ発光モードに自動的に切り替えないことが好ましい。
再開許容条件は、倍率変更部の使用又は不使用の切替が行われていない場合であることが好ましい。倍率変更部の使用とは、ズーム操作部13cを「ON」にして倍率変更が可能な状態をいう。倍率変更部の不使用とは、ズーム操作部13cを「OFF」にして倍率変更をしない状態をいう。この場合には、モノ発光切替条件を満たしてモノ発光モードに自動的に切り替えられた後、倍率変更部の使用又は不使用の切り替えがない場合には、再開許容有無フラグを「1」とする一方、倍率変更部の使用又は不使用が切り替えられた場合には、再開許容有無フラグを「0」とする。倍率変更部の使用又は不使用の切替えが行われた場合には、前回のマルチ発光モードの場合とは異なる対象を観察し、必ずしもマルチ発光モードを使用するとは限らないことから、マルチ発光モードに自動的に切り替えないことが好ましい。
次に、本発明を含む一連の流れについて、図26に示すフローチャートに沿って説明する。マルチ発光モードにおいては、第1照明光と第2照明光とが、特定の発光パターン(本実施形態では2フレーム間隔)に従って、切り替えて発光される。そして、第1照明光により照明された観察対象を撮像して得られる第1観察画像と、第2照明光により照明された観察対象を撮像して得られる第2観察画像とを、特定の表示パターン(本実施形態では2フレーム間隔)に従って、切り替えてディスプレイ18に表示される。
そして、予め定めたモノ発光切替条件を満たした場合に、マルチ発光モードからモノ発光モードに自動的に切り替える。モノ発光切替条件としては、マルチ発光モードの使用時間が時間用閾値を超えた場合や、静止画の保存回数が回数用閾値を超えた場合などがある。その他、モノ発光切替条件として、観察対象に関する撮影条件が変化した場合がある。モノ発光モードに自動的に切り替えられると、第1照明光と第2照明光の切替発光は停止される。これに合わせて、第1観察画像と第2観察画像の切替表示も停止される。そして、通常光が発光され、通常光により照明された観察対象を撮像して得られる通常画像がディスプレイ18に表示される。
モノ発光モードに自動的に切り替えられた後は、プロセッサ装置16において、マルチ発光再開条件を満たすか否かが監視される。マルチ発光再開条件を満たし、且つ、再開許容条件を満たす場合には、モノ発光モードからマルチ発光モードに自動的に切り替える。一方、マルチ発光再開条件を満たしても、再開許容条件を満たさない場合には、マルチ発光モードに自動的に切り替えることを禁止する。また、マルチ発光再開条件を満たさない場合にも、マルチ発光モードに自動的に切り替えることを禁止する。マルチ発光モードへの自動的な切替が禁止された場合には、モノ発光モードを継続する。
なお、上記実施形態においては、第1照明光と第2照明光とを、特定の発光パターンに従って、切り替えながら発光し、且つ、第1照明光に対応する第1観察画像と第2照明光に対応する第2観察画像とを、特定の表示パターンに従って、切り替えてディスプレイ18に表示するようにしているが、互いに波長帯域が異なる3種類以上の照明光を、特定の発光パターンに従って、切り替えながら発光し、且つ、各照明光に対応する3種類以上の観察画像を、特定の表示パターンに従って、切り替えてディスプレイ18に表示するようにしてもよい。
上記実施形態において、画像取得部53、DSP56、ノイズ除去部58、画像処理部60、パラメータ切替部62、中央制御部68、モード自動切替部69など、プロセッサ装置16に含まれる処理部(processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ(processor)である。各種のプロセッサには、ソフトウエア(プログラム)を実行して各種の処理部として機能する汎用的なプロセッサであるCPU(Central Processing Unit)、FPGA (Field Programmable Gate Array) などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
1つの処理部は、これら各種のプロセッサのうちの1つで構成されてもよいし、同種または異種の2つ以上のプロセッサの組み合せ(例えば、複数のFPGAや、CPUとFPGAの組み合わせ)で構成されてもよい。また、複数の処理部を1つのプロセッサで構成してもよい。複数の処理部を1つのプロセッサで構成する例としては、第1に、クライアントやサーバなどのコンピュータに代表されるように、1つ以上のCPUとソフトウエアの組み合わせで1つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第2に、システムオンチップ(System On Chip:SoC)などに代表されるように、複数の処理部を含むシステム全体の機能を1つのIC(Integrated Circuit)チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを1つ以上用いて構成される。
さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路(circuitry)である。
10 内視鏡システム
12 内視鏡
12a 挿入部
12b 操作部
12c 湾曲部
12d 先端部
12e アングルノブ
13a モード切替SW
13b 静止画取得指示部
13c ズーム操作部
14 光源装置
16 プロセッサ装置
18 ディスプレイ
19 ユーザーインターフェース
20 光源部
20a V-LED(Violet Light Emitting Diode)
20b B-LED(Blue Light Emitting Diode)
20c G-LED(Green Light Emitting Diode)
20d R-LED(Red Light Emitting Diode)
21 光源用プロセッサ
23 光路結合部
30a 照明光学系
30b 撮像光学系
41 ライトガイド
45 照明レンズ
46 対物レンズ
47 ズームレンズ
47a ズーム駆動部
48 撮像センサ
50 CDS/AGC回
52 A/D変換器
53 画像取得部
56 DSP(Digital Signal Processor)
58 ノイズ除去部
60 画像処理部
62 パラメータ切替部
63 静止画保存部
66 表示制御部
68 中央制御部
69 モード自動切替部
70 撮影条件取得部
72 観察部位取得部
74 明るさ算出部
76 倍率取得部
78 観察距離取得部
80 ブレ量算出部
82 モノ発光切替条件設定メニュー

Claims (10)

  1. 互いに異なる波長帯域の光を発光する複数の半導体光源と、
    前記複数の半導体光源を制御する光源用プロセッサであり、特定の発光比率を有する特定の照明光のみを発光するモノ発光モードと、第1の発光比率を有する第1の照明光と前記第1の発光比率と異なる第2の発光比率を有する第2の照明光とを含む複数の照明光を、特定の発光パターンに従って、切り替えながら発光するマルチ発光モードとに関する制御を行う光源用プロセッサと、
    画像制御用プロセッサとを備え、
    前記画像制御用プロセッサは、
    予め定めたモノ発光切替条件を満たすことにより、前記マルチ発光モードから前記モノ発光モードに自動的に切り替えた場合において、
    予め設定されたマルチ発光再開条件を満たし、且つ、再開許容条件を満たす場合に、前記モノ発光モードから前記マルチ発光モードに自動的に切り替え
    前記マルチ発光再開条件を満たし、且つ、前記再開許容条件を満たさない場合に、前記マルチ発光モードに自動的に切り替えることを禁止する内視鏡システム。
  2. 前記再開許容条件は、ユーザーが前記モノ発光モードを選択していない場合である請求項記載の内視鏡システム。
  3. 前記再開許容条件は、前記モノ発光モードに切り替えてから再開許容時間を経過していない場合である請求項または記載の内視鏡システム。
  4. 前記再開許容条件は、前記マルチ発光モードの実施が可能である場合である請求項ないしいずれか1項記載の内視鏡システム。
  5. 観察対象の倍率を変化させるための倍率変更部を有し、
    前記再開許容条件は、前記倍率変更部の使用又は不使用の切替えが行われていない場合である請求項ないしいずれか1項記載の内視鏡システム。
  6. 前記再開許容条件はユーザーにより設定が可能である請求項ないしいずれか1項記載の内視鏡システム。
  7. 前記マルチ発光再開条件は、観察対象に関する撮影条件の変化が許容範囲内である請求項1ないしいずれか1項記載の内視鏡システム。
  8. 前記マルチ発光再開条件は、観察対象が、第1の部位から第2の部位に変わってから一定時間内に、前記第1の部位に戻った場合、または前記第2の部位から前記第1の部位に変わってから一定時間内に、前記第2の部位に戻った場合であること、
    前記観察対象の明るさが、第1明るさ用閾値以上、または前記第1明るさ用閾値より大きい第2明るさ用閾値以下となった場合であること、
    前記観察対象の倍率を変化させる場合において、前記観察対象の倍率変化量が倍率用閾値未満となった場合であること、
    観察距離の変化量が距離用閾値以下となった場合であること、及び、
    前記観察対象を画像化した観察画像のブレ量がブレ量用閾値以下となった場合であることのうち少なくとも1以上を組み合せた条件である請求項記載の内視鏡システム。
  9. 前記画像制御用プロセッサは、
    前記モノ発光モードの場合には、前記特定の照明光により照明された観察対象を撮像して得られる特定の観察画像をディスプレイに表示する制御を行い、前記マルチ発光モードの場合には、前記第1の照明光により照明された観察対象を撮像して得られる第1の観察画像と前記第2の照明光により照明された観察対象を撮像して得られる第2の観察画像とを含む複数の観察画像を、特定の表示パターンに従って、切り替えて前記ディスプレイに表示する制御を行う請求項1ないしいずれか1項記載の内視鏡システム。
  10. 互いに異なる波長帯域の光を発光する複数の半導体光源と、
    前記複数の半導体光源を制御する光源用プロセッサであり、特定の発光比率を有する特定の照明光のみを発光するモノ発光モードと、第1の発光比率を有する第1の照明光と前記第1の発光比率と異なる第2の発光比率を有する第2の照明光とを含む複数の照明光を、特定の発光パターンに従って、切り替えながら発光するマルチ発光モードとに関する制御を行う光源用プロセッサと、
    画像制御用プロセッサとを備える内視鏡システムの作動方法において、
    前記画像制御用プロセッサは、
    予め定めたモノ発光切替条件を満たして、前記マルチ発光モードから前記モノ発光モードに自動的に切り替えた場合において、
    予め設定されたマルチ発光再開条件を満たし、且つ、再開許容条件を満たす場合に、前記モノ発光モードから前記マルチ発光モードに自動的に切り替え
    前記マルチ発光再開条件を満たし、且つ、前記再開許容条件を満たさない場合に、前記マルチ発光モードに自動的に切り替えることを禁止する内視鏡システムの作動方法。
JP2021567083A 2019-12-26 2020-11-25 内視鏡システム及びその作動方法 Active JP7362778B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019236714 2019-12-26
JP2019236714 2019-12-26
PCT/JP2020/043833 WO2021131468A1 (ja) 2019-12-26 2020-11-25 内視鏡システム及びその作動方法

Publications (3)

Publication Number Publication Date
JPWO2021131468A1 JPWO2021131468A1 (ja) 2021-07-01
JPWO2021131468A5 JPWO2021131468A5 (ja) 2022-07-27
JP7362778B2 true JP7362778B2 (ja) 2023-10-17

Family

ID=76574345

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021567083A Active JP7362778B2 (ja) 2019-12-26 2020-11-25 内視鏡システム及びその作動方法

Country Status (5)

Country Link
US (1) US20220354351A1 (ja)
EP (1) EP4082419A4 (ja)
JP (1) JP7362778B2 (ja)
CN (1) CN114845625A (ja)
WO (1) WO2021131468A1 (ja)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007020728A (ja) 2005-07-13 2007-02-01 Olympus Medical Systems Corp 画像処理装置
JP2010063589A (ja) 2008-09-10 2010-03-25 Fujifilm Corp 内視鏡システム、およびその駆動制御方法
WO2010116902A1 (ja) 2009-04-09 2010-10-14 オリンパスメディカルシステムズ株式会社 内視鏡装置
JP2012000160A (ja) 2010-06-14 2012-01-05 Fujifilm Corp 内視鏡装置
JP2012010981A (ja) 2010-06-30 2012-01-19 Fujifilm Corp 内視鏡装置
JP2012152333A (ja) 2011-01-25 2012-08-16 Fujifilm Corp 内視鏡システム及びその光源制御方法
WO2017199509A1 (ja) 2016-05-19 2017-11-23 オリンパス株式会社 生体観察システム
WO2019093356A1 (ja) 2017-11-13 2019-05-16 富士フイルム株式会社 内視鏡システム及びその作動方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007020728A (ja) 2005-07-13 2007-02-01 Olympus Medical Systems Corp 画像処理装置
JP2010063589A (ja) 2008-09-10 2010-03-25 Fujifilm Corp 内視鏡システム、およびその駆動制御方法
WO2010116902A1 (ja) 2009-04-09 2010-10-14 オリンパスメディカルシステムズ株式会社 内視鏡装置
JP2012000160A (ja) 2010-06-14 2012-01-05 Fujifilm Corp 内視鏡装置
JP2012010981A (ja) 2010-06-30 2012-01-19 Fujifilm Corp 内視鏡装置
JP2012152333A (ja) 2011-01-25 2012-08-16 Fujifilm Corp 内視鏡システム及びその光源制御方法
WO2017199509A1 (ja) 2016-05-19 2017-11-23 オリンパス株式会社 生体観察システム
WO2019093356A1 (ja) 2017-11-13 2019-05-16 富士フイルム株式会社 内視鏡システム及びその作動方法

Also Published As

Publication number Publication date
US20220354351A1 (en) 2022-11-10
JPWO2021131468A1 (ja) 2021-07-01
EP4082419A1 (en) 2022-11-02
WO2021131468A1 (ja) 2021-07-01
CN114845625A (zh) 2022-08-02
EP4082419A4 (en) 2023-06-07

Similar Documents

Publication Publication Date Title
JP6243364B2 (ja) 内視鏡用のプロセッサ装置、及び作動方法、並びに制御プログラム
CN111343898B (zh) 内窥镜系统及其工作方法
US11344191B2 (en) Endoscope system including processor for determining type of endoscope
US11089943B2 (en) Endoscope system and method of operating the same
WO2020039932A1 (ja) 内視鏡システム
JP6285370B2 (ja) 内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法、内視鏡用の制御プログラム、及び内視鏡システム
US11969152B2 (en) Medical image processing system
JP7362778B2 (ja) 内視鏡システム及びその作動方法
CN111712178A (zh) 内窥镜系统及其工作方法
JP7362783B2 (ja) 内視鏡システム及びその作動方法
JP7390482B2 (ja) 内視鏡システム及びその作動方法
JP7386266B2 (ja) 内視鏡システム及びその作動方法
JP7112970B2 (ja) 内視鏡システム
JP7171885B2 (ja) 内視鏡システム
JP7337190B2 (ja) 内視鏡システム及びその作動方法
JP7390465B2 (ja) 内視鏡システム、及び内視鏡システムの作動方法
WO2021182048A1 (ja) 内視鏡システム、及び内視鏡システムの作動方法
WO2020121868A1 (ja) 内視鏡システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220601

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230626

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230926

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231004

R150 Certificate of patent or registration of utility model

Ref document number: 7362778

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150