JP7470779B2 - 内視鏡システム、制御方法、及び制御プログラム - Google Patents

内視鏡システム、制御方法、及び制御プログラム Download PDF

Info

Publication number
JP7470779B2
JP7470779B2 JP2022509301A JP2022509301A JP7470779B2 JP 7470779 B2 JP7470779 B2 JP 7470779B2 JP 2022509301 A JP2022509301 A JP 2022509301A JP 2022509301 A JP2022509301 A JP 2022509301A JP 7470779 B2 JP7470779 B2 JP 7470779B2
Authority
JP
Japan
Prior art keywords
information
endoscope
image
light
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022509301A
Other languages
English (en)
Other versions
JPWO2021192524A1 (ja
Inventor
浩司 下村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2021192524A1 publication Critical patent/JPWO2021192524A1/ja
Application granted granted Critical
Publication of JP7470779B2 publication Critical patent/JP7470779B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655Control therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00039Operational features of endoscopes provided with input arrangements for the user
    • A61B1/0004Operational features of endoscopes provided with input arrangements for the user for electronic operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0684Endoscope light sources using light emitting diodes [LED]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/07Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/12Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B8/469Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means for selection of a region of interest
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/26Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes using light guides
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00165Optical arrangements with light-conductive means, e.g. fibre optics

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • Signal Processing (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Endoscopes (AREA)

Description

本発明は、内視鏡システム、制御方法、及び制御プログラムに関する。
従来、白色光等の通常光を被検体内に照射しながら連続撮像を行い、ライブ画像を表示する内視鏡システムが知られている。また、狭帯域光等の特殊光を被検体内に照射しながら連続撮像を行い、IEE(Image-Enhanced Endoscopy:画像強調観察)などの解析を行う内視鏡システムが知られている。
特許文献1には、内視鏡観察画像を親画面とし、内視鏡挿入形状画像を子画面とする合成画像や、内視鏡観察画像を親画面とし、キャプチャプレビュー画像を子画面とする合成画像を生成する医療用画像処理装置が記載されている。
特許文献2には、設定ボタンの操作を通じて、モニタの表示モードを、単一の画像をモニタに表示する単一画像表示モード、又は複数の画像をモニタに表示する複数画像表示モードに設定可能な電子内視鏡システムが記載されている。
特開2009-219547号公報 特開2013-153991号公報
しかしながら、上記の従来技術では、内視鏡検査等の検査に関する複数種類の情報を分割画面により同時に表示する構成において、分割画面に表示する情報を簡単に切り替えることができなかった。
例えば、内視鏡検査においては、内視鏡に設けられた撮像素子により得られた撮像画像を用いたライブ画像をディスプレイに主に表示しつつ、例えば内視鏡に設けられた撮像素子により得られた撮像画像に基づくAI(Artificial Intelligence)による解析結果などの補助的な情報も表示することが求められる。
このライブ画像とともに表示すべき補助的な情報は複数種類存在する。そして、この複数種類の補助的な情報のうち、ライブ画像とともに表示する情報は、内視鏡検査の状況に基づく検査者(例えば医師)の判断により簡単に切り替えられることが望ましい。しかし、上記の特許文献1,2にはこのような課題を解決する手段は開示されていない。
本発明は、上記事情に鑑みてなされたものであり、分割画面に表示する情報を簡単に切り替えることのできる内視鏡システム、制御方法、及び制御プログラムを提供することを目的とする。
本発明の内視鏡システムは、内視鏡による検査時に検査者が視認可能なディスプレイと、プロセッサと、を含む内視鏡システムであって、上記ディスプレイの画面は、複数の情報領域と選択領域とを含み、上記プロセッサは、上記検査時に、上記検査に関する複数種類の情報をそれぞれ上記複数の情報領域に表示させ、上記複数の情報領域に含まれる切り替え対象の情報領域に表示させる上記情報の選択肢を上記選択領域に表示させ、上記選択肢を選択するユーザ操作に基づいて、上記切り替え対象の情報領域に表示させる上記情報を切り替えるものである。
また、本発明の内視鏡システムの制御方法は、内視鏡による検査時に検査者が視認可能なディスプレイを含む内視鏡システムの制御方法であって、上記ディスプレイの画面は、複数の情報領域と選択領域とを含み、上記検査時に、上記検査に関する複数種類の情報をそれぞれ上記複数の情報領域に表示させ、上記複数の情報領域に含まれる切り替え対象の情報領域に表示させる上記情報の選択肢を上記選択領域に表示させ、上記選択肢を選択するユーザ操作に基づいて、上記切り替え対象の情報領域に表示させる上記情報を切り替えるものである。
また、本発明の制御プログラムは、内視鏡による検査時に検査者が視認可能なディスプレイを含む内視鏡システムを制御する制御プログラムであって、上記ディスプレイの画面は、複数の情報領域と選択領域とを含み、上記検査時に、上記検査に関する複数種類の情報をそれぞれ上記複数の情報領域に表示させ、上記複数の情報領域に含まれる切り替え対象の情報領域に表示させる上記情報の選択肢を上記選択領域に表示させ、上記選択肢を選択するユーザ操作に基づいて、上記切り替え対象の情報領域に表示させる上記情報を切り替える処理をコンピュータに実行させるためのものである。
本発明によれば、分割画面に表示する情報を簡単に切り替えることのできる内視鏡システム、制御方法、及び制御プログラムを提供することができる。
本発明の一実施形態である内視鏡装置100の一例を示す図である。 図1に示す内視鏡装置100の内部構成を示す模式図である。 図2に示した光源装置5が発生させる光のスペクトルの一例を示す図である。 図2に示した撮像素子23の概略構成を示す平面模式図である。 図2に示した信号処理部42の機能ブロックの一例を示す図である。 内視鏡装置100における照明光の切り替えの一例を示す図である。 ディスプレイ7に表示される画面の一例を示す図である。 表示情報の切り替え対象の情報領域の変更の一例を示す図である。 表示情報の切り替えの一例を示す図である。
以下、本発明の実施形態について図面を参照して説明する。
<本発明の一実施形態である内視鏡装置100>
図1は、本発明の一実施形態である内視鏡装置100の一例を示す図である。
内視鏡装置100は、本発明の内視鏡システムの一例である。図1に示すように、内視鏡装置100は、内視鏡1と、この内視鏡1が接続される制御装置4及び光源装置5と、を備える。光源装置5は、特性が異なる複数種類の照明光を切り替えて照射可能な光源の一例である。
制御装置4には、内視鏡1によって被検体内を撮像して得られる撮像画像等を表示するディスプレイ7と、制御装置4に対して各種情報を入力するためのインタフェースである入力部6と、が接続されている。制御装置4は、内視鏡1、光源装置5、及びディスプレイ7を制御する。
ディスプレイ7は、表示画素が二次元状に配列された表示面を有し、この表示面の各表示画素に、画像データを構成する画素データが描画されることで、この画像データに基づく画像の表示が行われる。ディスプレイ7は、内視鏡1による検査時に検査者(例えば医師)が視認可能なディスプレイの一例である。
内視鏡1は、一方向に延びる管状部材であって被検体内に挿入される挿入部10と、挿入部10の基端部に設けられ、観察モード切替操作、撮像記録操作、鉗子操作、送気送水操作、及び吸引操作等を行うための操作部材が設けられた操作部11と、操作部11に隣接して設けられたアングルノブ12と、内視鏡1を制御装置4と光源装置5にそれぞれ着脱自在に接続するコネクタ部13A,13Bを含むユニバーサルコード13と、を含む。
なお、図1では省略されているが、操作部11及び挿入部10の内部には、細胞又はポリープ等の生体組織を採取するための鉗子を挿入する鉗子孔、送気及び送水用のチャンネル、吸引用のチャンネル等の各種のチャンネルが設けられる。
挿入部10は、可撓性を有する軟性部10Aと、軟性部10Aの先端に設けられた湾曲部10Bと、湾曲部10Bの先端に設けられた硬質の先端部10Cとから構成される。
湾曲部10Bは、アングルノブ12の回動操作により湾曲自在に構成されている。この湾曲部10Bは、内視鏡1が使用される被検体の部位等に応じて、任意の方向及び任意の角度に湾曲でき、先端部10Cを所望の方向に向けることができる。
<図1に示す内視鏡装置100の内部構成>
図2は、図1に示す内視鏡装置100の内部構成を示す模式図である。図3は、図2に示した光源装置5が発生させる光のスペクトルの一例を示す図である。
光源装置5は、照明光として、通常光と特殊光とを切り替えて照射可能である。通常光は、白色光等の、医師等の人間による認識に適した発光スペクトルを有する光である。特殊光は、通常光とは発光スペクトルが異なる、IEE等のコンピュータによる画像解析に適した発光スペクトルを有する光である。
具体的には、光源装置5は、光源用プロセッサ51と、光源部52と、光路結合部54と、を備える。光源用プロセッサ51は、制御装置4のシステム制御部44と接続されており、システム制御部44からの指令に基づいて光源部52を制御する。
光源部52は、例えば、複数の半導体光源を有し、これらをそれぞれ点灯又は消灯し、点灯する場合には各半導体光源の発光量を制御することにより、観察対象を照明する照明光を発する。本実施形態では、光源部52は、V-LED(Violet Light Emitting Diode)52a、B-LED(Blue Light Emitting Diode)52b、G-LED(Green Light Emitting Diode)52c、及びR-LED(Red Light Emitting Diode)52dの4色のLEDを有する。
光源用プロセッサ51は、V-LED52a、B-LED52b、G-LED52c、及びR-LED52dをそれぞれ独立に制御することで、紫色光V、青色光B、緑色光G、又は赤色光Rをそれぞれ独立に光量を変えて発光可能である。図3に示すように、V-LED52aは、中心波長405±10nm、波長範囲380~420nmの紫色光Vを発生する。B-LED52bは、中心波長450±10nm、波長範囲420~500nmの青色光Bを発生する。G-LED52cは、波長範囲が480~600nmに及ぶ緑色光Gを発生する。R-LED52dは、中心波長620~630nmで、波長範囲が600~650nmに及ぶ赤色光Rを発生する。
また、光源用プロセッサ51は、通常光の照射時には、紫色光V、青色光B、緑色光G、及び赤色光R間の光量比がVc:Bc:Gc:Rcとなる白色光を発光するように、各LED52a~52dを制御する。なお、Vc、Bc、Gc、Rc>0である。
また、光源用プロセッサ51は、特殊光の照射時には、短波長の狭帯域光としての紫色光V、青色光B、緑色光G、及び赤色光Rとの光量比がVs:Bs:Gs:Rsとなる特殊光を発光するように、各LED52a~52dを制御する。
光量比Vs:Bs:Gs:Rsは、通常光の照射時に使用する光量比Vc:Bc:Gc:Rcと異なっており、観察目的に応じて適宜定められる。例えば、表層血管を強調する場合には、Vsを、他のBs、Gs、Rsよりも大きくすることが好ましく、中深層血管を強調する場合には、Gsを、他のVs、Gs、Rsよりも大きくすることが好ましい。
光路結合部54は、V-LED52a、B-LED52b、G-LED52c、及びR-LED52dから出射される各光を結合し、結合した光を照明光として出射する。光源部52の光路結合部54から出射された照明光は、ユニバーサルコード13に内蔵された後述のライトガイド53に入射し、挿入部10の先端部10Cに設けられた照明用レンズ50を通って被写体に照射される。
内視鏡1の先端部10Cには、対物レンズ21及びレンズ群22を含む撮像光学系と、この撮像光学系を通して被写体を撮像する撮像素子23と、RAM(Random Access Memory)等のメモリ25と、通信インタフェース(I/F)26と、撮像駆動部27と、光源部52から出射された照明光を照明用レンズ50に導くためのライトガイド53と、が設けられている。
ライトガイド53は、先端部10Cからユニバーサルコード13のコネクタ部13Aまで延びている。ユニバーサルコード13のコネクタ部13Aが光源装置5に接続された状態で、光源装置5の光源部52から出射される照明光がライトガイド53に入射可能な状態となる。
撮像素子23は、CCD(Charge Coupled Device)イメージセンサ又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等が用いられる。本実施形態においては、撮像素子23は、ローリングシャッタを用いるCMOSである。
撮像素子23は、複数の画素が二次元状に配置された受光面を有し、上記の撮像光学系によってこの受光面に結像された光学像を各画素において電気信号(撮像信号)に変換する。そして、撮像素子23は、変換した撮像信号をアナログ信号から所定のビット数のデジタル信号に変換し、デジタル信号に変換した撮像信号をメモリ25に出力する。撮像素子23は、例えば原色又は補色等のカラーフィルタを搭載するものが用いられる。撮像素子23の受光面の各画素から出力される撮像信号の集合を撮像画像信号という。
撮像素子23は、対物レンズ21の光軸Axに対して受光面が垂直となる状態で先端部10Cに配置されていてもよいし、対物レンズ21の光軸Axに対して受光面が平行となる状態で先端部10Cに配置されていてもよい。
内視鏡1に設けられる撮像光学系は、撮像素子23と対物レンズ21との間における被写体からの光の光路上にあるレンズ、プリズム等の光学部材(上記のレンズ群22を含む)と、対物レンズ21と、によって構成される。撮像光学系は、対物レンズ21のみで構成される場合もある。
メモリ25は、撮像素子23から出力されたデジタルの撮像信号を一時的に記録する。
通信I/F26は、制御装置4の通信インタフェース(I/F)41と接続される。通信I/F26は、メモリ25に記録された撮像信号を、ユニバーサルコード13内の信号線を通して制御装置4に伝送する。
撮像駆動部27は、通信I/F26を介して制御装置4のシステム制御部44と接続されている。撮像駆動部27は、通信I/F26で受信されるシステム制御部44からの指令に基づいて、撮像素子23及びメモリ25を駆動する。
制御装置4は、ユニバーサルコード13によって内視鏡1の通信I/F26と接続される通信I/F41と、信号処理部42と、表示コントローラ43と、システム制御部44と、記録媒体45と、を備える。
通信I/F41は、内視鏡1の通信I/F26から伝送されてきた撮像信号を受信して信号処理部42に伝達する。
信号処理部42は、通信I/F41から受けた撮像信号を一時記録するメモリを内蔵しており、メモリに記録された撮像信号の集合である撮像画像信号を処理(デモザイク処理又はガンマ補正処理等の画像処理)して、認識処理等が可能な形式の撮像画像情報を生成する。信号処理部42によって生成された撮像画像情報は、ハードディスク又はフラッシュメモリ等の記録媒体45に記録される。
表示コントローラ43は、信号処理部42によって生成された撮像画像情報に基づく撮像画像をディスプレイ7に表示させる。信号処理部42によって生成された撮像画像情報を構成する各画素データの座標は、ディスプレイ7の表示面を構成するいずれかの表示画素の座標と対応付けて管理されている。
システム制御部44は、制御装置4の各部を制御すると共に、内視鏡1の撮像駆動部27と光源装置5の光源用プロセッサ51とに指令を送り、内視鏡装置100の全体を統括制御する。例えば、システム制御部44は、撮像駆動部27を介して撮像素子23の制御を行う。また、システム制御部44は、光源用プロセッサ51を介して光源部52の制御を行う。
システム制御部44、信号処理部42及び表示コントローラ43は、プログラムを実行して処理を行う各種のプロセッサと、RAMと、ROM(Read Only Memory)を含む。
各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるCPU(Central Processing Unit)、FPGA(Field Programmable Gate Array)等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、又はASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
システム制御部44、信号処理部42及び表示コントローラ43は、各種のプロセッサのうちの1つで構成されてもよいし、同種又は異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせ又はCPUとFPGAの組み合わせ)で構成されてもよい。
<超音波振動子を備える構成>
内視鏡1は、撮像素子23に加えて、生体内の超音波画像を得るための超音波振動子を備えてもよい。超音波振動子は、超音波を発振し、発振した超音波を照射する振動子である。また、超音波振動子は、照射した超音波のエコー信号を受信し、受信したエコー信号を出力する超音波トランスデューサとしても動作する。この超音波振動子から出力されるエコー信号に対して、例えば制御装置4のプロセッサにより各種画像処理を施すことにより超音波画像を得ることができる。
<図2に示した撮像素子23の概略構成>
図4は、図2に示した撮像素子23の概略構成を示す平面模式図である。
撮像素子23は、行方向Xに配列された複数の画素61からなる画素行62が、行方向Xと直交する列方向Yに複数配列された撮像面60と、撮像面60に配列された画素61を駆動する駆動回路63と、撮像面60に配列された画素行62の各画素61から信号線に読み出される画素信号を処理する信号処理回路64と、を備える。撮像面60は受光面を構成する。
以下では、図4において撮像面60の列方向Yの一端側(図中の上側)の端部を上端といい、撮像面60の列方向Yの他端側(図中の下側)の端部を下端という。
図4に示す駆動回路63は、撮像駆動部27からの信号に基づいて、各画素行62を独立に駆動し、画素行62に含まれる各画素61のリセット(光電変換素子に蓄積されている電荷の排出)、この各画素61の光電変換素子に蓄積された電荷に応じた画素信号の信号線への読み出し等を行う。
図4に示す信号処理回路64は、画素行62の各画素61から信号線に読み出された画素信号に対し、相関二重サンプリング処理を行い、相関二重サンプリング処理後の画素信号をデジタル信号に変換して出力する。信号処理回路64は、撮像駆動部27によって制御される。
信号処理部42は、撮像素子23から出力された画素信号にデモザイク処理及びガンマ補正処理等の信号処理を施して撮像画像情報を生成する。
内視鏡装置100は、1回の撮像指示に応じて複数の撮像画像情報を連続して生成する連写モードを搭載している。システム制御部44は、連写モードにおいては、撮像駆動部27により撮像素子23をローリングシャッタ方式により駆動して被写体を撮像させる。
ローリングシャッタ方式の駆動は、ローリングリセット駆動と、ローリング読み出し駆動と、を含む。ローリングリセット駆動は、画素行62の各画素61をリセットしてその各画素61の露光を開始する処理を、画素行62を変えながら順次行う駆動である。ローリング読み出し駆動は、露光されている画素行62の各画素61から信号を読み出して、その画素行62の露光を終了する処理を、画素行62を変えながら順次行う駆動である。
<図2に示した信号処理部42の機能ブロック>
図5は、図2に示した信号処理部42の機能ブロックの一例を示す図である。
信号処理部42のプロセッサは、例えば信号処理部42に内蔵されるROMに格納された制御プログラムを実行することにより、撮像画像情報生成部42aと、ライブ画像生成部42bと、解析部42cと、解析画像生成部42dと、を備える。
撮像画像情報生成部42aは、撮像素子23の撮像により得られた撮像信号に対して、デモザイク処理又はガンマ補正処理等の画像処理を行うことにより撮像画像情報を生成する。撮像画像情報生成部42aは、生成した撮像画像情報のうち、通常光の照射時の撮像により得られた撮像信号に基づく撮像画像情報を撮像フレームとしてライブ画像生成部42bへ出力し、特殊光の照射時の撮像により得られた撮像信号に基づく撮像画像情報を撮像フレームとして解析部42cへ出力する。撮像フレームは、1回の撮像により得られた撮像信号である。
ライブ画像生成部42bは、撮像画像情報生成部42aから出力された撮像フレームに基づいて、ライブ画像を表示するためのライブ画像情報を生成し、生成したライブ画像情報を撮像画像情報として表示コントローラ43(図2参照)へ出力する。ライブ画像は、撮像素子23による連続した撮像の結果をリアルタイムで表示する動画である。
解析部42cは、撮像画像情報生成部42aから出力された撮像フレームに基づく解析(画像解析)を行い、その解析の結果を解析画像生成部42dへ出力する。一例として、解析部42cは解析として撮像画像の輪郭抽出を行うものとする。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる生体構造の輪郭を特定する。特定対象の生体構造は、例えば、表層血管構造、中層血管構造、又は深層血管構造などである。解析部42cによる解析は、ライブ画像の表示と並行して行われる。
解析画像生成部42dは、解析部42cから出力された解析の結果を示すIEE画像を表示するためのIEE画像情報を生成し、生成したIEE画像情報を撮像画像情報として表示コントローラ43(図2参照)へ出力する。IEE画像は、青色レーザ等の特殊光の照射時の撮像により得られた撮像信号に基づく、被写体の構造の輪郭が強調された画像である。この場合、青色レーザ等の特殊光は、画像強調観察用の光を構成する。例えば、IEE画像は、表層血管構造を強調した画像、中層血管構造を強調した画像、深層血管構造を強調した画像などである。
なお、解析画像生成部42dによって生成される画像は、撮像画像や撮像画像を加工した画像に限らず、解析部42cによる解析に基づく、数値(数、確度等)や文字(腫瘍種別)などを示す画像であってもよい。
図5において説明したように、内視鏡装置100は、撮像画像情報のうち、特殊光が照射された第2の期間の撮像により得られた撮像画像情報に基づく解析を行う解析部42cを備える。一方で、内視鏡装置100は、撮像画像情報のうち、通常光が照射された第1の期間の撮像により得られた撮像画像情報に基づくライブ画像を表示する。これにより、通常光に基づく動画表示を行いつつ、特殊光に基づく解析を行うことができる。
<内視鏡装置100における照明光の切り替え>
図6は、内視鏡装置100における照明光の切り替えの一例を示す図である。
照明光タイミング65は、制御装置4からの指令により光源装置5が照明光を照射するタイミングである。照明光タイミング65におけるWLIは、光源装置5が照明光として白色光等の通常光を照射するタイミングである。
照明光タイミング65におけるIEE1は、光源装置5が照明光として狭帯域光等の、第1の特性を有する第1の特殊光を照射するタイミングである。照明光タイミング65におけるIEE2は、光源装置5が照明光として、第1の特性とは異なる第2の特性を有する第2の特殊光を照射するタイミングである。
照明光タイミング65に示すように、光源装置5は、予め定められた照射動作を周期Tで繰り返し実行する。この照射動作は、通常光を照射し、その後に特殊光(第1の特殊光又は第2の特殊光)を照射する動作である。図6に示す例では、光源装置5は、照射する特殊光を、周期Tごとに、第1の特殊光と第2の特殊光とに交互に切り替えている。ただし、光源装置5は、周期Tごとの特殊光を第1の特殊光のみとしてもよい。
撮像タイミング66は、制御装置4からの指令により撮像素子23が撮像(露光)を行うタイミングである。撮像タイミング66における縦方向は画素行62の列方向Y(図4参照)の位置を示している。上記のように、本実施形態における撮像素子23はローリングシャッタ方式の撮像を行うため、撮像タイミング66は画素行62ごとにずれている。図6に示す例では、撮像素子23は、60fps(frames per second)のフレームレートにより撮像を行っている。
照明光タイミング65及び撮像タイミング66に示すように、光源装置5が連続して通常光を照射する第1期間は、撮像素子23による撮像における連続する複数のフレームに渡る。また、光源装置5が連続して特殊光を照射する第2の期間は、撮像素子23による撮像における少なくとも1フレームに渡る。図6に示す例では、第2の期間は、撮像素子23による連続する複数のフレームに渡っている。
このように、光源装置5は、通常光(第1の特性の照明光)を連続した複数の撮像動作フレームに渡って連続して照射した後に特殊光(第2の特性の照明光)を照射する動作を繰り返す。そして、上記のように、制御装置4は、通常光の照射時に得られた撮像画像に基づいてライブ画像(動画)をディスプレイ7に表示させるとともに、特殊光の照射時に得られた撮像画像に基づく解析を行う。
<ディスプレイ7に表示される画面>
図7は、ディスプレイ7に表示される画面の一例を示す図である。図8は、表示情報の切り替え対象の情報領域の変更の一例を示す図である。図9は、表示情報の切り替えの一例を示す図である。
表示コントローラ43は、内視鏡1による検査時に、信号処理部42から出力された撮像画像情報に基づいて、例えば図7に示す画面70をディスプレイ7に表示させる。画面70には、メイン画面71と、サブ画面72,73,入力一覧画面74と、が含まれる。メイン画面71及びサブ画面72,73は、本発明の複数の情報領域の一例である。入力一覧画面74は、本発明の選択領域の一例である。
メイン画面71、サブ画面72,73及び入力一覧画面74は、例えば、ディスプレイ7の1つの画面において、制御装置4の制御によってソフトウェア的に分割された4つの分割画面である。ただし、画面70は、ハードウェア的に、メイン画面71、サブ画面72,73及び入力一覧画面74に4分割されていてもよい。
メイン画面71には、信号処理部42のライブ画像生成部42bから出力されたライブ画像情報に基づくライブ画像が表示される。サブ画面72,73には、ライブ画像に対して補助的な位置づけとなる情報が表示される。例えば、図7に示す例では、サブ画面72には胃マップが表示され、サブ画面73には挿入形状画像が表示されている。
この場合、メイン画面71は、内視鏡1に設けられた撮像素子23から得られた撮像画像を利用した動画を表示する第1の情報領域を構成する。サブ画面72,73は、動画と異なる情報を表示する第2の情報領域を構成する。
サブ画面72の胃マップは、内視鏡1の挿入対象の被検体の胃を示す画像である。胃マップは、例えば被検体内を撮像して得られたものであってもよいし、予め用意された一般的な大腸の画像であってもよい。
サブ画面73の挿入形状画像は、被検体内の胃へ挿入されている内視鏡1の挿入部10の形状を示す画像である。例えば、挿入形状画像は、内視鏡1の先端部10Cに備えられた磁界発生素子から発生した磁界の検出結果に基づいて生成された画像である。この場合に、例えば、内視鏡装置100は、被検体外から、被検体内に挿入された内視鏡1の磁界発生素子からの磁界を検出する磁界検出装置をさらに備え、システム制御部44はその磁界検出装置による検出結果に基づいて挿入形状画像を生成する。
また、挿入形状画像は、内視鏡1の先端部10Cに備えられた磁界検出素子による磁界の検出結果に基づいて生成された画像であってもよい。この場合に、例えば、内視鏡装置100は、被検体外から被検体内へ向けて磁界を発生させる磁界発生素子をさらに備え、システム制御部44は、内視鏡1に備えられた磁界検出素子による磁界の検出結果に基づいて挿入形状画像を生成する。
胃マップ及び挿入形状画像を見ることで、内視鏡1の操作者は、内視鏡1の挿入部10の胃への挿入を容易に行うことができる。
入力一覧画面74は、例えばメイン画面71及びサブ画面72,73のそれぞれにおいて表示可能な情報の選択肢(メニュー)の一覧を示す画像である。図7に示す例では、入力一覧画面74には、縮小画像74a~74eが含まれる。
縮小画像74a~74eは、それぞれライブ画像、超音波画像、胃マップ、挿入形状画像、及び生体情報画像の縮小画像である。ある画像の縮小画像とは、その画像をメイン画面71やサブ画面72,73に表示する場合よりも、その画像を小さく縮小した画像である。例えば、縮小画像74aは、ライブ画像を、メイン画面71及びサブ画面72,73のいずれかに表示する場合よりも小さいサイズ(面積)で示す画像である。
縮小画像74a~74eには、それぞれ番号「1」~「5」が付されている。これらの番号は、例えば入力部6に含まれるテンキー等によって指示を行うための番号である。
図7においてサブ画面73を囲んでいる一点鎖線枠75は、メイン画面71及びサブ画面72,73のうち、表示情報の切り替え対象の情報領域(図7に示す例ではサブ画面73)を示す情報である。一点鎖線枠75は、例えば入力部6などのユーザインタフェースを介したユーザ操作によって、メイン画面71及びサブ画面72,73のうち任意の情報領域に移動可能である。
例えば、入力部6に対する特定のユーザ操作が行われるごとに、一点鎖線枠75が囲む情報領域が、メイン画面71、サブ画面72、サブ画面73、メイン画面71、…の順に切り替わる。図8は、一点鎖線枠75が囲む情報領域が、メイン画面71からサブ画面72に変化した状態を示している。図8に示す例では、サブ画面72が表示情報の切り替え対象である。
例えば、図8に示す状態において、入力部6のテンキーによって検査者が「2」を指定すると、図9に示すように、サブ画面72に表示される情報が、胃マップから、番号「2」が付された縮小画像74bに対応する超音波画像に切り替わる。
このように、制御装置4は、内視鏡1による検査時に、その検査に関する複数種類(図7に示す例では3種類)の情報をそれぞれ複数の情報領域(メイン画面71及びサブ画面72,73)に表示させる。
また、制御装置4は、複数の情報領域に含まれる切り替え対象の情報領域(図8に示す状態ではサブ画面72)に表示させ、検査に関する情報の選択肢として縮小画像74a~74eを入力一覧画面74(選択領域)に表示させる。そして、入力一覧画面74に表示させた選択肢を選択するユーザ操作(例えば入力部6のテンキーによる番号の指定)に基づいて、切り替え対象の情報領域(図8に示す状態ではサブ画面72)に表示させる情報を切り替える。
このように、内視鏡装置100によれば、内視鏡検査に関する複数種類の情報を分割画面により同時に表示する構成において、分割画面に表示する情報を簡単に切り替えることができる。
例えば、内視鏡検査において、内視鏡1に設けられた撮像素子23により得られた撮像画像を用いたライブ画像をディスプレイ7のメイン画面71に主に表示しつつ、サブ画面72,73に表示可能な補助的な情報の選択肢も同時に表示することができる。このため、ライブ画像とともに表示する補助的な情報を、内視鏡検査の状況に基づく検査者(例えば医師)の判断により簡単に切り替えることが可能になる。
また、図7に示すように、入力一覧画面74に表示される、メイン画面71及びサブ画面72,73に表示可能な情報の選択肢が、その情報の縮小画像であることによって、検査者は、その選択肢が示す情報の内容を直感的に把握することができる。これにより、分割画面に表示する情報をより簡単に切り替えることができる。
また、メイン画面71及びサブ画面72,73に表示可能な情報の選択肢は、内視鏡1による検査の経過に応じて更新される情報の選択肢を含む。例えば、ライブ画像は、上記のように撮像素子23による連続した撮像の結果をリアルタイムで表示する動画であり、検査の経過に応じて更新される。また、超音波画像、挿入形状画像、生体情報画像なども、検査の経過に応じて更新される情報になり得る。
制御装置4は、内視鏡1による検査の経過に応じて更新される情報の選択肢の入力一覧画面74における表示を、内視鏡1による検査の経過に応じて更新してもよい。例えば、入力一覧画面74に表示される縮小画像74aを、撮像素子23による連続した撮像画像をリアルタイムで表示する小サイズの動画としてもよい。他の例としては、例えば、入力一覧画面74に表示される縮小画像74bを、超音波振動子により得られる連続した超音波画像をリアルタイムで表示する小サイズの動画としてもよい。これにより、検査者は、その選択肢が示す情報の内容を直感的に把握することができ、分割画面に表示する情報をより簡単に切り替えることができる。
さらに、制御装置4は、内視鏡1による検査の経過に応じて更新される情報をメイン画面71及びサブ画面72,73のいずれかに表示させる場合は、その情報の表示を第1の頻度で更新し、その情報の選択肢の入力一覧画面74における表示を、第1の頻度より低い第2の頻度で更新してもよい。
一例としては、制御装置4は、ライブ画像をメイン画面71に表示する場合、60fpsの表示レートでライブ画像を更新する。また、制御装置4は、入力一覧画面74に表示するライブ画像の縮小画像74aについては、60fpsよりも表示レートを低くした6fpsの表示レートで更新する。これにより、縮小画像74aが示す情報がライブ画像であることを検査者が容易に把握できるとともに、縮小画像74aの表示の更新に要する処理量を少なくすることができる。
なお、図7に示した入力一覧画面74に含まれる各情報は一例であり、任意に設定することができる。例えば、入力一覧画面74に含まれる各情報は、図7に示した情報の一部であってもよい。また、図7に示した情報に加えて、又は図7に示した情報に代えて他の情報(例えば、解析部42cによる解析の結果)を入力一覧画面74に含めてもよい。
また、メイン画面71及びサブ画面72,73において、表示可能な情報の選択肢が同じである構成について説明したが、メイン画面71及びサブ画面72,73において、表示可能な情報の選択肢が異なる構成としてもよい。その場合に、制御装置4は、入力一覧画面74に、メイン画面71及びサブ画面72,73のうち一点鎖線枠75に囲まれた情報領域(切り替え対象の情報領域)に表示可能な情報のみを表示させてもよい。
また、表示の切り替え対象の情報領域が、メイン画面71及びサブ画面72,73のうちユーザ操作によって選択された情報領域である構成について説明したが、このような構成に限らない。例えば、メイン画面71が表示する情報はライブ画像に固定されており、一点鎖線枠75によって選択可能な情報領域はサブ画面72,73(第2の情報領域)のみであってもよい。この場合に、例えばサブ画面72,73に表示可能な情報の選択肢に、解析部42cによる解析の結果を含めることで、検査者は、ライブ画像を参照しつつ、補助的な情報である解析の結果も見ることができる。
又は、表示の切り替え対象の情報領域はユーザによって選択不可であってもよい。例えば、メイン画面71及びサブ画面72,73のうちサブ画面73のみが、表示の切り替え対象の情報領域であってもよい。この場合は、一点鎖線枠75は、固定的にサブ画面73に表示され、又は画面70に表示されない。
また、一点鎖線枠75は、メイン画面71及びサブ画面72,73のうち切り替え対象の情報領域を識別可能にする情報の一例であり、切り替え対象の情報領域を識別可能にする情報は一点鎖線枠75に限らない。
また、入力一覧画面74に表示させた選択肢を選択するユーザ操作の例として、入力部6のテンキーによる番号の指定を説明したが、これに限らない。例えば、入力部6は、マウス等のポインティングデバイスを含み、入力一覧画面74に表示させた選択肢を選択するユーザ操作は、このポインティングデバイスによる縮小画像74a~74eのいずれかの指示(クリック等)としてもよい。又は、ディスプレイ7を、タッチ操作が可能なタッチパネルとし、入力一覧画面74に表示させた選択肢を選択するユーザ操作は、このタッチパネルによる縮小画像74a~74eのいずれかのタッチとしてもよい。
(解析の他の例)
特殊光の照射時の撮像により得られた撮像画像情報に基づく解析部42c(信号処理部42)による解析として撮像画像の輪郭の抽出について説明したが、解析部42cによる解析はこれに限らない。
例えば、解析部42cは、上記の解析として、内視鏡1の挿入形状の解析を行ってもよい。内視鏡1の挿入形状の解析は、具体的には、被検体内へ挿入された内視鏡1の挿入部10の挿入形状の特定である。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報の変化に基づいて、内視鏡1の挿入形状を特定する。解析画像生成部42dは、解析部42cにより特定された内視鏡1の挿入形状を示す画像を表示するための画像情報を生成する。これにより、内視鏡1の挿入形状を示す画像がサブ画面72に表示され、内視鏡1の操作者は、内視鏡1の挿入部10の被検体内への挿入を容易に行うことができる。
又は、解析部42cは、上記の解析として、内視鏡1が挿入された被検体内の注目領域の検出を行ってもよい。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像から、被検体内の注目領域を検出する。注目領域は、例えば、病変である可能性が高い領域など、被検体内の観察のうち注目が推奨される領域である。解析画像生成部42dは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像において、解析部42cにより検出された注目領域を強調した注目領域強調画像を表示するための画像情報を生成する。これにより、注目領域強調画像がサブ画面72に表示され、内視鏡1の操作者は、被検体内における注目領域を容易に認識できる。又は、解析画像生成部42dは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像において、注目領域である異常部(病変部など)と正常部との色の差を拡張する色差拡張処理を行った色差拡張画像を表示するための画像情報を生成してもよい。これにより、色差拡張画像がサブ画面72に表示され、内視鏡1の操作者は、被検体内における異常部と正常部を容易に見分けることができる。
又は、解析部42cは、上記の解析として、類似症例画像の選択を行ってもよい。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報と類似する症例画像を、内視鏡装置100がアクセス可能なデータベースを検索することにより選択する。解析画像生成部42dは、解析部42cによる選択の結果を示す画像を表示するための画像情報を生成する。解析部42cによる選択の結果とは、解析部42cが選択した症例画像そのものであってもよいし、解析部42cが選択した症例画像に対して上記のデータベースにおいて対応付けられている、その症例画像に関する診断結果等の情報であってもよい。これにより、類似症例画像の選択結果がサブ画面72に表示され、内視鏡1の操作者は、観察中の被検体内の状態と、類似症例との比較を容易に行うことができる。
又は、解析部42cは、上記の解析として、腫瘍及び非腫瘍の判別を行ってもよい。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる生体領域が腫瘍であるか否かを判別する。解析画像生成部42dは、解析部42cによる判別の結果を示す画像を表示するための画像情報を生成する。解析部42cによる判別の結果とは、直近に撮像された画像に写り込んでいる生体領域が腫瘍であるか否かを示す情報であってもよいし、現在の検査が開始されてから腫瘍であると判別された生体領域の数を示す情報などであってもよい。これにより、腫瘍及び非腫瘍の判別結果がサブ画面72に表示され、内視鏡1の操作者による観察や内視鏡1の操作を支援することができる。
又は、解析部42cは、上記の解析として、器官の状態の特定を行ってもよい。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる器官の状態を特定する。器官の状態は、例えば、領域ごとの酸素飽和度、血管構造の太さ、密度、模様、均一性や、大腸の表面構造(例えばpit様構造)、十二指腸の表面構造(例えば絨毛構造)などである。解析画像生成部42dは、解析部42cによる特定の結果を示す画像を表示するための画像情報を生成する。例えば、解析画像生成部42dは、特定した領域ごとの酸素飽和度を画像化した酸素飽和度画像を生成する。これにより、器官の状態の特定結果がサブ画面72に表示され、内視鏡1の操作者による観察や内視鏡1の操作を支援することができる。
又は、解析部42cは、上記の解析として、切離予定線の生成を行ってもよい。例えば、解析部42cは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる生体領域のうち、腫瘍等を除去するために切離すべき線である切離予定線(デマルケーションライン)を決定する。解析画像生成部42dは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像において、解析部42cにより決定された切離予定線を付した画像を表示するための画像情報を生成する。これにより、切離予定線が付された画像がサブ画面72に表示され、内視鏡1の操作者は、被検体内における切離予定線を容易に認識できる。
(第1期間、第2の期間、及び周期Tの変形例)
通常光を照射する第1期間及び特殊光を照射する第2の期間の各長さが、周期Tごとの繰り返しにおいて一定である構成について説明したが、通常光を照射する第1期間及び特殊光を照射する第2の期間の各長さが、周期Tごとの繰り返しにおいて一定でなくても(不定であっても)よい。例えば、ある周期Tにおける第1期間及び第2の期間の各長さの比が3:1であり、他の周期Tにおける第1期間及び第2の期間の各長さの比が3:2であってもよい。
また、通常光及び特殊光を照射する動作の繰り返し周期である周期Tが一定である場合について説明したが、周期Tは不定であってもよい。また、周期Tにおいて、まず通常光を照射し、その後に特殊光を照射する構成について説明したが、周期Tにおいて、まず特殊光を照射し、その後に通常光を照射する構成としてもよい。
また、通常光のスペクトルは、周期Tごとの繰り返しにおいて一定であってもよいし、周期Tごとの繰り返しにおいて不定であってもよい。同様に、特殊光のスペクトルは、周期Tごとの繰り返しにおいて一定であってもよいし、周期Tごとの繰り返しにおいて不定であってもよい。
また、通常光を照射する第1の期間の直後に、特殊光を照射する第2の期間となる構成について説明したが、第1期間と第2の期間との間に、光源装置5が照明光を照射しない無照射期間があってもよい。
また、上記の通常光又は特殊光として、狭帯域短波調光と白色光とを同時に照射する構成としてもよい。これにより、色の微細な違いを色彩強調して表示し、炎症観察や拾上げ観察等の観察が容易になる。
(撮像素子23の他の例)
ローリングシャッタ方式の撮像素子23を用いる構成について説明したが、グローバルシャッタ方式の撮像素子23を用いる構成としてもよい。
(内視鏡システムの別の形態)
本発明の内視鏡システムの一例として内視鏡装置100を説明したが、本発明の内視鏡システムは、ネットワークを介して互いに接続される複数の装置によって実現されてもよい。例えば、上記の制御装置4による処理の少なくとも一部を、内視鏡装置100とネットワークを介して接続される他の装置により実行する構成としてもよい。
(制御プログラム)
制御装置4のROMに記憶される制御プログラムは、プログラムをコンピュータが読取可能な一時的でない(non-transitory)記憶媒体に記憶される。このような「コンピュータ読取可能な記憶媒体」は、例えば、CD-ROM(Compact Disc-ROM)等の光学媒体や、USB(Universal Serial Bus)メモリ又はメモリカード等の磁気記憶媒体等を含む。また、このようなプログラムを、ネットワークを介したダウンロードによって提供することもできる。
以上説明してきたように、本明細書には以下の事項が開示されている。
(1)
内視鏡による検査時に検査者が視認可能なディスプレイと、プロセッサと、を含む内視鏡システムであって、
上記ディスプレイの画面は、複数の情報領域と選択領域とを含み、
上記プロセッサは、上記検査時に、
上記検査に関する複数種類の情報をそれぞれ上記複数の情報領域に表示させ、
上記複数の情報領域に含まれる切り替え対象の情報領域に表示させる上記情報の選択肢を上記選択領域に表示させ、
上記選択肢を選択するユーザ操作に基づいて、上記切り替え対象の情報領域に表示させる上記情報を切り替える、
内視鏡システム。
(2)
(1)記載の内視鏡システムであって、
上記切り替え対象の情報領域は、上記複数の情報領域のうちユーザ操作によって選択された情報領域である、
内視鏡システム。
(3)
(1)又は(2)記載の内視鏡システムであって、
上記情報の選択肢は、上記情報の縮小画像を含む画像である、
内視鏡システム。
(4)
(1)から(3)のいずれか1つに記載の内視鏡システムであって、
上記情報の選択肢は、上記検査の経過に応じて更新される情報の選択肢を含む、
内視鏡システム。
(5)
(4)記載の内視鏡システムであって、
上記プロセッサは、上記検査の経過に応じて更新される情報の選択肢の上記選択領域における表示を、上記検査の経過に応じて更新する、
内視鏡システム。
(6)
(4)又は(5)記載の内視鏡システムであって、
上記プロセッサは、
上記検査の経過に応じて更新される情報を上記情報領域に表示させる場合はその情報の表示を第1の頻度で更新し、
上記検査の経過に応じて更新される情報の選択肢の上記選択領域における表示を、上記第1の頻度より低い第2の頻度で更新する、
内視鏡システム。
(7)
(1)から(6)のいずれか1つに記載の内視鏡システムであって、
上記複数の情報領域は、上記内視鏡に設けられた撮像素子から得られた撮像画像を利用した動画を表示する第1の情報領域と、上記動画と異なる情報を表示する第2の情報領域と、を含み、
上記切り替え対象の情報領域は、上記第2の情報領域に含まれる、
内視鏡システム。
(8)
(7)記載の内視鏡システムであって、
上記第2の情報領域は、上記撮像画像に基づく解析の結果を含む上記検査に関する複数種類の情報を切り替えて表示可能であり、
上記選択領域は、上記解析の結果を含む上記検査に関する複数種類の情報を上記選択肢として表示する、
内視鏡システム。
(9)
(8)記載の内視鏡システムであって、
特性が異なる複数種類の照明光を切り替えて照射可能な光源を含み、
上記光源は、連続した複数の撮像動作フレームに渡る第1の期間に第1の特性の照明光を連続して照射した後、少なくとも1つの撮像動作フレームに渡る第2の期間に上記第1の特性と異なる第2の特性の照明光を照射する動作を繰り返し、
上記プロセッサは、上記第2の期間に得られる上記撮像画像に基づいて上記解析を行う、
内視鏡システム。
(10)
(9)記載の内視鏡システムであって、
上記第1の特性の照明光は白色光であり、上記第2の特性の照明光は画像強調観察用の光である、
内視鏡システム。
(11)
(9)又は(10)記載の内視鏡システムであって、
上記第1の期間及び上記第2の期間の各長さは、上記動作の繰り返しにおいて一定であり、又は上記動作の繰り返しにおいて不定である、
内視鏡システム。
(12)
(9)から(11)のいずれか1つに記載の内視鏡システムであって、
上記第1の特性の照明光及び上記第2の特性の照明光のスペクトルは、上記動作の繰り返しにおいて一定であり、又は上記動作の繰り返しにおいて不定である、
内視鏡システム。
(13)
(9)から(12)のいずれか1つに記載の内視鏡システムであって、
上記第1の期間と上記第2の期間との間に上記光源の無照射期間がある、
内視鏡システム。
(14)
(9)から(13)のいずれか1つに記載の内視鏡システムであって、
上記第1の期間は上記第2の期間より長い期間である、
内視鏡システム。
(15)
(8)から(14)のいずれか1つに記載の内視鏡システムであって、
上記解析は、上記撮像素子を備える内視鏡の挿入形状の解析を含む、
内視鏡システム。
(16)
(8)から(15)のいずれか1つに記載の内視鏡システムであって、
上記解析は、上記撮像画像の輪郭の抽出を含む、
内視鏡システム。
(17)
(8)から(16)のいずれか1つに記載の内視鏡システムであって、
上記解析は、上記撮像素子を備える内視鏡が挿入された被検体内の注目領域の検出を含む、
内視鏡システム。
(18)
(8)から(17)のいずれか1つに記載の内視鏡システムであって、
上記解析は、類似症例画像の選択を含む、
内視鏡システム。
(19)
(8)から(18)のいずれか1つに記載の内視鏡システムであって、
上記解析は、腫瘍及び非腫瘍の判別を支援する情報を含む、
内視鏡システム。
(20)
(8)から(19)のいずれか1つに記載の内視鏡システムであって、
上記解析は、器官の状態の特定を含む、
内視鏡システム。
(21)
(8)から(20)のいずれか1つに記載の内視鏡システムであって、
上記解析は、切離予定線の生成を含む、
内視鏡システム。
(22)
内視鏡による検査時に検査者が視認可能なディスプレイを含む内視鏡システムの制御方法であって、
上記ディスプレイの画面は、複数の情報領域と選択領域とを含み、
上記検査時に、
上記検査に関する複数種類の情報をそれぞれ上記複数の情報領域に表示させ、
上記複数の情報領域に含まれる切り替え対象の情報領域に表示させる上記情報の選択肢を上記選択領域に表示させ、
上記選択肢を選択するユーザ操作に基づいて、上記切り替え対象の情報領域に表示させる上記情報を切り替える、
制御方法。
(23)
内視鏡による検査時に検査者が視認可能なディスプレイを含む内視鏡システムを制御する制御プログラムであって、
上記ディスプレイの画面は、複数の情報領域と選択領域とを含み、
上記検査時に、
上記検査に関する複数種類の情報をそれぞれ上記複数の情報領域に表示させ、
上記複数の情報領域に含まれる切り替え対象の情報領域に表示させる上記情報の選択肢を上記選択領域に表示させ、
上記選択肢を選択するユーザ操作に基づいて、上記切り替え対象の情報領域に表示させる上記情報を切り替える、
処理をコンピュータに実行させるための制御プログラム。
本発明によれば、分割画面に表示する情報を簡単に切り替えることのできる内視鏡システム、制御方法、及び制御プログラムを提供することができる。
1 内視鏡
4 制御装置
5 光源装置
6 入力部
7 ディスプレイ
10 挿入部
10A 軟性部
10B 湾曲部
10C 先端部
11 操作部
12 アングルノブ
13 ユニバーサルコード
13A,13B コネクタ部
21 対物レンズ
22 レンズ群
23 撮像素子
25 メモリ
26,41 通信I/F
27 撮像駆動部
42 信号処理部
42a 撮像画像情報生成部
42b ライブ画像生成部
42c 解析部
42d 解析画像生成部
43 表示コントローラ
44 システム制御部
45 記録媒体
50 照明用レンズ
51 光源用プロセッサ
52 光源部
52a V-LED
52b B-LED
52c G-LED
52d R-LED
53 ライトガイド
54 光路結合部
60 撮像面
61 画素
62 画素行
63 駆動回路
64 信号処理回路
65 照明光タイミング
66 撮像タイミング
70 画面
71 メイン画面
72,73 サブ画面
74 入力一覧画面
74a~74e 縮小画像
75 一点鎖線枠
100 内視鏡装置

Claims (22)

  1. 内視鏡による検査の時に検査者が視認可能なディスプレイと、プロセッサと、を含む内視鏡システムであって、
    前記ディスプレイの画面は、複数の情報領域と選択領域とを含み、
    前記プロセッサは、前記検査の時に、
    前記検査に関する複数種類の情報をそれぞれ前記複数の情報領域に表示させ、
    前記複数の情報領域に含まれる切り替え対象の情報領域に表示させる前記情報の選択肢を前記選択領域に表示させ、
    前記選択肢を選択するユーザ操作に基づいて、前記切り替え対象の情報領域に表示させる前記情報を切り替え、
    前記複数の情報領域は、前記内視鏡に設けられた撮像素子から得られた撮像画像を利用した動画を表示する第1の情報領域と、前記動画と異なる情報を表示する第2の情報領域と、を含み、
    前記切り替え対象の情報領域は、前記第2の情報領域に含まれる、
    内視鏡システム。
  2. 請求項1記載の内視鏡システムであって、
    前記切り替え対象の情報領域は、前記複数の情報領域のうちユーザ操作によって選択された情報領域である、
    内視鏡システム。
  3. 請求項1又は2記載の内視鏡システムであって、
    前記情報の選択肢は、前記情報の縮小画像を含む画像である、
    内視鏡システム。
  4. 請求項1から3のいずれか1項記載の内視鏡システムであって、
    前記情報の選択肢は、前記検査の経過に応じて更新される情報の選択肢を含む、
    内視鏡システム。
  5. 請求項4記載の内視鏡システムであって、
    前記プロセッサは、前記検査の経過に応じて更新される情報の選択肢の前記選択領域における表示を、前記検査の経過に応じて更新する、
    内視鏡システム。
  6. 請求項4又は5記載の内視鏡システムであって、
    前記プロセッサは、
    前記検査の経過に応じて更新される情報を前記情報領域に表示させる場合は当該情報の表示を第1の頻度で更新し、
    前記検査の経過に応じて更新される情報の選択肢の前記選択領域における表示を、前記第1の頻度より低い第2の頻度で更新する、
    内視鏡システム。
  7. 請求項1記載の内視鏡システムであって、
    前記第2の情報領域は、前記撮像画像に基づく解析の結果を含む前記検査に関する複数種類の情報を切り替えて表示可能であり、
    前記選択領域は、前記解析の結果を含む前記検査に関する複数種類の情報を前記選択肢として表示する、
    内視鏡システム。
  8. 請求項7記載の内視鏡システムであって、
    特性が異なる複数種類の照明光を切り替えて照射可能な光源を含み、
    前記光源は、連続した複数の撮像動作フレームに渡る第1の期間に第1の特性の照明光を連続して照射した後、少なくとも1つの撮像動作フレームに渡る第2の期間に前記第1の特性と異なる第2の特性の照明光を照射する動作を繰り返し、
    前記プロセッサは、前記第2の期間に得られる前記撮像画像に基づいて前記解析を行う、
    内視鏡システム。
  9. 請求項8記載の内視鏡システムであって、
    前記第1の特性の照明光は白色光であり、前記第2の特性の照明光は画像強調観察用の光である、
    内視鏡システム。
  10. 請求項8又は9記載の内視鏡システムであって、
    前記第1の期間及び前記第2の期間の各長さは、前記動作の繰り返しにおいて一定であり、又は前記動作の繰り返しにおいて不定である、
    内視鏡システム。
  11. 請求項8から10のいずれか1項記載の内視鏡システムであって、
    前記第1の特性の照明光及び前記第2の特性の照明光のスペクトルは、前記動作の繰り返しにおいて一定であり、又は前記動作の繰り返しにおいて不定である、
    内視鏡システム。
  12. 請求項8から11のいずれか1項記載の内視鏡システムであって、
    前記第1の期間と前記第2の期間との間に前記光源の無照射期間がある、
    内視鏡システム。
  13. 請求項8から12のいずれか1項記載の内視鏡システムであって、
    前記第1の期間は前記第2の期間より長い期間である、
    内視鏡システム。
  14. 請求項7から13のいずれか1項記載の内視鏡システムであって、
    前記解析は、前記撮像素子を備える内視鏡の挿入形状の解析を含む、
    内視鏡システム。
  15. 請求項7から14のいずれか1項記載の内視鏡システムであって、
    前記解析は、前記撮像画像の輪郭の抽出を含む、
    内視鏡システム。
  16. 請求項7から15のいずれか1項記載の内視鏡システムであって、
    前記解析は、前記撮像素子を備える内視鏡が挿入された被検体内の注目領域の検出を含む、
    内視鏡システム。
  17. 請求項7から16のいずれか1項記載の内視鏡システムであって、
    前記解析は、類似症例画像の選択を含む、
    内視鏡システム。
  18. 請求項7から17のいずれか1項記載の内視鏡システムであって、
    前記解析は、腫瘍及び非腫瘍の判別を支援する情報を含む、
    内視鏡システム。
  19. 請求項7から18のいずれか1項記載の内視鏡システムであって、
    前記解析は、器官の状態の特定を含む、
    内視鏡システム。
  20. 請求項7から19のいずれか1項記載の内視鏡システムであって、
    前記解析は、切離予定線の生成を含む、
    内視鏡システム。
  21. 内視鏡による検査の時に検査者が視認可能なディスプレイと、プロセッサと、を含む内視鏡システムの制御方法であって、
    前記ディスプレイの画面は、複数の情報領域と選択領域とを含み、
    前記プロセッサが、
    前記検査の時に、
    前記検査に関する複数種類の情報をそれぞれ前記複数の情報領域に表示させ、
    前記複数の情報領域に含まれる切り替え対象の情報領域に表示させる前記情報の選択肢を前記選択領域に表示させ、
    前記選択肢を選択するユーザ操作に基づいて、前記切り替え対象の情報領域に表示させる前記情報を切り替え、
    前記複数の情報領域は、前記内視鏡に設けられた撮像素子から得られた撮像画像を利用した動画を表示する第1の情報領域と、前記動画と異なる情報を表示する第2の情報領域と、を含み、
    前記切り替え対象の情報領域は、前記第2の情報領域に含まれる、
    制御方法。
  22. 内視鏡による検査の時に検査者が視認可能なディスプレイを含む内視鏡システムを制御する制御プログラムであって、
    前記ディスプレイの画面は、複数の情報領域と選択領域とを含み、
    前記検査の時に、
    前記検査に関する複数種類の情報をそれぞれ前記複数の情報領域に表示させ、
    前記複数の情報領域に含まれる切り替え対象の情報領域に表示させる前記情報の選択肢を前記選択領域に表示させ、
    前記選択肢を選択するユーザ操作に基づいて、前記切り替え対象の情報領域に表示させる前記情報を切り替え、
    前記複数の情報領域は、前記内視鏡に設けられた撮像素子から得られた撮像画像を利用した動画を表示する第1の情報領域と、前記動画と異なる情報を表示する第2の情報領域と、を含み、
    前記切り替え対象の情報領域は、前記第2の情報領域に含まれる、
    処理をコンピュータに実行させるための制御プログラム。
JP2022509301A 2020-03-24 2021-01-14 内視鏡システム、制御方法、及び制御プログラム Active JP7470779B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020053412 2020-03-24
JP2020053412 2020-03-24
PCT/JP2021/001025 WO2021192524A1 (ja) 2020-03-24 2021-01-14 内視鏡システム、制御方法、及び制御プログラム

Publications (2)

Publication Number Publication Date
JPWO2021192524A1 JPWO2021192524A1 (ja) 2021-09-30
JP7470779B2 true JP7470779B2 (ja) 2024-04-18

Family

ID=77891337

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022509301A Active JP7470779B2 (ja) 2020-03-24 2021-01-14 内視鏡システム、制御方法、及び制御プログラム

Country Status (4)

Country Link
US (1) US11950759B2 (ja)
JP (1) JP7470779B2 (ja)
CN (1) CN115209785A (ja)
WO (1) WO2021192524A1 (ja)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000155788A (ja) 1998-11-18 2000-06-06 Olympus Optical Co Ltd 医療用画像再生装置
JP2002032068A (ja) 2000-07-18 2002-01-31 Olympus Optical Co Ltd 画像処理装置
JP2002272679A (ja) 2001-03-16 2002-09-24 Fuji Photo Optical Co Ltd 電子内視鏡装置
JP2005110878A (ja) 2003-10-06 2005-04-28 Olympus Corp 手術支援システム
JP2005279097A (ja) 2004-03-30 2005-10-13 Toshiba Corp 携帯型医用画像表示装置
WO2012008299A1 (ja) 2010-07-13 2012-01-19 オリンパスメディカルシステムズ株式会社 画像合成システム
JP2012085122A (ja) 2010-10-12 2012-04-26 Fujifilm Corp 内視鏡装置
JP2012081087A (ja) 2010-10-12 2012-04-26 Fujifilm Corp 内視鏡装置
JP2016189812A (ja) 2015-03-30 2016-11-10 富士フイルム株式会社 内視鏡撮影部位特定装置、方法、プログラム
WO2018096987A1 (ja) 2016-11-28 2018-05-31 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP2018112716A (ja) 2017-01-13 2018-07-19 ディーブイエックス株式会社 映像統合システム
JP2019042156A (ja) 2017-09-01 2019-03-22 富士フイルム株式会社 医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置
WO2019235195A1 (ja) 2018-06-04 2019-12-12 富士フイルム株式会社 画像処理装置、内視鏡システム、及び画像処理方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07154687A (ja) * 1993-11-29 1995-06-16 Olympus Optical Co Ltd 画像合成装置
EP0655710B1 (en) 1993-11-29 2000-10-04 Olympus Optical Co., Ltd. Image rotating and superimposing apparatus
JP5137634B2 (ja) 2008-03-13 2013-02-06 オリンパスメディカルシステムズ株式会社 医療用画像処理装置
JP5967952B2 (ja) 2012-01-31 2016-08-10 Hoya株式会社 電子内視鏡システム
JP2015195845A (ja) * 2014-03-31 2015-11-09 富士フイルム株式会社 内視鏡システム、内視鏡システムの作動方法、プロセッサ装置、プロセッサ装置の作動方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000155788A (ja) 1998-11-18 2000-06-06 Olympus Optical Co Ltd 医療用画像再生装置
JP2002032068A (ja) 2000-07-18 2002-01-31 Olympus Optical Co Ltd 画像処理装置
JP2002272679A (ja) 2001-03-16 2002-09-24 Fuji Photo Optical Co Ltd 電子内視鏡装置
JP2005110878A (ja) 2003-10-06 2005-04-28 Olympus Corp 手術支援システム
JP2005279097A (ja) 2004-03-30 2005-10-13 Toshiba Corp 携帯型医用画像表示装置
WO2012008299A1 (ja) 2010-07-13 2012-01-19 オリンパスメディカルシステムズ株式会社 画像合成システム
JP2012085122A (ja) 2010-10-12 2012-04-26 Fujifilm Corp 内視鏡装置
JP2012081087A (ja) 2010-10-12 2012-04-26 Fujifilm Corp 内視鏡装置
JP2016189812A (ja) 2015-03-30 2016-11-10 富士フイルム株式会社 内視鏡撮影部位特定装置、方法、プログラム
WO2018096987A1 (ja) 2016-11-28 2018-05-31 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP2018112716A (ja) 2017-01-13 2018-07-19 ディーブイエックス株式会社 映像統合システム
JP2019042156A (ja) 2017-09-01 2019-03-22 富士フイルム株式会社 医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置
WO2019235195A1 (ja) 2018-06-04 2019-12-12 富士フイルム株式会社 画像処理装置、内視鏡システム、及び画像処理方法

Also Published As

Publication number Publication date
CN115209785A (zh) 2022-10-18
US20220386848A1 (en) 2022-12-08
JPWO2021192524A1 (ja) 2021-09-30
US11950759B2 (en) 2024-04-09
WO2021192524A1 (ja) 2021-09-30

Similar Documents

Publication Publication Date Title
JP7346285B2 (ja) 医療画像処理装置、内視鏡システム、医療画像処理装置の作動方法及びプログラム
JP7060536B2 (ja) 内視鏡画像処理装置、内視鏡画像処理装置の作動方法及びプログラム、内視鏡システム
JP7176041B2 (ja) 医療画像処理装置及び方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム
JP2009050321A (ja) 画像処理装置
JP7289373B2 (ja) 医療画像処理装置、内視鏡システム、診断支援方法及びプログラム
JP7326308B2 (ja) 医療画像処理装置及び医療画像処理装置の作動方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム
JP2009022446A (ja) 医療における統合表示のためのシステム及び方法
US20230281968A1 (en) Recording Medium, Method for Generating Learning Model, Surgical Support Device and Information Processing Method
JPWO2020184257A1 (ja) 医用画像処理装置及び方法
JP7470779B2 (ja) 内視鏡システム、制御方法、及び制御プログラム
US20220338717A1 (en) Endoscopic examination support device, endoscopic examination support method, and endoscopic examination support program
JP7335976B2 (ja) 内視鏡システム、制御プログラム、及び表示方法
WO2022163514A1 (ja) 医療画像処理装置、方法及びプログラム
JP7256275B2 (ja) 医療画像処理装置、内視鏡システム、医療画像処理装置の作動方法及びプログラム
JP7470776B2 (ja) 内視鏡システム、制御方法、及び制御プログラム
JP7236564B2 (ja) 内視鏡システム、制御方法、及び制御プログラム
WO2021176890A1 (ja) 内視鏡システム、制御方法、及び制御プログラム
WO2023282143A1 (ja) 情報処理装置、情報処理方法、内視鏡システム及びレポート作成支援装置
WO2023166647A1 (ja) 医療支援システムおよび画像表示方法
JP7257544B2 (ja) 情報表示システムおよび情報表示方法
US20220414873A1 (en) Image selection support device, image selection support method, and image selection support program
EP4302681A1 (en) Medical image processing device, medical image processing method, and program
WO2021199566A1 (ja) 内視鏡システム、制御方法、及び制御プログラム
WO2023282144A1 (ja) 情報処理装置、情報処理方法、内視鏡システム及びレポート作成支援装置
EP4111938A1 (en) Endoscope system, medical image processing device, and operation method therefor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220810

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230929

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240402

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240408

R150 Certificate of patent or registration of utility model

Ref document number: 7470779

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150