JPWO2017081976A1

JPWO2017081976A1 - 内視鏡装置

Info

Publication number: JPWO2017081976A1
Application number: JP2017533371A
Authority: JP
Inventors: 今泉　克一; 克一今泉; 橋本　進; 進橋本; 傑岡庭; 朋也佐藤; 岩城　秀和; 秀和岩城
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2015-11-10
Filing date: 2016-10-13
Publication date: 2017-11-16
Anticipated expiration: 2036-10-13
Also published as: WO2017081976A1; US20180249900A1; EP3360461A1; CN108348145B; JP6246431B2; US10863893B2; CN108348145A; EP3360461A4

Abstract

内視鏡装置１は、被検体の観察画像Ｇ１が順次入力され、観察画像Ｇ１についての所定の特徴量に基づいて、観察画像Ｇ１における特徴領域Ｌを検出する検出部３４と、検出部３４において特徴領域Ｌが継続して検出された場合に、特徴領域Ｌを検出した時から第１所定時間経過後に入力される被検体の観察画像Ｇ１に対し、特徴領域Ｌに対応する位置の強調処理をする強調処理部３６ａと、を有する。

Description

本発明は、内視鏡装置に関する。

従来、内視鏡装置では、術者が、観察画像を見て病変部の有無等を判断している。術者が観察画像を見る際に病変部の見落としを抑止するため、例えば、日本国特開２０１１−２５５００６号公報に示されるように、画像処理により検出された注目領域にアラート画像を付加して観察画像を表示する内視鏡装置が提案されている。

しかしながら、従来の内視鏡装置では、術者が病変部を発見する前にアラート画像が表示されることがあり、アラート画像によって示されていない領域に対する術者の注意力を低下させ、また、術者の目視による病変部発見意欲を削ぎ、病変部発見能力の向上を妨げる懸念がある。

そこで、本発明は、術者に対し、観察画像に対する注意力の低下を抑え、病変部発見能力の向上を妨げずに、注目領域を提示する内視鏡装置を提供することを目的とする。

本発明の一態様の内視鏡装置は、被検体の観察画像が順次入力され、前記観察画像についての所定の特徴量に基づいて、前記観察画像における特徴領域を検出する検出部と、前記検出部において前記特徴領域が継続して検出された場合に、前記特徴領域を検出した時から第１所定時間経過後に入力される前記被検体の前記観察画像に対し、前記特徴領域に対応する位置の強調処理をする強調処理部と、を有する。

本発明の第１の実施形態に係わる、内視鏡システムの概略構成を示すブロック図である。本発明の第１の実施形態に係わる、内視鏡システムの検出支援部の構成を示すブロック図である。本発明の第１の実施形態に係わる、内視鏡システムの表示用画像の画面構成の例を説明する説明図である。本発明の第１の実施形態に係わる、内視鏡システムの検出結果出力処理の流れを説明するフローチャートである。本発明の第１の実施形態に係わる、内視鏡システムの検出結果出力処理における画面遷移の例を説明する説明図である。本発明の第１の実施形態の変形例に係わる、内視鏡システムの表示用画像の画面構成の例を説明する説明図である。本発明の第１の実施形態の変形例に係わる、内視鏡システムの検出結果出力処理における画面遷移の例を説明する説明図である。本発明の第２の実施形態に係わる、内視鏡システムの概略構成を示すブロック図である。本発明の第２の実施形態に係わる、内視鏡システムの検出支援部の構成を示すブロック図である。本発明の第２の実施形態に係わる、内視鏡システムの検出結果出力処理の流れを説明するフローチャートである。本発明の第２の実施形態に係わる、内視鏡システムの検出結果出力処理における画面遷移の例を説明する説明図である。本発明の第３の実施形態に係わる、内視鏡システムの概略構成を示すブロック図である。本発明の第３の実施形態に係わる、内視鏡システムの検出支援部の構成を示すブロック図である。本発明の第３の実施形態に係わる、内視鏡システムの検出結果出力処理における画面遷移の例を説明する説明図である。本発明の第１の実施形態に係わる、内視鏡システムの表示用画像の画面構成の例を説明する説明図である。

以下、図面を参照しながら、本発明の実施の形態を説明する。

（第１の実施形態）
（構成）
図１は、本発明の第１の実施形態に係わる、内視鏡システム１の概略構成を示すブロック図である。

内視鏡装置である内視鏡システム１の概略構成は、光源駆動部１１と、内視鏡２１と、ビデオプロセッサ３１と、表示部４１とを有して構成される。光源駆動部１１は、内視鏡２１と、ビデオプロセッサ３１とに接続される。内視鏡２１は、ビデオプロセッサ３１に接続される。ビデオプロセッサ３１は、表示部４１に接続される。

光源駆動部１１は、内視鏡２１の挿入部２２の先端に設けられたＬＥＤ２３を駆動する回路である。光源駆動部１１は、ビデオプロセッサ３１の制御部３２と、内視鏡２１のＬＥＤ２３とに接続される。光源駆動部１１は、制御部３２から制御信号が入力され、ＬＥＤ２３に対して駆動信号を出力し、ＬＥＤ２３を駆動して発光させることができるように構成される。

内視鏡２１は、挿入部２２を被検体内に挿入し、被検体内を撮像できるように構成される。内視鏡２１は、ＬＥＤ２３と、撮像素子２４とを有して構成される撮像部を有している。

ＬＥＤ２３は、内視鏡２１の挿入部２２に設けられ、光源駆動部１１の制御下において、被検体に照明光を照射できるように構成される。

撮像素子２４は、内視鏡２１の挿入部２２に設けられ、照明光が照射された被検体の反射光を図示しない観察窓を介して取り込むことができるように配置される。

撮像素子２４は、観察窓から取り込まれた被検体の反射光を、光電変換し、図示しないＡＤ変換器により、アナログの撮像信号からデジタルの撮像信号に変換し、ビデオプロセッサ３１に出力する。

ビデオプロセッサ３１は、画像処理回路を有する内視鏡画像処理装置である。ビデオプロセッサ３１は、制御部３２と、検出支援部３３とを有して構成される。

制御部３２は、光源駆動部１１に制御信号を送信し、ＬＥＤ２３を駆動可能である。

制御部３２は、内視鏡２１から入力される撮像信号に対し、例えば、ゲイン調整、ホワイトバランス調整、ガンマ補正、輪郭強調補正、拡大縮小調整等の画像調整を行い、後述する被検体の観察画像Ｇ１を検出支援部３３に順次出力可能である。

図２は、本発明の第１の実施形態に係わる、内視鏡システム１の検出支援部３３の構成を示すブロック図である。図２に示すように、検出支援部３３は、検出部３４と、判定部である継続検出判定部３５と、検出結果出力部３６とを有して構成される。

検出部３４は、被検体の観察画像Ｇ１が順次入力され、観察画像Ｇ１についての所定の特徴量に基づいて、観察画像Ｇ１における特徴領域である病変候補領域Ｌを検出する回路である。検出部３４は、特徴量算出部３４ａと、病変候補検出部３４ｂとを有して構成される。

特徴量算出部３４ａは、被検体の観察画像Ｇ１についての所定の特徴量を算出する回路である。特徴量算出部３４ａは、制御部３２と、病変候補検出部３４ｂとに接続される。特徴量算出部３４ａは、制御部３２から順次入力される被検体の観察画像Ｇ１から所定の特徴量を算出し、病変候補検出部３４ｂに出力可能である。

所定の特徴量は、観察画像Ｇ１上の所定小領域毎に、所定小領域内の各画素と、当該画素に隣接する画素との変化量、すなわち、傾き値を演算して算出される。なお、特徴量は、隣接画素との傾き値によって算出される方法に限られず、別の方法で観察画像Ｇ１を数値化させたものでも構わない。

病変候補検出部３４ｂは、特徴量の情報から観察画像Ｇ１の病変候補領域Ｌを検出する回路である。病変候補検出部３４ｂは、複数のポリープモデル情報を予め記憶できるように、ＲＯＭ３４ｃを有して構成される。病変候補検出部３４ｂは、検出結果出力部３６と、継続検出判定部３５に接続される。

ポリープモデル情報は、多くのポリープ画像が共通して持つ特徴の特徴量によって構成される。

病変候補検出部３４ｂは、特徴量算出部３４ａから入力される所定の特徴量と、複数のポリープモデル情報とに基づいて病変候補領域Ｌを検出し、検出結果出力部３６と、継続検出判定部３５とに、病変候補情報を出力する。

より具体的には、病変候補検出部３４ｂは、特徴量検出部から入力される所定小領域毎の所定の特徴量と、ＲＯＭ３４ｃに記憶されるポリープモデル情報の特徴量とを比較し、互いの特徴量が一致するとき、病変候補領域Ｌを検出する。病変候補領域Ｌが検出されると、病変候補検出部３４ｂは、検出結果出力部３６と、継続検出判定部３５とに、検出された病変候補領域Ｌの位置情報、大きさ情報を含む、病変候補情報を出力する。

継続検出判定部３５は、病変候補領域Ｌが継続して検出されているか否かを判定する回路である。継続検出判定部３５は、１フレーム前の病変候補情報を記憶できるように、ＲＡＭ３５ａを有して構成される。継続検出判定部３５は、検出結果出力部３６に接続される。

継続検出判定部３５は、例えば、観察画像Ｇ１上において、病変候補領域Ｌの位置が、ずれたとき等であっても当該病変候補領域Ｌを追跡できるように、第１観察画像上の第１病変候補領域と、第１観察画像よりも前に入力された第２観察画像上の第２病変候補領域とが同じ病変候補領域Ｌであるか否かを判定し、順次入力される複数の観察画像Ｇ１上において同じ病変候補領域Ｌが連続的又は断続的に検出されるとき、病変候補領域Ｌの検出が継続していると判定し、判定結果を検出結果出力部３６に出力する。

検出結果出力部３６は、検出結果の出力処理をする回路である。検出結果出力部３６は、強調処理部３６ａと、報知部３６ｂとを有して構成される。検出結果出力部３６は、表示部４１に接続される。検出結果出力部３６は、制御部３２から入力される観察画像Ｇ１と、病変候補検出部３４ｂから入力される病変候補情報と、継続検出判定部３５から入力される判定結果とに基づいて、強調処理及び報知処理を行うことが可能である。検出結果出力部３６は、表示用画像Ｇを表示部４１に出力する。

図３は、本発明の第１の実施形態に係わる、内視鏡システム１の表示用画像Ｇの画面構成の例を説明する説明図である。検出結果出力部３６から出力される表示用画像Ｇ中には、図３に示すように、観察画像Ｇ１が配置される。図３は、観察画像Ｇ１の一例として、病変候補領域Ｌを有する大腸の内壁を表している。

強調処理部３６ａは、病変候補検出部３４ｂにおいて病変候補領域Ｌが継続して検出された場合に、病変候補領域Ｌを検出した時から第１所定時間経過後に入力される被検体の観察画像Ｇ１に対し、病変候補領域Ｌに対応する位置の強調処理をする。

より具体的には、継続検出判定部３５によって継続して検出されていると判定される病変候補領域Ｌが、第１所定時間継続して検出されるとき、強調処理は開始する。

第１所定時間は、術者が、目視観察により、観察画像Ｇ１から病変部を高い確率で発見可能な時間であり、例えば、０．５秒に予め設定される。第１所定時間は、フレーム数によって規定され、例えば、１秒間のフレーム数が３０であるとき、第１所定時間は１５フレームによって規定される。

強調処理は、最長で第２所定時間行われ、第２所定時間経過後に終了する。第２所定時間経過する前に、病変候補領域Ｌが継続検出判定部３５によって継続して検出されている状態が終わった場合には、その時点で強調処理も終了する。

より具体的には、継続検出判定部３５によって継続して検出されていると判定される病変候補領域Ｌが、第１所定時間経過して強調処理を開始した後、第２所定時間経過した場合には、継続して検出されていても、強調処理は終了する。

第２所定時間は、術者が、マーカ画像Ｇ２から病変候補領域Ｌを十分認識可能な時間であり、例えば、１．５秒に予め設定される。第２所定時間は、フレーム数によって規定され、例えば、１秒間のフレーム数が３０であるとき、第２所定時間は４５フレームによって規定される。

強調処理は、病変候補領域Ｌの位置を示す表示を行う処理である。より具体的には、強調処理は、制御部３２から入力される観察画像Ｇ１に対し、病変候補情報に含まれる、位置情報及び大きさ情報に基づいて、病変候補領域Ｌを囲むマーカ画像Ｇ２を付加する処理である。なお、図３では、一例として、マーカ画像Ｇ２は、四角形で示しているが、例えば、三角形、円形、星形等どのような画像でも構わない。また、図３では、一例として、マーカ画像Ｇ２は、病変候補領域Ｌを囲む枠画像であるが、病変候補領域Ｌの位置を示すことができるものであれば、病変候補領域Ｌを囲まない画像であっても構わない。例えば、病変候補領域Ｌの明るさや色調を周辺領域とは異なるものとすることによって病変候補領域Ｌの位置を示してもよい。

報知部３６ｂは、観察画像Ｇ１に病変候補領域Ｌが存在することを、強調処理とは異なる報知処理によって術者に報知できるように構成される。報知処理は、強調処理が終了する第２所定時間経過後から、検出部３４による病変候補領域Ｌの継続検出が終了するまで行われる。

報知処理は、観察画像Ｇ１以外の領域に報知画像Ｇ３を表示させる処理である。図３の２点鎖線では、一例として旗模様の報知画像Ｇ３を示しているが、報知画像Ｇ３は、例えば、三角形、円形、星形等どのような画像でも構わない。

表示部４１は、モニタによって構成され、検出結果出力部３６から入力される表示用画像Ｇを画面上に表示可能である。

（作用）
続いて、検出結果出力部３６の検出結果出力処理について説明をする。

図４は、本発明の第１の実施形態に係わる、内視鏡システム１の検出結果出力処理の流れを説明するフローチャートである。

内視鏡２１によって被検体が撮像されると、制御部３２によって画像調整処理がされた後、観察画像Ｇ１が検出支援部３３に入力される。検出支援部３３に観察画像Ｇ１が入力されると、特徴量算出部３４ａは、観察画像Ｇ１の所定の特徴量を算出し、病変候補検出部３４ｂに出力する。病変候補検出部３４ｂは、入力された所定の特徴量と、ポリープモデル情報の特徴量とを比較し、病変候補領域Ｌの検出をする。病変候補領域Ｌの検出結果は、継続検出判定部３５と、検出結果出力部３６とに出力される。継続検出判定部３５は、病変候補領域Ｌが継続して検出されているか否かを判定し、判定結果を検出結果出力部３６に出力する。

検出結果出力部３６は、病変候補領域Ｌが継続検出されているかを判定する（Ｓ１）。Ｓ１では、継続検出判定部３５から入力される判定結果を参照し、病変候補領域Ｌが継続して検出されていると判定するとき（Ｓ１：Ｙｅｓ）、処理はＳ２に進む。一方、病変候補領域Ｌが継続して検出されていないと判定するとき（Ｓ１：Ｎｏ）、処理は、Ｓ５に進む。

検出結果出力部３６は、病変候補領域Ｌの最初の検出からの経過時間を判定する（Ｓ２）。Ｓ２では、検出結果出力部３６は、病変候補領域Ｌの最初の検出からの経過時間を判定し、経過時間が、第１所定時間未満（例えば、最初の検出から０．５秒未満、すなわち１５フレーム未満）であると判定するとき、処理はＳ５に進む。検出結果出力部３６は、経過時間が、第１所定時間経過後、第２所定時間未満（例えば、最初の検出から０．５秒以上かつ２．０秒未満、すなわち、１５フレーム以上かつ４５フレーム未満）であると判定するとき、処理は、Ｓ３に進む。検出結果出力部３６は、経過時間が、第１所定時間及び第２所定時間の合計以上（例えば、最初の検出から２．０秒以上、すなわち、４５フレーム以上）であるとき、処理はＳ４に進む。

Ｓ３では、検出結果出力部３６は、強調処理をする。Ｓ３では、検出結果出力部３６は、観察画像Ｇ１に、マーカ画像Ｇ２を付加する。Ｓ３の処理の後、処理はＳ５に進む。

Ｓ４では、検出結果出力部３６は、報知処理をする。Ｓ４では、検出結果出力部３６は、報知処理をし、表示用画像Ｇに報知画像Ｇ３を付加する。Ｓ４の処理の後、処理はＳ５に進む。

表示用画像Ｇを表示部４１に出力する（Ｓ５）。

Ｓ１からＳ５の処理が検出結果出力処理を構成する。

図５は、本発明の第１の実施形態に係わる、内視鏡システム１の検出結果出力処理における画面遷移の例を説明する説明図である。

Ｓ１からＳ５の検出結果出力処理を繰り返すことにより、図５に示すように、表示用画像Ｇは遷移する。

まず、病変候補領域Ｌが最初に検出された後、第１所定時間経過するまでは、マーカ画像Ｇ２は表示されない。続いて、病変候補領域Ｌが、第１所定時間継続して検出されるとき、強調処理部３６ａによって強調処理が開始され、表示用画像Ｇでは、マーカ画像Ｇ２が表示される。続いて、病変候補領域Ｌが、第２所定時間経過しても継続して検出されるとき、強調処理が終了されるとともに、報知部３６ｂによって報知処理が開始され、表示用画像Ｇでは、マーカ画像Ｇ２が非表示にされるとともに報知画像Ｇ３が表示される。続いて、病変候補領域Ｌが検出されなくなると、報知処理が終了され、報知画像Ｇ３が非表示になる。

上述の第１の実施形態によれば、注目領域である病変候補領域Ｌが検出されてからマーカ画像Ｇ２が表示されるまでの間に術者自ら目視によって病変部を発見する時間があり、術者に対し、観察画像Ｇ１に対する注意力の低下を抑え、病変部発見能力の向上を妨げずに、注目領域を提示することができる。

（第１の実施形態の変形例）
上述の第１の実施形態では、表示用画像Ｇは、動画像である観察画像Ｇ１を有して構成されるが、表示用画像Ｇは、観察画像Ｇ１と静止画像Ｇ４とによって構成されても構わない。

図６は、本発明の第１の実施形態に係わる、内視鏡システム１の表示用画像Ｇの画面構成の例を説明する説明図である。図７は、本発明の第１の実施形態の変形例に係わる、内視鏡システム１の検出結果出力処理における画面遷移の例を説明する説明図である。

第１の実施形態の変形例では、検出結果出力部３６は、静止画像処理部３６ｃと、メモリ３６ｄとを有して構成される（図２の２点鎖線）。

静止画像処理部３６ｃは、検出部３４において病変候補領域Ｌが検出された場合に、図６に示す静止画像Ｇ４を第１所定時間経過後に表示させることができるように構成される。

メモリ３６ｄは、静止画像Ｇ４を一時的に記憶できるように構成される。

検出結果出力部３６は、病変候補領域Ｌが継続検出されていると判定するとき、メモリ３６ｄに静止画像Ｇ４を一時的に記憶させる。

図７に示すように、検出結果出力部３６は、第１所定時間経過後に、メモリ３６ｄに一時的に記憶された静止画像Ｇ４に対してマーカ画像Ｇ２ａを付加し、静止画像Ｇ４を表示する。検出結果出力部３６は、第１所定時間経過後から、さらに第２所定時間経過したとき、静止画像Ｇ４を非表示にする。

上述の第１の実施形態の変形例によれば、より確実に病変候補領域Ｌの位置を術者に示すことが可能であり、術者に対し、観察画像Ｇ１に対する注意力の低下を抑え、病変部発見能力の向上を妨げずに、注目領域を提示することができる。

（第２の実施形態）
上述の第１の実施形態及び第１の実施形態の変形例では、病変候補領域Ｌが第１所定時間継続して検出されるとき、強調処理を開始するが、病変候補領域Ｌが第１所定時間継続して検出され、かつ操作部がＯＮ状態であるとき、強調処理部３６ａが強調処理を開始してもよい。

図８は、本発明の第２の実施形態に係わる、内視鏡システム１ａの概略構成を示すブロック図である。図９は、本発明の第２の実施形態に係わる、内視鏡システム１ａの検出支援部３３の構成を示すブロック図である。第２の実施形態の説明においては、第１の実施形態及び第１の実施形態の変形例と同じ構成については、同じ符号を付し、説明を省略する。

第２の実施形態の内視鏡装置１ａは、操作部Ｐと、検出結果出力部３６１を有して構成される。

操作部Ｐは、術者の操作指示により、ＯＮ状態とＯＦＦ状態とを切替え可能なスイッチにより構成される。操作部Ｐは、検出結果出力部３６１に接続される。

検出結果出力部３６１は、操作部ＰのＯＮ／ＯＦＦ状態を検出できるように構成される。病変候補領域Ｌが第１所定時間継続して検出され、かつ操作部ＰがＯＮ状態であることが検出されるとき、強調処理部３６ａは、強調処理を開始する。

続いて、検出結果出力部３６１における検出結果出力処理について説明をする。

図１０は、本発明の第２の実施形態に係わる、内視鏡システム１ａの検出結果出力処理の流れを説明するフローチャートである。

検出結果出力部３６１は、病変候補領域Ｌが継続検出されているかを判定する（Ｓ１１）。Ｓ１１では、継続検出判定部３５から入力される判定結果を参照し、病変候補領域Ｌが継続して検出されていると判定するとき（Ｓ１１：Ｙｅｓ）、処理はＳ１２に進む。一方、病変候補領域Ｌが継続して検出されていないと判定するとき（Ｓ１１：Ｎｏ）、処理は、Ｓ１５に進む。

検出結果出力部３６１は、病変候補領域Ｌの最初の検出から第１所定時間を経過しているか否かを判定する（Ｓ１２）。Ｓ１２では、検出結果出力部３６１が、病変候補領域Ｌの最初の検出から第１所定時間を経過していると判定するとき（Ｓ１２：ＹＥＳ）、処理はＳ１３に進む。検出結果出力部３６１が、病変候補領域Ｌの最初の検出から第１所定時間を経過していないと判定するとき（Ｓ１２：ＮＯ）、処理はＳ１４に進む。

Ｓ１３では、検出結果出力部３６１は、観察画像Ｇ１に対して強調処理をする。Ｓ１３の処理の後、処理はＳ１５に進む。

Ｓ１４では、検出結果出力部３６１は、表示用画像Ｇに対して報知処理をする。Ｓ１４の処理の後、処理はＳ１５に進む。

表示用画像Ｇを表示部４１に出力する（Ｓ１５）。

Ｓ１１からＳ１５の処理が検出結果出力処理を構成する。

図１１は、本発明の第２の実施形態に係わる、内視鏡システム１ａの検出結果出力処理における画面遷移の例を説明する説明図である。

Ｓ１１からＳ１５の検出結果出力処理を繰り返すことにより、図１１に示すように、表示用画像Ｇは遷移する。

病変候補領域Ｌが継続して検出されると、報知部３６ｂによって報知処理が開始される。表示用画像Ｇでは、報知画像Ｇ３が表示される。続いて、病変候補領域Ｌが第１所定時間継続して検出され、かつ操作部ＰがＯＮ状態であることが検出されると、強調処理部３６ａによって強調処理が開始される。表示用画像Ｇの観察画像Ｇ１では、マーカ画像Ｇ２が表示される。続いて、術者の操作指示によって操作部ＰがＯＦＦ状態にされ、検出結果出力部３６１によって操作部ＰがＯＦＦ状態であることが検出されると、強調処理が終了され、一方、報知部３６ｂによって報知処理が開始される。表示用画像Ｇでは、マーカ画像Ｇ２が非表示になり、報知画像Ｇ３が表示される。続いて、病変候補領域Ｌが検出されなくなると、報知処理が終了される。表示用画像Ｇでは、報知画像Ｇ３が非表示になる。

これにより、内視鏡システム１ａでは、術者の操作指示によって操作部ＰがＯＦＦ状態にされると、マーカ画像Ｇ２は非表示になる。内視鏡システム１ａでは、操作部ＰがＯＮ状態であり、かつ病変候補領域Ｌが第１所定時間継続して検出されたとき、マーカ画像Ｇ２は表示される。内視鏡システム１ａでは、術者によって操作部ＰがＯＦＦ状態からＯＮ状態に切り替えられたときに病変候補領域Ｌの最初の検出から第１所定時間経過していない場合には、病変候補領域Ｌの最初の検出から第１所定時間経過後にマーカ画像Ｇ２が表示される。

上述の第２の実施形態によれば、病変候補領域Ｌが検出されてからマーカ画像Ｇ２が表示されるまでの間に術者自ら目視によって病変部を発見する時間があり、かつ術者の操作指示によってマーカ画像Ｇ２を非表示にすることが可能であり、術者に対し、観察画像Ｇ１に対する注意力の低下を抑え、病変部発見能力の向上を妨げずに、注目領域を提示することができる。また、必要なときのみ操作部ＰをＯＦＦ状態からＯＮ状態に切り替えればよいので、マーカ画像Ｇ２が不要なときには操作部ＰをＯＦＦ状態にしておくことにより、既に気付いている病変候補領域Ｌへのマーカ画像Ｇ２の表示を煩わしく感じることも無い。

（第３の実施形態）
上述の第１の実施形態、第１の実施形態の変形例及び第２の実施形態では、表示部４１を構成するモニタは１つであるが、２つのモニタを有して構成されてもよい。

図１２は、本発明の第３の実施形態に係わる、内視鏡システム１ｂの概略構成を示すブロック図である。図１３は、本発明の第３の実施形態に係わる、内視鏡システム１ｂの検出支援部３３の構成を示すブロック図である。図１４は、本発明の第３の実施形態に係わる、内視鏡システム１ｂの検出結果出力処理における画面遷移の例を説明する説明図である。第３の実施形態の説明においては、第１の実施形態、第１の実施形態の変形例及び第２の実施形態と同じ構成については、同じ符号を付し、説明を省略する。

内視鏡システム１ｂは、図１２に示すように、第１表示部４１ａ及び第２表示部４１ｂを有して構成される。内視鏡システム１ｂの検出結果出力部３６２は、図１３に示すように、報知部３６２ｂ及び強調処理部３６２ａを有して構成される。

第１表示部４１ａ及び第２表示部４１ｂの各々は、画像表示可能であるモニタによって構成される。

第１表示部４１ａは、報知部３６２ｂに接続され、報知部３６２ｂから出力される第１表示用画像Ｄ１を表示可能である。

第２表示部４１ｂは、強調処理部３６２ａに接続され、強調処理部３６２ａから出力される第２表示用画像Ｄ２を表示可能である。

報知部３６２ｂは、検出部３４によって観察画像Ｇ１中に病変候補領域Ｌが検出されたとき、病変候補領域Ｌが検出されたことを術者に報知する報知処理をし、第１表示用画像Ｄ１を生成して第１表示部４１ａに出力する。

強調処理部３６２ａは、病変候補検出部３４ｂにおいて病変候補領域Ｌが継続して検出されたとき、病変候補領域Ｌを検出した時から第１所定時間経過後に入力される被検体の観察画像Ｇ１に対し、病変候補領域Ｌに対応する位置の強調処理をし、第２表示用画像Ｄ２を生成して第２表示部４１ｂに出力する。

図１４は、本発明の第３の実施形態に係わる、内視鏡システム１ｂの検出結果出力処理における画面遷移の例を説明する説明図である。

病変候補領域Ｌが継続して検出されると、報知部３６２ｂによって報知処理が開始され、第１表示用画像Ｄ１では報知画像Ｇ３が表示される。続いて、病変候補領域Ｌが第１所定時間継続して検出されると、強調処理部３６２ａによって強調処理が開始され、第２表示用画像Ｄ２では、マーカ画像Ｇ２が表示される。続いて、病変候補領域Ｌが検出されなくなると、強調処理及び報知処理が終了され、マーカ画像Ｇ２及び報知画像Ｇ３が非表示になる。

これにより、術者は、メイン画面である第１表示部４１ａに表示される第１表示用画像Ｄ１を観察し、必要に応じてサブ画面である第２表示部４１ｂに表示される第２表示用画像Ｄ２を観察可能である。例えば、術者は、第１表示用画像Ｄ１によって被検体の観察を行い、第１表示用画像Ｄ１に報知画像Ｇ３が表示されたとき、より注意深く第１表示用画像Ｄ１を観察し、術者が自ら目視によって病変部を発見することが可能である。さらに、術者は、第１表示用画像Ｄ１上で病変部を発見できないときには、必要に応じて第２表示用画像Ｄ２に目を移し、病変候補領域Ｌが検出されてから第１所定時間経過後に表示されるマーカ画像Ｇ２の表示位置に基づいて、病変候補領域Ｌをより注意深く確認することが可能である。

上述の第３の実施形態によれば、病変候補領域Ｌが検出されてからマーカ画像Ｇ２が表示されるまでの間に術者自ら目視によって病変部を発見する時間があり、また、マーカ画像Ｇ２が第２表示用画像Ｄ２に表示され、術者に対し、第１表示用画像Ｄ１における観察画像Ｇ１に対する注意力の低下を抑え、病変部発見能力の向上を妨げずに、注目領域を提示することができる。また、必要なときのみマーカ画像Ｇ２が表示される第２表示用画像Ｄ２を見ればよいので、マーカ画像Ｇ２が不要なときにはマーカ画像Ｇ２が無い第１表示用画像Ｄ１を見ることにより、既に気付いている病変候補領域Ｌへのマーカ画像Ｇ２の表示を煩わしく感じることも無い。

なお、実施形態では、説明のため観察画面に表示される病変候補領域Ｌは１つであるが、観察画面には複数の病変候補領域Ｌが表示される場合もある。その場合、強調処理は、各病変候補領域Ｌに対して行われ、各病変候補領域Ｌの検出から第１所定時間経過後に入力される観察画像Ｇ１に対して各病変候補領域Ｌの強調処理がされる。

なお、実施形態では、第１所定時間及び第２所定時間は、予め設定され、固定されているが、操作部Ｐ（図８、図９）、又は、図示しない他の操作部によって設定変更可能な構成にしてもよい。この構成によれば、術者は、第１所定時間と第２所定時間を所望の時間に変更可能である。

なお、実施形態では、制御部３２は、内視鏡２１から入力される撮像信号に対し、例えば、ゲイン調整、ホワイトバランス調整、ガンマ補正、輪郭強調補正、拡大縮小調整等の画像調整を行い、画像調整後の観察画像Ｇ１を検出支援部３３に入力させるが、画像調整の一部又は全部は、検出支援部３３に入力される前ではなく、検出支援部３３から出力される画像信号に対して行われても構わない。

なお、実施形態では、検出支援部３３は、ビデオプロセッサ３１の内部に配置されるが、例えば、ビデオプロセッサ３１と表示部４１の間等、ビデオプロセッサ３１の外部に配置されても構わない。

さらになお、実施形態では、強調処理部３６ａは、マーカ画像Ｇ２を病変候補領域Ｌに付加させるが、マーカ画像Ｇ２は、検出された病変候補領域Ｌの確からしさにより、色分けして表示されても構わない。この場合、病変候補検出部３４ｂは、病変候補領域Ｌの確からしさ情報を含む病変候補情報を強調処理部３６ａに出力し、強調処理部３６ａは、病変候補領域Ｌの確からしさ情報に基づいた色分けによって強調処理をする。この構成によれば、術者が、病変候補領域Ｌを観察する際、マーカ画像Ｇ２の色によってフォールスポジティブ（誤検出）の可能性の大小を推測可能である。

また、第１の実施形態、第１の実施形態の変形例及び第２の実施形態では、報知処理は、第２所定時間経過後から、検出部３４によって病変候補領域Ｌが検出されなくなるまで行われるが、報知処理は、病変候補領域Ｌが検出された後、強調処理の開始まで、行われても構わない。この構成によれば、病変候補領域Ｌが検出された後、マーカ画像Ｇ２が表示されるまでの間、術者は病変候補領域Ｌが観察画像Ｇ１上のどこかに検出されたことを認識可能であり、病変部が発見されやすくなる。また、報知処理は強調処理と並行して行なってもよく、病変候補領域Ｌが検出された後、検出部３４によって病変候補領域Ｌが検出されなくなるまで継続して行われても構わない。

なお、第１の実施形態、第１の実施形態の変形例及び第２の実施形態では、報知処理は、第２所定時間経過後から、検出部３４によって病変候補領域Ｌが検出されなくなるまで、行われるが、報知部３６ｂは、強調処理が開始された後、報知処理を開始しても構わない。この構成によれば、マーカ画像Ｇ２の表示に加えて報知処理がされ、術者は、病変候補領域Ｌが検出されたことをより確実に認識可能である。

なお、実施形態では、報知部３６ｂは、報知画像Ｇ３を観察画像Ｇ１以外の領域に表示させるが、例えば、図１５に示すように、観察画像Ｇ１を囲む画像Ｇ５を表示させても構わない。この構成によれば、観察画像Ｇ１を囲む画像Ｇ５の表示により、術者が、観察画像Ｇ１のどの部分を注目しているときにおいても、病変候補領域Ｌが検出されていることに気づきやすい。

なお、実施形態では、報知部３６ｂは、報知画像Ｇ３を表示することによって術者に報知するが、報知部３６ｂは、図示しないスピーカから音を発生させ、術者に報知しても構わない。

なお、実施形態では、検出支援部３３は、回路により構成されるが、検出支援部３３の各機能は、ＣＰＵの処理によって機能が実現する処理プログラムによって構成されても構わない。

本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。

本発明によれば、術者に対し、観察画像に対する注意力の低下を抑え、病変部発見能力の向上を妨げずに、注目領域を提示する内視鏡装置を提供することができる。

本出願は、２０１５年１１月１０日に日本国に出願された特願２０１５−２２０５２１号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲に引用されるものとする。

本発明の一態様の内視鏡装置は、被検体の観察画像が順次入力され、前記観察画像についての所定の特徴量に基づいて、前記観察画像における特徴領域を検出する検出部と、前記検出部において前記特徴領域が継続して検出された場合に、前記特徴領域を検出した時から第１所定時間経過後に入力される前記被検体の前記観察画像に対して前記特徴領域に対応する位置の強調処理を行い、前記特徴領域を検出した時から第１所定時間経過するまでに入力される前記被検体の前記観察画像に対して前記特徴領域に対応する位置の強調処理を行わない強調処理部と、を有する。

Claims

被検体の観察画像が順次入力され、前記観察画像についての所定の特徴量に基づいて、前記観察画像における特徴領域を検出する検出部と、
前記検出部において前記特徴領域が継続して検出された場合に、前記特徴領域を検出した時から第１所定時間経過後に入力される前記被検体の前記観察画像に対し、前記特徴領域に対応する位置の強調処理をする強調処理部と、
を有することを特徴とする内視鏡装置。
前記強調処理は、第２所定時間行われ、前記第２所定時間経過後に終了することを特徴とする請求項１に記載の内視鏡装置。
前記観察画像に前記特徴領域が存在することを、前記強調処理とは異なる報知処理によって術者に報知する報知部を有することを特徴とする請求項２に記載の内視鏡装置。
前記報知処理は、前記第２所定時間経過後から、前記検出部によって前記特徴領域が検出されなくなるまで行われることを特徴とする請求項３に記載の内視鏡装置。
前記報知処理は、前記特徴領域が検出された後、前記強調処理の開始まで行われることを特徴とする請求項３に記載の内視鏡装置。
前記報知処理は、前記特徴領域が検出された後、前記検出部によって前記特徴領域が検出されなくなるまで行われることを特徴とする請求項３に記載の内視鏡装置。
前記第１所定時間及び前記第２所定時間は、フレーム数によって規定されることを特徴とする請求項２に記載の内視鏡装置。
判定部を有し、
前記判定部は、第１観察画像上の第１特徴領域と、前記第１観察画像よりも前に入力された第２観察画像上の第２特徴領域とが同一の特徴領域であるか否かを判定する、
ことを特徴とする請求項２に記載の内視鏡装置。
前記判定部は、前記特徴領域が連続的又は断続的に検出されるとき、前記特徴領域が継続して検出されていると判定することを特徴とする請求項８に記載の内視鏡装置。
前記判定部によって継続して検出されていると判定される前記特徴領域が、第１所定時間継続して検出されるとき、前記強調処理部は、前記強調処理を開始することを特徴とする請求項８に記載の内視鏡装置。
前記判定部によって継続して検出されていると判定される前記特徴領域が、第１所定時間経過後、第２所定時間経過しても継続して検出されるとき、前記強調処理部は、前記強調処理を終了することを特徴とする請求項８に記載の内視鏡装置。
前記検出部は、検出された前記特徴領域の確からしさ情報を出力可能であり、
前記強調処理部は、前記確からしさ情報に基づいた色分けによって前記強調処理をする、
ことを特徴とする請求項１に記載の内視鏡装置。
静止画像処理部を有し、
前記静止画像処理部は、前記検出部において前記特徴領域が検出された場合に、静止画像を第１所定時間経過後に表示させることを特徴とする、
請求項１に記載の内視鏡装置。
操作部を有し、
前記第１所定時間及び前記第２所定時間は、前記操作部によって設定入力可能であることを特徴とする請求項２に記載の内視鏡装置。
前記報知処理は、前記観察画像を囲む画像を表示させる処理であることを特徴とする請求項３に記載の内視鏡装置。
前記強調処理は、前記特徴領域の位置を示す表示を行う処理であることを特徴とする請求項１に記載の内視鏡装置。
操作部を有し、
前記操作部は、ＯＮ状態とＯＦＦ状態とを切替え可能であり、
前記強調処理部は、前記特徴領域が前記第１所定時間継続して検出され、かつ前記操作部がＯＮ状態であることが検出されるとき、前記強調処理を開始する、
ことを特徴とする請求項１に記載の内視鏡装置。
第１表示部及び第２表示部を有し、
前記第１表示部は、前記報知部から出力される第１表示用画像を表示可能であり、
前記第２表示部は、前記強調処理部から出力される第２表示用画像を表示可能である、
ことを特徴とする請求項３に記載の内視鏡装置。
前記報知部は、前記検出部によって前記特徴領域が検出された場合に、音を発生することを特徴とする請求項３に記載の内視鏡装置。