WO2020004259A1

WO2020004259A1 - 内視鏡画像表示システムおよび内視鏡画像表示装置

Info

Publication number: WO2020004259A1
Application number: PCT/JP2019/024709
Authority: WO
Inventors: 和紀井上
Original assignee: 富士フイルム株式会社
Priority date: 2018-06-29
Filing date: 2019-06-21
Publication date: 2020-01-02

Abstract

内視鏡を介して取得された直視画像と複数の側視画像を同時に表示する場合に、画像の内容を確認しにくくすることなく、観察者の視線の移動距離を小さくした内視鏡画像表示システムおよび内視鏡画像表示装置を提供する。　画像処理部において、同一画面内に直視画像と複数の側視画像とを配置し、かつ複数の側視画像同士を隣接状態に配置する処理を行う。

Description

内視鏡画像表示システムおよび内視鏡画像表示装置

　本開示は、内視鏡を介して取得された直視画像と複数の側視画像を同時に表示する内視鏡画像表示システムおよび内視鏡画像表示装置に関する。

　従来、医療分野において先端部分に撮像装置が内蔵された長尺の挿入部を被検者の口や鼻等から挿入して体腔内を撮像する挿入型の内視鏡が普及している。また、近年では、挿入部の前方の直視領域と、挿入部の径方向の複数の側視領域とを同時に観察可能な内視鏡が提案されている。このような直視領域と複数の側視領域とを同時に観察可能な内視鏡を用いて取得された画像を表示する内視鏡画像表示システムとしては、例えば特許第５９７４１８８号公報および特許第６０１７７２９号公報に記載のものが知られている。

　直視領域と複数の側視領域とを同時に観察可能な内視鏡を用いて取得された画像を表示する場合、例えば、直視領域として内視鏡前方、側視領域として内視鏡の軸を基準に右側および左側を観察したとすると、特許第５９７４１８８号公報に記載の様に、側視画像（左側）、直視画像（前方）、側視画像（右側）の順に横一列に画像を配置するのが一般的であるが、このように配置すると、２つの側視画像間で観察者の視線の移動距離が大きくなるため、観察効率が悪いという問題がある。

　また、特許第６０１７７２９号公報では、直視画像を中心として、その周囲の環状の領域に、複数の側視画像を直視画像の周辺画像として近接させて配置する態様が開示されている。しかしながら、特許第６０１７７２９号公報における側視画像は、直視画像の周辺画像とすべく画像形状を変形させており、独立した画像ではないため、側視画像の内容が確認しにくくなるという問題がある。

　本開示は、上記事情に鑑み、内視鏡を介して取得された直視画像と複数の側視画像とを同時に表示する場合に、画像の内容を確認しにくくすることなく、観察者の視線の移動距離を小さくした内視鏡画像表示システムおよび内視鏡画像表示装置を提供することを目的とする。

　上記の課題を解決するための具体的手段には、以下の態様が含まれる。

＜１＞　被検体の内部に挿入される挿入部と、挿入部の前方を含む直視領域の像を取得する直視像取得部と、挿入部の径方向を含み、互いに異なる側視領域の像を取得する複数の側視像取得部と、直視像取得部により取得された像に基づく直視画像と、複数の側視像取得部により取得された複数の像に基づく複数の側視画像とを生成する画像生成部と、同一画面内に直視画像と複数の側視画像とを配置し、かつ複数の側視画像同士を隣接状態に配置する処理を行う画像処理部とを備える内視鏡画像表示システム。

＜２＞　画像処理部は、複数の側視画像について、複数の側視画像の各々の撮影方向の位置関係と対応させて配置する処理を行う＜１＞の内視鏡画像表示システム。

＜３＞　画像処理部は、側視画像よりも直視画像を大きく表示する処理を行う＜１＞または＜２＞の内視鏡画像表示システム。

＜４＞　画像処理部は、複数の側視画像の並び方向と交差する方向に直視画像を配置する処理を行う＜１＞から＜３＞のいずれかの内視鏡画像表示システム。

＜５＞　画像処理部は、直視画像および複数の側視画像を合わせた配置領域の形状を矩形にする処理を行う＜１＞から＜４＞のいずれかの内視鏡画像表示システム。

＜６＞　画像処理部は、直視画像と側視画像とで異なる電子ズーム倍率で表示する処理を行う＜１＞から＜５＞のいずれかの内視鏡画像表示システム。

＜７＞　画像処理部は、直視画像と側視画像とで異なる画像処理を行う＜１＞から＜６＞のいずれかの内視鏡画像表示システム。

＜８＞　＜１＞から＜７＞のいずれかの画像処理部を少なくとも備える内視鏡画像表示装置。

　本開示によれば、画像の内容を確認しにくくすることなく、観察者の視線の移動距離を小さくした内視鏡画像表示システムおよび内視鏡画像表示装置を提供することができる。

本発明の一実施形態にかかる内視鏡画像表示システムの外観図上記内視鏡画像表示システムにおける要部の概略構成図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける画像処理部の処理シーケンスを示すフローチャートその他の実施形態にかかる内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図上記内視鏡画像表示システムにおける内視鏡画像の表示例を示す図

　以下、本発明の内視鏡画像表示システムの一実施形態について図面を参照して詳細に説明する。図１は本発明の一実施形態にかかる内視鏡画像表示システムの外観図であり、図２は上記内視鏡画像表示システムにおける要部の概略構成図である。

　図１に示すように、本実施形態の内視鏡画像表示システム１は、観察対象物を撮像して撮像信号を出力する内視鏡２と、観察対象物を照明するための照明光を供給する光源装置３１と、撮像信号に応じた画像信号を生成して出力する機能を有する内視鏡画像表示装置３２と、画像信号に応じた観察画像を表示するモニタ３５とを有する。

　内視鏡２は、複数の視野を同時に観察可能な内視鏡であり、術者が把持して操作を行う操作部３と、操作部３の先端側に形成され、体腔内等に挿入される細長の挿入部４と、操作部３の側部から延出するユニバーサルコード５とを有する。

　挿入部４は、最も先端側に設けられた硬質の先端部６と、先端部６の後端に設けられた湾曲自在の湾曲部７と、湾曲部７の後端に設けられた長尺かつ可撓性を有する可撓管部８とを有する。湾曲部７は、操作部３に設けられた湾曲操作レバー９の操作に応じた湾曲動作を行う。

　図２に示すように、内視鏡２の先端部６の先端面には、挿入部４の前方を含む直視領域を観察するための直視観察窓１１ａが配置されている。また、内視鏡２の先端部６の側面には、挿入部４の径方向を含み、互いに異なる側視領域を観察するための２つの側視観察窓１１ｂおよび１１ｃが先端部６の円周に沿って１８０度の間隔で配置されている。

　ここで、「挿入部４の前方」とは、挿入部４の軸方向における内視鏡２先端側を意味し、「挿入部４の前方を含む直視領域」とは、少なくとも一部に挿入部４の前方を含む領域を意味し、前方以外の方向を含んでいてもよい。また、「挿入部４の径方向」とは、挿入部４の軸方向と直交する方向を意味し、「挿入部４の径方向を含む側視領域」とは、少なくとも一部に挿入部４の径方向を含む領域を意味し、径方向以外の方向を含んでいてもよい。なお、直視領域および複数の側視領域は、互いに異なる領域である。

　また、内視鏡２の先端部６の先端面には、鉗子等の処置具を使用するため、挿入部４内に配設されたチューブ等により形成された不図示の処置具チャンネルに連通するとともに、処置具チャンネルに挿通された処置具（の先端部）を突出させることが可能な不図示の先端開口部が設けられている。

　一方、図１に示すように、ユニバーサルコード５の端部には、光源装置３１に接続可能なコネクタ２９が設けられている。また、コネクタ２９の側面には、接続ケーブル３３の一方の端部を接続可能な電気接点部（図示せず）が設けられている。さらに、接続ケーブル３３の他方の端部には、内視鏡２と内視鏡画像表示装置３２とを電気的に接続するためのコネクタが設けられている。

　ユニバーサルコード５には、種々の電気信号を伝送するための複数の信号線、および、光源装置３１から供給される照明光を伝送するためのライトガイドが、束ねられた状態として内蔵されている。ライトガイドは、光入射側の端部がコネクタ２９のライトガイド口金に配置されるような構成を有している。

　挿入部４からユニバーサルコード５にかけて内蔵されたライトガイドは、光出射側の端部が挿入部４付近において少なくとも３方向に分岐され、各光出射端面が直視観察窓１１ａおよび２つの側視観察窓１１ｂ、１１ｃの各々の近傍に配置された不図示の照明窓に配置されるように構成されている。なお、照明窓に配置される光出射部は、ライトガイドに代えてＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）のような発光素子であってもよい。

　内視鏡画像表示装置３２は、内視鏡２の先端部６に設けられた撮像素子を駆動するための駆動信号を出力する。そして、内視鏡画像表示装置３２は、撮像素子から出力される撮像信号に対して信号処理を施すことにより、直視画像および複数の側視画像の画像信号を生成する画像生成部としての機能と、同一画面内に直視画像と複数の側視画像とを配置し、かつ複数の側視画像同士を隣接状態に配置する処理を行う画像処理部としての機能とを有する。内視鏡画像表示装置３２の機能の詳細については後述する。

　内視鏡画像表示装置３２のハードウェアの構成は特に限定されるものではなく、複数のＩＣ（Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）、プロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）、およびメモリなどを適宜組み合わせることによって実現することができる。

　また、内視鏡画像表示装置３２の全部または一部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。

　また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。

　また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。

　さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。

　また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。

　光源装置３１、内視鏡画像表示装置３２、およびモニタ３５等の周辺装置は、患者情報の入力等を行うキーボード３４等とともに、架台３６に配置されている。

　図２に示すように、直視像取得部を構成する直視観察窓１１ａは、挿入部４の前方を含む直視領域の像を取得する。直視観察窓１１ａおよび図示しない対物光学系の結像位置には撮像素子１５ａが配置されており、この撮像素子１５ａにより直視観察窓１１ａで取得された被写体像を光電変換する。

　また、側視像取得部を構成する２つの側視観察窓１１ｂ、１１ｃは、挿入部４の径方向を含み、互いに異なる側視領域の像を取得する。側視観察窓１１ｂおよび図示しない対物光学系の結像位置には撮像素子１５ｂが配置されており、この撮像素子１５ｂにより側視観察窓１１ｂで取得された被写体像を光電変換する。同様に、側視観察窓１１ｃおよび図示しない対物光学系の結像位置には撮像素子１５ｃが配置されており、この撮像素子１５ｃにより側視観察窓１１ｃで取得された被写体像を光電変換する。

　なお、直視領域と側視領域とは異なる観察領域である。また、直視領域と側視領域との境界領域は、重複していてもよいし、重複していなくてもよい。

　撮像素子１５ａ～１５ｃは、それぞれ内視鏡画像表示装置３２内の画像生成部３２ａに電気的に接続されており、撮像素子１５ａで撮像された直視撮像信号と、撮像素子１５ｂ、１５ｃの各々で撮像された側視撮像信号とを画像生成部３２ａに出力する。

　内視鏡画像表示装置３２内において、画像生成部３２ａは、各撮像素子から出力される直視撮像信号および複数の側視撮像信号に対して信号処理を施すことにより、直視画像および複数の側視画像の画像信号を生成し、画像処理部３２ｂに出力する。画像処理部３２ｂは、同一画面内に直視画像と複数の側視画像とを配置し、かつ複数の側視画像同士を隣接状態に配置する処理を行い、画像出力部３２ｃに出力する。画像出力部３２ｃは、画像処理部３２ｂにより生成された画像信号からモニタ３５に表示するための信号を生成し、モニタ３５に出力する。

　次に、本実施形態における画像処理部３２ｂの処理について詳細に説明する。図３～９は本実施形態の内視鏡画像表示システムにおける内視鏡画像の表示例を示す図である。

　本実施形態のように、挿入部４の前方を含む直視領域に対応した直視画像と、挿入部４の径方向を含み、観察方向が互いに１８０度異なる２つの側視領域に対応した２つの側視画像とを同一画面内に表示する場合、基本的には、図３に示すように、左側側視画像（図中側視１）、直視画像（図中直視）、右側側視画像（図中側視２）の順に横一列に画像を配置する。ただし、この場合には、観察者の視線の移動距離が大きくなってしまう。

　画像処理部３２ｂは、ユーザーの指示入力に基づいて、図４に示すように、左側側視画像（図中側視１）と右側側視画像（図中側視２）とを隣接状態に配置する。ここで、「隣接状態」とは、２つの側視画像の並び方向（水平方向または垂直方向）における直視画像の最大幅よりも狭い間隔で、２つの側視画像が並んだ状態を意味する。このような態様とすることによって、２つの側視画像間について観察者の視線の移動距離を小さくすることができる。

　このとき、複数の側視画像について、左側側視画像（図中側視１）を左側に、右側側視画像（図中側視２）を右側に配置して、複数の側視画像の各々の撮影方向の位置関係と対応させて配置することが好ましい。このような態様とすることによって、側視領域の観察方向の位置関係を損なうことなく、観察者の視線の移動距離を小さくすることができる。

　また、図４に示すように、複数の側視画像の並び方向と交差する方向に直視画像（図中直視）を配置してもよい。このような態様とすることによって、直視画像と２つの側視画像の全ての画像間で観察者の視線の移動距離を小さくすることができる。

　また、図４に示すように、側視画像よりも直視画像を大きく表示してもよい。このような態様とすることによって、最も重要な直視画像の観察を容易にすることができる。

　また、図４に示すように、直視画像および複数の側視画像を合わせた配置領域の形状を矩形としてもよい。具体的には、直視画像の左右の横辺の位置と、複数の側視画像の並びを一塊とした場合の左右の横辺の位置とが合うように、直視画像および複数の側視画像の各々の画像サイズを適宜調整すればよい。なお、各画像のアスペクト比を変更してもよく、その場合には、画像の一部を切り取る処理を行ってもよいし、画像を所定方向に引き延ばす処理を行ってもよい。このような態様とすることによって、直視画像および側視画像の配置領域以外の余剰領域の形状が簡素な形状となり、余剰領域にＧＵＩ（Ｇｒａｐｈｉｃａｌ　Ｕｓｅｒ　Ｉｎｔｅｒｆａｃｅ）および／または他の情報等が表示し易くなるため、余剰領域を有効的に活用することができる。

　また、直視画像と側視画像とで異なる電子ズーム倍率で表示するようにしてもよい。このような態様とすることによって、観察者の所望の領域の画像について拡大表示し、患部の発見を容易にすることができる。

　また、直視画像と側視画像とで異なる画像処理を行うようにしてもよい。このような態様とすることによって、直視画像と側視画像とで平均輝度、鮮鋭度、および／または、ＳＮ比が異なる場合であっても、各々の画像に適した画像処理を行い、直視画像と側視画像とで画像品質を同等に近づけることができるため、観察しやすい画像とすることができる。

　なお、図５に示すように、直視画像と側視画像とを同じ大きさで表示してもよい。このような態様とすることによって、全体を満遍なく観察させることができる。

　また、図６に示すように、複数の側視画像の並び方向を縦方向とし、かつ複数の側視画像の並び方向と交差する方向に直視画像を配置してもよい。モニタ３５の形状が横長の場合には、このような態様とすることによって、直視画像と側視画像との表示領域を拡大することができるため、より視認しやすくすることができる。

　また、内視鏡２において鉗子等の処置具を使用する場合、観察者は直視画像しか使用せず、さらに直視画像をより大きく観察したいという要望があるため、そのような場合は、図７に示すように、側視画像の表示を消して直視画像のみを大きく表示してもよい。このような態様とすることによって、観察者の作業効率を向上させることができる。

　また、内視鏡２において鉗子等の処置具を使用する場合は細かい作業になるため、図８に示すように、処置具先端部を拡大するため直視画像の一部を電子ズームした画像を、直視画像の周囲に並べて表示するか、図９に示すように、処置具先端部を拡大するため直視画像の一部を電子ズームした画像を、直視画像に重ねて表示してもよい。このような態様とすることによって、さらに観察者の作業効率を向上させることができる。

　図１０は本実施形態の内視鏡画像表示システムにおける画像処理部３２ｂの処理シーケンスを示すフローチャートである。

　（ステップＳ１）画像処理部３２ｂは、内視鏡２の撮像開始を検出する。その後、ステップＳ２の処理に進む。

　（ステップＳ２）画像処理部３２ｂは、内視鏡２において鉗子等の処置具が使用されているか否かを判定する。ここでの判定については、直視画像内に処置具が映っているか否かを画像認識により判定することにより行ってもよいし、ユーザーの指示入力に基づいて行ってもよい。処置具が使用されていると判定した場合（ステップＳ２：Ｙｅｓ）、画像処理部３２ｂは、ステップＳ３の処理に進む。

　（ステップＳ３）画像処理部３２ｂは、直視画像の電子ズーム画像を追加で表示する電子ズームモードであるか否かを、ユーザーの指示入力に基づいて判定する。電子ズームモードであると判定した場合（ステップＳ３：Ｙｅｓ）、画像処理部３２ｂは、ステップＳ４の処理に進む。

　（ステップＳ４）画像処理部３２ｂは、側視画像を表示せず、図８または図９に示すように、直視画像と直視画像の電子ズーム画像とを表示する表示モードとする。

　一方、ステップＳ３において、電子ズームモードではないと判定した場合（ステップＳ３：Ｎｏ）、画像処理部３２ｂは、ステップＳ５の処理に進む。

　（ステップＳ５）画像処理部３２ｂは、側視画像を表示せず、図７に示すように、直視画像のみを表示する表示モードとする。

　ステップＳ２において、処置具が使用されていないと判定した場合（ステップＳ２：Ｎｏ）、画像処理部３２ｂは、ステップＳ６の処理に進む。

　（ステップＳ６）画像処理部３２ｂは、直視画像と側視画像とで直視画像を重視する直視画像重視モードであるか否かを、ユーザーの指示入力に基づいて判定する。直視画像重視モードであると判定した場合（ステップＳ６：Ｙｅｓ）、画像処理部３２ｂは、ステップＳ７の処理に進む。

　（ステップＳ７）画像処理部３２ｂは、図４に示すように、直視画像と側視画像の両方を表示し、かつ側視画像よりも直視画像を大きく表示する表示モードとする。

　一方、ステップＳ６において、直視画像重視モードではない判定した場合（ステップＳ６：Ｎｏ）、画像処理部３２ｂは、ステップＳ８の処理に進む。

　（ステップＳ８）画像処理部３２ｂは、図５に示すように、直視画像と側視画像の両方を表示し、かつ直視画像と側視画像とを同じ大きさで表示する表示モードとする。

　なお、表示モードの決定後は、所定時間経過毎にステップＳ２以降の処理シーケンスを自動的に行うようにしてもよいし、新たなユーザーの指示入力が行われた場合にステップＳ２以降の処理シーケンスを再実行するようにしてもよい。

　表示モードが変更された場合、直視画像、直視画像の電子ズーム画像、および、側視画像の表示形態が変化するが、このときの変化についてはアニメーション表示を行ってもよい。具体的には、直視画像および側視画像の表示位置や大きさが変化する場合は、各画像の変化前の状態と変化後の状態をモーフィングにより繋げてもよい。また、直視画像の電子ズーム画像が追加または削除される場合は、画面外と電子ズーム画像の表示位置との間で電子ズーム画像をスライド移動させてよい。このような態様とすることによって、表示モード移行時のハンチングを防ぎ、感覚的に自然な表示とすることができる。

　また、内視鏡画像表示装置３２の電源ＯＦＦ直前の表示モードを記憶しておき、内視鏡画像表示装置３２の再起動後は、電源ＯＦＦ直前の表示モードで表示するレジューム機能を持たせてもよい。このような態様とすることによって、起動時に表示モードを再設定する必要がなくなるため、利便性を向上させることができる。

　以上、本発明の内視鏡画像表示システムの一実施形態について説明したが、本発明は上記実施形態に限定されず、種々の変形が可能である。

　例えば、画像生成部を構成する撮像素子については、上記の様に、直視観察窓および複数の側視観察窓の各々に対応して個別に撮像素子を配置する代わりに、直視観察窓および複数の側視観察窓の全ての観察窓、もしくは全てではないが複数の観察窓に対して１つの撮像素子を配置するように構成してもよい。このように、複数の観察窓に対して１つの撮像素子を配置するように構成する場合には、各観察窓に組み合わせる対物光学系の結像位置が同一の撮像素子上になるように構成すればよい。

　また、内視鏡の先端部に配置される側視観察窓については、上記の様に２つに限定されるものではなく、例えば先端部の円周における１点を上側と規定した場合、円周に沿って９０度の間隔で上下左右に計４つの側視観察窓を設けるといったように、３つ以上の複数の側視観察窓を配置する構成としてもよい。また、側視観察窓の配置間隔は均等である必要は無く、例えば挿入部の上側と右側に２つの側視観察窓を配置するといったように、不均等な間隔で複数の側視観察窓を配置してもよい。

　ここで、例えば図１１示すように、内視鏡の先端部に配置される側視観察窓について、先端部の円周に沿って９０度の間隔で上下左右に計４つの側視観察窓を設けた場合、図１２または図１３に示すように、全ての側視画像を隣接状態に配置し、かつ複数の側視画像の塊に隣接して直視画像を配置すればよい。

　具体的には、左側側視画像（図中側視１）と右側側視画像（図中側視２）とを横並びで隣接状態に配置する。また、上側側視画像（図中側視３）と下側側視画像（図中側視４）とを横並びで隣接状態に配置する。さらに、左側側視画像（図中側視１）と右側側視画像（図中側視２）との並びと、上側側視画像（図中側視３）と下側側視画像（図中側視４）との並びを、平行に隣接状態に配置する。そして、４つの側視画像の塊の上下左右のいずれかの方向に隣接して直視画像を配置する。このような態様とすることによって、全ての側視画像間で観察者の視線の移動距離を小さくすることができる。

　また、内視鏡について、内視鏡の先端部の円周における１点を基準方向（例えば、上側）と規定し、さらに先端部の３次元的傾きを検出する姿勢検出センサー（例えば、ジャイロセンサー）を設けて、鉛直上側方向に対する内視鏡先端部の基準方向の傾きを検出するようにしてもよい。

　このように内視鏡に姿勢検出センサーを組み合わせた場合、直視画像における鉛直上側方向が識別できるため、表示画面内において、直視画像における鉛直上側方向を示す矢印等のインジケーターを併せて表示するようにしてもよい。また、直視画像における鉛直上側方向が表示画面の上側となるように、直視画像のみを回転させて表示してもよいし、直視画像および側視画像のレイアウトを維持したまま直視画像および側視画像を一体的に回転させて表示してもよい。このような態様とすることによって、観察者に対して内視鏡画像における鉛直上側方向を示すことができるため、観察精度を向上させることができる。

　上記以外にも、本発明の要旨を逸脱しない範囲において、各種の改良や変形を行なってもよいのは勿論である。

　２０１８年６月２９日に出願された日本出願特願２０１８－１２５３４０の開示はその全体が参照により本明細書に取り込まれる。本明細書に記載された全ての文献、特許出願、及び技術規格は、個々の文献、特許出願、及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

Claims

　被検体の内部に挿入される挿入部と、
　前記挿入部の前方を含む直視領域の像を取得する直視像取得部と、
　前記挿入部の径方向を含み、互いに異なる側視領域の像を取得する複数の側視像取得部と、
　前記直視像取得部により取得された像に基づく直視画像と、前記複数の側視像取得部により取得された複数の像に基づく複数の側視画像とを生成する画像生成部と、
　同一画面内に前記直視画像と前記複数の側視画像とを配置し、かつ前記複数の側視画像同士を隣接状態に配置する処理を行う画像処理部とを備える内視鏡画像表示システム。
　前記画像処理部は、前記複数の側視画像について、前記複数の側視画像の各々の撮影方向の位置関係と対応させて配置する処理を行う
　請求項１記載の内視鏡画像表示システム。
　前記画像処理部は、前記側視画像よりも前記直視画像を大きく表示する処理を行う
請求項１または２記載の内視鏡画像表示システム。
　前記画像処理部は、前記複数の側視画像の並び方向と交差する方向に前記直視画像を配置する処理を行う
　請求項１から３のいずれか１項記載の内視鏡画像表示システム。
　前記画像処理部は、前記直視画像および前記複数の側視画像を合わせた配置領域の形状を矩形にする処理を行う
請求項１から４のいずれか１項記載の内視鏡画像表示システム。
　前記画像処理部は、前記直視画像と前記側視画像とで異なる電子ズーム倍率で表示する処理を行う
請求項１から５のいずれか１項記載の内視鏡画像表示システム。
　前記画像処理部は、前記直視画像と前記側視画像とで異なる画像処理を行う
請求項１から６のいずれか１項記載の内視鏡画像表示システム。
　請求項１から７のいずれか１項記載の前記画像処理部を少なくとも備える内視鏡画像表示装置。