【０００１】
【発明の属する技術分野】
本発明は、内視鏡によって得られる観察画像において、付加情報を表示するための内視鏡システムに関するものである。
【０００２】
【従来の技術】
内視鏡の観察画像には、患者名等を認識するため、画像の隅にキャラクタが表示されることが一般的である。また、内視鏡により患部を観察しつつ、注射針や鉗子の処置具等を使用して処置が行われるとき、これらの処置具は観察画像において見えやすくしておく必要がある。
【０００３】
しかしながら、処置具等が使用されて画像に映し出される位置は、観察窓に対する処置具口の位置によって決まり、内視鏡の種類に応じて異なる。一方、キャラクタ表示は同一の画像処理装置が用いられたときは、同一の位置に表示されている。したがって、内視鏡の種類が変更され、かつ同一の画像処理装置が用いられた場合、処置具とキャラクタが重なってしまい、処置が行いにくくなることがある。
【０００４】
【発明が解決しようとする課題】
本発明は、内視鏡を用いた処置を行いやすくするため、観察画像においてキャラクタと処置具が重なることを防止することを目的とする。
【０００５】
【課題を解決するための手段】
本発明に係る付加情報表示装置は撮像装置によって得られた対象物を観察画像に表示する観察画像表示手段と、付加情報を観察画像の特定表示位置に表示する付加情報表示手段と、撮像装置の特徴に関する撮像装置情報を含む特定情報に応じて特定表示位置を決定する表示位置決定手段とを備える。
【０００６】
付加情報はキャラクタであってもよく、撮像装置は内視鏡であってもよい。さらに、撮像装置情報は対象物を観察するための内視鏡の観察窓に対する処置具口の位置に関する情報を含むことが好ましい。これにより、観察窓に対する処置具口の位置に応じて付加情報が観察画像に表示することができる。
【０００７】
観察画像を縦横に２分割して４領域に分け、４領域に付加情報を表示する位置を決定する優先順位がつけられていてもよい。さらに、優先順位に関する表示位置優先情報は特定情報に含まれていてもよい。また、撮像装置が内視鏡であって、優先順位は内視鏡の特徴に関する情報に従って決定されてもよい。これにより、内視鏡の種類に応じて、処置具口から出現する処置具を回避して付加情報を表示することができる。
【０００８】
本発明に係る内視鏡システムは対象物を観察するための内視鏡と、対象物を観察画像に表示する観察画像表示手段と、付加情報を観察画像の特定表示位置に表示する付加情報表示手段と、内視鏡の特徴に関する撮像装置情報を含む特定情報に応じて特定表示位置を決定する表示位置決定手段とを設けられた観察画像を処理するための画像処理装置とを備える。
【０００９】
撮像装置情報は内視鏡内に記憶されていてもよいし、撮像装置情報は画像処理装置内に記憶されていてもよい。また、好ましくは観察画像を縦横に２分割して４領域に分け、４領域に付加情報を表示する位置を決定する優先順位がつけられる。更に好ましくは、その優先順位に関する表示位置優先情報は特定情報に含まれており、表示位置優先情報は内視鏡内に記憶されていてもよい。好ましくは、撮像装置情報が対象物を観察するための内視鏡の観察窓に対する処置具口の位置に関する情報を含む。
【００１０】
本発明に係る付加情報表示方法は撮像装置によって得られた対象物を観察画像に表示する観察画像表示ステップと、付加情報を観察画像の特定表示位置に表示する付加情報表示ステップと、撮像装置の特徴に関する撮像装置情報を含む特定情報に応じて特定表示位置を決定する表示位置決定ステップとを備える。
【００１１】
【発明の実施の形態】
以下、本発明の実施形態について添付図面を参照して説明する。
図１は本発明の一実施形態である付加情報表示装置を備えた内視鏡システムを示し、内視鏡システムは、撮像装置である内視鏡１０および画像処理装置から成る。内視鏡１０には、挿入部１１が設けられる。内視鏡１０によって得られた対象物は画像処理装置で処理され、観察画像としてモニターに表示される。
【００１２】
内視鏡１０によって得られた対象物は、映像信号として画像処理装置内にある映像信号処理回路２１に送られ、映像信号処理回路２１でＡ／Ｄ変換されるとともに、レッド（Ｒ）、グリーン（Ｇ）、ブルー（Ｂ）の３要素に分離され、それぞれＲメモリ２３ａ、Ｇメモリ２３ｂ、Ｂメモリ２３ｃに格納される。メモリ２３ａ、２３ｂ、２３ｃに格納されたそれぞれの映像信号は、ビデオ画像処理回路２４に入力され、Ｄ／Ａ変換されるとともにビデオ信号として出力される。タイミング回路２２では、ＣＰＵ２６から送られたタイミング制御情報に基づき、画像処理装置内の映像信号処理回路２１、ビデオ画像処理回路２４、キャラクタ生成回路２７の動作タイミングの制御とメモリ２３ａ、２３ｂ、２３ｃに対する書込みおよび読み出し制御が行なわれる。
【００１３】
内視鏡１０内にあるスコープデータ記憶部１２には、内視鏡の特徴に関する撮像装置情報が記憶されている。本実施形態において撮像装置情報は、内視鏡の対象物を観察するための観察窓に対する処置具口の位置に関する情報である。撮像装置情報は、スコープデータ検知部２５によって読み取られ、スコープデータ検知部２５内に記憶されている表示位置優先情報とともに、特定情報としてＣＰＵ２６に送られる。
【００１４】
キーボード２８では、キャラクタが入力され、入力されたキャラクタはＣＰＵ２６に送られる。ＣＰＵ２６では、入力されたキャラクタおよび予めＣＰＵ２６に記憶されているキャラクタが、特定情報に応じて、観察画像の特定表示位置に表示されるように制御情報が生成される。生成された制御情報は、キャラクタ生成回路２７に送られると共に、タイミング回路２２にもタイミング制御情報として送られる。ここで、キーボード２８によって入力されるキャラクタとは患者名等のように、内視鏡を使用するごとに変わる情報であり、ＣＰＵ２６に記憶されているキャラクタとは病院名等のように使用するごとに変化しない情報である。なお、本実施形態においては、観察画像の特定表示位置に表示される付加情報はキャラクタのみであるが、目的に応じて他の情報であってもよい。
【００１５】
キャラクタ生成回路２７では、制御情報に基づき、キャラクタが生成され、生成されたキャラクタは加算器２９に送られる。ビデオ画像処理回路２４によってＤ／Ａ変換された映像信号は、加算器２９に送られ、キャラクタが加算され、画像としてモニターに出力される。
【００１６】
図２は処置具口が１つある内視鏡における挿入部１１の先端面１１ａの一例を示す。この内視鏡は、例えば胃内部を観察するための内視鏡である。先端面１１ａの中心には、観察窓３５が設けられている。観察窓３５の上方にはノズル３６が位置し、観察窓３５の左右上方には対象物に照明光を照射するための照明窓３７が位置する。観察窓３５の左下方には鉗子やその他の処置具を腹腔内に挿入するための処置具口３８が位置する。
【００１７】
照明窓３７から出射される照明光は対象物を照射し、対象物からの反射光は観察窓３５を通り、内視鏡１０内部にある撮像素子３９に導かれる。これにより、反射光は撮像素子３９によって観察体の映像に応じた映像信号に変換され、画像処理装置内（図１参照）で処理され、観察画像として出力モニターに映し出される。
【００１８】
出力モニターに映し出される観察画像４０を図３に示す。本実施形態の内視鏡においては、図２に示す撮像素子のそれぞれＵＰ、ＤＯＷＮ、Ａ、Ｂの部分で得られた対象物は観察画像のＵＰ、ＤＯＷＮ、Ａ、Ｂの部分に映し出される。したがって、観察窓３９の左下に位置する処置具口３８より腹腔内に挿入された処置具４１は、観察画像４０の右下から出現する。キャラクタ４２は、特定情報によってＣＰＵ２６（図１参照）で生成されたキャラクタの制御情報に基づき観察画像４０の左上隅に映し出される。ＣＰＵ２６におけるキャラクタ表示に関する制御情報の生成方法は後述する。
【００１９】
図４は処置具口が２つある内視鏡における先端面１１ａの一例を示す。この内視鏡は、例えば小腸や大腸内部を観察するための内視鏡である。本内視鏡において、図２に示した内視鏡の構成と相違するのは、観察窓３５’の左下方だけではなく右下方にも処置具口３８’が存在する点である。他の構成は図２に示した内視鏡の構成と同じである。
【００２０】
この場合における出力モニターに映し出される観察画像４０’を図５に示す。本実施形態においては図２に示した内視鏡の場合と異なるのは、処置具口３８’より腹腔内に挿入された処置具４１’が、観察画像４０’の左下のみならず、右下からも出現する点である。付加情報であるキャラクタ４２’は、内視鏡の特徴に関する撮像装置情報によってＣＰＵ２６（図１参照）で生成された制御情報に基づき観察画像４０’の左上に映し出される。
【００２１】
図６は、ＣＰＵ２６で実行されるキャラクタ表示に関する制御情報生成プログラムのフローチャートである。ステップ１００では、画像処理装置が内視鏡１０に接続されていることが確認される。ステップ１１０、１２０においては、スコープデータ記憶部１２（図１参照）に記憶されている内視鏡１０に関する特定情報が読み取られる。すなわち、ステップ１１０では、撮像装置情報が読み取られ、ステップ１２０では、表示位置優先情報が読み取られる。
【００２２】
ステップ１３０ではステップ１１０で読み取られた撮像装置情報に基づき、処置具口数が把握される。処置具口が１つ以上と把握されると、ステップ１４０に進み、処置具が０と把握されるとステップ２２０に進む。以下ステップ１３０で処置具口が１つと把握された場合に限定して説明する。
【００２３】
ステップ１４０では、撮像装置情報に基づき、観察窓に対する処置具口の位置が確認される。観察窓に対する処置具口の位置に従って、観察画像を縦横に２等分割して４領域に分け、処置具が処置具口より腹腔内に挿入されたときどの領域から出現するかが判断される。
【００２４】
ステップ１５０では表示位置優先情報の有無が確認される。表示位置優先情報がなければ、ステップ１６０に進み、ステップ１６０ではキャラクタが表示する位置の優先順位が決定される。具体的には、処置具が出現する領域の対角の領域が優先順位１と定められ、その上または下の領域が優先順位２、処置具が出現する方向の領域が優先順位４、残りの１領域が優先順位３と定められる。例えば、図２に示す内視鏡の場合、処置具が右下から出現するので、優先順位は図７に示すように、左上の領域が優先順位１、左下が優先順位２、右上が優先順位３、右下が優先順位４となる。
【００２５】
優先順位が決定されると、ステップ１６１においてキャラクタを表示する特定表示位置が優先順位、キャラクタの情報量に従って決定され、ステップ１６２において制御情報が生成される。すなわち、キャラクタの情報量が少ないと、キャラクタは優先順位１の領域のみで表示され、情報量が一定量より多くなると、キャラクタは優先順位１の領域および優先順位２の領域に表示され、さらに多くなると、優先順位３の領域や優先順位４の領域にも表示されるようになる。それぞれの領域における特定表示位置は、観察画像ができるだけ観察され易いようにするため、画面隅と設定されている。したがって、内視鏡が図２に示す構成で、表示位置優先情報がない場合、情報量が少なく、４領域のうち右下領域から処置具が出現するので、優先順位１である左上領域にキャラクタが表示され、図３に示すような観察画像が得られる。
【００２６】
ステップ１５０で表示位置優先情報が存在すると判断されれば、ステップ１６９に進み、表示位置優先情報が読出される。本実施形態において表示位置優先情報は、４領域のうち少なくとも１領域に関する優先順位を決定させるための情報である。すなわち、ステップ１６９では、表示位置優先情報により優先順位が定められている領域についての優先順位が決定される。
【００２７】
ステップ１７０では、表示位置優先情報により優先順位が定められていない領域についての優先順位が定められる。優先順位の決定方法は、ステップ１６０と同一である。４領域について優先順位が決定されれば、ステップ１６１，１６２と同一の手法により、ステップ１７１においてキャラクタ表示位置が決定させられ、ステップ１７２において制御情報が生成される。
【００２８】
ステップ１６９ないし１７２のフローについて以下具体例にて説明する。ここでは、表示位置優先情報に１領域に関する優先順位が定められている場合を説明する。図８は、表示位置優先情報により、優先順位１となる領域が４領域のうちの左下領域と決定され、さらに、内視鏡の撮像装置情報により処置具の出現方向が右下と認定された場合におけるキャラクタ位置の表示位置の優先順位である。この場合、予め記憶されている表示位置優先情報により、まず左下の領域が優先順位１と決定され、つづいて、処置具の出現方向の対角領域である左上領域が優先順位２とされ、処置具の出現領域が優先順位４とされ、残りの領域が優先順位３とされ、その優先順位に基づき、制御情報が生成される。これは、画像処理装置内に予め、画面上の特定表示位置にキャラクタが表示されることが設定されている場合であり、例えば、病院名がすべての観察画像の左隅にキャラクタとして表示されることが予め設定されている画像処理装置を用いた場合である。
【００２９】
ステップ１３０で処置具が２つと把握された場合に限定して説明する。ステップ１６０においては観察窓に対する処置具の位置により優先順位が決定される。処置具が２つある場合は、通常２方向の領域から処置具が出現する。したがって、その２領域を表示位置優先順位３または４と決定され、残りの領域が表示位置優先順位１または表示位置優先順位２と決定される。ステップ１６１では、処置具が１つと把握された場合と同様にキャラクタの表示位置が決定され、ステップ１６２で制御情報が生成される。表示位置優先情報がある場合でもステップ１６９ないし１７２において同様に制御情報が生成される。ただし、処置具口が２つあっても処置具の出現する領域が１領域しかない場合は、処置具口が１つしかない場合と同様の手法により表示位置が決定される。
【００３０】
例えば、内視鏡が図４に示すような構成の場合、処置具が画面右下領域および左下領域から出現するので、画面の右上領域および左上領域が優先順位１，２と、右下・左下領域が優先順位３，４と決定される。なお、左右どちらが先の優先順位になるかは予め設定されていてもよいし、任意に設定されるようにしてもよい。本実施形態においては、予め左が先の優先順位になると設定されており、図９に示すように左上領域が優先順位１、右上領域が優先順位２、左下領域が優先順位３、右下領域が優先順位４と定められ、図５に示す観察画像が得られる。なお、処置具口が３つ以上ある場合も同様に制御情報が生成される。
【００３１】
ステップ１３０で処置具口がないと判断された場合、ステップ２２０においては、初期にＣＰＵ２６に記憶されていた優先順位に従って表示位置が決定され、制御情報が生成される。
【００３２】
なお、表示位置優先情報は予め、内視鏡の種類に応じて内視鏡１０内にあるスコープデータ記憶部１２（図１参照）に記憶されている構成にしても良い。すなわち、キャラクタが表示される位置を決定する優先順位が、観察窓に対する処置具口の位置にあわせて予め記憶されている構成である。この構成によれば、キャラクタが表示される位置と、処置具が出現する位置が重ねられることを的確に回避できる。
【００３３】
また、本実施形態においては、撮像装置情報は、内視鏡１０内にあるスコープデータ記憶部１２に記憶されているが、画像処理装置内に記憶されるようにしてもよい。例えば、スコープデータ記憶部１２には内視鏡の名前のみが記憶されており、スコープデータ検知部２５でその名前が読み取られ、内視鏡の種類が認識される。スコープデータ検知部２５には内視鏡の種類に応じた撮像装置情報が予め設定されており、把握された内視鏡の種類に応じて、撮像装置情報が決定される。本変形例では、内視鏡側の記憶領域が狭く、データが保管できない場合や、撮像装置情報が予め記憶されていない内視鏡において有効である。
【００３４】
【発明の効果】
以上のように本発明における内視鏡システムでは、観察窓に対する処置具の位置が認識されることにより、観察画像において処置具の出現位置にキャラクタが配置されることが避けられ、内視鏡を用いた処置がより行いやすくなる。
【図面の簡単な説明】
【図１】本発明の実施形態である内視鏡システムを示すブロック図である。
【図２】処置具口が１つある内視鏡の挿入部における先端面の具体例を示す正面図である。
【図３】処置具口が１つある内視鏡で処置具が挿入されたときの観察画像を示す模式図である。
【図４】処置具口が２つある内視鏡の挿入部における先端面の具体例を示す正面図である。
【図５】処置具口が２つある内視鏡で処置具が挿入されたときの観察画像を示す模式図である。
【図６】キャラクタ表示に関する制御情報生成プログラムのフローチャートである。
【図７】観察画像におけるキャラクタ表示位置の優先順位の一例である。
【図８】観察画像におけるキャラクタ表示位置の優先順位の一例である。
【図９】観察画像におけるキャラクタ表示位置の優先順位の一例である。
【符号の説明】
１０ 内視鏡
１１ａ 先端面
１２ スコープデータ記憶部
２５ スコープデータ検知部
２７ キャラクタ生成回路
３５、３５’ 観察窓
３８、３８’ 処置具口
４０、４０’ 観察画像
４１、４１’ 処置具
４２、４２’ キャラクタ[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an endoscope system for displaying additional information in an observation image obtained by an endoscope.
[0002]
[Prior art]
In an observation image of an endoscope, a character is generally displayed at a corner of the image in order to recognize a patient name or the like. In addition, when a treatment is performed using a treatment tool such as an injection needle or forceps while observing an affected part with an endoscope, it is necessary to make these treatment tools easily visible in an observation image.
[0003]
However, the position where the treatment tool or the like is used and projected on the image is determined by the position of the treatment tool opening with respect to the observation window, and differs depending on the type of endoscope. On the other hand, the character display is displayed at the same position when the same image processing device is used. Therefore, when the type of the endoscope is changed and the same image processing apparatus is used, the treatment tool and the character may overlap, and it may be difficult to perform the treatment.
[0004]
[Problems to be solved by the invention]
An object of the present invention is to prevent a treatment tool from overlapping a character in an observation image in order to facilitate treatment using an endoscope.
[0005]
[Means for Solving the Problems]
An additional information display device according to the present invention includes: an observation image display unit that displays an object obtained by an imaging device on an observation image; an additional information display unit that displays additional information at a specific display position of the observation image; Display position determining means for determining a specific display position according to specific information including imaging device information relating to the feature.
[0006]
The additional information may be a character, and the imaging device may be an endoscope. Further, it is preferable that the imaging device information includes information on the position of the treatment tool opening with respect to the observation window of the endoscope for observing the target object. Thereby, the additional information can be displayed on the observation image according to the position of the treatment tool opening with respect to the observation window.
[0007]
The observation image may be divided vertically and horizontally into four areas, and the four areas may be given a priority for determining the position where the additional information is displayed. Further, the display position priority information regarding the priority may be included in the specific information. Further, the imaging device may be an endoscope, and the priority may be determined according to information on characteristics of the endoscope. Accordingly, it is possible to display the additional information while avoiding the treatment tool that appears from the treatment tool opening according to the type of the endoscope.
[0008]
An endoscope system according to the present invention includes an endoscope for observing an object, an observation image display unit for displaying the object on an observation image, and an additional information display for displaying additional information at a specific display position of the observation image. And an image processing apparatus for processing an observation image, the apparatus including a display position determining unit that determines a specific display position according to specific information including imaging device information relating to characteristics of an endoscope.
[0009]
The imaging device information may be stored in the endoscope, or the imaging device information may be stored in the image processing device. Further, preferably, the observation image is divided vertically and horizontally into four regions, and the four images are prioritized to determine the position where the additional information is displayed. More preferably, the display position priority information related to the priority is included in the specific information, and the display position priority information may be stored in the endoscope. Preferably, the imaging device information includes information on the position of the treatment tool opening with respect to the observation window of the endoscope for observing the target.
[0010]
An additional information display method according to the present invention includes an observation image display step of displaying a target obtained by an imaging device on an observation image, an additional information display step of displaying additional information at a specific display position of the observation image, A display position determining step of determining a specific display position according to specific information including imaging device information relating to the feature.
[0011]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.
FIG. 1 shows an endoscope system provided with an additional information display device according to an embodiment of the present invention. The endoscope system includes an endoscope 10 as an imaging device and an image processing device. The endoscope 10 is provided with an insertion portion 11. The object obtained by the endoscope 10 is processed by the image processing device and displayed on a monitor as an observation image.
[0012]
The object obtained by the endoscope 10 is sent as a video signal to a video signal processing circuit 21 in the image processing device, and is subjected to A / D conversion by the video signal processing circuit 21 and is also red (R) and green. (G) and blue (B) are separated and stored in the R memory 23a, the G memory 23b, and the B memory 23c, respectively. Each video signal stored in the memories 23a, 23b and 23c is input to the video image processing circuit 24, D / A converted, and output as a video signal. The timing circuit 22 controls the operation timings of the video signal processing circuit 21, the video image processing circuit 24, and the character generation circuit 27 in the image processing apparatus and controls the memories 23a, 23b, and 23c based on the timing control information sent from the CPU 26. Write and read control are performed.
[0013]
The scope data storage unit 12 in the endoscope 10 stores imaging device information relating to characteristics of the endoscope. In the present embodiment, the imaging device information is information relating to the position of the treatment tool opening with respect to an observation window for observing an object of the endoscope. The imaging device information is read by the scope data detecting unit 25 and sent to the CPU 26 as specific information together with the display position priority information stored in the scope data detecting unit 25.
[0014]
On the keyboard 28, a character is input, and the input character is sent to the CPU 26. In the CPU 26, control information is generated such that the input character and the character stored in the CPU 26 in advance are displayed at the specific display position of the observation image according to the specific information. The generated control information is sent to the character generation circuit 27 and also sent to the timing circuit 22 as timing control information. Here, the character input by the keyboard 28 is information that changes every time an endoscope is used, such as a patient name, and the character stored in the CPU 26 is information that is used each time, such as a hospital name. The information does not change. In the present embodiment, the additional information displayed at the specific display position of the observation image is only the character, but may be other information depending on the purpose.
[0015]
In the character generation circuit 27, a character is generated based on the control information, and the generated character is sent to the adder 29. The video signal that has been D / A converted by the video image processing circuit 24 is sent to the adder 29, where the character is added and output to the monitor as an image.
[0016]
FIG. 2 shows an example of the distal end surface 11a of the insertion section 11 in an endoscope having one treatment instrument port. This endoscope is, for example, an endoscope for observing the inside of the stomach. An observation window 35 is provided at the center of the distal end surface 11a. A nozzle 36 is located above the observation window 35, and an illumination window 37 for irradiating an object with illumination light is located above and below the observation window 35. A treatment instrument port 38 for inserting forceps and other treatment instruments into the abdominal cavity is located below and to the left of the observation window 35.
[0017]
The illumination light emitted from the illumination window 37 illuminates the target, and the reflected light from the target passes through the observation window 35 and is guided to the image sensor 39 inside the endoscope 10. As a result, the reflected light is converted by the image sensor 39 into a video signal corresponding to the video of the observation object, processed in the image processing device (see FIG. 1), and displayed on the output monitor as an observation image.
[0018]
FIG. 3 shows an observation image 40 displayed on the output monitor. In the endoscope of the present embodiment, the objects obtained at the UP, DOWN, A, and B portions of the imaging device shown in FIG. 2 are displayed on the UP, DOWN, A, and B portions of the observation image. Therefore, the treatment tool 41 inserted into the abdominal cavity from the treatment tool opening 38 located at the lower left of the observation window 39 appears from the lower right of the observation image 40. The character 42 is displayed in the upper left corner of the observation image 40 based on the control information of the character generated by the CPU 26 (see FIG. 1) based on the specific information. A method of generating control information on character display in the CPU 26 will be described later.
[0019]
FIG. 4 shows an example of a distal end surface 11a of an endoscope having two treatment instrument ports. This endoscope is an endoscope for observing the inside of the small intestine or large intestine, for example. This endoscope differs from the configuration of the endoscope shown in FIG. 2 in that a treatment tool port 38 'exists not only below and to the lower right of the observation window 35'. Other configurations are the same as those of the endoscope shown in FIG.
[0020]
FIG. 5 shows an observation image 40 'displayed on the output monitor in this case. In the present embodiment, the difference from the endoscope shown in FIG. 2 is that the treatment tool 41 ′ inserted into the abdominal cavity from the treatment tool opening 38 ′ is not only the lower left of the observation image 40 ′ but also the lower right. It also appears from The character 42 'as the additional information is displayed on the upper left of the observation image 40' based on the control information generated by the CPU 26 (see FIG. 1) based on the imaging device information relating to the characteristics of the endoscope.
[0021]
FIG. 6 is a flowchart of a control information generation program related to character display executed by the CPU 26. In step 100, it is confirmed that the image processing apparatus is connected to the endoscope 10. In steps 110 and 120, specific information on the endoscope 10 stored in the scope data storage unit 12 (see FIG. 1) is read. That is, in step 110, the imaging device information is read, and in step 120, the display position priority information is read.
[0022]
In step 130, the number of treatment tools is determined based on the imaging device information read in step 110. When it is determined that the number of the treatment tools is one or more, the process proceeds to step 140, and when the number of the treatment tools is determined to be 0, the process proceeds to step 220. Hereinafter, the description will be limited to the case where it is determined in step 130 that there is only one treatment instrument port.
[0023]
In step 140, the position of the treatment tool opening with respect to the observation window is confirmed based on the imaging device information. According to the position of the treatment tool opening with respect to the observation window, the observation image is divided into two equal parts vertically and horizontally to divide into four regions, and it is determined from which region the treatment tool appears when inserted into the abdominal cavity from the treatment tool opening.
[0024]
In step 150, the presence or absence of the display position priority information is confirmed. If there is no display position priority information, the process proceeds to step 160, where the priority of the position displayed by the character is determined. Specifically, the diagonal area of the area where the treatment tool appears is determined as priority 1, the area above or below it has priority 2, the area in the direction in which the treatment tool appears is priority 4, and the remaining areas are priority level 4. One area is determined as the priority 3. For example, in the case of the endoscope shown in FIG. 2, since the treatment tool appears from the lower right, as shown in FIG. 7, the priority is 1 in the upper left area, 2 in the lower left, and 2 in the upper right. 3. The lower right is priority 4.
[0025]
When the priority is determined, the specific display position for displaying the character is determined in step 161 according to the priority and the information amount of the character, and control information is generated in step 162. In other words, if the information amount of the character is small, the character is displayed only in the priority order 1 region, and if the information amount exceeds a certain amount, the character is displayed in the priority order 1 region and the priority order 2 region. Then, it is also displayed in the area of the priority 3 and the area of the priority 4. The specific display position in each area is set as a corner of the screen in order to make the observation image as easy to observe as possible. Therefore, when the endoscope is configured as shown in FIG. 2 and there is no display position priority information, the amount of information is small, and the treatment tool appears from the lower right area of the four areas. Is displayed, and an observation image as shown in FIG. 3 is obtained.
[0026]
If it is determined in step 150 that the display position priority information exists, the process proceeds to step 169, where the display position priority information is read. In the present embodiment, the display position priority information is information for determining a priority order for at least one of the four areas. That is, in step 169, the priority order is determined for the area whose priority order is determined by the display position priority information.
[0027]
In step 170, a priority order is set for an area whose priority order is not determined by the display position priority information. The method of determining the priority is the same as that in step 160. If the priorities are determined for the four areas, the character display position is determined in step 171 by the same method as in steps 161 and 162, and control information is generated in step 172.
[0028]
The flow of steps 169 to 172 will be described below using a specific example. Here, a case will be described in which the display position priority information sets a priority order for one area. FIG. 8 shows that the area having priority 1 is determined as the lower left area among the four areas based on the display position priority information, and the appearance direction of the treatment tool is identified as lower right based on the imaging device information of the endoscope. It is the priority of the display position of the character position in the case. In this case, based on the display position priority information stored in advance, the lower left area is determined as priority 1 first, and then the upper left area, which is a diagonal area in the appearance direction of the treatment tool, is set as priority 2 and the treatment is performed. The appearance area of the ingredients is given priority 4, the remaining area is given priority 3, and control information is generated based on the priority. This is a case where a character is set to be displayed in a specific display position on the screen in advance in the image processing apparatus. For example, a hospital name is displayed as a character in the left corner of all observation images. Is a case where a preset image processing apparatus is used.
[0029]
The description will be limited to the case where two treatment tools are determined in step 130. In step 160, the priority is determined based on the position of the treatment tool with respect to the observation window. When there are two treatment tools, the treatment tools usually appear from regions in two directions. Therefore, the two areas are determined as the display position priority 3 or 4, and the remaining areas are determined as the display position priority 1 or the display position priority 2. In step 161, the display position of the character is determined in the same manner as in the case where the number of treatment tools is determined to be one, and control information is generated in step 162. Even when there is display position priority information, control information is similarly generated in steps 169 to 172. However, when there is only one region where the treatment tool appears even if there are two treatment device openings, the display position is determined in the same manner as in the case where there is only one treatment device opening.
[0030]
For example, when the endoscope is configured as shown in FIG. 4, the treatment tool appears from the lower right and lower left areas of the screen. The areas are determined as the priorities 3 and 4. It should be noted that which of the left and right becomes the priority may be set in advance or may be set arbitrarily. In the present embodiment, it is set in advance that the left has the first priority, and as shown in FIG. 9, the upper left area has the priority 1, the upper right area has the priority 2, the lower left area has the priority 3, and the lower right area. Are determined as the priority order 4, and the observation image shown in FIG. 5 is obtained. Note that control information is similarly generated when there are three or more treatment tool ports.
[0031]
If it is determined in step 130 that there is no treatment tool port, in step 220, the display position is determined according to the priority order initially stored in the CPU 26, and control information is generated.
[0032]
The display position priority information may be stored in advance in the scope data storage unit 12 (see FIG. 1) in the endoscope 10 according to the type of the endoscope. That is, the priority order for determining the position at which the character is displayed is stored in advance in accordance with the position of the treatment tool opening with respect to the observation window. According to this configuration, it is possible to accurately avoid a position where the character is displayed and a position where the treatment tool appears.
[0033]
Further, in the present embodiment, the imaging device information is stored in the scope data storage unit 12 in the endoscope 10, but may be stored in the image processing device. For example, only the name of the endoscope is stored in the scope data storage unit 12, and the name is read by the scope data detection unit 25, and the type of the endoscope is recognized. Image capturing device information corresponding to the type of endoscope is set in the scope data detecting unit 25 in advance, and the image capturing device information is determined according to the type of endoscope that is recognized. This modification is effective in a case where the storage area on the endoscope side is small and data cannot be stored, or in an endoscope in which imaging device information is not stored in advance.
[0034]
【The invention's effect】
As described above, in the endoscope system according to the present invention, by recognizing the position of the treatment tool with respect to the observation window, it is possible to prevent the character from being placed at the appearance position of the treatment tool in the observation image. The procedure used is easier to perform.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an endoscope system according to an embodiment of the present invention.
FIG. 2 is a front view showing a specific example of a distal end surface in an insertion portion of an endoscope having one treatment instrument port.
FIG. 3 is a schematic diagram showing an observation image when a treatment tool is inserted with an endoscope having one treatment tool opening;
FIG. 4 is a front view showing a specific example of a distal end surface in an insertion portion of an endoscope having two treatment instrument ports.
FIG. 5 is a schematic diagram showing an observation image when a treatment tool is inserted with an endoscope having two treatment tool ports.
FIG. 6 is a flowchart of a control information generation program relating to character display.
FIG. 7 is an example of a priority order of a character display position in an observation image.
FIG. 8 is an example of a priority order of a character display position in an observation image.
FIG. 9 is an example of a priority order of character display positions in an observation image.
[Explanation of symbols]
10 Endoscope 11a Tip surface 12 Scope data storage unit 25 Scope data detection unit 27 Character generation circuit 35, 35 'Observation window 38, 38' Treatment tool port 40, 40 'Observation image 41, 41' Treatment tool 42, 42 ' charactor
