JP2005115289A

JP2005115289A - Image display processing apparatus

Info

Publication number: JP2005115289A
Application number: JP2003352906A
Authority: JP
Inventors: Akinobu Uchikubo; 明伸内久保
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2003-10-10
Filing date: 2003-10-10
Publication date: 2005-04-28

Abstract

<P>PROBLEM TO BE SOLVED: To realize an image display processing apparatus with which the display operation of supplementary information of icons can be performed in a simple manner and the operator's troublesomeness can be reduced. <P>SOLUTION: An image display processing section 57 of a system controller 30 is constituted by having an overlay control section 63 which performs overlay control, a control section 64 which performs control of the overlay control section 63 and transmission, reception, etc., of data, and a display information generation section 65 which generates screen information. The overlay control section 63 serves commonly as a display processing means which displays a plurality of the icons indicating information processing functions to an operating room monitor 31 and a supplementary information display processing means which simultaneously displays the supplementary information relating to the information processing functions corresponding to all the icons to the operating room monitor 31 by the instruction from the control section 64. Also, the control section 64 is a supplementary information instruction means which instructs the display of the supplementary information relating to the icons displayed by the overlay control section 63. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、ヘルプ表示処理が可能な画像表示処理装置に関する。 The present invention relates to an image display processing device capable of help display processing.

近年、画像表示処理装置は、マウス等のポインティングデバイスを備え、その多くがウインドウシステムを採用している。
このような従来の画像表示処理装置は、例えば、特開平３−１４４７１９号公報に記載されているようにモニタ等の表示手段の表示画面上において、情報処理機能を示す複数のアイコンを表示させたものが提案されている。そして、上記公報に記載の画像表示処理装置は、上記表示手段の表示画面上に表示される複数のアイコンをマウス等のポインティングデバイスによりクリックして指定した後、別の情報処理機能を示す所望のアイコンを指定すると、該当するアイコンの補足情報を表示するように構成したものが提案されている。
特開平３−１４４７１９号公報 In recent years, image display processing apparatuses include a pointing device such as a mouse, and many of them employ a window system.
Such a conventional image display processing apparatus displays a plurality of icons indicating information processing functions on a display screen of a display means such as a monitor as described in JP-A-3-144719, for example. Things have been proposed. Then, the image display processing device described in the above publication specifies a desired information processing function after clicking and specifying a plurality of icons displayed on the display screen of the display means with a pointing device such as a mouse. When an icon is designated, a configuration has been proposed in which supplementary information of the corresponding icon is displayed.
Japanese Patent Laid-Open No. 3-144719

一般に、医療用に用いられる画像表示処理装置は、表示手段の表示画面上において、複数のアイコンに対応する情報処理機能が看護士やオペレータなどには解り難い。
このため、看護士やオペレータなどは、表示手段の表示画面上において、上述したような操作をその都度行い、該当する補足情報をその都度表示させていた。
しかしながら、手術中において、看護士やオペレータなどは、ドクターの指示により、その他の作業を行わなければならず、上記補足情報の表示操作をその都度行うことが煩わしい。 In general, in an image display processing apparatus used for medical purposes, an information processing function corresponding to a plurality of icons is difficult for a nurse or an operator to understand on a display screen of a display unit.
For this reason, nurses, operators, and the like perform the operations described above on the display screen of the display means each time, and display corresponding supplemental information each time.
However, during the operation, nurses and operators have to perform other operations in accordance with the doctor's instructions, and it is troublesome to display the supplementary information each time.

本発明は、上記事情に鑑みてなされたもので、アイコンの補足情報の表示操作が簡単に行え、操作者の煩わしさを軽減可能な画像表示処理装置を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an image display processing device that can easily perform an operation for displaying icon supplementary information and can reduce the troublesomeness of the operator.

本発明による第１の画像表示処理装置は、所定の情報を表示する表示手段と、前記表示手段に対して、情報処理機能を示す複数のアイコンを表示する表示処理手段と、前記表示処理手段により表示されたアイコンに関する補足情報の表示を指示する補足情報表示指示手段と、前記補足情報表示指示手段からの指示により、全てのアイコンに対応する前記情報処理機能に関する補足情報を一度に前記表示手段に対して表示する補足情報表示処理手段と、を具備したことを特徴としている。
また、本発明による第２の画像表示処理装置は、前記第１の画像表示処理装置において、前記複数のアイコンと、これら複数のアイコンに対する補足情報とを含む擬似的な操作画面を生成する操作画面生成手段を更に備え、前記補足情報表示処理手段は、前記補足情報表示指示手段より指示があった際に、前記操作画面生成手段により生成された擬似的な操作画面を、前記表示処理手段により表示された表示画面上に重畳して表示することを特徴としている。
また、本発明による第３の画像表示処理装置は、前記第１の画像表示処理装置及び前記第２の画像表示処理装置において、前記補足情報表示処理手段は、前記補足情報を表示して所定の時間が経過した後に、前記補足情報の表示を解除することを特徴としている。 A first image display processing apparatus according to the present invention includes a display unit that displays predetermined information, a display processing unit that displays a plurality of icons indicating an information processing function on the display unit, and the display processing unit. Supplemental information display instruction means for instructing display of supplementary information regarding the displayed icons, and supplementary information regarding the information processing function corresponding to all icons at a time to the display means by an instruction from the supplementary information display instruction means And a supplemental information display processing means for displaying.
The second image display processing device according to the present invention is an operation screen for generating a pseudo operation screen including the plurality of icons and supplementary information for the plurality of icons in the first image display processing device. The supplementary information display processing means displays the pseudo operation screen generated by the operation screen generation means by the display processing means when instructed by the supplementary information display instruction means. It is characterized by being superimposed on the displayed display screen.
According to the third image display processing device of the present invention, in the first image display processing device and the second image display processing device, the supplementary information display processing means displays the supplementary information and performs predetermined processing. The display of the supplementary information is canceled after a lapse of time.

本発明の画像表示処理装置は、アイコンの補足情報の表示操作が簡単に行え、操作者の煩わしさを軽減できるという効果を有する。 The image display processing apparatus of the present invention has an effect that an operation for displaying supplemental information of an icon can be easily performed, and the troublesomeness of the operator can be reduced.

以下、図面を参照して本発明の実施例を説明する。 Embodiments of the present invention will be described below with reference to the drawings.

図１ないし図７は本発明の第１実施例に係わり、図１は本発明の第１実施例の画像表示処理装置を備えた手術システムを示す全体構図、図２は図１のシステムコントローラの内部構成を示す回路ブロック図、図３は図１の手術室モニタの表示画面に表示される集中モニタリング画面例、図４は図１の手術室モニタの表示画面に表示される画像録画再生画面例、図５は補足情報表示処理のフローチャート例、図６はヘルプ表示画面例、図７は図６の変形例であるヘルプ表示画面例である。
本実施例は、医療用の手術システムに用いられる画像表示処理装置に本発明を適用する。 1 to 7 relate to a first embodiment of the present invention, FIG. 1 is a general composition showing a surgical system including an image display processing apparatus of the first embodiment of the present invention, and FIG. 2 is a diagram of the system controller of FIG. FIG. 3 is an example of a centralized monitoring screen displayed on the display screen of the operating room monitor of FIG. 1, and FIG. 4 is an example of an image recording / reproducing screen displayed on the display screen of the operating room monitor of FIG. 5 is an example of a flowchart of supplementary information display processing, FIG. 6 is an example of a help display screen, and FIG. 7 is an example of a help display screen that is a modification of FIG.
In this embodiment, the present invention is applied to an image display processing apparatus used in a medical surgical system.

図１に示すように本発明の第１実施例の画像表示処理装置を備えた手術システム１は、手術室内に配置された内視鏡システム２を構成している。
内視鏡システム２は、患者の体腔内を観察する内視鏡２１と、処置又は治療を行うための図示しない電気メス、気腹装置、超音波手術具などの周辺装置２２とを有している。この周辺装置２２は、例えばコード等を介して後述のシステムコントローラから駆動電源が供給されるようになっている。また、周辺装置２２は、システムコントローラの制御により、出力値を設定可能となっている。 As shown in FIG. 1, an operation system 1 having an image display processing apparatus according to a first embodiment of the present invention constitutes an endoscope system 2 arranged in an operation room.
The endoscope system 2 includes an endoscope 21 for observing the inside of a body cavity of a patient, and peripheral devices 22 such as an electric knife, a pneumothorax device, and an ultrasonic surgical tool (not shown) for performing treatment or treatment. Yes. The peripheral device 22 is supplied with drive power from a system controller, which will be described later, via a cord or the like, for example. The peripheral device 22 can set an output value under the control of the system controller.

内視鏡２１は、例えば挿入部２１ａが硬性な硬性内視鏡である。この挿入部２１ａの後端側に設けられた接眼部２３には、複数の光学レンズで構成された結像光学系２４及び撮像素子として例えば電荷結合素子（以下ＣＣＤと略記する）２５を内蔵した内視鏡像撮像手段であるテレビカメラ２６が着脱自在に装着されるようになっている。
内視鏡２１からは図示しないライトガイドケーブルが延出して図示しない光源装置に接続されている。この光源装置内部に設けられているランプの照明光は、ライトガイドケーブル及び内視鏡２１内のライトガイドを介して挿入部２１ａの先端側まで伝送され、図示しない照明窓を通して体腔内を照明するようになっている。 The endoscope 21 is a rigid endoscope in which the insertion portion 21a is rigid, for example. The eyepiece 23 provided on the rear end side of the insertion portion 21a incorporates an imaging optical system 24 composed of a plurality of optical lenses and a charge coupled device (hereinafter abbreviated as CCD) 25 as an imaging device. The television camera 26 which is the endoscopic image capturing means is detachably mounted.
A light guide cable (not shown) extends from the endoscope 21 and is connected to a light source device (not shown). The illumination light of the lamp provided inside the light source device is transmitted to the distal end side of the insertion portion 21a through the light guide cable and the light guide in the endoscope 21, and illuminates the body cavity through an illumination window (not shown). It is like that.

照明窓に隣接する観察窓には図示しない対物レンズが取り付けられ、被写体の光学像を、挿入部２１ａ内に配置されている光学像伝送手段である例えばリレーレンズ系の先端側に結像させて、後端側に伝送し、接眼部２３を通して拡大観察されようになっている。なお、光学式の内視鏡２１としてはリレーレンズ系で光学像の伝送を行うものに限らず、ファイババンドルで光学像の伝送を行うイメージガイドを採用したものであってもよい。
この接眼部２３に装着されたテレビカメラ２６のＣＣＤ２５にはリレーレンズ系を伝送された光学像が結像し、このＣＣＤ２５で光電変換された画像信号が信号ケーブル２７を介して画像処理手段であるカメラコントロールユニット（以下ＣＣＵと略記する）２８に伝送され、ここで標準的な映像信号に生成される。 An objective lens (not shown) is attached to the observation window adjacent to the illumination window, and an optical image of the subject is formed on the distal end side of, for example, a relay lens system that is an optical image transmission means arranged in the insertion portion 21a. Then, it is transmitted to the rear end side and is enlarged and observed through the eyepiece 23. The optical endoscope 21 is not limited to an optical image that is transmitted by a relay lens system, but may be an image guide that transmits an optical image by a fiber bundle.
An optical image transmitted through the relay lens system is formed on the CCD 25 of the TV camera 26 mounted on the eyepiece 23, and an image signal photoelectrically converted by the CCD 25 is transmitted through a signal cable 27 by an image processing means. It is transmitted to a certain camera control unit (hereinafter abbreviated as CCU) 28 where it is generated into a standard video signal.

ＣＣＵ２８で生成された映像信号は、後述するようにシステムコントローラ３０により表示処理されて表示手段である手術室モニタ３１に出力され、内視鏡２１で捉えた内視鏡画像が表示画面３１ａ上に表示される。
ＣＣＵ２８及び周辺装置２２は、これら集中制御を行う画像表示処理装置としてのシステムコントローラ３０に接続されている。このシステムコントローラ３０には、制御指示するための指示入力を行う例えばタッチパネル３３、或いはキーボード３４等の制御内容を入力する入力手段が接続されている。さらに、システムコントローラ３０には、マウス３５等のポインティングデバイスも入力手段として接続されている。 As will be described later, the video signal generated by the CCU 28 is subjected to display processing by the system controller 30 and output to the operating room monitor 31 as display means, and an endoscopic image captured by the endoscope 21 is displayed on the display screen 31a. Is displayed.
The CCU 28 and the peripheral device 22 are connected to a system controller 30 as an image display processing device that performs these centralized controls. The system controller 30 is connected to input means for inputting control contents such as a touch panel 33 or a keyboard 34 for inputting instructions for instructing control. Further, a pointing device such as a mouse 35 is connected to the system controller 30 as an input means.

このことにより、例えばタッチパネル３３を操作することにより、手術システム１は、システムコントローラ３０を介してＣＣＵ２８による色調の変更や、周辺装置２２の出力制御等を行うことができるようになっている。具体的には、システムコントローラ３０は、周辺装置２２が例えば電気メスの場合には、切開、凝固等を行う出力レベルの設定制御が行え、気腹器の場合には設定圧の変更制御等を行える。 Thus, for example, by operating the touch panel 33, the surgical system 1 can perform color change by the CCU 28, output control of the peripheral device 22, and the like via the system controller 30. Specifically, when the peripheral device 22 is an electric knife, for example, the system controller 30 can perform setting control of an output level for performing incision, coagulation, and the like. Yes.

また、システムコントローラ３０には、患者情報等の入力を行う例えば図示しない磁気カードやＩＣカード、光カードなど記録媒体入出力装置が接続されている。そして、システムコントローラ３０は、磁気カードリーダ等により記録された患者情報を読みとり、ＣＣＵ２８に出力することで、内視鏡画像に患者情報の重畳表示を行うこと等ができるようになっている。 The system controller 30 is connected to a recording medium input / output device such as a magnetic card, IC card, or optical card (not shown) for inputting patient information and the like. The system controller 30 can read the patient information recorded by a magnetic card reader or the like and output it to the CCU 28 so that the patient information can be superimposed on the endoscopic image.

図２に示すようにシステムコントローラ３０は、周辺装置２２を集中制御するとともに、コントローラ各部を制御するプロセッサ５１と、このプロセッサ５１が実行する動作プログラムや周辺装置２２の制御情報或いは内視鏡画像及び患者情報等のデータを格納するハードディスクドライブ（以下、ＨＤＤと略記）５２と、画像の一時格納及び作業エリア等に用いられるメモリ５３と、周辺装置２２と通信を行い、生体情報及び周辺装置情報等を伝送する周辺装置インタフェース（以下、Ｉ／Ｆと略記）５４と、マウス３５やキーボード３４に接続されるマウス／キーボードＩ／Ｆ５５と、タッチパネル３３に接続されるタッチパネルＩ／Ｆ５６と、ＣＣＵ２８から取り込んだ映像信号の重畳表示処理を行うとともに、記録媒体入出力装置から取り込んだ患者情報や周辺装置２２から取り込んだ生体情報及び周辺装置情報の重畳表示処理を行う画像表示処理部５７とで主に構成され、これらはバス５８を介して互いに接続されている。 As shown in FIG. 2, the system controller 30 performs centralized control of the peripheral device 22, and also includes a processor 51 that controls each part of the controller, an operation program executed by the processor 51, control information of the peripheral device 22, an endoscopic image, It communicates with a hard disk drive (hereinafter abbreviated as HDD) 52 for storing data such as patient information, a memory 53 used for temporary image storage and work area, and the peripheral device 22 to provide biometric information, peripheral device information, etc. From a peripheral unit interface (hereinafter abbreviated as I / F) 54, a mouse / keyboard I / F 55 connected to the mouse 35 and the keyboard 34, a touch panel I / F 56 connected to the touch panel 33, and the CCU 28. Video signal superimposing display processing and recording medium input / output device It is mainly composed of an image display processing unit 57 that performs superimposed display processing of the biological information and peripheral device information retrieved from the patient information and the peripheral device 22 captured, which are connected to one another via a bus 58.

プロセッサ５１は、周辺装置Ｉ／Ｆ５４を介して個別に入力される患者情報、周辺装置情報等を集積し、この集積した情報に基づいて周辺装置２２を制御するようになっている。また、プロセッサ５１は、集積した患者情報、周辺装置情報等を画像表示処理部５７に出力するようになっている。更に、プロセッサ５１は、タッチパネルＩ／Ｆ５６又はマウス／キーボードＩ／Ｆ５５からの操作指示信号も画像表示処理部５７に出力するようになっている。 The processor 51 accumulates patient information, peripheral device information, and the like that are individually input via the peripheral device I / F 54, and controls the peripheral device 22 based on the accumulated information. In addition, the processor 51 outputs the accumulated patient information, peripheral device information, and the like to the image display processing unit 57. Further, the processor 51 outputs an operation instruction signal from the touch panel I / F 56 or the mouse / keyboard I / F 55 to the image display processing unit 57.

画像表示処理部５７は、入力された内視鏡画像の映像信号をＡ／Ｄ変換するＡ／Ｄ変換部６１と、映像信号をＤ／Ａ変換して出力するＤ／Ａ変換部６２とを有している。これらＡ／Ｄ変換部６１及びＤ／Ａ変換部６２は、オーバレイ制御を行うオーバレイ制御部６３に接続されている。このオーバレイ制御部６３は、さらにオーバレイ制御部６３の制御及びデータの送受等を行う制御部６４に接続されている。 The image display processing unit 57 includes an A / D conversion unit 61 that performs A / D conversion on the video signal of the input endoscopic image, and a D / A conversion unit 62 that performs D / A conversion on the video signal and outputs it. Have. These A / D converter 61 and D / A converter 62 are connected to an overlay controller 63 that performs overlay control. The overlay control unit 63 is further connected to a control unit 64 that controls the overlay control unit 63 and transmits / receives data.

また、制御部６４は、表示情報生成部６５に接続されており、プロセッサ５１から入力された患者情報、周辺装置情報等を編集して画面情報を生成する表示情報生成部６５に出力するようになっている。また、制御部６４は、プロセッサ５１から入力されたタッチパネルＩ／Ｆ５６又はマウス／キーボードＩ／Ｆ５５からの操作指示信号に基づき、ヘルプボタンが操作された際、後述するフローチャートに従って全ての補足情報を表示画面上に一度に表示する補足情報表示処理を行うようになっている。 The control unit 64 is connected to the display information generation unit 65 and edits patient information, peripheral device information, and the like input from the processor 51 and outputs them to the display information generation unit 65 that generates screen information. It has become. The control unit 64 displays all supplementary information according to a flowchart described later when the help button is operated based on the operation instruction signal from the touch panel I / F 56 or the mouse / keyboard I / F 55 input from the processor 51. Supplementary information display processing for displaying on the screen at a time is performed.

即ち、前記オーバレイ制御部６３は、手術室モニタ３１に対して、情報処理機能を示す複数のアイコンを表示する表示処理手段及び、制御部６４からの指示により、全てのアイコンに対応する前記情報処理機能に関する補足情報を一度に前記手術室モニタ３１に対して表示する補足情報表示処理手段を兼ねている。また、前記制御部６４は、オーバレイ制御部６３により表示されたアイコンに関する補足情報の表示を指示する補足情報表示指示手段である。 That is, the overlay control unit 63 displays, on the operating room monitor 31, a plurality of icons indicating information processing functions, and the information processing corresponding to all icons according to instructions from the control unit 64. It also serves as supplementary information display processing means for displaying supplementary information regarding functions on the operating room monitor 31 at a time. The control unit 64 is supplementary information display instruction means for instructing display of supplementary information related to the icon displayed by the overlay control unit 63.

更に、表示情報生成部６５は、操作画面生成手段として複数のアイコンと、これら複数のアイコンに対する補足情報とを含む擬似的な操作画面を生成するようになっており、前記オーバレイ制御部６３は前記制御部６４より指示があった際に、前記表示情報生成部６５により生成された擬似的な操作画面を、手術室モニタ３１に表示された表示画面上に重畳して表示するようになっている。 Further, the display information generation unit 65 is configured to generate a pseudo operation screen including a plurality of icons and supplementary information for the plurality of icons as an operation screen generation unit. When instructed by the control unit 64, the pseudo operation screen generated by the display information generation unit 65 is displayed superimposed on the display screen displayed on the operating room monitor 31. .

なお、ＨＤＤ５２には、画像表示処理部５７を介して取り込んだ画像を格納することができ、このＨＤＤ５２に格納された画像はキーボード３４による画像選択をＣＰＵ５１で受け、その選択された画像の縮小画像（サムネイル画像）を画像表示処理部５７の制御部６４側に出力することによって、オーバレイ制御部６３を介して映像信号に重畳すること等ができるようになっている。 The HDD 52 can store images captured via the image display processing unit 57. The images stored in the HDD 52 are selected by the CPU 51 using the keyboard 34, and a reduced image of the selected image is selected. By outputting the (thumbnail image) to the control unit 64 side of the image display processing unit 57, it is possible to superimpose it on the video signal via the overlay control unit 63.

そして、Ａ／Ｄ変換部６１から入力された映像信号は、制御部６４の制御に従ってオーバレイ制御部６３により画像変換される。一方、オーバレイ制御部６３の出力は、Ｄ／Ａ変換部６２を介して手術室モニタ３１に出力され、この手術室モニタ３１の表示画面３１ａ上には例えば図３に示すような表示を行うことができるようになっている。 The video signal input from the A / D converter 61 is image-converted by the overlay controller 63 according to the control of the controller 64. On the other hand, the output of the overlay control unit 63 is output to the operating room monitor 31 via the D / A conversion unit 62, and the display as shown in FIG. 3 is performed on the display screen 31a of the operating room monitor 31, for example. Can be done.

図３に示す表示画面例は、集中モニタリング画面７０である。
この集中モニタリング画面７０は、画面表示エリア７１、周辺装置状態表示エリア７２、患者情報表示エリア７３とに分割して構成されている。画面表示エリア７１には、ＣＣＵ２８からの内視鏡画像又は後述のサムネイル表示エリアから選択されたサムネイル画像が表示される。この画面表示エリア７１の下部には、このエリアに表示される画像の再生状態に応じて移動するスライダー表示部７４が設けられている。 The display screen example shown in FIG. 3 is a centralized monitoring screen 70.
The central monitoring screen 70 is divided into a screen display area 71, a peripheral device state display area 72, and a patient information display area 73. In the screen display area 71, an endoscopic image from the CCU 28 or a thumbnail image selected from a thumbnail display area described later is displayed. Below the screen display area 71 is provided a slider display section 74 that moves in accordance with the playback state of the image displayed in this area.

周辺装置状態表示エリア７２には、システムコントローラ３０から送信された周辺装置２２の制御状況が表示される。この周辺装置状態表示エリア７２の右端には、スクロールバー７２ａが設けてあり、スクロール可能となっている。また、患者情報表示エリア７３には、システムコントローラ３０からの患者情報が表示されるようになっている。 In the peripheral device status display area 72, the control status of the peripheral device 22 transmitted from the system controller 30 is displayed. A scroll bar 72a is provided at the right end of the peripheral device state display area 72 so that it can be scrolled. In the patient information display area 73, patient information from the system controller 30 is displayed.

また、画面表示エリア７１（スライダー表示部７４の下側）の下部及び周辺装置状態表示エリア７２の上部には、それぞれ上部に複数のアイコンが設けられている。
更に、具体的に説明すると、画面表示エリア７１の下部には、このエリアに表示される画像を録画再生等するための操作ボタン７５が設けられている。 In addition, a plurality of icons are provided in the upper portion of the lower portion of the screen display area 71 (below the slider display portion 74) and the upper portion of the peripheral device state display area 72, respectively.
More specifically, an operation button 75 for recording and reproducing an image displayed in this area is provided below the screen display area 71.

また、周辺装置状態表示エリア７２の上部には、表示画面の表示モードを変更してそれぞれの情報処理機能を設定変更するためのファンクションボタン７６が設けられている。これらファンクションボタン７６が操作されることで、それぞれのモードに応じて生成された表示画面がオーバレイされ、表示画面の表示モードが変更されることになる。 A function button 76 for changing the display mode of the display screen and changing the setting of each information processing function is provided above the peripheral device state display area 72. By operating these function buttons 76, the display screen generated according to each mode is overlaid, and the display mode of the display screen is changed.

なお、図３に示す集中モニタリング画面７０は、起動時の初期画面又はファンクションボタン７６の集中モニタリングボタン７６ａを操作した際に表示される画面である。
ここで、ファンクションボタン７６の画像録画再生ボタン７６ｂを操作すると、手術室モニタ３１の表示画面３１ａには、図４に示す画像録画再生画面８０が表示されるようになっている。 The centralized monitoring screen 70 shown in FIG. 3 is a screen displayed when the initial screen at the time of activation or the centralized monitoring button 76a of the function button 76 is operated.
Here, when the image recording / reproducing button 76b of the function button 76 is operated, the image recording / reproducing screen 80 shown in FIG. 4 is displayed on the display screen 31a of the operating room monitor 31.

この画像録画再生画面８０は、上述した集中モニタリング画面７０に対して周辺装置状態表示エリア７２が画像ファイル用サムネイル表示エリア８１に変更され、患者情報表示エリア７３がしおり用サムネイル表示エリア８２に変更されるようになっている。
画像ファイル用サムネイル表示エリア８１には、ＨＤＤ５２に蓄積してある解剖学図データ等の縮小画面やＣＣＵ２８からの内視鏡画像に対応する映像信号を静止画で縮小した画像（サムネイル画像）等が表示されるようになっている。 In the image recording / playback screen 80, the peripheral device state display area 72 is changed to an image file thumbnail display area 81 and the patient information display area 73 is changed to a bookmark thumbnail display area 82, compared to the centralized monitoring screen 70 described above. It has become so.
In the image file thumbnail display area 81, a reduced screen of anatomical chart data and the like stored in the HDD 52, an image (thumbnail image) obtained by reducing a video signal corresponding to an endoscopic image from the CCU 28 with a still image, and the like. It is displayed.

この画像ファイル用サムネイル表示エリア８１には、このエリア内に複数のサムネイル画像が表示されてこのエリア内に表示しきれない場合には、右端にスクロールバー８１ａが表示されてスクロール可能となっている。
また、しおり用サムネイル表示エリア８２には、“しおり”作成時の画像ファイルをしおり用サムネイルとして表示されるようになっている。このしおり用サムネイル表示エリア８２の左右端には、スクロールバーの代わりに左右ボタン８２ａが設けてあり、左右方向にスクロール可能となっている。 In this thumbnail display area 81 for image files, when a plurality of thumbnail images are displayed in this area and cannot be displayed in this area, a scroll bar 81a is displayed on the right end to enable scrolling. .
In the thumbnail display area 82 for bookmarks, the image file at the time of “bookmark” creation is displayed as a thumbnail for bookmarks. Left and right buttons 82a are provided at the left and right ends of the bookmark thumbnail display area 82 in place of the scroll bar, and scrolling in the left and right directions is possible.

ここで、図３の集中モニタリング画面７０又は図４の画像録画再生画面８０において、アイコンである、表示画面の表示モードを変更してそれぞれの情報処理機能を設定変更するためのファンクションボタン７６や画面表示エリア７１に表示される画像を録画再生等するための操作ボタン７５に対応する情報処理機能が看護士やオペレータなどには解り難い。
この場合、看護士やオペレータは、表示画面上においてファンクションボタン７６のヘルプボタン７６ｃを操作して補足情報を表示させる。なお、一般的にヘルプボタン７６ｃは、周知の通り、“？”マークで表示されている。 Here, in the centralized monitoring screen 70 of FIG. 3 or the image recording / playback screen 80 of FIG. 4, function buttons 76 and screens for changing the display mode of the display screen and changing the settings of the respective information processing functions are icons. An information processing function corresponding to the operation button 75 for recording and reproducing an image displayed in the display area 71 is difficult for a nurse or an operator to understand.
In this case, the nurse or operator operates the help button 76c of the function button 76 on the display screen to display supplementary information. In general, the help button 76c is displayed with a “?” Mark as is well known.

本実施例では、ヘルプボタン７６ｃが操作された際、図５に示すフローチャートに従って表示画面上に全ての補足情報を一度に表示するようにしている。
先ず、看護士やオペレータは、図３の集中モニタリング画面７０又は図４の画像録画再生画面８０において、ファンクションボタン７６や操作ボタン７５の情報処理機能が解らないとき、例えば、マウス３５やキーボード３４を操作してヘルプボタン７６ｃを操作する。 In this embodiment, when the help button 76c is operated, all supplementary information is displayed on the display screen at once according to the flowchart shown in FIG.
First, when the nurse or the operator does not understand the information processing function of the function button 76 or the operation button 75 on the centralized monitoring screen 70 in FIG. 3 or the image recording / playback screen 80 in FIG. 4, for example, the mouse 35 or the keyboard 34 is used. The help button 76c is operated.

すると、システムコントローラ３０は、プロセッサ５１がマウス／キーボードＩ／Ｆ５５からの操作指示信号を受信して画像表示処理部５７に出力する。そして、画像表示処理部５７の制御部６４は、図５に示すように表示情報生成部６５及びオーバレイ制御部６３を制御して補足情報表示処理を行う。
画像表示処理部５７において、制御部６４は、操作指示信号に基づき、ヘルプボタン７６ｃがオンされたことを判断し（ステップＳ１）、ヘルプ表示を行う（ステップＳ２）。 Then, in the system controller 30, the processor 51 receives an operation instruction signal from the mouse / keyboard I / F 55 and outputs it to the image display processing unit 57. Then, the control unit 64 of the image display processing unit 57 controls the display information generation unit 65 and the overlay control unit 63 to perform supplementary information display processing as shown in FIG.
In the image display processing unit 57, the control unit 64 determines that the help button 76c is turned on based on the operation instruction signal (step S1), and performs a help display (step S2).

制御部６４は、表示情報生成部６５を制御し、該当する表示画面に対してアイコンの補足情報表示を行うための画面情報を生成させ、この生成された画像情報をオーバレイ制御部６３に出力させる。そして、制御部６４は、オーバレイ制御部６３を制御し、該当する表示画面の映像信号に対して生成された画像情報をオーバレイさせる。
すると、オーバレイ制御部６３からの映像信号は、Ｄ／Ａ変換されて手術室モニタ３１に出力され図６に示すようにヘルプ表示画面９０が表示されるようになっている。 The control unit 64 controls the display information generation unit 65 to generate screen information for displaying icon supplementary information on the corresponding display screen, and causes the overlay control unit 63 to output the generated image information. . Then, the control unit 64 controls the overlay control unit 63 to overlay the generated image information on the video signal of the corresponding display screen.
Then, the video signal from the overlay control unit 63 is D / A converted and output to the operating room monitor 31, and a help display screen 90 is displayed as shown in FIG.

図６に示すようにヘルプ表示画面９０は、集中モニタリング画面７０等の表示画面に対して画面表示エリア７１を除くＬ字型の擬似的な操作画面をオーバレイ（重畳）して表示されるようになっている。
具体的に説明すると、オーバレイされる擬似的な操作画面は、アイコンであるファンクションボタン７６及び操作ボタン７５を含み、周辺装置状態表示エリア７２及び患者情報表示エリア７３又は、画像ファイル用サムネイル表示エリア８１及びしおり用サムネイル表示エリア８２を覆うようにＬ字型に生成される。 As shown in FIG. 6, the help display screen 90 is displayed so as to overlay an L-shaped pseudo operation screen excluding the screen display area 71 on the display screen such as the centralized monitoring screen 70. It has become.
More specifically, the pseudo operation screen to be overlaid includes a function button 76 and an operation button 75 which are icons, and includes a peripheral device state display area 72 and a patient information display area 73, or an image file thumbnail display area 81. And it is generated in an L shape so as to cover the thumbnail display area 82 for bookmarks.

この擬似的な操作画面には、例えば、周辺装置状態表示エリア７２又は、画像ファイル用サムネイル表示エリア８１の該当領域にファンクションボタン７６の各ボタンに対応する補足情報を一覧表示するファンクションボタン用補足情報表示エリア９１と、患者情報表示エリア７３又は、しおり用サムネイル表示エリア８２の該当領域に操作ボタン７５の各ボタンに対応する補足情報を一覧表示する操作ボタン用補足情報表示エリア９２とが設けられている。 In this pseudo operation screen, for example, function button supplement information for displaying a list of supplement information corresponding to each button of the function button 76 in the corresponding area of the peripheral device state display area 72 or the image file thumbnail display area 81. A supplementary information display area 92 for operation buttons for displaying a list of supplementary information corresponding to each button of the operation buttons 75 is provided in a corresponding area of the display area 91 and the patient information display area 73 or the thumbnail display area 82 for bookmarks. Yes.

また、この擬似的な操作画面には、ファンクションボタン７６が表示される領域にこのファンクションボタン７６の各ボタンに対応する同じ形状の擬似アイコンが表示されると共に、操作ボタン７５が表示される領域にこの操作ボタン７５の各ボタンに対応する同じ形状の擬似アイコンが表示されるようになっている。 In the pseudo operation screen, pseudo icons of the same shape corresponding to the buttons of the function button 76 are displayed in the area where the function buttons 76 are displayed, and the operation buttons 75 are displayed in the area where the function buttons 76 are displayed. A pseudo icon having the same shape corresponding to each button of the operation button 75 is displayed.

従って、ヘルプ表示画面９０は、ファンクションボタン７６や操作ボタン７５のうち、ヘルプボタン７６ｃを除いたどれかを操作してもオンしないようになっている。即ち、補足情報表示処理は、アイコンの情報処理機能を実行しない操作禁止ステップを含んでいる。 Therefore, the help display screen 90 is not turned on even if any one of the function buttons 76 and the operation buttons 75 except the help button 76c is operated. In other words, the supplemental information display process includes an operation prohibiting step in which the information processing function for icons is not executed.

なお、画面表示エリア７１に対して、映像信号が入力されないと、ブラック表示となってしまう。そのため、この画面表示エリア７１に対してどのような情報処理機能を割りついているかどうかを確認するため、画面表示エリア７１には、図示しないが内視鏡画像を表示するエリアであることを示すために内視鏡形状のアイコンをエリアの所定位置に表示するようにしても良い。この場合、表示されるアイコンは、内視鏡画像だけでなく、例えば、超音波画像を表示する際には超音波プローブ等のアイコンであっても良いし、また画面表示エリア７１に限定されることなくその他の表示エリアにおいても該当するアイコンであっても良い。 If no video signal is input to the screen display area 71, black display is performed. Therefore, in order to confirm what information processing function is assigned to the screen display area 71, the screen display area 71 indicates an area for displaying an endoscopic image (not shown). In addition, an endoscope-shaped icon may be displayed at a predetermined position in the area. In this case, the displayed icon is not limited to the endoscopic image, but may be an icon such as an ultrasonic probe when displaying an ultrasonic image, and is limited to the screen display area 71. The corresponding icon may also be used in other display areas.

また、補足情報表示は、図６中では文字情報のみで表示されているが、写真等の画像データや図表等を含んで表示してするようにしても良い。また、この場合、補足情報表示は、説明の順序に従って順次、切り替わっていくようにしても良い。 Further, the supplemental information display is displayed with only the character information in FIG. 6, but it may be displayed including image data such as a photograph or a chart. In this case, the supplementary information display may be switched sequentially in the order of explanation.

そして、制御部６４は、ヘルプボタン７６ｃが再操作されてオンしたことを検出した際に（ステップＳ３）、ヘルプボタン７６ｃが操作される前の表示画面にヘルプ表示画面９０を復帰させ、ヘルプ表示消去される（ステップＳ４）。
一方、制御部６４は、ヘルプボタン７６ｃが再操作されなければ、ヘルプ表示画面９０を表示させ続け、表示してから例えば、１０秒程度でヘルプボタン７６ｃが操作される前の表示画面にヘルプ表示画面９０を復帰させ、ヘルプ表示消去させる（ステップＳ４）。即ち、ステップＳ３及びＳ４は、復帰ステップを構成している。 When the control unit 64 detects that the help button 76c is turned on again (step S3), the control unit 64 restores the help display screen 90 to the display screen before the help button 76c is operated, and displays the help display. It is erased (step S4).
On the other hand, if the help button 76c is not operated again, the control unit 64 continues to display the help display screen 90, and displays the help on the display screen before the help button 76c is operated in about 10 seconds after the display. The screen 90 is restored and the help display is deleted (step S4). That is, steps S3 and S4 constitute a return step.

これにより、本実施例１は、ヘルプボタン７６ｃを一度操作するのみで、全ての補足情報を一度に表示することができ、その都度操作して補足情報の表示操作を行い該当する補足情報をその都度表示させることがない。従って、本実施例は、アイコンの補足情報の表示操作が簡単に行え、操作者の煩わしさを軽減できる。 As a result, in the first embodiment, it is possible to display all the supplementary information at a time only by operating the help button 76c once. The supplementary information is displayed each time by operating the supplementary information. It is not displayed every time. Therefore, in this embodiment, the display operation of the supplemental information of the icon can be easily performed, and the troublesomeness of the operator can be reduced.

なお、ヘルプ表示画面は、図７に示すように構成しても良い。
図７に示すようにヘルプ表示画面９０は、ヘルプボタン７６ｃｂを操作したとき該当するアイコン９５の上又は、その近傍に補足情報９６を表示するように構成しても良い。 The help display screen may be configured as shown in FIG.
As shown in FIG. 7, the help display screen 90 may be configured to display supplementary information 96 on or near the corresponding icon 95 when the help button 76cb is operated.

なお、第１実施例では、キーボード３４やマウス３５を操作して表示手段の表示画面に表示されるヘルプボタンを操作することでヘルプ表示を行うように構成しているが、本発明はこれに限定されず、表示手段の表示画面にヘルプボタンを表示させることなく、図示しないがキーボード３４やマウス３５にヘルプボタンを設けてこれを操作することでヘルプ表示を行うように構成しても良い。 In the first embodiment, the keyboard 34 and the mouse 35 are operated to operate the help button displayed on the display screen of the display means, but the present invention is configured to display the help. Without being limited thereto, a help button may be provided on the keyboard 34 or the mouse 35 and operated to display the help button without displaying the help button on the display screen of the display means.

図８ないし図１０は本発明の第２実施例に係わり、図８は本発明の第２実施例の画像表示処理装置を備えた遠隔手術支援システムを示す全体構図、図９は図８のシステムコントローラの内部構成を示す回路ブロック図、図１０は第２の補足情報表示処理のフローチャート例である。 FIGS. 8 to 10 relate to a second embodiment of the present invention, FIG. 8 shows an overall composition showing a remote operation support system provided with an image display processing apparatus of the second embodiment of the present invention, and FIG. 9 shows the system of FIG. A circuit block diagram showing the internal configuration of the controller, and FIG. 10 is a flowchart example of the second supplemental information display processing.

上記第１実施例は単独の手術システム１に本発明を適用しているが、第２実施例は手術室と遠隔地にある制御室とを通信回線を介して接続し、手術室の術者が制御室の医師などの支援者からの指示及び助言の提供を受けて手術を行える遠隔手術支援システムに本発明を適用する。それ以外の構成は上記第１実施例と同様であるので説明を省略し、同一構成には同じ符号を付して説明する。 In the first embodiment, the present invention is applied to a single operation system 1, but in the second embodiment, an operating room and a remote control room are connected via a communication line, and an operator in the operating room is connected. The present invention is applied to a remote operation support system that can perform an operation upon receiving instructions and advice from a supporter such as a doctor in a control room. Since the other configuration is the same as that of the first embodiment, the description thereof will be omitted, and the same components will be described with the same reference numerals.

図８に示すように本発明の第２実施例の画像表示処理装置を備えた遠隔手術支援システム１０１は、手術室内に配置された内視鏡システム２Ｂと、この内視鏡システム２Ｂに対して例えば遠隔地にある制御室内に配置された遠隔制御システム１０２とが通信回線である総合デジタル通信網（ＩＳＤＮ）等の公衆回線１０３によって接続されて構成されている。なお、ＩＳＤＮで画像、音声、信号を送信するための規格に関し、従来、画像、音声、データを公衆回線で送信する方式としてＨ３２０規格などが制定されている。 As shown in FIG. 8, a remote operation support system 101 including an image display processing apparatus according to the second embodiment of the present invention is an endoscope system 2B arranged in an operating room, and the endoscope system 2B. For example, a remote control system 102 disposed in a control room at a remote location is connected to a public line 103 such as an integrated digital communication network (ISDN) which is a communication line. In addition, regarding the standard for transmitting images, sounds, and signals by ISDN, the H320 standard has been established as a method for transmitting images, sounds, and data through a public line.

内視鏡システム２Ｂにおいて、ＣＣＵ２８及びシステムコントローラ３０Ｂは、手術室用信号伝送装置１０４に接続されている。そして、この手術室用信号伝送装置１０４は、ＣＣＵ２８で生成した内視鏡画像の映像信号やシステムコントローラ３０Ｂからの画像データ及びシステムコントローラ３０Ｂにより制御している制御信号或いは患者情報等を公衆回線１０３によって伝送可能な信号に変換し、公衆回線１０３を介して制御室に向けて出力するようになっている。 In the endoscope system 2B, the CCU 28 and the system controller 30B are connected to the operating room signal transmission device 104. The operating room signal transmission device 104 sends the video signal of the endoscopic image generated by the CCU 28, the image data from the system controller 30B, the control signal controlled by the system controller 30B, patient information, and the like to the public line 103. The signal is converted into a signal that can be transmitted through the public line 103 and output to the control room via the public line 103.

なお、手術室用信号伝送装置１０４は、制御室の後述する制御室用信号伝送装置１１１で信号変換されて公衆回線１０３を経て入力される信号を元の映像信号及び指示信号に変換して、システムコントローラ３０Ｂに指示信号を出力する一方、映像信号を補助モニタ１０５に出力して、制御室から送られてくる画像情報等を表示画面１０５ａ上に表示するようになっている。 The operating room signal transmission device 104 converts a signal that is converted by a control room signal transmission device 111 (to be described later) of the control room and input through the public line 103 into an original video signal and an instruction signal, While outputting an instruction signal to the system controller 30B, a video signal is output to the auxiliary monitor 105, and image information and the like sent from the control room are displayed on the display screen 105a.

また、システムコントローラ３０Ｂは、キーボード３４及びマウス３５からシステムコントローラ３０Ｂ及び手術室用信号伝送装置１０４、公衆回線１０３を介して制御室内の支援者にコメント等を送信できるようになっている。 Further, the system controller 30B can transmit comments and the like from the keyboard 34 and the mouse 35 to the support person in the control room via the system controller 30B, the operating room signal transmission device 104, and the public line 103.

一方、制御室内の遠隔制御システム１０２は、公衆回線１０３に接続されていて、手術室用信号伝送装置１０４から公衆回線１０３を経て入力される信号を、ＣＣＵ２８で生成した映像信号やシステムコントローラ３０Ｂからの画像データ及びシステムコントローラ３０Ｂにより制御している制御信号或いは患者情報等に変換する制御室用信号伝送装置１１１と、この制御室用信号伝送装置１１１に接続されてこの制御室用信号伝送装置１１１からの信号やデータ等が入力される遠隔操作コントローラ１１２と、制御室用信号伝送装置１１１に接続され、制御室内にある図表や支援者の表情等を撮影する室内カメラ１１３とで主に構成されている。 On the other hand, the remote control system 102 in the control room is connected to the public line 103, and a signal input from the operating room signal transmission device 104 via the public line 103 is received from the video signal generated by the CCU 28 or the system controller 30B. The control room signal transmission device 111 for converting the image data and the control signal controlled by the system controller 30B or patient information, etc., and the control room signal transmission device 111 connected to the control room signal transmission device 111 Mainly composed of a remote control controller 112 to which signals, data, and the like are input, and an indoor camera 113 that is connected to the control room signal transmission device 111 and shoots diagrams and supporters' facial expressions in the control room. ing.

遠隔操作コントローラ１１２は、ＣＣＵ２８から送られた内視鏡画像や超音波画像等のその他の画像データを取り込むとともに、システムコントローラ３０Ｂから送られてきた患者情報等をスーパインポーズ等して表示される制御室モニタ１１４が接続されている。
なお、遠隔操作コントローラ１１２は、取り込んだ内視鏡画像やその他の画像データのみを装置モニタ１１５に出力して表示画面１１５ａに表示し、閲覧調整可能に構成されている。 The remote operation controller 112 captures other image data such as an endoscopic image and an ultrasonic image sent from the CCU 28, and displays the patient information and the like sent from the system controller 30B by superimposing. A control room monitor 114 is connected.
The remote operation controller 112 is configured to be able to adjust browsing by outputting only the captured endoscopic image and other image data to the apparatus monitor 115 and displaying it on the display screen 115a.

また、遠隔操作コントローラ１１２には例えばタッチパネル、或いはキーボード１１６等の制御内容を入力する入力手段が接続されている。さらに、遠隔操作コントローラ１１２には、マウス等のポインティングデバイスも入力手段として接続されている。 The remote operation controller 112 is connected to an input means for inputting control contents such as a touch panel or a keyboard 116. Further, a pointing device such as a mouse is connected to the remote operation controller 112 as an input means.

そして、手術室において、タッチパネル３３等から周辺装置２２等の動作を制御する設定等がシステムコントローラ３０Ｂを介して行われると、その制御内容が手術室用信号伝送装置１０４、公衆回線１０３、制御室用信号伝送装置１１１を経て遠隔操作コントローラ１１２に送信される。また、システムコントローラ３０Ｂに入力された患者情報も同様に遠隔操作コントローラ１１２に送信される。 When settings for controlling the operation of the peripheral device 22 and the like are performed from the touch panel 33 or the like in the operating room via the system controller 30B, the control contents are the operating room signal transmission device 104, the public line 103, the control room. Is transmitted to the remote control controller 112 via the signal transmission device 111. The patient information input to the system controller 30B is also transmitted to the remote operation controller 112 in the same manner.

そして、制御室の支援者は、制御室モニタ１１４に表示される内視鏡画像を見ながら支援情報の提供を行えるようになっている。さらに、キーボード１１６やマウス等の入力手段を用いて例えば手術室の術者に対して、手術する際の指示・注意等の支援情報を、制御室モニタ１１４の表示画面１１４ａにスーパインポーズで表示されることによって、これら支援情報は信号伝送装置１１１，１０４、公衆回線１０３を介して手術室内の補助モニタ１０５の表示画面１０５ａ上に表示される。つまり、このことにより、手術室の術者は、補助モニタ１０５に表示される遠隔地の制御室からの支援情報を得て手術を進められるようになっている。 A support person in the control room can provide support information while viewing the endoscopic image displayed on the control room monitor 114. Further, using the input means such as the keyboard 116 and the mouse, for example, support information such as instructions / cautions when performing an operation is displayed on the display screen 114a of the control room monitor 114 in a superimpose manner for an operator in the operating room. As a result, the support information is displayed on the display screen 105 a of the auxiliary monitor 105 in the operating room via the signal transmission devices 111 and 104 and the public line 103. In other words, this allows an operator in the operating room to proceed with surgery by obtaining support information from a remote control room displayed on the auxiliary monitor 105.

ここで、上記第１実施例の手術システム１では、ヘルプボタン７６ｃがオンされると、略１０秒程度、ヘルプ表示画面９０が表示されてヘルプ表示されるようになっている。この間中、周辺装置状態表示エリア７２等は、補足情報表示により隠されてしまい、周辺装置２２の状態や生体情報等を知ることができなくなる。また、このような場合、遠隔手術支援システム１０１においては、制御室からの支援情報等も知ることができなくなる。 Here, in the surgery system 1 of the first embodiment, when the help button 76c is turned on, the help display screen 90 is displayed for about 10 seconds to display the help. During this time, the peripheral device state display area 72 and the like are hidden by the supplementary information display, and the state of the peripheral device 22, biometric information, and the like cannot be known. Further, in such a case, the remote surgery support system 101 cannot know the support information from the control room.

そこで、第２実施例では、ヘルプボタン７６ｃが操作されてヘルプ表示がなされた際、このヘルプ表示の時間を一定時間例えば、２秒程度の短い時間として設定し、この時間経過後、ヘルプ表示を消去するような第２の補足情報表示処理を行うように構成する。 Therefore, in the second embodiment, when the help button 76c is operated to display the help, the help display time is set as a short time such as about 2 seconds, and after this time has elapsed, the help display is displayed. The second supplemental information display process for erasing is performed.

即ち、第２実施例のシステムコントローラ３０Ｂは、図９に示すように上述の第２の補足情報表示処理を行う制御部６４Ｂを設けた画像表示処理部５７Ｂを有して構成される。
なお、このシステムコントローラ３０Ｂは、通信Ｉ／Ｆ１２１を介して手術室用信号伝送装置１０４との制御信号等の通信を行い、制御室との通信制御動作を行うプロセッサ５１Ｂを有して構成されている。それ以外の構成は、上記第１実施例とほぼ同様な構成なので説明を省略する。 That is, the system controller 30B of the second embodiment is configured to include an image display processing unit 57B provided with a control unit 64B that performs the above-described second supplemental information display processing as shown in FIG.
The system controller 30B includes a processor 51B that communicates control signals and the like with the operating room signal transmission device 104 via the communication I / F 121 and performs communication control operations with the control room. Yes. Since other configurations are substantially the same as those of the first embodiment, description thereof is omitted.

画像表示処理部５７Ｂの制御部６４Ｂは、ヘルプボタン７６ｃが操作された際、図１０に示すフローチャートに従って第２の補足情報表示処理を行うようにしている。
先ず、看護士やオペレータは、上記第１実施例と同様にファンクションボタン７６や操作ボタン７５等のアイコンの情報処理機能が解らないとき、例えば、マウス３５やキーボード３４を操作してヘルプボタンを操作する。 When the help button 76c is operated, the control unit 64B of the image display processing unit 57B performs the second supplemental information display processing according to the flowchart shown in FIG.
First, the nurse or operator operates the help button by operating the mouse 35 or the keyboard 34, for example, when the information processing function of the icons such as the function button 76 and the operation button 75 is not understood as in the first embodiment. To do.

すると、システムコントローラ３０Ｂは、上記第１実施例と同様に画像表示処理部５７の制御部６４がヘルプボタンがオンされたことを判断する（ステップＳ１１）。
このとき、制御部６４は、フラッグを立て制御室との通信やＣＣＵ２８からの映像信号の入力或いは周辺装置２２からの生体情報及び周辺装置情報等の入力が有るか否かの判断（ステップＳ１２〜Ｓ１５）をしてフラッグがオンか否かの判断を行う（ステップＳ１６）。なお、周辺装置２２から入力される生体情報及び周辺装置情報としては、例えば、腹腔圧や積算流量等を用いている。 Then, the system controller 30B determines that the help button has been turned on by the control unit 64 of the image display processing unit 57 as in the first embodiment (step S11).
At this time, the control unit 64 raises the flag and determines whether or not there is communication with the control room, input of a video signal from the CCU 28, or input of biological information and peripheral device information from the peripheral device 22 (steps S12 to S12). S15) is performed to determine whether or not the flag is on (step S16). In addition, as the biometric information and the peripheral device information input from the peripheral device 22, for example, abdominal pressure or an integrated flow rate is used.

そして、制御部６４は、フラッグがオンであるならば、上記第１実施例で説明したの同様なヘルプ表示を行う（ステップＳ１７）。
制御部６４は、ヘルプ表示がなされた際、このヘルプ表示を一定時間例えば、２秒程度の短い時間表示させ続け（ステップＳ１７〜１８）、この時間経過後、ヘルプボタンが操作される前の表示画面にヘルプ表示画面を復帰させ、ヘルプ表示消去させる（ステップＳ１９）。即ち、ステップＳ１８及びＳ１９は、復帰ステップを構成している。 If the flag is on, the control unit 64 performs the same help display as described in the first embodiment (step S17).
When the help display is made, the control unit 64 keeps displaying the help display for a short period of time, for example, about 2 seconds (steps S17 to S18), and after this time elapses, the display before the help button is operated. The help display screen is restored to the screen, and the help display is deleted (step S19). That is, steps S18 and S19 constitute a return step.

これにより、第２実施例は、上記第１実施例と同様な効果を得ることに加え、制御室との通信やＣＣＵ２８からの映像信号の入力或いは周辺装置２２からの生体情報及び周辺装置情報等の入力が有る場合において、ヘルプ表示の表示時間を短くできる。 Thereby, in addition to obtaining the same effect as the first embodiment, the second embodiment communicates with the control room, inputs a video signal from the CCU 28, or biological information and peripheral device information from the peripheral device 22, etc. When there is an input, help display time can be shortened.

従って、第２実施例は、ヘルプ表示により周辺装置２２の状態や生体情報等また、制御室からの支援情報等が隠されてもすぐに前の表示画面に復帰され、これら情報をすぐに得ることが可能となる。 Therefore, in the second embodiment, even if the status of the peripheral device 22 or biological information, or support information from the control room is hidden by the help display, the display is immediately returned to the previous display screen, and the information is obtained immediately. It becomes possible.

なお、第２実施例では信号伝送装置１０４，１１１間の通信回線を公衆回線１０３としたが、通信回線は公衆回線に限定されるものではなく、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）など他の通信回線であってもよい。また、図示してないが、手術室の術者と制御室の支援者とは音声信号の送受も行える。 In the second embodiment, the communication line between the signal transmission apparatuses 104 and 111 is the public line 103. However, the communication line is not limited to the public line, and is not limited to a public line, such as a LAN (Local Area Network) or a WAN (Wide Area Network). Other communication lines may be used. Although not shown, voice signals can be sent and received between the operator in the operating room and the support person in the control room.

また、第１，第２実施例では、医療用の手術システム１及び遠隔手術支援システム１０１に本発明を適用して構成しているが、本発明はこれに限定されず、ヘルプ表示処理が可能な画像表示処理装置であれば、本発明を適用可能である。この場合、画像表示処理装置は、画像表示処理部５７又は５７Ｂとほぼ同様な動作が可能な構成とする。
また、本発明は、以上述べた実施例のみに限定されるものではなく、発明の要旨を逸脱しない範囲で種々変形実施可能である。 In the first and second embodiments, the present invention is applied to the medical operation system 1 and the remote operation support system 101. However, the present invention is not limited to this, and help display processing is possible. The present invention is applicable to any image display processing device. In this case, the image display processing device is configured to be able to perform substantially the same operation as the image display processing unit 57 or 57B.
The present invention is not limited to the embodiments described above, and various modifications can be made without departing from the spirit of the invention.

［付記］
（付記項１）
所定の情報を表示する表示手段と、
前記表示手段に対して、情報処理機能を示す複数のアイコンを表示する表示処理手段と、
前記表示処理手段により表示されたアイコンに関する補足情報の表示を指示する補足情報表示指示手段と、
前記補足情報表示指示手段からの指示により、全てのアイコンに対応する前記情報処理機能に関する補足情報を一度に前記表示手段に対して表示する補足情報表示処理手段と、
を具備したことを特徴とする画像表示処理装置。 [Appendix]
(Additional item 1)
Display means for displaying predetermined information;
Display processing means for displaying a plurality of icons indicating information processing functions on the display means;
Supplementary information display instruction means for instructing display of supplementary information related to the icon displayed by the display processing means;
In accordance with instructions from the supplementary information display instruction means, supplementary information display processing means for displaying supplementary information regarding the information processing function corresponding to all icons on the display means at a time;
An image display processing device comprising:

（付記項２）
前記複数のアイコンと、これら複数のアイコンに対する補足情報とを含む擬似的な操作画面を生成する操作画面生成手段を更に備え、
前記補足情報表示処理手段は、前記補足情報表示指示手段より指示があった際に、前記操作画面生成手段により生成された擬似的な操作画面を、前記表示処理手段により表示された表示画面上に重畳して表示することを特徴とする付記項１に記載の画像表示処理装置。 (Appendix 2)
An operation screen generating means for generating a pseudo operation screen including the plurality of icons and supplementary information for the plurality of icons;
The supplementary information display processing means displays the pseudo operation screen generated by the operation screen generation means on the display screen displayed by the display processing means when instructed by the supplementary information display instruction means. Item 2. The image display processing device according to Item 1, wherein the image display processing device is displayed in a superimposed manner.

（付記項３）
前記補足情報表示処理手段は、前記補足情報を表示して所定の時間が経過した後に、前記補足情報の表示を解除することを特徴とする付記項１及び２に記載の画像表示処理装置。 (Additional Item 3)
The image display processing device according to any one of claims 1 and 2, wherein the supplementary information display processing unit cancels the display of the supplementary information after a predetermined time has elapsed since the supplementary information was displayed.

（付記項４）
所定の情報を表示する表示手段に対して、情報処理機能を示す複数のアイコンを表示する表示処理工程と、
前記表示処理工程により表示されたアイコンに関する補足情報の表示を指示する補足情報表示指示工程と、
前記補足情報表示指示工程からの指示により、全てのアイコンに対応する前記情報処理機能に関する補足情報を一度に前記表示手段に対して表示する補足情報表示処理工程と、
を具備したことを特徴とする画像表示処理方法。 (Appendix 4)
A display processing step for displaying a plurality of icons indicating an information processing function for display means for displaying predetermined information;
A supplementary information display instruction step for instructing display of supplementary information regarding the icon displayed by the display processing step;
In accordance with an instruction from the supplementary information display instruction step, supplemental information display processing step for displaying supplementary information regarding the information processing function corresponding to all icons on the display means at a time;
An image display processing method characterized by comprising:

（付記項５）
前記複数のアイコンと、これら複数のアイコンに対する補足情報とを含む擬似的な操作画面を生成する操作画面生成工程を更に備え、
前記補足情報表示処理工程は、前記補足情報表示指示工程より指示があった際に、前記操作画面生成工程により生成された擬似的な操作画面を、前記表示処理工程により表示された表示画面上に重畳して表示する工程を含むことを特徴とする付記項４に記載の画像表示処理方法。 (Appendix 5)
An operation screen generating step for generating a pseudo operation screen including the plurality of icons and supplementary information for the plurality of icons;
When the supplementary information display processing step is instructed by the supplementary information display instruction step, the pseudo operation screen generated by the operation screen generation step is displayed on the display screen displayed by the display processing step. Item 5. The image display processing method according to Item 4, further comprising a step of displaying the images in a superimposed manner.

（付記項６）
前記補足情報表示処理工程は、前記補足情報を表示して所定の時間が経過した後に、前記補足情報の表示を解除する工程を含むことを特徴とする付記項４及び５に記載の画像表示処理方法。 (Appendix 6)
The supplementary information display processing step includes a step of canceling the display of the supplementary information after a predetermined time has elapsed after the supplementary information is displayed. Method.

（付記項７）
所定の情報を表示する表示手段に対して、情報処理機能を示す複数のアイコンを表示する表示処理ステップと、
前記表示処理ステップにより表示されたアイコンに関する補足情報の表示を指示する補足情報表示指示ステップと、
前記補足情報表示指示ステップからの指示により、全てのアイコンに対応する前記情報処理機能に関する補足情報を一度に前記表示手段に対して表示する補足情報表示処理ステップと、
を具備したことを特徴とする画像表示処理プログラム。 (Appendix 7)
A display processing step for displaying a plurality of icons indicating an information processing function on display means for displaying predetermined information;
A supplementary information display instruction step for instructing display of supplementary information regarding the icon displayed in the display processing step;
In accordance with an instruction from the supplementary information display instruction step, supplemental information display processing step for displaying supplementary information regarding the information processing function corresponding to all icons at once on the display means;
An image display processing program comprising:

（付記項８）
前記複数のアイコンと、これら複数のアイコンに対する補足情報とを含む擬似的な操作画面を生成する操作画面生成ステップを更に備え、
前記補足情報表示処理ステップは、前記補足情報表示指示ステップより指示があった際に、前記操作画面生成ステップにより生成された擬似的な操作画面を、前記表示処理ステップにより表示された表示画面上に重畳して表示するステップを含むことを特徴とする付記項７に記載の画像表示処理プログラム。 (Appendix 8)
An operation screen generating step for generating a pseudo operation screen including the plurality of icons and supplementary information for the plurality of icons;
The supplementary information display processing step displays the pseudo operation screen generated by the operation screen generation step on the display screen displayed by the display processing step when instructed by the supplementary information display instruction step. Item 8. The image display processing program according to Item 7, further comprising a step of displaying the images in a superimposed manner.

（付記項９）
前記補足情報表示処理ステップは、前記補足情報を表示して所定の時間が経過した後に、前記補足情報の表示を解除するステップを含むことを特徴とする付記項７及び８に記載の画像表示処理プログラム。 (Appendix 9)
The supplementary information display processing step includes a step of canceling the display of the supplementary information after a predetermined time has elapsed after the supplementary information is displayed. program.

（付記項１０）
所定の情報を表示する表示手段に対して、情報処理機能を示す複数のアイコンを表示する表示処理手段と、
前記表示処理手段により表示されたアイコンに関する補足情報の表示を指示する補足情報表示指示手段と、
前記補足情報表示指示手段からの指示により、全てのアイコンに対応する前記情報処理機能に関する補足情報を一度に前記表示手段に対して表示する補足情報表示処理手段と、
を具備したことを特徴とする画像表示処理装置。 (Appendix 10)
Display processing means for displaying a plurality of icons indicating information processing functions with respect to display means for displaying predetermined information;
Supplementary information display instruction means for instructing display of supplementary information related to the icon displayed by the display processing means;
In accordance with instructions from the supplementary information display instruction means, supplementary information display processing means for displaying supplementary information regarding the information processing function corresponding to all icons on the display means at a time;
An image display processing device comprising:

第１実施例の画像表示処理装置を備えた手術システムを示す全体構図である。1 is an overall composition showing an operation system provided with an image display processing device of a first embodiment. 図１のシステムコントローラの内部構成を示す回路ブロック図である。FIG. 2 is a circuit block diagram showing an internal configuration of the system controller of FIG. 1. 図１の手術室モニタの表示画面に表示される集中モニタリング画面例である。It is an example of the centralized monitoring screen displayed on the display screen of the operating room monitor of FIG. 図１の手術室モニタの表示画面に表示される画像録画再生画面例である。It is an example of an image recording / reproducing screen displayed on the display screen of the operating room monitor of FIG. 補足情報表示処理のフローチャート例である。It is an example of a flowchart of supplement information display processing. ヘルプ表示画面例である。It is an example of a help display screen. 図６の変形例であるヘルプ表示画面例である。It is the example of a help display screen which is a modification of FIG. 第２実施例の画像表示処理装置を備えた遠隔手術支援システムを示す全体構図である。It is a whole composition which shows the remote surgery assistance system provided with the image display processing apparatus of 2nd Example. 図８のシステムコントローラの内部構成を示す回路ブロック図である。It is a circuit block diagram which shows the internal structure of the system controller of FIG. 第２の補足情報表示処理のフローチャート例である。It is an example of a flowchart of the 2nd supplement information display processing.

Explanation of symbols

１手術システム
２内視鏡システム
２１内視鏡
２２周辺装置
２８ＣＣＵ
３０システムコントローラ
３１手術室モニタ
３４キーボード
３５マウス
５１プロセッサ
５７画像表示処理部
６１Ａ／Ｄ変換部
６２Ｄ／Ａ変換部
６３オーバレイ制御部
６４制御部
６５表示情報生成部
７５操作ボタン（アイコン）
７６ファンクションボタン（アイコン）
７６ｃヘルプボタン
９０ヘルプ表示画面
９１ファンクションボタン用補足情報表示エリア
９２操作ボタン用補足情報表示エリア
代理人弁理士伊藤進 DESCRIPTION OF SYMBOLS 1 Surgical system 2 Endoscope system 21 Endoscope 22 Peripheral device 28 CCU
30 System Controller 31 Operating Room Monitor 34 Keyboard 35 Mouse 51 Processor 57 Image Display Processing Unit 61 A / D Conversion Unit 62 D / A Conversion Unit 63 Overlay Control Unit 64 Control Unit 65 Display Information Generation Unit 75 Operation Button (Icon)
76 Function buttons (icons)
76c Help button 90 Help display screen 91 Supplementary information display area for function buttons 92 Supplementary information display area for operation buttons Agent Attorney Susumu Ito

Claims

Display means for displaying predetermined information;
Display processing means for displaying a plurality of icons indicating information processing functions on the display means;
Supplementary information display instruction means for instructing display of supplementary information related to the icon displayed by the display processing means;
In accordance with instructions from the supplementary information display instruction means, supplementary information display processing means for displaying supplementary information regarding the information processing function corresponding to all icons on the display means at a time;
An image display processing device comprising:

An operation screen generating means for generating a pseudo operation screen including the plurality of icons and supplementary information for the plurality of icons;
The supplementary information display processing means displays the pseudo operation screen generated by the operation screen generation means on the display screen displayed by the display processing means when instructed by the supplementary information display instruction means. The image display processing apparatus according to claim 1, wherein the image display processing apparatus superimposes and displays the image.

3. The image display processing apparatus according to claim 1, wherein the supplementary information display processing unit cancels the display of the supplementary information after a predetermined time has elapsed since the supplementary information was displayed. 4.