JPH08206083A - Image diagnosing device - Google Patents

Image diagnosing device

Info

Publication number
JPH08206083A
JPH08206083A JP7016279A JP1627995A JPH08206083A JP H08206083 A JPH08206083 A JP H08206083A JP 7016279 A JP7016279 A JP 7016279A JP 1627995 A JP1627995 A JP 1627995A JP H08206083 A JPH08206083 A JP H08206083A
Authority
JP
Japan
Prior art keywords
control
operator
virtual
control panel
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7016279A
Other languages
Japanese (ja)
Other versions
JP3499946B2 (en
Inventor
Shinichi Uda
晋一 右田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Healthcare Manufacturing Ltd
Original Assignee
Hitachi Medical Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Medical Corp filed Critical Hitachi Medical Corp
Priority to JP01627995A priority Critical patent/JP3499946B2/en
Publication of JPH08206083A publication Critical patent/JPH08206083A/en
Application granted granted Critical
Publication of JP3499946B2 publication Critical patent/JP3499946B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PURPOSE: To provide a control mechanism to serve for IVR works using an image diagnosing device, with which an operator or any person in care can conduct the measurement control and image changeover control. CONSTITUTION: An operator etc., puts on a head mounted display HMD 1 of see-through type, and its display device 2 displays a virtual operation control board constructed on a computer. The virtual operation control board is provided with a plurality of switches for controlling the operation of an image diagnosing device. The line of view of the operator etc., with HMD is sensed by an eye sensor, and the view line position on the virtual operation control board is measured by an eye sensor measuring control device 7. The view line position is indicated as a view line mark on the control board by a display control device 11, and when the view line position is identical to the position of a specific control switch installed on the control board, a start command for actuation of the selected switch is sent to the image diagnosing device.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】この発明は医療用の画像診断装置
に関し、特に術者又は操作者が実際の制御盤を操作する
ことなく、画像診断装置の計測及び寝台位置や計測系位
置さらには計測画像表示等の制御を行うことが可能な制
御機能を備えた画像診断装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image diagnostic apparatus for medical use, and particularly to measurement of the image diagnostic apparatus and a position of a couch and a measuring system and measurement without operating an actual control panel by an operator or an operator. The present invention relates to an image diagnostic apparatus having a control function capable of controlling image display and the like.

【0002】[0002]

【従来の技術】最近の医療用画像診断装置では、定脳位
手術や各種外科的治療においてインターベンショナルラ
ジオロジー(Interventional Radiology、以下IVRと
いう)と呼ばれる計測画像診断と同時に治療処置を施す
外科的手術手技が行われる機会が多くなってきた。これ
は、従来のように計測中は被検者だけが計測室内にいて
操作者は隣接された操作室で各種計測や計測画像の解析
を行う方法ではなく、計測中の被検者のすぐ近くに医師
等の術者や介添者が配置され各種処置を行うものであ
る。つまり従来からの循環器用X線撮影と同じような操
作がX線CT装置やMRI装置等その他多くの診断装置
で行われるようになっている。
2. Description of the Related Art In recent medical image diagnostic apparatus, surgical operation for performing medical treatment at the same time as measurement image diagnosis called Interventional Radiology (hereinafter referred to as IVR) in constant cerebral position surgery and various surgical treatments. Opportunities for surgical procedures are increasing. This is not a conventional method in which only the subject is in the measurement room during measurement, and the operator does not perform various measurements or analysis of measurement images in the adjacent operation room, but rather in the immediate vicinity of the subject being measured. An operator, such as a doctor, or an attendant is placed in this area to perform various treatments. That is, an operation similar to the conventional X-ray imaging for the circulatory organ is performed in many diagnostic apparatuses such as an X-ray CT apparatus and an MRI apparatus.

【0003】IVR処置において、術者は大部分の時
間、被検者処置(外科的手術等)のため両手がふさが
れ、また感染防止のため診断装置の操作ができない状況
にある。そのため撮影部位位置の変更や患者位置の変更
等は介添者に任せ一々指示を出さねばならず、また処置
の途中で計測を追加したり、画像を参照する場合にも一
々隣接された操作室にいる操作者と連絡を取合って操作
しているため、作業効率も悪く、治療に専念できない。
従って、術者が一人で操作できるIVR装置が望まれて
いる。
In the IVR procedure, most of the time, the operator is occluded in both hands due to the procedure (surgical operation, etc.) of the subject, and the diagnostic apparatus cannot be operated to prevent infection. Therefore, it is necessary to leave the instructions to the caregiver to change the position of the imaged part or the patient's position, and to add measurement during the procedure or refer to the image, it is necessary to move to the adjacent operation room. Since he is in contact with the operator who is operating, he is not able to concentrate on his treatment because his work efficiency is poor.
Therefore, an IVR device that can be operated by an operator alone is desired.

【0004】[0004]

【発明が解決しようとする課題】上記従来技術で述べた
IVR処置には各種計測器や異なるモダリティの診断装
置が被検者の置かれる寝台の周りに配置されることか
ら、充分なスペースがとれず各装置配列が術者から離
れ、操作や画像等の確認がしずらい等の問題も発生して
いる。
In the IVR treatment described in the above-mentioned prior art, various measuring instruments and diagnostic devices of different modalities are arranged around the bed on which the subject is placed, so that a sufficient space can be obtained. Therefore, each device array is separated from the operator, and it is difficult to confirm the operation and images.

【0005】本発明では各種医療用画像診断装置でIV
R手技を行うのに最適で作業効率が良好な制御装置を提
供することを目的とする。
According to the present invention, various medical image diagnostic apparatuses can be used for IV
It is an object of the present invention to provide a control device which is optimal for performing an R procedure and has good work efficiency.

【0006】[0006]

【課題を解決するための手段】上記目的を達成する本発
明の画像診断装置は、表示手段を備え術者又は操作者に
装着されるシースルー型ヘッドマウンテッドディスプレ
イ手段と、画像診断装置の動作制御を行うための複数の
制御スイッチが配置された仮想動作制御盤をヘッドマウ
ンテッドディスプレイ手段の表示手段に表示する手段
と、術者又は操作者の仮想動作制御盤上の視線位置を検
出する手段と、検出する手段からの入力により術者又は
操作者が仮想動作制御盤の特定の制御スイッチを選択し
たことを認識し、仮想動作制御盤上に特定の制御スイッ
チが選択されたことを表示させる手段と、このスイッチ
選択に対応する画像診断装置の動作制御を行う制御信号
を出力する手段とを備えたものである。
An image diagnostic apparatus of the present invention which achieves the above object, includes a see-through head mounted display means equipped with a display means and mounted on an operator or an operator, and operation control of the image diagnostic apparatus. Means for displaying on the display means of the head mounted display means a virtual operation control panel on which a plurality of control switches for performing the operation are provided, and means for detecting the line-of-sight position of the operator or the operator on the virtual operation control panel. Means for recognizing that the operator or the operator has selected a specific control switch of the virtual operation control panel by input from the detecting means, and displaying on the virtual operation control panel that the specific control switch has been selected And means for outputting a control signal for controlling the operation of the image diagnostic apparatus corresponding to the switch selection.

【0007】また本発明の別な態様において画像診断装
置は、表示手段を備え術者又は操作者に装着されるシー
スルー型ヘッドマウンテッドディスプレイ手段と、表示
手段とは別に設けられた第2の表示手段と、画像診断装
置の動作制御を行うための複数の制御スイッチ又は動作
指令が配置された仮想動作制御盤をヘッドマウンテッド
ディスプレイ手段の表示手段及び第2の表示手段に表示
する手段と、術者又は操作者の仮想動作制御盤上の視線
位置を検出する手段と、検出する手段からの入力により
術者又は操作者が仮想動作制御盤の特定の制御スイッチ
又は動作指令を選択したことを認識し、仮想動作制御盤
上に特定の制御スイッチが選択されたことを前記ヘッド
マウンテッドディスプレイ手段の表示手段及び第2の表
示手段に表示させる手段とを備えたものである。
In another aspect of the present invention, an image diagnostic apparatus includes a see-through type head mounted display means equipped with a display means and worn by an operator or an operator, and a second display provided separately from the display means. And a means for displaying a virtual operation control panel on which a plurality of control switches or operation commands for controlling the operation of the image diagnostic apparatus are arranged on the display means of the head mounted display means and the second display means, and Recognizing that the operator or operator selects a specific control switch or operation command of the virtual motion control panel by means of detecting the line-of-sight position on the virtual motion control panel of the operator or the operator. The display means of the head mounted display means and the second display means indicate that the specific control switch is selected on the virtual operation control panel. It is obtained by a means.

【0008】[0008]

【作用】シースルー型ヘッドマウンテッドデイスプレイ
(以下、HMDと略称する)内の表示手段には、コンピ
ュータ上で作成した画像診断装置の動作を規定した複数
の制御スイッチを配置した仮想動作制御盤が表示され
る。HMDを装着した術者又は操作者(以下、術者等と
いう)がHMDの表示手段に表示された仮想動作制御盤
の特定の制御スイッチに視線を合せると、検知手段によ
り視線位置が検知され、視線位置の情報とコンピュータ
内に構築された仮想動作制御盤上の制御スイッチの座標
とから、特定の制御スイッチが選択されたことが認識さ
れる。この特定の制御スイッチの選択は、仮想動作制御
盤上にマーク表示等によって表示されるとともに、この
制御スイッチに対応する装置の動作が行われるように制
御信号を発生する。従って術者等は実際の制御盤を操作
することなく、画像診断装置の操作を行うことができ
る。またHMDはシースルー型であるので、その装着は
術者等が被検者を観察する視野を妨げず、かつ被検者か
らの飛血から術者の顔面と眼球を守ることができる。
The display means in the see-through type head mounted display (hereinafter abbreviated as HMD) displays a virtual operation control panel in which a plurality of control switches for defining the operation of the image diagnostic apparatus created on the computer are arranged. To be done. When an operator or an operator wearing the HMD (hereinafter referred to as an operator, etc.) makes a line of sight with a specific control switch of the virtual motion control panel displayed on the display means of the HMD, the sight line position is detected by the detection means, It is recognized that the specific control switch is selected from the information on the line-of-sight position and the coordinates of the control switch on the virtual motion control panel built in the computer. The selection of the specific control switch is displayed on the virtual operation control panel by a mark display or the like, and a control signal is generated so that the operation of the device corresponding to the control switch is performed. Therefore, the operator or the like can operate the image diagnostic apparatus without operating the actual control panel. Further, since the HMD is a see-through type, the wearing thereof does not hinder the visual field in which the operator or the like observes the examinee, and can protect the operator's face and eyeballs from blood blow from the examinee.

【0009】また仮想動作制御盤は制御スイッチのみな
らず、画像診断装置の動作制御を意味する動作指令(コ
メント)を配置させることができ、この場合にHMDに
表示された仮想動作制御盤の特定の動作指令と術者の視
線が一致すると、この動作指令が選択されたことが第2
の表示装置に表示される。HMDを装着した術者以外の
操作者は、第2の表示装置に表示された動作指令に基づ
き画像診断装置の操作盤を操作する。従って、術者等は
意図する操作を介添者等の他者に指示することができ効
率のよい作業が可能となる。
Further, not only the control switch but also the operation command (comment) that means the operation control of the image diagnostic apparatus can be arranged on the virtual operation control panel, and in this case, the virtual operation control panel displayed on the HMD can be specified. If the operation command of the operator and the operator's line of sight match, the operation command is selected.
Is displayed on the display device. An operator other than the operator who wears the HMD operates the operation panel of the image diagnostic apparatus based on the operation command displayed on the second display device. Therefore, the surgeon or the like can instruct an intended operation to another person such as an attendant, and an efficient work becomes possible.

【0010】[0010]

【実施例】以下、本発明の画像診断装置用制御装置の1
実施例を図面を参照して詳細に説明する。尚、図1は代
表的な医療用画像診断装置としてX線透視撮影装置を示
した。このX線透視装置は、主として被検者が寝かせら
れる寝台装置16と、被検者の所定部位にX線を照射す
るためのスキャナ装置15と、スキャナ15内のX線管
球に高電圧を供給する高電圧発生装置17と、これら各
装置の制御と画像の再構成や解析処理を行う画像処理装
置14と、更に後述する視線による動作制御のための機
構とを備えており、画像処理装置14には患者登録や撮
影条件の入力や画像の解析や装置動作の手順を入力する
ための操作卓13及び表示装置18、19が接続されて
いる。これらX線透視装置の各装置は計測室と操作室と
に分れて配置されており、操作室には操作卓13、画像
処理装置14及び表示装置18が配置され、計測室には
寝台装置16とスキャナ装置15と室内用の表示装置1
9とが配置され、高電圧発生装置17は計測室又は操作
室の近傍に配置されている。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A control device for an image diagnostic apparatus according to the present invention will be described below.
Embodiments will be described in detail with reference to the drawings. Incidentally, FIG. 1 shows an X-ray fluoroscopic imaging apparatus as a typical medical image diagnostic apparatus. This X-ray fluoroscopic apparatus mainly applies a high voltage to a bed device 16 on which the subject lies down, a scanner device 15 for irradiating a predetermined part of the subject with X-rays, and an X-ray tube inside the scanner 15. The image processing apparatus includes a high-voltage generator 17 for supplying the image, an image processing apparatus 14 for controlling each of these apparatuses and for performing image reconstruction and analysis processing, and a mechanism for motion control by a line of sight described later. An operation console 13 and display devices 18, 19 for inputting patient registration, input of imaging conditions, image analysis, and device operation procedures are connected to the device 14. Each of these X-ray fluoroscopy devices is divided into a measurement room and an operation room, and an operation console 13, an image processing device 14, and a display device 18 are arranged in the operation room, and a bed device in the measurement room. 16, a scanner device 15, and an indoor display device 1
9 are arranged, and the high voltage generator 17 is arranged near the measurement room or the operation room.

【0011】スキャナ装置15は、図示しないX線管
球、X線ビーム領域を規制する絞り装置及びX線を測定
するI.I(イメージ・インテンシファイア)装置等が
CアームやUアーム等の各種形状のX線計測系支持機に
取付けられた構成になっている。I.I装置での測定デ
ータは、画像処理装置14に取込まれ、各種補正処理が
なされてTVモニタや液晶型モニタ等の表示装置18に
表示される。この計測画像は計測室内用の表示装置19
にも送り表示される。
The scanner device 15 includes an X-ray tube (not shown), a diaphragm device for restricting the X-ray beam region, and an I.I (image intensifier) device for measuring X-rays such as a C-arm or a U-arm. It is configured to be attached to an X-ray measurement system supporting machine of various shapes. The measurement data of the I.I. device is taken into the image processing device 14, subjected to various correction processes, and displayed on the display device 18 such as a TV monitor or a liquid crystal monitor. This measurement image is a display device 19 for the measurement room.
Will also be sent and displayed.

【0012】本発明の画像診断装置(X線透視装置)
は、装置の制御機構として上記画像処理装置14に加え
て、術者等が計測室内において装置全体を制御可能にす
るための機構を備えている。この機構は、術者等の頭部
に装着され、表示装置2及び術者等の視線位置を検出す
る検出手段であるアイセンサ3〜6を備えたシースルー
型のHMD1と、表示装置2に接続され表示器3に仮想
動作制御盤を表示させるための表示制御装置11と、ア
イセンサに接続されアイセンサからの信号により術者等
の視線位置を計測し、視線位置に対応する信号を発生す
るアイセンサ計測制御装置7と、表示制御装置11及び
アイセンサ計測制御装置7に接続され、アイセンサ計測
制御装置7からの入力に基づき、術者等が仮想動作制御
盤の特定の制御スイッチを選択したことを認識するとと
もに、表示制御装置11を制御して仮想動作制御盤上に
特定の制御スイッチが選択されたことを表示させる仮想
制御盤制御装置8とを備え、さらに視線による制御スイ
ッチの選択を最終的に確認するための補助スイッチ12
が仮想制御盤制御装置8に接続されている。
Image diagnostic apparatus of the present invention (X-ray fluoroscope)
In addition to the above-mentioned image processing device 14 as a control mechanism of the device, is equipped with a mechanism that enables an operator or the like to control the entire device in the measurement room. This mechanism is attached to the head of a surgeon or the like, and is connected to the display device 2 and a see-through HMD 1 having a display device 2 and eye sensors 3 to 6 which are detection means for detecting the line-of-sight position of the surgeon or the like. A display control device 11 for displaying a virtual motion control panel on the display device 3, and an eye sensor measurement control which is connected to the eye sensor, measures the line-of-sight position of an operator or the like by a signal from the eye sensor, and generates a signal corresponding to the line-of-sight position. The device 7 is connected to the display control device 11 and the eye sensor measurement control device 7, and it is recognized that the surgeon or the like has selected a specific control switch of the virtual motion control panel based on the input from the eye sensor measurement control device 7. , A virtual control panel control device 8 for controlling the display control device 11 to display that a specific control switch has been selected on the virtual operation control panel, and further according to the line of sight. Auxiliary switch 12 to confirm the selection of your switch to the final
Are connected to the virtual control panel controller 8.

【0013】シースルー型のHMD1は、ヴァーチャル
リアリティの技術分野において公知のもの(例えば、W
インダストリーズ社から市販)であり、外見的には水中
眼鏡型やヘルメット型をしており術者等の頭に装着され
る。本発明で採用されるHMD1は、HMDの視線正面
方向の一部、例えば下半分が透明なカバーまたはレンズ
等で覆われ前方の視界が可能なようになっており、この
視野の一部(例えば上側)に小型液晶ディスプレイ等の
表示装置2が配置され、表示制御装置11からの映像信
号を受けて画像を表示できるようになっている。図では
表示装置2は1つしか示されていないが、左右に設けて
立体視できるように構成することも可能である。また図
1には示されていないが、眼球と表示装置2の間に視点
調整用の広視野レンズが配置されることが好ましく、こ
のような広視野レンズを配置することにより、小型の表
示面をより大きく、かつより遠方方向(例えば明視距離
20cm程度)に認識できるようにすることができる。
The see-through type HMD1 is well known in the technical field of virtual reality (for example, WMD).
It is commercially available from Industries, Inc., and is externally worn as a glasses-type or helmet-type and is worn on the head of an operator or the like. The HMD 1 employed in the present invention has a part in the front direction of the line of sight of the HMD, for example, the lower half is covered with a transparent cover or lens to enable a forward field of view. A display device 2 such as a small liquid crystal display is arranged on the upper side), and an image can be displayed by receiving a video signal from the display control device 11. Although only one display device 2 is shown in the figure, it is also possible to provide the display device 2 on the left and right sides so as to enable stereoscopic viewing. Although not shown in FIG. 1, it is preferable to dispose a wide-field lens for viewpoint adjustment between the eyeball and the display device 2. By disposing such a wide-field lens, a small display surface can be obtained. Can be recognized in a larger and more distant direction (for example, a clear visual distance of about 20 cm).

【0014】さらにHMD1には術者の視線を検知する
アイセンサ機構を設けてある。このアイセンサとして
は、赤外線センサ、コンタクトレンズに金属パターンを
蒸着して磁気を測定する磁気センサ、眼球を動かすとき
の電位(EOG)を測定する方法等が採用できるが、計
測の正確性及び装置の簡便性の点から赤外線を利用した
イメージセンサが好適であり、図示するアイセンサはこ
れを採用している。即ち、図示するアイセンサ機構は赤
外線を眼球方向に向けて照射する赤外線発光ダイオード
3と、眼球の角膜や網膜から反射されてくる赤外線を反
射するハーフミラー4と、赤外線の反射方向に配置され
た焦点調整用レンズ5と、小型CCDカメラ6とから成
る。この機構では、例えば術者が表示装置2の方向を見
た場合、発光ダイオード3から照射され眼球で反射され
た赤外線は、眼球と表示装置2との間に配置されたハー
フミラー4によりその一部がさらに反射され、焦点調整
用レンズ5を通じて小型CCDカメラ6に入力される。
CCDカメラ6は得られた眼球像データをアイセンサ計
測制御装置7に送る。
Further, the HMD 1 is provided with an eye sensor mechanism for detecting the sight line of the operator. As this eye sensor, an infrared sensor, a magnetic sensor that evaporates a metal pattern on a contact lens to measure magnetism, a method of measuring an electric potential (EOG) when moving an eyeball, or the like can be used. An image sensor using infrared rays is preferable from the viewpoint of simplicity, and the illustrated eye sensor employs this. That is, the illustrated eye sensor mechanism is an infrared light emitting diode 3 that irradiates infrared rays toward the eyeball direction, a half mirror 4 that reflects infrared rays reflected from the cornea and retina of the eyeball, and a focus arranged in the infrared ray reflection direction. It is composed of an adjusting lens 5 and a small CCD camera 6. In this mechanism, for example, when an operator looks in the direction of the display device 2, the infrared light emitted from the light emitting diode 3 and reflected by the eyeball is partially reflected by the half mirror 4 arranged between the eyeball and the display device 2. The portion is further reflected and input to the small CCD camera 6 through the focus adjustment lens 5.
The CCD camera 6 sends the obtained eyeball image data to the eye sensor measurement control device 7.

【0015】アイセンサ計測制御装置7は、CCDカメ
ラ6からの画像データに基づき両眼像の位置関係を解析
して視線方向を判別し、視線方向データとして仮想制御
盤制御装置8に送る。このためアイセンサ計測制御装置
7は、眼球画像を白目と黒目の2値化で単純画像にし、
両眼の黒目位置を解析して視線方向を算出し、表示系の
幾何学関係から視線位置を決定する。
The eye sensor measurement control device 7 analyzes the positional relationship between the binocular images based on the image data from the CCD camera 6 to determine the line-of-sight direction, and sends the line-of-sight direction data to the virtual control panel control device 8. Therefore, the eye sensor measurement control device 7 converts the eyeball image into a simple image by binarizing the white eye and the black eye,
The eye gaze direction is calculated by analyzing the iris positions of both eyes, and the eye gaze position is determined from the geometric relationship of the display system.

【0016】仮想制御盤制御装置8には、X線透視装置
の動作を制御する仮想動作制御盤の仮想モデル10がコ
ンピュータ上で構築されており、この仮想モデルには、
例えば特定の動作を選択し開始させるための複数の動作
開始スイッチ(制御スイッチ)が予め配置されている。
ここで動作の制御とは、基本的には画像診断装置の動作
全ての制御を含むことができ、例えば被検者の位置決め
のための制御として寝台装置16の制御、スキャナ15
の回転やX線管球の位置決めなどの制御、X線照射、撮
影開始又は停止など計測動作の制御、画像制御等を含
む。従って、動作開始スイッチはこれら制御に対応した
機能を有するものとして適当な位置関係で配列される。
制御毎に予め複数の制御面を用意しておいてもよい。
尚、コンピュータ上での仮想モデルの構築は、ヴァーチ
ャルリアリティとして航空機操作シミュレータや3次元
立体ゲーム等に適用されており、「人口現実感」(日刊
工業新聞社発行)や「ヴァーチャルリアリティズ」(技
術評論社発行)等に記載されている。
A virtual model 10 of a virtual motion control panel for controlling the operation of the X-ray fluoroscope is built on the virtual control panel controller 8 on a computer.
For example, a plurality of operation start switches (control switches) for selecting and starting a specific operation are arranged in advance.
Here, the control of the operation can basically include control of all operations of the image diagnostic apparatus. For example, the control of the bed apparatus 16 and the scanner 15 as the control for positioning the subject.
Control such as rotation of the lens and positioning of the X-ray tube, X-ray irradiation, control of measurement operation such as start or stop of imaging, image control, and the like. Therefore, the operation start switches are arranged in an appropriate positional relationship as having a function corresponding to these controls.
A plurality of control surfaces may be prepared in advance for each control.
The construction of a virtual model on a computer is applied as a virtual reality to an aircraft operation simulator, a three-dimensional stereoscopic game, and the like, and "a sense of population" (published by Nikkan Kogyo Shimbun) and "virtual reality" (technique). Published by Hyoronsha) etc.

【0017】また仮想制御盤制御装置8は、アイセンサ
計測制御装置7からの視線位置データに基づき、仮想モ
デルの当該視線位置に相当する位置に視線点マーク映像
モデル9を作成し、これら視線による仮想制御盤モデル
10のスイッチ選択経過モデルをリアルタイムに表示制
御装置11に送っている。表示制御装置11ではスイッ
チ選択経過モデルを映像化するためにTV信号に変換す
る等の処理がなされており、この画像は既に述べたよう
にHMD1の液晶ディスプレイ等の表示装置2で表示さ
れる。即ち、表示装置2にはコンピュータに構築された
制御盤の仮想モデルとこの制御盤の動作開始スイッチが
選択される場合には制御盤上の視線点の位置とがリアル
タイムで表示される。この表示画像は絶えず術者や操作
者に対し正面から見た映像として表示され、術者等はこ
の表示装置2に表示された制御盤及び視線点マークの移
動等を確認しながら、特定の開始スイッチを選択でき
る。
Further, the virtual control panel control device 8 creates a line-of-sight point mark image model 9 at a position corresponding to the line-of-sight position of the virtual model based on the line-of-sight position data from the eye sensor measurement control device 7, and the virtual line-of-sight mark image model 9 is used. The switch selection progress model of the control panel model 10 is sent to the display control device 11 in real time. The display control device 11 performs processing such as conversion into a TV signal in order to visualize the switch selection progress model, and this image is displayed on the display device 2 such as the liquid crystal display of the HMD 1 as described above. That is, the display device 2 displays in real time the virtual model of the control panel built in the computer and the position of the line of sight on the control panel when the operation start switch of this control panel is selected. This display image is constantly displayed as a front view image to the operator or the operator, and the operator or the like confirms the movement of the control panel and the line-of-sight point mark displayed on the display device 2 while starting a specific operation. Switch can be selected.

【0018】更に仮想制御盤制御装置8は、アイセンサ
計測制御装置7からの視線方向データに基づき、仮想動
作制御盤モデル10の各制御スイッチ位置と視点位置と
の一致を判定し、両者の一致判定から特定の制御スイッ
チが意図的に選択されたかを判別する。また、より選択
動作を確実にするためには仮想制御盤制御装置8に補助
スイッチ12を接続し、この補助スイッチ12を意図的
に特定の制御スイッチが選択されたかを判別する過程で
最終確認をするために用いらることができる。このよう
な補助スイッチ12としては、フットスイッチやタッチ
センサ、ジョイスティック等のスイッチを採用すること
ができる。仮想制御盤制御装置8は、上述のような判
定、判別の結果、特定の制御スイッチが意図的に選択さ
れていると判断した場合には、当該スイッチ選択に対応
したX線透視装置の動作制御信号を発生し、X線透視装
置本体(画像処理装置14、スキャナ15、寝台装置1
6等)に動作信号を送り出す。この動作信号により、診
断装置の寝台やスキャナの動き制御、診断装置での画像
の選択や表示画像の変更などの画像制御、さらには計測
制御等基本的には診断装置本体で行う全ての制御を行う
ことが可能である。
Further, the virtual control panel control device 8 determines whether or not each control switch position of the virtual operation control panel model 10 and the viewpoint position match based on the line-of-sight direction data from the eye sensor measurement control device 7, and determines whether they match. Determines whether a particular control switch has been intentionally selected. Further, in order to further ensure the selection operation, an auxiliary switch 12 is connected to the virtual control panel control device 8, and a final confirmation is made in the process of discriminating whether or not a specific control switch is intentionally selected by this auxiliary switch 12. Can be used to As such an auxiliary switch 12, a switch such as a foot switch, a touch sensor, or a joystick can be adopted. When the virtual control panel control device 8 determines that a specific control switch is intentionally selected as a result of the determinations and determinations described above, the operation control of the X-ray fluoroscopic device corresponding to the switch selection is performed. A signal is generated, and the X-ray fluoroscopic apparatus main body (image processing apparatus 14, scanner 15, bed apparatus 1
6), and sends an operation signal. By this operation signal, movement control of the bed and scanner of the diagnostic device, image control such as image selection and display image change in the diagnostic device, and measurement control, etc. are basically performed in the diagnostic device itself. It is possible to do.

【0019】次にこのような構成における動作の一実施
例を図2を参照して説明する。ステップ1では仮想動作
制御盤の視線による制御を機能させる。立ち上げメニュ
ー等は例えばHMD1の表示装置2又は表示装置18、
19に表示し、本体装置の操作卓13又は仮想制御盤制
御装置8を操作して立ち上げる。次にステップ2で所望
する動作メニューの選択を行う。動作メニュー300
は、例えば図3に示すように寝台及びスキャナ装置の制
御、画像制御等の複数の制御スイッチパターンがメニュ
ーとして予め用意されており、ステップ1において仮想
動作制御盤の視線制御が機能すると、この動作メニュー
がHMD1の表示装置2及び/又は表示装置18、19
に表示される。これら各種制御スイッチ配置や組合せメ
ニューは各施設でカスタマイズされ、複数の視線制御ス
イッチ配置の形でモデル化されプロトコル選択が可能な
ようになっている。動作メニューから目的の制御スイッ
チパターン(制御面)を選択するためには、補助スイッ
チ12を動作させ決定してもよく、また操作卓13又は
仮想制御盤制御装置8の入力から行ってもよい。
Next, one embodiment of the operation in such a configuration will be described with reference to FIG. In step 1, the control based on the line-of-sight of the virtual motion control board is made to function. The start-up menu and the like are displayed on the display device 2 or the display device 18 of the HMD 1,
19 is displayed and the console 13 of the main body device or the virtual control panel control device 8 is operated to start up. Next, in step 2, a desired operation menu is selected. Action menu 300
For example, as shown in FIG. 3, a plurality of control switch patterns for controlling the bed and scanner device, image control, and the like are prepared in advance as a menu. When the line-of-sight control of the virtual operation control panel functions in step 1, this operation is performed. The display device 2 and / or the display devices 18 and 19 of which the menu is the HMD 1
Is displayed in. These various control switch arrangements and combination menus are customized at each facility, and are modeled in the form of a plurality of line-of-sight control switch arrangements so that protocols can be selected. In order to select a desired control switch pattern (control surface) from the operation menu, the auxiliary switch 12 may be operated and determined, or may be input from the console 13 or the virtual control panel controller 8.

【0020】このように動作メニューが決定されると、
ステップ3において仮想制御盤制御装置8は仮想制御盤
モデル10の正面図モデルデータを表示制御装置11に
送る。この表示制御装置11ではこのモデルを映像化す
るためにTV信号に変換する等の処理がなされ、この画
像はHMD1の表示装置2及び表示装置18、19で表
示される。例えば動作メニューとして図3の寝台及びス
キャナの制御メニュー301が選択されたとすると、制
御面400には図4に示すように寝台の左右、上下、前
後の移動に対応する動作開始スイッチが配列している。
このような制御面が表示装置2に表示された時点でシー
スルーHMD装着者はHMD視野内に仮想動作制御盤が
設定されたことを確認することができる。
When the operation menu is determined in this way,
In step 3, the virtual control panel control device 8 sends the front view model data of the virtual control panel model 10 to the display control device 11. The display control device 11 performs processing such as conversion to a TV signal in order to visualize this model, and this image is displayed on the display device 2 and the display devices 18 and 19 of the HMD 1. For example, if the control menu 301 of the bed and scanner of FIG. 3 is selected as the operation menu, operation start switches corresponding to the left, right, up, and down movements of the bed are arranged on the control surface 400 as shown in FIG. There is.
When such a control surface is displayed on the display device 2, the see-through HMD wearer can confirm that the virtual motion control panel is set within the HMD field of view.

【0021】一方、HMD1のアイセンサ3〜6からは
常にHMD装着者の眼球の画像データがリアルタイムで
アイセンサ計測制御装置7に送られており、アイセンサ
計測制御装置7はこの画像データから眼球位置の計測を
行い、表示系における視線位置を決定し、仮想制御盤制
御装置8に視線位置データを転送している(ステップ
4)。
On the other hand, from the eye sensors 3 to 6 of the HMD 1, image data of the eyeball of the HMD wearer is always sent to the eye sensor measurement control device 7 in real time, and the eye sensor measurement control device 7 measures the eyeball position from this image data. Then, the line-of-sight position in the display system is determined, and the line-of-sight position data is transferred to the virtual control panel controller 8 (step 4).

【0022】仮想制御盤制御装置8は、ステップ4で測
定した視線位置を現在選択されている仮想制御盤モデル
10の制御面上の視線位置に相当する箇所に視線マーク
像9を配置し、この画像を表示制御装置11を介して表
示装置2に表示する(ステップ5)。ステップ4におけ
るアイセンサ測定装置7における視線位置の計測は定期
的に繰り返され、ステップ5においてほぼリアルタイム
で視線位置が表示されることになる。
The virtual control panel control device 8 arranges the line-of-sight mark image 9 at the position corresponding to the line-of-sight position on the control surface of the currently selected virtual control panel model 10 from the line-of-sight position measured in step 4. The image is displayed on the display device 2 via the display control device 11 (step 5). The measurement of the line-of-sight position by the eye sensor measuring device 7 in step 4 is periodically repeated, and the line-of-sight position is displayed in step 5 in almost real time.

【0023】ステップ6では、仮想制御盤制御装置8は
このようにアイセンサ測定装置7からリアルタイムで転
送される位置データに基づき、視線位置が仮想制御盤1
0配置領域にあるかどうかチェックして領域外ならチェ
ックを繰り返し、領域内ならばステップ7に移行する。
これにより実際の視線制御機能が動作されたことなる。
In step 6, the virtual control panel control device 8 determines the line-of-sight position based on the position data thus transferred from the eye sensor measuring device 7 in real time.
It is checked whether or not it is in the 0 arrangement area, and if it is outside the area, the check is repeated.
This means that the actual line-of-sight control function has been operated.

【0024】ステップ7では仮想制御盤制御装置8が視
線位置が仮想制御盤モデル上のどのスイッチ位置にある
かを判別する。この際、表示装置2で視線で選択した位
置が特定のスイッチ部にあることを示すために、画像モ
デルデータはそのスイッチ部のみを点灯する、或いはそ
の明るさや色を変化させることが好ましい。このため仮
想制御盤制御装置8は、視線が留まったスイッチ部の点
灯や明るさ変化又は色を変えた画像モデルデータに変更
して表示制御装置11に送り表示装置2に表示させる。
図4では制御盤の寝台の上方移動のスイッチ401が点
灯している。このように表示装置2のスイッチ状態が変
化した画像を見て、HMD装着者は現在選択されている
スイッチを確認することができる。
In step 7, the virtual control panel controller 8 determines which switch position on the virtual control panel model the line-of-sight position is. At this time, in order to indicate that the position selected by the line of sight on the display device 2 is located in a specific switch section, it is preferable that only the switch section of the image model data is turned on or its brightness and color are changed. Therefore, the virtual control panel control device 8 changes to image model data in which lighting of the switch part in which the line of sight is stopped, brightness change, or color change, and the image data is sent to the display control device 11 to be displayed on the display device 2.
In FIG. 4, the switch 401 for upward movement of the bed of the control panel is lit. By seeing the image in which the switch state of the display device 2 has changed in this way, the HMD wearer can confirm the switch currently selected.

【0025】制御内容によっては表示装置2に表示され
る仮想動作制御盤のモデルは複数枚用意されており、制
御パネル面を順次切り替えて入力操作が可能になってい
る。例えば、「寝台装置の移動」の動作開始スイッチが
選択されると、次いで寝台装置の移動の方向や量を示す
動作開始スイッチが配列した仮想動作制御盤が表示さ
れ、この新たに表示された仮想動作制御盤の所定の動作
開始スイッチを選択することができる。
Depending on the control content, a plurality of models of the virtual operation control panel displayed on the display device 2 are prepared, and the input operation is possible by sequentially switching the control panel surface. For example, when the operation start switch for "moving the couch device" is selected, a virtual operation control panel on which the operation start switches indicating the direction and amount of movement of the couch device are arranged is displayed, and the newly displayed virtual display is displayed. A predetermined operation start switch of the operation control board can be selected.

【0026】ステップ8では、選択されたスイッチの装
置動作開始に先立って、現在選択された制御盤上のスイ
ッチがセンサ装着者の意思によって選択されていること
を確認する。これは、偶発的な選択動作での装置の誤動
作を防ぐためである。選択スイッチの決定のための方法
としては以下例示するような種々の方法が考えられる。
In step 8, it is confirmed that the currently selected switch on the control panel is selected by the sensor wearer's intention prior to the start of the device operation of the selected switch. This is to prevent malfunction of the device due to accidental selection operation. As a method for determining the selection switch, various methods as exemplified below can be considered.

【0027】第1の方法は、視線位置と選択制御スイッ
チ位置との一致がある一定期間以上連続している場合に
のみ、そのスイッチの機能を開始する方法(連続期間指
定方法という)である。第2の方法は、第1の連続期間
指定方法でスイッチが選択された後、さらに別の開始ス
イッチが続けて選択されることにより、先に選択された
動作開始スイッチの機能が開始するようにする。この場
合、開始スイッチの選択は同一仮想制御面に設定されて
ある開始スイッチ402を続けて視線により選択するよ
うにしてもよいし、外部の補助スイッチ12によりこの
別の開始スイッチの機能をに割当てて制御してもよい。
The first method is a method of starting the function of the switch only when the line-of-sight position and the position of the selection control switch are continuous for a certain period or more (referred to as a continuous period designation method). In the second method, after the switch is selected by the first continuous period designating method, another start switch is continuously selected so that the function of the operation start switch previously selected is started. To do. In this case, the start switch may be selected by continuously selecting the start switch 402 set on the same virtual control plane, or the function of this different start switch may be assigned to the start switch 402 by the external auxiliary switch 12. You may control it.

【0028】ステップ9では、仮想制御盤制御装置8は
ステップ8の装置動作開始命令を受けて、画像診断装置
の全般的な制御を司どる画像処理装置14に動作命令
(制御信号)を送る。なお命令信号が寝台の上下動等の
装置全体の制御に関係ないような動作においては、寝台
装置16自体に直接制御命令を出すように構成すること
も可能である。
In step 9, the virtual control panel control device 8 receives the device operation start command in step 8 and sends an operation command (control signal) to the image processing device 14 which controls the overall control of the image diagnostic device. It should be noted that it is possible to directly issue a control command to the bed apparatus 16 itself in an operation in which the command signal is not related to control of the entire apparatus such as vertical movement of the bed.

【0029】ステップ10ではこの動作命令を受けて、
操作卓13等による制御と同様に命令に基づく動作が行
われる。ステップ11では引き続き仮想視線制御での制
御を行う場合はステップ6に戻り、ステップ6〜ステッ
プ11までの動作を繰り返す。この仮想制御盤での制御
を終了する場合には、上記のスイッチ選択手順と同じ方
法で制御面に配置された終了スイッチ403を選択し、
動作メニュー300を表示させて、その終了メニュー3
02を選択して終了キー等を実行するようにしてもよい
し、本体操作卓13で終了命令を入力して仮想制御盤で
の制御機能を終了してもよい。
In step 10, in response to this operation command,
Similar to the control by the console 13 or the like, the operation based on the command is performed. In step 11, if control is continued by virtual line-of-sight control, the process returns to step 6 and the operations of steps 6 to 11 are repeated. When ending the control on this virtual control panel, the end switch 403 arranged on the control surface is selected by the same method as the above switch selection procedure,
Display the operation menu 300, and the end menu 3
02 may be selected and the end key or the like may be executed, or an end command may be input at the main body operation console 13 to end the control function of the virtual control panel.

【0030】このように本構成での操作方法においては
術者が装置を直接触らないで、診断装置の操作卓13で
のパネル操作や入力操作と同じ入力操作を仮想制御盤上
で制御することが可能になる。次に本発明による動作の
第2の実施例を図5を参照して説明する。この第2の実
施例が適用される画像診断装置は図1の構成とほぼ同様
であるが、この場合には図1の画像表示装置11に、第
2の表示装置として液晶ディスプレイや液晶プロジェク
タ又はTVモニタ等の外部モニタを接続する。この外部
モニタを計測室内または操作室側に設置してHMDの表
示と同一の画像を表示し、HMD装着者によるスイッチ
選択や動作指令を計測室内または操作室側にいる操作者
や介添え者に知らせるようにしている。操作者あるいは
介添え者はこの表示によりHMD装着者の意向に沿って
装置の制御のための操作を行う。
As described above, in the operation method of this configuration, the operator does not directly touch the device, and the same input operation as the panel operation or the input operation on the console 13 of the diagnostic device is controlled on the virtual control panel. Will be possible. Next, a second embodiment of the operation according to the present invention will be described with reference to FIG. The image diagnostic apparatus to which the second embodiment is applied is almost the same as the configuration of FIG. 1, but in this case, the image display apparatus 11 of FIG. Connect an external monitor such as a TV monitor. This external monitor is installed in the measurement room or the operation room side to display the same image as the display of the HMD, and informs the operator or the attendant in the measurement room or the operation room side of the switch selection and the operation command by the HMD wearer. I am trying. By this display, the operator or the caregiver performs an operation for controlling the device according to the intention of the HMD wearer.

【0031】即ち、第2の実施例においてはステップ1
〜3までは第1の実施例と同様であるが、動作メニュー
の選択によりHMDの表示装置2に表示される制御面
は、制御スイッチの配列した制御盤のみならず、予め予
想される術者のメッセージ(動作指令)を配列したもの
であってもよい。制御面における特定のメッセージの選
択は、第1の実施例のステップ4〜7と同様に行われ
る。即ち、HMDのアイセンサは常にHMD装着者の視
線を検出し、この視線位置が制御面の領域の特定のメッ
セージの位置に一致すると、そのメッセージの部分が点
灯するか、色や明るさを変えて表示装置2に表示され
る。この表示は、計測室内または操作室側に設置された
外部モニタにも表示されるので、操作者あるいは介添え
者はこの外部モニタの表示によりHMD装着者である術
者の指令を読取り、この指令に従って必要な装置の動作
開始操作を操作卓13或いは仮想動作制御盤制御装置8
を操作して行う(ステップ8)。
That is, in the second embodiment, step 1
Up to 3 are the same as those in the first embodiment, but the control surface displayed on the display device 2 of the HMD by the selection of the operation menu is not only the control panel in which the control switches are arranged, but also the operator expected in advance. The message (operation command) may be arranged. The selection of the specific message on the control side is performed in the same manner as steps 4 to 7 of the first embodiment. That is, the eye sensor of the HMD always detects the line of sight of the HMD wearer, and when this line of sight coincides with the position of a specific message in the area of the control surface, the part of the message is turned on or the color or brightness is changed. It is displayed on the display device 2. Since this display is also displayed on the external monitor installed in the measurement room or the operation room side, the operator or caregiver reads the command of the operator who is the HMD wearer by the display on this external monitor, and follows this command. The operation start operation of the necessary device is performed by the operation console 13 or the virtual operation control panel control device 8
Is operated (step 8).

【0032】このように第2の実施例では、図2に示す
実施例のステップ8、9の代わりにHMD装着者以外の
者がHMD装着者の意向を受けて実際の操作盤の制御を
行い、その後は図2のステップ10、11と同様のステ
ップ(9、10)を経て視線制御による制御機能を繰り
返すか又は終了する。以上の実施例では、現在診断に使
っている装置自体を仮想制御盤によって動作制御する場
合について説明したが、本発明の制御装置は仮想制御機
構を異なるモダリティの複数の診断装置に組合せて用い
ることも可能である。例えばX線透視装置とCT装置と
を組合せた診断装置において、上述のようにX線透視装
置を仮想制御機構で制御するのみならず、そのすぐ近傍
に配置したCT装置の動作をも制御し、表示装置2、1
8の近傍に配置されたCT装置の画像表示装置とX線透
視装置の計測画像とを合せて見ながらIVR処置を行う
ことができ、その場合仮想CT用操作卓表示を見ながら
CT画像制御して、CT画像を切り替えてCT画像を参
照しながらIVR処置を行うなど、種々の組合せ適用が
できる。
As described above, in the second embodiment, instead of the steps 8 and 9 of the embodiment shown in FIG. 2, a person other than the HMD wearer controls the actual operation panel according to the intention of the HMD wearer. After that, through the steps (9, 10) similar to the steps 10, 11 of FIG. 2, the control function by the line-of-sight control is repeated or finished. In the above embodiments, the case where the device itself currently used for diagnosis is controlled by the virtual control panel has been described, but the control device of the present invention uses the virtual control mechanism in combination with a plurality of diagnostic devices of different modalities. Is also possible. For example, in a diagnostic apparatus in which an X-ray fluoroscopic apparatus and a CT apparatus are combined, not only the X-ray fluoroscopic apparatus is controlled by the virtual control mechanism as described above, but also the operation of the CT apparatus arranged in the immediate vicinity thereof is controlled. Display device 2, 1
The IVR treatment can be performed while viewing the image display device of the CT device arranged near 8 and the measurement image of the X-ray fluoroscope together. In that case, the CT image control is performed while watching the virtual CT console display. Then, various combinations can be applied such as switching the CT images and performing the IVR treatment while referring to the CT images.

【0033】さらに本発明の画像診断装置用制御装置
は、X線透視装置、CT装置のみならずMRI装置や超
音波診断装置などあらゆる画像診断装置に適用すること
ができる。
Further, the control device for an image diagnostic apparatus of the present invention can be applied not only to an X-ray fluoroscopic apparatus and a CT apparatus but also to any image diagnostic apparatus such as an MRI apparatus and an ultrasonic diagnostic apparatus.

【0034】[0034]

【発明の効果】以上の実施例からも明らかなように本発
明の画像診断装置によれば、ヴァーチャルリアリティの
手法を取入れ、術者等にシースルー型ヘッドマンテッド
ディスプレイを装着させるととも装着者の視線方向を検
出するアイセンサを備えることにより、ヘッドマンテッ
ドディスプレイの表示装置に表示される仮想動作制御盤
の特定の制御スイッチを術者が見ることによって装置の
制御を行えるようにしたので、IVR処理などにおいて
術者や介添者一人で計測制御や画像切り替え制御が可能
になり、治療作業の中断が行われずに効率のよい計測操
作が可能になる。また操作動作において術者が直接装置
に触れないため、装置の汚染や付着した血液による感染
が防止される。
As is apparent from the above embodiments, according to the image diagnostic apparatus of the present invention, the virtual reality technique is adopted, and the operator or the like wears the see-through headmanted display and By providing an eye sensor for detecting the line-of-sight direction, the operator can control the device by viewing a specific control switch of the virtual operation control panel displayed on the display device of the headmanted display. In such a case, the operator or the caretaker can perform the measurement control and the image switching control, and the efficient measurement operation can be performed without interrupting the treatment work. In addition, since the operator does not directly touch the device during the operation, the device is prevented from being contaminated or infected by the adhered blood.

【0035】さらにこのような仮想動作制御盤を制御す
る制御装置は、本来あるべき操作者周りのスペースを必
要とせず、IVR等に必要な各種計測装置周辺及び床面
のスペースを治療作業や治療装置スペースとして有効利
用でき作業性も向上でき、より治療に専念した作業が可
能となる。またシースルー型ヘッドマンテッドディスプ
レイの装着により術者の被検者を観察する視野を妨げ
ず、かつ被検者からの飛び血から術者の顔面と眼球を守
ことができる。
Further, the control device for controlling such a virtual operation control panel does not require the space around the operator as it should be, and the space around the various measuring devices and floor space necessary for the IVR or the like is treated or treated. It can be effectively used as a device space, workability can be improved, and work more devoted to treatment can be performed. Further, by mounting the see-through type headmanted display, it is possible to protect the operator's face and eyes from the blood bleeding from the patient without hindering the field of view of the operator to observe the patient.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明による画像診断装置の1実施例を示す構
成図。
FIG. 1 is a configuration diagram showing an embodiment of an image diagnostic apparatus according to the present invention.

【図2】図1の制御装置による動作を示すフロー図。FIG. 2 is a flowchart showing an operation by the control device of FIG.

【図3】視線制御による動作メニューの一例を示す図。FIG. 3 is a diagram showing an example of an operation menu based on line-of-sight control.

【図4】仮想動作制御盤の制御スイッチの配列の一例を
示す図。
FIG. 4 is a diagram showing an example of an arrangement of control switches of a virtual operation control panel.

【図5】図1の制御装置による動作を示すフロー図。5 is a flowchart showing an operation by the control device of FIG.

【符号の説明】[Explanation of symbols]

1・・・・・・ヘッドマンテッドディスプレイ(HMD) 2・・・・・・表示装置 3・・・・・・赤外線発光ダイオード(検出する手段) 7・・・・・・アイセンサ計測装置(検出する手段) 8・・・・・・仮想動作制御盤制御装置(表示させる手段、制
御信号を出力する手段) 11・・・・・・表示制御装置(表示する手段) 12・・・・・・補助スイッチ 13・・・・・・操作卓 14・・・・・・画像処理装置 15・・・・・・スキャナ装置 16・・・・・・寝台装置 17・・・・・・高電圧発生装置
1 ... Headmanted display (HMD) 2 ... Display device 3 ... Infrared light emitting diode (detection means) 7 ... Eye sensor measuring device (detection) Means for displaying 8 ... Virtual control panel controller (means for displaying, means for outputting control signal) 11 ... display controller (means for displaying) 12 .. Auxiliary switch 13 ・ ・ Operating console 14 ・ ・ ・ ・ ・ ・ Image processing device 15 ・ ・ ・ ・ ・ ・ Scanner device 16 ・ ・ ・ ・ ・ ・ Bed device 17 ・ ・ ・ ・ ・ ・ High voltage generator

Claims (2)

【特許請求の範囲】[Claims] 【請求項1】表示手段を備え術者又は操作者に装着され
るシースルー型ヘッドマウンテッドディスプレイ手段
と、画像診断装置の動作制御を行うための複数の制御ス
イッチが配置された仮想動作制御盤を前記ヘッドマウン
テッドディスプレイ手段の表示手段に表示する手段と、
前記術者又は操作者の仮想動作制御盤上の視線位置を検
出する手段と、前記検出する手段からの入力により前記
術者又は操作者が前記仮想動作制御盤の特定の制御スイ
ッチを選択したことを認識し、前記仮想動作制御盤上に
前記特定の制御スイッチが選択されたことを表示させる
手段と、このスイッチ選択に対応する画像診断装置の動
作制御を行う制御信号を出力する手段とを備えたことを
特徴とする画像診断装置。
1. A virtual operation control panel comprising a see-through type head mounted display means having a display means to be mounted on an operator or an operator, and a plurality of control switches for controlling the operation of an image diagnostic apparatus. Means for displaying on the display means of the head mounted display means,
Means for detecting the line-of-sight position of the operator or operator on the virtual motion control panel, and the operator or operator selecting a specific control switch of the virtual motion control panel by input from the detecting means. And a means for displaying on the virtual operation control panel that the specific control switch has been selected, and a means for outputting a control signal for controlling the operation of the image diagnostic apparatus corresponding to the switch selection. An image diagnostic apparatus characterized in that
【請求項2】表示手段を備え術者又は操作者に装着され
るシースルー型ヘッドマウンテッドディスプレイ手段
と、前記表示手段とは別に設けられた第2の表示手段
と、画像診断装置の動作制御を行うための複数の制御ス
イッチ又は動作指令が配置された仮想動作制御盤を前記
ヘッドマウンテッドディスプレイ手段の表示手段及び第
2の表示手段に表示する手段と、前記術者又は操作者の
仮想動作制御盤上の視線位置を検出する手段と、前記検
出する手段からの入力により前記術者又は操作者が前記
仮想動作制御盤の特定の制御スイッチ又は動作指令を選
択したことを認識し、前記仮想動作制御盤上に前記特定
の制御スイッチが選択されたことを前記ヘッドマウンテ
ッドディスプレイ手段の表示手段及び第2の表示手段に
表示させる手段とを備えたことを特徴とする画像診断装
置。
2. A see-through type head mounted display means having a display means to be worn by an operator or an operator, a second display means provided separately from the display means, and operation control of an image diagnostic apparatus. Means for displaying a virtual operation control panel on which a plurality of control switches or operation commands for performing are arranged on the display means and the second display means of the head mounted display means, and virtual operation control of the operator or operator Means for detecting the line-of-sight position on the board, and recognizing that the operator or operator has selected a specific control switch or operation command of the virtual operation control board by input from the detecting means, and the virtual operation A display means of the head mounted display means and a means for displaying the selection of the specific control switch on the control panel. Diagnostic imaging apparatus characterized by a.
JP01627995A 1995-02-02 1995-02-02 Diagnostic imaging device Expired - Fee Related JP3499946B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP01627995A JP3499946B2 (en) 1995-02-02 1995-02-02 Diagnostic imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP01627995A JP3499946B2 (en) 1995-02-02 1995-02-02 Diagnostic imaging device

Publications (2)

Publication Number Publication Date
JPH08206083A true JPH08206083A (en) 1996-08-13
JP3499946B2 JP3499946B2 (en) 2004-02-23

Family

ID=11912117

Family Applications (1)

Application Number Title Priority Date Filing Date
JP01627995A Expired - Fee Related JP3499946B2 (en) 1995-02-02 1995-02-02 Diagnostic imaging device

Country Status (1)

Country Link
JP (1) JP3499946B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009022602A (en) * 2007-07-20 2009-02-05 Canon Inc Apparatus and method for acquiring radiograph
JP2011167295A (en) * 2010-02-17 2011-09-01 Shimadzu Corp Radiographic apparatus
JP2014113209A (en) * 2012-12-06 2014-06-26 Toshiba Corp X-ray diagnostic apparatus and control program
WO2014103193A1 (en) 2012-12-27 2014-07-03 ソニー株式会社 Endoscopic surgery assistance system and method for controlling image
CN104414669A (en) * 2013-08-22 2015-03-18 上海联影医疗科技有限公司 Computed tomography system and method
JP2016214677A (en) * 2015-05-22 2016-12-22 オリンパス株式会社 Medical system
WO2017038241A1 (en) * 2015-08-28 2017-03-09 富士フイルム株式会社 Instrument operation device, instrument operation method, and electronic instrument system
WO2018235153A1 (en) * 2017-06-20 2018-12-27 オリンパス株式会社 Endoscope system, display method, and program

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009022602A (en) * 2007-07-20 2009-02-05 Canon Inc Apparatus and method for acquiring radiograph
JP2011167295A (en) * 2010-02-17 2011-09-01 Shimadzu Corp Radiographic apparatus
JP2014113209A (en) * 2012-12-06 2014-06-26 Toshiba Corp X-ray diagnostic apparatus and control program
WO2014103193A1 (en) 2012-12-27 2014-07-03 ソニー株式会社 Endoscopic surgery assistance system and method for controlling image
US10134185B2 (en) 2012-12-27 2018-11-20 Sony Corporation Endoscopic surgery assisting system using head-mounted displays and associated methodology
CN104414669A (en) * 2013-08-22 2015-03-18 上海联影医疗科技有限公司 Computed tomography system and method
JP2016214677A (en) * 2015-05-22 2016-12-22 オリンパス株式会社 Medical system
WO2017038241A1 (en) * 2015-08-28 2017-03-09 富士フイルム株式会社 Instrument operation device, instrument operation method, and electronic instrument system
US10506913B2 (en) 2015-08-28 2019-12-17 Fujifilm Corporation Apparatus operation device, apparatus operation method, and electronic apparatus system
WO2018235153A1 (en) * 2017-06-20 2018-12-27 オリンパス株式会社 Endoscope system, display method, and program

Also Published As

Publication number Publication date
JP3499946B2 (en) 2004-02-23

Similar Documents

Publication Publication Date Title
JP7112471B2 (en) Augmented Reality Headset with Varying Opacity for Navigated Robotic Surgery
JP7216768B2 (en) Utilization and Communication of 2D Digital Imaging in Medical Imaging in 3D Extended Reality Applications
CN106102633B (en) For remotely operating the structural adjustment system and method for medical system
KR101621603B1 (en) Radiation control and minimization system and method
US20210346098A1 (en) Extended reality headset tool tracking and control
KR102404559B1 (en) Medical devices, systems, and methods using eye gaze tracking
US20210169581A1 (en) Extended reality instrument interaction zone for navigated robotic surgery
CN109478346A (en) It is experienced using the ophthalmologic operation that virtual reality head-mounted display enhances
JP3550966B2 (en) Surgical equipment
JP2008529707A (en) Automatic control of medical equipment
US11690697B2 (en) Displaying a virtual model of a planned instrument attachment to ensure correct selection of physical instrument attachment
JP5017004B2 (en) Radiation image acquisition apparatus and method
US20210169605A1 (en) Augmented reality headset for navigated robotic surgery
JP6139118B2 (en) X-ray diagnostic apparatus and control program
JP2022551642A (en) Gaze detection-based smart glasses display device
JP2001070293A (en) Radio-diagnostic device
JP3499946B2 (en) Diagnostic imaging device
JPH0984000A (en) Picture display system
JP7282816B2 (en) Extended Reality Instrument Interaction Zones for Navigated Robotic Surgery
US20210251717A1 (en) Extended reality headset opacity filter for navigated surgery
JP2008110200A (en) X-ray diagnostic apparatus and x-ray diagnostic system
JP7042029B2 (en) Ophthalmic observation device and its operation method
JP4436495B2 (en) Surgical observation system
JP3575848B2 (en) Control device for diagnostic imaging device
KR20210042784A (en) Smart glasses display device based on eye tracking

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20031118

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091205

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101205

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101205

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111205

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111205

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121205

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131205

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees