JP2008029694A - Image processor and medical diagnostic apparatus with image processor - Google Patents

Image processor and medical diagnostic apparatus with image processor Download PDF

Info

Publication number
JP2008029694A
JP2008029694A JP2006208152A JP2006208152A JP2008029694A JP 2008029694 A JP2008029694 A JP 2008029694A JP 2006208152 A JP2006208152 A JP 2006208152A JP 2006208152 A JP2006208152 A JP 2006208152A JP 2008029694 A JP2008029694 A JP 2008029694A
Authority
JP
Japan
Prior art keywords
obstacle
area
guide
image
viewpoint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006208152A
Other languages
Japanese (ja)
Other versions
JP5170993B2 (en
Inventor
Kensuke Shinoda
健輔 篠田
Tomoji Wakai
智司 若井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Priority to JP2006208152A priority Critical patent/JP5170993B2/en
Publication of JP2008029694A publication Critical patent/JP2008029694A/en
Application granted granted Critical
Publication of JP5170993B2 publication Critical patent/JP5170993B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processor removing an obstacle entering in a visibility secured area between a view point and the observation object, guidingly displaying the removed obstacle, and allowing a user to easily observe the observation object while clarifying the positional relationship between the observation object and the removed obstacle and to provide a medical diagnostic apparatus mounted with the image processor. <P>SOLUTION: This image processor is provided with an obstacle determination means 2b setting an area V securing the visibility from the view point P to the observation object X and determining an area included in the visibility secured area V as the obstacle B, a guide means (ca) creating a guide indicating the area determined as the obstacle B by the obstacle determination means 2b and displaying it, and an image generation means 2d non-showing the obstacle B based on the information from the obstacle determination means 2b, composing it by superimposing the guide image from the guide means 2c on the area of the obstacle B which is not shown, and generating the image in the visibility secured area V. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、医用画像の画像処理を行う画像処理装置及び該画像処理装置を備える医用診断装置に関する。   The present invention relates to an image processing apparatus that performs image processing of medical images and a medical diagnostic apparatus that includes the image processing apparatus.

近年の医用画像の分野で使用される画像処理装置は、X線診断装置やCT(Computed Tomography:コンピュータ断層撮影)装置、超音波診断装置、磁気共鳴診断装置、及びガンマカメラやPET(Positron-Emission Tomography:ポジトロン放出断層撮影)等の医用診断装置と組み合わせて使用され、多くの医療機関に導入されるようになっている。   Image processing apparatuses used in the field of medical images in recent years include X-ray diagnostic apparatuses, CT (Computed Tomography) apparatuses, ultrasonic diagnostic apparatuses, magnetic resonance diagnostic apparatuses, gamma cameras, and PET (Positron-Emission). It is used in combination with medical diagnostic equipment such as Tomography (positron emission tomography), and has been introduced into many medical institutions.

この画像処理装置における三次元画像処理の方法について簡単に説明すると、まず、医用診断装置により収集された断層画像から生成されたボリュームデータが配置された三次元ボリューム空間において、ユーザの位置となる視点と、当該視点からボリューム空間に対する観察方向とが設定される。そして、設定された視点から、観察対象のボリュームデータに向かってレイをのばし、所定のレンダリング処理を行うことで、ユーザは三次元ボリュームデータを二次元投影面上の二次元画像として見ることができる。   The 3D image processing method in this image processing apparatus will be briefly described. First, the viewpoint that is the user's position in the 3D volume space in which the volume data generated from the tomographic images collected by the medical diagnostic apparatus is arranged. And an observation direction with respect to the volume space from the viewpoint. The user can view the three-dimensional volume data as a two-dimensional image on the two-dimensional projection plane by extending the ray from the set viewpoint to the volume data to be observed and performing a predetermined rendering process. .

また、上述した画像処理の応用として、フライスルー(Flythrough)方法がある。これは、上述した視点の位置を移動や観察方向とともに光源を移動させることで、ユーザがあたかも仮想環境内を移動している印象を与えることができる方法である。   As an application of the above-described image processing, there is a flythrough method. This is a method by which the user can give the impression that the user is moving in the virtual environment by moving the light source together with the movement of the viewpoint and the observation direction.

このような画像処理を使用して検査、診断が行われるが、例えば、観察対象が他の組織や血管等と重畳した位置関係にある場合、すなわち、設けられた視点の位置から見て他の組織や血管等の奥に観察対象が存在する場合、所望の距離間隔と姿勢で観察することができず、必要とする画像を表示させることが困難であった。   Examination and diagnosis are performed using such image processing. For example, when the observation target is in a positional relationship superimposed with another tissue, blood vessel, or the like, that is, when viewed from the position of the provided viewpoint, When an observation target is present behind a tissue or blood vessel, it cannot be observed at a desired distance interval and posture, and it is difficult to display a necessary image.

このように観察対象の手前に存在して観察に支障のある部位や観察対象ではない部位(以下、「障害物」と言う。)については、クリッピング処理を施して完全に非表示としたり、或いは透明度を調整して当該障害物を視野から取り除く方法が提案されている(特許文献1参照)。さらに、観察対象が腸のような管状の組織の場合には、組織を展開し平面に変形させることで、管の内部を観察する方法もある。
特開2001−84409号公報
As described above, a portion that is present in front of the observation target and has a trouble in observation or a portion that is not the observation target (hereinafter referred to as “obstacle”) is subjected to clipping processing so as to be completely hidden, or A method of adjusting the transparency to remove the obstacle from the field of view has been proposed (see Patent Document 1). Furthermore, when the observation target is a tubular tissue such as the intestine, there is a method of observing the inside of the tube by expanding the tissue and deforming it into a flat surface.
JP 2001-84409 A

しかしながら、上記特許文献1において提案されている方法では、障害物が不透明な表示として残ってしまうこともあり、このような表示を完全になくすには障害物についての透明度を細かく設定しなければならず手間がかかる。   However, in the method proposed in Patent Document 1, an obstacle may remain as an opaque display. To completely eliminate such a display, the transparency of the obstacle must be set in detail. It takes time and effort.

また、当該障害物を完全に非表示とする方法や、組織を展開する方法は、観察対象のみを観察するには都合が良いが、観察対象とその周辺の組織との位置関係が不明となってしまったり、画像に歪みが出てしまうため、むしろ観察対象を観察するには不都合なことも多い。   In addition, the method of completely hiding the obstacle and the method of expanding the tissue are convenient for observing only the observation target, but the positional relationship between the observation target and the surrounding tissue is unclear. In other words, the image is distorted and the image is distorted.

本発明は上記課題を解決するためになされたものであり、本発明の目的は、視点と観察対象との間にあって視界確保領域に入った障害物を取り除くとともに、この取り除いた障害物をガイド表示させることにより、観察対象と取り除いた障害物との位置関係を明確にしつつ容易に観察対象を観察することができる画像処理装置及び該画像処理装置を搭載する医用診断装置を提供することである。   The present invention has been made to solve the above-mentioned problems, and an object of the present invention is to remove an obstacle that enters between the viewpoint and the observation target and enters the view securing area, and displays the removed obstacle as a guide display. Accordingly, an image processing apparatus capable of easily observing the observation target while clarifying the positional relationship between the observation target and the removed obstacle, and a medical diagnostic apparatus equipped with the image processing apparatus are provided.

本発明の実施の形態に係る特徴は、画像処理装置において、視点から観察対象までの視界を確保する領域を設定し、視界確保領域に含まれた領域を障害物と判定する障害物判定手段と、障害物判定手段により障害物と判定された領域を表わすガイドを生成し表示するガイド手段と、障害物判定手段からの情報に基づいて障害物を非表示とし、非表示とされた障害物の領域にガイド手段からのガイドの画像を合わせて合成し視界確保領域内の画像を生成する画像生成手段とを備える。   The feature according to the embodiment of the present invention is that, in the image processing apparatus, an obstacle determination unit that sets an area for securing a field of view from a viewpoint to an observation target and determines an area included in the field of view securing area as an obstacle. Guide means for generating and displaying a guide representing the area determined as an obstacle by the obstacle determination means, and hiding the obstacle based on the information from the obstacle determination means, Image generating means for generating an image in the view securing area by combining the image of the guide from the guide means and combining the area with the image.

本発明によれば、視点と観察対象との間にあって視界確保領域に入った障害物を取り除くとともに、この取り除いた障害物をガイド表示させることにより、観察対象と取り除いた障害物との位置関係を明確にしつつ容易に観察対象を観察することができる画像処理装置及び該画像処理装置を搭載する医用診断装置を提供することができる。   According to the present invention, the obstacle between the viewpoint and the observation target and entering the visibility securing area is removed, and the removed obstacle is guided to display the positional relationship between the observation target and the removed obstacle. It is possible to provide an image processing apparatus capable of easily observing an observation target while clarifying and a medical diagnostic apparatus equipped with the image processing apparatus.

以下、本発明の実施の形態について図面を参照して詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

(第1の実施の形態)
図1に示す医用診断装置1は、CPU(Central Processing Unit)1aと、ROM(Read Only Memory)1bと、RAM(Random Access Memory)1c及び入出力インターフェイス1dがバス1eを介して接続されている。入出力インターフェイス1dには、入力手段1fと、表示手段1gと、通信制御手段1hと、記憶手段1iと、リムーバブルディスク1jと、駆動部制御手段1kとが接続されている。この駆動部制御手段1kは、CPU1aからの指示に基づいて医用診断装置1の各駆動部の駆動を制御する。なお、以下、本発明における医用診断装置1には、上述したX線診断装置やCT装置、超音波診断装置、磁気共鳴診断装置、及びガンマカメラやPET等、撮影された画像情報を時系列三次元画像(4D画像)として表示可能な全ての医用診断装置を含む。
(First embodiment)
In the medical diagnostic apparatus 1 shown in FIG. 1, a CPU (Central Processing Unit) 1a, a ROM (Read Only Memory) 1b, a RAM (Random Access Memory) 1c, and an input / output interface 1d are connected via a bus 1e. . Input / output interface 1d is connected to input means 1f, display means 1g, communication control means 1h, storage means 1i, removable disk 1j, and drive unit control means 1k. This drive part control means 1k controls the drive of each drive part of the medical diagnostic apparatus 1 based on the instruction | indication from CPU1a. In the following description, the medical diagnostic apparatus 1 according to the present invention uses the above-described X-ray diagnostic apparatus, CT apparatus, ultrasonic diagnostic apparatus, magnetic resonance diagnostic apparatus, gamma camera, PET, etc. All medical diagnostic apparatuses that can be displayed as original images (4D images) are included.

CPU1aは、入力手段1fからの入力信号に基づいてROM1bから医用診断装置1を起動するためのブートプログラムを読み出して実行し、記憶手段1iに格納されている各種オペレーティングシステムを読み出す。さらにCPU1aは、入力手段1fや入出力インターフェイス1dを介して、図1においては図示していない外部機器からの入力信号に基づいて各種装置の制御を行ったり、RAM1cや記憶手段1i等に記憶されたプログラム及びデータを読み出してRAM1cにロードするとともに、RAM1cから読み出されたプログラムのコマンドに基づいて、画像処理やデータの計算または加工等、一連の処理を実現する処理装置である。   The CPU 1a reads out and executes a boot program for starting up the medical diagnostic apparatus 1 from the ROM 1b based on an input signal from the input unit 1f, and reads out various operating systems stored in the storage unit 1i. Further, the CPU 1a controls various devices based on an input signal from an external device not shown in FIG. 1 via the input means 1f or the input / output interface 1d, or is stored in the RAM 1c, the storage means 1i, or the like. This is a processing device that reads out the loaded program and data, loads them into the RAM 1c, and realizes a series of processes such as image processing and data calculation or processing based on the program commands read from the RAM 1c.

入力手段1fは、医用診断装置1のユーザが各種の操作を入力するキーボード、マウス等の入力デバイスによって構成されており、ユーザの操作に基づいて入力信号を作成しバス1eを介してCPU1aに送信される。また、医用診断装置1には、キーボード等だけでなく専用の操作パネルが設けられており、その操作パネル上の入力デバイスを介して操作画面に対する操作を行うこともできる。さらに、医用診断装置1において取得した検査結果や画像処理に必要な各種情報も入力手段1fを介して入力され、CPU1aや記憶手段1iに送信される。表示手段1gは、例えば液晶ディスプレイであり、例えばCPU1aからバス1eを介して出力信号を受信し、CPU1aが行った画像処理等の各種処理結果を表示する手段である。   The input unit 1f is configured by an input device such as a keyboard and a mouse through which the user of the medical diagnostic apparatus 1 inputs various operations, creates an input signal based on the user's operation, and transmits the input signal to the CPU 1a via the bus 1e. Is done. The medical diagnostic apparatus 1 is provided with a dedicated operation panel as well as a keyboard and the like, and an operation screen can be operated through an input device on the operation panel. Furthermore, the examination results acquired in the medical diagnostic apparatus 1 and various information necessary for image processing are also input via the input unit 1f and transmitted to the CPU 1a and the storage unit 1i. The display unit 1g is a liquid crystal display, for example, and is a unit that receives an output signal from the CPU 1a via the bus 1e and displays various processing results such as image processing performed by the CPU 1a.

通信制御手段1hは、LANカードやモデム等の手段であり、医用診断装置1をインターネットやLAN等の通信ネットワークに接続することを可能とする手段である。通信制御手段1hを介して通信ネットワークと送受信したデータは入力信号または出力信号として、入出力インターフェイス1d及びバス1eを介してCPU1aに送受信される。   The communication control unit 1h is a unit such as a LAN card or a modem, and is a unit that enables the medical diagnostic apparatus 1 to be connected to a communication network such as the Internet or a LAN. Data transmitted / received to / from the communication network via the communication control unit 1h is transmitted / received to / from the CPU 1a via the input / output interface 1d and the bus 1e as an input signal or an output signal.

記憶手段1iは、半導体や磁気ディスクで構成されており、CPU1aで実行されるプログラムやデータが記憶されている。リムーバブルディスク1hは、光ディスクやフレキシブルディスクのことであり、ディスクドライブによって読み書きされた信号は、入出力インターフェイス1d及びバス1eを介してCPU1aに送受信される。   The storage means 1i is composed of a semiconductor or a magnetic disk, and stores programs and data executed by the CPU 1a. The removable disk 1h is an optical disk or a flexible disk, and signals read / written by the disk drive are transmitted / received to / from the CPU 1a via the input / output interface 1d and the bus 1e.

本発明の実施の形態における医用診断装置1の記憶手段1iには、例えば、医用診断装置1が取得した画像情報を処理してユーザに対して表示する画像処理プログラム等のプログラムやデータが記憶される。また、画像処理プログラム等が医用診断装置1のCPU1aに読み込まれ実行されることにより、画像処理手段2が医用診断装置1に実装される。   The storage unit 1i of the medical diagnostic apparatus 1 according to the embodiment of the present invention stores programs and data such as an image processing program that processes image information acquired by the medical diagnostic apparatus 1 and displays it to the user. The Further, the image processing means 2 is mounted on the medical diagnostic apparatus 1 by reading an image processing program or the like into the CPU 1a of the medical diagnostic apparatus 1 and executing it.

画像処理手段2は、図2に示すように、受信手段2aと、障害物判定手段2bと、ガイド手段2cと、画像生成手段2dと、送信手段2eとから構成される。   As shown in FIG. 2, the image processing means 2 includes a receiving means 2a, an obstacle determining means 2b, a guide means 2c, an image generating means 2d, and a transmitting means 2e.

受信手段2aは、医用診断装置1の入力手段1fから入力された、ユーザからの入力信号や画像情報を受信する。そして、例えば、受信手段2aが受信した情報のうち、視界確保領域の設定条件や画像情報は障害物判定手段2bに送信され、ガイドの種類を指定する情報はガイド手段2cに送信される。   The receiving unit 2a receives an input signal and image information from the user input from the input unit 1f of the medical diagnostic apparatus 1. For example, among the information received by the receiving unit 2a, the setting conditions of the view securing area and the image information are transmitted to the obstacle determining unit 2b, and information specifying the guide type is transmitted to the guide unit 2c.

障害物判定手段2bでは、ユーザが入力手段1fを介して入力した条件に従って視界確保領域を設定する。ここで、「障害物」とは、上述のように、視点と観察対象の間に存在して観察対象の観察に支障のある部位や観察対象ではない部位を言う。   The obstacle determination unit 2b sets the field-of-view securing area according to the conditions input by the user via the input unit 1f. Here, as described above, the “obstacle” refers to a part that is present between the viewpoint and the observation target and that obstructs the observation of the observation target or a part that is not the observation target.

図3に示すように、視点Pから観察対象Xへは実線の矢印に示すような視線Lが伸びている。そして観察対象Xを中心に視野Fを観念することができる。視野Fは通常、無限に広がりを持つものとも考えられるが、図3では便宜上、視点Pから四方に伸びる実線で示している。この視点Pと観察対象Xとの間に設けられるのが視界確保領域Vであり、図3では一点鎖線で示している。視界確保領域Vは、当該領域V内に入ったボリュームを障害物と判定するために設けられる領域のことである。第1の実施の形態では、視界確保領域Vに入ったボリュームは自動的に障害物であると判定される。視界確保領域Vの広さは、図4に示すように、奥行きD、視野角A及び形状Cによって決めることができる。形状Cは、図4では四角形にされているが、例えば、観察対象をメスで切ったときの形状、というように任意に定めることができる。なお、ユーザの医用画像の利用の仕方によっては、視界確保領域Vは設定されなくても良く、その設定の有無は任意である。   As shown in FIG. 3, a line of sight L as shown by a solid arrow extends from the viewpoint P to the observation target X. And the visual field F can be considered around the observation object X. The field of view F is generally considered to have an infinite extent, but in FIG. 3, for the sake of convenience, it is indicated by a solid line extending from the viewpoint P in all directions. A field-of-view securing region V is provided between the viewpoint P and the observation target X, and is indicated by a one-dot chain line in FIG. The visual field securing area V is an area provided for determining a volume entering the area V as an obstacle. In the first embodiment, the volume that has entered the visibility securing area V is automatically determined to be an obstacle. The width of the view securing area V can be determined by the depth D, the viewing angle A, and the shape C as shown in FIG. The shape C is rectangular in FIG. 4, but can be arbitrarily determined, for example, a shape when the observation target is cut with a scalpel. Note that, depending on how the user uses the medical image, the field-of-view securing area V may not be set, and the presence or absence of the setting is arbitrary.

障害物判定手段2bに送信された画像情報において、設定された視界確保領域V内にあるボリュームが含まれると、障害物判定手段2bにおいてその範囲が計算されて障害物であると判定される。すなわち、表示状態にあるボリュームは輝度値やCT値のように具体的な数値で表わすことのできる座標を持っている。また、視界確保領域Vの座標は上述のように視界確保領域Vを定めるに当たって把握することができる。従って、視界確保領域V内の位置((x,y,z)の値)を指定すれば、その位置に表示されるボリュームが存在するか否かを確認することができることになる。そして、障害物であると判定されたボリュームは、後述するガイド表示によってユーザに対して非表示とされたボリュームであることが示される。   If the image information transmitted to the obstacle determination means 2b includes a volume that is within the set field-of-view securing area V, the obstacle determination means 2b calculates the range and determines that it is an obstacle. That is, the volume in the display state has coordinates that can be expressed by specific numerical values such as luminance values and CT values. Further, the coordinates of the view securing area V can be grasped when the view securing area V is determined as described above. Therefore, if a position (value of (x, y, z)) in the view securing area V is designated, it can be confirmed whether or not there is a volume displayed at that position. Then, it is indicated that the volume determined to be an obstacle is a volume that is not displayed to the user by a guide display described later.

受信手段2aからのガイド表示の種類を指定する情報は、ガイド手段2cに送られる。ガイド手段2c内には、ガイド表示の表示態様を複数種類持つガイド生成手段2caとガイド生成手段2caにガイド表示の生成を指示するガイド表示手段2cbが設けられている。   Information specifying the type of guide display from the receiving means 2a is sent to the guide means 2c. In the guide unit 2c, there are provided a guide generation unit 2ca having a plurality of types of guide display display modes and a guide display unit 2cb for instructing the guide generation unit 2ca to generate a guide display.

ガイド生成手段2ca内に記録されているガイド表示の表示態様は、例えば、障害物を網掛けの状態に表示する「メッシュ表示」、或いは、障害物の輪郭を表示する「輪郭表示」、非表示とされた障害物が存在するとの「注意表示」や、非表示とされた障害物を別画像で強調して表示する「別画像強調表示」等が考えられる。また、「注意表示」については、他の表示態様と併せて表示させることも可能である。   The display mode of the guide display recorded in the guide generating means 2ca is, for example, “mesh display” for displaying the obstacle in a shaded state, or “contour display” for displaying the contour of the obstacle, non-display “Caution display” that there is an obstructed obstacle, “different image emphasis display” that highlights and displays the obstructed obstacle in another image, and the like are conceivable. Further, the “caution display” can be displayed together with other display modes.

ガイド表示手段2cbは、障害物判定手段2bからの障害物に該当する領域をガイド表示する旨の指示に基づいてガイド生成手段2caにガイド表示を生成する指示を出す。そして生成されたガイド表示を画像生成手段2dに送信する。   The guide display unit 2cb issues an instruction to generate a guide display to the guide generation unit 2ca based on an instruction from the obstacle determination unit 2b to guide the area corresponding to the obstacle. Then, the generated guide display is transmitted to the image generating means 2d.

画像生成手段2dでは、障害物判定手段2bからの障害物に該当する領域を非表示とする旨の指示に基づいて当該領域を非表示とするとともに、ガイド表示手段2cbから送られてきたガイド表示を非表示とした障害物の領域に合わせて画像を合成する。画像の合成の方法(レンダリングモード)は、例えば、上述したフライスルー方式の他、PVR(Perspective Volume Rendaering:透視投影ボリュームレンダリング)、MPR(Multi Planar Reconstruction:多断面画像再構成)等、複数の表示方法が選択可能にされている。合成された画像は、送信手段2eを介して表示手段1gに送られ表示される。   The image generation means 2d hides the area based on the instruction from the obstacle determination means 2b to hide the area corresponding to the obstacle, and displays the guide displayed from the guide display means 2cb. The image is synthesized according to the area of the obstacle that is not displayed. The image composition method (rendering mode) includes a plurality of displays such as PVR (Perspective Volume Rendaering) and MPR (Multi Planar Reconstruction) in addition to the fly-through method described above. The method is made selectable. The synthesized image is sent to the display means 1g via the transmission means 2e and displayed.

次に、画像生成の手順について、図5及び図6のフローチャート及び、管状の組織内を視点が観察対象に向けて移動する様子を示す図7ないし図14の各模式図を利用して説明する。   Next, the image generation procedure will be described with reference to the flowcharts of FIGS. 5 and 6 and the schematic diagrams of FIGS. 7 to 14 showing how the viewpoint moves toward the observation object in the tubular tissue. .

まず、入力手段1fからの信号に基づいて障害物判定手段2bにより視界確保機能がONにされたか否かが判断される(ST1)。視界確保領域Vを設けるか否かは任意であることから、視界確保機能がONとされなかった場合は(ST1のN)、すぐに画像表示が開始されて画像処理が行われる(ST2)。   First, based on the signal from the input means 1f, it is determined whether or not the visual field securing function is turned on by the obstacle determination means 2b (ST1). Since whether or not to provide the view securing area V is arbitrary, if the view securing function is not turned on (N in ST1), image display is immediately started and image processing is performed (ST2).

一方、視界確保機能がONとされた場合は、入力手段1fを介して、画像生成手段2dに対して上述したレンダリングモードの指定がなされる(ST3)。また、ガイド生成手段2caにどのような態様でガイド表示を行うかの指定がなされる(ST4)。ここで指定されたレンダリングモード及びガイド表示に従って以後画像処理が行われる。次に、視界確保領域Vの広さが設定される(ST5)。これは観察対象の位置や大きさに合わせて、奥行きD、視野角A及び形状Cの3つの要素が指定されることにより行われる。   On the other hand, when the visibility ensuring function is turned on, the above-described rendering mode is designated to the image generating means 2d via the input means 1f (ST3). In addition, the guide generation unit 2ca is designated in what manner guide display is performed (ST4). Image processing is subsequently performed according to the rendering mode and guide display specified here. Next, the width of the visibility ensuring area V is set (ST5). This is performed by designating three elements of depth D, viewing angle A, and shape C in accordance with the position and size of the observation target.

視界確保領域Vが設定されると画像表示が始まり、上述の指定、設定に従って画像処理が開始される(ST6)。障害物判定手段2bでは画像処理を進めていきながら随時視界確保領域V内にボリュームが入ったか否かを上述したようにチェックする(ST7)。視界確保領域V内にボリュームが入らない場合はそのまま画像処理が進められるが、ボリュームが入った場合には、その部分を障害物Bと判定する(ST8)。   When the view securing area V is set, image display starts, and image processing is started according to the above-described designation and setting (ST6). As described above, the obstacle determination means 2b checks whether or not a volume has entered the visual field securing area V as the image processing proceeds (ST7). When the volume does not enter the view securing area V, the image processing proceeds as it is, but when the volume enters, that part is determined as an obstacle B (ST8).

図7は、視点Pから視線を観察対象Xへ向けて見たときに表示手段1gに表示される画面を示す模式図である。最も外側にある四角い枠が画面の枠Sであり、その画面の枠S内に円弧状に見えるのが視野Fである。視野F内には手前側に上方から下方に向けて逆凸状の組織T1があり、その奥に山状の組織T2が存在する。この組織T2の頂上部分が観察対象である組織であるが、図7においては、手前側の組織T1の頂上部である逆凸部が組織T2の頂上部に重なるようになっていて見えない。これら組織T1及び組織T2が重なっている領域を囲む四角形が視界確保領域Vであり、観察対象である組織T2の頂上部分を隠す組織T1の頂上部である逆凸部の領域が障害物Bに該当することになる。   FIG. 7 is a schematic diagram illustrating a screen displayed on the display unit 1g when the line of sight is viewed from the viewpoint P toward the observation target X. The outermost square frame is the frame S of the screen, and the field of view F appears to be an arc shape in the frame S of the screen. In the field of view F, there is an inverted convex tissue T1 on the front side from the upper side to the lower side, and a mountain-like tissue T2 is present in the back thereof. The top portion of the tissue T2 is a tissue to be observed, but in FIG. 7, the reverse convex portion that is the top of the tissue T1 on the near side overlaps the top of the tissue T2 and cannot be seen. The rectangle surrounding the region where the tissue T1 and the tissue T2 overlap is the visibility securing region V, and the region of the reverse convex portion which is the top of the tissue T1 that hides the top of the tissue T2 to be observed is the obstacle B. That will be true.

図8は、管状の組織を長手方向に切断してその内部を見た模式図である。視点Pから観察対象Xを見ようと視線Lを伸ばすが、組織T1が視点Pと観察対象Xとの間に存在するため、組織T1に邪魔されて観察対象Xを見ることができない。そのため、図8では視線Lを視点Pから組織T1にぶつかるまでを実線で表わし、その奥、観察対象Xまでの間は視点Pからは見えないので点線で表わしている。また、組織T1であって視界確保領域V内にある部分(図8では斜線で表わしている)が障害物Bの領域である。   FIG. 8 is a schematic view of the inside of a tubular tissue cut in the longitudinal direction. The line of sight L is stretched so as to see the observation target X from the viewpoint P. However, since the tissue T1 exists between the viewpoint P and the observation target X, the observation target X cannot be seen because of being disturbed by the tissue T1. Therefore, in FIG. 8, the line of sight L from the viewpoint P to the tissue T1 is represented by a solid line, and the depth and the observation target X are not represented from the viewpoint P and are represented by the dotted line. Further, the portion of the tissue T1 that is in the view securing region V (shown by hatching in FIG. 8) is the obstacle B region.

障害物判定手段2bが視界確保領域V内に入ったボリュームを障害物Bと判定すると、その障害物Bの領域を確定する(ST9)。この障害物Bの領域が確定すると、障害物判定手段2bは画像生成手段2dに対して該当領域を非表示とする旨の指示を出す(ST10)(以下、図6のフローチャートを参照)。図9(a)はこの状態を示す模式図であり、組織T1であって視界確保領域V内に入った領域が非表示とされている。障害物Bが非表示とされたことで、組織T2にある観察対象Xとの間に遮るボリュームがなく、観察対象Xが見える。   When the obstacle determination means 2b determines that the volume that has entered the view securing area V is the obstacle B, the area of the obstacle B is determined (ST9). When the area of the obstacle B is determined, the obstacle determination means 2b instructs the image generation means 2d to hide the corresponding area (ST10) (refer to the flowchart of FIG. 6 below). FIG. 9A is a schematic diagram showing this state, and an area that is in the view securing area V and is the tissue T1 is not displayed. Since the obstacle B is not displayed, there is no volume blocking with the observation target X in the tissue T2, and the observation target X is visible.

さらに障害物判定手段2bはガイド表示手段2cbに対して、障害物Bの領域をガイドする表示を行うように指示を出す(ST11)。この指示を受けたガイド表示手段2cbは、ガイド生成手段2caに対して該当領域についてのガイド表示の生成を指示し(ST12)、この指示及びステップ4で指定されたガイド表示に従って該当領域のガイドを作成する(ST13)。第1の実施の形態においては、選択されたガイド表示は「輪郭表示」であるとする。   Further, the obstacle determination means 2b instructs the guide display means 2cb to perform display for guiding the area of the obstacle B (ST11). Upon receiving this instruction, the guide display means 2cb instructs the guide generation means 2ca to generate a guide display for the corresponding area (ST12), and guides the corresponding area in accordance with this instruction and the guide display specified in step 4. Create (ST13). In the first embodiment, it is assumed that the selected guide display is “contour display”.

ガイド生成手段2caは、障害物Bの輪郭を示すガイド表示を生成し、生成したガイド表示をガイド表示手段2cbに送信する(ST14)。図9(b)に示す模式図は、ガイド生成手段2caによって生成された障害物Bの輪郭を示すガイド表示である。視界確保領域Vの内部に障害物Bの輪郭B1のみが示されている。生成されたガイド表示を受信したガイド表示手段2cbはさらに画像生成手段2dに送信する(ST15)。   The guide generation means 2ca generates a guide display indicating the contour of the obstacle B, and transmits the generated guide display to the guide display means 2cb (ST14). The schematic diagram shown in FIG. 9B is a guide display showing the outline of the obstacle B generated by the guide generating means 2ca. Only the outline B1 of the obstacle B is shown inside the view securing area V. The guide display means 2cb that has received the generated guide display further transmits it to the image generation means 2d (ST15).

画像生成手段2dでは、非表示とした障害物Bの領域にガイド表示手段2cbから送られてきたガイド表示を合成する(ST16)。図10は、合成された状態を示す模式図である。障害物Bは輪郭B1のみで表示されていることから、組織T2にある観察対象Xが見える。また、図11は、図8同様、管状の組織を長手方向に切断してその内部を見た模式図である。ガイド表示が合成された状態では、障害物Bは非表示とされその輪郭B1のみが表示されているため(図11では当該領域を点線で表わしている)、視線Lは視点Pから観察対象Xへ貫かれている。さらに図12に示すように、視界確保領域Vの輪郭を消すことで観察対象Xを観察し易くなる。そして、該当領域の合成画像が表示手段1gに表示される(ST17)。   In the image generation means 2d, the guide display sent from the guide display means 2cb is combined with the area of the obstacle B that is not displayed (ST16). FIG. 10 is a schematic diagram showing a combined state. Since the obstacle B is displayed only by the outline B1, the observation target X in the tissue T2 can be seen. FIG. 11 is a schematic view of the inside of a tubular tissue cut in the longitudinal direction as in FIG. In the state where the guide display is synthesized, the obstacle B is not displayed and only its outline B1 is displayed (in FIG. 11, the region is represented by a dotted line). Pierced. Further, as shown in FIG. 12, it becomes easier to observe the observation target X by erasing the outline of the view securing area V. Then, the composite image of the corresponding area is displayed on the display means 1g (ST17).

合成画像の表示の方法は、合成された画像のみを表示させる他、例えば、図13に示すように上述した「別画像強調表示」として表示させることも可能である。図13は表示手段1gに表示された画面例を表わす模式図である。図13においては、画面左側に非表示とされた障害物Bの輪郭が表示されており、画面右側には視点P、視界確保領域V及び観察対象Xの位置関係が示されている。このように位置関係とともに非表示とされた領域も同時に表示させることにより、非表示とされた障害物Bが強調され、ユーザの使い勝手が良くなる。また、ガイド表示は複数組み合わせて表示させることもでき、例えば、図14に示すように、位置関係を示す表示は小さく表示するとともに、非表示とされた障害物Bの表示を大きくし、さらに「注意表示」を組み合わせて表示させることも可能である。   As a method of displaying the composite image, in addition to displaying only the composite image, for example, as shown in FIG. FIG. 13 is a schematic diagram showing an example of a screen displayed on the display means 1g. In FIG. 13, the contour of the obstacle B that is not displayed is displayed on the left side of the screen, and the positional relationship among the viewpoint P, the view securing area V, and the observation target X is shown on the right side of the screen. By simultaneously displaying the non-displayed area together with the positional relationship in this way, the non-displayed obstacle B is emphasized, and the user-friendliness is improved. In addition, a plurality of guide displays can be displayed in combination. For example, as shown in FIG. 14, the display indicating the positional relationship is displayed small, the display of the obstacle B that is not displayed is enlarged, and “ It is also possible to display a combination of “notice display”.

表示手段1gへの合成画像の表示がなされると、次に画像表示を終了するか否かの判断が行われる(ST18)。終了しない場合は、再び視界確保領域Vにボリュームが入ったか否かを判断し、上述した画像合成の手順(ST7ないしST17)が繰り返される。なお、視界確保機能を使用せず画像表示を行っていた場合や視界確保機能を使用していた場合であっても視界確保領域Vの設定条件等を変更する場合には、再度ステップ1から画像合成の手順が繰り返されることになる。   When the composite image is displayed on the display means 1g, it is next determined whether or not to end the image display (ST18). If not finished, it is determined again whether or not a volume has entered the view securing area V, and the above-described image composition procedure (ST7 to ST17) is repeated. In addition, even when the image is displayed without using the view securing function or when the view securing area V is changed even if the view securing function is used, the image from step 1 again is used. The synthesis procedure will be repeated.

このようにすることで、視点と観察対象との間にあって視界確保領域に入った障害物を取り除くとともに、この取り除いた障害物をガイド表示させることにより、観察対象と取り除いた障害物との位置関係を明確にしつつ容易に観察対象を観察することができる画像処理装置及び該画像処理装置を搭載する医用診断装置を提供することができる。   By doing this, the obstacle that is between the viewpoint and the observation object and entered the visibility securing area is removed, and the removed obstacle is displayed as a guide so that the positional relationship between the observation object and the removed obstacle is displayed. It is possible to provide an image processing apparatus capable of easily observing an observation target while clarifying the above, and a medical diagnostic apparatus equipped with the image processing apparatus.

なお、これまでは視界確保領域V内に入ったボリュームを自動的に障害物Bと判定してガイド表示させる場合を説明したが、視点Pの移動に伴って視界確保領域V内に入ったボリュームを手動で個別に障害物Bと指定し、ガイド表示させることが可能であるのはもちろんである。   Heretofore, a case has been described in which the volume that has entered the visual field securing area V is automatically determined as an obstacle B and displayed as a guide, but the volume that has entered the visual field securing area V as the viewpoint P moves. Of course, it is possible to manually designate the obstacle B as an obstacle and display it as a guide.

(第2の実施の形態)
次に本発明における第2の実施の形態について説明する。なお、第2の実施の形態において、上述の第1の実施の形態において説明した構成要素と同一の構成要素には同一の符号を付し、同一の構成要素の説明は重複するので省略する。
(Second Embodiment)
Next, a second embodiment of the present invention will be described. In the second embodiment, the same components as those described in the first embodiment are denoted by the same reference numerals, and the description of the same components is omitted because it is duplicated.

第1の実施の形態においては、視界確保領域V内に入ったボリュームを障害物判定手段2bにおいて視点Pの移動に伴って自動的に障害物として判定し非表示の対象としていたが、第2の実施の形態においては、視点Pを固定させた状態で視界確保領域V内に入ったボリュームを手動で非表示とする点が相違する。図15は第2の実施の形態と比較するために、第1の実施の形態における非表示の手順を示した模式図であり、管状の組織を長手方向に切断してその内部を見た状態を示す模式図を使用して説明する。   In the first embodiment, the volume that falls within the view securing area V is automatically determined as an obstacle by the movement of the viewpoint P by the obstacle determination means 2b and is set as a non-display target. This embodiment is different in that the volume that has entered the visual field securing area V with the viewpoint P fixed is manually hidden. FIG. 15 is a schematic diagram showing a non-display procedure in the first embodiment for comparison with the second embodiment, in which a tubular tissue is cut in the longitudinal direction and the inside thereof is viewed. It demonstrates using the schematic diagram which shows.

すなわち、図15(a)は、管状の組織の外部にある視点Pから内部にある観察対象Xを見る場合を示しており、視点Pから観察対象Xに向けて視線Lが伸びている。但し、管状の組織に阻まれて管状の内部にある観察対象Xは直接見ることができないため、視線Lは管状の組織の外皮を境として実線と点線で示されている。   That is, FIG. 15A shows a case where the observation target X inside from the viewpoint P outside the tubular tissue is viewed, and the line of sight L extends from the viewpoint P toward the observation target X. However, since the observation target X inside the tubular structure cannot be seen directly because of being blocked by the tubular tissue, the line of sight L is indicated by a solid line and a dotted line with the outer skin of the tubular tissue as a boundary.

図15(b)は、視点Pは固定したままで視界確保領域V内に入ったボリュームN1を非表示にしたことを示している。図15(c)は、さらに視点Pが視線L方向に移動した場合を示している。ここでも視界確保領域V内に入ったボリュームが非表示にされている。このように、第1の実施の形態においては、視点Pの移動に伴って視界確保領域V内に入ったボリュームを自動的に非表示にすることとしていた。   FIG. 15B shows that the volume N1 that has entered the field-of-view securing area V is not displayed while the viewpoint P is fixed. FIG. 15C shows a case where the viewpoint P further moves in the direction of the line of sight L. Again, the volume that has entered the view securing area V is not displayed. As described above, in the first embodiment, the volume that has entered the visual field securing area V as the viewpoint P moves is automatically hidden.

一方、第2の実施の形態においては、視点Pの位置を移動させずに視界確保領域Vに入ったボリュームを手動で障害物と指定するとともに視界確保領域Vの奥行きDを延長することにより、ボリュームの連続性を考慮した指定(非表示)ができる。すなわち、図16(c)において(図16(a)及び(b)は、図15(a)及び(b)と同様である。)、視点Pの位置は、図16(a)及び(b)の視点Pの位置と変化していない。この状態で、視界確保領域Vの奥行きDを延長する。例えば、障害物を指定する際に用いるマウス等のクリックの押し下げ時間やROI(Region Of Interest:関心領域)の指定等を基準として、延長の範囲を決定することができる。従って、図16(c)では、(b)で非表示とした部分N1だけではなく、ボリュームが連続する部分N2の領域までも非表示の対象とすることができる。   On the other hand, in the second embodiment, by manually specifying the volume that has entered the view securing area V without moving the position of the viewpoint P as an obstacle and extending the depth D of the view securing area V, Can be specified (hidden) in consideration of volume continuity. That is, in FIG. 16C (FIGS. 16A and 16B are the same as FIGS. 15A and 15B), the position of the viewpoint P is shown in FIGS. The position of the viewpoint P) is not changed. In this state, the depth D of the visibility ensuring area V is extended. For example, the extension range can be determined based on the click-down time of a mouse or the like used for designating an obstacle, or designation of ROI (Region Of Interest). Accordingly, in FIG. 16C, not only the portion N1 not displayed in FIG. 16B but also the region of the portion N2 where the volume is continuous can be set as the non-display target.

このようにすることで、視点と観察対象との間にあって視界確保領域に入った障害物を取り除くとともにこの取り除いた障害物をガイド表示させることにより、観察対象と取り除いた障害物との位置関係を明確にしつつ視点Pと観察対象Xとの距離を変えることなく最適な位置及び姿勢で観察対象Xを観察することができる画像処理装置及び該画像処理装置を搭載する医用診断装置を提供することができる。   By doing this, by removing the obstacle that is between the viewpoint and the observation target and entering the visibility securing area and displaying the removed obstacle as a guide, the positional relationship between the observation target and the removed obstacle is determined. To provide an image processing apparatus capable of observing the observation target X at an optimum position and orientation without changing the distance between the viewpoint P and the observation target X while clarifying, and a medical diagnostic apparatus equipped with the image processing apparatus. it can.

(第3の実施の形態)
次に本発明における第3の実施の形態について説明する。なお、第3の実施の形態において、上述の第1または第2の実施の形態において説明した構成要素と同一の構成要素には同一の符号を付し、同一の構成要素の説明は重複するので省略する。
(Third embodiment)
Next, a third embodiment of the present invention will be described. In the third embodiment, the same components as those described in the first or second embodiment are denoted by the same reference numerals, and the description of the same components is duplicated. Omitted.

第3の実施の形態においては、視点Pが観察対象Xに近づき、その間の距離が縮まっても視界確保領域Vが観察対象Xを含まないように視界確保領域Vの奥行きDが自動的に調整されることを特徴とする。   In the third embodiment, the depth D of the visual field securing region V is automatically adjusted so that the visual field securing region V does not include the observation target X even when the viewpoint P approaches the observation target X and the distance between them decreases. It is characterized by being.

すなわち、図17に示すように、例えば、観察対象Xの一部を障害物Bが隠している場合等、予め観察対象Xの位置の特定が可能な場合(観察対象Xが視野F内に捉えられている場合)、視点Pから観察対象Xまでの視線Lの距離Y1は互いの座標から計算にて求めることができる。また、同様に、視点Pからこの視線Lが視界確保領域Vの奥行きDによって定められる面と交わる点までの距離Y2も求めることができる。そこで、障害物判定手段2bにおいてこれらの距離の割合(Y2/Y1)を維持するようにすることで、視点Pが観察対象Xに近づき、その間の距離Y1が縮まっても視点Pから視界確保領域Vまでの距離Y2が自動的に調整される。   That is, as shown in FIG. 17, when the position of the observation target X can be specified in advance, for example, when the obstacle B is partially hiding the observation target X (the observation target X is captured in the field of view F). The distance Y1 of the line of sight L from the viewpoint P to the observation target X can be calculated from the mutual coordinates. Similarly, the distance Y2 from the viewpoint P to the point where the line of sight L intersects the plane defined by the depth D of the field-of-view securing area V can also be obtained. Therefore, by maintaining the ratio (Y2 / Y1) of these distances in the obstacle determination means 2b, even if the viewpoint P approaches the observation target X and the distance Y1 between them decreases, the view securing region from the viewpoint P The distance Y2 to V is automatically adjusted.

このようにすることで、視点Pと観察対象Xとの距離の如何に関わらず常に視界確保領域Vが観察対象Xを含まないようにすることができるため、視点と観察対象との間にあって視界確保領域に入った障害物を取り除くとともに、この取り除いた障害物をガイド表示させることにより、観察対象と取り除いた障害物との位置関係を明確にしつつ容易に観察対象を観察することができる画像処理装置及び該画像処理装置を搭載する医用診断装置を提供することができる。   By doing in this way, it is possible to always prevent the view securing area V from including the observation target X regardless of the distance between the viewpoint P and the observation target X. Image processing that makes it possible to easily observe the observation target while clarifying the positional relationship between the observation target and the removed obstacle by removing the obstacle entering the secured area and displaying the removed obstacle as a guide. An apparatus and a medical diagnostic apparatus equipped with the image processing apparatus can be provided.

なお、第3の実施の形態においては、予め観察対象Xの位置が特定されている場合を例に挙げて説明しているが、観察対象Xを視点Pの移動に伴って随時特定することとしても良い。この観察対象Xを特定する方法としては、例えば、対象となる物体表面の曲率計算結果が最大となる点をポリープの頂点としてみなしてこの点を観察対象Xとする方法やマウスのクリックの押し下げ時間の長さを基に、指定した点を中心に空間的に範囲を指定し、この範囲を観察対象Xとする方法等が挙げられる。   In the third embodiment, the case where the position of the observation target X is specified in advance is described as an example. However, the observation target X is specified as needed as the viewpoint P moves. Also good. As a method for specifying the observation target X, for example, a point at which the curvature calculation result of the target object surface is maximized is regarded as a vertex of the polyp, and this point is set as the observation target X, or a mouse click depressing time. And a method in which a range is spatially specified around a specified point and this range is set as an observation target X.

また、第3の実施の形態においては、視界確保領域Vを利用して視点PからのY2の距離を求めたが、この視界確保領域Vの替わりに、例えば、仮想的な位置指定用平面を視点P及び観察対象Xとの間に設けてY2の距離を測ることに用いても良い。   In the third embodiment, the distance Y2 from the viewpoint P is obtained by using the visual field securing area V. Instead of the visual field securing area V, for example, a virtual position designation plane is used. It may be provided between the viewpoint P and the observation target X and used to measure the distance Y2.

また、この発明は、上記実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施の形態に開示されている複数の構成要素を適宜組み合わせることにより種々の発明を形成できる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施の形態に亘る構成要素を適宜組み合わせてもよい。   Further, the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. Various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the above embodiments. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, you may combine the component covering different embodiment suitably.

本発明の実施の形態における医用診断装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the medical diagnostic apparatus in embodiment of this invention. 本発明の実施の形態における画像処理手段の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the image processing means in embodiment of this invention. 視点、視野、観察対象及び視界確保領域の関係を示す説明図である。It is explanatory drawing which shows the relationship between a viewpoint, a visual field, an observation object, and a visual field ensuring area | region. 視界確保領域を示す説明図である。It is explanatory drawing which shows a visual field ensuring area | region. 本発明の実施の形態における画像処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the image processing in embodiment of this invention. 本発明の実施の形態における画像処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the image processing in embodiment of this invention. 視点から視線を観察対象へ向けて見たときに表示手段に表示される画面を示す模式図である。It is a schematic diagram which shows the screen displayed on a display means when seeing a gaze toward an observation object from a viewpoint. 管状の組織を長手方向に切断してその内部を見た模式図である。It is the schematic diagram which cut | disconnected the tubular structure | tissue in the longitudinal direction and looked at the inside. 視点から視線を観察対象へ向けて見たときに表示手段に表示される画面を示す模式図である。It is a schematic diagram which shows the screen displayed on a display means when seeing a gaze toward an observation object from a viewpoint. 視点から視線を観察対象へ向けて見たときに表示手段に表示される画面を示す模式図である。It is a schematic diagram which shows the screen displayed on a display means when seeing a gaze toward an observation object from a viewpoint. 管状の組織を長手方向に切断してその内部を見た模式図である。It is the schematic diagram which cut | disconnected the tubular structure | tissue in the longitudinal direction and looked at the inside. 視点から視線を観察対象へ向けて見たときに表示手段に表示される画面を示す模式図である。It is a schematic diagram which shows the screen displayed on a display means when seeing a gaze toward an observation object from a viewpoint. 表示手段に表示された画面例を表わす模式図である。It is a schematic diagram showing the example of a screen displayed on the display means. 表示手段に表示された画面例を表わす模式図である。It is a schematic diagram showing the example of a screen displayed on the display means. 本発明の第1の実施の形態におけるガイド表示の流れを示す説明図である。It is explanatory drawing which shows the flow of the guide display in the 1st Embodiment of this invention. 本発明の第2の実施の形態におけるガイド表示の流れを示す説明図である。It is explanatory drawing which shows the flow of the guide display in the 2nd Embodiment of this invention. 本発明の第3の実施の形態における視点、視野、観察対象及び視界確保領域の関係を示す説明図である。It is explanatory drawing which shows the relationship of the viewpoint, visual field, observation object, and visual field ensuring area | region in the 3rd Embodiment of this invention.

符号の説明Explanation of symbols

1 医用診断装置
2 画像処理手段
2a 受信手段
2b 障害物判定手段
2c ガイド手段
2ca ガイド生成手段
2cb ガイド表示手段
2d 画像生成手段
2e 送信手段


DESCRIPTION OF SYMBOLS 1 Medical diagnostic apparatus 2 Image processing means 2a Reception means 2b Obstacle determination means 2c Guide means 2ca Guide generation means 2cb Guide display means 2d Image generation means 2e Transmission means


Claims (6)

視点から観察対象までの視界を確保する領域を設定し、前記視界確保領域に含まれた領域を障害物と判定する障害物判定手段と、
前記障害物判定手段により障害物と判定された領域を表わすガイドを生成し表示するガイド手段と、
前記障害物判定手段からの情報に基づいて前記障害物を非表示とし、前記非表示とされた障害物の領域に前記ガイド手段からのガイドの画像を合わせて合成し前記視界確保領域内の画像を生成する画像生成手段と、
を備えることを特徴とする画像処理装置。
An obstacle determining means for setting an area for securing a field of view from a viewpoint to an observation target, and determining an area included in the field of view securing area as an obstacle;
Guide means for generating and displaying a guide representing an area determined as an obstacle by the obstacle determination means;
Based on the information from the obstacle determining means, the obstacle is hidden, and the image of the guide area from the guide means is combined with the area of the obstacle that has been hidden, and the image in the visibility securing area is combined. Image generating means for generating
An image processing apparatus comprising:
前記ガイド手段において生成される前記障害物の領域を表わすガイド表示は、複数種類設けられていることを特徴とする請求項1に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein a plurality of types of guide displays representing the area of the obstacle generated by the guide unit are provided. 前記ガイド表示は複数同時に表示することが可能とされていることを特徴とする請求項1または請求項2に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein a plurality of the guide displays can be displayed simultaneously. 前記障害物判定手段は、障害物の厚みを考慮して前記視界確保領域の設定要素である奥行きを変更し障害物と判定することを特徴とする請求項1ないし請求項3のいずれかに記載の画像処理装置。   4. The obstacle determination unit according to claim 1, wherein the obstacle determination unit determines an obstacle by changing a depth which is a setting element of the visibility securing area in consideration of an obstacle thickness. 5. Image processing apparatus. 前記障害物判定手段は、前記視点が同定された前記観察対象へ近づいても前記視点と同定された前記観察対象との間に設けられている前記視界確保領域内に前記観察対象を含まないように前記視点から前記視界確保領域までの距離を自動的に調整することを特徴とする請求項1ないし請求項4のいずれかに記載の画像処理装置。   The obstacle determination means does not include the observation target in the visibility securing area provided between the viewpoint and the identified observation target even when the viewpoint approaches the identified observation target. The image processing apparatus according to claim 1, wherein a distance from the viewpoint to the view securing area is automatically adjusted. 請求項1ないし請求項5のいずれかに記載の画像処理装置を備えることを特徴とする医用診断装置。



A medical diagnostic apparatus comprising the image processing apparatus according to any one of claims 1 to 5.



JP2006208152A 2006-07-31 2006-07-31 Image processing apparatus and medical diagnostic apparatus including the image processing apparatus Active JP5170993B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006208152A JP5170993B2 (en) 2006-07-31 2006-07-31 Image processing apparatus and medical diagnostic apparatus including the image processing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006208152A JP5170993B2 (en) 2006-07-31 2006-07-31 Image processing apparatus and medical diagnostic apparatus including the image processing apparatus

Publications (2)

Publication Number Publication Date
JP2008029694A true JP2008029694A (en) 2008-02-14
JP5170993B2 JP5170993B2 (en) 2013-03-27

Family

ID=39119703

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006208152A Active JP5170993B2 (en) 2006-07-31 2006-07-31 Image processing apparatus and medical diagnostic apparatus including the image processing apparatus

Country Status (1)

Country Link
JP (1) JP5170993B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010072922A (en) * 2008-09-18 2010-04-02 Kddi Corp Image generation device, method, and program
JP2012016575A (en) * 2010-06-07 2012-01-26 Toshiba Corp Image processing apparatus and medical image diagnosis apparatus
JPWO2012124250A1 (en) * 2011-03-15 2014-07-17 パナソニック株式会社 Object control apparatus, object control method, object control program, and integrated circuit
WO2017051570A1 (en) * 2015-09-24 2017-03-30 ソニー株式会社 Information processing device, information processing method, and program
CN109426419A (en) * 2017-09-05 2019-03-05 菜鸟智能物流控股有限公司 Interface display method and related equipment
US10278613B2 (en) 2012-12-25 2019-05-07 Fujifilm Corporation Image processing apparatus, image processing method, and a non-transitory computer readable recording medium containing an image processing program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1031761A (en) * 1996-07-17 1998-02-03 Ge Yokogawa Medical Syst Ltd Image display method and image display device
JP2001076184A (en) * 1999-09-03 2001-03-23 Ge Yokogawa Medical Systems Ltd Method and device for three-dimensional display
JP2001084409A (en) * 1999-09-13 2001-03-30 Toshiba Iyo System Engineering Kk Method and device for processing three-dimensional image
JP2003091735A (en) * 2001-09-19 2003-03-28 Toshiba Medical System Co Ltd Image processor
JP2007531554A (en) * 2003-11-03 2007-11-08 ブラッコ イメージング エス.ピー.エー. Display for stereoscopic display of tubular structures and improved technology for the display ("stereo display")

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1031761A (en) * 1996-07-17 1998-02-03 Ge Yokogawa Medical Syst Ltd Image display method and image display device
JP2001076184A (en) * 1999-09-03 2001-03-23 Ge Yokogawa Medical Systems Ltd Method and device for three-dimensional display
JP2001084409A (en) * 1999-09-13 2001-03-30 Toshiba Iyo System Engineering Kk Method and device for processing three-dimensional image
JP2003091735A (en) * 2001-09-19 2003-03-28 Toshiba Medical System Co Ltd Image processor
JP2007531554A (en) * 2003-11-03 2007-11-08 ブラッコ イメージング エス.ピー.エー. Display for stereoscopic display of tubular structures and improved technology for the display ("stereo display")

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010072922A (en) * 2008-09-18 2010-04-02 Kddi Corp Image generation device, method, and program
JP2012016575A (en) * 2010-06-07 2012-01-26 Toshiba Corp Image processing apparatus and medical image diagnosis apparatus
JPWO2012124250A1 (en) * 2011-03-15 2014-07-17 パナソニック株式会社 Object control apparatus, object control method, object control program, and integrated circuit
US10278613B2 (en) 2012-12-25 2019-05-07 Fujifilm Corporation Image processing apparatus, image processing method, and a non-transitory computer readable recording medium containing an image processing program
WO2017051570A1 (en) * 2015-09-24 2017-03-30 ソニー株式会社 Information processing device, information processing method, and program
US10855925B2 (en) 2015-09-24 2020-12-01 Sony Corporation Information processing device, information processing method, and program
CN109426419A (en) * 2017-09-05 2019-03-05 菜鸟智能物流控股有限公司 Interface display method and related equipment
CN109426419B (en) * 2017-09-05 2022-06-03 菜鸟智能物流控股有限公司 Interface display method and related equipment

Also Published As

Publication number Publication date
JP5170993B2 (en) 2013-03-27

Similar Documents

Publication Publication Date Title
JP5637653B2 (en) Medical image processing apparatus, ultrasonic diagnostic apparatus, and medical image processing program
JP6549711B2 (en) Endoscope apparatus and operating method of endoscope apparatus
JP5495357B2 (en) Image display method and medical image diagnostic system
JP5639739B2 (en) Method and system for volume rendering of multiple views
JP4937261B2 (en) System and method for selectively mixing 2D X-ray images and 3D ultrasound images
JP5417609B2 (en) Medical diagnostic imaging equipment
US20070046661A1 (en) Three or four-dimensional medical imaging navigation methods and systems
CN105769240B (en) Apparatus and method for displaying medical image
JP4786307B2 (en) Image processing device
US20190051039A1 (en) Image processing apparatus, image processing method, program, and surgical system
JP5170993B2 (en) Image processing apparatus and medical diagnostic apparatus including the image processing apparatus
US9721355B2 (en) Methods and systems for defining a VOI in an ultrasound imaging space
JP2010069018A (en) Medical guide system
JP4350226B2 (en) 3D image processing device
JP5114121B2 (en) Medical image processing device
CN114126527A (en) Composite medical imaging system and method
JP6112689B1 (en) Superimposed image display system
JP5807826B2 (en) Surgery support device and surgery support program
KR101014559B1 (en) Ultrasound system and method for providing 3-dimensional ultrasound images
JP5624336B2 (en) Medical image processing apparatus and medical image processing program
JP5498185B2 (en) Ultrasonic diagnostic apparatus and ultrasonic image display program
JP2011036474A (en) Image processor and ultrasonic diagnostic apparatus
JP7172086B2 (en) Surgery simulation device and surgery simulation program
JP5583472B2 (en) Medical image diagnostic apparatus and control program
JP5523784B2 (en) Image processing apparatus and medical image diagnostic apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090722

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20100804

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20100908

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100817

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120913

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121225

R150 Certificate of patent or registration of utility model

Ref document number: 5170993

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350