JP2011135937A - Medical image processing apparatus, medical image processing program, and medical image diagnostic apparatus - Google Patents
Medical image processing apparatus, medical image processing program, and medical image diagnostic apparatus Download PDFInfo
- Publication number
- JP2011135937A JP2011135937A JP2009296238A JP2009296238A JP2011135937A JP 2011135937 A JP2011135937 A JP 2011135937A JP 2009296238 A JP2009296238 A JP 2009296238A JP 2009296238 A JP2009296238 A JP 2009296238A JP 2011135937 A JP2011135937 A JP 2011135937A
- Authority
- JP
- Japan
- Prior art keywords
- image
- viewpoint
- line
- virtual endoscopic
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 55
- 238000000034 method Methods 0.000 claims abstract description 89
- 239000002131 composite material Substances 0.000 claims abstract description 29
- 210000000056 organ Anatomy 0.000 claims abstract description 20
- 210000002429 large intestine Anatomy 0.000 abstract description 48
- 238000003745 diagnosis Methods 0.000 abstract description 10
- 238000010586 diagram Methods 0.000 description 24
- 210000001072 colon Anatomy 0.000 description 20
- 239000000203 mixture Substances 0.000 description 16
- 238000002591 computed tomography Methods 0.000 description 12
- 208000037062 Polyps Diseases 0.000 description 6
- 206010016717 Fistula Diseases 0.000 description 4
- 230000003890 fistula Effects 0.000 description 4
- 238000002595 magnetic resonance imaging Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 241000255777 Lepidoptera Species 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013170 computed tomography imaging Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 235000012489 doughnuts Nutrition 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 210000000936 intestine Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010882 preoperative diagnosis Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Image Generation (AREA)
- Image Analysis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
Description
本発明は、医用画像処理装置、医用画像処理プログラム及び医用画像診断装置に関する。 The present invention relates to a medical image processing apparatus, a medical image processing program, and a medical image diagnostic apparatus.
従来、医用画像診断装置により収集された3次元画像データを表示する医用画像処理装置がある。ここでいう医用画像診断装置とは、X線コンピュータ断層撮影(Computer Tomography:CT)装置や磁気共鳴イメージング(Magnetic Resonance Imaging:MRI)装置、X線診断装置、超音波診断装置などである。 Conventionally, there is a medical image processing apparatus that displays three-dimensional image data collected by a medical image diagnostic apparatus. The medical image diagnostic apparatus here is an X-ray computed tomography (CT) apparatus, a magnetic resonance imaging (MRI) apparatus, an X-ray diagnostic apparatus, an ultrasonic diagnostic apparatus, or the like.
かかる医用画像処理装置の一例として、例えば、X線CT装置により収集された大腸の3次元画像を表示する大腸解析システムがある。大腸解析システムは、CTC(CT Colonography)と呼ばれる大腸の3次元画像表示を行う。そして、このCTCで用いられる画像表示方法の1つに、仮想内視鏡(Virtual Endoscopy:VE)がある(例えば、特許文献1参照)。 An example of such a medical image processing apparatus is a large intestine analysis system that displays a three-dimensional image of the large intestine collected by an X-ray CT apparatus. The large intestine analysis system displays a three-dimensional image of the large intestine called CTC (CT Colonography). One of the image display methods used in this CTC is a virtual endoscope (VE) (see, for example, Patent Document 1).
VEは、内視鏡画像と同様に、視点から近い位置にある物体を大きく、視点から遠い位置にある物体を小さくしたVE画像を表示することができる。また、VEは、視点の位置や方向を任意に設定することができるので、内視鏡では観察できない領域を表示することもできる。そして、一般的に、VEでは、あらかじめ抽出された大腸内腔を通る3次元芯線の起動上で自動的に視点を移動する画像表示が行われる。このような画像表示法はフライスルー(Flythrough)表示と呼ばれる。実際の診断では、例えば、操作者は、フライスルー表示で視点の移動中に更新されるVE画像を観察することで診断を行う。 Similar to the endoscopic image, the VE can display a VE image in which an object that is close to the viewpoint is large and an object that is far from the viewpoint is small. In addition, since the VE can arbitrarily set the position and direction of the viewpoint, it can also display an area that cannot be observed with an endoscope. In general, VE displays an image that automatically moves the viewpoint upon activation of a three-dimensional core line that passes through a colon cavity extracted in advance. Such an image display method is called a flythrough display. In the actual diagnosis, for example, the operator makes a diagnosis by observing a VE image that is updated while moving the viewpoint in fly-through display.
ここで、VE画像は、透視投影(Perspective Projection)法によるVR(Volume Rendering)画像として生成されるのが一般的である。 Here, the VE image is generally generated as a VR (Volume Rendering) image by a perspective projection method.
図9−1及び9−2は、従来の透視投影法を説明するための図である。図9−1は、透視投影法により生成される透視投影画像の一例を示している。図9−1に示すように、透視投影法によれば、内視鏡画像と同様な大腸内腔のVR画像が生成される。また、図9−2は、透視投影法における視点、視線及びFOV(Field Of View)角を示している。図9−2に示すように、透視投影法では、大腸内腔に視点、視線方向、及び、視線方向を中心とする視野角であるFOVが設定される。そして、透視投影法では、視線方向及びFOV角で定まる範囲に向けて視点位置から放射状に透視投影することで、図9−1に示した透視投影画像が生成される。なお、透視投影法におけるFOV角の最大値は180°である。 9A and 9B are diagrams for explaining a conventional perspective projection method. FIG. 9A illustrates an example of a perspective projection image generated by the perspective projection method. As shown in FIG. 9A, according to the perspective projection method, a VR image of the colon cavity similar to the endoscopic image is generated. FIG. 9-2 shows the viewpoint, line of sight, and FOV (Field Of View) angle in the perspective projection method. As shown in FIG. 9-2, in the perspective projection method, the viewpoint, the line-of-sight direction, and the FOV that is the viewing angle centered on the line-of-sight direction are set in the colon cavity. In the perspective projection method, the perspective projection image shown in FIG. 9A is generated by performing perspective projection radially from the viewpoint position toward the range determined by the line-of-sight direction and the FOV angle. Note that the maximum value of the FOV angle in the perspective projection method is 180 °.
さらに、VE画像は、魚眼投影(Fisheye Projection)法により生成される場合もある。魚眼投影法とは、FOV角を180°以上とした投影法である。 Furthermore, the VE image may be generated by a fisheye projection method. The fisheye projection method is a projection method in which the FOV angle is 180 ° or more.
図10−1及び10−2は、従来の魚眼投影法を説明するための図である。図10−1は、魚眼投影法により生成される魚眼投影画像の一例を示している。図10−1に示すように、魚眼投影法によれば、視点後方にある大腸壁まで表示したVR画像が生成される。また、図10−2は、魚眼投影法における視点、視線及びFOV角を示している。図10−2に示すように、魚眼投影法では、FOV角が180°以上となるので、通常の透視投影法と比べて広い範囲を表示することができる。 10A and 10B are diagrams for explaining a conventional fisheye projection method. FIG. 10A illustrates an example of a fisheye projection image generated by the fisheye projection method. As shown in FIG. 10A, according to the fisheye projection method, a VR image displayed up to the large intestine wall behind the viewpoint is generated. FIG. 10-2 shows the viewpoint, line of sight, and FOV angle in the fisheye projection method. As shown in FIG. 10-2, since the FOV angle is 180 ° or more in the fish-eye projection method, a wider range can be displayed than in the normal perspective projection method.
しかしながら、上述した従来の技術では、一方向の視線方向からでは見えない領域が存在するために診断効率及び診断精度が低減するという課題がある。 However, the above-described conventional technique has a problem that diagnostic efficiency and diagnostic accuracy are reduced because there is a region that cannot be seen from one sight line direction.
図11は、従来の透視投影法における課題を説明するための図である。図11に示すように、例えば、透視投影法では、投影方向が視点前方に限られるため、大腸壁の突起部に隠れて見えない範囲が存在する。このような場合には、見えない範囲に存在するポリープの診断もれが生じる可能性がある。 FIG. 11 is a diagram for explaining a problem in the conventional perspective projection method. As shown in FIG. 11, for example, in the perspective projection method, since the projection direction is limited to the front of the viewpoint, there is a range that is hidden behind the projection on the large intestine wall and cannot be seen. In such a case, there is a possibility that a diagnosis leak of a polyp existing in an invisible range may occur.
図12は、従来の魚眼投影法における課題を説明するための図である。図12に示すように、例えば、魚眼投影法では、視点後方にある大腸壁まで表示されるので、通常の透視投影法より広い範囲を表示することができる。したがって、透視投影法と比べてポリープの診断もれを低減させることができる。しかし、魚眼投影法では、フライスルー表示において、視点の直後にある大腸襞の裏側は襞を通り過ぎる瞬間に一瞬見えるだけなので、ポリープが見落とされやすい。また、視点後方部分の画像は歪んでいるためポリープの形状が変形しており、正確に診断を行うことが難しい。また、視点の後方にある部分が視点の前方にあるかのように見えるため、視点とポリープとの位置関係が把握しにくい。 FIG. 12 is a diagram for explaining a problem in the conventional fisheye projection method. As shown in FIG. 12, for example, in the fish-eye projection method, the large intestine wall behind the viewpoint is displayed, so that a wider range than the normal perspective projection method can be displayed. Therefore, the diagnosis leakage of the polyp can be reduced as compared with the perspective projection method. However, in the fish-eye projection method, in the fly-through display, the back side of the large intestine immediately after the viewpoint is only visible for a moment at the moment of passing through the eyelid, so the polyp is easily overlooked. Further, since the image at the rear of the viewpoint is distorted, the shape of the polyp is deformed, and it is difficult to accurately diagnose. In addition, since the portion behind the viewpoint appears to be in front of the viewpoint, it is difficult to grasp the positional relationship between the viewpoint and the polyp.
本発明は、上記に鑑みてなされたものであって、一方向の視線方向からでは見えない領域を観察可能にすることで診断効率及び診断精度を向上させることができる医用画像処理装置、医用画像処理プログラム及び医用画像診断装置を提供することを目的とする。 The present invention has been made in view of the above, and a medical image processing apparatus and a medical image capable of improving diagnostic efficiency and diagnostic accuracy by enabling observation of a region that cannot be seen from one gaze direction It is an object to provide a processing program and a medical image diagnostic apparatus.
上述した課題を解決し、目的を達成するために、請求項1記載の本発明は、医用画像処理装置が、医用画像診断装置により収集された3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、第一の視線方向から管腔臓器内を投影した第一の仮想内視鏡画像を生成する第一の画像生成手段と、前記3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、前記第一の視線方向とは逆の第二の視線方向から前記管腔臓器内を投影した第二の仮想内視鏡画像を生成する第二の画像生成手段と、前記第一の画像生成手段により生成された第一の仮想内視鏡画像と前記第二の画像生成手段により生成された第二の仮想内視鏡画像とをそれぞれ表示部に表示させる画像表示制御手段とを備えたことを特徴とする。
In order to solve the above-mentioned problems and achieve the object, the present invention according to
また、請求項7記載の本発明は、医用画像処理プログラムが、医用画像診断装置により収集された3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、第一の視線方向から管腔臓器内を投影した第一の仮想内視鏡画像を生成する第一の画像生成手順と、前記3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、前記第一の視線方向とは逆の第二の視線方向から前記管腔臓器内を投影した第二の仮想内視鏡画像を生成する第二の画像生成手順と、前記第一の画像生成手順により生成された第一の仮想内視鏡画像と前記第二の画像生成手順により生成された第二の仮想内視鏡画像とをそれぞれ表示部に表示させる画像表示制御手順とをコンピュータに実行させることを特徴とする。 According to the seventh aspect of the present invention, the medical image processing program performs the three-dimensional processing by the perspective projection method or the fish-eye projection method on the three-dimensional image data collected by the medical image diagnostic apparatus. A first image generation procedure for generating a first virtual endoscopic image in which a hollow organ is projected from one line-of-sight direction, and a three-dimensional image obtained by perspective projection or fish-eye projection with respect to the three-dimensional image data. A second image generation procedure for generating a second virtual endoscopic image by projecting the inside of the luminal organ from a second line-of-sight direction opposite to the first line-of-sight direction; Image display control procedure for displaying the first virtual endoscopic image generated by the first image generation procedure and the second virtual endoscopic image generated by the second image generation procedure on the display unit, respectively. And having the computer execute
また、請求項8記載の本発明は、医用画像診断装置が、医用画像を収集する画像収集手段と、前記画像収集手段により収集された3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、第一の視線方向から管腔臓器内を投影した第一の仮想内視鏡画像を生成する第一の画像生成手段と、前記3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、前記第一の視線方向とは逆の第二の視線方向から前記管腔臓器内を投影した第二の仮想内視鏡画像を生成する第二の画像生成手段と、前記第一の画像生成手段により生成された第一の仮想内視鏡画像と前記第二の画像生成手段により生成された第二の仮想内視鏡画像とをそれぞれ表示部に表示させる画像表示制御手段とを備えたことを特徴とする。 Further, according to the present invention, the medical image diagnostic apparatus includes an image collection unit that collects a medical image, and a perspective projection method or a fish-eye projection method on the three-dimensional image data collected by the image collection unit. The first image generating means for generating the first virtual endoscopic image in which the inside of the luminal organ is projected from the first line-of-sight direction by performing the three-dimensional processing according to FIG. A second virtual endoscopic image is generated by projecting the inside of the luminal organ from a second line-of-sight direction opposite to the first line-of-sight direction by performing three-dimensional processing by a projection method or a fish-eye projection method Second image generating means, a first virtual endoscopic image generated by the first image generating means, and a second virtual endoscopic image generated by the second image generating means. Image display control means for displaying on each display unit And butterflies.
請求項1、7及び8記載の本発明によれば、一方向の視線方向からでは見えない領域を観察可能にすることで診断効率及び診断精度を向上させることができるという効果を奏する。 According to the first, seventh, and eighth aspects of the present invention, it is possible to improve diagnostic efficiency and diagnostic accuracy by making it possible to observe a region that cannot be seen from one sight line direction.
以下に、本発明に係る医用画像処理装置、医用画像処理プログラム及び医用画像診断装置の実施例を図面に基づいて詳細に説明する。なお、以下に示す実施例では、X線CT装置によって収集された3次元画像を表示する医用画像処理装置に本発明を適用した場合について説明する。また、以下に示す実施例では、管腔臓器の3次元画像の一例として、大腸の3次元画像を表示する場合について説明する。 Embodiments of a medical image processing apparatus, a medical image processing program, and a medical image diagnostic apparatus according to the present invention will be described below in detail with reference to the drawings. In the following embodiment, a case where the present invention is applied to a medical image processing apparatus that displays a three-dimensional image collected by an X-ray CT apparatus will be described. In the following embodiment, a case where a three-dimensional image of the large intestine is displayed as an example of a three-dimensional image of a hollow organ will be described.
まず、本実施例に係る医用画像処理装置の構成について説明する。 First, the configuration of the medical image processing apparatus according to the present embodiment will be described.
図1は、本実施例に係る医用画像処理装置10の構成を示す機能ブロック図である。図1に示すように、医用画像処理装置10は、X線CT装置20に接続されており、そのX線CT装置20によって収集された画像データを処理の対象とする。
FIG. 1 is a functional block diagram illustrating a configuration of a medical
また、医用画像処理装置10は、表示部11と、3次元画像記憶部12と、3次元芯線情報記憶部13と、視点・視線移動部14と、正方向VE画像生成部15と、逆方向VE画像視点・視線算出部16と、逆方向VE画像生成部17と、正逆VE画像合成表示部18とを有する。
In addition, the medical
なお、この医用画像処理装置10は、例えば、汎用のコンピュータ装置を基本ハードウェアとして用いることにより実現することができる。また、医用画像処理装置10が有する各部は、所定の処理手順を規定した医用画像処理プログラムをコンピュータ装置に搭載されたプロセッサに実行させることにより実現することができる。
The medical
このとき、医用画像処理プログラムは、コンピュータ装置にあらかじめインストールされていてもよいし、磁気ディスクや光磁気ディスク、光ディスク、半導体メモリなどのリムーバブルな記録媒体に記録され、あるいはネットワークを介して配布されて、コンピュータ装置に適宜インストールされてもよい。また、医用画像処理装置10の各部は、その一部又は全てをロジック回路などのハードウェアにより実現することも可能であるし、ハードウェアとソフトウェア制御とを組み合わせて実現することも可能である。
At this time, the medical image processing program may be preinstalled in the computer device, or may be recorded on a removable recording medium such as a magnetic disk, a magneto-optical disk, an optical disk, or a semiconductor memory, or distributed via a network. The computer apparatus may be installed as appropriate. Each part of the medical
表示部11は、医用画像処理装置10によって処理された各種医用画像を表示する。この表示部11は、例えば、液晶モニタやCRT(Cathode-Ray Tube)モニタなどである。
The
3次元画像記憶部12は、X線CT装置20により収集された3次元画像データを記憶する。本実施例では、3次元画像記憶部12は、大腸内部をガスで拡張して、仰臥位又は伏臥位でCT撮像された腹部の3次元画像データを保存する。なお、3次元画像記憶部12は、例えば、HDD(Hard Disk Drive)や半導体メモリなどである。
The 3D
3次元芯線情報記憶部13は、大腸内腔を通る3次元芯線を示す3次元芯線情報を記憶する。この3次元芯線情報記憶部13に記憶される3次元芯線情報は、3次元画像記憶部12により記憶された3次元画像データからあらかじめ抽出される。なお、3次元芯線情報記憶部13は、例えば、HDDや半導体メモリなどである。
The 3D core line
視点・視線移動部14は、後述する正方向VE画像生成部15により生成される正方向VE画像の視点を、大腸内腔を通る3次元芯線の軌道に沿って一定の距離間隔及び一定の時間間隔で移動させる。
The viewpoint / line-of-
正方向VE画像生成部15は、3次元画像記憶部12により記憶された3次元画像データに対して透視投影法による3次元処理を施すことで、視点・視線移動部14により設定される視線方向から大腸内腔を投影した正方向VE画像を生成する。
The forward-direction VE
逆方向VE画像視点・視線算出部16は、後述する逆方向VE画像生成部17により生成される逆方向VE画像の視点を、視点・視線移動部14による正方向VE画像の視点の移動にともなって再設定する。
The reverse-direction VE image viewpoint / line-of-sight calculation unit 16 changes the viewpoint of the reverse-direction VE image generated by the reverse-direction VE image generation unit 17 (to be described later) as the viewpoint / line-of-
逆方向VE画像生成部17は、3次元画像記憶部12により記憶された3次元画像データに対して透視投影法による3次元処理を施すことで、正方向VE画像の視線方向とは逆の視線方向から大腸内腔を投影した逆方向VE画像を生成する。
The reverse direction VE
正逆VE画像合成表示部18は、正方向VE画像生成部15により生成された正方向VE画像と逆方向VE画像生成部17により生成された逆方向VE画像とをそれぞれ表示部11に表示させる。本実施例では、正逆VE画像合成表示部18は、正方向VE画像の内側に逆方向VE画像を2次元的に重ね合わせた正逆VE合成画像を生成し、生成した正逆VE合成画像を表示部11に表示させる。
The forward / reverse VE image
次に、本実施例に係る医用画像処理装置10の動作について説明する。なお、ここでは、医用画像処理装置10全体の動作を説明するとともに、図1に示した各部により行われる処理について詳細に説明する。
Next, the operation of the medical
図2は、本実施例に係る医用画像処理装置10の動作を示すフローチャートである。図2に示すように、医用画像処理装置10では、視点・視線移動部14が、例えば、入力部(図示せず)を介して操作者から画像表示の開始指示を受け付けた場合に(ステップS11,Yes)、3次元芯線情報記憶部13に記憶されている3次元芯線情報に基づいて、正方向VE画像の初期視点及び初期視線を算出する(ステップS12)。
FIG. 2 is a flowchart illustrating the operation of the medical
図3は、3次元芯線情報記憶部13により記憶される3次元芯線情報の一例を示す図である。図3に示すように、3次元芯線情報記憶部13は、3次元芯線情報として、大腸内腔を通る3次元芯線を表す複数の点列データC1〜CNを記憶する。ここで、n番目の点列データは座標Cn及びベクトルTCnで表される。また、各点列データは、3次元画像記憶部12によって記憶された3次元画像データからあらかじめ抽出され、3次元芯線情報記憶部13に記憶される。
FIG. 3 is a diagram illustrating an example of the three-dimensional core line information stored in the three-dimensional core line
具体的には、視点・視線移動部14は、まず、3次元芯線情報記憶部13に記憶されている3次元芯線情報を参照して、最初の点列データであるC1を取得する。その後、視点・視線移動部14は、以下に示す式(1)及び(2)により、取得した点列データC1から初期視点座標Ps及び初期視線ベクトルVsを算出する。そして、視点・視線移動部14は、算出した初期視点座標Ps及び初期視線ベクトルVsを内部メモリ(図示せず)に保存する。
Specifically, the viewpoint / line-of-
なお、後に説明するが、視点・視線移動部14は、3次元芯線情報記憶部13により記憶された3次元芯線情報を参照して、点列データC1〜CNを1つずつ順番に取得する。そして、視点・視線移動部14は、最初の点列データであるC1を取得したときには、上述した手順で初期視点座標Ps及び初期視線ベクトルVsを算出する。また、視点・視線移動部14は、m番目の点列データを取得したときには、視点座標Pm及び視線ベクトルVmを算出する。そこで、以下に示す説明では、視点座標を総じてPと表し、視線ベクトルを総じてVと表す。
As will be described later, the viewpoint / line-of-
図2にもどって、続いて、正方向VE画像生成部15が、視点・視線移動部14により算出された視点及び視線に基づいて正方向VE画像を生成する(ステップS13)。
Returning to FIG. 2, subsequently, the positive direction VE
具体的には、正方向VE画像生成部15は、まず、視点・視線移動部14により算出された視点座標P及び視線ベクトルVを内部メモリから取得する。そして、正方向VE画像生成部15は、取得した視点座標P及び視線ベクトルVに基づいて、3次元画像記憶部12により記憶された3次元画像データに対して透視投影法による3次元処理を施すことで、正方向VE画像を生成する。なお、このとき、正方向VE画像生成部15は、FOV角を所定の角度(例えば、90°)に設定して、正方向VE画像を生成する。また、このとき、正方向VE画像生成部15は、例えば、正方向VE画像における大腸内腔の空気領域の透明度を「0」に設定し、大腸内壁の透明度を「1」に設定する。
Specifically, the positive direction VE
続いて、逆方向VE画像視点・視線算出部16が、逆方向VE画像の視点及び視線を算出する(ステップS14)。 Subsequently, the backward VE image viewpoint / line-of-sight calculation unit 16 calculates the viewpoint and line of sight of the backward VE image (step S14).
図4は、逆方向VE画像視点・視線算出部16による視点及び視線の算出を説明するための図である。具体的には、逆方向VE画像視点・視線算出部16は、まず、視点・視線移動部14により算出された視点座標Pを内部メモリから取得する。そして、逆方向VE画像視点・視線算出部16は、図4に示すように、視点座標PからFOV内を放射状に投影した場合に、視点座標Pから最も近い位置で大腸内壁に接する接線Tを求める。
FIG. 4 is a diagram for explaining the calculation of the viewpoint and the line of sight by the backward direction VE image viewpoint / line-of-sight calculation unit 16. Specifically, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 first acquires the viewpoint coordinates P calculated by the viewpoint / line-of-
さらに、逆方向VE画像視点・視線算出部16は、接線Tが大腸内壁に接する接点Sを求める。また、逆方向VE画像視点・視線算出部16は、視点座標Pから接点Sに向かう方向へ接線Tを伸ばした場合に接線Tと大腸内壁とが交わる交点Kを求める。このとき、例えば、逆方向VE画像視点・視線算出部16は、正方向VE画像生成部15によって生成された正方向VE画像において透明度が「1」に設定されている領域の表面を大腸内壁として検出する。
Further, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 obtains a contact S at which the tangent T contacts the large intestine inner wall. Further, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 obtains an intersection point K where the tangent line T intersects the large intestine inner wall when the tangent line T extends in the direction from the viewpoint coordinate P toward the contact point S. At this time, for example, the reverse-direction VE image viewpoint / line-of-sight calculation unit 16 uses the surface of the region whose transparency is set to “1” in the normal-direction VE image generated by the normal-direction VE
そして、逆方向VE画像視点・視線算出部16は、視線ベクトルVに垂直であり、かつ交点Kを通る平面Hを求める。そして、逆方向VE画像視点・視線算出部16は、正方向VE画像の視点座標Pの平面Hに対する対称点を逆方向VE画像の視点座標Prとして算出する。さらに、逆方向VE画像視点・視線算出部16は、以下に示す式(3)により、正方向VE画像の視線ベクトルVの逆ベクトルを逆方向VE画像の視線ベクトルVrとして算出する。 Then, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 obtains a plane H that is perpendicular to the line-of-sight vector V and passes through the intersection K. Then, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 calculates a symmetry point with respect to the plane H of the viewpoint coordinates P of the forward direction VE image as the viewpoint coordinates Pr of the reverse direction VE image. Further, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 calculates the reverse vector of the line-of-sight vector V of the forward direction VE image as the line-of-sight vector Vr of the reverse direction VE image by the following equation (3).
その後、逆方向VE画像視点・視線算出部16は、算出した視点座標Pr及び視線ベクトルVrを内部メモリに保存する。 Thereafter, the reverse direction VE image viewpoint / line-of-sight calculation unit 16 stores the calculated viewpoint coordinates Pr and line-of-sight vector Vr in the internal memory.
図2にもどって、続いて、逆方向VE画像生成部17が、逆方向VE画像を生成する(ステップS15)。
Returning to FIG. 2, subsequently, the reverse VE
具体的には、逆方向VE画像生成部17は、まず、逆方向VE画像視点・視線算出部16により算出された視点座標Pr及び視線ベクトルVrを内部メモリから取得する。そして、逆方向VE画像生成部17は、取得した視点座標Pr及び視線ベクトルVrに基づいて、3次元画像記憶部12により記憶された3次元画像データに対して透視投影法による3次元処理を施すことで、逆方向VE画像を生成する。なお、このとき、逆方向VE画像生成部17は、正方向VE画像のFOV角と同じ角度にFOV角を設定して、逆方向VE画像を生成する(図4参照)。
Specifically, the reverse direction VE
図5は、逆方向VE画像生成部17により生成される逆方向VE画像の一例を説明するための図である。図5に示すように、例えば、逆方向VE画像生成部17は、逆方向VE画像が投影される投影面Rをドーナツ状の領域に限定する。このとき、逆方向VE画像生成部17は、3次元画像データの3次元空間上において、ドーナツ状領域の外径Oをあらかじめ決められた任意の値に設定する。例えば、逆方向VE画像生成部17は、外径Oを平均的な大腸内腔の1/2の径(約20mm)に設定する。
FIG. 5 is a diagram for explaining an example of the backward VE image generated by the backward VE
ここで、逆方向VE画像生成部17は、逆方向VE画像の視点座標Prと交点Kとを結ぶFOV内に外径Oのドーナツ状領域が接するように、逆方向VE画像の視点座標Prと投影面Rとの距離を設定する(図4参照)。そして、逆方向VE画像生成部17は、逆方向VE画像の視点座標Prと接点Sとを結ぶ線分と投影面Rとの交点を算出し、その交点とドーナツ状領域の中心点との間の距離をドーナツ状領域の内径Iとして設定する(図5参照)。
Here, the reverse direction VE
このように逆方向VE画像の投影領域を設定することにより、逆方向VE画像のドーナツ状の投影領域には、正方向VE画像に投影されない接点Sと交点Kとの間に存在する大腸内壁が投影される。 By setting the projection area of the reverse VE image in this way, the inner wall of the large intestine existing between the contact point S and the intersection K that is not projected on the normal VE image is present in the donut-shaped projection area of the reverse VE image. Projected.
なお、逆方向VE画像生成部17は、平面Hよりも逆方向VE画像の視点座標Pr側の領域は投影対象としないこととする。これにより、逆方向VE画像に投影される大腸内腔領域は、平面Hよりも正方向VE画像の視点座標P側の領域のみになる。この結果、本来観察したい領域、すなわち、正方向VE画像に投影されない接点Sと交点Kとの間に存在する大腸内壁が、平面Hよりも逆方向VE画像の視点座標Pr側の領域に存在する大腸襞によって隠れて逆方向VE画像に投影されない状況を防ぐことができる。
Note that the reverse direction VE
図2にもどって、続いて、正逆VE画像合成表示部18が、正方向VE画像と逆方向VE画像とを合成した正逆VE合成画像を生成する(ステップS16)。
Returning to FIG. 2, the forward / reverse VE image
図6は、正逆VE画像合成表示部18による正逆VE合成画像の生成を説明するための図である。図6に示すように、正逆VE画像合成表示部18は、逆方向VE画像生成部17により生成された逆方向VE画像を平面Hに写像し、写像された逆方向VE画像を正方向VE画像の視点座標Pから投影した画像を正方向VE画像上に合成することで、正逆VE合成画像を生成する。
FIG. 6 is a diagram for explaining generation of a forward / reverse VE composite image by the forward / reverse VE image
これにより、逆方向VE画像が、正方向VE画像には投影されない接点Sと交点Kとの間に存在する大腸内壁の端点である交点Kの位置に表示される。したがって、逆方向VE画像が、適度な大きさでかつ平面Hより逆方向VE画像の視点座標Pr側の大腸襞に隠れることなく表示される。 Thereby, the reverse direction VE image is displayed at the position of the intersection point K which is the end point of the inner wall of the large intestine existing between the contact point S and the intersection point K which are not projected on the forward direction VE image. Therefore, the reverse direction VE image is displayed in an appropriate size and not hidden behind the large intestine fistula on the viewpoint coordinate Pr side of the reverse direction VE image from the plane H.
図2にもどって、続いて、正逆VE画像合成表示部18は、生成した正逆VE合成画像を表示部11に表示させる(ステップS17)。
Returning to FIG. 2, subsequently, the forward / reverse VE image
図7は、正逆VE画像合成表示部18により表示部11に表示される正逆VE合成画像を示す図である。図7に示すように、正逆VE合成画像では、ドーナツ状領域上に逆方向VE画像が表示される。また、ドーナツ状領域の外径より外側の領域及び内径より内側の領域に正方向VE画像が表示される。したがって、大腸フライスルーにおける前方への進行方向を見失うことがない。
FIG. 7 is a diagram showing a forward / reverse VE composite image displayed on the
なお、例えば、正逆VE画像合成表示部18は、操作者によるマウスやキーボードの操作に応じて、ドーナツ状領域の内径内部にも逆方向VE画像を表示し、ドーナツ状領域全体が逆方向VE画像になるように表示を切り替えるようにしてもよい。
Note that, for example, the forward / reverse VE image
図2にもどって、続いて、視点・視線移動部14が、3次元芯線情報記憶部13に記憶されている全ての点列データについて処理を行っていない場合に(ステップS18,No)、正方向VE画像の視点及び視線を大腸内に設定された3次元芯線の軌道に沿って移動させる(ステップS19)。このとき、視点・視線移動部14は、正方向VE画像の視点及び視線を一定の距離間隔及び一定の時間間隔で移動させる。
Returning to FIG. 2, when the viewpoint / line-of-
具体的には、視点・視線移動部14は、m回目に視点及び視線を移動させる場合には、以下に示す式(4)、(5)及び(6)により、視点座標Pm、視線ベクトルVm、及び、3次元芯線上を始点C1から曲線に沿って移動した距離Lmを算出する(図3参照)。
Specifically, when the viewpoint / line-of-
ここで、ΔLは、1回の視点移動で大腸内腔の3次元芯線上を曲線に沿って移動する距離(例えば、2mm)を示す。また、C(Lm)は、大腸内腔の3次元芯線上を始点C1からLmだけ曲線に沿って移動した芯線上の点の3次元座標を示す。また、ベクトルTC(Lm)は、C(Lm)における始点C1から終点CNに向かう方向の3次元芯線の接線ベクトルである。 Here, ΔL indicates a distance (for example, 2 mm) for moving along the curved line on the three-dimensional core line of the large intestine lumen by one viewpoint movement. C (Lm) indicates the three-dimensional coordinates of a point on the core line that has moved along the curve from the start point C1 by Lm on the three-dimensional core line of the colon cavity. The vector TC (Lm) is a tangent vector of a three-dimensional core line in the direction from the start point C1 to the end point CN in C (Lm).
視点・視線移動部14は、3次元芯線情報記憶部13に記憶されている全ての点列データについて上記の処理を行うまでは(ステップS18,No)、一定の時間間隔(例えば、0.2秒間隔)で視点を移動させる(ステップS19)。これにより、ステップS13〜S17の処理が一定の時間間隔で繰り返し実行される。すなわち、一定の時間間隔で視点が大腸内腔の3次元芯線に沿って移動するように正逆VE合成画像を表示する大腸フライスルー表示が実現される。
The viewpoint / line-of-
図8は、正逆VE合成画像の大腸フライスルー表示で投影される領域の変化を説明するための図である。図8は、上記で説明したステップによる視点の移動にともなって、正逆VE合成画像上に表示される逆方向VE画像に投影される領域がどのように変化していくかを示している。 FIG. 8 is a diagram for explaining a change in the region projected in the large intestine fly-through display of the forward / reverse VE composite image. FIG. 8 shows how the area projected on the reverse VE image displayed on the forward / reverse VE composite image changes as the viewpoint moves in the steps described above.
例えば、図8の(a)及び(b)に示すように、視点座標Pの位置が正方向に進められて、視点座標Pに最も近い大腸壁に近付くにつれ、投影面Rが逆方向から平面Hに近付くことになる。この場合には、図8の(b)に示すように、正方向VE画像では大腸壁に隠れて投影されなかった領域が投影面Rに全て投影されるようになる。また、図8の(b)及び(c)に示すように、視点座標Pの位置が正方向にさらに進められると、視点座標Pに最も近かった大腸壁がFOVから外れることになる。この場合には、図8の(c)に示すように、次の大腸壁に隠れた領域が投影面Rに投影される対象となる。 For example, as shown in FIGS. 8A and 8B, as the position of the viewpoint coordinate P is advanced in the forward direction and approaches the large intestine wall closest to the viewpoint coordinate P, the projection plane R is planar from the reverse direction. It will approach H. In this case, as shown in FIG. 8B, in the forward direction VE image, the entire region that is hidden behind the large intestine wall and not projected is projected onto the projection plane R. Further, as shown in FIGS. 8B and 8C, when the position of the viewpoint coordinate P is further advanced in the positive direction, the colon wall closest to the viewpoint coordinate P is removed from the FOV. In this case, as shown in FIG. 8C, the next area hidden behind the large intestine wall is the target to be projected onto the projection plane R.
このように、正逆VE合成画像の大腸フライスルー表示では、視点前方に複数の大腸壁がある場合でも、視点座標Pの位置に応じて、最も直近の大腸壁に隠れた領域が自動的にドーナツ状領域に表示される。したがって、操作者は、大腸フライスルー表示で診断を行う場合に、正方向VE画像では大腸壁に隠れて投影されない領域を容易に視認することができる。 As described above, in the large intestine fly-through display of the forward / reverse VE composite image, even when there are a plurality of large intestine walls in front of the viewpoint, the region hidden in the nearest large intestine wall automatically depends on the position of the viewpoint coordinates P. Displayed in the donut area. Therefore, the operator can easily visually recognize an area that is hidden behind the large intestine wall and is not projected in the positive direction VE image when performing diagnosis by large intestine fly-through display.
図2にもどって、視点・視線移動部14は、3次元芯線情報記憶部13に記憶されている全ての点列データについて処理を行った場合には(ステップS18,Yes)、正逆VE合成画像の表示処理を終了する。
Returning to FIG. 2, when the viewpoint / line-of-
上述したように、本実施例では、正方向VE画像生成部15は、X線CT装置20により収集された3次元画像データに対して透視投影法による3次元処理を施すことで、ある視線方向から管腔臓器内を投影した正方向VE画像を生成する。また、逆方向VE画像生成部17は、3次元画像データに対して透視投影法による3次元処理を施すことで、正方向VE画像の視線方向とは逆の視線方向から大腸内腔を投影した逆方向VE画像を生成する。そして、正逆VE画像合成表示部18は、正方向VE画像生成部15により生成された正方向VE画像と逆方向VE画像生成部17により生成された逆方向VE画像とをそれぞれ表示部11に表示させる。したがって、本実施例によれば、一方向の視線方向からでは見えない領域を観察可能にすることで診断効率及び診断精度を向上させることができる。
As described above, in this embodiment, the positive direction VE
また、本実施例では、逆方向VE画像生成部17は、正方向VE画像生成部15により生成される正方向VE画像には大腸壁に隠れて投影されない領域が逆方向VE画像に投影されるように、正方向VE画像の視点を視線方向に移動した位置に逆方向VE画像の視点を設定する。したがって、本実施例によれば、操作者が大腸壁などの遮蔽物に隠れた領域を正確に診断することができる。
In the present embodiment, the reverse direction VE
また、本実施例では、正逆VE画像合成表示部18は、正方向VE画像又は逆方向VE画像のうち一方の仮想内視鏡画像の内側に他方の仮想内視鏡画像を2次元的に重ね合わせた正逆VE合成画像を生成し、生成した正逆VE合成画像を表示部11に表示させる。したがって、本実施例によれば、医師又は技師などの操作者がVE画像を観察する際に、視線の位置を大きく変えることなく正方向及び逆方向のVE画像を容易に観察することができる。
In the present embodiment, the forward / reverse VE image
また、本実施例では、正逆VE画像合成表示部18は、正方向VE画像の略中央に逆方向VE画像を合成した画像を正逆VE合成画像として生成する。したがって、本実施例によれば、操作者が大腸などの管腔臓器内における内壁の状態を効率よく観察することができる。
In this embodiment, the forward / reverse VE image
また、本実施例では、正逆VE画像合成表示部18は、正方向VE画像の略中央に合成された逆方向VE画像の略中央にさらに正方向VE画像を合成した画像を正逆VE合成画像として生成する。したがって、本実施例によれば、操作者が大腸などの管腔臓器内における奥行き方向の状態を容易に視認することができる。
In this embodiment, the forward / reverse VE image
また、本実施例では、視点・視線移動部14は、正方向VE画像生成部15により生成される正方向VE画像の視点を、大腸内腔を通る3次元芯線の軌道に沿って移動させる。また、逆方向VE画像視点・視線算出部16は、逆方向VE画像生成部17により生成される逆方向VE画像の視点を、視点・視線移動部14による正方向VE画像の視点の移動にともなって再設定する。したがって、本実施例によれば、正方向VE画像の視点の位置に応じて逆方向VE画像の視点の位置も自動的に変わるので、フライスルー表示が行われる場合に、操作者が管腔臓器内を容易に観察することができる。
In this embodiment, the viewpoint / line-of-
上記の構成によれば、正方向のフライスルー中に大腸襞に隠れて見えない大腸壁が漏れなく観察できるので、正方向と逆方向の両方向からフライスルーする必要がない。その結果、検査時間を短縮することができる。また、フライスルー表示が行われている間は、常に、一番手前の大腸襞に隠れて見えない大腸壁が逆方向VE画像上に表示されるため、隠れて見えない大腸壁を、魚眼投影法のように一瞬ではなく、長時間観察することができる。また、魚眼投影法のように、大腸襞に隠れて見えない大腸壁が歪むことがない。また、視線の前方に存在する大腸襞に隠れて見えない大腸壁が見えるようになるので、魚眼投影画像のように視点後方部分が視点前方にあるかのような誤解を招くことがない。また、1つの画面上に正逆の両画像が表示されるので、診断中に操作者が自らの視線を動かす必要がなく、視線移動による診断漏れを防ぐことができる。このようなことから、本実施例によれば、例えば、医師又は技師のCTCによる術前診断(スクリーニング検査を含む)時のポリープの診断効率及び診断精度を向上させることができる。 According to the above configuration, since the large intestine wall hidden behind the large intestine fistula can be observed without omission during the forward fly-through, there is no need to fly through from both the forward and reverse directions. As a result, the inspection time can be shortened. In addition, while the fly-through display is being performed, the large intestine wall that is hidden by the foremost colon fistula is always displayed on the reverse VE image. It can be observed for a long time instead of a moment as in the projection method. In addition, unlike the fish-eye projection method, the intestine wall hidden behind the colon fistula is not distorted. In addition, since the large intestine wall hidden behind the large intestine fist existing in front of the line of sight can be seen, there is no misunderstanding as if the viewpoint rear part is in front of the viewpoint as in a fish-eye projection image. Further, since both forward and reverse images are displayed on one screen, it is not necessary for the operator to move his / her line of sight during diagnosis, and diagnosis omission due to line-of-sight movement can be prevented. For this reason, according to the present embodiment, for example, it is possible to improve the diagnostic efficiency and diagnostic accuracy of polyps at the time of preoperative diagnosis (including screening examination) by CTC of a doctor or engineer.
なお、本実施例では、正方向VE画像生成部15により生成された正方向VE画像上に、逆方向VE画像生成部17により生成された逆方向VE画像を合成する場合について説明した。しかしながら、本発明はこれに限られるものではない。例えば、正方向VE画像上で逆方向VE画像が合成される領域については、そもそも正方向VE画像をレンダリングする必要がない。そこで、正方向VE画像生成部15が、正方向VE画像を生成する際に、まずは正方向VE画像上で逆方向VE画像が合成される領域を特定し、その領域についてはレンダリングしないようにしてもよい。これにより、画像生成にかかる処理時間を短縮することが可能になる。
In the present embodiment, the case has been described in which the reverse direction VE image generated by the reverse direction VE
また、本実施例では、正方向VE画像生成部15が正方向VE画像を生成したのちに、逆方向VE画像生成部17が逆方向VE画像を生成する場合について説明した(図2のステップS12〜S15参照)。しかしながら、本発明はこれに限られるものではない。例えば、両VE画像を生成する順番は逆になってもよい。また、正方向VE画像生成部15による正方向VE画像の生成と、逆方向VE画像生成部17による逆方向VE画像の生成とは、並列に実行することも可能である。その場合には、両VE画像の生成が完了したのちに、正逆VE画像合成表示部18が、正逆VE合成画像を生成する。
Further, in the present embodiment, a case has been described in which the reverse direction VE
また、本実施例では言及していないが、例えば、正逆VE画像合成表示部18が、正方向VE画像における大腸内壁の表示色と逆方向VE画像における大腸内壁の表示色とを異なる色に設定してもよい。これにより、正逆VE合成画像において、正方向VE画像の領域と逆方向VE画像の領域とを明確に区別することが可能になるので、より視認しやすく正逆VE合成画像を表示することができる。
Although not mentioned in the present embodiment, for example, the forward / reverse VE image
また、本実施例では、視点・視線移動部14が、あらかじめ抽出された大腸内腔の3次元芯線に沿って視点及び視線方向を移動させる場合について説明した(図2のステップS19参照)。しかしながら、本発明はこれに限られるものではない。例えば、視点・視線移動部14が、正方向VE画像の視点及び視線を3次元芯線に沿って移動させる際に、進行方向の大腸内腔形状に基づいて次の視点及び視線方向を求めるようにしてもよい。これにより、例えば、あらかじめ3次元芯線が抽出されていないような場合でも、任意の視点及び視線方向に応じて正逆VE合成画像を生成して表示することができる。
In the present embodiment, the case where the viewpoint / line-of-
また、本実施例では、正方向VE画像生成部15及び逆方向VE画像生成部17が、それぞれ、透視投影法により正方向VE画像及び逆方向VE画像を生成する場合について説明した。しかしながら、本発明はこれに限られるものではない。例えば、正方向VE画像生成部15及び逆方向VE画像生成部17が、それぞれ、魚眼投影法により正方向VE画像及び逆方向VE画像を生成してもよい。これにより、より広い範囲の大腸壁領域を表示することが可能になる。
In the present embodiment, the case where the forward direction VE
また、本実施例では、正方向VE画像上に合成される逆方向VE画像の形状をドーナツ状の円形領域とする場合について説明した。しかしながら、本発明はこれに限られるものではない。例えば、逆方向VE画像の形状は楕円形や方形、菱形などの任意の形状にすることができる。また、ドーナツ状の円形領域における内径領域の形状と外径領域の形状とを異なる形状とすることも可能である。また、大腸などの管腔臓器の形状に合わせて、逆方向VE画像の形状を変えるようにしてもよい。 Further, in the present embodiment, the case has been described in which the shape of the backward VE image synthesized on the forward VE image is a donut-shaped circular region. However, the present invention is not limited to this. For example, the shape of the reverse direction VE image can be an arbitrary shape such as an ellipse, a rectangle, or a rhombus. In addition, the shape of the inner diameter region and the shape of the outer diameter region in the donut-shaped circular region can be different from each other. Further, the shape of the reverse VE image may be changed in accordance with the shape of a hollow organ such as the large intestine.
また、本実施例では、X線CT装置により取得された3次元画像データが用いられる場合について説明した。しかしながら、本発明はこれに限られるものではない。例えば、MRI装置、X線診断装置、超音波診断装置など、他の医用画像診断装置により取得された3次元画像データが用いられる場合でも本発明を同様に適用することができる。 In the present embodiment, the case where the three-dimensional image data acquired by the X-ray CT apparatus is used has been described. However, the present invention is not limited to this. For example, the present invention can be similarly applied even when three-dimensional image data acquired by another medical image diagnostic apparatus such as an MRI apparatus, an X-ray diagnostic apparatus, or an ultrasonic diagnostic apparatus is used.
なお、本実施例では、医用画像処理装置について説明した。しかしながら、本発明はこれに限られるものではない。例えば、X線CT装置やMRI装置、X線診断装置、超音波診断装置などの医用画像診断装置にも本発明を同様に適用することができる。 In the present embodiment, the medical image processing apparatus has been described. However, the present invention is not limited to this. For example, the present invention can be similarly applied to medical image diagnostic apparatuses such as an X-ray CT apparatus, an MRI apparatus, an X-ray diagnostic apparatus, and an ultrasonic diagnostic apparatus.
その場合には、例えば、医用画像診断装置において、被検体から収集したデータに基づいて画像を再構成する画像処理装置に本発明を適用する。そして、画像処理装置は、画像収集手段により収集された医用画像の3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、ある視線方向から管腔臓器内を投影した正方向VE画像を生成する。また、画像処理装置は、3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、正方向VE画像の視線方向とは逆の視線方向から管腔臓器内を投影した逆方向VE画像を生成する。そして、画像処理装置は、正方向VE画像と逆方向VE画像とをそれぞれ表示部に表示させる。 In this case, for example, the present invention is applied to an image processing apparatus that reconstructs an image based on data collected from a subject in a medical image diagnostic apparatus. Then, the image processing apparatus performs three-dimensional processing by the perspective projection method or the fish-eye projection method on the three-dimensional image data of the medical image collected by the image collecting unit, so that the inside of the hollow organ from a certain line-of-sight direction. A projected positive VE image is generated. In addition, the image processing apparatus performs three-dimensional processing by the perspective projection method or the fish-eye projection method on the three-dimensional image data, so that the inside of the luminal organ can be seen from the visual line direction opposite to the visual line direction of the forward VE image. A projected reverse VE image is generated. Then, the image processing apparatus displays the forward direction VE image and the backward direction VE image on the display unit.
10 医用画像処理装置
11 表示部
12 3次元画像記憶部
13 3次元芯線情報記憶部
14 視点・視線移動部
15 正方向VE画像生成部
16 逆方向VE画像視点・視線算出部
17 逆方向VE画像生成部
18 正逆VE画像合成表示部
20 X線CT装置
DESCRIPTION OF
Claims (8)
前記3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、前記第一の視線方向とは逆の第二の視線方向から前記管腔臓器内を投影した第二の仮想内視鏡画像を生成する第二の画像生成手段と、
前記第一の画像生成手段により生成された第一の仮想内視鏡画像と前記第二の画像生成手段により生成された第二の仮想内視鏡画像とをそれぞれ表示部に表示させる画像表示制御手段と
を備えたことを特徴とする医用画像処理装置。 By applying a three-dimensional process by a perspective projection method or a fish-eye projection method to the three-dimensional image data collected by the medical image diagnostic apparatus, a first virtual interior is projected from the first gaze direction. First image generating means for generating an endoscopic image;
The three-dimensional image data is subjected to three-dimensional processing by a perspective projection method or a fish-eye projection method, thereby projecting the inside of the luminal organ from a second line-of-sight direction opposite to the first line-of-sight direction. Second image generating means for generating a second virtual endoscopic image;
Image display control for causing the display unit to display the first virtual endoscopic image generated by the first image generating unit and the second virtual endoscopic image generated by the second image generating unit, respectively. And a medical image processing apparatus.
前記第二の画像生成手段により生成される第二の仮想内視鏡画像の視点を前記視点移動手段による前記第一の仮想内視鏡画像の視点の移動にともなって再設定する視点設定手段と
をさらに備えたことを特徴とする請求項1〜5のいずれか一つに記載の医用画像処理装置。 Viewpoint moving means for moving the viewpoint of the first virtual endoscopic image generated by the first image generating means along a trajectory set in the hollow organ;
Viewpoint setting means for resetting the viewpoint of the second virtual endoscopic image generated by the second image generating means as the viewpoint of the first virtual endoscopic image is moved by the viewpoint moving means; The medical image processing apparatus according to claim 1, further comprising:
前記3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、前記第一の視線方向とは逆の第二の視線方向から前記管腔臓器内を投影した第二の仮想内視鏡画像を生成する第二の画像生成手順と、
前記第一の画像生成手順により生成された第一の仮想内視鏡画像と前記第二の画像生成手順により生成された第二の仮想内視鏡画像とをそれぞれ表示部に表示させる画像表示制御手順と
をコンピュータに実行させることを特徴とする医用画像処理プログラム。 By applying a three-dimensional process by a perspective projection method or a fish-eye projection method to the three-dimensional image data collected by the medical image diagnostic apparatus, a first virtual interior is projected from the first gaze direction. A first image generation procedure for generating an endoscopic image;
The three-dimensional image data is subjected to three-dimensional processing by a perspective projection method or a fish-eye projection method, thereby projecting the inside of the luminal organ from a second line-of-sight direction opposite to the first line-of-sight direction. A second image generation procedure for generating a second virtual endoscopic image;
Image display control for displaying the first virtual endoscopic image generated by the first image generation procedure and the second virtual endoscopic image generated by the second image generation procedure on the display unit, respectively. A medical image processing program for causing a computer to execute the procedure.
前記画像収集手段により収集された3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、第一の視線方向から管腔臓器内を投影した第一の仮想内視鏡画像を生成する第一の画像生成手段と、
前記3次元画像データに対して透視投影法又は魚眼投影法による3次元処理を施すことで、前記第一の視線方向とは逆の第二の視線方向から前記管腔臓器内を投影した第二の仮想内視鏡画像を生成する第二の画像生成手段と、
前記第一の画像生成手段により生成された第一の仮想内視鏡画像と前記第二の画像生成手段により生成された第二の仮想内視鏡画像とをそれぞれ表示部に表示させる画像表示制御手段と
を備えたことを特徴とする医用画像診断装置。 Image collecting means for collecting medical images;
By applying a three-dimensional process by a perspective projection method or a fish-eye projection method to the three-dimensional image data collected by the image collecting means, a first virtual interior that is projected in the luminal organ from the first line-of-sight direction is obtained. First image generating means for generating an endoscopic image;
The three-dimensional image data is subjected to three-dimensional processing by a perspective projection method or a fish-eye projection method, thereby projecting the inside of the luminal organ from a second line-of-sight direction opposite to the first line-of-sight direction. Second image generating means for generating a second virtual endoscopic image;
Image display control for causing the display unit to display the first virtual endoscopic image generated by the first image generating unit and the second virtual endoscopic image generated by the second image generating unit, respectively. And a medical image diagnostic apparatus.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009296238A JP5631584B2 (en) | 2009-12-25 | 2009-12-25 | Medical image processing apparatus, medical image processing program, and medical image diagnostic apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009296238A JP5631584B2 (en) | 2009-12-25 | 2009-12-25 | Medical image processing apparatus, medical image processing program, and medical image diagnostic apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011135937A true JP2011135937A (en) | 2011-07-14 |
JP5631584B2 JP5631584B2 (en) | 2014-11-26 |
Family
ID=44348013
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009296238A Active JP5631584B2 (en) | 2009-12-25 | 2009-12-25 | Medical image processing apparatus, medical image processing program, and medical image diagnostic apparatus |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5631584B2 (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103688293A (en) * | 2011-07-18 | 2014-03-26 | 道格微系统有限公司 | Method and system for performing rendering |
JP2018183589A (en) * | 2017-04-25 | 2018-11-22 | バイオセンス・ウエブスター・(イスラエル)・リミテッドBiosense Webster (Israel), Ltd. | Endoscopic view of invasive procedures in narrow passages |
US10226199B2 (en) | 2015-12-21 | 2019-03-12 | Canon Kabushiki Kaisha | Medical-image processing apparatus, method for controlling the same, and storage medium |
CN115496748A (en) * | 2022-11-08 | 2022-12-20 | 武汉楚精灵医疗科技有限公司 | Intestine section identification method and device of small intestine image and storage medium |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1156832A (en) * | 1997-08-26 | 1999-03-02 | Ge Yokogawa Medical Syst Ltd | Method and device for displaying image |
WO2005011501A1 (en) * | 2003-08-01 | 2005-02-10 | Hitachi Medical Corporation | Medical image diagnosis support device and method |
-
2009
- 2009-12-25 JP JP2009296238A patent/JP5631584B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1156832A (en) * | 1997-08-26 | 1999-03-02 | Ge Yokogawa Medical Syst Ltd | Method and device for displaying image |
WO2005011501A1 (en) * | 2003-08-01 | 2005-02-10 | Hitachi Medical Corporation | Medical image diagnosis support device and method |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103688293A (en) * | 2011-07-18 | 2014-03-26 | 道格微系统有限公司 | Method and system for performing rendering |
US9996968B2 (en) | 2011-07-18 | 2018-06-12 | Cadens Medical Imaging Inc. | Method and system for performing rendering using first and second projections |
US10226199B2 (en) | 2015-12-21 | 2019-03-12 | Canon Kabushiki Kaisha | Medical-image processing apparatus, method for controlling the same, and storage medium |
JP2018183589A (en) * | 2017-04-25 | 2018-11-22 | バイオセンス・ウエブスター・(イスラエル)・リミテッドBiosense Webster (Israel), Ltd. | Endoscopic view of invasive procedures in narrow passages |
JP7505081B2 (en) | 2017-04-25 | 2024-06-24 | バイオセンス・ウエブスター・(イスラエル)・リミテッド | Endoscopic imaging of invasive procedures in narrow passages |
CN115496748A (en) * | 2022-11-08 | 2022-12-20 | 武汉楚精灵医疗科技有限公司 | Intestine section identification method and device of small intestine image and storage medium |
CN115496748B (en) * | 2022-11-08 | 2023-03-14 | 武汉楚精灵医疗科技有限公司 | Method and device for identifying intestine section of small intestine image and storage medium |
Also Published As
Publication number | Publication date |
---|---|
JP5631584B2 (en) | 2014-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2420188B1 (en) | Diagnosis support apparatus, diagnosis support method, and storage medium storing diagnosis support program | |
JP5384473B2 (en) | Image display device and image display method | |
JP5637653B2 (en) | Medical image processing apparatus, ultrasonic diagnostic apparatus, and medical image processing program | |
JP5377153B2 (en) | Image processing apparatus, image processing program, and medical diagnostic system | |
JP2013059609A (en) | Medical image display device and x-ray diagnosis device | |
JP6013037B2 (en) | Medical image processing device | |
JP2016039874A (en) | Endoscopic image diagnosis support device, system, method, and program | |
JP5114121B2 (en) | Medical image processing device | |
JP4350226B2 (en) | 3D image processing device | |
JP5443238B2 (en) | Virtual endoscopic image processing apparatus, method, and program | |
JP5631584B2 (en) | Medical image processing apparatus, medical image processing program, and medical image diagnostic apparatus | |
JP2007014483A (en) | Medical diagnostic apparatus and diagnostic support apparatus | |
US9585569B2 (en) | Virtual endoscopic projection image generating device, method and program | |
JP2010075549A (en) | Image processor | |
JP5498185B2 (en) | Ultrasonic diagnostic apparatus and ultrasonic image display program | |
JP2010284405A (en) | Medical image processor, medical image diagnostic device and medical image processing program | |
KR20140054087A (en) | Method and system for performing rendering | |
Rahman et al. | A framework to visualize 3d breast tumor using x-ray vision technique in mobile augmented reality | |
CN109598752A (en) | Image processing apparatus and its control method, computer readable storage medium | |
JP5683831B2 (en) | Medical image processing apparatus and medical image processing program | |
KR20100052405A (en) | Method of forming virtual endoscope image of uterus | |
JP2011139767A (en) | Medical image display device and display method | |
JP5523784B2 (en) | Image processing apparatus and medical image diagnostic apparatus | |
JP2001014495A (en) | Image display device | |
JP2010250458A (en) | Image processor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121213 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131022 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140415 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140612 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140909 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141008 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5631584 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |