JP2015150115A - image display device - Google Patents

image display device Download PDF

Info

Publication number
JP2015150115A
JP2015150115A JP2014025157A JP2014025157A JP2015150115A JP 2015150115 A JP2015150115 A JP 2015150115A JP 2014025157 A JP2014025157 A JP 2014025157A JP 2014025157 A JP2014025157 A JP 2014025157A JP 2015150115 A JP2015150115 A JP 2015150115A
Authority
JP
Japan
Prior art keywords
image
cross
display
data
desired position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014025157A
Other languages
Japanese (ja)
Inventor
平岡　学
Manabu Hiraoka
学 平岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Priority to JP2014025157A priority Critical patent/JP2015150115A/en
Publication of JP2015150115A publication Critical patent/JP2015150115A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Magnetic Resonance Imaging Apparatus (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image display device which can clearly show display of an auxiliary image in a 3D display area.SOLUTION: In an image display device of an embodiment, a first data creation part creates first 3D image display data that is obtained by looking at a 3D image from a first view point and second 3D image display data that is obtained by looking at the 3D image from a second view point on the basis of 3D image data in the way that three-dimensional visualization is possible with a prescribed position in a depth direction of the 3D image as a reference; a display control unit displays the 3D image by the first 3D image display data and the second 3D image display data; and a second data creation part creates, on the basis of the 3D image data, cross-sectional display data representing a cross-section of the 3D image at a desired position when designation of the desired position in the depth direction of the 3D image by an input part is received and the prescribed position is changed to the desired position. The display control unit receives input of an auxiliary image including annotation by the input part and displays the auxiliary image overlapping the cross-sectional image when the cross-sectional image is displayed by the cross-sectional display data.

Description

本発明の実施形態は、画像表示装置に関する。   Embodiments described herein relate generally to an image display apparatus.

人間が３Ｄ像（立体像）を見るとき、左目で捉えた画像と、右目で捉えた画像とが少しずれている。それぞれの目で捉えた画像を頭の中で合成することで、物を立体的に視覚することができる。   When a human views a 3D image (stereoscopic image), the image captured with the left eye is slightly shifted from the image captured with the right eye. By synthesizing the images captured by each eye in the head, objects can be viewed three-dimensionally.

逆に、二つの画像を少しずらして表示することにより、画像の集合として立体画像を認識することができる。なお、これらの画像の位置ずれの大きさを「視差量」という場合がある。さらに、位置ずれがある画像を「視差量がある画像」または「視差画像」という場合がある。   Conversely, by displaying the two images slightly shifted, a stereoscopic image can be recognized as a set of images. Note that the magnitude of the positional deviation of these images may be referred to as “parallax amount”. Furthermore, an image with a positional shift may be referred to as an “image with a parallax amount” or a “parallax image”.

３Ｄ像の奥行方向の所定位置を基準にしたとき、所定位置より手前側の位置の断面においては、左目で捉えた画像が右目で捉えた画像に対し右側に位置し、交差視差となる。このように配置された画像は、飛び出して見える。ここで、「断面」とは、特に言及しない限り、奥行方向と直交する平面をいう。   When a predetermined position in the depth direction of the 3D image is used as a reference, in a cross section at a position on the near side of the predetermined position, the image captured with the left eye is positioned on the right side with respect to the image captured with the right eye, resulting in cross parallax. Images arranged in this way appear to pop out. Here, the “cross section” means a plane orthogonal to the depth direction unless otherwise specified.

これに対し、所定位置より奥側の位置の断面においては、左目で捉えた画像が右目で捉えた画像に対し左側に位置し、非交差視差となる。このように配置された画像は、引っ込んで見える。   On the other hand, in the cross section at a position on the back side from the predetermined position, the image captured with the left eye is positioned on the left side with respect to the image captured with the right eye, resulting in non-crossing parallax. Images arranged in this way appear to be retracted.

さらに、所定位置の断面においては、左目で捉えた画像と右目で捉えた画像との位置ずれがない。位置ずれのない画像は、飛び出して見えもせず、また、引っ込んで見えもしない。位置ずれのない画像は、画像の位置が一致するそのため、画像の表示がクリアに見える。なお、位置ずれがない画像を「視差量がない画像」または「非視差画像」という場合がある。   Further, in the cross section at the predetermined position, there is no positional deviation between the image captured with the left eye and the image captured with the right eye. An image without misalignment does not pop out and does not appear, nor retracts. An image with no misalignment matches the position of the image, so the image display appears clear. An image having no positional deviation may be referred to as an “image having no parallax amount” or a “non-parallax image”.

視差画像をディスプレイに表示することにより、３Ｄ像を立体的に視覚することができる。ディスプレイにおいて、対象を立体的に表示する領域を「３Ｄ表示領域」という場合がある。３Ｄ表示領域以外の領域であって、対象を平面的に表示する領域を「２Ｄ表示領域」という場合がある。   By displaying the parallax image on the display, the 3D image can be viewed stereoscopically. In the display, an area in which the target is displayed three-dimensionally may be referred to as a “3D display area”. An area other than the 3D display area that displays the target in a planar manner may be referred to as a “2D display area”.

さらに、３Ｄ像の所望の位置（範囲を含む）に関連づけられて、文字情報を含むアノテーション（ａｎｎｏｔａｔｉｏｎ）、体位、関心領域（ｒｅｇｉｏｎ ｏｆ ｉｎｔｅｒｅｓｔ：ＲＯＩ）などが入力される。   Furthermore, an annotation including character information, a body position, a region of interest (ROI), and the like are input in association with a desired position (including a range) of the 3D image.

アノテーションとは、データに注釈として付与された、データに関連する情報（メタデータ）をいう。体位とは、モダリティで撮影されるときの被検体の位置や姿勢をいい、臥位、座位、立位、斜位がある。関心領域とは、医用画像で診断に必要となる領域をいう。なお、アノテーション、体位、関心領域などを「補助画像」という場合がある。   An annotation refers to information (metadata) related to data that is given as an annotation to the data. The posture refers to the position and posture of the subject when imaged with a modality, and includes a supine position, a sitting position, a standing position, and an oblique position. A region of interest refers to a region necessary for diagnosis in a medical image. Note that annotation, body position, region of interest, and the like may be referred to as “auxiliary images”.

特開２０１３−９８６４号公報JP 2013-9864 A

しかしながら、ディスプレイの３Ｄ表示領域に３Ｄ像が表示されるとき、補助画像が２Ｄ表示領域に表示されると、３Ｄ像と補助画像とが大きく離れるため、視線を大きく移動させる必要がある。   However, when a 3D image is displayed in the 3D display area of the display, if the auxiliary image is displayed in the 2D display area, the 3D image and the auxiliary image are greatly separated from each other.

例えば、医用画像に基づいて読影を行うとき、読影者の視線が大きく移動しないようにすることが好ましい。さらに、補助画像は、３Ｄ像の所望の位置と関連づけられているため、所望の位置の近傍に補助画像が表示されることが好ましい。   For example, when performing interpretation based on a medical image, it is preferable that the sight line of the interpreter does not move greatly. Furthermore, since the auxiliary image is associated with a desired position of the 3D image, the auxiliary image is preferably displayed in the vicinity of the desired position.

３Ｄ像の所望の位置の近傍に補助画像を表示させるため、３Ｄ像が表示される３Ｄ表示領域に補助画像を表示させると、補助画像の位置ずれがあるため、補助画像の表示がクリアに見えず、補助画像の表示および入力に違和感が生じるという問題点があった。   In order to display the auxiliary image in the vicinity of the desired position of the 3D image, if the auxiliary image is displayed in the 3D display area in which the 3D image is displayed, the auxiliary image is displayed clearly because the auxiliary image is misaligned. However, there is a problem in that the display and input of the auxiliary image is uncomfortable.

この実施形態は、上記の問題を解決するものであり、３Ｄ表示領域における補助画像の表示をクリアに見せることが可能な画像表示装置を提供することを目的とする。   This embodiment solves the above-described problem, and an object thereof is to provide an image display apparatus that can clearly display the display of the auxiliary image in the 3D display area.

上記課題を解決するために、実施形態の画像表示装置は、第１データ作成部と、表示制御部と、入力部と、第２データ作成部とを有する。第１データ作成部は、３Ｄ像のデータに基づいて、前記３Ｄ像の奥行方向の所定位置を基準に立体的に視覚できるように、前記３Ｄ像を第１の視点から見て得られる第１の３Ｄ像表示データおよび前記３Ｄ像を第２の視点から見て得られる第２の３Ｄ像表示データを作成する。表示制御部は、前記第１の３Ｄ像表示データおよび前記第２の３Ｄ像表示データにより、前記３Ｄ像を表示させる。入力部は、前記３Ｄ像の奥行方向の所望の位置の断面を指定する。第２データ作成部は、前記入力部による前記所望の位置の指定を受けて、前記所定位置を前記所望の位置に変更したときの前記所望の位置における３Ｄ像の断面を表す断面表示データを前記３Ｄ像のデータに基づいて作成する。前記表示制御部は、前記断面表示データにより断面像を表示させたとき、前記入力部によるとともに、アノテーションを含む補助画像の入力を受けて、前記補助画像を前記断面像に重ねて表示させる。   In order to solve the above-described problem, the image display apparatus according to the embodiment includes a first data creation unit, a display control unit, an input unit, and a second data creation unit. The first data creation unit can obtain the 3D image from the first viewpoint so that the 3D image can be viewed stereoscopically based on a predetermined position in the depth direction of the 3D image based on the data of the 3D image. 3D image display data and second 3D image display data obtained by viewing the 3D image from the second viewpoint. The display control unit displays the 3D image by the first 3D image display data and the second 3D image display data. The input unit specifies a cross section at a desired position in the depth direction of the 3D image. The second data creation unit receives the designation of the desired position by the input unit, and displays cross-section display data representing a cross section of the 3D image at the desired position when the predetermined position is changed to the desired position. Created based on 3D image data. When the display control unit displays a cross-sectional image based on the cross-sectional display data, the display control unit receives an auxiliary image including an annotation along with the input unit, and displays the auxiliary image superimposed on the cross-sectional image.

座標系（Ｘ，Ｙ，Ｚ）に表された３Ｄ像の図。The figure of 3D image represented to coordinate system (X, Y, Z). 第１実施形態に係る画像表示装置の機能ブロック図。1 is a functional block diagram of an image display device according to a first embodiment. ３Ｄ表示領域に表示された３Ｄ像の図。The figure of 3D image displayed on the 3D display area. 側方向から見たときの３Ｄ像において、初期値としての所定位置を示す概念図。The conceptual diagram which shows the predetermined position as an initial value in 3D image when it sees from a side direction. 所定位置が所望の位置に変更されたときの概念図。The conceptual diagram when a predetermined position is changed into the desired position. ３Ｄ像表示データのデータ構造を示す図。The figure which shows the data structure of 3D image display data. ３Ｄ表示領域と２Ｄ表示領域との間に表示された壁状の画像を示す図。The figure which shows the wall-shaped image displayed between 3D display area and 2D display area. ３Ｄ表示領域に補助画像が表示されたときの概念図。The conceptual diagram when an auxiliary | assistant image is displayed on 3D display area. 識別標識、指示用ラインおよび、補助画像のデータ構造を示す図。The figure which shows the data structure of an identification mark, the line for instruction | indication, and an auxiliary image. 断面表示データのデータ構造を示す図。The figure which shows the data structure of cross-section display data. アキシャル断面が選択されたとき、第２データ作成部により作成された断面表示データを示す図。The figure which shows the cross-section display data produced by the 2nd data production part, when an axial cross section was selected. ＣＰＲ像を示す図。The figure which shows a CPR image. 断面像を示す図。The figure which shows a cross-sectional image. ３Ｄ表示領域に表示された識別標識を示す図。The figure which shows the identification mark displayed on 3D display area. ３Ｄ像の表示から補助画像の表示までの一連の動作を示すフローチャート。The flowchart which shows a series of operation | movement from the display of 3D image to the display of an auxiliary image. 奥行方向、所望の位置の指定から補助画像の表示までの一連の動作を示すフローチャート。The flowchart which shows a series of operation | movement from designation of a depth direction and a desired position to display of an auxiliary image. 識別標識の指定から補助画像の表示までの一連の動作を示すフローチャート。The flowchart which shows a series of operation | movement from designation | designated of an identification mark to the display of an auxiliary image. 第２実施形態において、３Ｄ表示領域に表示された識別標識を示す図。The figure which shows the identification mark displayed on 3D display area in 2nd Embodiment. 第３実施形態において、３Ｄ表示領域に表示された識別標識を示す図。The figure which shows the identification mark displayed on 3D display area in 3rd Embodiment.

３Ｄ表示領域であっても、所定位置の断面では、左目で捉えた画像と右目で捉えた画像との位置ずれがない。位置ずれのない画像は、飛び出して見えもせず、また、引っ込んで見えもしない。位置ずれのない画像は、両方の画像の位置が一致するそのため、画像の表示がクリアに見える。   Even in the 3D display region, there is no positional deviation between the image captured with the left eye and the image captured with the right eye in the cross section at the predetermined position. An image without misalignment does not pop out and does not appear, nor retracts. In the case of an image having no misalignment, the positions of both images coincide with each other, so that the image display looks clear.

そこで、３Ｄ表示領域に表示された補助画像をクリアに見せるためには、補助画像を表示させたい位置（所望の位置）を所定位置とし、所望の位置の断面に補助画像を表示すればよい。それにより、補助画像が位置ずれのない画像となり、補助画像の表示をクリアに見せることが可能となる。   Therefore, in order to clearly display the auxiliary image displayed in the 3D display area, a position where the auxiliary image is to be displayed (desired position) may be set as a predetermined position, and the auxiliary image may be displayed on a cross section of the desired position. As a result, the auxiliary image becomes an image with no positional deviation, and the display of the auxiliary image can be made clear.

（３Ｄ像のデータ）
Ｘ線ＣＴ装置、ＭＲＩ装置、超音波診断装置、Ｘ線診断装置などの医用画像診断装置（モダリティ）には、被検体の撮影により得られた投影データに基づいてボリュームデータ（３次元画像データ）を生成可能なものがある。ここで、ボリュームデータとは、空間内に分布された濃度（例えば、Ｘ線の吸収量に相当する）を３次元行列として表したデータをいう。なお、ボリュームデータ（３次元画像データ）を、「３Ｄ像のデータ」という場合がある。 (3D image data)
In medical image diagnostic apparatuses (modalities) such as an X-ray CT apparatus, an MRI apparatus, an ultrasonic diagnostic apparatus, and an X-ray diagnostic apparatus, volume data (three-dimensional image data) based on projection data obtained by imaging a subject. There is something that can generate. Here, the volume data refers to data representing a concentration distributed in space (for example, corresponding to the amount of X-ray absorption) as a three-dimensional matrix. The volume data (three-dimensional image data) may be referred to as “3D image data”.

図１は、座標系（Ｘ，Ｙ，Ｚ）に表された３Ｄ像の図である。３Ｄ像のデータにおいては、空間内に分布された濃度が座標系（Ｘ，Ｙ，Ｚ）の座標値（ｘ，ｙ，ｚ）に表される。さらに、例えば、座標値（０，０，０）が３Ｄ像の形態上の重心となるように表される。なお、「３Ｄ像のデータ」とは、特に言及しない限り、座標系（Ｘ，Ｙ，Ｚ）に表された３Ｄ像のデータをいう。   FIG. 1 is a diagram of a 3D image represented in a coordinate system (X, Y, Z). In the 3D image data, the density distributed in the space is represented by coordinate values (x, y, z) of the coordinate system (X, Y, Z). Further, for example, the coordinate value (0, 0, 0) is represented as the center of gravity in the form of the 3D image. Note that “3D image data” refers to 3D image data represented in the coordinate system (X, Y, Z) unless otherwise specified.

［第１実施形態］
次に、画像表示装置１０の第１実施形態について各図を参照して説明する。
画像表示装置１０の構成について図２を参照して簡単に説明する。図２は、画像表示装置１０の構成ブロック図である。 [First Embodiment]
Next, a first embodiment of the image display device 10 will be described with reference to the drawings.
The configuration of the image display device 10 will be briefly described with reference to FIG. FIG. 2 is a configuration block diagram of the image display apparatus 10.

図２に示すように、画像表示装置１０は、第１データ作成部１１、第２データ作成部１２、表示制御部１３、入力部１４、記憶部１５、ＭＰＲ像作成部１６、ＣＰＲ像作成部１７、識別標識作成部１８、および、ディスプレイ２０を有する。   As shown in FIG. 2, the image display device 10 includes a first data creation unit 11, a second data creation unit 12, a display control unit 13, an input unit 14, a storage unit 15, an MPR image creation unit 16, and a CPR image creation unit. 17, an identification sign creating unit 18, and a display 20.

（第１データ作成部１１）
第１データ作成部１１は、３Ｄ像のデータに基づいて、３Ｄ像の奥行方向の所定位置を基準に立体的に視覚できるように、３Ｄ像を第１の視点から見て得られる第１の３Ｄ像表示データおよび３Ｄ像を第２の視点から見て得られる第２の３Ｄ像表示データを作成する。第１の視点及び第２の視点は、３Ｄ像が表示されるディスプレイ２０の画面と平行な平面上に位置し、第１の視点または第２の視点のいずれか一方の位置が左目の位置に相当し、他方の位置が右目の位置に相当する。表示制御部１３は、第１の３Ｄ像表示データおよび第２の３Ｄ像表示データにより、ディスプレイ２０に３Ｄ像を表示させる。 (First data creation unit 11)
The first data creation unit 11 can obtain a 3D image from a first viewpoint so that the 3D image can be viewed stereoscopically based on a predetermined position in the depth direction of the 3D image based on the data of the 3D image. The 3D image display data and the second 3D image display data obtained by viewing the 3D image from the second viewpoint are created. The first viewpoint and the second viewpoint are located on a plane parallel to the screen of the display 20 on which the 3D image is displayed, and the position of either the first viewpoint or the second viewpoint is the position of the left eye. The other position corresponds to the position of the right eye. The display control unit 13 displays a 3D image on the display 20 based on the first 3D image display data and the second 3D image display data.

「奥行方向」とは、表示された３Ｄ像を見る方向をいうが、３Ｄ像を任意の方向から見ることができるように構成されるため、奥行方向も任意の方向となる。   The “depth direction” refers to a direction in which the displayed 3D image is viewed, but the depth direction is also an arbitrary direction because the 3D image can be viewed from an arbitrary direction.

第１データ作成部１１は、３Ｄ像を見る方向（奥行方向）がＶ軸方向となるように、座標系（Ｘ，Ｙ，Ｚ）において、Ｘ軸回りに角度α、Ｙ軸回りに角度β、Ｚ軸回りに角度γだけ回転させることにより、座標系（Ｕ，Ｖ，Ｓ）に変換する。このとき、座標系（Ｕ，Ｖ，Ｓ）の座標値（０，０，０）が３Ｄ像の形態上の重心となるように変換される。座標変換により、空間内に分布された濃度が座標系（Ｕ，Ｖ，Ｓ）の座標値（ｕ，ｖ，ｓ）に表される。   In the coordinate system (X, Y, Z), the first data creation unit 11 has an angle α around the X axis and an angle β around the Y axis so that the direction in which the 3D image is viewed (depth direction) is the V axis direction. Then, the coordinate system (U, V, S) is converted by rotating it around the Z axis by an angle γ. At this time, the coordinate values (0, 0, 0) of the coordinate system (U, V, S) are converted so as to be the center of gravity in the form of the 3D image. By the coordinate conversion, the density distributed in the space is represented in the coordinate values (u, v, s) of the coordinate system (U, V, S).

図３は、座標系（Ｕ，Ｖ，Ｓ）の座標値（ｕ，ｖ，ｓ）に表された３Ｄ像のデータに基づいて作成された３Ｄ像表示データにより、３Ｄ表示領域に表示された３Ｄ像の図である。図３に示す３Ｄ像の表示においては、Ｖ軸方向が奥行方向となる。   FIG. 3 is displayed in the 3D display area by the 3D image display data created based on the 3D image data represented in the coordinate values (u, v, s) of the coordinate system (U, V, S). It is a figure of 3D image. In the display of the 3D image shown in FIG. 3, the V-axis direction is the depth direction.

図４は、側方向から見たときの３Ｄ像において、初期値としての所定位置を示す概念図である。図４に、奥行方向をＶ軸方向で示し、３Ｄ像を“Ｇ”で示し、所定位置を“Ｐ”で示し、所望の位置を“Ｐａ”で示す。さらに、図４に、３Ｄ像Ｇの重心を通る所定位置Ｐの面を示し、所定位置ＰのＶ座標が“０”としたものを示す。   FIG. 4 is a conceptual diagram showing a predetermined position as an initial value in a 3D image when viewed from the side direction. In FIG. 4, the depth direction is indicated by the V-axis direction, the 3D image is indicated by “G”, the predetermined position is indicated by “P”, and the desired position is indicated by “Pa”. Further, FIG. 4 shows a surface at a predetermined position P that passes through the center of gravity of the 3D image G, and shows that the V coordinate of the predetermined position P is set to “0”.

図４に示すように、３Ｄ像の奥行方向（Ｖ軸方向）の「所定位置」は、初期値として、３Ｄ像の形態上の重心の位置（ｖ＝０）である。   As illustrated in FIG. 4, the “predetermined position” in the depth direction (V-axis direction) of the 3D image is the position of the center of gravity (v = 0) on the 3D image form as an initial value.

図５は、所定位置Ｐが所望の位置Ｐａに変更されたときの概念図である。図５に、所望の位置ＰａのＶ座標が“ｖ１”であるものを示す。入力部１４による所望の位置Ｐａの指定により、図５に示すように、所定位置Ｐが所望の位置Ｐａに変更され、所定位置ＰのＶ座標が“ｖ１”に変更される。 FIG. 5 is a conceptual diagram when the predetermined position P is changed to a desired position Pa. FIG. 5 shows a case where the V coordinate of the desired position Pa is “v 1 ”. By specifying the desired position Pa by the input unit 14, as shown in FIG. 5, the predetermined position P is changed to the desired position Pa, and the V coordinate of the predetermined position P is changed to “v 1 ”.

第１データ作成部１１は、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて、所望の位置Ｐａ（＝ｖ１）を参照して、３Ｄ像表示データを作成する。座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータを用いて、３Ｄ像を立体的に視覚する技術としては、例えば、３Ｄ像のデータを異なる視点でボリュームレンダリングしたＶＲ画像を生成し、この複数の視点のＶＲ画像を視差あり画像として、ディスプレイに出力し、ディスプレイが、複数の視差あり画像をそれぞれ異なる方向に射出することにより、３Ｄ像のデータに対応する３Ｄ像をディスプレイに表示させることができる特開２０１３-９８６４号公報に記載されたものがある。 The first data creation unit 11 creates 3D image display data with reference to a desired position Pa (= v 1 ) based on the 3D image data represented in the coordinate system (U, V, S). . Using the 3D image data represented in the coordinate system (U, V, S) as a technique for viewing the 3D image stereoscopically, for example, a VR image is generated by volume rendering the 3D image data from different viewpoints. Then, the VR images of the plurality of viewpoints are output as images with parallax to the display, and the display emits the images with parallax in different directions, whereby a 3D image corresponding to the data of the 3D image is displayed on the display. There exists what was described in Unexamined-Japanese-Patent No. 2013-9864 which can be displayed.

第１データ作成部１１により作成された３Ｄ像表示データは、記憶部１５に記憶される。図６は、３Ｄ像表示データのデータ構造を示す図である。図６に、奥行方向を“α”、“β”、“γ”、所望の位置を“ｖ１”、３Ｄ像表示データの格納アドレスを“Ａ００１”で示す。“α”、“β”、“γ”は、座標系（Ｘ，Ｙ，Ｚ）を座標系（Ｕ，Ｖ，Ｓ）に変換するとき、Ｘ軸回り、Ｙ軸回り、Ｚ軸回りにそれぞれ回転させた角度を示す。第１データ作成部１１により作成された３Ｄ像表示データは、図６に示すようなデータ構造で記憶される。 The 3D image display data created by the first data creation unit 11 is stored in the storage unit 15. FIG. 6 is a diagram illustrating a data structure of 3D image display data. In FIG. 6, the depth direction is indicated by “α”, “β”, “γ”, the desired position is indicated by “v 1 ”, and the storage address of the 3D image display data is indicated by “A001”. “Α”, “β”, and “γ” are respectively about the X axis, the Y axis, and the Z axis when the coordinate system (X, Y, Z) is converted to the coordinate system (U, V, S). Indicates the rotated angle. The 3D image display data created by the first data creation unit 11 is stored in a data structure as shown in FIG.

複数の視差画像のうちの一つの視差画像が左目の方向に射出され、他方の一つの視差画像が右目の方向に射出される。   One parallax image of the plurality of parallax images is emitted in the direction of the left eye, and the other parallax image is emitted in the direction of the right eye.

左目から視差画像を見たときの方向及び右目から視差画像を見たときの方向がディスプレイ２０の画面の手前で互いに交差したとき、視差画像はディスプレイ２０の画面から飛び出して見える。さらに、両方の方向がディスプレイ２０の画面の奥前で互いに交差したとき、視差画像はディスプレイ２０の画面から引っ込んで見える。   When the direction when viewing the parallax image from the left eye and the direction when viewing the parallax image from the right eye intersect each other in front of the screen of the display 20, the parallax image appears to jump out of the screen of the display 20. Furthermore, when both directions intersect each other in front of the screen of the display 20, the parallax image appears to be retracted from the screen of the display 20.

これに対し、両方の方向がディスプレイ２０の画面で互いに交差したとき、すなわち、左目から見た画像と右目から見た画像との位置が一致する非視差画像はディスプレイ２０の画面から飛び出して見えもせず、また、引っ込んで見えもしない。そのため、画像の表示がクリアに見える。すなわち、３Ｄ像の奥行方向の所定位置の画像は、左目から見た画像と右目から見た画像との位置が一致するときのものとする。   On the other hand, when both directions intersect each other on the screen of the display 20, that is, a non-parallax image in which the positions of the image viewed from the left eye and the image viewed from the right eye coincide with each other is projected from the screen of the display 20. Also, it does not look retracted. Therefore, the image display looks clear. That is, it is assumed that the image at a predetermined position in the depth direction of the 3D image is when the positions of the image viewed from the left eye and the image viewed from the right eye match.

（ディスプレイ２０）
図７は、３Ｄ表示領域と２Ｄ表示領域との間に表示された壁状の画像を示す図である。図７に、３Ｄ表示領域を“３Ｄ”で示し、２Ｄ表示領域を“２Ｄ”で示し、壁状の画像を“Ｗ”で示す。 (Display 20)
FIG. 7 is a diagram illustrating a wall-like image displayed between the 3D display area and the 2D display area. In FIG. 7, the 3D display area is indicated by “3D”, the 2D display area is indicated by “2D”, and the wall-like image is indicated by “W”.

図２および図７に示すように、ディスプレイ２０は、第１の表示領域２１、第２の表示領域２２、第３の表示領域２３、第４の表示領域２４、および、第５の表示領域２５を有する。   As shown in FIGS. 2 and 7, the display 20 includes a first display area 21, a second display area 22, a third display area 23, a fourth display area 24, and a fifth display area 25. Have

第１の表示領域２１は、視差画像が表示される３Ｄ表示領域である。第２の表示領域２２は、ＭＰＲ像（後述する）が表示される２Ｄ表示領域である。第３の表示領域２３は、ＣＰＲ像（後述する）が表示される２Ｄ表示領域である。第４の表示領域２４は、第１の表示領域と第５の表示領域との間に配置される。第５の表示領域２５は、視差画像が表示される領域ではなく、両目共通の表示データ（非視差画像）が表示される領域であり、第２の表示領域２２および第３の表示領域２３を含む。第１の表示領域２１から第５の表示領域２５の位置、大きさ、および、形状は、ディスプレイ２０の画面上に画一的に設けられるものでなく、変更可能に構成される。   The first display area 21 is a 3D display area in which a parallax image is displayed. The second display area 22 is a 2D display area in which an MPR image (described later) is displayed. The third display area 23 is a 2D display area in which a CPR image (described later) is displayed. The fourth display area 24 is disposed between the first display area and the fifth display area. The fifth display area 25 is not an area in which a parallax image is displayed, but an area in which display data (non-parallax image) common to both eyes is displayed, and the second display area 22 and the third display area 23 are displayed. Including. The positions, sizes, and shapes of the first display area 21 to the fifth display area 25 are not provided uniformly on the screen of the display 20 and can be changed.

図７に示すように、第４の表示領域２４は、第１の表示領域２１に表示可能な３Ｄ像の立体の程度を視認可能な壁状の画像が表示される領域である。図７に壁状の画像を“Ｗ”で示す。表示データ作成部（図示しない）は、遠近法により、壁状の画像Ｗの表示データを作成する。遠近法に基づく手法で描画物体を作成する手段としては特開２００３-１０９０４０号公報に記載されたものがある。なお、壁状の画像Ｗが表示される第４の表示領域２４は、画像Ｗが立体的に表示されるという意味で３Ｄ表示領域であるといえる。   As shown in FIG. 7, the fourth display area 24 is an area in which a wall-like image in which the degree of 3D image that can be displayed in the first display area 21 can be visually recognized is displayed. FIG. 7 shows a wall-like image by “W”. A display data creation unit (not shown) creates display data of the wall-shaped image W by perspective. As means for creating a drawing object by a method based on perspective, there is one described in Japanese Patent Laid-Open No. 2003-109040. Note that the fourth display area 24 in which the wall-shaped image W is displayed can be said to be a 3D display area in the sense that the image W is three-dimensionally displayed.

第５の表示領域２５は、第１の表示領域２１に表示された所望の位置における画像（例えば、識別標識や断面像や補助画像）と同じ遠近感を起こさせるように画像が表示される領域である。図７に示す“ＤＬ”で示す点線は、所望の位置における画像と同じ遠近感を起こさせる位置に表示される。   The fifth display area 25 is an area in which an image is displayed so as to cause the same perspective as an image (for example, an identification mark, a cross-sectional image, or an auxiliary image) at a desired position displayed in the first display area 21. It is. A dotted line indicated by “DL” shown in FIG. 7 is displayed at a position causing the same perspective as the image at a desired position.

第４の表示領域２４に壁状の画像Ｗが表示されることにより、ユーザが視線を第１の表示領域２１と第５の表示領域２５との間に移動するとき、視線が第４の表示領域２４を通ることにより、３Ｄ像を見るときの感覚（視覚）と、２Ｄ像を見るときの感覚との切替えが違和感なく円滑にできる。   By displaying the wall-shaped image W in the fourth display area 24, when the user moves the line of sight between the first display area 21 and the fifth display area 25, the line of sight is displayed in the fourth display area 24. By passing through the region 24, it is possible to smoothly switch between feeling (sight) when viewing a 3D image and feeling when looking at a 2D image without a sense of incongruity.

（切替部１３１）
図２に示すように、表示制御部１３は、切替部１３１を有している。切替部１３１は、入力部１４による切替信号の入力を受けて、３Ｄ像が表示された第１の状態と、断面像および補助画像（後述する）が表示された第２の状態とを切り替え可能に構成される。なお、第１の状態として表示される３Ｄ像は、所定位置が初期値の３Ｄ像の形態上の重心の位置であるときの３Ｄ像であってもよく、初期値が所望の位置に変更されたときの３Ｄ像であってもよい。 (Switching unit 131)
As illustrated in FIG. 2, the display control unit 13 includes a switching unit 131. The switching unit 131 can receive a switching signal from the input unit 14 and switch between a first state in which a 3D image is displayed and a second state in which a cross-sectional image and an auxiliary image (described later) are displayed. Configured. The 3D image displayed as the first state may be a 3D image when the predetermined position is the position of the center of gravity on the form of the initial value 3D image, and the initial value is changed to a desired position. 3D image may be used.

（ＭＰＲ像作成部１６）
図２に示すＭＰＲ像作成部１６は、座標系（Ｘ，Ｙ，Ｚ）に表された３Ｄ像のデータに基づいて、被検体の任意の断面を表したＭＰＲ（ｃｕｌｔｉ-ｐｌａｎａｒ ｒｅｃｏｎｓｔｒｕｃｔｉｏｎ）像を作成する。基本的なＭＰＲ像は、３つあり、被検体の体軸方向（Ｚ軸方向）に直交する断面を表したアキシャル断面、被検体の幅方向（Ｘ軸方向）に直交する断面を表したサジタル断面、被検体の前後方向（Ｙ軸方向）に直交する断面を表したコロナル断面を有する。 (MPR image creation unit 16)
The MPR image creation unit 16 shown in FIG. 2 generates an MPR (multi-planar reconstruction) image representing an arbitrary cross section of the subject based on the 3D image data represented in the coordinate system (X, Y, Z). create. There are three basic MPR images, an axial section representing a section perpendicular to the body axis direction (Z-axis direction) of the subject, and a sagittal representing a section perpendicular to the width direction (X-axis direction) of the subject. It has a coronal cross section representing a cross section and a cross section orthogonal to the front-rear direction (Y-axis direction) of the subject.

これら３つのＭＰＲ像は、表示制御部１３により２Ｄ表示領域に表示される。表示された３つのＭＰＲ像のいずれかが入力部１４により選択される。入力部１４によりアキシャル断面が選択されたとき、その断面に直交する方向（Ｚ軸方向）、および、その断面の位置（Ｚ座標）が指定される。第２データ作成部１２は、Ｚ軸方向およびＺ座標の指定を受けて、Ｚ軸方向およびＺ座標を、後述する座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置とし、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて作成する。   These three MPR images are displayed in the 2D display area by the display control unit 13. One of the three displayed MPR images is selected by the input unit 14. When an axial section is selected by the input unit 14, a direction orthogonal to the section (Z-axis direction) and a position (Z coordinate) of the section are designated. The second data creation unit 12 receives the designation of the Z-axis direction and the Z-coordinate, sets the Z-axis direction and the Z-coordinate to a depth direction and a desired position in a coordinate system (U, V, S) described later, and a predetermined position The cross-section display data representing the cross-section of the 3D image at the desired position when is changed to the desired position is created based on the 3D image data represented in the coordinate system (U, V, S).

さらに、入力部１４によりサジタル断面が選択されたとき、その断面に直交する方向（Ｘ軸方向）、および、その断面の位置（Ｘ座標）が指定される。第２データ作成部１２は、Ｘ軸方向およびＸ座標の指定を受けて、Ｘ軸方向およびＸ座標を、座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置とし、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて作成する。   Furthermore, when a sagittal section is selected by the input unit 14, a direction orthogonal to the section (X-axis direction) and a position (X coordinate) of the section are specified. The second data creation unit 12 receives the designation of the X-axis direction and the X-coordinate, sets the X-axis direction and the X-coordinate as the depth direction and the desired position in the coordinate system (U, V, S), and sets the predetermined position as desired. The cross-section display data representing the cross-section of the 3D image at the desired position when the position is changed to the position is generated based on the 3D image data represented in the coordinate system (U, V, S).

さらに、入力部１４によりコロナル断面が選択されたとき、その断面に直交する方向（Ｙ軸方向）、および、その断面の位置（Ｙ座標）が指定される。第２データ作成部１２は、Ｙ軸方向およびＹ座標の指定を受けて、Ｙ軸方向およびＹ座標を、座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置とし、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて作成する。   Furthermore, when a coronal section is selected by the input unit 14, a direction orthogonal to the section (Y-axis direction) and a position (Y coordinate) of the section are specified. The second data creation unit 12 receives the designation of the Y-axis direction and the Y-coordinate, sets the Y-axis direction and the Y-coordinate to the depth direction and the desired position in the coordinate system (U, V, S), and the predetermined position is desired. The cross-section display data representing the cross-section of the 3D image at the desired position when the position is changed to the position is generated based on the 3D image data represented in the coordinate system (U, V, S).

（ＣＰＲ像作成部１７）
図２に示すＣＰＲ像作成部１７は、３Ｄ像のデータに基づいて、ＣＰＲ（Ｃｕｒｖｅｄ Ｐｌａｎａｒ Ｒｅｃｏｎｓｔｒｕｃｔｉｏｎ）像を作成する。ＣＰＲ像は、例えば、管状動脈の芯線上の各点を通る切断線を積み重ねることで得られる切断曲面である。 (CPR image creation unit 17)
The CPR image creating unit 17 shown in FIG. 2 creates a CPR (Curved Planar Reconstruction) image based on the 3D image data. A CPR image is, for example, a cut curved surface obtained by stacking cut lines passing through points on the core line of a tubular artery.

ＣＰＲ像は、表示制御部１３により２Ｄ表示領域に表示される。表示されたＣＰＲ像のいずれかの位置（切断曲面上の位置）が入力部１４により選択されたとき、選択された位置において切断曲面に直交する方向、および、選択された位置の座標（Ｘ座標、Ｙ座標、Ｚ座標）が指定される。第２データ作成部１２は、直交する方向および座標の指定を受けて、直交する方向および座標を、座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置とし、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて作成する。   The CPR image is displayed in the 2D display area by the display control unit 13. When any position (position on the cut curved surface) of the displayed CPR image is selected by the input unit 14, the direction orthogonal to the cut curved surface at the selected position and the coordinates of the selected position (X coordinate) , Y coordinate, and Z coordinate) are designated. The second data creation unit 12 receives the designation of the orthogonal direction and coordinates, sets the orthogonal direction and coordinates as the depth direction and the desired position in the coordinate system (U, V, S), and sets the predetermined position as the desired position. The cross-section display data representing the cross-section of the 3D image at the desired position when changed to is created based on the 3D image data represented in the coordinate system (U, V, S).

（入力部１４、第２データ作成部１２）
図２に示す入力部１４は、表示制御部１３により３Ｄ像が第１の表示領域２１（３Ｄ表示領域）に表示されたとき、表示された３Ｄ像のいずれかの位置が操作部（図示しない）により選択されたことを受けて、選択された位置に対応する所望の位置を指定するように構成される。なお、表示された３Ｄ像において、奥行方向が決められ、かつ、奥行方向と直交する平面が断面である。そのため、「所望の位置の指定」は、「所望の位置の断面の指定」でもある。 (Input unit 14, second data creation unit 12)
When the 3D image is displayed on the first display area 21 (3D display area) by the display control unit 13, the input unit 14 illustrated in FIG. 2 has any position of the displayed 3D image displayed on the operation unit (not illustrated). And a desired position corresponding to the selected position is designated. In the displayed 3D image, a depth direction is determined, and a plane orthogonal to the depth direction is a cross section. Therefore, “designation of a desired position” is also “designation of a cross section at a desired position”.

また、入力部１４は、アノテーション、体位、関心領域を含む補助画像を入力するように構成される。入力された補助画像を“Ｇ１１”、“Ｇ１２”、“Ｇ１３”で示す。 The input unit 14 is configured to input an auxiliary image including an annotation, a body position, and a region of interest. The input auxiliary images are indicated by “G 11 ”, “G 12 ”, and “G 13 ”.

入力部１４により所望の位置の断面が指定され、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面像（後述する）が作成され、表示制御部１３により断面像が表示されたとき、入力部１４による補助画像の入力を受けて、補助画像作成部（図示しない）は、補助画像の表示データを作成する。補助画像は、後述するように、所定位置における画像を表すデータであるため、非視差画像として作成する。   A cross-section at a desired position is designated by the input unit 14, a cross-sectional image of a 3D image (described later) at a desired position when a predetermined position is changed to a desired position is created, and the cross-sectional image is displayed by the display control unit 13 When the auxiliary image is input by the input unit 14, an auxiliary image creation unit (not shown) creates display data of the auxiliary image. As will be described later, the auxiliary image is data representing an image at a predetermined position, and thus is created as a non-parallax image.

図８は、３Ｄ表示領域に補助画像が表示されたときの概念図である。図８に、非視差画像として表示された補助画像の一例であるテキストデータを“Ｔｅｘｔ”で示す。   FIG. 8 is a conceptual diagram when an auxiliary image is displayed in the 3D display area. In FIG. 8, text data, which is an example of an auxiliary image displayed as a non-parallax image, is indicated by “Text”.

図８に示すように、補助画像作成部により作成された補助画像は、表示制御部１３により断面像Ｇｓに重ねられて表示される。補助画像は非視差画像として作成されるため、補助画像の表示をクリアに見せることができる。   As shown in FIG. 8, the auxiliary image created by the auxiliary image creating unit is displayed superimposed on the cross-sectional image Gs by the display control unit 13. Since the auxiliary image is created as a non-parallax image, the display of the auxiliary image can be made clear.

補助画像作成部により作成された補助画像は、ＩＤ番号を付されて記憶部１５に記憶される。図９は、補助画像等のデータ構造を示す図である。図９に、ＩＤ番号を“Ｎ０００１”、所望の位置を“ｖ１”、補助画像および座標（表示位置）の格納アドレスを“Ａ１０００１”、“Ａ１０００２”、“Ａ１０００３”で示す。補助画像作成部により作成された補助画像の表示データは、図９に示すようなデータ構造で記憶される。 The auxiliary image created by the auxiliary image creating unit is assigned an ID number and stored in the storage unit 15. FIG. 9 is a diagram illustrating a data structure of an auxiliary image or the like. In FIG. 9, the ID number is “N0001”, the desired position is “v 1 ”, and the storage addresses of the auxiliary image and coordinates (display position) are “A10001”, “A10002”, and “A10003”. The display data of the auxiliary image created by the auxiliary image creating unit is stored in a data structure as shown in FIG.

視差画像がディスプレイ２０の画面から飛び出しあるいは引っ込んで見られる程度ｄと、３Ｄ像の奥行方向の所定位置からの距離Ｌとは、予め対応づけられている（Ｌ∝ｄ）。程度ｄと距離Ｌとの関係は、記憶部１５に記憶される。なお、３Ｄ像が３Ｄ表示領域に表示されているときの奥行方向は、記憶部１５に記憶されている。奥行方向は、座標系（Ｘ，Ｙ，Ｚ）を座標系（Ｕ，Ｖ，Ｓ）に変換するとき、Ｘ軸回り、Ｙ軸回り、Ｚ軸回りにそれぞれ回転させた角度α、β、γで記憶される（図６参照）。   The degree d at which the parallax image is seen protruding or retracting from the screen of the display 20 and the distance L from the predetermined position in the depth direction of the 3D image are associated in advance (L∝d). The relationship between the degree d and the distance L is stored in the storage unit 15. The depth direction when the 3D image is displayed in the 3D display area is stored in the storage unit 15. For the depth direction, when the coordinate system (X, Y, Z) is converted to the coordinate system (U, V, S), the angles α, β, γ rotated around the X axis, the Y axis, and the Z axis, respectively. (See FIG. 6).

操作部により３Ｄ像の位置（飛び出しあるいは引っ込んで見える視差画像）が選択されると、第２データ作成部１２は、程度ｄに基づいて、奥行方向（Ｖ軸方向）の所定位置（ｖ＝０）から所望の位置までの距離Ｌを求める（図５参照）。   When the position of the 3D image (a parallax image that appears to pop out or retract) is selected by the operation unit, the second data creation unit 12 determines a predetermined position (v = 0) in the depth direction (V-axis direction) based on the degree d. ) To a desired position (see FIG. 5).

第２データ作成部１２は、入力部１４による所望の位置の指定を受けて、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面（奥行方向と直交する平面）を表す断面表示データを、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて作成する。なお、前述したように、３Ｄ像の奥行方向の所定位置の画像を作成するときは、左目から見た画像と右目から見た画像との位置を一致させた非視差画像を作成したが、同様に、３Ｄ像の奥行方向の所定位置の断面を表す断面表示データを作成するときは、左目から見た画像と右目から見た画像との位置を一致させた非視差画像を作成すればよい。   The second data creation unit 12 receives a designation of a desired position by the input unit 14 and represents a cross section (a plane perpendicular to the depth direction) of the 3D image at the desired position when the predetermined position is changed to the desired position. The cross-section display data is created based on 3D image data represented in the coordinate system (U, V, S). As described above, when creating an image at a predetermined position in the depth direction of the 3D image, a non-parallax image in which the position of the image viewed from the left eye and the position of the image viewed from the right eye are matched is created. In addition, when creating cross-section display data representing a cross-section at a predetermined position in the depth direction of the 3D image, a non-parallax image in which the positions of the image viewed from the left eye and the image viewed from the right eye are matched may be generated.

以上のように、奥行方向および所望の位置が求められる。第２データ作成部１２は、奥行方向および所望の位置を参照して、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて、所定位置を所望の位置に変更したときの所望の位置における断面表示データを作成する。   As described above, the depth direction and a desired position are obtained. The second data creation unit 12 refers to the depth direction and the desired position, and changes the predetermined position to the desired position based on the 3D image data represented in the coordinate system (U, V, S). The cross-section display data at the desired position is created.

なお、３Ｄ像のデータに基づいて断面像を作成する技術としては、３Ｄ像に対する所定の投影方向（奥行方向）における投影像（断面像）に相当する情報を、３Ｄ像のデータに基づいて作成する特開平７−１４６９５４号公報に記載されたものがある。   As a technique for creating a cross-sectional image based on 3D image data, information corresponding to a projection image (cross-sectional image) in a predetermined projection direction (depth direction) with respect to the 3D image is created based on the 3D image data. Japanese Patent Laid-Open No. 7-146944 has been disclosed.

第２データ作成部１２により作成された断面表示データは、ＩＤ番号を付されて記憶部１５に記憶される。図１０は、断面表示データのデータ構造を示す図である。図１０に、ＩＤ番号を“Ｎ０００１”、奥行方向を“Ｖ軸方向”、所望の位置を“ｖ１”、断面表示データの格納アドレスを“Ａ０００１”で示す。第２データ作成部１２により作成された断面表示データは、図１０に示すようなデータ構造で記憶される。 The cross-section display data created by the second data creation unit 12 is assigned an ID number and stored in the storage unit 15. FIG. 10 is a diagram illustrating a data structure of the cross-section display data. In FIG. 10, the ID number is “N0001”, the depth direction is “V-axis direction”, the desired position is “v 1 ”, and the storage address of the cross-section display data is “A0001”. The cross-section display data created by the second data creation unit 12 is stored in a data structure as shown in FIG.

（他の入力部１４）
入力部１４の構成としては、表示制御部１３により３Ｄ像が第１の表示領域２１に表示されたとき、操作部により３Ｄ像のいずれかの位置が選択されるものに限定されない。 (Other input unit 14)
The configuration of the input unit 14 is not limited to the configuration in which any position of the 3D image is selected by the operation unit when the 3D image is displayed in the first display area 21 by the display control unit 13.

他の構成としては、入力部１４は、３つのＭＰＲ像が第２の表示領域２２（２Ｄ表示領域）に表示されたとき、操作部によりＭＰＲ像のいずれかが選択されたことを受けて、選択されたＭＰＲ像に基づいて所望の位置の断面を指定するように構成される。   As another configuration, when the three MPR images are displayed in the second display region 22 (2D display region), the input unit 14 receives one of the MPR images selected by the operation unit, A cross section at a desired position is designated based on the selected MPR image.

さらに、他の構成としては、例えば、入力部１４は、ＣＰＲ像が第３の表示領域２３（２Ｄ表示領域）に表示されたとき、操作部により、ＣＰＲ像のいずれかの位置が選択されたことを受けて、選択されたＣＰＲ像の位置における断面を所望の位置の断面として指定するように構成される。   Further, as another configuration, for example, when the CPR image is displayed in the third display area 23 (2D display area), the input unit 14 selects any position of the CPR image by the operation unit. Accordingly, the cross section at the position of the selected CPR image is designated as the cross section at the desired position.

以上のような入力部１４の構成では、ＭＰＲ像等の選択を受けて、第２データ作成部１２が奥行方向および所望の位置を求める必要がある。   In the configuration of the input unit 14 as described above, it is necessary for the second data creation unit 12 to obtain a depth direction and a desired position in response to selection of an MPR image or the like.

（奥行方向および所望の位置の求め方）
以下、ＭＰＲ像等の選択を受けて、第２データ作成部１２が奥行方向および所望の位置を求める方法の一例について説明する。 (How to find the depth direction and desired position)
Hereinafter, an example of a method in which the second data creation unit 12 obtains a depth direction and a desired position in response to selection of an MPR image or the like will be described.

座標系（Ｘ，Ｙ，Ｚ）において、奥行方向をベクトルｐとして表すとき、ベクトルｐは、Ｘ、Ｙ、Ｚの各軸方向の単位ベクトルｉ，ｊ，ｋの成分（ｐｘ，ｐｙ，ｐｘ）に分解して、次の式で表される。 In the coordinate system (X, Y, Z), when the depth direction is expressed as a vector p, the vector p is a component (p x , p y , y) of unit vectors i, j, k in the X, Y, Z axis directions. p x ) and is expressed by the following equation.

Figure 2015150115
Figure 2015150115

座標系（Ｘ，Ｙ，Ｚ）をＸ軸回りに角度αだけ回転し、Ｙ軸回りに角度βだけ回転し、Ｚ軸回り角度γだけ回転させた新たな座標系（Ｕ，Ｖ，Ｓ）において、ベクトルｐの単位ベクトルの成分（ｐｕ，ｐｖ，ｐｓ）は、次の式で表される。 A new coordinate system (U, V, S) in which the coordinate system (X, Y, Z) is rotated by an angle α around the X axis, rotated by an angle β around the Y axis, and rotated by an angle γ around the Z axis. , The unit vector components (p u , p v , p s ) of the vector p are expressed by the following equations.

Figure 2015150115
Figure 2015150115

３Ｄ像が３Ｄ表示領域に表示されるとき、奥行方向はＶ軸方向であるから、奥行方向をＶ軸方向とする必要がある。奥行方向をＶ軸方向とするためには、単位ベクトルの成分ｐｖのみになるように（成分ｐｕ、ｐｓが共に０となるように）、座標系（Ｘ，Ｙ，Ｚ）を回転させる。それにより、ベクトルｐは、座標系（Ｕ，Ｖ，Ｓ）において、Ｖ軸方向のみの成分ｐｖを有することとなるため、Ｖ軸方向が座標系（Ｕ，Ｖ，Ｓ）における新たな奥行方向となる。 When the 3D image is displayed in the 3D display area, since the depth direction is the V-axis direction, the depth direction needs to be the V-axis direction. In order to set the depth direction to the V-axis direction, the coordinate system (X, Y, Z) is rotated so that only the component vector component p v is present (so that the components p u and p s are both 0). Let Thus, the vector p is, the coordinate system (U, V, S) in order to be able to have a component p v of the V-axis direction only, the V-axis direction coordinate system (U, V, S) a new in depth Direction.

（ＭＰＲ像の選択）
３つのＭＰＲ像のうちアキシャル断面が選択されたときについて説明する。ここで、アキシャル断面においては、奥行方向がＺ軸方向であるとして説明する。
アキシャル断面が選択されたとき、第２データ作成部１２は、ベクトルｐを求め、ベクトルｐがＶ軸方向の成分ｐｖのみを有するように（Ｚ軸がＶ軸と重なるように）、Ｘ軸回りに角度(π/２）だけ回転させる。それにより、Ｖ軸方向が新たな奥行方向となる。 (MPR image selection)
A case where an axial cross section is selected from the three MPR images will be described. Here, in the axial section, the depth direction is described as the Z-axis direction.
When the axial cross section is selected, a second data generation unit 12 obtains the vector p, (as the Z-axis overlaps the V-axis) as the vector p has only a component p v of the V-axis direction, X-axis Rotate around the angle (π / 2). Thereby, the V-axis direction becomes a new depth direction.

次に、座標系（Ｘ，Ｙ，Ｚ）をＸ軸回りに角度αだけ回転し、Ｙ軸回りに角度βだけ回転し、Ｚ軸回り角度γだけ回転させた新たな座標系（Ｕ，Ｖ，Ｓ）において、座標系（Ｘ，Ｙ，Ｚ）の座標値（ｘ，ｙ，ｚ）が座標系（Ｕ，Ｖ，Ｓ）の座標値（ｕ，ｖ，ｓ）として、どのように表されるかについて説明する。
座標系（Ｕ，Ｖ，Ｓ）の座標値（ｕ，ｖ，ｓ）は次の式で表される。 Next, a new coordinate system (U, V) in which the coordinate system (X, Y, Z) is rotated by an angle α around the X axis, rotated by an angle β around the Y axis, and rotated by an angle γ around the Z axis. , S), the coordinate value (x, y, z) of the coordinate system (X, Y, Z) is represented as the coordinate value (u, v, s) of the coordinate system (U, V, S). Explain what will be done.
The coordinate values (u, v, s) of the coordinate system (U, V, S) are expressed by the following equations.

Figure 2015150115
Figure 2015150115

３つのＭＰＲ像のうちアキシャル断面が選択され、Ｘ軸回りに角度（π/２）だけ回転されたとき、そのときの座標値（ｕ，ｖ，ｓ）を、式（３）から求めることができる。   When an axial section is selected from the three MPR images and rotated by an angle (π / 2) around the X axis, the coordinate values (u, v, s) at that time can be obtained from Equation (3). it can.

Figure 2015150115
Figure 2015150115

Ｘ軸回りに角度（π／２）だけ回転されると、アキシャル断面の位置が座標系（Ｘ，Ｙ，Ｚ）において、座標値（０，０，ｚ１）であるとき、座標系（Ｕ，Ｖ，Ｚ）においては、座標値（０，ｚ１，０）となる。すなわち、第２データ作成部１２は、所望の位置として、Ｖ座標を求める（ｖ＝ｚ１）。なお、奥行方向は、座標系（Ｕ，Ｖ，Ｚ）においてＶ軸方向である。 When the position of the axial cross section is the coordinate value (0, 0, z 1 ) in the coordinate system (X, Y, Z) when rotated about the X axis by an angle (π / 2), the coordinate system (U , V, Z) are coordinate values (0, z 1 , 0). That is, the second data creation unit 12 obtains the V coordinate as a desired position (v = z 1 ). The depth direction is the V-axis direction in the coordinate system (U, V, Z).

このようにして、第２データ作成部１２は、３つのＭＰＲ像のうちアキシャル断面が選択されたことを受けて、座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置を求めることができる。なお、３つのＭＰＲ像のうちサジタル断面やコロナル断面が選択されたときも、同様な方法により、座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置を求めることができる。   In this way, the second data creation unit 12 obtains the depth direction and the desired position in the coordinate system (U, V, S) in response to the selection of the axial cross-section among the three MPR images. it can. Even when a sagittal section or a coronal section is selected from the three MPR images, the depth direction and a desired position in the coordinate system (U, V, S) can be obtained by the same method.

第２データ作成部１２は、求めた奥行方向および所望の位置を参照して、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて、奥行方向の所望の位置における３Ｄ像の断面を表す断面表示データを作成する。断面表示データは記憶部１５に記憶される。
図１１は、アキシャル断面が選択されたとき、第２データ作成部１２により作成された断面表示データのデータ構造を示す図である。図１１に、ＩＤ番号を“Ｎ０００８”、奥行方向を“α８＝π/２”、所望の位置を“ｚ１”、断面表示データの格納アドレスを“Ａ０００８”で示す。第２データ作成部１２により作成された断面表示データは、図１１に示すようなデータ構造で記憶される。 The second data creation unit 12 refers to the obtained depth direction and desired position, and based on the data of the 3D image represented in the coordinate system (U, V, S), 3D at the desired position in the depth direction. Create cross-section display data representing the cross-section of the image. The cross-section display data is stored in the storage unit 15.
FIG. 11 is a diagram illustrating a data structure of the cross-section display data created by the second data creation unit 12 when an axial cross-section is selected. In FIG. 11, the ID number is “N0008”, the depth direction is “α 8 = π / 2”, the desired position is “z 1 ”, and the storage address of the cross-section display data is “A0008”. The cross-section display data created by the second data creation unit 12 is stored in a data structure as shown in FIG.

（ＣＰＲ像の選択）
以下、ＣＰＲ像のいずれかの位置の選択を受けて、第２データ作成部１２が奥行方向および所望の位置を求める方法の一例について説明する。 (CPR image selection)
Hereinafter, an example of a method in which the second data creation unit 12 obtains the depth direction and a desired position in response to selection of any position of the CPR image will be described.

図１２は、ＣＰＲ像を示す図である。図１２に、２Ｄ表示領域に表示されたＣＰＲ像およびカーソルを示す。表示されたカーソルの位置が、ＣＰＲ像において選択された位置を表す。図１２に示すように、ＣＰＲ像のいずれかの位置が選択されると、第２データ作成部１２は、その位置の座標系（Ｘ，Ｙ，Ｚ）の座標値（ｘ，ｙ，ｚ）を求める。さらに、その位置における切断曲面を求める。さらに、その切断曲面に直交する方向を座標系（Ｘ，Ｙ，Ｚ）における奥行方向として求める。   FIG. 12 is a diagram showing a CPR image. FIG. 12 shows a CPR image and a cursor displayed in the 2D display area. The position of the displayed cursor represents the position selected in the CPR image. As shown in FIG. 12, when any position of the CPR image is selected, the second data creation unit 12 uses the coordinate values (x, y, z) of the coordinate system (X, Y, Z) of the position. Ask for. Further, a cut curved surface at that position is obtained. Further, the direction orthogonal to the cut curved surface is obtained as the depth direction in the coordinate system (X, Y, Z).

第２データ作成部１２は、求めた座標系（Ｘ，Ｙ，Ｚ）における奥行方向および座標値（ｘ，ｙ，ｚ）に基づいて、式（１）、（２）を用いて、座標系（Ｕ，Ｖ，Ｓ）における奥行方向（Ｖ軸方向）および所望の位置を求める。   The second data creation unit 12 uses the equations (1) and (2) based on the depth direction and the coordinate values (x, y, z) in the obtained coordinate system (X, Y, Z) to A depth direction (V-axis direction) and a desired position in (U, V, S) are obtained.

座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置を求める方法は、ＭＰＲ像の選択を受けて、座標系（Ｕ，Ｖ，Ｓ）における奥行方向および所望の位置を求める方法と同じであるため、その説明を省略する。   The method for obtaining the depth direction and desired position in the coordinate system (U, V, S) is the same as the method for obtaining the depth direction and desired position in the coordinate system (U, V, S) upon selection of the MPR image. Therefore, the description thereof is omitted.

第２データ作成部１２は、求めた奥行方向および所望の位置を参照して、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを作成する。   The second data creation unit 12 refers to the obtained depth direction and the desired position, and changes the predetermined position to the desired position based on the 3D image data represented in the coordinate system (U, V, S). The cross-section display data representing the cross-section of the 3D image at the desired position is created.

図１３は断面像を示す図である。表示制御部１３は、作成された断面表示データにより、３Ｄ像表示領域に図１３に示す断面像を表示させる。   FIG. 13 shows a cross-sectional image. The display control unit 13 displays the cross-sectional image shown in FIG. 13 in the 3D image display area based on the generated cross-sectional display data.

（表示制御部１３）
図２に示す表示制御部１３は、入力部１４による所望の位置の指定を受けて、断面表示データにより断面像をディスプレイ２０に表示させる。断面表示データは、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表すデータであるため、ディスプレイ２０の画面上で断面像の位置が一致する。そのため、断面像の表示をクリアに見ることができる。 (Display control unit 13)
The display control unit 13 illustrated in FIG. 2 receives a designation of a desired position by the input unit 14 and displays a cross-sectional image on the display 20 based on the cross-sectional display data. Since the cross-section display data is data representing a cross-section of the 3D image at a desired position when the predetermined position is changed to the desired position, the positions of the cross-sectional images coincide on the screen of the display 20. Therefore, the display of the cross-sectional image can be seen clearly.

さらに、表示制御部１３は、断面像を表示させたとき、入力部１４による補助画像の入力を受けて、補助画像を断面像に重ねて表示させる。補助画像も、所定位置における画像を表すデータであるため、ディスプレイ２０の画面上で補助画像の位置が一致する。そのため、断面像の表示をクリアに見ることができる。   Further, when the cross-sectional image is displayed, the display control unit 13 receives an auxiliary image input from the input unit 14 and displays the auxiliary image superimposed on the cross-sectional image. Since the auxiliary image is also data representing an image at a predetermined position, the position of the auxiliary image matches on the screen of the display 20. Therefore, the display of the cross-sectional image can be seen clearly.

さらに、表示制御部１３は、入力部１４による所望の位置の指定を受けて、所望の位置における断面像に、その断面像に関連づけられて記憶された補助画像を重ねて表示させる。   Further, the display control unit 13 receives designation of a desired position by the input unit 14 and displays the auxiliary image stored in association with the cross-sectional image on the cross-sectional image at the desired position.

（識別標識作成部１８）
図１４は、３Ｄ表示領域に表示された識別標識を示す図である。図１４に、３Ｄ像を“Ｇ”で示し、所望の位置を“Ｐａ”で示し、識別標識を“ＢＬ”で示し、所望の位置Ｐａを指し示すための指示用ラインを“ＬＮ”で示す。なお、図１４において、奥行方向はＶ軸方向である。 (Identification sign making part 18)
FIG. 14 is a diagram showing the identification mark displayed in the 3D display area. In FIG. 14, the 3D image is indicated by “G”, the desired position is indicated by “Pa”, the identification mark is indicated by “BL”, and the instruction line for indicating the desired position Pa is indicated by “LN”. In FIG. 14, the depth direction is the V-axis direction.

識別標識作成部１８は、入力部１４により奥行方向（Ｖ軸方向）における所望の位置が指示されたとき（所望の位置における断面像を作成する旨の指示があったとき）、その位置を示す識別標識（例えば、バルーン）ＢＬの表示データ（視差画像）を作成する。識別標識作成部１８は、所定位置（ｖ＝０）から所望の位置までの距離Ｌ（図５参照）に基づいて、識別標識ＢＬを視差画像として作成する。同様にして、識別標識作成部１８は、距離Ｌに基づいて、指示用ラインＬＮを視差画像として作成する。   When a desired position in the depth direction (V-axis direction) is instructed by the input unit 14 (when an instruction to create a cross-sectional image at the desired position is given), the identification mark creating unit 18 indicates the position. Display data (parallax image) of the identification mark (for example, balloon) BL is created. The identification marker creating unit 18 creates the identification marker BL as a parallax image based on a distance L (see FIG. 5) from a predetermined position (v = 0) to a desired position. Similarly, the identification sign creating unit 18 creates the instruction line LN as a parallax image based on the distance L.

なお、所望の位置が所定位置（ｖ＝０）であるとき、識別標識作成部１８は、識別標識ＢＬおよび指示用ラインＬＮの表示データを非視差画像として作成する。作成された識別標識ＢＬおよび指示用ラインＬＮの表示データは、記憶部１５に記憶される。   When the desired position is the predetermined position (v = 0), the identification mark creating unit 18 creates display data of the identification mark BL and the instruction line LN as a non-parallax image. Display data of the created identification mark BL and instruction line LN is stored in the storage unit 15.

図９は、識別標識および指示用ラインのデータ構造を示す図である。図９に、ＩＤ番号を“Ｎ０００１”、所望の位置を“ｖ１”、識別標識および座標（表示位置）の格納アドレスを“Ａ１００”、指示用ラインおよび座標（表示位置）の格納アドレスを“Ａ１０００”で示す。識別標識作成部１８により作成された識別標識ＢＬおよび指示用ラインＬＮの表示データは、図９に示すようなデータ構造で記憶される。 FIG. 9 is a diagram illustrating a data structure of the identification mark and the instruction line. In FIG. 9, the ID number is “N0001”, the desired position is “v 1 ”, the storage address for the identification mark and coordinates (display position) is “A100”, and the storage address for the instruction line and coordinates (display position) is “ A1000 ". The display data of the identification mark BL and the instruction line LN created by the identification mark creation unit 18 is stored in a data structure as shown in FIG.

表示制御部１３は、３Ｄ像が表示された第１の状態のとき、表示データにより、ディスプレイ２０に識別標識ＢＬおよび指示用ラインＬＮを表示させる。所望の位置が所定位置から手前側であれば、識別標識ＢＬおよび指示用ラインＬＮは、画面から飛び出して見える。反対に、所望の位置が所定位置から奥側であれば、識別標識ＢＬおよび指示用ラインＬＮは、画面から引っ込んで見える。なお、所望の位置が所定位置（ｖ＝０）であるとき、識別標識ＢＬおよび指示用ラインＬＮは、画面から飛び出しても、引っ込んでも見えない。識別標識ＢＬ等の表示はクリアとなる。   In the first state where the 3D image is displayed, the display control unit 13 causes the display 20 to display the identification mark BL and the instruction line LN based on the display data. If the desired position is on the near side from the predetermined position, the identification mark BL and the instruction line LN appear to protrude from the screen. On the contrary, if the desired position is the back side from the predetermined position, the identification mark BL and the instruction line LN appear to be retracted from the screen. When the desired position is the predetermined position (v = 0), the identification mark BL and the instruction line LN are not visible even if they jump out of the screen or retract. The display of the identification mark BL or the like is cleared.

さらに、入力部１４による新たな所望の位置Ｐａの指示を受けて、識別標識作成部１８により識別標識ＢＬおよび指示用ラインＬＮが作成される。   Further, upon receiving an instruction of a new desired position Pa from the input unit 14, the identification mark creating unit 18 creates an identification mark BL and an instruction line LN.

このときにも、作成された識別標識ＢＬおよび指示用ラインＬＮの表示データは、記憶部１５に記憶される。図９に、ＩＤ番号を“Ｎ０００２”、所望の位置を“ｖ２、識別標識および座標（表示位置）の格納アドレスを“Ａ２００”、指示用ラインおよび座標（表示位置）の格納アドレスを“Ａ２０００”で示す。 Also at this time, the created display data of the identification mark BL and the instruction line LN is stored in the storage unit 15. In FIG. 9, the ID number is “N0002”, the desired position is “v 2 ”, the storage address of the identification mark and coordinates (display position) is “A200”, and the storage address of the instruction line and coordinates (display position) is “A2000”. "

（動作）
以上に、第１実施形態に係る画像表示装置１０の構成を簡単に説明した。
次に、画像表示装置１０の一連の動作について図１５を参照して説明する。図１５は、３Ｄ像の表示から補助画像の表示までの一連の動作を示すフローチャートである。 (Operation)
The configuration of the image display device 10 according to the first embodiment has been briefly described above.
Next, a series of operations of the image display apparatus 10 will be described with reference to FIG. FIG. 15 is a flowchart showing a series of operations from displaying a 3D image to displaying an auxiliary image.

図１５に示すように、第１データ作成部１１が３Ｄ像のデータに基づいて、奥行方向を参照して、３Ｄ像の表示データを作成する。表示制御部１３は、３Ｄ像の表示データにより、３Ｄ表示領域に３Ｄ像を表示させる（Ｓ１０１）。   As illustrated in FIG. 15, the first data creation unit 11 creates 3D image display data with reference to the depth direction based on the 3D image data. The display control unit 13 displays the 3D image in the 3D display area based on the 3D image display data (S101).

次に、入力部１４により３Ｄ像の奥行方向の所望の位置を指定する（Ｓ１０２）。
次に、第２データ作成部１２が、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを作成する。断面データは記憶部１５に記憶される（Ｓ１０３）。 Next, a desired position in the depth direction of the 3D image is designated by the input unit 14 (S102).
Next, the second data creation unit 12 creates cross-section display data representing a cross-section of the 3D image at a desired position when the predetermined position is changed to the desired position. The cross section data is stored in the storage unit 15 (S103).

次に、表示制御部１３が、断面表示データにより、３Ｄ表示領域に断面像を表示させる（Ｓ１０４）。断面像は所定位置における断面を表すものであるから、断面像は非視差画像になるため、断面像の表示をクリアに見せることができる。   Next, the display control unit 13 displays a cross-sectional image in the 3D display area based on the cross-sectional display data (S104). Since the cross-sectional image represents a cross-section at a predetermined position, the cross-sectional image becomes a non-parallax image, so that the display of the cross-sectional image can be shown clearly.

次に、この断面像に関連する補助画像を入力する（Ｓ１０５）。補助画像も所定位置に表されるものであるから、補助面像は非視差画像になるため、補助面像の表示もクリアに見せることができる。   Next, an auxiliary image related to the cross-sectional image is input (S105). Since the auxiliary image is also displayed at a predetermined position, the auxiliary surface image becomes a non-parallax image, so that the display of the auxiliary surface image can be made clear.

次に、表示制御部１３は、入力された補助画像を、断面像に重ねて表示させる（Ｓ１０６）。補助画像を断面像に重ねて表示させるため、ユーザ（読影者）は、視線を大きく動かさないで済む。なお、断面表示データの作成、記憶（Ｓ１０３）に前後して、識別標識作成部１８が、所望の位置を参照して、識別標識および指示用ラインを作成する（Ｓ１０７）。   Next, the display control unit 13 displays the input auxiliary image so as to overlap the cross-sectional image (S106). Since the auxiliary image is displayed so as to be superimposed on the cross-sectional image, the user (reader) does not have to move the line of sight greatly. Before and after the creation and storage of the cross-section display data (S103), the identification mark creation unit 18 creates an identification mark and an instruction line with reference to a desired position (S107).

（他の動作）
以上の画像表示装置１０の一連の動作では、最初に、３Ｄ表示領域に表示された３Ｄ像上で所望の位置を指定したが、最初に、奥行方向、所望の位置を指定するものを説明する。 (Other actions)
In the series of operations of the image display device 10 described above, a desired position is first designated on the 3D image displayed in the 3D display area. First, a description will be given of what designates the depth direction and the desired position. .

他の動作について図１６を参照して説明する。図１６は、奥行方向、所望の位置の指定から補助画像の表示までの一連の動作を示すフローチャートである。   Another operation will be described with reference to FIG. FIG. 16 is a flowchart showing a series of operations from designation of a depth direction and a desired position to display of an auxiliary image.

図１６に示すように、次に、入力部１４により、奥行方向、および、その所望の位置を指定する（Ｓ２０１）。このときの入力部１４による奥行方向および所望の位置の指定は、３つのＭＰＲ像のいずれかが選択されたこと、あるいは、ＣＰＲ像のいずれかの位置が選択されたことによる。   As shown in FIG. 16, next, the input unit 14 designates the depth direction and its desired position (S201). Designation of the depth direction and the desired position by the input unit 14 at this time is because one of the three MPR images has been selected or one of the CPR images has been selected.

次に、第１データ作成部１１が３Ｄ像のデータに基づいて、奥行方向を参照して、３Ｄ像の表示データを作成する。表示制御部１３は、３Ｄ像の表示データにより、３Ｄ表示領域に３Ｄ像を表示させる（Ｓ２０２）。   Next, the first data creation unit 11 creates 3D image display data with reference to the depth direction based on the 3D image data. The display control unit 13 displays the 3D image in the 3D display area based on the display data of the 3D image (S202).

次に、第２データ作成部１２が、所定位置を所望の位置に変更したときの所望の位置における３Ｄ像の断面を表す断面表示データを作成する。断面データは記憶部１５に記憶される（Ｓ２０３）。なお、ステップＳ２０１からステップＳ２０２を行わずに、断面表示データの作成、記憶のステップＳ２０３を行ってもよい。   Next, the second data creation unit 12 creates cross-section display data representing a cross-section of the 3D image at a desired position when the predetermined position is changed to the desired position. The cross section data is stored in the storage unit 15 (S203). Note that step S203 of creating and storing the cross-section display data may be performed without performing steps S201 to S202.

次に、表示制御部１３が、断面表示データにより、３Ｄ表示領域に断面像を表示させる（Ｓ２０４）。断面像は所定位置における断面を表すものであるから、断面像は非視差画像になるため、断面像の表示をクリアに見せることができる。   Next, the display control unit 13 displays a cross-sectional image in the 3D display area based on the cross-sectional display data (S204). Since the cross-sectional image represents a cross-section at a predetermined position, the cross-sectional image becomes a non-parallax image, so that the display of the cross-sectional image can be shown clearly.

次に、この断面像に関連する補助画像を入力する（Ｓ２０５）。補助画像も所定位置に表されるものであるから、補助面像は非視差画像になるため、補助面像の表示もクリアに見せることができる。   Next, an auxiliary image related to the cross-sectional image is input (S205). Since the auxiliary image is also displayed at a predetermined position, the auxiliary surface image becomes a non-parallax image, so that the display of the auxiliary surface image can be made clear.

次に、表示制御部１３は、入力された補助画像を、断面像に重ねて表示させる（Ｓ２０６）。補助画像を断面像に重ねて表示させるため、ユーザ（読影者）は、視線を大きく動かさないで済む。なお、断面表示データの作成、記憶（Ｓ２０３）に前後して、識別標識作成部１８が、所望の位置を参照して、識別標識および指示用ラインを作成する（Ｓ２０７）。   Next, the display control unit 13 displays the input auxiliary image so as to overlap the cross-sectional image (S206). Since the auxiliary image is displayed so as to be superimposed on the cross-sectional image, the user (reader) does not have to move the line of sight greatly. Before and after the creation and storage of the cross-section display data (S203), the identification mark creation unit 18 creates an identification mark and an instruction line with reference to a desired position (S207).

（他の動作）
次に、識別標識を指定してから補助画像を表示するまでの一連の動作について説明する。図１７は、識別標識の指定から補助画像の表示までの一連の動作を示すフローチャートである。 (Other actions)
Next, a series of operations from designation of an identification mark to display of an auxiliary image will be described. FIG. 17 is a flowchart showing a series of operations from designation of an identification mark to display of an auxiliary image.

図１７に示すように、表示制御部１３は、３Ｄ表示領域に３Ｄ像、識別標識、および、指定用ラインを表示させる（Ｓ３０１）。３Ｄ像が表示された３Ｄ表示領域における識別標識および指定用ラインの表示データは、識別標識に係る奥行方向の所望の位置を参照して、識別標識作成部１８により作成される。   As shown in FIG. 17, the display control unit 13 displays a 3D image, an identification mark, and a designation line in the 3D display area (S301). The display data of the identification mark and the designation line in the 3D display area where the 3D image is displayed is created by the identification mark creation unit 18 with reference to a desired position in the depth direction related to the identification mark.

次に、操作部により識別標識を指定する（Ｓ３０２）。このときの「識別標識の指定」が、その識別標識に係る所望の位置の指定となる。   Next, an identification mark is designated by the operation unit (S302). The “designation of the identification mark” at this time is the designation of the desired position related to the identification sign.

次に、表示制御部１３は、識別標識（そのＩＤ番号）に基づいて、断面表示データを読み出す（Ｓ３０４）。   Next, the display control unit 13 reads the cross-section display data based on the identification mark (its ID number) (S304).

さらに、表示制御部１３は、識別標識（そのＩＤ番号）に基づいて、補助画像を読み出す（Ｓ３０５）。   Further, the display control unit 13 reads an auxiliary image based on the identification mark (its ID number) (S305).

さらに、表示制御部１３は、断面像を表示させるとともに、その断面像に補助画像を重ねて表示させる（Ｓ３０５）。   Further, the display control unit 13 displays the cross-sectional image and displays the auxiliary image so as to overlap the cross-sectional image (S305).

以上によれば、３Ｄ表示領域に表示された識別標識を指定することで、断面像および補助画像を表示させることが可能となる。   According to the above, it is possible to display the cross-sectional image and the auxiliary image by designating the identification mark displayed in the 3D display area.

［第２実施形態］
次に、画像表示装置１０の第２実施形態について図１８を参照して説明する。なお、第２実施形態において、第１実施形態と同じ構成については同一番号を付してその説明を省略し、異なる構成について主に説明する。 [Second Embodiment]
Next, a second embodiment of the image display device 10 will be described with reference to FIG. Note that in the second embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, description thereof is omitted, and different components are mainly described.

図１８は、３Ｄ表示領域に表示された２つの識別標識を示す図である。図１８に、一方の識別標識ＢＬに重ねられて表示された“Ｒ”の文字を示し、他方の識別標識ＢＬに重ねられて表示された“Ａ”の文字を示す。これらの文字は、被検体の方位を表すものであって、“Ｒ”は「右」を示し、“Ａ”は「前面」を示す。被検体の方位を表す文字は、“Ｒ”、“Ａ”の他に、“Ｌ”、“Ｐ”、“Ｈ”、および、“Ｆ”がある。“Ｌ”は「左」、“Ｐ”は「背面」、“Ｈ”は「頭」、および、“Ｆ”は「足」を示す。   FIG. 18 is a diagram showing two identification marks displayed in the 3D display area. FIG. 18 shows the letter “R” displayed superimposed on one identification mark BL, and the letter “A” displayed superimposed on the other identification mark BL. These letters indicate the orientation of the subject, “R” indicates “right”, and “A” indicates “front”. In addition to “R” and “A”, characters representing the orientation of the subject include “L”, “P”, “H”, and “F”. “L” indicates “left”, “P” indicates “back”, “H” indicates “head”, and “F” indicates “foot”.

表示制御部１３は、これらの文字を識別標識ＢＬに重ねて表示させる。３Ｄ像と共に識別標識ＢＬが表示され、その識別標識ＢＬに被検体の方位を表す文字が表示されることにより、３Ｄ像の表示方向を容易に視認することが可能となる。   The display control unit 13 displays these characters on the identification mark BL. The identification mark BL is displayed together with the 3D image, and characters indicating the orientation of the subject are displayed on the identification mark BL, whereby the display direction of the 3D image can be easily visually confirmed.

［第３実施形態］
次に、画像表示装置１０の第３実施形態について図１９を参照して説明する。なお、第３実施形態において、第１実施形態と同じ構成については同一番号を付してその説明を省略し、異なる構成について主に説明する。 [Third Embodiment]
Next, a third embodiment of the image display device 10 will be described with reference to FIG. Note that in the third embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, description thereof is omitted, and different configurations are mainly described.

図１９は、３Ｄ像が表示されたとき、３Ｄ表示領域において指定された位置を表す。図１９に、指定された位置を“Ｘ”で示し、作成されたＲＯＩを一点鎖線で示す。   FIG. 19 shows a designated position in the 3D display area when the 3D image is displayed. In FIG. 19, the designated position is indicated by “X”, and the created ROI is indicated by a one-dot chain line.

入力部１４により３Ｄ表示領域において複数の位置が指定される。算出部（図示しない）は、指定された複数の位置を参照して、座標系（Ｕ，Ｖ，Ｓ）に表された３Ｄ像のデータに基づいて、ＲＯＩ計測（距離、角度、統計計算など）を行う。ＲＯＩ計測には、表示された検査対象に対し、任意の位置を指定することにより、予め定められた手順に従ってＲＯＩが設定される技術（例えば、特開２００３-１６４６３号公報）が用いられる。   The input unit 14 designates a plurality of positions in the 3D display area. A calculation unit (not shown) refers to a plurality of designated positions, and performs ROI measurement (distance, angle, statistical calculation, etc.) based on 3D image data represented in the coordinate system (U, V, S). )I do. For the ROI measurement, a technique (for example, Japanese Patent Application Laid-Open No. 2003-16463) in which an ROI is set according to a predetermined procedure by specifying an arbitrary position with respect to a displayed inspection object is used.

本発明のいくつかの実施形態を説明したが、これら実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   Although several embodiments of the present invention have been described, these embodiments are presented by way of example and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

Ｇ ３Ｄ像
Ｇｓ 断面像
Ｐ 所定位置
Ｐａ 所望の位置
１０ 画像表示装置
１１ 第１データ作成部
１２ 第２データ作成部
１３ 表示制御部
１３１ 切替部
１４ 入力部
１５ 記憶部
１６ ＭＰＲ像作成部
１７ ＣＰＲ像作成部
１８ 識別標識作成部
２０ ディスプレイ
２１ 第１の表示領域
２２ 第２の表示領域
２３ 第３の表示領域
２４ 第４の表示領域
２５ 第５の表示領域 G 3D image Gs Cross-sectional image P Predetermined position Pa Desired position 10 Image display device 11 First data creation unit 12 Second data creation unit 13 Display control unit 131 Switching unit 14 Input unit 15 Storage unit 16 MPR image creation unit 17 CPR image Creation unit 18 Identification marker creation unit 20 Display 21 First display area 22 Second display area 23 Third display area 24 Fourth display area 25 Fifth display area

Claims (9)

３Ｄ像のデータに基づいて、前記３Ｄ像の奥行方向の所定位置を基準に立体的に視覚できるように、前記３Ｄ像を第１の視点から見て得られる第１の３Ｄ像表示データおよび前記３Ｄ像を第２の視点から見て得られる第２の３Ｄ像表示データを作成する第１データ作成部と、
前記第１の３Ｄ像表示データおよび前記第２の３Ｄ像表示データにより、前記３Ｄ像を表示させる表示制御部と、
前記３Ｄ像の奥行方向の所望の位置の断面を指定する入力部と、
前記入力部による前記所望の位置の指定を受けて、前記所定位置を前記所望の位置に変更したときの前記所望の位置における３Ｄ像の断面を表す断面表示データを前記３Ｄ像のデータに基づいて作成する第２データ作成部と、
を有し、
前記表示制御部は、前記断面表示データにより断面像を表示させたとき、前記入力部によるアノテーションを含む補助画像の入力を受けて、前記補助画像を前記断面像に重ねて表示させること、
を特徴とする画像表示装置。 Based on the data of the 3D image, the first 3D image display data obtained by viewing the 3D image from a first viewpoint so that the 3D image can be viewed stereoscopically based on a predetermined position in the depth direction of the 3D image, and the A first data creation unit for creating second 3D image display data obtained by viewing a 3D image from a second viewpoint;
A display control unit for displaying the 3D image by the first 3D image display data and the second 3D image display data;
An input unit for designating a cross section at a desired position in the depth direction of the 3D image;
In response to the designation of the desired position by the input unit, cross-sectional display data representing a cross-section of the 3D image at the desired position when the predetermined position is changed to the desired position is based on the data of the 3D image. A second data creation unit to be created;
Have
The display control unit, when displaying a cross-sectional image by the cross-sectional display data, receives an input of an auxiliary image including an annotation by the input unit, and displays the auxiliary image superimposed on the cross-sectional image;
An image display device characterized by the above. 前記入力部により入力された前記補助画像を、前記断面像に関連づけて記憶させる手段をさらに有し、
前記表示制御部は、前記入力部による前記所望の位置の指定を受けて、前記所望の位置における前記断面像に、前記関連づけられて記憶された前記補助画像を重ねて表示させること、
を特徴とする請求項１に記載の画像表示装置。 Means for storing the auxiliary image input by the input unit in association with the cross-sectional image;
The display control unit receives the designation of the desired position by the input unit, and displays the auxiliary image stored in association with the cross-sectional image at the desired position,
The image display apparatus according to claim 1. 前記入力部は、前記表示制御部により前記３Ｄ像が第１の表示領域に表示されたとき、操作部により前記３Ｄ像のいずれかの位置が選択されたことを受けて、前記選択された位置における３Ｄ像の断面を前記所望の位置の断面として指定するように構成されること、
を特徴とする請求項１または２に記載の画像表示装置。 When the 3D image is displayed in the first display area by the display control unit, the input unit receives the selected position of the 3D image by the operation unit, and the selected position. Configured to designate a cross-section of the 3D image at the desired position as a cross-section;
The image display device according to claim 1, wherein: 前記３Ｄ像のデータに基づいて、前記３Ｄ像を予め定められた断面で表したときの複数のＭＰＲ像を作成するＭＰＲ像作成部をさらに有し、
前記入力部は、前記作成された複数のＭＰＲ像が第２の表示領域に表示されたとき、操作部により前記ＭＰＲ像のいずれかが選択されたことを受けて、前記選択されたＭＰＲ像に基づいて前記所望の位置の断面を指定するように構成されること、
を特徴とする請求項１または２に記載の画像表示装置。 An MPR image creation unit that creates a plurality of MPR images when the 3D image is represented by a predetermined cross section based on the data of the 3D image;
When the plurality of created MPR images are displayed in the second display area, the input unit receives the fact that one of the MPR images has been selected by the operation unit, and changes the selected MPR image to the selected MPR image. Configured to designate a cross-section at the desired location based on,
The image display device according to claim 1, wherein: 前記３Ｄ像のデータに基づいて、前記３Ｄ像を２次元曲面の断面で表したときのＣＰＲ像を作成するＣＰＲ像作成部をさらに有し、
前記入力部は、前記作成されたＣＰＲ像が第３の表示領域に表示されたとき、操作部により、前記ＣＰＲ像のいずれかの位置が選択されたことを受けて、前記選択されたＣＰＲ像の位置における断面を前記所望の位置の断面として指定するように構成されること、
を特徴とする請求項１または２に記載の画像表示装置。 A CPR image creation unit that creates a CPR image when the 3D image is represented by a cross section of a two-dimensional curved surface based on the data of the 3D image;
When the generated CPR image is displayed in the third display area, the input unit receives the selected position of the CPR image by the operation unit, and receives the selected CPR image. Being configured to designate a cross-section at the position of the desired position as a cross-section;
The image display device according to claim 1, wherein: 前記第１の表示領域に表示可能な３Ｄ像の立体の程度を視認可能な画像が表示される第４の表示領域と、
前記第４の表示領域を間にして前記第１の表示領域と反対側に配置され、前記所望の位置における画像と同じ遠近感を起こさせるように画像が表示される第５の表示領域と、
をさらに有すること、
を特徴とする請求項３に記載の画像表示装置。 A fourth display area in which an image capable of visually recognizing the degree of 3D image displayable in the first display area is displayed;
A fifth display area that is disposed on the opposite side of the first display area with the fourth display area in between, and displays an image so as to cause the same perspective as the image at the desired position;
Further having
The image display device according to claim 3. 前記３Ｄ像が表示された第１の状態と、前記断面像および前記補助画像が表示された第２の状態とを切り替える手段をさらに有すること、
を特徴とする請求項１に記載の画像表示装置。 A means for switching between the first state in which the 3D image is displayed and the second state in which the cross-sectional image and the auxiliary image are displayed;
The image display apparatus according to claim 1. 前記第１の状態において、前記所望の位置を示す識別標識が表示されるように構成されること、
を特徴とする請求項７に記載の画像表示装置。 Being configured to display an identification mark indicating the desired position in the first state;
The image display device according to claim 7. 前記入力部は、前記識別標識が表示されたとき、操作部により前記識別標識が指定されたことを受けて、前記指定された前記識別標識に係る前記所望の位置を指定するように構成されること、
を特徴とする請求項８に記載の画像表示装置。 The input unit is configured to designate the desired position related to the designated identification mark in response to the designation of the identification mark by the operation unit when the identification mark is displayed. about,
The image display device according to claim 8.
JP2014025157A 2014-02-13 2014-02-13 image display device Pending JP2015150115A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014025157A JP2015150115A (en) 2014-02-13 2014-02-13 image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014025157A JP2015150115A (en) 2014-02-13 2014-02-13 image display device

Publications (1)

Publication Number Publication Date
JP2015150115A true JP2015150115A (en) 2015-08-24

Family

ID=53893017

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014025157A Pending JP2015150115A (en) 2014-02-13 2014-02-13 image display device

Country Status (1)

Country Link
JP (1) JP2015150115A (en)

Similar Documents

Publication Publication Date Title
US10360730B2 (en) Augmented reality providing system and method, information processing device, and program
JP5551957B2 (en) Projection image generation apparatus, operation method thereof, and projection image generation program
CN106572829B (en) Control of positioning of a scanning region of a medical imaging system
US20160163105A1 (en) Method of operating a surgical navigation system and a system using the same
CN106898027B (en) Method and apparatus for mapping three-dimensional images to two-dimensional images
US11961193B2 (en) Method for controlling a display, computer program and mixed reality display device
JP5815513B2 (en) Image processing apparatus and image processing method
JP6145870B2 (en) Image display apparatus and method, and program
WO2013021440A1 (en) Image processing apparatus, image displaying apparatus, image processing method and program
KR20130059092A (en) The method and apparatus combining a plurality of 2-dimensional images with 3-dimensional model
JP2008085641A (en) Three-dimensional image display
JP5595207B2 (en) Medical image display device
JP2006061274A (en) Program and endoscope system
EP3629932B1 (en) Device and a corresponding method for providing spatial information of an interventional device in a live 2d x-ray image
CN108492299B (en) Cutting method of three-dimensional image
JP2007021193A (en) Image processing apparatus and program
JP2015150115A (en) image display device
JPH10234664A (en) Image processor
JPH0254381A (en) Picture process and processor
JP6298859B2 (en) Medical image stereoscopic display processing apparatus and program
US20230050636A1 (en) Augmented reality system and methods for stereoscopic projection and cross-referencing of live x-ray fluoroscopic and computed tomographic c-arm imaging during surgery
JP2012231893A (en) Medical image processing apparatus, and control program of the same
Kase et al. Representation by Extended Reality in X-Ray Three-Dimensional Imaging
EP3326537B1 (en) Visualization of distances to walls of anatomical cavities
JPH1186039A (en) Image processing support device

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160527