JP2012095274A - Stereoscopic image display device and stereoscopic image display method - Google Patents
Stereoscopic image display device and stereoscopic image display method Download PDFInfo
- Publication number
- JP2012095274A JP2012095274A JP2011176586A JP2011176586A JP2012095274A JP 2012095274 A JP2012095274 A JP 2012095274A JP 2011176586 A JP2011176586 A JP 2011176586A JP 2011176586 A JP2011176586 A JP 2011176586A JP 2012095274 A JP2012095274 A JP 2012095274A
- Authority
- JP
- Japan
- Prior art keywords
- abnormal shadow
- display
- stereoscopic
- shadow candidate
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims description 39
- 230000002159 abnormal effect Effects 0.000 claims abstract description 195
- 230000005855 radiation Effects 0.000 claims abstract description 79
- 238000001514 detection method Methods 0.000 claims description 41
- 238000003384 imaging method Methods 0.000 claims description 40
- 239000007787 solid Substances 0.000 claims description 13
- 230000001678 irradiating effect Effects 0.000 claims description 10
- 230000005856 abnormality Effects 0.000 claims description 3
- 239000003550 marker Substances 0.000 description 83
- 210000000481 breast Anatomy 0.000 description 49
- 210000001508 eye Anatomy 0.000 description 33
- 238000010586 diagram Methods 0.000 description 13
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 238000009607 mammography Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 208000004434 Calcinosis Diseases 0.000 description 2
- 210000005252 bulbus oculi Anatomy 0.000 description 2
- 238000004195 computer-aided diagnosis Methods 0.000 description 2
- 230000000875 corresponding effect Effects 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 235000002673 Dioscorea communis Nutrition 0.000 description 1
- 241000544230 Dioscorea communis Species 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 208000035753 Periorbital contusion Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000002308 calcification Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
本発明は、互いに異なる２つの撮影方向から放射線を被写体へ照射して撮影方向毎の放射線画像を検出し、その検出した２つの放射線画像を用いて立体視画像を表示する立体視画像表示装置及び立体視画像表示方法に関するものである。 The present invention relates to a stereoscopic image display device that detects a radiographic image for each imaging direction by irradiating a subject with radiation from two different imaging directions, and displays a stereoscopic image using the two detected radiographic images. The present invention relates to a stereoscopic image display method.
従来、複数の画像を組み合わせて表示することにより、視差を利用して立体視できることが知られている。このような立体視できる画像（以下、立体視画像またはステレオ画像という）は、同一の被写体を異なる方向から撮影して取得された互いに視差のある複数の画像に基づいて生成されており、このような立体視画像の生成は、デジタルカメラやテレビなどの分野だけでなく、放射線画像撮影の分野においても利用されている。すなわち、被検者に対して互いに異なる方向から放射線を照射し、その被検者を透過した放射線を放射線画像検出器によりそれぞれ検出して互いに視差のある複数の放射線画像を取得し、これらの放射線画像に基づいて立体視画像を生成することが行われており、このように立体視画像を生成することによって観察者は奥行感のある放射線画像を観察することができて、より診断に適した放射線画像を観察することができる。 Conventionally, it is known that stereoscopic viewing can be performed using parallax by displaying a plurality of images in combination. Such a stereoscopically viewable image (hereinafter referred to as a stereoscopic image or a stereo image) is generated based on a plurality of images with parallax obtained by photographing the same subject from different directions. Such stereoscopic image generation is used not only in the fields of digital cameras and televisions but also in the field of radiographic imaging. That is, the patient is irradiated with radiation from different directions, the radiation transmitted through the subject is detected by a radiation image detector, and a plurality of radiation images having parallax are obtained, and these radiations are acquired. A stereoscopic image is generated based on the image. By generating a stereoscopic image in this way, the observer can observe a radiological image with a sense of depth, which is more suitable for diagnosis. A radiographic image can be observed.
そして上述したような立体視画像を表示する立体視画像表示装置においては、２次元の放射線画像を表示する装置と同様に、計算機処理を用いて異常陰影の濃度分布の特徴や形態的な特徴に基づいて異常陰影候補を自動的に検出するようにした計算機支援画像診断（ＣＡＤ；computer aided diagnosis）を使用して放射線画像における異常陰影候補を検出し、検出された異常陰影候補の位置を示す検出結果を表示部に立体視可能に表示している。 In the stereoscopic image display apparatus that displays the stereoscopic image as described above, the density distribution feature and the morphological feature of the abnormal shadow are calculated using computer processing, as in the device that displays the two-dimensional radiation image. Detection of abnormal shadow candidates in a radiographic image using computer aided diagnosis (CAD) that automatically detects abnormal shadow candidates based on the detection, and indicating the position of the detected abnormal shadow candidate The result is displayed on the display unit so as to be stereoscopically viewable.
また医療画像の読影においては、画像に含まれる異常陰影の鑑別は、同一の患者について過去に取得した画像を用いて異常陰影候補の変遷を比較することにより、精度良く診断を行うことができること等から、現在の画像上において異常陰影候補を指定すると、その異常陰影候補の領域に対応する部分画像を抽出するとともに、同一患者の過去画像において対応する領域の現在の画像との差分画像を抽出し、抽出した２つの画像を並べて表示することにより、診断を効率よく行う手法が提案されている（特許文献１）。 In the interpretation of medical images, abnormal shadows included in images can be accurately diagnosed by comparing the transition of abnormal shadow candidates using images acquired in the past for the same patient, etc. When an abnormal shadow candidate is designated on the current image, a partial image corresponding to the region of the abnormal shadow candidate is extracted, and a difference image from the current image of the corresponding region in the past image of the same patient is extracted. A method has been proposed in which diagnosis is efficiently performed by displaying two extracted images side by side (Patent Document 1).
しかしながら、立体視画像表示装置では、特に放射線画像のような透視画像においては、奥行方向に重なり合う被写体画像中に異常陰影候補を指定するための立体カーソルが表示されるため、立体カーソルを立体的に認識し、立体カーソルの奥行方向の位置を認識することは極めて困難であり、観察者が立体カーソルを意図する異常陰影候補の位置に精度良く合わせるのは困難である。 However, in a stereoscopic image display device, particularly in a fluoroscopic image such as a radiographic image, a stereoscopic cursor for designating an abnormal shadow candidate is displayed in a subject image overlapping in the depth direction. It is extremely difficult to recognize and recognize the position of the stereoscopic cursor in the depth direction, and it is difficult for the observer to accurately match the position of the abnormal shadow candidate intended for the stereoscopic cursor.
特許文献２や特許文献３には、観察者がカーソルを意図する位置に移動させるために観察者の視線を検出し、この視線の情報をもとにディスプレイ上のカーソルの位置制御を行うことが記載されているが、上述したような放射線画像における立体カーソルの奥行方向の位置の認識が困難であるという問題点については何も開示されていない。特許文献４には精度良く３次元的な視線位置の検出を行う方法について開示されているだけで、立体カーソルについては何も開示されていない。 In Patent Document 2 and Patent Document 3, the observer's line of sight is detected in order for the observer to move the cursor to the intended position, and the position control of the cursor on the display is performed based on the information on the line of sight. Although described, nothing is disclosed about the problem that it is difficult to recognize the depth direction position of the three-dimensional cursor in the radiation image as described above. Patent Document 4 only discloses a method for detecting a three-dimensional gaze position with high accuracy, and does not disclose anything about a three-dimensional cursor.
本発明は上記事情に鑑みてなされたものであり、観察者に負担をかけることなく、観察者の意図する異常陰影候補の位置に立体カーソルを精度良く移動させることができる立体視画像表示装置及び立体視画像表示方法を提供することを目的とするものである。 The present invention has been made in view of the above circumstances, and a stereoscopic image display device capable of accurately moving a stereoscopic cursor to a position of an abnormal shadow candidate intended by an observer without burdening the observer and An object of the present invention is to provide a stereoscopic image display method.
本発明の第１の立体視画像表示装置は、互いに異なる撮影方向から被写体へ放射線を照射することにより取得された前記撮影方向毎の放射線画像を用いて立体視可能な立体視画像を表示する表示部と、
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部と、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出する異常陰影候補検出部と、
該異常陰影候補検出部により検出された異常陰影候補の位置を前記立体視画像と共に前記表示部に表示させる異常陰影候補表示制御部と、
観察者の注視点を検出する注視点検出部と、
前記表示部に前記異常陰影候補の位置が表示されたときに、前記注視点検出部により検出された注視点が前記異常陰影候補の位置から予め定められた所定の範囲内に位置したとき前記異常陰影候補の位置に前記立体カーソルを移動させる立体カーソル位置制御部とを備えていることを特徴とするものである。
The first stereoscopic image display device of the present invention displays a stereoscopic image that can be stereoscopically viewed using a radiation image for each of the imaging directions acquired by irradiating the subject with radiation from different imaging directions. And
A stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and the in-plane direction of the stereoscopic image displayed on the display unit;
An abnormal shadow candidate detecting unit for detecting an abnormal shadow candidate from each of the radiographic images for each imaging direction;
An abnormal shadow candidate display control unit that causes the display unit to display the position of the abnormal shadow candidate detected by the abnormal shadow candidate detection unit together with the stereoscopic image;
A gaze point detection unit that detects a gaze point of an observer;
When the position of the abnormal shadow candidate is displayed on the display unit, the abnormality is detected when the gazing point detected by the gazing point detection unit is located within a predetermined range from the position of the abnormal shadow candidate. And a three-dimensional cursor position control unit that moves the three-dimensional cursor to a position of a shadow candidate.
なお本発明の第１の立体視画像表示装置は、前記異常陰影候補検出部により複数の前記異常陰影候補が検出されたときに、
前記立体カーソル位置制御部が、前記注視点から最も近い前記異常陰影候補の位置に前記立体カーソルを移動させるものであってもよい。
In the first stereoscopic image display device of the present invention, when the abnormal shadow candidate detection unit detects a plurality of abnormal shadow candidates,
The solid cursor position control unit may move the solid cursor to the position of the abnormal shadow candidate closest to the gazing point.
また本発明の第１の立体視画像表示装置は、前記注視点検出部により検出された注視点の軌跡を前記表示部に表示させる軌跡表示制御部を備えていてもよい。 The first stereoscopic image display device of the present invention may further include a trajectory display control unit that causes the display unit to display a trajectory of the gazing point detected by the gazing point detection unit.
また本発明の第１の立体視画像表示装置は、前記異常陰影候補検出部により複数の前記異常陰影候補が検出されたときに、
前記異常陰影候補表示制御部が、前記注視点から最も近い前記異常陰影候補の位置の表示態様を変更して前記表示部に表示するものであってもよい。
In the first stereoscopic image display device of the present invention, when the abnormal shadow candidate detection unit detects a plurality of abnormal shadow candidates,
The abnormal shadow candidate display control unit may change the display mode of the position of the abnormal shadow candidate closest to the gazing point and display it on the display unit.
本発明の第２の立体視画像表示装置は、互いに異なる撮影方向から被写体へ放射線を照射することにより取得された前記撮影方向毎の放射線画像を用いて立体視可能な立体視画像を表示する表示部と、
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部と、
該立体カーソルの移動指示を入力する入力部と、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出する異常陰影候補検出部と、
観察者の注視点を検出する注視点検出部と、
該注視点検出部により検出された注視点の軌跡を前記表示部に表示させる軌跡表示制御部と、
該視点軌跡表示制御部により表示された前記軌跡から予め定められた所定の範囲内に前記異常陰影候補が位置するときに、該位置する異常陰影候補の位置を前記立体視画像と共に前記表示部に表示させる異常陰影候補表示制御部とを備えていることを特徴とするものである。
The second stereoscopic image display device of the present invention displays a stereoscopic image that can be stereoscopically viewed using the radiation images for each of the imaging directions acquired by irradiating the subject with radiation from different imaging directions. And
A stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and the in-plane direction of the stereoscopic image displayed on the display unit;
An input unit for inputting an instruction to move the three-dimensional cursor;
An abnormal shadow candidate detecting unit for detecting an abnormal shadow candidate from each of the radiographic images for each imaging direction;
A gaze point detection unit that detects a gaze point of an observer;
A trajectory display control unit that causes the display unit to display a trajectory of the gazing point detected by the gazing point detection unit;
When the abnormal shadow candidate is located within a predetermined range from the trajectory displayed by the viewpoint trajectory display control unit, the position of the abnormal shadow candidate located on the display unit together with the stereoscopic image is displayed. An abnormal shadow candidate display control unit to be displayed is provided.
なお本発明の第２の立体視画像表示装置は、前記異常陰影候補表示制御部が、前記異常陰影候補検出部により検出された異常陰影候補の位置を全て前記表示部に表示すると共に前記軌跡から予め定められた所定の範囲内の前記異常陰影候補の位置のみ表示態様を変更して前記表示部に表示するものであってもよい。 In the second stereoscopic image display apparatus of the present invention, the abnormal shadow candidate display control unit displays all the positions of the abnormal shadow candidates detected by the abnormal shadow candidate detection unit on the display unit and from the locus. Only the position of the abnormal shadow candidate within a predetermined range determined in advance may be displayed on the display unit while changing the display mode.
また本発明の第２の立体視画像表示装置は、前記軌跡から予め定められた所定の範囲内に前記異常陰影候補が位置したときに、前記所定の範囲内の前記異常陰影候補の位置に前記立体カーソルを移動させる立体カーソル位置制御部を備えていてもよい。 The second stereoscopic image display device of the present invention may be configured such that when the abnormal shadow candidate is located within a predetermined range predetermined from the locus, the abnormal shadow candidate is positioned at the abnormal shadow candidate within the predetermined range. A solid cursor position control unit that moves the solid cursor may be provided.
本発明の第１の立体視画像表示方法は、互いに異なる撮影方向から被写体へ放射線を照射することにより取得された前記撮影方向毎の放射線画像を用いて立体視可能な立体視画像を表示する表示部と、
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部とを備えた立体視画像表示装置における立体視画像表示方法において、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出し、
該検出された異常陰影候補の位置を前記立体視画像と共に前記表示部に表示し、
観察者の注視点を検出し、
該検出された注視点が前記異常陰影候補の位置から予め定められた所定の範囲内に位置したとき前記異常陰影候補の位置に前記立体カーソルを移動させることを特徴とする。
The first stereoscopic image display method of the present invention is a display for displaying a stereoscopic image that can be stereoscopically viewed using a radiation image for each of the photographing directions acquired by irradiating the subject with radiation from different photographing directions. And
Stereoscopic image display in a stereoscopic image display device including a stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and in-plane direction of the stereoscopic image displayed on the display unit In the method
Detecting abnormal shadow candidates from each of the radiographic images for each imaging direction;
Displaying the position of the detected abnormal shadow candidate together with the stereoscopic image on the display unit;
Detect the observer ’s point of interest,
The solid cursor is moved to the position of the abnormal shadow candidate when the detected gaze point is located within a predetermined range from the position of the abnormal shadow candidate.
なお本発明の第１の立体視画像表示方法は、前記異常陰影候補が複数検出されたときに、
前記注視点から最も近い前記異常陰影候補の位置に前記立体カーソルを移動させてもよい。
In the first stereoscopic image display method of the present invention, when a plurality of abnormal shadow candidates are detected,
The solid cursor may be moved to the position of the abnormal shadow candidate closest to the gazing point.
また本発明の第１の立体視画像表示方法は、前記注視点の軌跡を前記表示部に表示させてもよい。 In the first stereoscopic image display method of the present invention, the locus of the gazing point may be displayed on the display unit.
また本発明の第１の立体視画像表示方法は、前記異常陰影候補が複数検出されたときに、
前記注視点から最も近い前記異常陰影候補の位置の表示態様を変更して前記表示部に表示してもよい。
In the first stereoscopic image display method of the present invention, when a plurality of the abnormal shadow candidates are detected,
The display mode of the position of the abnormal shadow candidate closest to the gazing point may be changed and displayed on the display unit.
本発明の第２の立体視画像表示方法は、互いに異なる撮影方向から被写体へ放射線を照射することにより取得された前記撮影方向毎の放射線画像を用いて立体視可能な立体視画像を表示する表示部と、
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部と、
該立体カーソルの移動指示を入力する入力部とを備えた立体視画像表示装置における立体視画像表示方法において、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出し、
観察者の注視点を検出し、
該検出された注視点の軌跡を前記表示部に表示し、
該表示された前記軌跡から予め定められた所定の範囲内に前記異常陰影候補が位置するときに、該位置する異常陰影候補の位置を前記立体視画像と共に前記表示部に表示することを特徴とする。
The second stereoscopic image display method of the present invention is a display for displaying a stereoscopically viewable image using a radiation image for each of the photographing directions acquired by irradiating the subject with radiation from different photographing directions. And
A stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and the in-plane direction of the stereoscopic image displayed on the display unit;
In a stereoscopic image display method in a stereoscopic image display device including an input unit for inputting an instruction to move the stereoscopic cursor,
Detecting abnormal shadow candidates from each of the radiographic images for each imaging direction;
Detect the observer ’s point of interest,
Displaying the locus of the detected gazing point on the display unit;
When the abnormal shadow candidate is located within a predetermined range from the displayed locus, the position of the abnormal shadow candidate is displayed on the display unit together with the stereoscopic image. To do.
なお本発明の第２の立体視画像表示方法は、検出された前記異常陰影候補の位置を全て前記表示部に表示すると共に前記軌跡から予め定められた所定の範囲内の前記異常陰影候補の位置のみ表示態様を変更して前記表示部に表示してもよい。 In the second stereoscopic image display method of the present invention, all the positions of the detected abnormal shadow candidates are displayed on the display unit, and the positions of the abnormal shadow candidates within a predetermined range predetermined from the trajectory are displayed. Only the display mode may be changed and displayed on the display unit.
また本発明の第２の立体視画像表示方法は、前記軌跡から予め定められた所定の範囲内に前記異常陰影候補が位置したときに、前記所定の範囲内の前記異常陰影候補の位置に前記立体カーソルを移動させてもよい。 The second stereoscopic image display method of the present invention may be configured such that when the abnormal shadow candidate is positioned within a predetermined range predetermined from the locus, the abnormal shadow candidate is positioned at the abnormal shadow candidate within the predetermined range. The three-dimensional cursor may be moved.
本発明の第１の立体視画像表示装置及び立体視画像表示方法によれば、撮影方向毎の放射線画像の各々から異常陰影候補を検出し、検出された異常陰影候補の位置を立体視画像と共に表示部に表示し、観察者の注視点を検出し、検出された注視点が異常陰影候補の位置から予め定められた所定の範囲内に位置したとき異常陰影候補の位置に立体カーソルを移動させるようにしたので、観察者が立体カーソルの奥行方向の位置を認識することが困難であっても観察者が意図する異常陰影候補を注視するだけで、観察者に負担をかけることなく、観察者の意図する異常陰影候補の位置に立体カーソルを精度良く移動させることができる。 According to the first stereoscopic image display apparatus and the stereoscopic image display method of the present invention, an abnormal shadow candidate is detected from each of the radiographic images for each photographing direction, and the position of the detected abnormal shadow candidate together with the stereoscopic image is detected. Display on the display unit, detect the observer's gazing point, and move the three-dimensional cursor to the position of the abnormal shadow candidate when the detected gazing point is located within a predetermined range from the position of the abnormal shadow candidate As a result, even if it is difficult for the observer to recognize the position of the stereoscopic cursor in the depth direction, the observer only has to pay attention to the abnormal shadow candidate intended by the observer without burdening the observer. The solid cursor can be accurately moved to the position of the abnormal shadow candidate intended.
また本発明の第２の立体視画像表示装置及び立体視画像表示方法によれば、撮影方向毎の放射線画像の各々から異常陰影候補を検出し、観察者の注視点を検出し、検出された注視点の軌跡を表示部に表示し、表示された軌跡から予め定められた所定の範囲内に異常陰影候補が位置するときに、該位置する異常陰影候補の位置を立体視画像と共に表示部に表示するようにしたので、観察者は自分が注視した先に存在する異常陰影候補の位置を認識することができて、観察者が自分の意図する異常陰影候補の位置に立体カーソルを移動し易くすることができる。 Further, according to the second stereoscopic image display apparatus and stereoscopic image display method of the present invention, the abnormal shadow candidate is detected from each of the radiographic images for each photographing direction, and the observer's gaze point is detected and detected. The trajectory of the gazing point is displayed on the display unit, and when the abnormal shadow candidate is located within a predetermined range from the displayed trajectory, the position of the abnormal shadow candidate located on the display unit is displayed together with the stereoscopic image. Since it is displayed, the observer can recognize the position of the abnormal shadow candidate existing ahead of his / her gaze, and the observer can easily move the stereoscopic cursor to the position of the abnormal shadow candidate intended by the observer. can do.
以下、図面を参照して本発明の立体視画像表示装置の一実施形態を用いた乳房画像撮影表示システムについて説明する。図１は、本実施形態の乳房画像撮影表示システム全体の概略構成を示す図である。 Hereinafter, a mammography display system using an embodiment of a stereoscopic image display apparatus of the present invention will be described with reference to the drawings. FIG. 1 is a diagram showing a schematic configuration of the entire breast image photographing display system of the present embodiment.
本実施形態の乳房画像撮影表示システム１は、図１に示すように、乳房画像撮影装置１０と、乳房画像撮影装置１０に接続されたコンピュータ２と、コンピュータ２に接続されたモニタ３および入力部４とを備えている。 As shown in FIG. 1, a breast image capturing and displaying system 1 according to the present embodiment includes a breast image capturing apparatus 10, a computer 2 connected to the breast image capturing apparatus 10, a monitor 3 connected to the computer 2, and an input unit. 4 is provided.
そして、乳房画像撮影装置１０は、図１に示すように、基台１１と、基台１１に対し上下方向（Ｚ方向）に移動可能であり、かつ回転可能な回転軸１２と、回転軸１２により基台１１と連結されたアーム部１３を備えている。なお、図２には、図１の右方向から見たアーム部１３を示している。 As shown in FIG. 1, the mammography apparatus 10 includes a base 11, a rotary shaft 12 that can move in the vertical direction (Z direction) with respect to the base 11, and can rotate. The arm part 13 connected with the base 11 is provided. FIG. 2 shows the arm 13 viewed from the right direction in FIG.
アーム部１３はアルファベットのＣの形をしており、その一端には撮影台１４が、その他端には撮影台１４と対向するように放射線照射部１６が取り付けられている。アーム部１３の回転および上下方向の移動は、基台１１に組み込まれたアームコントローラ３１により制御される。 The arm portion 13 has an alphabet C shape, and a radiation table 16 is attached to one end of the arm portion 13 so as to face the imaging table 14 at the other end. The rotation and vertical movement of the arm unit 13 are controlled by an arm controller 31 incorporated in the base 11.
撮影台１４の内部には、フラットパネルディテクタ等の放射線画像検出器１５と、放射線画像検出器１５からの電荷信号の読み出しなどを制御する検出器コントローラ３３が備えられている。 A radiographic image detector 15 such as a flat panel detector and a detector controller 33 that controls reading of a charge signal from the radiographic image detector 15 are provided inside the imaging table 14.
また、撮影台１４の内部には、放射線画像検出器１５から読み出された電荷信号を電圧信号に変換するチャージアンプや、チャージアンプから出力された電圧信号をサンプリングする相関２重サンプリング回路や、電圧信号をデジタル信号に変換するＡＤ変換部などが設けられた回路基板なども設置されている。 Further, inside the imaging table 14, a charge amplifier that converts the charge signal read from the radiation image detector 15 into a voltage signal, a correlated double sampling circuit that samples the voltage signal output from the charge amplifier, A circuit board provided with an AD conversion unit for converting a voltage signal into a digital signal is also installed.
また、撮影台１４はアーム部１３に対し回転可能に構成されており、基台１１に対してアーム部１３が回転したときでも、撮影台１４の向きは基台１１に対し固定された向きとすることができる。 In addition, the photographing table 14 is configured to be rotatable with respect to the arm unit 13, and even when the arm unit 13 rotates with respect to the base 11, the direction of the photographing table 14 is fixed to the base 11. can do.
放射線画像検出器１５は、放射線画像の記録と読出しを繰り返して行うことができるものであり、放射線の照射を直接受けて電荷を発生する、いわゆる直接型の放射線画像検出器を用いてもよいし、放射線を一旦可視光に変換し、その可視光を電荷信号に変換する、いわゆる間接型の放射線画像検出器を用いるようにしてもよい。また、放射線画像信号の読出方式としては、ＴＦＴ（thin film transistor）スイッチをオン・オフされることによって放射線画像信号が読み出される、いわゆるＴＦＴ読出方式のものや、読取光を照射することによって放射線画像信号が読み出される、いわゆる光読出方式のものを用いることが望ましいが、これに限らずその他のものを用いるようにしてもよい。 The radiation image detector 15 can repeatedly perform recording and reading of a radiation image, and may use a so-called direct type radiation image detector that directly receives radiation and generates charges. Alternatively, a so-called indirect radiation image detector that converts radiation once into visible light and converts the visible light into a charge signal may be used. As a radiation image signal readout method, a radiation image signal is read out by turning on / off a TFT (thin film transistor) switch, or a radiation image is emitted by irradiating reading light. It is desirable to use a so-called optical readout system in which a signal is read out, but the present invention is not limited to this, and other systems may be used.
放射線照射部１６の中には放射線源１７と、放射線源コントローラ３２が収納されている。放射線源コントローラ３２は、放射線源１７から放射線を照射するタイミングと、放射線源１７における放射線発生条件（管電圧、管電流時間積等）を制御するものである。 A radiation source 17 and a radiation source controller 32 are housed in the radiation irradiation unit 16. The radiation source controller 32 controls the timing of radiation from the radiation source 17 and the radiation generation conditions (tube voltage, tube current time product, etc.) in the radiation source 17.
また、アーム部１３の中央部には、撮影台１４の上方に配置されて乳房を押さえつけて圧迫する圧迫板１８と、その圧迫板１８を支持する支持部２０と、支持部２０を上下方向（Ｚ方向）に移動させる移動機構１９が設けられている。圧迫板１８の位置、圧迫圧は、圧迫板コントローラ３４により制御される。 Further, in the central portion of the arm portion 13, a compression plate 18 disposed above the imaging table 14 to press and compress the breast, a support portion 20 that supports the compression plate 18, and a support portion 20 in the vertical direction ( A moving mechanism 19 for moving in the Z direction) is provided. The position of the compression plate 18 and the compression pressure are controlled by the compression plate controller 34.
コンピュータ２は、中央処理装置（ＣＰＵ）および半導体メモリやハードディスクやＳＳＤ等のストレージデバイスなどを備えており、これらのハードウェアによって、図３に示すような制御部８ａ、放射線画像記憶部８ｂ、異常陰影候補検出部８ｃ、マーカー画像生成部８ｄ、注視点検出部８ｅ、立体カーソル移動制御部８ｆ、立体カーソル表示制御部８ｇおよび表示制御部８ｈが構成されている。 The computer 2 includes a central processing unit (CPU) and a storage device such as a semiconductor memory, a hard disk, and an SSD, and the control unit 8a, the radiation image storage unit 8b, and the abnormality shown in FIG. A shadow candidate detection unit 8c, a marker image generation unit 8d, a gazing point detection unit 8e, a stereoscopic cursor movement control unit 8f, a stereoscopic cursor display control unit 8g, and a display control unit 8h are configured.
なお図３は図１に示す乳房画像撮影表示システムのコンピュータ内部の概略構成を示すブロック図であり、図４は図３に示す乳房画像撮影表示システムの作用を説明するためのフローチャート、図５は、右目用放射線画像と左目用放射線画像とにおける異常陰影Ａ１，Ａ２と、右目用マーカー画像Ｍ１及び左目用マーカー画像Ｍ２と、右目用立体カーソル画像ＣＲ及び左目用立体カーソル画像ＣＬの一例を模式的に示した図、図６は異常陰影を含む乳房のステレオ画像とマーカー画像と立体カーソルの一例を模式的に示す図、図７は観察者の注視点の検出方法を説明するための説明図である。 FIG. 3 is a block diagram showing a schematic configuration inside the computer of the breast image radiographing display system shown in FIG. 1, FIG. 4 is a flowchart for explaining the operation of the breast image radiographing display system shown in FIG. 3, and FIG. , the abnormal shadow A1, A2 in the right-eye radiographic image and the left eye radiographic image, and the right-eye marker image M1 and a left eye marker image M2, an example of the right-eye stereoscopic cursor image C R and the left-eye stereoscopic cursor image C L FIG. 6 is a diagram schematically illustrating an example of a breast stereo image, a marker image, and a three-dimensional cursor including an abnormal shadow, and FIG. 7 is an explanatory diagram for explaining a method for detecting an observer's gaze point. FIG.
制御部８ａは、各種のコントローラ３１〜３５に対して所定の制御信号を出力し、システム全体の制御を行うものである。具体的な制御方法については後で詳述する。 The controller 8a outputs predetermined control signals to the various controllers 31 to 35 to control the entire system. A specific control method will be described in detail later.
放射線画像記憶部８ｂは、互いに異なる２つの撮影方向からの撮影によって放射線画像検出器１５によって検出された２枚の放射線画像信号を予め記憶するものである。 The radiation image storage unit 8b stores in advance two radiation image signals detected by the radiation image detector 15 by photographing from two different photographing directions.
異常陰影候補検出部８ｃは、放射線画像記憶部８ｂに記憶された２枚の放射線画像信号が入力され、その２枚の放射線画像信号に対して異常陰影候補を検出するための異常陰影候補検出処理を施すものである。本実施形態においては異常陰影候補として石灰化や腫瘤などの可能性のある領域を検出する。異常陰影候補の検出方法については、異常陰影の濃度分布の特徴や形態的な特徴に基づいて検出するようにすればよく、具体的には、主として腫瘤陰影を検出するのに適したアイリスフィルタ処理や、主として微小石灰化陰影を検出するのに適したモフォロジーフィルタ処理等を利用して異常陰影候補を検出するようにすればよい。異常陰影候補検出部８ｃにおける異常陰影候補の検出結果はマーカー画像生成部８ｄに出力される。 The abnormal shadow candidate detection unit 8c receives two radiation image signals stored in the radiation image storage unit 8b, and detects an abnormal shadow candidate for detecting abnormal shadow candidates for the two radiation image signals. Is to be applied. In the present embodiment, an area having a possibility of calcification or a mass is detected as an abnormal shadow candidate. The detection method of the abnormal shadow candidate may be detected based on the density distribution characteristics and morphological characteristics of the abnormal shadow. Specifically, the iris filter processing suitable mainly for detecting the tumor shadow is used. Alternatively, abnormal shadow candidates may be detected mainly by using a morphology filter process suitable for detecting microcalcification shadows. The detection result of the abnormal shadow candidate in the abnormal shadow candidate detection unit 8c is output to the marker image generation unit 8d.
マーカー画像生成部８ｄは、異常陰影候補検出部８ｃから出力された検出結果に基づいて、図５に示すように右目用放射線画像と左目用放射線画像とでそれぞれ検出された異常陰影候補Ａ１，Ａ２の位置情報に基づいて、異常陰影候補Ａ１，Ａ２を囲むような右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２を生成するものである。なお、図５に示す異常陰影候補Ａ１と異常陰影候補Ａ２とは同一の異常陰影候補を表すものとする。これらのマーカー画像Ｍ１，Ｍ２は、モニタ３に表示されることによって図６に示すように観察者が立体視可能な立体視マーカー画像Ｍ３を構成している。 Based on the detection result output from the abnormal shadow candidate detection unit 8c, the marker image generation unit 8d detects the abnormal shadow candidates A1 and A2 detected in the right-eye radiographic image and the left-eye radiographic image, respectively, as shown in FIG. The right eye marker image M1 and the left eye marker image M2 are generated so as to surround the abnormal shadow candidates A1 and A2. Note that the abnormal shadow candidate A1 and the abnormal shadow candidate A2 shown in FIG. 5 represent the same abnormal shadow candidate. These marker images M1 and M2 constitute a stereoscopic marker image M3 that can be viewed stereoscopically by an observer as shown in FIG.
具体的には、たとえば、立方体や直方体などのボックス形状のものや、ワイヤーフレームや、バルーンなどが立体視マーカー画像として表示されるように右目用マーカー画像と左目用マーカー画像とが生成される。本実施形態においては、右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２は異常陰影候補Ａ１，Ａ２を囲む立方体形状としたため、立体視マーカー画像Ｍ３は図６に示すように異常陰影候補Ａ３を囲む立方体となる。なお図６に示す異常陰影候補Ａ３は図５に示す異常陰影候補Ａ１，Ａ２とは同一の異常陰影候補を表すものとする。 Specifically, for example, a right eye marker image and a left eye marker image are generated so that a box-shaped object such as a cube or a rectangular parallelepiped, a wire frame, a balloon, or the like is displayed as a stereoscopic marker image. In the present embodiment, since the right eye marker image M1 and the left eye marker image M2 have a cubic shape surrounding the abnormal shadow candidates A1 and A2, the stereoscopic marker image M3 is a cube surrounding the abnormal shadow candidate A3 as shown in FIG. It becomes. The abnormal shadow candidate A3 shown in FIG. 6 represents the same abnormal shadow candidate as the abnormal shadow candidates A1 and A2 shown in FIG.
マーカー画像生成部８ｄにおいて生成された右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２とは表示制御部８ｈに出力される。モニタ３の観察者はこの立体視マーカー画像Ｍ３を見ることにより異常陰影候補の位置を確認することができる。なお本実施形態においては異常陰影候補の位置を、異常陰影候補を囲み、かつモニタ３に表示されることによって立体視される立体視マーカー画像で表示するようにしたが、本発明はこれに限られるものではなく、異常陰影候補の奥行方向を含む位置が表示できれば、例えば異常陰影候補の領域の中心に立方体や直方体等のボックス形状のものや、ワイヤーフレームや、バルーン等が立体視マーカー画像として表示されるようにしてもよい。 The right eye marker image M1 and the left eye marker image M2 generated by the marker image generation unit 8d are output to the display control unit 8h. The observer of the monitor 3 can confirm the position of the abnormal shadow candidate by viewing the stereoscopic marker image M3. In this embodiment, the position of the abnormal shadow candidate is displayed as a stereoscopic marker image that surrounds the abnormal shadow candidate and is stereoscopically displayed by being displayed on the monitor 3, but the present invention is not limited to this. If the position including the depth direction of the abnormal shadow candidate can be displayed, for example, a box-shaped object such as a cube or a rectangular parallelepiped at the center of the abnormal shadow candidate area, a wire frame, a balloon, etc. as a stereoscopic marker image It may be displayed.
注視点検出部８ｅは、観察者の注視点位置を検出するものであり、第一のカメラ部４１と第二のカメラ部４２により撮像された観察者Ｐの顔画像の撮像信号に基づいて注視点を検出する。第一のカメラ部４１と第二のカメラ部４２は、図７に示すように、それぞれカメラ４１ａ，４２ａと、レンズ４１ｂ，４２ｂと光源４１ｃ，４２ｃとを備え、観察者Ｐの眼球ＥＲ，ＥＬに光源４１ｃ，４２ｃから光を照射したときに黒眼の中に生じる虚像である角膜反射像を眼球の特徴点として採用し、瞳孔中心と角膜反射像の位置から眼球中心の位置を算出して、求められた眼球中心と瞳孔中心により視線方向を検出する。このようにして観察者の左右の眼球ＥＲ，ＥＬの視線方向を検出し、左右の視線方向の交点を求めることで観察者の注視点Ｇの位置を検出する。なお注視点位置の検出方法については、例えば特許第２７３９３３１号公報や特開２００５−１９８７４３号方向等に記載されている公知の技術を使用することができる。 The gazing point detection unit 8e detects the position of the gazing point of the observer, and is based on the imaging signal of the face image of the observer P captured by the first camera unit 41 and the second camera unit 42. Detect viewpoint. A first camera unit 41 a second camera 42, as shown in FIG. 7, respectively camera 41a, 42a and the lens 41b, 42b and the light source 41c, and a 42c, eye E R of the observer P, light source 41c to E L, a cornea reflection image is a virtual image generated in the black eye when irradiated with light from 42c employed as a feature point of the eyeball, it calculates the position of the eye center from the position of the pupil center and the corneal reflected image Then, the line-of-sight direction is detected from the obtained eyeball center and pupil center. In this way, the line-of-sight directions of the left and right eyeballs E R and E L of the observer are detected, and the position of the observer's gazing point G is detected by obtaining the intersection of the left and right line-of-sight directions. As for the method of detecting the position of the gazing point, a known technique described in, for example, the direction of Japanese Patent No. 2739331 or Japanese Patent Application Laid-Open No. 2005-198743 can be used.
立体カーソル移動制御部８ｆは、モニタ３に異常陰影候補の位置すなわち立体視マーカー画像Ｍ３が表示されたときに、注視点検出部８ｅによって検出された観察者の注視点が、立体視マーカー画像Ｍ３から予め定められた所定の範囲内に位置したときに異常陰影候補の位置すなわち立体視マーカー画像Ｍ３上に後述する立体カーソルを移動させるものである。 When the position of the abnormal shadow candidate, that is, the stereoscopic marker image M3 is displayed on the monitor 3, the stereoscopic cursor movement control unit 8f indicates that the observer's gazing point detected by the gazing point detection unit 8e is the stereoscopic marker image M3. A stereoscopic cursor described later is moved onto the position of the abnormal shadow candidate, that is, the stereoscopic marker image M3 when the position is within a predetermined range.
なお立体カーソル移動制御部８ｆは、観察者による入力部４からの入力に応じてモニタ３に表示された立体カーソルをステレオ画像の奥行方向および面内方向に移動させることもできる。ここで面内方向とは、奥行方向に対して直交する面内の方向のことをいう。奥行方向をＺ方向とした場合、そのＺ方向に直交するＸ−Ｙ面内の方向のことをいう。 The three-dimensional cursor movement control unit 8f can also move the three-dimensional cursor displayed on the monitor 3 in the depth direction and the in-plane direction of the stereo image in response to an input from the input unit 4 by the observer. Here, the in-plane direction means an in-plane direction orthogonal to the depth direction. When the depth direction is the Z direction, it means the direction in the XY plane orthogonal to the Z direction.
具体的には、立体カーソル移動制御部８ｆは、入力部４からの入力に応じて右目用カーソル画像信号と左目用カーソル画像信号との相対的な左右のシフト量を変更することによって立体カーソルを奥行方向に移動させる。また、立体カーソル移動制御部８ｆは、入力部４からの入力に応じて右目用カーソル画像信号と左目用カーソル画像信号との相対的な左右のシフト量を維持した状態で、これらの表示位置を左右方向および上下方向に変更することによって立体カーソルを面内方向に移動させる。 Specifically, the three-dimensional cursor movement control unit 8f changes the right and left shift amounts of the right-eye cursor image signal and the left-eye cursor image signal in accordance with the input from the input unit 4, thereby moving the three-dimensional cursor. Move in the depth direction. Further, the three-dimensional cursor movement control unit 8f maintains the relative left and right shift amounts of the right-eye cursor image signal and the left-eye cursor image signal in accordance with the input from the input unit 4, and sets these display positions. The stereoscopic cursor is moved in the in-plane direction by changing in the horizontal direction and the vertical direction.
立体カーソル表示制御部５１は、図５に示すように立体カーソルを構成する右目用カーソル画像信号ＣＲと左目用カーソル画像信号ＣＬとを生成し、これらをたとえばモニタ３の２つのモニタにそれぞれ表示させることによって図６に示すように立体視可能な立体カーソルＣを表示させるものである。これらの右目用カーソル画像信号ＣＲと左目用カーソル画像信号ＣＬとは左右方向に相対的なシフト量をもつように生成されている。本実施形態において立体カーソルＣは図６に示すように立方体で構成されるため、この立体カーソルＣを構成する右目用カーソル画像信号ＣＲと左目用カーソル画像信号ＣＬは図５に示すように立方体形状とする。 Stereoscopic cursor display control unit 51 generates a right-eye cursor image signals C R and the left eye cursor image signal C L which constitute the three-dimensional cursor as shown in FIG. 5, respectively these example, two monitors monitor 3 By displaying, a stereoscopic cursor C that can be viewed stereoscopically is displayed as shown in FIG. These are the right-eye cursor image signals C R and the left eye cursor image signal C L is generated so as to have a relative shift amount in the horizontal direction. Stereoscopic cursor C in this embodiment since it is constituted by a cube, as shown in FIG. 6, the right-eye cursor image signals composing the three-dimensional cursor C C R and cursor image signal C L for the left eye, as shown in FIG. 5 A cube shape.
表示制御部８ｈは、放射線画像記憶部８ｂから読み出された２枚の放射線画像信号に対して所定の処理を施した後、モニタ３に乳房Ｍの通常撮影のステレオ画像を表示させるものである。また上記２枚の放射線画像信号とともにマーカー画像生成部８ｄにおいて生成された右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２の画像信号に対して所定の処理を施した後、モニタ３に乳房Ｍのステレオ画像と共に立体視マーカー画像Ｍ３を表示させるマーカー画像表示制御部すなわち異常陰影候補表示制御部としても機能する。 The display control unit 8h performs a predetermined process on the two radiographic image signals read from the radiographic image storage unit 8b, and then displays a normal radiographic stereo image of the breast M on the monitor 3. . Further, after performing predetermined processing on the image signals of the right eye marker image M1 and the left eye marker image M2 generated in the marker image generation unit 8d together with the two radiation image signals, the monitor 3 has a stereo of the breast M. It also functions as a marker image display control unit that displays the stereoscopic marker image M3 together with the image, that is, an abnormal shadow candidate display control unit.
入力部４は、観察者による撮影条件や観察条件などの入力や操作指示の入力などを受け付けるものであり、たとえば、キーボードやマウスなどの入力デバイスによって構成されるものである。本実施形態においては、立体カーソルＣの奥行方向の位置を移動させるものとして、回転ホイールを備えた一般的なホイールマウスが用いられる。回転ホイールを観察者が回転させることによって立体カーソルＣの奥行方向の位置を変更することができる。 The input unit 4 accepts input of photographing conditions and observation conditions by the observer, input of operation instructions, and the like, and is configured by an input device such as a keyboard and a mouse, for example. In the present embodiment, a general wheel mouse having a rotating wheel is used as the one that moves the position of the three-dimensional cursor C in the depth direction. The position of the three-dimensional cursor C in the depth direction can be changed by rotating the rotating wheel by the observer.
モニタ３は、ステレオ画像の撮影時においては、コンピュータ２から出力された２つの放射線画像信号を用いてステレオ画像を表示可能なように構成されたものである。ステレオ画像を表示する構成としては、たとえば、２つの画面を用いて２つの放射線画像信号に基づく放射線画像をそれぞれ表示させて、これらをハーフミラーや偏光グラスなどを用いることで一方の放射線画像は観察者の右目に入射させ、他方の放射線画像は観察者の左目に入射させることによってステレオ画像を表示する構成を採用することができる。または、たとえば、２つの放射線画像を所定の視差量だけずらして重ね合わせて表示し、これを偏光グラスで観察することでステレオ画像を生成する構成としてもよいし、もしくはパララックスバリア方式およびレンチキュラー方式のように、２つの放射線画像を立体視可能な３Ｄ液晶に表示することによってステレオ画像を生成する構成としてもよい。 The monitor 3 is configured to be able to display a stereo image using two radiation image signals output from the computer 2 at the time of capturing a stereo image. As a configuration for displaying a stereo image, for example, a radiographic image based on two radiographic image signals is displayed using two screens, and one of the radiographic images is observed by using a half mirror or a polarizing glass. It is possible to adopt a configuration in which a stereo image is displayed by being incident on the right eye of the observer and the other radiation image is incident on the left eye of the observer. Or, for example, two radiographic images may be displayed in a superimposed manner while being shifted by a predetermined amount of parallax, and this may be configured to generate a stereo image by observing with a polarizing glass, or a parallax barrier method and a lenticular method As described above, a stereo image may be generated by displaying two radiation images on a stereoscopically viewable 3D liquid crystal.
次に、本実施形態の乳房画像撮影表示システムの作用について説明する、図４に示すフローチャートを参照しながら説明する。なお図８に右目用放射線画像と左目用放射線画像とにおける異常陰影候補Ａ１，Ａ２と、右目用マーカー画像Ｍ１及び左目用マーカー画像Ｍ２と、移動後の右目用立体カーソル画像ＣＲ及び左目用立体カーソル画像ＣＬの一例を模式的に示した図、図９に異常陰影候補を含む乳房のステレオ画像とマーカー画像と移動後の立体カーソルの一例を模式的に示す図、図１０に異常陰影候補を含む乳房のステレオ画像とマーカー画像の他の一例を模式的に示す図、図１１に異常陰影候補を含む乳房のステレオ画像とマーカー画像と注視点の軌跡の一例を模式的に示す図をそれぞれ示す。 Next, the operation of the breast image radiographing display system of this embodiment will be described with reference to the flowchart shown in FIG. In FIG. 8, abnormal shadow candidates A1 and A2 in the right-eye and left-eye radiation images, the right-eye marker image M1 and the left-eye marker image M2, the right-eye three-dimensional cursor image CR and the left-eye three-dimensional image after movement. shows schematically an example of the cursor image C L, diagram schematically showing an example of a stereoscopic cursor after the movement stereo image and the marker image of the breast including the abnormal shadow candidate in FIG. 9, the abnormal shadow candidate in FIG. 10 FIG. 11 is a diagram schematically showing another example of a stereo image of a breast including a marker and a marker image. FIG. 11 is a diagram schematically showing an example of a stereo image of a breast including an abnormal shadow candidate, a marker image, and a locus of a gazing point. Show.
図４に示すように、まず、撮影台１４の上に患者の乳房Ｍが設置され、圧迫板１８により乳房Ｍが所定の圧力によって圧迫される（Ｓ１０）。 As shown in FIG. 4, first, the patient's breast M is placed on the imaging table 14, and the breast M is compressed with a predetermined pressure by the compression plate 18 (S10).
次に、入力部４おいて、撮影者によって種々の撮影条件が入力された後、撮影開始の指示が入力される（Ｓ１１）。 Next, in the input unit 4, after various shooting conditions are input by the photographer, an instruction to start shooting is input (S11).
そして、入力部４において撮影開始の指示があると、乳房Ｍのステレオ画像を構成する２枚の放射線画像のうちの１枚目の放射線画像の撮影が行われる（Ｓ１２）。 Then, when there is an instruction to start imaging at the input unit 4, the first radiographic image of the two radiographic images constituting the stereo image of the breast M is captured (S12).
具体的には、まず、制御部８ａが、予め設定されたステレオ画像の撮影のための輻輳角θを読み出し、その読み出した輻輳角θの情報をアームコントローラ３１に出力する。なお、本実施形態においては、このときの輻輳角θの情報としてθ＝±２°が予め記憶されているものとするが、これに限らず、撮影者によって入力部４において任意の輻輳角を設定可能である。 Specifically, first, the control unit 8 a reads a convergence angle θ for capturing a preset stereo image, and outputs information on the read convergence angle θ to the arm controller 31. In this embodiment, θ = ± 2 ° is stored in advance as information on the convergence angle θ at this time. However, the present invention is not limited to this, and an arbitrary convergence angle is set by the photographer in the input unit 4. It can be set.
そして、アームコントローラ３１において、制御部８ａから出力された輻輳角θの情報が受け付けられ、アームコントローラ３１は、この輻輳角θの情報に基づいて、図２に示すように、アーム部１３が撮影台１４に垂直な方向に対して＋θ°回転するよう制御信号を出力する。すなわち、本実施形態においては、アーム部１３を撮影台１４に垂直な方向に対して＋２°回転するよう制御信号を出力する。 Then, the arm controller 31 receives the information on the convergence angle θ output from the control unit 8a. The arm controller 31 captures the image of the arm unit 13 based on the information on the convergence angle θ as shown in FIG. A control signal is output so as to rotate + θ ° with respect to a direction perpendicular to the table 14. That is, in the present embodiment, a control signal is output so that the arm unit 13 is rotated + 2 ° with respect to a direction perpendicular to the imaging table 14.
そして、このアームコントローラ３１から出力された制御信号に応じてアーム部１３が、＋２°だけ回転した状態において、制御部８ａは、放射線源コントローラ３２および検出器コントローラ３３に対して放射線の照射と放射線画像信号の読出しを行うよう制御信号を出力する。この制御信号に応じて、放射線源１７から放射線が射出され、乳房を＋２°方向から撮影した放射線画像が放射線画像検出器１５によって検出され、検出器コントローラ３３によって放射線画像信号が読み出され、その放射線画像信号に対して所定の信号処理が施された後、コンピュータ２の放射線画像記憶部８ｂに記憶される。 Then, in a state where the arm unit 13 is rotated by + 2 ° in accordance with the control signal output from the arm controller 31, the control unit 8a applies radiation to the radiation source controller 32 and the detector controller 33 and the radiation. A control signal is output so as to read out the image signal. In response to this control signal, radiation is emitted from the radiation source 17, a radiation image obtained by photographing the breast from the + 2 ° direction is detected by the radiation image detector 15, and a radiation image signal is read by the detector controller 33. After predetermined signal processing is performed on the radiographic image signal, the radiographic image signal is stored in the radiographic image storage unit 8 b of the computer 2.
次に、乳房Ｍのステレオ画像を構成する２枚の放射線画像のうちの２枚目の放射線画像の撮影が行われる（Ｓ１３）。具体的には、アームコントローラ３１が、図２に示すように、アーム部１３を撮影台１４に垂直な方向に対して−θ°回転するよう制御信号を出力する。すなわち、本実施形態においては、アーム部１３を撮影台１４に垂直な方向に対して−２°回転するよう制御信号を出力する。 Next, a radiographic image of the second of the two radiographic images constituting the stereo image of the breast M is taken (S13). Specifically, as shown in FIG. 2, the arm controller 31 outputs a control signal so as to rotate the arm unit 13 by −θ ° with respect to a direction perpendicular to the imaging table 14. That is, in the present embodiment, a control signal is output so that the arm unit 13 is rotated by −2 ° with respect to a direction perpendicular to the imaging table 14.
そして、このアームコントローラ３１から出力された制御信号に応じてアーム部１３が−２°だけ回転した状態において、制御部８ａは、放射線源コントローラ３２および検出器コントローラ３３に対して放射線の照射と放射線画像信号の読出しを行うよう制御信号を出力する。この制御信号に応じて、放射線源１７から放射線が射出され、乳房を−２°方向から撮影した放射線画像が放射線画像検出器１５によって検出され、検出器コントローラ３３によって放射線画像信号が読み出され、所定の信号処理が施された後、コンピュータ２の放射線画像記憶部８ｂに記憶される。 Then, in a state where the arm unit 13 is rotated by −2 ° according to the control signal output from the arm controller 31, the control unit 8 a applies radiation to the radiation source controller 32 and the detector controller 33 and performs radiation. A control signal is output so as to read out the image signal. In response to this control signal, radiation is emitted from the radiation source 17, a radiation image obtained by imaging the breast from the −2 ° direction is detected by the radiation image detector 15, and a radiation image signal is read by the detector controller 33, After predetermined signal processing is performed, it is stored in the radiation image storage unit 8b of the computer 2.
次に、上述したようにして放射線画像記憶部８ｂに記憶された２枚の放射線画像信号は、異常陰影候補検出部８ｃに入力され、異常陰影候補検出部８ｃにおいて異常陰影候補検出処理が施されて放射線画像信号内の異常陰影候補が検出され（Ｓ１４）、その検出された異常陰影候補の位置情報がマーカー画像生成部８ｄに入力される。 Next, the two radiographic image signals stored in the radiographic image storage unit 8b as described above are input to the abnormal shadow candidate detection unit 8c, and an abnormal shadow candidate detection process is performed in the abnormal shadow candidate detection unit 8c. Then, an abnormal shadow candidate in the radiographic image signal is detected (S14), and the position information of the detected abnormal shadow candidate is input to the marker image generation unit 8d.
そして、マーカー画像生成部８ｄは、異常陰影候補検出部８ｃから出力された異常陰影候補の位置情報に基づいて、図５に示すように異常陰影候補Ａ１，Ａ２を囲むような右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２とをそれぞれ生成する（Ｓ１５）。 Then, the marker image generation unit 8d, based on the position information of the abnormal shadow candidate output from the abnormal shadow candidate detection unit 8c, the right-eye marker image M1 surrounding the abnormal shadow candidates A1 and A2 as shown in FIG. And a left-eye marker image M2 are generated (S15).
そして、放射線画像記憶部８ｂに記憶された２枚の放射線画像の画像信号とマーカー画像生成部８ｄによって生成された右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２の画像信号、及び立体カーソル表示制御部５１によって予め生成されている右目用カーソル画像ＣＲと左目用カーソル画像ＣＬの画像信号が表示制御部８ｆに入力され、これらの信号に対して所定の処理が施された後、モニタ３に出力され、モニタ３において、図６に示すように乳房のステレオ画像と立体視マーカー画像Ｍ３と立体カーソルＣが表示される（Ｓ１６）。なおここでの立体カーソルＣの表示位置は、観察者による入力部４からの入力に応じて決定される。 Then, the image signals of the two radiation images stored in the radiation image storage unit 8b, the image signals of the right eye marker image M1 and the left eye marker image M2 generated by the marker image generation unit 8d, and the stereoscopic cursor display control unit 51 image signals of the right-eye cursor image C R and the left eye cursor image C L which is previously generated is input to the display control unit 8f by, after predetermined processing is performed on these signals, the monitor 3 The monitor 3 displays a breast stereo image, a stereoscopic marker image M3, and a stereoscopic cursor C as shown in FIG. 6 (S16). Note that the display position of the three-dimensional cursor C here is determined according to the input from the input unit 4 by the observer.
図６に示すように特に放射線画像のような透視画像においては、奥行方向に重なり合う被写体画像中に異常陰影候補Ａ３を指定するための立体カーソルＣが表示されるため、立体カーソルＣを立体的に認識し、立体カーソルＣの奥行方向の位置を認識することは極めて困難であり、観察者が入力部４によって立体カーソルＣを意図する異常陰影候補の位置すなわち立体視マーカー画像Ｍ３に精度良く合わせるのは困難である。 As shown in FIG. 6, particularly in a fluoroscopic image such as a radiographic image, a stereoscopic cursor C for designating an abnormal shadow candidate A3 is displayed in a subject image overlapping in the depth direction. It is extremely difficult to recognize and recognize the position of the stereoscopic cursor C in the depth direction, and the observer can accurately match the position of the abnormal shadow candidate intended by the stereoscopic cursor C by the input unit 4, that is, the stereoscopic marker image M3. It is difficult.
そこで本実施形態では、次に注視点検出部８ｅが上述したようにして右目の注視点と左目の注視点の交点から、観察者の注視点の位置を検出し（Ｓ１７）、立体カーソル移動制御部８ｆが検出された注視点が異常陰影候補の位置から所定範囲内に位置しているか否かを判別する（Ｓ１８）。注視点が異常陰影候補の位置から所定範囲内に位置しているか否かの判別は、異常陰影候補の位置を、右目用放射線画像の異常陰影候補と観察者の右目の注視点とを結んだ線分と、左目用放射線画像の異常陰影候補と左目の注視点とを結んだ線分との交点とし、観察者の注視点の位置がこの交点から所定範囲内にあるか否かを判別することにより行う。なお所定範囲は、予め観察者が入力部４によって任意の値を設定することができるものとするが、本実施形態においては立体視マーカー画像Ｍ３の領域内を設定する。 Therefore, in this embodiment, the gazing point detection unit 8e detects the position of the gazing point of the observer from the intersection of the gazing point of the right eye and the gazing point of the left eye as described above (S17), and the stereoscopic cursor movement control It is determined whether or not the gazing point from which the part 8f is detected is located within a predetermined range from the position of the abnormal shadow candidate (S18). Whether or not the gazing point is located within a predetermined range from the position of the abnormal shadow candidate is determined by connecting the abnormal shadow candidate position in the right-eye radiographic image and the gaze point of the observer's right eye. The intersection of the line segment and the line segment connecting the abnormal shadow candidate of the left-eye radiographic image and the left eye gaze point is determined, and it is determined whether or not the position of the observer's gaze point is within a predetermined range from the intersection point By doing. Note that the predetermined range can be set in advance by the observer using the input unit 4, but in the present embodiment, the predetermined range is set within the region of the stereoscopic marker image M <b> 3.
また注視点が異常陰影候補の位置から所定範囲内に位置しているか否かを判別する他の方法としては、右目の注視点が右目用放射線画像の異常陰影候補の位置から所定範囲内にあり、かつ左目の注視点も左目用放射線画像の異常陰影候補の位置から所定範囲内にあるか否かを判定するようにしてもよい。この方法では、空間的な判定距離は異常陰影候補から一定にはならないが、実用上は十分である。 As another method for determining whether or not the gazing point is within a predetermined range from the position of the abnormal shadow candidate, the gazing point of the right eye is within the predetermined range from the position of the abnormal shadow candidate of the right-eye radiographic image. In addition, it may be determined whether or not the left-eye gazing point is also within a predetermined range from the position of the abnormal shadow candidate of the left-eye radiographic image. In this method, the spatial determination distance is not constant from the abnormal shadow candidate, but is sufficient for practical use.
そして注視点が異常陰影候補から所定範囲内に位置していると判断された場合（Ｓ１８；ＹＥＳ）は、立体カーソル移動制御部８ｆが、図９に示すように立体カーソルＣを異常陰影候補の位置すなわち立体視マーカー画像Ｍ３上に立体カーソルＣを移動させる（Ｓ１９）。具体的には、立体カーソル移動制御部８ｆが立体カーソルＣを移動させる信号を立体カーソル表示制御部８ｇに出力し、立体カーソル表示制御部５１が、図８に示すように、立体カーソルＣを構成する右目用カーソル画像ＣＲと左目用カーソル画像ＣＬが、それぞれ異常陰影候補Ａ１，Ａ２の位置すなわち右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２の領域内に位置するように画像信号を生成する。 If it is determined that the gazing point is located within a predetermined range from the abnormal shadow candidate (S18; YES), the stereoscopic cursor movement control unit 8f displays the stereoscopic cursor C as an abnormal shadow candidate as shown in FIG. The stereoscopic cursor C is moved onto the position, that is, the stereoscopic marker image M3 (S19). Specifically, the stereoscopic cursor movement control unit 8f outputs a signal for moving the stereoscopic cursor C to the stereoscopic cursor display control unit 8g, and the stereoscopic cursor display control unit 51 configures the stereoscopic cursor C as shown in FIG. eye cursor image C R and the left eye cursor image C L which is, respectively to generate an image signal so as to be positioned in the region of the abnormal shadow candidate A1, position or the right-eye marker image M1 of A2 and left marker image M2 .
なお異常陰影候補検出部８ｃにより複数の異常陰影候補が検出され、図１０に示すようにモニタ３に複数の異常陰影候補Ａ３，Ａ３’の位置すなわち立体視マーカー画像Ｍ３，Ｍ３’が表示されている場合には、観察者の注視点Ｇから最も近い異常陰影候補Ａ３の位置すなわち立体視マーカー画像Ｍ３上に立体視カーソルＣを移動させる。このとき観察者の注視点Ｇから最も近い立体視マーカー画像Ｍ３の表示態様を、例えば図１５で示す立体視マーカー画像Ｍ１３のように点線で示したり、点滅させたり等して変更してもよい。これにより、観察者は自分がどの異常陰影候補の位置すなわち立体視マーカー画像を注視しているのかを確認することができる。 A plurality of abnormal shadow candidates are detected by the abnormal shadow candidate detection unit 8c, and the positions of the plurality of abnormal shadow candidates A3 and A3 ′, that is, stereoscopic marker images M3 and M3 ′ are displayed on the monitor 3 as shown in FIG. If there is, the stereoscopic cursor C is moved onto the position of the abnormal shadow candidate A3 closest to the observer's gazing point G, that is, on the stereoscopic marker image M3. At this time, the display mode of the stereoscopic marker image M3 that is closest to the observer's gazing point G may be changed by, for example, showing a dotted line or blinking as in the stereoscopic marker image M13 shown in FIG. . Thereby, the observer can confirm which abnormal shadow candidate he / she is gazing at, that is, the stereoscopic marker image.
なお図３のコンピュータ２に図示しない軌跡表示制御部を備え、この軌跡表示制御部によって図１１に示すように、注視点検出部８ｅにより検出された観察者の注視点の軌跡Ｓをモニタ３に表示させるようにしてもよい。これにより観察者は自分がモニタ３上のどの位置を注視したのかを確認することができる。 The computer 2 shown in FIG. 3 includes a locus display control unit (not shown). As shown in FIG. You may make it display. Thereby, the observer can confirm which position on the monitor 3 he / she gazes at.
次に表示制御部８ｈが、放射線画像記憶部８ｂに記憶された２枚の放射線画像の画像信号とマーカー画像生成部８ｄによって生成された右目用マーカー画像Ｍ１と左目用マーカー画像Ｍ２の画像信号、及び立体カーソル表示制御部５１によって生成された立体カーソルＣの移動後の右目用カーソル画像ＣＲと左目用カーソル画像ＣＬの画像信号に対して所定の処理を施してモニタ３に出力し、モニタ３において、図９に示すように乳房のステレオ画像と立体視マーカー画像Ｍ３と移動後の立体カーソルＣが表示される（Ｓ２０）。 Next, the display control unit 8h includes two radiographic image signals stored in the radiographic image storage unit 8b and image signals of the right eye marker image M1 and the left eye marker image M2 generated by the marker image generation unit 8d. and then output to the monitor 3 performs predetermined processing on the image signal of the right-eye cursor image C R and the left eye cursor image C L after the movement of the three-dimensional cursor C generated by the three-dimensional cursor display control unit 51, a monitor 3, the stereo image of the breast, the stereoscopic marker image M3, and the moved stereoscopic cursor C are displayed as shown in FIG. 9 (S20).
なお注視点が異常陰影候補から所定範囲内に位置していないと判断された場合（Ｓ１８；ＮＯ）は、立体カーソル移動制御部８ｆによって注視点が異常陰影候補から所定範囲内に位置していると判断されるまでステップＳ１７以降の処理を繰り返し行う。 If it is determined that the gazing point is not located within the predetermined range from the abnormal shadow candidate (S18; NO), the gazing point is located within the predetermined range from the abnormal shadow candidate by the three-dimensional cursor movement control unit 8f. Step S17 and subsequent steps are repeated until it is determined that
このように本実施形態の乳房画像撮影表示システム及び乳房画像表示システムにおける乳房画像撮影表示方法によれば、撮影方向毎の放射線画像の各々から異常陰影候補を検出し、検出された異常陰影候補の位置をステレオ画像と共にモニタ８に表示し、観察者の注視点を検出し、検出された注視点が異常陰影候補の位置から予め定められた所定の範囲内に位置したとき異常陰影候補の位置すなわち立体視マーカー画像の領域内に立体カーソルＣを移動させるようにしたので、観察者が立体カーソルＣの奥行方向の位置を認識することが困難であっても観察者が意図する異常陰影候補Ａ３すなわち立体視マーカー画像Ｍ３を注視するだけで、観察者に負担をかけることなく、観察者の意図する異常陰影候補の位置に立体カーソルＣを精度良く移動させることができる。 As described above, according to the breast image capturing / displaying system and the breast image capturing / displaying method in the breast image displaying system of the present embodiment, abnormal shadow candidates are detected from each of the radiographic images for each imaging direction, and the detected abnormal shadow candidates are detected. The position is displayed on the monitor 8 together with the stereo image, the observer's gazing point is detected, and the position of the abnormal shadow candidate when the detected gazing point is located within a predetermined range from the position of the abnormal shadow candidate, that is, Since the stereoscopic cursor C is moved within the region of the stereoscopic marker image, even if it is difficult for the observer to recognize the position of the stereoscopic cursor C in the depth direction, the abnormal shadow candidate A3 intended by the observer, that is, Just by gazing at the stereoscopic marker image M3, the stereoscopic cursor C is accurately placed at the position of the abnormal shadow candidate intended by the observer without imposing a burden on the observer. It can be dynamic.
次に本発明の立体視画像表示装置の第２の実施形態を用いた乳房画像撮影表示システムについて説明する。図１２は本実施形態の乳房画像撮影表示システム全体の概略構成を示す図、図１３は図１２に示す乳房画像撮影表示システムの作用を説明するためのフローチャート、図１４は異常陰影候補を含む乳房のステレオ画像とマーカー画像と注視点の軌跡の一例を模式的に示す図、図１５は異常陰影候補を含む乳房のステレオ画像とマーカー画像と注視点の軌跡の他の一例を模式的に示す図である。 Next, a breast image photographing display system using a second embodiment of the stereoscopic image display apparatus of the present invention will be described. 12 is a diagram showing a schematic configuration of the whole breast image radiographing display system of this embodiment, FIG. 13 is a flowchart for explaining the operation of the breast image radiographing display system shown in FIG. 12, and FIG. 14 is a breast including abnormal shadow candidates. FIG. 15 is a diagram schematically illustrating an example of a stereo image, a marker image, and a gazing point locus, and FIG. 15 is a diagram schematically illustrating another example of a breast stereo image including an abnormal shadow candidate, a marker image, and a gazing point locus. It is.
なお本実施形態の乳房画像撮影表示システムは図１及び図２に示す上述した実施形態の乳房画像撮影表示システム１と同様の構成のため説明は省略する。また図１２は、便宜上、上述した実施形態の図３と同様の箇所は同符号で示して説明を省略し、異なる箇所のみを詳細に説明するものとする。 The breast image radiographing display system of the present embodiment is the same as the mammography radiographing display system 1 of the above-described embodiment shown in FIGS. In FIG. 12, for convenience, the same parts as those in FIG. 3 of the above-described embodiment are denoted by the same reference numerals, and the description thereof will be omitted, and only different parts will be described in detail.
本実施形態の乳房画像撮影表示システムのコンピュータ２は、図１２に示すように、図３のコンピュータ２の構成に加えて軌跡表示制御部８ｊを備えている。 As shown in FIG. 12, the computer 2 of the breast image radiographing display system of this embodiment includes a trajectory display control unit 8j in addition to the configuration of the computer 2 of FIG.
軌跡表示制御部８ｊは、注視点検出部８ｅにより検出された観察者の注視点の軌跡をモニタ３に表示させるものである。また本実施形態の立体カーソル移動制御部８ｆ’は、上記実施形態の立体カーソル移動制御部８ｆとは立体視マーカー画像上に立体カーソルを自動的に移動させていない点が異なっており、本実施形態の立体カーソル移動制御部８ｆ’は、観察者による入力部４からの入力に応じてモニタ３に表示された立体カーソルをステレオ画像の奥行方向および面内方向に移動させるものである。 The trajectory display control unit 8j displays on the monitor 3 the trajectory of the observer's gaze point detected by the gaze point detection unit 8e. The stereoscopic cursor movement control unit 8f ′ according to the present embodiment is different from the stereoscopic cursor movement control unit 8f according to the above embodiment in that the stereoscopic cursor is not automatically moved on the stereoscopic marker image. The three-dimensional cursor movement control unit 8f ′ is configured to move the three-dimensional cursor displayed on the monitor 3 in the depth direction and the in-plane direction of the stereo image in response to an input from the input unit 4 by the observer.
次に、本実施形態の乳房画像撮影表示システムの作用について図１３に示すフローチャートを参照しながら以下に説明する。なお図１３のステップＳ３０〜ステップＳ３７の処理は、図４のステップＳ１０〜ステップＳ１７の処理と同じ処理であるため、便宜上、説明は省略する。 Next, the operation of the breast image radiographing display system of this embodiment will be described below with reference to the flowchart shown in FIG. Note that the processing in steps S30 to S37 in FIG. 13 is the same as the processing in steps S10 to S17 in FIG.
図１３に示すように、ステップＳ３７にて注視点検出部８ｅが観察者の注視点の検出を行うと（Ｓ３７）、次に軌跡表示制御部８ｊが図１４に示すように、検出された注視点の軌跡Ｓをモニタ２に表示する（Ｓ３８）。軌跡Ｓは単純にそれぞれの注視点を、それぞれの放射線画像に描くようにすればよい。軌跡Ｓは、目の動きの高周波成分を除去してから描くようにすることが望ましい。また、予め設定した時間分だけの軌跡を描くようにすることが望ましい。 As shown in FIG. 13, when the gazing point detection unit 8e detects the gazing point of the observer in step S37 (S37), the locus display control unit 8j then detects the detected gazing point as shown in FIG. The viewpoint locus S is displayed on the monitor 2 (S38). The trajectory S may simply draw each gazing point in each radiation image. It is desirable to draw the locus S after removing high-frequency components of eye movement. It is also desirable to draw a trajectory for a preset time.
そして軌跡表示制御部８ｊは、軌跡Ｓから所定範囲内に異常陰影候補が位置しているか否か、すなわち軌跡Ｓから所定範囲内に立体視マーカー画像が存在するか否かを判別し（Ｓ３９）、存在している場合には（Ｓ３９；ＹＥＳ）、図１４に示すように、存在する立体視マーカー画像Ｍ１０，Ｍ１１，Ｍ１２のみをモニタ２に表示するように画像信号を生成して、表示制御部８ｈへ出力し、表示制御部８ｈは図１４に示すように乳房のステレオ画像と立体視マーカー画像Ｍ１０，Ｍ１１，Ｍ１２と軌跡Ｓをモニタ２へ再表示させる（Ｓ４０）。 Then, the trajectory display control unit 8j determines whether or not the abnormal shadow candidate is located within the predetermined range from the trajectory S, that is, whether or not the stereoscopic marker image exists within the predetermined range from the trajectory S (S39). If it exists (S39; YES), as shown in FIG. 14, an image signal is generated so that only the existing stereoscopic marker images M10, M11, M12 are displayed on the monitor 2, and display control is performed. The display control unit 8h outputs the breast stereo image, the stereoscopic marker images M10, M11, M12, and the locus S to the monitor 2 again as shown in FIG. 14 (S40).
このとき図１５に示すように、軌跡Ｓから所定範囲外の立体視マーカー画像Ｍ１３を例えば点線等で表示させるようにしてもよい。 At this time, as shown in FIG. 15, the stereoscopic marker image M13 outside the predetermined range from the trajectory S may be displayed by, for example, a dotted line.
なお異常陰影候補が軌跡Ｓから所定範囲内に位置していないと判断された場合（Ｓ３９；ＮＯ）は、軌跡表示制御部８ｊによって異常陰影候補が軌跡Ｓから所定範囲内に位置していると判断されるまでステップＳ３７以降の処理を繰り返し行う。 When it is determined that the abnormal shadow candidate is not located within the predetermined range from the trajectory S (S39; NO), the trajectory display control unit 8j determines that the abnormal shadow candidate is located within the predetermined range from the trajectory S. The processes after step S37 are repeated until it is determined.
このように本実施形態の乳房画像撮影表示システム及び乳房画像表示システムにおける乳房画像撮影表示方法によれば、撮影方向毎の放射線画像の各々から異常陰影候補を検出し、検出された異常陰影候補の位置をステレオ画像と共にモニタ８に表示し、観察者の注視点を検出し、検出された注視点の軌跡Ｓをモニタ２に表示し、表示された軌跡Ｓから予め定められた所定の範囲内に異常陰影候補が位置するとき、すなわち軌跡Ｓから所定範囲内に立体視マーカー画像が存在するときに、存在する立体視マーカー画像Ｍ１０，Ｍ１１，Ｍ１２をステレオ画像と共にモニタ２に表示するようにしたので、観察者は自分が注視した先に存在する立体マーカー画像Ｍ１０，Ｍ１１，Ｍ１２を認識することができて、観察者が入力部４から立体カーソルの移動量を入力することによって自分の意図する立体マーカー画像上に立体カーソルＣを移動し易くすることができる。 As described above, according to the breast image capturing / displaying system and the breast image capturing / displaying method in the breast image displaying system of the present embodiment, abnormal shadow candidates are detected from each of the radiographic images for each imaging direction, and the detected abnormal shadow candidates are detected. The position is displayed on the monitor 8 together with the stereo image, the observer's gazing point is detected, the locus S of the detected gazing point is displayed on the monitor 2, and the predetermined locus from the displayed locus S is within a predetermined range. Since the stereoscopic marker image M10, M11, M12 is displayed on the monitor 2 together with the stereo image when the abnormal shadow candidate is located, that is, when the stereoscopic marker image exists within a predetermined range from the locus S. The observer can recognize the three-dimensional marker images M10, M11, M12 existing at the point where he / she gazes, and the observer can recognize the three-dimensional cursor from the input unit 4. It can be by inputting the amount of movement to facilitate moving the three-dimensional cursor C on their intended stereoscopic marker image.
なお本実施形態では、観察者が入力部４から入力することによって軌跡Ｓから所定範囲内に存在する立体マーカー画像上に立体カーソルＣを移動させるようにしたが、例えば立体カーソル移動制御部８ｆ’が立体カーソルＣを移動させるようにしてもよい。 In the present embodiment, the three-dimensional cursor C is moved on the three-dimensional marker image existing within the predetermined range from the trajectory S when the observer inputs from the input unit 4, but for example, the three-dimensional cursor movement control unit 8f ′ May move the three-dimensional cursor C.
また上述した２つの実施形態は、本発明の立体視画像表示装置の一実施形態を乳房画像撮影表示システムに適用したものであるが、本発明の被写体としては乳房に限らず、たとえば、胸部や頭部などを撮影する放射線画像撮影表示システムにも本発明を適用することができる。 In the above-described two embodiments, one embodiment of the stereoscopic image display device of the present invention is applied to a breast image capturing and displaying system. However, the subject of the present invention is not limited to the breast. The present invention can also be applied to a radiographic imaging display system that images a head or the like.
１ 乳房画像撮影表示システム
２ コンピュータ
３ モニタ
３ａ 表示面
４ 入力部
８ａ 制御部
８ｂ 放射線画像記憶部
８ｃ 異常陰影候補検出部
８ｄ マーカー画像生成部
８ｅ 注視点検出部
８ｆ，８ｆ’立体カーソル移動制御部
８ｇ 立体カーソル表示制御部
８ｈ 表示制御部（異常陰影候補表示制御部）
８ｊ 軌跡表示制御部
１０ 乳房画像撮影装置
１３ アーム部
１４ 撮影台
１５ 放射線画像検出器
１６ 放射線照射部
１７ 放射線源
１８ 圧迫板
４１ 第一のカメラ部
４２ 第二のカメラ部
DESCRIPTION OF SYMBOLS 1 Mammography imaging display system 2 Computer 3 Monitor 3a Display surface 4 Input part 8a Control part 8b Radiation image storage part 8c Abnormal shadow candidate detection part 8d Marker image generation part 8e Gaze point detection part 8f, 8f 'Solid cursor movement control part 8g 3D cursor display control unit 8h Display control unit (abnormal shadow candidate display control unit)
8j Trajectory display control unit 10 Breast image capturing device 13 Arm unit 14 Imaging base 15 Radiation image detector 16 Radiation irradiation unit 17 Radiation source 18 Compression plate 41 First camera unit 42 Second camera unit
Claims (14)
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部と、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出する異常陰影候補検出部と、
該異常陰影候補検出部により検出された異常陰影候補の位置を前記立体視画像と共に前記表示部に表示させる異常陰影候補表示制御部と、
観察者の注視点を検出する注視点検出部と、
前記表示部に前記異常陰影候補の位置が表示されたときに、前記注視点検出部により検出された注視点が前記異常陰影候補の位置から予め定められた所定の範囲内に位置したとき前記異常陰影候補の位置に前記立体カーソルを移動させる立体カーソル位置制御部とを備えていることを特徴とする立体視画像表示装置。 A display unit that displays a stereoscopic image that can be stereoscopically viewed using a radiographic image for each of the imaging directions acquired by irradiating the subject with radiation from different imaging directions;
A stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and the in-plane direction of the stereoscopic image displayed on the display unit;
An abnormal shadow candidate detecting unit for detecting an abnormal shadow candidate from each of the radiographic images for each imaging direction;
An abnormal shadow candidate display control unit that causes the display unit to display the position of the abnormal shadow candidate detected by the abnormal shadow candidate detection unit together with the stereoscopic image;
A gaze point detection unit that detects a gaze point of an observer;
When the position of the abnormal shadow candidate is displayed on the display unit, the abnormality is detected when the gazing point detected by the gazing point detection unit is located within a predetermined range from the position of the abnormal shadow candidate. A stereoscopic image display apparatus comprising: a stereoscopic cursor position control unit that moves the stereoscopic cursor to a position of a shadow candidate.
前記立体カーソル位置制御部が、前記注視点から最も近い前記異常陰影候補の位置に前記立体カーソルを移動させるものであることを特徴とする請求項１に記載の立体視画像表示装置。 When the plurality of abnormal shadow candidates are detected by the abnormal shadow candidate detection unit,
The stereoscopic image display apparatus according to claim 1, wherein the stereoscopic cursor position control unit moves the stereoscopic cursor to the position of the abnormal shadow candidate closest to the gazing point.
前記異常陰影候補表示制御部が、前記注視点から最も近い前記異常陰影候補の位置の表示態様を変更して前記表示部に表示するものであることを特徴とする請求項１〜４いずれか１項記載の立体視画像表示装置。 When the plurality of abnormal shadow candidates are detected by the abnormal shadow candidate detection unit,
The said abnormal shadow candidate display control part changes the display mode of the position of the said abnormal shadow candidate nearest to the said gazing point, and displays it on the said display part. The stereoscopic image display device according to item.
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部と、
該立体カーソルの移動指示を入力する入力部と、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出する異常陰影候補検出部と、
観察者の注視点を検出する注視点検出部と、
該注視点検出部により検出された注視点の軌跡を前記表示部に表示させる軌跡表示制御部と、
該視点軌跡表示制御部により表示された前記軌跡から予め定められた所定の範囲内に前記異常陰影候補が位置するときに、該位置する異常陰影候補の位置を前記立体視画像と共に前記表示部に表示させる異常陰影候補表示制御部とを備えていることを特徴とする立体視画像表示装置。 A display unit that displays a stereoscopic image that can be stereoscopically viewed using a radiographic image for each of the imaging directions acquired by irradiating the subject with radiation from different imaging directions;
A stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and the in-plane direction of the stereoscopic image displayed on the display unit;
An input unit for inputting an instruction to move the three-dimensional cursor;
An abnormal shadow candidate detecting unit for detecting an abnormal shadow candidate from each of the radiographic images for each imaging direction;
A gaze point detection unit that detects a gaze point of an observer;
A trajectory display control unit that causes the display unit to display a trajectory of the gazing point detected by the gazing point detection unit;
When the abnormal shadow candidate is located within a predetermined range from the trajectory displayed by the viewpoint trajectory display control unit, the position of the abnormal shadow candidate located on the display unit together with the stereoscopic image is displayed. A stereoscopic image display device comprising an abnormal shadow candidate display control unit to be displayed.
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部とを備えた立体視画像表示装置における立体視画像表示方法において、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出し、
該検出された異常陰影候補の位置を前記立体視画像と共に前記表示部に表示し、
観察者の注視点を検出し、
該検出された注視点が前記異常陰影候補の位置から予め定められた所定の範囲内に位置したとき前記異常陰影候補の位置に前記立体カーソルを移動させることを特徴とする立体視画像表示方法。 A display unit that displays a stereoscopic image that can be stereoscopically viewed using a radiographic image for each of the imaging directions acquired by irradiating the subject with radiation from different imaging directions;
Stereoscopic image display in a stereoscopic image display device including a stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and in-plane direction of the stereoscopic image displayed on the display unit In the method
Detecting abnormal shadow candidates from each of the radiographic images for each imaging direction;
Displaying the position of the detected abnormal shadow candidate together with the stereoscopic image on the display unit;
Detect the observer ’s point of interest,
A stereoscopic image display method, comprising: moving the stereoscopic cursor to a position of the abnormal shadow candidate when the detected gazing point is located within a predetermined range from a position of the abnormal shadow candidate.
前記注視点から最も近い前記異常陰影候補の位置に前記立体カーソルを移動させることを特徴とする請求項８に記載の立体視画像表示方法。 When a plurality of abnormal shadow candidates are detected,
The stereoscopic image display method according to claim 8, wherein the stereoscopic cursor is moved to the position of the abnormal shadow candidate closest to the gazing point.
前記注視点から最も近い前記異常陰影候補の位置の表示態様を変更して前記表示部に表示することを特徴とする請求項８〜１０いずれか１項記載の立体視画像表示方法。 When a plurality of abnormal shadow candidates are detected,
The stereoscopic image display method according to any one of claims 8 to 10, wherein a display mode of the position of the abnormal shadow candidate closest to the gazing point is changed and displayed on the display unit.
該表示部に表示された前記立体視画像の奥行方向及び面内方向に移動可能な立体カーソルを前記表示部に表示させる立体カーソル表示制御部と、
該立体カーソルの移動指示を入力する入力部とを備えた立体視画像表示装置における立体視画像表示方法において、
前記撮影方向毎の放射線画像の各々から異常陰影候補を検出し、
観察者の注視点を検出し、
該検出された注視点の軌跡を前記表示部に表示し、
該表示された前記軌跡から予め定められた所定の範囲内に前記異常陰影候補が位置するときに、該位置する異常陰影候補の位置を前記立体視画像と共に前記表示部に表示することを特徴とする立体視画像表示方法。 A display unit that displays a stereoscopic image that can be stereoscopically viewed using a radiographic image for each of the imaging directions acquired by irradiating the subject with radiation from different imaging directions;
A stereoscopic cursor display control unit that causes the display unit to display a stereoscopic cursor that can move in the depth direction and the in-plane direction of the stereoscopic image displayed on the display unit;
In a stereoscopic image display method in a stereoscopic image display device including an input unit for inputting an instruction to move the stereoscopic cursor,
Detecting abnormal shadow candidates from each of the radiographic images for each imaging direction;
Detect the observer ’s point of interest,
Displaying the locus of the detected gazing point on the display unit;
When the abnormal shadow candidate is located within a predetermined range from the displayed locus, the position of the abnormal shadow candidate is displayed on the display unit together with the stereoscopic image. To display a stereoscopic image.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US40781010A | 2010-10-28 | 2010-10-28 | |
| US61/407810 | 2010-10-28 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012095274A true JP2012095274A (en) | 2012-05-17 |
Family
ID=46388093
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011176586A Withdrawn JP2012095274A (en) | 2010-10-28 | 2011-08-12 | Stereoscopic image display device and stereoscopic image display method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012095274A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111295127A (en) * | 2017-10-31 | 2020-06-16 | 富士胶片株式会社 | Examination support device, endoscope device, examination support method, and examination support program |
-
2011
- 2011-08-12 JP JP2011176586A patent/JP2012095274A/en not_active Withdrawn
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111295127A (en) * | 2017-10-31 | 2020-06-16 | 富士胶片株式会社 | Examination support device, endoscope device, examination support method, and examination support program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5486437B2 (en) | Stereoscopic image display method and apparatus | |
| US20130300737A1 (en) | Stereoscopic image generating apparatus, stereoscopic image generating method, and stereoscopic image generating program | |
| JP2012029742A (en) | Radiological image capturing and displaying method and apparatus | |
| JP2012125453A (en) | Display device | |
| JP2012050605A (en) | X-ray image photographing apparatus, the x-ray image photographing method, and program | |
| JP2012029759A (en) | Radiological image radiographing and displaying method and apparatus | |
| JP2012061188A (en) | Radiation ray image photographing device and method | |
| JP2012024519A (en) | Radiological image radiographing and displaying method and apparatus | |
| JP2012095274A (en) | Stereoscopic image display device and stereoscopic image display method | |
| JP2011200408A (en) | Method and system for radiographing and displaying radiation image | |
| JP2012143419A (en) | Apparatus and method for displaying radiographic image | |
| WO2012056695A1 (en) | Three-dimensional image display device, method, and program | |
| WO2012066753A1 (en) | Stereoscopic image display method and device | |
| JP2012192137A (en) | Device and method for displaying radiation image | |
| JP2012124884A (en) | Stereoscopic image display device and method, and program | |
| WO2012056723A1 (en) | 3d image display device and 3d image display method | |
| WO2012105188A1 (en) | Stereoscopic image display device and method, and program | |
| WO2012102022A1 (en) | Stereoscopic image display method, and stereoscopic image display control apparatus and program | |
| US20120082298A1 (en) | Radiological image displaying device and method | |
| JP2012100246A (en) | Stereoscopic image display device and stereoscopic image display method | |
| JP2012068610A (en) | Stereoscopic vision image display device, radiation image photographing and display system and stereoscopic vision image display method | |
| JP2012066048A (en) | Method and device for displaying stereoscopic image | |
| JP2012178626A (en) | Stereoscopic radiation image display method and device | |
| JP2012157689A (en) | Radiograph display apparatus and method | |
| WO2012029726A1 (en) | Method and apparatus for imaging/displaying breast image |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20141104 |