JP2012075001A - Stereoscopic image display method and stereoscopic image display device - Google Patents

Stereoscopic image display method and stereoscopic image display device Download PDF

Info

Publication number
JP2012075001A
JP2012075001A JP2010219281A JP2010219281A JP2012075001A JP 2012075001 A JP2012075001 A JP 2012075001A JP 2010219281 A JP2010219281 A JP 2010219281A JP 2010219281 A JP2010219281 A JP 2010219281A JP 2012075001 A JP2012075001 A JP 2012075001A
Authority
JP
Japan
Prior art keywords
image
stereoscopic
processing
eye
eye image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2010219281A
Other languages
Japanese (ja)
Inventor
Takao Kuwabara
孝夫 桑原
Masahiko Yamada
雅彦 山田
Wataru Ito
渡 伊藤
Yasuyoshi Ota
恭義 大田
Takeshi Kamiya
毅 神谷
Tetsuo Kusuki
哲郎 楠木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2010219281A priority Critical patent/JP2012075001A/en
Priority to PCT/JP2011/072046 priority patent/WO2012043547A1/en
Publication of JP2012075001A publication Critical patent/JP2012075001A/en
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/02Devices for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/022Stereoscopic imaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/211Image signal generators using stereoscopic image cameras using a single 2D image sensor using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/32Transforming X-rays

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

PROBLEM TO BE SOLVED: To make stereoscopic vision quicker and easier to reduce a burden on an observer, in a stereoscopic image display method and device displaying a stereoscopic image so as to be stereoscopically viewed.SOLUTION: In a stereoscopic image display method, a specific part (N, C, or the like) having a large change amount of a physical characteristic of an image, is selected. First specific areas (R1-R8) on a right-eye image XR1 and second specific areas on a left-eye image, which include the specific part, are extracted. Image processing is performed to a first processing target area, which is an area other than the first specific areas in the right-eye image, and to a second processing target area, which is an area other than the second specific areas in the left-eye image. A stereoscopic image which consists of the right-eye image SR and the left-eye images to which the image processing is performed, is displayed stereoscopically. After an observer can view the stereoscopic image stereoscopically, the image processing is cancelled.

Description

本発明は、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像表示方法および立体視画像表示装置に関するものである。   The present invention relates to a stereoscopic image display method and a stereoscopic image display apparatus for displaying a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from a subject so as to be stereoscopically viewable.

従来、互いに視差のある右目用画像および左目用画像から構成される2枚1組の画像(以下、立体視画像またはステレオ画像という)に基づいて、立体視できることが知られている。このような立体視画像は、同一の被写体を異なる方向から撮影して取得された互いに視差のある複数の画像に基づいて生成される。   Conventionally, it is known that stereoscopic viewing is possible based on a set of two images (hereinafter referred to as a stereoscopic image or a stereo image) composed of a right-eye image and a left-eye image having parallax. Such a stereoscopic image is generated based on a plurality of images having parallax obtained by photographing the same subject from different directions.

そして、このような立体視画像の生成は、デジタルカメラやテレビなどの分野だけでなく、放射線画像撮影の分野においても利用されている。すなわち、被検者に対して互いに異なる方向から放射線を照射し、その被検者を透過した放射線を放射線画像検出器によりそれぞれ検出して互いに視差のある複数の放射線画像を取得し、これらの放射線画像に基づいて立体視画像を生成することが行われている。そして、このように立体視画像を生成することによって奥行感のある放射線画像を観察することができ、より診断に適した放射線画像を観察することができる。   Such generation of stereoscopic images is used not only in the fields of digital cameras and televisions but also in the field of radiographic imaging. That is, the patient is irradiated with radiation from different directions, the radiation transmitted through the subject is detected by a radiation image detector, and a plurality of radiation images having parallax are obtained, and these radiations are acquired. A stereoscopic image is generated based on the image. And by generating a stereoscopic image in this way, a radiographic image with a sense of depth can be observed, and a radiographic image more suitable for diagnosis can be observed.

ところで、立体視は、立体視画像の2つの画像を脳内で合成して3次元画像として認識することにより行われる。したがって、一般的にこのような立体視画像に基づく立体視は、慣れや得意不得意によって左右され、観察者によっては時間がかかったりまた疲労感を感じたりするものである。   By the way, stereoscopic vision is performed by synthesizing two images of a stereoscopic vision image in the brain and recognizing them as a three-dimensional image. Therefore, in general, stereoscopic viewing based on such a stereoscopic image is influenced by familiarity and weakness, and depending on the observer, it takes time and feels tired.

このように立体視において時間がかかったりまた疲労感を感じたりする原因は、定かではないが、観察画像が平面であるためピント調節が有効に働かず、両眼で異なった視覚像を知覚する現象(両眼の視野闘争)が生じるためであると推測されている。したがって、写真画像のような広域でピントが合った画像を立体視画像として用いた場合、上記のような立体視できるまでにかかる時間や疲労感は顕著となる。   The cause of time-consuming and feeling tired in stereoscopic viewing is not clear, but the focus adjustment does not work effectively because the observation image is flat, and different visual images are perceived by both eyes. It is speculated that this is because of a phenomenon (binocular rivalry). Therefore, when an image focused in a wide area, such as a photographic image, is used as a stereoscopic image, the time required for stereoscopic viewing as described above and the feeling of fatigue are significant.

そこで特許文献1は、右目用画像および左目用画像においてそれぞれ対応する一対の共通の点がない領域を、右目用画像および左目用画像のそれぞれから抽出し、上記2つの領域のうちのいずれかを排除することにより、立体視における両眼の視野闘争を低減して観察者の疲労感を軽減する方法を開示している。   Therefore, Patent Literature 1 extracts a pair of common points in the right-eye image and the left-eye image that are not associated with each other from each of the right-eye image and the left-eye image, and selects one of the two regions. A method for reducing the binocular rivalry in stereoscopic vision and reducing the observer's feeling of fatigue by eliminating them is disclosed.

特開2006−42298号公報JP 2006-42298 A

しかしながら、特許文献1の方法において、上記のような領域を排除したとしても、立体視画像のうちのわずかな領域を排除するにすぎない場合がある。したがって、特許文献1のような方法は、迅速かつ容易な立体視を実現するための補助としては不十分である場合がある。   However, in the method of Patent Document 1, even if the above regions are excluded, there are cases where only a small region of the stereoscopic image is excluded. Therefore, the method as disclosed in Patent Document 1 may not be sufficient as assistance for realizing quick and easy stereoscopic vision.

本発明は上記問題に鑑みてなされたものであり、立体視画像を立体視可能に表示する立体視画像表示方法および立体視画像表示装置において、立体視をより迅速かつ容易にして観察者への負荷をより軽減することを可能とする立体視画像表示方法および立体視画像表示装置を提供することを目的とするものである。   The present invention has been made in view of the above problems, and in a stereoscopic image display method and a stereoscopic image display device for displaying a stereoscopic image in a stereoscopic manner, stereoscopic viewing can be performed more quickly and easily to an observer. An object of the present invention is to provide a stereoscopic image display method and a stereoscopic image display apparatus that can further reduce the load.

上記課題を解決するために、本発明に係る立体視画像表示方法は、
被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像表示方法において、
右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、
この特定部分を含む右目用画像上の第1の特定領域、およびこの特定部分を含む左目用画像上の第2の特定領域を抽出し、
右目用画像のうち第1の特定領域以外の領域である第1の処理対象領域、および左目用画像のうち第2の特定領域以外の領域である第2の処理対象領域に画像処理を施し、
上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、
観察者が立体視できた後、上記画像処理を解除することを特徴とするものである。
In order to solve the above problems, a stereoscopic image display method according to the present invention includes:
In a stereoscopic image display method for displaying a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from a subject so as to enable stereoscopic viewing,
Select a specific portion of the subject that can be visually recognized in both the right-eye image and the left-eye image and having a large amount of change in the physical characteristics of the image,
Extracting a first specific region on the right-eye image including the specific portion and a second specific region on the left-eye image including the specific portion;
Image processing is performed on a first processing target region that is a region other than the first specific region in the right-eye image and a second processing target region that is a region other than the second specific region in the left-eye image;
A stereoscopic image composed of the right-eye image subjected to the image processing and the left-eye image subjected to the image processing is displayed so as to be stereoscopically viewable.
The image processing is canceled after the observer can stereoscopically view the image.

本明細書において、「立体視可能に表示する」或いは「立体視表示する」とは、立体視画像の構成画像を左右に並べて表示したり、立体視画像の構成画像を周期的に切り替えて表示したり、レンチキュラーディスプレイに表示したり、立体視画像の表示側において立体視に必要な要件をすべて満たして、立体視画像の構成画像を表示することを意味する。   In this specification, “display stereoscopically” or “display stereoscopically” means that the constituent images of a stereoscopic image are displayed side by side, or the constituent images of a stereoscopic image are periodically switched and displayed. Or displaying on a lenticular display, or displaying a constituent image of a stereoscopic image while satisfying all the requirements for stereoscopic viewing on the stereoscopic image display side.

「画像処理を解除する」とは、画像処理が施されていない右目用画像および左目用画像から構成される立体視画像を立体視表示することを意味する。
「画像の物理特性」とは、画素値、画像強度、周波数特性などがある。
“Release image processing” means that a stereoscopic image composed of a right-eye image and a left-eye image that has not been subjected to image processing is stereoscopically displayed.
“Physical characteristics of an image” includes a pixel value, image intensity, frequency characteristics, and the like.

そして、本発明に係る立体視画像表示方法において、特定部分として、右目用画像および左目用画像の中で画素値の変化量が大きい部分を選択することが好ましく、この場合、点状の部分または線状の部分を選択することがより好ましい。   In the stereoscopic image display method according to the present invention, it is preferable to select, as the specific portion, a portion having a large amount of change in pixel value in the right-eye image and the left-eye image. It is more preferable to select a linear portion.

そして、本発明に係る立体視画像表示方法において、画像処理は、処理対象領域をぼかす処理、処理対象領域のコントラストを低くする処理、処理対象領域の彩度または明度を下げる処理、および処理対象領域の色相を寒色系に近づける処理のうち少なくとも1つの処理であることが好ましい。   In the stereoscopic image display method according to the present invention, the image processing includes processing for blurring the processing target region, processing for reducing the contrast of the processing target region, processing for reducing the saturation or brightness of the processing target region, and processing target region It is preferable that at least one of the processes for bringing the hue of the color closer to the cold color system.

さらに、本発明に係る立体視画像表示装置は、
画像を表示する表示部と、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を表示部に立体視可能に表示させる表示制御部とを備えた立体視画像表示装置において、
右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択する選択部と、
この特定部分を含む右目用画像上の第1の特定領域、およびこの特定部分を含む左目用画像上の第2の特定領域を抽出する抽出部と、
右目用画像のうち第1の特定領域以外の領域である第1の処理対象領域、および左目用画像のうち第2の特定領域以外の領域である第2の処理対象領域に画像処理を施す処理部とを備え、
表示制御部が、上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、上記画像処理を解除するものであることを特徴とするものである。
Furthermore, the stereoscopic image display apparatus according to the present invention is
Stereoscopic display including a display unit that displays an image, and a display control unit that displays a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from the subject so that the stereoscopic image can be displayed on the display unit In an image display device,
A selection unit that selects a specific part of a subject that can be visually recognized in both the right-eye image and the left-eye image and has a large amount of change in physical characteristics of the image;
An extraction unit for extracting a first specific region on the right-eye image including the specific portion and a second specific region on the left-eye image including the specific portion;
Processing for performing image processing on a first processing target region that is a region other than the first specific region in the image for the right eye and a second processing target region that is a region other than the second specific region in the image for the left eye With
After the display control unit displays the stereoscopic image composed of the image for the right eye subjected to the image processing and the image for the left eye subjected to the image processing so as to be stereoscopically viewed, and the observer can stereoscopically view, The image processing is canceled.

そして、本発明に係る立体視画像表示装置において、選択部は、特定部分として、右目用画像および左目用画像の中で画素値の変化量が大きい部分を選択するものであることが好ましく、この場合、点状の部分または線状の部分を選択するものであることがより好ましい。   In the stereoscopic image display device according to the present invention, the selection unit preferably selects, as the specific part, a part having a large amount of change in pixel value in the right-eye image and the left-eye image. In this case, it is more preferable to select a dotted portion or a linear portion.

本発明に係る立体視画像表示方法および立体視画像表示装置によれば、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像の表示において、右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、この特定部分を含む右目用画像上の第1の特定領域、およびこの特定部分を含む左目用画像上の第2の特定領域を抽出し、右目用画像のうち第1の特定領域以外の領域である第1の処理対象領域、および左目用画像のうち第2の特定領域以外の領域である第2の処理対象領域に画像処理を施し、上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、上記画像処理を解除するようにしたので、立体視しやすい上記特定部分を立体視した状態をそのまま保ちながら、観察対象である被写体全体の立体視画像の立体視に移行することができる。この際、立体視を開始する時点においては、視認できる領域を立体視画像のうち特定部分を含む特定領域に限定しているため、両眼の視野闘争を低減することができる。この結果、立体視画像表示方法および立体視画像表示装置において、従来の方法に比して、立体視をより迅速かつ容易にして観察者への負荷をより軽減することが可能となる。   According to the stereoscopic image display method and the stereoscopic image display device according to the present invention, a stereoscopic image that displays a stereoscopic image composed of a right-eye image and a left-eye image that are captured with a parallax in a stereoscopic manner is displayed in a stereoscopic manner. In the display of the visual image, a specific part that is visible in both the right-eye image and the left-eye image and has a large amount of change in physical properties of the image is selected, and the right eye including the specific part is selected. The first specific area on the image for use and the second specific area on the image for the left eye including the specific portion are extracted, and the first processing target that is an area other than the first specific area in the image for the right eye The left eye image subjected to the image processing by performing image processing on the second processing target region that is a region other than the second specific region among the region and the left eye image, and the left eye image subjected to the image processing Image The configured stereoscopic image is displayed so that it can be stereoscopically viewed, and after the observer has been able to stereoscopically view, the image processing is canceled. Thus, it is possible to shift to a stereoscopic view of the stereoscopic image of the entire subject to be observed. At this time, at the time when the stereoscopic vision is started, the visible region is limited to the specific region including the specific part in the stereoscopic image, so that the binocular rivalry can be reduced. As a result, in the stereoscopic image display method and the stereoscopic image display device, it is possible to make stereoscopic viewing more quickly and easily and further reduce the burden on the observer as compared with the conventional method.

本発明の立体視画像表示方法および立体視画像表示装置の一実施形態を用いた乳房画像撮影表示システムの概略構成図である。1 is a schematic configuration diagram of a breast image photographing display system using an embodiment of a stereoscopic image display method and a stereoscopic image display device of the present invention. 図1に示す乳房画像撮影表示システムのアーム部を示す概略断面図である。It is a schematic sectional drawing which shows the arm part of the mammography imaging display system shown in FIG. 図1に示す乳房画像撮影表示システムのコンピュータ内部の概略構成を示すブロック図である。It is a block diagram which shows schematic structure inside the computer of the breast image radiographing display system shown in FIG. (A)乳房の放射線画像中の立体視しやすい特定部分となりうる部分を説明する図である。(B)足の放射線画像中の立体視しやすい特定部分となりうる部分を説明する図である。(A) It is a figure explaining the part which can become a specific part which is easy to stereoscopically view in the radiographic image of a breast. (B) It is a figure explaining the part which can become a specific part which is easy to stereoscopically view in the radiographic image of a leg. (A)乳房の放射線画像中に抽出された特定領域を説明する図である。(B)足の放射線画像中に抽出された特定領域を説明する図である。(A) It is a figure explaining the specific area | region extracted in the radiographic image of a breast. (B) It is a figure explaining the specific area extracted in the radiographic image of a leg. 立体視画像中の特定領域を目立たせる(処理対象領域を目立たなくする)処理を説明する図である。It is a figure explaining the process which makes the specific area in a stereoscopic vision image stand out (making a process target area inconspicuous).

以下、本発明の実施形態について図面を用いて説明するが、本発明はこれに限られるものではない。なお、視認しやすくするため、図面中の各構成要素の縮尺等は実際のものとは適宜異ならせてある。   Hereinafter, although an embodiment of the present invention is described using a drawing, the present invention is not limited to this. In addition, for easy visual recognition, the scale of each component in the drawings is appropriately changed from the actual one.

「立体視画像表示方法および立体視画像表示装置」
以下、図面を参照して本発明の立体視画像表示方法および立体視画像表示装置の一実施形態を用いた乳房画像撮影表示システムについて説明する。
"Stereoscopic image display method and stereoscopic image display apparatus"
Hereinafter, a breast image photographing and displaying system using an embodiment of a stereoscopic image display method and a stereoscopic image display apparatus of the present invention will be described with reference to the drawings.

本実施形態の乳房画像撮影表示システム1は、図1に示すように、乳房画像撮影装置10と、乳房画像撮影装置10に接続されたコンピュータ8と、コンピュータ8に接続されたモニタ9および入力部7とを備えている。   As shown in FIG. 1, a breast image radiographing display system 1 of the present embodiment includes a mammography apparatus 10, a computer 8 connected to the mammography apparatus 10, a monitor 9 connected to the computer 8, and an input unit. 7.

この乳房画像撮影装置10は、図1に示すように、基台11と、基台11に対し上下方向(Z方向)に移動可能でかつ回転可能な回転軸12と、回転軸12により基台11と連結されたアーム部13とを備えている。なお図2には、図1の右方向(y軸正方向)から見たアーム部13の正面形状を示している。   As shown in FIG. 1, the mammography apparatus 10 includes a base 11, a rotary shaft 12 that can move in the vertical direction (Z direction) relative to the base 11, and a rotary shaft 12. 11 and an arm portion 13 connected to the arm portion 13. FIG. 2 shows the front shape of the arm portion 13 as viewed from the right direction (y-axis positive direction) in FIG.

アーム部13はアルファベットのCのような形状をしており、その一端には撮影台14が、その他端には撮影台14と対向するように放射線照射部16が取り付けられている。アーム部13の回転および上下方向の移動は、基台11に組み込まれたアームコントローラ31によって制御される。   The arm portion 13 has a shape like an alphabet C, and a radiation table 16 is attached to one end of the arm portion 13 so as to face the imaging table 14 at the other end. The rotation and vertical movement of the arm unit 13 are controlled by an arm controller 31 incorporated in the base 11.

撮影台14の内部には、フラットパネルディテクタ等の放射線画像検出器15と、この放射線画像検出器15からの電荷信号の読み出しを制御する検出器コントローラ33とが設けられている。また撮影台14の内部には、放射線画像検出器15から読み出された電荷信号を電圧信号に変換するチャージアンプや、チャージアンプから出力された電圧信号をサンプリングする相関2重サンプリング回路や、電圧信号をデジタル信号に変換するAD変換部などが設けられた回路基板等も設置されているが、それらの詳しい説明は省略する。   A radiographic image detector 15 such as a flat panel detector and a detector controller 33 that controls reading of a charge signal from the radiographic image detector 15 are provided inside the imaging table 14. Further, in the imaging table 14, a charge amplifier that converts the charge signal read from the radiation image detector 15 into a voltage signal, a correlated double sampling circuit that samples the voltage signal output from the charge amplifier, a voltage A circuit board or the like provided with an AD conversion unit for converting a signal into a digital signal is also provided, but detailed description thereof is omitted.

この撮影台14はアーム部13に対して回転可能に構成されており、それにより、基台11に対してアーム部13が回転軸12を中心に回転したときでも、撮影台14が基台11に対して一定の向きに維持されるようになっている。   The imaging table 14 is configured to be rotatable with respect to the arm unit 13, so that even when the arm unit 13 is rotated about the rotation axis 12 with respect to the base 11, the imaging table 14 is Is maintained in a certain orientation.

放射線画像検出器15は、放射線画像の記録と読出しを繰り返して行うことができるものであり、放射線の照射を直接受けて電荷を発生する、いわゆる直接型の放射線画像検出器を用いてもよいし、放射線を一旦可視光に変換し、その可視光を電荷信号に変換する、いわゆる間接型の放射線画像検出器を用いるようにしてもよい。また、放射線画像信号の読出方式としては、TFT(thin film transistor)スイッチをオン・オフされることによって放射線画像信号が読み出される、いわゆるTFT読出方式のものや、読取光を照射することによって放射線画像信号が読み出される、いわゆる光読出方式のものを用いることが望ましいが、これに限らずその他のものを用いるようにしてもよい。   The radiation image detector 15 can repeatedly perform recording and reading of a radiation image, and may use a so-called direct type radiation image detector that directly receives radiation and generates charges. Alternatively, a so-called indirect radiation image detector that converts radiation once into visible light and converts the visible light into a charge signal may be used. As a radiation image signal readout method, a radiation image signal is read out by turning on / off a TFT (thin film transistor) switch, or a radiation image is emitted by irradiating reading light. It is desirable to use a so-called optical readout system in which a signal is read out, but the present invention is not limited to this, and other systems may be used.

放射線照射部16には放射線源17と、放射線源コントローラ32とが配設されている。放射線源コントローラ32は、放射線源17から放射線を照射するタイミングと、放射線源17における放射線発生条件(管電流、時間、管電流時間積等)を制御するものである。   The radiation irradiation unit 16 is provided with a radiation source 17 and a radiation source controller 32. The radiation source controller 32 controls the timing of irradiating radiation from the radiation source 17 and the radiation generation conditions (tube current, time, tube current time product, etc.) in the radiation source 17.

アーム部13の中央部には、撮影台14の上方に配置されて乳房Mを押さえつけて圧迫する圧迫板18と、その圧迫板18を支持する支持部20と、支持部20を上下方向(Z方向)に移動させる移動機構19とが設けられている。圧迫板18の位置、圧迫圧は、圧迫板コントローラ34により制御される。   At the center of the arm 13, a compression plate 18 that is disposed above the imaging table 14 and presses and compresses the breast M, a support unit 20 that supports the compression plate 18, and a support unit 20 in the vertical direction (Z And a moving mechanism 19 that moves in a direction). The position of the compression plate 18 and the compression pressure are controlled by the compression plate controller 34.

乳房画像撮影装置10の動作を制御するコンピュータ8は、中央処理装置(CPU)および半導体メモリやハードディスクやSSD等のストレージデバイスなどを備えており、これらのハードウェアによって、図3に示すような制御部8a、放射線画像記憶部8b、表示制御部8c、選択部8d、抽出部8eおよび処理部8fが構成されている。   The computer 8 that controls the operation of the mammography apparatus 10 includes a central processing unit (CPU) and a storage device such as a semiconductor memory, a hard disk, and an SSD. The control shown in FIG. A unit 8a, a radiation image storage unit 8b, a display control unit 8c, a selection unit 8d, an extraction unit 8e, and a processing unit 8f are configured.

制御部8aは、各種のコントローラ31〜35に対して所定の制御信号を出力し、システム全体の制御を行うものである。具体的な制御方法については後で詳述する。   The controller 8a outputs predetermined control signals to the various controllers 31 to 35 to control the entire system. A specific control method will be described in detail later.

放射線画像記憶部8bは、放射線画像検出器15によって取得された放射線画像信号を記憶するものである。   The radiation image storage unit 8b stores a radiation image signal acquired by the radiation image detector 15.

表示制御部8cは、放射線画像記憶部8bに記憶された放射線画像信号を読み出し、その放射線画像信号に基づいて、右目用の放射線画像および左目用の放射線画像から構成される立体視画像を生成する。そして、表示制御部8cは、生成した立体視画像を選択部8d、抽出部8eおよび処理部8fに出力し、立体視画像に関連した必要な処理をこれらのそれぞれに実行させる。表示制御部8cは、必要な処理が実行された立体視画像を受信し、乳房Mの当該立体視画像をモニタ9に立体視可能に表示(立体視表示)させる。つまり、表示制御部8cは、後述する画像処理が施された右目用画像および当該画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示する。   The display control unit 8c reads out the radiographic image signal stored in the radiographic image storage unit 8b, and generates a stereoscopic image composed of the radiographic image for the right eye and the radiographic image for the left eye based on the radiographic image signal. . Then, the display control unit 8c outputs the generated stereoscopic image to the selection unit 8d, the extraction unit 8e, and the processing unit 8f, and causes each of them to execute necessary processing related to the stereoscopic image. The display control unit 8c receives a stereoscopic image on which necessary processing has been executed, and displays the stereoscopic image of the breast M on the monitor 9 so as to enable stereoscopic viewing (stereoscopic display). That is, the display control unit 8c displays a stereoscopic image including a right-eye image that has been subjected to image processing, which will be described later, and a left-eye image that has been subjected to the image processing, in a stereoscopic manner.

表示制御部8cは、観察者が立体視できた後、上記画像処理を解除する。表示制御部8cは、例えば観察者が立体視できたことを表す乳房画像撮影表示システム1への観察者による操作に基づいて、観察者が立体視できたか否かの判断を行う。このような操作は入力部7等によって行うことがきる。或いは、表示制御部8cは、予め設定された所定時間が経過したときに、観察者が立体視できたことを擬制することにより、観察者が立体視できたか否かの判断を行う。このような場合、前者のような場合に必要な観察者による操作を省略することができる。   The display control unit 8c cancels the image processing after the observer can stereoscopically view. For example, the display control unit 8c determines whether or not the observer can stereoscopically view based on an operation by the observer on the breast image capturing and displaying system 1 indicating that the observer has stereoscopically viewed. Such an operation can be performed by the input unit 7 or the like. Alternatively, the display control unit 8c determines whether or not the observer has been stereoscopically viewed by pretending that the observer has been able to stereoscopically view when a predetermined time set in advance has elapsed. In such a case, an operation by an observer necessary for the former case can be omitted.

選択部8dは、右目用画像および左目用画像のどちらにおいても視認することができ、かつ立体視しやすい被写体の部分である、画像の物理特性の変化量が大きい特定部分を選択するものである。特定部分は、右目用画像および左目用画像の中で画素値の変化量が大きい部分を選択することが好ましく、この場合、点状の部分または線状の部分を選択することがより好ましい。選択部8dは、複数の特定部分を選択してもよい。ただし、立体視をより迅速かつ容易にする観点から、両眼に与える情報を最小限にするべく、特定部分は1つであることが好ましい。このような特定部分としては、図4Aに示すように例えば乳房Mの放射線画像XR1においては、乳房M自体の輪郭、放射線撮影を行う際のニップルマーカN、乳房M中に析出した石灰化Cおよび乳房Mの外科手術用のワイヤフックF等を挙げることができる。また、このような特定部分としては、図4Bに示すように例えば足Leの放射線画像XR2においては、骨(B、B1およびB2)の輪郭、固定用のプレートPやワイヤW等を挙げることができる。そして、選択部8dは、選択した特定部分の位置情報を抽出部8eに出力する。   The selection unit 8d selects a specific portion that can be visually recognized in both the right-eye image and the left-eye image and that is a portion of a subject that is easily stereoscopically viewed, and has a large amount of change in physical characteristics of the image. . As the specific portion, it is preferable to select a portion having a large amount of change in the pixel value in the right-eye image and the left-eye image, and in this case, it is more preferable to select a dotted portion or a linear portion. The selection unit 8d may select a plurality of specific parts. However, from the viewpoint of facilitating and facilitating stereoscopic viewing, it is preferable that there is only one specific part in order to minimize the information given to both eyes. 4A, for example, in the radiographic image XR1 of the breast M, the contour of the breast M itself, the nipple marker N when performing radiography, the calcification C deposited in the breast M, and Examples thereof include a wire hook F for breast M surgery. 4B, for example, in the radiographic image XR2 of the foot Le, the contours of the bones (B, B1, and B2), the fixing plate P, the wire W, and the like can be cited. it can. Then, the selection unit 8d outputs the position information of the selected specific part to the extraction unit 8e.

抽出部8eは、選択部8dによって選択された特定部分を含む右目用画像上の第1の特定領域、および当該特定部分を含む左目用画像上の第2の特定領域を抽出するものである。このとき、第1の特定領域および第2の特定領域は、当該特定部分を包含するような領域である。第1の特定領域および第2の特定領域は、立体視における両眼のバランスを考慮すると、その大きさや形状は互いに同一であることが好ましい。しかしながら、その大きさや形状は必ずしも互いに同一である必要はない。これらの特定領域に共通して上記のような特定部分が包含されていれば、立体視は可能だからである。   The extraction unit 8e extracts the first specific region on the right-eye image including the specific portion selected by the selection unit 8d and the second specific region on the left-eye image including the specific portion. At this time, the first specific area and the second specific area are areas including the specific portion. The first specific area and the second specific area are preferably the same in size and shape in consideration of the binocular balance in stereoscopic vision. However, the size and shape are not necessarily the same. This is because stereoscopic viewing is possible if the above-described specific part is included in these specific regions.

このような特定領域としては、図5Aに示すように例えば乳房Mの放射線画像XR1においては、乳房M自体の輪郭を包含するような領域R1、放射線撮影を行う際のニップルマーカNを包含するような領域R2、乳房M中に析出した石灰化Cを包含するような領域R3および乳房Mの外科手術用のワイヤフックFを包含するような領域R4並びに上記のような特定部分の複数を包含するような領域R5等を挙げることができる。また、このような特定部分としては、図5Bに示すように例えば足Leの放射線画像XR2においては、骨(B、B1およびB2)の輪郭を包含するような領域R6、プレートPを包含するような領域R7およびワイヤWを包含するような領域R8等を挙げることができる。   As such a specific region, as shown in FIG. 5A, for example, in the radiographic image XR1 of the breast M, the region R1 that includes the contour of the breast M itself, and the nipple marker N when performing radiography are included. Including a region R2, a region R3 including a calcification C deposited in the breast M, a region R4 including a wire hook F for surgical operation of the breast M, and a plurality of specific portions as described above. Examples of such a region R5 can be given. 5B, for example, the radiographic image XR2 of the foot Le includes a region R6 and a plate P that include the outline of the bone (B, B1, and B2). Examples of the region R7 and the region R8 including the wire W can be given.

そして、抽出部8eは、抽出した特定領域の位置情報を処理部8fに出力する。   Then, the extraction unit 8e outputs the extracted position information of the specific area to the processing unit 8f.

処理部8fは、右目用画像のうち第1の特定領域以外の領域である第1の処理対象領域、および左目用画像のうち第2の特定領域以外の領域である第2の処理対象領域に、上記両特定領域のそれぞれとの対比において上記両処理対象領域を目立たなくする画像処理を施すものである。「目立たない」状態とは、例えば、ぼけていたり、滲んでいたり、明暗がハッキリしていなくて注視し難い状態、色彩が地味(彩度の対比が小さい)など、注目しづらい状態である。したがって、画像処理は、処理対象領域をぼかす処理、処理対象領域のコントラストを低くする処理、処理対象領域の彩度または明度を下げる処理、および処理対象領域の色相を寒色系に近づける処理のうち少なくとも1つの処理であることが好ましい。処理対象領域を目立たなくすることにより、相対的に特定領域が目立つようになる。なお、特定領域と処理対象領域との境界において、特定領域が目立つ度合い(処理対象領域が目立たない度合い)は、明確に区別できる必要はない。例えば、処理対象領域において、当該境界を起点に特定領域から離れるにつれて徐々に目立たなくなるようにしてもよい。   The processing unit 8f includes a first processing target region that is a region other than the first specific region in the right eye image and a second processing target region that is a region other than the second specific region in the left eye image. Then, image processing is performed to make both the processing target areas inconspicuous in comparison with the two specific areas. The “inconspicuous” state is, for example, a state in which it is difficult to focus attention, such as being blurred or blurred, a state in which light and darkness are not clear and difficult to watch, and a color is plain (the contrast of saturation is small). Therefore, the image processing includes at least one of a process for blurring the processing target area, a process for reducing the contrast of the processing target area, a process for reducing the saturation or lightness of the processing target area, and a process for bringing the hue of the processing target area closer to a cold color system. One treatment is preferred. By making the processing target area inconspicuous, the specific area becomes relatively conspicuous. Note that it is not necessary to be able to clearly distinguish the degree of conspicuousness of the specific area (degree of inconspicuousness of the processing target area) at the boundary between the specific area and the processing target area. For example, the processing target area may gradually become inconspicuous as the distance from the specific area starts from the boundary.

例えば、処理対象領域をぼかす処理を施した場合、シャープで鮮明な画像より、ぼけている画像の方が目立たなくなる。具体的なぼかす方法は、本技術分野で知られる種々の方法を用いることができる。また、例えば処理対象領域のコントラストを低くした場合、例えば、ぼけているか否かにかかわらず、一色で塗られた面より、コントラストの強い方が目立つと考えられる。画像は画素で構成され、画素は色相、彩度、明度(色の3要素)の情報をもっている。コントラストを低くするとは画素を平均化することであり、つまり色相、彩度、明度のいずれか1つの値を周辺の画素の持つ値に近づけることである。   For example, when a process for blurring a processing target area is performed, a blurred image is less noticeable than a sharp and clear image. As a specific blurring method, various methods known in this technical field can be used. For example, when the contrast of the processing target region is lowered, for example, it is considered that the stronger contrast is more conspicuous than the surface painted with one color regardless of whether or not it is blurred. An image is composed of pixels, and each pixel has information on hue, saturation, and lightness (three elements of color). Lowering the contrast means averaging the pixels, that is, bringing one of the values of hue, saturation, and brightness close to the values of the surrounding pixels.

入力部7は、たとえば、キーボードやマウスなどのポインティングデバイスから構成されるものであり、撮影者による撮影条件などの入力や撮影開始指示の入力などを受け付けるものである。また必要に応じて、入力部7は、特定部分と見なせる部分が複数ある場合に選択部8dが選択する特定部分を指定したり、抽出部8eが抽出する特定領域の大きさや形状を指定したり、処理部8fが処理対象領域に施す画像処理を指定したりすることができるように構成してもよい。   The input unit 7 is configured by a pointing device such as a keyboard and a mouse, for example, and receives an input of shooting conditions and a shooting start instruction by a photographer. Further, if necessary, the input unit 7 specifies a specific part to be selected by the selection unit 8d when there are a plurality of parts that can be regarded as a specific part, or specifies the size or shape of the specific area extracted by the extraction unit 8e. The processing unit 8f may be configured to specify image processing to be performed on the processing target area.

モニタ9は、コンピュータ8に記憶された2つの放射線画像信号を用いて立体視画像を立体視表示するように構成されたものである。立体視画像を立体視表示する構成としては、たとえば、2つの画面を用いて2つの放射線画像信号に基づく放射線画像をそれぞれ表示させて、これらをハーフミラーや偏光グラスなどを用いることで一方の放射線画像は観察者の右目に視認させ、他方の放射線画像は観察者の左目に視認させることによって、立体視画像を立体視表示する構成を採用することができる。または、例えば、2つの放射線画像を所定の視差量だけずらして重ね合わせて表示し、これを偏光グラスで観察することで立体視画像を立体視表示する構成としてもよい。さらに、パララックスバリア方式およびレンチキュラー方式のように、2つの放射線画像を立体視可能な3D液晶に表示することによって、立体視画像を立体視表示する構成としてもよい。また、右目用画像および左目用画像を1つの画面に交互に切替えて立体視表示する構成としてもよい。なおこの場合には、観察者側で立体視メガネを通してモニタ9を見る必要がある。   The monitor 9 is configured to stereoscopically display a stereoscopic image using two radiation image signals stored in the computer 8. As a configuration for stereoscopically displaying a stereoscopic image, for example, radiation images based on two radiation image signals are displayed using two screens, and one of the radiations is displayed by using a half mirror, a polarizing glass, or the like. It is possible to adopt a configuration in which a stereoscopic image is stereoscopically displayed by causing an image to be visually recognized by the observer's right eye and the other radiation image being visually recognized by the observer's left eye. Alternatively, for example, two radiographic images may be displayed in a superimposed manner while being shifted by a predetermined amount of parallax, and the stereoscopic images may be stereoscopically displayed by observing them with a polarizing glass. Furthermore, it is good also as a structure which displays a stereoscopic vision image by displaying two radiographic images on the 3D liquid crystal which can be stereoscopically viewed like a parallax barrier system and a lenticular system. Alternatively, the right-eye image and the left-eye image may be alternately displayed on a single screen for stereoscopic display. In this case, it is necessary to see the monitor 9 through the stereoscopic glasses on the observer side.

<撮影処理>
次に、この乳房画像撮影装置10における撮影処理について説明する。まず、図1に示すように撮影台14の上に乳房Mが配置され、圧迫板18により乳房Mが所定の圧力で圧迫される。なおこの時点でアーム部13は、撮影台14に垂直な方向を向く初期位置、すなわち図2に実線で示す位置に設定されている。
<Shooting process>
Next, imaging processing in the breast image capturing apparatus 10 will be described. First, as shown in FIG. 1, the breast M is disposed on the imaging table 14, and the breast M is compressed with a predetermined pressure by the compression plate 18. At this time, the arm unit 13 is set to an initial position in a direction perpendicular to the imaging table 14, that is, a position indicated by a solid line in FIG.

次に入力部7により、被検者毎の種々の撮影条件が入力されるとともに、立体視画像として放射線画像を撮影するか、もしくは通常2次元画像として放射線画像を撮影するかを指示する入力がなされる。前者の撮影を行う指示入力があった場合、制御部8aは、予め設定された撮影角度θ(放射線検出面法線に対して放射線照射軸がなす角度の大きさ:図2参照)を内部メモリから読み出し、その撮影角度θの情報をアームコントローラ31に出力する。   Next, various imaging conditions for each subject are input by the input unit 7 and an input for instructing whether to capture a radiographic image as a stereoscopic image or a radiographic image as a normal two-dimensional image is input. Made. When there is an instruction input for performing the former imaging, the control unit 8a stores a preset imaging angle θ (the magnitude of the angle formed by the radiation irradiation axis with respect to the radiation detection surface normal: see FIG. 2). The information of the photographing angle θ is output to the arm controller 31.

なお本実施形態においては、この撮影角度θの情報としてθ=2°が予め記憶されているものとする。しかしこれに限らず、撮影角度θには2°〜5°程度のその他の角度が適用されてもよい。また本実施形態では、アーム部13が回転軸12を中心に回転するように構成され、そしてこの回転軸12は放射線画像検出器15と略同じ高さ位置に配設されている。そのため、図2に示されるように相異なる回転位置にある放射線源17の放射線照射軸は、互いに放射線画像検出器15の近辺で交差する状態となるが、これに限らず、被写体である乳房Mの中においてそれらの放射線照射軸が交差するような状態にアーム部13を回転させるようにしても構わない。   In this embodiment, it is assumed that θ = 2 ° is stored in advance as information on the shooting angle θ. However, the present invention is not limited to this, and other angles of about 2 ° to 5 ° may be applied to the shooting angle θ. In the present embodiment, the arm portion 13 is configured to rotate around the rotation shaft 12, and the rotation shaft 12 is disposed at substantially the same height as the radiation image detector 15. Therefore, as shown in FIG. 2, the radiation irradiation axes of the radiation sources 17 at different rotational positions intersect each other in the vicinity of the radiation image detector 15. However, the present invention is not limited to this. The arm portion 13 may be rotated so that the radiation irradiation axes intersect each other.

次にアームコントローラ31は、制御部8aから出力された上記撮影角度θの情報を受け、この撮影角度θの情報に基づいて、アーム部13を前記初期位置から+θ回転させる制御信号を出力する。そこで、この制御信号に応じてアーム部13が+2°回転する。   Next, the arm controller 31 receives the information on the photographing angle θ output from the control unit 8a, and outputs a control signal for rotating the arm unit 13 by + θ from the initial position based on the information on the photographing angle θ. Therefore, the arm portion 13 rotates + 2 ° in accordance with this control signal.

続いて制御部8aは、放射線源コントローラ32および検出器コントローラ33に対して、放射線の照射と放射線画像信号の読出しを行うよう制御信号を出力する。そこで、この制御信号に応じて放射線源17から放射線が射出され、乳房を+2°方向から撮影した放射線画像信号が放射線画像検出器15によって検出される。次いで検出器コントローラ33によって放射線画像検出器15から放射線画像信号が読み出される。その放射線画像信号に対して所定の信号処理が施された後、その放射線画像信号がコンピュータ8の放射線画像記憶部8bに記憶される。   Subsequently, the control unit 8a outputs a control signal to the radiation source controller 32 and the detector controller 33 so as to perform radiation irradiation and readout of the radiation image signal. Therefore, radiation is emitted from the radiation source 17 in accordance with this control signal, and a radiation image signal obtained by photographing the breast from the + 2 ° direction is detected by the radiation image detector 15. Next, a radiation image signal is read from the radiation image detector 15 by the detector controller 33. After predetermined signal processing is performed on the radiographic image signal, the radiographic image signal is stored in the radiographic image storage unit 8 b of the computer 8.

次にアームコントローラ31は、アーム部13を一旦初期位置に戻した後、アーム部13をその初期位置から−θ回転させる制御信号を出力する。それにより、アーム部13が初期位置から−2°回転する。   Next, the arm controller 31 once returns the arm unit 13 to the initial position, and then outputs a control signal for rotating the arm unit 13 by −θ from the initial position. As a result, the arm 13 rotates by −2 ° from the initial position.

続いて制御部8aは、放射線源コントローラ32および検出器コントローラ33に対して、放射線の照射と放射線画像信号の読出しを行うよう制御信号を出力する。そこで、この制御信号に応じて放射線源17から放射線が射出され、乳房を−2°方向から撮影した放射線画像信号が放射線画像検出器15によって検出される。次いで検出器コントローラ33によって放射線画像検出器15から放射線画像信号が読み出される。その放射線画像信号に対して所定の信号処理が施された後、その放射線画像信号がコンピュータ8の放射線画像記憶部8bに記憶される。   Subsequently, the control unit 8a outputs a control signal to the radiation source controller 32 and the detector controller 33 so as to perform radiation irradiation and readout of the radiation image signal. Therefore, radiation is emitted from the radiation source 17 according to this control signal, and a radiation image signal obtained by imaging the breast from the −2 ° direction is detected by the radiation image detector 15. Next, a radiation image signal is read from the radiation image detector 15 by the detector controller 33. After predetermined signal processing is performed on the radiographic image signal, the radiographic image signal is stored in the radiographic image storage unit 8 b of the computer 8.

このようにして、互いに視差のある2つの放射線画像が得られる。   In this way, two radiographic images with parallax are obtained.

なお本実施形態においては、立体視画像を構成する2つの放射線画像を、図2に示すX−Z面内で放射線照射方向を変えることによって撮影しているが、その他の方向に放射線照射方向を変えて複数の放射線画像を撮影してもよい。すなわち、例えば図2に示すY−Z面(図2の紙面に対して垂直な面)内で放射線照射方向を変えることによって複数の放射線画像を撮影してもよい。   In the present embodiment, two radiographic images constituting a stereoscopic image are taken by changing the radiation irradiation direction in the XZ plane shown in FIG. 2, but the radiation irradiation direction is set in the other direction. Alternatively, a plurality of radiation images may be taken. That is, for example, a plurality of radiographic images may be taken by changing the radiation irradiation direction in the YZ plane (plane perpendicular to the paper surface of FIG. 2) shown in FIG.

<表示処理>
次に、この乳房画像撮影表示システム1における表示処理について説明する。
上述した撮影によって放射線画像記憶部8bに記憶された2つの放射線画像信号に基づいて、被検者の乳房Mの立体視画像がモニタ9に表示される。つまり、この立体視画像は、上述の2回の撮影によって得られた2つの放射線画像によって構成される。より具体的には、例えば、1回目の撮影によって得られた放射線画像を立体視画像の右目用画像として利用し、2回目の撮影によって得られた放射線画像を立体視画像の左目用画像として利用する。
<Display processing>
Next, display processing in the breast image photographing display system 1 will be described.
A stereoscopic image of the subject's breast M is displayed on the monitor 9 based on the two radiographic image signals stored in the radiographic image storage unit 8b by the above-described imaging. That is, this stereoscopic image is composed of two radiographic images obtained by the above-described two imaging operations. More specifically, for example, the radiographic image obtained by the first imaging is used as the right-eye image of the stereoscopic image, and the radiographic image obtained by the second imaging is used as the left-eye image of the stereoscopic image. To do.

観察者は、乳房Mの立体視画像の表示指示を入力部7によって入力する。その表示指示に応じ、表示制御部8cによって放射線画像記憶部8bから被検者の2枚の放射線画像信号が読み出される。   The observer inputs an instruction to display a stereoscopic image of the breast M through the input unit 7. In response to the display instruction, two radiation image signals of the subject are read from the radiation image storage unit 8b by the display control unit 8c.

そして、表示制御部8cによって読み出された放射線画像信号に対して、選択部8d、抽出部8eおよび処理部8fにおいて所定の信号処理が施される。   Then, the radiographic image signal read out by the display control unit 8c is subjected to predetermined signal processing in the selection unit 8d, the extraction unit 8e, and the processing unit 8f.

この信号処理は例えば以下のように実施される。なお、図6には、便宜上右目用画像の信号処理を説明する図を示しているが、信号処理は右目用画像および左目用画像の両方に施される。まず、図6Aに示すように選択部8dによって、放射線画像信号に基づいた右目用画像および左目用画像のどちらにおいても視認することができ、かつ立体視しやすい被写体の部分である、画像の物理特性の変化量が大きい特定部分が選択される。図6Aでは、乳房Mの放射線画像XR1中の石灰化CおよびワイヤフックFが特定部分として選択されている。そして、選択した特定部分の位置情報が抽出部8eに出力される。その後、抽出部8eによって、当該特定部分を含む右目用画像上の第1の特定領域が抽出される。図6Aでは、右目用画像から当該特定部分を包含するような特定領域R5が抽出されている。そして、抽出した特定領域の位置情報が処理部8fに出力される。その後、処理部8fによって、右目用画像のうち当該特定領域以外の領域である処理対象領域に、当該特定領域R5との対比において当該処理対象領域を目立たなくする画像処理が施される。例えば処理部8fは、図6Bに示すように、当該処理対象領域に対応した部分の明度(輝度)を下げるようなマスク画像XRmを生成する。このマスク画像XRmが右目用画像に重畳されることにより、特定領域R5以外の領域が目立たなくなった右目用画像が得られる(図6C)。   This signal processing is performed as follows, for example. FIG. 6 is a diagram for explaining the signal processing of the right-eye image for convenience, but the signal processing is performed on both the right-eye image and the left-eye image. First, as shown in FIG. 6A, the selection unit 8d can visually recognize both the right-eye image and the left-eye image based on the radiographic image signal, and is a physical part of the subject that is easily stereoscopically viewed. A specific portion having a large amount of change in characteristics is selected. In FIG. 6A, the calcification C and the wire hook F in the radiographic image XR1 of the breast M are selected as specific portions. Then, the position information of the selected specific part is output to the extraction unit 8e. Thereafter, the extraction unit 8e extracts a first specific region on the right-eye image including the specific portion. In FIG. 6A, a specific region R5 that includes the specific portion is extracted from the right-eye image. Then, the extracted position information of the specific area is output to the processing unit 8f. Thereafter, the processing unit 8f performs image processing that makes the processing target area inconspicuous in the processing target area that is an area other than the specific area in the right-eye image in comparison with the specific area R5. For example, as illustrated in FIG. 6B, the processing unit 8f generates a mask image XRm that lowers the brightness (luminance) of a portion corresponding to the processing target region. By superimposing the mask image XRm on the right-eye image, a right-eye image in which an area other than the specific area R5 is inconspicuous is obtained (FIG. 6C).

また、左目用画像についても、上記と同じ特定部分について同様な手順を得ることにより、当該特定部分を包含する特定領域以外の領域である領域が目立たなくなった左目用画像が得られる。表示制御部8cは、上記のように画像処理が施された右目用画像および左目用画像を受け取り、これらから構成される立体視画像をモニタ9に立体視表示する。   As for the left-eye image, by obtaining the same procedure for the same specific portion as described above, a left-eye image in which a region other than the specific region including the specific portion is inconspicuous is obtained. The display control unit 8c receives the image for the right eye and the image for the left eye that have been subjected to the image processing as described above, and stereoscopically displays a stereoscopic image composed of these images on the monitor 9.

観察者はまず、特定領域以外の領域が目立たなくなった立体視画像に基づいて立体視を試みる。この際、立体視画像中の目立たせられかつ立体視しやすい特定領域に両眼の注意がいく。これにより、処理対象領域が観察者の立体視に与える影響を小さくすることができ、立体視を妨げる両眼の視野闘争を低減することができる。したがって、観察者は、円滑に当該立体視画像の立体視を行うことができる。そして、観察者が立体視できた後、観察者は入力部7を用いて、立体視できたことを表示制御部8cに知らせる操作を行う。そのような操作を感知した場合、表示制御部8cは、上記の画像処理を解除して、上記画像処理が施されていない状態の右目用画像および左目用画像から構成される立体視画像をモニタ9に立体視表示する。   First, the observer tries stereoscopic viewing based on a stereoscopic image in which regions other than the specific region are not noticeable. At this time, both eyes pay attention to a specific area that is conspicuous in the stereoscopic image and is easily stereoscopically viewed. Thereby, the influence which a process target area has on a viewer's stereoscopic vision can be made small, and the binocular rivalry which prevents a stereoscopic vision can be reduced. Therefore, the observer can smoothly stereoscopically view the stereoscopic image. Then, after the observer can stereoscopically view, the observer uses the input unit 7 to perform an operation of notifying the display control unit 8c that stereoscopic viewing has been achieved. When such an operation is detected, the display control unit 8c cancels the above-described image processing, and monitors a stereoscopic image composed of the right-eye image and the left-eye image that has not been subjected to the image processing. 9 is displayed stereoscopically.

上記画像処理が施されていない状態の立体視画像を立体視表示するためには、再度、放射線画像記憶部8bから放射線画像信号を読み込めばよい。また、画像処理が施された立体視画像に基づいて元の立体視画像を生成する処理を行ってもよい。画像処理が解除された場合、観察者は、立体視状態を維持しながら被写体の放射線画像のすべてを確認することができる。   In order to stereoscopically display a stereoscopic image that has not been subjected to the image processing, a radiographic image signal may be read from the radiographic image storage unit 8b again. Moreover, you may perform the process which produces | generates the original stereoscopic image based on the stereoscopic image to which the image process was performed. When the image processing is canceled, the observer can confirm all of the radiographic images of the subject while maintaining the stereoscopic state.

以上より、本発明に係る立体視画像表示方法および立体視画像表示装置によれば、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像の表示において、右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、この特定部分を含む右目用画像上の第1の特定領域、およびこの特定部分を含む左目用画像上の第2の特定領域を抽出し、右目用画像のうち第1の特定領域以外の領域である第1の処理対象領域、および左目用画像のうち第2の特定領域以外の領域である第2の処理対象領域に画像処理を施し、上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、上記画像処理を解除するようにしたので、立体視しやすい上記特定部分を立体視した状態をそのまま保ちながら、観察対象である被写体全体の立体視画像の立体視に移行することができる。この際、立体視を開始する時点においては、視認できる領域を立体視画像のうち特定部分を含む特定領域に限定しているため、両眼の視野闘争を低減することができる。この結果、立体視画像表示方法および立体視画像表示装置において、従来の方法に比して、立体視をより迅速かつ容易にして観察者への負荷をより軽減することが可能となる。   As described above, according to the stereoscopic image display method and the stereoscopic image display device according to the present invention, a stereoscopic image composed of a right-eye image and a left-eye image with a parallax captured from a subject can be stereoscopically viewed. In the display of the stereoscopic image to be displayed, a specific part that is visible in both the right-eye image and the left-eye image and that has a large amount of change in physical properties of the image is selected, and this specific part The first specific area on the right-eye image including the first specific area and the second specific area on the left-eye image including the specific portion are extracted, and the first specific area other than the first specific area in the right-eye image is extracted. The image processing target area and the second processing target area that is an area other than the second specific area in the left-eye image are subjected to image processing, and the right-eye image subjected to the image processing and the image processing are performed. Left Since the stereoscopic image composed of the images for use is displayed so as to be stereoscopically viewable, and the observer can stereoscopically view the image, the image processing is canceled, so that the specific part that is easily stereoscopically viewed is stereoscopically viewed. While maintaining the state as it is, it is possible to shift to a stereoscopic view of a stereoscopic image of the entire subject to be observed. At this time, at the time when the stereoscopic vision is started, the visible region is limited to the specific region including the specific part in the stereoscopic image, so that the binocular rivalry can be reduced. As a result, in the stereoscopic image display method and the stereoscopic image display device, it is possible to make stereoscopic viewing more quickly and easily and further reduce the burden on the observer as compared with the conventional method.

上記の実施形態では、本発明の立体視画像表示方法および立体視画像表示装置を乳房画像撮影表示システムに適用した場合について説明したが、当然ながら本発明はこれに限られるものではない。例えば、立体視画像表示方法を利用したその他の医療診断装置、デジタルカメラおよびディスプレイ装置等にも適用することができる。   In the above embodiment, the case where the stereoscopic image display method and the stereoscopic image display apparatus of the present invention are applied to a breast image photographing display system has been described, but the present invention is naturally not limited to this. For example, the present invention can be applied to other medical diagnostic apparatuses, digital cameras, display apparatuses, and the like that use a stereoscopic image display method.

1 乳房画像撮影表示システム
7 入力部
8 コンピュータ
8a 制御部
8b 放射線画像記憶部
8c 表示制御部
8d 選択部
8e 抽出部
8f 処理部
9 モニタ
10 乳房画像撮影装置
11 基台
12 回転軸
13 アーム部
14 撮影台
15 放射線画像検出器
16 放射線照射部
17 放射線源
18 圧迫板
19 移動機構
20 支持部
C 石灰化
F ワイヤフック
Le 足
M 乳房
N ニップルマーカ
P プレート
R1〜R8 特定領域
W ワイヤ
XR1、XR2 放射線画像
XRm マスク画像
θ 撮影角度
DESCRIPTION OF SYMBOLS 1 Mammography imaging display system 7 Input part 8 Computer 8a Control part 8b Radiation image memory | storage part 8c Display control part 8d Selection part 8e Extraction part 8f Processing part 9 Monitor 10 Mammography apparatus 11 Base 12 Rotating shaft 13 Arm part 14 Photographing Table 15 Radiation image detector 16 Radiation irradiation unit 17 Radiation source 18 Compression plate 19 Movement mechanism 20 Support unit C Calcification F Wire hook Le Foot M Breast N Nipple marker P Plates R1 to R8 Specific area W Wires XR1, XR2 Radiation image XRm Mask image θ Shooting angle

Claims (7)

被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像表示方法において、
前記右目用画像および前記左目用画像のどちらにおいても視認することができる前記被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、
該特定部分を含む前記右目用画像上の第1の特定領域、および前記特定部分を含む前記左目用画像上の第2の特定領域を抽出し、
前記右目用画像のうち前記第1の特定領域以外の領域である第1の処理対象領域、および前記左目用画像のうち前記第2の特定領域以外の領域である第2の処理対象領域に画像処理を施し、
前記画像処理が施された前記右目用画像および前記画像処理が施された前記左目用画像から構成される立体視画像を立体視可能に表示し、
観察者が立体視できた後、前記画像処理を解除することを特徴とする立体視画像表示方法。
In a stereoscopic image display method for displaying a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from a subject so as to enable stereoscopic viewing,
Selecting a specific portion of the subject that can be visually recognized in both the right-eye image and the left-eye image, and having a large amount of change in physical properties of the image;
Extracting a first specific region on the right-eye image including the specific portion and a second specific region on the left-eye image including the specific portion;
An image is displayed in a first processing target region that is a region other than the first specific region in the right eye image, and in a second processing target region that is a region other than the second specific region in the left eye image. Processing,
A stereoscopic image including the right-eye image subjected to the image processing and the left-eye image subjected to the image processing is displayed so as to be stereoscopically viewable;
A stereoscopic image display method, wherein the image processing is canceled after an observer can stereoscopically view the image.
前記特定部分として、前記右目用画像および前記左目用画像の中で画素値の変化量が大きい部分を選択することを特徴とする請求項1に記載の立体視画像表示方法。   The stereoscopic image display method according to claim 1, wherein a part having a large amount of change in pixel value is selected as the specific part from the right-eye image and the left-eye image. 前記特定部分として、点状の部分または線状の部分を選択することを特徴とする請求項2に記載の立体視画像表示方法。   The stereoscopic image display method according to claim 2, wherein a point-like portion or a linear portion is selected as the specific portion. 前記画像処理が、前記処理対象領域をぼかす処理、前記処理対象領域のコントラストを低くする処理、前記処理対象領域の彩度または明度を下げる処理、および前記処理対象領域の色相を寒色系に近づける処理のうち少なくとも1つの処理であることを特徴とする請求項1から3に記載の立体視画像表示方法。   The image processing includes processing for blurring the processing target region, processing for reducing the contrast of the processing target region, processing for reducing saturation or lightness of the processing target region, and processing for bringing the hue of the processing target region closer to a cold color system. The stereoscopic image display method according to claim 1, wherein at least one of the processes is performed. 画像を表示する表示部と、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を前記表示部に立体視可能に表示させる表示制御部とを備えた立体視画像表示装置において、
前記右目用画像および前記左目用画像のどちらにおいても視認することができる前記被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択する選択部と、
該特定部分を含む前記右目用画像上の第1の特定領域、および前記特定部分を含む前記左目用画像上の第2の特定領域を抽出する抽出部と、
前記右目用画像のうち前記第1の特定領域以外の領域である第1の処理対象領域、および前記左目用画像のうち前記第2の特定領域以外の領域である第2の処理対象領域に画像処理を施す処理部とを備え、
前記表示制御部が、前記画像処理が施された前記右目用画像および前記画像処理が施された前記左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、前記画像処理を解除するものであることを特徴とする立体視画像表示装置。
A stereoscopic unit comprising: a display unit that displays an image; and a display control unit that displays a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from the subject so that the stereoscopic image can be displayed on the display unit In the visual image display device,
A selection unit that selects a specific part of the subject that can be visually recognized in both the right-eye image and the left-eye image and has a large amount of change in physical characteristics of the image;
An extraction unit that extracts a first specific region on the right-eye image including the specific portion and a second specific region on the left-eye image including the specific portion;
An image is displayed in a first processing target region that is a region other than the first specific region in the right eye image, and in a second processing target region that is a region other than the second specific region in the left eye image. A processing unit for performing processing,
The display control unit displays a stereoscopic image composed of the image for the right eye subjected to the image processing and the image for the left eye subjected to the image processing so that the viewer can stereoscopically view the stereoscopic image. Then, the stereoscopic image display device is for canceling the image processing.
前記選択部が、前記特定部分として、前記右目用画像および前記左目用画像の中で画素値の変化量が大きい部分を選択するものであることを特徴とする請求項5に記載の立体視画像表示装置。   The stereoscopic image according to claim 5, wherein the selection unit selects, as the specific part, a part having a large amount of change in pixel value in the right-eye image and the left-eye image. Display device. 前記選択部が、前記特定部分として、点状の部分または線状の部分を選択するものであることを特徴とする請求項6に記載の立体視画像表示装置。   The stereoscopic image display apparatus according to claim 6, wherein the selection unit is configured to select a dotted portion or a linear portion as the specific portion.
JP2010219281A 2010-09-29 2010-09-29 Stereoscopic image display method and stereoscopic image display device Withdrawn JP2012075001A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2010219281A JP2012075001A (en) 2010-09-29 2010-09-29 Stereoscopic image display method and stereoscopic image display device
PCT/JP2011/072046 WO2012043547A1 (en) 2010-09-29 2011-09-27 Stereoscopic image display method and stereoscopic image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010219281A JP2012075001A (en) 2010-09-29 2010-09-29 Stereoscopic image display method and stereoscopic image display device

Publications (1)

Publication Number Publication Date
JP2012075001A true JP2012075001A (en) 2012-04-12

Family

ID=45892987

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010219281A Withdrawn JP2012075001A (en) 2010-09-29 2010-09-29 Stereoscopic image display method and stereoscopic image display device

Country Status (2)

Country Link
JP (1) JP2012075001A (en)
WO (1) WO2012043547A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150086106A1 (en) * 2012-06-15 2015-03-26 Panasonic Intellectual Property Management Co., Ltd. Image-data processing device and image-data processing method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3100501B2 (en) * 1994-01-18 2000-10-16 シャープ株式会社 Binocular television device
JP4530803B2 (en) * 2004-10-28 2010-08-25 ▲吉▼良 雅貴 Stereoscopic image generation apparatus and stereoscopic image generation method
ES2323287T3 (en) * 2005-01-12 2009-07-10 Koninklijke Philips Electronics N.V. PERCEPTION OF DEPTH.

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150086106A1 (en) * 2012-06-15 2015-03-26 Panasonic Intellectual Property Management Co., Ltd. Image-data processing device and image-data processing method
US9646380B2 (en) * 2012-06-15 2017-05-09 Panasonic Intellectual Property Management Co., Ltd. Image-data processing device and image-data processing method

Also Published As

Publication number Publication date
WO2012043547A1 (en) 2012-04-05

Similar Documents

Publication Publication Date Title
CN106796344B (en) System, arrangement and the method for the enlarged drawing being locked on object of interest
JP5486437B2 (en) Stereoscopic image display method and apparatus
US20130300737A1 (en) Stereoscopic image generating apparatus, stereoscopic image generating method, and stereoscopic image generating program
JP2011182808A (en) Medical image generating apparatus, medical image display apparatus, medical image generating method and program
WO2012043547A1 (en) Stereoscopic image display method and stereoscopic image display device
WO2012043480A1 (en) Stereovision image display method and stereovision image display device
WO2012056695A1 (en) Three-dimensional image display device, method, and program
WO2012132320A1 (en) Stereoscopic image display apparatus and stereoscopic image display method
WO2012056718A1 (en) Three-dimensional radiation image display device, method, and program
WO2012105188A1 (en) Stereoscopic image display device and method, and program
WO2012102184A1 (en) Radiograph display apparatus and method
WO2012056677A1 (en) Three-dimensional image display device
WO2012096221A1 (en) Radiograph display apparatus and method
US20120076261A1 (en) Radiological image displaying apparatus and method
WO2012102022A1 (en) Stereoscopic image display method, and stereoscopic image display control apparatus and program
JP2012178626A (en) Stereoscopic radiation image display method and device
WO2012002280A1 (en) Method and device for displaying stereoscopic image
WO2012114758A1 (en) Radiographic imaging method and device
WO2012056692A1 (en) 3d image display device and 3d image display method
WO2012029726A1 (en) Method and apparatus for imaging/displaying breast image
JPWO2019230115A1 (en) Medical image processing device
JP2012095274A (en) Stereoscopic image display device and stereoscopic image display method
WO2012056721A1 (en) 3d image display method, 3d display control device, and program
WO2012132443A1 (en) Image display device
WO2012132453A1 (en) Radiological breast-image display method, radiological breast-image display device, and programme

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20131203