WO2012043547A1 - 立体視画像表示方法および立体視画像表示装置 - Google Patents

立体視画像表示方法および立体視画像表示装置 Download PDF

Info

Publication number
WO2012043547A1
WO2012043547A1 PCT/JP2011/072046 JP2011072046W WO2012043547A1 WO 2012043547 A1 WO2012043547 A1 WO 2012043547A1 JP 2011072046 W JP2011072046 W JP 2011072046W WO 2012043547 A1 WO2012043547 A1 WO 2012043547A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
stereoscopic
processing
eye image
region
Prior art date
Application number
PCT/JP2011/072046
Other languages
English (en)
French (fr)
Inventor
孝夫 桑原
山田　雅彦
伊藤　渡
大田　恭義
神谷　毅
哲郎 楠木
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Publication of WO2012043547A1 publication Critical patent/WO2012043547A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/022—Stereoscopic imaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/211—Image signal generators using stereoscopic image cameras using a single 2D image sensor using temporal multiplexing

Definitions

  • the present invention relates to a stereoscopic image display method and a stereoscopic image display apparatus for displaying a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from a subject so as to be stereoscopically viewable.
  • a stereoscopic image or a stereo image composed of a right-eye image and a left-eye image having parallax.
  • Such a stereoscopic image is generated based on a plurality of images having parallax obtained by photographing the same subject from different directions.
  • stereoscopic images is used not only in the fields of digital cameras and televisions, but also in the field of radiographic imaging. That is, the patient is irradiated with radiation from different directions, the radiation transmitted through the subject is detected by a radiation image detector, and a plurality of radiation images having parallax are obtained, and these radiations are acquired. A stereoscopic image is generated based on the image. And by generating a stereoscopic image in this way, a radiographic image with a sense of depth can be observed, and a radiographic image more suitable for diagnosis can be observed.
  • stereoscopic vision is performed by synthesizing two images of a stereoscopic image in the brain and recognizing them as a three-dimensional image. Therefore, in general, stereoscopic viewing based on such a stereoscopic image is influenced by familiarity and weakness, and depending on the observer, it takes time and feels tired.
  • Patent Literature 1 extracts a pair of common points in the right-eye image and the left-eye image that are not associated with each other from each of the right-eye image and the left-eye image, and selects one of the two regions.
  • a method for reducing the binocular rivalry in stereoscopic vision and reducing the observer's feeling of fatigue by eliminating them is disclosed.
  • Patent Document 1 even if such an area is excluded, there are cases where only a small area of the stereoscopic image is excluded. Therefore, the method as disclosed in Patent Document 1 may not be sufficient as assistance for realizing quick and easy stereoscopic vision.
  • the present invention has been made in view of the above problems, and in a stereoscopic image display method and a stereoscopic image display device for displaying a stereoscopic image in a stereoscopic manner, stereoscopic viewing can be performed more quickly and easily to an observer.
  • An object of the present invention is to provide a stereoscopic image display method and a stereoscopic image display apparatus that can further reduce the load.
  • a stereoscopic image display method includes: In a stereoscopic image display method for displaying a stereoscopic image composed of a right-eye image and a left-eye image with parallax captured from a subject so as to enable stereoscopic viewing, Select a specific portion of the subject that can be visually recognized in both the right-eye image and the left-eye image and having a large amount of change in the physical characteristics of the image, Extracting a first specific region on the right-eye image including the specific portion and a second specific region on the left-eye image including the specific portion; Image processing is performed on a first processing target region that is a region other than the first specific region in the right-eye image and a second processing target region that is a region other than the second specific region in the left-eye image; A stereoscopic image composed of the right-eye image subjected to the image processing and the left-eye image subjected to the image processing is displayed so as to be stereoscopically viewable.
  • display stereoscopically or “display stereoscopically” means that the constituent images of a stereoscopic image are displayed side by side, or the constituent images of a stereoscopic image are periodically switched and displayed. Or displaying on a lenticular display, or displaying a constituent image of a stereoscopic image while satisfying all the requirements for stereoscopic viewing on the stereoscopic image display side.
  • “Release image processing” means that a stereoscopic image composed of a right-eye image and a left-eye image that has not been subjected to image processing is stereoscopically displayed.
  • “Physical characteristics of an image” includes a pixel value, image intensity, frequency characteristics, and the like.
  • the stereoscopic image display method selecting a portion where the amount of change in the pixel value is large in the right-eye image and the left-eye image, and selecting a dotted portion or a linear portion. Of these, at least one of the specific portions is preferred.
  • the image processing includes processing for blurring the processing target region, processing for reducing the contrast of the processing target region, processing for reducing the saturation or brightness of the processing target region, and processing target region It is preferable that at least one of the processes for bringing the hue of the color closer to the cold color system.
  • the stereoscopic image display apparatus is Stereoscopic display including a display unit that displays an image, and a display control unit that displays a stereoscopic image including a parallax right-eye image and a left-eye image obtained by capturing an image of the subject on the display unit in a stereoscopic manner.
  • a selection unit that selects a specific part of a subject that can be visually recognized in both the right-eye image and the left-eye image and has a large amount of change in physical characteristics of the image;
  • An extraction unit for extracting a first specific region on the right-eye image including the specific portion and a second specific region on the left-eye image including the specific portion;
  • Processing for performing image processing on a first processing target region that is a region other than the first specific region in the image for the right eye and a second processing target region that is a region other than the second specific region in the image for the left eye
  • the selection unit selects a portion having a large amount of change in the pixel value in the right-eye image and the left-eye image, and a dotted portion or a linear portion. It is preferable that at least one of the selections be a specific portion.
  • a stereoscopic image that displays a stereoscopic image composed of a right-eye image and a left-eye image that are captured with a parallax in a stereoscopic manner is displayed in a stereoscopic manner.
  • a specific part that is visible in both the right-eye image and the left-eye image and has a large amount of change in physical properties of the image is selected, and the right eye including the specific part is selected.
  • the first specific area on the image for use and the second specific area on the image for the left eye including the specific portion are extracted, and the first processing target that is an area other than the first specific area in the image for the right eye
  • the left eye image subjected to the image processing by performing image processing on the second processing target region that is a region other than the second specific region among the region and the left eye image, and the left eye image subjected to the image processing image 3D images are displayed so that they can be viewed stereoscopically, and after the observer has been able to view stereoscopically, the above-mentioned image processing is canceled.
  • the visible region is limited to the specific region including the specific part in the stereoscopic image, so that the binocular rivalry can be reduced.
  • the stereoscopic image display method and the stereoscopic image display device it is possible to make stereoscopic viewing more quickly and easily and further reduce the burden on the observer as compared with the conventional method.
  • FIG. 1 is a schematic configuration diagram of a breast image photographing display system using an embodiment of a stereoscopic image display method and a stereoscopic image display device of the present invention. It is a schematic sectional drawing which shows the arm part of the mammography imaging display system shown in FIG. It is a block diagram which shows schematic structure inside the computer of the breast image radiographing display system shown in FIG. (A) It is a figure explaining the part which can become a specific part which is easy to stereoscopically view in the radiographic image of a breast. (B) It is a figure explaining the part which can become a specific part which is easy to stereoscopically view in the radiographic image of a leg.
  • (A) It is a figure explaining the specific area
  • (B) It is a figure explaining the specific area extracted in the radiographic image of a leg. It is a figure explaining the process which makes the specific area in a stereoscopic vision image stand out (making a process target area inconspicuous).
  • Steposcopic image display method and stereoscopic image display apparatus Hereinafter, a breast image photographing and displaying system using an embodiment of a stereoscopic image display method and a stereoscopic image display apparatus of the present invention will be described with reference to the drawings.
  • a breast image radiographing display system 1 of the present embodiment includes a mammography apparatus 10, a computer 8 connected to the mammography apparatus 10, a monitor 9 connected to the computer 8, and an input unit. 7.
  • the mammography apparatus 10 includes a base 11, a rotary shaft 12 that can move in the vertical direction (Z direction) relative to the base 11, and a rotary shaft 12. 11 and an arm portion 13 connected to the arm portion 13.
  • FIG. 2 shows the front shape of the arm portion 13 as viewed from the right direction (y-axis positive direction) in FIG.
  • the arm portion 13 is shaped like an alphabet C, and a radiation stand 16 is attached to one end of the arm portion 13 so as to face the photographing stand 14 at the other end.
  • the rotation and vertical movement of the arm unit 13 are controlled by an arm controller 31 incorporated in the base 11.
  • a radiation image detector 15 such as a flat panel detector and a detector controller 33 that controls reading of a charge signal from the radiation image detector 15 are provided. Further, in the imaging table 14, a charge amplifier that converts the charge signal read from the radiation image detector 15 into a voltage signal, a correlated double sampling circuit that samples the voltage signal output from the charge amplifier, a voltage A circuit board or the like provided with an AD conversion unit for converting a signal into a digital signal is also provided, but detailed description thereof is omitted.
  • the imaging table 14 is configured to be rotatable with respect to the arm unit 13, so that even when the arm unit 13 is rotated about the rotation axis 12 with respect to the base 11, the imaging table 14 is Is maintained in a certain orientation.
  • the radiation image detector 15 can repeatedly perform recording and reading of a radiation image, and may use a so-called direct type radiation image detector that directly receives radiation and generates charges. Alternatively, a so-called indirect radiation image detector that converts radiation once into visible light and converts the visible light into a charge signal may be used.
  • a radiation image signal readout method a radiation image signal is read out by turning on and off a TFT (thin film transistor) switch, or a radiation image is emitted by irradiating reading light. It is desirable to use a so-called optical readout system in which a signal is read out, but the present invention is not limited to this, and other systems may be used.
  • the radiation irradiation unit 16 is provided with a radiation source 17 and a radiation source controller 32.
  • the radiation source controller 32 controls the timing of irradiating radiation from the radiation source 17 and the radiation generation conditions (tube current, time, tube current time product, etc.) in the radiation source 17.
  • a compression plate 18 that is disposed above the imaging table 14 and presses and compresses the breast M, a support unit 20 that supports the compression plate 18, and a support unit 20 in the vertical direction (Z And a moving mechanism 19 that moves in a direction).
  • the position of the compression plate 18 and the compression pressure are controlled by the compression plate controller 34.
  • the computer 8 that controls the operation of the mammography apparatus 10 includes a central processing unit (CPU) and a storage device such as a semiconductor memory, a hard disk, and an SSD.
  • CPU central processing unit
  • storage device such as a semiconductor memory, a hard disk, and an SSD.
  • FIG. A unit 8a, a radiation image storage unit 8b, a display control unit 8c, a selection unit 8d, an extraction unit 8e, and a processing unit 8f are configured.
  • the control unit 8a outputs predetermined control signals to the various controllers 31 to 35 to control the entire system. A specific control method will be described in detail later.
  • the radiation image storage unit 8b stores the radiation image signal acquired by the radiation image detector 15.
  • the display control unit 8c reads out the radiographic image signal stored in the radiographic image storage unit 8b, and generates a stereoscopic image composed of the radiographic image for the right eye and the radiographic image for the left eye based on the radiographic image signal. . Then, the display control unit 8c outputs the generated stereoscopic image to the selection unit 8d, the extraction unit 8e, and the processing unit 8f, and causes each of them to execute necessary processing related to the stereoscopic image.
  • the display control unit 8c receives a stereoscopic image on which necessary processing has been executed, and displays the stereoscopic image of the breast M on the monitor 9 so as to enable stereoscopic viewing (stereoscopic display).
  • the display control unit 8c displays a stereoscopic image including a right-eye image that has been subjected to image processing, which will be described later, and a left-eye image that has been subjected to the image processing, in a stereoscopic manner.
  • the display control unit 8c cancels the image processing after the observer can stereoscopically view. For example, the display control unit 8c determines whether or not the observer can stereoscopically view based on an operation by the observer on the breast image capturing and displaying system 1 indicating that the observer has stereoscopically viewed. Such an operation can be performed by the input unit 7 or the like. Alternatively, the display control unit 8c determines whether or not the observer has been stereoscopically viewed by pretending that the observer has been able to stereoscopically view when a predetermined time set in advance has elapsed. In such a case, an operation by an observer necessary for the former case can be omitted.
  • the selection unit 8d selects a specific portion that can be visually recognized in both the right-eye image and the left-eye image and that is a portion of a subject that is easily stereoscopically viewed, and has a large amount of change in physical characteristics of the image. .
  • at least one of selecting a portion where the amount of change in the pixel value is large in the right-eye image and the left-eye image and selecting a dotted portion or a linear portion is set as the specific portion. It is preferable.
  • the selection unit 8d may select a plurality of specific parts. However, from the viewpoint of facilitating and facilitating stereoscopic viewing, it is preferable that there is only one specific part in order to minimize the information given to both eyes.
  • 4A for example, in the radiographic image XR1 of the breast M, the contour of the breast M itself, the nipple marker N when performing radiography, the calcification C deposited in the breast M, and Examples thereof include a wire hook F for breast M surgery.
  • 4B for example, in the radiographic image XR2 of the foot Le, the contours of the bones (B, B1, and B2), the fixing plate P, the wire W, and the like can be cited. it can. Then, the selection unit 8d outputs the position information of the selected specific part to the extraction unit 8e.
  • the extraction unit 8e extracts the first specific region on the right-eye image including the specific portion selected by the selection unit 8d and the second specific region on the left-eye image including the specific portion.
  • the first specific area and the second specific area are areas including the specific portion.
  • the first specific area and the second specific area are preferably the same in size and shape in consideration of the binocular balance in stereoscopic vision. However, the size and shape are not necessarily the same. This is because stereoscopic viewing is possible if the above-described specific part is included in these specific regions.
  • the region R1 that includes the contour of the breast M itself, and the nipple marker N when performing radiography are included.
  • a region R2 including a calcification C deposited in the breast M a region R4 including a wire hook F for surgical operation of the breast M, and a plurality of specific portions as described above.
  • Examples of such a region R5 can be given.
  • the radiographic image XR2 of the foot Le includes a region R6 and a plate P that include the outline of the bone (B, B1, and B2).
  • Examples of the region R7 and the region R8 including the wire W can be given.
  • the extraction unit 8e outputs the extracted position information of the specific area to the processing unit 8f.
  • the processing unit 8f includes a first processing target region that is a region other than the first specific region in the right eye image and a second processing target region that is a region other than the second specific region in the left eye image. Then, image processing is performed to make both the processing target areas inconspicuous in comparison with the two specific areas.
  • the “inconspicuous” state is, for example, a state in which it is difficult to focus attention, such as being blurred or blurred, a state in which light and darkness are not clear and difficult to watch, and a color is plain (the contrast of saturation is small).
  • the image processing includes at least one of a process for blurring the processing target area, a process for reducing the contrast of the processing target area, a process for reducing the saturation or lightness of the processing target area, and a process for bringing the hue of the processing target area closer to a cold color system.
  • One treatment is preferred.
  • the processing target area By making the processing target area inconspicuous, the specific area becomes relatively conspicuous. Note that it is not necessary to be able to clearly distinguish the degree of conspicuousness of the specific region (the degree of inconspicuousness of the processing target region) at the boundary between the specific region and the processing target region. For example, the processing target area may gradually become inconspicuous as the distance from the specific area starts from the boundary.
  • a blurred image is less noticeable than a sharp and clear image.
  • various methods known in this technical field can be used. For example, when the contrast of the processing target region is lowered, for example, it is considered that the stronger contrast is more conspicuous than the surface painted with one color regardless of whether or not it is blurred.
  • An image is composed of pixels, and each pixel has information on hue, saturation, and lightness (three elements of color). Lowering the contrast means averaging the pixels, that is, bringing one of the values of hue, saturation, and brightness close to the values of the surrounding pixels.
  • the input unit 7 is composed of a pointing device such as a keyboard and a mouse, for example, and receives an input of shooting conditions and a shooting start instruction by the photographer. Further, if necessary, the input unit 7 specifies a specific part to be selected by the selection unit 8d when there are a plurality of parts that can be regarded as a specific part, or specifies the size or shape of the specific area extracted by the extraction unit 8e.
  • the processing unit 8f may be configured to specify image processing to be performed on the processing target area.
  • the monitor 9 is configured to stereoscopically display a stereoscopic image using two radiation image signals stored in the computer 8.
  • a configuration for stereoscopically displaying a stereoscopic image for example, radiation images based on two radiation image signals are displayed using two screens, and one of the radiations is displayed by using a half mirror, a polarizing glass, or the like. It is possible to adopt a configuration in which a stereoscopic image is stereoscopically displayed by causing an image to be visually recognized by the observer's right eye and the other radiation image being visually recognized by the observer's left eye.
  • two radiographic images may be displayed in a superimposed manner while being shifted by a predetermined amount of parallax, and the stereoscopic images may be stereoscopically displayed by observing them with a polarizing glass.
  • the right-eye image and the left-eye image may be alternately displayed on a single screen for stereoscopic display. In this case, it is necessary to see the monitor 9 through the stereoscopic glasses on the observer side.
  • the breast M is disposed on the imaging table 14, and the breast M is compressed with a predetermined pressure by the compression plate 18.
  • the arm unit 13 is set to an initial position in a direction perpendicular to the imaging table 14, that is, a position indicated by a solid line in FIG.
  • various imaging conditions for each subject are input by the input unit 7 and an input for instructing whether to capture a radiographic image as a stereoscopic image or a radiographic image as a normal two-dimensional image is input.
  • the control unit 8a stores a preset imaging angle ⁇ (the magnitude of the angle formed by the radiation irradiation axis with respect to the radiation detection surface normal: see FIG. 2).
  • the information of the photographing angle ⁇ is output to the arm controller 31.
  • the arm portion 13 is configured to rotate around the rotation shaft 12, and the rotation shaft 12 is disposed at substantially the same height as the radiation image detector 15. Therefore, as shown in FIG. 2, the radiation irradiation axes of the radiation sources 17 at different rotational positions intersect each other in the vicinity of the radiation image detector 15.
  • the present invention is not limited to this.
  • the arm portion 13 may be rotated so that the radiation irradiation axes intersect each other.
  • the arm controller 31 receives the information on the photographing angle ⁇ output from the control unit 8a, and outputs a control signal for rotating the arm unit 13 by + ⁇ from the initial position based on the information on the photographing angle ⁇ . Therefore, the arm portion 13 rotates + 2 ° in accordance with this control signal.
  • the control unit 8a outputs a control signal to the radiation source controller 32 and the detector controller 33 so as to perform radiation irradiation and readout of the radiation image signal. Therefore, radiation is emitted from the radiation source 17 in accordance with this control signal, and a radiation image signal obtained by photographing the breast from the + 2 ° direction is detected by the radiation image detector 15. Next, a radiation image signal is read from the radiation image detector 15 by the detector controller 33. After predetermined signal processing is performed on the radiographic image signal, the radiographic image signal is stored in the radiographic image storage unit 8 b of the computer 8.
  • the arm controller 31 once returns the arm 13 to the initial position, and then outputs a control signal for rotating the arm 13 by ⁇ from the initial position. As a result, the arm portion 13 is rotated by ⁇ 2 ° from the initial position.
  • control unit 8a outputs a control signal to the radiation source controller 32 and the detector controller 33 so as to perform radiation irradiation and readout of the radiation image signal. Therefore, radiation is emitted from the radiation source 17 in accordance with this control signal, and a radiation image signal obtained by imaging the breast from the ⁇ 2 ° direction is detected by the radiation image detector 15. Next, a radiation image signal is read from the radiation image detector 15 by the detector controller 33. After predetermined signal processing is performed on the radiographic image signal, the radiographic image signal is stored in the radiographic image storage unit 8 b of the computer 8.
  • the two radiation images constituting the stereoscopic image are taken by changing the radiation irradiation direction in the XZ plane shown in FIG. 2, but the radiation irradiation direction is set in the other direction.
  • a plurality of radiation images may be taken. That is, for example, a plurality of radiographic images may be taken by changing the radiation irradiation direction in the YZ plane (plane perpendicular to the paper surface of FIG. 2) shown in FIG.
  • a stereoscopic image of the subject's breast M is displayed on the monitor 9 based on the two radiographic image signals stored in the radiographic image storage unit 8b by the above-described imaging. That is, this stereoscopic image is composed of two radiographic images obtained by the above-described two imaging operations. More specifically, for example, the radiographic image obtained by the first imaging is used as the right-eye image of the stereoscopic image, and the radiographic image obtained by the second imaging is used as the left-eye image of the stereoscopic image. To do.
  • the observer inputs an instruction to display a stereoscopic image of the breast M through the input unit 7.
  • two radiation image signals of the subject are read from the radiation image storage unit 8b by the display control unit 8c.
  • predetermined signal processing is performed on the radiation image signal read out by the display control unit 8c in the selection unit 8d, the extraction unit 8e, and the processing unit 8f.
  • FIG. 6 is a diagram for explaining the signal processing of the right-eye image for convenience, but the signal processing is performed on both the right-eye image and the left-eye image.
  • the selection unit 8d can visually recognize both the right-eye image and the left-eye image based on the radiographic image signal, and is a part of the subject that is easily stereoscopically viewed. A specific portion having a large amount of change in characteristics is selected.
  • the calcification C and the wire hook F in the radiographic image XR1 of the breast M are selected as specific portions. Then, the position information of the selected specific part is output to the extraction unit 8e.
  • the extraction unit 8e extracts a first specific region on the right-eye image including the specific portion.
  • a specific region R5 that includes the specific portion is extracted from the right-eye image.
  • the extracted position information of the specific area is output to the processing unit 8f.
  • the processing unit 8f performs image processing that makes the processing target area inconspicuous in the processing target area that is an area other than the specific area in the right-eye image in comparison with the specific area R5.
  • the processing unit 8f generates a mask image XRm that lowers the brightness (luminance) of a portion corresponding to the processing target region. By superimposing the mask image XRm on the right-eye image, a right-eye image in which an area other than the specific area R5 is inconspicuous is obtained (FIG. 6C).
  • the display control unit 8c receives the image for the right eye and the image for the left eye that have been subjected to the image processing as described above, and stereoscopically displays a stereoscopic image composed of these images on the monitor 9.
  • the observer tries stereoscopic viewing based on the stereoscopic image in which the region other than the specific region is not noticeable.
  • both eyes pay attention to a specific area that is conspicuous in the stereoscopic image and is easily stereoscopically viewed.
  • the influence which a process target area has on a viewer's stereoscopic vision can be made small, and the binocular rivalry which prevents a stereoscopic vision can be reduced. Therefore, the observer can smoothly stereoscopically view the stereoscopic image.
  • the observer uses the input unit 7 to perform an operation of notifying the display control unit 8c that stereoscopic viewing has been achieved.
  • the display control unit 8c cancels the above-described image processing, and monitors a stereoscopic image composed of the right-eye image and the left-eye image that has not been subjected to the image processing. 9 is displayed stereoscopically.
  • a stereoscopic image composed of a right-eye image and a left-eye image with a parallax captured from a subject can be stereoscopically viewed.
  • a specific part that is visible in both the right-eye image and the left-eye image and that has a large amount of change in physical properties of the image is selected, and this specific part
  • the first specific area on the right-eye image including the first specific area and the second specific area on the left-eye image including the specific portion are extracted, and the first specific area other than the first specific area in the right-eye image is extracted.
  • the image processing target area and the second processing target area that is an area other than the second specific area in the left-eye image are subjected to image processing, and the right-eye image subjected to the image processing and the image processing are performed.
  • the Since the stereoscopic image including the eye image is displayed so as to be stereoscopically viewable and the observer can stereoscopically view the image, the image processing is canceled, so that the specific part that is easily stereoscopically viewed is stereoscopically viewed. It is possible to shift to a stereoscopic view of a stereoscopic image of the entire subject to be observed while maintaining the same.
  • the visible region is limited to the specific region including the specific part in the stereoscopic image, so that the binocular rivalry can be reduced.
  • the stereoscopic image display method and the stereoscopic image display device it is possible to make stereoscopic viewing more quickly and easily and further reduce the burden on the observer as compared with the conventional method.
  • the present invention is not limited to this.
  • the present invention can be applied to other medical diagnostic apparatuses, digital cameras, display apparatuses, and the like that use a stereoscopic image display method.

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

立体視画像を立体視可能に表示する立体視画像表示方法および装置において、立体視をより迅速かつ容易にして観察者への負荷をより軽減することを可能とする。立体視画像表示方法において、画像の物理特性の変化量が大きい特定部分（Ｎ、Ｃ等）を選択し、この特定部分を含む右目用画像ＸＲ１上の第１の特定領域（Ｒ１～Ｒ８）および左目用画像上の第２の特定領域を抽出し、右目用画像のうち第１の特定領域以外の領域である第１の処理対象領域、および左目用画像のうち第２の特定領域以外の領域である第２の処理対象領域に画像処理を施し、上記画像処理が施された右目用画像ＳＲおよび左目用画像から構成される立体視画像を立体視表示し、観察者が立体視できた後、上記画像処理を解除する。

Description

立体視画像表示方法および立体視画像表示装置
　本発明は、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像表示方法および立体視画像表示装置に関するものである。
　従来、互いに視差のある右目用画像および左目用画像から構成される２枚１組の画像（以下、立体視画像またはステレオ画像という）に基づいて、立体視できることが知られている。このような立体視画像は、同一の被写体を異なる方向から撮影して取得された互いに視差のある複数の画像に基づいて生成される。
　そして、このような立体視画像の生成は、デジタルカメラやテレビなどの分野だけでなく、放射線画像撮影の分野においても利用されている。すなわち、被検者に対して互いに異なる方向から放射線を照射し、その被検者を透過した放射線を放射線画像検出器によりそれぞれ検出して互いに視差のある複数の放射線画像を取得し、これらの放射線画像に基づいて立体視画像を生成することが行われている。そして、このように立体視画像を生成することによって奥行感のある放射線画像を観察することができ、より診断に適した放射線画像を観察することができる。
　ところで、立体視は、立体視画像の２つの画像を脳内で合成して３次元画像として認識することにより行われる。したがって、一般的にこのような立体視画像に基づく立体視は、慣れや得意不得意によって左右され、観察者によっては時間がかかったりまた疲労感を感じたりするものである。
　このように立体視において時間がかかったりまた疲労感を感じたりする原因は、定かではないが、観察画像が平面であるためピント調節が有効に働かず、両眼で異なった視覚像を知覚する現象（両眼の視野闘争）が生じるためであると推測されている。したがって、写真画像のような広域でピントが合った画像を立体視画像として用いた場合、上記のような立体視できるまでにかかる時間や疲労感は顕著となる。
　そこで特許文献１は、右目用画像および左目用画像においてそれぞれ対応する一対の共通の点がない領域を、右目用画像および左目用画像のそれぞれから抽出し、上記２つの領域のうちのいずれかを排除することにより、立体視における両眼の視野闘争を低減して観察者の疲労感を軽減する方法を開示している。
特開２００６－４２２９８号公報
　しかしながら、特許文献１の方法において、上記のような領域を排除したとしても、立体視画像のうちのわずかな領域を排除するにすぎない場合がある。したがって、特許文献１のような方法は、迅速かつ容易な立体視を実現するための補助としては不十分である場合がある。
　本発明は上記問題に鑑みてなされたものであり、立体視画像を立体視可能に表示する立体視画像表示方法および立体視画像表示装置において、立体視をより迅速かつ容易にして観察者への負荷をより軽減することを可能とする立体視画像表示方法および立体視画像表示装置を提供することを目的とするものである。
　上記課題を解決するために、本発明に係る立体視画像表示方法は、
　被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像表示方法において、
　右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、
　この特定部分を含む右目用画像上の第１の特定領域、およびこの特定部分を含む左目用画像上の第２の特定領域を抽出し、
　右目用画像のうち第１の特定領域以外の領域である第１の処理対象領域、および左目用画像のうち第２の特定領域以外の領域である第２の処理対象領域に画像処理を施し、
　上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、
　観察者が立体視できた後、上記画像処理を解除することを特徴とするものである。
　本明細書において、「立体視可能に表示する」或いは「立体視表示する」とは、立体視画像の構成画像を左右に並べて表示したり、立体視画像の構成画像を周期的に切り替えて表示したり、レンチキュラーディスプレイに表示したり、立体視画像の表示側において立体視に必要な要件をすべて満たして、立体視画像の構成画像を表示することを意味する。
　「画像処理を解除する」とは、画像処理が施されていない右目用画像および左目用画像から構成される立体視画像を立体視表示することを意味する。
　「画像の物理特性」とは、画素値、画像強度、周波数特性などがある。
　そして、本発明に係る立体視画像表示方法において、右目用画像および左目用画像の中で画素値の変化量が大きい部分を選択すること、および点状の部分または線状の部分を選択することのうち少なくとも一つを特定部分とすることが好ましい。
　そして、本発明に係る立体視画像表示方法において、画像処理は、処理対象領域をぼかす処理、処理対象領域のコントラストを低くする処理、処理対象領域の彩度または明度を下げる処理、および処理対象領域の色相を寒色系に近づける処理のうち少なくとも１つの処理であることが好ましい。
　さらに、本発明に係る立体視画像表示装置は、
　画像を表示する表示部と、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を表示部に立体視可能に表示させる表示制御部とを備えた立体視画像表示装置において、
　右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択する選択部と、
　この特定部分を含む右目用画像上の第１の特定領域、およびこの特定部分を含む左目用画像上の第２の特定領域を抽出する抽出部と、
　右目用画像のうち第１の特定領域以外の領域である第１の処理対象領域、および左目用画像のうち第２の特定領域以外の領域である第２の処理対象領域に画像処理を施す処理部とを備え、
　表示制御部が、上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、上記画像処理を解除するものであることを特徴とするものである。
　そして、本発明に係る立体視画像表示装置において、選択部は、右目用画像および左目用画像の中で画素値の変化量が大きい部分を選択すること、および点状の部分または線状の部分を選択することのうち少なくとも一つを特定部分とすることが好ましい。
　本発明に係る立体視画像表示方法および立体視画像表示装置によれば、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像の表示において、右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、この特定部分を含む右目用画像上の第１の特定領域、およびこの特定部分を含む左目用画像上の第２の特定領域を抽出し、右目用画像のうち第１の特定領域以外の領域である第１の処理対象領域、および左目用画像のうち第２の特定領域以外の領域である第２の処理対象領域に画像処理を施し、上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、上記画像処理を解除するようにしたので、立体視しやすい上記特定部分を立体視した状態をそのまま保ちながら、観察対象である被写体全体の立体視画像の立体視に移行することができる。この際、立体視を開始する時点においては、視認できる領域を立体視画像のうち特定部分を含む特定領域に限定しているため、両眼の視野闘争を低減することができる。この結果、立体視画像表示方法および立体視画像表示装置において、従来の方法に比して、立体視をより迅速かつ容易にして観察者への負荷をより軽減することが可能となる。
本発明の立体視画像表示方法および立体視画像表示装置の一実施形態を用いた乳房画像撮影表示システムの概略構成図である。 図１に示す乳房画像撮影表示システムのアーム部を示す概略断面図である。 図１に示す乳房画像撮影表示システムのコンピュータ内部の概略構成を示すブロック図である。 （Ａ）乳房の放射線画像中の立体視しやすい特定部分となりうる部分を説明する図である。（Ｂ）足の放射線画像中の立体視しやすい特定部分となりうる部分を説明する図である。 （Ａ）乳房の放射線画像中に抽出された特定領域を説明する図である。（Ｂ）足の放射線画像中に抽出された特定領域を説明する図である。 立体視画像中の特定領域を目立たせる（処理対象領域を目立たなくする）処理を説明する図である。
　以下、本発明の実施形態について図面を用いて説明するが、本発明はこれに限られるものではない。なお、視認しやすくするため、図面中の各構成要素の縮尺等は実際のものとは適宜異ならせてある。
「立体視画像表示方法および立体視画像表示装置」
　以下、図面を参照して本発明の立体視画像表示方法および立体視画像表示装置の一実施形態を用いた乳房画像撮影表示システムについて説明する。
　本実施形態の乳房画像撮影表示システム１は、図１に示すように、乳房画像撮影装置１０と、乳房画像撮影装置１０に接続されたコンピュータ８と、コンピュータ８に接続されたモニタ９および入力部７とを備えている。
　この乳房画像撮影装置１０は、図１に示すように、基台１１と、基台１１に対し上下方向（Ｚ方向）に移動可能でかつ回転可能な回転軸１２と、回転軸１２により基台１１と連結されたアーム部１３とを備えている。なお図２には、図１の右方向（ｙ軸正方向）から見たアーム部１３の正面形状を示している。
　アーム部１３はアルファベットのＣのような形状をしており、その一端には撮影台１４が、その他端には撮影台１４と対向するように放射線照射部１６が取り付けられている。アーム部１３の回転および上下方向の移動は、基台１１に組み込まれたアームコントローラ３１によって制御される。
　撮影台１４の内部には、フラットパネルディテクタ等の放射線画像検出器１５と、この放射線画像検出器１５からの電荷信号の読み出しを制御する検出器コントローラ３３とが設けられている。また撮影台１４の内部には、放射線画像検出器１５から読み出された電荷信号を電圧信号に変換するチャージアンプや、チャージアンプから出力された電圧信号をサンプリングする相関２重サンプリング回路や、電圧信号をデジタル信号に変換するＡＤ変換部などが設けられた回路基板等も設置されているが、それらの詳しい説明は省略する。
　この撮影台１４はアーム部１３に対して回転可能に構成されており、それにより、基台１１に対してアーム部１３が回転軸１２を中心に回転したときでも、撮影台１４が基台１１に対して一定の向きに維持されるようになっている。
　放射線画像検出器１５は、放射線画像の記録と読出しを繰り返して行うことができるものであり、放射線の照射を直接受けて電荷を発生する、いわゆる直接型の放射線画像検出器を用いてもよいし、放射線を一旦可視光に変換し、その可視光を電荷信号に変換する、いわゆる間接型の放射線画像検出器を用いるようにしてもよい。また、放射線画像信号の読出方式としては、ＴＦＴ（thin film transistor）スイッチをオン・オフされることによって放射線画像信号が読み出される、いわゆるＴＦＴ読出方式のものや、読取光を照射することによって放射線画像信号が読み出される、いわゆる光読出方式のものを用いることが望ましいが、これに限らずその他のものを用いるようにしてもよい。
　放射線照射部１６には放射線源１７と、放射線源コントローラ３２とが配設されている。放射線源コントローラ３２は、放射線源１７から放射線を照射するタイミングと、放射線源１７における放射線発生条件（管電流、時間、管電流時間積等）を制御するものである。
　アーム部１３の中央部には、撮影台１４の上方に配置されて乳房Ｍを押さえつけて圧迫する圧迫板１８と、その圧迫板１８を支持する支持部２０と、支持部２０を上下方向（Ｚ方向）に移動させる移動機構１９とが設けられている。圧迫板１８の位置、圧迫圧は、圧迫板コントローラ３４により制御される。
　乳房画像撮影装置１０の動作を制御するコンピュータ８は、中央処理装置（ＣＰＵ）および半導体メモリやハードディスクやＳＳＤ等のストレージデバイスなどを備えており、これらのハードウェアによって、図３に示すような制御部８ａ、放射線画像記憶部８ｂ、表示制御部８ｃ、選択部８ｄ、抽出部８ｅおよび処理部８ｆが構成されている。
　制御部８ａは、各種のコントローラ３１～３５に対して所定の制御信号を出力し、システム全体の制御を行うものである。具体的な制御方法については後で詳述する。
　放射線画像記憶部８ｂは、放射線画像検出器１５によって取得された放射線画像信号を記憶するものである。
　表示制御部８ｃは、放射線画像記憶部８ｂに記憶された放射線画像信号を読み出し、その放射線画像信号に基づいて、右目用の放射線画像および左目用の放射線画像から構成される立体視画像を生成する。そして、表示制御部８ｃは、生成した立体視画像を選択部８ｄ、抽出部８ｅおよび処理部８ｆに出力し、立体視画像に関連した必要な処理をこれらのそれぞれに実行させる。表示制御部８ｃは、必要な処理が実行された立体視画像を受信し、乳房Ｍの当該立体視画像をモニタ９に立体視可能に表示（立体視表示）させる。つまり、表示制御部８ｃは、後述する画像処理が施された右目用画像および当該画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示する。
　表示制御部８ｃは、観察者が立体視できた後、上記画像処理を解除する。表示制御部８ｃは、例えば観察者が立体視できたことを表す乳房画像撮影表示システム１への観察者による操作に基づいて、観察者が立体視できたか否かの判断を行う。このような操作は入力部７等によって行うことがきる。或いは、表示制御部８ｃは、予め設定された所定時間が経過したときに、観察者が立体視できたことを擬制することにより、観察者が立体視できたか否かの判断を行う。このような場合、前者のような場合に必要な観察者による操作を省略することができる。
　選択部８ｄは、右目用画像および左目用画像のどちらにおいても視認することができ、かつ立体視しやすい被写体の部分である、画像の物理特性の変化量が大きい特定部分を選択するものである。この場合、右目用画像および左目用画像の中で画素値の変化量が大きい部分を選択すること、および点状の部分または線状の部分を選択することのうち少なくとも一つを特定部分とすることが好ましい。選択部８ｄは、複数の特定部分を選択してもよい。ただし、立体視をより迅速かつ容易にする観点から、両眼に与える情報を最小限にするべく、特定部分は１つであることが好ましい。このような特定部分としては、図４Ａに示すように例えば乳房Ｍの放射線画像ＸＲ１においては、乳房Ｍ自体の輪郭、放射線撮影を行う際のニップルマーカＮ、乳房Ｍ中に析出した石灰化Ｃおよび乳房Ｍの外科手術用のワイヤフックＦ等を挙げることができる。また、このような特定部分としては、図４Ｂに示すように例えば足Ｌｅの放射線画像ＸＲ２においては、骨（Ｂ、Ｂ１およびＢ２）の輪郭、固定用のプレートＰやワイヤＷ等を挙げることができる。そして、選択部８ｄは、選択した特定部分の位置情報を抽出部８ｅに出力する。
　抽出部８ｅは、選択部８ｄによって選択された特定部分を含む右目用画像上の第１の特定領域、および当該特定部分を含む左目用画像上の第２の特定領域を抽出するものである。このとき、第１の特定領域および第２の特定領域は、当該特定部分を包含するような領域である。第１の特定領域および第２の特定領域は、立体視における両眼のバランスを考慮すると、その大きさや形状は互いに同一であることが好ましい。しかしながら、その大きさや形状は必ずしも互いに同一である必要はない。これらの特定領域に共通して上記のような特定部分が包含されていれば、立体視は可能だからである。
　このような特定領域としては、図５Ａに示すように例えば乳房Ｍの放射線画像ＸＲ１においては、乳房Ｍ自体の輪郭を包含するような領域Ｒ１、放射線撮影を行う際のニップルマーカＮを包含するような領域Ｒ２、乳房Ｍ中に析出した石灰化Ｃを包含するような領域Ｒ３および乳房Ｍの外科手術用のワイヤフックＦを包含するような領域Ｒ４並びに上記のような特定部分の複数を包含するような領域Ｒ５等を挙げることができる。また、このような特定部分としては、図５Ｂに示すように例えば足Ｌｅの放射線画像ＸＲ２においては、骨（Ｂ、Ｂ１およびＢ２）の輪郭を包含するような領域Ｒ６、プレートＰを包含するような領域Ｒ７およびワイヤＷを包含するような領域Ｒ８等を挙げることができる。
　そして、抽出部８ｅは、抽出した特定領域の位置情報を処理部８ｆに出力する。
　処理部８ｆは、右目用画像のうち第１の特定領域以外の領域である第１の処理対象領域、および左目用画像のうち第２の特定領域以外の領域である第２の処理対象領域に、上記両特定領域のそれぞれとの対比において上記両処理対象領域を目立たなくする画像処理を施すものである。「目立たない」状態とは、例えば、ぼけていたり、滲んでいたり、明暗がハッキリしていなくて注視し難い状態、色彩が地味（彩度の対比が小さい）など、注目しづらい状態である。したがって、画像処理は、処理対象領域をぼかす処理、処理対象領域のコントラストを低くする処理、処理対象領域の彩度または明度を下げる処理、および処理対象領域の色相を寒色系に近づける処理のうち少なくとも１つの処理であることが好ましい。処理対象領域を目立たなくすることにより、相対的に特定領域が目立つようになる。なお、特定領域と処理対象領域との境界において、特定領域が目立つ度合い（処理対象領域が目立たない度合い）は、明確に区別できる必要はない。例えば、処理対象領域において、当該境界を起点に特定領域から離れるにつれて徐々に目立たなくなるようにしてもよい。
　例えば、処理対象領域をぼかす処理を施した場合、シャープで鮮明な画像より、ぼけている画像の方が目立たなくなる。具体的なぼかす方法は、本技術分野で知られる種々の方法を用いることができる。また、例えば処理対象領域のコントラストを低くした場合、例えば、ぼけているか否かにかかわらず、一色で塗られた面より、コントラストの強い方が目立つと考えられる。画像は画素で構成され、画素は色相、彩度、明度（色の３要素）の情報をもっている。コントラストを低くするとは画素を平均化することであり、つまり色相、彩度、明度のいずれか１つの値を周辺の画素の持つ値に近づけることである。
　入力部７は、たとえば、キーボードやマウスなどのポインティングデバイスから構成されるものであり、撮影者による撮影条件などの入力や撮影開始指示の入力などを受け付けるものである。また必要に応じて、入力部７は、特定部分と見なせる部分が複数ある場合に選択部８ｄが選択する特定部分を指定したり、抽出部８ｅが抽出する特定領域の大きさや形状を指定したり、処理部８ｆが処理対象領域に施す画像処理を指定したりすることができるように構成してもよい。
　モニタ９は、コンピュータ８に記憶された２つの放射線画像信号を用いて立体視画像を立体視表示するように構成されたものである。立体視画像を立体視表示する構成としては、たとえば、２つの画面を用いて２つの放射線画像信号に基づく放射線画像をそれぞれ表示させて、これらをハーフミラーや偏光グラスなどを用いることで一方の放射線画像は観察者の右目に視認させ、他方の放射線画像は観察者の左目に視認させることによって、立体視画像を立体視表示する構成を採用することができる。または、例えば、２つの放射線画像を所定の視差量だけずらして重ね合わせて表示し、これを偏光グラスで観察することで立体視画像を立体視表示する構成としてもよい。さらに、パララックスバリア方式およびレンチキュラー方式のように、２つの放射線画像を立体視可能な３Ｄ表示器に表示することによって、立体視画像を立体視表示する構成としてもよい。また、右目用画像および左目用画像を１つの画面に交互に切替えて立体視表示する構成としてもよい。なおこの場合には、観察者側で立体視メガネを通してモニタ９を見る必要がある。
＜撮影処理＞
　次に、この乳房画像撮影装置１０における撮影処理について説明する。まず、図１に示すように撮影台１４の上に乳房Ｍが配置され、圧迫板１８により乳房Ｍが所定の圧力で圧迫される。なおこの時点でアーム部１３は、撮影台１４に垂直な方向を向く初期位置、すなわち図２に実線で示す位置に設定されている。
　次に入力部７により、被検者毎の種々の撮影条件が入力されるとともに、立体視画像として放射線画像を撮影するか、もしくは通常２次元画像として放射線画像を撮影するかを指示する入力がなされる。前者の撮影を行う指示入力があった場合、制御部８ａは、予め設定された撮影角度θ（放射線検出面法線に対して放射線照射軸がなす角度の大きさ：図２参照）を内部メモリから読み出し、その撮影角度θの情報をアームコントローラ３１に出力する。
　なお本実施形態においては、この撮影角度θの情報としてθ＝２°が予め記憶されているものとする。しかしこれに限らず、撮影角度θには２°～５°程度のその他の角度が適用されてもよい。また本実施形態では、アーム部１３が回転軸１２を中心に回転するように構成され、そしてこの回転軸１２は放射線画像検出器１５と略同じ高さ位置に配設されている。そのため、図２に示されるように相異なる回転位置にある放射線源１７の放射線照射軸は、互いに放射線画像検出器１５の近辺で交差する状態となるが、これに限らず、被写体である乳房Ｍの中においてそれらの放射線照射軸が交差するような状態にアーム部１３を回転させるようにしても構わない。
　次にアームコントローラ３１は、制御部８ａから出力された上記撮影角度θの情報を受け、この撮影角度θの情報に基づいて、アーム部１３を前記初期位置から＋θ回転させる制御信号を出力する。そこで、この制御信号に応じてアーム部１３が＋２°回転する。
　続いて制御部８ａは、放射線源コントローラ３２および検出器コントローラ３３に対して、放射線の照射と放射線画像信号の読出しを行うよう制御信号を出力する。そこで、この制御信号に応じて放射線源１７から放射線が射出され、乳房を＋２°方向から撮影した放射線画像信号が放射線画像検出器１５によって検出される。次いで検出器コントローラ３３によって放射線画像検出器１５から放射線画像信号が読み出される。その放射線画像信号に対して所定の信号処理が施された後、その放射線画像信号がコンピュータ８の放射線画像記憶部８ｂに記憶される。
　次にアームコントローラ３１は、アーム部１３を一旦初期位置に戻した後、アーム部１３をその初期位置から－θ回転させる制御信号を出力する。それにより、アーム部１３が初期位置から－２°回転する。
　続いて制御部８ａは、放射線源コントローラ３２および検出器コントローラ３３に対して、放射線の照射と放射線画像信号の読出しを行うよう制御信号を出力する。そこで、この制御信号に応じて放射線源１７から放射線が射出され、乳房を－２°方向から撮影した放射線画像信号が放射線画像検出器１５によって検出される。次いで検出器コントローラ３３によって放射線画像検出器１５から放射線画像信号が読み出される。その放射線画像信号に対して所定の信号処理が施された後、その放射線画像信号がコンピュータ８の放射線画像記憶部８ｂに記憶される。
　このようにして、互いに視差のある２つの放射線画像が得られる。
　なお本実施形態においては、立体視画像を構成する２つの放射線画像を、図２に示すＸ－Ｚ面内で放射線照射方向を変えることによって撮影しているが、その他の方向に放射線照射方向を変えて複数の放射線画像を撮影してもよい。すなわち、例えば図２に示すＹ－Ｚ面（図２の紙面に対して垂直な面）内で放射線照射方向を変えることによって複数の放射線画像を撮影してもよい。
＜表示処理＞
　次に、この乳房画像撮影表示システム１における表示処理について説明する。
　上述した撮影によって放射線画像記憶部８ｂに記憶された２つの放射線画像信号に基づいて、被検者の乳房Ｍの立体視画像がモニタ９に表示される。つまり、この立体視画像は、上述の２回の撮影によって得られた２つの放射線画像によって構成される。より具体的には、例えば、１回目の撮影によって得られた放射線画像を立体視画像の右目用画像として利用し、２回目の撮影によって得られた放射線画像を立体視画像の左目用画像として利用する。
　観察者は、乳房Ｍの立体視画像の表示指示を入力部７によって入力する。その表示指示に応じ、表示制御部８ｃによって放射線画像記憶部８ｂから被検者の２枚の放射線画像信号が読み出される。
　そして、表示制御部８ｃによって読み出された放射線画像信号に対して、選択部８ｄ、抽出部８ｅおよび処理部８ｆにおいて所定の信号処理が施される。
　この信号処理は例えば以下のように実施される。なお、図６には、便宜上右目用画像の信号処理を説明する図を示しているが、信号処理は右目用画像および左目用画像の両方に施される。まず、図６Ａに示すように選択部８ｄによって、放射線画像信号に基づいた右目用画像および左目用画像のどちらにおいても視認することができ、かつ立体視しやすい被写体の部分である、画像の物理特性の変化量が大きい特定部分が選択される。図６Ａでは、乳房Ｍの放射線画像ＸＲ１中の石灰化ＣおよびワイヤフックＦが特定部分として選択されている。そして、選択した特定部分の位置情報が抽出部８ｅに出力される。その後、抽出部８ｅによって、当該特定部分を含む右目用画像上の第１の特定領域が抽出される。図６Ａでは、右目用画像から当該特定部分を包含するような特定領域Ｒ５が抽出されている。そして、抽出した特定領域の位置情報が処理部８ｆに出力される。その後、処理部８ｆによって、右目用画像のうち当該特定領域以外の領域である処理対象領域に、当該特定領域Ｒ５との対比において当該処理対象領域を目立たなくする画像処理が施される。例えば処理部８ｆは、図６Ｂに示すように、当該処理対象領域に対応した部分の明度（輝度）を下げるようなマスク画像ＸＲｍを生成する。このマスク画像ＸＲｍが右目用画像に重畳されることにより、特定領域Ｒ５以外の領域が目立たなくなった右目用画像が得られる（図６Ｃ）。
　また、左目用画像についても、上記と同じ特定部分について同様な手順を得ることにより、当該特定部分を包含する特定領域以外の領域である領域が目立たなくなった左目用画像が得られる。表示制御部８ｃは、上記のように画像処理が施された右目用画像および左目用画像を受け取り、これらから構成される立体視画像をモニタ９に立体視表示する。
　観察者はまず、特定領域以外の領域が目立たなくなった立体視画像に基づいて立体視を試みる。この際、立体視画像中の目立たせられ、かつ立体視しやすい特定領域に両眼の注意がいく。これにより、処理対象領域が観察者の立体視に与える影響を小さくすることができ、立体視を妨げる両眼の視野闘争を低減することができる。したがって、観察者は、円滑に当該立体視画像の立体視を行うことができる。そして、観察者が立体視できた後、観察者は入力部７を用いて、立体視できたことを表示制御部８ｃに知らせる操作を行う。そのような操作を感知した場合、表示制御部８ｃは、上記の画像処理を解除して、上記画像処理が施されていない状態の右目用画像および左目用画像から構成される立体視画像をモニタ９に立体視表示する。
　上記画像処理が施されていない状態の立体視画像を立体視表示するためには、再度、放射線画像記憶部８ｂから放射線画像信号を読み込めばよい。また、画像処理が施された立体視画像に基づいて元の立体視画像を生成する処理を行ってもよい。画像処理が解除された場合、観察者は、立体視状態を維持しながら被写体の放射線画像のすべてを確認することができる。
　以上より、本発明に係る立体視画像表示方法および立体視画像表示装置によれば、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像の表示において、右目用画像および左目用画像のどちらにおいても視認することができる被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、この特定部分を含む右目用画像上の第１の特定領域、およびこの特定部分を含む左目用画像上の第２の特定領域を抽出し、右目用画像のうち第１の特定領域以外の領域である第１の処理対象領域、および左目用画像のうち第２の特定領域以外の領域である第２の処理対象領域に画像処理を施し、上記画像処理が施された右目用画像および上記画像処理が施された左目用画像から構成される立体視画像を立体視可能に表示し、観察者が立体視できた後、上記画像処理を解除するようにしたので、立体視しやすい上記特定部分を立体視した状態をそのまま保ちながら、観察対象である被写体全体の立体視画像の立体視に移行することができる。この際、立体視を開始する時点においては、視認できる領域を立体視画像のうち特定部分を含む特定領域に限定しているため、両眼の視野闘争を低減することができる。この結果、立体視画像表示方法および立体視画像表示装置において、従来の方法に比して、立体視をより迅速かつ容易にして観察者への負荷をより軽減することが可能となる。
　上記の実施形態では、本発明の立体視画像表示方法および立体視画像表示装置を乳房画像撮影表示システムに適用した場合について説明したが、当然ながら本発明はこれに限られるものではない。例えば、立体視画像表示方法を利用したその他の医療診断装置、デジタルカメラおよびディスプレイ装置等にも適用することができる。
１　　 乳房画像撮影表示システム
７　　 入力部
８　　 コンピュータ
８ａ　 制御部
８ｂ　 放射線画像記憶部
８ｃ　 表示制御部
８ｄ　 選択部
８ｅ　 抽出部
８ｆ　 処理部
９　　 モニタ
１０　 乳房画像撮影装置
１１　 基台
１２　 回転軸
１３　 アーム部
１４　 撮影台
１５　 放射線画像検出器
１６　 放射線照射部
１７　 放射線源
１８　 圧迫板
１９　 移動機構
２０　 支持部
Ｃ　　 石灰化
Ｆ　　 ワイヤフック
Ｌｅ　 足
Ｍ　　 乳房
Ｎ　　 ニップルマーカ
Ｐ　　 プレート
Ｒ１～Ｒ８　　特定領域
Ｗ　　 ワイヤ
ＸＲ１、ＸＲ２　　　　放射線画像
ＸＲｍ マスク画像
θ　　 撮影角度

Claims (7)

  1. 　被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を立体視可能に表示する立体視画像表示方法において、
    　前記右目用画像および前記左目用画像のどちらにおいても視認することができる前記被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択し、
    　該特定部分を含む前記右目用画像上の第１の特定領域、および前記特定部分を含む前記左目用画像上の第２の特定領域を抽出し、
    　前記右目用画像のうち前記第１の特定領域以外の領域である第１の処理対象領域、および前記左目用画像のうち前記第２の特定領域以外の領域である第２の処理対象領域に画像処理を施し、
    　前記画像処理が施された前記右目用画像および前記画像処理が施された前記左目用画像から構成される立体視画像を立体視可能に表示し、
    　観察者が前記立体視画像を立体視できた後、前記画像処理を解除することを特徴とする立体視画像表示方法。
  2. 　前記特定部分として、前記右目用画像および前記左目用画像の中で画素値の変化量が大きい部分を選択することを特徴とする請求項１記載の立体視画像表示方法。
  3. 　前記特定部分として、点状の部分または線状の部分を選択することを特徴とする請求項１または２記載の立体視画像表示方法。
  4. 　前記画像処理は、前記処理対象領域をぼかす処理、前記処理対象領域のコントラストを低くする処理、前記処理対象領域の彩度または明度を下げる処理、および前記処理対象領域の色相を寒色系に近づける処理のうち少なくとも１つの処理であることを特徴とする請求項１から３記載の立体視画像表示方法。
  5. 　画像を表示する表示部と、被写体が撮像された互いに視差のある右目用画像および左目用画像から構成される立体視画像を前記表示部に立体視可能に表示させる表示制御部とを備えた立体視画像表示装置において、
    　前記右目用画像および前記左目用画像のどちらにおいても視認することができる前記被写体の部分であって、画像の物理特性の変化量が大きい特定部分を選択する選択部と、
    　該特定部分を含む前記右目用画像上の第１の特定領域、および前記特定部分を含む前記左目用画像上の第２の特定領域を抽出する抽出部と、
    　前記右目用画像のうち前記第１の特定領域以外の領域である第１の処理対象領域、および前記左目用画像のうち前記第２の特定領域以外の領域である第２の処理対象領域に画像処理を施す処理部とを備え、
    　前記表示制御部が、前記画像処理が施された前記右目用画像および前記画像処理が施された前記左目用画像から構成される立体視画像を立体視可能に表示し、観察者が前記立体視画像を立体視できた後、前記画像処理を解除することを特徴とする立体視画像表示装置。
  6. 　前記選択部は、前記特定部分として、前記右目用画像および前記左目用画像の中で画素値の変化量が大きい部分を選択することを特徴とする請求項５記載の立体視画像表示装置。
  7. 　前記選択部は、前記特定部分として、点状の部分または線状の部分を選択することを特徴とする請求項５または６記載の立体視画像表示装置。
PCT/JP2011/072046 2010-09-29 2011-09-27 立体視画像表示方法および立体視画像表示装置 WO2012043547A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-219281 2010-09-29
JP2010219281A JP2012075001A (ja) 2010-09-29 2010-09-29 立体視画像表示方法および立体視画像表示装置

Publications (1)

Publication Number Publication Date
WO2012043547A1 true WO2012043547A1 (ja) 2012-04-05

Family

ID=45892987

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/072046 WO2012043547A1 (ja) 2010-09-29 2011-09-27 立体視画像表示方法および立体視画像表示装置

Country Status (2)

Country Link
JP (1) JP2012075001A (ja)
WO (1) WO2012043547A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6004354B2 (ja) * 2012-06-15 2016-10-05 パナソニックＩｐマネジメント株式会社 画像データ処理装置及び画像データ処理方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07212798A (ja) * 1994-01-18 1995-08-11 Sharp Corp 両眼テレビジョン装置
JP2006129016A (ja) * 2004-10-28 2006-05-18 ▲吉▼良 雅貴 立体視画像生成装置および立体視画像生成方法
JP2008527561A (ja) * 2005-01-12 2008-07-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 奥行きの知覚

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07212798A (ja) * 1994-01-18 1995-08-11 Sharp Corp 両眼テレビジョン装置
JP2006129016A (ja) * 2004-10-28 2006-05-18 ▲吉▼良 雅貴 立体視画像生成装置および立体視画像生成方法
JP2008527561A (ja) * 2005-01-12 2008-07-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 奥行きの知覚

Also Published As

Publication number Publication date
JP2012075001A (ja) 2012-04-12

Similar Documents

Publication Publication Date Title
CN106796344B (zh) 锁定在感兴趣对象上的放大图像的系统、布置和方法
JP5486437B2 (ja) 立体視画像表示方法および装置
US20130300737A1 (en) Stereoscopic image generating apparatus, stereoscopic image generating method, and stereoscopic image generating program
JP2011182808A (ja) 医用画像生成装置、医用画像表示装置、医用画像生成方法及びプログラム
WO2012043547A1 (ja) 立体視画像表示方法および立体視画像表示装置
WO2012056695A1 (ja) 立体視画像表示装置および方法並びにプログラム
WO2012043480A1 (ja) 立体視画像表示方法および立体視画像表示装置
WO2012132320A1 (ja) 立体視画像表示装置および立体視画像表示方法
JP2012192137A (ja) 放射線画像表示装置および方法
WO2012056718A1 (ja) 放射線立体視画像表示装置および方法並びにプログラム
WO2012102184A1 (ja) 放射線画像表示装置および方法
JP2012068610A (ja) 立体視画像表示装置、放射線画像撮影表示システムおよび立体視画像表示方法
WO2012096221A1 (ja) 放射線画像表示装置および方法
WO2012105188A1 (ja) 立体視画像表示装置および方法並びにプログラム
WO2012056677A1 (ja) 立体視画像表示装置
US20120076261A1 (en) Radiological image displaying apparatus and method
WO2012102022A1 (ja) 立体視画像表示方法、並びに、立体視画像表示制御装置およびプログラム
JP2005027359A (ja) Ｘ線診断装置
WO2012056692A1 (ja) 立体視画像表示装置および立体視画像表示方法
WO2012002280A1 (ja) 立体視画像表示方法および装置
WO2012029726A1 (ja) 乳房画像撮影表示方法および装置
WO2012114758A1 (ja) 放射線画像撮影方法および装置
JP2012178626A (ja) 立体視放射線画像表示方法および装置
JPWO2019230115A1 (ja) 医療用画像処理装置
WO2012056721A1 (ja) 立体視画像表示方法、並びに、立体視表示制御装置およびプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11829100

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11829100

Country of ref document: EP

Kind code of ref document: A1