WO2012132304A1 - 立体画像表示制御装置及び立体画像表示制御方法 - Google Patents

立体画像表示制御装置及び立体画像表示制御方法 Download PDF

Info

Publication number
WO2012132304A1
WO2012132304A1 PCT/JP2012/001889 JP2012001889W WO2012132304A1 WO 2012132304 A1 WO2012132304 A1 WO 2012132304A1 JP 2012001889 W JP2012001889 W JP 2012001889W WO 2012132304 A1 WO2012132304 A1 WO 2012132304A1
Authority
WO
WIPO (PCT)
Prior art keywords
stereoscopic
image
parallax amount
display control
still image
Prior art date
Application number
PCT/JP2012/001889
Other languages
English (en)
French (fr)
Inventor
林 健吉
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Publication of WO2012132304A1 publication Critical patent/WO2012132304A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/144Processing image signals for flicker reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/002Eyestrain reduction by processing stereoscopic signals or controlling stereoscopic devices

Definitions

  • the present invention relates to a control method for reproducing and displaying continuous shot image data composed of a plurality of three-dimensional still images as a three-dimensional moving image in a three-dimensional image display control apparatus that handles both a three-dimensional moving image and a three-dimensional still image. .
  • a stereoscopic image displayed so as to be stereoscopically viewed in this way can be generated in both a moving image and a still image.
  • Patent Document 1 discloses an image information processing apparatus in which a depth value is smoothly changed in scene switching so as not to cause discomfort and fatigue.
  • a light-sensitive epilepsy symptom called a Pokemon phenomenon in which an observer causes physical symptoms such as convulsions by receiving a stimulus of flashing light from a display screen.
  • Patent Document 2 discloses an image processing apparatus in which the maximum luminance is limited when a slide show is displayed as a measure against light-sensitive epilepsy symptoms.
  • a stereoscopic image since the allowable parallax amount that can be normally observed by an observer in a stereoscopic still image is set to be larger than that of a stereoscopic video, when being reproduced as a stereoscopic still image Even if the image can be observed appropriately by the observer, the observer may not be able to observe appropriately when a plurality of three-dimensional still images are integrated and reproduced as a three-dimensional moving image.
  • the present invention provides a stereoscopic image display control apparatus that handles both a stereoscopic moving image and a stereoscopic still image, and a stereoscopic image display control apparatus that allows an observer to appropriately observe both the stereoscopic moving image and the stereoscopic still image.
  • An object of the present invention is to provide a stereoscopic image display control method and a body image display control device and a stereoscopic image display control method capable of reducing discomfort and fatigue due to stereoscopic viewing.
  • the first three-dimensional image display control device of the present invention can reproduce continuous shot image data composed of a plurality of three-dimensional still images as a three-dimensional still image from one arbitrary three-dimensional image from the plurality of three-dimensional still images.
  • the stereoscopic video data representing the stereoscopic video is integrated by integrating continuous shooting image data composed of the plurality of stereoscopic still images.
  • a stereoscopic image display control device that can be generated and reproduced and displayed, A still image parallax amount adjustment unit that adjusts the parallax amount of stereoscopic still image data representing the stereoscopic still image with respect to the reproduced and displayed stereoscopic still image; And a moving image parallax amount converting unit that converts the parallax amount of the stereoscopic moving image data so as to be smaller than the parallax amount adjusted by the still image parallax amount adjusting unit.
  • “integrating continuous shot image data composed of a plurality of three-dimensional still images to generate and reproduce and display three-dimensional moving image data representing a three-dimensional moving image” means, for example, without generating three-dimensional moving image data.
  • the display control includes a plurality of three-dimensional still images that are quickly switched and displayed so as to display a moving image, and a plurality of three-dimensional still images that are displayed in a fast-forward reproduction and displayed as a moving image when frame-by-frame playback is performed.
  • the observer Including a stereoscopic determination unit that determines whether or not can be appropriately observed
  • the moving image parallax amount conversion unit may convert the parallax amount of the stereoscopic moving image data when the stereoscopic determination unit determines that the observer cannot appropriately observe.
  • the second stereoscopic image display control device of the present invention when reproducing and displaying continuous shot image data composed of a plurality of stereoscopic still images as a stereoscopic still image, selects one arbitrary image from the plurality of stereoscopic still images.
  • a stereoscopic image display control device capable of generating and reproducing and displaying
  • a still image parallax amount adjustment unit that adjusts the parallax amount of stereoscopic still image data representing the stereoscopic still image with respect to the reproduced and displayed stereoscopic still image
  • a video parallax amount conversion unit that converts the parallax amount of the stereoscopic video data so that the parallax amount is the same as the parallax amount adjusted by the still image parallax amount adjustment unit
  • a playback mode setting section for setting the playback mode to a stereoscopic video or a stereoscopic still image
  • a warning output unit that issues a warning when the playback mode is a stereoscopic moving
  • the observer appropriately observes when the stereoscopic video represented by the stereoscopic video data whose parallax amount is converted by the moving image parallax amount conversion unit is reproduced and displayed.
  • a stereoscopic vision judgment unit for judging whether or not The warning output unit may give a warning when it is determined by the stereoscopic vision determination unit that the observer cannot properly observe.
  • the moving image parallax amount conversion unit determines that the observer cannot appropriately observe by the stereoscopic vision determination unit, the observation is performed. Converting the parallax amount of the stereoscopic video data representing the stereoscopic video composed of the plurality of stereoscopic still images including the stereoscopic still image in which the parallax amount is adjusted so that a person can appropriately observe the parallax Also good.
  • the stereoscopic vision determination unit detects any one or more change amounts including the parallax amount among parallax amount, brightness, motion, contrast, and sharpness. Then, it may be determined whether or not the observer can appropriately observe based on the detected change amount.
  • the first stereoscopic image display control method of the present invention when continuous shot image data composed of a plurality of stereoscopic still images is reproduced and displayed as a stereoscopic still image, one arbitrary stereoscopic image is selected from the plurality of stereoscopic still images.
  • the stereoscopic video data representing the stereoscopic video is integrated by integrating continuous shooting image data composed of the plurality of stereoscopic still images.
  • the parallax amount of the stereoscopic moving image data is converted so as to be smaller than the adjusted parallax amount.
  • the stereoscopic video data representing the stereoscopic video having the same parallax amount as the adjusted parallax amount when reproduced and displayed, an observer may appropriately observe the stereoscopic video data. Determine if you can, The parallax amount of the stereoscopic video data can be converted when it is determined that the observer cannot properly observe.
  • the second stereoscopic image display control method of the present invention when continuous shot image data composed of a plurality of stereoscopic still images is reproduced and displayed as a stereoscopic still image, one arbitrary image is selected from the plurality of stereoscopic still images.
  • Three-dimensional video data representing a three-dimensional video by integrating the continuous-shot image data composed of the plurality of three-dimensional still images when acquiring and reproducing and displaying three-dimensional still image data representing a three-dimensional still image and reproducing and displaying it as a three-dimensional video Is a stereoscopic image display control method for generating and reproducing and displaying, Adjusting the parallax amount of the stereoscopic still image data representing the stereoscopic still image with respect to the reproduced and displayed stereoscopic still image; Converting the parallax amount of the stereoscopic video data so that the parallax amount is the same as the adjusted parallax amount; A warning is given when the playback mode is a stereoscopic video.
  • the second stereoscopic image display control method of the present invention it is determined whether or not the observer can appropriately observe when the stereoscopic moving image represented by the stereoscopic moving image data in which the parallax amount is converted is reproduced and displayed. And A warning can be given when it is determined that the observer cannot properly observe.
  • the parallax amount is set so that the observer can appropriately observe when it is determined that the observer cannot appropriately observe.
  • the parallax amount of the stereoscopic video data representing the stereoscopic video composed of the plurality of stereoscopic still images including the adjusted stereoscopic still image can be converted.
  • any one or more change amounts including the parallax amount among the parallax amount, brightness, movement, contrast, and sharpness are detected, and the detected change amount is detected. Based on the above, it can be determined whether or not the observer can appropriately observe.
  • a plurality of three-dimensional still images are displayed when continuous shot image data composed of a plurality of three-dimensional still images is reproduced and displayed as a three-dimensional still image.
  • 3D still image data representing one arbitrary 3D still image is acquired, reproduced and displayed, and when it is reproduced and displayed as a 3D movie, continuous shooting image data composed of a plurality of 3D still images is integrated to create a 3D movie
  • the parallax amount of the stereoscopic still image data representing the stereoscopic still image is adjusted and adjusted for the reproduced and displayed stereoscopic still image.
  • the amount of parallax of the stereoscopic video data is converted so as to be smaller than the amount of parallax
  • the amount of parallax corresponding to the stereoscopic still image 3D still images can be properly observed
  • a 3D movie with a parallax amount converted so as to be smaller than the 3D still image can be viewed.
  • the observer can appropriately observe both the stereoscopic moving image and the stereoscopic still image.
  • a plurality of stereoscopic still images are displayed when continuous shot image data composed of a plurality of stereoscopic still images is reproduced and displayed as a stereoscopic still image.
  • 3D still image data representing one arbitrary 3D still image is acquired from the image and reproduced and displayed.
  • the continuous shot image data composed of a plurality of 3D still images are integrated to create a 3D image.
  • the parallax amount of the stereoscopic still image data representing the stereoscopic still image is adjusted and adjusted with respect to the stereoscopic still image that is reproduced and displayed.
  • the parallax amount of the stereoscopic video data is converted so that the parallax amount is the same as the parallax amount, and a warning is given when the playback mode is a stereoscopic video, so the observer can
  • a warning is given when the playback mode is a stereoscopic video, so the observer can
  • it is possible to take measures such as stopping viewing a stereoscopic moving image, thereby reducing discomfort and fatigue due to stereoscopic viewing.
  • action of the stereo image display control apparatus of FIG. The block diagram which shows the structure of the three-dimensional image display control apparatus of 2nd Embodiment.
  • action of the stereo image display control apparatus of FIG. The block diagram which shows the structure of the three-dimensional image display control apparatus of 3rd Embodiment.
  • action of the stereo image display control apparatus of FIG. The figure explaining the allowable parallax range of stereoscopic video and stereoscopic still image Schematic diagram of the amount of left-right shift of each point in the image
  • FIG. 1 is a block diagram showing the configuration of the stereoscopic image display control apparatus 1
  • FIG. 2 is a flowchart showing the operation of the stereoscopic image display control apparatus 1 of FIG.
  • the stereoscopic image display control apparatus 1 of the present embodiment may be mounted on, for example, a stereoscopic camera (3D camera) that can capture a stereoscopic moving image and a stereoscopic still image.
  • a stereoscopic camera 3D camera
  • the stereoscopic image display control apparatus 1 of the present embodiment can display or record a stereoscopic moving image and a stereoscopic still image, and is connected to a data bus 13 as shown in FIG.
  • a stereoscopic image display control apparatus comprising a recording / reading control unit 12 for controlling recording and reading of information with respect to an image data recording unit 11 such as a removable medium in which continuous shot image data composed of still images is recorded, an LCD, and the like.
  • a display control unit 15 that controls display of a stereoscopic still image and a stereoscopic video on the display unit 2 connected to 1
  • a still image signal processing unit 17 that performs signal processing for still images on the image data
  • a video signal processing unit 18 and a CPU 20 for performing video signal processing.
  • These control units and processing units are connected to a data control unit 14, respectively. Data transfer via the data bus 13 between the processing unit is controlled by the data control unit 14.
  • a memory 19 is connected to the data control unit 14.
  • the recording / reading control unit 12, the display control unit 15, the still image signal processing unit 17, and the moving image signal processing unit 18 are also connected to the CPU 20, and processing in these control units and processing units is performed. Is controlled by the CPU 20.
  • an operation unit 23 composed of a power switch, various setting switches, a keyboard, a mouse, and the like provided in the main body of the stereoscopic image display control apparatus 1.
  • the CPU 20 is connected to a playback mode setting unit 22 that sets the playback mode to the display unit 2 to a moving image playback mode or a still image playback mode.
  • the playback mode setting unit 22 is operated by an observer operating the operation unit 23.
  • the reproduction mode desired by the input observer can be set.
  • the CPU 20 also functions as a determination unit that determines whether the reproduction mode set by the reproduction mode setting unit 22 is a stereoscopic moving image or a stereoscopic still image.
  • the CPU 20 is connected to a still image parallax adjustment unit 21 and another parallax conversion unit 24, which will be described in detail later.
  • the stereoscopic image display control apparatus 1 is also provided with a microphone and a speaker.
  • the microphone is connected to the data bus 13 via an A / D converter or the like.
  • the speaker is an amplifier and a D / A. It is connected to the data bus 13 via a converter.
  • the display control unit 15 displays stereoscopic video data and stereoscopic still image data on the display unit 2 in a stereoscopic manner.
  • the display control unit 15 performs a stereoscopic display process in accordance with the stereoscopic display method of the display unit 2 to the display unit 2.
  • 3D display means displaying so that the observer can recognize the stereoscopic effect of the subject. Note that any known method can be used as the stereoscopic display in the present embodiment.
  • a left-eye image and a right-eye image are displayed side-by-side and stereoscopically viewed by the naked eye balance method, or a lenticular lens is attached to the display unit 2, and the left-eye image and right-eye are placed at predetermined positions on the display surface of the display unit 2.
  • a lenticular method in which the left-eye image and the right-eye image are incident to the left and right eyes to realize stereoscopic display.
  • the optical path of the backlight of the display unit 2 is optically separated so as to correspond to the left and right eyes, and the left-eye image and the right-eye image are separated on the display surface of the display unit 2 to the left and right of the backlight.
  • the display unit 2 is processed according to the stereoscopic display method.
  • the stereoscopic display method is the lenticular method
  • a lenticular lens is attached to the display surface of the display unit 2
  • an optical element for changing the light beam direction of the left and right images is provided. It is attached to the display surface of the display unit 2.
  • the display control unit 15 is also for causing the display unit 2 to display planar moving image data and planar still image data.
  • the still image signal processing unit 17 performs signal processing for a stereoscopic still image on the stereoscopic still image data in order to improve the quality of the stereoscopic still image represented by the stereoscopic still image data.
  • the signal processing for stereoscopic still images includes noise reduction processing for reducing noise components in stereoscopic still image data, contour enhancement processing for extracting contour components in stereoscopic still images and enhancing the extracted contour components, and specific processing Examples include a filtering process for attenuating or enhancing a spatial frequency component, a color correction process for correcting the color balance of a still image, and the like.
  • the moving image signal processing unit 18 integrates continuous image data composed of a plurality of three-dimensional still images stored in the image data recording unit 11 or the memory 19 and read out via the recording / reading control unit 12. Processing for generating stereoscopic video data representing a stereoscopic video is performed, and signal processing for stereoscopic video is performed on the stereoscopic video data in order to improve the image quality of the stereoscopic video represented by the stereoscopic video data.
  • the signal processing for stereoscopic video includes noise reduction processing for reducing noise components in stereoscopic video data, contour enhancement processing for extracting contour components from stereoscopic video data and enhancing the extracted contour components, and a specific spatial frequency. Examples include a filtering process for attenuating or enhancing a component, a color correction process for correcting the color balance of a stereoscopic moving image, and the like.
  • the term “stereoscopic video” means that a plurality of three-dimensional still images are switched at random, or one or a plurality of three-dimensional still images are displayed so as to move on the screen according to a predetermined speed. Including high-speed frame advancement of images.
  • the still image parallax amount adjusting unit 21 adjusts the parallax amount of the stereoscopic still image data representing the reproduced and displayed stereoscopic still image with respect to the stereoscopic still image reproduced and displayed on the display unit 2.
  • the stereoscopic still image data representing the reproduced stereoscopic still image is adjusted to a parallax amount representing the stereoscopic effect desired by the observer. Can do.
  • the method for adjusting the amount of parallax will be described in detail later.
  • the moving image parallax amount conversion unit 24 includes a plurality of stereoscopic still images including a stereoscopic still image whose parallax amount has been adjusted so as to be smaller than the parallax amount of the stereoscopic still image adjusted by the still image parallax amount adjustment unit 21.
  • the parallax amount of the stereoscopic moving image data representing the generated stereoscopic moving image is converted.
  • the parallax amount of the stereoscopic video data is converted by the still image parallax amount adjustment unit 21 so that the parallax amount of the stereoscopic still image data representing each stereoscopic still image in all of the plurality of stereoscopic still images constituting the stereoscopic video data is converted by the still image parallax amount adjustment unit 21. This is performed by converting the adjusted stereoscopic still image so as to be smaller than the parallax amount.
  • the “parallax amount” means a shift amount between feature points in the left-eye image and the right-eye image that form the stereoscopic image.
  • FIG. 10 is a diagram schematically showing the amount of left-right shift of each point in the image.
  • the shift amount that is, the length of the arrow increases
  • the shift direction that is, the arrow direction differs between the front side and the back side of the cross point. Therefore, in the conversion of the parallax amount, the still image for the right eye and / or the still image for the left eye is deformed so that the length of the arrow in FIG. 10 is shortened. Since the amount and direction in which the shift is reduced at each point in the image are different, the image is deformed by so-called nonlinear geometric transformation called warping so that the shift amount, that is, the parallax amount is reduced. In the warping, for example, an image is locally distorted, that is, warped and deformed.
  • an image is divided into a plurality of triangular patches, and deformation is performed for each triangular patch.
  • a technique described in Japanese Patent Application Laid-Open No. 2010-152819 can be used as a specific method of image deformation by warping.
  • the conversion of the parallax amount of the stereoscopic moving image data by the moving image parallax amount conversion unit 24 will be further described later.
  • the display control unit 15 observes from continuous shot image data composed of a plurality of stereoscopic still images stored in the image data storage unit 11.
  • the stereoscopic still image data represented by the predetermined stereoscopic still image selected in advance by the user is reproduced and displayed on the display unit 2 (S10).
  • the operation unit 23 is used for a desired 3D still image while viewing the 3D still image reproduced by the observer on the display unit 2 one by one. It can be selected by operating.
  • the still image parallax amount adjusting unit 21 determines the parallax amount of the stereoscopic still image data representing the stereoscopic still image reproduced and displayed on the display unit 2 based on the input from the operation unit 23 by the observer as described above. Adjust (S11). Note that the parallax amount in the stereoscopic still image is specifically adjusted so that the parallax amount of the stereoscopic still image data becomes the parallax amount corresponding to the input amount from the operation unit 23 by the observer. The conversion is performed by the same method as the parallax amount conversion method by the conversion unit 24.
  • the stereoscopic still image data is converted so as to have the adjusted amount of parallax and reproduced and displayed on the display unit 2.
  • the brightness, contrast, and sharpness values of the stereoscopic still image data representing the reproduced and displayed stereoscopic still image may be adjusted. These adjustments can be performed by operating the operation unit 23.
  • the reproduction mode setting unit 22 sets the reproduction mode input by the observer (S12), and the CPU 20 determines whether the reproduction mode set by the reproduction mode setting unit 22 is a still image reproduction mode or a moving image reproduction mode. If it is determined whether there is a still image reproduction mode (S13; still image reproduction mode), the still image signal processing unit 17 converts the still image data representing the three-dimensional still image reproduced and displayed. On the other hand, signal processing for stereoscopic still image is performed (S14), the display control unit 15 displays the stereoscopic still image represented by the stereoscopic still image data after signal processing on the display unit 2 (S15), and the series of processing ends. To do.
  • step S13 when it is determined in step S13 that the playback mode is the video playback mode (S13; video playback mode), the video parallax conversion unit 24 is played back and displayed on the display unit 2 as described above.
  • 3D still images including this 3D still image so that the parallax amount of the 3D still image data representing the 3D still image, that is, the 3D still image data whose parallax amount has been adjusted by the observer
  • the parallax amount of the stereoscopic video data representing the stereoscopic video thus converted is converted (S16).
  • values of brightness, contrast, and sharpness may be changed so as to be smaller than the value of stereoscopic still image data representing the stereoscopic still image reproduced and displayed on the display unit 2.
  • the allowable parallax range D S that can be appropriately observed by the observer in the stereoscopic still image is set to be larger than the allowable parallax range D m in the stereoscopic moving image (see FIG. 9), so that the stereoscopic still image is reproduced.
  • the amount of parallax can be properly observed by the observer, when reproduced and displayed as a stereoscopic video, the amount of pop-up from the display screen of the display unit 2 and the amount of retraction in the depth direction are too large.
  • the observer may not be able to observe appropriately such as feeling uncomfortable or tired.
  • brightness, contrast, and sharpness are values that can be properly observed when reproduced and displayed as a single 3D still image, but when reproduced and displayed as a 3D movie, eyes are tired or convulsed. May cause effects on the human body, such as causing physical symptoms.
  • the parallax amount of each stereoscopic still image f n included in the stereoscopic moving image is adjusted by the moving image parallax amount conversion unit 21 as illustrated in FIG. converting the parallax amount of the stereoscopic still image data to be smaller than the amount of parallax of the three-dimensional still image f 1 was.
  • Parallax amount after conversion this time is set to be a value within the allowable disparity range D m of stereoscopic video.
  • the amount of parallax is reduced is the disparity amount of the stereoscopic still image on the display surface where the amount of parallax is 0, that is, on the far side from the cross point (upward from... In the figure). It means that the maximum value (the tip of the upward arrow in the figure) is located on the lower side, and on the near side (lower side than in the figure) of the cross point where the parallax amount becomes 0, It means that the minimum value of the parallax amount of the stereoscopic still image (the tip of the downward arrow in the figure) is located on the upper side.
  • the observer can appropriately observe the stereoscopic video without feeling tired or uncomfortable when displaying and reproducing the stereoscopic video. Can do.
  • each of the three-dimensional still image data representing the plurality of three-dimensional still images constituting the three-dimensional moving image is configured with a parallax amount within the allowable parallax range D m that can be appropriately observed by the observer, the viewer And 3D still images can be properly observed.
  • the parallax amount adjustment by the still image parallax amount adjustment unit 21 and the parallax amount conversion by the moving image parallax amount conversion unit 24 are centered on a display surface on which a stereoscopic still image indicated by.
  • the stereoscopic effect in the projection direction from the display surface and the stereoscopic effect in the depth direction from the display surface may have the same value, or the disparity amount indicating the stereoscopic effect in the far direction, that is, the depth direction. You may enable it to set separately the amount of parallax which shows the three-dimensional effect of a direction, ie, a pop-out direction.
  • the moving image signal processing unit 18 When the parallax amount conversion is performed by the moving image parallax amount conversion unit 24 as described above (S16), the moving image signal processing unit 18 then includes a plurality of three-dimensional images including the predetermined three-dimensional still image previously selected by the observer.
  • 3D video data is generated by integrating continuous shot image data composed of still images, and the generated 3D video data is subjected to signal processing for 3D video to improve the quality of the 3D video represented by the 3D video data. (S17).
  • the display control unit 15 displays the three-dimensional moving image represented by the three-dimensional moving image data after the signal processing on the display unit 2 (S15), and the series of processing ends.
  • the stereoscopic image display control device 1 causes the display unit 2 to perform reproduction display.
  • the parallax amount of the stereoscopic still image data representing the stereoscopic still image is adjusted for the reproduced and displayed stereoscopic still image.
  • the parallax amount of the stereoscopic moving image data is converted so as to be smaller than the adjusted parallax amount, when the observer views the continuous shot image data as a stereoscopic still image, it corresponds to the stereoscopic still image.
  • a stereoscopic video with a parallax amount converted to be smaller than a stereoscopic still image can be viewed. Even if the allowable amount of parallax that an observer can appropriately observe in a stereoscopic video is set smaller than that of a stereoscopic still image, both the stereoscopic video and the stereoscopic still image can be appropriately observed. That.
  • FIG. 3 is a block diagram showing the configuration of the stereoscopic image display control device 1-2
  • FIG. 4 is a flowchart showing the operation of the stereoscopic image display control device 1-2 of FIG.
  • the stereoscopic image display control device 1-2 of the present embodiment includes a stereoscopic vision determination unit 25 in addition to the configuration of FIG.
  • the stereoscopic image determination unit 25 reproduces and displays the stereoscopic video data representing the stereoscopic video having the same parallax amount as the parallax amount adjusted by the still image parallax amount adjusting unit 21 on the display unit 2, the viewer appropriately selects the stereoscopic video. It is determined whether or not it can be observed.
  • the determination as to whether or not the observer can appropriately observe the stereoscopic video is based on the parallax amount adjusted by the still image parallax amount adjusting unit 21 being the preset allowable parallax range of the stereoscopic video. When it is inside, it is done by judging that it can observe appropriately.
  • the parallax amount is appropriately observed when it is outside the allowable parallax range of the stereoscopic video. Judge that you can not.
  • the parallax angle ⁇ that can be appropriately observed has been empirically determined by various studies.
  • the parallax angle ⁇ refers to the difference between the convergence angle when viewing a point on the display surface and the convergence angle when viewing a solid determined by binocular parallax.
  • Non-Patent Document 1 the allowable parallax range of stereoscopic video when assuming a high-definition television is based on the assumption that the interpupillary distance is 6.5 cm and viewing at a viewing viewing distance (three times the screen height of the television). There is a research result that the depth range in one screen is easy to see if it is kept within 1 degree (see Non-Patent Document 1).
  • the upper limit value and the lower limit value of the allowable parallax range of the stereoscopic moving image are set as the parallax amount values at which the parallax angle is 1 degree.
  • the parallax angle is 1 in the case of 1920 horizontal pixels.
  • the pop-out amount and the retract amount with respect to the screen width are 2.9% with respect to the screen width.
  • the pop-out amount and the retract amount from the display screen are 2 with respect to the screen width.
  • the allowable parallax range of the stereoscopic video is set so as to be 9%.
  • the allowable parallax range of a stereoscopic video is set so that the distance from the display screen and the amount of retraction from the display screen on which a stereoscopic still image is displayed are the same value, i.e.
  • the distance may be set to be different from each other around the cross point, that is, the amount of protrusion and the amount of retraction from the display screen may be different values.
  • an observer detects a range of values in which the operator feels discomfort or fatigue by operating the operation unit 23 while observing a stereoscopic video displayed on the display unit 2 in advance.
  • the range of detected values can be set as an allowable range. Note that the allowable parallax range of the stereoscopic video may be set in the same manner as described above.
  • the allowable parallax range of the stereoscopic video may be narrowed as the value of the height is increased. Similarly, the allowable parallax range of the stereoscopic video may be narrowed as the contrast setting value of the screen of the display unit 2 increases. Similarly, the allowable parallax range of the stereoscopic video may be narrowed as the sharpness value of the screen of the display unit increases.
  • the allowable parallax range of the stereoscopic video can be set in consideration of a synergistic effect of one or more values among brightness, contrast, and sharpness.
  • step S20 to step S25 in FIG. 4 is the same as the processing from step S10 to step S15 in FIG.
  • the stereoscopic image display control device 1-2 determines that the playback mode is the moving image playback mode in step S23 (S23: moving image playback mode).
  • the determination unit 25 reproduces and displays the stereoscopic video data representing the stereoscopic video having the same parallax amount as the parallax amount adjusted by the still image parallax amount adjustment unit 21 on the display unit 2, the observer may appropriately observe the stereoscopic video data. Whether or not it is possible is determined as described above (S26), and when it is determined that the observer can appropriately observe (S26; YES), the video signal processing unit 18 adjusts the parallax amount of the still image.
  • the continuous moving image data composed of a plurality of three-dimensional still images including a three-dimensional still image whose parallax amount is adjusted by the unit 21 is integrated to generate three-dimensional moving image data.
  • 3D video representing It performs signal processing for stereoscopic video to the image quality (S27).
  • the display control unit 15 displays the three-dimensional moving image represented by the three-dimensional moving image data after the signal processing on the display unit 2 (S25), and the series of processing ends.
  • the moving image parallax conversion unit 24 reproduces the data on the display unit 2 as described in the first embodiment.
  • the parallax amount of the stereoscopic moving image data representing the stereoscopic moving image constituted by is converted (S28).
  • the moving image signal processing unit 18 integrates continuous shot image data composed of a plurality of stereoscopic still images whose parallax amounts are converted by the moving image parallax amount conversion unit 24 to generate stereoscopic moving image data, and the generated stereoscopic moving image
  • the signal processing for the stereoscopic video is performed on the data to improve the image quality of the stereoscopic video represented by the stereoscopic video data (S27), and the display control unit 15 displays the stereoscopic video represented by the stereoscopic video data after the signal processing on the display unit 2. Display (S25), and the series of processing ends.
  • the determination by the stereoscopic vision determination unit 25 has been described as being performed before the moving image signal processing unit 18 generates the stereoscopic moving image data.
  • the present invention is not limited to this, and the stereoscopic moving image is not limited to this. It may be performed immediately before reproduction display, or may be performed at the time of generating stereoscopic moving image data, or may be performed at any timing, and the observer can change the setting of the determination timing.
  • the stereoscopic display control device 1-2 and the stereoscopic display control method of the present embodiment when stereoscopic video data representing a stereoscopic video having the same parallax amount as the parallax amount adjusted by the still image parallax amount adjusting unit is reproduced and displayed. Since the moving image parallax amount conversion unit 24 converts the parallax amount of the stereoscopic moving image data only when the observer cannot properly observe, the parallax amount of the stereoscopic moving image data is not unnecessarily reduced. Therefore, sufficient stereoscopic effect can be obtained when the stereoscopic video represented by the stereoscopic video data is reproduced and displayed.
  • the stereoscopic vision determination unit 25 of the second embodiment determines whether or not the observer can appropriately observe as described above, but the present invention is not limited to this. Absent.
  • the allowable parallax range D S that can be appropriately observed by the observer in the stereoscopic still image is set to be larger than the allowable parallax range D m in the stereoscopic moving image (see FIG. 9).
  • stereoscopic video it is known that when the amount of change in parallax is large, it is difficult for an observer to observe properly.
  • the parallax amounts of a plurality of stereoscopic still images constituting a stereoscopic image are all allowable in the stereoscopic video. even were the disparity range D m, the viewer is large amount of change parallax amount among the three-dimensional still image can no longer be able to properly observe the stereoscopic video.
  • the stereoscopic vision determination unit 25 first detects the amount of parallax in each of the plurality of stereoscopic still images constituting the stereoscopic moving image data to be reproduced, and calculates the amount of change in the amount of parallax between adjacent stereoscopic still images in the time series.
  • the parallax amount is calculated by detecting the coordinate values of a plurality of feature points whose features match on the right-eye still image and left-eye still image constituting the stereoscopic still image, and the right-eye still image and the left-eye still image are detected. It can be obtained by calculating the amount of deviation of the feature point from the image. Note that the feature points between the still image for the right eye and the still image for the left eye are in the reverse direction in the direction of popping out from the display surface on which the stereoscopic still image is displayed and in the depth (withdrawal) direction, that is, on the near side and the far side of the cross point. Therefore, when calculating the amount of parallax, the direction of deviation is also obtained.
  • the continuous-shot image data recorded in the image data recording unit 11 is data representing, as an image, the amount of left-right shift of each point in the image for each of a plurality of stereoscopic still images constituting the continuous-shot image data.
  • the file includes a distance image as attached information
  • the amount of parallax can be calculated by reading the attached information. Note that the method of calculating the amount of parallax is not limited to this, and a known method can be used.
  • the stereoscopic vision determination unit 25 calculates the degree of influence on stereoscopic vision, assuming that the greater the amount of change in the calculated parallax amount, the more difficult it is for the observer to perform appropriate observation.
  • the effect on stereoscopic vision is not only due to the amount of change in parallax, but also the amount of scene change such as the amount of change in brightness, the amount of change in contrast, and the amount of motion.
  • the stereoscopic vision determination unit 25 detects the brightness, contrast, and motion in each of the plurality of stereoscopic still images constituting the stereoscopic moving image data to be reproduced, and determines the amount of change between the stereoscopic still images adjacent in the time series.
  • the degree of influence on stereoscopic vision is calculated assuming that the greater the calculated change amount, the greater the influence on stereoscopic vision.
  • a known technique can be used for detecting brightness, contrast, and motion in a stereoscopic still image.
  • the predetermined threshold value is a value of the parallax amount when the pop-out amount and the retraction amount are 2.9% or more with respect to the screen width.
  • the predetermined threshold value may be decreased as the brightness value is increased.
  • the contour of the subject becomes clearer in a stereoscopic video, it becomes easier to feel a stereoscopic effect when observing the stereoscopic display, that is, it is considered that the effect on stereoscopic vision is large, so in step S21 in FIG.
  • the predetermined threshold value may be decreased as the sharpness value adjusted with the amount of parallax increases.
  • the predetermined value may be decreased as the adjusted contrast value increases.
  • the predetermined threshold value for the amount of parallax can be set in consideration of a synergistic effect due to one or more values of brightness, contrast, and sharpness.
  • the effect on stereoscopic vision in stereoscopic video is not only due to the amount of change in parallax, but also due to the magnitude of scene changes such as the amount of change in brightness, the amount of change in contrast, and the amount of motion. Therefore, when two or more change amounts including the change amount of the parallax amount among the change amounts described above are equal to or greater than a predetermined threshold, the stereoscopic determination unit 25 cannot allow the observer to appropriately observe the stereoscopic video. You may make it judge.
  • the stereoscopic vision determination unit 25 may determine whether or not the observation can be appropriately performed. In this case, when it is determined that proper observation is not possible (S26; NO), a warning may be displayed using a warning output unit 26 described later, or the reproduction and display of the stereoscopic video is stopped. Alternatively, a planar moving image may be displayed by reproducing and displaying a moving image represented by image data for only the right eye or only for the left eye among the stereoscopic moving image data.
  • FIG. 5 is a block diagram showing the configuration of the stereoscopic image display control apparatus 1-3
  • FIG. 6 is a flowchart showing the operation of the stereoscopic image display control apparatus 1-3 in FIG.
  • the stereoscopic image display control apparatus 1-3 further includes a warning output unit 26 in the configuration of FIG.
  • the warning output unit 26 issues a warning when the playback mode set by the playback mode setting unit 22 is a stereoscopic video.
  • a warning method it may be possible to display on the display unit 2 that there is a possibility that it cannot be observed properly, or to output sound through a speaker (not shown), or change as appropriate. can do.
  • the moving image parallax amount conversion unit 24 ′ displays the stereoscopic still image with the parallax amount adjusted so that the parallax amount is the same as the parallax amount of the stereoscopic still image adjusted by the still image parallax amount adjustment unit 21.
  • the parallax amount of stereoscopic video data representing a stereoscopic video composed of a plurality of stereoscopic still images is converted.
  • the parallax amount of the stereoscopic video data is converted by the still image parallax amount adjustment unit 21 so that the parallax amount of the stereoscopic still image data representing each stereoscopic still image in all of the plurality of stereoscopic still images constituting the stereoscopic video data is converted by the still image parallax amount adjustment unit 21.
  • This is performed by converting the parallax amount so as to be the same as the parallax amount of the adjusted stereoscopic still image.
  • a specific parallax amount conversion method a method similar to that of the moving image parallax amount conversion unit 24 of the first embodiment can be used, and thus detailed description thereof is omitted.
  • steps S30 to S31 and steps S34 to S36 in FIG. 6 are the same as the processes in steps S10 to S11 and steps S13 to S15 in FIG.
  • the stereoscopic image display control device 1-3 of the present embodiment adjusts the parallax amount of the stereoscopic still image data representing the stereoscopic still image reproduced and displayed on the display unit 2 in step S31.
  • the moving image parallax amount conversion unit 24 ′ adjusts the parallax amount of the stereoscopic still image data representing the stereoscopic still image reproduced and displayed on the display unit 2, that is, the parallax amount by the observer as described above.
  • the parallax amount of the stereoscopic video data representing the stereoscopic video composed of a plurality of stereoscopic still images including the stereoscopic still image is converted so that the parallax amount is the same as the parallax amount of the generated stereoscopic still image data (S32).
  • the brightness, contrast, and sharpness values may be changed to the same value as the stereoscopic still image data representing the stereoscopic still image reproduced and displayed on the display unit 2.
  • step S34 If it is determined in step S34 that the playback mode is the video playback mode (S34; video playback mode), the display unit 2 is warned that the warning output unit 26 may not be able to properly observe. Displayed (S37). Then, the CPU 20 determines whether or not the observer has confirmed the warning (S38). If it is determined that the observer has not confirmed (S38; NO), the process proceeds to step S37, and the warning output unit 26 continues to perform the above process. A warning is displayed and the subsequent processing is repeated.
  • step S39 the moving image signal processing unit 18 displays the stereoscopic still image whose parallax amount has been adjusted in step S31.
  • 3D video data is generated by integrating continuous shot image data composed of a plurality of 3D still images, and the generated 3D video data is used for 3D video to improve the quality of the 3D video represented by the 3D video data.
  • Signal processing is performed (S39), the display control unit 15 displays the stereoscopic moving image represented by the stereoscopic moving image data after the signal processing on the display unit 2 (S36), and the series of processing ends.
  • Whether or not the observer has confirmed the warning is determined, for example, by inputting from the operation unit 23 when the observer confirms the warning, and the CPU 20 can determine whether or not there is an input. it can.
  • the present invention when it is determined that the playback mode is the video playback mode, if the observer confirms the warning, the stereoscopic video that the viewer may not be able to properly observe is reproduced and displayed.
  • the present invention is not limited to this, and may be configured to prohibit reproduction display.
  • the stereoscopic image display control device 1-3 and the stereoscopic image display control method of the present embodiment when an observer views continuous shot image data as a stereoscopic still image, the amount of parallax corresponding to the stereoscopic still image 3D still images can be properly observed, and when continuous shot image data is viewed as a 3D video, it is known that the viewer may not be able to properly observe when the 3D video is played back Therefore, it is possible to take measures such as stopping viewing a stereoscopic video, for example, thereby reducing discomfort and fatigue due to stereoscopic viewing.
  • FIG. 7 is a block diagram showing the configuration of the stereoscopic image display control device 1-4
  • FIG. 8 is a flowchart showing the operation of the stereoscopic image display control device 1-4 of FIG.
  • the same parts as those in the configuration of the stereoscopic image display control apparatus 1-3 according to the above-described embodiment shown in FIG. Are omitted, and only different parts will be described.
  • the stereoscopic image display control device 1-4 of the present embodiment is further provided with a stereoscopic vision determination unit 25 in the configuration of FIG. Since the stereoscopic vision determination unit 25 is the same as the stereoscopic vision determination unit 25 of FIG. 3 described in the second embodiment, detailed description thereof is omitted.
  • the moving image parallax amount conversion unit 24 ′′ is the same as the moving image parallax amount conversion unit 24 ′ of FIG.
  • step S40 to step S46 in FIG. 8 is the same as the processing from step S30 to step S36 in FIG.
  • the stereoscopic image display control device 1-4 determines that the playback mode is the moving image playback mode in step S44 (S44: moving image playback mode).
  • the stereoscopic video data representing the stereoscopic video in which the parallax amount is converted by the video parallax conversion unit 24 ′′ is reproduced and displayed on the display unit 2 in step S42, the observer may appropriately observe the stereoscopic video.
  • the moving image signal processing unit 18 uses the moving image parallax amount conversion unit 24 '' to perform the parallax amount.
  • 3D moving image data that is, continuous shooting image data composed of a plurality of 3D still images converted in parallax amount is integrated to generate 3D moving image data. It performs signal processing for stereoscopic video to the stereoscopic video image quality improvement (S48).
  • the display control unit 15 displays the three-dimensional moving image represented by the three-dimensional moving image data after the signal processing on the display unit 2 (S48), and the series of processing ends.
  • step S48 the moving image signal processing unit 18 converts the amount of parallax by the moving image parallax amount conversion unit 24 ′′.
  • Stereoscopic video that is, continuous video image data composed of a plurality of stereoscopic still images whose parallax amounts have been converted is integrated to generate stereoscopic video data, and the quality of the stereoscopic video represented by the stereoscopic video data for the generated stereoscopic video data
  • signal processing for stereoscopic video is performed (S48)
  • the display control unit 15 displays the stereoscopic video represented by the stereoscopic video data after the signal processing on the display unit 2 (S46), and the series of processing ends. .
  • Whether or not the observer has confirmed the warning is determined, for example, by inputting from the operation unit 23 when the observer confirms the warning, and the CPU 20 can determine whether or not there is an input. it can.
  • the present invention when the viewer confirms the warning when the playback mode is determined to be the video playback mode, the stereoscopic video that cannot be properly observed by the viewer is reproduced and displayed.
  • the present invention is not limited to this, and may be configured to prohibit reproduction display.
  • the warning output unit 26 displays a warning and the moving image parallax amount conversion unit 24 "
  • the parallax amount of the stereoscopic video data may be converted so that the observer can appropriately observe, and the display control unit 15 may display only the right-eye image or the left-eye image of the stereoscopic video data.
  • a planar moving image may be displayed by reproducing and displaying the moving image represented by the data.
  • the determination by the stereoscopic vision determination unit 25 has been described as being performed before the moving image signal processing unit 18 generates the stereoscopic moving image data.
  • the present invention is not limited to this, It may be performed immediately before reproduction display, or may be performed at the time of generating stereoscopic moving image data, or may be performed at any timing, and the observer can change the setting of the determination timing.
  • the stereoscopic image display control device 1-4 and the stereoscopic image display control method of the present embodiment when an observer views continuous shot image data as a stereoscopic still image, the amount of parallax corresponding to the stereoscopic still image 3D still images can be properly observed, and when continuous shot image data is viewed as a 3D video, the viewer can know that the 3D video cannot be properly observed when the 3D video is played back. For example, it is possible to take measures such as stopping viewing a stereoscopic moving image, thereby reducing discomfort and fatigue due to stereoscopic viewing.
  • the present invention is not limited to a stereoscopic image.
  • the present invention can also be applied to a planar image.
  • the stereoscopic image display control devices 1, 1-2, 1-3, and 1-4 of the first to fourth embodiments described above can perform stereoscopic stationary.
  • a stereoscopic video is provided with a still image setting value adjusting unit that adjusts one or more setting values of brightness, contrast, and sharpness of a planar still image instead of the still image parallax amount adjusting unit 21 that adjusts the parallax amount of the image.
  • a moving image setting value changing unit that changes one or more setting values of brightness, contrast, and sharpness of a flat moving image instead of the moving image parallax amount conversion units 24, 24 ′, and 24 ′′ that convert the parallax amount It becomes.
  • the stereoscopic vision determination unit 25 excludes the parallax amount as a determination item.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

【課題】立体動画と立体静止画の両方を適切に観察することができるようにする。 【解決手段】複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御装置(1,1-2,1-3,1-4)であって、再生表示させた立体静止画に対して、立体静止画を表す立体静止画データの視差量を調整し、調整された視差量よりも小さくなるように、立体動画データの視差量を変換する。

Description

立体画像表示制御装置及び立体画像表示制御方法
 本発明は、立体動画と立体静止画の両方を取り扱う立体画像表示制御装置において、特に複数の立体静止画で構成された連写画像データを立体動画として再生表示するときの制御方法に関するものである。
 従来、視点の異なる複数の画像を組み合わせて表示することにより、視差を利用して立体視できることが知られている。このように立体視可能に表示される立体画像は、動画と静止画の両方において生成することができる。
 しかしながら立体画像においては、観察者の両眼間に生じる視差を利用しているため、前記複数の画像間の視差量が適切ではない場合に観察者に不快感や疲労感を与えてしまう虞がある。特に立体動画においては、各シーンの切替え時における急激な視差量の変化によって不快感や疲労感が増してしまうため、立体静止画よりも不快感や疲労感が生じ易い。
 そこで特許文献1には、不快感や疲労感が生じないように、シーンの切替えにおいて奥行値を滑らかに遷移させるようにした画像情報処理装置が開示されている。
 一方、立体動画を含む動画においては、表示画面から激しく点滅する光の刺激を受けることにより、観察者がけいれんなどの身体症状を引き起こす、いわゆるポケモン現象といわれる光感受性てんかん症状が知られている。
 そこで特許文献2には、光感受性てんかん症状対策としてスライドショーを表示するときに最大輝度を制限するようにした画像処理装置が開示されている。
特開2010-258723号公報 特開2007-251422号公報
人に優しい3D普及のための3DC安全ガイドライン、2010年4月20日改訂、3Dコンソーシアム・安全ガイドライン部会 放送倫理/アニメーション等の映像手法について、1998年4月8日作成(2006年4月1日一部改訂)、日本放送協会・(社)日本民間放送連盟
 しかしながら明るい画像と暗い画像を交互に表示することにより上記光感受性てんかん症状を引き起こす可能性のある動画であっても、明るい画像を静止画として表示するのであれば上記光感受性てんかん症状を引き起こすことはないものがある。すなわち動画として表示される場合と静止画として表示される場合では、人体に対して影響する度合いが異なっている。
 また立体画像においては、通常、立体静止画において観察者が適切に観察することができるとされている許容視差量は、立体動画よりも大きく設定されているため、立体静止画として再生されるときには観察者が適切に観察することができる画像であっても、複数の立体静止画を統合して立体動画として再生する場合には観察者が適切に観察することができない場合がある。
 本発明は、上記事情に鑑み、立体動画と立体静止画の両方を取り扱う立体画像表示制御装置において、観察者が立体動画と立体静止画の両方を適切に観察することができる立体画像表示制御装置及び立体画像表示制御方法、及び、立体視による不快感や疲労感の軽減を図ることができる体画像表示制御装置及び立体画像表示制御方法を提供することを目的とする。
 本発明の第1の立体画像表示制御装置は、複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させることができる立体画像表示制御装置であって、
 前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整する静止画視差量調整部と、
 該静止画視差量調整部により調整された視差量よりも小さくなるように、前記立体動画データの視差量を変換する動画視差量変換部とを備えていることを特徴とするものである。
 なお本発明において「複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる」とは、例えば、立体動画データを生成せずとも、表示制御によって複数の立体静止画をすばやく切り替え表示して動画的に見せるものや、複数の立体静止画をコマ送り再生する際に、早送り再生表示して動画的に見せるものも含む。
 なお本発明の第1の立体画像表示制御装置においては、前記静止画視差量調整部により調整された視差量と同じ視差量の前記立体動画を表す立体動画データを再生表示したときに、観察者が適切に観察することができるか否かを判断する立体視判断部を備え、
 前記動画視差量変換部が、前記立体視判断部により観察者が適切に観察することができないと判断されたときに前記立体動画データの視差量を変換するものであってもよい。
 また本発明の第2の立体画像表示制御装置は、複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させることができる立体画像表示制御装置であって、
 前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整する静止画視差量調整部と、
 該静止画視差量調整部により調整された視差量と同じ視差量になるように、前記立体動画データの視差量を変換する動画視差量変換部と、
 再生モードを立体動画又は立体静止画に設定する再生モード設定部と、
 前記再生モードが立体動画であるときに警告を行う警告出力部とを備えていることを特徴とするものである。
 なお本発明の第2の立体画像表示制御装置においては、前記動画視差量変換部により視差量が変換された前記立体動画データが表す立体動画を再生表示したときに観察者が適切に観察することができるか否かを判断する立体視判断部を備え、
前記警告出力部が、前記立体視判断部により観察者が適切に観察することができないと判断されたときに警告を行うものであってもよい。
 なお本発明の第1及び第2の立体画像表示制御装置においては、前記動画視差量変換部が、前記立体視判断部により観察者が適切に観察することができないと判断されたときに、観察者が適切に観察することができるように前記視差量が調整された立体静止画を含む前記複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換するものであってもよい。
 また本発明の第1の立体画像表示制御装置においては、前記立体視判断部が、視差量、明るさ、動き、コントラスト及びシャープネスのうち前記視差量を含むいずれか1つ以上の変化量を検出し、該検出した変化量に基づいて観察者が適切に観察することができるか否かを判断するものであってもよい。
 本発明の第1の立体画像表示制御方法は、複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御方法であって、
 前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、
 該調整された視差量よりも小さくなるように、前記立体動画データの視差量を変換することを特徴とする。
 なお本発明の第1の立体画像表示制御方法においては、前記調整された視差量と同じ視差量の前記立体動画を表す立体動画データを再生表示したときに、観察者が適切に観察することができるか否かを判断し、
 観察者が適切に観察することができないと判断されたときに前記立体動画データの視差量を変換することができる。
 また本発明の第2の立体画像表示制御方法は、複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御方法であって、
 前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、
 該調整された視差量と同じ視差量になるように、前記立体動画データの視差量を変換し、
 再生モードが立体動画であるときに警告を行うことを特徴とする。
 なお本発明の第2の立体画像表示制御方法においては、前記視差量が変換された立体動画データが表す立体動画を再生表示したときに観察者が適切に観察することができるか否かを判断し、
 観察者が適切に観察することができないと判断されたときに警告を行うことができる。
 本発明の第1及び第2の立体画像表示制御方法においては、観察者が適切に観察することができないと判断されたときに、観察者が適切に観察することができるように前記視差量が調整された立体静止画を含む前記複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換することができる。
 また本発明の第1の立体画像表示制御方法においては、視差量、明るさ、動き、コントラスト及びシャープネスのうち前記視差量を含むいずれか1つ以上の変化量を検出し、該検出した変化量に基づいて観察者が適切に観察することができるか否かを判断することができる。
 本発明の第1の立体画像表示制御装置及び立体画像表示制御方法によれば、複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御装置において、再生表示させた立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、調整された視差量よりも小さくなるように、前記立体動画データの視差量を変換するようにしたので、観察者は連写画像データを立体静止画として見るときには、立体静止画に対応した視差量の立体静止画を適切に観察することができると共に、連写画像データを立体動画として見るときには、立体静止画よりも小さくなるように変換された視差量の立体動画を見ることができるので、立体動画において観察者が適切に観察できる許容視差量が立体静止画よりも小さく設定されていても、観察者は立体動画と立体静止画の両方を適切に観察することができる。
 また本発明の第2の立体画像表示制御装置及び立体画像表示制御方法によれば、複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御装置において、再生表示させた立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、調整された視差量と同じ視差量になるように、前記立体動画データの視差量を変換し、再生モードが立体動画であるときに警告を行うようにしたので、観察者は連写画像データを立体静止画として見るときには、立体静止画に対応した視差量の立体静止画を適切に観察することができると共に、連写画像データを立体動画として見るときには、その立体動画が再生されると適切に観察することができない可能性があることを知ることができるので例えば立体動画を見るのをやめる等の対策をとることができ、これにより立体視による不快感や疲労感の軽減を図ることができる。
第1の実施形態の立体画像表示制御装置の構成を示すブロック図 図1の立体画像表示制御装置の作用を示すフローチャート 第2の実施形態の立体画像表示制御装置の構成を示すブロック図 図3の立体画像表示制御装置の作用を示すフローチャート 第3の実施形態の立体画像表示制御装置の構成を示すブロック図 図5の立体画像表示制御装置の作用を示すフローチャート 第4の実施形態の立体画像表示制御装置の構成を示すブロック図 図7の立体画像表示制御装置の作用を示すフローチャート 立体動画と立体静止画の許容視差範囲を説明する図 画像内の各点の左右ずれ量の模式図
 以下、図面を参照して本発明の第1の実施形態である立体画像表示制御装置1について説明する。図1は立体画像表示制御装置1の構成を示すブロック図、図2は図1の立体画像表示制御装置1の作用を示すフローチャートである。なお本実施形態の立体画像表示制御装置1は、例えば立体動画及び立体静止画が撮影可能な立体カメラ(3Dカメラ)等に搭載してもよい。
 本実施形態の立体画像表示制御装置1は立体動画及び立体静止画を表示させたり、記録することが可能なものであり、図1に示すように、各々データバス13に接続され、複数の立体静止画で構成された連写画像データ等が記録された例えばリムーバブルメディア等の画像データ記録部11に対する情報の記録及び読み出しを制御する記録/読出制御部12、LCD等から成り立体画像表示制御装置1に接続された表示部2への立体静止画及び立体動画の表示を制御する表示制御部15、画像データに対して静止画用の信号処理を行う静止画信号処理部17,画像データに対して動画用の信号処理を行う動画信号処理部18及びCPU20を備えており、これらの制御部・処理部はデータ制御部14が各々接続されており、これらの制御部・処理部の間のデータバス13経由でのデータ転送はデータ制御部14によって制御される。このデータ制御部14にはメモリ19が接続されている。
 また、図示は省略するが、記録/読出制御部12、表示制御部15、静止画信号処理部17及び動画信号処理部18はCPU20にも接続されており、これらの制御部・処理部における処理はCPU20によって制御される。CPU20には、立体画像表示制御装置1の本体に設けられた電源スイッチ、各種の設定スイッチ、キーボード、マウス等で構成された操作部23が接続されている。
 またCPU20には、表示部2への再生モードを動画再生モード又は静止画再生モードに設定する再生モード設定部22が接続され、再生モード設定部22は観察者が操作部23を操作することにより入力した観察者が所望する再生モードを設定可能となっている。なおCPU20は再生モード設定部22により設定された再生モードが、立体動画及び立体静止画のいずれであるのかを判断する判断部としても機能する。
 またCPU20には、後で詳細に説明する、静止画視差量調整部21及び同他視差量変換部24がそれぞれ接続されている。
 また、図示は省略するが、立体画像表示制御装置1にはマイクロフォンとスピーカも設けられており、マイクロフォンはA/D変換器等を介してデータバス13に接続され、スピーカは増幅器及びD/A変換器を介してデータバス13に接続されている。
 表示制御部15は、立体動画データや立体静止画データを表示部2に立体表示させるものであり、立体表示させるときには表示部2の立体表示方式に合わせた立体表示処理を行って表示部2に立体表示させる。ここで「立体表示」とは、観察者が被写体の立体感を認識できるように表示することを意味する。なお本実施形態における立体表示としては、公知の任意の方式を用いることができる。
 例えば、左目用画像と右目用画像を並べて表示して裸眼平衡法により立体視を行う方式、または表示部2にレンチキュラーレンズを貼り付け、表示部2の表示面の所定位置に左目用画像と右目用画像を表示することにより、左右の目に左目用画像と右目用画像を入射させて立体表示を実現するレンチキュラー方式を用いることができる。さらに、表示部2のバックライトの光路を光学的に左右の目に対応するように交互に分離し、表示部2の表示面に左目用画像と右目用画像をバックライトの左右への分離にあわせて交互に表示することにより、立体表示を実現するスキャンバックライト方式等を用いることができる。
 なお、表示部2は立体表示方式に応じた加工がなされている。例えば、立体表示方式がレンチキュラー方式の場合には、表示部2の表示面にレンチキュラーレンズが取り付けられており、スキャンバックライト方式の場合には、左右の画像の光線方向を変えるための光学素子が表示部2の表示面に取り付けられている。
 また表示制御部15は、表示部2に平面動画データ及び平面静止画データを表示させるものでもある。
 静止画信号処理部17は、立体静止画データに対し、立体静止画データが表す立体静止画の画質向上のために立体静止画用の信号処理を行う。なお、立体静止画用の信号処理としては、立体静止画データ中のノイズ成分を低減させるノイズ低減処理、立体静止画中の輪郭成分を抽出し抽出した輪郭成分を強調する輪郭強調処理、特定の空間周波数成分を減衰又は強調させるフィルタリング処理、静止画の色バランスを補正する色補正処理等が挙げられる。
 動画信号処理部18は、画像データ記録部11又はメモリ19に記憶され、記録/読出制御部12を介して読み出された、複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成する処理を行うと共に立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行う。なお、立体動画用の信号処理としては、立体動画データ中のノイズ成分を低減させるノイズ低減処理、立体動画データ中の輪郭成分を抽出し抽出した輪郭成分を強調する輪郭強調処理、特定の空間周波数成分を減衰又は強調させるフィルタリング処理、立体動画の色バランスを補正する色補正処理等が挙げられる。
 なお本発明において「立体動画」とは、複数の立体静止画をランダムに切り替えて表示させたり、あるいは1または複数の立体静止画を所定の速度に従って画面上を移動するよう表示させる、つまり立体静止画の高速コマ送り等も含むものとする。
 静止画視差量調整部21は、表示部2へ再生表示させた立体静止画に対して、再生表示された立体静止画を表す立体静止画データの視差量を調整するものであり、観察者が表示部2に再生表示した立体静止画を見ながら操作部23を操作することにより、再生表示した立体静止画を表す立体静止画データを観察者が所望する立体感を表す視差量に調整することができる。なお視差量の調整方法については後で詳細に説明する。
 動画視差量変換部24は、静止画視差量調整部21により調整された立体静止画の視差量よりも小さくなるように、視差量が調整された立体静止画を含む複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換するものである。なお立体動画データの視差量の変換は、この立体動画データを構成する複数の立体静止画の全てにおいて、各立体静止画を表す立体静止画データの視差量が、静止画視差量調整部21により調整された立体静止画の視差量よりも小さくなるように変換することにより行う。なお本実施形態において「視差量」は立体画像を構成する左目用画像と右目用画像中の特徴点のずれ量を意味する。ここで図10に画像内の各点の左右ずれ量を模式的に表した図を示す。
 図10中、奥行き方向においてクロスポイントから離れるほどずれ量すなわち矢印の長さは大きくなり、クロスポイントの手前側と奥側ではずれの向きすなわち矢印の向きが異なる。そこで視差量の変換は、図10中の矢印の長さが短くなるように、右目用静止画及び/又は左目用静止画を変形する。画像内の各点においてずれを小さくする量も向きも異なるので、画像の変形には、ワーピングと呼ばれる、いわゆる非線形な幾何変換によってずれ量すなわち視差量が小さくなるように画像を変形する。ワーピングは、例えば画像を局所的に歪めて、すなわちワープして変形するものであり、一般的には、画像を複数の三角パッチに分割し、その三角パッチ毎に変形を行う。なおワーピングによる画像の変形の具体的な方法については特開2010-152819号公報に記載された技術を使用することができる。なお動画視差量変換部24により立体動画データの視差量の変換については、後でさらに説明する。
 次に本実施形態の立体画像表示制御装置1を使用した立体画像表示制御方法について、以下に図面を参照して説明する。本実施形態の立体画像表示制御装置1は、図2に示すように、まず、表示制御部15が画像データ記憶部11に記憶された複数の立体静止画で構成された連写画像データから観察者によって予め選択された所定の立体静止画が表す立体静止画データを表示部2に再生表示する(S10)。なお連写画像データから任意の立体静止画を選択する方法としては、例えば観察者が表示部2に1枚毎に再生した立体静止画を見ながら所望する立体静止画に対して操作部23を操作することにより選択することができる。
 次に静止画視差量調整部21が、表示部2に再生表示された立体静止画を表す立体静止画データの視差量を、上述したように観察者によるに操作部23からの入力に基づいて調整する(S11)。なお立体静止画における視差量の調整は、具体的には、立体静止画データの視差量が、観察者による操作部23からの入力量に応じた視差量になるように、上述した動画視差量変換部24による視差量の変換方法と同様の方法で変換を行う。
 なお観察者からの入力がある度毎に、調整された視差量となるように立体静止画データを変換して表示部2へ再生表示する。また再生表示された立体静止画を表す立体静止画データは、視差量に加えてさらに明るさ、コントラスト及びシャープネスの値を調整してもよい。なおこれらの調整は、操作部23を操作することにより行うことができる。
 次に、再生モード設定部22が観察者によって入力された再生モードを設定し(S12)、CPU20が、再生モード設定部22が設定した再生モードが、静止画再生モードであるのか動画再生モードであるのかを判別して(S13)、静止画再生モードと判別した場合(S13;静止画再生モード)には、静止画信号処理部17が再生表示された立体静止画を表す立体静止画データに対して立体静止画用の信号処理を行い(S14)、表示制御部15が信号処理後の立体静止画データが表す立体静止画を表示部2に表示して(S15)、一連の処理を終了する。
 一方、ステップS13にて、再生モードが動画再生モードであると判別した場合(S13;動画再生モード)には、動画視差量変換部24が、上述したようにして、表示部2に再生表示された立体静止画を表す立体静止画データの視差量すなわち観察者によって視差量が調整された立体静止画データの視差量よりも小さくなるように、この立体静止画を含む複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換する(S16)。このとき視差量に加えてさらに明るさ、コントラスト及びシャープネスの値も、表示部2に再生表示された立体静止画を表す立体静止画データの値よりも小さくなるように変更してもよい。
 通常、立体静止画において観察者が適切に観察することができる許容視差範囲Dは、立体動画における許容視差範囲Dよりも大きく設定されているため(図9参照)、立体静止画を再生表示したときには、観察者が適切に観察することができる視差量であっても、立体動画として再生表示したときには、表示部2の表示画面からの飛び出し量及び奥行き方向への引っ込み量が多過ぎて、観察者が不快感や疲労感を感じる等適切に観察することができない場合がある。
 また明るさ、コントラスト、シャープネスについても、1枚の立体静止画として再生表示したときには、適切に観察することができる値であっても、立体動画として再生表示したときには、目が疲れたり、けいれんなどの身体症状を引き起こす等人体に対して影響が生じる場合がある。
 そこで本実施形態の立体画像表示制御装置1は、動画視差量変換部21が、図9に示すように、立体動画を構成する各立体静止画fの視差量が、すべて視差量が調整された立体静止画fの視差量よりも小さくなるように立体静止画データの視差量を変換する。このとき変換後の視差量は、立体動画の許容視差範囲D内の値になるようにする。
 なおここで「視差量が小さくなる」は図9において、視差量が0になる表示面すなわちクロスポイントよりも遠方側(図中・・・よりも上側)においては、立体静止画の視差量の最大値(図中、上向きの矢印の先端)がより下側に位置することを意味し、視差量が0になるクロスポイントよりも手前側(図中・・・よりも下側)においては、立体静止画の視差量の最小値(図中、下向きの矢印の先端)がより上側に位置することを意味する。
 上記のように、立体動画の視差量を立体静止画の視差量よりも小さくすることにより、立体動画の再生表示時に観察者は疲労感や不快感を感じることなく立体動画を適切に観察することができる。このとき立体動画を構成する複数の立体静止画を表す各立体静止画データが観察者が適切に観察できる許容視差範囲D内の視差量で構成されている場合には、観察者は立体動画と立体静止画の両方を適切に観察することができる。
 なお静止画視差量調整部21による視差量の調整及び動画視差量変換部24による視差量の変換は、図9中・・・で示す立体静止画が表示される表示面いわゆるクロスポイントを中心にして遠近均等に、すなわち、表示面から飛び出し方向の立体感と表示面から奥行き方向の立体感が同じ値になるようにしてもよいし、遠方向すなわち奥行き方向の立体感を示す視差量と近方向すなわち飛び出し方向の立体感を示す視差量とを別々に設定できるようにしてもよい。
 通常、立体画像を観察するときに、奥行き方向の立体感を示す視差量が大きくなればなるほど、観察者は両目を該両目が離れる方向へ移動させて立体視を行わなければならず、特に両眼の間隔が狭い小さな子供等は奥行き方向の立体感を示す視差量が大きすぎると観察者が立体画像を適切に観察し難い場合がある。従って、遠方向の視差量が近方向の視差量よりも小さくなるように変換してもよい。
 以上のようにして動画視差量変換部24による視差量の変換が行われると(S16)、次に動画信号処理部18が、観察者が予め選択した上記所定の立体静止画を含む複数の立体静止画で構成された連写画像データを統合して立体動画データを生成し、生成した立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行う(S17)。
 そして表示制御部15が信号処理後の立体動画データが表す立体動画を表示部2に表示して(S15)、一連の処理を終了する。本実施形態の立体画像表示制御装置1はこのようにして表示部2への再生表示を行わせる。
 以上のように、本実施形態の立体画像表示制御装置及び立体画像表示制御方法によれば、再生表示させた立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、調整された視差量よりも小さくなるように、前記立体動画データの視差量を変換するようにしたので、観察者は連写画像データを立体静止画として見るときには、立体静止画に対応した視差量の立体静止画を適切に観察することができると共に、連写画像データを立体動画として見るときには、立体静止画よりも小さくなるように変換された視差量の立体動画を見ることができるので、立体動画において観察者が適切に観察することができる許容視差量が立体静止画よりも小さく設定されていても、立体動画と立体静止画の両方を適切に観察することができる。
 次に図面を参照して本発明の第2の実施形態である立体画像表示制御装置1-2について説明する。図3は立体画像表示制御装置1-2の構成を示すブロック図、図4は図3の立体画像表示制御装置1-2の作用を示すフローチャートである。なお図3に示す本実施形態の立体画像表示制御装置1-2の構成は、図1に示す上記実施形態の立体画像表示制御装置1の構成と同様の箇所は同番号で示して説明は省略し、異なる箇所についてのみ説明する。
 本実施形態の立体画像表示制御装置1-2は、図3に示すように、図1の構成にさらに立体視判断部25を備えたものである。
 立体視判断部25は、静止画視差量調整部21により調整された視差量と同じ視差量の立体動画を表す立体動画データを表示部2に再生表示したときに、観察者が立体動画を適切に観察することができるか否かを判断するものである。
 観察者が立体動画を適切に観察することができるか否かの判断は、具体的には、静止画視差量調整部21によって調整された視差量が、予め設定された立体動画の許容視差範囲内のときは適切に観察することができると判断することにより行う。
 一般的に、立体動画の再生表示においては、視差量が立体動画を適切に観察できるか否かに影響するため、本実施形態では、視差量が立体動画の許容視差範囲外のときには適切に観察することができないと判断する。なお適切に観察することができる視差角θが、各種研究によって経験的に求められている。ここで視差角θとは、表示面上の一点を見たときの輻輳角と両眼視差により決まる立体を見たときの輻輳角との差をいう。現在、ハイビジョンテレビを想定した場合の立体動画の許容視差範囲は、瞳孔間間隔を6.5cm、表示観視距離(テレビの画面高さの3倍距離)での視聴を前提にしたときに、1画面内の奥行き範囲は1度以内に抑えると見易いとの研究結果がある(非特許文献1参照)。
 そのため本実施形態では、立体動画の許容視差範囲の上限値と下限値は視差角が1度となる視差量の値とする。なおハイビジョンテレビを想定した場合、瞳孔間間隔6.5cm、標準観視距離をテレビの画面高さの3倍距離としての視聴を前提にしたときに、水平ピクセル数1920の場合で視差角が1度のときは、画面幅に対して飛び出し量及び引っ込み量は画面幅に対して2.9%となるので、この場合には、表示画面からの飛び出し量及び引っ込み量は画面幅に対して2.9%となるように立体動画の許容視差範囲を設定する。
 なお立体動画の許容視差範囲は、立体静止画が表示される表示面いわゆるクロスポイントを中心にして遠近均等、すなわち、表示画面からの飛び出し量及び引っ込み量が同じ値になるように設定してもよいし、クロスポイントを中心にして遠近別々、すなわち表示画面からの飛び出し量及び引っ込み量が異なる値になるように設定してもよい。
 通常、立体画像を観察するときに、表示画面からの引っ込み量が大きくなればなるほど、観察者は両目を該両目が離れる方向へ移動させて立体視を行わなければならず、特に両眼の間隔が狭い小さな子供等は表示画面からの引っ込み量が大きすぎると観察者が立体画像を適切に観察し難い場合がある。従って、表示画面からの引っ込み量が飛び出し量よりも小さくなるように立体動画の許容視差範囲を設定することが望ましい。
 なお明るさ、コントラスト及びシャープネスについては、観察者が予め、表示部2に表示された立体動画を観察しながら操作部23を操作して不快感や疲労感等を感じる値の範囲を検出し、検出した値の範囲を許容範囲とすることができる。なお立体動画の許容視差範囲も上記と同様にして設定してもよい。
 また表示部2の画面の明るさが明るいときと、暗いときでは、明るいときの方が立体表示を観察したときに観察者が適切に観察することができない可能性が高いと考えられるので、明るさの値が大きいほど立体動画の許容視差範囲を狭くするようにしてもよい。また同様に、表示部2の画面のコントラストの設定値が大きいほど立体動画の許容視差範囲を狭くするようにしてもよい。また同様に表示部の画面のシャープネスの値が大きいほど立体動画の許容視差範囲を狭くするようにしてもよい。立体動画の許容視差範囲は、明るさ、コントラスト、シャープネスのうちの1つ以上の値の相乗効果を加味して設定することができる。
 次に本実施形態の立体画像表示制御装置1-2を使用した立体画像表示制御方法について、以下に図面を参照して説明する。なお図4のステップS20~ステップS25の処理は図2のステップS10~ステップS15の処理と同様であるため説明は省略する。
 本実施形態の立体画像表示制御装置1-2は、図4に示すように、ステップS23にて、再生モードが動画再生モードであると判別した場合(S23;動画再生モード)には、立体視判断部25が、静止画視差量調整部21により調整された視差量と同じ視差量の立体動画を表す立体動画データを表示部2に再生表示したときに、観察者が適切に観察することができるか否かを上述したようにして判断し(S26)、観察者が適切に観察することができると判断した場合(S26;YES)には、動画信号処理部18が、静止画視差量調整部21により視差量が調整された立体静止画を含む複数の立体静止画で構成された連写画像データを統合して立体動画データを生成し、生成した立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行う(S27)。
 そして表示制御部15が信号処理後の立体動画データが表す立体動画を表示部2に表示して(S25)、一連の処理を終了する。
 一方、観察者が適切に観察することができないと判断した場合には(S26;NO)、動画視差量変換部24が、上記第1の実施形態で説明したようにして、表示部2に再生表示された立体静止画を表す立体静止画データの視差量すなわち観察者によって視差量が調整された立体静止画データの視差量よりも小さくなるように、この立体静止画を含む複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換する(S28)。
 次に動画信号処理部18が、動画視差量変換部24により視差量が変換された複数の立体静止画で構成された連写画像データを統合して立体動画データを生成し、生成した立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行い(S27)、表示制御部15が信号処理後の立体動画データが表す立体動画を表示部2に表示して(S25)、一連の処理を終了する。
 なお本実施形態では、立体視判断部25による判断を、動画信号処理部18が立体動画データを生成する前に行うものとして説明したが、本発明はこれに限られるものではなく、立体動画を再生表示する直前に行ってもよいし、立体動画データの生成時に行ってもよいし、いずれのタイミングで行ってもよいものとし、判断のタイミングは観察者が設定変更可能とする。
 本実施形態の立体表示制御装置1-2及び立体表示制御方法によれば、静止画視差量調整部により調整された視差量と同じ視差量の立体動画を表す立体動画データを再生表示したときに、観察者が適切に観察することができないときのみに、動画視差量変換部24が立体動画データの視差量を変換するようにしたので、立体動画データの視差量を不要に小さくすることがないため、立体動画データが表す立体動画を再生表示させたときに、十分な立体感を得ることができる。
 なお上記第2の実施形態の立体視判断部25は、上述したようにして観察者が適切に観察することができるか否かを判断するようにしたが、本発明はこれに限られるものではない。
 通常、立体静止画において観察者が適切に観察することができる許容視差範囲Dは、立体動画における許容視差範囲Dよりも大きく設定されているため(図9参照)、1枚毎の立体静止画fとしては観察者が適切に観察することができる連写画像データであっても、統合されて立体動画となったときには、例えば図9の立体静止画fのように、立体動画の許容視差範囲D外の視差量を有する画像が存在する場合には、観察者は立体動画を適切に観察することができなくなってしまう場合がある。
 立体動画においては、視差量の変化量が大きいと観察者が適切に観察し難くなることが知られているため、例えば立体画像を構成する複数の立体静止画の視差量が全て立体動画における許容視差範囲D内であったとしても、各立体静止画間で視差量の変化量が大きいと観察者が立体動画を適切に観察することができなくなってしまう。
 そこで立体視判断部25が、まず再生する立体動画データを構成する複数の立体静止画の各々において視差量を検出し、時間系列で隣り合う立体静止画間の視差量の変化量を算出する。
 なお視差量の算出は立体静止画を構成する右目用静止画及び左目用静止画の画像上で特徴が一致する複数の組の特徴点の座標値を検出し、右目用静止画と左目用静止画との間の特徴点のずれ量を算出することにより求めることができる。なお立体静止画が表示される表示面から飛び出す方向と奥行き(引っ込む)方向では、つまりクロスポイントの手前側と奥側では、右目用静止画と左目用静止画との間の特徴点は逆方向にずれるので、視差量を算出するときには、ずれる方向も求めるものとする。
 なお画像データ記録部11に記録された連写画像データが、この連写画像データを構成する複数の立体静止画の各々について、画像内の各点の左右ずれ量を画像として表したデータである距離画像を付属情報として含むファイルで構成されている場合には、この付属情報を読み出すことにより視差量を算出することができる。なお視差量の算出方法はこれに限られるものではなく、公知の方法を使用することができる。
 そして立体視判断部25は、算出した視差量の変化量が大きいほど観察者が適切な観察をし難くなるものとして立体視への影響度合いを算出する。
 また立体動画において立体視への影響は、視差量の変化量だけではなく、明るさの変化量、コントラストの変化量及び動き量等のシーン変化の大きさも要因となる。従って、立体視判断部25は、再生する立体動画データを構成する複数の立体静止画の各々において明るさ、コントラスト、動きを検出し、時間系列で隣り合う立体静止画間の各々の変化量を算出し、算出した変化量が大きいほど立体視への影響が大きいものとして立体視への影響度合いを算出する。なお立体静止画における、明るさ、コントラスト、動きの検出については、公知の技術を使用することができる。
 上述したように立体動画においては、視差量の変化量が大きいほど立体視への影響が大きい。従って、立体視判断部25が算出した視差量の変化量が、所定の閾値以上となる場合に観察者が立体動画を適切に観察することができないと判断する。なお本実施形態において所定の閾値は、画面幅に対して飛び出し量及び引っ込み量が2.9%以上となるときの視差量の値とする。
 なお表示部2の画面の明るさが明るいときと、暗いときでは、明るいときの方が立体表示を観察したときに立体視し難いと考えられるので、図4のステップS21にて視差量と共に調整された明るさの値が大きいほど所定の閾値を小さくするようにしてもよい。また同様に、立体動画において被写体の輪郭がはっきりしているほど立体表示を観察したときに立体感を感じ易くなる、つまり立体視への影響が大きいと考えられるので、図4のステップS21にて視差量と共に調整されたシャープネスの値が大きいほど所定の閾値を小さくするようにしてもよい。
 また同様に立体動画において被写体のコントラストが大きい程、立体表示を観察したときに立体感を感じ易くなる、つまり立体視への影響が大きいと考えられるので、図4のステップS21にて視差量と共に調整されたコントラストの値が大きいほど所定の値を小さくするようにしてもよい。視差量における所定の閾値は、明るさ、コントラスト、シャープネスのうちの1つ以上の値による相乗効果を加味して設定することができる。
 また立体動画において立体視への影響は、上述したように視差量の変化量だけではなく、明るさの変化量、コントラストの変化量及び動き量等のシーン変化の大きさも要因となる。従って、上述した各変化量のうち視差量の変化量を含む2つ以上の変化量が所定の閾値以上となる場合に立体視判断部25は観察者が立体動画を適切に観察することができないと判断するようにしてもよい。
 なお、明るさについては、画面の明るさの変化量が20%を超える急激なシーン転換があるときに、立体動画を観察し難くなる可能性があるので、明るさにおいて前記所定の閾値は20%とする。
 このようにして立体視判断部25による適切に観察することができるか否かの判断を行ってもよい。なおこの場合、適切に観察することができないと判断されたとき(S26;NO)には、後述する警告出力部26を使用して警告を表示させてもよいし、立体動画の再生表示を停止させてもよいし、立体動画データのうち右目用のみ、又は左目用のみの画像データが表す動画を再生表示することにより平面動画を表示させてもよい。
 また立体視判断部25により算出された時間系列で隣り合う立体静止画間の視差量の変化量が上記所定の閾値よりも小さくなるように、隣り合う立体静止画を表す立体静止画データのどちらか一方又は両方の視差量を変換するようにしてもよい。
 次に図面を参照して本発明の第3の実施形態である立体画像表示制御装置1-3について説明する。図5は立体画像表示制御装置1-3の構成を示すブロック図、図6は図5の立体画像表示制御装置1-3の作用を示すフローチャート、である。なお図5に示す本実施形態の立体画像表示制御装置1-3の構成は、図1に示す実施形態の立体画像表示制御装置1の構成と同様の箇所は同番号で示して説明は省略し、異なる箇所についてのみ説明する。
 本実施形態の立体画像表示制御装置1-3は、図5に示すように、図1の構成にさらに警告出力部26を備えたものである。
 警告出力部26は、再生モード設定部22が設定した再生モードが立体動画であるときに警告を行う。警告方法としては、適切に観察することができない可能性がある旨を表示部2に表示させるようにしてもよいし、図示していないスピーカによって音声を出力するようにしてもよいし、適宜変更することができる。
 また本実施形態の動画視差量変換部24’は、静止画視差量調整部21により調整された立体静止画の視差量と同じ視差量になるように、視差量が調整された立体静止画を含む複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換するものである。なお立体動画データの視差量の変換は、この立体動画データを構成する複数の立体静止画の全てにおいて、各立体静止画を表す立体静止画データの視差量が、静止画視差量調整部21により調整された立体静止画の視差量と同じ視差量になるように変換することにより行う。なお具体的な視差量の変換方法については、上記第1の実施形態の動画視差量変換部24と同様の方法を使用することができるので、詳細な説明は省略する。
 次に本実施形態の立体画像表示制御装置1-3を使用した立体画像表示制御方法について、以下に図面を参照して説明する。なお図6のステップS30~ステップS31及びステップS34~ステップS36の処理は図2のステップS10~ステップS11及びステップS13~ステップS15の処理と同様であるため説明は省略する。
 本実施形態の立体画像表示制御装置1-3は、図6に示すように、ステップS31にて、表示部2に再生表示された立体静止画を表す立体静止画データの視差量が調整されると(S31)、次に動画視差量変換部24’が、上述したようにして、表示部2に再生表示された立体静止画を表す立体静止画データの視差量すなわち観察者によって視差量が調整された立体静止画データの視差量と同じ視差量になるように、この立体静止画を含む複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換する(S32)。このとき視差量に加えてさらに明るさ、コントラスト及びシャープネスの値も、表示部2に再生表示された立体静止画を表す立体静止画データと同じ値になるように変更してもよい。
 そしてステップS34にて再生モードが動画再生モードであると判別した場合(S34;動画再生モード)には、警告出力部26が適切に観察することができない可能性がある旨を表示部2に警告表示する(S37)。そしてCPU20は観察者が警告を確認したか否かを判別し(S38)、確認していないと判別した場合(S38;NO)にはステップS37へ処理を移行して警告出力部26が引き続き上記警告表示を行って、以降の処理を繰り返す。
 また観察者が警告を確認したと判別した場合(S38;YES)には、ステップS39へ処理を移行して、動画信号処理部18が、ステップS31にて視差量が調整された立体静止画を含む複数の立体静止画で構成された連写画像データを統合して立体動画データを生成し、生成した立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行い(S39)、表示制御部15が信号処理後の立体動画データが表す立体動画を表示部2に表示して(S36)、一連の処理を終了する。
 なお観察者が警告を確認したか否かの判別は、例えば観察者が警告を確認したときに操作部23から入力を行う構成とし、CPU20が入力があったか否かを判別することにより行うことができる。
 また本実施形態では、再生モードが動画再生モードであると判断したときに、観察者が警告を確認したら、観察者が適切に観察することができない可能性のある立体動画を再生表示する構成としたが、本発明はこれに限られるものではなく、再生表示を禁止するような構成としてもよい。
 以上のように、本実施形態の立体画像表示制御装置1-3及び立体画像表示制御方法によれば、観察者は連写画像データを立体静止画として見るときには、立体静止画に対応した視差量の立体静止画を適切に観察することができると共に、連写画像データを立体動画として見るときには、その立体動画が再生されると観察者が適切に観察することができない可能性があることを知ることができるので例えば立体動画を見るのをやめる等の対策をとることができ、これにより立体視による不快感や疲労感の軽減を図ることができる。
 次に図面を参照して本発明の第4の実施形態である立体画像表示制御装置1-4について説明する。図7は立体画像表示制御装置1-4の構成を示すブロック図、図8は図7の立体画像表示制御装置1-4の作用を示すフローチャート、である。なお図7に示す本実施形態の立体画像表示制御装置1-4の構成は、図5に示す上記実施形態の立体画像表示制御装置1-3の構成と同様の箇所は同番号で示して説明は省略し、異なる箇所についてのみ説明する。
 本実施形態の立体画像表示制御装置1-4は、図7に示すように、図5の構成にさらに立体視判断部25を備えたものである。なお立体視判断部25は、上述した第2の実施形態で説明した図3の立体視判断部25と同様のものであるため詳細な説明は省略する。また動画視差量変換部24”は図5の動画視差量変換部24’と同様のものであるため詳細な説明は省略する。
 次に本実施形態の立体画像表示制御装置1-4を使用した立体画像表示制御方法について、以下に図面を参照して説明する。なお図8のステップS40~ステップS46の処理は図6のステップS30~ステップS36の処理と同様であるため説明は省略する。
 本実施形態の立体画像表示制御装置1-4は、図8に示すように、ステップS44にて再生モードが動画再生モードであると判別した場合(S44;動画再生モード)、立体視判断部25が、ステップS42にて動画視差量変換部24”により視差量が変換された立体動画を表す立体動画データを表示部2に再生表示したときに、観察者が立体動画を適切に観察することができるか否かを判断し(S47)、観察者が適切に観察することができると判断した場合(S47;YES)には、動画信号処理部18が、動画視差量変換部24”により視差量が変換された立体動画すなわち視差量が変換された複数の立体静止画で構成された連写画像データを統合して立体動画データを生成し、生成した立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行う(S48)。
 そして表示制御部15が信号処理後の立体動画データが表す立体動画を表示部2に表示して(S48)、一連の処理を終了する。
 一方、観察者が適切に観察することができないと判断した場合には(S47;NO)、警告出力部26が適切に観察することができない旨を表示部2に警告表示する(S49)。そしてCPU20は観察者が警告を確認したか否かを判別し(S50)、確認していないと判別した場合(S50;NO)にはステップS49へ処理を移行して警告出力部26が引き続き上記警告表示を行って、以降の処理を繰り返す。
 また観察者が警告を確認したと判別した場合(S50;YES)には、ステップS48へ処理を移行して、動画信号処理部18が、動画視差量変換部24”により視差量が変換された立体動画すなわち視差量が変換された複数の立体静止画で構成された連写画像データを統合して立体動画データを生成し、生成した立体動画データに対し、立体動画データが表す立体動画の画質向上のために立体動画用の信号処理を行い(S48)、表示制御部15が信号処理後の立体動画データが表す立体動画を表示部2に表示して(S46)、一連の処理を終了する。
 なお観察者が警告を確認したか否かの判別は、例えば観察者が警告を確認したときに操作部23から入力を行う構成とし、CPU20が入力があったか否かを判別することにより行うことができる。
 また本実施形態では、再生モードが動画再生モードであると判断したときに、観察者が警告を確認したら、観察者が適切に観察することができない立体動画を再生表示する構成としたが、本発明はこれに限られるものではなく、再生表示を禁止するような構成としてもよい。
 また本実施形態では、ステップS47にて観察者が適切に観察することができないと判断された場合に(S47;NO)、警告出力部26が警告表示を行うと共に、動画視差量変換部24”が、観察者が適切に観察することができるように立体動画データの視差量を変換するようにしてもよいし、表示制御部15が立体動画データのうち右目用のみ、又は左目用のみの画像データが表す動画を再生表示することにより平面動画を表示させてもよい。
 また本実施形態では、立体視判断部25による判断を、動画信号処理部18が立体動画データを生成する前に行うものとして説明したが、本発明はこれに限られるものではなく、立体動画を再生表示する直前に行ってもよいし、立体動画データの生成時に行ってもよいし、いずれのタイミングで行ってもよいものとし、判断のタイミングは観察者が設定変更可能とする。
 以上のように、本実施形態の立体画像表示制御装置1-4及び立体画像表示制御方法によれば、観察者は連写画像データを立体静止画として見るときには、立体静止画に対応した視差量の立体静止画を適切に観察することができると共に、連写画像データを立体動画として見るときには、その立体動画が再生されると観察者は適切に観察することができないことを知ることができるので例えば立体動画を見るのをやめる等の対策をとることができ、これにより立体視による不快感や疲労感の軽減を図ることができる。
 なお上述した第1~4の実施形態の立体画像表示制御装置1,1-2,1-3,1-4においては、立体画像を再生する場合について説明したが、本発明は立体画像だけではなく、平面画像についても適用することができる。平面画像について本発明の立体画像表示制御装置を使用する場合には、上述した第1~4の実施形態の立体画像表示制御装置1,1-2,1-3,1-4において、立体静止画の視差量を調整する静止画視差量調整部21ではなく平面静止画の明るさ、コントラスト及びシャープネスのうちの1つ以上の設定値を調整する静止画設定値調整部を備えると共に、立体動画の視差量を変換する動画視差量変換部24,24’,24”ではなく、平面動画の明るさ、コントラスト及びシャープネスのうちの1つ以上の設定値を変更する動画設定値変更部を備えるものとなる。
 また上述した第2及び第4の実施形態の立体画像表示制御装置1-2,1-4において、立体視判断部25は、判断項目として視差量を除くことになる。
 なお本発明は、上述した実施形態の内容に限られるものではなく、発明の趣旨を逸脱しない範囲において適宜変更することができる。

Claims (12)

  1.  複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させることができる立体画像表示制御装置であって、
     前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整する静止画視差量調整部と、
     該静止画視差量調整部により調整された視差量よりも小さくなるように、前記立体動画データの視差量を変換する動画視差量変換部とを備えていることを特徴とする立体画像表示制御装置。
  2.  前記静止画視差量調整部により調整された視差量と同じ視差量の前記立体動画を表す立体動画データを再生表示したときに、観察者が適切に観察することができるか否かを判断する立体視判断部を備え、
     前記動画視差量変換部が、前記立体視判断部により観察者が適切に観察することができないと判断されたときに前記立体動画データの視差量を変換するものであることを特徴とする請求項1記載の立体画像表示制御装置。
  3.  複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させることができる立体画像表示制御装置であって、
     前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整する静止画視差量調整部と、
     該静止画視差量調整部により調整された視差量と同じ視差量になるように、前記立体動画データの視差量を変換する動画視差量変換部と、
     再生モードを立体動画又は立体静止画に設定する再生モード設定部と、
     前記再生モードが立体動画であるときに警告を行う警告出力部とを備えていることを特徴とする立体画像表示制御装置。
  4.  前記動画視差量変換部により視差量が変換された前記立体動画データが表す立体動画を再生表示したときに観察者が適切に観察することができるか否かを判断する立体視判断部を備え、
     前記警告出力部が、前記立体視判断部により観察者が適切に観察することができないと判断されたときに警告を行うものであることを特徴とする請求項3記載の立体画像表示制御装置。
  5.  前記動画視差量変換部が、前記立体視判断部により観察者が適切に観察することができないと判断されたときに、観察者が適切に観察することができるように前記視差量が調整された立体静止画を含む前記複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換するものであることを特徴とする請求項2又は請求項4記載の立体画像表示制御装置。
  6.  前記立体視判断部が、視差量、明るさ、動き、コントラスト及びシャープネスのうち前記視差量を含むいずれか1つ以上の変化量を検出し、該検出した変化量に基づいて観察者が適切に観察することができるか否かを判断するものであることを特徴とする請求項2記載の立体画像表示制御装置。
  7.  複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御方法であって、
     前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、
     該調整された視差量よりも小さくなるように、前記立体動画データの視差量を変換することを特徴とする立体画像表示制御方法。
  8.  前記調整された視差量と同じ視差量の前記立体動画を表す立体動画データを再生表示したときに、観察者が適切に観察することができるか否かを判断し、
     観察者が適切に観察することができないと判断されたときに前記立体動画データの視差量を変換することを特徴とする請求項7記載の立体画像表示制御方法。
  9.  複数の立体静止画で構成された連写画像データを、立体静止画として再生表示させるときは前記複数の立体静止画から1枚の任意の立体静止画を表す立体静止画データを取得して再生表示させ、立体動画として再生表示させるときは前記複数の立体静止画で構成された連写画像データを統合して立体動画を表す立体動画データを生成して再生表示させる立体画像表示制御方法であって、
     前記再生表示させた前記立体静止画に対して、該立体静止画を表す立体静止画データの視差量を調整し、
     該調整された視差量と同じ視差量になるように、前記立体動画データの視差量を変換し、
     再生モードが立体動画であるときに警告を行うことを特徴とする立体画像表示制御方法。
  10.  前記視差量が変換された立体動画データが表す立体動画を再生表示したときに観察者が適切に観察することができるか否かを判断し、
     観察者が適切に観察することができないと判断されたときに警告を行うことを特徴とする請求項9記載の立体画像表示制御方法。
  11.  観察者が適切に観察することができないと判断されたときに、観察者が適切に観察することができるように前記視差量が調整された立体静止画を含む前記複数の立体静止画で構成された立体動画を表す立体動画データの視差量を変換することを特徴とする請求項8又は10記載の立体画像表示制御方法。
  12.  視差量、明るさ、動き、コントラスト及びシャープネスのうち前記視差量を含むいずれか1つ以上の変化量を検出し、該検出した変化量に基づいて観察者が適切に観察することができるか否かを判断することを特徴とする請求項8記載の立体画像表示制御方法。
PCT/JP2012/001889 2011-03-30 2012-03-19 立体画像表示制御装置及び立体画像表示制御方法 WO2012132304A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-076370 2011-03-30
JP2011076370 2011-03-30

Publications (1)

Publication Number Publication Date
WO2012132304A1 true WO2012132304A1 (ja) 2012-10-04

Family

ID=46930094

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/001889 WO2012132304A1 (ja) 2011-03-30 2012-03-19 立体画像表示制御装置及び立体画像表示制御方法

Country Status (1)

Country Link
WO (1) WO2012132304A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007251422A (ja) * 2006-03-14 2007-09-27 Fujifilm Corp 画像処理装置、方法およびプログラム
JP2010152819A (ja) * 2008-12-26 2010-07-08 Fujifilm Corp 画像処理装置および方法並びにプログラム
JP2010258723A (ja) * 2009-04-24 2010-11-11 Sony Corp 画像情報処理装置、撮像装置、画像情報処理方法およびプログラム
JP2011048295A (ja) * 2009-08-28 2011-03-10 Fujifilm Corp 複眼撮影装置及びその姿勢検出方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007251422A (ja) * 2006-03-14 2007-09-27 Fujifilm Corp 画像処理装置、方法およびプログラム
JP2010152819A (ja) * 2008-12-26 2010-07-08 Fujifilm Corp 画像処理装置および方法並びにプログラム
JP2010258723A (ja) * 2009-04-24 2010-11-11 Sony Corp 画像情報処理装置、撮像装置、画像情報処理方法およびプログラム
JP2011048295A (ja) * 2009-08-28 2011-03-10 Fujifilm Corp 複眼撮影装置及びその姿勢検出方法

Similar Documents

Publication Publication Date Title
TWI598846B (zh) 影像資料處理方法以及使用該方法的立體影像顯示裝置
EP3035681B1 (en) Image processing method and apparatus
US9723289B2 (en) Dynamic adjustment of predetermined three-dimensional video settings based on scene content
US8514225B2 (en) Scaling pixel depth values of user-controlled virtual object in three-dimensional scene
JP5243663B2 (ja) 画像処理装置、撮像装置、再生装置および画像処理方法
CN105894567B (zh) 放缩三维场景中的用户控制的虚拟对象的像素深度值
WO2011105220A1 (ja) 立体映像処理装置および方法、並びにプログラム
EP2469876B1 (en) Stereoscopic image display control apparatus and operation control method of the same
JP2011172172A (ja) 立体映像処理装置および方法、並びにプログラム
US20130208097A1 (en) Three-dimensional imaging system and image reproducing method thereof
JP5656676B2 (ja) 映像表示装置、映像表示方法及びプログラム
JP5373222B2 (ja) 再生装置、再生方法およびコンピュータプログラム
WO2012132304A1 (ja) 立体画像表示制御装置及び立体画像表示制御方法
JP5507003B2 (ja) 立体画像処理装置及び立体画像処理方法
JP2006287813A (ja) 3次元画像表示装置
JP2011259012A (ja) 立体画像再生装置及び立体画像再生方法
US9237334B2 (en) Method and device for controlling subtitle applied to display apparatus
JP5304760B2 (ja) 立体映像撮像装置および立体映像撮像方法
JP2011176397A (ja) 映像信号変換装置及び電子機器
JP5501150B2 (ja) 表示装置及びその制御方法
JP5720475B2 (ja) 立体映像制御装置、立体映像制御方法および立体映像制御用プログラム
JP5351915B2 (ja) 立体動画像処理装置および方法並びにプログラム
JP2010154479A (ja) 立体画像再生装置、立体画像再生プログラム、撮像装置
JP2013135276A (ja) 画像処理装置及び画像処理方法
JP2013120948A (ja) 映像処理装置及び映像処理方法、表示装置、並びにコンピューター・プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12764432

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12764432

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP