WO2012063911A1 - ３ｄコンテンツ表示装置、および３ｄコンテンツ表示方法 - Google Patents

３ｄコンテンツ表示装置、および３ｄコンテンツ表示方法 Download PDF

Info

Publication number
WO2012063911A1
WO2012063911A1 PCT/JP2011/075964 JP2011075964W WO2012063911A1 WO 2012063911 A1 WO2012063911 A1 WO 2012063911A1 JP 2011075964 W JP2011075964 W JP 2011075964W WO 2012063911 A1 WO2012063911 A1 WO 2012063911A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
content
cpu
light source
screen
Prior art date
Application number
PCT/JP2011/075964
Other languages
English (en)
French (fr)
Inventor
賢英 安村
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Publication of WO2012063911A1 publication Critical patent/WO2012063911A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/006—Pseudo-stereoscopic systems, i.e. systems wherein a stereoscopic effect is obtained without sending different images to the viewer's eyes

Definitions

  • the present invention relates to a 3D content display device and a 3D content display method for displaying 3D content such as a still image and a moving image.
  • a 3D content display device capable of displaying a 3D still image or a 3D moving image in a three-dimensional manner is known.
  • a map display device includes a lid provided with a display screen, and a main body rotatably connected to the lid.
  • the screen angle (relative angle) formed by the display screen is acquired from the angle detection unit, and based on the acquired screen angle, the projection angle that is the angle of the viewpoint for capturing the 3D object is obtained in the space including the 3D object.
  • a projection angle calculation unit that calculates in accordance with a predetermined angle calculation rule; a 3D drawing unit that projects the 3D object based on the calculated projection angle and generates screen display data for display on the display screen; It is characterized by having.
  • Patent Document 2 discloses a three-dimensional measuring apparatus.
  • edges on left and right images from a stereo camera are extracted by an edge extraction unit, and a plurality of similar edges such as being equidistant are grouped by an edge grouping unit.
  • the corresponding areas of the two videos are set by the corresponding area setting unit.
  • the corresponding region correlator extracts edge arrangement information and performs comparison, calculates similarity, finds a high-accuracy corresponding position in subpixel units for the pair with high similarity, From the result, the distance calculation unit calculates the distance. Therefore, by evaluating the positional deviation between the edge sets of the left and right images together with the similarity of the edge arrangement, it is possible to obtain the robustness with high accuracy and to minimize the number of places where the corresponding point search process is performed.
  • 3D content display devices are required to provide viewers with a greater sense of realism by displaying 3D video.
  • the first output device for displaying 3D content in 3D on the first screen, the 3D content in 3D on the first screen on the first output device, and the first
  • a 3D content display device comprising a processor for outputting a shadow video corresponding to 3D content on a second screen different from the above screen.
  • the first output device is a first display having a first screen.
  • the first output device is a first projector that outputs 3D content on the first screen.
  • the 3D content display device further includes a second display having a second screen.
  • the 3D content display device further includes a first sensor for detecting a positional relationship between the first screen and the second screen.
  • the processor calculates a shadow image of the 3D content based on the 3D content displayed on the first screen, the position of the virtual light source, and the positional relationship.
  • the processor displays a shadow image on the second projector via the communication interface.
  • the 3D content display device further includes a second sensor that detects a positional relationship between the first screen and the second projector.
  • the processor calculates a shadow image of the 3D content based on the 3D content displayed on the first screen, the position of the virtual light source, and the positional relationship.
  • the 3D content display device further includes a posture sensor that detects the posture of the first output device.
  • the processor calculates a shadow image based on the attitude of the first output device.
  • a 3D content display method in a 3D content display device including a first output device and a processor is provided.
  • the processor acquires 3D content
  • the processor calculates a shadow image of the 3D content
  • the processor 3D displays the 3D content on the first screen on the first output device. And displaying a shadow image corresponding to the 3D content on a second screen different from the first screen.
  • a 3D content display device and a 3D content display method capable of realizing a greater presence than before are provided.
  • FIG. 1 It is an image figure which shows the external appearance of the computer 100 which concerns on this Embodiment. It is a block diagram which shows the hardware constitutions of the computer 100 concerning this Embodiment. It is a block diagram which shows the function structure of the computer 100 which concerns on this Embodiment.
  • 2 is an image diagram showing that a computer 100 according to the present embodiment displays a shadow of a 3D video based on the position of a virtual light source 10.
  • FIG. It is an image figure which shows the method of projecting a 3D object on the 2D display 132 based on the position of a virtual light source. It is an image figure which shows the state from which the angle of 3D display 131 (1st housing
  • FIG. 6 is an image diagram when the position of a virtual light source is set to the position of projector 300.
  • FIG. 6 is an image diagram when the position of a virtual light source is set to a position different from the position of projector 300.
  • FIG. It is a block diagram which shows the hardware constitutions of the computer 200 concerning this Embodiment. It is a block diagram which shows the function structure of the computer 200 concerning this Embodiment.
  • a notebook personal computer 100 (hereinafter simply referred to as the computer 100) will be described as a representative example of the “content display device”.
  • the content display device is another information device having a display such as an electronic notebook, a game machine, a PND (Personal Navigation Device), a PDA (Personal Data Assistance), an electronic dictionary, an electronic BOOK, a television, a monitor, and a portable player. It may be. Further, it may be another information device having a projector that projects an image on a screen or a wall.
  • the computer 100 displays a 3D display capable of displaying a 3D still image or a 3D moving image in 3D, and a shadow corresponding to the 3D still image or the 3D moving image.
  • the display here may be, for example, a projection type projector that projects an image on a screen or the like.
  • the 2D display referred to here is positioned as a display capable of displaying in 2D, and the 2D display may have a 3D display function.
  • a mode in which the second display is a projector will be described.
  • a projector that displays 3D content as a 3D display.
  • a 3D display and a 2D display can be realized by a projector for use in a movie theater or a home theater.
  • the positional relationship between the projection plane on which the 3D content is displayed and the projection plane on which the 2D shadow image is displayed can be set in advance by a user or an administrator. No sensor or attitude sensor is required.
  • FIG. 1 is an image diagram showing an external appearance of a computer 100 according to the present embodiment.
  • a computer 100 includes a first casing 101 and a second casing 102 connected to the first casing 101 via a hinge.
  • the first housing 101 has a 3D display 131 that can display content in 3D.
  • the second housing 102 includes a 2D display 132 that can display 2D content.
  • the 3D display 131 displays a plurality of objects in 3D based on a signal from a CPU (Central Processing Unit) 100 (see FIG. 2) described later.
  • a CPU Central Processing Unit
  • the 2D display 132 displays a shadow corresponding to the projection amount (unevenness) of the display image on the 3D display 131.
  • the CPU 110 calculates the pop-out amount at each point of the display image on the 3D display 131.
  • CPU110 calculates the image
  • CPU110 displays the shadow of 3D content on the 2D display 132 based on projection data.
  • the computer 100 displays the shadow corresponding to the unevenness of the video displayed in 3D on the 3D display 131 on the 2D display 132. Since the shadow according to the pop-up of the video enters the field of view, the user can obtain a greater sense of realism than before.
  • FIG. 2 is a block diagram showing a hardware configuration of the computer 100 according to the present embodiment.
  • a computer 100 includes a CPU 110, a memory 120, a 3D display 131, a 2D display 132, an input device 140, a memory interface 160, a communication interface 170, an angle, and the like.
  • a sensor 180 and a position / orientation sensor 190 are included.
  • the 3D display 131 displays various information in 3D under the control of the CPU 110.
  • the CPU 110 displays the video in 3D on the 3D display 131 based on the video data for the right eye and the video data for the left eye.
  • the CPU 110 may generate right-eye video data and left-eye video data based on data representing a 3D stereoscopic model.
  • the 2D display 132 displays various information in 2D by being controlled by the CPU 110.
  • the CPU 110 generates projection data representing the shadow of the object displayed on the 3D display 131.
  • the CPU 110 displays a shadow image on the 2D display 132.
  • the input device 140 includes a tablet for detecting a touch operation by a user's finger or stylus pen.
  • the tablet is laid on the surface of the 3D display 131 and / or the 2D display 132.
  • the input device 140 includes a determination key, a numeric keypad, a QWERTY keyboard, a pointing device, a recognition device that accepts voice and video input, and the like that are arranged on the surface of the computer 100 or connected by wire or wirelessly.
  • the CPU 110 can accept a command from the user via the input device 140.
  • the CPU 110 reads data stored in the external storage medium 161 via the memory interface 160 and stores the data in the memory 120. Conversely, the CPU 110 reads data from the memory 120 and stores the data in the external storage medium 161 via the memory interface 160.
  • CD-ROM Compact Disc-Read Only Memory
  • DVD-ROM Digital Versatile Disk-Read Only Memory
  • Blu-rayDisc USB (Universal Serial Bus) memory
  • memory card FD ( Flexible Disk), hard disk, magnetic tape, cassette tape, MO (Magnetic Optical Disc), MD (Mini Disc), IC (Integrated Circuit) card (excluding memory card), optical card, mask ROM, EPROM, EEPROM (Electronically Erasable Non-volatile storage media such as Programmable Read-Only Memory).
  • the communication interface 170 is realized by an antenna or a connector.
  • the communication interface 170 exchanges data with other devices by wired communication or wireless communication.
  • the CPU 110 receives a program, 3D content data, and the like from another device via the communication interface 170, and transmits data to the other device.
  • the angle sensor 180 detects an angle between the first casing 101 and the second casing 102.
  • the angle sensor 180 inputs the detected angle to the CPU 110.
  • the position / orientation sensor 190 detects the position and orientation of the first casing 101.
  • the position / orientation sensor 190 is realized by an acceleration sensor, an angular velocity sensor, an orientation sensor, image recognition, GPS, and the like, and inputs the position and orientation of the first housing 101 to the CPU 110.
  • the memory 120 is realized by various types of RAM (Random Access Memory), ROM (Read-Only Memory), a hard disk, and the like.
  • the memory 120 may be a USB (Universal Serial Bus) memory, CD-ROM (Compact Disc-Read Only Memory), DVD-ROM (Digital Versatile Disk-Read Only Memory), Blu-ray Disc, USB (Universal Serial Bus) memory, memory card, FD (Flexible Disk), hard disk, magnetic tape, cassette tape, MO (Magnetic Optical Disc), MD (Mini Disc), IC (Integrated Circuit) card ( It is also realized by a medium for storing a program in a nonvolatile manner, such as an optical card, mask ROM, EPROM, or EEPROM (Electronically Erasable Programmable Read-Only Memory).
  • the memory 120 stores a program executed by the CPU 110, data generated by executing the program by the CPU 110, data input via the input device 140, and the like.
  • the memory 120 stores a control program executed by the CPU 110, 3D video data, and the like.
  • the 3D video data includes 3D still image data for displaying a 3D still image, 3D moving image data for displaying a 3D moving image, and model data indicating a 3D model.
  • CPU 110 executes various programs stored in memory 120. Functions (such as the functional blocks in FIG. 3) and processes (such as the processes illustrated in FIG. 12) in the computer 100 are realized by each hardware and software executed by the CPU 110.
  • Such software may be stored in the memory 120 in advance.
  • the software may be stored in the above-described storage medium and distributed as a program product. Alternatively, the software may be provided as a program product that can be downloaded by an information provider connected to the so-called Internet.
  • Such software is read from the storage medium by using the memory interface 160 or downloaded by using the communication interface 170 and temporarily stored in the memory 120.
  • the CPU 110 stores the software in the form of an executable program in the memory 120 and then executes the program.
  • the program here includes not only a program directly executable by the CPU but also a program in a source program format, a compressed program, an encrypted program, and the like.
  • the CPU 110 displays the video in 3D on the 3D display 131 based on the 3D video data stored in the memory 120.
  • the CPU 110 displays on the 3D display 131 so that the unevenness of the object can be recognized. In other words, it seems to the user that the object exists in front of or behind the 3D display 131.
  • the CPU 110 causes the 2D display 132 to display a shadow corresponding to the unevenness of the display image on the 3D display 131. For example, the CPU 110 calculates the pop-up amount of the display image on the 3D display 131. CPU110 calculates the image
  • FIG. 3 is a block diagram showing a functional configuration of the computer 100 according to the present embodiment.
  • FIG. 4 is an image diagram showing that the computer 100 according to the present embodiment displays a shadow of the 3D video based on the position of the virtual light source 10.
  • a computer 100 includes a 3D video data acquisition unit 111, a 3D coordinate data calculation unit 112, a virtual light source data acquisition unit 113, a projection data calculation unit 114, a video data synchronization unit 115, a drawing Part 116. As shown in FIG. 2, the computer 100 also includes a 3D display 131 and a 2D display 132.
  • the 3D video data acquisition unit 111, the 3D coordinate data calculation unit 112, the virtual light source data acquisition unit 113, the projection data calculation unit 114, the video data synchronization unit 115, and the drawing unit 116 are realized by the CPU 110 and the memory 120. Function. More specifically, each function of the CPU 110 is a function realized when the CPU 110 executes a control program stored in the memory 120 or the like and controls each hardware shown in FIG.
  • the 3D video data acquisition unit 111 may be a video processing engine or hardware. It may be realized by a wear circuit.
  • the 3D video data acquisition unit 111 reads 3D video data (right-eye video and left-eye video) from the memory 120.
  • the 3D video data acquisition unit 111 passes the 3D video data to the 3D coordinate data calculation unit 112.
  • the 3D coordinate data calculation unit 112 calculates 3D coordinate data based on the right-eye video and the left-eye video. That is, the 3D coordinate data calculation unit 112 can calculate the pop-out amount of each point constituting the 3D video based on the right-eye video and the left-eye video. For example, the 3D coordinate data calculation unit 112 can calculate 3D coordinate data based on the method described in Japanese Patent Application Laid-Open No. 2009-186228.
  • the 3D coordinate data calculation unit 112 calculates 3D coordinate data through matrix calculation such as scaling and rotation when acquiring a video including 3D coordinate data (3D model data) like a virtual video. be able to.
  • the virtual light source data acquisition unit 113 acquires the position of the virtual light source 10 from the memory 120. Alternatively, the virtual light source data acquisition unit 113 acquires the position of the virtual light source 10 from the user via the input device 140.
  • the projection data calculation unit 114 calculates projection data when it is assumed that the 3D object is projected onto the 2D display 132 by the virtual light source based on the calculated 3D coordinate data and the position of the virtual light source 10.
  • FIG. 5 is an image diagram showing a method of projecting a 3D object onto the 2D display 132 based on the position of the virtual light source.
  • the displayable area of the 2D display 132 When only the displayable area of the 2D display 132 is expressed, for example, when the display area is a square, it can be expressed by four inequalities for indicating which side of each side is the display area (Expression 1).
  • A intersects with a plane E parallel to D.
  • a (e) be a two-dimensional figure where A and E intersect.
  • a point Oe where the straight line ls intersects the plane E is represented by (e * s1 / ⁇ , e * s2 / ⁇ , e * s3 / ⁇ ). All points inside the area of A (e) can be expressed by vectors from Oe. Let these vector groups be Va (e).
  • the projection of A from S to D can be expressed by a set ⁇ ad of all A (e) regions created by e satisfying emin ⁇ e ⁇ emax in Equation 2.
  • the projection displayed on the 2D display 132 can be represented by a vector group satisfying the inequality determined by Expression 1 in ⁇ ad. From the above, the projection of A on the 2D display 132 from the light source S can be calculated.
  • Equation 2 Va (e), so that the calculation is simplified.
  • the video data synchronization unit 115 causes the 3D display 131 and the 2D display 132 to simultaneously display the 3D video data and the projection data through the drawing unit 116.
  • the projection data calculation unit 114 may output the calculated projection to the drawing unit 116 after performing processing such as enlargement or reduction, expansion or contraction in one direction, or parallel movement.
  • processing such as enlargement or reduction, expansion or contraction in one direction, or parallel movement.
  • the calculation can be simplified by assuming that the virtual light source is on the same plane as the 3D display 131.
  • the 2D display 132 is perpendicular to the incident light. Since the projection data is calculated assuming that the projection data displayed on the 2D display 132 is an orthographic projection that can be calculated simply by setting the x component or y component of the 3D object to 0, the calculation is further simplified. It is possible to do.
  • the appropriate projection size and position can be adjusted by performing processing such as enlargement or reduction, expansion / contraction in one direction, or parallel movement on the calculated projection,
  • the virtual light source 10 can be moved.
  • FIG. 6 is an image diagram illustrating a state in which the angle between the 3D display 131 (first housing 101) and the 2D display 132 (second housing 102) has changed.
  • the projection data calculation unit 114 realized by the CPU 110 determines the angle between the 3D display 131 (first casing 101) and the 2D display 132 (second casing 102) from the angle sensor 180. To get.
  • the projection data calculation unit 114 generates projection data based on the angle and the position of the virtual light source 10.
  • the drawing unit 116 displays the projection data on the 2D display 132.
  • the absolute position of the virtual light source 10 does not change even if the position or orientation of the computer 100 changes. That is, when the position and / or orientation of the computer 100 changes, the shadow image displayed on the 2D display 132 also changes.
  • the position / orientation sensor 190 is an essential element for the computer 100.
  • FIG. 7 is an image diagram showing a state in which the position and posture of the computer 100 have changed.
  • the CPU 110 acquires the position and orientation of the computer 100 from the position and orientation sensor 190.
  • the CPU 110 generates projection data based on the position and orientation of the computer 100 and the position of the virtual light source 10.
  • the CPU 110 displays the projection data on the 2D display 132.
  • the CPU 110 of the computer 100 accepts the setting of the position and size of the virtual light source from the user via the input device 140.
  • the CPU 110 displays the 2D display 132 on the area inside the shadow, the color of the shadow outline area, and the area away from the shadow. Control so that the color is different.
  • FIG. 8 is an image diagram showing a case where the virtual light source 11 has a predetermined volume.
  • CPU 110 emits bright light (first luminance) in an area where virtual light source 11 is not hidden at all by the projected image, and an area where part of virtual light source 11 is hidden by the projected image is gray.
  • the light (second luminance lower than the first luminance) is emitted, and the area where the virtual light source 11 is completely hidden by the projected image emits black light (third luminance lower than the second luminance).
  • the 2D display 132 is controlled.
  • the second luminance indicates a luminance range.
  • the second luminance does not have to be the same in all gray light areas as long as it is in a range between the first luminance and the third luminance.
  • the gradation may gradually change from white to black from the boundary with the first luminance to the boundary with the third luminance.
  • FIG. 9 is an image diagram showing a state in which the brightness of the virtual light source 12 is changed.
  • the drawing unit 116 realized by the CPU 110 sets the luminance corresponding to the brightness of the virtual light source 12 in the 2D display 132 in an area other than the shadow area.
  • FIG. 10 is an image diagram showing a state in which the positions of the two virtual light sources 13A and 13B are set.
  • CPU 110 emits bright light (first luminance) in the area where no virtual light source is hidden by the projected image, and the area where only one virtual light source is hidden by the projected image is gray. Emits light (second luminance lower than the first luminance), and black light (third luminance lower than the second luminance) emits black light in the area where both virtual light sources are hidden by the projected image,
  • the 2D display 132 is controlled.
  • FIG. 11 is an image diagram showing a state in which the color of the virtual light source 14 is changed.
  • CPU 110 causes 2D display 132 to display a shadow and an area other than the shadow with luminance, saturation, and hue corresponding to the color of virtual light source 14.
  • 2D display 132 causes 2D display 132 to display a shadow and an area other than the shadow with luminance, saturation, and hue corresponding to the color of virtual light source 14.
  • 2D display 132 causes 2D display 132 to display a shadow and an area other than the shadow with luminance, saturation, and hue corresponding to the color of virtual light source 14.
  • 2D display 132 causes 2D display 132 to display a shadow and an area other than the shadow with luminance, saturation, and hue corresponding to the color of virtual light source 14.
  • 2D display 132 causes 2D display 132 to display a shadow and an area other than the shadow with luminance, saturation, and hue corresponding to the color of virtual light source 14.
  • 2D display 132 causes 2D display 132 to display a shadow
  • FIG. 12 is a flowchart showing a processing procedure of content display processing in computer 100 according to the present embodiment.
  • the projection data calculation unit 114 projects only a portion (object) protruding forward of the 3D display 131 onto the 2D display 132.
  • CPU 110 of computer 100 reads the attribute of the virtual light source from memory 120 (step S102). For example, the CPU 110 acquires the position, size, brightness, color, and the like of each virtual light source.
  • CPU 110 reads video data for 3D display (3D content data) from memory 120 in accordance with an instruction for designating content from the user (step S104). Alternatively, the CPU 110 acquires 3D content data from the outside via the communication interface 170 or a TV antenna. More specifically, the video data for 3D display includes video data for the right eye and video data for the left eye.
  • CPU110 calculates 3D coordinate data based on video data (step S106). More specifically, for example, as described in Japanese Patent Application Laid-Open No. 2009-186228, the CPU 110 performs a matrix operation such as scaling and rotation on only a portion of the video data that appears to protrude from the 3D display 131. 3D coordinate data corresponding to the state of the device is calculated.
  • CPU110 produces
  • the CPU 110 generates projection data assuming that the virtual light source is on the same plane as the 3D display 131.
  • the CPU 110 may perform processing such as enlargement or reduction, expansion / contraction in one direction, or parallel movement on the calculated projection data.
  • the video data synchronization unit 115 realized by the CPU 110 synchronizes the output of the video data and the projection data (step S110).
  • the drawing unit 116 realized by the CPU 110 displays a 3D video on the 3D display 131 based on the video data for the right eye and the video data for the left eye (step S112). At the same time, the CPU 110 causes the 2D display 132 to display a shadow image corresponding to the 3D image.
  • CPU 110 determines whether or not to continue reproduction (step S114).
  • CPU 110 determines whether or not an instruction for changing the attribute of the virtual light source is received from the user via input device 140 when reproduction is to be continued (YES in step S 114) (step S 116).
  • CPU110 repeats the process from step S102, when the command for changing the attribute of a virtual light source is received (when it is YES in step S116).
  • CPU110 repeats the process from step S104, when the command for changing the attribute of a virtual light source is not received (when it is NO in step S116).
  • the projection data calculation unit 114 calculates projection data for an object that appears to be located behind the 3D display 131. That is, a case where the virtual light source is located behind the plane of the 3D display 131 will be described.
  • CPU110 performs the following processes in step S104, S106, and S108.
  • step S104 the CPU 110 reads video data for 3D display (3D content data) from the memory 120 in accordance with a command for designating content from the user (step S104).
  • the CPU 110 acquires 3D content data from the outside via the communication interface 170 or a TV antenna.
  • the CPU 110 may generate right-eye video data and left-eye video data based on the 3D model data.
  • step S106 the CPU 110 calculates 3D coordinate data based on the 3D model data. More specifically, for example, as described in Japanese Patent Application Laid-Open No. 2009-186228, the CPU 110 performs processing on all 3D model data (including a portion that appears to be located behind the surface of the 3D display 131). Then, 3D coordinate data corresponding to the state of the apparatus is calculated by matrix operations such as scaling and rotation.
  • the CPU 110 generates projection data indicating a shadow image to be displayed on the 2D display 132 based on the 3D coordinate data and the attribute of the virtual light source (step S108). As described above, the CPU 110 may perform processing such as enlargement or reduction, expansion / contraction in one direction, or parallel movement on the calculated projection data.
  • the computer 100 according to the first embodiment described above has two displays. Then, the computer 100 displays the shadow corresponding to the video on the 2D display 132 while displaying the video on the 3D display 131 in 3D. On the other hand, the computer 100 according to the present embodiment causes the external projector 300 to output a shadow corresponding to the video while displaying the video on the 3D display 231 in 3D.
  • the computer 200 will be described as a representative example of the “content display device”.
  • the content display device may be another information device having a display such as an electronic notebook, a game machine, a PND, a PDA, an electronic dictionary, and an electronic BOOK.
  • the computer 200 includes a 3D display capable of displaying a 3D still image and a 3D moving image in 3D. As described above, a number of methods for displaying still images and moving images in 3D display have been proposed.
  • FIG. 13 is an image diagram when the position of the virtual light source is set to the position of the projector 300.
  • FIG. 14 is an image diagram when the position of the virtual light source is set to a position different from the position of the projector 300.
  • computer 200 has 3D display 231 capable of displaying content in 3D.
  • the 3D display 231 displays a plurality of objects in 3D based on a signal from a CPU 210 (see FIG. 15) described later.
  • a CPU 210 see FIG. 15
  • the user of the computer 200 according to the present embodiment appears to be protruding from the 3D display 231.
  • the computer 200 is configured to be capable of data communication with the projector 300.
  • the projector 300 displays a shadow corresponding to the projected amount (unevenness) of the display image on the 3D display 231.
  • the CPU 210 calculates the pop-out amount at each point of the display image on the 3D display 231.
  • the CPU 210 calculates, as projection data, an image obtained by projecting the protruding portion onto the projection surface of the projector 300 (a screen different from the 3D display 231).
  • CPU 210 causes projector 300 to display a shadow of 3D content based on the projection data.
  • the computer 200 causes the projector 300 to project a shadow corresponding to the unevenness of the image displayed in 3D on the 3D display 231. Since the shadow according to the pop-up of the video enters the field of view, the user can obtain a greater sense of realism than before.
  • the computer 200 may assume that the virtual light source is located at the position of the projector 300.
  • the computer 200 may calculate the shadow of the video displayed on the 3D display 231 on the assumption that the virtual light source is located on the surface of the 3D display 231. More specifically, the computer 200 may assume that the virtual light source is located at the light spot between the perpendicular line dropped from the projector 300 on the surface of the 3D display 231 and the surface of the 3D display 231.
  • the 3D display and the projector may be an integrated type that fits in the same housing.
  • FIG. 15 is a block diagram showing a hardware configuration of computer 200 according to the present embodiment.
  • a computer 200 includes a CPU 210, a memory 220, a 3D display 231, an input device 240, a memory interface 260, a communication interface 270, an angle sensor 280, a position Posture sensor 290.
  • the 3D display 231 displays various information in 3D under the control of the CPU 210.
  • the CPU 210 displays the video in 3D on the 3D display 231 based on the video data for the right eye and the video data for the left eye.
  • the CPU 210 may generate right-eye video data and left-eye video data based on data representing a 3D stereoscopic model.
  • the input device 240 includes a tablet for detecting a touch operation with a user's finger or stylus pen.
  • the tablet is laid on the surface of the 3D display 231 and / or the projector 300.
  • the input device 240 includes a determination key, a numeric keypad, and a QWERTY keyboard arranged on the surface of the computer 200.
  • the CPU 210 can accept a command from the user via the input device 140.
  • the CPU 210 reads data stored in the external storage medium 261 via the memory interface 260 and stores the data in the memory 220. Conversely, the CPU 210 reads data from the memory 220 and stores the data in the external storage medium 261 via the memory interface 260.
  • CD-ROM Compact Disc-Read Only Memory
  • DVD-ROM Digital Versatile Disk-Read Only Memory
  • Blu-ray Disc USB (Universal Serial Bus) memory
  • memory card FD (Flexible Disk), hard disk, magnetic tape, cassette tape, MO (Magnetic Optical Disc), MD (Mini Disc), IC (Integrated Circuit) card (excluding memory card), optical card, mask ROM, EPROM, EEPROM (Electronically) Erasable Programmable Read-Only Memory) and other media that store the program in a non-volatile manner.
  • the communication interface 270 is realized by an antenna or a connector.
  • the communication interface 170 exchanges data with other devices by wired communication or wireless communication.
  • the CPU 210 receives a program, 3D content data, and the like from another device via the communication interface 270, and transmits data to the other device.
  • the CPU 210 causes the projector 300 to output a shadow image by transmitting projection data to the projector 300 described later via the communication interface 270.
  • the angle sensor 280 is realized by an infrared sensor, an acceleration sensor, an angular velocity sensor, an orientation sensor, image recognition, and the like, and detects an angle between the 3D display 231 and the projector 300 (or the projection surface of the projector 300). In the present embodiment, it is assumed that the irradiation direction of projector 300 is perpendicular to the projection plane of projector 300. The angle sensor 280 inputs the detected angle to the CPU 210.
  • the position / orientation sensor 290 detects the position and orientation of the 3D display 231.
  • the position / orientation sensor 290 inputs the position and orientation of the 3D display 231 to the CPU 210.
  • the memory 220 is realized by various types of RAM (Random Access Memory), ROM (Read-Only Memory), a hard disk, and the like.
  • the memory 220 may be a USB (Universal Serial Bus) memory, CD-ROM (Compact Disc-Read Only Memory), DVD-ROM (Digital Versatile Disk-Read Only Memory), USB (Universal Serial Bus) memory, memory card, FD (Flexible Disk), hard disk, magnetic tape, cassette tape, MO (Magnetic Optical Disc), MD (Mini Disc), IC (Integrated Circuit) card (excluding memory card)
  • the memory 220 stores a program executed by the CPU 210, data generated by execution of the program by the CPU 210, data input through the input device 240, and the like.
  • the memory 220 stores a control program executed by the CPU 210, 3D video data, and the like.
  • the 3D video data includes 3D still image data for displaying a 3D still image, 3D moving image data for displaying a 3D moving image, and model data indicating a 3D model.
  • CPU 210 executes various programs stored in memory 220. Functions (such as the functional blocks in FIG. 16) and processes (such as those illustrated in FIG. 12) in the computer 200 are realized by each hardware and software executed by the CPU 210. Such software may be stored in the memory 220 in advance. The software may be stored in the above-described storage medium and distributed as a program product. Alternatively, the software may be provided as a program product that can be downloaded by an information provider connected to the so-called Internet.
  • Such software is read from the storage medium by using the memory interface 260 or downloaded by using the communication interface 270 and temporarily stored in the memory 220.
  • the CPU 210 stores the software in the form of an executable program in the memory 220 and then executes the program.
  • the program here includes not only a program directly executable by the CPU but also a program in a source program format, a compressed program, an encrypted program, and the like.
  • the CPU 210 displays the video in 3D on the 3D display 231 based on the 3D video data stored in the memory 220.
  • the CPU 210 displays the object on the 3D display 231 so that the unevenness can be recognized. In other words, it seems to the user that the object exists in front of or behind the 3D display 231.
  • the projector 300 displays various information in 2D by being controlled by the CPU 210.
  • the CPU 210 generates projection data representing the shadow of the object displayed on the 3D display 231.
  • CPU 210 causes projector 300 to display a shadow image.
  • the CPU 210 causes the projector 300 to display a shadow corresponding to the unevenness of the display image on the 3D display 231. For example, the CPU 210 calculates the pop-up amount of the display image on the 3D display 231. CPU 210 calculates an image obtained by projecting the protruding portion onto the projection surface of projector 300 as a shadow. CPU 210 transmits the protruding portion to projector 300. CPU 210 causes projector 300 to display a shadow.
  • FIG. 16 is a block diagram showing a functional configuration of the computer 200 according to the present embodiment.
  • a computer 200 includes a 3D video data acquisition unit 211, a 3D coordinate data calculation unit 212, a virtual light source data acquisition unit 213, a projection data calculation unit 214, a video data synchronization unit 215, a drawing Part 216.
  • the computer 200 also includes a 3D display 231 as shown in FIGS.
  • the computer 200 can communicate with the projector 300.
  • the 3D video data acquisition unit 211, the 3D coordinate data calculation unit 212, the virtual light source data acquisition unit 213, the projection data calculation unit 214, the video data synchronization unit 215, and the drawing unit 216 are realized by the CPU 210 and the memory 220. Function. More specifically, each function of the CPU 210 is a function realized by the CPU 210 executing a control program stored in the memory 220 or the like to control each hardware shown in FIG.
  • the 3D video data acquisition unit 211, the 3D coordinate data calculation unit 212, the virtual light source data acquisition unit 213, the projection data calculation unit 214, the video data synchronization unit 215, and the drawing unit 216 may be a video processing engine or hardware. It may be realized by a wear circuit.
  • the 3D video data acquisition unit 211, the 3D coordinate data calculation unit 212, the virtual light source data acquisition unit 213, and the projection data calculation unit 214 are the 3D video data acquisition unit 111 and the 3D coordinate data calculation unit according to Embodiment 1, respectively. 112, the virtual light source data acquisition unit 113, and the projection data calculation unit 114 are the same, and the description thereof will not be repeated here.
  • the video data synchronization unit 215 causes the 3D display 231 and the projector 300 to output the 3D video data and the projection data simultaneously through the drawing unit 216.
  • the angle between the 3D display 231 and the projector 300 may be acquired by using the angle sensor 280 or the like.
  • the CPU 210 generates projection data based on the angle.
  • CPU 210 causes projector 300 to display projection data.
  • the position and orientation sensor 290 is an essential element for the computer 200.
  • CPU 210 obtains the position and orientation of computer 200 from position and orientation sensor 290.
  • the CPU 210 generates projection data based on the position and orientation.
  • CPU 210 causes projector 300 to display projection data.
  • the CPU 210 of the computer 200 accepts the setting of the position and size of the virtual light source from the user via the input device 240.
  • the CPU 210 causes the projector 300 to change the color of the shadow inner area, the color of the shadow outline area, and the area away from the shadow. Control so that the color is different.
  • the CPU 210 emits bright light (first luminance) in an area where the virtual light source is not completely hidden by the projected video, and gray light (from the first luminance) is an area where a part of the virtual light source is hidden by the projected video.
  • the projector 300 is controlled such that the area where the virtual light source is completely hidden by the projected image emits black light (third luminance lower than the second luminance).
  • the CPU 210 of the computer 200 receives the brightness of the virtual light source 12 from the user via the input device 140.
  • the drawing unit 116 realized by the CPU 210 sets the brightness corresponding to the brightness of the virtual light source in the projector 300 in an area other than the shadow area.
  • the CPU 210 of the computer 200 receives the number of virtual light sources and the position of each virtual light source from the user via the input device 240.
  • the CPU 210 emits bright light (first luminance) in the area where no virtual light source is hidden by the projected video, and gray light (from the first luminance) is hidden in the area where only one virtual light source is hidden by the projected video.
  • the projector 300 is controlled so that the area where both of the virtual light sources are hidden by the projected image emits black light (third luminance lower than the second luminance).
  • the CPU 210 of the computer 200 receives the color of the virtual light source 14 from the user via the input device 240.
  • the CPU 210 causes the projector 300 to display a shadow and an area other than the shadow with luminance corresponding to the color of the virtual light source.
  • step S110 the video data synchronization unit 215 realized by the CPU 210 synchronizes the output of the video data and the projection data.
  • step S112 the rendering unit 216 realized by the CPU 210 displays a 3D video on the 3D display 231 based on the video data for the right eye and the video data for the left eye. At the same time, the CPU 210 causes the projector 300 to display a shadow image corresponding to the 3D image.
  • the program code itself read from the storage medium realizes the functions of the above-described embodiment, and the storage medium storing the program code constitutes the present invention.
  • the function expansion is performed based on the instruction of the program code. It goes without saying that the CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
  • Virtual light source 100 computer, 101 first housing, 102 second housing, 110 CPU, 111 video data acquisition unit, 112 coordinate data calculation unit, 113 virtual light source data Acquisition unit, 114 projection data calculation unit, 115 video data synchronization unit, 116 drawing unit, 120 memory, 131 3D display, 132 2D display, 140 input device, 160 memory interface, 161 storage medium, 170 communication interface, 180 angle sensor, 190 Position / attitude sensor, 200 computer, 211 video data acquisition unit, 212 coordinate data calculation unit, 213 virtual light source data acquisition unit, 214 projection data calculation unit, 215 video data synchronization unit, 216 drawing unit, 20 memory, 231 3D display, 240 input device, 260 a memory interface, 261 storage medium, 270 communication interface, 280 an angle sensor, 290 position and orientation sensor 300 projector.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

　従来よりも大きな臨場感を実現することができる３Ｄコンテンツ表示装置および３Ｄコンテンツ表示方法が提供される。３Ｄコンテンツ表示装置（１００，２００）は、第１の画面に３Ｄコンテンツを３Ｄで表示するための第１の出力装置（１３１，２３１）と、第１の出力装置（１３１，２３１）に第１の画面に３Ｄコンテンツを３Ｄで表示させるとともに、第１の画面とは異なる第２の画面に、３Ｄコンテンツに対応する影の映像を出力するためのプロセッサ（１１０，２１０）とを備える。

Description

３Ｄコンテンツ表示装置、および３Ｄコンテンツ表示方法
　　本発明は、静止画像や動画像などの３Ｄのコンテンツを表示するための３Ｄコンテンツ表示装置および３Ｄコンテンツ表示方法に関する。
　３Ｄの静止画像や３Ｄの動画像を立体的に表示することが可能な３Ｄコンテンツ表示装置が知られている。
　たとえば、特開２０１０－３２６０号公報（特許文献１）には、地図表示装置が開示されている。特開２０１０－３２６０号公報（特許文献１）によると、地図表示装置は、表示画面が設けられている蓋体と、蓋体と回動可能に接続されている本体とを備えており、本体に対して表示画面が成す画面角度（相対角度）を角度検出部より取得し、取得した画面角度に基づいて、３Ｄオブジェクトが含まれる空間において、該３Ｄオブジェクトを捉える視点の角度である投影角度を、所定の角度算出規則にしたがって算出する投影角度算出部と、算出された投影角度に基づいて、上記３Ｄオブジェクトを投影し、上記表示画面に表示するための画面表示データを生成する３Ｄ描画部とを備えていることを特徴としている。
　また、特開２００９－１８６２２８号公報（特許文献２）には、３次元計測装置が開示されている。特開２００９－１８６２２８号公報（特許文献２）によると、ステレオカメラからの左右映像上のエッジをエッジ抽出部で抽出し、等距離にある等で類似した複数のエッジをエッジグルーピング部でグループ化してエッジ集合を定義した上、２つの映像の対応領域を対応領域設定部で設定する。その領域内で対応領域相関部が、エッジ配列情報を抽出して比較を行い、類似度を演算して、その類似度の高いペアに対してサブピクセル単位の高精度な対応位置を求め、その結果から、距離計算部が距離を演算する。したがって、左右映像のエッジ集合同士の位置ズレをエッジ配置の類似性とともに評価することで、ロバストかつ精度良く求めることができるとともに、対応点探索処理を行う箇所を最小限にすることができる。
特開２０１０－３２６０号公報 特開２００９－１８６２２８号公報
　３Ｄコンテンツ表示装置は、３Ｄ映像を表示することによって、視聴者がより大きな臨場感を得られることが求められている。
　したがって、従来よりも大きな臨場感を実現することができる３Ｄコンテンツ表示装置および３Ｄコンテンツ表示方法が必要とされている。
　一実施の形態に従うと、第１の画面に３Ｄコンテンツを３Ｄで表示するための第１の出力装置と、第１の出力装置に第１の画面に３Ｄコンテンツを３Ｄで表示させるとともに、第１の画面とは異なる第２の画面に、３Ｄコンテンツに対応する影の映像を出力するためのプロセッサとを備える、３Ｄコンテンツ表示装置が提供される。
　好ましくは、第１の出力装置は、第１の画面を有する第１のディスプレイである。
　好ましくは、第１の出力装置は、第１の画面に３Ｄコンテンツを出力する第１のプロジェクタである。
　好ましくは、３Ｄコンテンツ表示装置は、第２の画面を有する第２のディスプレイをさらに備える。
　好ましくは、３Ｄコンテンツ表示装置は、第１の画面と第２の画面との位置関係を検出するための第１のセンサをさらに備える。プロセッサは、第１の画面に表示される３Ｄコンテンツと、仮想光源の位置と、位置関係と、に基づいて、３Ｄコンテンツの影の映像を計算する。
　好ましくは、プロセッサは、通信インターフェイスを介して、影の映像を第２のプロジェクタに表示させる。
　好ましくは、３Ｄコンテンツ表示装置は、第１の画面と第２のプロジェクタとの位置関係を検出する第２のセンサをさらに備える。プロセッサは、第１の画面に表示される３Ｄコンテンツと、仮想光源の位置と、位置関係と、に基づいて、３Ｄコンテンツの影の映像を計算する。
　好ましくは、３Ｄコンテンツ表示装置は、第１の出力装置の姿勢を検出する姿勢センサをさらに備える。プロセッサは、第１の出力装置の姿勢に基づいて、影の映像を計算する。
　他の実施の形態に従うと、第１の出力装置とプロセッサとを含む３Ｄコンテンツ表示装置における３Ｄコンテンツ表示方法が提供される。３Ｄコンテンツ表示方法は、プロセッサが、３Ｄコンテンツを取得するステップと、プロセッサが、３Ｄコンテンツの影の映像を計算するステップと、プロセッサが、第１の出力装置に第１の画面に３Ｄコンテンツを３Ｄで表示させるとともに、第１の画面とは異なる第２の画面に、３Ｄコンテンツに対応する影の映像を出力するステップとを備える。
　ある局面に従うと、従来よりも大きな臨場感を実現することができる３Ｄコンテンツ表示装置および３Ｄコンテンツ表示方法が提供される。
　この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。
本実施の形態に係るコンピュータ１００の外観を示すイメージ図である。 本実施の形態に係るコンピュータ１００のハードウェア構成を示すブロック図である。 本実施の形態に係るコンピュータ１００の機能構成を示すブロック図である。 本実施の形態に係るコンピュータ１００が仮想光源１０の位置に基づいて３Ｄ映像の影を表示することを示すイメージ図である。 仮想光源の位置に基づいて３Ｄオブジェクトを２Ｄディスプレイ１３２に射影する方法を示すイメージ図である。 ３Ｄディスプレイ１３１（第１の筐体１０１）と２Ｄディスプレイ１３２（第２の筐体１０２）との角度が変化した状態を示すイメージ図である。 コンピュータ１００の位置と姿勢とが変化した状態を示すイメージ図である。 仮想光源に所定の体積を有する場合を示すイメージ図である。 仮想光源１２の明るさを変化させた状態を示すイメージ図である。 ２つの仮想光源１３Ａ，１３Ｂの位置を設定した状態を示すイメージ図である。 仮想光源１４の色を変化させた状態を示すイメージ図である。 本実施の形態に係るコンピュータ１００におけるコンテンツ表示処理の処理手順を示すフローチャートである。 仮想光源の位置をプロジェクタ３００の位置に設定した場合のイメージ図である。 仮想光源の位置をプロジェクタ３００の位置とは異なる位置に設定した場合のイメージ図である。 本実施の形態に係るコンピュータ２００のハードウェア構成を示すブロック図である。 本実施の形態に係るコンピュータ２００の機能構成を示すブロック図である。
　以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。
［実施の形態１］
　本実施の形態においては、ノート型のパーソナルコンピュータ１００（以下では、単にコンピュータ１００という。）を「コンテンツ表示装置」の代表例として説明を行う。ただし、コンテンツ表示装置は、電子ノート、ゲーム機、ＰＮＤ（Personal　Navigation　Device）、ＰＤＡ（Personal　Data　Assistance）、電子辞書、電子ＢＯＯＫ、テレビ、モニター、ポータブルプレーヤなどのようなディスプレイを有する他の情報機器であってもよい。また、スクリーンや壁等に映像を投影するプロジェクタを有する他の情報機器であってもよい。
　そして、本実施の形態に係るコンピュータ１００は、３Ｄの静止画像や３Ｄの動画像を３Ｄで表示することが可能な３Ｄディスプレイと、３Ｄの静止画像や３Ｄの動画像に対応する影を表示するための２Ｄディスプレイとを含む。ここで言うディスプレイは、たとえば、スクリーン等に映像を映し出す投影型のプロジェクタであってもよい。また、ここで言う２Ｄディスプレイとは、２Ｄでの表示が可能なディスプレイという位置づけであり、２Ｄディスプレイが３Ｄ表示機能を有していても良い。
　より詳細には、後述する実施の形態２では、第２のディスプレイがプロジェクタである形態について説明する。実施の形態２と同様に、３Ｄディスプレイとして、３Ｄコンテンツを表示するプロジェクタを利用することも可能である。たとえば、映画館での利用やホームシアターでの利用のために、３Ｄディスプレイと２Ｄディスプレイとをプロジェクタによって実現することも可能である。この場合には、予め３Ｄコンテンツが表示される投影面と２Ｄの影の映像が表示される投影面との位置関係を、ユーザや管理人が予め設定しておくことができるため、後述する角度センサや姿勢センサは不要である。
　現在、静止画像や動画像を３Ｄの表示で表示するための多数の方式が提案されている。たとえば、メガネを用いる方式として、液晶アクティブシャッターメガネ方式、カラーフィルタ方式および偏向板方式が挙げられる。また、メガネを用いない方式として、視差バリア方式およびレンチキュラー方式が挙げられる。本実施の形態に係る３Ｄの表示方式は、上記の方式に限定されるものではない。
　＜コンピュータ１００の動作概要＞
　以下では、本実施の形態に係るコンピュータ１００の動作概要について説明する。図１は、本実施の形態に係るコンピュータ１００の外観を示すイメージ図である。
　図１を参照して、本実施の形態に係るコンピュータ１００は、第１の筐体１０１と、第１の筐体１０１とヒンジを介して接続される第２の筐体１０２とを含む。第１の筐体１０１は、コンテンツを３Ｄ表示することができる３Ｄディスプレイ１３１を有する。第２の筐体１０２は、コンテンツを２Ｄ表示することができる２Ｄディスプレイ１３２を有する。
　３Ｄディスプレイ１３１は、後述するＣＰＵ（Central　Processing　Unit）１００（図２を参照。）からの信号に基づいて、複数のオブジェクトを３Ｄ表示する。換言すれば、オブジェクトが３Ｄ表示されている場合、本実施の形態に係るコンピュータ１００のユーザは、当該オブジェクトが３Ｄディスプレイ１３１から飛び出しているように見える。
　２Ｄディスプレイ１３２は、３Ｄディスプレイ１３１における表示映像の飛び出し量（凹凸）に対応する影を表示する。たとえば、ＣＰＵ１１０は、３Ｄディスプレイ１３１における表示映像の各点における飛び出し量を計算する。ＣＰＵ１１０は、飛び出した部分を２Ｄディスプレイ１３２に射影した映像を射影データとして計算する。ＣＰＵ１１０は、射影データに基づいて、２Ｄディスプレイ１３２に３Ｄコンテンツの影を表示させる。
　以上のように、本実施の形態に係るコンピュータ１００は、３Ｄディスプレイ１３１に３Ｄ表示される映像の凹凸に対応する影を２Ｄディスプレイ１３２に表示する。ユーザは、映像の飛び出しに応じた影が視界に入るため、従来よりも大きな臨場感が得られるようになる。
　以下、このような機能を実現するためのコンピュータ１００の構成について詳述する。
　＜コンピュータ１００のハードウェア構成＞
　本実施の形態に係るコンピュータ１００のハードウェア構成について説明する。図２は、本実施の形態に係るコンピュータ１００のハードウェア構成を示すブロック図である。
　図２に示すように、本実施の形態に係るコンピュータ１００は、ＣＰＵ１１０と、メモリ１２０と、３Ｄディスプレイ１３１と、２Ｄディスプレイ１３２と、入力デバイス１４０と、メモリインターフェイス１６０と、通信インターフェイス１７０と、角度センサ１８０と、位置姿勢センサ１９０とを含む。
　３Ｄディスプレイ１３１は、ＣＰＵ１１０に制御されることによって、様々な情報を３Ｄで表示する。たとえば、ＣＰＵ１１０は、右目用の映像データと左目用の映像データとに基づいて、３Ｄディスプレイ１３１に映像を３Ｄで表示させる。ＣＰＵ１１０は、３Ｄの立体モデルを表わすデータに基づいて、右目用の映像データと左目用の映像データとを生成してもよい。
　２Ｄディスプレイ１３２は、ＣＰＵ１１０によって制御されることによって、様々な情報を２Ｄで表示する。たとえば、ＣＰＵ１１０は、３Ｄディスプレイ１３１に表示されているオブジェクトの影を表す射影データを生成する。ＣＰＵ１１０は、２Ｄディスプレイ１３２に影の映像を表示させる。
　入力デバイス１４０は、ユーザの指やスタイラスペンによるタッチ操作を検出するためのタブレットを含む。タブレットは、３Ｄディスプレイ１３１および／あるいは２Ｄディスプレイ１３２の表面に敷設される。入力デバイス１４０は、コンピュータ１００の表面に配置されるあるいは有線ないし無線で接続される、決定キーやテンキーやＱＷＥＲＴＹキーボード、ポインティングデバイス、音声や映像による入力を受け付ける認識デバイス等を含む。ＣＰＵ１１０は、入力デバイス１４０を介して、ユーザからの命令を受け付けることができる。
　ＣＰＵ１１０は、メモリインターフェイス１６０を介して外部の記憶媒体１６１に格納されているデータを読み出して、当該データをメモリ１２０に格納する。逆に、ＣＰＵ１１０は、メモリ１２０からデータを読み出して、メモリインターフェイス１６０を介して当該データを外部の記憶媒体１６１に格納する。
　なお、記憶媒体１６１としては、ＣＤ－ＲＯＭ（Compact　Disc　-　Read　Only　Memory）、ＤＶＤ－ＲＯＭ（Digital　Versatile　Disk　-　Read　Only　Memory）、Blu-rayDisc、ＵＳＢ（Universal　Serial　Bus）メモリ、メモリカード、ＦＤ（Flexible　Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic　Optical　Disc）、ＭＤ（Mini　Disc）、ＩＣ（Integrated　Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically　Erasable　Programmable　Read-Only　Memory）などの、不揮発的にプログラムを格納する媒体が挙げられる。
　通信インターフェイス１７０は、アンテナやコネクタによって実現される。通信インターフェイス１７０は、有線通信あるいは無線通信によって他の装置との間でデータをやり取りする。ＣＰＵ１１０は、通信インターフェイス１７０を介して、他の装置からプログラムや３Ｄコンテンツデータなどを受信したり、他の装置にデータを送信したりする。
　角度センサ１８０は、第１の筐体１０１と第２の筐体１０２との間の角度を検出する。角度センサ１８０は、検出した角度をＣＰＵ１１０に入力する。
　位置姿勢センサ１９０は、第１の筐体１０１の位置や姿勢を検出する。位置姿勢センサ１９０は、加速度センサ、角速度センサ、方位センサ、画像認識、ＧＰＳなどによって実現され、第１の筐体１０１の位置や姿勢を、ＣＰＵ１１０に入力する。
　メモリ１２０は、各種のＲＡＭ（Random　Access　Memory）や、ＲＯＭ（Read-Only　Memory）や、ハードディスクなどによって実現される。あるいは、メモリ１２０は、読取用のインターフェイスを介して利用される、ＵＳＢ（Universal　Serial　Bus）メモリ、ＣＤ－ＲＯＭ（Compact　Disc　-　Read　Only　Memory）、ＤＶＤ－ＲＯＭ（Digital　Versatile　Disk　-　Read　Only　Memory）、Blu-ray Disc、ＵＳＢ（Universal　Serial　Bus）メモリ、メモリカード、ＦＤ（Flexible　Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic　Optical　Disc）、ＭＤ（Mini　Disc）、ＩＣ（Integrated　Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically　Erasable　Programmable　Read-Only　Memory）などの、不揮発的にプログラムを格納する媒体などによっても実現される。メモリ１２０は、ＣＰＵ１１０によって実行されるプログラムや、ＣＰＵ１１０によるプログラムの実行により生成されたデータ、入力デバイス１４０を介して入力されたデータなどを記憶する。
　メモリ１２０は、ＣＰＵ１１０によって実行される制御プログラムや、３Ｄの映像データなどを記憶する。３Ｄの映像データは、３Ｄの静止画像を表示するための３Ｄの静止画像データ、３Ｄの動画像を表示するための３Ｄの動画像データ、３Ｄモデルを示すモデルデータを含む。
　ＣＰＵ１１０は、メモリ１２０に記憶されている各種のプログラムを実行する。コンピュータ１００における機能（図３の機能ブロックなど）や処理（図１２に示す処理など）は、各ハードウェアおよびＣＰＵ１１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、メモリ１２０に予め記憶されている場合がある。また、ソフトウェアは、上述した記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。
　このようなソフトウェアは、メモリインターフェイス１６０を利用することによってその記憶媒体から読み取られて、あるいは、通信インターフェイス１７０を利用することによってダウンロードされて、メモリ１２０に一旦格納される。ＣＰＵ１１０は、ソフトウェアを実行可能なプログラムの形式でメモリ１２０に格納してから、当該プログラムを実行する。
　ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
　ＣＰＵ１１０は、メモリ１２０に格納されている３Ｄ映像データに基づいて、３Ｄディスプレイ１３１に映像を３Ｄで表示させる。ＣＰＵ１１０は、３Ｄディスプレイ１３１にオブジェクトの凹凸が認識できるように表示させる。換言すれば、ユーザには、オブジェクトが３Ｄディスプレイ１３１の手前や奥に存在するように見える。
　本実施の形態に係るＣＰＵ１１０は、３Ｄディスプレイ１３１における表示映像の凹凸に対応する影を、２Ｄディスプレイ１３２に表示させる。たとえば、ＣＰＵ１１０は、３Ｄディスプレイ１３１における表示映像の飛び出し量を計算する。ＣＰＵ１１０は、飛び出した部分を２Ｄディスプレイ１３２に射影した映像を影として計算する。ＣＰＵ１１０は、２Ｄディスプレイ１３２に影を表示させる。
　＜コンピュータ１００の機能構成＞
　次に、本実施の形態に係るコンピュータ１００の機能構成について説明する。図３は、本実施の形態に係るコンピュータ１００の機能構成を示すブロック図である。図４は、本実施の形態に係るコンピュータ１００が仮想光源１０の位置に基づいて３Ｄ映像の影を表示することを示すイメージ図である。
　図３を参照して、コンピュータ１００は、３Ｄ映像データ取得部１１１と、３Ｄ座標データ算出部１１２と、仮想光源データ取得部１１３と、射影データ算出部１１４と、映像データ同期部１１５と、描画部１１６とを含む。コンピュータ１００は、図２にも示したように、３Ｄディスプレイ１３１と２Ｄディスプレイ１３２とも含む。
　３Ｄ映像データ取得部１１１と、３Ｄ座標データ算出部１１２と、仮想光源データ取得部１１３と、射影データ算出部１１４と、映像データ同期部１１５と、描画部１１６とは、ＣＰＵ１１０およびメモリ１２０によって実現される機能である。より詳細には、ＣＰＵ１１０が有する各機能は、ＣＰＵ１１０がメモリ１２０などに記憶される制御プログラムを実行して、図２に示される各ハードウェアを制御することによって実現される機能である。
　ただし、３Ｄ映像データ取得部１１１、３Ｄ座標データ算出部１１２、仮想光源データ取得部１１３、射影データ算出部１１４、映像データ同期部１１５、描画部１１６の一部または全部が、映像処理エンジンまたはハードウェア回路によって実現されてもよい。
　３Ｄ映像データ取得部１１１は、メモリ１２０から３Ｄ映像データ（右目用映像と左目用映像）を読み出す。３Ｄ映像データ取得部１１１は、３Ｄ映像データを３Ｄ座標データ算出部１１２に受け渡す。
　図３および図４を参照して、３Ｄ座標データ算出部１１２は、右目用映像と左目用映像とに基づいて、３Ｄの座標データを算出する。すなわち、３Ｄ座標データ算出部１１２は、右目用映像と左目用映像とに基づいて、３Ｄ映像を構成する各点の飛び出し量を計算することができる。たとえば、３Ｄ座標データ算出部１１２は、特開２００９－１８６２２８号公報に記載の方法に基づいて、３Ｄ座標データを算出することができる。
　あるいは、３Ｄ座標データ算出部１１２は、バーチャル映像のように、３Ｄ座標データ（３Ｄモデルデータ）を含む映像を取得した場合は、スケーリングや回転等の行列計算を介して、３Ｄ座標データを算出することができる。
　仮想光源データ取得部１１３は、メモリ１２０から仮想光源１０の位置を取得する。あるいは、仮想光源データ取得部１１３は、入力デバイス１４０を介して、ユーザから仮想光源１０の位置を取得する。
　射影データ算出部１１４は、算出された３Ｄ座標データと、仮想光源１０の位置とに基づいて、３Ｄオブジェクトが仮想光源によって２Ｄディスプレイ１３２に射影されたと仮定した場合の射影データを算出する。
　ここで、射影データ算出部１１４における処理を詳しく説明する。図５は、仮想光源の位置に基づいて３Ｄオブジェクトを２Ｄディスプレイ１３２に射影する方法を示すイメージ図である。
　図５を参照して、３Ｄオブジェクトの各々をＡｎ(ただしｎ＝１，２，・・・Ｎ)とし、仮想光源をＳ（ｓ１，ｓ２，ｓ３）とし、２Ｄディスプレイ１３２が存在する平面をＤ(ａｘ＋ｂｙ＋ｃｚ＝ｄ、ａ，ｂ，ｃ，ｄは定数)とする。なお、点Ｏ（０，０，０）は、３Ｄディスプレイ１３１の頂点の一つとする。
　この時、ＳとＯとを結ぶ直線ｌｓは、
ｘ／ｓ１＝ｙ／ｓ２＝ｚ／ｓ３
で表される。この式と平面Ｄを示す式とに基づいて、α＝ａ＊ｓ１＋ｂ＊ｓ２＋ｃ＊ｓ３とすると、ＳからＤへのＯの写像Ｏｄは（ｄ＊ｓ１／α，ｄ＊ｓ２／α，ｄ＊ｓ３／α）で表される。
　２Ｄディスプレイ１３２の表示可能な領域だけを表す場合は、例えば表示領域が四角形の場合は、それぞれの辺のどちら側が表示領域かを表すための４つの不等式で表す事ができる（式１）。
　次に、ＳからＤに対するＡｎの射影の算出方法について説明する。
　Ａは、Ｄと平行な平面Ｅと交わるものとする。この時、平面Ｅは、ａｘ＋ｂｘ＋ｃｚ＝ｅ(ただし、ｅｍｉｎ≦ｅ≦ｅｍａｘ)で表される。ＡとＥが交わった部分である２次元の図形をＡ（ｅ）とする。また、直線ｌｓと平面Ｅとが交わる点Ｏｅは、（ｅ＊ｓ１／α，ｅ＊ｓ２／α，ｅ＊ｓ３／α）で表される。Ａ（ｅ）の領域内部の点は全てＯｅからのベクトルで表現する事ができる。これらのベクトル群をＶａ（ｅ）とする。
　ＳからＤまでの距離と、ＳからＥまでの距離の比は、ＳからＯｄまでの距離と、ＳからＯｅまでの距離の比に等しいので、以下の式が成り立つ。
ｄ＊ｓ１／α－ｓ１:ｅ＊ｓ１／α－ｓ１＝ｄ－α:ｅ－α
　よって、ＳからＤに対するＡ（ｅ）の射影は、Ｏｄからのベクトル群｛（ｄ－α）／（ｅ－α）｝＊Ｖａ（ｅ）として表される（式２）。
　ＳからＤに対するＡの射影は、式２においてｅｍｉｎ≦ｅ≦ｅｍａｘを満たすｅにより作られる全てのＡ（ｅ）の領域の集合φａｄで表す事ができる。２Ｄディスプレイ１３２に表示される射影は、φａｄの内、式１によって決定される不等式を満たすベクトル群により表す事ができる。以上より、光源Ｓから２Ｄディスプレイ１３２に対する、Ａの射影を算出する事ができる。
　特に光源Ｓが無限遠点にある場合は、ｄ－α＝ｅ－αとなり、式２はＶａ（ｅ）と表されるため、計算が簡略化される。
　さらに、ＳとＯｄとを結ぶ直線が平面Ｄと垂直であり、ａ，ｂ，ｃの内、２つの値が０である場合、平面Ｄは、ａｘ＝ｄ、または、ｂｙ＝ｄ、または、ｃｚ＝ｄ、と表される。式２のＶａ（ｅ）は、平面Ｄ上の座標（０，０）からのベクトル群とみなされるので、さらに計算が簡略化される。このように計算を簡略化することにより、基本的な機能を損なわずに処理速度の遅い装置においても、リアルタイムに射影算出できる可能性を高めることができる。
　図３および図４に戻って、映像データ同期部１１５は、描画部１１６を通って、３Ｄ映像データと射影データとを同時に３Ｄディスプレイ１３１と２Ｄディスプレイ１３２とに表示させる。ただし、３Ｄ静止画像を表示する場合や、射影データを作成する時間が人間がずれを感じないくらい短い場合などは、３Ｄ映像データと射影データとを同期させるための機能を設ける必要はない。
　なお、射影データ算出部１１４は、算出された射影に対して、拡大または縮小または一方向への伸縮または平行移動等の処理を行ってから、描画部１１６に出力してもよい。これらの処理により、臨場感を与えるための適切な表示サイズ・表示位置を調節したり、擬似的に仮想光源を移動させたりするための計算を簡略化にできる。たとえば、算出された射影を縮小し、無限遠点にある仮想光源により生成される正射影よりも小さくした場合は、影が２Ｄディスプレイ１３２よりも遠くにあるかのような印象を与える事もできる。
　たとえば、３Ｄディスプレイ１３１よりも手前にある座標にある（飛び出して見える）オブジェクトのみを射影する場合、仮想光源が３Ｄディスプレイ１３１と同じ面にあるものと仮定することによって計算を簡略化できる。
　さらに、仮想光源が３Ｄディスプレイ１３１と同じ面にあり且つ無限遠点にあり、仮想光源からの入射光が３Ｄディスプレイ１３１のｘ軸又はｙ軸と平行である場合、２Ｄディスプレイ１３２が入射光に垂直であると仮定して射影データを計算することにより、２Ｄディスプレイ１３２に表示される射影は３Ｄオブジェクトのｘ成分又はｙ成分を０にするだけで算出できる正射影となるので、さらに計算を簡略化する事が可能である。
　また、これらの場合においても、算出された射影に対して、拡大または縮小または一方向への伸縮または平行移動等の処理を行う事により、適切な表示サイズおよび表示位置を調節したり、擬似的に仮想光源１０を移動させたりする事ができる。
　このように構成することによって、本実施の形態においては、３Ｄディスプレイ１３１（第１の筐体１０１）に対する仮想光源１０の相対位置が一定である場合、３Ｄディスプレイ１３１（第１の筐体１０１）と２Ｄディスプレイ１３２（第２の筐体１０２）との角度が変化すると、２Ｄディスプレイ１３２に表示される影の映像も変化する。図６は、３Ｄディスプレイ１３１（第１の筐体１０１）と２Ｄディスプレイ１３２（第２の筐体１０２）との角度が変化した状態を示すイメージ図である。
　図６を参照して、ＣＰＵ１１０によって実現される射影データ算出部１１４は、角度センサ１８０から、３Ｄディスプレイ１３１（第１の筐体１０１）と２Ｄディスプレイ１３２（第２の筐体１０２）との角度を取得する。射影データ算出部１１４は、当該角度と仮想光源１０の位置とに基づいて、射影データを生成する。描画部１１６は、射影データを２Ｄディスプレイ１３２に表示させる。
　あるいは、コンピュータ１００の位置や姿勢が変化しても、仮想光源１０の絶対位置が変化しない構成にすることもできる。すなわち、コンピュータ１００の位置および／姿勢が変化すると、２Ｄディスプレイ１３２に表示される影の映像も変化する。この場合には、図２に示すように、コンピュータ１００にとって、位置姿勢センサ１９０が必須の要素になる。
　図７は、コンピュータ１００の位置と姿勢とが変化した状態を示すイメージ図である。図７を参照して、ＣＰＵ１１０は、位置姿勢センサ１９０から、コンピュータ１００の位置と姿勢とを取得する。ＣＰＵ１１０は、コンピュータ１００の位置と姿勢と仮想光源１０の位置とに基づいて、射影データを生成する。ＣＰＵ１１０は、射影データを２Ｄディスプレイ１３２に表示させる。
　さらに、コンピュータ１００のＣＰＵ１１０は、入力デバイス１４０を介して、ユーザから仮想光源の位置や大きさの設定を受け付けることが好ましい。仮想光源の半径が設定できる場合、換言すれば、仮想光源が体積を有する場合、ＣＰＵ１１０は、２Ｄディスプレイ１３２を、影の内側エリアの色と、影の輪郭エリアの色と、影から離れたエリアの色とが異なるように制御する。図８は、仮想光源１１が所定の体積を有する場合を示すイメージ図である。
　図８を参照して、ＣＰＵ１１０は、飛び出した映像によって仮想光源１１が全く隠れないエリアが明るい光（第１の輝度）を発し、飛び出した映像によって仮想光源１１の一部が隠れるエリアが灰色の光（第１の輝度よりも低い第２の輝度）を発し、飛び出した映像によって仮想光源１１が完全に隠れるエリアが黒い光（第２の輝度よりも低い第３の輝度）を発するように、２Ｄディスプレイ１３２を制御する。なお、第２の輝度は輝度の範囲を指すものである。第２の輝度は、第１の輝度と第３の輝度の間の範囲であれば灰色の光のエリア全てにおいて同じ輝度である必要はない。例えば、第１の輝度との境界から第３の輝度との境界にかけて徐々に白から黒に変化するグラデーションとなるように設定してもよい。
　さらに、コンピュータ１００のＣＰＵ１１０は、入力デバイス１４０を介して、ユーザから仮想光源の明るさを受け付けることが好ましい。図９は、仮想光源１２の明るさを変化させた状態を示すイメージ図である。図９を参照して、ＣＰＵ１１０によって実現される描画部１１６は、２Ｄディスプレイ１３２のうち、仮想光源１２の明るさに対応する輝度を、影エリア以外のエリアに設定する。
　さらに、コンピュータ１００のＣＰＵ１１０は、入力デバイス１４０を介して、ユーザから仮想光源の個数と各々の仮想光源の位置とを受け付けることが好ましい。図１０は、２つの仮想光源１３Ａ，１３Ｂの位置を設定した状態を示すイメージ図である。図１０を参照して、ＣＰＵ１１０は、飛び出した映像によって１つも仮想光源が隠れないエリアが明るい光（第１の輝度）を発し、飛び出した映像によって１つだけの仮想光源が隠れるエリアが灰色の光（第１の輝度よりも低い第２の輝度）を発し、飛び出した映像によって仮想光源が２つとも隠れるエリアが黒い光（第２の輝度よりも低い第３の輝度）を発するように、２Ｄディスプレイ１３２を制御する。
　さらに、コンピュータ１００のＣＰＵ１１０は、入力デバイス１４０を介して、ユーザから仮想光源の色を受け付けることが好ましい。図１１は、仮想光源１４の色を変化させた状態を示すイメージ図である。図１１を参照して、ＣＰＵ１１０は、２Ｄディスプレイ１３２に、仮想光源１４の色に対応する輝度・彩度・色相で影および影以外のエリアを表示させる。、輝度・彩度・色相の代わりに、色空間を表す他の尺度を使用してもよい。
　＜コンピュータ１００におけるコンテンツ表示処理＞
　次に、本実施の形態に係るコンピュータ１００におけるコンテンツ表示処理について説明する。図１２は、本実施の形態に係るコンピュータ１００におけるコンテンツ表示処理の処理手順を示すフローチャートである。以下では、射影データ算出部１１４が、３Ｄディスプレイ１３１よりも手前に飛び出している部分（オブジェクト）のみを２Ｄディスプレイ１３２に射影する場合について説明する。
　図１２を参照して、まず、コンピュータ１００のＣＰＵ１１０は、メモリ１２０から仮想光源の属性を読み出す（ステップＳ１０２）。たとえば、ＣＰＵ１１０は、各々の仮想光源の位置、大きさ、明るさ、色などを取得する。
　ＣＰＵ１１０は、ユーザからのコンテンツを指定するための命令に従って、メモリ１２０から３Ｄ表示用の映像データ（３Ｄコンテンツデータ）を読み出す（ステップＳ１０４）。あるいは、ＣＰＵ１１０は、通信インターフェイス１７０やＴＶアンテナなどを介して、外部から３Ｄコンテンツデータを取得する。より詳細には、３Ｄ表示用の映像データは、右目用の映像データと左目用の映像データとを含む。
　ＣＰＵ１１０は、映像データに基づいて、３Ｄ座標データを算出する（ステップＳ１０６）。より詳細には、たとえば、特開２００９－１８６２２８号公報に記載のように、ＣＰＵ１１０は、映像データのうちの３Ｄディスプレイ１３１から飛び出して見える部分のみに対して、スケーリングや回転等の行列演算によって、装置の状態に対応した３Ｄ座標データを計算する。
　ＣＰＵ１１０は、３Ｄ座標データと、仮想光源の属性とに基づいて、２Ｄディスプレイ１３２に表示されるべき影の映像を示す射影データを生成する（ステップＳ１０８）。通常の設定においては、ＣＰＵ１１０は、仮想光源が３Ｄディスプレイ１３１と同じ平面にあるものとして、射影データを生成する。上述したように、ＣＰＵ１１０は、算出された射影データに対して、拡大または縮小または一方向への伸縮または平行移動等の処理を行ってもよい。
　ＣＰＵ１１０によって実現される映像データ同期部１１５は、映像データと射影データの出力の同期を取る（ステップＳ１１０）。
　ＣＰＵ１１０によって実現される描画部１１６は、右目用の映像データと左目用の映像データとに基づいて、３Ｄディスプレイ１３１に３Ｄ映像を表示させる（ステップＳ１１２）。同時に、ＣＰＵ１１０は、２Ｄディスプレイ１３２に３Ｄ映像に対応する影の映像を表示させる。
　ＣＰＵ１１０は、再生を継続すべきか否かを判断する（ステップＳ１１４）。ＣＰＵ１１０は、再生停止命令を受け付けた場合または動画が終了した場合（ステップＳ１１４においてＮＯである場合）、コンテンツ表示処理を終了する。
　ＣＰＵ１１０は、再生を継続すべき場合（ステップＳ１１４においてＹＥＳである場合）、入力デバイス１４０を介してユーザから仮想光源の属性を変更するための命令を受け付けたか否かを判断する（ステップＳ１１６）。ＣＰＵ１１０は、仮想光源の属性を変更するための命令を受け付けた場合（ステップＳ１１６においてＹＥＳである場合）、ステップＳ１０２からの処理を繰り返す。ＣＰＵ１１０は、仮想光源の属性を変更するための命令を受け付けなかった場合（ステップＳ１１６においてＮＯである場合）、ステップＳ１０４からの処理を繰り返す。
　なお、射影データ算出部１１４が、３Ｄディスプレイ１３１よりも奥に位置するように見えるオブジェクトについても射影データを算出する場合について説明する。すなわち、３Ｄディスプレイ１３１の平面よりも奥に仮想光源が位置する場合について説明する。ＣＰＵ１１０は、ステップＳ１０４、Ｓ１０６，Ｓ１０８において、以下のような処理を実行する。
　ステップＳ１０４においては、ＣＰＵ１１０は、ユーザからのコンテンツを指定するための命令に従って、メモリ１２０から３Ｄ表示用の映像データ（３Ｄコンテンツデータ）を読み出す（ステップＳ１０４）。あるいは、ＣＰＵ１１０は、通信インターフェイス１７０やＴＶアンテナなどを介して、外部から３Ｄコンテンツデータを取得する。たとえば、ＣＰＵ１１０は、３Ｄモデルデータに基づいて、右目用の映像データと左目用の映像データとを生成してもよい。
　ステップＳ１０６においては、ＣＰＵ１１０は、３Ｄモデルデータに基づいて、３Ｄ座標データを算出する。より詳細には、たとえば、特開２００９－１８６２２８号公報に記載のように、ＣＰＵ１１０は、３Ｄモデルデータの全て（３Ｄディスプレイ１３１の表面よりも奥に位置するように見える部分を含む）に対して、スケーリングや回転等の行列演算によって、装置の状態に対応した３Ｄ座標データを計算する。
　ＣＰＵ１１０は、３Ｄ座標データと、仮想光源の属性とに基づいて、２Ｄディスプレイ１３２に表示されるべき影の画像を示す射影データを生成する（ステップＳ１０８）。上述したように、ＣＰＵ１１０は、算出された射影データに対して、拡大または縮小または一方向への伸縮または平行移動等の処理を行ってもよい。
　［実施の形態２］
　次に、本発明の実施の形態２について説明する。上述の実施の形態１に係るコンピュータ１００は、２つのディスプレイを有するものであった。そして、コンピュータ１００は、３Ｄディスプレイ１３１に映像を３Ｄで表示しつつ、２Ｄディスプレイ１３２に当該映像に対応する影を表示するものであった。一方、本実施の形態に係るコンピュータ１００は、３Ｄディスプレイ２３１に映像を３Ｄで表示しつつ、外部のプロジェクタ３００に当該映像に対応する影を出力させるものである。
　本実施の形態においては、コンピュータ２００を「コンテンツ表示装置」の代表例として説明を行う。ただし、コンテンツ表示装置は、電子ノート、ゲーム機、ＰＮＤ、ＰＤＡ、電子辞書、電子ＢＯＯＫなどのようなディスプレイを有する他の情報機器であってもよい。
　そして、本実施の形態に係るコンピュータ２００は、３Ｄの静止画像や３Ｄの動画像を３Ｄで表示することが可能な３Ｄディスプレイを含む。上述したように、現在、静止画像や動画像を３Ｄの表示で表示するための多数の方式が提案されている。
　＜コンピュータ２００の動作概要＞
　以下では、本実施の形態に係るコンピュータ２００の動作概要について説明する。図１３は、仮想光源の位置をプロジェクタ３００の位置に設定した場合のイメージ図である。図１４は、仮想光源の位置をプロジェクタ３００の位置とは異なる位置に設定した場合のイメージ図である。
　図１３および図１４を参照して、本実施の形態に係るコンピュータ２００は、コンテンツを３Ｄ表示することができる３Ｄディスプレイ２３１を有する。３Ｄディスプレイ２３１は、後述するＣＰＵ２１０（図１５を参照。）からの信号に基づいて、複数のオブジェクトを３Ｄ表示する。換言すれば、オブジェクトが３Ｄ表示されている場合、本実施の形態に係るコンピュータ２００のユーザは、当該オブジェクトが３Ｄディスプレイ２３１から飛び出しているように見える。
　コンピュータ２００は、プロジェクタ３００とデータ通信可能に構成されている。プロジェクタ３００は、３Ｄディスプレイ２３１における表示映像の飛び出した量（凹凸）に対応する影を表示する。たとえば、ＣＰＵ２１０は、３Ｄディスプレイ２３１における表示映像の各点における飛び出し量を計算する。ＣＰＵ２１０は、飛び出した部分をプロジェクタ３００の投影面（３Ｄディスプレイ２３１とは異なる画面）に射影した映像を射影データとして計算する。ＣＰＵ２１０は、射影データに基づいて、プロジェクタ３００に３Ｄコンテンツの影を表示させる。
　以上のように、本実施の形態に係るコンピュータ２００は、３Ｄディスプレイ２３１に３Ｄ表示される映像の凹凸に対応する影をプロジェクタ３００に投影させる。ユーザは、映像の飛び出しに応じた影が視界に入るため、従来よりも大きな臨場感が得られるようになる。
　なお、図１３に示すように、コンピュータ２００は、プロジェクタ３００の位置に仮想光源が位置するものと仮定してもよい。あるいは、図１４に示すように、コンピュータ２００は、３Ｄディスプレイ２３１の面上に仮想光源が位置するものと仮定して、３Ｄディスプレイ２３１に表示される映像の影を計算してもよい。より詳細には、コンピュータ２００は、プロジェクタ３００から３Ｄディスプレイ２３１の面上に降ろした垂線と３Ｄディスプレイ２３１の面との光点に仮想光源が位置するものと仮定してもよい。また、３Ｄディスプレイとプロジェクタは同じ筺体に収まる一体型であってもよい。
　以下、このような機能を実現するためのコンピュータ２００の構成について詳述する。
　＜コンピュータ２００のハードウェア構成＞
　本実施の形態に係るコンピュータ２００のハードウェア構成について説明する。図１５は、本実施の形態に係るコンピュータ２００のハードウェア構成を示すブロック図である。
　図１５に示すように、本実施の形態に係るコンピュータ２００は、ＣＰＵ２１０と、メモリ２２０と、３Ｄディスプレイ２３１と、入力デバイス２４０と、メモリインターフェイス２６０と、通信インターフェイス２７０と、角度センサ２８０と、位置姿勢センサ２９０とを含む。
　３Ｄディスプレイ２３１は、ＣＰＵ２１０に制御されることによって、様々な情報を３Ｄで表示する。たとえば、ＣＰＵ２１０は、右目用の映像データと左目用の映像データとに基づいて、３Ｄディスプレイ２３１に映像を３Ｄで表示させる。ＣＰＵ２１０は、３Ｄの立体モデルを表わすデータに基づいて、右目用の映像データと左目用の映像データとを生成してもよい。
　入力デバイス２４０は、ユーザの指やスタイラスペンによるタッチ操作を検出するためのタブレットを含む。タブレットは、３Ｄディスプレイ２３１および／あるいはプロジェクタ３００の表面に敷設される。入力デバイス２４０は、コンピュータ２００の表面に配置される決定キーやテンキーやＱＷＥＲＴＹキーボードを含む。ＣＰＵ２１０は、入力デバイス１４０を介して、ユーザからの命令を受け付けることができる。
　ＣＰＵ２１０は、メモリインターフェイス２６０を介して外部の記憶媒体２６１に格納されているデータを読み出して、当該データをメモリ２２０に格納する。逆に、ＣＰＵ２１０は、メモリ２２０からデータを読み出して、メモリインターフェイス２６０を介して当該データを外部の記憶媒体２６１に格納する。
　なお、記憶媒体２６１としては、ＣＤ－ＲＯＭ（Compact　Disc　-　Read　Only　Memory）、ＤＶＤ－ＲＯＭ（Digital　Versatile　Disk　-　Read　Only　Memory）、Blu-ray　Disc、ＵＳＢ（Universal　Serial　Bus）メモリ、メモリカード、ＦＤ（Flexible　Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic　Optical　Disc）、ＭＤ（Mini　Disc）、ＩＣ（Integrated　Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically　Erasable　Programmable　Read-Only　Memory）などの、不揮発的にプログラムを格納する媒体が挙げられる。
　通信インターフェイス２７０は、アンテナやコネクタによって実現される。通信インターフェイス１７０は、有線通信あるいは無線通信によって他の装置との間でデータをやり取りする。ＣＰＵ２１０は、通信インターフェイス２７０を介して、他の装置からプログラムや３Ｄコンテンツデータなどを受信したり、他の装置にデータを送信したりする。
　ＣＰＵ２１０は、通信インターフェイス２７０を介して、後述するプロジェクタ３００に射影データを送信することによって、プロジェクタ３００に影の映像を出力させる。
　角度センサ２８０は、赤外線センサ、加速度センサ、角速度センサ、方位センサ、画像認識などによって実現され、３Ｄディスプレイ２３１とプロジェクタ３００（あるいはプロジェクタ３００の投影面）との間の角度を検出する。なお、本実施の形態においては、プロジェクタ３００の照射方向がプロジェクタ３００の投影面に対して垂直であるものと仮定している。角度センサ２８０は、検出した角度をＣＰＵ２１０に入力する。
　位置姿勢センサ２９０は、３Ｄディスプレイ２３１の位置や姿勢を検出する。位置姿勢センサ２９０は、３Ｄディスプレイ２３１の位置や姿勢を、ＣＰＵ２１０に入力する。
　メモリ２２０は、各種のＲＡＭ（Random　Access　Memory）や、ＲＯＭ（Read-Only　Memory）や、ハードディスクなどによって実現される。あるいは、メモリ２２０は、読取用のインターフェイスを介して利用される、ＵＳＢ（Universal　Serial　Bus）メモリ、ＣＤ－ＲＯＭ（Compact　Disc　-　Read　Only　Memory）、ＤＶＤ－ＲＯＭ（Digital　Versatile　Disk　-　Read　Only　Memory）、ＵＳＢ（Universal　Serial　Bus）メモリ、メモリカード、ＦＤ（Flexible　Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic　Optical　Disc）、ＭＤ（Mini　Disc）、ＩＣ（Integrated　Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically　Erasable　Programmable　Read-Only　Memory）などの、不揮発的にプログラムを格納する媒体などによっても実現される。メモリ２２０は、ＣＰＵ２１０によって実行されるプログラムや、ＣＰＵ２１０によるプログラムの実行により生成されたデータ、入力デバイス２４０を介して入力されたデータなどを記憶する。
　メモリ２２０は、ＣＰＵ２１０によって実行される制御プログラムや、３Ｄの映像データなどを記憶する。３Ｄの映像データは、３Ｄの静止画像を表示するための３Ｄの静止画像データ、３Ｄの動画像を表示するための３Ｄの動画像データ、３Ｄモデルを示すモデルデータを含む。
　ＣＰＵ２１０は、メモリ２２０に記憶されている各種のプログラムを実行する。コンピュータ２００における機能（図１６の機能ブロックなど）や処理（図１２に示す処理など）は、各ハードウェアおよびＣＰＵ２１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、メモリ２２０に予め記憶されている場合がある。また、ソフトウェアは、上述した記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。
　このようなソフトウェアは、メモリインターフェイス２６０を利用することによってその記憶媒体から読み取られて、あるいは、通信インターフェイス２７０を利用することによってダウンロードされて、メモリ２２０に一旦格納される。ＣＰＵ２１０は、ソフトウェアを実行可能なプログラムの形式でメモリ２２０に格納してから、当該プログラムを実行する。
　ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
　ＣＰＵ２１０は、メモリ２２０に格納されている３Ｄ映像データに基づいて、３Ｄディスプレイ２３１に映像を３Ｄで表示させる。ＣＰＵ２１０は、３Ｄディスプレイ２３１にオブジェクトを凹凸が認識できるように表示させる。換言すれば、ユーザには、オブジェクトが３Ｄディスプレイ２３１の手前や奥に存在するように見える。
　プロジェクタ３００は、ＣＰＵ２１０によって制御されることによって、様々な情報を２Ｄで表示する。たとえば、ＣＰＵ２１０は、３Ｄディスプレイ２３１に表示されているオブジェクトの影を表す射影データを生成する。ＣＰＵ２１０は、プロジェクタ３００に影の映像を表示させる。
　本実施の形態に係るＣＰＵ２１０は、３Ｄディスプレイ２３１における表示映像の凹凸に対応する影を、プロジェクタ３００に表示させる。たとえば、ＣＰＵ２１０は、３Ｄディスプレイ２３１における表示映像の飛び出し量を計算する。ＣＰＵ２１０は、飛び出した部分をプロジェクタ３００の投影面に射影した映像を影として計算する。ＣＰＵ２１０は、飛び出した部分をプロジェクタ３００に送信する。ＣＰＵ２１０は、プロジェクタ３００に影を表示させる。
　＜コンピュータ２００の機能構成＞
　次に、本実施の形態に係るコンピュータ２００の機能構成について説明する。図１６は、本実施の形態に係るコンピュータ２００の機能構成を示すブロック図である。
　図１６を参照して、コンピュータ２００は、３Ｄ映像データ取得部２１１と、３Ｄ座標データ算出部２１２と、仮想光源データ取得部２１３と、射影データ算出部２１４と、映像データ同期部２１５と、描画部２１６とを含む。コンピュータ２００は、図１３～１５にも示したように、３Ｄディスプレイ２３１も含む。コンピュータ２００は、プロジェクタ３００と通信可能である。
　３Ｄ映像データ取得部２１１と、３Ｄ座標データ算出部２１２と、仮想光源データ取得部２１３と、射影データ算出部２１４と、映像データ同期部２１５と、描画部２１６とは、ＣＰＵ２１０およびメモリ２２０によって実現される機能である。より詳細には、ＣＰＵ２１０が有する各機能は、ＣＰＵ２１０がメモリ２２０などに記憶される制御プログラムを実行して、図１５に示される各ハードウェアを制御することによって実現される機能である。
　ただし、３Ｄ映像データ取得部２１１、３Ｄ座標データ算出部２１２、仮想光源データ取得部２１３、射影データ算出部２１４、映像データ同期部２１５、描画部２１６の一部または全部が、映像処理エンジンまたはハードウェア回路によって実現されてもよい。
　なお、３Ｄ映像データ取得部２１１、３Ｄ座標データ算出部２１２、仮想光源データ取得部２１３、射影データ算出部２１４は、それぞれ、実施の形態１に係る３Ｄ映像データ取得部１１１、３Ｄ座標データ算出部１１２、仮想光源データ取得部１１３、射影データ算出部１１４と同様であるためここでは説明を繰り返さない。
　また、射影データ算出部１１４における処理も実施の形態１に係るそれらと同様であるため、ここでは説明を繰り返さない。
　映像データ同期部２１５は、描画部２１６を通って、３Ｄ映像データと射影データとを同時に３Ｄディスプレイ２３１とプロジェクタ３００とに出力させる。ただし、３Ｄ静止画像を表示する場合や、射影データを作成する時間が人間がずれを感じないくらい短い場合などは、３Ｄ映像データと射影データとを同期させるための機能を設ける必要はない。
　このように構成したため、３Ｄディスプレイ２３１に対する仮想光源の相対位置が一定である場合、３Ｄディスプレイ２３１とプロジェクタ３００（プロジェクタ３００の投影面）との角度が変化すると、プロジェクタ３００に表示される影の映像も変化する。
　また、本実施の形態においても、角度センサ２８０などを利用することによって、３Ｄディスプレイ２３１とプロジェクタ３００との角度を取得してもよい。ＣＰＵ２１０は、当該角度に基づいて、射影データを生成する。ＣＰＵ２１０は、射影データをプロジェクタ３００に表示させる。
　あるいは、コンピュータ２００の位置や姿勢が変化しても、仮想光源の絶対位置が変化しない構成にすることもできる。すなわち、コンピュータ２００の位置および／姿勢が変化すると、プロジェクタ３００に表示される影の映像も変化する。この場合には、図１５に示すように、コンピュータ２００にとって、位置姿勢センサ２９０が必須の要素になる。
　ＣＰＵ２１０は、位置姿勢センサ２９０から、コンピュータ２００の位置と姿勢とを取得する。ＣＰＵ２１０は、当該位置と姿勢とに基づいて、射影データを生成する。ＣＰＵ２１０は、射影データをプロジェクタ３００に表示させる。
　さらに、コンピュータ２００のＣＰＵ２１０は、入力デバイス２４０を介して、ユーザから仮想光源の位置や大きさの設定を受け付けることが好ましい。仮想光源の半径が設定できる場合、換言すれば、仮想光源に体積がある場合、ＣＰＵ２１０は、プロジェクタ３００を、影の内側エリアの色と、影の輪郭エリアの色と、影から離れたエリアの色とが異なるように制御する。
　さらに、ＣＰＵ２１０は、飛び出した映像によって仮想光源が全く隠れないエリアが明るい光（第１の輝度）を発し、飛び出した映像によって仮想光源の一部が隠れるエリアが灰色の光（第１の輝度よりも低い第２の輝度）を発し、飛び出した映像によって仮想光源が完全に隠れるエリアが黒い光（第２の輝度よりも低い第３の輝度）を発するように、プロジェクタ３００を制御する。
　さらに、コンピュータ２００のＣＰＵ２１０は、入力デバイス１４０を介して、ユーザから仮想光源１２の明るさを受け付けることが好ましい。ＣＰＵ２１０によって実現される描画部１１６は、プロジェクタ３００のうち、仮想光源の明るさに対応する輝度を、影エリア以外のエリアに設定する。
　さらに、コンピュータ２００のＣＰＵ２１０は、入力デバイス２４０を介して、ユーザから仮想光源の個数と各々の仮想光源の位置とを受け付けることが好ましい。ＣＰＵ２１０は、飛び出した映像によって１つも仮想光源が隠れないエリアが明るい光（第１の輝度）を発し、飛び出した映像によって１つだけの仮想光源が隠れるエリアが灰色の光（第１の輝度よりも低い第２の輝度）を発し、飛び出した映像によって仮想光源が２つとも隠れるエリアが黒い光（第２の輝度よりも低い第３の輝度）を発するように、プロジェクタ３００を制御する。
　さらに、コンピュータ２００のＣＰＵ２１０は、入力デバイス２４０を介して、ユーザから仮想光源１４の色を受け付けることが好ましい。ＣＰＵ２１０は、プロジェクタ３００に、仮想光源の色に対応する輝度で影および影以外のエリアを表示させる。
　＜コンピュータ２００におけるコンテンツ表示処理＞
　次に、本実施の形態に係るコンピュータ２００におけるコンテンツ表示処理について説明する。本実施の形態に係るコンピュータ２００におけるコンテンツ表示処理は、実施の形態１におけるものと同様であるため、ここでは説明を繰り返さない。
　ただし、本実施の形態においては、ステップＳ１１０において、ＣＰＵ２１０によって実現される映像データ同期部２１５は、映像データと射影データの出力の同期を取る。
　そして、ステップＳ１１２において、ＣＰＵ２１０によって実現される描画部２１６は、右目用の映像データと左目用の映像データとに基づいて、３Ｄディスプレイ２３１に３Ｄ映像を表示させる。同時に、ＣＰＵ２１０は、プロジェクタ３００に３Ｄ映像に対応する影の映像を表示させる。
　＜本実施の形態に係るコンピュータ２００のその他の適用例＞
　本発明は、システム或いは装置にプログラムを供給することによって達成される場合にも適用できることはいうまでもない。そして、本発明を達成するためのソフトウェアによって表されるプログラムを格納した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、本発明の効果を享受することが可能となる。
　この場合、記憶媒体から読出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
　また、コンピュータが読出したプログラムコードを実行することにより、前述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
　さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
　この発明を詳細に説明し示してきたが、これは例示のためのみであって、限定ととってはならず、発明の範囲は添付の請求の範囲によって解釈されることが明らかに理解されるであろう。
　１０，１１，１２，１３Ａ，１３Ｂ，１４　仮想光源、１００　コンピュータ、１０１　第１の筐体、１０２　第２の筐体、１１０　ＣＰＵ、１１１　映像データ取得部、１１２　座標データ算出部、１１３　仮想光源データ取得部、１１４　射影データ算出部、１１５　映像データ同期部、１１６　描画部、１２０　メモリ、１３１　３Ｄディスプレイ、１３２　２Ｄディスプレイ、１４０　入力デバイス、１６０　メモリインターフェイス、１６１　記憶媒体、１７０　通信インターフェイス、１８０　角度センサ、１９０　位置姿勢センサ、２００　コンピュータ、２１１　映像データ取得部、２１２　座標データ算出部、２１３　仮想光源データ取得部、２１４　射影データ算出部、２１５　映像データ同期部、２１６　描画部、２２０　メモリ、２３１　３Ｄディスプレイ、２４０　入力デバイス、２６０　メモリインターフェイス、２６１　記憶媒体、２７０　通信インターフェイス、２８０　角度センサ、２９０　位置姿勢センサ、３００　プロジェクタ。

Claims (9)

  1. 　第１の画面に３Ｄコンテンツを３Ｄで表示するための第１の出力装置と、
    　前記第１の出力装置に第１の画面に前記３Ｄコンテンツを３Ｄで表示させるとともに、前記第１の画面とは異なる第２の画面に、前記３Ｄコンテンツに対応する影の映像を出力するためのプロセッサとを備える、３Ｄコンテンツ表示装置。
  2. 　前記第１の出力装置は、前記第１の画面を有する第１のディスプレイである、請求項１に記載の３Ｄコンテンツ表示装置。
  3. 　前記第１の出力装置は、前記第１の画面に前記３Ｄコンテンツを出力する第１のプロジェクタである、請求項１に記載の３Ｄコンテンツ表示装置。
  4. 　前記第２の画面を有する第２のディスプレイをさらに備える、請求項１から３のいずれかに記載の３Ｄコンテンツ表示装置。
  5. 　前記第１の画面と前記第２の画面との位置関係を検出するための第１のセンサをさらに備え、
    　前記プロセッサは、前記第１の画面に表示される前記３Ｄコンテンツと、仮想光源の位置と、前記位置関係と、に基づいて、前記３Ｄコンテンツの前記影の映像を計算する、請求項１から４のいずれかに記載の３Ｄコンテンツ表示装置。
  6. 　前記プロセッサは、通信インターフェイスを介して、前記影の映像を第２のプロジェクタに表示させる、請求項１から３のいずれかに記載の３Ｄコンテンツ表示装置。
  7. 　前記第１の画面と前記第２のプロジェクタとの位置関係を検出する第２のセンサをさらに備え、
    　前記プロセッサは、前記第１の画面に表示される前記３Ｄコンテンツと、仮想光源の位置と、前記位置関係と、に基づいて、前記３Ｄコンテンツの前記影の映像を計算する、請求項６に記載の３Ｄコンテンツ表示装置。
  8. 　前記第１の出力装置の姿勢を検出する姿勢センサをさらに備え、
    　前記プロセッサは、前記第１の出力装置の姿勢に基づいて、前記影の映像を計算する、請求項１から７のいずれかに記載の３Ｄコンテンツ表示装置。
  9. 　第１の出力装置とプロセッサとを含む３Ｄコンテンツ表示装置における３Ｄコンテンツ表示方法であって、
    　前記プロセッサが、３Ｄコンテンツを取得するステップと、
    　前記プロセッサが、前記３Ｄコンテンツの影の映像を計算するステップと、
    　前記プロセッサが、前記第１の出力装置に第１の画面に前記３Ｄコンテンツを３Ｄで表示させるとともに、前記第１の画面とは異なる第２の画面に、前記３Ｄコンテンツに対応する影の映像を出力するステップとを備える、３Ｄコンテンツ表示方法。
PCT/JP2011/075964 2010-11-12 2011-11-10 ３ｄコンテンツ表示装置、および３ｄコンテンツ表示方法 WO2012063911A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-253959 2010-11-12
JP2010253959A JP2012105200A (ja) 2010-11-12 2010-11-12 ３ｄコンテンツ表示装置、および３ｄコンテンツ表示方法

Publications (1)

Publication Number Publication Date
WO2012063911A1 true WO2012063911A1 (ja) 2012-05-18

Family

ID=46051048

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/075964 WO2012063911A1 (ja) 2010-11-12 2011-11-10 ３ｄコンテンツ表示装置、および３ｄコンテンツ表示方法

Country Status (2)

Country Link
JP (1) JP2012105200A (ja)
WO (1) WO2012063911A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2904774A1 (en) * 2012-10-01 2015-08-12 Telefonaktiebolaget LM Ericsson (PUBL) Method and apparatus for generating a depth cue
CN109920519A (zh) * 2019-02-20 2019-06-21 东软医疗系统股份有限公司 处理影像数据的方法、装置及设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6562371B1 (ja) * 2018-11-26 2019-08-21 株式会社ハニカムラボ 表示装置、表示処理装置、および表示処理プログラム
WO2020184316A1 (ja) * 2019-03-13 2020-09-17 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11261888A (ja) * 1998-03-13 1999-09-24 For A Co Ltd テレビジョン画像の合成方式
JP2004295916A (ja) * 2004-06-07 2004-10-21 Namco Ltd 画像処理装置及び画像処理方法
JP2005130394A (ja) * 2003-10-27 2005-05-19 Olympus Corp 直接投射装置及びそのプログラム
JP2005234240A (ja) * 2004-02-19 2005-09-02 Pioneer Electronic Corp 立体的二次元画像表示装置及び立体的二次元画像表示方法
JP2008089985A (ja) * 2006-10-02 2008-04-17 Pioneer Electronic Corp 画像表示装置
JP2009163610A (ja) * 2008-01-09 2009-07-23 Canon Inc 画像処理装置及び画像処理方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009216752A (ja) * 2008-03-07 2009-09-24 Victor Co Of Japan Ltd スクリーン及びそれを用いた立体映像表示システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11261888A (ja) * 1998-03-13 1999-09-24 For A Co Ltd テレビジョン画像の合成方式
JP2005130394A (ja) * 2003-10-27 2005-05-19 Olympus Corp 直接投射装置及びそのプログラム
JP2005234240A (ja) * 2004-02-19 2005-09-02 Pioneer Electronic Corp 立体的二次元画像表示装置及び立体的二次元画像表示方法
JP2004295916A (ja) * 2004-06-07 2004-10-21 Namco Ltd 画像処理装置及び画像処理方法
JP2008089985A (ja) * 2006-10-02 2008-04-17 Pioneer Electronic Corp 画像表示装置
JP2009163610A (ja) * 2008-01-09 2009-07-23 Canon Inc 画像処理装置及び画像処理方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2904774A1 (en) * 2012-10-01 2015-08-12 Telefonaktiebolaget LM Ericsson (PUBL) Method and apparatus for generating a depth cue
US10218956B2 (en) 2012-10-01 2019-02-26 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for generating a depth cue
CN109920519A (zh) * 2019-02-20 2019-06-21 东软医疗系统股份有限公司 处理影像数据的方法、装置及设备

Also Published As

Publication number Publication date
JP2012105200A (ja) 2012-05-31

Similar Documents

Publication Publication Date Title
US11928838B2 (en) Calibration system and method to align a 3D virtual scene and a 3D real world for a stereoscopic head-mounted display
US9201568B2 (en) Three-dimensional tracking of a user control device in a volume
US8717423B2 (en) Modifying perspective of stereoscopic images based on changes in user viewpoint
JP5791433B2 (ja) 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法
Pucihar et al. Exploring the evolution of mobile augmented reality for future entertainment systems
US11277603B2 (en) Head-mountable display system
EP2944081B1 (en) Stereoscopic conversion of graphics content based on viewing orientation
US10019130B2 (en) Zero parallax drawing within a three dimensional display
JP5791434B2 (ja) 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法
US8854358B2 (en) Computer-readable storage medium having image processing program stored therein, image processing apparatus, image processing method, and image processing system
JP2013050883A (ja) 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法
JP2020173529A (ja) 情報処理装置、情報処理方法、及びプログラム
WO2012063911A1 (ja) ３ｄコンテンツ表示装置、および３ｄコンテンツ表示方法
JP5723149B2 (ja) 画像処理システム、画像処理プログラム、画像処理方法及び画像処理装置
JP5950701B2 (ja) 画像表示システム、パズルゲームシステム、画像表示方法、パズルゲーム方法、画像表示装置、パズルゲーム装置、画像表示プログラム、および、パズルゲームプログラム
US10902554B2 (en) Method and system for providing at least a portion of content having six degrees of freedom motion
JP2012175358A (ja) 表示制御プログラム、表示制御装置、表示制御方法及び表示制御システム
KR101779423B1 (ko) 영상처리방법 및 영상처리장치
CN106231283B (zh) 一种虚拟立体场景的构建方法、装置及立体显示设备
US20240221240A1 (en) Display device, method of controlling display device, and computer-readable storage medium
US20220044351A1 (en) Method and system for providing at least a portion of content having six degrees of freedom motion
KR20200046538A (ko) 3차원 컬러 블록 생성 방법 및 시스템
CN113780141A (zh) 一种对弈模型的构建方法和装置
GB2575932A (en) Method and system for providing at least a portion of content having six degrees of freedom motion

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11840562

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11840562

Country of ref document: EP

Kind code of ref document: A1