WO2012160812A1 - 映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路 - Google Patents

映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路 Download PDF

Info

Publication number
WO2012160812A1
WO2012160812A1 PCT/JP2012/003344 JP2012003344W WO2012160812A1 WO 2012160812 A1 WO2012160812 A1 WO 2012160812A1 JP 2012003344 W JP2012003344 W JP 2012003344W WO 2012160812 A1 WO2012160812 A1 WO 2012160812A1
Authority
WO
WIPO (PCT)
Prior art keywords
depth
image
data
video
data broadcast
Prior art date
Application number
PCT/JP2012/003344
Other languages
English (en)
French (fr)
Inventor
琢士 平本
由佳 小澤
川口　透
洋 矢羽田
上坂　靖
智輝 小川
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Publication of WO2012160812A1 publication Critical patent/WO2012160812A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing

Definitions

  • the present invention relates to a technology for displaying data broadcasting in 3D (stereoscopic view).
  • a transmitting device sends characters and still images as data broadcasts separately from video data, and a receiving device performs processing to superimpose and display characters and still images received by data broadcasting on video data. (See Non-Patent Document 1).
  • the present invention has been made in view of the above-described problems, and can display an image that can be easily viewed by a user when a 3D program and a data broadcast are displayed together.
  • An object is to provide a video viewing system, a video processing method, a video processing program, and an integrated circuit.
  • a video processing apparatus that receives data broadcast and video data for 3D display, and superimposes and outputs a data broadcast image on the video of the received video data.
  • the depth at which the image when the data broadcasting image is displayed in 3D is set according to the depth of the object displayed in 3D based on the video data.
  • An acquisition unit that acquires the depth from the depth information included in the received video data, and a right eye for 3D display of the received image of the data broadcast at the acquired depth
  • a generating unit that generates a left-eye image and a left-eye image.
  • the video processing device can display the data broadcast image displayed in a superimposed manner on the video data in 3D at a depth corresponding to the depth of the 3D object of the video data.
  • the user can more appropriately view the data broadcast together with the 3D video.
  • summary of the stereoscopic image viewing system 1 The figure which shows the structure of the three-dimensional video viewing system 1.
  • Block diagram of broadcasting apparatus 10 The figure for demonstrating the production
  • the figure for demonstrating the superimposition of 3D video data and data broadcasting The figure which shows 3D object and data broadcasting which are displayed on the display 22
  • a stereoscopic video viewing system 1 as an embodiment of the present invention will be described with reference to the drawings. ⁇ 1. Overview> Here, a description will be given of how the present inventor has obtained the stereoscopic video viewing system 1 according to one aspect of the present invention.
  • the imaging position is different for each 3D object.
  • the imaging position of the 3D object may vary from frame to frame.
  • FIG. 2 is a diagram showing a system configuration of the stereoscopic video viewing system 1 which is an aspect of the present invention.
  • the stereoscopic video viewing system 1 includes a broadcasting device 10, a digital television 20, a remote controller 30, and 3D glasses 40.
  • the broadcast device 10 is a device installed in a digital broadcast station, and transmits a broadcast stream obtained by multiplexing a program content composed of audio data and 3D video data and a data broadcast on a digital broadcast wave.
  • the digital television 20 is a 3D television capable of displaying 3D video, receives a digital broadcast wave, and extracts a broadcast stream from the received digital broadcast wave. Then, the broadcast stream is separated into audio data, 3D video data, and data broadcast.
  • the digital television 20 uses the image for the left eye for displaying the image in 3D from the data broadcast image, and It is necessary to generate an image for the right eye.
  • the 3D video data received by the digital television 20 includes offset information for generating a left-eye image and a right-eye image from the data broadcast image.
  • an offset value indicating the shift amount by which the data broadcast image is shifted leftward or rightward is indicated by the number of pixels. This offset value is generated according to the image formation point of the 3D video data, and is set so that the image formation point of the data broadcasting object displayed in 3D is in front of the image formation point of the 3D video object. Has been.
  • FIG. 3 is a block diagram illustrating a functional configuration of the broadcasting device 10.
  • the broadcast apparatus 10 includes a program content storage unit 101, an offset information generation unit 102, an encoder 103, a data broadcast production unit 104, a multiplexer 105, and a broadcast stream transmission unit 106.
  • the broadcasting device 10 includes a processor, a RAM (Random Access Memory), a ROM (Read Only Memory), and a hard disk not shown.
  • each functional block of the broadcasting device 10 is configured as hardware or realized by a processor executing a computer program stored in a ROM or a hard disk.
  • the program content storage unit 101 stores 3D video data and audio data constituting a program.
  • the offset information generation unit 102 reads 3D video data stored in the program content storage unit 101, and generates offset information for each frame of the read 3D video data. Generation of offset information will be described with reference to FIGS.
  • the offset information generation unit 102 defines in advance positions 1 to 14 when the plane on which 3D video data is drawn is divided into nine areas from block 1 to block 9. ing.
  • position 1 includes block 1.
  • Position 2 includes block 2.
  • Position 3 includes block 3.
  • Position 4 includes block 4.
  • Position 5 includes block 5.
  • Position 6 includes block 6.
  • Position 7 includes block 7.
  • Position 8 includes block 8.
  • Position 9 includes block 9.
  • the position 10 includes all the blocks from the block 1 to the block 9.
  • the position 11 includes a block 1, a block 4, a block 7, a block 8, and a block 9.
  • the position 12 includes a block 1, a block 2, and a block 3.
  • Position 13 includes block 4, block 5 and block 6.
  • Location 14 includes block 7, block 8 and block 9.
  • FIG. 5 is a diagram showing the relationship between the depth of the 3D object included in the frame and the offset value of each divided region for the frames constituting the 3D video data.
  • the frame includes an object 150 protruding forward and an object 160 retracting deeply.
  • the depth of the object 150 is expressed by an offset value, it is “4”
  • the depth of the object 160 is expressed by an offset value, it is “ ⁇ 3”.
  • FIGS. 5 (b) to 5 (e) The offset values from position 1 to position 14 at this time are shown in FIGS. 5 (b) to 5 (e).
  • the offset values of the position 1, the position 2 and the position 4, and the position 5 where the object 150 is displayed are “4”, and the positions 8 and 9 where the object 160 is displayed are displayed.
  • the offset value is “ ⁇ 3”.
  • the offset values of position 3, position 6, and position 7 where neither the object 150 nor the object 160 are displayed are “0”.
  • “4” having a large absolute value of the depth is used as the offset value at the position 10 and the position 11 where both the object 150 and the object 160 are displayed.
  • the offset value of the position 12 and the position 13 where the object 150 is displayed is “4”, and the offset value of the position 14 where the object 160 is displayed is “ ⁇ 3”.
  • the offset information generation unit 102 determines an offset value when the data broadcast image is displayed in 3D according to the offset value of the 3D video shown in FIG.
  • a value obtained by adding “1” to the offset value of the 3D video data is set as the offset value of the data broadcast image.
  • the offset value of the 3D video data is “0”, the offset value of the data broadcast image is also “0”.
  • the data broadcast image appears to pop out closer to the user than the 3D video object.
  • the offset information generation unit 102 generates offset information 170 that is a table describing offset_sequence_id that is information for specifying each position and offset_sequence that is an offset value of each position.
  • the generated offset information 170 is input to the encoder 103 and the data broadcast production unit 104.
  • the offset information 170 is an example of depth information according to the present invention.
  • Encoder 103 includes a video encoder and an audio encoder.
  • the video encoder reads 3D video data from the program content storage unit 101, It is encoded with H.264 MVC (Multi View Coding) to obtain a video stream in the MPEG (Moving Picture Experts Group) 2-TS (Transport Stream) format.
  • the audio encoder reads out audio data from the program content storage unit 101 and encodes it to obtain an MPEG2-TS format audio stream.
  • the video encoder encodes the 3D video data to generate GOP (Group Of Pictures)
  • GOP Group Of Pictures
  • the H.3D of the 3D video data is generated.
  • the offset information generated by the offset information generation unit 102 is stored in the GOP included in the H.264 MVC Dependent view (video compression data for one eye).
  • the encoded video stream and audio stream are input to the multiplexer.
  • the data broadcast production unit 104 generates data for data broadcast using BML (Broadcast Markup Language).
  • BML Broadcast Markup Language
  • the generated data is input to the multiplexer 105.
  • the BML 180 shown in FIG. 7 is an example of data described by the BML generated by the data broadcasting production unit 104, and displays the character string “3D Digital” at position 5 (see FIG. 3B).
  • the BML 180 includes a base_depth element 181 as information for determining the depth of a data broadcast image (here, a character string “3D Digital”).
  • the base_depth element 181 includes an offset_sequence_id attribute and a fixed_depth attribute.
  • the offset_sequence_id attribute is an attribute for defining the display position of the image.
  • the data broadcast production unit 104 displays the character string “3D Digital” at the position 5 (see FIG. 3B)
  • the data broadcast production unit 104 reads the character string “3D Digital” from the offset information 170 received from the offset information generation unit 102.
  • the value “5” of offset_sequence_id corresponding to the position 5 that is the display position is acquired. Then, the acquired value “5” is set as an offset_sequence_id attribute of the base_depth element.
  • the fixed_depth attribute is an offset value for displaying at a fixed depth without changing the depth of the image of the data broadcast according to the depth of the video of the 3D video data.
  • the data broadcast production unit 104 sets a depth at which the data broadcast image is formed on the near side from the maximum depth.
  • the indicated offset value is a fixed_depth attribute. If the maximum depth is not notified, a predetermined value may be used as the fixed_depth attribute. As an example, the fixed_depth attribute of the BML 180 is “10”.
  • the multiplexer 105 multiplexes the video stream, the audio stream, the data described in BML, and the like to generate MPEG2-TS.
  • the generated MPEG2-TS is input to the broadcast stream transmission unit 106.
  • FIG. 8 is a block diagram showing a functional configuration of the digital television 20. As shown in the figure, the digital television 20 includes a video processing device 21 and a display 22.
  • the video processing device 21 includes a demultiplexer 201, an audio decoder 202, a video decoder 203, a left-eye video data output unit 204, a right-eye video data output unit 205, a data broadcast processing unit 206, an offset acquisition unit 207, and right-eye data.
  • the video processing device 21 includes a processor, RAM, ROM, and hard disk not shown. Each functional block of the video processing device 21 is configured as hardware, or is realized by a processor executing a computer program stored in a ROM or a hard disk.
  • the demultiplexer 201 acquires the MPEG2-TS received via the digital broadcasting network, and extracts the audio stream, video stream, and data described in BML multiplexed in the MPEG2-TS.
  • the demultiplexer 201 passes the audio stream to the audio decoder 202, passes the video stream to the video decoder 203, and passes the data described in BML to the data broadcast processing unit 206.
  • the audio decoder 202 acquires and decodes the audio stream.
  • the decoded audio signal is input to the display control unit 212.
  • the video decoder 203 acquires and decodes the video stream.
  • 3D video data is H.264. It is compression-encoded with H.264 MVC.
  • the video decoder 203 decodes the video stream, it is decoded into two pieces of video data for the left eye and the right eye.
  • the video decoder 203 acquires the display mode of 3D video data from the display mode switching unit 215.
  • the display mode of the 3D video data is either an LR (Left view-Right view) display mode or an LL (Left view-Left view) display mode.
  • the video decoder 203 In the LR display mode, the video decoder 203 outputs the decoded left-eye video data to the left-eye video data output unit 204, and the decoded right-eye video data to the right-eye video data output unit 205. Output. In the LL display mode, the video decoder 203 outputs the decoded left-eye video data to both the left-eye video data output unit 204 and the right-eye video data output unit 205. Details of the LR display mode and the LL display mode will be described later.
  • the left-eye video data output unit 204 and the right-eye video data output unit 205 respectively control the output timing of the video data acquired from the video decoder 203, and generate the left-eye video data and the right-eye video data alternately. Output to the unit 210 and the image generation unit 211 for the right eye.
  • the drawing data generated here is drawing data for 2D display.
  • the data broadcast processing unit 206 acquires the display mode of the data broadcast from the display mode switching unit 215.
  • the data broadcast display mode is either the LR display mode or the LL display mode.
  • the data broadcast processing unit 206 In the LR display mode, the data broadcast processing unit 206 outputs drawing data for 2D display to the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 together with a 3D display instruction. In the LL display mode, the data broadcast processing unit 206 outputs 2D display drawing data to the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 together with a 2D display instruction.
  • the data broadcast processing unit 206 outputs the base_depth element included in the BML to the offset acquisition unit 207.
  • the offset acquisition unit 207 extracts offset information from the GOP acquired while the video decoder 203 is decoding the video stream. Further, the offset acquisition unit 207 acquires a base_depth element from the data broadcast processing unit 206. Further, the offset acquisition unit 207 reads the offset mode stored in the offset mode storage unit 216.
  • the offset acquisition unit 207 acquires offset values that are parallax information for 3D display of data broadcasting using the offset information, the base_depth element, and the offset mode.
  • the acquired offset value is notified to the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209.
  • the offset acquisition unit 207 acquires the offset information 170 illustrated in FIG. 6 and the base_depth element 181 illustrated in FIG. 7 will be described.
  • the offset acquisition unit 207 reads the value of offset_sequence_id included in the base_depth element 181. Here, it is “5”. The offset acquisition unit 207 acquires the offset_sequence value associated with the offset_sequence_id “5” from the offset information 170 as the offset value. In this example, the offset value is “5”.
  • the offset acquisition unit 207 acquires the value of fixed_depth from the base_depth element 181 as the offset value.
  • the offset value is “10”.
  • the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 receive drawing data for 2D display and an instruction for either 3D display or 2D display from the data broadcast processing unit 206. Further, the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 receive the offset value from the offset acquisition unit 207.
  • the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 Upon receiving the 2D display instruction, the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 convert the 2D display drawing data received from the data broadcast processing unit 206 into the left-eye image generation unit 210 and The image is output to the right eye image generation unit 211.
  • the right-eye data broadcast image generation unit 208 Upon receiving the 3D display instruction, the right-eye data broadcast image generation unit 208 generates a right-eye data broadcast image, and the left-eye data broadcast image generation unit 209 generates a left-eye data broadcast image.
  • the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 receive the drawing data 300.
  • the offset value is received from the offset acquisition unit 207.
  • the left-eye data broadcast image generation unit 209 shifts the drawing data 300 to the right by the number of pixels indicated by the notified offset value, generates a transparent area 311 on the left side, cuts out the right end area 312, and generates left-eye data.
  • a broadcast image 301 is generated.
  • the right-eye data broadcast image generation unit 208 shifts the drawing data 300 to the left by the number of pixels indicated by the notified offset value, generates a transparent area 321 on the right side, cuts the left end area 322, and right-eye data.
  • a broadcast image 302 is generated.
  • FIG. 9B is a diagram showing what kind of stereoscopic video is reproduced by the offset control shown in FIG. 9A.
  • a plane 303 on which a 3D display data broadcast image is drawn has a depth-X depth. That is, when viewed from the user, the characters “3D Digital” appear to jump out from the display 22 by only Depth-X.
  • the left-eye data broadcast image generation unit 209 outputs the generated left-eye data broadcast image to the left-eye image generation unit 210, and the right-eye data broadcast image generation unit 208 outputs the generated right-eye data broadcast image to the right-eye.
  • the image is output to the image generation unit 211.
  • the left eye image generation unit 210 receives the left eye data broadcast image from the left eye data broadcast image generation unit 209.
  • the left-eye image generation unit 210 sequentially receives the decoded left-eye video data from the left-eye video data output unit 204.
  • the left-eye image generation unit 210 superimposes the left-eye data broadcast image on the left-eye video data to generate a left-eye image.
  • the generated left eye image is input to the display control unit 212.
  • the left-eye image generation unit 210 draws a left-eye video plane 401 using a plane memory for drawing left-eye video data for one screen. Also, the left-eye image generation unit 210 draws the left-eye data broadcast plane 402 using a plane memory for drawing an image for one screen included in the data broadcast. Then, the left-eye data broadcast plane 402 is superimposed on the left-eye video plane 401 to generate a left-eye image 403 in which the object included in the 3D video data and the data broadcast character “3D Digital” are combined.
  • the right eye image generation unit 211 receives the right eye data broadcast image from the right eye data broadcast image generation unit 208.
  • the right-eye image generation unit 211 sequentially receives the decoded right-eye video data from the right-eye video data output unit 205.
  • the right-eye image generation unit 211 generates a right-eye image by superimposing the right-eye data broadcast image on the right-eye video data.
  • the generated right eye image is input to the display control unit 212.
  • the display control unit 212 alternately receives the left-eye image and the right-eye image from the left-eye image generation unit 210 and the right-eye image generation unit 211, and outputs the received left-eye image and right-eye image to the display 22. At this time, when the image to be output is the left-eye image, the display control unit 212 notifies the 3D glasses 40 worn by the user that the left-eye image is displayed, and the output image is the right-eye image. In this case, the display control unit 212 notifies the 3D glasses 40 worn by the user that the right-eye image is to be displayed.
  • the right eye of the 3D glasses 40 is hidden by the liquid crystal shutter, and the user views the left-eye image only with the left eye.
  • the right-eye image is displayed on the display 22
  • the left eye of the 3D glasses 40 is hidden by the liquid crystal shutter, and the user views the left-eye image only with the right eye.
  • the display control unit 212 outputs the audio signal received from the audio decoder in synchronization with the screen output to the display 22 to a speaker (not shown) built in the display 22.
  • the user input receiving unit 213 receives from the remote control 30 a 3D video display mode input by the user operating the remote control 30.
  • the user input receiving unit 213 records the received 3D video display mode in the display mode storage unit 214.
  • the display mode storage unit 214 is a non-volatile memory for storing the display mode of 3D video input by the user.
  • the display mode switching unit 215 sets a 3D video display mode and a data broadcast display mode.
  • the display mode switching unit 215 notifies the video decoder 203 of the set display mode of 3D video data.
  • the display mode switching unit 215 notifies the data broadcast processing unit 206 of the set display mode of the data broadcast. Details of the display mode setting process will be described later.
  • the display mode will be described with reference to FIGS.
  • the display mode of 3D video data will be described as an example, but the display mode of data broadcasting is the same.
  • the display modes include the LR display mode and the LL display mode.
  • the LR display mode is a mode for displaying 3D video data in 3D
  • the LL display mode is a mode for displaying 3D video data in 2D.
  • FIG. 12 is a diagram for explaining the LR display mode (3D display).
  • the video decoder 203 outputs the decoded left-eye video data 501 to the left-eye video data output unit 204, and outputs the decoded right-eye video data 502 to the right-eye video data output unit 205. Output.
  • the left-eye video data 501 and the right-eye video data 502 are parallax images.
  • the left-eye video data 501 and the right-eye video data 502 are alternately output to the display 22 via the display control unit 212.
  • 3D display is realized by alternately displaying the left-eye video data 501 and the right-eye video data 502 having parallax.
  • FIG. 13 is a diagram for explaining the LL display mode (2D display).
  • the video decoder 203 also uses the decoded left-eye video data 501 as right-eye video data. That is, the video decoder 203 outputs the left-eye video data 501 to both the left-eye video data output unit 204 and the right-eye video data output unit 205.
  • the same left-eye video data 501 and right-eye video data 501 having no parallax are alternately output to the display 22 via the display control unit 212.
  • the offset mode storage unit 216 is a non-volatile memory for storing an offset mode that is a method for determining an offset value that is parallax information when 3D displaying a data broadcast.
  • the offset mode is either “variation” or “fixed”.
  • the offset mode is input by the user via the user input receiving unit 213.
  • the offset_sequence value included in the offset information received together with the 3D video data is used as the offset value.
  • offset information received together with 3D video data is included in one GOP unit. That is, the offset information can be updated on a GOP basis. Therefore, even if the BML is not updated, if the offset_sequence included in the offset information varies, for example, if the depth of the 3D object 601 illustrated in FIG. 11 varies, the depth of the character 602 of “3D Digital” accordingly. Will fluctuate.
  • the value of fixed_depth included in BML is used as the offset value.
  • the fixed_depth attribute can be updated in units of BML, but is not associated with 3D video data. Therefore, even if the depth of the 3D video data changes, the effect of changing the depth of the data broadcast image is lost. However, some users may find it difficult to see the characters when the depth of the characters in the data broadcast varies. In such a case, the user may set the offset mode to “fixed”. ⁇ 3. Operation> Here, the operation of the video processing apparatus 21 will be described using the flowcharts of FIGS. 14 to 16. ⁇ 3-1. Operation of data broadcasting display processing> FIG.
  • LR display data for data broadcasting indicates the “left-eye data broadcast image” and “right-eye data broadcast image” described above.
  • 3D video LR video data in the figure refers to the “left-eye video data” and “right-eye video data” described above.
  • the display mode switching unit 215 sets a display mode for 3D video and data broadcasting (step S1). Details of step S1 will be described later.
  • the offset acquisition unit 207 acquires an offset value that is parallax information for displaying the data broadcast in 3D (step S2). Details of step S2 will be described later.
  • the data broadcast processing unit 206 determines whether the display mode of the data broadcast set by the display mode switching unit 215 in step S1 is the LL display mode or the LR display mode.
  • the data broadcast processing unit 206 When the display mode of the data broadcast is the LL display mode (YES in step S3), the data broadcast processing unit 206 notifies the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 that it is in the LL display mode. To be notified.
  • the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 receive the rendering data received from the data broadcast processing unit 206 before being converted to 3D as it is, and the right-eye image generation unit 211 and the left-eye image generation unit 210. Output to.
  • the 3D video data display mode is also the LL display mode. Therefore, the video decoder 203 outputs the left-eye video data as video data for 2D display to the left-eye video data output unit 204 and the right-eye video data output unit 205.
  • both the left-eye image generation unit 210 and the right-eye image generation unit 211 superimpose data broadcast drawing data on the video data for 2D display (step S4).
  • the 3D video and data broadcast displayed on the display 22 via the display control unit 212 are displayed in 2D.
  • the right-eye data broadcast image generation unit 208 and the left-eye data broadcast image generation unit 209 each have the offset acquired by the offset acquisition unit 207 in step S2.
  • the left-eye data broadcast image and the right-eye data broadcast image are generated from the data broadcast drawing data (step S5).
  • the right-eye data broadcast image generation unit 208 outputs the right-eye data broadcast image to the right-eye image generation unit 211, and the left-eye data broadcast image generation unit 209 generates the left-eye data broadcast image.
  • the unit 210 To the unit 210.
  • the data broadcast processing unit 206 acquires the 3D video display mode from the display method switching unit 215 and determines whether the 3D video display mode is the LL display mode or the LR display mode (step S6).
  • the video decoder 203 sends the left-eye video data output unit 204 and the right-eye video data output unit 205 to the left-eye video data output unit 205 as 2D display video data.
  • Video data is output.
  • the left-eye video data output unit 204 and the right-eye video data output unit 205 send the left-eye video data, which is video data for 2D display, to the right-eye image generation unit 211 and the left-eye image generation unit 210 at a predetermined timing. ,Output.
  • the left-eye image generation unit 210 superimposes the left-eye data broadcast image on the video data for 2D display.
  • the right-eye image generation unit 211 superimposes the right-eye data broadcast image on the video data for 2D display (step S7).
  • the 3D video displayed on the display 22 via the display control unit 212 is a 2D display, and the data broadcast is a 3D display.
  • the video decoder 203 When the 3D video data display mode is the LR display mode (NO in step S6), the video decoder 203 outputs the left-eye video data to the left-eye video data output unit 204, and the right-eye video data is output to the right-eye video data.
  • the data is output to the unit 205.
  • the left-eye video data output unit 204 and the right-eye video data output unit 205 each output the left-eye video data to the left-eye image generation unit 210 at a predetermined timing, and the right-eye video data is output to the right-eye image generation unit. To 211.
  • FIG. 15 is a flowchart showing the operation of the display mode setting process by the display mode switching unit 215. The operation shown here is the details of step S1 in FIG.
  • the display mode switching unit 215 acquires the base_depth element from the BML acquired by the data broadcast processing unit 206.
  • the display mode switching unit 215 sets the data broadcast display mode to the LL display mode (step S102).
  • the display mode switching unit 215 sets the 3D video data display mode to the LL display mode (step S103).
  • the display mode switching unit 215 sets the data broadcast display mode to the LR display mode (step S104).
  • the display mode switching unit 215 determines whether or not the display mode designated in advance by the user is recorded in the display mode storage unit 214 (step S105).
  • the display mode switching unit 215 sets the display mode of the 3D video data to the LR display mode (step S108).
  • the display mode switching unit 215 determines whether the recorded display mode is the LL display mode or the LR display mode (step S106).
  • the display mode switching unit 215 sets the 3D video data display mode to the LL display mode (step S107).
  • FIG. 16 is a flowchart showing the operation of the offset value acquisition process by the offset acquisition unit 207. The operation shown here is the details of step S2 in FIG.
  • the offset acquisition unit 207 determines whether the offset mode stored in the offset mode storage unit 216 is “fixed” or “variation” (step S201).
  • the offset acquisition unit 207 acquires offset_sequence_id included in the base_depth element from the BML analyzed by the data broadcast processing unit 206 (step S202).
  • the offset acquisition unit 207 acquires data in the user data area of the GOP decoded by the video decoder 203 from the video decoder 203, and determines whether offset information is described in the GOP (step S203). ).
  • the offset acquisition unit 207 acquires the value of fixed_depth from the base_depth element. Then, the offset acquisition unit 207 sets the value of fixed_depth as an offset value (step S208).
  • the offset acquisition unit 207 acquires the value of offset_sequence associated with the offset_sequence_id acquired in step S202 from the offset information. Then, the offset acquisition unit 207 sets the offset_sequence value as an offset value (step S204).
  • the offset acquisition unit 207 acquires data in the user data area of the GOP decoded by the video decoder 203 from the video decoder 203, and stores the data in the GOP. It is determined whether offset information is described (step S205).
  • the offset acquisition unit 207 acquires the value of fixed_depth from the base_depth element. Then, the offset acquisition unit 207 sets the value of fixed_depth as an offset value (step S208).
  • the offset acquisition unit 207 reads all the offset_sequence values from the offset information. Further, the offset acquisition unit 207 acquires a fixed_depth value from the BML base_depth element analyzed by the data broadcast processing unit 206.
  • the offset acquisition unit 207 determines whether or not the maximum value of offset_sequence exceeds the fixed_depth value (step S206).
  • the offset acquisition unit 207 sets the value of fixed_depth as an offset value (step S208).
  • the offset acquisition unit 207 sets the maximum value of offset_sequence as the offset value (step S207). ⁇ 4. Modification> As mentioned above, although the embodiment of the stereoscopic video viewing system according to the present invention has been described, the exemplified stereoscopic video viewing system can be modified as follows, and the stereoscopic video viewing system according to the above-described embodiment can be modified. Of course, it is not limited to the video viewing system.
  • the base_depth element is added to the BML, and the 3D display of the data broadcast is controlled using the base_depth element. This makes it possible to control 3D display in units of BML.
  • a base_depth element may be added to SI / PSI.
  • 3D display can be controlled in units of programs.
  • a base_depth element may be added to the private area of DII.
  • 3D display can be controlled in module units.
  • the video processing device 21 has a configuration for receiving 3D video transmitted from the broadcasting device 10.
  • the video processing device 21 may be capable of receiving both 2D video / 3D video.
  • the video processing device 21 may perform the above-described data broadcasting 3D processing after detecting that the received program is a 3D video.
  • the video processing device 21 may be configured to ignore the base_depth element stored in the BML and receive the data broadcast in 2D while receiving the 2D video.
  • the offset information has a configuration stored in the GOP of MPEG2-TS.
  • the offset information is not limited to the configuration stored in the GOP, and may be stored in SI (Service Information).
  • the offset information generation unit 102 of the broadcasting device 10 inputs the generated offset information to the multiplexer 105 without inputting it to the encoder 103.
  • the offset information is stored in the MPEG2-TS GOP and transmitted from the broadcasting device 10.
  • the video processing device 21 can perform 3D data broadcasting processing even when offset information is not stored in the GOP of the received 3D video data.
  • the offset acquisition unit 207 acquires the left-eye video data and the right-eye video data from the video decoder 203. Then, the offset acquisition unit 207 extracts the parallax of the 3D object included in the left-eye video data and the right-eye video data. Furthermore, the offset acquisition unit 207 generates an offset value used for the 3D processing of the data broadcast so that the data broadcast image pops out before the 3D object according to the parallax of the 3D object.
  • a video processing apparatus is a video processing apparatus that receives data broadcast and video data for 3D display, and superimposes and outputs a data broadcast image on the video of the received video data.
  • An acquisition unit configured to acquire a depth at which the image to be displayed when the image of the data broadcast is displayed in 3D, which is set according to the depth of the object displayed in 3D based on the video data;
  • the image processing apparatus includes a generation unit that generates a right-eye image and a left-eye image for 3D display of the data broadcast image at the acquired depth.
  • the base_depth element is added to the BML.
  • the present invention is not limited to this, and information corresponding to the base_depth element may be added to the style sheet.
  • the determination whether to display the 3D video data in the LR display mode or the LL display mode is performed by the display mode switching unit 215 of the video processing device 21.
  • a control attribute for specifying whether to display 3D video data in the LR display mode or in the LL display mode may be added to the BML.
  • a control attribute called a mode_3d attribute may be added to the BML base_depth element.
  • the value of the mode_3d attribute is “00”
  • the control by the video processing device 21 is designated as shown in the above embodiment, and when the value of the mode_3d attribute is “01”, video processing is performed.
  • Control may be performed such that the 3D video data is forcibly displayed in the LL display mode without performing control by the device 21.
  • the offset information 170 includes 14 offset_sequences corresponding to the positions 1 to 14 indicating the depth of the data broadcasting object.
  • the data structure of the offset information of the present invention is not limited to this.
  • a configuration including nine offset_sequences corresponding to position 1 to position 9 may be used.
  • positions 10 to 14 are defined in advance as an area in which a plurality of blocks are integrated, and as shown in FIG. If the corresponding offset_sequence value is stored in advance, the offset acquisition unit 207 can easily set the offset value without referring to the offset_sequence of a plurality of regions.
  • the drawing plane is divided into nine and the positions 1 to 14 are defined.
  • the dividing method is not limited to this, and the screen may be divided in a form suitable for video data.
  • a new position other than the position 14 may be defined.
  • the display mode storage unit 214 has a configuration for storing the display mode of 3D video data specified by the user.
  • the display mode storage unit 214 is not limited to the configuration that stores the display mode specified by the user.
  • the information may be stored, and the category of 3D video data (program content category) corresponds to the specified display mode.
  • the attached information may be stored.
  • the offset mode storage unit 216 stores the offset mode received in advance by the user input reception unit 213, and the offset acquisition unit 207 stores the offset stored in the offset mode storage unit 216. According to the mode, the offset value is determined and acquired.
  • the offset acquisition unit 207 is stored in the offset mode storage unit 216.
  • the offset mode may be configured to be forcibly switched to “fixed”.
  • the offset mode may be forcibly switched to “fixed” and a fixed_depth value may be used as an offset value for data broadcasting.
  • the offset acquisition unit 207 forcibly sets the offset value to “ You may comprise so that it may set to "0".
  • the offset value may be forcibly set to “0” to display data broadcasting in 2D.
  • step S203 When a GOP storing offset information and a GOP not storing offset information are alternately received, YES / NO is repeated in step S203. As a result, since the offset value is frequently switched, it is expected that the data broadcast becomes very difficult to see. Therefore, if NO in step S203, the process may not immediately proceed to step S208, but may continue to use the offset_sequence value stored in the previous GOP as an offset value for a certain period.
  • step S204 when the offset_sequence value corresponding to a certain offset_sequence_id fluctuates greatly for each GOP, it is expected that the data broadcasting becomes very difficult to see. Therefore, when it is detected that the offset_sequence value corresponding to a certain offset_sequence_id largely fluctuates for each GOP, the process of step S204 in which the offset_sequence value is set as the offset value is stopped, and the fixed_depth value stored in the BML is offset. The control may be switched to obtain a value.
  • the processing from S205 to S207 is processing for confirming that the 3D object of the 3D video data and the object of the data broadcast do not interfere with each other when the fixed_depth value is set as the offset value. Since it is assumed that a large value is stored in advance as the fixed_depth value, no interference occurs or even if interference occurs, a mild case is expected. For this reason, the processing from S205 to S207 is not essential and may be omitted. If it is determined in step S201 that the fixed offset mode is set (YES in step S201), the process skips steps S205 to S207, immediately proceeds to step S208, and uses the fixed_depth value stored in the BML as the offset value. It is good.
  • the video processing device 21 is configured to perform 3D display of data broadcasting.
  • the video processing device 21 may be configured to perform 3D display of caption data instead of data broadcasting.
  • the communication network between the broadcasting device 10 and the video processing device 21 is not limited to a digital broadcasting network.
  • the Internet may be used.
  • the broadcast device 10 may be a server device on the Internet
  • the video processing device 21 may be a personal computer.
  • the video processing device 21 may have a function of receiving a plurality of data streams and displaying a plurality of programs on the display 22 simultaneously.
  • the offset acquisition unit 207 may acquire offset information from each of the plurality of data streams, and may perform an offset value acquisition process using the plurality of offset information.
  • the offset acquisition unit 207 reads the value of offset_sequence_id from the base_depth element stored in the BML. Furthermore, the offset acquisition unit 207 acquires the value of offset_sequence associated with offset_sequence_id from a plurality of offset information. And the offset acquisition part 207 is good also considering the maximum value of the value of several acquired offset_sequence as an offset value.
  • the BML 180 described in FIG. 7 in the above embodiment is an example.
  • the configuration of the BML used in the stereoscopic video viewing system 1 is not limited to the description of FIG.
  • a base_depth element for each object may be stored in the body element.
  • a machine language for causing the processor of the video processing device 21 and various circuits connected to the processor to execute the data broadcast display process, the display mode setting process, and the offset value acquisition process described in the above embodiment.
  • a control program composed of high-level language program codes can be recorded on a recording medium, or can be distributed and distributed via various communication paths.
  • a recording medium includes an IC card, a hard disk, an optical disk, a flexible disk, a ROM, a flash memory, and the like.
  • the distributed and distributed control program is used by being stored in a memory or the like that can be read by the processor, and each function as shown in the above embodiment is executed by the processor executing the control program. It will be realized.
  • the processor may be compiled and executed or executed by an interpreter.
  • Each functional component shown in the above embodiment (program content storage unit 101, offset information generation unit 102, encoder 103, data broadcast production unit 104, multiplexer 105, broadcast stream transmission unit 106, demultiplexer 201, audio Decoder 202, video decoder 203, left-eye video data output unit 204, right-eye video data output unit 205, data broadcast processing unit 206, offset acquisition unit 207, right-eye data broadcast image generation unit 208, left-eye data broadcast image generation unit 209, left-eye image generation unit 210, right-eye image generation unit 211, display control unit 212, user input reception unit 213, display mode storage unit 214, display mode switching unit 215, and offset mode storage unit 216) It may be realized as a circuit that executes It may be realized by executing a program by one or more processors.
  • the terminal devices described in Embodiments 1 and 2 may be configured as IC, LSI, or other integrated circuit packages. This package is incorporated into various devices for use, whereby the various devices realize the functions as
  • a video processing apparatus that receives data broadcast and video data for 3D display, and superimposes and outputs a data broadcast image on the video of the received video data, and the video data includes the video data
  • the depth information indicating the depth at which the image to be displayed when the image of the data broadcasting is displayed in 3D is set according to the depth of the object displayed in 3D based on the received image.
  • An acquisition unit that acquires the depth from the depth information included in data, and a generation unit that generates a right-eye image and a left-eye image for 3D display of the received image of the data broadcast at the acquired depth. It is characterized by providing.
  • the video processing apparatus can display a 3D image of the data broadcast image superimposed on the video data at a depth corresponding to the depth of the 3D object of the video data.
  • the user can more appropriately view the data broadcast together with the 3D video.
  • the depth information describes the depth for each display position of the image when the image of the data broadcast is displayed in 3D, which is set according to the display position and depth of the object displayed in 3D.
  • the data broadcast includes position information indicating a display position of an image of the data broadcast, and the acquisition unit acquires the position information from the data broadcast and corresponds to the display position indicated by the acquired position information. The depth is acquired from the depth information.
  • a plurality of 3D objects having different depths may be included in one frame of video data. Therefore, according to the above configuration, it is possible to always display 3D images of data broadcasts at an appropriate depth according to the depth of the 3D object displayed at the same display position.
  • the depth for each display position of the image described in the depth information is set to a value higher than the depth of the object displayed in 3D at the display position, and when the image of the data broadcast is displayed in 3D The image is displayed in front of the depth position of the object displayed in 3D.
  • the video data is distributed in an MPEG2-TS format data stream, and the data stream includes the depth information for each predetermined unit, and the acquisition unit is configured for each predetermined unit of the data stream.
  • the depth is sequentially acquired from the depth information included in the image, and the generation unit generates the left-eye image and the right-eye image each time the acquisition unit acquires the depth.
  • the depth of the 3D object of the program content fluctuates from time to time even if the depth at which the data broadcast image is displayed in 3D is stored in BML in advance when authoring the data broadcast. To do. Therefore, even if the data broadcast is displayed in 3D using the depth stored in the BML in advance, the data broadcast image cannot always be displayed in 3D at an appropriate depth in relation to the program content displayed at the same time. .
  • the data broadcast image is displayed in 3D at an appropriate depth according to the depth of the 3D object that varies from moment to moment. Is possible.
  • the data broadcast includes fixed depth information indicating a depth at which the image is to be displayed when the image of the data broadcast is displayed in 3D at a fixed depth
  • the video processing device includes the image of the data broadcast.
  • Data broadcasting for selecting either a fixed mode for displaying a 3D image at a fixed depth or a change mode for displaying a 3D image at a depth that varies according to a change in the depth of the object of the video data on which the image of the data broadcast is superimposed A display selection unit, wherein the acquisition unit acquires the depth from the depth information when the variation mode is selected, and acquires the depth from the depth information when the fixed mode is selected. Instead, the depth is acquired from the fixed depth information included in the data broadcast.
  • the depth information included in the video data when used, it is possible to display the data broadcast image in 3D at a depth corresponding to the depth of the 3D object of the video data.
  • the depth of the image of data broadcasting frequently fluctuates, it may be difficult to see characters and the like.
  • the video processing apparatus when the fixed mode is selected, the video processing apparatus can display the data broadcast image in 3D at a fixed depth.
  • the data broadcast display selection unit receives selection of either the fixed mode or the variation mode from a user.
  • the data broadcast display selection unit corresponds to the user input reception unit 213 and the offset mode storage unit 216 of the above embodiment.
  • the video processing device is capable of 2D displaying the received video data for 3D display, displaying the received video data for 3D display in 3D, and displaying the video data in 2D.
  • a display mode selection unit for selecting a 2D mode is provided, and when the display mode selection unit selects the 2D mode, the data broadcast display selection unit selects a fixed mode.
  • the video processing apparatus may have a function of displaying a 3D program received from the broadcasting apparatus as a pseudo 2D program. In such a case, even if the received 3D program includes depth information, if the data broadcast image is changed in accordance with the depth of the object of the 3D program, it is difficult for the user to see the data broadcast. .
  • the display mode selection unit selects a 2D mode.
  • the acquisition unit cannot acquire the depth, and the generation unit generates the left-eye image and the right-eye image. I can't. Therefore, the data broadcast is highly likely to be displayed in 2D.
  • the display mode selection unit receives selection of the 3D mode or the 2D mode from a user.
  • the video processing apparatus may have a function of displaying a 3D program received from the broadcasting apparatus as a pseudo 2D program. In such a case, an image desired by the user can be displayed by providing the above configuration.
  • the display mode selection unit corresponds to the user input unit 213, the display mode storage unit 214, and the display mode switching unit 215 of the above embodiment.
  • a transmission device that transmits data broadcasting and video data for 3D display, according to a storage unit that stores the video data, and a depth of an object that is 3D displayed based on the video data
  • a depth information generating unit that generates depth information indicating a depth at which the image of the data broadcast is to be displayed in 3D display, the data broadcast, and the video data including the generated depth information
  • a transmission unit for transmitting
  • the transmission apparatus 3D displays a data broadcast image displayed superimposed on video data on a video processing apparatus as a transmission destination at a depth corresponding to the depth of the 3D object of the video data. It can be displayed. As a result, the user can more appropriately view the data broadcast together with the 3D video.
  • a stereoscopic video viewing system that includes a transmission device and a video processing device and displays an image of a data broadcast superimposed on video of video data for 3D display, and the transmission device stores the video data And depth information indicating the depth at which the data broadcast image is to be displayed in 3D display according to the depth of the object to be displayed in 3D based on the video data.
  • a receiving unit that receives data; an acquisition unit that acquires the depth from the depth information included in the received video data; and the acquired image of the data broadcast Characterized in that it comprises a generator for generating a right eye image and the left eye image for 3D display in degrees.
  • the video processing apparatus can display a 3D image of the data broadcast image superimposed on the video data at a depth corresponding to the depth of the 3D object of the video data.
  • the user can more appropriately view the data broadcast together with the 3D video.
  • the video processing apparatus which is one aspect of the present invention, in the industry that manufactures and sells the video processing apparatus that reproduces 3D video data and data broadcast, when displaying the data broadcast in 3D, an image that can be easily viewed by the user It can be used as a technique that can be performed.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

　映像処理装置２１は、データ放送と３Ｄ表示用の映像データとを受信し、前記映像データには、映像データに基づいて３Ｄ表示されるオブジェクトの表示位置及び深度に応じて設定された、データ放送の画像を３Ｄ表示するときの当該画像の表示位置毎の深度が記載されたオフセット情報が含まれており、データ放送処理部２０６は、ＢＭＬから画像の表示位置を示す位置情報を取得し、オフセット取得部２０７は、オフセット情報から、前記画像の表示位置に対応するオフセット値を取得し、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、それぞれ、取得されたオフセット値を用いて、右目用データ放送画像及び左目用データ放送画像を生成する。

Description

映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路
　本発明は、データ放送を３Ｄ（立体視）表示する技術に関する。
　デジタル放送では、送信装置が、映像データとは別に文字や静止画などをデータ放送として送出し、受信装置が、データ放送で受信した文字や静止画を映像データに重畳して表示する処理を行っている（非特許文献１参照）。
　近年、映画、デジタル放送の番組、ゲーム等を３Ｄ化した３Ｄコンテンツや３Ｄ表示が可能な機器が開発されている。今後、デジタル放送の３Ｄ化が進めば、３Ｄ化された番組にデータ放送の文字や静止画などを重畳して表示することが予想される。
ＡＲＩＢ ＴＲ－Ｂ１５（ＢＳ／広帯域ＣＳデジタル放送運用規定）
　しかしながら、現在放送されているデータ放送は、３Ｄ番組ではなく、通常の２Ｄ番組に重畳するために作成されており、３Ｄ番組に重畳することを想定していない。そのため、３Ｄ番組に従来のデータ放送の画像を単純に重畳した場合、３Ｄ番組に含まれる立体的なオブジェクトの背後にデータ放送の文字や静止画が表示され、ユーザにとって不自然で視聴しにくい画像となる。
　本発明は、上記の問題点に鑑みなされたものであって、３Ｄ番組とデータ放送とを共に表示する際に、ユーザにとって視聴しやすい画像を表示することができる映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路を提供することを目的とする。
　上記の目的を達成するために、本発明の一態様は、データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する映像処理装置であって、前記映像データには、当該映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報が含まれており、受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得部と、受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部とを備えることを特徴とする。
　上記の構成により、本発明の一態様である映像処理装置は、映像データに重畳して表示されるデータ放送の画像を、前記映像データの３Ｄオブジェクトの深度に応じた深度で３Ｄ表示することが可能であり、ユーザは、より適切にデータ放送を３Ｄ映像と共に視聴することが可能となる。
立体映像視聴システム１の概要について説明するための図 立体映像視聴システム１の構成を示す図 放送装置１０のブロック図 オフセット情報の生成方法について説明するための図 オフセット情報の生成方法について説明するための図 オフセット情報１７０のデータ構造を示す図 ＢＭＬ１８０のデータ構造を示す図 デジタルテレビ２０のブロック図 左目用データ放送画像及び右目用データ放送画像の生成方法について説明するための図 ３Ｄ映像データ及びデータ放送の重畳について説明するための図 ディスプレイ２２に表示される３Ｄオブジェクトとデータ放送とを示す図 ３Ｄ映像データのＬＲ表示モードについて説明するための図 ３Ｄ映像データのＬＬ表示モードについて説明するための図 映像処理装置２１によるデータ放送表示処理の動作を示すフローチャート 表示モード設定処理の動作を示すフローチャート オフセット値取得処理の動作を示すフローチャート
　以下では、本発明の実施形態として立体映像視聴システム１について、図面を参照しながら説明する。
＜１．概要＞
　ここでは、本願発明者が本発明の一態様である立体映像視聴システム１を得るに至った経緯について説明する。
　上述したように、３Ｄ番組に含まれる３Ｄオブジェクトの背後にデータ放送の文字等が表示されると、ユーザにとって不自然で視聴しにくい画像となる。このような事態を避けるために、データ放送を３Ｄ番組に重畳して表示する場合には、受信機側で、データ放送を３Ｄ化する必要がある。
　ところが、データ放送を３Ｄ化する際に、単純に、予め定めた固定のオフセット値を用いて視差画像を生成すると、図１（ａ）に示すように、３Ｄ番組に含まれる３Ｄオブジェクトの結像位置とデータ放送の結像位置とが重なり合う場合がある。このように、３Ｄオブジェクトの結像位置とデータ放送の結像位置とが重なり合うと、３Ｄオブジェクトとデータ放送の文字等が干渉し、ユーザにとって視聴しにくい画像となる。
　また、図１（ｂ）に示すように、３Ｄ番組に複数の３Ｄオブジェクトが含まれる場合、３Ｄオブジェクト毎にその結像位置は異なる。また、フレーム毎に３Ｄオブジェクトの結像位置が変動することもある。
　そこで、本願発明者は、３Ｄオブジェクトの背後にデータ放送の文字等が表示されたり、３Ｄオブジェクトとデータ放送の文字等が干渉したりするのを抑制するための研究を重ね、図１（ｃ）に示すように、データ放送の結像位置が、３Ｄオブジェクトの結像位置の手前に位置するようにデータ放送を３Ｄ化する立体映像視聴システム１を得た。
＜２．構成＞
　ここでは、立体映像視聴システム１の構成について説明する。
＜２－１．立体映像視聴システム１の構成＞
　図２は、本発明の一態様である立体映像視聴システム１のシステム構成を示す図である。
　同図に示すように、立体映像視聴システム１は、放送装置１０、デジタルテレビ２０、リモコン３０、及び３Ｄ眼鏡４０から構成される。
　放送装置１０は、デジタル放送の放送局に設置された装置であり、音声データ及び３Ｄ映像データからなる番組コンテンツとデータ放送とを多重化した放送ストリームをデジタル放送波に載せて送出する。
　デジタルテレビ２０は、３Ｄ映像を表示することが可能な３Ｄテレビであり、デジタル放送波を受信し、受信したデジタル放送波から放送ストリームを抽出する。そして、放送ストリームを、音声データと３Ｄ映像データとデータ放送とに分離する。
　先に述べたように、３Ｄの映像に２Ｄのデータ放送を重畳するとユーザにとって見難い画像となるので、デジタルテレビ２０は、データ放送の画像から、当該画像を３Ｄ表示するための左目用画像及び右目用画像を生成する必要がある。
　ここで、デジタルテレビ２０が受信した３Ｄ映像データには、データ放送の画像から左目用画像及び右目用画像を生成するためのオフセット情報が含まれている。オフセット情報には、データ放送の画像を左方向又は右方向にシフトするシフト量を画素数で示したオフセット値が記載されている。このオフセット値は、３Ｄ映像データの結像点に応じて生成されており、３Ｄ表示されるデータ放送のオブジェクトの結像点が３Ｄ映像のオブジェクトの結像点よりも手前側になるように設定されている。
　デジタルテレビ２０は、映像データからオフセット情報を抽出し、抽出したオフセット情報を用いて、データ放送に含まれる画像から左目用画像と右目用画像とを生成する。そして、デジタルテレビ２０は、３Ｄ映像の左目用映像データの映像にデータ放送の左目用画像を重畳し、左目用画像を生成する。また、３Ｄ映像の右目用映像データの映像にデータ放送の右目用画像を重畳して、右目用画像を生成する。デジタルテレビ２０は、右目用画像と左目用画像とを交互にディスプレイに出力する。ユーザは、３Ｄ眼鏡４０を装着することにより、立体的な映像及びデータ放送を視聴することができる。
＜２－２．放送装置１０の構成＞
　図３は、放送装置１０の機能的な構成を示すブロック図である。
　同図に示すように、放送装置１０は、番組コンテンツ蓄積部１０１、オフセット情報生成部１０２、エンコーダ１０３、データ放送制作部１０４、マルチプレクサ１０５、及び放送ストリーム送出部１０６から構成される。
　放送装置１０は、図示されていないプロセッサ、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ハードディスクを含む。また、放送装置１０の各機能ブロックは、ハードウェアとして構成されているか、もしくはプロセッサがＲＯＭやハードディスクに記憶されているコンピュータプログラムを実行することで実現される。
　番組コンテンツ蓄積部１０１は、番組を構成する３Ｄ映像データと音声データとを格納している。
　オフセット情報生成部１０２は、番組コンテンツ蓄積部１０１に格納されている３Ｄ映像データを読み出し、読み出した３Ｄ映像データのフレーム毎に、オフセット情報を生成する。図４～６を用いて、オフセット情報の生成について説明する。
　オフセット情報生成部１０２は、図４（ａ）に示すように、３Ｄ映像データが描画されるプレーンをブロック１からブロック９までの９つの領域に分割した場合における位置１から位置１４を予め定義している。
　図４（ｂ）に示すように、位置１は、ブロック１を含む。位置２は、ブロック２を含む。位置３は、ブロック３を含む。位置４は、ブロック４を含む。位置５は、ブロック５を含む。位置６は、ブロック６を含む。位置７は、ブロック７を含む。位置８は、ブロック８を含む。位置９は、ブロック９を含む。図４（ｃ）に示すように、位置１０は、ブロック１からブロック９までのすべてのブロックを含む。図４（ｄ）に示すように、位置１１は、ブロック１、ブロック４、ブロック７、ブロック８及びブロック９を含む。図４（ｅ）に示すように、位置１２は、ブロック１、ブロック２及びブロック３を含む。位置１３は、ブロック４、ブロック５及びブロック６を含む。位置１４は、ブロック７、ブロック８及びブロック９を含む。
　図５は、３Ｄ映像データを構成するフレームについて、フレームに含まれる３Ｄオブジェクトの奥行きと、各分割領域のオフセット値との関係を示す図である。
　図５（ａ）に示すように、この例では、フレームには、前に飛び出しているオブジェクト１５０と、奥に引っ込んでいるオブジェクト１６０とが含まれる。オブジェクト１５０の深度をオフセット値で表すと「４」であり、オブジェクト１６０の深度をオフセット値で表すと「－３」である。
　このときの位置１から位置１４までのオフセット値を図５（ｂ）から図５（ｅ）に示す。
図５（ｂ）に示すように、オブジェクト１５０が表示される位置１、位置２及び位置４、位置５のオフセット値は、「４」であり、オブジェクト１６０が表示される位置８及び位置９のオフセット値は、「－３」である。オブジェクト１５０及びオブジェクト１６０が何れも表示されない位置３、位置６及び位置７のオフセット値は「０」である。また、図５（ｃ）及び（ｄ）に示すように、オブジェクト１５０及びオブジェクト１６０の両方が表示される位置１０及び位置１１では、深度の絶対値が大きい「４」がオフセット値として用いられる。図５（ｅ）に示すように、オブジェクト１５０が表示される位置１２及び位置１３のオフセット値は「４」であり、オブジェクト１６０が表示される位置１４のオフセット値は「－３」である。
　オフセット情報生成部１０２は、図５に示した３Ｄ映像のオフセット値に応じて、データ放送の画像を３Ｄ表示する際のオフセット値を決定する。本実施形態では一例として、３Ｄ映像データのオフセット値に「１」を加算した値をデータ放送の画像のオフセット値とする。なお、３Ｄ映像データのオフセット値が「０」の場合には、データ放送の画像のオフセット値も「０」とする。
　このようにデータ放送の画像のオフセット値を決定することで、ユーザにとっては、３Ｄ映像のオブジェクトよりも、データ放送の画像がより手前側に飛び出して見える。
　オフセット情報生成部１０２は、図６に示すように、各位置を指定するための情報であるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄと、各位置のオフセット値であるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅとを記載したテーブルであるオフセット情報１７０を生成する。生成されたオフセット情報１７０は、エンコーダ１０３及びデータ放送制作部１０４へ入力される。なお、オフセット情報１７０は、本発明に係る深度情報の一例である。
　エンコーダ１０３は、ビデオエンコーダ及びオーディオエンコーダを含む。ビデオエンコーダは、番組コンテンツ蓄積部１０１から３Ｄ映像データを読み出して、Ｈ．２６４　ＭＶＣ（Ｍｕｌｔｉ　Ｖｉｅｗ　Ｃｏｄｉｎｇ）でエンコードし、ＭＰＥＧ（Ｍｏｖｉｎｇ　Ｐｉｃｕｒｅ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ）２－ＴＳ（Ｔｒａｎｓｐｏｒｔ　Ｓｔｒｅａｍ）形式のビデオストリームを得る。オーディオエンコーダは、番組コンテンツ蓄積部１０１から音声データを読み出して、エンコードし、ＭＰＥＧ２－ＴＳ形式のオーディオストリームを得る。
　ここで、ビデオエンコーダが３Ｄ映像データをエンコードしてＧＯＰ（Ｇｒｏｕｐ　Ｏｆ　Ｐｉｃｔｕｒｅｓ）を生成する際、３Ｄ映像データのＨ．２６４　ＭＶＣのＤｅｐｅｎｄｅｎｔ　ｖｉｅｗ（片目用の映像圧縮データ）に含まれるＧＯＰに、オフセット情報生成部１０２により生成されたオフセット情報を格納する。
　エンコードされたビデオストリーム及びオーディオストリームは、マルチプレクサへ入力される。
　データ放送制作部１０４は、ＢＭＬ（Ｂｒｏａｄｃａｓｔ　Ｍａｒｋｕｐ　Ｌａｎｇｕａｇｅ）を用いて、データ放送用のデータを生成する。生成されたデータは、マルチプレクサ１０５へ入力される。
　図７に示すＢＭＬ１８０は、データ放送制作部１０４により生成された、ＢＭＬで記述されたデータの一例であり、文字列「３Ｄ　Ｄｉｇｉｔａｌ」を、位置５（図３（ｂ）参照）に表示するためのＢＭＬである。同図に示すように、ＢＭＬ１８０は、データ放送の画像（ここでは、文字列「３Ｄ　Ｄｉｇｉｔａｌ」である。）の深度を決定するための情報として、ｂａｓｅ＿ｄｅｐｔｈ要素１８１を含む。ｂａｓｅ＿ｄｅｐｔｈ要素１８１は、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄ属性とｆｉｘｅｄ＿ｄｅｐｔｈ属性とを含む。
　ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄ属性は、画像の表示位置を規定するための属性である。データ放送制作部１０４は、文字列「３Ｄ　Ｄｉｇｉｔａｌ」を、位置５（図３（ｂ）参照）に表示する場合、オフセット情報生成部１０２から受け取ったオフセット情報１７０から、文字列「３Ｄ　Ｄｉｇｉｔａｌ」の表示位置である位置５に対応するｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄの値「５」を取得する。そして、取得した値「５」を、ｂａｓｅ＿ｄｅｐｔｈ要素のｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄ属性とする。
　ｆｉｘｅｄ＿ｄｅｐｔｈ属性は、データ放送の画像の深度を３Ｄ映像データの映像の深度に応じて変動させず、固定の深度で表示するためのオフセット値である。データ放送制作部１０４は、３Ｄ映像データを構成する全フレームに含まれるオブジェクトの最大深度が通知されている場合には、最大深度より手前側にデータ放送の画像が結像されるような深度を示すオフセット値をｆｉｘｅｄ＿ｄｅｐｔｈ属性とする。また、最大深度が通知されていない場合には、予め定められた所定の値をｆｉｘｅｄ＿ｄｅｐｔｈ属性としてもよい。ＢＭＬ１８０のｆｉｘｅｄ＿ｄｅｐｔｈ属性は、一例として「１０」である。
　マルチプレクサ１０５は、ビデオストリーム、オーディオストリーム及びＢＭＬで記述されたデータ等を多重化して、ＭＰＥＧ２－ＴＳを生成する。生成されたＭＰＥＧ２－ＴＳは、放送ストリーム送出部１０６へ入力される。
　放送ストリーム送出部１０６は、マルチプレクサ１０５により生成されたＭＰＥＧ２－ＴＳを、デジタル放送波に載せて送出する。
＜２－３．デジタルテレビ２０の構成＞
　図８は、デジタルテレビ２０の機能的な構成を示すブロック図である。同図に示すように、デジタルテレビ２０は、映像処理装置２１とディスプレイ２２とから構成される。
　さらに、映像処理装置２１は、デマルチプレクサ２０１、オーディオデコーダ２０２、ビデオデコーダ２０３、左目用映像データ出力部２０４、右目用映像データ出力部２０５、データ放送処理部２０６、オフセット取得部２０７、右目用データ放送画像生成部２０８、左目用データ放送画像生成部２０９、左目用画像生成部２１０、右目用画像生成部２１１、表示制御部２１２、ユーザ入力受付部２１３、表示モード記憶部２１４、表示モード切替部２１５、及びオフセットモード記憶部２１６から構成される。
　映像処理装置２１は、図示されていないプロセッサ、ＲＡＭ、ＲＯＭ、ハードディスクを含む。また、映像処理装置２１の各機能ブロックは、ハードウェアとして構成されているか、もしくはプロセッサがＲＯＭやハードディスクに記憶されているコンピュータプログラムを実行することで実現される。
　デマルチプレクサ２０１は、デジタル放送網を経由して受信したＭＰＥＧ２－ＴＳを取得し、ＭＰＥＧ２－ＴＳ中に多重化されているオーディオストリーム、ビデオストリーム、ＢＭＬで記述されたデータをそれぞれ抽出する。デマルチプレクサ２０１は、オーディオストリームをオーディオデコーダ２０２へ渡し、ビデオストリームをビデオデコーダ２０３へ渡し、ＢＭＬで記述されたデータをデータ放送処理部２０６へ渡す。
　オーディオデコーダ２０２は、オーディオストリームを取得してデコードする。デコードされた音声信号は、表示制御部２１２へ入力される。
　ビデオデコーダ２０３は、ビデオストリームを取得してデコードする。ビデオストリームは、３Ｄ映像データがＨ．２６４　ＭＶＣで圧縮符号化されたものである。ビデオデコーダ２０３がビデオストリームを復号すると、左目用と右目用の２本の映像データに復号される。
　ビデオデコーダ２０３は、表示モード切替部２１５から、３Ｄ映像データの表示モードを取得する。３Ｄ映像データの表示モードは、ＬＲ（Ｌｅｆｔ　ｖｉｅｗ－Ｒｉｇｈｔ　ｖｉｅｗ）表示モード及びＬＬ（Ｌｅｆｔ　ｖｉｅｗ－Ｌｅｆｔ　ｖｉｅｗ）表示モードの何れかである。
　ＬＲ表示モードのとき、ビデオデコーダ２０３は、復号された左目用の映像データを、左目用映像データ出力部２０４へ出力し、復号された右目用の映像データを、右目用映像データ出力部２０５へ出力する。ＬＬ表示モードのとき、ビデオデコーダ２０３は、復号された左目用の映像データを、左目用映像データ出力部２０４及び右目用映像データ出力部２０５の両方へ出力する。ＬＲ表示モード及びＬＬ表示モードの詳細は後述する。
　左目用映像データ出力部２０４及び右目用映像データ出力部２０５は、それぞれ、ビデオデコーダ２０３から取得した映像データの出力タイミングを制御し、左目用映像データ及び右目用映像データを交互に左目用画像生成部２１０及び右目用画像生成部２１１へ出力する。
　データ放送処理部２０６は、デマルチプレクサ２０１により抽出されたデータを取得すると、取得したデータを解析し（ｐａｒｓｅ）、描画処理を行う。ここで生成される描画データは、２Ｄ表示用の描画データである。
　例えば、図７のＢＭＬ１７０を取得した場合、データ放送処理部２０６は、プレーンメモリを用いて、ｔｏｐ＝ｘｘｘ、ｌｅｆｔ＝ｙｙｙの位置に「３Ｄ　Ｄｉｇｉｔａｌ」のテキストデータを描画する。ここでの座標位置は、画面上端をｔｏｐ＝０、左端をｌｅｆｔ＝０とした場合の位置となる。
　データ放送処理部２０６は、表示モード切替部２１５から、データ放送の表示モードを取得する。データ放送の表示モードは、ＬＲ表示モード及びＬＬ表示モードの何れかである。
　ＬＲ表示モードのとき、データ放送処理部２０６は、３Ｄ表示の指示と共に、２Ｄ表示用の描画データを、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９へ出力する。ＬＬ表示モードのとき、データ放送処理部２０６は、２Ｄ表示の指示と共に、２Ｄ表示の描画データを、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９へ出力する。
　また、データ放送処理部２０６は、ＢＭＬに含まれるｂａｓｅ＿ｄｅｐｔｈ要素を、オフセット取得部２０７へ出力する。
　オフセット取得部２０７は、ビデオデコーダ２０３がビデオストリームを復号する途中で取得するＧＯＰからオフセット情報を抽出する。また、オフセット取得部２０７は、データ放送処理部２０６からｂａｓｅ＿ｄｅｐｔｈ要素を取得する。また、オフセット取得部２０７は、オフセットモード記憶部２１６に格納されているオフセットモードを読み出す。
　オフセット取得部２０７は、オフセット情報、ｂａｓｅ＿ｄｅｐｔｈ要素及びオフセットモードを用いて、データ放送を３Ｄ表示するための視差情報であるオフセット値を取得する。取得したオフセット値を、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９へ通知する。
　ここでは、具体例として、オフセット取得部２０７が、図６に示すオフセット情報１７０と、図７に示すｂａｓｅ＿ｄｅｐｔｈ要素１８１とを取得した場合について説明する。
　オフセットモード記憶部２１６から読み出したオフセットモードが「変動」の場合、オフセット取得部２０７は、ｂａｓｅ＿ｄｅｐｔｈ要素１８１に含まれるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄの値を読む。ここでは、「５」である。オフセット取得部２０７は、オフセット値として、オフセット情報１７０から、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄ「５」に対応付けられているｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を取得する。この例では、オフセット値は、「５」である。
　オフセットモード記憶部２１６から読み出したオフセットモードが「固定」の場合、オフセット取得部２０７は、オフセット値として、ｂａｓｅ＿ｄｅｐｔｈ要素１８１からｆｉｘｅｄ＿ｄｅｐｔｈの値を取得する。この例では、オフセット値は、「１０」である。
　右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、データ放送処理部２０６から２Ｄ表示用の描画データと、３Ｄ表示又は２Ｄ表示の何れかの指示とを受け取る。また、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、オフセット取得部２０７からオフセット値を受け取る。
　２Ｄ表示の指示を受け取ると、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、データ放送処理部２０６から受け取った２Ｄ表示用の描画データを、左目用画像生成部２１０及び右目用画像生成部２１１へ出力する。
　３Ｄ表示の指示を受け取ると、右目用データ放送画像生成部２０８は、右目用データ放送画像を生成し、左目用データ放送画像生成部２０９は、左目用データ放送画像を生成する。
　ここでは、図９（ａ）を用いて、右目用データ放送画像及び左目用データ放送画像の生成処理について説明する。
　右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、描画データ３００を受け取る。また、オフセット取得部２０７から、オフセット値を受け取る。
　左目用データ放送画像生成部２０９は、描画データ３００を、通知されたオフセット値が示す画素数だけ右方向にシフトさせ、左側に透明領域３１１を生成し、右端の領域３１２を切り取り、左目用データ放送画像３０１を生成する。
　右目用データ放送画像生成部２０８は、描画データ３００を、通知されたオフセット値が示す画素数だけ左方向にシフトさせ、右側に透明領域３２１が生成し、左端の領域３２２を切り取り、右目用データ放送画像３０２を生成する。
　図９（ｂ）は、図９（ａ）によるオフセット制御によって、どのような立体視映像が再生されるかを示す図である。３Ｄ表示用のデータ放送の画像が描画されるプレーン３０３は、Ｄｅｐｔｈ－Ｘの深度を有する。すなわち、ユーザから見ると、「３Ｄ　Ｄｉｇｉｔａｌ」の文字が、Ｄｅｐｔｈ―Ｘだけディスプレイ２２よりも手前に飛び出して見える。
　左目用データ放送画像生成部２０９は、生成した左目用データ放送画像を、左目用画像生成部２１０へ出力し、右目用データ放送画像生成部２０８は、生成した右目用データ放送画像を、右目用画像生成部２１１へ出力する。
　左目用画像生成部２１０は、左目用データ放送画像生成部２０９から、左目用データ放送画像を受け取る。また、左目用画像生成部２１０は、左目用映像データ出力部２０４から、デコードされた左目用映像データを順次受け取る。左目用画像生成部２１０は、左目用映像データに左目用データ放送画像を重畳し、左目用画像を生成する。生成された左目用画像は、表示制御部２１２へ入力される。
　例えば、図１０に示すように、左目用画像生成部２１０は、１画面分の左目用映像データを描画するためのプレーンメモリを用いて、左目用映像プレーン４０１を描画する。また、左目用画像生成部２１０は、データ放送に含まれる１画面分の画像を描画するためのプレーンメモリを用いて、左目用データ放送プレーン４０２を描画する。そして、左目用映像プレーン４０１に左目用データ放送プレーン４０２を重畳し、３Ｄ映像データに含まれるオブジェクトとデータ放送の文字「３Ｄ　Ｄｉｇｉｔａｌ」とが合成された左目用画像４０３を生成する。
　右目用画像生成部２１１は、右目用データ放送画像生成部２０８から、右目用データ放送画像を受け取る。また、右目用画像生成部２１１は、右目用映像データ出力部２０５から、デコードされた右目用映像データを順次受け取る。右目用画像生成部２１１は、右目用映像データに右目用データ放送画像を重畳し、右目用画像を生成する。生成された右目用画像は、表示制御部２１２へ入力される。
　表示制御部２１２は、左目用画像生成部２１０及び右目用画像生成部２１１から、交互に左目用画像及び右目用画像を受け取り、受け取った左目用画像及び右目用画像をディスプレイ２２に出力する。このとき、出力する画像が左目用画像である場合、表示制御部２１２は、ユーザが装着している３Ｄ眼鏡４０に対し、左目用画像を表示する旨を通知し、出力する画像が右目用画像である場合、表示制御部２１２は、ユーザが装着している３Ｄ眼鏡４０に対し、右目用画像を表示する旨を通知する。
　ディスプレイ２２に左目用画像が表示されているとき、３Ｄ眼鏡４０の右目は、液晶シャッターで隠された状態となり、ユーザは左目だけで左目用画像を見る。また、ディスプレイ２２に右目用画像が表示されているとき、３Ｄ眼鏡４０の左目は液晶シャッターで隠された状態となり、ユーザは、右目だけで左目用画像を見る。このような表示制御を行うことにより、ユーザには、図１１のような画像が見える。図１１に示すように、３Ｄ映像データに含まれるオブジェクト６０１はディスプレイ２２から手前に飛び出して見える。更に、その手前にデータ放送の文字６０２が飛び出して見える。
　また、表示制御部２１２は、ディスプレイ２２に出力する画面に同期させてオーディオデコーダから受け取った音声信号を、ディスプレイ２２に内蔵されたスピーカ（不図示）へ出力する。
　ユーザ入力受付部２１３は、ユーザがリモコン３０を操作することにより入力した３Ｄ映像の表示モードを、リモコン３０から受け付ける。ユーザ入力受付部２１３は、受け付けた３Ｄ映像の表示モードを、表示モード記憶部２１４に記録する。
　表示モード記憶部２１４は、ユーザが入力した３Ｄ映像の表示モードを記憶するための不揮発性メモリである。
　表示モード切替部２１５は、３Ｄ映像の表示モード及びデータ放送の表示モードを設定する。表示モード切替部２１５は、設定した３Ｄ映像データの表示モードを、ビデオデコーダ２０３へ通知する。また、表示モード切替部２１５は、設定したデータ放送の表示モードを、データ放送処理部２０６へ通知する。表示モードの設定処理の詳細については後述する。
　ここでは、図１２及び図１３を用いて、表示モードについて説明する。ここでは、３Ｄ映像データの表示モードを例に説明するが、データ放送の表示モードも同様である。
　先に述べたように、表示モードには、ＬＲ表示モードとＬＬ表示モードとがある。ＬＲ表示モードは、３Ｄ映像データを３Ｄ表示するモードであり、ＬＬ表示モードは、３Ｄ映像データを２Ｄ表示するモードである。
　図１２は、ＬＲ表示モード（３Ｄ表示）について説明するための図である。
　ＬＲ表示モードのとき、ビデオデコーダ２０３は、復号された左目用映像データ５０１を、左目用映像データ出力部２０４へ出力し、復号された右目用映像データ５０２を、右目用映像データ出力部２０５へ出力する。左目用映像データ５０１と右目用映像データ５０２とは視差画像である。
　そして、表示制御部２１２を経由して、左目用映像データ５０１及び右目用映像データ５０２がディスプレイ２２に交互に出力される。
　（ａ）に示すように、ディスプレイ２２に左目用映像データ５０１が表示されているときは、３Ｄ眼鏡４０の右目は液晶シャッター４１で隠された状態となり、ユーザは左目だけで左目用映像データ５０１を見る。
　（ｂ）に示すように、ディスプレイ２２に右目用映像データ５０２が表示されているときは、３Ｄ眼鏡４０の左目は液晶シャッター４１で隠された状態となり、ユーザは右目だけで右目用の映像データを見る。
　このように、ＬＲ表示モードでは、視差のある左目用映像データ５０１と右目用映像データ５０２とを交互に見せることにより３Ｄ表示を実現する。
　図１３は、ＬＬ表示モード（２Ｄ表示）について説明するための図である。
　ＬＬ表示モードのとき、ビデオデコーダ２０３は、復号された左目用映像データ５０１を、右目用映像データとしても利用する。即ち、ビデオデコーダ２０３は、左目用映像データ５０１を、左目用映像データ出力部２０４及び右目用映像データ出力部２０５の両方へ出力する。
　そして、表示制御部２１２を経由して、視差の無い同一の左目用映像データ５０１及び右目用映像データ５０１がディスプレイ２２に交互に出力される。
　（ａ）に示すように、ディスプレイ２２に左目用映像データ５０１が表示されているときは、３Ｄ眼鏡４０の右目は液晶シャッター４１で隠された状態となり、ユーザは左目だけで左目用映像データ５０１を見る。
　（ｂ）に示すように、ディスプレイ２２に右目用映像データ５０１が表示されているときは、３Ｄ眼鏡４０の左目は液晶シャッター４１で隠された状態となり、ユーザは右目だけで右目用の映像データ５０１を見る。
　このように、ＬＬ表示モードでは、視差のない同一の映像データを交互に見せることにより、ユーザが３Ｄ眼鏡４０を装着したままでも２Ｄ表示を実現する。
　オフセットモード記憶部２１６は、データ放送を３Ｄ表示する際の視差情報であるオフセット値を決定する方式であるオフセットモードを記憶するための不揮発性メモリである。オフセットモードは、「変動」及び「固定」の何れかである。なお、オフセットモードは、ユーザ入力受付部２１３を介して、ユーザにより入力されるものとする。
　変動オフセットモードの場合、３Ｄ映像データと共に受信したオフセット情報に含まれるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値をオフセット値として用いる。先に述べたように、３Ｄ映像データと共に受信するオフセット情報は、ＧＯＰ単位に一つ含まれる。即ち、オフセット情報は、ＧＯＰ単位で更新可能である。そのため、ＢＭＬが更新されなくとも、オフセット情報に含まれるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅが変動する場合、例えば、図１１に記載の３Ｄオブジェクト６０１の深度が変動すれば、それに応じて、「３Ｄ　Ｄｉｇｉｔａｌ」の文字６０２の深度は変動する。
　一方、固定オフセットモードの場合、ＢＭＬに含まれるｆｉｘｅｄ＿ｄｅｐｔｈの値をオフセット値として用いる。ｆｉｘｅｄ＿ｄｅｐｔｈ属性は、ＢＭＬ単位で更新可能であるが、３Ｄ映像データに関連付けられていない。そのため、３Ｄ映像データの深度が変動しても、それに伴ってデータ放送の画像の深度が変動する効果は無くなる。しかし、ユーザに依っては、データ放送の文字の深度が変動すると、文字が見難いと感じる人も居るかもしれない。このような場合、ユーザは、オフセットモードを、「固定」に設定すればよい。
＜３．動作＞
　ここでは、図１４から図１６のフローチャートを用いて、映像処理装置２１の動作について説明する。
＜３－１．データ放送表示処理の動作＞
　図１４は、映像処理装置２１によるデータ放送表示処理の動作を示すフローチャートである。なお、図中における「データ放送のＬＲ表示データ」の記載は、上述した「左目用データ放送画像」及び「右目用データ放送画像」を指す。また、図中における「３Ｄ映像のＬＲ映像データ」の記載は、上述した「左目用映像データ」及び「右目用映像データ」を指す。
　表示モード切替部２１５は、３Ｄ映像及びデータ放送の表示モードを設定する（ステップＳ１）。ステップＳ１の詳細は後述する。
　オフセット取得部２０７は、データ放送を３Ｄ表示するための視差情報であるオフセット値を取得する（ステップＳ２）。ステップＳ２の詳細は後述する。
　データ放送処理部２０６は、表示モード切替部２１５がステップＳ１で設定したデータ放送の表示モードが、ＬＬ表示モードであるかＬＲ表示モードであるか判定する。
　データ放送の表示モードがＬＬ表示モードの場合（ステップＳ３でＹＥＳ）、データ放送処理部２０６は、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９へ、ＬＬ表示モードである旨を通知する。右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、データ放送処理部２０６から受け取った３Ｄ化する前の描画データを、そのまま右目用画像生成部２１１及び左目用画像生成部２１０へ出力する。
　データ放送の表示モードがＬＬ表示モードの場合、３Ｄ映像データの表示モードもＬＬ表示モードとなっている。そこで、ビデオデコーダ２０３は、左目用映像データ出力部２０４及び右目用映像データ出力部２０５へ、２Ｄ表示用の映像データとして、左目用映像データを出力する。
　そして、左目用画像生成部２１０及び右目用画像生成部２１１は、共に、２Ｄ表示用の映像データに、データ放送の描画データを重畳する（ステップＳ４）。その結果、表示制御部２１２を経由してディスプレイ２２に表示される３Ｄ映像及びデータ放送は、２Ｄ表示となる。
　これは、データ放送がＬＬ表示モード（２Ｄ表示）の場合に、仮に３Ｄ映像データに２Ｄ表示のデータ放送を重畳すると、データ放送の文字などが３Ｄオブジェクトの背景側に表示され、ユーザにとって見難い画面となってしまう。そこで、データ放送がＬＬ表示モードである場合には、３Ｄ映像データも２Ｄ表示とすることで、ユーザにとって見易い画像を表示するのである。
　データ放送の表示モードがＬＲ表示モードの場合（ステップＳ３でＮＯ）、右目用データ放送画像生成部２０８及び左目用データ放送画像生成部２０９は、それぞれ、オフセット取得部２０７がステップＳ２で取得したオフセット値を用いて、図９に示したように、データ放送の描画データから左目用データ放送画像及び右目用データ放送画像を生成する（ステップＳ５）。そして、右目用データ放送画像生成部２０８は、右目用データ放送画像を、右目用画像生成部２１１へ出力し、左目用データ放送画像生成部２０９は、左目用データ放送画像を、左目用画像生成部２１０へ出力する。
　続いて、データ放送処理部２０６は、表示方法切替部２１５から３Ｄ映像の表示モードを取得し、３Ｄ映像の表示モードがＬＬ表示モードであるかＬＲ表示モードであるか判定する（ステップＳ６）。
　３Ｄ映像データの表示モードがＬＬ表示モードの場合（ステップＳ６でＹＥＳ）、ビデオデコーダ２０３は、２Ｄ表示用の映像データとして、左目用映像データ出力部２０４及び右目用映像データ出力部２０５へ、左目用映像データを出力する。左目用映像データ出力部２０４及び右目用映像データ出力部２０５は、所定のタイミングで、２Ｄ表示用の映像データである左目用映像データを、右目用画像生成部２１１及び左目用画像生成部２１０へ、出力する。
　左目用画像生成部２１０は、２Ｄ表示用の映像データに、左目用データ放送画像を重畳する。右目用画像生成部２１１は、２Ｄ表示用の映像データに、右目用データ放送画像を重畳する（ステップＳ７）。その結果、表示制御部２１２を経由してディスプレイ２２に表示される３Ｄ映像は２Ｄ表示であり、データ放送は３Ｄ表示となる。
　３Ｄ映像データの表示モードがＬＲ表示モードの場合（ステップＳ６でＮＯ）、ビデオデコーダ２０３は、左目用映像データを左目用映像データ出力部２０４へ出力し、右目用映像データを右目用映像データ出力部２０５へ出力する。左目用映像データ出力部２０４及び右目用映像データ出力部２０５は、それぞれ、所定のタイミングで、左目用映像データを左目用画像生成部２１０へ出力し、右目用映像データを、右目用画像生成部２１１へ、出力する。
　左目用画像生成部２１０は、３Ｄ表示用の左目用映像データに、左目用データ放送画像を重畳する。右目用画像生成部２１１は、３Ｄ表示用の右目用映像データに、右目用データ放送画像を重畳する（ステップＳ８）。その結果、表示制御部２１２を経由してディスプレイ２２に表示される３Ｄ映像及びデータ放送は、３Ｄ表示となる。
＜３－２．表示モード設定処理の動作＞
　図１５は、表示モード切替部２１５による表示モード設定処理の動作を示すフローチャートである。なお、ここに示す動作は、図１４のステップＳ１の詳細である。
　表示モード切替部２１５は、データ放送処理部２０６が取得したＢＭＬからｂａｓｅ＿ｄｅｐｔｈ要素を取得する。
　ＢＭＬにｂａｓｅ＿ｄｅｐｔｈ要素が存在しない場合（ステップＳ１０１でＮＯ）、表示モード切替部２１５は、データ放送の表示モードをＬＬ表示モードに設定する（ステップＳ１０２）。
　また、上述したように、データ放送がＬＬ表示モードに設定され、データ放送が２Ｄ表示される場合には、３Ｄ映像データも２Ｄ表示することが望ましい。そこで、表示モード切替部２１５は、３Ｄ映像データの表示モードをＬＬ表示モードに設定する（ステップＳ１０３）。
　ＢＭＬにｂａｓｅ＿ｄｅｐｔｈ要素が存在する場合（ステップＳ１０１でＹＥＳ）、表示モード切替部２１５は、データ放送の表示モードをＬＲ表示モードに設定する（ステップＳ１０４）。
　次に、表示モード切替部２１５は、予めユーザが指定した表示モードが表示モード記憶部２１４に記録されているか否か判断する（ステップＳ１０５）。
　ユーザが指定した表示モードが存在しない場合（ステップＳ１０５でＮＯ）、表示モード切替部２１５は、３Ｄ映像データの表示モードをＬＲ表示モードに設定する（ステップＳ１０８）。
　ユーザが指定した表示モードが存在する場合（ステップＳ１０５でＹＥＳ）、表示モード切替部２１５は、記録されている表示モードがＬＬ表示モードであるかＬＲ表示モードであるか判断する（ステップＳ１０６）。
　ユーザが指定した表示モードがＬＬ表示モードの場合（ステップＳ１０６でＹＥＳ）、表示モード切替部２１５は、３Ｄ映像データの表示モードをＬＬ表示モードに設定する（ステップＳ１０７）。
　ユーザが指定した表示モードがＬＲ表示モードの場合（ステップＳ１０６でＮＯ）、３Ｄ映像データの表示モードをＬＲ表示モードに設定する（ステップＳ１０８）。
＜３－３．オフセット値取得処理の動作＞
　図１６は、オフセット取得部２０７によるオフセット値取得処理の動作を示すフローチャートである。なお、ここに示す動作は、図１のステップＳ２の詳細である。
　オフセット取得部２０７は、オフセットモード記憶部２１６に記憶されているオフセットモードが「固定」であるか「変動」であるか判断する（ステップＳ２０１）。
　オフセットモードが「変動」の場合（ステップＳ２０１でＮＯ）、オフセット取得部２０７は、データ放送処理部２０６が解析しているＢＭＬから、ｂａｓｅ＿ｄｅｐｔｈ要素に含まれるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄを取得する（ステップＳ２０２）。
　次に、オフセット取得部２０７は、ビデオデコーダ２０３から、ビデオデコーダ２０３が復号しているＧＯＰのユーザデータ領域内のデータを取得し、ＧＯＰにオフセット情報が記載されているか否か判断する（ステップＳ２０３）。
　ＧＯＰにオフセット情報が記載されていない場合（ステップＳ２０３でＮＯ）、オフセット取得部２０７は、ｂａｓｅ＿ｄｅｐｔｈ要素からｆｉｘｅｄ＿ｄｅｐｔｈの値を取得する。そして、オフセット取得部２０７は、ｆｉｘｅｄ＿ｄｅｐｔｈの値をオフセット値とする（ステップＳ２０８）。
　ＧＯＰにオフセット情報が記載されている場合（ステップＳ２０３でＹＥＳ）、オフセット取得部２０７は、オフセット情報から、ステップＳ２０２で取得したｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄに対応付けられているｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を取得する。そして、オフセット取得部２０７は、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値をオフセット値とする（ステップＳ２０４）。
　一方、オフセットモードが「固定」の場合（ステップＳ２０１でＹＥＳ）、オフセット取得部２０７は、ビデオデコーダ２０３から、ビデオデコーダ２０３が復号しているＧＯＰのユーザデータ領域内のデータを取得し、ＧＯＰにオフセット情報が記載されているか否か判断する（ステップＳ２０５）。
　ＧＯＰにオフセット情報が記載されていない場合（ステップＳ２０５でＮＯ）、オフセット取得部２０７は、ｂａｓｅ＿ｄｅｐｔｈ要素からｆｉｘｅｄ＿ｄｅｐｔｈの値を取得する。そして、オフセット取得部２０７は、ｆｉｘｅｄ＿ｄｅｐｔｈの値をオフセット値とする（ステップＳ２０８）。
　ＧＯＰにオフセット情報が記載されている場合（ステップＳ２０５でＹＥＳ）、オフセット取得部２０７は、オフセット情報から、すべてのｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を読み出す。また、オフセット取得部２０７は、データ放送処理部２０６が解析しているＢＭＬのｂａｓｅ＿ｄｅｐｔｈ要素から、ｆｉｘｅｄ＿ｄｅｐｔｈ値を取得する。
　オフセット取得部２０７は、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの最大値が、ｆｉｘｅｄ＿ｄｅｐｔｈ値を超過しているか否か判断する（ステップＳ２０６）。
　ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの最大値が、ｆｉｘｅｄ＿ｄｅｐｔｈの値を超過していない場合（ステップＳ２０６でＮＯ）、オフセット取得部２０７は、ｆｉｘｅｄ＿ｄｅｐｔｈの値をオフセット値とする（ステップＳ２０８）。
　ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの最大値が、ｆｉｘｅｄ＿ｄｅｐｔｈの値を超過している場合（ステップＳ２０６でＹＥＳ）、ｆｉｘｅｄ＿ｄｅｐｔｈ値をオフセット値として利用すると、３Ｄ映像データのオブジェクトとデータ放送のオブジェクトとが干渉することが予想される。そこで、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの最大値が、ｆｉｘｅｄ＿ｄｅｐｔｈ値を超過している場合、オフセット取得部２０７は、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの最大値をオフセット値とする（ステップＳ２０７）。
＜４．変形例＞
　以上、本発明に係る立体映像視聴システムの実施形態を説明したが、例示した立体映像視聴システムを以下のように変形することも可能であり、本発明が上述の実施形態で示した通りの立体映像視聴システムに限られないことは勿論である。
　（１）上記の実施形態では、ＢＭＬにｂａｓｅ＿ｄｅｐｔｈ要素を追加して、ｂａｓｅ＿ｄｅｐｔｈ要素を用いて、データ放送の３Ｄ表示を制御する構成を有していた。これにより、ＢＭＬ単位で３Ｄ表示の制御を行うことが可能となる。
　しかし、これ以外にも、ＳＩ／ＰＳＩにｂａｓｅ＿ｄｅｐｔｈ要素を追加してもよい。この場合、番組単位で３Ｄ表示を制御することが可能となる。また、ＤＩＩのプライベート領域にｂａｓｅ＿ｄｅｐｔｈ要素を追加してもよい。この場合、モジュール単位で３Ｄ表示を制御することが可能となる。
　（２）上記の実施形態では、映像処理装置２１は、放送装置１０から送信される３Ｄ映像を受信する構成を有していた。しかし、映像処理装置２１は、２Ｄ映像／３Ｄ映像共に受信可能であるとしてもよい。この場合、映像処理装置２１は、受信した番組が３Ｄ映像であることを検出した後に、上述したデータ放送の３Ｄ化処理を行ってもよい。映像処理装置２１は、２Ｄ映像を受信している間は、ＢＭＬに格納されたｂａｓｅ＿ｄｅｐｔｈ要素を無視し、データ放送を２Ｄ表示するように構成してもよい。
　（３）上記の実施形態では、オフセット情報は、ＭＰＥＧ２－ＴＳのＧＯＰに格納されている構成を有していた。しかし、オフセット情報は、ＧＯＰに格納される構成に限定されず、ＳＩ（Ｓｅｒｖｉｃｅ　Ｉｎｆｏｒｍａｔｉｏｎ）に格納される構成でもよい。
　この場合、放送装置１０のオフセット情報生成部１０２は、生成したオフセット情報をエンコーダ１０３へ入力せずに、マルチプレクサ１０５へ入力する。
　（４）上記の実施形態では、オフセット情報は、ＭＰＥＧ２－ＴＳのＧＯＰに格納されて、放送装置１０から送信される構成を有していた。
　しかし、映像処理装置２１は、受信した３Ｄ映像データのＧＯＰにオフセット情報が格納されていない場合でも、データ放送の３Ｄ化処理を行うことが可能である。
　この場合、オフセット取得部２０７は、ビデオデコーダ２０３から左目用映像データ及び右目用映像データを取得する。そして、オフセット取得部２０７は、左目用映像データ及び右目用映像データに含まれる３Ｄオブジェクトの視差を抽出する。さらに、オフセット取得部２０７は、３Ｄオブジェクトの視差に応じて、データ放送の画像が３Ｄオブジェクトよりも手前に飛び出るように、データ放送の３Ｄ化処理に用いるオフセット値を生成する。
　すなわち、本発明の一態様である映像処理装置は、データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する映像処理装置であって、前記映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を取得する取得部と、受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部とを備えることを特徴とする。
　（５）上記の実施形態では、ＢＭＬにｂａｓｅ＿ｄｅｐｔｈ要素が追加されていたが、本発明はこれに限定されず、ｂａｓｅ＿ｄｅｐｔｈ要素に対応する情報をスタイルシートに追加してもよい。
　（６）上記の実施形態では、３Ｄ映像データをＬＲ表示モードで表示するか、ＬＬ表示モードで表示するかの判断は、映像処理装置２１の表示モード切替部２１５が行う構成を有していたが、３Ｄ映像データをＬＲ表示モードで表示するか、ＬＬ表示モードで表示するかを指定する制御属性をＢＭＬの中に追加してもよい。
　例えば、ＢＭＬのｂａｓｅ＿ｄｅｐｔｈ要素に、ｍｏｄｅ＿３ｄ属性という制御属性を追加してもよい。ｍｏｄｅ＿３ｄ属性の値が「００」である場合には、上記の実施形態で示したように、映像処理装置２１による制御を指定し、ｍｏｄｅ＿３ｄ属性の値が「０１」である場合には、映像処理装置２１による制御を行わず、強制的に３Ｄ映像データをＬＬ表示モードで表示するように制御してもよい。
　（７）上記の実施形態では、オフセット情報１７０は、図６に示したように、データ放送のオブジェクトの深度を示す、位置１～位置１４に対応する１４個のｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅを含む構成であった。しかし、本発明のオフセット情報のデータ構造はこれに限定されない。例えば、位置１～位置９に対応する９個のｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅを含む構成であってもよい。
　これは、データ放送のオブジェクトの表示位置が位置１０～位置１４のいずれかである場合には、位置１～位置９までのｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を用いて、位置１０～位置１４のｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を求めることができるからである。
　しかし、データ放送では、一般的に、画面中でよく利用される領域が決まっている。例えば、「全画面表示」の場合、位置１０の領域が利用され、「Ｌ字型表示」の場合、位置１１の領域が利用され、「バナー表示」の場合、位置１２、位置１３、位置１４の領域が利用されることが多い。
　そこで、図４に示したように、複数のブロックを統合した領域として、位置１０～位値１４を予め定義しておき、図６に示したように、オフセット情報１７０に位置１０～位置１４に対応するｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を予め格納しておけば、オフセット取得部２０７は、複数領域のｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅを参照する必要なく、簡単にオフセット値を設定することが可能となる。
　なお、上記の実施形態では、描画プレーンを９分割し、位置１～位置１４を定義したが、分割方法はこれに限定されず、映像データに適した形で画面分割を行えばよく、位置１～位置１４以外の新たな位置を定義してもよい。
　（８）上記の実施形態では、３Ｄ映像データをＬＬ表示モードで表示する場合、左目用映像データを用いて２Ｄ表示を行う構成を有していたが、この構成は必須ではない。３Ｄ映像データをＬＬ表示モードで表示する場合、左目用映像データを用いるのが一般的ではあるが、もちろん、右目用映像データを用いて２Ｄ表示を行う構成でもよい。
　（９）上記の実施形態では、表示モード記憶部２１４は、ユーザが指定した３Ｄ映像データの表示モードを記憶する構成を有していた。しかし、表示モード記憶部２１４は、ユーザが指定した表示モードを記憶する構成に限定されない。３Ｄ映像データの表示モードを指定する情報がＢＭＬに含まれている場合には、その情報を記憶してもよいし、３Ｄ映像データのカテゴリ（番組コンテンツのカテゴリ）と指定の表示モードとを対応付けた情報を記憶してもよい。
　（１０）上記の実施形態では、オフセットモード記憶部２１６は、ユーザ入力受付部２１３が予め受け付けたオフセットモードを記憶しておき、オフセット取得部２０７は、オフセットモード記憶部２１６に記憶されているオフセットモードに応じて、オフセット値を決定し、取得する構成を有していた。
　しかし、３Ｄ映像の表示モードがＬＬ表示モード（２Ｄ表示）であり、且つ、データ放送の表示モードがＬＲ表示モード（３Ｄ表示）の場合、オフセット取得部２０７は、オフセットモード記憶部２１６に記憶されているオフセットモードを、強制的に「固定」に切り替えるように構成してもよい。
　３Ｄ映像データが２Ｄ表示される場合に、データ放送のオフセット値を、オフセット情報を用いてフレーム毎に変動させる必要性は低い。そこで、３Ｄ映像データが２Ｄ表示される場合には、オフセットモードを、強制的に「固定」に切り替え、データ放送のオフセット値としてｆｉｘｅｄ＿ｄｅｐｔｈ値を用いてもよい。
　さらには、３Ｄ映像の表示モードがＬＬ表示モード（２Ｄ表示）であり、且つ、データ放送の表示モードがＬＲ表示モード（３Ｄ表示）の場合、オフセット取得部２０７は、オフセット値を強制的に「０」に設定するように構成してもよい。
　ユーザが３Ｄ映像データを２Ｄ表示することを所望しているにも関わらず、データ放送を３Ｄ表示する必要性は低い。そこで、３Ｄ映像データが２Ｄ表示される場合には、オフセット値を強制的に「０」に設定し、データ放送を２Ｄ表示するように構成してもよい。
　（１１）上記の実施形態で説明した図１６のフローチャートを以下のように変更してもよい。
　オフセット情報を格納しているＧＯＰとオフセット情報を格納していないＧＯＰが交互に受信された場合には、ステップＳ２０３においてＹＥＳ／ＮＯを繰り返す。その結果、オフセット値が頻繁に切り替わるので、データ放送が非常に見難くなることも予想される。従って、ステップＳ２０３でＮＯの場合、直ちにステップＳ２０８へ移行せず、一定期間は前のＧＯＰに格納されていたｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ値をオフセット値として利用し続けてもよい。
　また、あるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄに対応するｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ値がＧＯＰ毎に大きく変動する場合にも、データ放送が非常に見難くなることが予想される。そこで、あるｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄに対応するｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ値がＧＯＰ毎に大きく変動することが検出された場合には、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値をオフセット値とするステップＳ２０４の処理を中止し、ＢＭＬに格納されたｆｉｘｅｄ＿ｄｅｐｔｈ値をオフセット値とするように制御を切り替えてもよい。
　また、Ｓ２０５～ステップＳ２０７の処理は、ｆｉｘｅｄ＿ｄｅｐｔｈ値をオフセット値とする場合に、３Ｄ映像データの３Ｄオブジェクトとデータ放送のオブジェクトとが干渉しないことをオフセット情報を用いて確認する処理である。ｆｉｘｅｄ＿ｄｅｐｔｈ値は、予め大きめの値が格納されていることが想定されるので、干渉は起こらないか、又は、干渉が起こったとしても軽度な場合が予想される。そのため、Ｓ２０５～ステップＳ２０７の処理は必須ではなく、省略してもよい。ステップＳ２０１において、固定オフセットモードが設定されていると判断された場合（ステップＳ２０１でＹＥＳ）、ステップＳ２０５からステップＳ２０７を省略し、直ちにステップＳ２０８に移行し、ＢＭＬに格納されたｆｉｘｅｄ＿ｄｅｐｔｈ値をオフセット値としてもよい。
　（１２）上記の実施形態では、映像処理装置２１は、データ放送の３Ｄ表示を行う構成であったが、映像処理装置２１は、データ放送ではなく、字幕データの３Ｄ表示を行う構成でもよい。
　（１３）放送装置１０と映像処理装置２１との間の通信網はデジタル放送網に限定されない。例えば、インターネットでもよい。この場合、放送装置１０は、インターネット上のサーバ装置などでもよく、映像処理装置２１は、パーソナルコンピュータなどでもよい。
　（１４）映像処理装置２１は、複数のデータストリームを受信し、複数の番組をディスプレイ２２に同時に表示するような機能を備えていてもよい。この場合、オフセット取得部２０７は、複数のデータストリームのそれぞれからオフセット情報を取得し、複数のオフセット情報を用いてオフセット値取得処理を行ってもよい。
　例えば、オフセット取得部２０７は、ＢＭＬに格納されているｂａｓｅ＿ｄｅｐｔｈ要素からｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄの値を読む。さらに、オフセット取得部２０７は、複数のオフセット情報から、ｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅ＿ｉｄに対応付けられているｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値を取得する。そして、オフセット取得部２０７は、取得した複数のｏｆｆｓｅｔ＿ｓｅｑｕｅｎｃｅの値の最大値を、オフセット値としてもよい。
　（１５）上記の実施形態の図７に記載したＢＭＬ１８０は一例である。立体映像視聴システム１で用いるＢＭＬの構成は、図７の記載に限定されないのは勿論である。例えば、複数のオブジェクトを一つのＢＭＬで記述する場合には、ｂｏｄｙ要素にオブジェクト毎のｂａｓｅ＿ｄｅｐｔｈ要素を格納する構成でもよい。
　（１６）上記の実施形態で示したデータ放送表示処理、表示モード設定処理、オフセット値取得処理を、映像処理装置２１のプロセッサ、及びそのプロセッサに接続された各種回路に実行させるための機械語或いは高級言語のプログラムコードからなる制御プログラムを、記録媒体に記録すること、又は各種通信路等を介して流通させ頒布することもできる。このような記録媒体には、ＩＣカード、ハードディスク、光ディスク、フレキシブルディスク、ＲＯＭ、フラッシュメモリ等がある。流通、頒布された制御プログラムはプロセッサに読み出され得るメモリ等に格納されることにより利用に供され、そのプロセッサがその制御プログラムを実行することにより上記の実施形態で示したような各機能が実現されるようになる。なお、プロセッサは、制御プログラムを直接実行する他、コンパイルして実行或いはインタプリタにより実行してもよい。
　（１７）上記の実施形態に示した各機能構成要素（番組コンテンツ蓄積部１０１、オフセット情報生成部１０２、エンコーダ１０３、データ放送制作部１０４、マルチプレクサ１０５、放送ストリーム送出部１０６、デマルチプレクサ２０１、オーディオデコーダ２０２、ビデオデコーダ２０３、左目用映像データ出力部２０４、右目用映像データ出力部２０５、データ放送処理部２０６、オフセット取得部２０７、右目用データ放送画像生成部２０８、左目用データ放送画像生成部２０９、左目用画像生成部２１０、右目用画像生成部２１１、表示制御部２１２、ユーザ入力受付部２１３、表示モード記憶部２１４、表示モード切替部２１５、及びオフセットモード記憶部２１６）は、その機能を実行する回路として実現されてもよいし、１又は複数のプロセッサによりプログラムを実行することで実現されてもよい。また、実施の形態１及び２で示した端末装置は、ＩＣ、ＬＳＩその他の集積回路のパッケージとして構成されるものとしてもよい。このパッケージは各種装置に組み込まれて利用に供され、これにより各種装置は、各実施形態で示したような各機能を実現するようになる。
　（１８）上記の実施形態及び上記の変形例を適宜組み合わせてもよい。
＜５．補足＞
　以下、更に本発明の一実施形態としての映像処理装置、送信装置及び立体映像視聴システムの構成及びその変形例と効果について説明する。
　（ａ）データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する映像処理装置であって、前記映像データには、当該映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報が含まれており、受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得部と、受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部とを備えることを特徴とする。
　この構成によると、前記映像処理装置は、映像データに重畳して表示されるデータ放送の画像を、前記映像データの３Ｄオブジェクトの深度に応じた深度で３Ｄ表示することが可能となる。これにより、ユーザは、より適切にデータ放送を３Ｄ映像と共に視聴することが可能となる。
　（ｂ）前記深度情報には、３Ｄ表示されるオブジェクトの表示位置及び深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの、前記画像の表示位置毎の深度が記載されており、前記データ放送は、当該データ放送の画像の表示位置を示す位置情報を含み、前記取得部は、前記データ放送から前記位置情報を取得し、取得した前記位置情報が示す表示位置に対応する前記深度を前記深度情報から取得することを特徴とする。
　映像データの一つのフレームには、深度の異なる複数の３Ｄオブジェクトが含まれる場合がある。そこで、上記の構成によると、データ放送の画像を、その表示位置に同時に表示される３Ｄオブジェクトの深度に応じて、常に適切な深度で３Ｄ表示することが可能となる。
　（ｃ）前記深度情報に記載されている前記画像の表示位置毎の深度は、前記表示位置に３Ｄ表示されるオブジェクトの深度より高い値に設定されており、前記データ放送の画像を３Ｄ表示すると、前記画像は、３Ｄ表示される前記オブジェクトの奥行き位置よりも手前に表示されることを特徴とする。
　映像データに含まれる３Ｄオブジェクトの背後にデータ放送の画像が表示されると、ユーザにとって不自然で視聴しにくい画像となる。また、映像データに含まれる３Ｄオブジェクトの結像位置とデータ放送の画像の結像位置とが重なり、３Ｄオブジェクトとデータ放送の画像とが干渉する場合にも、ユーザにとって視聴しにくい画像となる。
　そこで、上記の構成によると、３Ｄオブジェクトの手前にデータ放送の画像を表示することができるので、ユーザにとって見やすい画像を提供することが可能となる。
　（ｄ）前記映像データは、ＭＰＥＧ２－ＴＳ形式のデータストリームで配信され、前記データストリームには、所定単位毎に前記深度情報が含まれており、前記取得部は、前記データストリームの所定単位毎に含まれる前記深度情報から、順次前記深度を取得し、前記生成部は、前記取得部が前記深度を取得する毎に、前記左目用画像及び前記右目用画像を生成することを特徴とする。
　データ放送のオーサリング時には、当該データ放送が重畳される予定の番組コンテンツの内容については知ることができるが、前記番組コンテンツにどのような深度の３Ｄオブジェクトが含まれるのかの詳細を知ることは難しいかもしれない。また、大凡の予測に基づいて、データ放送のオーサリング時に、データ放送の画像を３Ｄ表示する際の深度を予めＢＭＬに格納しておいたとしても、番組コンテンツの３Ｄオブジェクトの深度は時々刻々と変動する。そのため、予めＢＭＬに格納された深度を用いてデータ放送を３Ｄ表示したとしても、データ放送の画像を、同時に表示される番組コンテンツとの関係において、常に適切な深度で３Ｄ表示できるとは限らない。
　そこで、上記の構成によれば、データストリームの所定単位毎に前記深度情報が含まれるので、時々刻々と変動する３Ｄオブジェクトの深度に応じて、データ放送の画像を適切な深度で３Ｄ表示することが可能となる。
　（ｅ）前記データ放送は、当該データ放送の画像を固定の深度で３Ｄ表示するときの当該画像が表示されるべき深度を示す固定深度情報を含み、前記映像処理装置は、前記データ放送の画像を固定の深度で３Ｄ表示する固定モード、及び、前記データ放送の画像を重畳する前記映像データのオブジェクトの深度の変動に応じて変動する深度で３Ｄ表示する変動モードの何れかを選択するデータ放送表示選択部を備え、前記取得部は、変動モードが選択された場合に、前記深度情報から前記深度を取得し、固定モードが選択された場合に、前記深度情報から前記深度を取得する処理に替えて、前記データ放送に含まれる前記固定深度情報から前記深度を取得することを特徴とする。
　上述したように、映像データに含まれる深度情報を用いると、前記映像データの３Ｄオブジェクトの深度に応じた深度で、データ放送の画像を３Ｄ表示することが可能である。しかし、データ放送の画像の深度が頻繁に変動すると、文字などが見難い場合もある。
　そこで、上記の構成によると、映像処理装置は、固定モードが選択された場合には、前記データ放送の画像を固定の深度で３Ｄ表示することが可能となる。
　（ｆ）前記データ放送表示選択部は、前記固定モード及び前記変動モードの何れかの選択をユーザから受け付けることを特徴とする。
　画像の見易さ、見難さには、ユーザ毎に個人差があると思われる。そこで、上記の構成によると、各ユーザにとって見易い方式でデータ放送の画像を表示することが可能となる。
　なお、前記データ放送表示選択部は、上記の実施形態のユーザ入力受付部２１３及びオフセットモード記憶部２１６に対応する。
　（ｇ）前記映像処理装置は、受信した前記３Ｄ表示用の映像データを２Ｄ表示することが可能であり、受信した３Ｄ表示用の映像データを３Ｄ表示する３Ｄモード及び前記映像データを２Ｄ表示する２Ｄモードを選択する表示モード選択部を備え、前記表示モード選択部が２Ｄモードを選択した場合、前記データ放送表示選択部は、固定モードを選択することを特徴とする。
　映像処理装置が、放送装置から受信した３Ｄ番組を擬似的に２Ｄ番組として表示する機能を有する場合がある。このような場合、たとえ、受信した３Ｄ番組に深度情報が含まれていたとしても、データ放送の画像を３Ｄ番組のオブジェクトの深度に応じて変動させると、かえってユーザにとってはデータ放送が見難くなる。
　そこで、上記の構成によると、映像データが２Ｄ表示されるときには、データ放送の画像を固定の深度で表示することにより、データ放送が見難くなるのを抑制することができる。
　（ｈ）前記データ放送に前記位置情報及び前記固定深度情報が含まれていない場合、前記表示モード選択部は２Ｄモードを選択することを特徴とする。
　前記データ放送に位置情報及び固定深度情報が含まれていない場合には、前記取得部は前記深度を取得することができず、前記生成部は、前記左目用画像及び前記右目用画像を生成することができない。したがって、データ放送は２Ｄ表示される可能性が高い。
　上述したように、３Ｄ映像データに２Ｄ表示のデータ放送を重畳すると、ユーザにとって見難い画像となる。そこで、上記の構成によると、データ放送が２Ｄ表示される可能性が高い場合には、放送装置から受信した３Ｄ番組を擬似的に２Ｄ番組として表示することにより、見難い画像が表示されるのを抑制することができる。
　（ｉ）前記表示モード選択部は、前記３Ｄモード又は前記２Ｄモードの選択をユーザから受け付けることを特徴とする。
　映像処理装置が、放送装置から受信した３Ｄ番組を擬似的に２Ｄ番組として表示する機能を有する場合がある。このような場合に、上記の構成を備えることにより、ユーザが所望する画像を表示することが可能となる。
　なお、前記表示モード選択部は、上記の実施形態のユーザ入力部２１３、表示モード記憶部２１４及び表示モード切替部２１５に対応する。
　（ｊ）データ放送と３Ｄ表示用の映像データとを送信する送信装置であって、前記映像データを記憶している記憶部と、前記映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報を生成する深度情報生成部と、前記データ放送と、生成された前記深度情報を含む前記映像データとを送信する送信部とを備えることを特徴とする。
　この構成によると、前記送信装置は、送信先である映像処理装置に対して、映像データに重畳して表示されるデータ放送の画像を、前記映像データの３Ｄオブジェクトの深度に応じた深度で３Ｄ表示させることが可能となる。これにより、ユーザは、より適切にデータ放送を３Ｄ映像と共に視聴することが可能となる。
　（ｋ）送信装置と映像処理装置とから構成され、３Ｄ表示用の映像データの映像にデータ放送の画像を重畳して表示する立体映像視聴システムであって前記送信装置は、前記映像データを記憶している記憶部と、前記映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報を生成する深度情報生成部と、前記データ放送と、生成された前記深度情報を含む前記映像データとを送信する送信部とを備え、前記映像処理装置は、前記データ放送と、前記深度情報を含む前記映像データを受信する受信部と、受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得部と、受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部とを備えることを特徴とする。
　この構成によると、前記映像処理装置は、映像データに重畳して表示されるデータ放送の画像を、前記映像データの３Ｄオブジェクトの深度に応じた深度で３Ｄ表示することが可能となる。これにより、ユーザは、より適切にデータ放送を３Ｄ映像と共に視聴することが可能となる。
　本発明の一態様である映像処理装置によると、３Ｄ映像データ及びデータ放送を再生する映像処理装置を製造及び販売する産業において、データ放送を３Ｄ表示する際に、ユーザにとって視聴しやすい画像を表示することができる技術として利用することが可能である。
１　　　立体映像視聴システム
１０　　放送装置
２０　　デジタルテレビ
２１　　映像処理装置
２２　　ディスプレイ
３０　　リモコン
４０　　３Ｄ眼鏡
１０１　番組コンテンツ蓄積部
１０２　オフセット情報生成部
１０３　エンコーダ
１０４　データ放送制作部
１０５　マルチプレクサ
１０６　放送ストリーム送出部
２０１　デマルチプレクサ
２０２　オーディオデコーダ
２０３　ビデオデコーダ
２０４　左目用映像データ出力部
２０５　右目用映像データ出力部
２０６　データ放送処理部
２０７　オフセット取得部
２０８　右目用データ放送画像生成部
２０９　左目用データ放送画像生成部
２１０　左目用画像生成部
２１１　右目用画像生成部
２１２　表示制御部
２１３　ユーザ入力受付部
２１４　表示モード記憶部
２１５　表示モード切替部
２１６　オフセットモード記憶部

Claims (14)

  1. 　データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する映像処理装置であって、
    　前記映像データには、当該映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報が含まれており、
    　受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得部と、
    　受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部と
    　を備えることを特徴とする映像処理装置。
  2. 　前記深度情報には、３Ｄ表示されるオブジェクトの表示位置及び深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの、前記画像の表示位置毎の深度が記載されており、
    　前記データ放送は、当該データ放送の画像の表示位置を示す位置情報を含み、
    　前記取得部は、前記データ放送から前記位置情報を取得し、取得した前記位置情報が示す表示位置に対応する前記深度を前記深度情報から取得する
    　ことを特徴とする請求項１に記載の映像処理装置。
  3. 　前記深度情報に記載されている前記画像の表示位置毎の深度は、前記表示位置に３Ｄ表示されるオブジェクトの深度より高い値に設定されており、
    　前記データ放送の画像を３Ｄ表示すると、前記画像は、３Ｄ表示される前記オブジェクトの奥行き位置よりも手前に表示される
    　ことを特徴とする請求項２に記載の映像処理装置。
  4. 　前記映像データは、ＭＰＥＧ２－ＴＳ形式のデータストリームで配信され、前記データストリームには、所定単位毎に前記深度情報が含まれており、
    　前記取得部は、前記データストリームの所定単位毎に含まれる前記深度情報から、順次前記深度を取得し、
    　前記生成部は、前記取得部が前記深度を取得する毎に、前記左目用画像及び前記右目用画像を生成する
    　ことを特徴とする請求項３に記載の映像処理装置。
  5. 　前記データ放送は、当該データ放送の画像を固定の深度で３Ｄ表示するときの当該画像が表示されるべき深度を示す固定深度情報を含み、
    　前記映像処理装置は、
    　前記データ放送の画像を固定の深度で３Ｄ表示する固定モード、及び、前記データ放送の画像を重畳する前記映像データのオブジェクトの深度の変動に応じて変動する深度で３Ｄ表示する変動モードの何れかを選択するデータ放送表示選択部を備え、
    　前記取得部は、変動モードが選択された場合に、前記深度情報から前記深度を取得し、固定モードが選択された場合に、前記深度情報から前記深度を取得する処理に替えて、前記データ放送に含まれる前記固定深度情報から前記深度を取得する
    　ことを特徴とする請求項２に記載の映像処理装置。
  6. 　前記データ放送表示選択部は、前記固定モード及び前記変動モードの何れかの選択をユーザから受け付ける
    　ことを特徴とする請求項５に記載の映像処理装置。
  7. 　前記映像処理装置は、受信した前記３Ｄ表示用の映像データを２Ｄ表示することが可能であり、
    　受信した３Ｄ表示用の映像データを３Ｄ表示する３Ｄモード及び前記映像データを２Ｄ表示する２Ｄモードを選択する表示モード選択部を備え、
    　前記表示モード選択部が２Ｄモードを選択した場合、前記データ放送表示選択部は、固定モードを選択する
    　ことを特徴とする請求項５に記載の映像処理装置。
  8. 　前記データ放送に前記位置情報及び前記固定深度情報が含まれていない場合、前記表示モード選択部は２Ｄモードを選択する
    　ことを特徴とする請求項７に記載の映像処理装置。
  9. 　前記表示モード選択部は、前記３Ｄモード又は前記２Ｄモードの選択をユーザから受け付ける
    　ことを特徴とする請求項７に記載の映像処理装置。
  10. 　データ放送と３Ｄ表示用の映像データとを送信する送信装置であって、
    　前記映像データを記憶している記憶部と、
    　前記映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報を生成する深度情報生成部と、
    　前記データ放送と、生成された前記深度情報を含む前記映像データとを送信する送信部と
    　を備えることを特徴とする送信装置。
  11. 　送信装置と映像処理装置とから構成され、３Ｄ表示用の映像データの映像にデータ放送の画像を重畳して表示する立体映像視聴システムであって
    　前記送信装置は、
    　前記映像データを記憶している記憶部と、
    　前記映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報を生成する深度情報生成部と、
    　前記データ放送と、生成された前記深度情報を含む前記映像データとを送信する送信部とを備え、
    　前記映像処理装置は、
    　前記データ放送と、前記深度情報を含む前記映像データを受信する受信部と、
    　受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得部と、
    　受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部とを備える
    　ことを特徴とする立体映像視聴システム。
  12. 　データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する映像処理装置で用いられる映像処理方法であって、
    　前記映像データには、当該映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報が含まれており、
    　受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得ステップと、
    　受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成ステップと
    　を含むことを特徴とする映像処理方法。
  13. 　データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する映像処理装置で用いられる映像処理プログラムであって、
    　前記映像データには、当該映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報が含まれており、
    　前記映像処理プログラムは、前記映像処理装置に、
    　受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得ステップと、
    　受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成ステップと
    　を実行させることを特徴とする映像処理プログラム。
  14. 　データ放送と３Ｄ表示用の映像データとを受信し、受信した映像データの映像にデータ放送の画像を重畳して出力する集積回路であって、
    　前記映像データには、当該映像データに基づいて３Ｄ表示されるオブジェクトの深度に応じて設定された、前記データ放送の画像を３Ｄ表示するときの当該画像が表示されるべき深度を示す深度情報が含まれており、
    　受信した前記映像データに含まれる前記深度情報から前記深度を取得する取得部と、
    　受信した前記データ放送の画像を、取得した前記深度で３Ｄ表示するための右目用画像及び左目用画像を生成する生成部と
    　を備えることを特徴とする集積回路。
PCT/JP2012/003344 2011-05-25 2012-05-22 映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路 WO2012160812A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201161489825P 2011-05-25 2011-05-25
US61/489,825 2011-05-25

Publications (1)

Publication Number Publication Date
WO2012160812A1 true WO2012160812A1 (ja) 2012-11-29

Family

ID=47216903

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/003344 WO2012160812A1 (ja) 2011-05-25 2012-05-22 映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路

Country Status (2)

Country Link
US (1) US20120300029A1 (ja)
WO (1) WO2012160812A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11533467B2 (en) * 2021-05-04 2022-12-20 Dapper Labs, Inc. System and method for creating, managing, and displaying 3D digital collectibles with overlay display elements and surrounding structure display elements

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010213267A (ja) * 2008-09-30 2010-09-24 Panasonic Corp ３ｄ映像に係る眼鏡、表示装置
WO2011007564A1 (ja) * 2009-07-14 2011-01-20 パナソニック株式会社 映像再生装置
JP2011097595A (ja) * 2009-02-19 2011-05-12 Panasonic Corp 半導体集積回路

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100040563A (ko) * 2008-10-10 2010-04-20 삼성전자주식회사 방송 표시장치 및 그의 2차원 영상 표시 방법
KR20110053159A (ko) * 2009-11-13 2011-05-19 삼성전자주식회사 비디오 부가 재생 정보의 3차원 재생을 위한 멀티미디어 스트림 생성 방법과 그 장치, 및 수신 방법과 그 장치
JP2011239169A (ja) * 2010-05-10 2011-11-24 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010213267A (ja) * 2008-09-30 2010-09-24 Panasonic Corp ３ｄ映像に係る眼鏡、表示装置
JP2011097595A (ja) * 2009-02-19 2011-05-12 Panasonic Corp 半導体集積回路
WO2011007564A1 (ja) * 2009-07-14 2011-01-20 パナソニック株式会社 映像再生装置

Also Published As

Publication number Publication date
US20120300029A1 (en) 2012-11-29

Similar Documents

Publication Publication Date Title
JP5429034B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5402715B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5454444B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP2004274125A (ja) 画像処理装置および方法
KR20110113186A (ko) 비디오 인터페이스를 통해 송신하고 ３ｄ 비디오 및 ３ｄ 오버레이들을 합성하기 위한 방법 및 시스템
TW201119349A (en) Data structure, recording medium, playback apparatus and method, and program
WO2013031549A1 (ja) 送信装置、送信方法および受信装置
US9357200B2 (en) Video processing device and video processing method
WO2012060198A1 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP2011249945A (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5682149B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
KR101314601B1 (ko) 콘텐츠 전송 장치, 콘텐츠 표출 장치, 콘텐츠 전송 방법 및 콘텐츠 표출 방법
TW201320712A (zh) 送訊裝置、送訊方法及收訊裝置
WO2013018490A1 (ja) 送信装置、送信方法および受信装置
WO2013011696A1 (ja) 送信装置、受信再生装置、送信方法及び受信再生方法
WO2012057048A1 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
WO2012026342A1 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
WO2014109321A1 (ja) 送信装置、送信方法、受信装置および受信方法
WO2012063675A1 (ja) 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置
WO2012160812A1 (ja) 映像処理装置、送信装置、立体映像視聴システム、映像処理方法、映像処理プログラム及び集積回路
WO2013018489A1 (ja) 送信装置、送信方法および受信装置
JP6211929B2 (ja) 送信装置、映像表示装置、送信方法、映像処理方法、映像処理プログラム及び集積回路
WO2013172142A1 (ja) 送信装置、送信方法、受信装置および受信方法
JP2013074434A (ja) 映像表示装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12789919

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12789919

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP