WO2010064472A1 - コンテンツ再生装置、再生方法、プログラム及び記録媒体 - Google Patents
コンテンツ再生装置、再生方法、プログラム及び記録媒体 Download PDFInfo
- Publication number
- WO2010064472A1 WO2010064472A1 PCT/JP2009/064539 JP2009064539W WO2010064472A1 WO 2010064472 A1 WO2010064472 A1 WO 2010064472A1 JP 2009064539 W JP2009064539 W JP 2009064539W WO 2010064472 A1 WO2010064472 A1 WO 2010064472A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- video
- image
- graphics
- unit
- data
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/158—Switching image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/189—Recording image signals; Reproducing recorded image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
- H04N13/359—Switching between monoscopic and stereoscopic modes
Definitions
- the present invention relates to a content playback apparatus capable of 3D playback, a playback method, a program, and a recording medium.
- 3D Three Dimension
- video technology is being introduced in movie theaters in the United States, where the number of visitors is declining. It appeals the unique charm of a movie theater that is not in a home theater, and the number of visitors is increasing in the movie theaters that were actually introduced.
- binocular parallax is used, and right-eye and left-eye images are projected by space division or frequency division and separated into left and right images by special glasses.
- Patent Document 1 the left-eye video and the right-eye video are interleaved and recorded, and only the left-eye video is referred to from the management information of the existing DVD.
- the extended management information is added, and the video for both eyes is referenced from there. In this way, it is possible to smoothly shift to 3D while maintaining compatibility with existing DVD players.
- Patent Document 1 Another feature of Patent Document 1 is that a mechanism for smoothly switching between a section in which 3D video is prepared and a section having only 2D video is prepared. This mechanism will be described focusing on points using the video disc player 200 of FIG.
- the video disc player 200 includes an optical disc 210, a data acquisition unit 220, an AV (Audio Visual) playback unit 230, a left video output unit 240, a right video output unit 250, a switching unit 260, and a control unit 270.
- AV Audio Visual
- the optical disk 210 is basically a DVD (Digital Versatile Disk) video format with the following extensions.
- DVD Digital Versatile Disk
- the data acquisition unit 220 reads an AV stream and management information from the optical disc 210 in accordance with instructions from the control unit 270 and the AV playback unit 230.
- the AV playback unit 230 decodes and outputs the read AV stream.
- the decoded video is output to the left video side (left-eye video side) in the figure.
- decoding is performed on both the left video side and the right video side (left-eye video side). Output the video.
- the switching unit 260 switches the left video output or the right video output from the AV playback unit 230 in accordance with an instruction from the control unit 270 and outputs it to the right video output unit 250. This is for supplying a left video output (left-eye output) to the right video output unit 250 because there is no right video output (right-eye output) for 2D video.
- the left video output unit 240 and the right video output unit 250 output the left-eye video and the right-eye video, respectively, to the outside.
- the control unit 270 controls the switching unit 260 at a timing designated in advance by the content creator based on the stereoscopic video arrangement information read out through the data acquisition unit 220, thereby switching from 2D video to 3D video at an appropriate timing.
- BD-ROM standard the Blu-ray Disc ROM standard called the next generation DVD (hereinafter abbreviated as BD-ROM standard) is becoming widespread.
- the BD-ROM standard is characterized by flexible graphics functions in Java (registered trademark) language in addition to high-quality video and audio.
- Java registered trademark
- the BD-ROM standard currently does not support 3D video, but it is expected that this will be required in the future. In that case, not only the video image by decoding but 3D correspondence of the graphics image by Java (trademark) language will become essential.
- the technology relating to the control of 3D content including graphics is not disclosed, but in order to enable 3D display of graphics as well as a video image (similar to FIG. 19), in the case of 2D display
- the left-eye graphics image is output to both the left-eye and right-eye video output units, and the graphics are supplied so that the right-eye graphics image is output from the right-eye video output unit when switching from 2D display to 3D display. It is possible to switch the source.
- drawing a graphics image in the Java (registered trademark) language takes more time than decoding.
- An object of the present invention is to provide a content reproducing apparatus, a control method, a program, and a recording medium capable of simultaneously switching a video image and a graphics image from 2D to 3D when switching from 2D to 3D.
- a first technical means of the present invention is a content playback apparatus, a data acquisition unit for acquiring a program and video data from playback data, and a first video plane for storing a video image And a second video plane; a first graphics plane for storing graphics images; a second graphics plane; and executing the program to generate the graphics images to generate graphics for 2D (Dimension)
- the image is output to the first graphics plane, and the 3D graphics image is output to the first and second graphics planes, respectively, and the video data is decoded, and the video data is decoded.
- the video image is output to the first video plane, and the 3D video image is the first video plane.
- a decoding unit that outputs to the second video plane, a first combining unit that combines the first video plane and an image stored in the first graphics plane, and the second video plane, A second synthesizing unit that synthesizes the image stored in the second graphics plane, and at the time of reproducing 2D image data, outputs the synthesized image of the first synthesizing unit and reproduces the 3D image data.
- a switching unit that switches to output the synthesized image of the first synthesis unit and the synthesized image of the second synthesis unit, and the switching unit converts the reproduction data from 2D image data to 3D. When the image data is changed, the switching is executed based on the completion of the generation of the 3D graphics image for one screen in the program execution unit.
- the first technical means includes a time information acquisition unit that acquires time information related to an expected generation time of the 3D graphics image for one screen, and the video data is for 2D.
- the program execution unit starts generating the 3D graphics image before the expected generation time from the switching time, and the switching unit executes the program execution. The switching is executed based on completion of generation of the 3D graphics image by the unit and switching of the output video image from the 2D video image to the 3D video image in the decoding unit. .
- the third technical means of the present invention is characterized in that, in the second technical means, the time information acquisition unit acquires the time information from the reproduction data.
- a fourth technical means of the present invention is a method for reproducing content data in which 2D image data and 3D image data are mixed, wherein a program and video data are obtained from the reproduced data, the program is executed, and the graphics are executed.
- a graphics image for 2D (Dimension) is output to the first graphics plane, and a graphics image for 3D is output to the first and second graphics planes, respectively.
- the data is decoded, the 2D video image is output to the first video plane, the 3D video image is output to the first and second video planes, respectively, and when the 2D image data is reproduced, Outputting a composite image of the images stored in the first video plane and the first graphics plane, and the reproduction data;
- the 2D image data is changed to the 3D image data, when the generation of the 3D graphics image for one screen is completed, the images stored in the second video plane and the second graphics plane are combined. It is characterized by outputting an image.
- the fifth technical means of the present invention is a program that causes a computer to execute the reproduction method of the fourth technical means.
- the sixth technical means of the present invention is a recording medium on which the program of the fifth technical means is recorded so as to be readable by a computer.
- a seventh technical means of the present invention is a recording medium for use in the content reproduction apparatus of the third technical means, and a program for generating video data and graphics image in which 2D image data and 3D image data are mixed
- the 2D image data and the 3D image data are recorded by being divided into predetermined units, and the 3D image data recording section is switched from the recording section of the 2D image data to the 3D image data.
- the time information related to the expected generation time necessary for generating the 3D graphics image displayed together with the 3D video image of the recording section is recorded by the program.
- playback control of 3D content including graphics images can be performed, and in particular, when switching from 2D to 3D, a video image and a graphics image can be simultaneously played back in 3D.
- FIG. 10 is a block diagram showing a schematic configuration in Reference Example 1.
- FIG. 10 is a block diagram illustrating a schematic configuration in Reference Example 2.
- FIG. 10 is a flowchart showing a flow of processing when a 2D-3D notification is received from an AV playback unit of an output control unit in Reference Example 2.
- FIG. 1 shows an example of the configuration of a video disc player according to this embodiment.
- the video disc player 1 is a content data reproduction device in which 2D image data (video image image data and graphics image image data) and 3D image data are mixed, and includes an optical disc 10 and a data acquisition unit 20.
- the composition unit 100b includes a left video plane 110a, a right video plane 110b, a left graphics plane 120a, and a right graphics plane 120b.
- the optical disk 10 is a large-capacity optical disk such as a BD-ROM, and uses UDF (Universal Disk Format) as a file system for managing data.
- the file / directory structure will be described later.
- the data acquisition unit 20 reads various data from the optical disc 10 on which reproduction data including programs and AV data is recorded in accordance with instructions from the overall control unit 50, AV reproduction unit 40, and program execution unit 30.
- the program execution unit 30 executes the program read from the optical disc 10 in accordance with an instruction from the overall control unit 50, and generates the generated (generated) graphics as the left graphics plane 120a and the right graphics depending on the contents of the program. Write to spline 120b. As will be described later, mutual information notification with the output control unit 70 is possible.
- the AV playback unit 40 decodes the AV data read from the optical disc 10.
- the decoded video is output for both the left video plane 110a and the right video plane 110b.
- a function of notifying the output control unit 70 of the switching between 2D and 3D of AV data is also provided.
- the overall control unit 50 controls the entire video disc player 1 in accordance with a user operation transmitted from the U / I 60.
- a title information file, which will be described later, is read from the optical disc 10 and the AV playback unit 40 and the program execution unit 30 are controlled to be activated.
- the U / I 60 accepts a user operation such as a remote control and informs the overall control unit 50 of the accepted result.
- the switching unit 80 switches whether the video output to the right video output unit 90b is from the left video synthesis unit 100a or the right video synthesis unit 100b in accordance with an instruction from the output control unit 70.
- the output control unit 70 controls the switching unit 80 based on control signals from the program execution unit 30 and the AV playback unit 40.
- the left video output unit 90a and the right video output unit 90b respectively output a left-eye video (left video) and a right-eye video (right video) to an external display device (not shown).
- the left video composition unit 100a synthesizes images stored (stored) in the left video plane 110a and the left graphics plane 120a.
- the left video plane 110a and the right video plane 110b are image buffer memories for holding display video images for left eye and right eye, respectively.
- the left graphics plane 120a and the right graphics plane 120b are image buffer memories for holding respective left-eye and right-eye display graphics images.
- a double buffering technique is used to draw graphics on the left graphics plane 120a and the right graphics plane 12b, and each plane 120a has a front buffer and a back buffer. Graphics are drawn in the back buffer by the program execution unit 30 (the program executed by the program). After the entire graphics is drawn, the graphics are collectively transferred from the back buffer to the front buffer for output. As a result, the state during drawing cannot be seen.
- FIG. 2 is an explanatory diagram showing a file / directory structure for managing various data stored in the optical disc 10. The file will be briefly described below.
- the clip file is a file storing AV data.
- 2D video and 3D video are not mixed, and in this case, the clips are stored separately at different boundaries.
- the playlist file is a file storing attribute information related to AV data referenced from the playlist and the playlist. Note that the play list is information on which part of AV data is reproduced in what order.
- the program file is a file storing compiled Java (registered trademark) bytecode.
- the title information file is a file that stores information on each title in the optical disc 10.
- the stored information includes playlist file and program file reference information used by each title. It is assumed that the file name of the title to be automatically reproduced when the disc is inserted is “00000.TTL”.
- FIG. 3 is an explanatory diagram showing the data structure of the title information file and the playlist file in the present embodiment.
- the title information file includes a field PlayListFileName and a field ProgramFileName.
- a field PlayListFileName is a file name of a file that stores a playlist that constitutes a title corresponding to this file.
- a field ProgramFileName is a file name of a file that stores a program constituting a title corresponding to this file.
- the playlist file stores NumOfClips, which is a field for storing the number of clips constituting the playlist, and information related to the number of clips.
- Information related to the clip includes a field ClipFileName [i] and a field Dimension [i]. Note that i indicates the number of clips in the playlist.
- a field ClipFileName [i] stores the file name of the i-th clip file in the playlist.
- the field Dimension [i] indicates whether the video stored in the i-th clip file in the playlist is 3D or 2D. If the value is 0, 2D means 1D.
- the entire apparatus In response to a power-on instruction by the user through the U / I 60, the entire apparatus is first initialized (S10a), and then the file with the file name “00000.TTL” is selected, that is, the title to be played back is selected. (S10b). Subsequently, the title information file selected through the data acquisition unit 20 is read (S10c).
- the title information file is analyzed, and the AV playback unit 40 is instructed to play the playlist together with the file name specified by PlayListFileName (S10d), and the program execution unit 30 executes the program having the file name specified by ProgramFileName. (S10e), reproduction of AV data of the selected title and drawing of graphics by the program are started. Then, when a later-described end notification arrives from both the AV playback unit 40 and the program execution unit 30, that is, when the title playback ends (S10f), the process returns to title selection (S10b), and is designated by the title immediately before the title playback ends. Select the title information file to be played.
- the program file designated by the overall control unit 50 is read from the optical disc 10 through the data acquisition unit 20 (S20a).
- the read program is activated (S20b), and based on 2D-3D control information (to be described later) received from the AV playback unit 40 via the output control unit 70, the left graphic is displayed. Graphics are drawn on the spline 120a, and in the case of 3D playback, graphics are drawn on the left graphics plane 120a and the right graphics plane 120b.
- an end notification is sent to the overall control unit 50 (S20d).
- the video disc player 1 is characterized by the operation (processing) when switching from 2D to 3D playback.
- the characteristic operations of the program execution unit 30 and the program executed by the execution unit 30 are as follows. Will be described later.
- the playlist file of the selected title designated by the overall control unit 50 is read from the optical disc 10 through the data acquisition unit 20 (S30a), and the contents are interpreted.
- the variable i which is the index of the clip to be read, is initialized to 0 (S30b), and the process described below is executed while the index is less than the number of clips in the play list (i ⁇ NumOfClips).
- the disc 10 stores only the left-eye AV data for the 2D clip file, and stores both the left-eye and right-eye AV data for the 3D clip file.
- S30e or after S30f
- i is incremented (S30g), and the process jumps to step S30c. If i is equal to or greater than the number of clips in step S30c (i ⁇ NumOfClips), after the decoding of the currently decoded clip is completed (S30h), an end notification is sent to the overall control unit 50 (S30i).
- the left video synthesis unit 100a that synthesizes the video of the left video plane 110a and the graphics of the left graphics plane 120a, the video of the right video plane 110b, and the right graphics plane 120b.
- switching between 100a and the right image composition unit 100b switching from 2D to 3D can be performed.
- the feature of this video disc player is that this switching from 2D to 3D is performed after receiving a drawing completion notification for one surface on the right graphics plane 120b from the program control unit 30, and the video is converted to graphics.
- the 3D playback is made possible at the same time.
- the following is a processing example necessary for this characteristic operation.
- the output control unit 70 notifies the program execution unit 30 of the 2D-3D control information received from the AV playback unit 40 as it is (S40a).
- the output control unit 70 manages the current 2D / 3D state, refers to the field Dimension [i] of the received 2D-3D control information, and checks whether there is a change in the 2D / 3D state (S40b). . If there is a change, it is further checked whether the change is from 2D to 3D (S40c).
- the switching unit 80 is controlled to switch the output to the right video output unit 90b from the video of the left video synthesis unit 100b to the video of the right video synthesis unit 100b (S40f).
- the 2D-3D control information notified from the output control unit 70 is notified to the program being executed by the program execution unit 30 (S50a), and then whether or not switching from 2D to 3D is checked (S50b).
- the program waits for notification of completion of 3D graphics rendering (S50c) described later from the program (S50c), and when notified, notifies the output controller 70 of completion of 3D graphics rendering ( S50d).
- the program holds the current 2D / 3D state as an internal state, and first checks whether the current state is 2D (S60a). If it is 2D, it is further determined whether or not to switch to 3D based on the 2D-3D control information notified from the program execution unit 30 (that is, from the AV playback unit 40) (S60b).
- the internal state is updated to 3D (S60c)
- the right graphics plane 120b is initialized (S60d)
- the initial state is drawn on the right graphics plane 120b (S60e).
- 3D graphics drawing completion (3D graphics output preparation completion) is notified to the program execution unit 30 (S60f).
- the program execution unit 30 notifies the output control unit 70 of the completion of 3D graphics rendering.
- the output control unit 70 changes the playback data from 2D image data to 3D image data, in other words, when switching from 2D playback to 3D playback.
- the switching unit 80 is controlled to output the right image output unit 90b to the composite image from the left image composition unit 100a.
- (Video) is switched to the video of the right video composition unit 100b. That is, the switching can be performed only when the right graphics plane 120b is in a displayable state (a state in which the right graphics plane 120a can be output from the table buffer of the right graphics plane 120a). As a result, the video image and the graphics image are simultaneously switched from 2D to 3D playback.
- the content is recorded on an optical disc.
- the present invention is not limited to this, and can be applied to various recording media such as a hard disk and a flash memory, and also for broadcasting and streaming on the Internet. Applicable. When applied to streaming, 2D-3D control information is multiplexed and transmitted in a stream to be streamed.
- 2D-3D control information of AV data is managed in a playlist different from AV data, but the same function can be realized by multiplexing the AV data itself, but it is stored in the playlist. By doing so, it is possible to know information about 2D-3D before actual playback, and it is possible to realize additional effects such as providing information to the user.
- Embodiment 2 The following will describe another embodiment of the present invention with reference to FIG.
- the difference from the first embodiment is that a notice of switching is notified from the AV playback unit in advance when switching from 2D to 3D, so that when the video clip file is switched from 2D to 3D, from the beginning of the clip file.
- the video image and the graphics image can be reproduced in 3D.
- members having the same functions as those shown in the first embodiment are given the same reference numerals, and explanation thereof is omitted.
- the terms defined in Embodiment 1 are used in accordance with the definitions in this embodiment unless otherwise specified.
- FIG. 10 is an explanatory diagram showing the data structure of the playlist file in the present embodiment. Although it is similar to Embodiment 1, it is different in that a field called PrepTime [i] is prepared for each clip constituting the playlist.
- PrepTime [i] indicates the time (expected generation time) required for the program execution unit 30 to generate (draw) one screen of graphics for the i-th clip file.
- PrepTime [n] indicates T1 (time), and when switching from 2D to 3D playback in the nth clip file, the playback end time of the (n-1) th clip file is set. Drawing of graphics on the right graphics plane 120b is started before time T1.
- PrepTime [i] (PrepTime [0]) of the first clip file in the playlist is used as follows. That is, if PrepTime [0] indicates T2 (time), the video disc player of the present embodiment starts drawing graphics before starting the decoding of the playlist, and starts T2 from the drawing start time. After the elapse of time, decoding of the first clip file of the playlist is started. As a result, after the time T2 elapses, the drawing of graphics for one page is completed, so that the video image can be reproduced together with the graphics image from the beginning of the first clip file.
- PrepTime [i] is set after the content creator estimates the time required for preparation of 3D graphics in the program execution unit 30. This is because only the content creator knows the complexity of the preparation process.
- FIG. 11 is an explanatory diagram showing the flow of playlist playback processing of the AV playback unit 40 in the present embodiment.
- the playlist file designated by the overall control unit 50 is read from the optical disc 10 through the data acquisition unit 20 (S70a), and the contents are interpreted.
- the variable i which is the index of the clip to be read, is initialized to 0 (S70b), and the clip file specified by the field ClipFileName [0] is read from the optical disc 10 (S70c).
- the 2D-3D control information specified by the field Dimension [0] is referred to, the 2D-3D control information is notified to the output control unit 70 (S70d), and the time specified by PrepTime [0] Wait for a minute (S70e).
- decoding is started (S70f), and if the data is 2D image data (2D playback), if the data is 3D image data only for the left video plane 110a (3D playback).
- the decoded video is output to both the left video plane 110a and the right video plane 110b.
- the variable i which is the index of the read target clip, is incremented (S70g).
- step S70m it waits for the display of the i-th clip to start (S70m), and when it starts, it sends a switching notification to the output control unit 70 (S70n), increments i (S70o), and jumps to step S70h. If i is equal to or greater than the number of clips (i ⁇ NumOfClips) in step S70i, after the decoding of the clip currently being decoded is completed (S70p), an end notification is sent to the overall control unit 50. If it is not switching from 2D to 3D in step S70j, the following processing is performed although illustration is omitted. If the dimension to be reproduced does not change, i is incremented and the process jumps to step S70h.
- the 2D- is output to the output controller 70 after the display start time of the i-th clip. Not only the 3D control information is notified, but also a switching notification is transmitted to the output control unit 70, i is incremented (S70o), and the process jumps to step S70h.
- FIG. 12 is a flowchart showing a processing flow of the output control unit 70 when 2D-3D control information is received from the AV playback unit 40 in the present embodiment.
- the 2D-3D control information is checked and compared with the current state, as in the first embodiment, to determine whether switching from 2D to 3D is performed.
- the internal state is updated to 3D, and 2D-3D control information is first notified to the program execution unit 30 (S80a). Thereafter, it waits for notification of completion of 3D graphics rendering from the program and switching notification from the AV playback unit 40 (S80b), and after confirming that both have arrived, controls the switching unit 80 to control the right video output unit.
- the output to 90b is switched from the video from the left video synthesis unit 100a to the video of the right video synthesis unit 100b.
- the internal state is updated as necessary.
- FIG. 13 is a sequence diagram summarizing the exchange between the above functional blocks.
- FIG. 13A shows a case where the 3D graphics preparation process in the program execution unit 30 is completed earlier than the video decoded by the AV playback unit 40 changes from 2D to 3D, and is an expected behavior.
- FIG. 13B shows a case where the 3D graphics preparation process is prolonged due to the garbage collection of Java (registered trademark) VM.
- the display to the user is switched to 3D later than the video decoded by the AV playback unit 40 changes from 2D to 3D.
- the output control unit 70 receives the notification of completion of 3D graphics rendering. Since the video image is past the top, the video image can be reproduced in 3D simultaneously with the graphics image.
- the content creator can predict a section where processing overhead associated with 3D rendering occurs, and more High quality content creation is possible. This is because in the case of 3D drawing, it is necessary to prepare and write images of both the left graphics plane 120a and the right graphics plane 120b.
- the memory band between the program execution unit 30 and the graphics plane associated with drawing This is because the width consumption amount is doubled and the performance is reduced even when the same content is drawn, but the period of the performance reduction can be minimized.
- the video disc player cannot know the time required for drawing the right graphics plane, so that the right graphic is required before switching to 3D. It is necessary to start drawing to the right graphics plane as soon as possible to guarantee that the drawing of the spline is completed, but by specifying the preparation period, it is only necessary to start the above drawing at an appropriate timing. It is possible to prevent a decrease in performance due to starting drawing on the right graphics plane early.
- the timing of the notice of notification is specified by time, but it goes without saying that anything can be used as long as preparation time and processing amount can be estimated, such as the number of steps and processing contents.
- the content is recorded on an optical disc.
- the present invention is not limited to this, and can be applied to various recording media such as a hard disk and a flash memory, and also for broadcasting and streaming on the Internet. Applicable.
- 2D-3D control information is multiplexed and transmitted in a stream to be streamed, and information that replaces PrepTime [i] in this embodiment is equivalent to prepTime before the video signal is replaced with 3D. Can be multiplexed.
- the timing of the notice of switching notice from 2D to 3D (that is, the notice of graphic drawing start instruction when switching from 2D to 3D) is obtained from the data in the optical disc 10 for one side of graphics.
- the present invention is not limited to this.
- the content creator is obligated to finish drawing on the graphics plane within a predetermined time, and the player side stores the predetermined time at the shipping stage and the like, and stores the graphic in advance for the predetermined time.
- the drawing process may be started.
- the player may determine the expected generation time of graphics for one page based on actual content, and start the graphic drawing process in advance with a margin.
- the switching unit 130 is added between the right graphics plane 120b and the right video synthesis unit 100b.
- the switching unit 130 switches the output to the right video synthesis unit 100b between the output of the right graphics plane 120b and the output of the left graphics plane 120a in accordance with an instruction from the program execution unit 30.
- the program execution unit 30 includes an interface capable of instructing the switching described above with the switching unit 130, and further provides an API (Application Program Interface) that can control the switching for the program to be executed.
- ⁇ 2D-3D switching process> The difference from the first embodiment resides in the program executed on the program execution unit 30.
- an API for switching the image output from the switching unit 130 to that of the right graphics plane 120b is called between S60b and S60c in the flowchart of FIG.
- Reference Example 2 The content reproduction apparatus of Reference Example 2 will be described as follows with reference to FIG. The difference from FIG. 1 showing the first embodiment is that a 2D graphics plane 120c is added, and the input to the left video composition unit 100a is based on the control signal from the output control unit 70, and the left graphics plane 120a. And a switching unit 130 for switching between the 2D graphics plane 120c. This eliminates the need for a back buffer prepared by a program that must be prepared when there is a change in contents before and after switching between 2D and 3D, which was necessary in the first embodiment, as will be described later. become. For convenience of explanation, members having the same functions as those shown in the first embodiment are given the same reference numerals, and explanation thereof is omitted. The terms defined in Embodiment 1 are used in accordance with the definitions in this embodiment unless otherwise specified.
- the processing flow of the program executed by the unit 70, the program execution unit 30, and the program execution unit 30 will be described. Most of the processes are the same as those in the first embodiment, and in order to show the correspondence, the reference numerals indicating the steps are those obtained by replacing “S” in the corresponding step codes in the first embodiment with “S1” (example) : S40a ⁇ S140a).
- the output control unit 70 notifies the program execution unit 30 of the 2D-3D control information received from the AV playback unit 40 as it is (S140a).
- the output control unit 70 manages the current 2D / 3D state and refers to the field Dimension [i] of the received 2D-3D control information to check whether there is a change in the 2D / 3D state (S140b). If there is a change, it waits for a drawing completion notification to be described later from the program execution unit 30 (S140e).
- the switching unit 80 is controlled so that the output to the right video output unit 90b is changed from the video of the left video synthesis unit 100b to the video of the right video synthesis unit 100b.
- the switching unit 130 is controlled to switch the output to the left video composition unit 100a from the 2D graphics plane 120c to the left graphics plane 120a (S140f). In the case of switching from 3D to 2D, the switching is reversed.
- 2D-3D control information notified from the output control unit 70 is notified to the program being executed by the program execution unit 30 (S150a), and a later-described graphics drawing completion notification from the program is waited (S150c). If notified, the graphics control unit 70 is notified of the completion of graphics drawing (S150d).
- the program holds the current 2D / 3D state as an internal state, and first checks whether the current state is 2D (S160a). If it is 2D, it is further determined whether to switch to 3D based on the 2D-3D control information notified from the program execution unit 30 (that is, from the AV playback unit 40) (S160b). In the case of switching to 3D, the internal state is updated to 3D (S160c), the graphics planes 120b and 120c are initialized (S160d), and the initial state is drawn on the graphics planes 120b and 120c (S160e).
- the program execution unit 30 After the completion of the initial drawing to the back buffers of the graphics planes 120b and 120c, the program execution unit 30 is notified of the completion of graphics drawing (completion of graphics output) (S160f). As a result, as shown in FIG. 17, the program execution unit 30 notifies the output control unit 70 of the completion of graphics drawing.
- the program execution unit 30 is notified of completion of graphics drawing (completion of graphics output preparation) (S160k). As a result, as shown in FIG. 17, the program execution unit 30 notifies the output control unit 70 of the completion of graphics drawing.
- the video image and the graphics image can be switched from 2D playback to 3D playback and from 3D playback to 2D playback at the same time as in the first embodiment.
- the back buffer that has to be prepared when there is a change in contents before and after switching between 2D and 3D becomes unnecessary.
- the plane configuration as in the present reference example is also applicable to the case of notifying the advance notice of switching as in the second embodiment.
- each block of the video disc player 1 may be configured by hardware logic, or may be realized by software using a CPU as described below. That is, the video disc player 1 includes a CPU (central processing unit) that executes instructions of a control program that realizes each function, a ROM (read only memory) that stores the program, and a RAM (random access memory) that expands the program. And a storage device (recording medium) such as a memory for storing the program and various data.
- a CPU central processing unit
- ROM read only memory
- RAM random access memory
- An object of the present invention is to provide a recording medium in which a program code (execution format program, intermediate code program, source program) of a control program for a video disc player, which is software for realizing the above-described functions, is recorded so as to be readable by a computer. This can also be achieved by supplying to the video disc player and reading and executing the program code recorded on the recording medium by the computer (or CPU or MPU).
- a program code execution format program, intermediate code program, source program
- Examples of the recording medium include tapes such as magnetic tapes and cassette tapes, magnetic disks such as floppy (registered trademark) disks / hard disks, and disks including optical disks such as CD-ROM / MO / MD / DVD / CD-R.
- Card system such as IC card, IC card (including memory card) / optical card, or semiconductor memory system such as mask ROM / EPROM / EEPROM / flash ROM.
- the video disc player may be configured to be connectable to a communication network, and the program code may be supplied via the communication network.
- the communication network is not particularly limited.
- the Internet intranet, extranet, LAN, ISDN, VAN, CATV communication network, virtual private network, telephone line network, mobile communication network, satellite communication. A net or the like is available.
- the transmission medium constituting the communication network is not particularly limited.
- wired such as IEEE 1394, USB, power line carrier, cable TV line, telephone line, ADSL line, etc.
- infrared rays such as IrDA and remote control, Bluetooth (Registered trademark), 802.11 wireless, HDR, mobile phone network, satellite line, terrestrial digital network, and the like can also be used.
- the present invention can also be realized in the form of a computer data signal (transmission medium) embedded in a carrier wave in which the program code is embodied by electronic transmission.
- the content playback apparatus of the present invention can be suitably used for a video disc player or the like.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
Description
方式としては両眼視差を利用したもので、右目用と左目用の映像を空間分割あるいは周波数分割で投影し、特殊な眼鏡でそれを左右の映像に分離するというものである。
特許文献1では、左目用と右目用の映像をインタリーブして記録して、既存DVDの管理情報からは左目用映像のみを参照するようにしておく。同時に、拡張管理情報を追加し、そこからは両目用の映像を参照するようにしておく。このようにすることで、既存のDVDプレーヤとの互換性を保ったままスムーズに3Dに移行することが可能となっている。
データ取得部220は制御部270やAV再生部230からの指示に従って、光ディスク210からAVストリームや管理情報を読み出す。
AV再生部230は、読み出したAVストリームを復号し、出力する。2D映像の場合は、図中の左映像側(左目用映像側)に復号した映像を出力し、3D映像の場合には、左映像側、右映像側(左目用映像側)の両方に復号した映像を出力する。
左映像出力部240および右映像出力部250は、それぞれ左目用映像および右目用映像を外部に出力する。
制御部270は、データ取得部220を通じて読み出した立体映像配置情報に基づき、予めコンテンツ作成者の指定したタイミングで切換部260を制御し、これにより、2D映像から3D映像に適切なタイミングで切り換える。
BD-ROM規格では現時点で3D映像に対応していないが、将来的には対応が求められることが予想される。その際には、復号によるビデオ画像だけでなく、Java(登録商標)言語によるグラフィックス画像の3D対応化が必須となるであろう。
以下、本発明の実施の形態によるコンテンツ再生装置について図面を参照しながら説明を行う。尚、以下では、ビデオディスクプレーヤの例でコンテンツ再生装置を説明するが、本発明はこれに限定されず、PC(Personal Computer)等、形態を問わない。
図1は、本実施の形態によるビデオディスクプレーヤの一構成例を示す。
ビデオディスクプレーヤ1は、2D用画像データ(ビデオ画像用の画像データ及びグラフィックス画像用の画像データ)と3D用画像データが混在するコンテンツデータの再生装置であって、光ディスク10、データ取得部20、プログラム実行部30、AV再生部40、全体制御部50、U/I60、出力制御部70、切換部80、左映像出力部90a、右映像部出力部90b、左映像合成部100a、右映像合成部100b、左ビデオプレーン110a、右ビデオプレーン110b、左グラフィックスプレーン120a、右グラフィックスプレーン120bで構成される。
データ取得部20は、全体制御部50、AV再生部40、プログラム実行部30からの指示に従って、プログラムやAVデータを含む再生データ等を記録した光ディスク10から各種データを読み出す。
プログラム実行部30は、全体制御部50からの指示に従って、光ディスク10から読み出されたプログラムを実行し、生成した(生成された)グラフィックスを左グラフィックスプレーン120aおよびプログラムの内容によっては右グラフィックスプレーン120bに書き込む。また、後述するように、出力制御部70との間の相互情報通知が可能となっている。
全体制御部50は、U/I60から送信されるユーザ操作に応じて、ビデオディスクプレーヤ1全体の制御を行う。後述するタイトル情報ファイルを光ディスク10から読み出し、AV再生部40、プログラム実行部30の起動等制御を行う。
切換部80は、右映像出力部90bに出力する映像を、出力制御部70からの指示に応じて、左映像合成部100aからのものか右映像合成部100bのものかを切り換える。
出力制御部70は、プログラム実行部30およびAV再生部40から制御信号に基づき、切換部80を制御する。
左映像合成部100aは、左ビデオプレーン110aと左グラフィックスプレーン120aに記憶(格納)されている画像を合成する。右映像合成部100bも同様であり、右ビデオプレーン110bと右グラフィックスプレーン120bに格納されている画像を合成する。
左グラフィックスプレーン120aおよび右グラフィックスプレーン120bはそれぞれの左目用および右目用の表示用グラフィックスイメージを保持しておくためのイメージバッファメモリである。左グラフィックスプレーン120aおよび右グラフィックスプレーン12bへのグラフィックスの描画には、ダブルバッファリングの技術が用いられており、各プレーン120aはそれぞれ表バッファと裏バッファとを有する。プログラム実行部30(が実行するプログラム)により裏バッファへのグラフィックスの描画が行われ、グラフィックス全体が描画された後、裏バッファから出力に供する表バッファへまとめてグラフィックスが転送される。これにより描画途中の状態は見えないようになっている。
図2は、光ディスク10中に格納された各種データを管理するためのファイル・ディレクトリ構成を示す説明図である。以下、簡単にファイルの説明を行う。
プレイリストファイルは、プレイリストおよびプレイリストから参照するAVデータに関する属性情報を格納したファイルである。なお、プレイリストとは、AVデータのどこからどこまでをどのような順序で再生するかの情報である。
タイトル情報ファイルは、光ディスク10中の各タイトルに関する情報を格納したファイルである。格納されている情報としては、各タイトルが使用するプレイリストファイルおよびプログラムファイルの参照情報がある。なお、ディスク挿入時に自動再生させたいタイトルのファイル名を“00000.TTL”とする。
図3は、本実施形態におけるタイトル情報ファイルおよびプレイリストファイルのデータ構成を示す説明図である。
フィールドPlayListFileNameは、本ファイルに対応するタイトルを構成するプレイリストを格納するファイルのファイル名である。
フィールドProgramFileNameは、本ファイルに対応するタイトルを構成するプログラムを格納するファイルのファイル名である。
クリップに関する情報には、フィールドClipFileName[i],フィールドDimension[i]がある。なお、iはプレイリスト中の何番目のクリップに関する情報かを示す。
フィールドClipFileName[i]は、プレイリスト中のi番目のクリップファイルのファイル名を格納する。また、フィールドDimension[i]は、プレイリスト中のi番目のクリップファイルに格納されたビデオが3Dか2Dかを示し、値が0の場合、2D、1の場合、3Dを意味する。
図4を用いて、本実施形態における全体制御部50の全体的な処理の流れを説明する。
続いて、データ取得部20を通じて選択されたタイトル情報ファイルを読み出す(S10c)。
図5を用いて、本実施形態におけるプログラム実行部30におけるプログラム実行処理の流れを説明する。
次に、読み出したプログラムを起動し(S20b)、該プログラムにより、AV再生部40から出力制御部70を介して受け取った後述の2D-3D制御情報に基づいて、2D再生であれば、左グラフィックスプレーン120aにグラフィックスを描画し、3D再生であれば、左グラフィックスプレーン120a及び右グラフィックスプレーン120bにグラフィックスを描画する。そして、プログラムが終了すると(S20c)、全体制御部50へ終了通知を行う(S20d)。なお、本ビデオディスクプレーヤ1は、2Dから3D再生に切り換わる時の動作(処理)に特徴があるものであるが、プログラム実行部30及び当該実行部30が実行するプログラムの特徴的な動作については後述する。
図6を用いて、本実施形態におけるAV再生部40におけるプレイリスト再生処理の流れを説明する。
次に、読み出し対象クリップのインデックスである変数iを0に初期化し(S30b)、インデックスが本プレイリスト中のクリップ数未満(i<NumOfClips)の間、以下に記述する処理を実行する。
続いて、iが0のときに限り、デコードを開始し(デコーダを起動し)(S30f)、読み出したクリップのクリップを順次デコードし、2D再生であれば、左ビデオプレーン110aのみに対して、3D再生であれば、左ビデオプレーン110a、右ビデオプレーン110b両方に対して復号したビデオを出力する。なお、ディスク10には、2Dのクリップファイルについては、左目用AVデータのみ格納され、3Dのクリップファイルについては、左目用及び右目用の両方のAVデータが格納されているものとする。
S30eの後(またはS30fの後)、iをインクリメントし(S30g)、ステップS30cにジャンプする。
もし、ステップS30cでiがクリップ数以上(i≧NumOfClips)の場合、現在デコード中のクリップのデコード終了後(S30h)、全体制御部50への終了通知を行う(S30i)。
本ビデオディスクプレーヤ1では、上述のように、左ビデオプレーン110aのビデオと左グラフィックスプレーン120aのグラフィックスを合成する左映像合成部100aと、右ビデオプレーン110bのビデオと右グラフィックスプレーン120bのグラフィックスを合成する右映像合成部100bと、を備え、出力制御部70が2D-3D制御情報に基づき切換部80を制御し、右映像出力部90bへの映像の供給元を左映像合成部100aと右映像合成部100bとの間で切り換えることで、2Dから3Dへの切り換えを行うことができる。そして、本ビデオディスクプレーヤの特徴は、この2Dから3Dへの切り換えを、右グラフィックスプレーン120bへの1面分の描画の完了通知をプログラム制御部30から受けた後に行い、ビデオをグラフィックスと同時に3D再生できるようにしたことにある。以下は、この特徴的な動作に必要な処理例である。
出力制御部70は現在の2D/3Dの状態を管理しており、受け取った2D-3D制御情報のフィールドDimension[i]を参照し2D/3D状態に変化があるかどうかをチェックする(S40b)。変化があればさらに2Dから3Dへの変化かをチェックする(S40c)。
その上で、切換部80を制御して、右映像出力部90bへの出力を、左映像合成部100bの映像から、右映像合成部100bの映像に切り換える(S40f)。
本実施形態ではコンテンツは光ディスクに記録してあるが、本発明はそれに限定されるものではなく、ハードディスク、フラッシュメモリのような各種記録媒体でも適用可能であり、さらに放送やインターネットでのストリーミングにも適用可能である。ストリーミングに適用する場合は、2D-3D制御情報はストリーミングされるストリームに多重化して送信することになる。
本発明の他の実施の形態について図1を参照し図10乃至図13に基づいて説明すれば、以下のとおりである。実施の形態1との違いは、2Dから3Dへの切換に当たって事前にAV再生部から切換の予告を通知することで、ビデオのクリップファイルが2Dから3Dに切り換わるときに、クリップファイルの先頭から、ビデオ画像をグラフィックス画像と共に3D再生可能にしたものである。なお、説明の便宜上、前記の実施の形態1において示した部材と同一の機能を有する部材には、同一の符号を付し、その説明を省略する。また、実施の形態1において定義した用語については、特に断らない限り本実施の形態においてもその定義に則って用いるものとする。
図1と共通であるため説明を省略する。
図2と共通であるため説明を省略する。
プレイリストファイルおよびタイトル情報ファイルのうち、タイトル情報ファイルについて、図3(A)と共通であるため説明を省略する。
PrepTime[i]は、i番目のクリップファイルについて、プログラム実行部30が一面分のグラフィックスを生成(描画)するのにかかる時間(予想生成時間)を示すものである。例えば、本実施形態のビデオディスクプレーヤでは、PrepTime[n]がT1(時間)を示し、n番目のクリップファイルで2Dから3D再生へ切り換える場合は、n-1番目のクリップファイルの再生終了時刻のT1時間前に、右グラフィックスプレーン120bへのグラフィックスの描画を開始させる。これにより、n番目のクリップファイルの開始時刻には、右グラフィックスプレーン120bには一面分のグラフィックスの描画が完了しているので、上記n番目のクリップファイルの再生時にクリップファイルの先頭から、ビデオ画像とグラフィックス画像を同時に3D再生できる。
図4と共通であるため説明を省略する。
図5と共通であるため説明を省略する。
図11は、本実施形態におけるAV再生部40のプレイリスト再生処理の流れを示す説明図である。
次に、読み出し対象クリップのインデックスである変数iを0に初期化し(S70b)、フィールドClipFileName[0]で指定されるクリップファイルを光ディスク10から読み出し開始する(S70c)。
その後、デコードを開始し(S70f)、データが2D用画像データであれば(2D再生であれば)、左ビデオプレーン110aのみに対して、3D用画像データであれば(3D再生であれば)、左ビデオプレーン110a、右ビデオプレーン110b両方に対して復号したビデオを出力する。読み出し対象クリップのインデックスである変数iをインクリメントする(S70g)。
次に、フィールドDimension[i]で指定される2D-3D制御情報を参照し、2Dから3Dへの切り換えかどうかを判断し(S70j)、2Dから3Dへの切り換えの場合、i-1番目のクリップの表示が終了するよりPrepTime[i]で指定される時間分前になるまで待ち(S70k)、その上で出力制御部70に対し2D-3D制御情報を通知する(S70l)。その後i番目のクリップの表示が開始されるのを待ち(S70m)、開始されたら出力制御部70に対し切換通知を送信し(S70n)、iをインクリメントし(S70o)、ステップS70hにジャンプする。
ステップS70iでiがクリップ数以上(i≧NumOfClips)の場合、現在デコード中のクリップのデコード終了後(S70p)、全体制御部50への終了通知を行う。
また、ステップS70jで、2Dから3Dへの切り換えでない場合は、図示は省略するが以下のような処理を行う。再生する次元が変わらない場合は、iをインクリメントしステップS70hにジャンプする、3Dから2Dへの切り換えの場合は、i番目のクリップの表示開始時刻になってから、出力制御部70に対し2D-3D制御情報を通知すると共に、出力制御部70に対し切換通知を送信し、iをインクリメントし(S70o)、ステップS70hにジャンプする。
図12を用いて、2D-3D間の切換時の出力制御部70の処理を説明する。プログラム実行部30およびプログラム実行部30で実行されるプログラムの処理は、実施の形態1と共通であるため、その説明を省略する。
2Dから3Dへの切換の場合、内部状態を3Dに更新し、まずプログラム実行部30に対して、2D-3D制御情報を通知する(S80a)。
その後、プログラムからの3Dグラフィックス描画完了の通知とAV再生部40からの切換通知を待ち(S80b)、双方が到着したことを見届けた上で、切換部80を制御して、右映像出力部90bへの出力を、左映像合成部100aからの映像から、右映像合成部100bの映像に切り換える。
2Dから3Dへの切換以外の場合、内部状態を必要に応じて更新する。
具体的には、2Dから3Dに切り換わる際の2D-3D制御情報の通知(2Dから3Dへの切換予告通知)を受けて、右グラフィックスプレーン120aおよび左グラフィックスプレーン120bの裏バッファに描画を開始し、AV再生部40からの切換通知(3D切換通知)とともに、裏バッファの内容を表バッファに転送するようにプログラムを作成すればよい。
言い換えると、コンテンツ作成者が指定する2Dから3Dへの切り換え準備時間の情報がなければ、右グラフィックスプレーン描画にかかる時間をビデオディスクプレーヤは知ることができないため、3Dに切り換わるまでに右グラフィックスプレーンの描画が完了することを保証できるよう、早めに右グラフィックスプレーンへの描画を開始する必要があるが、準備期間を指定することで、妥当なタイミングに上記描画を開始すればよくなるので、早めに右グラフィックスプレーンへの描画を開始することによるパフォーマンスの低下を防ぐことができる。
本実施形態では予告通知のタイミングを時間で指定しているが、ステップ数や処理内容等、準備にかかる時間や処理量が見積もれるものであれば何でもよいことは言うまでもない。
参考例のコンテンツ再生装置について図14に基づいて説明すれば、以下のとおりである。実施の形態1を示す図1との違いは、右映像合成部100bへの出力をプログラム実行部からの指示に応じて右グラフィックスプレーン120bの出力と左グラフィックスプレーン120aの出力との間で切り換える切換部130を追加した点である。このことにより後述のように、3DのAVデータと2Dグラフィックスの組み合わせにおけるパフォーマンスを向上させることが可能となる。なお、説明の便宜上、前記の実施の形態1において示した部材と同一の機能を有する部材には、同一の符号を付し、その説明を省略する。また、実施の形態1において定義した用語については、特に断らない限り本実施の形態においてもその定義に則って用いるものとする。
図1との差分に絞って図14を用いて説明する。
前述のように、右グラフィックスプレーン120bと右映像合成部100bの間に、切換部130を追加している。
切換部130は、右映像合成部100bへの出力を右グラフィックスプレーン120bの出力と左グラフィックスプレーン120aの出力の間をプログラム実行部30からの指示に応じて切り換える。
プログラム実行部30は、切換部130との間に前述の切換を指示することが可能なインタフェースを備え、さらに実行させるプログラムに対し、前述の切換を制御できるAPI(Application Program Interface)を提供する。
図2と共通であるため説明を省略する。
図3と共通であるため説明を省略する。
図4と共通であるため説明を省略する。
図5と共通であるため説明を省略する。
図6と共通であるため説明を省略する。
実施の形態1との違いはプログラム実行部30上で実行するプログラムにある。
AVデータが3Dの際に、グラフィックスも3Dで表示したい場合、図9のフローチャートのS60bとS60cの間で、切換部130の出力するイメージを右グラフィックスプレーン120bのものに切り換えるAPIを呼び出す。
一方、AVデータが3Dの際でもグラフィックスは2Dで表示したい場合、図9のフローチャートのS60bとS60cの間で、切換部130の出力するイメージを左グラフィックスプレーン120aからのものに切り換えるAPIを呼び出し、S60c、S60dの処理は行わない。
参考例2のコンテンツ再生装置について図15に基づいて説明すれば、以下のとおりである。実施の形態1を示す図1との違いは、2D用グラフィックスプレーン120cを追加した点と、出力制御部70から制御信号に基づき、左映像合成部100aへの入力を、左グラフィックスプレーン120aと2D用グラフィックスプレーン120cとの間で切り換える切換部130を追加した点である。このことにより後述のように、実施の形態1で必要であった2Dと3Dとの間の切り換えの前後でその内容に変化がある場合に用意する必要のあったプログラムで用意する裏バッファが不要になる。なお、説明の便宜上、前記の実施の形態1において示した部材と同一の機能を有する部材には、同一の符号を付し、その説明を省略する。また、実施の形態1において定義した用語については、特に断らない限り本実施の形態においてもその定義に則って用いるものとする。
本参考例の全体システム構成について、図1との差分に絞って図15を用いて説明する。
前述のように、2D用グラフィックスプレーン120cを追加し、さらに出力制御部70から制御信号に基づき、左映像合成部100aへの入力を、左グラフィックスプレーン120aと2D用グラフィックスプレーン120cとの間で切り換える切換部130を追加している。
また、プログラム実行部30は、プログラムの内容によって、左グラフィックスプレーン120a及び右グラフィックスプレーン120bだけでなく2D用グラフィックスプレーン120cに生成した描画を書き込む。
図2と共通であるため説明を省略する。
図3と共通であるため説明を省略する。
図4と共通であるため説明を省略する。
図5と共通であるため説明を省略する。
図6と共通であるため説明を省略する。
図16乃至図18を用いて、2D-3D間の切換時の本ビデオディスクプレーヤ1の処理(AV再生部40からの2D-3D制御情報の通知後の処理)、より具体的には出力制御部70、プログラム実行部30及びプログラム実行部30で実行されるプログラムの処理の流れについて説明する。ほとんどの処理は実施の形態1と同じであり、対応関係を示すため、ステップを示す符号は、対応する実施の形態1のステップ符号の「S」を「S1」に置き換えたものとしている(例:S40a→S140a)。
出力制御部70は現在の2D/3Dの状態を管理しており、受け取った2D-3D制御情報のフィールドDimension[i]を参照し2D/3D状態に変化があるかどうかチェックする(S140b)。変化があれば、プログラム実行部30からの後述の描画
完了の通知を待つ(S140e)。
描画完了の通知があったら、2Dから3Dへの切り換えの場合は、切換部80を制御して、右映像出力部90bへの出力を左映像合成部100bの映像から右映像合成部100bの映像に切り換え、切換部130を制御して、左映像合成部100aへの出力を2D用グラフィックスプレーン120cから左グラフィックスプレーン120aに切り換える(S140f)。なお、3Dから2Dへの切り換えの場合はその逆に切り換える。
なお、本参考例のようなプレーン構成は実施の形態2のように切換の予告を通知する場合にも適用可能なことは言うまでもない。
最後に、ビデオディスクプレーヤ1の各ブロックは、ハードウェアロジックによって構成してもよいし、以下のようにCPUを用いてソフトウェアによって実現してもよい。すなわち、ビデオディスクプレーヤ1は、各機能を実現する制御プログラムの命令を実行するCPU(central processing unit)、上記プログラムを格納したROM(read only memory)、上記プログラムを展開するRAM(random access memory)、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアであるビデオディスクプレーヤの制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、上記ビデオディスクプレーヤに供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
Claims (7)
- 再生データからプログラムとビデオデータを取得するデータ取得部と、
ビデオ画像を記憶する第1のビデオプレーンと第2のビデオプレーンと、
グラフィックス画像を記憶する第1のグラフィックスプレーンと第2のグラフィックスプレーンと、
前記プログラムを実行して前記グラフィックス画像を生成し、2D(Dimension)用グラフィックス画像は、前記第1のグラフィックスプレーンに出力し、3D用グラフィックス画像は、それぞれ前記第1および前記第2のグラフィックスプレーンに出力するプログラム実行部と、
前記ビデオデータを復号し、2D用ビデオ画像は、前記第1のビデオプレーンに出力し、3D用ビデオ画像は、それぞれ前記第1および前記第2のビデオプレーンに出力する復号部と、
前記第1のビデオプレーンと前記第1のグラフィックスプレーンに記憶された画像を合成する第1の合成部と、
前記第2のビデオプレーンと前記第2のグラフィックスプレーンに記憶された画像を合成する第2の合成部と、
2D画像用データの再生時は、前記第1の合成部の合成画像を出力し、3D画像用データの再生時は、前記第1の合成部の合成画像と、前記第2の合成部の合成画像を出力するよう切り換える切換部と、を備え、
前記切換部は、前記再生データが2D画像用データから3D画像用データに変更した場合、前記プログラム実行部における一画面分の3D用グラフィックス画像の生成完了に基づいて、前記切り換えを実行することを特徴とするコンテンツ再生装置。 - 前記一画面分の3D用グラフィックス画像の予想生成時間に関する時間情報を取得する時間情報取得部を備え、
前記ビデオデータが2D用画像データから3D用画像データに切り換わる場合、
前記プログラム実行部は、前記切り換わる時刻より遅くとも前記予想生成時間前に、前記3D用グラフィックス画像の生成を開始し、
前記切換部は、前記プログラム実行部による3D用グラフィックス画像の生成完了、及び、前記復号部における出力ビデオ画像の2D用ビデオ画像から3D用ビデオ画像への切り換わりに基づいて前記切り換えを実行することを特徴とする請求項1に記載のコンテンツ再生装置。 - 前記時間情報取得部は、前記再生データから前記時間情報を取得することを特徴とする請求項2に記載のコンテンツ再生装置。
- 再生データからプログラムとビデオデータを取得し、
前記プログラムを実行して前記グラフィックス画像を生成し、2D(Dimension)用グラフィックス画像は、第1のグラフィックスプレーンに出力し、3D用グラフィックス画像は、それぞれ第1および前記第2のグラフィックスプレーンに出力し、
前記ビデオデータを復号し、2D用ビデオ画像は、第1のビデオプレーンに出力し、3D用ビデオ画像は、それぞれ前記第1および前記第2のビデオプレーンに出力し、
2D画像用データの再生時は、前記第1のビデオプレーンと前記第1のグラフィックスプレーンに記憶された画像の合成画像を出力し、
前記再生データが2D画像用データから3D画像用データに変更した際に、一画面分の3D用グラフィックス画像の生成完了により、前記第2のビデオプレーンと前記第2のグラフィックスプレーンに記憶された画像の合成画像を出力することを特徴とする2D画像用データ及び3D画像用データが混在するコンテンツデータの再生方法。 - 請求項4に記載の再生方法をコンピュータに実行させることを特徴とするプログラム。
- 請求項5に記載のプログラムをコンピュータ読み取り可能に記録したことを特徴とする記録媒体。
- 請求項3に記載のコンテンツ再生装置に供する記録媒体であって、
2D画像用データ及び3D画像用データが混在するビデオデータ及び同グラフィックス画像を生成するプログラムを記録し、前記2D画像用データ及び3D画像用データはそれぞれ所定の単位毎に区分されて記録され、2D画像用データの記録区分から3D画像用データに切り換わる3D画像用データの記録区分に、前記プログラムにより当該記録区分の3D用ビデオ画像と共に表示される3D用グラフィックス画像の生成に必要な予想生成時間に関する前記時間情報を記録したことを特徴とする記録媒体。
Priority Applications (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP09830241.7A EP2362672B1 (en) | 2008-12-01 | 2009-08-20 | Contents reproduction device, reproduction method, program and recording medium |
BRPI0922763A BRPI0922763B8 (pt) | 2008-12-01 | 2009-08-20 | aparelho de reprodução de conteúdo e meio de gravação de conteúdo |
MX2011005783A MX2011005783A (es) | 2008-12-01 | 2009-08-20 | Aparato de reproduccion de contenido y medio de grabacion. |
KR1020117013056A KR101339535B1 (ko) | 2008-12-01 | 2009-08-20 | 콘텐츠 재생 장치 및 기록 매체 |
JP2010541258A JP5204245B2 (ja) | 2008-12-01 | 2009-08-20 | コンテンツ再生装置、再生方法、プログラム及び記録媒体 |
CN2009801478817A CN102227913B (zh) | 2008-12-01 | 2009-08-20 | 内容再生装置 |
RU2011126985/07A RU2504916C2 (ru) | 2008-12-01 | 2009-08-20 | Устройство воспроизведения содержимого и носитель записи |
US13/132,009 US8933987B2 (en) | 2008-12-01 | 2009-08-20 | Content reproducing apparatus and recording medium for switching graphics and video images from 2D to 3D |
HK12101235.9A HK1161013A1 (en) | 2008-12-01 | 2012-02-08 | Content reproducing apparatus |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008306533 | 2008-12-01 | ||
JP2008-306533 | 2008-12-01 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2010064472A1 true WO2010064472A1 (ja) | 2010-06-10 |
Family
ID=42233128
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2009/064539 WO2010064472A1 (ja) | 2008-12-01 | 2009-08-20 | コンテンツ再生装置、再生方法、プログラム及び記録媒体 |
Country Status (13)
Country | Link |
---|---|
US (1) | US8933987B2 (ja) |
EP (1) | EP2362672B1 (ja) |
JP (1) | JP5204245B2 (ja) |
KR (1) | KR101339535B1 (ja) |
CN (1) | CN102227913B (ja) |
BR (1) | BRPI0922763B8 (ja) |
HK (1) | HK1161013A1 (ja) |
HU (1) | HUE029122T2 (ja) |
MX (1) | MX2011005783A (ja) |
MY (1) | MY154752A (ja) |
PL (1) | PL2362672T3 (ja) |
RU (1) | RU2504916C2 (ja) |
WO (1) | WO2010064472A1 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012004864A1 (ja) * | 2010-07-07 | 2012-01-12 | 日本Bs放送株式会社 | 映像配信装置及び映像配信方法並びに映像配信プログラム |
JP2012123821A (ja) * | 2009-04-03 | 2012-06-28 | Sony Corp | 情報処理装置、情報処理方法、及び、プログラム |
JP2012147121A (ja) * | 2011-01-07 | 2012-08-02 | Sony Corp | 画像表示システム、表示装置、並びにシャッター眼鏡 |
CN103026715A (zh) * | 2010-07-27 | 2013-04-03 | 松下电器产业株式会社 | 影像数据的输出装置 |
US8472731B2 (en) | 2009-04-03 | 2013-06-25 | Sony Corporation | Image signal decoding apparatus, image signal decoding method, image signal encoding apparatus, image signal encoding method, and program |
US8718355B2 (en) | 2009-04-03 | 2014-05-06 | Sony Corporation | Information processing device, information processing method, and program |
JP2014516432A (ja) * | 2011-03-31 | 2014-07-10 | トムソン ライセンシング | 立体的なグラフィックオブジェクトを定義するためのシーングラフ |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8558871B2 (en) * | 2009-10-02 | 2013-10-15 | Panasonic Corporation | Playback device that can play stereoscopic video, integrated circuit, playback method and program |
JP2013042196A (ja) * | 2009-12-21 | 2013-02-28 | Panasonic Corp | 再生装置 |
JP5450118B2 (ja) * | 2010-01-14 | 2014-03-26 | ソニー株式会社 | 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム |
JP5058316B2 (ja) * | 2010-09-03 | 2012-10-24 | 株式会社東芝 | 電子機器、画像処理方法、及び画像処理プログラム |
JP5092033B2 (ja) * | 2011-03-28 | 2012-12-05 | 株式会社東芝 | 電子機器、表示制御方法及び表示制御プログラム |
CN103873930B (zh) * | 2014-03-20 | 2020-05-22 | 海信视像科技股份有限公司 | 电视中播放演示视频的方法及电视终端 |
JP6078673B1 (ja) * | 2016-02-29 | 2017-02-08 | 三菱日立パワーシステムズ株式会社 | 動画再生装置、動画再生方法、およびプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1997032437A1 (en) * | 1996-02-28 | 1997-09-04 | Matsushita Electric Industrial Co., Ltd. | High-resolution optical disk for recording stereoscopic video, optical disk reproducing device, and optical disk recording device |
JP2005252989A (ja) * | 2004-03-08 | 2005-09-15 | Kazunari Era | 立体視化パラメータ記憶媒体、立体視化パラメータ埋込装置、立体視画像再生装置、立体視化パラメータ埋込プログラム、立体視画像再生プログラム、及びビデオコンテンツデータの流通方法 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2014756C1 (ru) * | 1992-10-08 | 1994-06-15 | Петер Мигалович | Монокулярная одноканальная стереотелевизионная система |
TW436777B (en) * | 1995-09-29 | 2001-05-28 | Matsushita Electric Ind Co Ltd | A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween |
US6023277A (en) * | 1996-07-03 | 2000-02-08 | Canon Kabushiki Kaisha | Display control apparatus and method |
WO1998025413A1 (en) | 1996-12-04 | 1998-06-11 | Matsushita Electric Industrial Co., Ltd. | Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device |
US6925250B1 (en) * | 1997-08-29 | 2005-08-02 | Matsushita Electric Industrial Co., Ltd. | Optical disc for recording high resolution and normal image, optical disc player, optical disc recorder, and playback control information generator |
JP4149037B2 (ja) * | 1998-06-04 | 2008-09-10 | オリンパス株式会社 | 映像システム |
KR100397511B1 (ko) | 2001-11-21 | 2003-09-13 | 한국전자통신연구원 | 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법 |
RU2237283C2 (ru) * | 2001-11-27 | 2004-09-27 | Самсунг Электроникс Ко., Лтд. | Устройство и способ представления трехмерного объекта на основе изображений с глубиной |
US20040027267A1 (en) * | 2002-03-22 | 2004-02-12 | Rousso Armand M. | 3D entertainment system |
US20050248561A1 (en) * | 2002-04-25 | 2005-11-10 | Norio Ito | Multimedia information generation method and multimedia information reproduction device |
JP2004241798A (ja) * | 2003-02-03 | 2004-08-26 | Sharp Corp | 立体映像記録再生装置 |
KR100871527B1 (ko) * | 2003-02-19 | 2008-12-05 | 파나소닉 주식회사 | 기록매체, 재생장치, 기록방법, 컴퓨터 프로그램을 기록한 컴퓨터 판독가능한 기록매체, 재생방법 |
JP2004357156A (ja) * | 2003-05-30 | 2004-12-16 | Sharp Corp | 映像受信装置および映像再生装置 |
US7853121B2 (en) * | 2004-01-30 | 2010-12-14 | Panasonic Corporation | Recording medium, reproduction device, program, and reproduction method |
JP4461834B2 (ja) * | 2004-02-23 | 2010-05-12 | ソニー株式会社 | 映像表示方法、映像表示方法のプログラム、映像表示方法のプログラムを記録した記録媒体及び映像表示装置 |
WO2006033046A1 (en) | 2004-09-22 | 2006-03-30 | Koninklijke Philips Electronics N.V. | 2d / 3d switchable display device and method for driving |
JP2006155384A (ja) | 2004-11-30 | 2006-06-15 | Nippon Telegr & Teleph Corp <Ntt> | 映像コメント入力・表示方法及び装置及びプログラム及びプログラムを格納した記憶媒体 |
EP2105032A2 (en) * | 2006-10-11 | 2009-09-30 | Koninklijke Philips Electronics N.V. | Creating three dimensional graphics data |
KR20080039758A (ko) * | 2006-11-01 | 2008-05-07 | 삼성전자주식회사 | 그래픽 데이터 방향 변환 장치 및 방법, 재생 장치 및 재생방법 |
KR101282802B1 (ko) * | 2006-11-17 | 2013-07-05 | 삼성전자주식회사 | 통합재생시 현재재생지점 안내방법 및 이를 적용한영상기기 |
US20080240230A1 (en) * | 2007-03-29 | 2008-10-02 | Horizon Semiconductors Ltd. | Media processor with an integrated TV receiver |
BRPI0820739B1 (pt) | 2007-12-14 | 2020-10-20 | Koninklijke Philips N.V. | método de reprodução de informação de vídeo, dispositivo de reprodução para reproduzir a informação de vídeo, sinal, e, portador de gravação |
RU2496157C2 (ru) * | 2008-09-30 | 2013-10-20 | Панасоник Корпорэйшн | Носитель записи, на котором записано 3d видео, устройство воспроизведения для воспроизведения 3d видео и большая интегральная схема системы |
MY151243A (en) * | 2008-09-30 | 2014-04-30 | Panasonic Corp | Recording medium, playback device, system lsi, playback method, glasses, and display device for 3d images |
-
2009
- 2009-08-20 HU HUE09830241A patent/HUE029122T2/en unknown
- 2009-08-20 EP EP09830241.7A patent/EP2362672B1/en not_active Not-in-force
- 2009-08-20 RU RU2011126985/07A patent/RU2504916C2/ru not_active IP Right Cessation
- 2009-08-20 JP JP2010541258A patent/JP5204245B2/ja active Active
- 2009-08-20 PL PL09830241.7T patent/PL2362672T3/pl unknown
- 2009-08-20 MX MX2011005783A patent/MX2011005783A/es active IP Right Grant
- 2009-08-20 BR BRPI0922763A patent/BRPI0922763B8/pt active Search and Examination
- 2009-08-20 CN CN2009801478817A patent/CN102227913B/zh not_active Expired - Fee Related
- 2009-08-20 WO PCT/JP2009/064539 patent/WO2010064472A1/ja active Application Filing
- 2009-08-20 MY MYPI2011002445A patent/MY154752A/en unknown
- 2009-08-20 KR KR1020117013056A patent/KR101339535B1/ko active IP Right Grant
- 2009-08-20 US US13/132,009 patent/US8933987B2/en active Active
-
2012
- 2012-02-08 HK HK12101235.9A patent/HK1161013A1/xx not_active IP Right Cessation
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1997032437A1 (en) * | 1996-02-28 | 1997-09-04 | Matsushita Electric Industrial Co., Ltd. | High-resolution optical disk for recording stereoscopic video, optical disk reproducing device, and optical disk recording device |
JP2008067393A (ja) | 1996-02-28 | 2008-03-21 | Matsushita Electric Ind Co Ltd | 高解像度および立体映像記録用光ディスク、光ディスク再生装置、光ディスク記録装置 |
JP2005252989A (ja) * | 2004-03-08 | 2005-09-15 | Kazunari Era | 立体視化パラメータ記憶媒体、立体視化パラメータ埋込装置、立体視画像再生装置、立体視化パラメータ埋込プログラム、立体視画像再生プログラム、及びビデオコンテンツデータの流通方法 |
Non-Patent Citations (1)
Title |
---|
See also references of EP2362672A4 * |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9036930B2 (en) | 2009-04-03 | 2015-05-19 | Sony Corporation | Image signal decoding apparatus and image signal decoding method |
JP2012123821A (ja) * | 2009-04-03 | 2012-06-28 | Sony Corp | 情報処理装置、情報処理方法、及び、プログラム |
US9426480B2 (en) | 2009-04-03 | 2016-08-23 | Sony Corporation | Image signal decoding apparatus and image signal decoding method |
US8472731B2 (en) | 2009-04-03 | 2013-06-25 | Sony Corporation | Image signal decoding apparatus, image signal decoding method, image signal encoding apparatus, image signal encoding method, and program |
US8503804B2 (en) | 2009-04-03 | 2013-08-06 | Sony Corporation | Image signal decoding apparatus and image signal decoding method |
US8538181B2 (en) | 2009-04-03 | 2013-09-17 | Sony Corporation | Image signal encoding apparatus and image signal encoding method |
US8718355B2 (en) | 2009-04-03 | 2014-05-06 | Sony Corporation | Information processing device, information processing method, and program |
US9225956B2 (en) | 2009-04-03 | 2015-12-29 | Sony Corporation | Information processing device, information processing method, and program |
WO2012004864A1 (ja) * | 2010-07-07 | 2012-01-12 | 日本Bs放送株式会社 | 映像配信装置及び映像配信方法並びに映像配信プログラム |
CN103026715A (zh) * | 2010-07-27 | 2013-04-03 | 松下电器产业株式会社 | 影像数据的输出装置 |
WO2012093532A3 (ja) * | 2011-01-07 | 2012-09-13 | ソニー株式会社 | 画像表示システム、表示装置、並びにシャッター眼鏡 |
JP2012147121A (ja) * | 2011-01-07 | 2012-08-02 | Sony Corp | 画像表示システム、表示装置、並びにシャッター眼鏡 |
JP2014516432A (ja) * | 2011-03-31 | 2014-07-10 | トムソン ライセンシング | 立体的なグラフィックオブジェクトを定義するためのシーングラフ |
US10332299B2 (en) | 2011-03-31 | 2019-06-25 | Thomson Licensing | Scene graph for defining a stereoscopic graphical object |
Also Published As
Publication number | Publication date |
---|---|
BRPI0922763B1 (pt) | 2020-09-24 |
JPWO2010064472A1 (ja) | 2012-05-10 |
JP5204245B2 (ja) | 2013-06-05 |
BRPI0922763A2 (pt) | 2016-01-05 |
PL2362672T3 (pl) | 2016-10-31 |
BRPI0922763B8 (pt) | 2021-04-20 |
KR20110093874A (ko) | 2011-08-18 |
MY154752A (en) | 2015-07-15 |
CN102227913A (zh) | 2011-10-26 |
EP2362672B1 (en) | 2016-04-20 |
RU2504916C2 (ru) | 2014-01-20 |
HK1161013A1 (en) | 2012-08-17 |
US8933987B2 (en) | 2015-01-13 |
RU2011126985A (ru) | 2013-01-10 |
US20110261157A1 (en) | 2011-10-27 |
EP2362672A1 (en) | 2011-08-31 |
KR101339535B1 (ko) | 2013-12-10 |
HUE029122T2 (en) | 2017-02-28 |
MX2011005783A (es) | 2011-06-30 |
CN102227913B (zh) | 2013-12-25 |
EP2362672A4 (en) | 2015-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5204245B2 (ja) | コンテンツ再生装置、再生方法、プログラム及び記録媒体 | |
JP6846130B2 (ja) | 3dビデオ上に3dグラフィックスをオーバレイするための方法及び装置 | |
JP5575659B2 (ja) | ビデオ再生のための三次元モード選択メカニズム | |
US8521000B2 (en) | Information recording and reproducing method using management information including mapping information | |
JP2012128944A (ja) | ディスク状記録媒体、並びに映像情報再生装置及び方法 | |
JP2006049988A (ja) | デジタルデータ記録再生装置 | |
JP2012023648A (ja) | 再生装置、再生方法、およびプログラム | |
JP5161323B2 (ja) | 再生方法及び装置 | |
JP5188209B2 (ja) | 表示制御装置、方法、およびプログラム | |
CN1898743B (zh) | 用于在记录介质上记录信息的方法和用于从记录介质读取信息的方法和装置 | |
JP2009060254A (ja) | 再生装置及び再生方法、並びにフォーマット | |
JP2009130499A (ja) | コンテンツ再生装置、コンテンツ処理システム及びコンテンツ処理方法 | |
JP4985892B2 (ja) | 再生装置および再生方法、並びに記録方法 | |
JP2007516554A (ja) | 記録媒体に情報を記録する方法、情報を含む記録媒体、および記録媒体から情報を読み出す方法ならびに装置 | |
KR20030023101A (ko) | 그래픽 재생장치 및 재생방법 | |
JP2007525131A (ja) | ビデオデータをインデキシングするための方法および関連装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WWE | Wipo information: entry into national phase |
Ref document number: 200980147881.7 Country of ref document: CN |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 09830241 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2010541258 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
WWE | Wipo information: entry into national phase |
Ref document number: MX/A/2011/005783 Country of ref document: MX |
|
ENP | Entry into the national phase |
Ref document number: 20117013056 Country of ref document: KR Kind code of ref document: A |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2009830241 Country of ref document: EP |
|
WWE | Wipo information: entry into national phase |
Ref document number: 4560/CHENP/2011 Country of ref document: IN |
|
WWE | Wipo information: entry into national phase |
Ref document number: 13132009 Country of ref document: US |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2011126985 Country of ref document: RU |
|
ENP | Entry into the national phase |
Ref document number: PI0922763 Country of ref document: BR Kind code of ref document: A2 Effective date: 20110601 |