WO2012023787A2 - 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법 - Google Patents

디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법 Download PDF

Info

Publication number
WO2012023787A2
WO2012023787A2 PCT/KR2011/006018 KR2011006018W WO2012023787A2 WO 2012023787 A2 WO2012023787 A2 WO 2012023787A2 KR 2011006018 W KR2011006018 W KR 2011006018W WO 2012023787 A2 WO2012023787 A2 WO 2012023787A2
Authority
WO
WIPO (PCT)
Prior art keywords
video
elementary stream
input
stream
stamp
Prior art date
Application number
PCT/KR2011/006018
Other languages
English (en)
French (fr)
Other versions
WO2012023787A3 (ko
Inventor
서종열
최지현
이준휘
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US13/817,369 priority Critical patent/US20130209063A1/en
Priority to KR1020127033699A priority patent/KR20130098184A/ko
Publication of WO2012023787A2 publication Critical patent/WO2012023787A2/ko
Publication of WO2012023787A3 publication Critical patent/WO2012023787A3/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G11B2020/10592—Audio or video recording specifically adapted for recording or reproducing multichannel signals
    • G11B2020/10611—3D video data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/7921—Processing of colour television signals in connection with recording for more than one processing mode

Definitions

  • the present invention relates to a digital receiver, and more particularly, to store and play 3D content in a digital receiver having a PVR (Personal Video Recorder) capable of receiving and storing 3-dimensional (3D) signals.
  • the present invention relates to a digital receiver capable of processing such content and a content processing method in a digital receiver.
  • Analog and digital broadcasts have been mixed in recent years. Recently, analog broadcasts have been terminated and full-scale digital broadcasts are being carried out worldwide.
  • the digital receiver should be able to process the content appropriately to reflect this reality.
  • the present invention is to solve the above-mentioned problems, in the present invention, while the digital receiver having a PVR capable of receiving and storing the 3D signal to store, play, etc. 3D content through the PVR, 2D / 3D in the process
  • An object of the present invention is to provide a digital receiver and a method for processing content in a digital receiver that support functions such as switching and view switching.
  • the present invention provides a digital receiver and a method for processing contents in a digital receiver capable of supporting an effective PVR function for a 3D stream for full resolution per eye that is not frame-compatible. Make it another task.
  • the present specification proposes the following technical solution in order to solve the above technical problem.
  • One example of a method for processing a digital broadcast signal for a 3D service includes: adding and storing a time-stamp to an input 3D video elementary stream; Extracting the stored 3D video elementary stream and uploading according to the system clock based on the time-stamp value of the extracted 3D video elementary stream; Decoding the uploaded 3D video elementary stream; And formatting and decoding the decoded 3D video data according to an output format.
  • the 3D video elementary stream may be a dual video stream including a base layer video stream and an enhancement layer video stream.
  • time-stamp may be added for each transport packet of a predetermined unit among transport packets for an input 3D video elementary stream.
  • the time-stamp may be added to a first transport packet received after a discontinuity period generated in a PID filtering process among transport packets for an input 3D video elementary stream.
  • An example of a digital receiver for a 3D service includes a download module for controlling a time-stamp to be stored in an input 3D video elementary stream, extracting the stored 3D video elementary stream, and extracting the extracted 3D video elementary stream.
  • a PVR module including an upload module for uploading according to a system clock based on a time-stamp value of the stream;
  • a decoder for decoding the uploaded 3D video elementary stream;
  • a formatter for formatting the decoded 3D video data according to an output format;
  • an output unit configured to output formatted 3D video data.
  • the download module may control to analyze the input 3D video elementary stream and generate and store index data for trick play according to the analysis result.
  • the 3D video elementary stream may be a dual video stream including a base layer video stream and an enhancement layer video stream.
  • the download module may add the time stamp to every transport packet of a predetermined unit among the transport packets for the input 3D video elementary stream.
  • the download module may add the time stamp to a first transport packet received after a discontinuity period generated in a PID filtering process among transport packets for an input 3D video elementary stream.
  • the digital receiver can provide various PVR functions for 3D content.
  • effective PVR function can be supported for 3D stream for full resolution fur-eye in digital receiver.
  • the digital receiver can effectively perform trick play, 2D / 3D conversion, and the like on 3D content using the PVR.
  • FIG. 1 is a block diagram illustrating an example of a configuration of a digital receiver including a 3D PVR module according to the present invention
  • FIG. 2 is a block diagram illustrating an example of configuration of a 3D PVR module of FIG. 1;
  • FIG. 3 is a block diagram illustrating an example of a configuration of a download module included in the 3D PVR module of FIG. 2;
  • 4 to 6 are diagrams for explaining an example of implementing a time stamp insertion in a download module according to the present invention.
  • FIG. 7 is a view illustrating an example of a time stamp index data structure when using a time stamp according to the present invention.
  • FIG. 8 is a view illustrating an example of an index configuration in a download module according to the present invention.
  • FIG. 9 is a block diagram illustrating an example of a configuration of an upload module included in the 3D PVR module of FIG. 2;
  • FIG. 10 is a flowchart illustrating an example of an operation of a receiver during 2D / 3D recording according to the present invention
  • FIG. 11 is a flowchart illustrating an example of an operation of a receiver during 2D mode playback according to the present invention
  • FIG. 12 is a flowchart illustrating an example of an operation of a receiver during 3D mode playback according to the present invention.
  • FIG. 13 is a flowchart illustrating an example of an operation of a receiver when a view switching request is performed according to the present invention.
  • module and “unit” for components used in the following description are merely given in consideration of ease of preparation of the present specification, and the “module” and “unit” may be used interchangeably with each other.
  • the present invention relates to a digital receiver, and more particularly to 3D in a digital receiver having a PVR (Personal Video Recorder) capable of receiving and storing 3-dimensional (3D) signals.
  • the present invention relates to a digital receiver capable of processing content such as storage, reproducing or playing, and a content processing method in a digital receiver.
  • the digital receiver stores and plays 3D contents through a PVR in accordance with the present invention, but supports various PVR functions such as 2D / 3D switching and view switching in the process. And a content processing method in a digital receiver.
  • the latter that is, full resolution per eye
  • full resolution per eye may be used to help the understanding of the present invention among the frame-compatible system and the full resolution per eye system for 3D implementation in a digital receiver.
  • the system will be described as an example.
  • the scope of the present invention is not limited to the full resolution fur eye, and it will be apparent that the same applies to the frame-compatible system as well as other systems related to the present invention in the same or similar principle.
  • the frame-compatible system is a system that recycles a conventional structure as it is when recording 3D content through a PVR in a digital receiver.
  • the full resolution fur eye system such as Multiview Video Coding (MVC), Scalable Video Coding (SVC), Dual Codec, etc.
  • MVC Multiview Video Coding
  • SVC Scalable Video Coding
  • Dual Codec Dual Codec
  • More efficient methods are needed to support view switching.
  • the present specification defines and describes methods such as time-stamp, PVR indexing, thumbnail extraction, and the like for providing 3D services according to the present invention.
  • a digital receiver wants to perform functions such as storing, playing, and time-shifting 3D content using a PVR, a dual video stream rather than a single video stream.
  • Different processing schemes or efficient schemes than the single video stream are required.
  • the digital receiver requires selective processing of a stream necessary to perform the requested trick play function, but in the case of a dual video stream, a download or save process is performed. It is necessary to clarify the identification and processing of each elementary stream (ES) in the or, otherwise the trick play may not be smoothly handled at the request of the user. The same is true when the user requests a trick play in the 2D / 3D mode through the PVR function.
  • a digital receiver and a digital receiver capable of various processes such as recording or storing 3D content or playing back, including trick play, for a dual video stream used in a full resolution fur eye system according to the present invention, It describes a content processing method.
  • FIG. 1 is a block diagram illustrating an example of a digital receiver configuration including a 3D PVR module according to the present invention.
  • an example of a digital receiver includes a receiving part 102, a VSB decoder 104, an input switch part 106, and a system decoder / demultiplexer. (System Decoder & Demux) 108, 3D PVR module 110, video decoder 112, view switching unit / 2D output unit 114, and formatter unit 116.
  • System Decoder & Demux System Decoder & Demux
  • the digital receiver is not shown in the configuration of FIG. 1, but is a receiver set (SET) including a display device or a display unit (hereinafter, a 'display device') or the configuration of FIG. 1 is a set-top box (STB).
  • the display device may be implemented in the form of a box) and connected to a display device through an interface.
  • the interface may be an HDMI (High Definition Multimedia Interface) interface between the set-top box and the display device, and an HDMI interface unit (not shown) may be provided in both devices.
  • the 3D signaling method defined in the HDMI standard may be applied to use HDMI. Therefore, even in the latter case, the 3D content processed for performing the PVR function in the set-top box may be output from the display device without a problem.
  • each component block shown in FIG. 1 may be modularized and merged according to a system, or may be divided into individual components.
  • the system decoder / demultiplexing is illustrated and described as one configuration for convenience.
  • FIG. 2 to be described later the two configurations are separately described for clarity.
  • the receiver 102 includes, for example, a tuner and a demodulator to tune a Radio Frequency (RF) channel and to receive and demodulate a digital signal through the tuned channel.
  • the digital signal is a moving picture experts group-2 (MPEG-2) transport stream.
  • MPEG-2 moving picture experts group-2
  • Elementary Streams (ES) included in the packetized packet ESs are included.
  • the video stream may be, for example, a single video ES, and includes a base layer and an enhancement layer. It may be a dual video elementary stream (dual video ES) configured as a layer.
  • dual video ES dual video elementary stream
  • the video stream is a single video elementary stream (e.g., side by side format or top and bottom format)
  • a left image and a right image (right image) Since each of the data has half-resolution, a configuration such as a scaler (not shown) may be further required.
  • the video decoder to be described later is, for example, one video decoder for decoding the base layer video elementary stream and one video for decoding the enhancement layer video stream.
  • Decoder In other words, at least two video decoders are required.
  • a plurality of enhancement layer video streams may be provided for proper decoding corresponding to various coding schemes.
  • SI System Information or Service Information
  • PSI Program Specific Information
  • PSIP Program and System
  • DCP information protocol
  • DVB-SI digital video broadcasting-service information
  • NIT network information table
  • SDT service description table
  • EIT event information table
  • PAT program association table
  • PMT program map table
  • a transport stream transmitted through a SEI message or an additional SEI message in a video stream or various descriptors belonging to the tables and the descriptors of the tables is 3D.
  • the digital receiver may further include, for example, a signaling information processor and an associated database.
  • the system decoder 108 to be described later may instead perform a function of the signaling information processor.
  • contents of definitions, functions, and the like of related tables and descriptors are available in the content processing process of the digital receiver and the digital receiver of the present invention.
  • the VSB decoder 104 performs VSB decoding on the demodulated digital signal.
  • the VSB method is illustrated for convenience, but the present invention is not limited thereto, and methods such as quadrature amplitude-modulation (QAM) and quadrature phase-shift keying (QPSK) may be used.
  • QAM quadrature amplitude-modulation
  • QPSK quadrature phase-shift keying
  • the input switch unit 106 switches the transport stream input to the system decoder 108, and when the PVR is played, the stored content input from the storage device through an upload module to be described later. ) Is transmitted to the system decoder 108, and when watching live, a transport packet received through the RF input, the receiver 102, the VSB decoder 104, and the like is transmitted to the system decoder 108.
  • the system decoder 108 either decodes the incoming transport stream or decodes a transport packet regarding the stored content transmitted from the 3D PVR module 112. In addition, when the PVR mode is requested, the system decoder 108 controls the demultiplexer so that the demultiplexed video elementary stream is transmitted to the 3D PVR module 110. The system decoder 108 also sends a transport packet for the decoded transport stream or stored content to the video decoder 112. In addition, the system decoder 108 may also perform a function of a controller that decodes information necessary for the digital receiver and controls system-wide control.
  • the demultiplexer demultiplexes various elementary streams including audio, video and signaling information from the decoded transport stream.
  • the demultiplexed video elementary streams are transmitted to the 3D PVR module 110.
  • video data passing through the system decoder 108 may bypass demultiplexing and be transmitted to the video decoder 112.
  • the 3D PVR module 110 receives the transport packets for the video elementary stream input through the system decoder / demultiplexer 108 to process and process the PVR mode operation, and to reproduce the input switch unit 106.
  • the transport packets are processed and processed. Detailed configuration and function of the 3D PVR module 110 will be described later and will be omitted herein.
  • the video decoder 112 decodes the video data processed by the system decoder / demultiplexer 108.
  • the video decoder 112 may, for example, decode the video data based on the demultiplexed signaling information in the demultiplexer.
  • the video decoder 112 transmits the decoded 2D video data to the view switching / 2D output unit 114, and outputs the decoded 3D video data to the formatter unit 116.
  • the view switching unit / 2D output unit 114 outputs video data input from the video decoder 112 to the display device so that 2D video is output / reproduced.
  • the view switching unit / 2D output unit 114 may also perform a change process from the 3D view to the 2D view according to a view switching command according to a user's request.
  • the formatter unit 116 receives the input left video image and the right video image, formats the output image to match the output frequency or output format, and outputs the same to the display device. If the input video elementary stream is a 2D single video elementary stream, an FRC block (Frame Rae Control block) exists in front of the formatter unit 116, and thus may be appropriately processed for 3D processing.
  • FRC block Frae Rae Control block
  • FIG. 2 is a block diagram illustrating an example of configuration of a 3D PVR module of FIG. 1.
  • an example of the 3D PVR module 110 includes a download module 212, an index & file database 214, and a storage unit. And an upload module 218.
  • the transport stream passing through the VSB decoder 104 of FIG. 1 is input to the input switch unit 106.
  • the input switch unit 106 first operates in the first mode.
  • the first mode is, for example, a process for processing an input transport stream.
  • the system decoder 108 transmits the transport stream to the demultiplexer 108 after basic processing.
  • the demultiplexer 108 demultiplexes the input transport stream into elementary streams including audio, video, and signaling information.
  • the demultiplexer 108 transmits, in particular, transport packets for the demultiplexed video elementary stream (Video ES) to the download module 212.
  • the download module 212 inserts a time-stamp into transport packets for the input video elementary stream, transmits the time stamp to the storage unit 216, and stores the index. Index data is generated, transmitted to the index & file database 214, and stored.
  • the upload module 218 extracts transport packets from the storage unit 216 when the PVR playback request is received.
  • the upload module 218 uploads the transport packets to the input switch unit 106, and the input switch unit 106 outputs the transport packets input to the system decoder 108 according to the PVR playback mode.
  • the system decoder 108 directly transmits the transport packets input from the input switch unit 106 to the demultiplexer 108 or the video decoder 112.
  • the video decoder 112 decodes input transport packets and outputs video data.
  • the video decoder 112 may appropriately decode the transport packets input based on the signaling information transmitted from the system decoder 108.
  • the video decoder 112 outputs the corresponding data in a related configuration depending on whether 2D or 3D video data is input after decoding the transport packets.
  • a user may request a trick mode from the digital receiver during PVR playback.
  • the upload module 218 in the 3D PVR module 110 reads index data from the index & file database 214 and extracts appropriate transport packets from the storage unit 216 based on the read index data. To the input switch unit 106. The procedure is the same as described above.
  • FIG. 3 is a block diagram illustrating an example of a configuration of a download module 212 included in the 3D PVR module 110 of FIG. 2.
  • 3 is specifically related to the operation and functionality of the download module 212, which basically receives the transport packets for the demultiplexed video elementary streams from the demultiplexer 108. Time stamping and / or indexing.
  • the download module 212 is basically a component for performing an operation for storing a PID (Packet IDentifier) stream corresponding to a program to be recorded among transport streams input to the system decoder 108.
  • PID Packet IDentifier
  • the download module 212 includes a system clock part 312, a time-stamp insertion part 314, and an index processing part 316.
  • the index processing unit 316 is for indexing work for convenience of trick play in the PVR play mode as described below, and may be unnecessary in the basic play mode. Therefore, in some cases, it can also be omitted.
  • the processing of the time-stamp is basically that transport packets for video elementary streams recorded and stored via the download module 212 are to be uploaded via the upload module 218 in the course of subsequent playback. And the timing of the transport stream input to the system decoder 108 at the time of storage.
  • time stamp processing there are three ways of time stamp processing. First, a time-stamp is inserted into every transport packet input from the demultiplexer 108. Second, a time-stamp is inserted into each transport packet of a predetermined predetermined unit. Finally, an adaptive time-stamp is inserted. There may be an insert method. Here, unlike the first scheme, a time-stamp is not inserted into every transport packet. However, unlike the second scheme, a time-stamp scheme is inserted instead of a time-stamp periodically.
  • a time-stamped transport of 192 bytes is attached with a time-stamp (4 bytes) to every transport packet (188 bytes) input to the download module 212 via the system decoder 108. It is in the form of a stream.
  • the second to third methods it is for minimizing the overhead caused by the time-stamp, and adaptively determines whether to insert a time-stamp for the input transport packet. By time stamping the system efficiency can be increased.
  • the input data becomes a transport packet to be stored, and a time-stamp corresponding to the PCR value when the corresponding transport packet is input is added to the data packet.
  • the stamp is inserted into a 192 byte time-stamped transport stream.
  • FIG. 4 to 6 illustrate an example of an implementation of time stamp insertion in a download module according to the present invention
  • FIG. 7 illustrates an example of a time stamp index data structure when using a time stamp according to the present invention. The figure is shown.
  • FIG. 4 to 6 specifically illustrate a case where a time-stamp is inserted only when discontinuity occurs, for example, without inserting a time-stamp in all transport packets belonging to all transport streams to be stored. have.
  • a method of not inserting a time stamp in all transport packets is called, for example, an adaptive time-stamp insertion method.
  • time-stamp index (FIG. 7) indicating a time-stamping zone in each transport packet may be used as described above.
  • the time-stamp index data structure used when the adaptive time-stamp is used is a time_stamp_exist field indicating the presence or absence of a time-stamp in a transport packet corresponding to the most significant bit (MSB, 1 bit) in size of 1 byte.
  • (field) 710 and the remaining bits include a packet_run_length_minus_1 field 720.
  • the packet_run_length_minus_1 field 720 may indicate or identify the number of consecutive transport packets, for example, corresponding packets, that is, time-stamps are not added from the present packet. Therefore, by using the packet_run_length_minus_1 field 720, the time-stamp index defined as shown in FIG.
  • the packet_run_length_minus_1 field 720 constituting the time-stamp index is not defined, for example, the packet_run_length_minus_1 field 720 may be added to all transport packets to be input or to all transport packets without a time-stamp. .
  • time stamp processing method according to the present invention will be described.
  • the following describes a method of implementing the time-stamp index as shown in FIG. 7 with reference to the examples of FIGS. 4 to 6.
  • a total of eight PID streams input to the system decoder 108 are illustrated.
  • the first two PID streams have a value of 0x0300 as the PID value
  • the next four PID streams have a value of 0x0301, 0x0301, 0x0302, and 0x0302, respectively
  • the remaining two PID streams have a value of 0x0300 again. Illustrated.
  • the PID belonging to the stream to be downloaded among the eight PID streams of FIG. 4 are PID streams having values of 0x0300 and 0x0301, as illustrated in FIG. 5, the PID having a PID value of 0x0302 among the total of eight PID streams is shown.
  • a total of six PID streams except two are input to the download module 212 through PID filtering.
  • each PID stream is input sequentially, for example. This is because each PID stream has a system clock input to the system decoder 108 because the PID streams stored in the storage unit 216 in the PVR module are used again at the time of reproduction.
  • the PID streams input to the download module 212 may include two PIDs having a PID value of 0x0302 through PID filtering among the eight PID streams input to the system decoder 108.
  • a total of six PID streams except for the fifth and sixth PID streams in sequence are input to the download module 212, resulting in discontinuities 510.
  • the download module 212 is configured for proper processing of PID streams input after the discontinuous section 510 when a discontinuous section 510 is generated between the PID streams. Action should be taken.
  • an adaptive time-stamping method in which a time including an adaptive time-stamp defined as shown in FIG. 7 in the PID stream 610 that is input for the first time after the discontinuous period 510.
  • a stamp To add a stamp.
  • the time_stamp_exist field 710 of the adaptive time-stamp is defined as a value indicating that a time-stamp exists in the packet, and in the following packet_run_length_minus_1 field 720, the PID streams existing between up to the next discontinuity interval are included. By indicating the number, the efficiency of the system can be increased.
  • the range in which the PID streams may be indicated may be limited by defining 1 byte. This can be solved by increasing the number of bytes defined by the corresponding adaptive time stamp or adding a time stamp by selecting the PID stream again in an appropriate range. For example, if the run length is 128 or more, the code is split and implemented. Therefore, when 255 consecutive packets without time stamps are generated, it can be expressed as 0x7F 0x7D.
  • the time-stamped PID stream may have a size of, for example, 192 bytes.
  • the following describes a method of constructing an index in the download module 212, where the index is different from the adaptive time-stamp index described above.
  • FIG. 8 is a diagram illustrating an example of an index configuration in the download module 212 according to the present invention.
  • an index defined by one byte includes a total of eight flags from the most significant bit (MSB) I_picture_flag to the least significant bit (LSB) Reserved flag.
  • Such an index includes, for example, contents for a trick play that is generally requested and implemented in a PVR, for example, for fast forward, skip, and the like, in a flag form.
  • the digital receiver decodes the video decoder itself at a normal speed even when the user requests a trick play in the PVR playback process.
  • the digital receiver since pictures that are actually decoded according to the requested trick play are skipped and input according to the corresponding speed, the user may feel a fast speed or skip effect.
  • the upload module 218 needs to extract and input data to be input to the (system) decoder in order to perform trick play smoothly. To this end, it is necessary to find the location of the corresponding data quickly.
  • the index information according to the present invention is for faster and more efficient retrieval of data to be input to the decoder in the upload module 218 in the above case.
  • the index information is to extract additional data that can quickly search for the location of the appropriate data in the stored video stream when performing a trick play according to a request during the PVR playback process in the digital receiver, skipping, fast forward (fast forward) When performing forward, etc., data corresponding to a random access point (RAP) is extracted and information is generated to be selectively input to the decoder.
  • the random access point (RAP) may be any one of I, B, and P pictures.
  • an I picture is described as a random access point (RAP) as an example to help understanding of the present invention and for convenience of description.
  • an I picture refers to a picture that can be randomly accessed.
  • the index information may define a 2D / 3D related indexing function so that the 2D or 3D mode can be selected during the trick play, that is, the stream can be properly uploaded according to the mode.
  • the download module 212 analyzes the transport packets stored when the index is generated. The download module 212 determines whether a random access point (RAP) is included in the corresponding transport packet, for example, based on the analysis result. In addition, the download module 212 determines whether the video elementary stream included in the corresponding transport packet is left image image data or right image image data. In addition, the download module 212 may determine whether the 2D compatible stream in the case of 3D.
  • RAP random access point
  • the download module 212 may define and implement the determined information as index information.
  • the download module 212 is variable to generate an index for each transport packet or group of transport packets (e.g., 100 transport packet bundles or I picture start) to generate an index.
  • the download module 212 transmits the inspection result to the index & file database, and manages by mapping the index and the physical location where the transport packet is stored in the index & file database.
  • the video elementary stream of the enhancement layer does not necessarily need to be an I picture.
  • the download module 212 receives a transport packet to be stored as input data, but each transport packet includes a basic picture including whether the I picture starts or the start byte of the random access point (RAP), and the I picture start position.
  • a transport packet including an index including information such as a stream and a view type is output.
  • the view type information includes, for example, information on whether 2D compatibility, information on whether a light view is included, and the like.
  • an index may be generated for each packet.
  • I_picutre_flag for the I picture zone part and picture_start_exist for whether the picture starts exist sequentially from the most significant bit.
  • Picture_endt_exist for the end of the picture, base_layer for the base layer, Enhance_layer for the enhancement layer, left for the left image data, right for the left image data, right for future use It is configured to include the reserved flag.
  • the digital receiver may know the codec information of the enhancement layer based on the signaling information in the received digital signal.
  • the system decoder 108 may recognize that the corresponding video stream is configured as a dual stream.
  • the enhance_layer flag may not have meaning independently. This is because the video elementary stream of the enhancement layer itself is based on the video elementary stream of the base layer. Therefore, when the enhance_layer flag is deactivated, the digital receiver may know that the corresponding video stream is a single video stream. In this case, the Base_layer flag may be activated. This is because the base layer itself corresponds to a single video stream, so related information can be defined.
  • the left or right flag may be viewed based on the left image image data or the right image image data in 2D mode viewing, for example, in view switching, in addition to identifying left image image data or right image image data of the corresponding data when viewing 3D mode. It can be used to determine whether the corresponding flag information can be used if view switching is requested during viewing as described above.
  • the download module 212 has been described in detail so far. The following describes in detail the upload module 218 which uploads the transport packets for the video elementary stream to the system decoder 108 during PVR playback.
  • FIG. 9 is a block diagram illustrating an example of a configuration of the upload module 218 included in the 3D PVR module of FIG. 2.
  • the upload module 218 plays content stored or recorded in the storage unit 216 of the PVR
  • the PVR inputs the transport packets input from the storage unit 216 to the system decoder 108 in a timely manner. Enable playback.
  • the upload module 218 removes the four-byte time-stamp when the input transport packet is, for example, a time-stamped transport stream having a size of 192 bytes, thereby removing the system decoder 108 and the video decoder.
  • Each packet of size 188 bytes processable at 112 is entered into the system decoder 108 at a timing based on the removed time-stamp.
  • the upload module 218 selectively receives only appropriate transport packets based on the index information configured as shown in FIG. 8 extracted from the index & file database 214 to perform the trick play. It may also output to the decoder 108.
  • the upload module 218 may include a system clock unit 912, an output controller 914, a time stamp processing unit 916, and the like.
  • the system clock unit 912 provides information about a system clock to be referred to when the output control unit 914 controls the output, that is, when controlling the output of the corresponding transport packet.
  • the output control unit 914 receives the index data from the index & file database 214 and requests the data from the storage unit 216. In this case, the output control unit 914 may make a request based on the received index data in requesting data to the storage unit 216.
  • the storage unit 216 transmits the corresponding transport packet to the time stamp processor 916 according to a request of the output control unit 914. In this case, all of the transport packets output from the storage unit 216 may be time-stamped transport packets, and only some of them may be time-stamped transport packets.
  • the time-stamp processor 916 removes the time-stamp from the inputted transport packets and outputs only 188-byte transport packets directly to the output controller 914 or the system decoder 108.
  • the output control unit 914 may calculate a system timing according to the system clock of the system clock unit 912 and output the control signal to the time-stamp processing unit 916.
  • the transmission timing to the system decoder 108 refers to the time stamp to be removed.
  • the system time output from the system clock unit 912 is read and the corresponding value matches the value of the time stamp, the corresponding transport packet is stored. Input to the system decoder 108.
  • the output timing may be calculated by using a virtual time stamp value with reference to a bit rate input during recording.
  • the virtual time stamp may be generated, for example, in the download module 212 described in the 3D PVR module or may be generated by adding a separate configuration.
  • the upload module 218 may refer to the time-stamp index described above with respect to the existence of the time-stamp, and thus may know the length and time-stamp of each transport packet.
  • the output control unit 914 does not always receive index data and request data from the storage unit 216 based on the index data, but may request data output based on the index data during normal playback. . That is, in the case of trick play reproduction, the index & file database 214 may not be accessed with the output control unit 914.
  • the number of pictures to be skipped in the software / middleware is determined according to the operation mode, and then the picture to be played is selected.
  • the PVR module 110 may perform playback by skipping two I pictures when performing fast double speed playback among trick play functions.
  • the PVR module 110 may determine the start and end positions of the first I picture by referring to the index file input from the index & file database 214.
  • the upload module 218 may read transport packets for the corresponding section from the storage unit 216.
  • the upload module 218 may skip over two I pictures, such as the fourth, seventh, and tenth, based on the input index information, read transport packet data for the corresponding position, and input the same to the system decoder 108. have.
  • the upload module 218 processes the data at a normal speed with the system decoder 108 and the video decoder 112 during the playback process, but since the input data itself is skipped data, fast double speed playback is possible. Become. For example, assuming that I picture periods are ten, in this case, the effect of fast reproduction at 30x speed is generated.
  • FIG. 10 is a flowchart illustrating an example of an operation of a receiver during 2D / 3D recording according to the present invention.
  • FIG. 10 illustrates an operation of recording or storing a transport stream input in a 2D / 3D mode in a digital receiver.
  • the description of the steps before the first transport stream is processed by the system decoder 108 via the receiver 102 and the VSB decoder 104 uses the foregoing description and the detailed description is Omit.
  • the system decoder 108 determines whether there is a request for performing a PVR function, that is, a content storage command or a request, by the user (S102). As a result of the determination, if there is no content storage command, the system decoder 108 processes the input transport stream and then controls it to be output through the demultiplexer and the video decoder 112. Here, appropriate processing may be performed by referring to the above contents depending on whether the inputted transport stream is 2D / 3D and may be output. For example, if the input transport stream is a 3D video stream, it is converted into a 3D output form through the formatter 116 and displayed.
  • the system decoder 108 determines whether the recording mode is 2D / 3D if there is a content storage command or request by the user (S104). This is because it is necessary to properly control the operation of the PVR module 110 according to the recording mode requested by the system decoder 108, and the operation of the PVR module 110 may be different according to the recording mode as described above. Because.
  • step S104 when the recording mode is the 3D mode, the system decoder 108 must determine the PID combination to enable processing of the transport packet for the video elementary stream to be input to the PVR module 110 via the demultiplexer. do. (S106).
  • step S106 the system decoder 108 performs filtering on the PID streams to be input to the PVR module 110 according to the determined PID combination. That is, the system decoder 108 selects the base layer video / audio elementary stream and the enhancement layer video elementary stream among the transport packets input through the demultiplexer and controls the input to the PVR module 110 (S108).
  • step S104 determination when the recording mode is the 2D mode, the system decoder 108 must determine the PID combination to enable the transport packet for the video elementary stream to be input to the PVR module 110 via the demultiplexer. (S110).
  • step S106 the system decoder 108 performs filtering on the PID streams to be input to the PVR module 110 according to the determined PID combination. That is, the system decoder 108 selects the base layer video / audio elementary stream from the transport packets input through the demultiplexer and controls the input to the PVR module 110 (S112).
  • the PVR module 110 stores the analysis and related information on the video data for the video elementary streams input under the control of the system decoder 108 (S114).
  • the PVR module 110 generates and inserts a time stamp for the transport packet in the storage unit 216 according to the method as shown in FIGS. 4 to 7 based on the analysis result of the video data performed in step S114. Save (S116).
  • the PVR module 110 generates an index file in the same manner as in FIG. 8 so as to enable trick play reproduction of the PVR function after step S116 or at the same time, and stores the index file in the index & file database 214 (S118).
  • the analysis of the video data may be performed in the index processing of the download module 212, the main operation of the analysis is to determine the presence of the I picture. For example, it is determined whether information such as a start point and an end point of an I picture, left / right, a base layer or an enhancement layer, and the like are stored, and the storage operation is appropriately performed according to the determination result.
  • the download module 212 uses the time point at which each input transport packet is input to the system decoder 108, that is, the system time as the system clock, and designates the time point as a time stamp and inserts it into the transport packet.
  • the adaptive time stamp it is possible to determine whether the transport packet is discontinuous, and determine and control the time stamp to be inserted according to the determination result.
  • FIG. 11 is a flowchart illustrating an example of a receiver operation during 2D mode playback according to the present invention.
  • FIG. 11 is a description of performing a playback operation on content stored for performing a PVR function as shown in FIG. 10.
  • the stored content itself may be 2D content / 3D content.
  • the upload module 218 determines whether the playback mode is 2D or 3D (S202). As a result of the determination, if the playback mode is 3D, reference is made to FIG. 12 described later (S204), and a detailed description thereof will be omitted.
  • the upload module 218 when it is determined that the playback mode is the upload module 218 and is in the 2D playback mode, the upload module 218 performs PID filtering to input the PID stream corresponding to the video elementary stream to be uploaded to the system decoder 108. It performs (S206).
  • the upload module 218 reads the index file from the index & file database 214 for upload control on the video elementary stream to be played, and stores the data corresponding to 2D based on the read index file 216.
  • the position of the user is determined (S208). That is, in the case of a dual stream, only the base layer elementary stream is received and the video elementary stream corresponding to the enhancement layer video elementary stream is skipped.
  • the 2D mode reproduction in which the enhancement layer is omitted without a timing problem for the normal double speed reproduction by the PID filter operation of the subsequent stage (the demultiplexer 108) does not need to skip the enhancement layer. This is possible.
  • the upload module 218 uploads the 2D corresponding data according to the system timing (S210), and decodes the 2D corresponding data through the system decoder / demultiplexer 108 and the video decoder 112 (S212), and plays back the video. This is done (S214).
  • FIG. 12 is a flowchart illustrating an example of a receiver operation during 3D mode playback according to the present invention.
  • FIG. 12 relates to an operation of a receiver during 3D mode reproduction. As described above, it may correspond to a case in which the reproduction mode is 3D as a result of the step S202 determination.
  • the upload module 218 determines whether the playback mode is 2D or 3D (S302). As a result of the determination, when the reproduction mode is 2D, the above-described FIG. 11 is referred to (S304).
  • the upload module 218 performs PID filtering to input the PID stream corresponding to the video elementary stream to be uploaded to the system decoder 108 (S306).
  • the upload module 218 reads the index file from the index & file database 214 for upload control on the video elementary stream to be played, and stores the data corresponding to 3D based on the read index file 216. Determine the location (S308).
  • step S308 the upload module 218 determines whether there is a play request for trick play (S310).
  • step S310 if there is no trick play playback request, all video elementary streams downloaded when the 3D mode is stored are uploaded based on the determined position of the 3D data (S312).
  • step S310 if it is determined in step S310 that there is a trick play reproduction request, only transport packets corresponding to the 3D I picture are extracted and uploaded (S314).
  • the system decoder / demultiplexer 108 and the video decoder 112 decode the 3D corresponding data uploaded (S316), and the formatter 116 performs 3D formatting according to the output format (S318).
  • the 3D formatted 3D data is output (S320).
  • the finally output video is decoded in the I picture of the base and enhancement layer and output through all the transformations in the formatter and the like.
  • FIG. 13 is a flowchart illustrating an example of an operation of a receiver when a view switching request is performed according to the present invention.
  • the upload module 218 determines the playback mode (S402), and if the 2D mode refers to the description of Figure 10 (S404).
  • the upload module 218 again determines whether there is MVC or view dependency (S406). This is because when MVC or view dependency exists, all information corresponding to the base layer must be uploaded (S408).
  • the upload module 218 uploads the corresponding data using the index information after performing the operation up to step S408 (S410).
  • the system decoder / demultiplexer 108 and the video decoder 112 decode the 3D corresponding data uploaded (S412), and the formatter 116 performs 3D formatting according to the output format (S414).
  • the 3D formatted 3D data is output (S416).
  • both left and right views are processed, but only the view selected in the final output process may be output.
  • the digital receiver may be selected to the desired view.
  • the display device and its operation method according to the present invention can not be limitedly applied to the configuration and method of the embodiments described above, the embodiments are all or part of each embodiment so that various modifications can be made It may alternatively be configured in combination.
  • the operating method of the display device of the present invention can be implemented as a processor-readable code on a processor-readable recording medium provided in the display device.
  • the processor-readable recording medium includes all kinds of recording devices that store data that can be read by the processor. Examples of the processor-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and may also be implemented in the form of a carrier wave such as transmission over the Internet. .
  • the processor-readable recording medium can also be distributed over network coupled computer systems so that the processor-readable code is stored and executed in a distributed fashion.
  • the present invention relates to the processing of 3D content in a digital receiver having a PVR device capable of receiving and storing a 3D signal, which can be used in all fields of the digital receiver, and thus has industrial applicability.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 명세서에서는 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법이 개시된다. 본 발명에 따른 3D 서비스를 위한 디지털 수신기의 일 예는, 입력되는 3D 비디오 기본 스트림에 타임-스탬프를 부가하여 저장되도록 제어하는 다운로드 모듈과, 저장된 3D 비디오 기본 스트림을 추출하고, 추출된 3D 비디오 기본 스트림의 타임-스탬프 값에 기초하여 시스템 클록에 따라 업로드하는 업로드 모듈을 포함한 PVR 모듈; 업로드된 3D 비디오 기본 스트림을 디코딩하는 디코더; 디코딩된 3D 비디오 데이터를 출력 포맷에 맞게 포맷팅하는 포맷터; 및 포맷팅된 3D] 비디오 데이터를 출력하는 출력부;를 포함한다.

Description

디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법
본 발명은 디지털 수신기에 관한 것으로, 더욱 상세하게는 3차원(3-dimensional, 이하 ‘3D’) 신호를 수신하고 저장할 수 있는 PVR(Personal Video Recorder)을 구비한 디지털 수신기에서 3D 컨텐트를 저장, 재생 등 처리 가능한 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법에 관한 것이다.
아날로그 방송과 디지털 방송이 혼재되어 있다가 최근에는 전세계적으로 아날로그 방송을 종료하고 전면적인 디지털 방송을 시행하고 있는 추세이다.
디지털 방송이 활성화되면서 종래 아날로그 방송에 비해 더욱 다양한 컨텐츠가 개발되고 보급되고 있으며, 이러한 컨텐츠를 더욱 쉽고 편리하게 즉, 사용자 편의를 위한 다양한 디지털 방송 기술들이 개발되고 있다.
일 예로, 종래 대부분의 컨텐츠는 2D로 제작되었으나, 디지털 방송이 활성화되면서 종래 2D 컨텐츠에 비해 보다 실재감과 입체감이 있는 3D 컨텐츠에 대한 관심이 증가하고 이를 위한 컨텐츠가 개발 및 보급되고 있다. 더불어, 디지털 수신기에서도 3D 컨텐츠의 저장, 재생 등 처리를 위한 다양한 연구가 이루어지고 있다.
한편, 최근 방송 환경이 아날로그 방송을 종료하고 디지털 방송으로의 전면적인 전환과 달리, 컨텐츠의 경우에는 디지털 방송 환경하에서도 그 속성상 2D 컨텐츠와 3D 컨텐츠가 혼재될 가능성이 크다. 따라서, 디지털 수신기는 이러한 현실을 반영하여 적절하게 컨텐츠를 처리할 수 있어야 한다. 다만, 이러한 현실과 사용자들의 3D 컨텐츠에 관심에 비해 여전히 디지털 수신기에서 3D 컨텐츠에 대한 처리에는 많은 문제점이 있으며 2D/3D 전환에도 여전히 부족한 면이 있어 사용자의 불편을 초래하고 있는 실정이다.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 본 발명에서는 3D 신호를 수신하고 저장할 수 있는 PVR을 구비한 디지털 수신기에서 PVR을 통해 3D 컨텐츠를 저장, 재생 등 처리하되, 상기 처리 과정에서 2D/3D 전환, 뷰 스위치(view switching) 등의 기능을 지원하는 디지털 수신기 및 디지털 수신기에서의 컨텐츠 처리 방법을 제공하는 것을 일 과제로 한다.
본 발명에서는 프레임-컴패터블(frame-compatible)이 아닌 풀 레졸루션 퍼 아이(full resolution per eye) 구현을 위한 3D 스트림에 대해 효과적인 PVR 기능을 지원 가능한 디지털 수신기 및 디지털 수신기에서의 컨텐츠 처리 방법을 제공하는 것을 다른 과제로 한다.
본 명세서에서는 상기와 같은 기술적 과제를 해결하기 위해 다음과 같은 기술적 해결방법을 제시한다.
본 발명에 따른 3D 서비스를 위한 디지털 방송 신호를 처리하는 방법의 일 예는, 입력되는 3D 비디오 기본 스트림에 타임-스탬프를 부가하여 저장하는 단계; 저장된 3D 비디오 기본 스트림을 추출하고, 추출된 3D 비디오 기본 스트림의 타임-스탬프 값에 기초하여 시스템 클록에 따라 업로드하는 단계; 업로드된 3D 비디오 기본 스트림을 디코딩하는 단계; 및 디코딩된 3D 비디오 데이터를 출력 포맷에 맞게 포맷팅하여 출력하는 단계;를 포함한다.
여기서, 상기 입력되는 3D 비디오 기본 스트림을 분석하는 단계; 및 상기 분석 결과에 따라 트릭 플레이를 위한 인덱스 데이터를 생성하여 저장하는 단계;를 더 포함할 수 있다.
그리고 상기 3D 비디오 기본 스트림은, 베이스 레이어 비디오 스트림과 인핸스먼트 레이어 비디오 스트림으로 구성된 듀얼 비디오 스트림일 수 있다.
또한, 상기 타임-스탬프는, 입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 소정 단위의 트랜스포트 패킷마다 부가될 수 있다.
그리고 상기 타임-스탬프는, 입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 PID 필터링 과정에서 발생되는 불연속 구간 이후 수신되는 첫번째 트랜스포트 패킷에 부가될 수 있다.
본 발명에 따른 3D 서비스를 위한 디지털 수신기의 일 예는, 입력되는 3D 비디오 기본 스트림에 타임-스탬프를 부가하여 저장되도록 제어하는 다운로드 모듈과, 저장된 3D 비디오 기본 스트림을 추출하고, 추출된 3D 비디오 기본 스트림의 타임-스탬프 값에 기초하여 시스템 클록에 따라 업로드하는 업로드 모듈을 포함한 PVR 모듈; 업로드된 3D 비디오 기본 스트림을 디코딩하는 디코더; 디코딩된 3D 비디오 데이터를 출력 포맷에 맞게 포맷팅하는 포맷터; 및 포맷팅된 3D 비디오 데이터를 출력하는 출력부;를 포함한다.
여기서, 상기 다운로드 모듈은, 상기 입력되는 3D 비디오 기본 스트림을 분석하고, 상기 분석 결과에 따라 트릭 플레이를 위한 인덱스 데이터를 생성하여 저장하도록 제어할 수 있다.
그리고 상기 3D 비디오 기본 스트림은, 베이스 레이어 비디오 스트림과 인핸스먼트 레이어 비디오 스트림으로 구성된 듀얼 비디오 스트림일 수 있다.
또한, 상기 다운로드 모듈은, 입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 소정 단위의 트랜스포트 패킷마다 상기 타임-스탬프를 부가할 수 있다.
그리고 상기 다운로드 모듈은, 입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 PID 필터링 과정에서 발생되는 불연속 구간 이후 수신되는 첫번째 트랜스포트 패킷에 상기 타임-스탬프를 부가할 수 있다.
본 발명에 따르면,
첫째, 디지털 수신기에서 3D 컨텐츠에 대해 다양한 PVR 기능을 제공할 수 있는 효과가 있다.
둘째, 디지털 수신기에서 풀 레졸루션 퍼 아이 구현을 위한 3D 스트림에 대해서도 효과적인 PVR 기능을 지원 가능한 효과가 있다.
셋째, 디지털 수신기에서 PVR을 이용해 3D 컨텐츠에 대해서도 원활하게 트릭 플레이, 2D/3D 전환 등의 기능을 수행할 수 있는 효과가 있다.
도 1은 본 발명에 따른 3D PVR 모듈을 포함한 디지털 수신기 구성의 일 예를 설명하기 위한 블록도,
도 2는 도 1의 3D PVR 모듈 구성의 일 예를 설명하기 위해 도시한 블록도,
도 3은 도 2의 3D PVR 모듈에 포함된 다운로드 모듈 구성의 일 예를 설명하기 위해 도시한 블록도,
도 4 내지 6은 본 발명에 따른 다운로드 모듈에서 타임 스탬프 삽입 구현의 일 예를 설명하기 위해 도시한 도면,
도 7은 본 발명에 따른 타임 스탬프 사용시 타임 스탬프 인덱스 데이터 구조의 일 예를 설명하기 위해 도시한 도면,
도 8은 본 발명에 따른 다운로드 모듈에서 인덱스 구성의 일 예를 설명하기 위해 도시한 도면,
도 9는 도 2의 3D PVR 모듈에 포함된 업로드 모듈 구성의 일 예를 설명하기 위해 도시한 블록도,
도 10은 본 발명에 따른 2D/3D 녹화시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도,
도 11은 본 발명에 따른 2D 모드 재생시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도,
도 12는 본 발명에 따른 3D 모드 재생시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도, 그리고
도 13은 본 발명에 따른 뷰 스위칭 요청시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도이다.
이하에서는 도면을 참조하여 본 발명을 더욱 상세하게 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
더욱이, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
본 발명은 디지털 수신기(a digital receiver)에 관한 것으로, 더욱 상세하게는 3차원(3-dimensional, 이하 ‘3D’) 신호를 수신하고 저장할 수 있는 PVR(Personal Video Recorder)을 구비한 디지털 수신기에서 3D 컨텐츠를 저장(storing), 재생(reproducing or playing) 등 처리 가능한 디지털 수신기 및 디지털 수신기에서의 컨텐츠 처리 방법에 관한 것이다.
특히, 본 명세서에서는 본 발명에 따라 디지털 수신기에서 PVR을 통해 3D 컨텐츠를 저장, 재생 등 처리하되, 상기 처리 과정에서 2D/3D 전환, 뷰 스위칭(view switching) 등의 다양한 PVR 기능을 지원하는 디지털 수신기 및 디지털 수신기에서의 컨텐츠 처리 방법에 대해 기술하고자 한다.
이하에서는 디지털 수신기에서 3D 구현을 위한 프레임-컴패터블(frame-compatible) 시스템과 풀 레졸루션 퍼 아이(full resolution per eye) 시스템 중 본 발명의 이해를 돕고 설명의 편의를 위해 후자 즉, 풀 레졸루션 퍼 아이 시스템을 예로 하여 설명하고자 한다. 다만, 본 발명의 권리범위가 풀 레졸루션 퍼 아이에 한정되는 것은 아니며, 상기 프레임-컴패터블 시스템뿐만 아니라 본 발명과 관련된 다른 시스템에도 동일 또는 유사한 원리로 적용 가능함은 자명하다 할 것이다.
상기에서 프레임-컴패터블 시스템은, 디지털 수신기에서 PVR을 통해 3D 컨텐트를 녹화(recording)하는 경우에 종래 구조를 그대로 재활용하는 시스템이다. 이에 반해, MVC(Multiview Video Coding), SVC(Scalable Video Coding), 듀얼 코덱(Dual Codec) 등과 같은 상기 풀 레졸루션 퍼 아이 시스템은, 2D/3D 전환, 스킵(skip) 등을 포함한 트릭 플레이(trick play), 뷰 스위칭(view switching) 등을 지원하기 위해 보다 효율적인 방법이 요구된다. 이를 위해, 본 명세서에서는 본 발명에 따라 3D 서비스 제공을 위하여 타임-스탬프(time-stamp), PVR 인덱싱(indexing), 썸네일(thumbnail) 추출 등과 같은 방식들을 정의하고 설명한다.
본 발명과 관련하여, 디지털 수신기에서 PVR을 이용하여 3D 컨텐트를 저장, 재생, 타임-쉬프트 등과 같은 기능을 수행하고자 하는 경우 특히, 싱글 비디오 스트림(single video stream)이 아닌 듀얼 비디오 스트림(dual video stream)인 경우에는 상기 싱글 비디오 스트림과는 다른 처리 방식 또는 효율적인 방식이 요구된다. 예를 들어, 사용자가 PVR 기능 중 트릭 플레이를 요청하는 경우, 디지털 수신기에서는 요청된 트릭 플레이 기능 수행을 위해 필요한 스트림에 대한 선별적 처리가 요구되나, 듀얼 비디오 스트림의 경우 다운로드(download) 또는 저장 과정에서 각 기본 스트림(Elementary Stream; ES)에 대한 식별 및 처리를 명확하게 하여야 하며, 그렇지 않으면 트릭 플레이를 사용자의 요청에 따라 원활하게 처리할 수 없게 된다. 또한, 사용자가 PVR 기능을 통해 2D/3D 모드에서 트릭 플레이를 요청하는 경우에도 마찬가지이다.
이를 위해, 이하 본 명세서에서는 본 발명에 따라 풀 레졸루션 퍼 아이 시스템에 이용되는 듀얼 비디오 스트림에 대해 3D 컨텐트의 녹화 또는 저장, 트릭 플레이 등을 포함한 재생 등의 다양한 처리가 가능한 디지털 수신기 및 디지털 수신기에서의 컨텐츠 처리 방법에 대해 기술한다.
도 1은 본 발명에 따른 3D PVR 모듈을 포함한 디지털 수신기 구성의 일 예를 설명하기 위한 블록도이다.
도 1을 참조하면, 본 발명에 따른 디지털 수신기의 일 예는, 수신부(receiving part)(102), VSB 디코더(104), 인풋 스위치부(Input Switch part)(106), 시스템 디코더/역다중화부(System Decoder&Demux)(108), 3D PVR 모듈(110), 비디오 디코더(112), 뷰 스위칭부/2D 출력부(114), 및 포맷터부(116)를 포함한다.
여기서, 디지털 수신기는 도 1의 구성에 미도시되었으나 디스플레이 기기 내지 디스플레이부(이하 ‘디스플레이 기기’)가 포함된 하나의 수신기 세트(SET)이거나 도 1의 구성은 셋톱-박스(STB; Set-Top Box) 형태로 구현되고 인터페이스(interface)를 통해 디스플레이 기기가 연결되는 형태로 구현될 수도 있다. 특히, 후자의 경우 상기 인터페이스는 셋톱-박스와 디스플레이 기기를 인터페이싱하는 HDMI(High Definition Multimedia Interface)일 수 있으며, 이를 위해 HDMI 인터페이스부(미도시)가 양 기기에 구비될 수 있다. 또한, 후자의 경우 HDMI를 이용하기 위해 HDMI 규격에서 정의하는 3D 시그널링 방법이 적용 가능하다. 따라서, 후자의 경우에도 셋톱-박스에서 PVR 기능 수행을 위해 처리된 3D 컨텐츠를 문제없이 디스플레이 기기에서 출력할 수 있다.
더불어, 도 1에 도시된 구성은, 본 발명의 설명의 편의를 위해 디지털 수신기의 일부 구성만을 도시하였으나, 특정 기능의 수행을 위해 필요한 구성이 더 포함되거나 도시된 구성에서 일부 구성이 생략될 수도 있다. 또한, 도 1에 도시된 각 구성 블록은 시스템에 따라 모듈화되어 합쳐질 수도 있으며 반대로 개별 구성으로 나뉘어질 수도 있다. 예컨대, 도 1에서는 편의상 시스템 디코더/역다중화를 하나의 구성으로 도시하고 설명하나, 후술하는 도 2에서는 보다 명확한 설명을 위해 양 구성을 구분하여 설명한다.
이하 도 1에 도시된 디지털 수신기의 각 구성 블록에 대해 보다 상세하게 설명하면, 다음과 같다.
수신부(102)는, 예컨대, 튜너(tuner)와 복조부(demodulator)를 포함하여 RF(Radio Frequency) 채널을 튜닝하고 튜닝된 채널을 통해 디지털 신호를 수신하고 복조한다. 여기서, 디지털 신호는 MPEG-2(Moving Picture Experts Group-2) 전송 스트림(transport stream)으로 오디오(audio), 비디오(video) 및 상기 오디오 또는/및 비디오의 처리를 위해 시그널링(signaling)하기 위한 정보가 포함된 기본 스트림(Elementary Stream; ES)들이 패킷화된 PES(Packetised ES)들을 포함한다.
특히, 본 발명에 따른 3D 서비스(3D service)와 관련하여, 비디오 스트림(Video Stream)은 예컨대, 싱글 비디오 기본 스트림(single video ES)일 수도 있으며, 베이스 레이어(base layer)와 인핸스먼트 레이어(enhancement layer)로 구성된 듀얼 비디오 기본 스트림(dual video ES)일 수 있다. 전자 즉, 비디오 스트림이 싱글 비디오 기본 스트림(예를 들어, 사이드 바이 사이드(side by side) 포맷이나 탑 앤 바텀(top and bottom) 포맷)인 경우에는, 좌영상 이미지(left image)와 우영상 이미지(right image) 데이터가 각각 하프-레졸루션(half-resolution)을 가지므로 스케일러(scaler)(미도시) 등과 같은 구성이 더 필요할 수도 있다. 반면에, 후자 즉, 비디오 스트림이 듀얼 비디오 기본 스트림인 경우에는 이후 설명될 비디오 디코더가 예컨대, 베이스 레이어 비디오 기본 스트림을 디코딩하기 위한 하나의 비디오 디코더와 인핸스먼트 레이어 비디오 스트림을 디코딩하기 위한 하나의 비디오 디코더 다시 말해, 적어도 두 개의 비디오 디코더가 요구된다. 특히, 인핸스먼트 레이어 비디오 스트림의 경우 다양한 코딩 방식에 대응되는 적절한 디코딩을 위해 다수 개가 구비될 수도 있다.
또한, 본 발명에 따른 3D 서비스와 관련하여, 시그널링 정보로는 SI(System Information or Service Information) 정보가 이용될 수 있는바, 이러한 SI 정보로 예컨대, PSI(Program Specific Information), PSIP(Program and System Information Protocol), DVB-SI(Digital Video Broadcasting-Service Information) 등 다양한 정보가 포함될 수 있다.
일 예로, 유럽의 경우, DVB-SI 및 MPEG-2에서는 NIT(Network Information Table), SDT(Service Description Table), EIT(Event Information Table), PAT(Program Association Table), PMT(Program Map Table) 등의 테이블 정보와 해당 테이블들에 속한 각종 디스크립터들(descriptors)나 비디오 스트림 내 SEI 메시지(Supplemental enhancement information message) 또는 추가 SEI 메시지(additional SEI message)를 통해, 전송되는 트랜스포트 스트림(transport stream)이 3D 서비스 또는 컨텐츠인지 식별 정보, 비디오 포맷(video format) 정보, 코덱(Codec) 정보, 서브-타이틀(Sub-title) 존재 여부 및 식별 정보, 2D/3D 링크(Linkage) 정보 등에 관한 시그널링 정보를 정의한다. 도 1에 도시되진 않았으나, 이러한 3D 시그널링의 처리를 위해, 디지털 수신기는 예컨대, 시그널링 정보 처리부(signaling information processor)와 관련 데이터베이스(database)를 더 구비할 수 있다. 또는, 후술할 시스템 디코더(108)에서 시그널링 정보 처리부의 기능을 대신 수행할 수도 있다. 그 밖에 본 명세서에서 명확하게 설명하지 않으나, 관련 테이블 및 디스크립터의 정의, 기능 등에 대한 내용을 본 발명의 디지털 수신기 및 디지털 수신기의 컨텐트 처리 과정에서 이용 가능하다.
VSB 디코더(104)는, 복조된 디지털 신호에 대해 VSB 디코딩을 수행한다. 여기서는, 편의상 VSB 방식을 예시하였으나, 이에 한정되는 것은 아니며 QAM(Quadrature Amplitude Modulation), QPSK(Quadrature Phase-Shift Keying) 등의 방식도 이용 가능함은 자명하다.
인풋 스위치부(106)는, 시스템 디코더(108)로 입력되는 트랜스포트 스트림을 스위칭(switching)하며, PVR 재생일 때에는 후술할 업로드 모듈(upload module)을 통해 저장장치로부터 입력되는 저장된 컨텐트(stored content)를 시스템 디코더(108)로 출력하며, 생방송(live)을 시청할 때에는 RF 입력, 수신부(102), VSB 디코더(104) 등을 거쳐 수신되는 트랜스포트 패킷(transport packet)을 시스템 디코더(108)로 출력한다.
시스템 디코더(108)는, 입력되는 트랜스포트 스트림을 디코딩하거나 또는 3D PVR 모듈(112)로부터 전송되는 저장된 컨텐트에 관한 트랜스포트 패킷을 디코딩한다. 또한, 시스템 디코더(108)는, PVR 모드가 요청되면, 역다중화부를 제어하여 역다중화된 비디오 기본 스트림이 3D PVR 모듈(110)로 전송되도록 제어한다. 또한, 시스템 디코더(108)는, 디코딩된 트랜스포트 스트림 또는 저장된 컨텐츠에 대한 트랜스포트 패킷을 비디오 디코더(112)로 전송한다. 그 밖에, 시스템 디코더(108)는, 디지털 수신기에 필요한 정보를 디코딩하며 시스템 전반의 제어를 주관하는 제어부(controller)의 기능도 수행할 수 있다.
역다중화부는, 디코딩된 트랜스포트 스트림으로부터 오디오, 비디오 및 시그널링 정보가 포함된 다양한 기본 스트림들을 역다중화한다. 특히, 디지털 수신기가 PVR 모드인 경우에는, 상기 역다중화된 비디오 기본 스트림들은 3D PVR 모듈(110)로 전송된다. 또한, PVR 기능 중 재생 모드의 경우에는, 시스템 디코더(108)를 거친 비디오 데이터들이 역다중화를 바이패스(bypass)하고 비디오 디코더(112)로 전송될 수도 있다.
3D PVR 모듈(110)은, 시스템 디코더/역다중화부(108)를 거쳐 입력되는 비디오 기본 스트림에 대한 트랜스포트 패킷들을 수신하여 PVR 모드 동작을 위한 가공 및 처리하고, 재생시에는 인풋 스위치부(106)로 가공 및 처리된 트랜스포트 패킷들을 전송한다. 상기 3D PVR 모듈(110)의 상세 구성 및 기능에 대한 보다 상세한 설명은 후술하고 여기서는 생략한다.
비디오 디코더(112)는, 시스템 디코더/역다중화부(108)에서 처리된 비디오 데이터을 디코딩한다. 이때, 비디오 디코더(112)는 예컨대, 역다중화부에서 역다중화된 시그널링 정보에 기초하여 비디오 데이터의 디코딩을 수행할 수 있다. 비디오 디코더(112)는, 디코딩된 2D 비디오 데이터는 뷰 스위칭/2D 출력부(114)로 전송하고, 디코딩된 3D 비디오 데이터는 포맷터부(116)로 출력한다.
뷰 스위칭부/2D 출력부(114)는, 비디오 디코더(112)로부터 입력되는 비디오 데이터를 디스플레이 기기로 출력하여 2D 비디오가 출력/재생되도록 한다. 또한, 뷰 스위칭부/2D 출력부(114)는, 사용자의 요청 등에 따른 뷰 스위칭 명령에 따라 3D 뷰에서 2D 뷰로 변경 처리도 수행할 수 있다.
포맷터부(116)는, 입력되는 좌영상 이미지와 우영상 이미지를 수신하여, 출력 주파수 내지 출력 포맷에 맞도록 포맷팅하여 디스플레이 기기로 출력한다. 입력되는 비디오 기본 스트림이 2D 싱글 비디오 기본 스트림인 경우에는 포맷터부(116) 전단에서 FRC 블록(Frame Rae Control block)이 존재하여 3D 처리를 위한 적절한 가공을 할 수도 있다.
도 2는 도 1의 3D PVR 모듈 구성의 일 예를 설명하기 위해 도시한 블록도이다.
도 2에서는 전술한 도 1의 3D PVR 모듈(110)의 상세 구성 블록을 개시하였다.
도 2를 참조하면, 본 발명에 따른 3D PVR 모듈(110)의 일 예는, 다운로드 모듈(Download module)(212), 인덱스 & 파일 데이터베이스(Index & File DB)(214), 저장부(Storage) 및 업로드 모듈(Upload module)(218)을 포함하여 구성된다.
도 1 및 2를 참조하여, 3D PVR 모듈(110)의 전체적인 동작을 설명하면, 다음과 같다.
도 1의 VSB 디코더(104)를 거친 트랜스포트 스트림은 인풋 스위치부(106)로 입력된다. 여기서, 인풋 스위치부(106)은 우선 제1 모드로 동작한다. 상기에서 제1 모드라 함은 예컨대, 입력되는 트랜스포트 스트림에 대한 처리를 위한 과정을 말한다. 제1 동작 모드로 인풋 스위치부(106)에서 트랜스포트 스트림을 시스템 디코더(108)로 전송하면, 시스템 디코더(108)에서는 기본적인 처리 후 역다중화부(108)로 트랜스포트 스트림을 전송한다. 역다중화부(108)는 입력되는 트랜스포트 스트림을 오디오, 비디오 및 시그널링 정보를 포함한 기본 스트림들로 역다중화한다.
전술한 바와 같이, 본 발명과 관련하여, 역다중화부(108)는 특히, 역다중화된 비디오 기본 스트림(Video ES)에 대한 트랜스포트 패킷들을 다운로드 모듈(212)로 전송한다. 다운로드 모듈(212)은, 입력되는 비디오 기본 스트림에 대한 트랜스포트 패킷들에 타임-스탬프(Time-Stamp)를 삽입하고 저장부(216)로 전송하여 저장하며, 저장되는 트랜스포트 패킷들에 대한 인덱스 데이터(Index Data)를 생성하여 인덱스&파일 데이터베이스(214)로 전송하여 저장한다. 그리고, 업로드 모듈(218)은 PVR 재생 요청이 수신되면, 저장부(216)로부터 트랜스포트 패킷들을 추출한다. 업로드 모듈(218)은 트랜스포트 패킷들을 인풋 스위치부(106)로 업로드하고, 인풋 스위치부(106)는 PVR 재생 모드에 따라 입력되는 트랜스포트 패킷들을 시스템 디코더(108)로 출력한다. 시스템 디코더(108)는 인풋 스위치부(106)로부터 입력되는 트랜스포트 패킷들을 역다중화부(108) 또는 비디오 디코더(112)로 직접 전송한다. 비디오 디코더(112)는 입력되는 트랜스포트 패킷들을 디코딩하여 비디오 데이터를 출력한다. 이때, 비디오 디코더(112)는 시스템 디코더(108)로부터 전송되는 시그널링 정보에 기초하여 입력되는 트랜스포트 패킷들을 적절하게 디코딩할 수 있다. 또한, 비디오 디코더(112)는 입력되는 트랜스포트 패킷들을 디코딩 이후 2D 또는 3D 비디오 데이터 여부에 따라 관련 구성으로 해당 데이터를 출력한다.
더불어, PVR 재생 과정에서 사용자는 디지털 수신기에 트릭 모드를 요청할 수 있다. 이 경우, 3D PVR 모듈(110) 내 업로드 모듈(218)은, 인덱스&파일 데이터베이스(214)로부터 인덱스 데이터를 독출하고, 독출된 인덱스 데이터에 기초하여 저장부(216)로부터 적절한 트랜스포트 패킷들을 추출하여 인풋 스위치부(106)로 전송한다. 이후 과정은 전술한 내용과 동일하다.
상술한 내용은 전체적인 동작 흐름에 대한 간략한 설명이었다.
이하에서는 3D PVR 모듈(110) 내 각 구성들의 동작 및 기능에 대해 보다 더욱 상세하게 설명한다.
도 3은 도 2의 3D PVR 모듈(110)에 포함된 다운로드 모듈(212) 구성의 일 예를 설명하기 위해 도시한 블록도이다.
도 3은 특히, 다운로드 모듈(212)의 동작 및 기능에 대한 것으로, 상기 다운로드 모듈(212)은 기본적으로 역다중화부(108)에서 역다중화된 비디오 기본 스트림들에 대한 트랜스포트 패킷을 수신한 후 타임-스탬프 처리 또는/및 인덱싱 작업을 한다.
다운로드 모듈(212)은 기본적으로 시스템 디코더(108)로 입력되는 전송 스트림 중 녹화할 프로그램에 해당하는 PID(Packet IDentifier) 스트림을 저장하기 위한 동작을 수행하기 위한 구성이다.
도 3을 참조하면, 다운로드 모듈(212)은 시스템 클록부(system clock part)(312), 타임-스탬프 삽입부(time-stamp insertion part)(314), 인덱스 처리부(index processing part)(316) 등을 포함할 수 있다. 여기서, 인덱스 처리부(316)는 후술하는 바와 같이, PVR 재생 모드 중 트릭 플레이의 편의를 위한 인덱싱 작업을 위한 것으로, 기본 재생 모드에서는 불필요할 수도 있다. 따라서, 경우에 따라서는 생략도 가능하다.
타임-스탬프의 처리는 기본적으로, 다운로드 모듈(212)를 거쳐 녹화 저장되는 비디오 기본 스트림들에 대한 트랜스포트 패킷들이 이후 재생 과정에서 업로드 모듈(218)을 통해 업로드될 트랜스포트 패킷이 다시 시스템 디코더(108)의 입력 타이밍과 저장 당시의 시스템 디코더(108)로 입력되는 전송 스트림의 타이밍을 일치하게 하기 위한 것이다.
기본적으로, 타임-스탬프 처리의 방식은 크게 3가지 방식이 있을 수 있다. 첫째, 역다중화부(108)로부터 입력되는 매 트랜스포트 패킷마다 타임-스탬프를 삽입하는 방식, 둘째, 미리 정한 소정 단위의 트랜스포트 패킷마다 타임-스탬프를 삽입하는 방식, 마지막으로, 어댑티브 타임-스탬프 삽입 방식이 있을 수 있다. 여기에, 첫째 방식과 다르게 매 트랜스포트 패킷에 타임-스탬프를 삽입하는 것은 아니나 둘째 방식과 달리 주기적으로 타임-스탬프를 삽입하는 것이 아니라 비주기적으로 타임-스탬프를 삽입하는 방식이 이용 가능하다.
첫째 방식에 의할 경우, 시스템 디코더(108)를 거쳐 다운로드 모듈(212)로 입력되는 매 트랜스포트 패킷(188 bytes)에 타임-스탬프(4 bytes)가 붙어 192 바이트 크기의 타임-스탬프드 트랜스포트 스트림 형태가 된다.
또한, 둘째 방식 내지 셋째 방식의 경우에는 타임-스탬프에 의한 오버헤드(overhead)를 최소화하기 위한 것으로, 입력되는 트랜스포트 패킷에 대해 타임-스탬프를 삽입할 것인지 여부를 결정해 적응적으로(adaptive)하게 타임-스탬프를 찍음으로써 시스템 효율을 높일 수가 있게 된다.
예컨대, 타임-스탬프 처리시에, 입력되는 데이터는 저장할 트랜스포트 패킷이 되고, 여기에 해당 트랜스포트 패킷이 입력될 때의 PCR 값에 해당하는 타임-스탬프가 부가되어 출력시에는 결국 4 바이트의 타임-스탬프가 삽입되어 192 바이트의 타임-스탬프드 트랜스포트 스트림이 된다.
이하에서는 본 발명에 따라 적응적으로 타임-스탬프를 삽입하는 방법에 대해 보다 상세하게 설명한다.
도 4 내지 6은 본 발명에 따른 다운로드 모듈에서 타임 스탬프 삽입 구현의 일 예를 설명하기 위해 도시한 도면이고, 도 7은 본 발명에 따른 타임 스탬프 사용시 타임 스탬프 인덱스 데이터 구조의 일 예를 설명하기 위해 도시한 도면이다.
도 4 내지 6의 경우에는 특히, 저장하는 모든 트랜스포트 스트림에 속한 모든 트랜스포트 패킷에 타임-스탬프를 삽입하지 않고 예컨대, 불연속(discontinuity)가 발생하는 경우에만 타임-스탬프를 삽입하는 경우를 예시하고 있다. 후자와 같이 모든 트랜스포트 패킷에 타임-스탬프를 삽입하지 않는 방식을 예를 들어, 어댑티브 타임-스탬프(adaptive time-stamp) 삽입 방식이라 한다.
이와 같이, 어댑티브 타임-스탬프를 사용하는 경우에는 예를 들어, 각 트랜스포트 패킷에 타임-스탬프의 존부를 알려주는 정보를 저장할 수 있다. 이를 위해 예를 들어, 본 명세서에서는 상기와 같이 각 트랜스포트 패킷에 타임-스탬프 존부를 알려주는 타임-스탬프 인덱스(도 7)를 이용할 수 있다.
도 7을 참조하면, 어댑티브 타임-스탬프 사용시 이용되는 타임-스탬프 인덱스의 데이터 구조는 1바이트 크기로 최상위 비트(MSB, 1bit)에 해당 트랜스포트 패킷에 타임-스탬프 존재 여부를 지시 또는 식별하는 time_stamp_exist 필드(field)(710)와 나머지 비트는 packet_run_length_minus_1 필드(720)를 포함한다. 상기에서 packet_run_length_minus_1 필드(720)는 예를 들어, 해당 패킷 다시 말해, 본 패킷으로부터 타임-스탬프가 부가되지 않은 연속적인 트랜스포트 패킷의 개수를 지시 또는 식별할 수 있다. 따라서, packet_run_length_minus_1 필드(720)를 이용함으로써, 도 7과 같이 정의된 타임-스탬프 인덱스는 입력되는 모든 트랜스포트 패킷들에 부가될 필요가 없고, 소정 단위로 부가될 수 있다. 이 경우, 매 타임-스탬프 인덱스를 구성하는 packet_run_length_minus_1 필드(720) 값을 적절히 조정함으로써 타임-스탬프 인덱스가 부가되는 트랜스포트 패킷을 주기 또는 비주기적으로 구성함으로써 효율성을 추구할 수도 있다.
다만, 만약 타임-스탬프 인덱스를 구성하는 packet_run_length_minus_1 필드(720)가 정의되지 않는 경우에는 예컨대, 입력되는 모든 트랜스포트 패킷들에 부가되거나 타임-스탬프가 부가되지 않은 모든 트랜스포트 패킷들에 부가될 수도 있다.
도 4 내지 7을 참조하여 본 발명에 따른 타임-스탬프 처리 방법을 설명하면, 다음과 같다. 특히, 이하에서는 도 4 내지 6의 예시들을 참고하여, 도 7과 같은 타임-스탬프 인덱스를 구현하는 방법에 대해 설명한다.
도 4를 참조하면, 시스템 디코더(108)로 입력되는 총 8개의 PID 스트림들이 예시되었다. 여기서, 처음 두 개의 PID 스트림은 PID 값으로 0x0300 값을 가지고, 이후 4개의 PID 스트림은 순차로 각각 0x0301, 0x0301, 0x0302, 및 0x0302 값을 가지며, 이후 나머지 두 개의 PID 스트림은 다시 0x0300 값을 가지는 것으로 예시되었다.
여기서, 도 4의 8개의 PID 스트림들 중 다운로드할 스트림에 속하는 PID가 만약 0x0300과 0x0301 값을 가진 PID 스트림들이라면, 도 5에 도시된 바와 같이, 총 8개의 PID 스트림들 중 PID 값이 0x0302인 PID 두 개를 제외한 총 6개의 PID 스트림들이 PID 필터링을 통해 다운로드 모듈(212)로 입력이 된다.
여기서, 각 PID 스트림들은 예컨대, 순차로 입력된다. 왜냐하면, 각 PID 스트림은 시스템 디코더(108)에 입력되는 시스템 클록(system clock)이 존재하고, 이는 향후 PVR 모듈 내 저장부(216)에 저장된 PID 스트림들이 재생시에 다시 이용되기 때문이다.
다시 말해, 도 5에 도시된 바와 같이, 다운로드 모듈(212)로 입력되는 PID 스트림들은 최초 시스템 디코더(108)로 입력된 8개의 PID 스트림들 중 PID 필터링을 통해 PID 값이 0x0302인 PID 두 개(순서상 5번째와 6번째 PID 스트림들)를 제외한 총 6개의 PID 스트림들이 다운로드 모듈(212)로 입력됨으로써 중간에 불연속(discontuinty)(510)가 발생하게 된다.
따라서, 다운로드 모듈(212)은 도 5에 도시된 바와 같이, PID 스트림들 사이에 불연속 구간(510)이 발생된 경우에 상기 불연속 구간(510) 이후에 입력되는 PID 스트림들에 대한 적절한 처리를 위한 조치를 취해야 한다.
이를 위한 하나의 방편이 예컨대, 본 발명에 따른 어댑티브 타임-스탬프 방식으로, 불연속 구간(510) 이후에 처음으로 입력되는 PID 스트림(610)에 도 7과 같이 정의된 어댑티브 타임-스탬프를 포함한 타임-스탬프를 부가하는 것이다.
또한, 이 경우 어댑티브 타임-스탬프의 time_stamp_exist 필드(710)는 해당 패킷에 타임-스탬프가 존재한다고 지시하는 값으로 정의되고, 뒤따르는 packet_run_length_minus_1 필드(720)에서는 다음 불연속 구간까지 사이에 존재하는 PID 스트림들의 개수를 지시함으로써 시스템의 효율을 높일 수가 있게 된다.
여기서, 도 7에서는 예를 들어, 1바이트로 정의함으로써 PID 스트림들을 지시할 수 있는 범위가 제한적일 수 있다. 이러한 경우에는 해당 어댑티브 타임 스탬프로 정의된 바이트 수를 늘리거나 또는 적절한 정도의 범위에서 다시 PID 스트림을 선택하여 타임-스탬프를 부가함으로써 해결할 수 있다. 예를 들어, 런 렝쓰(Run length)가 128이상인 경우에는 코드를 분할(split)하여 구현하는 것이다. 따라서, 타임-스탬프 없는 패킷이 255개 연속 발생하는 경우 0x7F 0x7D로 표현할 수 있다.
도 6을 참조할 때, 188 바이트 크기를 가진 다른 PID 스트림과 달리, 타임-스탬프가 부가된 PID 스트림은 예컨대, 192 바이트의 크기를 가질 수 있다.
전술한 바와 같이, 도 5의 다운로드 모듈(212)로 입력되는 PID 스트림들에 타임-스탬프를 부가함으로써, 도 6에서는 타임-스탬프 없는 패킷이 4번 연속 발생하고, 타임-스탬프가 존재하는 패킷 하나, 그리고 타임-스탬프가 없는 패킷이 발생함으로써 ‘0x03 0x80 0x00’으로 코딩된다.
이상 도 4 내지 7을 통해 다운로드 모듈(212)에서 타임-스탬프를 처리하는 방법에 대해 살펴보았다.
이하에서는 다운로드 모듈(212)에서 인덱스(여기서, 인덱스는 전술한 어댑티브 타임-스탬프 인덱스와는 다른 인덱스)를 구성하는 방법에 대해 기술한다.
도 8은 본 발명에 따른 다운로드 모듈(212)에서 인덱스 구성의 일 예를 설명하기 위해 도시한 도면이다.
도 8을 참조하면, 1바이트로 정의된 인덱스는 최상위 비트(MSB) I_picture_flag 부터 최하위 비트(LSB) Reserved 플래그까지 총 8개의 플래그를 포함하여 구성된다.
이러한 인덱스는 예컨대, PVR에서 일반적으로 요청되고 구현되는 트릭 플레이 예를 들어, 패스트 포워드(fast forward), 스킵(skip) 등의 구현을 위한 내용들을 플래그 형태로 포함한다.
관련하여, 디지털 수신기는 PVR 재생 과정에서 사용자가 트릭 플레이를 요청하더라도, 실제 트릭 플레이 구현 과정에서는 비디오 디코더 자체는 정상 배속으로 디코딩을 한다. 다만, 요청된 트릭 플레이에 맞게 실제 디코딩되는 픽쳐(picture)들이 해당 배속에 따라 스킵되어 입력됨으로써 사용자 입장에서는 빠른 배속 내지 스킵 효과를 느낄 수 있게 되는 것이다.
이에 따라, 업로드 모듈(218)에서는 원활한 트릭 플레이의 수행을 위해 (시스템) 디코더로 입력될 데이터를 추출하여 입력하여야 한다. 이를 위해서는 해당 데이터의 위치를 빨리 찾아야 하는데, 본 발명에 따른 인덱스 정보는 상기와 같은 경우에 업로드 모듈(218)에서 디코더로 입력할 데이터의 보다 빠르고 효율적인 검색을 위한 것이다.
즉, 인덱스 정보는 디지털 수신기에서 PVR 재생 과정에서 요청 등에 따라 트릭 플레이를 수행하는 경우에, 저장된 비디오 스트림에서 적절한 데이터의 위치를 빠르게 검색할 수 있는 부가 데이터를 추출하는 것으로, 스킵, 패스트 포워드(fast forward) 등을 수행할 때 랜덤 액세스 포인트(random access point; RAP)에 해당하는 데이터를 추출하고 이를 디코더로 선별적으로 입력 가능하도록 정보를 생성하는 것이다. 상기에서, 랜덤 액세스 포인트(RAP)는 I, B, 및 P 픽쳐 중 어느 하나일 수 있다. 다만, 본 명세서에서는 본 발명의 이해를 돕고 설명의 편의를 위해 랜덤 액세스 포인트(RAP)로 I 픽쳐를 예로 하여 설명한다. 왜냐하면, 독자적으로 재생이 불가능하며 다른 픽쳐를 위한 참조 픽쳐인 B 및 P 픽쳐와 달리 독자 재생 가능한 I 픽쳐를 랜덤 액세스 포인트(RAP)로 하는 것이 시스템 입장에서 훨씬 효율적이기 때문이다. 즉, I 픽쳐는 랜덤 액세스가 가능한 픽쳐를 말한다.
더불어, 인덱스 정보는, 트릭 플레이시 2D 또는 3D 모드 선택이 가능하도록 다시 말해, 이러한 모드에 따라 저장된 스트림을 적절하게 업로드할 수 있도록 2D/3D 관련 인덱싱 기능도 정의할 수 있다.
이를 위해, 다운로드 모듈(212)은, 인덱스 생성시 저장되는 트랜스포트 패킷들을 분석한다. 다운로드 모듈(212)은 상기 분석 결과에 기초하여 예컨대, 해당 트랜스포트 패킷 내에 랜덤 액세스 포인트(RAP)가 포함되었는지 파악한다. 또한, 다운로드 모듈(212)은 해당 트랜스포트 패킷에 포함된 비디오 기본 스트림이 좌영상 이미지 데이터인지 우영상 이미지 데이터인지 여부를 판단한다. 더불어, 다운로드 모듈(212)은 3D인 경우 2D 호환 스트림 여부를 판단할 수도 있다.
다운로드 모듈(212)은 상기와 같이 판단된 내용들에 대해 인덱스 정보로 정의하고 구현할 수 있다.
예를 들어, 다운로드 모듈(212)은 인덱스를 생성하기 위해서는 각 트랜스포트 패킷 또는 트랜스포트 패킷의 그룹(예를 들어, 100개의 트랜스포트 패킷 묶음 또는 I 픽쳐 시작(picture start) 마다 인덱스를 생성하도록 가변적인 패킷 개수 사용) 단위로 도 5와 같이 예시된 인덱스 정보의 존재 유무를 검사한다. 다운로드 모듈(212)은 검사 결과를 인덱스&파일 데이터베이스로 전송하고, 인덱스&파일 데이터베이스에서는 해당 인덱스와 트랜스포트 패킷이 저장되는 물리적인 위치 등을 매핑(mapping)하여 관리(managing)한다. 여기서, 3D 모드에서의 랜덤 액세스 포인트의 경우에는 예를 들어, 인핸스먼트 레이어의 비디오 기본 스트림이 반드시 I 픽쳐일 필요는 없다.
예를 들어, 다운로드 모듈(212)은 저장할 트랜스포트 패킷을 입력 데이터로 수신하나, 각 트랜스포트 패킷에 I 픽쳐 시작 또는 랜덤 액세스 포인트(RAP)의 시작 바이트 포함 여부, I 픽쳐 시작 위치가 포함된 기본 스트림 및 뷰 타입 등의 정보가 포함된 인덱스가 포함된 트랜스포트 패킷이 출력 데이터 출력된다. 여기서, 뷰 타입 정보는 예컨대, 2D 호환 여부에 대한 정보, 라이트 뷰 포함 여부에 대한 정보 등을 포함한다.
도 8을 참조하면, 다운로드 모듈(212)에서 구성되는 인덱스의 일 예는, 패킷마다 인덱스가 생성될 수 있으며, 이 경우 최상위 비트부터 순차로 I 픽쳐 존부에 관한 I_picutre_flag, 픽쳐 시작 존재 여부에 대한 picture_start_exist, 픽쳐 종료 존재 여부에 대한 picture_endt_exist, 베이스 레이어인지 여부에 대한 base_layer, 인핸스먼트 레이어인지 여부에 대한 Enhance_layer, 좌영상 이미지 데이터인지 여부에 대한 left, 우영상 이미지 데이터인지 여부에 대한 right 및 향후 사용을 위한 reserved 플래그를 포함하여 구성된다.
여기서, 디지털 수신기는 수신되는 디지털 신호 내 시그널링 정보에 기초하여 특히, 인핸스먼트 레이어의 코덱 정보를 알 수 있다. 관련하여, 도 8의 인덱스 구성에서 enhance_layer 플래그를 저장함으로써, 시스템 디코더(108)는 해당 비디오 스트림이 듀얼 스트림으로 구성된 것을 알 수 있다. 다만, 여기서, enhance_layer 플래그는 독자적으로는 의미가 없을 수 있다. 왜냐하면, 인핸스먼트 레이어의 비디오 기본 스트림 자체가 베이스 레이어의 비디오 기본 스트림에 기초하기 때문이다. 따라서, 본 enhance_layer 플래그가 비활성화되면, 디지털 수신기는 해당 비디오 스트림이 싱글 비디오 스트림임을 알 수 있다. 이 경우 Base_layer 플래그는 활성화될 수 있다. 베이스 레이어 자체가 싱글 비디오 스트림에 해당하는 것으로 보아 관련 정보를 정의할 수 있기 때문이다.
또한, Left 또는 Right 플래그는 3D 모드 시청시에 해당 데이터의 좌영상 이미지 데이터 또는 우영상 이미지 데이터 식별 이외에도 예컨대, 뷰 스위칭과 같이 2D 모드 시청시에서 좌영상 이미지 데이터 또는 우영상 이미지 데이터에 기초하여 시청 여부를 결정함에 이용 가능하고, 전술한 바와 같이 시청 도중에 뷰 스위칭이 요청되면 해당 플래그 정보들이 이용될 수 있다.
여기까지 다운로드 모듈(212)에 대해 상세하게 설명하였다. 이하에서는 PVR 재생시에 시스템 디코더(108)를 비디오 기본 스트림에 대한 트랜스포트 패킷들을 업로드하는 업로드 모듈(218)에 대해 상세하게 기술한다.
도 9는 도 2의 3D PVR 모듈에 포함된 업로드 모듈(218) 구성의 일 예를 설명하기 위해 도시한 블록도이다.
도 9에서 업로드 모듈(218)은 PVR의 저장부(216)에 저장 또는 녹화된 컨텐트를 재생할 때, 저장부(216)로부터 입력되는 트랜스포트 패킷들을 타이밍에 맞추어 시스템 디코더(108)로 입력함으로써 PVR 재생이 가능하도록 한다.
여기서, 업로드 모듈(218)은 입력되는 트랜스포트 패킷이 예컨대, 192 바이트의 크기를 가진 타임-스탬프드 트랜스포트 스트림인 경우에는, 4 바이트의 타임-스탬프를 제거하여 시스템 디코더(108) 및 비디오 디코더(112)에서 처리 가능한 각 188 바이트 크기의 각 패킷이 제거된 타임-스탬프에 의거한 타이밍에 맞게 시스템 디코더(108)로 입력되도록 한다.
또한, 업로드 모듈(218)은 트릭 플레이가 요청된 경우에 그 수행을 위해 인덱스&파일 데이터베이스(214)로부터 추출된 도 8과 같이 구성된 인덱스 정보에 기초하여 적절한 트랜스포트 패킷만 선별적으로 입력받고 시스템 디코더(108)로 출력할 수도 있다.
도 9를 참조하면, 본 발명에 따른 이러한 업로드 모듈(218)은 시스템 클록부(912), 출력 제어부(output controller)(914), 타임-스탬프 처리부(916) 등을 포함하여 구성될 수 있다.
시스템 클록부(912)는 출력 제어부(914)에서 출력 제어시 즉, 해당 트랜스포트 패킷의 출력 제어시 참조할 시스템 클록에 관한 정보를 제공한다.
출력 제어부(914)는 인덱스&파일 데이터베이스(214)로부터 인덱스 데이터를 수신하고 저장부(216)로 데이터를 요청한다. 이때, 출력 제어부(914)는 저장부(216)로 데이터를 요청함에 있어서, 수신된 인덱스 데이터에 기초하여 요청할 수 있다. 저장부(216)는 출력 제어부(914)의 요청에 따라 해당 트랜스포트 패킷을 타임 스탬프 처리부(916)로 전송한다. 여기서, 저장부(216)에서 출력되는 트랜스포트 패킷은 모두 타임-스탬프드 트랜스포트 패킷일 수도 있으며 일부만 타임-스탬프드 트랜스포트 패킷일 수도 있다.
타임-스탬프 처리부(916)는 입력되는 트랜스포트 패킷들로부터 타임-스탬프를 제거하여 188 바이트 크기의 트랜스포트 패킷들만을 출력 제어부(914) 또는 시스템 디코더(108)로 직접 출력한다. 특히, 후자의 경우에는 출력 제어부(914)는 시스템 클록부(912)의 시스템 클록에 따른 시스템 타이밍을 계산하여 타임-스탬프 처리부(916)로 제어 신호를 출력할 수도 있다.
상기에서 시스템 디코더(108)로의 전송 타이밍은 제거되는 타임-스탬프를 참조하는데, 시스템 클록부(912)에서 출력하는 시스템 타임을 읽어 해당 값이 타임-스탬프의 값과 일치하는 경우 해당 트랜스포트 패킷이 시스템 디코더(108)로 입력되도록 한다.
만약 타임-스탬프가 없는 트랜스포트 패킷의 경우에는 녹화시 입력된 비트 레이트(bit rate)를 참고하여 가상의 타임-스탬프 값을 이용하여 출력 타이밍을 계산할 수도 있다. 이 경우 가상의 타임-스탬프는 예를 들어, 3D PVR 모듈 내 기 설명된 다운로드 모듈(212)에서 생성될 수도 있으며 별도의 구성이 추가되어 생성될 수도 있다. 관련하여, 업로드 모듈(218)은 타임-스탬프의 존부에 대해 기 설명한 타임-스탬프 인덱스를 참고할 수 있으며, 이를 통해 각 트랜스포트 패킷의 길이 및 타임-스탬프 여부를 알 수 있게 된다.
상기에서, 구분없이 설명하였으나, 기본적으로 인덱스 정보는 PVR 재생시에도 트릭 플레이 재생시에만 이용된다. 다시 말해, 도 9에서 출력 제어부(914)는 항상 인덱스 데이터를 수신하여 이에 기초하여 저장부(216)로 데이터를 요청하는 것이 아니라, 일반 재생시에는 인덱스 데이터에 기초하지 않은 데이터 출력 요청을 할 수도 있다. 즉, 트릭 플레이 재생이 아닌 경우에는 인덱스&파일 데이터베이스(214)는 출력 제어부(914)와 액세스되지 않을 수도 있다.
디지털 수신기 내 PVR 모듈(110)에서 트릭 플레이를 수행하는 경우, 동작 모드에 따라 소프트웨어/미들웨어(Software/Middleware) 등에서 건너 뛸 픽쳐의 개수 등을 판단한 후 재생할 픽쳐를 선택한다. 예를 들어, PVR 모듈(110)은 트릭 플레이 기능 중 빠른 배속 재생을 수행하는 경우에는, 2개의 I 픽쳐를 건너뛰며 재생을 수행할 수 있다. 이 경우, PVR 모듈(110)은 인덱스&파일 데이터베이스(214)로부터 입력되는 인덱스 파일을 참고해 첫번째 I 픽쳐에 대한 시작 및 종료 위치를 파악할 수 있다. 또한, 업로드 모듈(218)은 해당 구간에 대한 트랜스포트 패킷들을 저장부(216)로부터 읽어 올 수 있다.
이후 업로드 모듈(218)은 입력되는 인덱스 정보에 기초하여 4번째, 7번째, 10번째 등 2개의 I 픽쳐를 건너 뛰어 해당 위치에 대한 트랜스포트 패킷 데이터를 읽어와 시스템 디코더(108)로 입력할 수 있다.
이 경우, 업로드 모듈(218)은 재생 과정에서 시스템 디코더(108) 및 비디오 디코더(112)로 노멀(normal)한 속도로 데이터를 처리하지만, 입력되는 데이터 자체가 건너 뛰는 데이터이므로 빠른 배속 재생이 가능해진다. 예컨대, I 픽쳐 주기가 10장이라고 하면 이 경우 30배속의 빠른 재생의 효과가 발생하는 것과 같다.
이하에서는 전술한 내용에 기초하여 디지털 수신기의 다양한 사용 시나리오에 따른 PVR 기능 수행 방법에 대한 순서도를 설명한다.
도 10은 본 발명에 따른 2D/3D 녹화시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도이다.
예컨대, 도 10은 디지털 수신기에서 2D/3D 모드로 입력되는 트랜스포트 스트림을 녹화 또는 저장하는 동작에 대한 설명이다. 여기서, 전술한 도면을 참조할 때, 최초 전송 스트림을 수신부(102), VSB 디코더(104)를 거쳐 시스템 디코더(108)에서 처리하기 이전 단계에 대한 설명은 상술한 내용을 원용하고 여기서 상세한 설명은 생략한다.
시스템 디코더(108)는 사용자 등에 의해 PVR 기능 수행 요청 즉, 컨텐트 저장 명령 내지 요청이 있는지 판단한다(S102). 판단 결과 시스템 디코더(108)는 컨텐트 저장 명령이 없으면, 입력되는 트랜스포트 스트림을 처리한 후 역다중화부 및 비디오 디코더(112)를 거쳐 출력되도록 제어한다. 여기서, 입력되는 트랜스포트 스트림이 2D/3D 여부에 따라 전술한 내용들을 참조하여 적절한 처리가 이루어져 출력될 수 있다. 예컨대, 입력되는 트랜스포트 스트림이 3D 비디오 스트림인 경우에는 포맷터(116)를 거쳐 3D 출력 형태로 변환되어 디스플레이 된다.
S102 단계 판단 결과, 시스템 디코더(108)는 만약 사용자에 의해 컨텐트 저장 명령 또는 요청이 있는 경우 녹화 모드가 2D/3D 여부를 판단한다(S104). 왜냐하면, 이는 시스템 디코더(108)에서 요청된 녹화 모드에 따라 PVR 모듈(110)의 동작을 적절하게 제어할 필요가 있고, PVR 모듈(110)의 동작이 전술한 바와 같이, 녹화 모드에 따라 상이하기 때문이다.
S104 단계 판단 결과, 녹화 모드가 3D 모드인 경우, 시스템 디코더(108)는 역다중화부를 거쳐 PVR 모듈(110)로 입력될 비디오 기본 스트림에 대한 트랜스포트 패킷에 대한 처리가 가능하도록 PID 조합을 결정하여야 한다. (S106).
S106 단계에서 시스템 디코더(108)은 결정된 PID 조합에 따라 PVR 모듈(110)로 입력될 PID 스트림들에 대한 필터링을 수행한다. 즉, 시스템 디코더(108)는 역다중화부를 거쳐 입력되는 트랜스포트 패킷들 중 베이스 레이어 비디오/오디오 기본 스트림 및 인핸스먼트 레이어 비디오 기본 스트림을 선택하여 PVR 모듈(110)로 입력되도록 제어한다(S108).
S104 단계 판단 결과, 녹화 모드가 2D 모드인 경우, 시스템 디코더(108)는 역다중화부를 거쳐 PVR 모듈(110)로 입력될 비디오 기본 스트림에 대한 트랜스포트 패킷에 대한 처리가 가능하도록 PID 조합을 결정하여야 한다(S110).
S106 단계에서 시스템 디코더(108)는 결정된 PID 조합에 따라 PVR 모듈(110)로 입력될 PID 스트림들에 대한 필터링을 수행한다. 즉, 시스템 디코더(108)는 역다중화부를 거쳐 입력되는 트랜스포트 패킷들 중 베이스 레이어 비디오/오디오 기본 스트림을 선택하여 PVR 모듈(110)로 입력되도록 제어한다(S112).
S108 또는 S112 단계 이후 PVR 모듈(110)은 시스템 디코더(108)의 제어에 따라 입력되는 비디오 기본 스트림들에 대한 비디오 데이터에 대한 분석 및 관련 정보를 저장한다(S114).
PVR 모듈(110)은 S114 단계에서 수행한 비디오 데이터에 대한 분석 결과에 기초하여 전술한 도 4 내지 7과 같은 방법에 따라 트랜스포트 패킷에 대한 타임-스탬프를 생성 및 삽입하여 저장부(216)에 저장한다(S116).
또한, PVR 모듈(110)은 S116 단계 이후 또는 동시에 PVR 기능 중 트릭 플레이 재생이 가능하도록 도 8과 같은 방법으로 인덱스 파일을 생성하고, 인덱스&파일 데이터베이스(214)에 저장한다(S118).
상기 S118 단계에서, 다운로드 모듈(212)의 인덱스 프로세싱에서 비디오 데이터에 대한 분석을 수행할 수 있는데, 상기 분석의 주요 동작은 I 픽쳐의 존재 여부를 판단하는 것이다. 예컨대, I 픽쳐의 시작점 및 종료점, 좌/우 여부, 베이스 레이어 또는 인핸스먼트 레이어 여부 등의 정보가 저장되었는지 판단하여 판단 결과에 따라 적절하게 저장 동작을 수행한다.
또한, 다운로드 모듈(212)에서는 각 입력 트랜스포트 패킷이 시스템 디코더(108)로 입력된 시점 즉, 시스템 타임을 시스템 클록으로 이용하여 해당 시점이 타임 스탬프로 지정하여 트랜스포트 패킷에 삽입한다. 특히, 어댑티브 타임 스탬프를 사용하는 경우 트랜스포트 패킷에 대한 불연속 여부를 판단하고, 판단 결과에 따라 타임-스탬프가 삽입되도록 결정 및 제어할 수 있다.
도 11은 본 발명에 따른 2D 모드 재생시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도이다.
도 11은 예컨대, 도 10과 같이 PVR 기능 수행을 위하여 저장된 컨텐츠에 대한 재생 동작 수행에 대한 설명이다. 여기서, 저장된 컨텐츠 자체가 2D 컨텐츠/3D 컨텐츠일 수 있다.
업로드 모듈(218)은 재생 모드가 2D인지 3D인지 판단한다(S202). 상기 판단 결과 만약 재생 모드가 3D인 경우에는 후술한 도 12를 참조(S204)하고, 여기서 상세한 설명은 생략한다.
다시 말해, 업로드 모듈(218)에서 재생 모드를 판단한 결과 2D 재생 모드인 경우에는, 업로드 모듈(218)은 업로드할 비디오 기본 스트림에 해당되는 PID 스트림을 시스템 디코더(108)로 입력하기 위해 PID 필터링을 수행한다(S206).
또한, 업로드 모듈(218)에서는 재생될 비디오 기본 스트림에 대한 업로드 제어를 위하여 인덱스&파일 데이터베이스(214)로부터 인덱스 파일을 독출하고 독출된 인덱스 파일에 기초하여 2D에 해당하는 데이터의 저장부(216) 내 위치를 판단한다(S208). 즉, 듀얼 스트림인 경우, 베이스 레이어 기본 스트림만을 수신하고, 인핸스먼트 레이어 비디오 기본 스트림에 해당하는 비디오 기본 스트림에 대해서는 스킵을 한다. 그러나 여기서, 정상 배속인 경우에는 인핸스먼트 레이어에 대한 스킵을 굳이 하지 않아도 후속단(역다중화부(108))의 PID 필터 동작에 의해 정상 배속 재생에는 타이밍 문제 없이 인핸스먼트 레이어가 생략된 2D 모드 재생이 가능하다.
업로드 모듈(218)은 2D 해당 데이터를 시스템 타이밍에 따라 업로드하고(S210), 시스템 디코더/역다중화부(108), 및 비디오 디코더(112)를 거쳐 2D 해당 데이터가 디코딩되어(S212), 비디오 재생이 이루어진다(S214).
여기서, 만약 트릭 플레이를 선택한 경우, 시스템 디코더(108) 및 비디오 디코더(112)의 정상 동작을 보장하기 위해서는 2D에 해당되는 데이터만을 업로드 모듈(218)에서 시스템 디코더(108)로 출력하는 것이 바람직할 것이다.
도 12는 본 발명에 따른 3D 모드 재생시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도이다.
도 11과 달리, 도 12는 3D 모드 재생시의 수신기의 동작에 관한 것으로, 전술한 바와 같이, S202 단계 판단 결과 재생 모드가 3D인 경우에 해당될 수 있다.
즉, 업로드 모듈(218)은 재생 모드가 2D인지 3D인지 판단한다(S302). 판단 결과 재생 모드가 2D인 경우에는 전술한 도 11을 참조한다(S304).
다만, 판단 결과, 재생 모드가 3D인 경우에는, 업로드 모듈(218)은 업로드할 비디오 기본 스트림에 해당되는 PID 스트림을 시스템 디코더(108)로 입력하기 위해 PID 필터링을 수행한다(S306).
또한, 업로드 모듈(218)에서는 재생될 비디오 기본 스트림에 대한 업로드 제어를 위하여 인덱스&파일 데이터베이스(214)로부터 인덱스 파일을 독출하고 독출된 인덱스 파일에 기초하여 3D에 해당하는 데이터의 저장부(216) 내 위치를 판단한다(S308).
업로드 모듈(218)은 S308 단계 수행 이후, 트릭 플레이의 재생 요청이 있는지 판단한다(S310).
S310 단계 판단 결과, 트릭 플레이 재생 요청이 없으면 판단된 3D 데이터의 위치에 근거하여 3D 모드 저장시 다운로드한 모든 비디오 기본 스트림을 업로드한다(S312).
다만, S310 단계 판단 결과, 트릭 플레이 재생 요청이 있으면, 3D I 픽쳐에 해당하는 트랜스포트 패킷만 추출하고 업로드한다(S314).
시스템 디코더/역다중화부(108), 및 비디오 디코더(112)에서 업로드된 3D 해당 데이터에 대한 디코딩을 수행하고(S316), 포맷터(116)에서 출력 포맷에 따라 3D 포맷팅을 수행한다(S318).
이렇게 3D 포맷팅된 3D 데이터를 출력한다(S320).
상기에서 I 픽쳐로 지정된 대응되는 베이스 및 인핸스먼트 비디오 데이터가 업로드 되면, 최종적으로 출력되는 비디오는 베이스 및 인핸스먼트 레이어의 I 픽쳐를 디코딩 해 포캣터 등에서의 모든 변환을 거쳐 출력이 된다.
도 13은 본 발명에 따른 뷰 스위칭 요청시 수신기 동작의 일 예를 설명하기 위해 도시한 순서도이다.
도 13의 경우에는 재생 과정에서 좌우 전환을 요청한 경우에 대한 설명이다.
업로드 모듈(218)은 재생 모드를 판단하여(S402), 2D 모드이면 도 10의 설명을 참조한다(S404).
다만, 판단 결과 3D 모드이면, 업로드 모듈(218)은 다시 MVC 또는 뷰 디펜던시(View Dependency)가 존재하는지 판단한다(S406). 왜냐하면, MVC이거나 뷰 디펜던시가 존재하는 경우에는 베이스 레이어 해당 정보까지 모두 업로드되어야 하기 때문이다(S408).
업로드 모듈(218)은 S408 단계까지 수행 이후 인덱스 정보를 이용하여 대응되는 데이터를 업로드한다(S410).
시스템 디코더/역다중화부(108), 및 비디오 디코더(112)에서 업로드된 3D 해당 데이터에 대한 디코딩을 수행하고(S412), 포맷터(116)에서 출력 포맷에 따라 3D 포맷팅을 수행한다(S414).
이렇게 3D 포맷팅된 3D 데이터를 출력한다(S416).
상기 디코딩 과정에서는 좌우 뷰가 모두 처리되나 최종 출력 과정에서 선택된 뷰만을 출력할 수 있다. 도시되진 않았으나, 디코딩 과정 이전 또는 이후 최종 출력 이전에 디지털 수신기는 원하는 뷰를 선택받을 수 있다.
본 발명의 실시를 위한 형태는 발명의 실시를 위한 최선의 형태에서 모두 설명하였다.
이상 상술한 본 발명에 따르면, 디지털 수신기에서 3D 컨텐츠에 대해 다양한 PVR 기능을 제공할 수 있으며, 풀 레졸루션 퍼 아이(Full Resolution Per Eye) 구현을 위한 3D 스트림에 대해서도 효과적인 PVR 기능을 지원 가능하고, PVR을 이용해 3D 컨텐츠에 대해서도 원활하게 트릭 플레이, 2D/3D 전환을 수행할 수 있다.
나아가, 설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 전술한 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.
본 발명에 따른 디스플레이 장치 및 그 동작 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명의 디스플레이 장치의 동작방법은 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.
그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양 발명의 설명은 보충적으로 적용될 수가 있다.
본 발명은 3D 신호를 수신하고 저장할 수 있는 PVR 장치를 구비한 디지털 수신기에서 3D 컨텐츠에 대한 처리에 관한 것으로, 디지털 수신기의 모든 분야에서 이용 가능한바, 산업상 이용가능성이 있다.

Claims (20)

  1. 3D 서비스를 위한 디지털 방송 신호를 처리하는 방법에 있어서,
    입력되는 3D 비디오 기본 스트림에 타임-스탬프를 부가하여 저장하는 단계;
    저장된 3D 비디오 기본 스트림을 추출하고, 추출된 3D 비디오 기본 스트림의 타임-스탬프 값에 기초하여 시스템 클록에 따라 업로드하는 단계;
    업로드된 3D 비디오 기본 스트림을 디코딩하는 단계; 및
    디코딩된 3D 비디오 데이터를 출력 포맷에 맞게 포맷팅하여 출력하는 단계;를 포함하는 방법.
  2. 제1항에 있어서,
    상기 입력되는 3D 비디오 기본 스트림을 분석하는 단계; 및
    상기 분석 결과에 따라 트릭 플레이를 위한 인덱스 데이터를 생성하여 저장하는 단계;를 더 포함하는 방법.
  3. 제2항에 있어서,
    상기 3D 비디오 기본 스트림은,
    베이스 레이어 비디오 스트림과 인핸스먼트 레이어 비디오 스트림으로 구성된 듀얼 비디오 스트림인 방법.
  4. 제3항에 있어서,
    상기 타임-스탬프는,
    입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 소정 단위의 트랜스포트 패킷마다 부가되는 방법.
  5. 제3항에 있어서,
    상기 타임-스탬프는,
    입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 PID 필터링 과정에서 발생되는 불연속 구간 이후 수신되는 첫번째 트랜스포트 패킷에 부가되는 방법.
  6. 제4항 또는 제5항에 있어서,
    상기 타임-스탬프는,
    해당 트랜스포트 패킷에 타임-스탬프의 존재 여부를 지시하는 제1 플래그와 해당 트랜스포트 패킷 이후 타임-스팸프가 부가된 다음 트랜스포트 패킷까지의 런 렝쓰(run length)를 지시하는 제2 플래그 중 적어도 하나를 포함하는 방법.
  7. 제6항에 있어서,
    상기 타임-스탬프는,
    상기 제2 플래그 값에 기초하여 소정 단위 또는 불연속이 발생하지 않은 경우에 부가되는 방법.
  8. 제3항에 있어서,
    상기 인덱스 데이터는,
    입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷과 관련하여, 해당 패킷 내 I 픽쳐 존재 여부에 대한 정보, I 픽쳐 시작 및 종료 위치에 대한 정보, 및 좌영상 이미지 데이터 또는 우영상 이미지 데이터 여부에 대한 정보를 포함하는 방법.
  9. 제8항에 있어서,
    상기 인덱스 데이터는,
    베이스 레이어 기본 스트림인지를 지시하는 정보 및 인핸스먼트 레이어 기본 스트림인지 여부를 지시하는 정보를 더 포함하는 방법.
  10. 제9항에 있어서,
    상기 타임 스탬프가 부가된 트랜스포트 패킷은,
    192 바이트 크기를 가지고, 업로드 이전에 타임 스탬프가 제거되는 방법.
  11. 3D 서비스를 위한 디지털 수신기에 있어서,
    입력되는 3D 비디오 기본 스트림에 타임-스탬프를 부가하여 저장되도록 제어하는 다운로드 모듈과, 저장된 3D 비디오 기본 스트림을 추출하고, 추출된 3D 비디오 기본 스트림의 타임-스탬프 값에 기초하여 시스템 클록에 따라 업로드하는 업로드 모듈을 포함한 PVR 모듈;
    업로드된 3D 비디오 기본 스트림을 디코딩하는 디코더;
    디코딩된 3D 비디오 데이터를 출력 포맷에 맞게 포맷팅하는 포맷터; 및
    포맷팅된 3D 비디오 데이터를 출력하는 출력부;를 포함하는 디지털 수신기.
  12. 제11항에 있어서,
    상기 다운로드 모듈은,
    상기 입력되는 3D 비디오 기본 스트림을 분석하고, 상기 분석 결과에 따라 트릭 플레이를 위한 인덱스 데이터를 생성하여 저장하도록 제어하는 디지털 수신기.
  13. 제12항에 있어서,
    상기 3D 비디오 기본 스트림은,
    베이스 레이어 비디오 스트림과 인핸스먼트 레이어 비디오 스트림으로 구성된 듀얼 비디오 스트림인 디지털 수신기.
  14. 제13항에 있어서,
    상기 다운로드 모듈은,
    입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 소정 단위의 트랜스포트 패킷마다 상기 타임-스탬프를 부가하는 디지털 수신기.
  15. 제13항에 있어서,
    상기 다운로드 모듈은,
    입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷들 중 PID 필터링 과정에서 발생되는 불연속 구간 이후 수신되는 첫번째 트랜스포트 패킷에 상기 타임-스탬프를 부가하는 디지털 수신기.
  16. 제14항 또는 제15항에 있어서,
    상기 타임-스탬프는,
    해당 트랜스포트 패킷에 타임-스탬프의 존재 여부를 지시하는 제1 플래그와 해당 트랜스포트 패킷 이후 타임-스팸프가 부가된 다음 트랜스포트 패킷까지의 런 렝쓰(run length)를 지시하는 제2 플래그 중 적어도 하나를 포함하는 디지털 수신기.
  17. 제16항에 있어서,
    상기 다운로드 모듈은,
    상기 제2 플래그 값에 기초하여 소정 단위 또는 불연속이 발생하지 않은 경우에 상기 타임-스탬프를 부가하는 디지털 수신기.
  18. 제13항에 있어서,
    상기 다운로드 모듈은,
    입력되는 3D 비디오 기본 스트림을 위한 트랜스포트 패킷과 관련하여, 해당 패킷 내 I 픽쳐 존재 여부에 대한 정보, I 픽쳐 시작 및 종료 위치에 대한 정보, 및 좌영상 이미지 데이터 또는 우영상 이미지 데이터 여부에 대한 정보를 상기 인덱스 데이터에 포함하는 디지털 수신기.
  19. 제18항에 있어서,
    상기 인덱스 데이터는,
    베이스 레이어 기본 스트림인지를 지시하는 정보 및 인핸스먼트 레이어 기본 스트림인지 여부를 지시하는 정보를 더 포함하는 디지털 수신기.
  20. 제19항에 있어서,
    상기 업로드 모듈은,
    상기 타임 스탬프가 부가되어 192 바이트 크기를 가진 트랜스포트 패킷으로부터 업로드 이전에 타임 스탬프를 제거하는 디지털 수신기.
PCT/KR2011/006018 2010-08-17 2011-08-17 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법 WO2012023787A2 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US13/817,369 US20130209063A1 (en) 2010-08-17 2011-08-17 Digital receiver and content processing method in digital receiver
KR1020127033699A KR20130098184A (ko) 2010-08-17 2011-08-17 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US37427810P 2010-08-17 2010-08-17
US61/374,278 2010-08-17

Publications (2)

Publication Number Publication Date
WO2012023787A2 true WO2012023787A2 (ko) 2012-02-23
WO2012023787A3 WO2012023787A3 (ko) 2012-04-12

Family

ID=45605548

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/006018 WO2012023787A2 (ko) 2010-08-17 2011-08-17 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법

Country Status (3)

Country Link
US (1) US20130209063A1 (ko)
KR (1) KR20130098184A (ko)
WO (1) WO2012023787A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014005558A1 (zh) * 2012-07-04 2014-01-09 合一网络技术(北京)有限公司 一种供用户上传3d视频到视频网站的系统和方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120058702A (ko) * 2010-11-27 2012-06-08 전자부품연구원 디지털 방송에서 서비스 호환 방식 전송 방법
JP5641090B2 (ja) * 2013-03-14 2014-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
KR101792518B1 (ko) * 2013-12-16 2017-11-02 엘지전자 주식회사 트릭 플레이 서비스 제공을 위한 신호 송수신 장치 및 신호 송수신 방법
US9942622B2 (en) 2014-01-24 2018-04-10 Hiperwall, Inc. Methods and systems for synchronizing media stream presentations
WO2015115869A1 (ko) * 2014-02-03 2015-08-06 엘지전자 주식회사 트릭 플레이 서비스 제공을 위한 신호 송수신 장치 및 신호 송수신 방법
US11697235B2 (en) * 2020-07-21 2023-07-11 Seiko Epson Corporation Injection molding apparatus

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
KR20040031519A (ko) * 2002-10-07 2004-04-13 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상 데이터 처리시스템 및 그 방법
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6121903A (en) * 1998-01-27 2000-09-19 Infit Communications Ltd. On-the-fly data re-compression
KR100447200B1 (ko) * 2002-07-30 2004-09-04 엘지전자 주식회사 Ｐｖｒ 지원 비디오 디코딩 시스템
JP4224690B2 (ja) * 2002-12-27 2009-02-18 ソニー株式会社 記録方法、記録装置、再生方法、再生装置および撮像装置
KR100937418B1 (ko) * 2003-08-09 2010-01-18 엘지전자 주식회사 부재중 메시지 저장 기능을 갖는 ｐｖｒ 장치 및 그 방법
KR100716291B1 (ko) * 2005-07-27 2007-05-09 삼성전자주식회사 영상재생장치와 그 제어방법 및 ｐｖｒ
JP2008271253A (ja) * 2007-04-20 2008-11-06 Toshiba Corp ストリーム再生装置
JP4475336B2 (ja) * 2008-02-08 2010-06-09 ソニー株式会社 タイムスタンプ付加装置およびタイムスタンプ付加方法、並びにプログラム
JP2010245970A (ja) * 2009-04-08 2010-10-28 Sony Corp 再生装置、再生方法、およびプログラム
JP2010244635A (ja) * 2009-04-08 2010-10-28 Sony Corp 情報処理装置、情報処理方法、再生装置、再生方法、プログラム、および記録媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
KR20040031519A (ko) * 2002-10-07 2004-04-13 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상 데이터 처리시스템 및 그 방법
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014005558A1 (zh) * 2012-07-04 2014-01-09 合一网络技术(北京)有限公司 一种供用户上传3d视频到视频网站的系统和方法

Also Published As

Publication number Publication date
WO2012023787A3 (ko) 2012-04-12
KR20130098184A (ko) 2013-09-04
US20130209063A1 (en) 2013-08-15

Similar Documents

Publication Publication Date Title
WO2012023787A2 (ko) 디지털 수신기 및 디지털 수신기에서의 컨텐트 처리 방법
WO2016129891A1 (ko) 방송 신호 송수신 방법 및 장치
WO2016089093A1 (ko) 방송 신호 송수신 방법 및 장치
WO2012077982A2 (ko) 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
WO2009110766A1 (en) Method of receiving broadcast signals and apparatus for receiving broadcast signals
WO2012099359A2 (ko) 복수의 실시간 전송 스트림을 수신하는 수신 장치와 그 송신 장치 및 멀티미디어 컨텐츠 재생 방법
WO2009134105A2 (en) Method of receiving broadcasting signal and apparatus for receiving broadcasting signal
WO2013019042A1 (ko) 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법
WO2013025035A9 (ko) 송신 장치, 수신 장치 및 그 송수신 방법
WO2012011724A2 (ko) 미디어 파일 송수신 방법 및 그를 이용한 송수신 장치
WO2010147289A1 (en) Broadcast transmitter, broadcast receiver and 3d video processing method thereof
WO2013154402A1 (en) Receiving apparatus for receiving a plurality of signals through different paths and method for processing signals thereof
WO2013154397A1 (en) Transmitting system and receiving apparatus for providing hybrid service, and service providing method thereof
WO2016171510A1 (ko) 방송 신호 송수신 방법 및 장치
WO2011159128A2 (en) Method and apparatus for providing digital broadcasting service with 3-dimensional subtitle
WO2012121572A2 (ko) 프로그램 연동형 스테레오스코픽 방송 서비스를 제공하기 위한 송신 장치 및 방법, 및 수신 장치 및 방법
WO2011126240A2 (ko) 방송 신호로 전송되는 비실시간 방송 서비스 및 콘텐트 처리 방법 및 장치
EP2629530B1 (en) Digital receiver and method for processing 3d contents in digital receiver
WO2013025032A1 (ko) 수신 장치 및 그 수신 방법
WO2013055164A1 (ko) 콘텐츠 디스플레이 방법, 콘텐츠 동기화 방법, 방송 콘텐츠 디스플레이 방법 및 디스플레이 장치
WO2010079893A2 (en) Method for processing three dimensional (3d) video signal and digital broadcast receiver for performing the method
WO2011037358A2 (ko) 방송 네트워크와 ip 네트워크에 접속 가능한 디지털 디바이스 및 그 제어 방법
WO2011049372A2 (en) Method and apparatus for generating stream and method and apparatus for processing stream
KR20030026590A (ko) Ｐｖｒ에서의 스트림 점프 방법
WO2012144795A2 (en) Apparatus for outputting broadcast recorded by schedule recording and control method thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11818387

Country of ref document: EP

Kind code of ref document: A2

ENP Entry into the national phase

Ref document number: 20127033699

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 13817369

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 11818387

Country of ref document: EP

Kind code of ref document: A2