KR20120040641A - Method and apparatus for non-real time stereoscopic video service - Google Patents

Method and apparatus for non-real time stereoscopic video service Download PDF

Info

Publication number
KR20120040641A
KR20120040641A KR1020110026449A KR20110026449A KR20120040641A KR 20120040641 A KR20120040641 A KR 20120040641A KR 1020110026449 A KR1020110026449 A KR 1020110026449A KR 20110026449 A KR20110026449 A KR 20110026449A KR 20120040641 A KR20120040641 A KR 20120040641A
Authority
KR
South Korea
Prior art keywords
image
video
stereoscopic
information
service
Prior art date
Application number
KR1020110026449A
Other languages
Korean (ko)
Inventor
정광희
윤국진
이광순
권형진
임현정
허남호
이수인
이윤진
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to US13/277,081 priority Critical patent/US9106896B2/en
Publication of KR20120040641A publication Critical patent/KR20120040641A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/167Synchronising or controlling image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0096Synchronisation or controlling aspects

Abstract

PURPOSE: A method for non real time stereoscopic video service and a device thereof are provided to synchronize a reference video and an additional video when time information of a target playing video frame is not acquired. CONSTITUTION: A broadcasting receiving device extracts a PAT(Program Association Table) in a received MPEG-2 TS(Transport Stream)(S210). The device extracts a PMT corresponding to a selected program from the MPEG-2 TS(S220). The device extracts a stereoscopic service descriptor from the extracted PMT. The device analyzes information analyzed by the stereoscopic service descriptor(S230). The device generates a playing video frame and time information(S240). The device acquires additional information corresponding to a reference information form a storage device(S250).

Description

비실시간 스테레오스코픽 비디오 서비스 방법 및 장치{Method And Apparatus For Non-Real Time Stereoscopic Video Service}Non-real time stereoscopic video service method and apparatus {Method And Apparatus For Non-Real Time Stereoscopic Video Service}

본 발명은 방송 송수신 방법 및 방송 송수신 시스템에 관한 것으로서, 더 구체적으로는 비실시간으로 3차원 입체 방송을 제공하기 위한 방송 송수신 방법 및 방송 송수신 시스템에 관한 것이다.The present invention relates to a broadcast transmission / reception method and a broadcast transmission / reception system, and more particularly, to a broadcast transmission / reception method and a broadcast transmission / reception system for providing 3D stereoscopic broadcasting in non real time.

스테레오스코픽(stereoscopic) 비디오 서비스는 좌우 시점의 비디오 영상을 통해 시청자에게 입체적인 영상을 제공한다. 시청자에게 좌우 시점의 영상을 통해 입체 영상을 제공하기 때문에, 스테레오스코픽 비디오 서비스에서는 모노스코픽(monoscopic) 비디오 서비스에 비해서 많은 데이터를 전송해야 한다.Stereoscopic video services provide stereoscopic images to viewers through video images of left and right views. Since stereoscopic video is provided to the viewer through images of left and right views, a stereoscopic video service needs to transmit more data than a monoscopic video service.

한편, 스테레오스코픽 서비스를 위해 기준 영상(기준 비디오, 기준 데이터)과 부가 영상(부가 비디오, 부가 데이터)을 함께 다중화하여 전송하는 것을 실시간 스테레오스코픽 서비스라고 한다. 하지만, 상술한 바와 같이, 스테레오스코픽 비디오 서비스를 제공하기 위해서는 많은 양의 데이터 전송이 필요하며, 실시간으로 기준 비디오의 데이터와 부가 비디오의 데이터를 전송하기에는 데이터 전송률의 제한 등과 같은 어려움이 따른다.Meanwhile, a multiplexing of a reference video (reference video, reference data) and an additional video (additional video, additional data) together for a stereoscopic service is called a real time stereoscopic service. However, as described above, in order to provide a stereoscopic video service, a large amount of data transmission is required, and in order to transmit data of a reference video and additional video data in real time, there are difficulties such as a limitation of a data rate.

본 발명은 안정적으로 비실시간 스테레오스코픽 비디오 서비스를 원활하게 제공할 수 있는 방법을 제시하는 것을 목적으로 한다.An object of the present invention is to propose a method for stably providing a non-real time stereoscopic video service.

본 발명은 프로그램 맵 테이블을 수신하지 못하였거나, 프레임에 대한 타임 스템프 정보를 수신하지 못하는 등 재생할 영상 프레임의 시간 정보를 획득하지 못한 경우에도, 기준 영상과 부가 영상을 동기시킬 수 있는 방법을 제공하는 것을 목적으로 한다.The present invention provides a method for synchronizing the base view video with the additional view even when the time map information of the video frame to be reproduced is not obtained, for example, when the program map table is not received or the time stamp information on the frame is not received. For the purpose of

본 발명의 일 실시예에 따라서 송신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법은, 프로그램 맵 테이블과 프로그램 맵 테이블에 관한 정보를 포함하는 프로그램 연관 테이블을 구성하는 단계 및 프로그램 맵 테이블과 상기 프로그램 연관 테이블을 포함하는 TS(Transport Stream) 신호를 전송하는 단계를 포함하며, 프로그램 맵 테이블은 프로그램 맵 테이블에 대응하는 프로그램에 대한 스테레오스코픽 서비스 서술자를 포함하고, 스테레오스코픽 서비스 서술자는 프로그램에 대한 스테레오스코픽 비디오 서비스 시작에 관한 타임스탬프의 정보 및 프로그램에 대한 스테레오스코픽 비디오 서비스 시작 후 현재 전송하는 비디오 영상까지의 AU(Access Unit) 번호에 관한 정보를 포함한다. According to an embodiment of the present invention, a non-real time stereoscopic video service method performed by a transmitting apparatus includes: configuring a program association table including information on a program map table and a program map table; and a program map table and the program association. Transmitting a transport stream (TS) signal comprising a table, wherein the program map table includes a stereoscopic service descriptor for a program corresponding to the program map table, wherein the stereoscopic service descriptor is a stereoscopic video for the program. It includes information on a timestamp of starting a service and information on an access unit (AU) number from a stereoscopic video service start to a currently transmitted video image for a program.

이때, 스테레오스코픽 서비스 서술자는, 프로그램 맵 테이블의 서술자 루프에 포함될 수 있다.In this case, the stereoscopic service descriptor may be included in the descriptor loop of the program map table.

이때, 스테레오스코픽 비디어 서비스 시작은 NRT(Non Real Time) 마커에 의해 개시될 수 있다.In this case, the start of the stereoscopic video service may be started by a non real time (NRT) marker.

이때, 프로그램에 대한 스테레오스코픽 비디오 서비스 시작 후 현재 전송하는 비디오 영상까지의 AU 번호에 관한 정보는 3차원 비디오 영상의 AU 번호일 수 있다.In this case, the information about the AU number from the start of the stereoscopic video service for the program to the currently transmitted video image may be an AU number of the 3D video image.

이때, 스테레오스코픽 서비스 서술자는, 전송되는 영상이 좌 영상인지 우 영상인지를 나타내는 영상 특성 정보를 더 포함할 수 있다.In this case, the stereoscopic service descriptor may further include image characteristic information indicating whether a transmitted image is a left image or a right image.

이때, 영상 특성 정보는 전송되는 영상이 좌 영상인 경우와 전송되는 영상이 우 영상인 경우를 구별하는 식별 정보로서 콘텐츠의 명칭에 기재될 수도 있다.In this case, the image characteristic information may be described in the name of the content as identification information for distinguishing the case where the transmitted image is the left image and the case where the transmitted image is the right image.

본 발명의 다른 실시예에 따라서 송신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법은, 스테레오스코픽 비디오 서비스 서술자를 구성하는 단계, 프로그램 맵 테이블 및 프로그램 관련 테이블을 구성하는 단계 및 프로그램 맵 테이블 및 프로그램 관련 테이블을 포함하는 TS 신호를 전송하는 단계를 포함하며, 스테레오스코픽 비디오 서비스 서술자를 구성하는 단계는, 스테레오스코픽 비디오 서비스 서술자에 대응하는 비실시간 스테레오스코픽 서비스의 초기 타임스템프값을 지정하는 단계 및 스테레오스코픽 비디오 서비스 서술자에 대응하는 비실시간 스테레오스코픽 서비스가 시작된 시점부터 현재까지 전송된 AU(Access Unit) 패킷의 카운팅 정보를 구성하는 단계를 포함하고, 스테레오스코픽 비디오 서비스 서술자는 상기 프로그램 맵 테이블에 포함된다.According to another embodiment of the present invention, a non-real time stereoscopic video service method performed by a transmitting apparatus includes: configuring a stereoscopic video service descriptor, configuring a program map table and a program related table, and a program map table and a program related Transmitting a TS signal comprising a table, wherein configuring the stereoscopic video service descriptor comprises: specifying an initial timestamp value of a non-real-time stereoscopic service corresponding to the stereoscopic video service descriptor and a stereoscopic Configuring counting information of an access unit (AU) packet transmitted from the time point at which the non-real time stereoscopic service corresponding to the video service descriptor is started to the present, wherein the stereoscopic video service descriptor indicates the program. It is included in the table.

본 발명의 또 다른 실시예에 따라서 수신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법은, 수신한 TS로부터 프로그램 연관 테이블을 추출하여 분석하는 단계, 프로그램 연관 테이블로부터 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블을 추출하여 분석하는 단계, 프로그램 맵 테이블로부터 스테레오스코픽 비디오 서비스 서술자를 추출하여 분석하는 단계, 스테레오스코픽 비디오 서비스 서술자에 대한 분석에 의해 재생할 영상의 프레임 및/또는 시간 정보를 생성하는 단계 및 생성한 프레임 및/또는 시간 정보에 기반하여 기준 영상 및 부가 영상을 동기하여 영상을 재생하는 단계를 포함하며, 재생할 영상의 프레임 및/또는 시간 정보를 생성하는 단계는, 재생할 영상에 대한 타임스템프 정보가 손실되었는지를 판단하는 단계 및 타임스템프 정보가 손실되었다고 판단한 경우에는, 스테레오스코픽 비디오 서비스 서술자에 포함된 스테레오스코픽 비디오 서비스 시작에 관한 타임스탬프의 정보 및 스테레오스코픽 비디오 서비스 시작 후 현재까지 전송된 비디오 영상의 AU(Access Unit) 번호에 관한 정보를 기반으로 프레임 및/또는 시간 정보를 생성한다.According to another embodiment of the present invention, a non-real time stereoscopic video service method performed by a receiving apparatus may include extracting and analyzing a program association table from a received TS, and a program map corresponding to a program selected by a user from the program association table. Extracting and analyzing a table; extracting and analyzing a stereoscopic video service descriptor from a program map table; generating frame and / or time information of an image to be reproduced by analyzing the stereoscopic video service descriptor; Reproducing the image by synchronizing the base image and the additional image based on the frame and / or time information, and generating the frame and / or time information of the image to be reproduced, wherein timestamp information of the image to be reproduced is lost. To determine whether If it is determined that the step and timestamp information are lost, the information on the timestamp of the start of the stereoscopic video service included in the stereoscopic video service descriptor and the access unit (AU) of the video image transmitted until the start of the stereoscopic video service are present. Generate frame and / or time information based on the information about the number.

이때, 스테레오스코픽 서비스 서술자는, 프로그램 맵 테이블의 서술자 루프에 포함되어 있을 수 있다.In this case, the stereoscopic service descriptor may be included in the descriptor loop of the program map table.

이때, 스테레오스코픽 비디어 서비스 시작은 NRT(Non Real Time) 마커에 의해 개시될 수 있다.In this case, the start of the stereoscopic video service may be started by a non real time (NRT) marker.

이때, 프로그램에 대한 스테레오스코픽 비디오 서비스 시작 후 현재까지 전송된 비디오 영상의 AU 번호에 관한 정보는 3차원 비디오 영상의 AU 번호일 수 있다.In this case, the information on the AU number of the video image transmitted to the present after the start of the stereoscopic video service for the program may be the AU number of the 3D video image.

이때, 스테레오스코픽 서비스 서술자는, 전송되는 영상이 좌 영상인지 우 영상인지를 나타내는 영상 특성 정보를 더 포함할 수 있으며, 영상 재생 단계에서는, 영상 특성 정보에 따라서 수신한 영상을 좌 영상 혹은 우 영상으로서 재생할 수 있다.In this case, the stereoscopic service descriptor may further include image characteristic information indicating whether the transmitted image is a left image or a right image, and in the image reproducing step, the received image according to the image characteristic information is used as the left image or the right image. Can play.

이때, 재생할 영상에 대한 타임스템프 정보가 손실되지 않은 것으로 판단한 경우에는, 타임스템프에 기반해서 기준 영상 및 부가 영상을 동기하여 재생할 수 있다.In this case, when it is determined that the time stamp information of the video to be reproduced is not lost, the reference video and the additional video may be synchronously reproduced based on the time stamp.

이때, 영상을 재생하는 단계는, 미리 저장한 부가 영상들 중에서 생성한 프레임 및/또는 시간 정보에 대응하는 부가 영상을 획득하여 실시간으로 수신한 기준 영상과 동기시켜 재생할 수 있다. In this case, in the reproducing of the image, the additional image corresponding to the frame and / or time information generated from the previously stored additional images may be acquired and reproduced in synchronization with the reference image received in real time.

본 발명의 또 다른 실시예에 따라서 수신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법은, 수신한 TS로부터 프로그램 연관 테이블을 추출하여 분석하는 단계, 프로그램 연관 테이블로부터 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블을 추출하여 분석하는 단계, 프로그램 맵 테이블로부터 스테레오스코픽 비디오 서비스 서술자를 추출하여 분석하는 단계, 스테레오스코픽 비디오 서비스 서술자에 대한 분석에 의해 재생할 영상의 시간 정보를 생성하는 단계 및 생성한 프레임 및/또는 시간 정보에 기반하여 기준 영상 및 부가 영상을 동기하여 영상을 재생하는 단계를 포함하며, 재생할 영상의 프레임 및/또는 시간 정보를 생성하는 단계는, 재생할 영상에 대한 타임스템프 정보가 손실되었는지를 판단하는 단계 및 타임스템프 정보가 손실되었다고 판단한 경우에는, 스테레오스코픽 비디오 서비스 서술자에 포함된 스테레오스코픽 비디오 서비스 시작 시간 정보로부터, 스테레오스코픽 비디오 서비스 서술자에 포함된 스테레오스코픽 비디오 서비스 시작 후 현재까지 전송된 비디오 영상의 AU(Access Unit) 카운팅 수를 계산하여 동기 시간을 산출하는 단계를 포함한다.According to another embodiment of the present invention, a non-real time stereoscopic video service method performed by a receiving apparatus may include extracting and analyzing a program association table from a received TS, and a program map corresponding to a program selected by a user from the program association table. Extracting and analyzing a table; extracting and analyzing a stereoscopic video service descriptor from a program map table; generating time information of an image to be reproduced by analysis of the stereoscopic video service descriptor; and generating frames and / or And reproducing the image by synchronizing the base image and the additional image based on the time information, and generating the frame and / or time information of the image to be reproduced, determining whether timestamp information of the image to be reproduced is lost. Steps and times If it is determined that the dump information is lost, the AU (Access) of the video image transmitted to the present time after the start of the stereoscopic video service included in the stereoscopic video service descriptor is determined from the stereoscopic video service start time information included in the stereoscopic video service descriptor. Unit) calculates the counting number to calculate the synchronization time.

이때, 영상을 재생하는 단계는, 미리 저장한 부가 영상들 중에서 상기 산출한 동기 시간에 대응하는 부가 영상을 획득하여 실시간으로 수신한 기준 영상과 동기시켜 재생할 수 있다.In this case, the playing of the image may be performed by synchronizing with the reference image received in real time by acquiring an additional image corresponding to the calculated synchronization time from the previously stored additional images.

본 발명에 의하면, 안정적으로 비실시간 스테레오스코픽 비디오 서비스를 원활하게 제공할 수 있다.According to the present invention, it is possible to stably provide a non-real time stereoscopic video service smoothly.

본 발명에 의하면, 프로그램 맵 테이블을 수신하지 못하였거나, 프레임에 대한 타임 스템프 정보를 수신하지 못하는 등 재생할 영상 프레임의 시간 정보를 획득하지 못한 경우에도, 기준 영상과 부가 영상을 동기시킬 수 있다.According to the present invention, even when time information of a video frame to be reproduced is not obtained, such as failing to receive a program map table or receiving time stamp information on a frame, the reference video and the additional video can be synchronized.

도 1은 본 발명에 따른 시스템에서 방송 송신 장치의 동작을 개략적으로 설명하는 순서도이다.
도 2는 본 발명에 따른 시스템에서 방송 수신 장치의 동작을 개략적으로 설명하는 순서도이다.
도 3은 도 2에 있어서, 재생 영상 프레임과 시간 정보를 생성하고, 기준 영상과 부가 영상을 재생하는 단계를 설명하는 순서도이다.
도 4는 본 발명에 따른 스테레오스코픽 비디오 서비스 시스템의 송신 장치와 수신 장치를 개략적으로 도시한 블록도이다.
1 is a flowchart schematically illustrating an operation of a broadcast transmitting device in a system according to the present invention.
2 is a flowchart schematically illustrating an operation of a broadcast reception device in a system according to the present invention.
FIG. 3 is a flowchart illustrating an operation of generating a reproduced video frame and time information and reproducing a reference video and an additional video in FIG. 2.
4 is a block diagram schematically illustrating a transmitting device and a receiving device of a stereoscopic video service system according to the present invention.

본 발명에서는 비실시간 스테레오스코픽 비디오 서비스에 관한 것으로서, 본 발명에서는 실시간으로 송출되는 전송 스트림(TS: Transport Stream)에 시간 정보와 프레임 정보를 기술하여, 프로그램 맵 테이블을 수신하지 못하는 상황과 같이 패킷 에러가 발생했을 때에도, 시간 정보와 프레임 정보 사이의 상호 보완을 통한 시그널링 방법을 제공한다.The present invention relates to a non-real time stereoscopic video service. In the present invention, time information and frame information are described in a transport stream (TS) that is transmitted in real time, so that a packet error may not be received. Even when is generated, a signaling method through complementation between time information and frame information is provided.

실시간 스테레오스코픽 비디오 서비스에서는 스테레오스코픽 서비스를 위한 기준 영상(기준 비디오, 기준 데이터)과 부가 영상(부가 비디오, 부가 데이터)을 함께 다중화하여 전송한다. In the real-time stereoscopic video service, a reference video (reference video, reference data) and an additional video (additional video, additional data) for a stereoscopic service are multiplexed together and transmitted.

이에 반하여, 비실시간 스테레오스코픽 비디오 서비스에서는 스테레오스코픽 서비스를 위한 기준 영상과 부가 영상 중, 부가 영상을 미리 수신 장치에 저장해 두고, 이후 전송되는 기준 영상을 미리 저장한 부가 영상과 함께 처리하여 스테레오스코픽 비디오 서비스를 제공한다.On the contrary, in the non-real time stereoscopic video service, the additional video among the reference video and the additional video for the stereoscopic service is stored in advance in the receiving apparatus, and then the reference video transmitted is processed together with the additional video stored in advance for the stereoscopic video. Provide service.

비실시간 스테레오스코픽 비디오 서비스에서 수신 장치는 다양한 방법으로 부가 영상을 미리, 즉 비실시간으로 획득할 수 있다. In the non-real time stereoscopic video service, the reception apparatus may acquire an additional image in advance, that is, in non real time in various ways.

예컨대, 수신 장치는 MOT(multimedia object transfer) 프로토콜 등을 이용하여 부가 영상을 파일 형태로 다운로드할 수 있다. 또한, 부가 영상은 파일 형태로 초고속 유선 인터넷을 통해 다운로드 되고, 휴대형 저장 장치를 통해 수신 장치로 옮겨질 수도 있다. 또한, 수신 장치가 휴대 인터넷을 지원하는 경우, 부가 영상을 파일 형태로 휴대 인터넷을 통해 미리 다운로드 할 수도 있다. For example, the receiving device may download the additional video in the form of a file using a multimedia object transfer (MOT) protocol. In addition, the additional image may be downloaded through a high-speed wired Internet in the form of a file and transferred to a receiving device through a portable storage device. In addition, when the receiving apparatus supports the portable Internet, the additional video may be downloaded in advance in the form of a file through the portable internet.

도 1은 본 발명에 따른 시스템에서 방송 송신 장치의 동작을 개략적으로 설명하는 순서도이다.1 is a flowchart schematically illustrating an operation of a broadcast transmitting device in a system according to the present invention.

스테레오스코픽 비디오 서비스를 제공하기 위하여, 송신 측에서는 스테레오스코픽 서비스 서술자(Stereoscopic Service_descriptor: SS_descriptor)를 구성한다(S110).In order to provide a stereoscopic video service, a transmitting side configures a stereoscopic service descriptor (Stereoscopic Service_descriptor: SS_descriptor) (S110).

스테레오스코픽 비디오 서비스는 스테레오스코픽 비디오만을 제공할 수도 있고, 모노스코픽 비디오를 제공하는 서비스와 함께 제공될 수도 있다. 따라서, 스테레오스코픽 서비스 서술자를 정의하여 비실시간 스테레오스코픽 서비스에 관한 정보를 시그널링한다.The stereoscopic video service may provide only stereoscopic video or may be provided together with a service providing monoscopic video. Thus, a stereoscopic service descriptor is defined to signal information about a non-real time stereoscopic service.

스테레오스코픽 서비스 서술자는 MPEG-2, MPEG-4 등의 TS 계층의 프로그램 지정 정보(Program Specifioc Information: PSI) 중 하나인 PMT(Program Map Table) 내의 서술자 루프(Descriptor Loop) 내에 포함될 수 있다. 또한, 서술자 루프는 PMT 내에서 program_info_length 다음에 위치할 수 있다. 본 발명에 따라 구성되는 스테레오스코픽 서비스 서술자에 관한 구체적인 내용은 후술한다.The stereoscopic service descriptor may be included in a descriptor loop in a program map table (PMT), which is one of program specification information (PSI) of TS layers such as MPEG-2 and MPEG-4. In addition, the descriptor loop may be located after program_info_length in the PMT. Details of the stereoscopic service descriptor configured according to the present invention will be described later.

송신 측에서는 전송할 PMT 및 PAT를 구성한다(S120).The transmitting side configures the PMT and the PAT to be transmitted (S120).

PMT는 스테레오스코픽 서비스 서술자를 포함한다. 따라서, PAT(Program Association Table)로부터 선택되는 프로그램에 대응하는 PMT를 추출하고, 추출한 PMT의 서술자들 가운데 스테레오스코픽 서비스 서술자가 추출될 수 있다.The PMT includes a stereoscopic service descriptor. Accordingly, a PMT corresponding to a program selected from a PAT (Program Association Table) may be extracted, and a stereoscopic service descriptor may be extracted from descriptors of the extracted PMT.

추출된 스테레오스코픽 서비스 서술자를 이용하여, 후술하는 바와 같이 본 발명에서 기준 비디오와 부가 비디오를 정확하게 동기시킬 수 있다.By using the extracted stereoscopic service descriptor, in the present invention, the reference video and the additional video can be accurately synchronized as described below.

구성된 PMT 및 PAT 등은 MPEG-2 TS(Transport Stream) 신호로 수신 측에 전송된다(S130).
The configured PMT, PAT, etc. are transmitted to the receiver as an MPEG-2 TS (Transport Stream) signal (S130).

한편, 스테레오스코픽 서비스 서술자는 스테레오스코픽 서비스를 제공하기 위해 필요한 정보를 포함하도록 다양하게 구성될 수 있다. 일 예로, 스테레오스코픽 서비스 서술자는 DMB(Digital Multimedia Broadcasting) 비디오 연동형 스테레오스코픽 데이터 서비스의 표준에 정의된 SDS_descriptor를 호환적으로 확장하여 구성할 수도 있으며, 동일한 서술자(descriptor) 태그를 사용할 수도 있다.On the other hand, the stereoscopic service descriptor may be variously configured to include information necessary to provide a stereoscopic service. As an example, the stereoscopic service descriptor may be configured to extend the SDS_descriptor defined in the standard of the Digital Multimedia Broadcasting (DMB) video linked stereoscopic data service in a compatible manner, or may use the same descriptor tag.

표 1은 본 발명에 따라 구성되는 스테레오스코픽 서비스 서술자(SS_descriptor)의 일 예이다.Table 1 is an example of a stereoscopic service descriptor (SS_descriptor) configured according to the present invention.

Figure pat00001
Figure pat00001

표 1과 같은, 스테레오스코픽 서비스 서술자는 PMT 내의 서술자 루프(descriptor loop) 내에 포함될 수 있으며, 아래와 같은 정보를 포함할 수 있다. As shown in Table 1, the stereoscopic service descriptor may be included in a descriptor loop in the PMT, and may include the following information.

StereoMono_serviceFlag: 이 구문은 스테레오스코픽 비디오 서비스가 제공되는지, 모노스코픽 비디오 서비스가 제공되는지를 1 비트로 나타낸다. 스테레오스코픽 비디오 서비스의 경우에는 1, 모노스코픽 비디오 서비스의 경우에는 0의 값을 사용하여 나타낼 수 있다. 수신 측에서는 StereoMono_serviceFlag의 값에 따라 스테레오스코픽 재생 장치를 온/오프할 수도 있다.StereoMono_serviceFlag: This syntax indicates in 1 bit whether a stereoscopic video service or a monoscopic video service is provided. In the case of a stereoscopic video service, a value of 1 may be indicated using a value of 0 in the case of a monoscopic video service. The receiver may turn on / off the stereoscopic playback device according to the value of StereoMono_serviceFlag.

ServiceType: 이 구문은 제공되는 스테레오스코픽 비디오 서비스의 종류를 나타낸다. 예컨대, 지상파 DMB로 제공되는 스테레오스코픽 비디오 서비스라면, ServiceType의 값이 (000)인 경우 지상파 DMB 비실시간 MOT(Multimedia Object Transfer)/스트림 모드 스테레오스코픽 비디오 서비스에 대응하고, (001)인 경우 지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스에 대응하며, (010)의 경우에는 지상파 DMB 비실시간 반복 콘텐츠 스테레오스코픽 비디오 서비스에 대응할 수 있다. 또한, (011) ~ (111) 등의 값은 앞으로 이용될 수 있는 스테레오스코픽 비디오 서비스를 위해 예비로 둘 수 있고(reserved), 표준 이외 스테레오스코픽 비디오 서비스에 대하여 사용될 수도 있으며, 구문이 확장되는 경우를 위해 예비로 둘 수도 있다.ServiceType: This syntax indicates the type of stereoscopic video service provided. For example, in the case of a stereoscopic video service provided by terrestrial DMB, if the value of ServiceType is (000), the terrestrial DMB corresponds to a non-real-time multimedia object transfer (MOT) / stream mode stereoscopic video service. It corresponds to a non-real time MOT / stream mode video linked stereoscopic data service, and in case of 010, it may correspond to a terrestrial DMB non-real time repeating content stereoscopic video service. Also, values such as (011) to (111) may be reserved for future stereoscopic video services, may be used for non-standard stereoscopic video services, and the syntax is extended. It can also be reserved for.

CompositionType: 이 구문은 수신되는(전송하는) 스테레오스코픽 데이터의 구성 타입을 나타낸다. 예컨대, 지상파 DMB로 제공되는 스테레오스코픽 비디오 서비스라면, CompositionType의 값이 (0001)의 경우 기본 포맷(예컨대, 좌우 영상 동일 해상도)에 대응하고, (010)의 경우 선택사항 포맷(예컨대, 부가 영상의 해상도는 기준 영상 대비 수평 방향으로 1/2 등)에 대응할 수 있다. 또한, (000), (011), (100) ~ (111)의 경우에는 예비로 두거나(reserved), 표준 이외의 포맷에 대응하도록 할 수도 있다.CompositionType: This syntax indicates the composition type of the stereoscopic data received (transmitting). For example, in the case of a stereoscopic video service provided in terrestrial DMB, the value of CompositionType corresponds to a basic format (e.g., left and right image equal resolution) in case of (0001), and in case of 010, an optional format (e.g. The resolution may correspond to 1/2, etc. in the horizontal direction relative to the reference image. In the case of (000), (011), (100) to (111), it may be reserved or correspond to a format other than the standard.

LR_first: 이 구문은 기준 영상이 좌 영상인지 우 영상인지를 나타낸다. 예컨대, 기준 영상이 우영상인 경우에는 '0'을, 좌영상인 경우에는 '1'을 사용할 수 있다. 이때, 기준 영상은 전송 스트림으로 실시간 전송되는 다중화된 영상 데이터일 수 있다.  LR_first: This syntax indicates whether the reference picture is the left picture or the right picture. For example, '0' may be used when the reference image is the right image, and '1' may be used when the reference image is the left image. In this case, the reference video may be multiplexed image data transmitted in real time through a transport stream.

is_Left: 본 구문은 전송되는 영상이 좌 영상인지 우 영상인지를 나타내는 영상 특성 정보이다. 해당 영상이 좌 영상인 경우에는 컨텐츠 이름에 "_L"을 붙여서 나타낼 수 있으며, 해당 영상이 우 영상인 경우에는 컨텐츠 이름에 "_R"을 붙여서 나타낼 수 있다. is_Left: This syntax is image characteristic information indicating whether a transmitted image is a left image or a right image. When the video is a left video, the content name may be displayed by appending "_L", and when the video is the right video, it may be displayed by attaching "_R" to the content name.

NRT_Marker: NRT(Non-Real Time) 마커(NRT_Marker)는 좌우 영상, 즉 기준 영상과 부가 영상의 동기화를 위한 시작 위치를 알려준다. 예컨대, 지상파 DMB로 제공되는 스테레오스코픽 비디오 서비스라면, NRT_Marker의 값이 (01)의 경우 해당 PMT 다음에 나오는 비디오 TS 패킷 중 payload_unit_start_indicator가 처음으로 1인 TS 패킷이 비실시간 스테레오스코픽 비디오 스트림의 마지막 AU(Access Unit)가 시작되는 패킷임을 나타내도록 하고, NRT_Marker의 값이 (10)인 경우는 NRT_Marker가 01인 PMT와 NRT_Marker가 11인 PMT 사이에 전송되는 PMT의 NRT_Marker들은 이 값으로 설정되도록 하며, NRT_Marker의 값이 (11)인 경우는 이 PMT 다음에 나오는 비디오 TS 패킷 중 payload_unit_start_indicator가 처음으로 1인 TS 패킷이 비실시간 스테레오스코픽 비디오 스트림의 첫 AU가 시작되는 패킷임을 나타내도록 할 수 있다. 또한, (00) 값에 대하여는 예비로 둘 수 있다(reserved).NRT_Marker: A Non-Real Time (NRT) Marker (NRT_Marker) indicates a start position for synchronizing the left and right images, that is, the base image and the additional image. For example, in the case of a stereoscopic video service provided in terrestrial DMB, when the value of NRT_Marker is (01), the TS packet whose payload_unit_start_indicator is 1 among the video TS packets following the PMT is the last AU (non-real time stereoscopic video stream). If the value of NRT_Marker is (10), NRT_Markers of PMT transmitted between PMT with NRT_Marker 01 and PMT with NRT_Marker 11 are set to this value. If the value is (11), it is possible to indicate that the TS packet whose payload_unit_start_indicator is 1 among the video TS packets following this PMT is the packet from which the first AU of the non-real time stereoscopic video stream starts. Also, a value of (00) may be reserved.

ContentNameLength: 이 구문은 콘텐츠 명칭의 길이를 바이트 단위로 나타낸다.ContentNameLength: This syntax indicates the length of the content name in bytes.

ContentName: 비실시간 스테레오스코픽 비디오 서비스에서는 부가 영상을 위한 데이터를 먼저 다운로드하여 저장한 후, 실시간으로 전송되는 기준 영상의 데이터와 함께 처리한다. ContentName 구문은 이때 필요한 영상의 파일명을 구성하기 위한 정보를 나타낸다. 예컨대, 지상파 DMB 비실시간 MOT/스트림 모드 스테레오스코픽 서비스의 경우, ContentName은 수신 장치에 저장된 부가 영상 ES(Elementary Stream)를 포함하고 있는 파일명으로 저장될 수 있다. 또한, 지상파 DMB 비실시간 반복 콘텐츠 스테레오스코픽 비디오 서비스의 경우라면, ContentName은 지상파 DMB 수신 장치에 저장된 부가 영상 ES를 포함하고 있는 파일을 지정할 때 이용될 수도 있고, 기준 영상 ES를 수신 장치에 파일로 저장할 때도 이용될 수 있다.ContentName: In the non-real time stereoscopic video service, data for an additional video is first downloaded and stored, and then processed together with data of a reference video transmitted in real time. The ContentName syntax indicates information for forming a file name of a video required at this time. For example, in the case of the terrestrial DMB non-real-time MOT / stream mode stereoscopic service, the ContentName may be stored as a file name including an additional video elementary stream (ES) stored in the receiving device. In addition, in case of a terrestrial DMB non-real-time repeating content stereoscopic video service, ContentName may be used to designate a file including an additional video ES stored in the terrestrial DMB receiving device, and store the reference video ES as a file in the receiving device. Can also be used.

ExpireDate: 이 구문은 저장 장치에 파일로 저장할 ES에 대하여 권고하는 보존 기한을 나타낸다. 예컨대, 지상파 DMB 비실시간 반복 콘텐츠 스테레오스코픽 비디오 서비스의 경우라면, 저장 장치에 파일로 저장할 ES에 대해 지상파 DMB 송신 장치가 권고하는 보존 기한을 나타낸다.ExpireDate: This statement represents the recommended retention period for an ES to save as a file on the storage device. For example, in the case of terrestrial DMB non-real-time repeating content stereoscopic video service, the terrestrial DMB transmitting device recommends a retention period recommended for the ES to be stored as a file in the storage device.

FileSize: 이 구문은 저장 장치에 파일로 저장할 ES에 대하여 권고하는 최소 저장 용량을 나타낸다. 예컨대, 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스의 경우라면, 지상파 DMB 수신 장치에 파일로 저장할 ES에 대해 지상파 DMB 송신 장치에서 권고하는 필요 메모리 용량을 나타낸다.FileSize: This syntax specifies the recommended minimum storage capacity for the ES to store as a file on the storage device. For example, in the case of terrestrial DMB non-real-time repeating content stereoscopic video service, the terrestrial DMB transmitting apparatus indicates a required memory capacity for an ES to be stored as a file in the terrestrial DMB receiving apparatus.

FirstAUTimeStamp: NRT_Marker에 의해 시작되는 서비스 시작 타임 스탬프(time stamp)를 기록한다. FirstAUTimeStamp: Records the service start time stamp started by NRT_Marker.

LastAUNumber: NRT_Marker에 의해 서비스가 시작된 후부터 현재까지 전송된 3D 영상의 AU 번호를 기록한다.
LastAUNumber: Records the AU number of the 3D video transmitted from the start of the service by the NRT_Marker to the present.

상술한 바와 같이, 표 1의 is_Left 플래그는 현재 전송되는 영상이 좌 영상인지 우 영상인지를 표시하여 콘텐츠 저장 및 시그널링에 사용된다. is_Left의 값이 0인 경우에는 좌 영상, is_Left의 값이 1인 경우에는 우 영상을 나타내도록 지정할 수 있으며, 반대로, is_Left의 값이 0인 경우에는 우 영상, is_Left의 값이 1인 경우에는 좌 영상을 나타내도록 지정할 수도 있다. 따라서, 비실시간 스테레오스코픽 비디오 서비스에서는 실시간으로 전송되는 스트림의 is_Left 플래그를 확인하여, 수신되는 스트림이 좌 영상인지 우 영상인지를 판별함으로써, 저장된 좌/우 영상 중에서 스테레오스코픽 비디오 영상을 구성하는데 알맞은 영상을 로딩할 수 있다.As described above, the is_Left flag of Table 1 indicates whether a currently transmitted video is a left video or a right video and is used for content storage and signaling. If is_Left is 0, the left image can be specified. If is_Left is 1, the right image can be specified. On the contrary, if is_Left is 0, the right image is displayed. If is_Left is 1, the left image is displayed. You can also specify to display an image. Therefore, the non-real time stereoscopic video service checks the is_Left flag of a stream transmitted in real time and determines whether the received stream is a left image or a right image, thereby making it suitable for composing a stereoscopic video image among stored left and right images. Can be loaded.

또한, 표 1의 FirstAUTimeStamp와 LastAUNumber는 기준 영상과 부가 영상을 동기시키는데 이용될 수 있다. In addition, FirstAUTimeStamp and LastAUNumber in Table 1 may be used to synchronize the base view video and the additional view video.

FirstAUTimeStamp는 비실시간 스테레오스코픽 비디오 서비스의 시작 시간에 고나한 timestamp를 기록하여 동기 정보로서 제공한다. FirstAUTimeStamp records a timestamp at the start time of a non-real time stereoscopic video service and provides it as synchronization information.

LastAUNumber는 비실시간 스테레오스코픽 비디오 서비스의 시작 후부터의 프레임 수를 기술하여 동기 정보로서 제공한다.LastAUNumber describes the number of frames since the start of the non-real time stereoscopic video service and provides it as synchronization information.

FirstAUTimeStamp와 LastAUNumber의 정보를 이용하여, 기준 영상과 부가 영상을 동기시키는 방법에 대하여 더 구체적으로 설명한다.A method of synchronizing the base view video with the additional view video using the information of FirstAUTimeStamp and LastAUNumber will be described in more detail.

일반적으로 방송에 사용되는 전송 규격에서는, 방송에 사용되는 초당 프레임 수(frame for second) 값을 미리 정해 놓기 때문에, 수신 장치에 저장된 TS 파일에서 실시간으로 전송되는 PMT를 기준으로 PES(Packetized Elementary Stream)의 PTS(Presentation Time Stamp) 값을 계산할 수 있다. 따라서, PMT 정보를 손실하더라도, 추후에 전송되는 PMT를 이용하여 현재 전송되는 영상의 프레임과 저장된 비실시간 스테레오스코픽 부가 영상 파일의 동기를 맞출 수 있다.In general, in the transmission standard used for broadcasting, since a frame for second value used for broadcasting is determined in advance, PES (Packetized Elementary Stream) based on PMT transmitted in real time from a TS file stored in a receiving apparatus PTS (Presentation Time Stamp) value can be calculated. Therefore, even if the PMT information is lost, it is possible to synchronize the frame of the currently transmitted video with the stored non-real time stereoscopic additional video file using the PMT transmitted later.

예컨대, 현재 방송의 전송 규격에서 규정된 초당 프레임 수가 30이며, LastAUNumber의 값이 90인 경우에, 현재 제공될 영상의 프레임은 비실시간 스테레오스코픽 비디오 서비스가 실행된 뒤 3초 후에 제공되는 영상이라는 것을 계산해낼 수 있다. 이때, 비실시간 스테레오스코픽 비디오 서비스가 실행된 시간은 FirstAUTimeStamp에 의해 파악할 수 있다.For example, if the number of frames per second specified in the transmission standard of the current broadcast is 30 and the value of LastAUNumber is 90, the frame of the image to be currently provided is the image provided three seconds after the non-real time stereoscopic video service is executed. Can be calculated In this case, the time at which the non-real time stereoscopic video service is executed may be determined by the FirstAUTimeStamp.

따라서, 실시간으로 전송되는 스트림의 타임 스탬프 정보를 잃어버리더라도, 바로 뒤에 전송되는 PMT 정보를 이용하여 기준 영상과 부가 영상을 동기시킬 수 있다.
Therefore, even if the time stamp information of the stream transmitted in real time is lost, the reference video and the additional video can be synchronized using the PMT information immediately transmitted.

도 2는 본 발명에 따른 시스템에서 방송 수신 장치의 동작을 개략적으로 설명하는 순서도이다.2 is a flowchart schematically illustrating an operation of a broadcast reception device in a system according to the present invention.

방송 수신 장치는 수신한 MPEG-2 TS에 포함된 PAT를 추출한다(S210). 본 발명은 MPEG-2, MPEG-4 등을 이용한 다양한 비실시간 스테레오스코픽 비디오 서비스에 적용될 수 있으며, 여기서는 설명의 편의를 위해 MPEG-2 전송 스트림을 통해 서비스되는 경우를 예로서 설명한다.The broadcast reception device extracts a PAT included in the received MPEG-2 TS (S210). The present invention can be applied to various non-real time stereoscopic video services using MPEG-2, MPEG-4, and the like. Here, a case of serving through an MPEG-2 transport stream will be described as an example for convenience of description.

수신 장치는 추출한 PAT에서 사용자가 선택한 프로그램에 대응하는 PMT를 MPEG-2 TS로부터 추출한다(S220). 추출한 PMT 내에는 선택한 프로그램에 대응하는 스테레오스코픽 서비스 서술자(SS_descriptor)가 포함되어 있다.The receiving device extracts a PMT corresponding to a program selected by the user from the extracted PAT from the MPEG-2 TS (S220). The extracted PMT includes a stereoscopic service descriptor (SS_descriptor) corresponding to the selected program.

수신 장치는 추출한 PMT에서 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자를 추출하고, 추출한 스테레오스코픽 서비스 서술자에 정의된 정보를 분석한다(S230). 예컨대, ServiceType 정보를 확인하고, ContentName 등을 기반으로 수신한 MPEG-2 TS에 포함된 기준 영상을 추출할 수 있다.The receiving device extracts a stereoscopic service descriptor among descriptors corresponding to a program selected by a user from the extracted PMT, and analyzes information defined in the extracted stereoscopic service descriptor (S230). For example, the ServiceType information may be checked and a reference video included in the received MPEG-2 TS may be extracted based on ContentName.

수신한 타임스탬프 정보 및/또는 FirstAUTimeStamp, LastAUNumber 플래그를 이용하여 재생 영상 프레임과 시간 정보를 생성한다(S240).The reproduced video frame and time information are generated using the received time stamp information and / or FirstAUTimeStamp and LastAUNumber flags (S240).

생성한 재생 영상 프레임과 시간 정보를 기반으로 기준 영상에 대응하는 부가 정보를 저장 장치로부터 획득하고, 스테레오스코픽 영상을 재생한다(S250).Based on the generated playback image frame and time information, additional information corresponding to the reference image is obtained from the storage device, and the stereoscopic image is reproduced (S250).

도 3은 도 2에 있어서, 재생 영상 프레임과 시간 정보를 생성(S240)하고, 기준 영상과 부가 영상을 재생(S250)하는 단계를 설명하는 순서도이다.3 is a flowchart illustrating a process of generating a reproduced video frame and time information (S240) and reproducing a reference video and an additional video (S250) in FIG. 2.

스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 수신 장치는 타임스탬프 정보가 손실되었는지를 판단한다(S260).The receiving device analyzing the information defined in the stereoscopic service descriptor determines whether time stamp information is lost (S260).

스테레오스코픽 비디오 서비스에 있어 좌우 영상 동기화는 대응하는 좌 영상과 우 영상(기준 영상과 부가 영상)을 동시에 스테레오스코픽 디스플레이로 입력하는 것을 의미한다. In the stereoscopic video service, left and right image synchronization means inputting a corresponding left image and a right image (a reference image and an additional image) simultaneously to a stereoscopic display.

비실시간 스테레오스코픽 비디오 서비스에서, 기준 영상은 전송 스트림(TS)를 통해서 실시간으로 전송되지만, 부가 영상은 미리 전송되어 수신 장치의 저장부(메모리)에 저장되어 있다. 따라서, 실시간으로 전송되는 기준 영상에 대응하는 부가 영상을 저장부로부터 읽어내서 동기화시키기 위해, 기준 영상과 부가 영상 사이에 시간적 기준이 되는 정보가 필요하다.In the non-real time stereoscopic video service, the reference video is transmitted in real time through the transport stream TS, but the additional video is transmitted in advance and stored in a storage unit (memory) of the receiving device. Therefore, in order to read and synchronize an additional image corresponding to the reference image transmitted in real time from the storage unit, information that is a temporal reference between the reference image and the additional image is required.

스테레오스코픽 비디오 서비스의 시작 시점에 관한 정보는 NRT_Marker에 의해 전달된다. 즉, 스테레오스코픽 서비스 서술자 내의 NRT_Marker 값에 의해 스테레오스코픽 비디오 서비스가 시작되는 첫 프레임의 위치가 시그널링될 수 있다. NRT_Marker는 스테레오스코픽 비디오 서비스의 시작 시점을 알려주고, 값을 변경하여 현재 스테레오스코픽 비디오 서비스가 제공되고 있다는 것을 알려주며, 다시 값을 변경하여 스테레오스코픽 비디오 서비스가 종료함을 알려준다.Information on the start time of the stereoscopic video service is carried by the NRT_Marker. That is, the position of the first frame at which the stereoscopic video service is started may be signaled by the NRT_Marker value in the stereoscopic service descriptor. NRT_Marker informs the start time of the stereoscopic video service, changes the value to indicate that the stereoscopic video service is currently provided, and changes the value to indicate that the stereoscopic video service ends.

즉, 스테레오스코픽 비디오 서비스의 시작 시점을 알려주는 NRT_Marker는 좌우 영상의 첫 프레임을 쌍으로 구성하기 위해 필요한 기준 정보이다. 따라서, 스테레오스코픽 비디오 서비스의 시작 시점을 알려주는 NRT_Marker가 전송된 후에 전원이 인가되거나, 채널 전환이 된 수신 장치는 비록 스테레오스코픽 컨텐츠의 기준 비디오에 해당하는 스트림을 수신 중이라 하더라도 메모리에 저장되어 있는 부가 영상 파일 내의 어느 부분을 읽어서 좌우 영상의 쌍을 맞출지 알기 어렵다. 다시 말하면, 스테레오스코픽 비디오 서비스의 시작 시점을 알려주는 NRT_Marker를 처음부터 수신하여 첫 프레임부터 좌우 영상의 동기화를 이루지 못한 경우에는, 이후 NRT_Marker가 수신되더라도 언제 스테레오스코픽 비디오 서비스가 시작되었는지 알기 어렵기 때문에 기준 영상과 부가 영상을 동기시켜 스테레오스코픽 비디오 서비스를 제공하기가 어렵게 된다. 하지만 이 경우에도 상술한 바와 같이 FirstAUTimeStamp와 LastAUNumber의 두 플래그를 이용하면, 기준 영상과 부가 영상을 정확하게 동기시킬 수 있다.That is, the NRT_Marker indicating the start time of the stereoscopic video service is reference information necessary for configuring the first frame of the left and right images in pairs. Therefore, the receiving device that is powered on or switched channel after NRT_Marker indicating the start time of the stereoscopic video service is stored in the memory even though the stream corresponding to the reference video of the stereoscopic content is being received. It is difficult to know which part of the additional video file to read and match the left and right images. In other words, when receiving the NRT_Marker indicating the start time of the stereoscopic video service from the beginning and synchronizing the left and right images from the first frame, it is difficult to know when the stereoscopic video service is started even if the NRT_Marker is received later. It is difficult to provide a stereoscopic video service by synchronizing the video with the additional video. However, even in this case, if two flags, FirstAUTimeStamp and LastAUNumber, are used as described above, the reference video and the additional video can be accurately synchronized.

즉, 스테레오스코픽 비디오 서비스의 시작 시점을 알려주는 NRT_Marker를 처음부터 수신하지 못하였거나 도중에 손실한 경우(예컨대, 해당 PMT를 수신하지 못한 경우)에도, 새로 수신한 PMT 내의 스테레오스코픽 서비스 서술자에 정의된 FirstAUTimeStamp와 LastAUNumber를 이용하여 기준 영상과 부가 영상을 동기시킬 수 있다. 즉, FirstAUTimeStamp에는 NRT_Marker에 의한 서비스 시작 시간에 관한 정보(타임스탬프)가 기재되어 있고, LastAUNumber에는 현재의 3D 영상이 서비스 시작 후 몇 번째 3D 영상인지에 관한 정보가 기재되어 있다. 따라서, 미리 규정된 초당 프레임 수 등과 같은 영상 처리 규정에 기반해서, 현재 재생할 영상의 동기 시간을 산출할 수 있다.That is, even if the NRT_Marker indicating the start time of the stereoscopic video service is not received from the beginning or lost in the middle (for example, the PMT is not received), the FirstAUTimeStamp defined in the stereoscopic service descriptor in the newly received PMT And the LastAUNumber can be used to synchronize the base view video with the additional view video. That is, FirstAUTimeStamp describes information (timestamp) relating to the service start time by NRT_Marker, and LastAUNumber describes information on which 3D image is the current 3D image after the start of service. Therefore, based on an image processing rule such as a predetermined number of frames per second, the synchronization time of the current image to be reproduced can be calculated.

수신 장치는 산출한 동기 시간에 대응하는 부가 영상을 수신 장치의 저장부(메모리)로부터 읽어내어 대응하는 기준 영상과 동시에 스테레오스코픽 디스플레이에 입력함으로써, 스테레오스코픽 비디오 서비스를 제공할 수 있다.The receiving device may provide a stereoscopic video service by reading an additional video corresponding to the calculated synchronization time from a storage unit (memory) of the receiving device and inputting the corresponding video to the stereoscopic display simultaneously with the corresponding reference video.

따라서, 수신 장치는 현재 재생할 영상에 대한 타임스탬프 정보가 손실되었는지를 판단(S260)한 후에, 판단 결과에 따라서 스테레오스코픽 비디오 서비스를 효과적으로 제공할 수 있는 방법을 취할 수 있다. Therefore, after determining whether the timestamp information of the current image to be reproduced is lost (S260), the receiving apparatus may take a method of effectively providing a stereoscopic video service according to the determination result.

현재 재생할 영상에 대한 타임스탬프 정보가 손실되지 않았다고 판단한 경우, 즉, 스테레오스코픽 비디오 서비스의 시작 시점을 알려주는 NRT_Marker를 처음부터 수신하고, 이후에도 동기 시각에 관한 정보가 손실되지 않은 경우에는 현재의 타임스탬프를 기준으로 기준 영상과 부가 영상을 동기시켜 재생할 수 있다(S270).If it is determined that the timestamp information of the video to be played back is not lost, that is, if the NRT_Marker is received from the beginning indicating the start time of the stereoscopic video service, and the information on the synchronization time has not been lost since then, the current timestamp In operation S270, the reference video and the additional video may be synchronized with each other.

현재 재생할 영상에 대한 타임스탬프 정보가 손실되었다고 판단한 경우, 즉, 스테레오스코픽 비디오 서비스의 시작 시점을 알려주는 NRT_Marker를 처음에 수신하지 못하였거나, 이후 동기 시각에 관한 정보가 손실된 경우에는, 상술한 바와 같이, FirstAUTimeStamp와 LastAUNumber를 이용하여 프레임 정보 및 시간 정보를 생성할 수 있다(S280).If it is determined that timestamp information of a video to be reproduced at present is lost, that is, when the NRT_Marker indicating the start time of the stereoscopic video service is not received at first, or the information on the synchronization time is subsequently lost, Likewise, frame information and time information may be generated using FirstAUTimeStamp and LastAUNumber (S280).

수신 장치는 FirstAUTimeStamp와 LastAUNumber를 이용해 생성한 프레임 정보 및 시간 정보를 기반으로 기준 영상과 부가 영상을 동기시켜 재생할 수 있다(S290).
The receiving device may synchronize and reproduce the base view video and the additional view video based on frame information and time information generated using FirstAUTimeStamp and LastAUNumber (S290).

도 4는 본 발명에 따른 스테레오스코픽 비디오 서비스 시스템의 송신 장치와 수신 장치를 개략적으로 도시한 블록도이다. 4 is a block diagram schematically illustrating a transmitting device and a receiving device of a stereoscopic video service system according to the present invention.

송신 장치(400)는 송신부(410), 저장부(420), 제어부(430)를 포함한다. The transmitter 400 includes a transmitter 410, a storage 420, and a controller 430.

송신 장치(400)는 송신부(410)를 통해서, 비디오 서비스에 필요한 전송 스트림(TS)을 전송한다. 송신 장치(400)는 스테레오스코픽 비디오 서비스 전용 TS를 전송할 수도 있고, 모노스코픽 비디오 서비스와 함께 스테레오스코픽 비디오 서비스를 제공하는 TS를 전송할 수도 있다. 이때, 전송되는 TS에는 스테레오스코픽 비디오 서비스를 제공하기 위한 스테레오스코픽 서비스 서술자가 포함된다.The transmitter 400 transmits a transport stream TS required for a video service through the transmitter 410. The transmitting device 400 may transmit a dedicated TS for a stereoscopic video service, or may transmit a TS that provides a stereoscopic video service together with the monoscopic video service. In this case, the transmitted TS includes a stereoscopic service descriptor for providing a stereoscopic video service.

저장부(420)는 데이터를 송신하는데 필요한 다양한 정보를 저장한다. 예컨대, 송신 장치와 수신 장치 사이의 프로토콜 정보, 기준 영상과 부가 영상에 관한 정보, 동기 시간에 관한 정보 등 필요한 정보를 저장할 수 있다.The storage unit 420 stores various information necessary for transmitting data. For example, necessary information such as protocol information between the transmitting device and the receiving device, information about the reference video and the additional video, and information about the synchronization time can be stored.

제어부(430)는 송신부(410) 및 저장부(420)와 연결되어 송신부(410) 및 저장부(420)를 제어한다. 제어부(430)는 TS로 전송할 데이터를 구성한다. 제어부(430)는 PMT, PAT 등을 구성하여 TS로 전송할 수 있으며, 스테레오스코픽 비디오 서비스를 제공하기 위한 스테레오스코픽 서비스 서술자를 구성할 수 있다. 스테레오스코픽 서비스 서술자는 PMT에 포함되어 송신부(410)를 통해 전송될 수 있다.The controller 430 is connected to the transmitter 410 and the storage 420 to control the transmitter 410 and the storage 420. The controller 430 configures data to be transmitted to the TS. The controller 430 may configure a PMT, a PAT, and transmit the same to a TS, and may configure a stereoscopic service descriptor for providing a stereoscopic video service. The stereoscopic service descriptor may be included in the PMT and transmitted through the transmitter 410.

수신 장치(440)는 수신부(450), 저장부(460), 제어부(470)를 포함한다.The receiving device 440 includes a receiving unit 450, a storage unit 460, and a control unit 470.

수신 장치(440)는 수신부(450)를 통해서, 비디오 서비스에 필요한 전송 스트림(TS)을 수신한다. 수신되는 전송 스트림은 스테레오스코픽 비디오 서비스 전용 TS일 수도 있고, 모노스코픽 비디오 서비스와 함께 스테레오스코픽 비디오 서비스를 제공하는 TS일 수도 있다. 수신되는 TS에는 스테레오스코픽 비디오 서비스를 제공하기 위한 스테레오스코픽 서비스 서술자가 포함된다.The reception device 440 receives a transport stream TS required for a video service through the reception unit 450. The received transport stream may be a TS dedicated to the stereoscopic video service, or may be a TS that provides the stereoscopic video service together with the monoscopic video service. The received TS includes a stereoscopic service descriptor for providing a stereoscopic video service.

저장부(460)는 데이터를 수신하는데 필요한 정보와 함께 영상을 제공하는 데 필요한 정보를 저장한다. 예컨대, 저장부(460)는 미리 수신한 부가 영상을 저장하여, 실시간으로 수신하는 기준 영상과 함께 디스플레이될 필요가 있는 경우에는 해당 기준 영상에 대응하는 부가 영상이 이용될 수 있도록 한다. The storage unit 460 stores information necessary to provide an image together with information necessary to receive data. For example, the storage unit 460 may store an additional image received in advance, so that the additional image corresponding to the reference image may be used when it is required to be displayed together with the reference image received in real time.

제어부(470)는 수신부(450) 및 저장부(460)과 연결되어 수신부(450) 및 저장부(460)를 제어한다. 제어부(470)는 수신한 TS 내의 PAT 및 PMA를 기반으로 사용자가 선택한 프로그램에 관한 비디오 서비스를 제공한다. 이때, 제어부(470)는 스테레오스코픽 서비스 서술자에 기재된 NRT_Marker에 의해 스테레오스코픽 서비스를 개시하고 종료할 수 있다. 제어부(470)는 스테레오스코픽 서비스를 개시하는 NRT_Marker에 관한 정보를 손실한 경우, 혹은 기준 영상과 부가 영상의 동기에 관한 시간 정보를 손실한 경우에는, 상술한 바와 같이 스테레오스코픽 서비스 서술자에 개시된 FirstAUTimeStamp와 LastAUNumber를 이용해, 기준 영상과 부가 영상을 동기시켜 재생할 수 있다. 한편, 제어부(470)는 스테레오스코픽 서비스 서술자에 기재된 is_Left 등과 같은 정보를 확인하여, 전송되는 영상, 즉 기준 영상이 좌 영상인지 우 영상인지를 확인하고, 그에 따라서 부가 영상과 함께 디스플레이함으로써 스테레오스코픽 비디오 영상을 사용자에게 제공할 수 있다.
The controller 470 is connected to the receiver 450 and the storage 460 to control the receiver 450 and the storage 460. The controller 470 provides a video service regarding a program selected by a user based on the received PAT and PMA in the TS. At this time, the controller 470 may start and end the stereoscopic service by the NRT_Marker described in the stereoscopic service descriptor. When the control unit 470 loses information on the NRT_Marker that starts the stereoscopic service or when time information on synchronization of the reference video and the additional video is lost, the control unit 470 and the FirstAUTimeStamp disclosed in the stereoscopic service descriptor as described above. Using LastAUNumber, the reference video and the additional video can be synchronized and played back. Meanwhile, the controller 470 checks information such as is_Left described in the stereoscopic service descriptor, and confirms whether the transmitted video, that is, the reference video is the left video or the right video, and displays the additional video along with the additional video accordingly. The image may be provided to the user.

지금까지는 본 발명의 내용에 관하여 용이하게 이해되도록 설명하기 위해, 다양한 예를 들어 설명하였으나, 본 발명은 상술한 예들에 한정되지 않으며, 본 발명의 기술적 사상의 범위 내에서 다양하게 구현될 수 있다. 예컨대, 본 발명의 전송 방식에 관하여 MPEG-2를 이용한 전송 스트림을 예로 들어 설명하였으나, 본 발명은 이에 한정되지 않으며, MPEG-4 등에도 동일하게 적용될 수 있다. 또한, 본 발명의 적용 대상에 관하여 지상파 DMB 방송 등을 예로 들어 설명하였으나, 본 발명은 이에 한정되지 않으며, 인터넷, 유무선 통신 등을 통해 전송 스트림으로 영상 서비스를 제공하는 다양한 서비스에 동일하게 적용될 수 있다. So far, various examples have been described in order to facilitate understanding of the contents of the present invention, but the present invention is not limited to the above-described examples and may be variously implemented within the scope of the technical idea of the present invention. For example, although the transport method of the present invention has been described using a transport stream using MPEG-2 as an example, the present invention is not limited thereto and may be equally applied to MPEG-4. In addition, the present invention has been described using terrestrial DMB broadcasting as an example, but the present invention is not limited thereto, and the present invention may be equally applied to various services that provide a video service as a transport stream through the Internet or wired or wireless communication. .

본 발명에서 특정 구성을 "포함"한다고 기술하는 내용은 해당 구성 이외의 구성을 배제하는 것이 아니며, 추가적인 구성이 본 발명의 실시 또는 본 발명의 기술적 사상의 범위에 포함될 수 있음을 의미한다.In the present invention, the description "includes" a specific configuration does not exclude a configuration other than the configuration, it means that additional configuration may be included in the scope of the technical spirit of the present invention or the present invention.

상술한 예시적인 시스템에서, 방법들은 일련의 단계 또는 블록으로써 순서도를 기초로 설명되고 있지만, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 당업자라면 순서도에 나타낸 단계들이 배타적이지 않고, 다른 단계가 포함되거나 순서도의 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수 있음을 이해할 수 있을 것이다.In the exemplary system described above, the methods are described based on a flowchart as a series of steps or blocks, but the invention is not limited to the order of steps, and certain steps may occur in a different order or concurrently with other steps than those described above. Can be. In addition, those skilled in the art will appreciate that the steps shown in the flowcharts are not exclusive and that other steps may be included or one or more steps in the flowcharts may be deleted without affecting the scope of the present invention.

상술한 실시예는 다양한 양태의 예시들을 포함한다. 다양한 양태들을 나타내기 위한 모든 가능한 조합을 기술할 수는 없지만, 해당 기술 분야의 통상의 지식을 가진 자는 다른 조합이 가능함을 인식할 수 있을 것이다. 따라서, 본 발명은 이하의 특허청구범위 내에 속하는 모든 다른 교체, 수정 및 변경을 포함한다고 할 것이다.
The above-described embodiments include examples of various aspects. While it is not possible to describe every possible combination for expressing various aspects, one of ordinary skill in the art will recognize that other combinations are possible. Accordingly, it is intended that the invention include all alternatives, modifications and variations that fall within the scope of the following claims.

Claims (16)

송신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법으로서,
프로그램 맵 테이블과 상기 프로그램 맵 테이블에 관한 정보를 포함하는 프로그램 연관 테이블을 구성하는 단계; 및
상기 프로그램 맵 테이블과 상기 프로그램 연관 테이블을 포함하는 TS(Transport Stream) 신호를 전송하는 단계를 포함하며,
상기 프로그램 맵 테이블은 상기 프로그램 맵 테이블에 대응하는 프로그램에 대한 스테레오스코픽 서비스 서술자를 포함하고,
상기 스테레오스코픽 서비스 서술자는 상기 프로그램에 대한 스테레오스코픽 비디오 서비스 시작에 관한 타임스탬프의 정보 및 상기 프로그램에 대한 스테레오스코픽 비디오 서비스 시작 후 현재 전송하는 비디오 영상까지의 AU(Access Unit) 번호에 관한 정보를 포함하는 것을 특징으로 하는 서비스 방법.
A non-real time stereoscopic video service method performed by a transmitting device,
Constructing a program association table that includes a program map table and information about the program map table; And
Transmitting a TS (Transport Stream) signal including the program map table and the program association table,
The program map table includes a stereoscopic service descriptor for a program corresponding to the program map table,
The stereoscopic service descriptor includes information on a timestamp regarding the start of a stereoscopic video service for the program and information about an access unit (AU) number from the start of the stereoscopic video service for the program to the currently transmitted video image. Service method characterized in that.
제1항에 있어서, 상기 스테레오스코픽 서비스 서술자는, 프로그램 맵 테이블의 서술자 루프에 포함되는 것을 특징으로 하는 서비스 방법.The method of claim 1, wherein the stereoscopic service descriptor is included in a descriptor loop of a program map table. 제1항에 있어서, 상기 스테레오스코픽 비디어 서비스 시작은 NRT(Non Real Time) 마커에 의해 개시되는 것을 특징으로 하는 서비스 방법.The method of claim 1, wherein the stereoscopic video service start is initiated by a non real time marker. 제1항에 있어서, 상기 프로그램에 대한 스테레오스코픽 비디오 서비스 시작 후 현재 전송하는 비디오 영상까지의 AU 번호에 관한 정보는 3차원 비디오 영상의 AU 번호인 것을 특징으로 하는 서비스 방법.The method of claim 1, wherein the information about the AU number from the start of the stereoscopic video service for the program to the currently transmitted video image is an AU number of the 3D video image. 제1항에 있어서, 상기 스테레오스코픽 서비스 서술자는, 전송되는 영상이 좌영상인지 우영상인지를 나타내는 영상 특성 정보를 더 포함하는 것을 특징으로 하는 서비스 방법.The method of claim 1, wherein the stereoscopic service descriptor further includes image characteristic information indicating whether a transmitted image is a left image or a right image. 제5항에 있어서, 상기 영상 특성 정보는 전송되는 영상이 좌영상인 경우와 전송되는 영상이 우영상인 경우를 구별하는 식별 정보로서 콘텐츠의 명칭에 기재되는 것을 특징으로 하는 서비스 방법. The service method as claimed in claim 5, wherein the image characteristic information is described in the name of the content as identification information for distinguishing a case in which the transmitted image is a left image and a case in which the transmitted image is a right image. 송신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법으로서,
스테레오스코픽 비디오 서비스 서술자를 구성하는 단계;
프로그램 맵 테이블 및 프로그램 관련 테이블을 구성하는 단계; 및
상기 프로그램 맵 테이블 및 프로그램 관련 테이블을 포함하는 TS 신호를 전송하는 단계를 포함하며,
상기 스테레오스코픽 비디오 서비스 서술자를 구성하는 단계는,
상기 스테레오스코픽 비디오 서비스 서술자에 대응하는 비실시간 스테레오스코픽 서비스의 초기 타임스템프값을 지정하는 단계; 및
상기 스테레오스코픽 비디오 서비스 서술자에 대응하는 비실시간 스테레오스코픽 서비스가 시작된 시점부터 현재까지 전송된 AU(Access Unit) 패킷의 카운팅 정보를 구성하는 단계를 포함하고,
상기 스테레오스코픽 비디오 서비스 서술자는 상기 프로그램 맵 테이블에 포함되는 것을 특징으로 하는 서비스 방법.
A non-real time stereoscopic video service method performed by a transmitting device,
Configuring a stereoscopic video service descriptor;
Constructing a program map table and a program related table; And
Transmitting a TS signal including the program map table and a program related table;
Configuring the stereoscopic video service descriptor,
Designating an initial timestamp value of a non-real time stereoscopic service corresponding to the stereoscopic video service descriptor; And
Configuring counting information of an access unit (AU) packet transmitted from a time point at which a non-real time stereoscopic service corresponding to the stereoscopic video service descriptor is started to the present;
The stereoscopic video service descriptor is included in the program map table.
수신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법으로서,
수신한 TS로부터 프로그램 연관 테이블을 추출하여 분석하는 단계;
상기 프로그램 연관 테이블로부터 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블을 추출하여 분석하는 단계;
상기 프로그램 맵 테이블로부터 스테레오스코픽 비디오 서비스 서술자를 추출하여 분석하는 단계;
상기 스테레오스코픽 비디오 서비스 서술자에 대한 분석에 의해 재생할 영상의 프레임 및/또는 시간 정보를 생성하는 단계; 및
상기 생성한 프레임 및/또는 시간 정보에 기반하여 기준 영상 및 부가 영상을 동기하여 영상을 재생하는 단계를 포함하며,
상기 재생할 영상의 프레임 및/또는 시간 정보를 생성하는 단계는,
상기 재생할 영상에 대한 타임스템프 정보가 손실되었는지를 판단하는 단계; 및
상기 타임스템프 정보가 손실되었다고 판단한 경우에는, 상기 스테레오스코픽 비디오 서비스 서술자에 포함된 스테레오스코픽 비디오 서비스 시작에 관한 타임스탬프의 정보 및 스테레오스코픽 비디오 서비스 시작 후 현재까지 전송된 비디오 영상의 AU(Access Unit) 번호에 관한 정보를 기반으로 상기 프레임 및/또는 시간 정보를 생성하는 것을 특징으로 하는 서비스 방법.
A non-real time stereoscopic video service method performed by a receiver,
Extracting and analyzing a program association table from the received TS;
Extracting and analyzing a program map table corresponding to a program selected by a user from the program association table;
Extracting and analyzing a stereoscopic video service descriptor from the program map table;
Generating frame and / or time information of an image to be reproduced by analyzing the stereoscopic video service descriptor; And
Reproducing an image in synchronization with a reference image and an additional image based on the generated frame and / or time information;
The generating of frame and / or time information of the image to be reproduced may include:
Determining whether time stamp information of the video to be reproduced is lost; And
If it is determined that the timestamp information is lost, the information of the timestamp of the start of the stereoscopic video service included in the stereoscopic video service descriptor and the access unit (AU) of the video image transmitted to the present time after the start of the stereoscopic video service And generating the frame and / or time information based on the number information.
제8항에 있어서, 상기 스테레오스코픽 서비스 서술자는, 프로그램 맵 테이블의 서술자 루프에 포함되어 있는 것을 특징으로 하는 서비스 방법.9. The method of claim 8, wherein the stereoscopic service descriptor is included in a descriptor loop of a program map table. 제8항에 있어서, 상기 스테레오스코픽 비디어 서비스 시작은 NRT(Non Real Time) 마커에 의해 개시되는 것을 특징으로 하는 서비스 방법.9. The method of claim 8, wherein the start of the stereoscopic video service is initiated by a non real time marker. 제8항에 있어서, 상기 프로그램에 대한 스테레오스코픽 비디오 서비스 시작 후 현재까지 전송된 비디오 영상의 AU 번호에 관한 정보는 3차원 비디오 영상의 AU 번호인 것을 특징으로 하는 서비스 방법.The method of claim 8, wherein the information about the AU number of the video image transmitted to the present time after the start of the stereoscopic video service for the program is the AU number of the 3D video image. 제8항에 있어서, 상기 스테레오스코픽 서비스 서술자는, 전송되는 영상이 좌영상인지 우영상인지를 나타내는 영상 특성 정보를 더 포함하며,
상기 영상 재생 단계에서는, 상기 영상 특성 정보에 따라서 수신한 영상을 좌영상 혹은 우영상으로서 재생하는 것을 특징으로 하는 서비스 방법.
The method of claim 8, wherein the stereoscopic service descriptor further includes image characteristic information indicating whether a transmitted image is a left image or a right image,
In the video reproducing step, the received video is reproduced as a left video or a right video according to the video characteristic information.
제8항에 있어서, 재생할 영상에 대한 타임스템프 정보가 손실되지 않은 것으로 판단한 경우에는, 상기 타임스템프에 기반해서 기준 영상 및 부가 영상을 동기하여 재생하는 것을 특징으로 하는 서비스 방법.The service method of claim 8, wherein when it is determined that time stamp information of the video to be reproduced is not lost, the reference video and the additional video are reproduced synchronously based on the time stamp. 제8항에 있어서, 상기 영상을 재생하는 단계는, 미리 저장한 부가 영상들 중에서 상기 생성한 프레임 및/또는 시간 정보에 대응하는 부가 영상을 획득하여 실시간으로 수신한 기준 영상과 동기시켜 재생하는 것을 특징으로 하는 서비스 방법.The method of claim 8, wherein the playing of the image comprises: obtaining an additional image corresponding to the generated frame and / or time information from the previously stored additional images and synchronizing with the reference image received in real time. Featured service method. 수신 장치가 수행하는 비실시간 스테레오스코픽 비디오 서비스 방법으로서,
수신한 TS로부터 프로그램 연관 테이블을 추출하여 분석하는 단계;
상기 프로그램 연관 테이블로부터 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블을 추출하여 분석하는 단계;
상기 프로그램 맵 테이블로부터 스테레오스코픽 비디오 서비스 서술자를 추출하여 분석하는 단계;
상기 스테레오스코픽 비디오 서비스 서술자에 대한 분석에 의해 재생할 영상의 시간 정보를 생성하는 단계; 및
상기 생성한 프레임 및/또는 시간 정보에 기반하여 기준 영상 및 부가 영상을 동기하여 영상을 재생하는 단계를 포함하며,
상기 재생할 영상의 프레임 및/또는 시간 정보를 생성하는 단계는,
상기 재생할 영상에 대한 타임스템프 정보가 손실되었는지를 판단하는 단계; 및
상기 타임스템프 정보가 손실되었다고 판단한 경우에는, 상기 스테레오스코픽 비디오 서비스 서술자에 포함된 스테레오스코픽 비디오 서비스 시작 시간 정보로부터, 상기 스테레오스코픽 비디오 서비스 서술자에 포함된 스테레오스코픽 비디오 서비스 시작 후 현재까지 전송된 비디오 영상의 AU(Access Unit) 카운팅 수를 계산하여 동기 시간을 산출하는 단계를 포함하는 것을 특징으로 하는 서비스 방법.
A non-real time stereoscopic video service method performed by a receiver,
Extracting and analyzing a program association table from the received TS;
Extracting and analyzing a program map table corresponding to a program selected by a user from the program association table;
Extracting and analyzing a stereoscopic video service descriptor from the program map table;
Generating time information of an image to be reproduced by analyzing the stereoscopic video service descriptor; And
Reproducing an image in synchronization with a reference image and an additional image based on the generated frame and / or time information;
The generating of frame and / or time information of the image to be reproduced may include:
Determining whether time stamp information of the video to be reproduced is lost; And
If it is determined that the timestamp information is lost, from the stereoscopic video service start time information included in the stereoscopic video service descriptor, the video image transmitted until the present after the start of the stereoscopic video service included in the stereoscopic video service descriptor. Calculating a synchronization time by calculating the number of access unit (AU) counts.
제15항에 있어서, 상기 영상을 재생하는 단계는, 미리 저장한 부가 영상들 중에서 상기 산출한 동기 시간에 대응하는 부가 영상을 획득하여 실시간으로 수신한 기준 영상과 동기시켜 재생하는 것을 특징으로 하는 서비스 방법.
The service of claim 15, wherein the playing of the video comprises: obtaining an additional video corresponding to the calculated synchronization time from among previously stored additional videos, and reproducing the additional video in synchronization with a reference video received in real time. Way.
KR1020110026449A 2010-10-19 2011-03-24 Method and apparatus for non-real time stereoscopic video service KR20120040641A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/277,081 US9106896B2 (en) 2010-10-19 2011-10-19 Method and apparatus for non-real time stereoscopic video service

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020100102150 2010-10-19
KR1020100102150 2010-10-19

Publications (1)

Publication Number Publication Date
KR20120040641A true KR20120040641A (en) 2012-04-27

Family

ID=46140503

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110026449A KR20120040641A (en) 2010-10-19 2011-03-24 Method and apparatus for non-real time stereoscopic video service

Country Status (1)

Country Link
KR (1) KR20120040641A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101474142B1 (en) * 2013-06-18 2014-12-26 한국과학기술원 Temporal synchronization scheme(tss) to solve the temporal asynchrony in stereoscopic 3d video streaming over networks

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101474142B1 (en) * 2013-06-18 2014-12-26 한국과학기술원 Temporal synchronization scheme(tss) to solve the temporal asynchrony in stereoscopic 3d video streaming over networks

Similar Documents

Publication Publication Date Title
KR100864826B1 (en) Method and Apparatus for 3D still image service over digital broadcasting
KR100972792B1 (en) Synchronizer and synchronizing method for stereoscopic image, apparatus and method for providing stereoscopic image
US20140293005A1 (en) Method and system for transmitting/receiving 3-dimensional broadcasting service
US8045588B2 (en) Method and apparatus for providing and receiving three-dimensional digital contents
EP2645727A2 (en) Reception device for receiving a plurality of real-time transfer streams, transmission device for transmitting same, and method for playing multimedia content
KR101372376B1 (en) Method for receiving stereoscopic video in digital broadcasting system
KR101500440B1 (en) Image processing apparatus and image processing method
CA2820025C (en) Device and method for receiving digital broadcast signal
KR20130050953A (en) Method for transceiving media files and device for transmitting/receiving using same
KR20140022716A (en) Image data transmitting device, image data transmitting method and image data receiving device
US20130342648A1 (en) Transmisson apparatus and method and reception apparatus and method for providing program associated stereoscopic broadcasting service
US9516086B2 (en) Transmitting device, receiving device, and transceiving method thereof
CN103168473A (en) Digital receiver and method for processing 3d contents in digital receiver
EP2822282B1 (en) Signal processing device and method for 3d service
KR20120040641A (en) Method and apparatus for non-real time stereoscopic video service
KR20140006736A (en) Method and apparatus for non-real time stereoscopic video service
KR101191498B1 (en) System and Method for synchronization of 3D broadcasting service using real-time broadcasting and non-real time additional broadcasting data
US9106896B2 (en) Method and apparatus for non-real time stereoscopic video service
EP3280147A1 (en) Method and apparatus for transmitting and receiving broadcast signal
KR20130116157A (en) Receiving device for providing hybryd service and method thereof
US20140002602A1 (en) Apparatus and method of synchronizing reference picture and additional picture of real-time broadcasting program
KR101203483B1 (en) The method to transmit 3 dimensional broadcasting, and the receiver
KR20110135320A (en) Transmission apparatus for reproducing 2d mode in digital terminal, 2d mode reproducing apparatus in digital terminal, and methods of executing the transmission apparatus and the 2d mode reproducing apparatus
KR20140026246A (en) Apparatus for providing and receiving augmented broadcasting service in hybrid broadcasting environment

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application