KR101818141B1 - Method for providing of service compatible mode in digital broadcasting - Google Patents

Method for providing of service compatible mode in digital broadcasting Download PDF

Info

Publication number
KR101818141B1
KR101818141B1 KR1020160166390A KR20160166390A KR101818141B1 KR 101818141 B1 KR101818141 B1 KR 101818141B1 KR 1020160166390 A KR1020160166390 A KR 1020160166390A KR 20160166390 A KR20160166390 A KR 20160166390A KR 101818141 B1 KR101818141 B1 KR 101818141B1
Authority
KR
South Korea
Prior art keywords
pmt
service
descriptor
image
video
Prior art date
Application number
KR1020160166390A
Other languages
Korean (ko)
Other versions
KR20160144342A (en
Inventor
최병호
신화선
김재곤
이병탁
장의덕
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020160166390A priority Critical patent/KR101818141B1/en
Publication of KR20160144342A publication Critical patent/KR20160144342A/en
Application granted granted Critical
Publication of KR101818141B1 publication Critical patent/KR101818141B1/en

Links

Images

Classifications

    • H04N13/0059
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • H04N13/0062
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23608Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video

Abstract

디지털 TV 송출 및 수신에 사용하는 방송용 MPEG-2-TS 포맷에서 3D 입체형 디지털 방송의 서비스 호환 방식에 관한 것이다.
이를 위해 본 발명은 서비스 호환 방식을 구현할 경우, 좌우 압축 비트스트림을 다중화할 때 TS 수준의 다중화 방식과 ES 수준의 다중화 방식을 모두 지원하는 세부 정보 전송 방안을 제안한다.
The present invention relates to a service compatibility scheme of 3D stereoscopic digital broadcasting in a broadcast MPEG-2-TS format used for digital TV transmission and reception.
To this end, the present invention proposes a detailed information transmission scheme that supports both a TS-level multiplexing scheme and an ES-level multiplexing scheme when multiplexing left and right compressed bitstreams when a service compatible scheme is implemented.

Description

디지털 방송에서 서비스 호환 방식 전송 방법{Method for providing of service compatible mode in digital broadcasting}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a method for transmitting a service-

본 발명은 디지털 TV 송출 및 수신에 사용하는 방송용 MPEG-2 TS(Transport Stream) 포맷에서 3D 입체형 디지털 방송의 서비스 호환 방식에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a service compatibility method of 3D stereoscopic digital broadcasting in an MPEG-2 Transport Stream (TS) format used for digital TV transmission and reception.

우리나라는 1997년 11월 지상파 디지털 방송방식으로 8-VSB 방식인 북미의 ATSC(Advanced Television Systems Committee) 규격을 선정한 이후, 관련 핵심 기술 개발, 필드테스트, 시험방송을 진행하였고, 2001년 이후로 기존 아날로그 방송과 디지털 방송이 동시에 방송되고 있지만, 2012년에는 디지털 방송으로 전환을 완료하게 된다.Korea has selected the Advanced Television Systems Committee (ATSC) standard in North America, which is an 8-VSB system, in November 1997, and has been developing related core technology, field test and trial broadcasting. Since 2001, Broadcasting and digital broadcasting are simultaneously being broadcast, but in 2012, conversion to digital broadcasting will be completed.

ATSC는 미국의 디지털 텔레비전 방송 표준을 개발하는 위원회 혹은 그 표준을 말한다. ATSC의 표준은 현재 미국, 캐나다, 멕시코, 한국의 국가 표준으로 결정되어 있고, 남미의 여러 국가를 포함한 다른 나라들이 표준으로 삼으려 하고 있다. 디지털 방송의 표준에는 ATSC 이외에 유럽에서 개발된 DVB, 일본의 ISDB 등이 있다.ATSC refers to a committee or standard for developing digital television broadcasting standards in the United States. ATSC standards are currently determined as national standards for the United States, Canada, Mexico, and South Korea, and are intended for use by other countries, including many South American countries. Digital broadcasting standards include DVB developed in Europe in addition to ATSC, and ISDB in Japan.

고품질의 비디오, 오디오 및 보조 데이터를 전송할 수 있는 ATSC 디지털 방송 표준은 지상파의 경우, 6MHz의 지상파 방송 채널은 19.39Mbps 데이터 전송률, 케이블 TV 채널은 약 38Mbps 데이터 전송률로 데이터를 전송할 수 있다. ATSC 방식에서 사용하는 비디오 압축 기술은 ISO/IEC 13818-2 MPEG-2 비디오 규격을 사용하고 있으며, 압축 형식으로 MPEG-2 MP@HL, 즉 Main Profile과 High Level 규격을 사용하고 있으며, 이와 관련된 비디오 형식 및 제한 사항에 대해 정의하고 있다.The ATSC digital broadcasting standard, which can transmit high quality video, audio, and ancillary data, can transmit data at a data rate of 19.39 Mbps for a terrestrial broadcast channel of 6 MHz and a data rate of about 38 Mbps for a cable TV channel. The video compression technology used in the ATSC method uses the ISO / IEC 13818-2 MPEG-2 video standard, and uses MPEG-2 MP @ HL, that is, the Main Profile and High Level standards as the compression format. Formats, and restrictions.

이하에서는 디지털 TV 송출 및 수신에 사용하는 방송용 MPEG-2 TS 포맷에서 3D 입체형 방송, UHD TV 방송, 멀티뷰 방송 등 기존 방송 채널과 호환성을 유지하면서 새로운 방송을 수행할 때 사용 가능한 전송모드에 대해 알아보기로 한다. 이하에서는 3D 입체형 방송, UHD TV 방송, 멀티뷰 방송을 통칭하여 복합 영상 방송이라 칭하기로 한다. MPEG-2 TS 포맷에서 사용 가능한 전송모드로서, 프레임 호환 모드(Frame-Compatible Mode)와 서비스 호환 모드(Service-Compatible Mode) 구분된다. 이와 같이 디지털 방송에서 두 개의 전송 모드를 사용하는 경우, 수신단은 송신단에서 사용한 전송 모드를 인지할 필요성이 대두된다.The following describes the transmission modes available when performing new broadcasting while maintaining compatibility with existing broadcasting channels such as 3D stereoscopic broadcasting, UHD TV broadcasting, and multi view broadcasting in the MPEG-2 TS format for broadcasting used for digital TV transmission and reception. Let's look at it. Hereinafter, 3D stereoscopic broadcasting, UHD TV broadcasting, and multi-view broadcasting will be collectively referred to as composite video broadcasting. As a transmission mode usable in the MPEG-2 TS format, a frame-compatible mode and a service-compatible mode are distinguished. In this way, when two transmission modes are used in the digital broadcasting, the receiving terminal needs to recognize the transmission mode used in the transmitting terminal.

본 발명이 해결하려는 과제는 3D 방송의 세부 정보를 전송하는 방안을 제안함에 있다.A problem to be solved by the present invention is to propose a method of transmitting detailed information of 3D broadcasting.

본 발명이 해결하려는 다른 과제는 3D 방송의 전송 모드 중 서비스 호환 방식의 세부 정보를 전송하는 방안을 제안함에 있다.Another problem to be solved by the present invention is to provide a method of transmitting detailed information of a service compatibility method among transmission modes of 3D broadcasting.

본 발명이 해결하려는 또 다른 과제는 서비스 호환 방식을 구현할 경우, 좌우 압축 비트스트림을 다중화할 때 TS 수준의 다중화 방식과 ES 수준의 다중화 방식을 모두 지원하는 세부 정보 전송 방안을 제안함에 있다.Another object of the present invention is to provide a detailed information transmission scheme that supports both a TS level multiplexing scheme and an ES level multiplexing scheme when multiplexing left and right compressed bit streams when a service compatible scheme is implemented.

이를 위해 본 발명의 세부 정보 전송 방안은 서비스 호환 방식을 구현할 경우, 좌우 압축 비트스트림을 다중화할 때 TS 수준의 다중화 방식과 ES 수준의 다중화 방식을 모두 지원하는 세부 정보 전송 방안을 제안한다.To this end, the detailed information transmission scheme of the present invention proposes a detailed information transmission scheme that supports both a TS level multiplexing scheme and an ES level multiplexing scheme when multiplexing left and right compressed bitstreams when a service compatible scheme is implemented.

본 발명에 따른 세부 정보 전송 방안은 3D 방송 중 서비스 호환 방식을 구현할 경우, 좌우 압축 비트스트림을 다중화할 때 TS 수준의 다중화 방식과 ES 수준의 다중화 방식을 모두 지원하는 세부 정보를 전송 방안을 제안한다.The detailed information transmission scheme according to the present invention proposes a transmission scheme of detailed information supporting both a TS level multiplexing scheme and an ES level multiplexing scheme when multiplexing left and right compressed bitstreams when implementing a service compatible scheme in 3D broadcasting .

본 발명에 따른 세부 정보 전송 방안에 따라 3D 방송을 수행하면 기존 방송 시스템을 사용하여 기존 방송과도 호환성을 유지되면서도 TS 수준의 다중화 방식과 ES 수준의 다중화 방식을 비롯한 다양한 서비스 호환 모드 환경에 따른 효율적인 방송 송출 및 수신을 구현할 수 있다.When 3D broadcasting is performed according to the detailed information transmission method according to the present invention, it is possible to maintain compatibility with existing broadcasting using an existing broadcasting system, and to efficiently perform 3D broadcasting according to various service compatibility mode environments including a TS level multiplexing method and an ES level multiplexing method Broadcast transmission and reception can be implemented.

도 1은 본 발명의 일실시 예에 따른 프레임 호환 모드를 도시하고 있으며,
도 2는 본 발명의 일실시 예에 따른 서비스 호환 모드를 도시하고 있으며,
도 3은 본 발명의 일실시 예에 따른 서비스 호환 모드의 TS 수준의 다중화 방식과 ES 수준의 다중화 방식을 도시하고 있으며,
도 4는 본 발명의 일실시 예에 따른 프로그램 맵 테이블(program map table: PMT) 신택스의 구조를 도시하고 있으며,
도 5는 본 발명의 일실시 예에 따른 service_compatible_stereoscopic_video_descriptor를 도시하고 있으며,
도 6은 본 발명의 일실시 예에 따른 stereoscopic_stream_descriptor를 도시하고 있으며,
도 7은 본 발명의 일실시 예에 따른 MPEG2_video_3d_frame_frame_packing_arrangement_descriptor를 도시하고 있으며,
도 8은 본 발명의 일실시 예에 따른 서비스 호환 모드에서 다중화를 수행하는 과정을 도시한 흐름도이며,
도 9는 본 발명의 일실시 예에 따른 ES 수준의 비트열 다중화 방식에서 MVC 비트열 결합(assembling) 방법을 따를 때 좌우 영상의 비트열을 분리하는 과정을 도시하고 있으며,
도 10은 MVC 비트열 결합(assembling) 및 분리(de-assembling)를 도시한 것이다.
1 illustrates a frame compatibility mode according to an embodiment of the present invention,
2 illustrates a service compatibility mode according to an embodiment of the present invention,
FIG. 3 illustrates a multiplexing method of the TS level and a multiplexing method of the ES level in the service compatible mode according to the embodiment of the present invention,
FIG. 4 illustrates a structure of a program map table (PMT) syntax according to an embodiment of the present invention,
FIG. 5 illustrates a service_compatible_stereoscopic_video_descriptor according to an embodiment of the present invention,
6 illustrates a stereoscopic stream descriptor according to an embodiment of the present invention,
7 shows an MPEG2_video_3d_frame_frame_packing_arrangement_descriptor according to an embodiment of the present invention,
8 is a flowchart illustrating a process of performing multiplexing in a service compatibility mode according to an embodiment of the present invention,
9 illustrates a process of separating bit streams of left and right images according to an MVC bit string assembling method in an ES level bit stream multiplexing method according to an embodiment of the present invention,
Figure 10 illustrates MVC bit string assembling and de-assembling.

전술한, 그리고 추가적인 본 발명의 양상들은 첨부된 도면을 참조하여 설명되는 바람직한 실시 예들을 통하여 더욱 명백해질 것이다. 이하에서는 본 발명의 이러한 실시 예를 통해 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.BRIEF DESCRIPTION OF THE DRAWINGS The foregoing and further aspects of the present invention will become more apparent from the following detailed description of preferred embodiments with reference to the accompanying drawings. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the embodiments of the present invention, examples of which are illustrated in the accompanying drawings.

먼저 디지털 방송의 종류에 대해 알아보기로 한다. 일반적으로 디지털 방송은 3D 입체형 방송, UHD(Ultra High Definition) TV 방송, 멀티뷰(Multi-view) 방송으로 구분된다.First, let's look at the kinds of digital broadcasting. Generally, digital broadcasting is classified into 3D stereoscopic broadcasting, UHD (Ultra High Definition) TV broadcasting, and Multi-view broadcasting.

HD 방송은 하나의 화면을 전송하는 대신 3D 입체형 방송은 2개의 화면을 전송하며, UHD 방송은 4개의 화면(4k의 경우), 멀티뷰 방송은 2개 이상의 화면으로 구성된다. Instead of transmitting one screen of HD broadcasting, 3D stereoscopic broadcasting transmits two screens. UHD broadcasting consists of four screens (in case of 4k) and multi-view broadcasting consists of two or more screens.

3D 입체형 방송은 스테레오 형태의 3차원 입체영상을 전송하기 위해 좌,우 영상에 대해 각각 MPEG2-TS에서의 패킷 식별자(PID:Packet Identifier)를 하나씩 부여하여 다중화 전송하는 방법이 있다. UHD 영상은 일반적으로 가로와 세로 픽셀 수가 4000(4k·3840x2160)∼8000급(8k·7680x4320)에 육박한다. 화면 해상도는 픽셀로 불리는 화소 수가 좌우한다고 볼 때 UHD 영상은 4k 기준으로 HD(2k·1920x1080)와 비교해 4배나 더 선명하다. 8k에 비교하면 선명도 면에서 16배까지 차이 난다. 화면 주사율, 즉 초당 프레임 수에서도 HD가 30㎐인데 반해 60㎐로 1초당 화면 60장을 전송해 훨씬 자연스러우면서 역동적인 화면을 즐길 수 있다.In order to transmit stereoscopic three-dimensional stereoscopic images, 3D stereoscopic broadcasting has a method in which a packet identifier (PID: Packet Identifier) in the MPEG2-TS is added to the left and right images one by one and multiplexed and transmitted. UHD images are usually close to 4000 (4k · 3840x2160) to 8000 (8k · 7680x4320) in the number of pixels in the horizontal and vertical directions. Since the resolution of the screen depends on the number of pixels called pixels, the UHD image is 4 times more vivid than the HD (2k · 1920x1080) on a 4k basis. It differs from the 8k by 16 times in terms of sharpness. At 60Hz, 60 frames per second are transmitted at the screen refresh rate, that is, the frame rate per second, while the HD is 30Hz, so that a more natural and dynamic screen can be enjoyed.

멀티 뷰 방송은 시청자의 시야각에 따라 상·하/좌·우, 서로 다른 각도에서의 영상을 두 개 결합하여 3D 입체 영상으로 시청할 수 있다. 텔레비전에 멀티 뷰 표시장치를 구비할 경우, 화면에 배우가 나올 때 왼편에 있는 사람은 배우의 왼쪽 얼굴을 보게 되고, 오른편에 있는 사람은 배우의 오른쪽 얼굴을 3D 입체 영상으로 보게 된다. 즉, 3D 입체형 방송의 진보한 형태다.Multi-view broadcasting can be viewed as a 3D stereoscopic video by combining two images at different angles, up, down, left, and right depending on the viewing angle of a viewer. When a television has a multi-view display device, the person on the left side sees the left side of the actor when the actor appears on the screen, and the person on the right side sees the right side face of the actor as a 3D stereoscopic image. That is, it is an advanced form of 3D stereoscopic broadcasting.

본 발명은 3D 입체형 방송, UHD TV 방송, 멀티뷰 방송 중 어느 하나의 방송 방식을 사용하는 경우 기존 방송 채널과 호환성을 유지하면서 새로운 방송을 수행할 때 적절한 전송 모드에 관한 송출 및 수신 규격을 제안한다.The present invention proposes transmission and reception standards for a proper transmission mode when performing a new broadcasting while maintaining compatibility with existing broadcasting channels when using any one of 3D stereoscopic broadcasting, UHD TV broadcasting and multi view broadcasting .

이하 상술한 전송 모드 중 프레임 호환 모드(Frame-Compatible Mode)에 대해 알아본 후 서비스 호환 모드(Service-Compatible Mode)에 대해 알아보기로 한다.Hereinafter, a frame-compatible mode will be described and a service-compatible mode will be described.

도 1a는 프레임 호환 모드를 도시하고 있고, 도 1b는 프레임 호환 모드를 구성하기 위해 영상을 합성하는 방법의 대한 예를 도시한 것이다. 이하 도 1a와 도 1b는 모두 3D 입체형 방송의 예를 들어 도시한 것이고 UHD 방송과 멀티뷰 방송도 유사한 방식으로 확장할 수 있다. 도 1a와 도 1b를 이용하여 프레임 호환 모드에 대해 상세하게 알아보기로 한다.FIG. 1A shows a frame compatibility mode, and FIG. 1B shows an example of a method of compositing images to configure a frame compatibility mode. 1A and 1B illustrate examples of 3D stereoscopic broadcasting and UHD broadcasting and multi view broadcasting can be expanded in a similar manner. The frame compatibility mode will be described in detail with reference to FIGS. 1A and 1B.

도 1b에 의하면 프레임 호환 모드는 하나의 전송대역에 좌우영상이 합쳐진 하나의 프레임을 전송한다. 따라서 종전의 HD 방송이 사용하는 방식과 동일한 송수신 형태를 유지할 수 있다. 다만 종전의 HD 방송은 전체 영역에 비디오를 전송한 반면, 프레임 호환 모드의 방송은 영상의 개수만큼 합성된 영상을 전송한다는 점이 다르다. 즉, 도 1b에 도시되어 있는 바와 같이 좌영상과 우영상을 다양한 방식으로 하나의 프레임에 합성할 수 있다. 도 2b(a)와 같이 프레임의 절반을 분할하여 합성할 수도 있고, 도 1b(b)와 같이 픽셀 단위로 분할하여 합성할 수도 있다. 또는 도 1b(c)와 같이 프레임은 유지한 채 시간 순으로 좌우 영상을 번갈아 가면 전송할 수 있다. 도 1b의 (a), (b) 경우 하나의 프레임에 영상의 개수만큼 합성하므로 각 영상을 축소하는 과정이 필요하며, 도 1b(c)의 경우 프레임율(frame-rate)가 증가하게 되어 대역폭을 늘리거나 비디오 압축의 비트율(bitrate)을 조절해야 한다. 영상을 합성하는 방법은 다양한 형태로 존재한다. 도 1b의 예와 같이 3D 입체형 영상의 경우 좌영상과 우영상이 바뀌거나 대각선 형태의 픽셀 단위로 혼합시킬 수도 있다.Referring to FIG. 1B, the frame compatible mode transmits one frame in which the right and left images are combined into one transmission band. Therefore, it is possible to maintain the same transmission / reception format as that used in the conventional HD broadcasting. However, the former HD broadcasting transmits video to the whole area, while the frame compatible mode broadcasts the combined image by the number of images. That is, as shown in FIG. 1B, the left and right images can be combined into one frame in various ways. As shown in FIG. 2B, half of a frame may be divided and synthesized, or may be divided and synthesized on a pixel-by-pixel basis as shown in FIG. 1B (b). Alternatively, as shown in FIG. 1B (c), frames can be transmitted while alternating left and right images in chronological order while maintaining the frames. In the case of (a) and (b) of FIG. 1 (b), a process of reducing each image is required since it is synthesized by the number of images in one frame. In the case of FIG. 1 (c), the frame- Or adjust the bitrate of the video compression. There are various ways to synthesize images. In the 3D stereoscopic image as shown in FIG. 1B, the left and right images may be changed or may be mixed in units of diagonal pixels.

3D 입체형 방송을 일례로 들면, 이와 같이 하나의 전송대역을 이용하여 좌영상과 우영상을 모두 전송하기 때문에 하나의 영상 프레임을 전송하는 경우에 비해 전송하는 영상의 해상도는 1/2로 줄어들게 되므로 화질은 떨어진다 (도 1b의 (a), (b) 경우). 또는 동일한 대역폭에 더 많은 데이터를 전송해야 하기 때문에 압축율을 늘려 화질이 떨어지거나 프레임율이 떨어지게 된다 (도 1b(c) 경우).For example, in 3D stereoscopic broadcasting, since the left and right images are transmitted using one transmission band, the resolution of the transmitted image is reduced to 1/2 as compared with the case of transmitting one image frame, ((A) and (b) of FIG. 1B). Or more data must be transmitted to the same bandwidth, so that the compression ratio is increased and the image quality is lowered or the frame rate is lowered (FIG. 1B (c)).

도 2는 서비스 호환 모드를 도시하고 있다. 이하 도 2를 이용하여 서비스 호환 모드에 대해 상세하게 알아보기로 한다. 도 2는 3D 입체형 방송을 기준으로 도시한 것이고 UHD 방송과 멀티뷰 방송도 유사한 방식으로 확장할 수 있다. 2 shows a service compatibility mode. Hereinafter, the service compatibility mode will be described in detail with reference to FIG. FIG. 2 shows the 3D stereoscopic broadcasting as a reference, and UHD broadcasting and multi-view broadcasting can be expanded in a similar manner.

도 2에 의하면 서비스 호환 모드는 하나의 전송대역에 좌영상 프레임과 우영상 프레임을 영상 합성이 아닌 별도로 압축하여 전송한다. 즉, 도 2에 도시되어 있는 바와 같이 좌영상 프레임과 우영상 프레임을 각각의 압축 방식으로 압축하고, 압축한 좌영상 프레임과 우영상 프레임을 하나의 전송대역으로 전송한다. 한정된 전송대역에 두 개 이상의 압축된 영상을 전송하기 위해 한 쪽 영상은 기존 HD 방송과 호환할 수 있도록 압축하는 반면, 다른 쪽 영상은 보다 압축율을 좋은 압축 방식으로 부호화하여 전송한다. 또는 좌영상과 우영상 중 하나의 영상은 고 해상도 전송하며, 나머지 하나의 영상은 저 해상도를 이용하여 전송한다. 일례로 좌영상은 MPEG-2 Main profile로 부호화하여 전송하며, 우영상은 MPEG-4 AVC/H.264 High profile로 부호화하여 전송한다. 추가적으로 저해상도를 사용하는 경우, 상술한 부호화 방식에 의해 좌영상은 1080i@60Hz의 해상도로 영상 스트림을 전송하며, 우영상은 720p@60Hz의 해상도로 영상 스트림을 전송한다. 부가하여 설명하면 좌 영상은 그대로, 우 영상은 수직 또는 수평 방향으로 서브 샘플링하고, 수신부에서는 샘플링한 우 영상을 좌 영상의 해상도 만큼 복원시킨 후 하나의 스테레오 영상을 만든다.Referring to FIG. 2, in the service compatibility mode, the left image frame and the right image frame are separately compressed and transmitted in one transmission band instead of image synthesis. That is, as shown in FIG. 2, the left image frame and the right image frame are compressed by respective compression methods, and the compressed left and right image frames are transmitted in one transmission band. In order to transmit two or more compressed images in a limited transmission band, one image is compressed so as to be compatible with the existing HD broadcasting, while the other image is encoded and transmitted with a better compression ratio. Or one of the left image and the right image is transmitted at a high resolution and the other image is transmitted using a low resolution. For example, the left image is encoded and transmitted in the MPEG-2 Main profile, and the right image is encoded in the MPEG-4 AVC / H.264 High profile. In addition, when the low resolution is used, the left image transmits a video stream at a resolution of 1080i @ 60Hz and the right image transmits a video stream at a resolution of 720p @ 60Hz. In addition, the left image is left as is, the right image is vertically or horizontally sub-sampled, and the receiving unit reconstructs the right image sampled by the resolution of the left image, and creates a stereo image.

이와 같이 디지털 방송에서 기존 방송 채널과 호환성을 유지하면서 새로운 방송을 수행할 때 복합 방송의 전송 모드는 프레임 호환 모드와 서비스 호환 모드로 구분되며, 송신단은 두 개의 전송 모드 중 어느 하나의 모드를 이용하여 압축된 영상을 수신단으로 전송한다. 수신단은 수신한 압축 영상을 복호화하기 위해서는 송신단에서 사용한 전송 모드를 인지하여야 한다. 그리고 복합 영상을 처리할 수 없는 기존의 방송 수신 시스템에서는 수신되는 송신된 복합 영상 중 부 영상(Secondary View)을 무시하고 주 영상(Primary View)만을 재생할 수 있어야 한다. 이로써 기존 방송 채널과 호환성을 유지하면서 선택적으로 복합 방송을 수신할 수 있게 된다.In this way, when a new broadcasting is performed while maintaining compatibility with the existing broadcasting channel in the digital broadcasting, the transmission mode of the composite broadcasting is divided into the frame compatibility mode and the service compatibility mode, and the transmitting terminal uses one of the two transmission modes And transmits the compressed image to the receiving end. The receiver must recognize the transmission mode used by the transmitter in order to decode the received compressed image. In a conventional broadcast receiving system, which can not process a composite image, it is necessary to ignore a secondary view of the received composite image and to reproduce only the primary view. Thus, it is possible to selectively receive the composite broadcast while maintaining compatibility with the existing broadcast channel.

도 3은 본 발명의 일실시 예에 따른 서비스 호환 모드에서 사용하는 좌우 영상 다중화 방식을 도시하고 있다. 이하 도 3을 이용하여 본 발명의 일실시 예에 따른 서비스 호환 모드에서 사용하는 좌우 영상 다중화 방식에 대해 알아보기로 한다.FIG. 3 illustrates a left and right image multiplexing method used in a service compatibility mode according to an embodiment of the present invention. Hereinafter, a left and right image multiplexing method used in a service compatibility mode according to an embodiment of the present invention will be described with reference to FIG.

도 3에 의하면 서비스 호환 모드에서 사용하는 다중화 방식은 TS 수준의 다중화 방식과 ES 수준의 다중화 방식으로 구분된다. Referring to FIG. 3, the multiplexing scheme used in the service compatibility mode is classified into a multiplexing scheme at the TS level and a multiplexing scheme at the ES level.

TS 수준의 다중화 방식은 좌우 영상의 기본 스트림(ES: Elementary Stream)을 패킷화한 패킷 스트림(PES:Packetized Elementary Stream)에 대해 다른 PID를 할당하는 방식으로, 기준 영상의 PID를 명시할 필요가 있다. 즉, 도 3에 도시되어 있는 바와 같이 좌 영상과 우 영상은 각각 서로 다른 PID가 할당되어 있음을 알 수 있다.In the TS-level multiplexing scheme, it is necessary to specify a PID of a reference image by allocating different PIDs to a packet stream (PES: Packetized Elementary Stream) obtained by packetizing an elementary stream (ES) of left and right images . That is, as shown in FIG. 3, it can be seen that different PIDs are assigned to the left image and the right image, respectively.

이에 비해 ES 수준의 다중화 방식은 좌우 영상을 각각 압축한 비트스트림(ES)를 하나의 기본 스트림(ES)로 병합한 상태로 하나의 PID를 이용하여 전송하는 방식이다. 따라서 ES 수준의 다중화 방식은 하나의 기본 스트림(ES)로부터 좌영상과 우영상을 압축한 비트스트림을 구분할 수 있는 방법이 필요하다. 한 예로 바이트 오프셋(Byte Offset)을 이용할 수 있다. 즉 도 3에 의하면, 좌영상과 우영상은 하나의 PID를 할당되어 있으며, 좌영상과 우영상을 구분하기 오프셋을 기재한 일예를 보이고 있다. 즉, ES 수준의 다중화 방식은 좌우 영상의 압축 비트열을 하나의 압축 비트열(ES)로 결합(assembling)하고 이를 패킷화한 PES에 하나의 PID를 할당하여 전송하는 방식으로, 수신기에서 좌우 영상의 압축 비트열로 분리(de-assembling or bitstream extraction)하기 위한 기재가 필요하다. 일예로 MVC bitstream assembling 사용한다. 또는 두 영상을 분리하기 위한 Byte Offset 등의 추가적인 구문(syntax) 명시가 필요하다. 도 9와 도 10은 MVC 비트스트림 결합을 사용하는 경우 이에 대한 분리과정 및 결합과 분리를 도시한 것이다.On the other hand, in the ES level multiplexing scheme, a bit stream (ES) compressed for each of the left and right images is merged into one elementary stream (ES) and transmitted using one PID. Therefore, the ES level multiplexing method needs a method that can distinguish the left and right video bit streams from one elementary stream (ES). As an example, a byte offset can be used. That is, according to FIG. 3, one PID is assigned to the left image and the right image, and an offset for distinguishing the left image and the right image is described. That is, the ES level multiplexing scheme is a method of assembling compressed bit streams of right and left images into one compressed bit stream (ES), assigning one PID to a packetized PES and transmitting the same, (De-assembling or bitstream extraction) into a compressed bit stream of a bit stream. For example, MVC bitstream assembling is used. Or an additional syntax such as Byte Offset to separate the two images. FIGS. 9 and 10 illustrate the separation process and the combination and separation of MVC bitstream combination when using the MVC bitstream combination.

본 발명은 3D 영상을 처리할 수 있는 수신 시스템에서 3D 영상의 수신을 인식할 수 있도록 하기 위한 식별 정보가 시스템 정보에 포함되어 수신되는 것을 일 실시예로 한다. 시스템 정보로서 PSI/PSIP(Program Specific Information/Program and System Information Protocol)을 적용하나 본 발명은 이에 한정하는 것은 아니다. 즉 시스템 정보를 테이블 포맷으로 전송하는 프로토콜이라면 그 명칭에 상관없이 본 발명에 적용 가능할 것이다.The present invention is one embodiment in which identification information for recognizing reception of a 3D image in a receiving system capable of processing a 3D image is included in system information and received. PSI / PSIP (Program Specific Information / Program and System Information Protocol) is applied as the system information, but the present invention is not limited thereto. That is, a protocol for transmitting system information in a table format, regardless of its name.

PSI는 채널 및 프로그램을 분류하기 위해 정의된 MPEG-2의 시스템 규격이고, PSIP는 채널 및 프로그램의 분류가 가능한 ATSC(Advanced Television Systems Committee) 규격이다.PSI is a system standard of MPEG-2 defined for classifying channels and programs, and PSIP is an Advanced Television Systems Committee (ATSC) standard for classifying channels and programs.

PSI는 일 실시예로서, PAT(Program Association Table), CAT(Conditional Access Table), PMT(Program Map Table), 및 NIT(Network Information Table)를 포함할 수 있다.In one embodiment, the PSI may include a Program Association Table (PAT), a Conditional Access Table (CAT), a Program Map Table (PMT), and a Network Information Table (NIT).

PAT는 PID가 '0'인 패킷에 의해 전송되는 특수 정보로서, 각 프로그램마다 해당 PMT의 PID 정보와 NIT의 PID 정보를 전송한다. CAT는 송신측에서 사용하고 있는 유료 방송 시스템에 대한 정보를 전송한다. PMT는 프로그램 식별 번호와 프로그램을 구성하는 비디오, 오디오 등의 개별 비트 스트림이 전송되는 트랜스포트 스트림 패킷의 PID 정보, 및 PCR이 전달되는 PID 정보를 전송한다. NIT는 실제 전송망의 정보를 전송한다. 예를 들어, PID가 0인 PAT 테이블을 파싱하여 프로그램 번호(Program number)와 PMT의 PID를 알아낸다. 그리고 상기 PAT로부터 얻어낸 PMT를 파싱하면 프로그램을 구성하는 구성 요소들 간의 상관관계를 알 수 있다.The PAT is special information transmitted by a packet having a PID of '0', and transmits PID information of the corresponding PMT and PID information of the NIT for each program. The CAT transmits information about the pay-TV system used by the transmitting side. The PMT transmits the program identification number, PID information of a transport stream packet in which individual bit streams such as video and audio constituting the program are transmitted, and PID information to which the PCR is transmitted. The NIT transmits the information of the actual transmission network. For example, the program number and the PID of the PMT are obtained by parsing the PAT table having the PID of 0. When the PMT obtained from the PAT is parsed, the correlation between the components constituting the program can be known.

도 4는 본 발명의 일실시 예에 따른 프로그램 맵 테이블(program map table: PMT) 신택스의 구조를 도시하고 있다. 이하 도 4를 이용하여 본 발명의 일실시 예에 따른 PMT 신택스의 구조에 대해 상세하게 알아보기로 한다.FIG. 4 shows a structure of a program map table (PMT) syntax according to an embodiment of the present invention. Hereinafter, the structure of the PMT syntax according to an embodiment of the present invention will be described in detail with reference to FIG.

도 4에서 table_id 필드는 테이블 식별자로서, PMT를 식별하는 식별자가 설정될 수 있다. section_syntax_indicator 필드는 PMT의 섹션 형식을 정의하는 지시자이다. section_length 필드는 PMT의 섹션 길이를 나타낸다.In FIG. 4, the table_id field is a table identifier, and an identifier for identifying the PMT can be set. The section_syntax_indicator field is an indicator that defines the PMT section format. The section_length field indicates the section length of the PMT.

program_number 필드는 PAT와 일치하는 정보로서 프로그램의 번호가 표시된다. version_number 필드는 PMT의 버전 번호를 나타낸다. current_next_indicator 필드는 현재 테이블 섹션이 적용가능한지 여부를 나타내는 인식자이다.The program_number field is information corresponding to the PAT, and the program number is displayed. The version_number field indicates the version number of the PMT. The current_next_indicator field is a recognizer indicating whether or not the current table section is applicable.

section_number 필드는 PMT가 하나 이상의 섹션으로 구분되어 전송될 경우, 현재 PMT 섹션의 섹션 번호를 나타낸다. last_section_number 필드는 PMT의 마지막 섹션 번호를 나타낸다. PCR_PID 필드는 현재 프로그램의 PCR(program clock reference)를 전달하는 패킷의 PID를 표시한다.The section_number field indicates the section number of the current PMT section when the PMT is transmitted divided into one or more sections. The last_section_number field indicates the last section number of the PMT. The PCR_PID field indicates the PID of the packet that carries the program clock reference (PCR) of the current program.

program_info_length 필드는 program_info_length 필드의 바로 뒤에 나오는 디스크립터(descriptor) 길이 정보를 바이트 수로 나타낸다. 즉, 첫 번째 루프에 포함되는 디스크립터들의 길이를 나타낸다. stream_type 필드는 다음에 오는 elementary_PID 필드에서 표시된 PID 값을 갖는 패킷에 들어있는 요소 스트림의 종류 및 부호화 정보를 표시한다. elementary_PID 필드는 상기 요소 스트림의 식별자 즉, 해당 요소 스트림이 포함되는 패킷의 PID 값을 나타낸다. ES_Info_length 필드는 ES_Info_length 필드의 바로 뒤에 있는 디스크립터(descriptor) 길이 정보를 바이트 수로 나타낸다. 즉, 두 번째 루프에 포함되는 디스크립터들의 길이를 나타낸다.The program_info_length field indicates the descriptor length information immediately after the program_info_length field in the number of bytes. That is, it indicates the length of the descriptors included in the first loop. The stream_type field indicates the kind of element stream and encoding information contained in the packet having the PID value indicated in the next elementary_PID field. The elementary_PID field indicates the identifier of the elementary stream, that is, the PID value of the packet including the corresponding elementary stream. The ES_Info_length field indicates the descriptor length information immediately after the ES_Info_length field in the number of bytes. That is, it indicates the length of the descriptors included in the second loop.

또한, 도 4에 의하면 특정 프로그램 번호(program number)에 대한 좌우 영상에 대한 합성 정보 관련 디스크립터 즉, 전송 모드에 관련된 디스크립터는 program_info_length 구문 다음에 이어지는 디스크립터에 존재한다. 또한 좌우 영상 개별 ES와 관련된 디스크립터는 ES_info_length 구문 다음에 이어지는 디스크립터에 존재한다. 도 4에 의하면, 좌우 영상에 대한 합성 정보 관련 디스크립터는 service_compatible_stereoscopic_video_descriptor()로 정의하고 있다. frame packing arrangement와 관련된 정보는 프레임 호환 방식에서 정의한 MPEG2_video_3d-frame_packing_arrangement_descriptor()을 기술하였다. 단, MPEG2_video_3d_frame_frame_packing_arrangement_descriptor() 위치는 현 위치가 아닌 ES_info_length 아래 디스크립터 위치에 지정될 수 있다. 프레임 호환 모드의 경우 1개의 비디오 PID이므로, 그 PID와 디스크립터가 함께 존재하면 되기 때문이다. 좌우 영상 개별 ES와 관련된 디스크립터는 stereoscopic_stream_descriptor()로 정의하였다. 단, 도 4에서 이들 디스크립터의 위치를 표기하기 위해 구문 내에 직접 표기하였으나, 실제로는 종전의 디스크립터처럼 선택적으로 포함되는 형태임을 알려둔다.In addition, according to FIG. 4, a descriptor related to a specific program number with respect to a right and left image, that is, a descriptor related to a transmission mode exists in a descriptor following a syntax of program_info_length. The descriptors associated with the left and right video individual ESs are present in the descriptors following ES_info_length syntax. Referring to FIG. 4, the composite information related descriptor for the right and left images is defined as service_compatible_stereoscopic_video_descriptor (). Information related to the frame packing arrangement is described in MPEG2_video_3d-frame_packing_arrangement_descriptor () defined by the frame compatible method. However, the position of the MPEG2_video_3d_frame_frame_packing_arrangement_descriptor () can be specified at the descriptor position under the ES_info_length, not at the current position. In the case of the frame compatibility mode, since it is one video PID, the PID and the descriptor exist together. Left and Right images The descriptors associated with individual ESs are defined by stereoscopic_stream_descriptor (). However, in FIG. 4, it is noted that the positions of these descriptors are directly indicated in the syntax, but actually they are selectively included as in the previous descriptors.

도 4는 특정 프로그램 번호에 대한 좌우 영상에 대한 합성 정보 관련 디스크립터를 먼저 구성한 후 좌우 영상 개별 ES와 관련된 디스크립터는 구성하고 있다. 하지만 이에 한정되는 것은 아니다. 즉, 전술한 바와 같이 MPEG2_video_3d_frame_frame_packing_arrangement_descriptor()의 위치가 가변될 수 있듯이 도 4에서 디스크립터의 위치는 상황에 따라 가변될 수 있다. FIG. 4 shows a descriptor associated with the left and right video ES after constructing a composite information related descriptor for the left and right video with respect to a specific program number. However, the present invention is not limited thereto. That is, as described above, the position of the MPEG2_video_3d_frame_frame_packing_arrangement_descriptor () may be varied, and the position of the descriptor in FIG. 4 may vary depending on the situation.

하기 표 1은 도 4에 도시되어 있는 스트립타입을 예시한 것이다.Table 1 below illustrates the strip types shown in FIG.

ValueValue DescriptionDescription Ox00Ox00 ITU-T/ISO/IEC ReservedITU-T / ISO / IEC Reserved Ox01Ox01 ISO/IEC 11172-2 VideoISO / IEC 11172-2 Video Ox02Ox02 ITU-T Rec. H.262/ISO/IEC 13818-2 Video or ISO/IEC 11172-2 constrained parameter video streamITU-T Rec. H.262 / ISO / IEC 13818-2 Video or ISO / IEC 11172-2 constrained parameter video stream Ox03Ox03 ISO/IEC 11172-3 VudioISO / IEC 11172-3 Vudio Ox04Ox04 ISO/IEC 13818-3 VudioISO / IEC 13818-3 Vudio ...... ...... Ox0AOx0A ISO/IEC 13818-6 tvpe AISO / IEC 13818-6 TVPE ...... ...... Ox22Ox22 ITU-T Rec. h.262/ISO/IEC 13818-2 Video with stersoscopic count coded using frame packing araangementITU-T Rec. h.262 / ISO / IEC 13818-2 Video with stersoscopic count coded using frame packing araangement ...... ...... Ox80-OxFFOx80-OxFF User PrivateUser Private

도 5는 본 발명의 일실시 예에 따른 service_compatible_stereoscopic_video_descriptor를 도시하고 있다. 이하 도 5를 이용하여 본 발명의 일실시 예에 따른 service_compatible_stereoscopic_video_descriptor에 대해 상세하게 알아보기로 한다.FIG. 5 illustrates a service_compatible_stereoscopic_video_descriptor according to an embodiment of the present invention. Hereinafter, the service_compatible_stereoscopic_video_descriptor according to an embodiment of the present invention will be described in detail with reference to FIG.

상술한 바와 같이 service_compatible_stereoscopic_video_descriptor는 좌우 영상에 대한 합성 정보 관련 디스크립터로서 좌우 영상의 해상도, 부 영상 시청 제한, GOP 구조 정렬 여부, ES 수준의 다중화 방식 사용 여부 등의 내용을 포함하고 있다. 특히 도 5a는 PID를 사용하지 않는 예를 나타내고 있으며, 도 5b는 PID를 사용하는 예를 도시하고 있다.As described above, the service_compatible_stereoscopic_video_descriptor is a composite information related descriptor for left and right images, including resolution of left and right images, restriction of sub-image viewing, alignment of GOP structure, and whether ES level multiplexing method is used. In particular, FIG. 5A shows an example in which a PID is not used, and FIG. 5B shows an example in which a PID is used.

이하 먼저 도 5a를 이용하여 PID를 사용하지 않는 예에 대해 먼저 알아보기로 한다.Hereinafter, an example in which the PID is not used will be described first with reference to FIG. 5A.

Resolution_Conversion_flag는 1이면 Primary_Conversion_Type과 Secondary_Conversion_Type 구문이 존재하는 것을 의미하며, 0이면 좌우 영상의 해상도가 동일한 것을 의미한다.When Resolution_Conversion_flag is 1, it means that the syntax of Primary_Conversion_Type and Secondary_Conversion_Type exists. If 0, it means that the resolution of the left and right images is the same.

Primary_Conversion_Type는 주 영상의 원본 영상 대비 분할 내용으로 하기 표 2와 같다. 단, 표 2의 값과 내용은 예시된 것으로 필요에 따라 변경, 축소 또는 확정 정의될 수 있다.Primary_Conversion_Type is the content of division of the main image relative to the original image as shown in Table 2 below. However, the values and contents of Table 2 are exemplified and may be changed, reduced or defined as necessary.

value 00 1One 22 33 의미meaning 크기 변경 없음No resizing 가로 2분할Horizontal split 세로 2분할Split vertically 가로, 세로 모두 2분할Horizontal and vertical split in two

Secondary_Conversion_Type은 부 영상의 원본 영상 대비 분할 내용으로 표 3과 같다.Secondary_Conversion_Type is the partition contents of the sub-image compared with the original image.

Allowance_of_Secondary_View_Presentation_flag는 1이면 부 영상을 2D 서비스로 독립적으로 화면에 출력 가능 하다는 것을 의미한다. 주 영상(Primary View)은 항상 2D 서비스로 독립적으로 화면 출력이 허용된 반면 부 영상(Secondary View)을 2D로 출력하는 것은 애플리케이션에 따라 금지 또는 허용될 수 있다.Allowance_of_Secondary_View_Presentation_flag = 1 means that the sub-image can be output independently to the screen as a 2D service. The Primary View is always allowed to output the 2D images independently, while the Secondary View can be prohibited or allowed to be output in 2D depending on the application.

Alignment_of_GOP_Structure_flag는 1이면 좌우 영상의 GOP 구조가 일치함을 의미하며, 일치하지 않는 경우 GOP 구조에 따라 presentation 시 동기를 위한 추가적인 처리가 필요함을 시그널링하고자 한다. 물론 좌우 영상간의 동기화는 기본적으로 PTS에 의해서 구현되지만 수신기에 시그널링함으로써 미리 필요한 처리를 하는데 도움을 주고자 한다. 일예로 좌우 영상 중 지연이 더 큰 영상에 전체 지연이 맞춰진다.If the Alignment_of_GOP_Structure_flag is 1, it means that the GOP structure of the right and left images is coincident. If not, signaling that additional processing for synchronization at presentation time is required according to the GOP structure. Of course, synchronization between left and right images is basically implemented by PTS, but signaling to the receiver will help to do necessary processing in advance. For example, the total delay of the left and right images is adjusted to a larger delay.

ES_level_composition_flag는 1이면 ES 수준의 다중화 방식을 사용하였음을 의미하며, 0인 경우 TS 수준의 다중화 방식을 사용함을 의미한다.If ES_level_composition_flag is 1, it indicates that the ES level multiplexing scheme is used, and when it is 0, it means that the TS level multiplexing scheme is used.

이하 도 5b를 이용하여 PID를 사용하는 예에 대해 알아보기로 한다. 단, 도 5a를 통해 설명된 구문 외의 구문만 추가적으로 설명한다.Hereinafter, an example of using the PID using FIG. 5B will be described. However, only syntax other than the syntax explained with reference to FIG. 5A will be further described.

Primary_PID_flag는 TS 수준 다중화 방식의 경우에만 존재하는 플래그로서, 만약 1이면 Primary_PID 구문이 존재함을 의미하며, 그렇지 않으면 stereoscopic_stream_descriptor()가 존재하여 주 영상의 PID를 확인할 수 있다.The Primary_PID_flag is a flag that exists only in the case of the TS level multiplexing scheme. If the flag is 1, the Primary_PID syntax is present. Otherwise, the stereoscopic_stream_descriptor () exists to confirm the PID of the main image.

Primary_PID는 주 영상의 PID를 명시하여 PMT 내 포함된 PID 중 주 영상을 판단할 수 있다.The Primary_PID may specify the PID of the main video and determine the main video among the PIDs included in the PMT.

Right_Is_Primary_flag는 TS 수준 다중화 방식의 경우에만 존재하는 플래그로서, 만약 1이면 주 영상이 우 영상임을 의미하며, 그렇지 않으면 좌 영상이 주 영상임을 의미한다.Right_Is_Primary_flag is a flag that exists only in the case of the TS level multiplexing method. If 1, the main image is a right image, otherwise, the left image is a main image.

이렇게 주 영상 여부와 좌 영상 여부 정보를 service_compatible_stereoscopic_video_descriptor에서 알려줌으로써 stereoscopic_stream_descriptor가 존재하지 않고 하나의 디스크립터로 주 영상과 좌 영상 여부를 판별할 수 있다. 아울러 유사한 방법으로 Left_PID를 알려주고, Right_Is_Primary_flag를 지정하는 방식 등이 가능하며, 모두 본 발명의 취지에 벗어나지 않는다.By notifying whether the main video and the left video are present in the service_compatible_stereoscopic_video_descriptor, the stereoscopic_stream_descriptor does not exist and it is possible to discriminate whether the main video or the left video is a single descriptor. A method of notifying the Left_PID by a similar method, and a method of designating the Right_Is_Primary_flag, and the like, all of which are within the scope of the present invention.

Primary_PID와 Right_Is_Primary_flag를 사용하는 경우에 대해, stereoscopic_stream_descriptor가 존재하여 각 영상에 대해 주 영상과 우 영상 여부를 판별할 수도 있다.In the case of using the Primary_PID and the Right_Is_Primary_flag, the stereoscopic_stream_descriptor exists to determine whether the main image and the right image are present for each image.

도 6은 본 발명의 일실시 예에 따른 stereoscopic_stream_descriptor를 도시하고 있다. 상술한 바와 같이 stereoscopic_stream_descriptor는 좌우 영상 개별 ES와 관련된 정보 관련 디스크립터로서, 현재 ES가 입체 영상에서 주 영상(Primary View)인지 명시하는 역할을 한다.6 illustrates a stereoscopic stream descriptor according to an embodiment of the present invention. As described above, the stereoscopic_stream_descriptor is an information related descriptor related to the left and right video ES, and plays a role of indicating whether the current ES is the main view in the stereoscopic image.

TS 수준의 다중화 방식(TS-level composition mode)인 경우 각각의 ES에 대해 기술하고, ES 수준의 다중화 방식(ES-level composition mode)의 경우 하나의 ES에 대해 기술한다. 따라서 본 descriptor는 이들 두 가지를 모두 고려한다.Describe each ES for TS-level composition mode, and describe one ES for ES-level composition mode. Therefore, this descriptor considers both of these.

Primary_flag는 1로 설정된 경우 현재 ES가 주 영상 (Primary View)임을 의미하며, 주 영상만 재생하는 경우 반드시 주 영상을 재생해야 한다.If Primary_flag is set to '1', it means that the current ES is the primary view, and when the main video is reproduced only, the main video must be reproduced.

Left_flag는 1로 설정된 경우 현재 ES가 좌 영상의 비트열임을 의미한다.Left_flag is set to 1, which means that the current ES is a bit stream of the left image.

Frist_Primary_flag는 1로 설정된 경우, ES-level에서 두 영상 비트열이 임의의 단위로 assembling (interleaving)되어 있을 경우 첫 번째 파트가 주 영상에 해당하는 비트열임을 시그널링한다.When the Frist_Primary_flag is set to 1, when two image bit streams are interleaved in an arbitrary unit at the ES-level, they signal that the first part is a bit stream corresponding to the main image.

First_Left_flag는 1로 설정된 경우, ES-level에서 두 영상 비트열이 임의의 단위로 assembling (interleaving)되어 있을 경우 첫 번째 파트가 좌 영상에 해당하는 비트열임을 시그널링한다.When First_Left_flag is set to 1, when two image bit streams are interleaved in an arbitrary unit at the ES-level, the first signal indicates that the first part is a bit stream corresponding to the left image.

필요에 따라 주 영상 여부 또는 좌 영상 여부를 표기하는 대신, 부 영상 여부 또는 우 영상 여부 등을 표기할 수 있으며, 모두 본 발명의 취지에 벗어나지 않는다.It is possible to indicate whether the main video or the left video is displayed as needed or not, whether the sub video or the right video is displayed, and the like.

도 7은 MPEG2_video_3d_frame_frame_packing_arrangement_descriptor를 도시하고 있다.FIG. 7 shows an MPEG2_video_3d_frame_frame_packing_arrangement_descriptor.

Frame packing arrangement와 관련된 정보는 프레임 호환 모드에서 정의한 MPEG2_video_3d_frame_frame_packing_arrangement_descriptor()를 사용하고, semantics도 프레임 호환 모드에서 정의한 내용과 동일할 수 있다.Information related to the frame packing arrangement may be MPEG2_video_3d_frame_frame_packing_arrangement_descriptor () defined in the frame compatibility mode, and the semantics may be the same as that defined in the frame compatibility mode.

도 8은 본 발명의 일실시 예에 따른 서비스 호환 모드에서 다중화를 수행하는 과정을 도시한 흐름도이다. 이하 도 8을 이용하여 본 발명의 일실시 예에 따른 서비스 호환 모드에서 다중화를 수행하는 과정에 대해 알아보기로 한다.FIG. 8 is a flowchart illustrating a process of performing multiplexing in a service compatibility mode according to an embodiment of the present invention. Hereinafter, a process of multiplexing in the service compatibility mode according to an embodiment of the present invention will be described with reference to FIG.

S800단계는 section_length로 PMT 길이를 확인한다.In step S800, the PMT length is confirmed by section_length.

S802단계는 program_number를 포함한 syntax를 읽는다. In step S802, syntax including program_number is read.

S804단계는 program_info_length로 descriptor 길이를 확인한다.In step S804, the length of the descriptor is identified by program_info_length.

S806단계는 program info 관련 descriptor를 모두 읽었는지 확인한다. 모두 읽었으면 A를 경유하여 S820단계 이동하고, 모두 읽지 않았으면 S808단계로 이동하여 program info와 관련된 하나의 descriptor를 읽는다.In step S806, it is checked whether all program information descriptors have been read. If all have been read, the process moves to step S820 via A, and if not, moves to step S808 and reads one descriptor associated with the program info.

S810단계는 service_compatible_stereoscopic_video_decriptor인지 확인한다. service_compatible_stereoscopic_video_decriptor이면 S812단계로 이동하고, service_compatible_stereoscopic_video_decriptor이 아니면 S806단계로 이동한다.In step S810, it is checked whether the service_compatible_stereoscopic_video_decryptor is set. If it is not the service_compatible_stereoscopic_video_decryptor, the process proceeds to step S812. Otherwise, the process proceeds to step S806.

S812단계는 ES_level_composition_flag를 포함한 syntax읽어 좌우 영상과 관련된 합성 정보를 분석한다.In step S812, syntax information including ES_level_composition_flag is read to analyze synthesis information related to the left and right images.

S814단계는 ES_level_compatible_flag가 설정되어 있는지 확인한다. ES_level_compatible_flag가 설정되어 있으면, S816단계로 이동하고, 설정되어 있지 않으면 S818단계로 이동한다.In step S814, it is determined whether ES_level_compatible_flag is set. If ES_level_compatible_flag is set, the flow advances to step S816. Otherwise, the flow advances to step S818.

S816단계는 ES 수준 다중화 구조 모드를 활성화하며, S818단계는 TS 수준 다중화 구조 모드를 활성화한다.The step S816 activates the ES level multiplexing structure mode, and the step S818 activates the TS level multiplexing structure mode.

S820단계에서 PMT를 모두 읽었는지 확인한다. 모두 읽었으면 S842단계로 이동하고, 모두 읽지 않았으면 S822단계로 이동한다. S822단계는 stream_type과 elementary_PID를 읽는다.In step S820, it is determined whether all PMTs have been read. If all has been read, the process moves to step S842, and if not, the process moves to step S822. In operation S822, stream_type and elementary_PID are read.

S824단계는 ES_info_length로 descriptor 길이를 확인한다.In step S824, the descriptor length is checked by ES_info_length.

S826단계는 ES info 관련 descriptor을 모두 읽었는지 확인한다. 모두 읽었으면 S820단계로 이동하고, 모두 읽지 않았으면 S828단계로 이동한다. In step S826, it is checked whether all ES information descriptors have been read. If all have been read, the process moves to step S820, and if not all, the process moves to step S828.

S828단계는 ES info와 관련된 하나의 descriptor를 읽고 S830단계로 이동한다. In step S828, one descriptor associated with the ES info is read and the flow moves to step S830.

S830단계는 stereoscopic_stream_descriptor인지 확인한다. stereoscopic_stream_descriptor이면 S834단계로 이동하고, stereoscopic_stream_descriptor가 아니면 S838단계로 이동한다.In step S830, it is checked whether the descriptor is a stereoscopic_stream_descriptor. If the descriptor is a stereoscopic_stream_descriptor, the process proceeds to step S834. If the descriptor is not a stereoscopic_stream_descriptor, the process proceeds to step S838.

S834단계는 Primary_flag와 Left_flag를 읽고, S836단계는 현재 element_PID에 해당하는 비디오 데이터의 주 영상 여부, 왼쪽 영상 여부를 판단한다. In step S834, the primary_flag and the left_flag are read. In step S836, whether the video data corresponding to the current element_PID is the main video or the left video is determined.

S838단계는 First_Primary_flag와 First_Left_flag를 읽고, S842단계는 현재 element_PID에 해당하는 데이터에서 선두에 위치하는 비디오 데이터가 주 영상, 왼쪽 영상에 해당하는지 판단한다.In step S838, First_Primary_flag and First_Left_flag are read. In step S842, it is determined whether the video data located at the head of the data corresponding to the current element_PID corresponds to the main image or the left image.

S842단계는 CRC_32를 읽고 데이터 오류 여부를 검증한다.In step S842, the CRC_32 is read and a data error is verified.

도 9는 ES 수준의 다중화 방식의 비트열을 분리하는 과정을 나타낸 흐름도이다. 이하 도 9를 이용하여 본 발명의 일실시 예에 따른 서비스 호환 모드에서 ES 수준의 다중화 방식의 비트열 분리를 수행하는 과정에 대해 알아보기로 한다. 아래 과정은 비트열의 혼합이 좌, 우 순으로 이루어진 것을 가정하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 비트열의 혼합이 우, 좌 순으로 이루어진 경우도 가능하다는 점을 이해할 것이다.FIG. 9 is a flowchart illustrating a process of separating a bit string of an ES level multiplexing scheme. Hereinafter, a description will be made of a process of performing bit stream separation of an ES level multiplexing scheme in a service compatibility mode according to an embodiment of the present invention with reference to FIG. It will be understood that the following procedure assumes that the mixing of bit strings is performed in left and right order. It will be understood by those skilled in the art that the bit string may be mixed in the right and left order.

S900단계는 PMT를 파싱한다.Step S900 parses the PMT.

S901단계는 PMT내의 service_compatible_stereoscopic_video_descriptor()를 파싱한다.In step S901, the service_compatible_stereoscopic_video_descriptor () in the PMT is parsed.

S902단계는 ES_level_composition_flag를 확인하여 ES 수준의 다중화 방식 여부를 판단한다.In step S902, ES_level_composition_flag is checked to determine whether the ES level multiplexing scheme is used.

S903단계는 MVC_bitstream_assembling_flag를 확인하여 비트열의 ES 수준의 다중화 방식에 그 비트열 다중화(assembling) 방식이 MVC의 bitstream assembling 방식(stereo_high_profile 또는 multiview_high_profile에 정의)을 따르는지 여부를 확인한다.In step S903, the MVC_bitstream_assembling_flag is checked to check whether the bit stream multiplexing scheme of the bitstream is multiplexed at the ES level conforms to the MVC bitstream assembling scheme (defined in stereo_high_profile or multiview_high_profile).

S904단계는 PMT내의 stereosopic_stream_descriptor()를 파싱한다.Step S904 parses the stereosopic_stream_descriptor () in the PMT.

S905단계는 First_Primary_flag를 확인한다.In step S905, the First_Primary_flag is checked.

S906단계는 First_Left_flag를 확인한다.In step S906, First_Left_flag is checked.

S907단계는 수신된 혼합 비트열로부터 하나의 AU를 탐지한다.Step S907 detects one AU from the received mixed bit stream.

S908단계는 S906단계에서 확인된 First_Left_flag로부터 테이터 선두의 데이터의 좌영상 여부를 확인한다.In step S908, whether the data at the head of the data is left-shifted is checked from the First_Left_flag confirmed in step S906.

S909단계는 S907단계에서 탐지한 AU가 홀수 번째 AU인지를 판단한다. 홀수 번째 AU면 S910단계로 이동하고, 짝수번째 AU면 S911단계로 이동한다.In step S909, it is determined whether the AU detected in step S907 is the odd-numbered AU. The odd-numbered AU plane moves to step S910, and the even-numbered AU plane moves to step S911.

S910단계와 S911단계는 S909단계로부터 판단된 정보를 이용하여 해당 AU를 좌영상 또는 우영상 비트열로 분리한다.In steps S910 and S911, the AU is separated into a left image or a right image bit stream using the information determined in step S909.

S912단계는 AU를 모두 읽었는지를 판단하여, AU를 모두 읽었다면 S913단계로 이동하고, AU를 모두 읽지 않았다면 S907단계로 이동한다.In step S912, it is determined whether all the AUs have been read. If all the AUs have been read, the process proceeds to step S913. Otherwise, the process proceeds to step S907.

S913단계는 S906단계에서 확인된 First_Primary_flag로부터 테이터 선두의 데이터의 좌영상 여부를 확인한다. First_Primary_flag가 1이면 S914단계로 이동하고, 0이면 S915단계로 이동한다.In step S913, whether the data at the head of the data is the left image is checked from the First_Primary_flag confirmed in step S906. If First_Primary_flag is 1, the process proceeds to step S914. If the First_Primary_flag is 0, the process proceeds to step S915.

S914단계와 S915단계는 S913단계로부터 판단된 Primary정보를 이용하여, 각 비트열 중 어느 비트열이 주영상인지를 판단한다.In steps S914 and S915, it is determined which of the bit strings is the main picture, using the primary information determined in step S913.

S916단계는 각각 분리된 비트열을 디코더측으로 전달한다.The step S916 transfers the separated bit stream to the decoder side.

도 10은 도 9의 S907 ~ S912에 해당하는 MVC Bitstream Extraction 방식에 따른 비트열 분리 방법을 나타낸 그림이다. 좌우 혼합된 비트열을 수신하면, 도 9에서 나타낸 과정을 통해 하나의 AU단위로 assembling되어 있고, 첫번째 AU가 주영상인지 좌영상인지를 알 수 있기 때문에 NAL Header를 파싱하여 NAL Header에 존재하는 view_id, anchor_pic_flag를 확인하지 않아도 도 10과 같이 좌우영상의 비트열을 분리할 수 있다.FIG. 10 is a diagram illustrating a bit string separation method according to the MVC Bitstream Extraction method corresponding to S907 to S912 of FIG. 9, it is assembled in one AU unit, and since it is known whether the first AU is the main image or the left image, the NAL header is parsed and the view_id , it is possible to separate the bit streams of the left and right images as shown in FIG. 10 without checking anchor_pic_flag.

본 발명은 도면에 도시된 일실시 예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the scope of the present invention .

특히 본 발명의 도면에서 현재 시험 방송과 방송 규격을 제정 중인 3D 입체형 방송 위주로 기술하였으나, UHD TV 방송, 멀티뷰 방송 등 다른 복합 방송 또한 영상의 개수만 다를 뿐, 프레임 호환 모드와 서비스 호환 모드의 방송을 모두 수행할 수 있다. 따라서 본 발명은 3D 입체형 방송에 국한되는 것이 아니라 UHD TV 방송, 멀티뷰 방송 등 복합 방송에 모두 적용될 수 있는 기술임을 밝힌다.In particular, in the drawings of the present invention, description has been made on 3D stereoscopic broadcasting which is currently under test broadcast and broadcasting standards. However, other complex broadcasts such as UHD TV broadcast and multi view broadcast are different only in the number of images, Can be performed. Accordingly, the present invention is not limited to the stereoscopic 3D broadcasting, but it can be applied to both the UHD TV broadcasting and the multi-view broadcasting.

도 2: 프레임 호환 모드 도 3: 서비스 호환 모드Figure 2: Frame Compatibility Mode Figure 3: Service Compatibility Mode

Claims (6)

디지털 방송 수신기에서 스테레오스코픽 3D 데이터를 처리하는 방법에 있어서,
PAT(Program Association Table)를 포함하는 TS(Transport Stream)를 수신하는 단계;
상기 수신된 TS로부터 특정 PID 의 PAT를 파싱하는 단계;
상기 파싱된 PAT내 PMT PID를 이용하여, PMT(Program Map Table)를 획득하는 단계;
적어도 2개의 필드 및 적어도 2개의 디스크립터를 포함하는 PMT를 처리하는 단계를 포함하고,
상기 PMT 내 제1필드는 상기 TS의 PID를 식별하고, 상기 PMT내 제2필드는 상기 TS의 스트림 타입을 식별하고,
상기 PMT내 제1디스크립터는 제공되는 서비스의 타입을 식별하며, 상기 서비스 타입은 2D 서비스, 프레임 호환 스테레오스코픽 3D 서비스 또는 서비스 호환 스테레오스코픽 3D 서비스 중 어느 하나에 대응하며,
상기 PMT내 제2디스크립터는 좌영상(left view) 및 우영상(right view)을 별개의 비디오 스트림으로 전송하는 서비스 호환 스테레오스코픽 3D 서비스와 관련된 정보를 제공하고,
상기 PMT내 제2디스크립터는,
비디오 스트림이 기본 비디오 스트림인지 또는 부가 영상(additional view) 비디오 스트림인지 여부를 식별하는 제1정보,
기본 영상의 코드화된 해상도(coded resolution)를 정의하는 제2정보 및
상기 부가 영상 비디오 스트림이 2D 비디오 서비스를 위해 사용될 수 있음을 식별하는 제3정보를 모두 포함하며,
상기 PMT내 제2디스크립터에 포함된 상기 제2정보는,
부가 영상의 코드화된 해상도가 상기 기본 영상의 코드화된 해상도의 3/4, 2/3 또는 1/2에 해당하는지 여부를 식별하는 것을 특징으로 하는 디지털 방송 수신기에서 스테레오스코픽 3D 데이터를 처리하는 방법.
A method for processing stereoscopic 3D data in a digital broadcast receiver,
The method comprising: receiving a transport stream (TS) including a PAT (Program Association Table);
Parsing a PAT of a specific PID from the received TS;
Obtaining a PMT (Program Map Table) using the PMT PID in the parsed PAT;
Processing a PMT comprising at least two fields and at least two descriptors,
Wherein a first field in the PMT identifies a PID of the TS, a second field in the PMT identifies a stream type of the TS,
Wherein the first descriptor in the PMT identifies a type of service provided and the service type corresponds to any one of a 2D service, a frame compatible stereoscopic 3D service, or a service compatible stereoscopic 3D service,
The second descriptor in the PMT provides information related to a service compatible stereoscopic 3D service transmitting a left view and a right view in separate video streams,
The second descriptor in the PMT includes:
First information identifying whether the video stream is a primary video stream or an additional view video stream,
Second information defining a coded resolution of the base image, and
And third information identifying that the additional video stream can be used for a 2D video service,
The second information included in the second descriptor in the PMT,
And identifying whether the coded resolution of the additional image corresponds to 3/4, 2/3 or 1/2 of the coded resolution of the base image.
삭제delete 삭제delete 삭제delete 삭제delete 제1항에 있어서,
상기 PMT내 포함된 상기 제1디스크립터는 프로그램 레벨에서 정의되고, 상기 PMT내 포함된 상기 제2디스크립터는 ES 레벨에서 정의되는 것을 특징으로 하는 디지털 방송 수신기에서 스테레오스코픽 3D 데이터를 처리하는 방법.
The method according to claim 1,
Wherein the first descriptor included in the PMT is defined at a program level and the second descriptor included in the PMT is defined at an ES level.
KR1020160166390A 2016-12-08 2016-12-08 Method for providing of service compatible mode in digital broadcasting KR101818141B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160166390A KR101818141B1 (en) 2016-12-08 2016-12-08 Method for providing of service compatible mode in digital broadcasting

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160166390A KR101818141B1 (en) 2016-12-08 2016-12-08 Method for providing of service compatible mode in digital broadcasting

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020100119247A Division KR20120058702A (en) 2010-11-27 2010-11-27 Method for providing of service compatible mode in digital broadcasting

Publications (2)

Publication Number Publication Date
KR20160144342A KR20160144342A (en) 2016-12-16
KR101818141B1 true KR101818141B1 (en) 2018-01-12

Family

ID=57735624

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160166390A KR101818141B1 (en) 2016-12-08 2016-12-08 Method for providing of service compatible mode in digital broadcasting

Country Status (1)

Country Link
KR (1) KR101818141B1 (en)

Also Published As

Publication number Publication date
KR20160144342A (en) 2016-12-16

Similar Documents

Publication Publication Date Title
US9756380B2 (en) Broadcast receiver and 3D video data processing method thereof
KR100970649B1 (en) Receiving system and method of processing data
KR101648455B1 (en) Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
US9392256B2 (en) Method and apparatus for generating 3-dimensional image datastream including additional information for reproducing 3-dimensional image, and method and apparatus for receiving the 3-dimensional image datastream
US20110181693A1 (en) Method and apparatus for generating data stream for providing 3-dimensional multimedia service, and method and apparatus for receiving the data stream
US20120081516A1 (en) Transmitting apparatus, transmitting method, receiving apparatus, and receiving method
US9288467B2 (en) Method for providing and recognizing transmission mode in digital broadcasting
US20100208750A1 (en) Method and appartus for generating three (3)-dimensional image data stream, and method and apparatus for receiving three (3)-dimensional image data stream
US9635344B2 (en) Method for service compatibility-type transmitting in digital broadcast
US20140071232A1 (en) Image data transmission device, image data transmission method, and image data reception device
US20130250051A1 (en) Signaling method for a stereoscopic video service and apparatus using the method
US20140049606A1 (en) Image data transmission device, image data transmission method, image data reception device, and image data reception method
KR20140000136A (en) Image data transmitter, image data transmission method, image data receiver, and image data reception method
US20140232823A1 (en) Transmission device, transmission method, reception device and reception method
KR101818141B1 (en) Method for providing of service compatible mode in digital broadcasting
KR20110068821A (en) Method and apparatus for receiving and transmitting
KR101779054B1 (en) Method for transmission format providing of digital broadcasting
KR101277267B1 (en) Coding method and apparatus for 3D broadcasting
KR20120139643A (en) Coding method and apparatus for 3d broadcasting
KR20120087869A (en) Coding method and apparatus for 3D broadcasting

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
R401 Registration of restoration